Moodul 2 · 2.4
Aruanne Page indexing ja URL inspection
Moodul 2: Search Console, Bing ja IndexNow · Lugemisaeg: 13 minutit
Õpieesmärk: Pärast seda õppetundi näed aruandest Page indexing (lehtede indekseerimine), millised lehed indeksis ei ole ja miks, oskad ühte lehte uurida tööriistaga URL inspection (URL-i kontroll) ning tead, mida Request indexing, Removals ja Manual actions teevad ja mida mitte.
Põhimõisted: aruanne Page indexing, indekseeritud (Indexed), indekseerimata (Not indexed), põhjused, Validate fix, URL inspection, Test live URL, Request indexing (kvoot), kasutaja määratud ja Google'i valitud kanooniline URL, View tested page, Removals (ajutine), Manual actions, Security issues
Aruanne Page indexing
Õppetunnis 1.3 lugesid, et kõik lehed ei jõua indeksisse. Aruanne Page indexing (menüüs Indexing, Pages) näitab, kuidas see sinu saidil välja näeb. Ülal on kaks arvu: Indexed (indekseeritud) ja Not indexed (indekseerimata). Nende all on tabel "Why pages aren't indexed" (miks lehti ei indekseerita), kus iga põhjuse juures on lehtede arv.
Kõigepealt kõige olulisem: eesmärk ei ole, et kõik oleks indekseeritud. Google ise kirjutab, et hoolitse selle eest, et iga olulise lehe kanooniline versioon oleks indeksis, ja et sada protsenti ei tasu oodata. Siltide, filtrite, otsingulehtede ja variantidega saidil on alati lehti, mis õigustatult indeksis ei ole. Küsimus on seega alati: kas nende hulgas on leht, mis peaks indeksis olema?
Põhjused lihtsas keeles
| Põhjus aruandes | Mis toimub | Kas see on halb? |
|---|---|---|
| Server error (5xx) | Server andis Google'i külastuse ajal vea | Jah, kui see kestab. Pöördu oma veebimajutaja poole |
| Redirect error | Ümbersuunamine käis ringiratast, oli liiga pikk või katki | Jah: paranda ümbersuunamine (õppetund 4.1) |
| Blocked by robots.txt | Robots.txt keelab Google'il lehte lugeda | Ainult siis, kui leht peaks indeksis olema (õppetund 3.3) |
| Excluded by 'noindex' tag | Leht palub ise, et seda ei indekseeritaks | Ainult siis, kui see on kogemata |
| Soft 404 | Leht annab oleku 200, kuid näeb välja nagu "ei leitud" või on peaaegu tühi | Jah, kui see on päris leht: tee see kasulikuks või anna päris 404 |
| Not found (404) | Lehte ei ole (enam) olemas | Enamasti mitte. Kui sellele viitavad lingid, suuna edasi |
| Blocked due to unauthorized request (401) / Blocked due to access forbidden (403) | Leht küsib parooli või keelab Google'i ligipääsu | Ainult siis, kui leht peaks olema avalik |
| Page with redirect | Aadress suunab edasi teisele aadressile | Ei, see on tavaline; indekseeritakse sihtleht |
| Alternate page with proper canonical tag | See leht viitab canonicaliga teisele lehele | Ei, nii see peabki olema (õppetund 3.5) |
| Duplicate without user-selected canonical | Google leidis duplikaadi ja valis ise | Vaata, kas Google valis õigesti |
| Duplicate, Google chose different canonical than user | Sina määrasid lehe A, Google valis B | Uuri, miks (õppetund 3.5) |
| Discovered - currently not indexed | Google teab aadressi, kuid ei ole lehte veel roomanud | Uue saidi puhul tavaline; kannatust ja sisemisi linke |
| Crawled - currently not indexed | Google luges lehte, kuid ei võtnud seda (veel) indeksisse | Vaata, kas leht päriselt annab midagi juurde (õppetund 7.3) |
Lisaks on kaks hoiatust: Indexed, though blocked by robots.txt (Google lisas aadressi sisu lugemata, sageli seetõttu, et sellele viitavad lingid) ja Page indexed without content (leht indekseeriti ilma sisuta).
Klõpsa põhjusel, et näha näidisaadresse. Kui oled midagi parandanud, vali Validate fix. Google kontrollib siis selle probleemiga teadaolevad aadressid uuesti; Google'i sõnul võtab see tavaliselt kuni umbes kaks nädalat. Ära klõpsa ikka ja jälle: oota, kuni valideerimine on õnnestunud või ebaõnnestunud. Parandus toimib muide ka ilma valideerimiseta; Google näeb seda järgmisel roomamisel.
URL inspection: üks leht luubi all
Search Console'i ülaosas on otsinguriba. Kleebi sinna oma saidi täielik aadress ja saad tööriista URL inspection. Kõigepealt näed, mis Google'il indeksis on: "URL is on Google" (URL on Google'is) või "URL is not on Google" (URL ei ole Google'is), ja jaotises Page indexing muu hulgas:
- millal Google lehte viimati roomas ja Crawled as (mobiili- või lauaarvuti roomaja);
- kas robots.txt lubab roomamist ja Indexing allowed? (kas seal on noindex?);
- Page fetch: kas lehe allalaadimine õnnestus?
- User-declared canonical (mille sina canonicalisse panid) ja Google-selected canonical (mille Google valis).
See on seis indeksis, mitte reaalajas mõõtmine. Kui eemaldasid just noindex, on see siin veel näha.
Test live URL
Nupuga Test live URL laadib Google lehe kohe alla. Nii kontrollid parandust kohe. Valikuga View tested page näed HTML-i pärast JavaScripti käivitamist, vastuse päiseridu, konsooli teateid ja õnnestunud testi korral ekraanipilti. Seal näed, kas su pealkiri, canonical või struktureeritud andmed on päriselt olemas, kui need lisatakse JavaScriptiga.
Pane tähele: õnnestunud live-test ei ole lubadus. Test ei hinda kvaliteeti, dubleeritud sisu ega canonicali valikut.
Request indexing
Pärast live-testi saad valida Request indexing (taotle indekseerimist). Google paneb lehe siis roomamise järjekorda. Kolm asja, mida teada:
- Iga property kohta on päevane kvoot. Paljude lehtede jaoks korraga on õige tee saidikaart (õppetund 2.2).
- Sama lehe jaoks mitu korda taotlemine ei tee asja kiiremaks.
- See ei ole garantii: roomamine võib võtta päevi kuni nädalaid ja pärast seda otsustab Google veel, kas leht indeksisse võtta.
Kasuta seda seega uue olulise lehe puhul või pärast parandust, mitte igapäevase rutiinina.
Kontrollida saad ainult nende propertyde aadresse, mille omanik või kasutaja sa oled. Kui tahad vaadata kellegi teise lehte, kasuta avalikke tööriistu, näiteks Rich Results Test (moodul 5).
Kolm muud aruannet, mida tunda
Removals. Sellega eemaldad lehe otsingutulemustest ajutiselt (umbes kuueks kuuks), näiteks kui veebis olid kogemata isikuandmed. Leht jääb indeksisse. Kui tahad selle jäädavalt eemaldada, hoolitse, et leht annaks 404 või 410, oleks parooli taga või sisaldaks noindex. Robots.txt ei sobi selleks: blokeeritud lehte ei saa Google lugeda ega seega ka noindexit näha.
Manual actions. Käsitsi meede tähendab, et Google'i töötaja on tuvastanud, et lehed rikuvad rämpsposti eeskirju (õppetund 8.2), näiteks peidetud teksti või ebaloomulike linkidega. Need lehed võivad tulemustes langeda või sealt kaduda. Kui siin teadet ei ole, on kõik korras. Kui midagi on: paranda see kõigil lehtedel ja esita seejärel uuesti läbivaatamise taotlus.
Security issues. Siin annab Google teada, kui su sait tundub olevat häkitud või levitab pahavara. Külastajad võivad siis näha hoiatust. See on kiireloomuline: taastamise kohta vaata WordPressi kursust ja kursust Safe online.
Praktikas: pärast uut saiti
Lotte avaldas oma uue saidi AI Builderiga ja unustas, et sait oli veel seadistusel "mitte indekseerida". Nädala pärast näeb ta aruandes Page indexing peaaegu kõike põhjuse "Blocked by robots.txt" all. Ta lülitab seadistuse ümber ja avaldab uuesti, kontrollib oma avalehte, näeb live-testis, et roomamine ja indekseerimine on nüüd lubatud, ning taotleb indekseerimist avalehele ja lehele Bruidswerk (pulmalilled). Ülejäänu jaoks ootab ta saidikaarti. WordPressis peitub sama lõks märkeruudus, mis palub otsingumootoritel saiti mitte indekseerida ("Discourage search engines from indexing this site"), teistes veebilehe koostajates sarnase nime all.
Kokkuvõte
- Page indexing näitab indekseeritud ja indekseerimata lehti koos põhjusega; kõik ei pea indeksis olema.
- Loe iga põhjust küsimusena: kas see leht kuulub indeksisse? Kui jah, paranda ja valideeri.
- URL inspection näitab seisu indeksis; Test live URL näitab lehte praegu, ka pärast JavaScripti.
- Request indexing on kvoodiga, kordamine ei aita ja see ei garanteeri midagi.
- Removals on ajutine; Manual actions ja Security issues peaksid olema tühjad.
Test
Ülesanne
Ülesanne D2.4: Ühe lehe kontrollimine. Vali oma saidilt oluline leht (näiteks sinu teenuste leht) ja kontrolli seda Search Console'is. Pane kirja, kas see on indekseeritud, millal seda viimati roomati, millise canonicali sina määrasid ja millise Google valis. Tee seejärel live-test, ava testitud leht ja kontrolli, kas pealkiri on HTML-is olemas. Lõpuks vaata aruandest Page indexing, milline põhjus esineb kõige sagedamini ja kas selle all on lehti, mis peaksid indeksis olema.
Ülesanne D2.4: Ühe lehe kontrollimine
Sul pole oma saiti ega ettevõtet? Tee ülesanne paberil või jäta see vahele; sertifikaadi jaoks loeb ainult eksam.
Näide: /bruidswerk/ on indekseeritud, mõlemad canonical'id on samad. Kõige sagedasem põhjus: ümbersuunamisega leht (14), vanad http-aadressid; need ei kuulu indeksisse.
Su linnukesed ja märkmed jäävad ainult sellesse brauserisse, me ei saada neid kuhugi. Kui oled sisse loginud, salvestame Minu kursustes ainult info, et tegid ülesande ära.
Loe edasi
- Google, aruanne Page indexing: https://support.google.com/webmasters/answer/7440203?hl=nl
- Google, tööriist URL inspection: https://support.google.com/webmasters/answer/9012289?hl=nl
- Google Search Central, kuidas paluda Google'il URL-e uuesti roomata: https://developers.google.com/search/docs/crawling-indexing/ask-google-to-recrawl
- Google, tööriist Removals: https://support.google.com/webmasters/answer/9689846?hl=nl
- Google, aruanne Manual actions: https://support.google.com/webmasters/answer/9044175?hl=nl