Hakukoneoptimointi

Mitä Google on indeksoinut sivustoltasi ja miten korjaat puutteet

Sivu voi näkyä Googlen hakutuloksissa vain, jos se on Googlen indeksissä eli hakemistossa. Jos tärkeä sivusi puuttuu indeksistä, mikään määrä hakukoneoptimointia ei auta, koska Google ei edes harkitse sivua tuloksiin. Siksi Google-indeksointi kannattaa tarkistaa säännöllisesti: mitä Google on löytänyt sivustoltasi, mitä puuttuu ja miksi.

Tämän oppaan jälkeen osaat tarkistaa sivustosi indeksointitilanteen sekä nopealla site:-haulla että Search Consolen raporteilla, pyytää yksittäisen sivun indeksointia ja tunnistaa yleisimmät syyt, joiden takia sivu jää indeksoimatta.

Tarvitset:

  • pääsyn Google Search Consoleen (ilmainen, vaatii sivuston omistajuuden vahvistamisen)
  • selaimen ja sivustosi osoitteen

Mitä indeksointi tarkoittaa

Google-indeksointi tarkoittaa prosessia, jossa Google etsii uusia ja päivitettyjä sivuja, käy niiden sisällön läpi ja tallentaa ne indeksiinsä eli hakemistoon kaikista tuntemistaan sivuista. Vain indeksissä oleva sivu voi näkyä Googlen hakutuloksissa. Indeksointitilanteen tarkistat nopeasti site:-hakukomennolla ja tarkasti Google Search Consolen ilmaisilla raporteilla.

Käytännössä Google käsittelee sivut kolmessa vaiheessa. Ensin Googlebot eli Googlen indeksointirobotti löytää sivun (yleensä linkkien tai sivukartan kautta) ja lataa sen sisällön; tästä vaiheesta käytetään englanniksi termiä crawling. Sitten Google päättää, tallennetaanko sivu indeksiin. Tämä toinen vaihe on varsinainen indeksointi. Kolmas vaihe on tulosten näyttäminen: kun joku tekee Google-haun, indeksissä olevat sivut kilpailevat sijoituksista.

Tärkeä huomio heti alkuun: Google ei indeksoi kaikkea, eikä sen tarvitsekaan. Google itse toteaa, ettei jokainen sen löytämä sivu päädy indeksiin. Tavoitteesi ei ole saada mahdollisimman monta sivua indeksiin, vaan varmistaa että tärkeät sivusi ovat siellä ja turhat (esimerkiksi hakutulossivut ja keskeneräiset sivut) eivät ole.

site:-haku on nopea pikatesti, mutta epätarkka

Nopein tapa kurkistaa Googlen indeksiin on hakukomento site:. Kirjoita Googlen hakukenttään:

site:omadomain.fi

Korvaa omadomain.fi omalla verkkotunnuksellasi, ilman https- tai www-alkua. Google näyttää listan sivuista, jotka se on indeksoinut kyseiseltä verkkotunnukselta. Voit tarkentaa hakua polulla (site:omadomain.fi/blogi) tai lisätä perään hakusanan, jolloin näet mitkä omat sivusi käsittelevät tiettyä aihetta.

Komento sopii pikatarkistuksiin: näetkö tärkeimmät sivusi listalla, ja löytyykö sieltä yllätyksiä kuten testiympäristöjä, tuplasivuja tai vanhoja kampanjasivuja, joiden ei pitäisi näkyä haussa.

Sitten rajoitukset, jotka kannattaa tietää:

  • Tuloslista ei ole täydellinen. Googlen oman dokumentaation mukaan site:-haku ei välttämättä palauta kaikkia indeksoituja osoitteita. Sivun puuttuminen listalta ei siis todista, ettei se olisi indeksissä.
  • Tulosmäärä on karkea arvio. “Noin 1 240 tulosta” ei ole indeksoitujen sivujen tarkka lukumäärä, ja luku voi heittelehtiä hausta toiseen.
  • Tulokset eivät ole paremmuusjärjestyksessä, joten listasta ei voi päätellä mitään sijoituksista.

Tarkkaan tilannekuvaan tarvitset Search Consolen.

Sivut-raportti kertoo koko totuuden

Search Consolen sivujen indeksointiraportti näyttää, kuinka moni sivustosi sivu on indeksoitu ja tarkalleen miksi loput eivät ole.

  1. Kirjaudu Google Search Consoleen ja valitse sivustosi.
  2. Avaa vasemmasta valikosta Indexing → Pages (suomenkielisessä käyttöliittymässä Indeksointi → Sivut).
  3. Ylhäällä näet kaksi lukua: indeksoidut sivut ja ei-indeksoidut sivut.
  4. Vieritä alaspäin kohtaan Why pages aren’t indexed: taulukko listaa syyt, joiden takia sivuja on jäänyt indeksoimatta, ja jokaista syytä klikkaamalla näet siihen kuuluvat osoitteet.

Älä säikähdä ei-indeksoitujen sivujen määrää. Lähes jokaisella sivustolla on kymmeniä tai satoja osoitteita, joiden kuuluukin puuttua indeksistä: uudelleenohjauksia, saman sivun vaihtoehtoisia osoitteita ja tarkoituksella piilotettuja sivuja. Raportin lukemisessa olennaista on käydä syylista läpi ja kysyä jokaisen kohdalla: onko tämä tarkoituksellista vai ongelma?

Kun korjaat raportin osoittaman virheen, voit klikata syyn tiedoista Validate fix (vahvista korjaus). Google tarkistaa osoitteet uudelleen ja ilmoittaa tuloksen sähköpostilla. Vahvistus voi kestää parisen viikkoa.

Tarkista yksittäinen sivu URL-tarkastustyökalulla

Kun haluat tietää yhden tietyn sivun tilanteen, käytä URL-tarkastustyökalua (URL Inspection).

  1. Liitä sivun koko osoite Search Consolen yläreunan hakukenttään ja paina Enter.
  2. Tulos kertoo heti, onko osoite Googlen indeksissä.
  3. Avaa tarkemmat tiedot: milloin Google viimeksi latasi sivun, mitä kautta se löysi sivun ja minkä osoitteen Google on valinnut sivun ensisijaiseksi eli kanoniseksi versioksi.
  4. Painikkeella Test live URL voit testata sivun nykyisen version, esimerkiksi heti korjauksen jälkeen.

Tämä on paras ensimmäinen työkalu aina, kun ihmettelet miksi jokin yksittäinen sivu ei näy haussa. Vastaus (esimerkiksi noindex-merkintä tai estävä robots.txt-rivi) lukee tuloksessa suoraan.

Pyydä indeksointia, mutta älä odota ihmeitä

URL-tarkastuksen tuloksesta löytyy painike Pyydä indeksointia (Request indexing). Se lisää sivun Googlen indeksointijonoon ja on hyödyllinen, kun olet julkaissut uuden tärkeän sivun tai korjannut vanhan.

Painike ei kuitenkaan ole taikanappi, ja tämä kannattaa sanoa suoraan:

  • Pyyntö ei takaa indeksointia. Google toteaa dokumentaatiossaan, ettei pyynnön lähettäminen takaa sivun pääsyä indeksiin. Laatuvaatimukset koskevat pyydettyjäkin sivuja.
  • Indeksointi vie aikaa. Googlen mukaan indeksointi kestää tyypillisesti noin päivän, mutta voi kestää selvästi pidempään, jopa viikkoja.
  • Pyynnöillä on päiväkohtainen kiintiö, joten satojen sivujen syöttäminen käsin ei onnistu eikä kannata.
  • Saman sivun pyytäminen uudelleen ja uudelleen ei nopeuta mitään.

Lähetä sivukartta, kun sivuja on paljon

Jos uusia tai päivitettyjä sivuja on paljon, oikea työkalu ei ole indeksointipyyntöjen näpyttely vaan XML-sivukartta: tiedosto, joka kertoo Googlelle kaikki sivustosi osoitteet yhdellä kertaa. Sivukartan lähettäminen Googlelle onnistuu suoraan Search Consolessa:

  1. Avaa vasemmasta valikosta Indexing → Sitemaps (suomenkielisessä käyttöliittymässä Indeksointi → Sivustokartat).
  2. Kirjoita Lisää uusi sivustokartta -kenttään sivukarttasi osoite (useimmilla sivustoilla sitemap.xml) ja paina lähetyspainiketta.
  3. Google noutaa sivukartan yleensä heti. Raportin tila Onnistui tarkoittaa, että tiedosto luettiin ilman virheitä.

Kertaalleen lähetettyä sivukarttaa ei tarvitse lähettää uudelleen, sillä Google käy sen läpi jatkossa omaan tahtiinsa. Uudelleenlähetys kannattaa Googlen mukaan vain, jos sivukartta muuttuu merkittävästi.

Sivukartta ei sekään takaa indeksointia, mutta se varmistaa, että Google ainakin tietää kaikki tärkeät osoitteesi. Loppu ratkeaa sisällön laadulla ja sisäisillä linkeillä: linkitä uusi sivu etusivulta tai muulta vahvalta sivulta, niin Googlebot löytää sen nopeammin ja pitää sitä tärkeämpänä.

Yleisimmät syyt, miksi sivu ei indeksoidu

Nämä syyt kattavat valtaosan indeksointiongelmista. Syyn tarkka nimi näkyy Sivut-raportissa ja URL-tarkastuksessa.

Noindex-merkintä on jäänyt päälle. Sivulla on noindex-tagi, joka kieltää indeksoinnin. Klassikkovirhe: WordPress-sivuston kehitysvaiheessa ruksattu asetus Estä hakukoneita indeksoimasta sivustoa unohtuu päälle julkaisussa. Tarkista WordPressissä Asetukset → Lukeminen ja SEO-lisäosan sivukohtaiset asetukset. Noindex on oikea työkalu silloin, kun haluat tarkoituksella piilottaa sivuja hakukoneilta, mutta väärässä paikassa se tekee sivusta näkymättömän.

Robots.txt estää indeksointirobotin. Sivustosi robots.txt-tiedosto kieltää Googlebotia lataamasta sivua. Silloin Google ei näe sivun sisältöä lainkaan.

Crawled - currently not indexed. Google latasi sivun mutta päätti toistaiseksi jättää sen indeksoimatta. Googlen oma ohje toteaa, että sivu saatetaan indeksoida myöhemmin eikä uutta indeksointipyyntöä tarvita. Käytännössä tila kertoo useimmiten, ettei Google pitänyt sivua riittävän arvokkaana: sisältö on ohutta, lähes identtistä toisen sivun kanssa tai sivusto on kokonaisuutena kevyt. Toimiva korjaus ei ole napin painelu vaan sisällön parantaminen, sivujen yhdistäminen ja sisäiset linkit tärkeille sivuille.

Discovered - currently not indexed. Google tietää osoitteen mutta ei ole vielä ladannut sitä. Yleistä uusilla ja isoilla sivustoilla. Auta Googlea sisäisillä linkeillä ja sivukartalla, ja anna aikaa.

Tuplasisältö ja kanoniset osoitteet. Jos sama sisältö löytyy useasta osoitteesta, Google valitsee niistä yhden indeksiin. Raportissa tämä näkyy duplicate-alkuisina syinä. Tila ei yleensä ole virhe, mutta jos Google valitsi mielestäsi väärän version, kerro oma valintasi canonical-tagilla ja linkitä sisäisesti aina samaan osoitteeseen.

Sivu palauttaa virheen. Poistettu sivu (404), palvelinvirhe (5xx) tai ketjuuntunut uudelleenohjaus pudottaa sivun indeksistä. Korjaa virhe tai ohjaa osoite toimivalle sivulle.

Indeksoinnin tarkistaminen kannattaa ottaa tavaksi esimerkiksi kerran kuussa: avaa Sivut-raportti, silmäile syylista ja tarkista että uusimmat tärkeät sivusi ovat indeksissä. Vartin rutiini paljastaa ongelmat ennen kuin ne ehtivät syödä hakuliikennettäsi.

Linkit