Indeksering

Indeksering er prosessen der en søkemotor tar en side opp i indeksen sin: databasen over alle sider som kan dukke opp i søkeresultatene. En side som ikke er indeksert, finnes rett og slett ikke i Google, uansett hvor god den er. Derfor er indeksering den mest grunnleggende forutsetningen i alt arbeid med SEO.

Veien inn i indeksen har tre ledd. Først crawler Googlebot siden: den finner URL-en via lenker eller sitemapet deres og henter HTML-en. Deretter renderer Google siden, slik at JavaScript kjøres og siden ser ut som brukerne møter den. Til slutt avgjør Google om siden skal med i indeksen.

Kjeden kan knekke i alle tre ledd. En side som er blokkert i robots.txt, blir aldri crawlet. Innhold som først oppstår etter tung JavaScript, kan strande i renderingen. Og tynne eller dupliserte sider blir ofte crawlet uten å bli tatt opp; det er statusen Google Search Console viser som "Crawlet, foreløpig ikke indeksert". Indeksering er altså en vurdering Google gjør side for side, ikke en rettighet som følger med å publisere.

Indeksen er råstoffet bak mer enn de blå lenkene. AI Overviews og Googles AI Mode henter kildene sine fra samme indeks, så en side som mangler indeksering, er også usynlig i AI-svarene. Hele kjeden fra crawl til synlighet står i crawling og indeksering.