De-indeksering

De-indeksering betyr at en side faller ut av søkemotorens indeks og derfor ikke lenger kan vises i søkeresultatene. Siden kan godt ligge på nettstedet deres og fungere helt fint for besøkende, men i search finnes den ikke. Motstykket er indeksering, der Google etter et crawl tar siden opp i indeksen og kan begynne å vise den.

Noen ganger er det dere selv som vil ha sider ut, for eksempel interne søkesider eller tynne filtervarianter. Verktøyene er noindex-taggen, som ber søkemotoren droppe siden ved neste crawl, statuskodene 404 og 410, og fjerningsverktøyet i Google Search Console når det haster. Her ligger også den vanligste forvekslingen: en side som blokkeres i robots.txt, blir ikke crawlet, men kan fortsatt ligge i indeksen, for noindex-taggen blir aldri lest. En bevisst indeksstrategi hører til det tekniske fundamentet i SEO.

Google kaster også ut sider på eget initiativ. Typiske årsaker er tekniske feil, som en noindex-tagg som følger med fra testmiljøet, tynt eller duplikert innhold, eller i grove tilfeller en manuell straff. Et plutselig trafikkfall har derfor ofte indeksen som den egentlige forklaringen, ikke rangeringene. URL-inspeksjonen i Search Console viser statusen side for side og oppgir årsaken.

En de-indeksert side er dessuten usynlig for AI Overviews og AI-assistenter, som bare kan sitere sider som finnes i indeksen. Hele samspillet mellom crawl, indeks og synlighet ligger i guiden om crawling og indeksering.