Hvad er ”indeksering”?

Indeksering er den proces, der ligger lige efter crawling. Altså efter søgemaskinerne har indsamlet det materiale fra nettet, de skal bruge. Indekseringen gør det indsamlede materiale søgbart.

I forbindelse med indekseringen sker der mange ting: dårlige eller identiske sider filtreres ud, der beregnes forskellige værdier af sider, domæner osv.

For alle de store søgemaskiner er indeksering i dag en løbende proces. De indsamler løbende data, og indekserer det næsten med det samme. Således kan du ofte støde ind i links i søgemaskinerne, fra sider der er publiceret ned til få minutter forinden.

Nogle søgemaskiner – herunder Google og Bing – er også begyndt at indeksere indhold fra bl.a. Twitter. Dette indhold kommer op næsten med det samme og ofte indenfor ganske få sekunder. Det optræder dog kun på nogle søgninger og endnu ikke lige meget i alle lande.