Hvor crawler Google fra?
Som udgangspunkt kan du ikke med sikkerhed vide, fra hvilke computere og hvor i verden Google og de andre søgemaskiner crawler fra. De har alle sammen omfattende datacentre i det meste af verden.
Du kan dog købe adgang til en løbende opdateret database over alle de mest udbredte søgemaskiners spider-navne og de IP-adresser, der crawles fra. Den bedste database jeg kender er fra Fantomaster, som har vedligeholdt denne, ligeså længe jeg kan huske.
