Nu är de klara

Ända sedan jag släppte in google på pop.nu igen i somras har jag undrat hur lång tid det egentligen ska ta att indexera hela sajten. Nu har jag svaret. Uppenbarligen (eftersom de nästan har slutat titta in) var svaret "ungefär ett halvår".

Jag förstår fortfarande inte varför de behövde titta på varje sida 7 gånger (vilket det blir när jag räknar genomsnittet av sidor per dag, och antalet olika sidor de tittat på), men nu verkar de som sagt nästan ha slutat. De tittar dock fortfarande in på ungefär 1000 sidor per dag men det belastar inte sajten så mycket.

Jag har dock nyss slängt ut Yahoos indexerings-spindel som verkar vara uppbyggt på ett helt annat sätt än googles, och förhoppningsvis kommer snart tröghetsproblemen att vara helt borta.