Af Rasmus Elm Rasmussen, Alt om Data
Denne artikel er oprindeligt bragt på Alt om Data. Computerworld overtog i november 2022 Alt om Data. Du kan læse mere om overtagelsen her.
Det er et hårdt job at være søgemaskinerobot hos Google. Ikke nok med, at du skal på endeløs vandring igennem nettet for at give relevante søgeresultater – nu skal det også gå 50 procent hurtigere.
Google har givet deres robotter et ordentligt skud koffein, så de nu skulle være opgaven voksen.
Måden de gennemtrawler nettet er dog ikke helt den samme som hidtil.
En del af grundene til at Google nu kan love os hurtigere websøgning er nemlig at indekseringen er ændret således, at der ikke laves en komplet indeksering af nettet før søgeresultaterne opdateres, men at nettet analyseres i små bidder og søgeresultaterne opdateres løbende.
Lige meget hvor og hvornår indholdet er publiceret vil du således kunne google dig frem til det langt hurtigere end tidligere.
Det er ikke så få data sådan et søgeindeks skal igennem. Google fortæller at Caffeine, som det nye søgeindeks er døbt, behandler hundrede tusindvis af internetsider parallelt hvert sekund, hvilket ville svarer til en bunke papir der vokser næsten fem kilometer.