08. juni 2004 - 11:56Der er
9 kommentarer og 1 løsning
linier i loggen - hvad er det?
nogen der har en idé om hvad det lige er for en slags trafik?
[Mon Jun 07 12:47:33 2004] [error] [client 66.237.60.72] File does not exist: /web/riversen.dk/robots.txt [Mon Jun 07 20:57:27 2004] [error] [client 66.196.90.162] File does not exist: /web/riversen.dk/robots.txt [Tue Jun 08 00:20:33 2004] [error] [client 65.54.164.98] File does not exist: /web/riversen.dk/robots.txt [Tue Jun 08 01:29:23 2004] [error] [client 24.97.214.154] File does not exist: /web/riversen.dk/robots.txt [Tue Jun 08 03:23:33 2004] [error] [client 65.54.164.96] File does not exist: /web/riversen.dk/robots.txt [Tue Jun 08 10:26:33 2004] [error] [client 66.196.90.162] File does not exist: /web/riversen.dk/robots.txt
En robot crawler normalt rekursivt: hent side, find alle links på siden, process alle disse links.
Synes godt om
Ny brugerNybegynder
Din løsning...
Tilladte BB-code-tags: [b]fed[/b] [i]kursiv[/i] [u]understreget[/u] Web- og emailadresser omdannes automatisk til links. Der sættes "nofollow" på alle links.
