Søgemaskine på mit site ?

Ups... hvorfor jeg spørger er fordi jeg helst ikke vil have besøg af søgemaskiner for tiden...

Der er ingen tvivl om at det er crawleren der har været forbi!

Jeg har aldrig hørt om at man kan stoppe dem, men du kunne jo give nogen utroligt kedelige metatags, måske noget i retning af.: Samlet udskrift af det Færøske hjemmeværns årlige ordinære generalforsamling! ;-)

Så er der nok ikke så mange der gider kigge ind, og du kan jo altid bede crawleren genbesøge din side, når den er færdig!?

Google respekterer metatags, og burde kunne stoppes med denne linje.
<meta name="Robots" content="none">

En anden metode kunne være at benytte en robot.txt fil. Kender ikke så meget til dem, andet end at det er en *.txt fil, som ligger i roden af din webmappe, og virker på samme måde som metatags. Men igen, det er noget søgemaskinen skal være indstillet til at respektere. Google kan også godt finde ud af robot.txt-filer, men mange andre kan ikke.
læs evt mere om dem her: http://www.searchengineworld.com/robots/robots_tutorial.htm

Bemærk at ingen af overstående metoder er skudsikre, så hvis det er meget vigtigt at ingen søgemaskiner kommer ind på din side, må du lave et sikkerhedssystem, som kun giver mennesker adgang. (fx normal loginformular, hvor du skriver hvad loginoplysningerne er.)

hmmmm....ganske udemærket side jeg fandt der :)
du kunne jo også bare banne alle disse ip-adresser som tilhører diverse søgemaskiner
http://www.searchengineworld.com/spiders/spider_ips.htm

Takker for feedback :) Ja burde jo nok så smide nogle meta tags på siden, og jov, min lille side er mindsanten blevet opdateret på google.com

http://www.google.com/search?hl=da&ie=UTF-8&oe=UTF-8&q=%22Just+R%26B%22&btnG=Google-s%C3%B8gning&lr=