Ingen crawling
Hej.Er der nogen der ved hvad jeg skal skrive som "meta" kommando foroven på min hjemmeside hvis jeg ikke ønsker at for eksempel Googles webcrawler finder alle siderne på min server??? Sådan at jeg kan definere hvilke sider jeg vil have at de forskellige webcrawlere rundt om verden finder og ikke finder.
Eller måske endnu bedre. Kan man konfigurere sin IIS server til at styre dette. Eller kan man få hjælpeprogrammer til den slags?
hilsen Dan
