# Deze file wordt gebruikt door automatische WWW robots, web # crawlers en dergelijke. Het geeft aan welke plekken # niet door zulke robots bezocht mogen worden. # Zie http://web.nexor.co.uk/mak/doc/robots/norobots.html # en http://searchenginewatch.com/webmasters/spiderchart.html # voor meer informatie. # # # Mail ons als je meer informatie nodig hebt: # # mailto:nldoc@nl.linux.org # User-agent: * # voor alle robots Disallow: /extern.php Disallow: /index.php Disallow: /all.php Disallow: /nlhowto.php Disallow: /nlguide.php Disallow: /infopage.php Disallow: /backend.php Disallow: /manpage.php Disallow: /misc.php Disallow: /nlother.php Disallow: /thanks.php Disallow: /nlzoek.php User-agent: wget # voor wget Disallow: / User-agent: googlebot Disallow: *.php