# robots.txt generiert von www.dvdek.com # URL:http://www.dvdek.com # Alle Roboter spidern die Domain User-agent: * Disallow: # Verzeichnis soll nicht von Yahoo! gespidert werden User-agent: Baiduspider Disallow: / User-agent: psbot Disallow: / User-agent: Speedy Disallow: / User-agent: Yandex Disallow: / User-agent: Exabot Disallow: / User-agent: cityreview Disallow: / User-agent: SurveyBot_IgnoreIP Disallow: /