# robots.txt for http://www.mineralienatlas.de # file created: 10.11.2008 User-agent: HTTrack Disallow: / User-agent: SuperBot Disallow: / User-agent: Teleport Disallow: / User-agent: ConveraCrawlero Disallow: / User-agent: Webdup Disallow: / User-agent: SiteSucker Disallow: / User-agent: Wget Disallow: / User-agent: WebCopier Disallow: / User-agent: WebStripper Disallow: / User-agent: WebZIP Disallow: / User-agent: WebDownloader Disallow: / User-agent: e-SocietyRobot Disallow: / User-agent: Googlebot Disallow: /lexikon/index.php/*action=* Allow: * Crawl-delay: 1 User-agent: MSNBot Crawl-delay: 3 User-agent: Slurp Crawl-delay: 2 User-agent: * Disallow: /lexikon/index.php/Impressum Disallow: /lexikon/index.php/Copyright Disallow: /lexikon/index.php/Datenschutzklausel Disallow: /lexikonDruck/ Disallow: /phpwiki/ Disallow: /Discussion Disallow: /tmp/ Disallow: /viewEXIF.php Disallow: /Bilderstreifen Disallow: /ImageFlow Crawl-delay: 5 Sitemap: http://www.mineralienatlas.de/googlekml/sitemap.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap0.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap1.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap2.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap3.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap4.xml Sitemap: http://www.mineralienatlas.de/googleimage/sitemap5.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemaplexikon0.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemaplexikon1.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemaplexikon2.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapmineral0.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapmineral1.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapmineral2.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapmineral3.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapmineral4.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemaprock0.xml Sitemap: http://www.mineralienatlas.de/googlelexikon/sitemapfossil0.xml