User-agent: HTTrack
Disallow: /

User-agent: Download Ninja
Disallow: /

User-agent: wget
Disallow: /

# Hits many times per second, not acceptable
# http://www.nameprotect.com/botinfo.html
User-agent: NPBot
Disallow: /

# A capture bot, downloads gazillions of pages with no public benefit
# http://www.webreaper.net/
User-agent: WebReaper
Disallow: /

User-agent: *
Disallow: /w/
Disallow: /tiny_mce/
Disallow: /ibox/
# Search- and random-page
Disallow: /wiki/Spezial:Suche
Disallow: /wiki/Special:Suche
Disallow: /wiki/Spezial:Zufällige_Seite
Disallow: /wiki/Spezial:Zuf%C3%A4llige_Seite
Disallow: /wiki/Special:Zufällige_Seite
Disallow: /wiki/Special:Zuf%C3%A4llige_Seite
Disallow: /wiki/Spezial:MediaWiki-Systemnachrichten
Disallow: /wiki/Special:MediaWiki-Systemnachrichten

Sitemap: http://www.wendland-archiv.de/sitemap.xml