# ===================================
# Webseite: https://www.cnc-multitool.de
# ===================================

Sitemap: https://www.cnc-multitool.de/sitemap.xml

# ===================================
# Nicht crawlen (nicht-oeffentliche Pfade):
# ===================================

User-agent: *
Disallow: /wwsadmin/
Disallow: /download/

# ===================================
# Schließe folgende Spider komplett aus:
# ===================================

User-agent: WebReaper
User-agent: WebCopier
User-agent: Offline Explorer
User-agent: HTTrack
User-agent: Microsoft.URL.Control
User-agent: EmailCollector
User-agent: penthesilea
Disallow: /