# robots.txt fuer http://www.calamus.net/
User-agent: *            # Wildchar * schließt alle Crawler aus.

# Mit den einzelnen Disallow-Einträgen bestimmt man Dateien und Verzeichnisse, die nicht indexiert werden sollen.
# 'Disallow: /' verbietet die komplette Site
# 'Disallow: ' erlaubt die ganze Site
Disallow: /_css/
Disallow: /_fonts/
Disallow: /_inc/
Disallow: /_js/
Disallow: /_lsf/
Disallow: /bugs/       # BugTracker
Disallow: /cgi-bin/    # CGI-Ausgaben nicht indexieren
Disallow: /gruene.clp/
Disallow: /phorum/     # Phorum
Disallow: /service/

Disallow: /logfiles/   # Die ändern sich jeden Tag
Disallow: /temp/       # Die Dateien sind sehr kurzlebig