# robots.txt fuer http://www.beispiel.de/
User-agent: *
Disallow: /squirrelmail/       # Die Dateien sind sehr kurzlebig
Disallow: /rc/   # Die ändern sich jeden Tag
Disallow: /rieshenne/     # Bilder nicht downloaden
# Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
# Disallow: /news.html   # Die news.html ändert sich täglich