# Bestimmte Verzeichnisse vor Crawlern schuetzen User-Agent: * # Backoffice des Online Shops nicht indexieren Disallow: /backoffice Disallow: /catalog # geschuetzte Bereiche der Seite ausschliessen Disallow: /authuser # Programmlogik vor Crawlern schuetzen Disallow: /classes Disallow: /includes Disallow: /subsites # keine Grafiken der Seite downloaden Disallow: /images # CGI Ausgaben nicht indexieren Disallow: /cgi-bin # bestimmte Unterseiten blockieren Disallow: /user_logout.htm Disallow: /*agb Disallow: /*dtp Disallow: /*ship # Crawlen von Seiten mit Session-ID unterbinden Disallow: /*micid # Crawlen von Seiten mit Userlogin unterbinden Disallow: /*login Sitemap: http://www.nette-kleinigkeiten.de/sitemap.xml