# robots.txt for http://www.cylex.de/
# Zugriff auf alle Dateien erlauben

User-agent: Googlebot 
Disallow: /temp/       # Die Dateien sind sehr kurzlebig
Disallow: /scripts/       # Script Dateien nicht indexieren
Disallow: /logfiles/   # Die ändern sich jeden Tag
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
Disallow: /homepage/home_gesperrt.asp    # nicht indexieren
Disallow: /error.asp    # nicht indexieren
Disallow: /korrektur_firmendaten.asp    # nicht indexieren
Disallow: /deutsch/firma/homepage/nachricht.asp # nicht indexieren 
Disallow: /deutsch/firma/homepage/nachricht_test.asp
Disallow: /deutsch/firma/homepage/default.asp
Disallow: /deutsch/firma/homepage/default_neu.asp
Disallow: /deutsch/firma/struktur/select.asp
Disallow: /deutsch/firma/homepage/struktur_select.asp
Disallow: /deutsch/firma/homepage/Produkte.asp
Disallow: /deutsch/Vertriebsuche/werbung_firma.asp
Disallow: /homepage/Profil_alt.asp
Disallow: /correct/
Disallow: /map/
Disallow: /suche-test/

User-agent: * 
Disallow: /temp/       # Die Dateien sind sehr kurzlebig
Disallow: /scripts/       # Script Dateien nicht indexieren
Disallow: /logfiles/   # Die ändern sich jeden Tag
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren
Disallow: /homepage/home_gesperrt.asp    # nicht indexieren
Disallow: /error.asp    # nicht indexieren
Disallow: /korrektur_firmendaten.asp    # nicht indexieren
Disallow: /deutsch/firma/homepage/nachricht.asp # nicht indexieren
Disallow: /deutsch/firma/homepage/nachricht_test.asp
Disallow: /deutsch/firma/homepage/default.asp
Disallow: /deutsch/firma/homepage/default_neu.asp
Disallow: /deutsch/firma/struktur/select.asp
Disallow: /deutsch/firma/homepage/struktur_select.asp
Disallow: /deutsch/firma/homepage/Produkte.asp
Disallow: /deutsch/Vertriebsuche/werbung_firma.asp
Disallow: /homepage/Profil_alt.asp
Disallow: /correct/
Disallow: /map/
Disallow: /suche-test/