User-agent: Mediapartners-Google* Disallow: User-agent: MSNBot Disallow: # folgende Ordner werden von allen robots nicht indexiert: User-agent: * Disallow: /_private/ Disallow: /_old/ Disallow: /aspnet_client/ Disallow: /CGI_BIN/ Disallow: /css/ Disallow: /Dbase/ Disallow: /Diashow/ Disallow: /images/ Disallow: /js/ Disallow: /mailform/ Disallow: /Referenzen Disallow: /Referenzen/ Disallow: /VisualLightBox/ Disallow: /*inc_ Disallow: /default.asp # folgende Zeile verbietet E-Mail Sammlern die Indexierung saemtlicher Ordner: User-agent: EmailCollector Disallow: / # Robots die durchdrehen fliegen raus User-agent: GagaRobot Disallow: /