scorpios
Themenersteller
Metallbauermeister
Fortgeschrittener (66 Beiträge)
Indizierung von .gz Dateien verhundern
Das soll natürlich "verhindern" heißen
Hallo alle!
Da sich Tante G. neuerdings über doppelte Metabeschreibungen mokiert (Ich habe meine Seite als html und html.gz abgelegt) möchte ich die gepackten Dateien nicht mehr indizieren lassen und habe das im robots.txt vermerkt. Bevor ich mich jetzt selbst abschieße: Kann die Robots so bleiben? Oder ist da etwas falsch drin?
User-agent: *
Allow: /
Disallow: /html/impressum.html
Disallow: /html/gaestebuch.html
Disallow: /html/test.html
Disallow: /tinc?
Disallow: /*.gz
User-Agent:MSIECrawler
Disallow: /
User-agent: ia_archiver
Disallow: /
Gruß und Danke
Andreas der Ahnungslose
http://kabinettfoto.de
Das Seitenreport Forum hat aktuell 5278 Themen und 36114 Beiträge.
Insgesamt sind 48390 Mitglieder registriert.
Beitrag erstellen
EinloggenKostenlos registrieren