Hallo Freunde

 

Ich ärgere mich gerade damit rum, daß ich dem googlebot verbieten will
ständig PDFs unserer Internetseiten zu machen. Erstens ist das sinnlos,
zweitens stresst es den Server und drittens… Naja.

Also steht in meiner robots.txt der Absatz:

 

Disallow: /*?tx_webkitpdf_pi1*

Disallow: /*?

 

Der zweite Eintrag ist redundant – ja. Funktionieren tut es aber nicht. Der
Googlebot generiert fleißig weiter PDFs (wir haben auf fast jeder Seite im
Fuß einen Link, um die Seite als PDF zu speichern).

 

Wie kann ich nun den Googlebot (und alle anderen Bots) davon abbringen die
PDFs zu generieren??

 

Danke

Johannes

 

_______________________________________________
TYPO3-german mailing list
TYPO3-german@lists.typo3.org
http://lists.typo3.org/cgi-bin/mailman/listinfo/typo3-german

Antwort per Email an