Tag Archives: Googlebot

Googlebot ignoriert robots.txt

Wie man in den Bildern unten sehen kann: die Google Webmaster-Tools zeigen an dass ich per robots.txt bestimmte Pfade von der Indizierung ausgenommen habe. Das hält den Googlebot aber nicht vom Besuch genau dieser Seiten ab, denn wie man im … Continue reading

Posted in Hausmitteilungen | Tagged , , | Leave a comment