Googlebot ignoriert robots.txt
Wie man in den Bildern unten sehen kann: die Google Webmaster-Tools zeigen an dass ich per robots.txt bestimmte Pfade von der Indizierung ausgenommen habe. Das hält den Googlebot aber nicht vom Besuch genau dieser Seiten ab, denn wie man im zweiten Bild sieht tauchen die von der Indizierung ausgenommenen URLs auch in den Suchergebnissen auf!
Habe irgendwo gelesen dass der Googlebot gerne direkt über User-agent: Googlebot statt User-agent: * angesprochen wird, aber wenn die gesperrten URLs als gesperrt in den Webmaster-Tools auftauchen erwarte ich einfach dass sie nicht in den Suchergebnissen gelistet werden!
Jan 02:00 on 24.06.2007 Permalink
haste auch noch ne idee für mich?wollte ja auch mal von meiner jetzigen domain weg
Daniel 18:32 on 24.06.2007 Permalink
Hmm.. so aus dem Stehgreif jetzt nicht, aber ich habe (wie man an der Domain sieht
) auch nicht wirklich lange nachgedacht.
Und die andere Domain von der ich gesprochen habe behalte ich lieber mal für mich in der Hinterhand – in den USA werden mit SEO schon “six numbers per year” gemacht
Wilhelm 17:42 on 26.06.2007 Permalink
hm, könnte auch noch ne zweite domain für den blog gebrauchen und meine aktuelle im stand by laufen lassen…
Ideen?
Daniel 17:52 on 26.06.2007 Permalink
Deine eMail-Adresse ist sowohl als .de als auch als .com frei
(nur ein Ausschnitt damit Dir die keiner vor der Nase wegschnappt falls Du sie haben willst)
Aber man kann auch aus den jeweils zwei Anfangsbuchstaben Deiner Namen was machen, das hört sich an wie “wird alles wieder” auf Kölsch
Daniel 13:02 on 27.06.2007 Permalink
So Wilhelm, jetzt hast Du ja deine blaulichtengel.de-Domain.
Ich finde besonders das Motto was ich Dir mal in den Header geschrieben habe klasse
Wilhelm 16:28 on 27.06.2007 Permalink
Das hat was, hoffentlich verstehen nur die Leute die Domain nicht falsch
Daniel 16:33 on 27.06.2007 Permalink
Schreib halt noch rechts oben einen kleinen Infotext rein
(Themes -> K2 Sidebar-Module, da dann “Info” oder so was eingeben, als Modul “HTML module” auswählen und da den Text eingeben)
– aber was sollte wer falsch verstehen?
Wilhelm 16:07 on 28.06.2007 Permalink
naja, keine ahnung
mal schauen, was draus wird