SEO-Blog
Weitere Postings
Twitter-Nennungen
Noodp nicht über X-Robots-Header
Eigentlich ist das Thema keinen eigenen Blogpost wert, aber für die paar Twitter-Zeichen dann doch wieder zu lang. Die großen Suchmaschinen (ließ: "Google") haben vor einiger Zeit die Möglichkeit eröffnet, Anweisungen an den Crawler nicht nur in einen Meta-Tag, sondern auch in den HTTP-Header zu packen. Hier hatte ich zu dem Thema mal etwas geschrieben. Das funktioniert im Prinzip auch wunderbar, ich nutze das Feature gerne und häufig.Heute ist mir jedoch aufgefallen, dass die Umsetzung wohl nicht so ganz sauber implementiert ist: während Anweisungen wie "noarchive" problemlos umgesetzt werden, ignoriert Google ein "noodp", das dafür sorgen soll, dass das Snippet aus dem Seiteninhalt und nicht mit dem Dmoz-Text erstellt werden soll. Schön sehen kann man das hier im Blog, zuerst die HTTP-Header mit der X-Robots-Anweisung:
Und hier das aktuelle Snippet aus den Google-SERPs zu SEO-Blog mit dem Text aus dem Dmoz:
Fehler oder gewollt? Mir fällt jedenfalls kein plausibler Grund für zweitere Möglichkeit ein.
schrieb am 16.06.2009 um 12:44 Uhr
Ist das nicht so, das du jeden X-Robots Tag seperat angeben musst, also praktisch zwei mal einen X-Robots-Tag (Noarchive und einen für Noodp)
schrieb am 16.06.2009 um 12:47 Uhr
wojcik, Google selber hat die Notation mit dem Komma im Googebot damals so vorgestellt, gehe deswegen mal davon aus, dass das richtig ist: http://googleblog.blogspot.com/2007/07/robots-exclusion-protocol-now-with-even.htmlschrieb am 16.06.2009 um 12:52 Uhr
Stimmt... Hmmm Google is doof :Dschrieb am 16.06.2009 um 12:56 Uhr
DAS steht seit jeher ausser Frage ;-)schrieb am 16.06.2009 um 12:56 Uhr
Wird Noodp überhaupt über X-Robots Header unterstützt konnte da nix finden?schrieb am 16.06.2009 um 12:58 Uhr
Davon gehe ich mal aus: "Simply add any supported META tag to a new X-Robots-Tag directive in the HTTP Header used to serve the file." - Es wird also alles unterstützt, was man auch in den Meta-Tag schreiben kann.
schrieb am 16.06.2009 um 13:17 Uhr
spannend finde ich auch, ob der "unavailable after" Tag funktioniert:Ich kann mir das so nicht vorstellen, dass man google sagen kann: Ach bitte, am 25. August um Mitternacht, bitte diese Seite aus dem Index nehmen...
Hat das jemand (Johannes?) schon mal getestet?
schrieb am 16.06.2009 um 13:18 Uhr
Hmmm dann würde ich mal sagen, das Google da wohl ein Problem hat mit dem erkennen. Für mich sieht der X-Robots Header bei dir auch ordentlich gesetzt. Kein Plan, ist aber auf jeden Fall wirklich sehr merkwürdig...
schrieb am 16.06.2009 um 15:57 Uhr
Evtl. liegt es auch an der Schreibweise. Schonmal probiert noodp als erstes zu setzen? Vielleicht auch ohne Leerzeichen oder einfach nur den Header zweimal mit je einer Anweisung setzen? Gruß Matze
schrieb am 17.06.2009 um 11:02 Uhr
Bei der Website eines Kunden ignoriert Google auch schon seit Monaten das noodp im Meta-Tag. Nervt...schrieb am 18.06.2009 um 07:40 Uhr
Das macht Google nur, dass du was zu schreiben hast ;-)Mein noodp ist auch jedem egal, mir mittlerweile auch.
schrieb am 19.06.2009 um 11:05 Uhr
habe nichts anderes von der Tante erwartet ;o) erlebte auch schon vor Jahren Zwischenfälle, wo ich "heikle" Seiten via robots.txt ausgeschlossen habe und die trotzdem in Google auftauchten, sogar URLs mit vorgefertigten GET-Parametern, welche persönliche Angaben (mailadresse, name, etc) automatisch in die form-fields setzten, genau das, was ich eigentlich nicht haben wollte...
schrieb am 21.06.2009 um 14:44 Uhr
Google nie etwas sagen, aber Google immer Dinge ....
Kommentieren?
Die Kommentare für diesen Beitrag wurden geschlossen. Angemeldete Benutzer haben weiterhin die Möglichkeit, auch ältere Beiträge zu kommentieren. Jetzt kostenlos anmelden.