Google ignoriert robots.txt und indexiert Bing Suchergebnisse

by seo2feel on Juni 21, 2009

bing vs google Google ignoriert robots.txt und indexiert Bing Suchergebnisse

Es sieht momentan so aus, als würde der Google Bot munter und fröhlich die Bing Suchergebnisse indexieren. Ein Fehler liegt vielleicht an der robots.txt die nicht mit einem noindex versehen ist, aber auch das Fragezeichen kann vielleicht einen Fehler hervorrufen.

bing search Google ignoriert robots.txt und indexiert Bing Suchergebnisse

bing-search

Ich habe die robots.txt von bing mal mit der von google verglichen und mir ist aufgefallen das auch in der google robots keine noindex angaben gemacht sind. Aber das Fragezeichen ist bei “search” weg.

google search Google ignoriert robots.txt und indexiert Bing Suchergebnisse

google-search

Vielleicht liegt es also daran ? Wenn man nun in Google site:bing.com/search eingibt, liefert Google erstaunliche 26.600 Einträge. Diese sind keineswegs kryptisch sondern enthalten immer das gesuchte Wort am Ende, wenn man auf diese Links klickt kommt man auf die Bing Suche mit genau diesem Keyword und den Ergebnissen.

bing-suchergebnis

bing-suchergebnis

Der Hammer ist aber das der Google Bot freudig weiter indexiert, was Ihr auch an dem Hinweis “vor 14 Stunden gefunden” seht. Scheinbar scheint es aber Microsoft nicht weiter zu stören, denn bis jetzt hat sich noch nichts verändert.

Stellt sich nur die Frage, warum Google diese ganze Seiten indexiert, klar fehlt das noindex aber das fehlt bei Google genauso wie bei Bing. Mal schauen wie sich das ganze entwickelt. Entdeckt hat das ganze übrigens Daven vom Blog davidnaylor.co.uk.

Was ist eure Meinung dazu, ein Fehler oder Absicht ? Momentan sind es 26.600 Seiten, aber es werden jede Stunde mehr.

{ 7 comments… read them below or add one }

1 Kay Juni 21, 2009 um 12:39 pm

*ironie* Das kommt davon wenn man Google nicht explizit anspricht in der Robots.txt ;)

Antworten

2 seo2feel Juni 21, 2009 um 2:16 pm

Komisch ist nur, dass Google bis auf das ? alles genau in der robots stehen hat.

Antworten

3 alexplus Juni 21, 2009 um 12:48 pm

Dann sollte man doch möglichst Links streuen, die eine Bing-Suchergebnis-Seite mit eigenen Websites anzeigen. Einen besseren Backlink kann man doch kaum haben!

Antworten

4 seo2feel Juni 21, 2009 um 2:21 pm

Nette Überlegung, aber man bekommt ja keinen direkten Backlink zu seiner Seite.

Antworten

5 Paul Juni 22, 2009 um 11:15 pm

Eindeutig ein Fehler in der Matrix =)

Antworten

6 seo2feel Juni 22, 2009 um 11:17 pm

Ja ein Fehler in der Google Matrix ;-)

Antworten

7 Markus Juli 18, 2009 um 10:48 pm

hmm inzwischen habe sie wohl einiges aus m index gelöscht?

Ergebnisse 1 – 10 von ungefähr 7.120 von bing.com/search

Antworten

Leave a Comment

You can use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong> <pre lang="" line="" escaped="">

Previous post:

Next post: