Google Testseite zur Indexierung
Start Google Testseite zur Indexierung: 12.05.2009
Da Google mir zur Zeit einige Probleme bereitet, habe ich diesen Versuch ins Leben gerufen. Google indiziert zwar alle meine Seiten, aber plötzlich sind zwei Seiten von www.steffen-wessnick.de nicht mehr über die Suche auffindbar. Erklären kann ich mir das nicht. Im Vergleich dazu werden diese Seiten bei yahoo ordnungsgemäß gelistet und gefunden. Es handelt sich dabei um die folgenden 2 Seiten:
www.steffen-wessnick.de/citylights.php und www.steffen-wessnick.de/neuseeland-bilder.phpIm Google Webmaster Forum habe ich nur den Hinweis bekommen, dass dies durchaus üblich ist und Backlinks nötig sind um die Seiten wieder mit der Zeit auffindbar zu machen. Mittlerweile sind rund 4 Wochen vorbei und es hat sich immer noch nichts getan. Anhand dieser Seite hier möchte ich testen, wie lange es dauert bis die Seite im Google Index vorhanden ist und ob diese auch in der Suche gefunden wird. Ich werde die URL in die Sitemap eintragen und mit dem Webmaster Tool von Google erneut hochladen. Anhand meiner Logfiles kann ich zeitgenau sehen, wann der Googlebot auf der Webseite vorbeischaut. Auch das werde ich hier veröffentlichen.
Einschub: Wie kann ich testen, ob meine Seiten im Google Index sind?
Dies ist ganz einfach über die Google Suche möglich. Im Suchfenster wird dafür der Befehl site:domain.de verwendet. In meinem Fall wäre dies "site:steffen-wessnick.de" (Eingabe ohne Anführungszeichen). Google listet nun alle im Index enthaltenen Seiten dieser Domain auf. Bei Yahoo.de ist dieser Befehl ebenfalls möglich. Hier wird nach der Eingabe zum sogenannten Site Explorer weitergeleitet, der gleich noch alle zu einer Seite führenden Backlinks auflistet.
Update 13.05.2009: Es tut sich bereits was
Nachdem ich gestern den Versuch gestartet habe, gibt es schon Neuigkeiten: der Googlebot war da! Aber es gab noch jemanden der schneller war. Nämlich der Yahoo!Slurp Bot. Als Beweis hier die 2 entscheidenen Zeilen aus dem Logfile:
74.6.18.251 - - [13/May/2009:06:16:21 +0200] "GET /google-test-indexierung.php HTTP/1.0" 200 5166 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp)66.249.71.206 - - [13/May/2009:06:16:43 +0200] "GET /google-test-indexierung.php HTTP/1.1" 200 5174 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Ein Unterschied von gerade einmal 22 Sekunden. Kann das Zufall sein? Erst einmal egal. Der erste Schritt ist getan. Jetzt heißt es warten bis sich die Seite auch im jeweiligen Suchindex finden lässt. Da ich schon etwas weiter denke, verknüpfe ich diesen Versuch auch gleich noch mit 2 Bildern. Im folgenden füge ich zwei Bilder ein. Ich bin gespannt wie lange diese brauchen, um in den Index zu gelangen. Am Ende, wenn alles im Index ist, werde ich einmal versuchen die berühmte 301-Weiterleitung zu testen. Aber das ist Zukunftsmusik.
Swimming Pool mit Palme
Fischreier am See
Update 19.05.2009: Seite im Google Index
Es ging doch überraschend schnell. Die Seite wird im Google Index gelistet und auch unter bestimmten Keywords gefunden. Damit hat es rund eine Woche gedauert von der Initiierung bis zur endgültigen Aufnahme in den Google Index. Bei der Konkurrenz von yahoo.de ist die Seite ebenfalls gelistet. Hier der Beweis in Form von zwei Screenshots der Suchmaschinen:
Beide Seiten auf Platz eins der Suche. Nicht schlecht, oder? Spass bei Seite. Das erste Ziel ist somit erreicht. Ich werde jetzt ersteinmal abwarten bis die am 13.05.2009 aufgeführten Bilder ebenfalls in der Google (Bilder)-Suche auftauchen. Der Google Imagebot hat sie bereits gecrawlt. In diversen Quellen gibt es recht unterschiedliche Angaben, wie lange es dauert bis Bilder in der Suche auftauchen. Daher heisst es wieder abwarten und Tee trinken.
Meine anderen 2 Seiten sind immer noch unauffindbar für die Suche. Im Moment sehe ich nur die Möglichkeit neue Seiten anzulegen (analog zu dieser hier - deswegen auch das "Experiment" hier), diese indizieren zu lassen damit sie wieder in der Google Suche gefunden werden. Dementsprechend dann die "alten" Webseiten per 301 Weiterleitung umzulenken. Ich bin gespannt, wie es weiter geht.
Update 26.05.2009: Nichts neues bei Google
Ein kurzer Zwischenbericht: seit dem letzten Eintrag hat sich nichts geändert. Diese vorliegende Testseite ist nach wie vor im Index und wird auch gefunden. Die 2 anderen, oben erwähnten Seiten, leider weiterhin nicht. Allerdings hat meine Seite insgesamt, anscheinend einen Sprung nach vorne in den Suchergebnissen von Google gemacht. Bei der Eingabe von "citylights bilder" in die Suchmaske wird meine Domain an erster Stelle geführt. Diese hatte ich vor kurzem mal überarbeitet und mit relevanten Keywords versehen. Das ist schon mal was. Jetzt muss nur noch die "richtige" Seite an diese Stelle und alles wäre im Lot.
Wie gehts weiter? Warten. Die zwei Bilder von oben sind immer noch nicht im Bilderindex vorhanden. Eher werde ich nichts weiter unternehmen, da ich bei einer Weiterleitung auf eine neue Seite die Bilder mit berücksichtigen möchte. Daher hoffe ich, dass die Bilder sich bald im Index befinden. Und ich bin auch schon gespannt, mit welchen Keywords sie an welcher Stelle ranken.
Update 02.06.2009: Bilder sind im Index
Heute habe ich entdeckt, dass die neuen Bilder in der Google-Bildersuche gelistet sind und auch gefunden werden. Erstaunlicherweise sind gleich alle Bilder dieser Seite im Index gelandet. Dies lässt vermuten, dass Google wohl ersteinmal sammelt und dann Paketweise seinen Bilderindex aktualisiert. Immerhin lag doch knapp eine Woche zwischen dem Einstellen der jeweiligen Bilder. Gefunden werden die Bilder wie erwartet durch die angegebenen Schlagworte: "Swimming Pool Palme" und "Fischreier Steg" bzw. alternativ "Fischreier See". Jeweils auf Platz eins der Suche. Beim Swimming Pool mit der Palme doch etwas verwunderlich, da dort immerhin ca. 1.930.000 Ergebnisse zu diesen Suchbegriffen gelistet sind. Dass ich beim Fischreier doch glatt ein "h" vergessen habe, ist mir bei der Suche eben aufgefallen. Peinlich.
Damit ist die Seite nun vollständig inklusive Bilder im Index und wird gefunden. Jetzt beginnt der spannende Teil des Experiments, die Weiterleitung auf eine andere Seite. Ich hab inzwischen viel gelesen drüber und möchte es nun hiermit selbst testen. Da ich keinen eigenen Webserver habe sondern nur angemieteten Webspace, kann ich die Weiterleitung "nur" mit PHP realisieren und nicht wie sonst empfohlen per .htaccess. Allerdings sollte auch diese Variante problemlos funktionieren. Dazu habe ich eine neue Seite erstellt und den HTML-Code dieser Webseite hier, komplett dort reinkopiert. An den Anfang dieser Ursprungsseite füge ich folgenden PHP-Code ein:
PHP-Start:header("HTTP/1.1 301 Moved Permanently");header("Location: http://www.steffen-wessnick.de/google-index-test.php");header("Connection: close");PHP-ENDEKurze Erläuterung: Das 301 Moved Permanently soll der Suchmaschine zeigen, dass die Seite unter der Ursprungsadresse nicht mehr existiert. Sondern vielmehr nur noch unter http://www.steffen-wessnick.de/google-index-test.php erreichbar ist. Das ist die neue URL dieser Seite, wie oben in der Adresszeile ersichtlich. Somit leitet jetzt google-test-indexierung.php immer auf google-index-test.php weiter. So soll es Suchmaschinenfreundlich sein. Dementsprechend sollte die neue Seite im Google Index erscheinen und die alte im Laufe der Zeit verschwinden. Für mich ist jetzt spannend, was passiert mit den Bildern. Werden diese ebenfalls der neuen Seite zugeordnet oder treten (auch andere) Probleme auf.
Update 09.06.2009: Statusbericht
Erneut war es der Yahoo-Bot, welcher zuerst auf die neue Seite durch die 301-Weiterleitung gestossen ist. Dies geschah erstmals am 04.06.2009. Hier der Auszug aus den Logfiles:
72.30.79.33 - - [04/Jun/2009:17:49:02 +0200] "GET /google-test-indexierung.php HTTP/1.0" 301 - "-" "Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp)72.30.79.33 - - [04/Jun/2009:17:49:06 +0200] "GET /google-index-test.php HTTP/1.0" 200 12955 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp)
Das Prinzp der Weiterleitung funktioniert demnach tadellos: der Bot crawlt zuerst die alte Seite, wird dann per Redirect auf die neue umgeleitet und crawlt dann die neue Seite. Der Vollständigkeit halber noch der Zugriff des Google-Bots, welcher mehr als einen Tag später folgte:
66.249.71.206 - - [05/Jun/2009:23:16:20 +0200] "GET /google-test-indexierung.php HTTP/1.1" 301 - "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" 66.249.71.206 - - [05/Jun/2009:23:20:30 +0200] "GET /google-index-test.php HTTP/1.1" 200 13009 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"Eine Abfrage bei Google nach den im Index enthaltenen Seiten (site:steffen-wessnick.de) meiner Domain zeigt, dass die neue Seite bereits im Index gelistet wird. Die alte Seite (google-indexierung-test.php) sollte somit in Zukunft aus dem Index entfernt werden. Wie lange dies dauern kann, bleibt offen. Wenn es soweit ist, werde ich es berichten. In der Google Suche wird bei diversen Suchworten auch bereits die neue Adresse gefunden. Allerdings kann ich hier keine eindeutige Richtung erkennen, da beide Seiten jeweils Suchergebnisse anbieten. Aber durch die permanente Weiterleitung stellt das kein Hindernis da im Moment.
Interessantes hab ich auch in der Google Bildersuche entdeckt. Gebe ich in die Google Bildersuche die Suchworte "swimming pool palme" ein, wird mein Bild auf Platz zwei gelistet. Das entscheidene dabei ist, dass das Bild bereits mit der neuen Seite google-index-test.php verknüpft ist. Dies erscheint in der Statusleiste des Browsers (Firefox 3.10) wenn die Maus über das Bild bewegt wird. Ich erspare mir jetzt den Screenshot sondern gebe die Link Adresse hier ausschnittsweise an. Das wesentliche ist Rot eingefärbt.
http://images.google.de/imgres?imgurl=http://www.steffen-wessnick.de/images/swimming-pool-palme.jpg&imgrefurl=http://www.steffen-wessnick.de/google-index-test.php&usg=__SWhfxHvaVwiwSGwV_H8T_hTbzzQ=....Analog gilt dies für das Bild mit dem Fischreier am See. Jetzt könnte vermutet werden, dass dies bereits für alle Bilder gilt. Nein gilt es nicht. Bei der Bildersuche nach den Screenshots (Suchanfrage: "google screenshot indexierung") wird weiterhin auf die alte Seite verlinkt. Vielleicht liegt es daran, da die Screenshotbilder erst später im Index gelandet sind. Das paradoxe an der Sache ist, die Bildersuche nach der Domain (site:steffen-wessnick.de) verlinkt auch das Bild mit der Palme und dem Fischreier auf die alte Seite. Eigentlich ein Widerspruch. Es bleibt abzuwarten wie es sich in nächster Zeit einpegelt.
Bis hier hin, ist der Versuch vollends geglückt. Wenn auch in naher Zukunft keine Probleme auftreten, die Seite weiterhin gefunden wird, die alte optimalerweise aus dem Suchindex verschwindet und auch die Bilder der neuen "richtigen" Seite zugeordnet werden, starte ich die gleiche Aktion für meine zwei "Problemseiten".
Update 10.06.2009: Jetzt ging es fix!
Was sich gestern bereits angekündigt hat, ist nun vollbracht: alle Bilder sind über die Bildersuche mit der neuen Seite verlinkt. Somit scheint die "Transformation" der alten zu dieser neuen Seite vollständig abgeschlossen. Ein weiterer Beleg dafür: bei einer site:domain.de Abfrage ist die alte Seite nicht mehr vorhanden. Oder anders gesagt: google-test-indexierung.php ist aus dem Index geflogen. Und das ging dann doch viel schneller als erwartet. Nichts desto trotz werde ich die Sache weiterhin beobachten.
Um meinen anderen Seiten wieder Leben einzuhauchen, mit dem Ziel durch die Google Suche gefunden zu werden, werde ich gleiches Prinzip anwenden. Mal schaun, wie lange es hier dauert und ob diese Aktion von Erfolg gekrönt ist.
Update 17.06.2009: Stillstand
Es passiert nicht viel. Eine Woche ist der letzte Eintrag her. Seitdem ist nur folgendes geschehen: die zwei "Problemseiten" sind unter der alten URL komplett aus dem Google Index gefallen. Somit auch alle Bilder die sich auf den Seiten befinden. Jetzt warte ich nur darauf, bis die neuen Seiten im Index auftauchen. Der Googlebot hat sie bereits mehrfach gecrawlt. Somit geh ich positiv davon aus, dass sich da was in den nächsten Tagen tut.
PS: Ich habe die Möglichkeit geschaffen am Ende dieser Seite, Kommentare abzugeben. Bei Fragen, Anmerkungen oder sonstigem einfach einen Eintrag verfassen.
Update 24.06.2009: Erfolg: Fehlanzeige!
Tja, der Worst-Case ist wohl eingetreten: es hat alles nichts genutzt. Die Seiten sind zwar über die neuen URL´s im Index, aber werden wie vorher nicht durch die Suche gefunden. Jetzt versteh ich gar nichts mehr. Einzige mir noch verbleibende Erklärung: es muss irgendwas mit den Bildern zu tun haben. Die Bilder sind ebenfalls alle im Index und wurden auch durch die 301 Weiterleitung auf die neuen Seiten übernommen. Über die Suche sind sie trotzdem nicht auffindbar, da sie an die jeweiligen Seiten geknüpft sind und diese partout nicht gefunden werden. Deshalb werde ich demnächst parallel eine neue Seite erschaffen mit anderen Bildern und den Werdegang verfolgen. Irgendwo ist bei mir der Wurm drin und ich hab ihn leider noch nicht gefunden.
Update 15.12.2010: Es soll weiter gehen...
Anderthalb Jahre ist es seit dem letzten Eintrag her. In der Zwischenzeit ist viel passiert - nur eins ist gleich: meine Seiten sind immer noch im Nirvana von Google verschwunden. In letzter Zeit bin ich wieder bissl aktiver mit meinen Recherchen geworden und deshalb habe ich beschlossen den möglichen Ursachen noch einmal auf den Grund zu gehen. Bei meinen Recherchen bin ich auf einen Hinweis gestossen, der das Übel meines Problems sein könnte.
Ein Hinweis von Martin Mißfeldt im Webmaster Forum von Google an einen anderen User offenbarte, dass Bilder aus der Suche dann verschwinden, wenn man im Nachhinein noch einmal an den Pfaden rumhantiert. Und genau das hatte ich getan. Ich hatte alle Dateinamen wiederholt geändert, um diese ein bisschen zu (SEO)optimieren. Google könnte mir genau das Übel genommen haben. Dem muss ich jetzt auf den Grund gehen.