Wann der Googlebot kommt

Vor einiger Zeit hatte ich mal einen Kommentar gelesen, in dem stand, der Googlebot komme nachts öfters auf die Websites, mit der Begründung, zu dieser Uhrzeit gäbe es weniger Traffic durch natürliche Benutzer. Klingt alles sehr logisch, aber ist das wirklich so? Ich habe in den letzten zwei Wochen ein Logfile geführt, in dem alle Besuche des Googlebots notiert wurden, um die ganze Geschichte zu überprüfen. Dabei sind mir aber ein paar Fragen aufgekommen, beispielsweise wann für Googles Crawler „nachts“ ist, ob dies abhängig vom Serverstandort ist oder ob er sich an der Zeitzone des Silicon Valley orientiert.
Die Grafik zur Auswertung zeigt ein vergleichsweise deutliches Bild und dürfte die Aussage bestätigen, dass der Bot nachts häufiger vorbeischaut.

Deutlich zu erkennen ist der erhöhte Bereich zwischen 3 und 7 Uhr. Aber auf den Ausreisser um 19 Uhr und die darauffolgende Flaute kann ich mir selbst keinen Reim machen. Der Ausreisser ist laufend über die zwei Wochen zustande gekommen und nicht an ein/zwei Tagen durch erhöhte Aktivität entstanden.
Wenn man die Uhrzeit von Amerikas Westküste nimmt, also die des Googlebots, dann macht das ganze kaum noch Sinn. Das Silicon Valley hinkt uns neun Stunden hinterher.

Und was nützt einem diese Erkenntnis? Ich kenne gewisse Online-Tools, bei denen man beispielsweise zeitlich begrenze Backlinks zu seiner Website setzen kann. So könnte man nun den Link so setzen, damit er in der Nacht noch stehen bleibt und der Crawler ihn dann mit höherer Wahrscheinlichkeit entdeckt, was SEO-technisch einen Vorteil sein kann.

Was übrigens die Bots von Yahoo und Bing betrifft: Bei Bing sind die Zugriffe gleichmässig auf die 24 Stunden verteilt und der Slurp scheint vermehrt zwischen 0 und 9 Uhr vorbeizuschauen, allerdings habe ich von diesen Crawlern weit weniger Zugriffe als vom Googlebot.