« Danke Google für dein neues Searched Based Keyword Tool | Home | Backlink Vergleich, zählen wieder sitewide Links? »
Hilfe der Google Bot kommt zu selten!
Von Uwe | 10.Dezember 2008
Kennst Ihr auch das Problem? Man hat tollen Kontent auf der Seite aber Google läßt sich viel zu selten blicken? Auf einer meiner geliebten Seiten kam der Bot nur noch alle 40 Sekunden – 1 ne Minute vorbei um eine Unterseite zu spidern.
Da auf der Seite ca. 200 News pro Tag hinzukommen und ich auch eine recht ordentliche Onpage Optimierung programmiert habe könnte der Bot ruhig etwas öfters vorbeischauen.
Eine kurze Analyse der Ladezeiten der Seite brachte mich dann auf den richtigen Pfad. Eine einzelne News Seite benötigte ca. 6 Sekunden zum Aufbau. Und da Google ja ein netter Mensch ist nahm er natürlich Rücksicht auf meinen lahmen Rechner und schaute nur alle 40 Sekunden vorbei.
Nach dem einschalten des Caches unter Typo3 sowie dem programmieren spezifischer Caches für meine Seite im tt_news Modul bekam ich die Ladezeiten auf 0.3 Sekunden herunter.
Google reagierte recht schnell und schon ca. 10 Minuten später kam der Bot alle 10 Sekunden vorbei um die Seiten zu spidern.
Also Merke: Wenn der Bot nicht so kommt wie er soll prüfe einfach mal die Ladezeiten deiner Seite.
Popularity: 59%
Topics: seo | 14 Kommentare »
11.Dezember 2008 at 10:57
[...] Uwe hatte dieses Problem mit seiner Typo3 Seite und festgestellt das die Seiten einfach zu langsam geladen (6 Sekunden) werden. Nachdem er ein paar Umbauarbeiten vollbracht hat reduzierte er das Laden der Seite auf 0,3 Sekunden und siehe da der Googlebot schaute nun alle 10 Sekunden vorbei um die Seite zu spidern. [...]
11.Dezember 2008 at 11:03
Ladezeiten prüfen sollte man ja eigentlich sowieso immer – den Besuchern zu Liebe. Die Crawling-Rate kann man ja seit wenigen Tagen selbst frei bestimmen, als Alternative zur berechneten optimalen Crawling-Rate. Siehe: http://pixelfolk.net/seo/113/crawling-geschwindigkeit
11.Dezember 2008 at 14:15
Hi Thomas,
danke für den Tipp, wusste ich noch nicht.
11.Dezember 2008 at 14:29
Ja klar, sag ich doch immer: Wenn möglich, Cache anwerfen. Und ich bin immer noch der Meinung, dass die Ladezeit einen Einfluss auf das Ranking haben kann – und das ist unsereinem noch wichtiger als 10 sekündige Botbesuche.
Und mit einer News-Sitemap holt sich der Bot das Zeug eh superschnell.
11.Dezember 2008 at 17:22
Hi Löwenherz,
Das mit dem Ranking kann ich nachvollziehen. Wenn 2 Seiten gleich stehen würden dann würde ich als Google die vorne anzeigen die eben schneller geladen ist. Macht aus der Sicht von Google absolut Sinn.
Und ja, an der News Sitemap arbeite ich noch etwas, hat momentan zu viele Einträge pro Level
8.Januar 2009 at 16:14
Ich hätte eine Frage zum Google Bot. Ich würde gerne wissen, wie ich denn herausfinden kann, wie oft der Bot auf der Seite vorbeikommt. Ich habe nicht die große Ahnung von diesen Dingen und ich würde das aber gerne wissen, weil ich ziemlich neugierig bin. Dann würde mich aber auch noch interessieren, wie ich das dann ändern kann, wenn er nur so selten vorbei kommt. Was muss ich dafür denn tun? Kann ich das denn überhaupt so einstellen, dass es mir dann passt?
19.Januar 2009 at 16:41
Hey, das ist ja mal klasse. Wusst ich garnicht. Danke für den tipp
10.Februar 2009 at 13:49
Ich muss sagen, dass es mich nicht wundert, dass die Seite nicht ganz oben steht. Sie wird ja auch kaum genutzt. Also Entschuldigung, wenn ich das jetzt so offen und ehrlich sage, aber wenn hier nur alle 8 Wochen oder so ein Beitrag geschrieben wird, dann braucht man sich doch auch nicht wundern, wenn die Seite nicht die gewünschten Zahlen bringt. Ich würde empfehlen, erstmal regelmäßig Beiträge zu schreiben und dann eine gewisse Leserschaft aufzubauen und dann klappt das.
22.Februar 2009 at 10:06
Ich habe auch Probleme mit dem Google-Bot.
Er hat meine Seiten das letzte Mal vor 9 Tagen besucht, sonst immer regelmäßig so alle 3-4 Tage.
Hab schon viel recherchiert, aber nichts passendes gefunden. Hab auch in den Webmaster-Tools die Besuchsgeschwindigkeit geändert – Null Erfolg.
25.Februar 2009 at 21:11
Hi Uwe! Nun sind ja schon wieder einige Tage ins Land gezogen seit deinem Beitrag. Hat sich bei dir durch die Aktivierung des Caches etwas grundlegendes geändert bzw. verbessert hinsichtlich Ranking deiner Seite?
1.Mai 2009 at 14:44
Ich stimme in dem Punkt zu, dass Hilfe in diesem Punkt nur sehr selten kommt. Aber in Büchern kann man eigentlich immer viel nachlesen.
27.Juni 2009 at 18:15
Bei Google weiß man halt nie was da gerade läuft. Es gibt Zeiten da ist ein neuer Beitrag innerhalb von Minuten im Index und dann gibt es wieder Zeiten da dauert es fast eine ganze Woche. Ich habe mittlerweile aufgehört mich über sowas zu ärgern und versuche das durch Social-News Seiten etwas auszugleichen. Über die kann man auch ganz gut Besucher auf neue Artikel aufmerksam machen.
22.Januar 2010 at 13:38
Hey Uwe,
danke – das war genau das, was ich gesucht habe. Er kam bei mir einfach viel zu selten, auch wenn ich nicht ganz 200 News am Tag habe
Hab auch im Webmastetool gesehen, dass die Seite langsam laden soll, dachte aber nicht, dass sich das auf das Crawlverhalten auswirkt.
Liebe Grüße
embee
7.Mai 2010 at 23:18
wie zum teufel kann man bloß einfluss auf den blöden bot nehmen??!?und zwar langfristig effektiv?