In letzter Zeit verliert Google wieder vermehrt Seiten, wie über die site:www.domain.tld Abfrage festzustellen ist. Da ich aber gerne alle meine Artikel in der Indexierung sehe, habe ich das kleine Plugin WP Page Numbers installiert, um unserer lieben Suchmaschine etwas unterstützend unter die Arme zu greifen. Aktuell fehlen mir quer Beet so um die 100 Artikel in der Indexierung von Google.
Was nicht in Index weilt kann auch nicht gefunden werden. Vielleicht ist auch das ein Grund meines Besucherrückgangs in den letzten Wochen.
Maik hat mich die Tage darauf aufmerksam gemacht, denn das scheint aktuell mehr Blogs zu betreffen, und daraufhin fing ich an die Indexierung meiner Beiträge detaillierter zu prüfen (Kategorie für Kategorie).
Und siehe da, es fehlen ca. 100 Artikel, und so einige Paged Seiten im Google Index. Bei über 300 Artikel sind das ca. 30% meiner Artikel, die nicht im Google Index zu finden sind. Der tägliche Besucherrückgang von ca. 30% wäre prozentuell damit erklärt, aber das muss ja auch nicht nur eine Ursache haben.
Wenn ein Blog größer wird, dann kann es schon mal schwieriger für die Suchmaschinen werden, alle Links zu verfolgen, die ja teilweise erst in Ebene X zu finden sind. Irgendwo sind ja alle unsere Artikel verlinkt, doch wo halt, das ist die Frage. Sitemaps haben wir ja auch alle, aber wenn ein Link auf Seite x der Sitemap erst zu finden ist, dann wird es auch für die Suchmaschinen schwer und es kommt schon hin und wieder mal vor, dass sie die ein oder anderen Seiten aus dem Index verlieren.
Der erste Schritt, um den Suchmaschinen unterstützend unter die Arme zu greifen, wäre dann schon mal die ganzen Paged Seiten, also die Unterseiten der Startseite und der Archive vollständig in den Index zu bringen. Was liegt da näher als sie alle bzw. einen Großteil zu verlinken?
Nun ist im Standard aber meistens nur mit den PHP Funktionen next_posts_link() und previous_posts_link() die vorherige und die nächste Seite in den Archiven verlinkt. Um den Suchmaschinen aber etwas mehr Linkfutter zu bieten gibt es auch das ein oder andere Plugin. Ich habe mich für das kleine aber feine WP Page Numbers entschieden.
Installieren, Aktivieren, Einstellungen individuell anpassen und dann an die entsprechenden Stellen im Theme den Code <?php if(function_exists('wp_page_numbers')) { wp_page_numbers(); } ?> einfügen und die meiste Arbeit ist getan. Ich habe zusätzlich noch im Plugin Ordner die CSS Datei meines gewählten Styles für die Page Numbers etwas angepasst und das war’s dann auch schon.
Dann wollen wir jetzt mal hoffen, dass die Suchmaschinen es so etwas einfacher haben, beim Indexieren meiner Seiten
Nun sind im unteren Bereich meiner Startseite sowie der dort weiterführenden Seiten die erste und letzte Seite sowie 12 weitere Seiten in aufsteigender Reihenfolge verlinkt. In meinen Kategorie und Tag Archiven habe ich das Ganze über die entsprechenden Beiträge gesetzt, damit das Ganze im Gewühl der Bots und Spider eine entsprechende Gewichtung erhält.
Das Ganze wird nun nicht die einzige Maßnahme sein, die ich bezüglich der aus dem Index verlorenen Artikel ergreifen werde. Ich werde Euch auf jeden Fall auf dem Laufenden halten, wie das noch weiter geht. Auch der Grund, warum Google Siten aus dem Index verliert ist mir absolut schleierhaft.
Gestern habe ich mal meine Broken Links Software Xenu über meine Domain laufen lassen und die fehlerhaften Links entfernt bzw. ersetzt. Dabei ist mir auch aufgefallen dass der Standard Gravatar “blasser Typ vor der Wand” in einer 302 Umleitung endet. So habe ich mich für einen anderen Standard Gravatar entschieden. Die Thumbnails in den Kommentaren habe ich vor ein paar Tagen ja auch bereits entfernt. Momentan bleibt mir nichts anderes übrig, als die ein oder andere Maßnahme zu ergreifen, um herauszufinden woran es liegt, bzw. das Ganze erst einmal zu stoppen und dann wieder umzudrehen. Es bereitet mir ziemliche Bauchschmerzen, dass es derzeit immer noch gravierend bergab geht mit der Anzahl meiner indexierten Artikel, die täglich weniger zu sein scheinen.
Das kann nun entweder an mir bzw. meiner Domain liegen oder auch ein allgemeines Phänomen seitens Google bedeuten. Wie sieht es bei Euch aus? Sind alle Eure Artikel im Index?
[...] XML Sitemap bei Google vorliegt, zeigen mir GWT, dass 100 + Links nicht indexiert sind. Im Blog von Tanja seitens Crazytoast habe ich gelesen, dass man durch die Paginierung der Blogseiten dem Suchimperator Google mit der [...]
Morgen Tanja,
ich hatte dieses Plugin auch schon bei Caschy gesehen und mich gefragt, warum er das so umständlich macht?
Ich habe ja im Moment nur “Previous Articles” als Link auf meiner Startseite, der dann in das Archiv als Sitemap springt. Auch bei mir ist leider der Trend zu sehen, dass Google bei mir Indexierungen verliert. Natürlich ist es bei mir etwas schwerwiegender, da, wie du mir ja netterweise gesagt hast, meine Links alle fast auf 302 gehen und damit bei Google ein schlechtes Ranking bekommen.
Ich werde dieses von dir vorgeschlagene Plugin installieren und auch mal meine externen Links mit der Freeware Xenulinks checken!
Vielen Dank für den tollen Hinweis!
Gruß
Matthias
Beim Xenu haut es einem erst mal um
Ich arbeite übrigens auch immer die ganzen Weiterleitungen nach. Sauber ist sauber
Ich habe mich heute fast ausschließlich nur mit diesem Blog beschäftigt und mal sehen, was die Änderungen bringen. Glücklich bin ich aber nicht wirklich darüber. Hab gerade einen neuen Artikel dazu rausgehaun.
Hallo Tanja,
ich habe es gelesen, und was du heute gemacht hast! Alle Achtung!
Und ich habe gerade mit Xenu probiert! Und jetzt habe ich richtig was zu arbeiten!
Gruß
Matthias
Ja, das war fast ein ganzer Tag Arbeit
Ich mache das alle paar Monate immer mal wieder.
Dein Aufwand wird aber auch nicht wenig werden
Moin!
Ich habe auch seit einigen Tagen das Problem, dass sich der Anteil indexierter Seiten nicht erhöht. Entweder nimmt Tante-G keine neuen mehr auf oder kickt dafür “alte” Teile einfach raus. Ich habe inzwischen auch über 300 Beiträge in meinem Blog, aber die Webmasters Tool zeigen mir konsequent 282 Beiträge im Index :-/
Meine Sitemap ist auch garnicht so kompliziert, denn darin stehen nur die 312 URL zu den einzelnen Beiträgen und fünf Seiten, alles andere ist schon bereinigt, sodass es eigentlich nicht an zuviel Informationen für den Crawler scheitern dürfte…
So richtig weiß ich nicht was da schief läuft…dies Plugin werd ich mir mal anschauen, aber eigentlich sollte es ja nicht nötig sein…
Ideen was ich sonst noch falsch machen könnte?
Vielen Dank und Liebe Grüße
@mr.gene: Ich versuche ja auch schon seit Tagen herauszufinden woran das liegen könnte. Bis dato war ich leider noch nicht sonderlich erfolgreich. Neue Beiträge werden aufgenommen und dafür fallen dann gleich wieder ein paar Alte raus
Wie hast Du übrigens Deine Sitemap so schön hinbekommen? Meine sieht dagegen wie ein optisches Chaos aus. Habe ich was in den Einstellungen bei diesem Plugin verpasst?
Was mir definitiv noch aufgefallen ist bei Dir ist die 302 Weiterleitung bei der Trackback URL, die Du unter den Artikeln ja anzeigst. Die solltest Du auf 301 ändern, siehe hier
Halle nochmal,
schade, ich hatte da auf DIE Lösung gehofft jetzt
Wegen der 302 Weiterleitung: Interessante Idee und gute Anleitung. Ich habe bereits vor einiger Zeit den untersten Punkt realisiert und ein “Disallow: */trackback/” in meine robots.txt geschrieben, sodass die “guten” Spider eigentlich direkt dran vorbei laufen sollten
Trotzdem baue ich da nochmal den 301 ein denke ich…
Wegen meiner schicken Sitemap [Danke übrigens
]
Das ist ganz einfach: Bei mir wird nur die Starseite, Beiträge und staitsche Seiten indexiert. So leicht kommt man zu einer solchen Ansicht ^^
Das es das XML Sitemap Generator – Plugin macht, ist ja klar denke ich
Hab mir gerade mal deine angeschaut…uhhh grrr die ist echt nicht schön -sorry-
Stop : Update => Ein reload hat dann doch geholfen. Beim ersten laden wurden wohl die Informationen nicht ganz übertragen, sodass die Stylingteile wohl fehlten und nur der Quelltext angezeigt wurde…
Deine sieht doch grundsätzlich erstmal so aus wie meine!?! Ist doch Okay!
@mr.gene: Danke, die schöne Einstellung habe ich jetzt gefunden
Und vorübergehend auch mal so geändert, dass nur Startseite und Beiträge enthalten sind. Mal sehen was die Webmaster Tools dann die Tage so sagen. Schließlich interessiert mich ja in erster Linie wieviele Artikel fehlen. Im Gesamten (mit Tags, Kategorien und statischen Seiten) habe ich aktuell folgendes Ergebnis: 385 übermittelt, 295 indiziert.
DIE Lösung glaube ich gibt es nicht wirklich. Dennoch vermute ich das Problem in den Artikel selbst. Ich meine nämlich auch, dass sich das Ranking etwas verschlechtert hat. Da ich es aber nie wirklich geprüft habe, ist das nur eine äußerst wage Vermutung. Und da meine Startseite besser rankt als je zuvor, kann es nur irgendwo in den Artikel liegen.
Aus dem Grund habe ich letzte Woche alle möglichen Features und Plugins entfernt und fahre total minimalistisch mit dem notwendigsten.
Den 301er würde ich trotzdem einbauen. 302er sind ja immer Hijacker-verdächtig für die Suchmaschinen und sollten gar nicht genutzt werden. Und die Problematik dürfte dann eher dort liegen, wenn einen jemand mit diesen URLs anlinkt (was ja durchaus vorkommt) und die Spider von dort folgen und direkt über 302 kommen
Nachtrag: Wir haben wohl gleichzeitig kommentiert
Vorher sah sie so aus wie vor Deinem Reload…
Hi nochmal,
ich wollte mal nachfragen ob deine Optimierung der Sitemap sich gelohnt hat / nun alle Beiträge wieder drin sind im Index oder es weiterhin eher dürftig ausschaut?!?
Bei mir ist leider noch so, dass es nicht alle indexiert sind, wenn auch schon der Eine oder Andere mehr…aber sind ja auch neue hinzugekommen :-/
@mr.gene: Bis dato hat sich noch nicht wirklich viel getan. Interessant ist, dass mir laut WMT für die Sitemap, in der ja nur Startseite und Artikel enthalten sind, 58 Beiträge fehlen; laut Site Abfrage aber nur 37 Stück.
Nun stellt sich die Frage, welche Zahl ist richtig
Seit ich aber vor 2 Wochen mit meinen Änderungen angefangen habe (ich habe ja den ganzen Blog minimalisiert was Plugins und Features betrifft) sind schon wesentlich mehr Artikel wieder im Index. Die höchste Zahl die mir fehlte waren über 100 Stück.
Die weitere Frage, die ich definitiv nicht beantworten kann: liegt es an Google oder liegt es an mir?
Hi Crazy Girl,
interessant wäre zu wissen, welche Seiten verschwinden.
Da ich das Phänomen auch kenne, hab ich mich bereits schon seit längerer Zeit auf die Suche nach den Ursachen gemacht.
Meine Erkenntnisse:
Kurze Texte fliegen relativ schnell, offensichtlich sieht *G* kurze Texte eher als Duplicate Content an. Grund: Der “Seitenrahmen”, also die Navigation und sonstige “festen” Dinge einer Seite überwiegen den kurzen Text, so daß eine solche Seite schneller fliegt als andere.
Deshalb: Ausreichend lange Texte schreiben, also so ab 300 Wörter aufwärts, wenn möglich hie und da ein Bild eingestreut…
Zudem ist eine gute “Durchblutung” der Seite mit Links aus den Texten heraus (nicht aus der “festen” Navigation heraus) sehr förderlich, daß *G* einzelne Seiten nicht vergisst.
Und schließlich habe ich gerade vor kurzem bemerkt, daß die meta description anscheinend auch ein Zeichen für *G* darstellt, eine Seite einzigartiger zu machen, sie also schön im Index zu halten. Deshalb gilt übrigens auch: Immer schön die Description einzigartig und ausreichend ausführlich ausfüllen.
@Peti: Deine Punkte treffen für mich leider alle nicht zu, da ich so gut wie gar keine kurzen Texte schreibe. Auch verlinke ich meine Artikel immer ordentlich gut selbst und dafür sind ja auch die ähnlichen Artikel da. Description habe ich auch überall. Tja…
Hallo nochmal!
Ich bin jetzt einige Zeit nicht mehr dran gewesen, aber ist dein Problem mit dem Verlust der URL aus dem Index eigentlich behoben gewesen oder hat Tante-G immernoch die Gedächtniskrankheit?
Ich kann da nur für meine Tante sprechen und die vergisst leider noch immer so einiges…das Langzeitgedächtnis hat deutlich gelitten…und einen Weg zu Besserung habe ich bisher nicht gefunden
Mit weihnachtlichen Grüßen
@mr.gene: Ich kann leider nur das Gleiche berichten. Es hat zwar geholfen die rausgefallenen Artikel zu aktualisieren, aber dafür fallen immer wieder andere raus und dann wurde mir das irgendwann zu blöd. Nix hilft wirklich und Google leidet unter wirklichen Gedächtnisschwächen
Dann bin ich zwar nicht beruhigt, aber zumindest insofern zufrieden, dass es nicht an mir liegt, sondern der Gedächtnisverlust schuld ist
@mr.gene: Ich habe in diese Problematik ja eine Menge Zeit reingesteckt und unterm Strich nun auch feststellen müssen, nachdem ich einige Zeit nichts mehr getan hatte, dass es für den A… war. Kurzfristige Besserung und dann wieder das Gleiche von vorne.
In meiner Sitemap liefere ich nur noch Startseite + Artikel aus (das ist ja auch das wichtigste in meinem Blog) und so sehe ich über die WMTs zumindest immer auch auf die Schnelle, wie viele Artikel fehlen.
Vielleicht hat Google auch eine Art “Relevanz” bzw. “Wichtigkeit” eingeführt und haut in diesem Sinne altes, was nicht so oft aufgerufen wird, oder eine Zeit lang gar nicht aufgerufen wurde, einfach raus.
An unseren Blogs selbst kann es m.E. nicht liegen, also ein technisches Problem etc. schließe ich aus. Außer jemand hat extreme Ladezeiten, da kann schon sein, dass mehr fliegt…
Damit habe ich weniger Probleme, am besten ist es noch, wenn man seine Sitemap in der Robots.txt verlinkt und ständig aktualisieren läßt – vor allem wenn man einen neuen Artikel schreibt. Das dauert dann zwar etwas … aber ok, es hilft
@Tobias: Den Eintrag der Sitemap in die robots.txt sowie die ständige Aktualisierung der Sitemap setze ich voraus