Bis vor zirka einem halben Jahr funktionierte die robots.txt noch so wie es sollte. Doch auf einmal wurden über die robots.txt gesperrte Seiten in den Google Index aufgenommen wurden. Zwar ohne Titel und ohne Beschreibung, aber immerhin da. “Das kann nicht gut sein”, dachte ich mir, als ich davon vor einiger Zeit ziemlich viele für meinen Shop entdeckte (zum Beispiel Session IDs) und begab mich auf einen etwas längeren Weg der Ursachen Forschung. Bis am Ende dabei herauskam: Die Sperrungen über die robots.txt waren schuld. » weiter lesen »
Wie ich ja bereits vor kurzem mitteilte, laufen bei mir in letzter Zeit ziemlich viele seltsame 404 Seiten auf. Diesbezüglich habe ich die Tage bei Cywhale einen sehr interessanten Artikel gefunden Sicherheit / Wordpress absichern und gegen bekannte Angreifer einige Dinge auf meinem Blog implementiert. Unter anderem hat der bekannte libwww-perl* User Agent, der auch schon zahlreiche Angriffe gegen den Wordpress Coreblock gestartet hatte, bei mir in letzter Zeit sein Unwesen getrieben. » weiter lesen »
Der ein oder andere von Euch mag sich bei diesem Titel jetzt wohl denken, dass die „alte Crazy“ wohl einen an der Birne hat. Vor kurzem beschwert sie sich, dass Google Blog Artikel aus dem Index verliert und nun will sie absichtlich einzelne URLs aus dem Google Index verschwinden lassen. Wie passt das denn zusammen? Eigentlich gar nicht aber irgendwie auch wieder schon. Es gibt hin und wieder so Fälle, da wird es notwendig, einzelne URLs aus dem Google Index verschwinden zu lassen… » weiter lesen »
Um eine Domain oder eine Seite umzuleiten, können mehrere Versionen der Umleitungen benutzt werden. Bekannt sind vor alle die Umleitungen mit den Status Codes 301 und 302. Während der 301 redirect für eine dauerhafte Umleitung steht (301 Moved Permanently), steht der 302 redirect nur für eine vorübergehende Umleitung (302 Found). Die im 302 redirect angegebene Adresse stellt also nur ein vorübergehendes Ziels dar, die Gültigkeit der alten URL bleibt bestehen. » weiter lesen »
Hin und wieder kommt es vor, dass sich einzelne URLs ändern und man gezwungen ist, auf eine automatische Weiterleitung auf die neue URL zurückzugreifen. Wichtig vor allem, wenn die alte URL noch erreichbar ist, um den so genannten Double Content zu vermeiden, der dazu führt, dass die Suchmaschinen sich für die in ihren Augen richtige URL entscheiden, was oft nicht die gleiche Sichtweise des Webmasters darstellt. » weiter lesen »
Per Standard sind in einem Wordpress Blog einfach alle möglichen Seiten für die Indizierung der Suchmaschinen freigegeben. So kommt es vor, dass die Beiträge mehrfach im Index der Suchmaschinen enthalten sind, auf der Startseite, in den Kategorien-Seiten, in den Archiv-Seiten, in den Tags-Seiten, bei den Feeds usw. Sinnvoll oder nicht, darüber scheiden sich die Geister. Wer die Indizierungen seines Blogs einfach und sauber halten möchte, und den so genannten Double Content vermeiden möchte, kann auf Hilfsmittel zurückgreifen. » weiter lesen »
In den Wordpress Themes gibt es mit der Datei 404.php die Möglichkeit, individuelle 404 Seiten zu erstellen und diese beispielsweise mit einem Suchformular auszustatten. Ebenso gibt es einen individuell programierbaren Bereich, der den Blog anweist, dass sobald kein entsprechender Beitrag gefunden wird, beispielsweise das Suchformular auszugeben. » weiter lesen »