Frage: Warum werden meine Seiten nicht in die Suchmaschinen aufgenommen?

Die Suchmaschinen sind Maschinen und folgen formalen Prinzipien. Deshalb sollten Ihre Webseiten für sie zugänglich sein. Man spricht hier auch von Accessability für Suchmaschinen. Wenn die Suchmaschine Ihre Webseite nicht lesen und ungehindert besuchen kann, kann sie Ihre Webseiten auch nicht indexieren und in ihren Datenbestand aufnehmen.

Das Ausbleiben einer Indexierung kann folgende, in der Tat häufig auftretende Ursachen haben:

• Die Suchmaschinen können eine passwortgeschützte Webseite nicht lesen. Wenn ein Besucher sich registrieren und einloggen muss, wird diese Webseite von den Suchmaschinen ignoriert. Es ist doch offenkundig, daß sich ein Roboter (zumindest noch) nicht registrieren kann.
• Der Besucher wird automatisch weitergeleitet. Solche Weiterleitungen werden von Robotern nicht immer verfolgt und in bestimmten Fällen sogar bestraft.
• Ihre Seiten werden durch eine robots.txt - Datei für die Roboter gesperrt. In der Regel wird der Spider einer Suchmaschine diese Seiten erst gar nicht besuchen.
• Ihre Seiten bestehen überwiegend aus Bildern, Flash-Animationen oder Ähnlichem. Im diesen Fall finden die Roboter keine brauchbaren Informationen für die Suchmaschinen. Die Suchmaschinen verstehen in der ersten Linie nur Texte.
• Ihre Webseiten werden aus einem Content Management System oder Datenbanken dynamisch generiert und die daraus erstandene URLs sind nicht suchmaschinenfreundlich. Solche URLs beinhalten zum Beispiel «?id» und sehen ungefähr so aus: “www.shop.de/shop.asp?id=1266&else=4523&else2=7890&else3=128”.
• Ihr Internetauftritt arbeitet mit Session-ID´s.
• Ihr Webseiten waren eine Weile offline und für die Roboter nicht erreichbar.
• Sie setzen Suchmaschinenspam oder andere unzulässige Optimierungs-Methoden ein.
• Ihre Webseite liegt auf einem Host, der von der Suchmaschinen nicht berücksichtigt oder bestraft wird. Zum Beispiel wegen Spam (Stichwort Bad Neighbourhood).