Anlegen der robots.txt
Gibt es Bereiche Ihres Internetauftritts, die Suchmaschinen nicht erfassen und in die Ergebnislisten aufnehmen sollen? Bieten Sie eine mobile Variante Ihrer Website an, die Sie ausschließen möchten, um nicht aufgrund von „double content“, d.h. zwei Seiten mit identischen Texten, bei Google & Co. herabgestuft zu werden?
Solche und andere Anweisungen geben Sie den Suchmaschinen mithilfe der robots.txt. Anstatt diese Datei aufwendig selbst zu programmieren, können Sie die robots.txt mit web to date 8 komfortabel erstellen lassen – Vorkenntnisse sind dafür nicht nötig.
Zurück zu:
