it-swarm.com.de

Sollte eine Website nur für Mobilgeräte die Datei robots.txt verwenden?

Ich habe eine mobile Site, die sich von der entsprechenden Desktop-Site unterscheidet. Die Websites haben denselben Inhalt, die Dateien der mobilen Website befinden sich jedoch in einem völlig anderen Verzeichnis. Die Hauptseite hatte eine robots.txt-Datei, aber ich frage mich, ob ich auch eine für die mobile Seite brauche. Hat jemand irgendwelche Gedanken?

1
Wigley

Wenn beide Versionen der Site denselben Inhalt haben, treten Probleme mit doppeltem Inhalt auf, unabhängig davon, wo sich die Dateien auf dem Server befinden. Aus dieser Sicht sind kanonische URLs die beste Lösung für Sie. Eine robots.txt-Datei kann nur dann wirklich etwas bewirken, wenn auf der mobilen Version der Site Inhalte vorhanden sind, die auf der regulären Site nicht vorhanden sind und nicht gecrawlt werden sollen. Dann müssten Sie eine robots.txt verwenden, um diese Seiten zu blockieren.

2
John Conde

Ich stimme dem kanonischen URL-Vorschlag zu. So können Sie beispielsweise das Meta-Tag rel="canonical" auf den Seiten der Mobilversion einfügen, wobei der kanonische Link auf die ursprüngliche Hauptseite der Website verweist.

Sie können auch erwägen, die Meta-Tags "robots" content="no-index, follow" zu verwenden, um zu verhindern, dass die Such-Bots den doppelten Inhalt indizieren, aber den Fluss der Links auf Ihrer Website zu bewahren.

0
knooq