it-swarm.com.de

Soll ich alles in die Sitemap aufnehmen oder nur neue Inhalte?

Soll ich für eine Website mit dynamischem Inhalt (ständig werden neue Inhalte hinzugefügt) nur den neuesten Inhalt in die Sitemap aufnehmen oder soll ich alles aufnehmen (mit einem Sitemap-Index)? Was sind die Best Practices für Sitemaps? für große Websites?

Gibt es überhaupt eine Möglichkeit, dass Google (und andere Suchmaschinen) nur die Seiten in der Sitemap crawlen?

Vielen Dank

Aktualisieren:
Auch eine Idee, wie Stackoverflow damit umgeht? Ich würde gerne wissen, aber leider (auch verständlicherweise ) haben sie den Zugriff auf ihre Sitemap gesperrt.

13
Mee

Alle Seiten einschließen. Der Zweck der XML-Sitemap besteht darin, den Suchmaschinen alle Ihre Inhalte mitzuteilen. Nicht nur das Neue.

Von der Website sitemaps.org (Schwerpunkt Mine):

Sitemaps sind eine einfache Möglichkeit für Webmaster, Suchmaschinen über Seiten auf ihren Websites zu informieren, die zum Crawlen zur Verfügung stehen .

Wenn Sie viel Inhalt haben, können Sie mehrere XML-Sitemaps verwenden.

Wenn Sie Inhalte haben, die nicht gecrawlt oder indiziert werden sollen, müssen Sie die Suchmaschinen ausdrücklich anweisen, diese Seiten nicht zu crawlen und zu indizieren. Verwenden Sie eine robots.txt - Datei, um alle Seiten oder Verzeichnisse zu blockieren, die Sie nicht gecrawlt haben möchten. Sie können auch ein Meta-Tag verwenden. Sie können in einer XML-Sitemap jedoch nicht angeben, dass nicht aufgelistete Seiten nicht gecrawlt werden sollen.

13
John Conde