it-swarm.com.de

Welche Header / META-Header sollte ich für ein Infinite-Link-System wie einen Kalender verwenden?

Ich habe einen Webkalender, alles meine eigene Arbeit. Es funktioniert gut. Aber ich sehe in den Protokollen eine Reihe von Suchindizierern, die ständig versuchen, jeden Link zu verfolgen. Es könnte Monat für Monat und Tag für Tag bis ins Jahr 3000 voranschreiten. Ich denke nicht, dass die Indexer dem folgen sollten, da es wenig Sinn macht. Welche HTTP-Header oder META-Header sollte ich auf den Kalender anwenden, um sie wissen zu lassen, dass es sich um einen Kalender handelt, aber sie sollten nicht jedem Link auf diesen Seiten folgen?

5
bunzip

Verwenden Sie rel = "nofollow" für alle Links, denen keine Spinnen folgen oder die nicht indexiert werden sollen (d. H. Tage, Monate usw.).

Verwenden Sie robots.txt , um Pfade anzugeben, die ignoriert werden sollen.

Wenn es sich bei Ihrer Website um eine Webanwendung handelt, sollten Sie die Verwendung von robots.txt in Betracht ziehen, um das Indizieren der gesamten App zu unterbinden.

User-agent: *
Disallow: /
3
Nick

Wahrscheinlich wäre einfach <a rel='nofollow' ... auf den Kalendernavigationslinks (im Gegensatz zu den Ereignissen, die auf bestimmte Ereignisse verweisen) in Ordnung.

1
Kzqai