it-swarm.com.de

robots.txt und nicht zulassen

Welches ist richtig?

User-agent: *
Disallow: index.php

oder

User-agent: *
Disallow: /index.php

um alle Seiten wie index.php?day=7index.php?day=15index.php?day=30 zu blockieren

2
ilhan

Sie können die folgende robots.txt-Datei verwenden, wenn Sie verhindern möchten, dass alle Roboter auf Ihre Seiten zugreifen.

 # robots.txt für www.domain.com zum Blockieren aller Bots 
 
 User-Agent: * 
 Disallow: /

Wenn Sie alle URLs blockieren möchten, die ein Fragezeichen (?) Enthalten, können Sie das folgende Format verwenden

# robots.txt für www.domain.com zum Blockieren der URL mit? markiere 
 
 User-Agent: * 
 Disallow: /*?

Weitere Informationen zum Schreiben von robots.txt finden Sie unter folgendem Link: So erstellen Sie Robots.txt-Dateien

2
Rajesh Durai

Die zweite ist die bessere Form, da sie die index.php eindeutig als in web root und nicht in einem anderen Unterverzeichnis kennzeichnet.

3
John Conde