it-swarm.com.de

403 Verbotener Fehler?

Ich habe vor kurzem Xenu Link Checker auf meiner Website ausgeführt. Ich verlinke auf mehrere Wikipedia-Seiten und jede Wiki-Seite generiert einen 403-Code. Hier ist ein Beispiel für die Nachricht:

http://en.wikipedia.org/wiki/Alaska
    error code: 403 (forbidden request), linked from page(s):
http://www.mysite.com/page.html

Ich kenne einen 403-Fehlercode:

A 403 Forbidden is an HTTP status code returned by a web server when a user 
requests a web page or media that the server does not allow them to. In other 
words, the server can be reached, but the server declined to allow access to 
the page. 

Meine Frage ist, warum es diesen Fehler erzeugt? Ich kann ohne Probleme auf die Seite klicken. Hat es etwas damit zu tun, dass der Checker Scans ausführt?

1
L84

Das liegt wahrscheinlich daran, dass Xenu versucht, die Seite aufzurufen, um zu überprüfen, ob der Link gültig ist. Wikipedia blockiert ihn jedoch, weil es sich um einen nicht autorisierten Bot handelt. Sie blockieren wahrscheinlich eine lange Liste von Crawlern und Bots, die sich nicht auf Suchmaschinen beziehen (d. H. Link Checker, Spammer, Scraper usw.).

3
John Conde