it-swarm.com.de

Alle IPs von Suchmaschinen-Bots?

wenn ich alle Suchmaschinen-Bots herausfiltern möchte, zum Beispiel nach einem Skript, das die Benutzer zählt, die online sind, gibt es eine Website oder eine Liste, die immer auf dem neuesten Stand ist und die IP-Adressen aller Bots enthält? Denn wenn ich sie manuell in mein Skript einfüge, muss ich sie jeden Tag ändern, da neue IPs kommen.

Danke für Ihre Hilfe!

2
phpheini

Sie sollten Suchmaschinen filtern, indem Sie nach Benutzeragenten suchen, nicht nach IP.

3
malinois

Aus John Conde's Antwort auf eine Frage von mir , siehe IP-Listen . Diese Site listet bekannte IPs auf, die von jeder Suchmaschine verwendet werden.

Das Filtern nach User-Agent ist nicht zuverlässig , da es extrem leicht gefälscht werden kann. Google empfiehlt, den Benutzeragenten zu überprüfen und anschließend eine DNS-Suche durchzuführen. Auf diese Weise wird die Filterung nicht unterbrochen, wenn neue IP-Adressen hinzugefügt werden. Sie müssen natürlich Ihren DNS-Bewertungscode aktualisieren, wenn neue Suchmaschinen oder Bots auftauchen, was nicht allzu oft vorkommt.

2
Itai