it-swarm.com.de

Kombinieren Sie User-Agents in robots.txt

Können Benutzeragenten zusammen aufgelistet werden, gefolgt von ihren gemeinsamen Regeln wie in einem robots.txt?

User-agent: Googlebot
User-agent: ia_archiver #Alexa
User-agent: BingPreview #Microsoft
User-agent: bingbot #Microsoft
User-agent: MSNBot #Microsoft
User-agent: Slurp #Yahoo
User-agent: Ask Jeeves/Teoma #Ask
Disallow: /adm30_buds/
10
davidcondrey

Ja. Vorausgesetzt, Ihre Agentennamen sind korrekt angegeben, sollte dies funktionieren. Hier ist eine Ressource, wenn Sie mehr lesen möchten. https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt

9
closetnoc