易腐烂出版社经常发布一个受pipe理的用户代理黑名单,阻止那些使用htaccess指令的坏机器人。
文章在这里find: http : //perishablepress.com/press/2009/03/29/4g-ultimate-user-agent-blacklist/
你会推荐使用这样的黑名单吗? 主要目标是减less我的服务器上的请求,因为我看到很多stream量被访问我的网站的机器人消耗。
干杯
一般来说,如果它满足您的要求/需求,除非您可以通过定义和/或方法find具体的冲突。 审慎的方法是在最初的实施过程中非常仔细地进行监督,以确保它符合您的需求,而不会引入任何意料之外的/意外的副作用。
你最好用robots.txt来控制行为良好的机器人,并要求恶意机器人限制速度。 你不能使用客户控制的任何行为不良的机器人,因为他们可以修改自己以逃避你的filter。