我有一个使用Apache的负载平衡器： http ： //httpd.apache.org/docs/2.2/mod/mod%5Fproxy%5Fbalancer.html
问题是我们的带宽。 我们试图获得更多，但是ISP必须运行新的线路，并且不断推迟我们，所以我想节省蜘蛛以节省带宽，直到获得更多。 我尝试了mod cband，但它不能在负载平衡的虚拟主机上工作。
有没有任何Apache模块，可以抑制负载平衡虚拟主机上的stream量？
不是apache模块，但是您可以尝试使用robots.txt中的“Crawl delay”指令来减慢行为良好的蜘蛛。
http://en.wikipedia.org/wiki/Robots_exclusion_standard#Crawl-delay_directive