我们有一个专门的开发服务器,只在公共networking上运行testingPHP应用程序。 我们已经为该站点设置了基于会话的身份validation。
我们遇到的问题是robots.txt的访问日志中logging了很多404。 所以,我们想要阻止/忽略lighttpd上的这些请求来节省一些带宽。
我们如何在lighttpd / 1.4.31中做到这一点?