AH01797：客户端被服务器configuration拒绝：/ usr / share / doc

从一段时间以来（一个月以上），我在apache日志中看到类似以下的行：

180.76.15.138 - - [24/Jun/2015:16:13:34 -0400] "GET /manual/de/mod/module-dict.html HTTP/1.1" 403 396 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" 180.76.15.159 - - [24/Jun/2015:16:28:34 -0400] "GET /manual/es/mod/mod_cache_disk.html HTTP/1.1" 403 399 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" 66.249.75.86 - - [24/Jun/2015:16:18:01 -0400] "GET /manual/es/programs/apachectl.html HTTP/1.1" 403 436 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" [Wed Jun 24 16:13:34.430884 2015] [access_compat:error] [pid 5059] [client 180.76.15.138:58811] AH01797: client denied by server configuration: /usr/share/doc/apache2-doc/manual/de/mod/module-dict.html [Wed Jun 24 16:18:01.037146 2015] [access_compat:error] [pid 2791] [client 66.249.75.86:56362] AH01797: client denied by server configuration: /usr/share/doc/apache2-doc/manual/es/programs/apachectl.html [Wed Jun 24 16:28:34.461298 2015] [access_compat:error] [pid 2791] [client 180.76.15.159:25833] AH01797: client denied by server configuration: /usr/share/doc/apache2-doc/manual/es/mod/mod_cache_disk.html 

这些请求似乎确实来自Baiduspider和Googlebot（使用反向DNS进行检查，如此处所述）：

 user@server:~$ host 66.249.75.86 86.75.249.66.in-addr.arpa domain name pointer crawl-66-249-75-86.googlebot.com. user@server:~$ host crawl-66-249-75-86.googlebot.com crawl-66-249-75-86.googlebot.com has address 66.249.75.86 

我已经阅读了类似这个和这个主题的类似问题，但对于这些，这些错误实际上是阻止网站正常工作。 在我的情况下，机器人尝试访问的html页面不存在，因此这是Apache的预期行为。 唯一令人烦恼的是，虽然Google网站pipe理员工具没有显示任何错误，但Google在编制我的网站时似乎很慢。

我正在使用以下vhostconfiguration的Apache版本2.4.7：

• Linux apache mod_auth_sspi安装
• 证书链丢失了apache 2.4
• 与PHP-FPM的Apache不工作
• Apache / nginx：固定客户端证书和FastCGI
• mod_dims软件包的Ubuntu？

 <VirtualHost *:80> ServerName example.com ServerAlias www.example.com DocumentRoot "/var/www/example.com/public" <Directory /> Options None AllowOverride None Order Deny,Allow Deny from all Require all denied </Directory> <Directory "/var/www/example.com/public"> Options None AllowOverride FileInfo Limit Options=FollowSymLinks Order Allow,Deny Allow from all Require all granted </Directory> ErrorLog /var/log/apache2/example.com/error.log CustomLog /var/log/apache2/example.com/access.log combined </VirtualHost> 

我的问题是：

1. 为什么Baiduspider和Googlebot反复尝试访问我网站上的内容，这些内容不在网站上的任何链接提及？
2. GET /manual/de/mod/...这样的请求是如何映射到/usr/share/doc/apache2-doc/manual/de/mod/...而我的理解是，他们应该到/var/www/example.com/public/manual/de/mod/... ？
3. 一般来说：我是否应该担心这些线路是错误configuration的标志，或者是否有解释？