Google Apps Engine useragent的大量抓取请求

我受到Google AppEngine-Google UserAgent的严重影响,在http服务器上每秒接收5/6个请求。 这个机器人像GoogleBot一样抓取我的网站。

以下是访问日志中的url示例。

“GET /some-url/etc-123.htm HTTP / 1.1”200 4707“ – ”“AppEngine-Google;(+ http: //code.google.com/appengine ; appid:harpy000)“

我检查了它在Google Inc.注册的IP地址

任何人都可以告诉我,我可以向Google Inc.报告滥用行为或有关此问题的任何信息。

谢谢!

您可以使用以下表单报告Google App Engine滥用行为: http : //code.google.com/support/bin/request.py?contact_type=AppEngineContact 。 该应用程序有一个网页在这个地址: http : //harpy000.appspot.com/ 。 还有一个链接到Twitter页面(主人?),也许你可以联系他。