Googlebot请求其他网站上的1个网站的网页

问题 :使用Prerender.io索引/存储一个站点的页面,我不断收到只存在于我的旧站点上的path请求

例如 :Prerender我会看到Googlebot要求http://www.new-site.com/old/site/path

我有一个旧网站old-website.com和一个新的( new-site.com )。

这两个网站都在不同的IP地址的服务器上(虽然old-website曾经住在new-site的服务器上), new-site在任何站点地图中都没有这些旧path的URL,这些页面返回404的。

我不知道在哪里告诉谷歌停止请求这些网页。 对于快速解决scheme,我已经将这些添加到了我的robots.txt中,但感觉就像短期的黑客攻击。 新网站是单页面应用程序,旧网站是wordpress。

有几件事可能会帮助你

你有在网站上301redirect吗? 如果不是马上做,以及需要redirect的任何相关页面。

您是否通过search控制台更新了网站地图?

你有没有尝试手动切换链接?

在Google网站pipe理员论坛中提出这个问题,这个问题不仅受到直接访问Google的高级用户的监控,还受到Google员工的监控。