在我的网站的日志中,有很多访问HTTP参考设置为类似垃圾邮件的网站(通常是俄罗斯网站,我注意到)。 我假设他们正在做的只是使用一个networking爬虫来访问他们发现的任何网站,并以HTTP引用者作为他们网站的URL。
这不仅令人讨厌,因为它歪曲我有多less访问者的统计数据,我真的不明白他们希望达到什么目的。 那是我罕见的一次爬行我的日志,我看到一个referer设置为“spammyrussiansite.ru”,并决定访问它? 有更有效的方式来垃圾邮件您的网站的url比,没有?
我将在https://webmasters.stackexchange.com/上search一些优秀的答案,但只需要大多数人使用日志分析器来生成访问者统计信息。 大多数日志分析器将这些查阅者转换为活动链接,太多的人不会屏蔽他们的统计页面,所以当索引你的垃圾邮件发送者得到pageRank
至less这是十多年前的原因。 但是,如果今天依然有效,我还有一些疑问。
你会惊讶有多less人在他们的谷歌分析中看到一个未知的引用者,并转向在线论坛,询问为什么这个特定的网站是指向他们的stream量。 在这个过程中,他们会发布一个链接给引用者,而引用者经常会得到一个免费的dofollow链接!
我通过自己search一个违规域名发现了这个问题,并且遇到了很多人试图弄清楚发生了什么的论坛。
前面的答案提到了分析器日志,这确实会创build一个活动的链接,但是这些日志不会被僵尸程序抓取,除非有人链接到它们,所以垃圾邮件发送者很难创build一个有信誉的引用stream到这些日志。