我有一个/24networking中的几个网站，都经常被谷歌抓取。 通常这很好。 但是，当Google开始同时抓取所有网站时，支持这个IP块的一小组服务器可以承受相当大的负载。 使用谷歌网站pipe理员工具，您可以对给定域名上的googlebot进行速率限制，但是我还没有find一种方法来限制IPnetworking中的bot。 任何人都有这方面的经验？ 你是怎么解决的？
我已经设置了Postfix并创build了映射到gmail帐户的别名。 当我从我自己的（谷歌邮箱）帐户发送邮件时，邮件会通过邮件发送，但是如果外部的人邮寄给我，Google将不会接受来自我的服务器的邮件。 日志东西包含这个： Aug 20 13:47:09 Ubuntu-1204-precise-64-minimal postfix/smtpd[8249]: connect from mailout.example.com[1.1.1.1] Aug 20 13:47:09 Ubuntu-1204-precise-64-minimal postfix/smtpd[8249]: DB399E3318: client=mailout.example.com[1.1.1.1] Aug 20 13:47:09 Ubuntu-1204-precise-64-minimal postfix/cleanup[8253]: DB399E3318: message-id=<015e01ce9d9a$f988a750$ec99f5f0$@dk> Aug 20 13:47:09 Ubuntu-1204-precise-64-minimal postfix/qmgr[8230]: DB399E3318: from=<[email protected]>, size=3813, nrcpt=1 (queue active) Aug 20 13:47:09 Ubuntu-1204-precise-64-minimal postfix/smtpd[8249]: disconnect from mailout.example.com[1.1.1.1] Aug 20 13:47:10 Ubuntu-1204-precise-64-minimal postfix/smtp[8255]: DB399E3318: to=<[email protected]>, orig_to=<[email protected]>, relay=gmail-smtp-in.l.google.com[2a00:1450:4010:c04::1b]:25, delay=1.1, delays=0.22/0/0.14/0.76, […]
我正在为一个客户build立一个网站，我将主办和维护，我正在试图确定什么是最痛苦的设置。 我的想法是做到以下几点： 在client.mydomain.com设置客户端域 让客户端将*.client.com的DNSlogging更新到CNAME client.mydomain.com 从实际angular度来看，这对我来说是最好的select，因为那样我就不需要维护对DNS控制面板的访问权限，特别是如果他们想要使用它的话。 此外，如果我决定需要将网站移到不同的主机，我可以无缝地做到这一点，甚至不知道更新client.mydomain.com指向哪里。 这就是说，我担心的是，我会影响客户端的search引擎优化。 如果我影响search引擎优化，我只要去A-Record路线，并称它为好，但如果没有影响，CNAME路线似乎更好。 思考？ （顺便说一下，我确实在这个应用程序中包含Google地图，当我从不同的tld … client.mydomain.com和client.com点击应用程序时，API密钥对我大吼大叫。请求一个可以与CNAME域名一起工作的谷歌API密钥？我可以在代码中解决这个问题，但不知道是否有更简单的解决scheme。）
我开始了一个相对较新的网站，并将其提交给谷歌和一切。 我也使用谷歌的网站pipe理员工具。 我想知道如何找出谷歌的蜘蛛访问我的网站的频率。 我总是听到有人在论坛上谈论“我一个小时爬了250页”，等等…有软件可用吗？ 类似于谷歌分析的JavaScript方法？ 还是有什么东西来分析我的服务器的日志？ 谢谢
我看过很多使用公共STUN服务器的WebRTC客户端库，如下所示： "stun.l.google.com:19302", "stun1.l.google.com:19302", "stun2.l.google.com:19302", "stun3.l.google.com:19302", "stun4.l.google.com:19302", 我想知道上面的服务器是死的吗？ 因为我试过了： telnet stun.l.google.com 19302 telnet stun.l.google.com 3478 我得到以下回应： telnet: connect to address 74.125.204.127: Operation timed out telnet: Unable to connect to remote host 同样的事情发生在其他谷歌STUN服务器在列表中。 我无法得到任何回应，这是否意味着Google的STUN服务器不再可用？ 我的问题是：像上面的telnet是确定一个服务是否存活的正确方法？
处理大量数据的公司（例如Google或Facebook）如何备份所有内容？ 根据Google平台上有关维基百科的文章，Google估计有45万个以上的服务器，每个都有80多GB的硬盘。 这是很多数据。 他们真的为每1 GB的数据保留1 GB以上的备份吗？
我想知道Google服务器在哪里，以及他们的DNS查询是如何工作的。 我现在在德国。 如果我打电话google.de（德语的Google页面）是位于德国的所有search服务器，或者他们在世界各地分裂？ 如果我打电话到google.com，它会自动连接到美国服务器，还是先尝试在德国服务器上查找search结果？ 我想知道，因为我注意到pinging google.com时真正的低延迟。 如果服务器居住在德国之外，我无法想象这么低的ping。 那么，关于search关键字的查找是如何工作的，关于连接到他们的服务器呢？ 我尝试了traceroute，但补偿不了多less。 它取决于关键字吗？ 这是否取决于几个不同的因素，哪个服务器实际上被使用？
你认为什么样的情况是这样的服务的好select？ 我一直关心我们的ISP的DNS – 他们正在redirect到广告页面，并显示其他可信的完整性迹象。 我正在考虑OpenDNS – 但不觉得他们会好得多 – 听到有关他们的杂事。 我们的操作很小，所以我不想要太复杂。 而且我当然不想要一堆额外的麻烦。
正确指导根域到Heroku需要此function： https://devcenter.heroku.com/articles/custom-domains#cname-functionality-at-the-apex 一些注册商，如DNSimple，支持它。 新Google Domains是否支持？
我想知道谁在做DNS地理位置的google.com？ 根据请求的地理位置，我的意思是检测用户的位置，计算最近的服务器群到他的位置，然后将请求路由到选定的位置。 我们正在评估不同厂商提供的这个服务的几个报价，我想我应该知道那些大男孩正在使用什么。