今天来说说怎样辨别Google蜘蛛。
点击Windows系统里的“开始” – “运行”,输入tracert 203.208.60.179,点击确定。
运行结果显示:crawl-203-208-60-179.googlebot.com
这种方法叫做反向DNS查找,和辨别百度蜘蛛真伪的操作是一样的。但我发现现在的采集越来越高明,也会伪造反向DNS来指向***.googlebot.com。这时候,我们需要验证运行结果的反向DNS得出的IP地址。
点击Windows系统里的“开始” – “运行”,输入tracert crawl-203-208-60-179.googlebot.com,点击确定。
运行结果得出的IP地址与原本检测IP对应即可。
希望这个分享对大家发现老奸巨猾的采集者有帮助。本文地址:http://yihuiblog.com/a/341.html,转载请注明原文链接。
亲爱的:若该文章解决了您的问题,可否收藏+评论+分享呢?
文章评论 本文章有个评论