怎样辨别Google蜘蛛
日期: 2015-05-26 分类: 个人收藏 317次阅读
怎样辨别Google蜘蛛。
点击Windows系统里的“开始” – “运行”,输入tracert 203.208.60.179,点击确定。
运行结果显示:crawl-203-208-60-179.googlebot.com
这种方法叫做反向DNS查找,和辨别百度蜘蛛真伪的操作是一样的。但我发现现在的采集越来越高明,也会伪造反向DNS来指向***.googlebot.com。这时候,我们需要验证运行结果的反向DNS得出的IP地址。
点击Windows系统里的“开始” – “运行”,输入tracert crawl-203-208-60-179.googlebot.com,点击确定。
运行结果得出的IP地址与原本检测IP对应即可。
除特别声明,本站所有文章均为原创,如需转载请以超级链接形式注明出处:SmartCat's Blog
下一篇: 全面的前端面试题
精华推荐