今天来说说怎样辨别Google蜘蛛。 点击Windows系统里的“开始” – “运行”,输入tracert 203.208.60.179,点击确定。 运行结果显示:crawl-203-208-60-179.googlebot.com 这种方法叫做反向DNS查找,和辨别百度蜘蛛真伪的操作是一样的。但我发现现在的采集越来越高明,也会伪造反向DNS来指向***.googlebot.com。这时候,我们需要验证运行结果的反向DNS得出的IP地址。 点击Windows系统里的“开始” – “运行”,输入tracert crawl-203-208-60-179.googlebot.com,点击确定。 运行结果得出的IP地址与原本检测IP对应即可。 希望这个分享对大家发现老奸巨猾的采集者有帮助。 (责任编辑:admin) |