本文摘要网站狗升级到了3.0版,这个exp已经失效了,只对2.4版本有效。 作者:Seay 搜索引擎爬虫是在安全狗的白名单,我们只需要伪装成爬虫就OK了。 那安全狗是怎么判断爬虫的呢??我测试了一下,发现他用的很普通的方法,就是user-agent。大家都知道这个东西很好伪造。
网站狗升级到了3.0版,这个exp已经失效了,只对2.4版本有效。
作者:Seay
搜索引擎爬虫是在安全狗的白名单,我们只需要伪装成爬虫就OK了。
那安全狗是怎么判断爬虫的呢??我测试了一下,发现他用的很普通的方法,就是user-agent。大家都知道这个东西很好伪造。
觉得内容不错?我要