为什么网站知道我的爬虫使用了代理?( 二 )


【为什么网站知道我的爬虫使用了代理?】 
总结网站要检测爬虫有非常多的方法,要检测一个请求是不是使用了代理来发起,也有很多种方法 。而且这些方法并不需要什么高深的技术,一个初级工程师都能写出来 。
那些自以为给爬虫加了代理就可随便爬网站的人,你们不仅害了自己,还害了别的爬虫 。

原文链接:
https://mp.weixin.qq.com/s/8umBERSnaw0AdwodQkElUg




推荐阅读