2021
01-08
01-08
python实现三种随机请求头方式
相信大家在爬虫中都设置过请求头user-agent这个参数吧?在请求的时候,加入这个参数,就可以一定程度的伪装成浏览器,就不会被服务器直接识别为spider.demo.code,据我了解的,我很多读者每次都是直接从network中去复制user-agent然后把他粘贴到代码中,这样获取的user-agent没有错,可以用,但是如果网站反爬措施强一点,用固定的请求头可能就有点问题,所以我们就需要设置一个随机请求头,在这里,我分享一下我自己一...
继续阅读 >