分类：防止webdriver封爬虫

2021
01-17

c# Selenium爬取数据时防止webdriver封爬虫的方法

背景大家在使用Selenium+Chromedriver爬取网站信息的时候，以为这样就能做到不被网站的反爬虫机制发现。但是实际上很多参数和实际浏览器还是不一样的，只要网站进行判断处理，就能轻轻松松识别你是否使用了Selenium+Chromedriver模拟浏览器。其中window.navigator.webdriver就是很重要的一个。问题窥探正常浏览器打开是这样的 模拟器打开是这样的 ChromeOptionsoptions=null;IWebDriverdriver=null;... 继续阅读 >