分类：webdriver

2021
06-09

Python中selenium库的用法详解

selenium主要是用来做自动化测试，支持多种浏览器，爬虫中主要用来解决JavaScript渲染问题。模拟浏览器进行网页加载，当requests,urllib无法正常获取网页内容的时候一、声明浏览器对象注意点一，Python文件名或者包名不要命名为selenium，会导致无法导入fromseleniumimportwebdriver#webdriver可以认为是浏览器的驱动器，要驱动浏览器必须用到webdriver，支持多种浏览器，这里以Chrome为例browser=webdriver.Chrome()二、访问... 继续阅读 >

2021
01-13

用python-webdriver实现自动填表的示例代码

在日常工作中常常需要重复填写某些表单，如果人工完成，费时费力，而且网络延迟令人十分崩溃。如果能够用程序实现自动填表，效率可以提高一倍以上，并且能够移植到多台计算机，进一步提高工作效率。webdriver是python的selenium库中的一个自动化测试工具，它能完全模拟浏览器的操作，无需处理复杂的request、post，对爬虫初学者十分友好。一、环境配置python3.6+selenium库+xlrd库+xlwt库其中xlrd和xlwt库用于读写excel... 继续阅读 >

2020
10-30

详解Selenium-webdriver绕开反爬虫机制的4种方法

之前爬美团外卖后台的时候出现的问题，各种方式拖动验证码都无法成功，包括直接控制拉动，模拟人工轨迹的随机拖动都失败了，最后发现只要用chromedriver打开页面，哪怕手动登录也不可以，猜测driver肯定是直接被识别出来了。一开始尝试了改useragent等方式，仍然不行，由于其他项目就搁置了。今天爬淘宝生意参谋又出现这个问题，经百度才知道原来chromedriver的变量有一个特征码，网站可以直接根据特征码判断，经百度发现有4种... 继续阅读 >

2020
10-09

Selenium webdriver添加cookie实现过程详解

一.webdriver中常用的cookie方法webdriver中提供了操作cookie的相关方法：get_cookies()获得cookie信息add_cookie(cookie_dict)添加cookiedelete_cookie(name)删除特定(部分)的cookiedelete_all_cookies()删除所有的cookie二.add_cookie()的用法1.源码中的解释源码中简略的向我们展示了如何添加cookie，源码如下：defadd_cookie(self,cookie_dict):"""Addsacookietoyourcurrentsession.:A... 继续阅读 >