分类：selenium

2021
02-28

Python Selenium操作Cookie的实例方法

有了Selenium，还可以轻松操作Cookies，比如获取、添加、删除Cookies。具体代码如下:fromseleniumimportwebdriverbrowser=webdriver.Chrome()browser.get('https://www.zhihu.com'print(browser.get_cookies())#browser.add_cookie({'aa':'aa','bb':'bb'})#print(browser.get_cookies())browser.delete_all_cookies()print(browser.get_cookies())这里需要注意的是，添加cookie时，长度应该和你获得的cookie长度一样。删除... 继续阅读 >

2021
02-28

Python Selenium异常处理的实例分析

1、说明在使用selenium时，不可避免的会遇到一些异常情况，比如超时、没有找到节点的错误等等。一旦出现这样的错误，程序就不能再运行了。这里我们可以使用tryexcept语句来捕捉异常。2、实例fromseleniumimportwebdriverfromselenium.common.exceptionsimportTimeoutException,NoSuchElementExceptionbrowser=webdriver.Chrome()try:browser.get('https://www.baidu.com')exceptTimeoutException:print('超时')try:... 继续阅读 >

2021
02-23

Python中使用Selenium环境安装的方法步骤

环境准备已正确安装python环境,已安装chrome浏览器或者firefox浏览器使用python--version命令如果输出python版本则python安装成功安装selenium 使用pip命令安装seleniumpipinstallselenium下载chrome驱动或者firefox驱动selenium的chrome驱动(国内阿里像)selenium的firefox驱动(github地址)注意:下载对应版本的驱,点击浏览器三个点-帮助-关于GoogleChrome即可查看浏览器版本将驱动放入环境变量因为python目录... 继续阅读 >

2021
02-21

python基于selenium爬取斗鱼弹幕

针对弹幕的爬取我们如果只需要获取看到的网页里面的而数据，使用selenium就能实现，对于直播平台来说，往往有第三方平台api让你获取数据（可以获取发弹幕，发弹幕者的名字礼物等等，这需要客户端向弹幕服务器发送登录请求，心跳信息的发送等等）只获取弹幕信息储存到txt文件中，上代码，上图片代码如下：importtimefromseleniumimportwebdriverchrome_options=webdriver.ChromeOptions()#使用headless无界面浏览器模式#chr... 继续阅读 >

2021
02-20

使用java + selenium + OpenCV破解网易易盾滑动验证码的示例

网易易盾：dun.163.com*验证码地址：https://dun.163.com/trial/jigsaw*使用OpenCv模板匹配*Java+Selenium+OpenCV产品样例接下来就是见证奇迹的时刻！注意！！！·在模拟滑动时不能按照相同速度或者过快的速度滑动，需要向人滑动时一样先快后慢，这样才不容易被识别。模拟滑动代码↓↓↓/***模拟人工移动*@paramdriver*@paramelement页面滑块*@paramdistance需要移动距离*/publicstaticvoidmove(WebD... 继续阅读 >

2021
02-01

Python Selenium破解滑块验证码最新版(GEETEST95%以上通过率)

一、滑块验证码简述    有爬虫，自然就有反爬虫，就像病毒和杀毒软件一样，有攻就有防，两者彼此推进发展。而目前最流行的反爬技术验证码，为了防止爬虫自动注册，批量生成垃圾账号，几乎所有网站的注册页面都会用到验证码技术。其实验证码的英文为CAPTCHA（CompletelyAutomatedPublicTuringtesttotellComputersandHumansApart），翻译成中文就是全自动区分计算机和人类的公开图灵测试，它是一... 继续阅读 >

2021
01-29

selenium+python实现基本自动化测试的示例代码

安装selenium打开命令控制符输入：pipinstall-Uselenium火狐浏览器安装firebug：www.firebug.com，调试所有网站语言，调试功能SeleniumIDE是嵌入到Firefox浏览器中的一个插件，实现简单的浏览器操作的录制与回放功能，IDE录制的脚本可以可以转换成多种语言，从而帮助我们快速的开发脚本，下载地址：https://addons.mozilla.org/en-US/firefox/addon/selenium-ide/如何使用IDE录制脚本：点击seleniumIDE——点击录制——开... 继续阅读 >

2021
01-27

Python爬虫实现selenium处理iframe作用域问题

项目场景：在使用selenium模块进行数据爬取时，通常会遇到爬取iframe中的内容。会因为定位的作用域问题爬取不到数据。问题描述：我们以菜鸟教程的运行实例为案例。按照正常的定位会以文本块生成xpath为/html/body/text()。这样的话根据xpath进行如下代码编写。#!/user/bin/#-*-coding:UTF-8-*-#Author:Masterfromseleniumimportwebdriverimporttimedriver=webdriver.Chrome(executable_path="./chromedriver")driver.get... 继续阅读 >

2021
01-26

详解用selenium来下载小姐姐图片并保存

下载小姐姐图片并保存请求的地址伪装定位元素下载图片保存好了下面开始我们的实战，这个是我们今天访问的url：url='http://pic.netbian.com/4kmeinv/'1，先把包给导进来：importrequestsfromselenium.webdriverimportChrome,ChromeOptionsimportos不知道怎么导包的看我的第一篇，附上链接：https://www.jb51.net/article/204774.htm2，接下来就开始发送请求#请求的urlurl='http://pic.netbian.com/4kmeinv... 继续阅读 >

2021
01-26

selenium与xpath之获取指定位置的元素的实现

今天有点新的与大家分享，关于selenium与xpath之间爬数据获取指定位置的时候，方式不一样哦。详情可以看我的代码，以b站来看好吧：查看这href元素，如果是xpath，肯定这么写是没有问题的：i.find_element_by_xpath('./a/@href')但你再selenium里面这样写会报错，所以要改成这样i.find_element_by_xpath('./a').get_attribute('href')这样方可正确这是一个小案例，关于爬取b站音乐视频，但我的技术水平有限，无法下载，找不到那个东... 继续阅读 >

2021
01-24

selenium+超级鹰实现模拟登录12306

最近迷上了用selenium去登陆各大网站，别说selenium真挺好用，可以轻松搞定ajax动态加载的网页，不用很费劲的去抓包查找。咳咳…跑题了，回归正题。这次用selenium去登录12306网站，听说比较困难。我就去试了试，发现它的验证码实在是那啥…就是这样的。听头疼的。我来说说主要的代码编写吧。过程：用我们的开发者工具定位到输入账号和密码的窗口，找到并send_keysdriver.find_element_by_id('username').send_keys('用户名')time.... 继续阅读 >

2021
01-21

详解Python+Selenium+ChromeDriver的配置和问题解决

安装前的准备1.python的安装和配置在Window下：在开始菜单中找到运行输入cmd或直接搜索cmd点击进入，输入python，如果出现下图中的>>>则证明Python安装成功。检测Chrome的版本号安装Chromedriver记录版本号：87.0.4280.88打开ChromeDirver网址：http://chromedriver.storage.googleapis.com/index.html选择对应版本号的文件夹并打开ChromeDriver的环境配置ChromeDriver下载解压后为放置任一文件夹（建议放置在浏览器同名文件夹下... 继续阅读 >

2021
01-21

python+selenium自动化实战携带cookies模拟登陆微博

首先获取cookies，使用手机扫码登录斗鱼，然后利用网页cookies保存在本地有些同学可能会问，这不是相当于自己登录了吗，还模拟什么呢，其实来说这是一次获取cookies可以使用很久#!/usr/bin/envpython#-*-coding:utf-8-*-#@Time:2020/12/2916:27#@Author:huni#@File:微博cookies.py#@Software:PyCharmfromseleniumimportwebdriverfromtimeimportsleepimportjsonif__name__=='__main__':driver=web... 继续阅读 >

2021
01-21

selenium携带cookies模拟登陆CSDN的实现

首先是获取cookies保存到本地#!/usr/bin/envpython#-*-coding:utf-8-*-#@Time:2020/12/2011:00#@Author:huni#@File:cookies获取.py#@Software:PyCharmfromseleniumimportwebdriverfromtimeimportsleepimportjsonif__name__=='__main__':driver=webdriver.Chrome(executable_path='./chromedriver.exe')driver.maximize_window()driver.get('https://passport.csdn.net/login?code=public... 继续阅读 >

2021
01-17

c# Selenium爬取数据时防止webdriver封爬虫的方法

背景大家在使用Selenium+Chromedriver爬取网站信息的时候，以为这样就能做到不被网站的反爬虫机制发现。但是实际上很多参数和实际浏览器还是不一样的，只要网站进行判断处理，就能轻轻松松识别你是否使用了Selenium+Chromedriver模拟浏览器。其中window.navigator.webdriver就是很重要的一个。问题窥探正常浏览器打开是这样的 模拟器打开是这样的 ChromeOptionsoptions=null;IWebDriverdriver=null;... 继续阅读 >

2021
01-13

selenium如何定位span元素的实现

     在做自动化测试时，我们需要定位元素属性来进行操作，今天在做自动化时发现我要定位的登录注册元素找不到，我看了下代码发现，我用xpath获取绝对路径后，发现找不到，F12查看代码如下代码如下#_*_coding:utf-8_*_fromseleniumimportwebdriverimportloggingimporttimedriver=webdriver.Chrome()url="http:************"#driver.maximize_window()driver.get(url)#进入兼职啦首页time.sl... 继续阅读 >