分类：爬取代理IP

2020
12-02

Python爬虫简单运用爬取代理IP的实现

功能1：爬取西拉ip代理官网上的代理ip环境：python3.8+pycharm库：requests，lxml浏览器：谷歌IP地址：http://www.xiladaili.com/gaoni/分析网页源码：选中div元素后右键找到Copy再深入子菜单找到CopyXpath点击一下就复制到XPath我们复制下来的Xpth内容为：/html/body/div/div[3]/div[2]/table/tbody/tr[50]/td[1]虽然可以查出来ip，但不利于程序自动爬取所有IP，利用谷歌XpathHelp测试一下从上图可以看出，只匹配到了一个Ip，我... 继续阅读 >