分类：scrapy-splash

2021
02-21

scrapy-splash简单使用详解

1.scrapy_splash是scrapy的一个组件scrapy_splash加载js数据基于Splash来实现的Splash是一个Javascrapy渲染服务，它是一个实现HTTPAPI的轻量级浏览器，Splash是用Python和Lua语言实现的，基于Twisted和QT等模块构建使用scrapy-splash最终拿到的response相当于是在浏览器全部渲染完成以后的网页源代码2.scrapy_splash的作用scrpay_splash能够模拟浏览器加载js，并返回js运行后的数据3.scrapy_splash的环境安装3.1使用splash的dock... 继续阅读 >