分类：Scrapy_splash组件使用

2022
11-02

爬虫进阶-JS自动渲染之Scrapy_splash组件的使用

目录1.什么是scrapy_splash？2.scrapy_splash的作用3.scrapy_splash的环境安装3.1使用splash的docker镜像3.2在python虚拟环境中安装scrapy-splash包4.在scrapy中使用splash4.1创建项目创建爬虫4.2完善settings.py配置文件4.3不使用splash4.4使用splash4.5分别运行俩个爬虫，并观察现象4.6结论5.了解更多6.小结1.什么是scrapy_splash？scrapy_splash是scrapy的一个组件scrapy-splash加载js数据是基于Splash来实... 继续阅读 >