分类：scrapy爬取小说榜单

2021
08-31

Python scrapy爬取起点中文网小说榜单

一、项目需求爬取排行榜小说的作者，书名，分类以及完结或连载二、项目分析目标url：“https://www.qidian.com/rank/hotsales?style=1&page=1”通过控制台搜索发现相应信息均存在于html静态网页中，所以此次爬虫难度较低。通过控制台观察发现，需要的内容都在一个个li列表中，每一个列表代表一本书的内容。在li中找到所需的内容找到第两页的url“https://www.qidian.com/rank/hotsales?style=1&page=1”“https://www.qidi... 继续阅读 >