2020
11-03
11-03
如何基于Python爬虫爬取美团酒店信息
一、分析网页网站的页面是JavaScript渲染而成的,我们所看到的内容都是网页加载后又执行了JavaScript代码之后才呈现出来的,因此这些数据并不存在于原始HTML代码中,而requests仅仅抓取的是原始HTML代码。抓取这种类型网站的页面数据,解决方案如下:分析Ajax,很多数据可能是经过Ajax请求时候获取的,所以可以分析其接口。在XHR里可以找到,RequestURL有几个关键参数,uuid和cityId是城市标识,offset偏移量可以控制...
继续阅读 >