2020
10-10
10-10
python使用bs4爬取boss直聘静态页面
思路：1、将需要查询城市列表，通过城市接口转换成相应的code码2、遍历城市、职位生成url3、通过url获取列表页面信息，遍历列表页面信息4、再根据列表页面信息的job_link获取详情页面信息，将需要的信息以字典data的形式存在列表datas里5、判断列表页面是否有下一页，重复步骤3、4；同时将列表datas一直传递下去6、一个城市、职位url爬取完后，将列表datas接在列表datas_list后面，重复3、4、57、...
继续阅读 >