测试积点老人 发表于 2021-10-12 10:23:38

无法爬取boss直聘岗位信息对应的标签列表

目的：获取li标签列表，从而获取岗位信息和岗位描述

scrapy效果

requests效果

selenium效果

结论
使用selenium可以爬取li标签列表，但是使用scrapy框架和requests模块无法得到li标签列表

海海豚 发表于 2021-10-13 09:35:44

直接用selenium吧

qqq911 发表于 2021-10-13 10:27:49

有反爬机制吧
页: [1]
查看完整版本: 无法爬取boss直聘岗位信息对应的标签列表