51Testing软件测试论坛

标题: 在pycham中利用爬虫获取数据,数据前半部分丢失问题 [打印本页]

作者: 测试积点老人    时间: 2020-10-13 10:51
标题: 在pycham中利用爬虫获取数据,数据前半部分丢失问题
本人小白,准备爬取豆瓣top250电影榜单的时候,发现request回来的数据中排名1~8的电影数据没有,不知是设置问题还是代码问题,恳请大佬指正,代码及结果如图
[attach]130161[/attach]
[attach]130162[/attach]


作者: 海海豚    时间: 2020-10-14 09:19
使用正则表达式,只匹配出需要的内容,不要把多余的内容同时输出
作者: 郭小贱    时间: 2020-10-14 10:23
爬取的内容太多了,终端显示内容有限,可以爬取自己需要的数据,减少没必要的数据量。
作者: qqq911    时间: 2020-10-14 10:26
检查下你爬回来的内容是什么
作者: bellas    时间: 2020-10-14 10:44
减少数据量
作者: 104~牛牛    时间: 2020-10-14 10:53

爬取的内容太多了,终端显示内容有限
作者: jingzizx    时间: 2020-10-14 13:17
打印内容




欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/) Powered by Discuz! X3.2