51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 1881|回复: 3
打印 上一主题 下一主题

为什么网易云音乐新歌榜爬取返回空值

[复制链接]
  • TA的每日心情
    擦汗
    前天 09:07
  • 签到天数: 527 天

    连续签到: 4 天

    [LV.9]测试副司令

    跳转到指定楼层
    1#
    发表于 2020-8-13 11:46:44 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1测试积点
    1. import requests
    2. import time
    3. import re
    4. headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.97 Safari/537.36'}
    5. url='https://music.163.com/#/discover/toplist?id=3779629'
    6. res=requests.get(url,headers=headers)
    7. name=re.findall('<b title="(.*?)">The Best F<div class="soil">7A</div>or You</b>',res.text,re.S)
    8. print(name)
    复制代码
    在F12里能找到的标签 爬取无论用bs4 etree都返回空列表 请大家帮我看一下
    谢谢qwq


    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    前天 08:59
  • 签到天数: 1801 天

    连续签到: 5 天

    [LV.Master]测试大本营

    2#
    发表于 2020-8-14 10:21:38 | 只看该作者
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2024-10-22 14:23
  • 签到天数: 1007 天

    连续签到: 1 天

    [LV.10]测试总司令

    3#
    发表于 2020-8-14 13:55:46 | 只看该作者
    requests.get得不到ajax异步加载的内容,要进一步抓包
    回复

    使用道具 举报

  • TA的每日心情
    郁闷
    2021-2-20 08:55
  • 签到天数: 231 天

    连续签到: 3 天

    [LV.7]测试师长

    4#
    发表于 2020-8-19 14:51:30 | 只看该作者
    都是啥工具爬虫啊
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-17 17:29 , Processed in 0.068055 second(s), 22 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表