51Testing软件测试论坛

标题: 为什么网易云音乐新歌榜爬取返回空值 [打印本页]

作者: 测试积点老人 时间: 2020-8-13 11:46
标题: 为什么网易云音乐新歌榜爬取返回空值

import requests
import time
import re
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.97 Safari/537.36'}
url='https://music.163.com/#/discover/toplist?id=3779629'
res=requests.get(url,headers=headers)
name=re.findall('<b title="(.*?)">The Best F<div class="soil">7A</div>or You</b>',res.text,re.S)
print(name)

复制代码

在F12里能找到的标签爬取无论用bs4 etree都返回空列表请大家帮我看一下
谢谢qwq

作者: 海海豚 时间: 2020-8-14 10:21
https://ask.csdn.net/questions/1084668?sort=votes_count 看下这个

作者: 郭小贱 时间: 2020-8-14 13:55
requests.get得不到ajax异步加载的内容，要进一步抓包

作者: szc123qq 时间: 2020-8-19 14:51
都是啥工具爬虫啊

欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)