Requests 返回结果的目标内容是js

Question

小白尝试使用requests获取网易云音乐ID的时候发现问题，网址如下。

https://music.163.com/#/discover/toplist

在网站上看出id就在a标签的href属性里，浏览器中显示的是当前音乐的id，如下图。

但是问题出现了，在pyc中调用requests.get获取网页html。在html中寻找需要的音乐id

得到的html里音乐ID是${song.id}

请问是什么情况？

代码就以下四行

import requests
url = "https://music.163.com/#/discover/toplist"
res = requests.get(url)
print(res.text)

Answer 1

你的截图的结果是JS代码执行之后的结果，那个只做参考 不能作为爬虫的结果

爬虫requests获取的结果是你右键-查看网页源代码 里面看到的内容 也 是没有执行JS的结果

如果你想获取那个数据，2个方法：

1.使用selenium等可以操作浏览器的类库 打开浏览器去抓取

2.自己分析你需要的数据是在哪个JS文件中，然后使用requests爬取那个JS文件获取你要的数据