700字范文,内容丰富有趣,生活中的好帮手!
700字范文 > python爬虫-爬取网易云音乐歌曲评论

python爬虫-爬取网易云音乐歌曲评论

时间:2023-06-30 07:14:56

相关推荐

python爬虫-爬取网易云音乐歌曲评论

本文借鉴了@平胸小仙女的知乎回复 /question/36081767 以及@lyrichu的博客/lyrichu/p/6635798.html

话不多说,直接开始正题

----------------------------------------------------------------------------------------------------------------------------------

首先从网页代码入手,随便找一首网易云音乐上面的歌曲,我这里用的是邓丽君的《南海姑娘》

右键-检查-network(我用的是chrome,firefox是右键-web控制台-网络)

然后刷新页面,就能看到network的活动

可以发现,点击下一页评论,只有评论会刷新,页面的URL不会变,因此向服务器发送的请求是xhr(XMLHttpRequset)对象。关于这个概念大家可以百度,简单来说就是能够实现在后台与服务器交换数据,在不重新加载页面的情况下更新网页。

这就缩小了范围,然后再一个个点进去查看response,就能找到包含评论的数据包,如图

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。