700字范文,内容丰富有趣,生活中的好帮手!
700字范文 > 爬虫:深度爬取网易云音乐所有歌手及其对应热门歌曲

爬虫:深度爬取网易云音乐所有歌手及其对应热门歌曲

时间:2023-02-15 20:49:35

相关推荐

爬虫:深度爬取网易云音乐所有歌手及其对应热门歌曲

先根据分类,从字母搜索

import requestsfrom lxml import etreefrom fake_useragent import UserAgentclass Music:def __init__(self):self.count = 1def __call__(self, *args, **kwargs):self.get_class_url_list()# 获取分类url列表def get_class_url_list(self):# 发起请求 获取指定页面base_url = "/discover/artist"html_xml = self.get_html(base_url, 1)# 获取分类urlclass_url_list = html_xml.xpath("//a[@class=cat-flag]/@href")class_name_list = html_xml.xpath("//a[@class=cat-flag]/text()")del class_name_list[0]del class_url_list[0]# print(cl

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。