爬虫实战-网易云音乐
经分析,网易云音乐分为以下三类:免费音乐、会员下载,付费收听。
前两类音乐包含了绝大多数音乐,付费收听仅仅是极少数。
本篇爬虫目的--> 实现需要会员下载的音乐能够免费下载
核心:网易云提供了一个音乐下载接口http://music.163.com/song/media/outer/url?id=音乐ID.MP3 将音乐ID替换为相应的音乐ID就行,然后请求该链接获得MP3文件
方式一(适用小白)
在在网易云客户端找到复制链接
然后将复制到的链接粘贴出来 类似于这种 https://music.163.com/song?id=1345848098&userid=3158930581345848098 即为音乐ID然后对接口进行替换得到 下载链接绿色-陈雪凝(会员下载音乐)http://music.163.com/song/media/outer/url?id=1345848098.MP3
方式二(爬虫): 该方式不是对方式一的代码实现,而是实现歌单下载第一步,找到歌单链接(在歌单的分享里面的 复制链接)
链接类似于 https://music.163.com/playlist?id=2520126575&userid=315893058
第二步,在浏览器访问该链接
F12 打开调试模式
点击箭头所指图标,然后点击任意音乐名字
可以看出下面的html源码中出现了蓝色标志;
该代码区域为该音乐的标签代码,因为这是一个列表,所以所有音乐都是这个格式。
爬取核心,直接提取该页面所有a标签,并进行判断里面是否存在b标签和a标签的 href 是否以 /song?id=开头,因为b标签里面含有音乐名,有的a标签和音乐标签类似,但是没有b标签,也不是我们要的音乐,所以要进行排除
代码:
传入列表链接 解析列表,获取歌单所有音乐 ID,并生成下载链接
def ParsingPlayList(self, url):response=requests.get(url=url, headers=CloudMusic.header)soup=BeautifulSoup(response.text, "html.parser")alist=soup.select("a")Songs=[]for music in alist:if music.has_attr("href"):if str(music.attrs["href"]).startswith("/song?id="):id=str(music.attrs["href"]).replace("/song?id=", "")try:Songs.append({"id": id,"url": "http://music.163.com/song/media/outer/url?id=" + id + ".mp3","name": music.text})except:passreturn Songs
import requests from bs4 import BeautifulSoup import os STATUS_OK,STATUS_ERROR,STATUS_EXITS=1,-1,0 class CloudMusic:header = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0'}def Down(self, down_url, filePath, NowIndex, TotalCount, FileDir):if not os.path.isdir(FileDir): os.makedirs(FileDir)if os.path.isfile(FileDir + "/" + filePath + ".mp3"):print(filePath+",本地已存在")return STATUS_EXITSresponse = requests.get(down_url, headers=CloudMusic.header, allow_redirects=False)try:r = requests.get(response.headers['Location'], stream=True)size=int(r.headers['content-length'])print('\033[0;31m'+str(NowIndex) + "/" + str(TotalCount) + " 当前下载-" + filePath + " 文件大小:" + str(size) + "字节"+"\033[0m")CurTotal=0with open(FileDir + "/" + filePath + ".mp3", "wb") as f:for chunk in r.iter_content(chunk_size=512*1024):if chunk:f.write(chunk)CurTotal += len(chunk)print("\r" + filePath + "--下载进度:" + '%3s' % (str(CurTotal*100//size)) + "%", end='')print()r.close()return STATUS_OKexcept Exception as e:print(filePath + " 下载出错!" + " 错误信息" + str(e.args))if os.path.isfile(FileDir + "/" + filePath + ".mp3"): os.remove(FileDir + "/" + filePath + ".mp3")return STATUS_ERRORdef ParsingPlayList(self, url):response=requests.get(url=url, headers=CloudMusic.header)soup=BeautifulSoup(response.text, "html.parser")alist=soup.select("a")Songs=[]for music in alist:if music.has_attr("href"):if str(music.attrs["href"]).startswith("/song?id="):id=str(music.attrs["href"]).replace("/song?id=", "")try:Songs.append({"id": id,"url": "http://music.163.com/song/media/outer/url?id=" + id + ".mp3","name": music.text})except:passreturn Songsdef Start(self, MusicList, Dd):total=len(MusicList)CurIndex=OkCount=FalseCount=ExitCount=0print("歌单共计:" + str(len(MusicList)) + "首")for data in MusicList:CurIndex+=1status=self.Down(data["url"],data["name"].replace("/",""),CurIndex,total,Dd)if status==1: OkCount+=1elif status==0: ExitCount+=1else: FalseCount+=1print("下载成功"+str(OkCount)+"首"+"\n下载失败"+str(FalseCount)+"首"+"\n本地已存在"+str(ExitCount)+"首")if __name__=="__main__":CrawlerClient= CloudMusic()# CrawlerClient.Start(CrawlerClient.ParsingPlayList("https://music.163.com/playlist?id=1992662269&userid=315893058"), "广场舞")# CrawlerClient.Start(CrawlerClient.ParsingPlayList("https://music.163.com/playlist?id=2584781662"),"治愈")CrawlerClient.Start(CrawlerClient.ParsingPlayList("https://music.163.com/playlist?id=2243470689&userid=315893058"),"mp3")
源码
转载于:https://www.cnblogs.com/yuanzessrs/p/10515235.html
爬虫实战-网易云音乐相关推荐
- VUE实战--网易云音乐
VUE实战–网易云音乐 知识点: 音乐的暂停播放. 歌词的动态匹配. 动态组件: 根据is 属性 后面的组件名匹配 <component :is="组件的名字">< ...
- Python爬虫实践-网易云音乐
1.前言 最近,网易的音乐很多听不到了,刚好也看到很多教程,跟进学习了一下,也集大全了吧,本来想优化一下的,但是发现问题还是有点复杂,最后另辟捷径,提供了简单的方法啊! 本文主要参考 python编写 ...
- Python爬虫之网易云音乐下载
Python爬虫之网易云音乐下载 目标 用Python根据网易云音乐的ID,下载音乐,保存到本地MP3格式 可以下载歌曲的范围:所有能够听的歌曲 配置基础 Python 3.5 模块 pycrypto ...
- 如何利用python爬虫获取网易云音乐某个歌手简介_Python 爬虫获取网易云音乐歌手信息...
今天就先带大家爬取网易云音乐下的歌手信息并把数据保存下来. 爬取结果 环境 语言:Python 工具:Pycharm 导包 BeautifulSoup:用来解析源码,提取需要的元素. selenium ...
- python网络爬虫网易云音乐_一篇文章带你用Python网络爬虫实现网易云音乐歌词抓取...
标签下,如下图所示: 接下来我们利用美丽的汤来获取目标信息,直接上代码,如下图: 此处要注意获取ID的时候需要对link进行切片处理,得到的数字便是歌曲的ID:另外,歌曲名是通过get_text()方 ...
- python爬虫爬取网易云音乐下载_Python爬虫实践-网易云音乐!没有版权又如何!照样爬取!...
1.前言 最近,网易的音乐很多听不到了,刚好也看到很多教程,跟进学习了一下,也集大全了吧,本来想优化一下的,但是发现问题还是有点复杂,最后另辟捷径,提供了简单的方法啊! 本文主要参考 python编写 ...
- 网易云评论 爬虫 java_网易云音乐资源爬取(登录+评论)
如何爬取网易云音乐的评论呢? 1.文本以华晨宇的<我的滑板鞋2016>为例 2.使用浏览器的工具,查找获取评论的url 3.不难发现,此API是通过POST请求获得我们想要的评论信息的,需 ...
- 爬虫获取网易云音乐单曲或歌单实现音乐闹钟
今天介绍一款自己做android 应用,可以通过分享链接的方式实现网易云音乐,QQ音乐,虾米音乐,酷狗音乐四个平台上的单曲或歌单解析,最终实现播放音乐闹钟的设定.如下是应用界面(有点low,见谅). ...
- JS 解密剖析—爬虫之网易云音乐加密破解
前言 网络爬虫的大障碍,就是各种加密.这其中包过登录的验证码以及加密.js混淆.js参数加密等等.其实以前也就了解过js加密.但是没有深入研究,借着这次实践研究了一下网易云音乐的加密方式. 博主通过网 ...
最新文章
- 【CentOS】利用Kubeadm部署Kubernetes (K8s)
- Linux I2C工具查看配置I2C设备【转】
- 论政府开放数据的意义
- 最短路径-Floyd(佛洛伊德算法)
- LFM算法——推荐系统
- mybatis配置文件属性的详解和db.propertis文件的使用
- ubuntu 中wget (下载)命令用法
- 前端面试常考的10大排序算法
- python用小矩形标记数据点_Python – 在散点处绘制已知大小的矩形
- 电信 dns服务器 不稳定,知名DNS服务商114DNS故障,你访问受影响了吗?
- wps复选框怎么设置,wps表格中如何插入复选框?
- 代码设置桌面壁纸或者屏保
- 广东省推出居民身份电子凭证,忘带身份证也能住酒店了
- MySQL大表DDL工具gh-ost
- Minecraft 命令方块:迷宫计时器(压力板计时系统)
- 全干式光缆与普通光缆的区别
- SQL 之 模糊匹配
- 优秀开源Web开发资源大集合
- 用Java实现一个简单的考试系统
- 国内开源网店的那些事
热门文章
- MySQL 批量操作,一次插入多少行数据效率最高?
- android 解决分享到qq闪退
- 银行春招来袭:如何做准备?
- 拥有阿里0.2%股份的“前台小姐”,如今马云成首富,她咋样了
- 为啥中国企业服务基本全都入坑了
- 详解Mycat读写分离
- 关于WINDOW7使用淘宝:800A138F错误…
- 利用css将背景图片铺满整个屏幕
- ylbtech-Recode(记录)-数据库设计
- python logger.exception_Python logger.warn方法代码示例