moviepy剪切视频spleeter视频降噪-CPUGPU
文章目录
- 简介
- 安装spleeter
- 代码执行
简介
moviepy官方中文API
spleeter官方github
本文视频降噪原理为使用spleeter提取出人声，仅将人声写回视频并保存。
对于AudioClip和VideoClip使用完要close()来释放资源
VideoFileClip构建时最好指定fps_source=‘fps’（平均帧率），默认为tbr（帧率）
一次运行对多个视频进行降噪时，不要把Separator(‘spleeter:2stems’)放到频繁调用的函数里，否则可能因为频繁创建Separator(‘spleeter:2stems’)对象而卡死（可以放进__main__函数或使用单例模式等）
所有可能用到的文件同时放在百度网盘：
链接：https://pan.baidu.com/s/1jyKsR65QI7dpo9NIObGlhA?pwd=xyvk
提取码：xyvk
安装spleeter
# 创建虚拟环境【可选】
conda create -n sp python=3.7# 激活虚拟环境【可选】
conda activate sp# 在gpu上运行需要下列二者之一：
# 1) 执行代码conda install cudatoolkit=10.1 cudnn=7.6.5
# 2) 在本地安装CUDA10.1+cuDNN7.6.5(参考https://blog.csdn.net/qq_42283621/article/details/124095937)
# 否则将在cpu上运行pip install moviepy==1.0.3
pip install spleeter-gpu==2.0.2
conda install ffmpeg==4.2.2
# 测试
# 在百度网盘下载audio_example.mp3，然后cd到其所占目录，例如：
cd C:\Users\shang\Desktop# 命令spleeter separate [OPTIONS] -i INPUTS...
# 这里使用[OPTIONS] -p <预训练参数文件名> -o <输出路径>
# 第一次执行会在当前目录新建pretrained_models/2stems文件夹并下载4个预训练文件，若下载慢或网络错误可在百度网盘下载2stems.tar.gz将其中的4个文件复制到pretrained_models/2stems文件夹
spleeter separate -p spleeter:2stems -o . -i audio_example.mp3 # 若在<输出路径>下出现名为audio_example的文件夹(该名即为输入文件名)，audio_example文件夹下包含vocals.wav（人声）和accompaniment.wav（背景声）则测试成功。# 若使用了gpu则在下面的两个图中可以看到显存占用，否则显存占用保持在0。
windows: 任务管理器 -> 性能 -> GPU1
linux: 命令nvidia-smi
代码执行
在当前目录下放置1.mp4、2.mp4、audio_example.mp3（均在百度网盘）以及pretrained_models/2stems/4个预训练文件（网络不佳或运行失败时，否则第一次执行下列代码将自动下载pretrained_models/2stems/4个预训练文件）
若输出结果第一行为“Successfully opened dynamic library cudart64_101.dll”则说明使用了GPU，若“Could not load dynamic library 'cudart64_110.dll'”则说明使用了CPU。
from moviepy.editor import *
from moviepy.audio.AudioClip import AudioArrayClip
from spleeter.separator import Separatordef audioNoiseReduction(audio, separator):"""音频降噪（去除背景声保留人声）注：AudioClip包含AudioFileClip和AudioArrayClip两个子类:param audio: AudioClip或其子类对象:param separator: 人声分离器对象:return: AudioClip或其子类对象"""audiodata = audio.to_soundarray(fps=44100)prediction = separator.separate(audiodata)# 保存人声（其中fps 44100需和获取时一样，AudioFileClip('audio_example.wav')采用了缺省的默认fps 44100）vocals = AudioArrayClip(prediction['vocals'], 44100)return vocalsdef videoNoiseReduction(video, separator):"""视频降噪（去除背景声保留人声）注：VideoClip包含VideoFileClip和DataVideoClip两个子类:param video: VideoClip或其子类对象:param separator: 人声分离器对象:return: VideoClip或其子类对象"""audio = audioNoiseReduction(video.audio, separator)video_no = video.without_audio()video_red = video_no.set_audio(audio)audio.close()video_no.close()return video_reddef splitAndMergeVideo(pathList, savePath, timeList, separator, noiseReduction=False):"""截取&合并视频片段&视频降噪调用示例：splitAndMergeVideo('1.mp4', 'smv1.mp4', '00:05-00:17')splitAndMergeVideo(['1.mp4', '1.mp4'], 'smv2.mp4', ['00:05-00:17', '00:00-00:10'], noiseReduction=True)splitAndMergeVideo(['1.mp4', '2.mp4'], 'smv3.mp4', ['00:05-00:17', '00:00-00:10']):param pathList: 视频路径列表(str/str list):param savePath: 视频结果保存位置:param timeList: 欲截取的视频片段起止时间列表(str/str list)，格式为'开始时间-截止时间'，开始时间/截止时间需使用'分:秒'或者'时:分:秒'或者'秒’，时、分、秒均为2位整数，例如'12‘，'12:34'，'12:34:56':param separator: 人声分离器对象:param noiseReduction: 开启降噪（去除背景声保留人声）:return: 空"""# 若为str，转为str listif isinstance(pathList, str):pathList = [pathList]if isinstance(timeList, str):timeList = [timeList]# 检查数据是否完整if len(pathList) != len(timeList):print('pathList 与 timeList 长度不匹配')# 解析并标准化起止时间格式，标准格式为'hh:mm:ss'startList = []endList = []for item in timeList:t = item.split('-')startList.append(t[0])endList.append(t[1])for index in range(len(startList)):if startList[index].count(':') == 0:startList[index] = '00:00:' + startList[index]elif startList[index].count(':') == 1:startList[index] = '00:' + startList[index]for index in range(len(endList)):if endList[index].count(':') == 0:endList[index] = '00:00:' + endList[index]elif endList[index].count(':') == 1:endList[index] = '00:' + endList[index]# 切割出每个视频的欲截取片段videoFiles = []for index in range(len(pathList)):videoFiles.append(VideoFileClip(pathList[index], fps_source='fps').subclip(startList[index], endList[index]))# 合并片段，写入新文件，关闭每个片段的操作句柄finVideo = concatenate_videoclips(videoFiles)# 降噪if noiseReduction:finVideo2 = videoNoiseReduction(finVideo, separator)finVideo2.write_videofile(savePath)finVideo2.close()else:finVideo.write_videofile(savePath)for item in videoFiles:item.close()finVideo.close()if __name__ == '__main__':# Separator('spleeter:2stems')不要放到audioNoiseReduction函数里，否则可能因为频繁创建Separator('spleeter:2stems')对象而卡死separator = Separator('spleeter:2stems')# 测试audioNoiseReductionaudio = AudioFileClip('audio_example.mp3')audio_red = audioNoiseReduction(audio, separator)audio_red.write_audiofile('audio_example_red.wav')audio.close()audio_red.close()# 测试videoNoiseReductionvideo = VideoFileClip('1.mp4', fps_source='fps')newVideo = videoNoiseReduction(video, separator)newVideo.write_videofile('new_video.mp4')video.close()newVideo.close()# 测试splitAndMergeVideosplitAndMergeVideo('1.mp4', 'smv1.mp4', '00:05-00:17', separator)splitAndMergeVideo(['1.mp4', '1.mp4'], 'smv2.mp4', ['00:05-00:17', '00:00-00:10'], separator, noiseReduction=True)splitAndMergeVideo(['1.mp4', '2.mp4'], 'smv3.mp4', ['00:05-00:17', '00:00-00:10'], separator)exit()
moviepy剪切视频spleeter视频降噪-CPUGPU相关推荐
- 从入门到入土：Python实现爬取某站视频|根据视频编号|支持通过视频名称和创作者名称寻找编号|以及python moviepy合并音频视频
写在前面: 此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) Python实现爬取某站视频|根据视频编号|支持通过视频名称 ...
- 如何快速且不失真剪切与合并视频？如何将视频快速转成MP4格式？无需渲染！视频秒转MP4，剪辑合并！
视频剪切或合并后变模糊(变不清晰)怎么办?视频剪切或合并速度很慢怎么办?如何快速且不失真剪切与合并视频?如何将视频快速转成MP4格式? 工具下载: 小丸工具箱下载及如何压制视频:https://blo ...
- android 视频剪切,安卓手机视频剪辑app 将视频某一段截取下来，或者删除视频中某一部分...
当看电影或视频的时候往往不愿错过最精彩的部分,即使过后都会恋恋不忘,但是视频中精彩的部分或许就是那么短暂的几秒,有时候为了多看几次精彩部分宁可不停的来回播放视频.其实这样大可不必,因为我们可以把视频中 ...
- 简单的视频剪辑教程：使用win10自带的工具剪切和合并视频
剪切视频 右键视频文件以"照片"的方式打开视频,如同 点击右上角的编辑,如下图 选择"剪裁" 进度条会看到绿球和白球,绿球是当前视频播放的位置:进度条两端都有白 ...
- Python使用Moviepy将图像序列转换为视频
使用Moviepy将图像序列转换为视频 这是我使用您的初始代码完成的方式.您看到的错误是由于未为剪辑指定set_duration.我还对目录中的文件进行了排序,以便生成的mp4是连续的(默认情况下不是 ...
- python ffmpeg剪辑视频_用ffmpeg快速剪切和合并视频
如果直接找视频剪切和合并视频的软件,通常出来的都是大的视频编辑软件或者是有图形界面的剪切软件,大型一点的功能太多安装麻烦,小型一点的功能可能不齐全. 只是简单的剪切或者一下合并一下,还是ffmpeg这 ...
- 视频如何剪切，分割视频软件哪个好
如何截取视频片段,多个视频怎么截取片段,我们经常在网上看到关于某个名人的视频剪辑或者是同一类事物的剪辑,我们每个人也都一定会有自己喜欢的idol,那在每个视频被分享出现之前,要经过剪切,再合成,说了这 ...
- 使用Python的moviepy第三方库剪辑视频
使用Python的moviepy第三方库剪辑视频 文章目录 使用Python的moviepy第三方库剪辑视频 前言 一.使用环境 二.使用步骤 1.安装moviepy 2.引入库 3.完整代码 三.错 ...
- CourseMaker微课制作教程04：如何剪切音、视频？
如何减掉视频(音频)多余的部分? 这个功能在CourseMaker 2020里很简单 将进度条定位到你要想剪切的位置,可以用键盘的方向键,以帧为单位精确的定位,然后点击鼠标右键,在弹出的菜单里选择&q ...
最新文章
- 中国博士生提出最先进AI训练优化器，收敛快精度高，网友亲测：Adam可以退休了...
- Datatable Initialization - 使用objects数据源初始化
- 【转】理解JavaScript中的事件处理
- 彻底理解ThreadLocal
- oracle的基本数据类型（转载）
- C++ 引用和指针有什么区别？
- web developer tips (19):设置默认视图为设计视图
- AIOps中异常检测简的单应用
- C/C++的const区别
- python：DataFrame对单列或多列进行整列的运算（map, apply, transform, agg）
- AndrOid系统亭子运行,细讲Android系统下的Preference
- 新鲜出炉！ECCV2022 107个开源数据集合辑，全球 AI 研究热点一网打尽
- C语言的发展及其特点
- ggplot2-数据关系型图表
- 对技术的态度/编程修养(上)
- 楼道灯人体红外感应电路(全波式)
- jkd8 Stream的使用
- HTTPS之TLS证书
- 三味眼中的十二“最”……
- 如何设置主机电脑静态IP地址