ClearerVoice V3版 - AI语音增强(语音降噪)、语音分离、语音超分辨率 支持50系显卡 本地一键整合包下载 . ...
ClearerVoice 是由通义实验室开源 的一个集成 语音增强、语音分离、语音超分辨率和音视频说话人提取 等功能的语音处理框架。通过融合复数域深度学习算法,大幅提升了语音降噪和分离的性能,能够最大限度地消除背景噪声并保留语音清晰度,同时保持语音失真最小化。
随着语音技术的普及,语音质量已成为人们关注的焦点。环境噪声、混响、设备拾音等问题,常常使语音质量和可懂度大打折扣。无论是录制清晰语音却因周围环境嘈杂充满噪声,还是在地铁、餐厅等喧闹场景中与人通话时不得不提高嗓音,这些场景都体现了语音处理技术的迫切需求。特别是在复杂的多人对话环境中,如何有效分离目标说话人的语音信号,避免其他干扰,一直是语音处理领域的难点和热点。
ClearerVoice的出现,以上问题就迎刃而解了。和之前分享的 Remove-Noise 类似,但经过测试,ClearerVoice 的语音处理效果更好,不仅仅是简单的降噪,还包括降噪后语音效果增强,使得降噪增强后的音质更加纯净。
今天分享的 ClearerVoice V3版,主要是新增了对50系显卡的支持,同步官方4月份最新源代码。
ClearerVoice 能为您做什么?
语音降噪:将嘈杂的音频信号转化为高质量的清晰语音,适用于各种嘈杂环境,比如会议室、街道或咖啡馆。
语音超分:将低分辨率音频(有效采样率至少为 16,000 Hz)转换为采样率为 48,000 Hz 的高分辨率音频,提高了语音的感知质量
语音分离:从复杂混合音频中无缝提取目标语音,无论是双人对话还是多人会议,都可以做到“各听其声”。
目标说话人提取:精确识别并提取目标说话人的声音,比如从一段访谈视频中只提取特定嘉宾的发言部分。
适用场景
1、会议录音整理 将多人会议的音频分离为独立的语音信号,同时降噪提升语音质量,方便后续整理与归档。
2、电话录音优化 对嘈杂背景中的电话语音进行降噪和分离,确保客户服务记录清晰无误。
3、视频后期制作 精确提取目标说话人语音,提高音频质量,减少后期处理时间。
4、语音研究 为研究者提供便捷的工具包,结合质量评估模块快速验证模型效果。
使用教程:(建议N卡,显存6G起。支持50系显卡,基于CUDA12.8)
切换到不同的选项卡,上传语音或视频,提交即可。
语音降噪有多个采样率可选择,大家根据需要选择对比,找到更适合自己的。
注:关于有人反馈转换后声音尖叫或牛叫等问题,可以用音频处理软件,比如AU将转换后的音频恢复至原始音频的采样率即可。
下载地址:
迅雷云盘:https://pan.xunlei.com/s/VOSNmZx2uTe8My1yDjMv-vr9A1?pwd=97c5
百度网盘:游客, 上上宾会员可免费下载该资源, 点此开通上上宾 免费下载全站99%的付费资源。或单独支付 66碎银 下载该资源 立即购买
解压密码:https://deepfaces.cc/ 复制这个完整的网址即是解压密码,不要有空格,复制粘贴即可
|