- 1、本文档共47页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
音质AIGC的应用与实践
?分享人:何礼
?部门:腾讯音乐天琴实验室
?时间:2023年11月
01.音乐分离
?BSRNN基本原理
?音乐分离技术体系
?音乐分离业务应用
02.音乐超分
03.臻品母带
?什么是母带
?母带模型
?母带应用
2
对标国际、引领国内的QQ音乐音质
QQ音乐
AppleMusic
音质
Master
192kHz/24bit臻品母带2.0
192kHz/24bit高解析度无损
SQ
最高
48kHz/24bit
最高
48kHz/24bit
HQ
320kbpsogg
256kbpsaac
音效
立体声
臻品音质2.0
立体声空间音频
全景声
臻品全景声杜比全景声
杜比全景声
QQ音乐音质音效体系QQ音乐vsAppleMusic
音质AIGC
音乐流媒体平台的3个核心问题格式音乐分离检测品鉴音乐超分标准算法臻品母带播放QQ音乐这些年的音质优化之路音质AIGC
音乐流媒体平台的3个核心问题
格式
音乐分离
检测
品鉴
音乐超分
标准
算法
臻品母带
播放
1.有歌听。(版权、曲库)
2.能找到歌。(搜索、推荐)
3.听得舒心。(音质)
01音乐分离
5
近年音乐分离发展历史
BSRNN频域HybridDemucs时域
BSRNN频域
HybridDemucs时域+频域
Spleeter频域
Conv-TasNet时域
20182020202120222023
BSRNN基本原理
核心思想
?对频域切分不同子带
?时域帧间序列建模
?频域子带间序列建模
音乐分离技术体系
音乐分离业务应用1
臻品全景声
?基于音乐6轨分离制作全景声
?SVIP核心权益
立体声制作全景声流程
音乐分离业务应用2-4
?
?面向用户提供音乐分离服务,包含声伴分离、6轨分离
TME聚星TMEStudio启明星
音乐分离业务应用5-7
全民K歌临境音效
?乐器5轨分离,diy音效
?VIP核心权益
全民K歌五维打分
?干声分离,打分模板制作
全民K歌伴奏库
?伴奏分离,补充K歌伴奏库
临境音效五维打分
音乐分离业务应用8-10
懒人听书长音频消伴
?干声分离,消除长音频背景噪声、音乐
AIGC-X
?干声分离,判断歌曲人声是否AI生成
启明星音色试唱
?声伴分离,干声SVC,MIX生成demo
懒人听书长音频消伴
音乐分离业务应用11-12
低频公益
低频公益
?6轨分离,针对听损人士的歌曲增强与补偿
ToB—
ToB—光子工作室
?干声分离,商务合作
低频公益系统方案
音乐分离业务应用13
歌声合成
歌声合成
?无混响无和声干声分离,用于歌声合成
原曲
保留混响和声干声分离无混响无和声干声分离竞品(
保留混响和声干声分离
无混响无和声干声分离
竞品(UVR5)
无混响和声,听感好
保留混响去除和声,吞音严重,听感差
I总结
BSRNN
BSRNN基本原理
?频域切分子带,时域、频域序列建模
l
l音乐分离技术体系
?声伴分离、6轨分离、无混响和声干声分离
l
l音乐分离业务应用
?子模块:臻品全景声、全民K歌临境音效、全民K歌五维打分、AIGC-X、启明星音色试唱、低频公益、歌声合成
?ToC:TME聚星、TMEStudio、启明星、懒人听书长音频消伴、全民K歌伴奏库
?ToB:光子工作室
02音乐超分
16
业务应用原理应用
业务应用
基本原理
?臻品音质2.0?实时处理?升级到96kHz/24
?臻品音质2.0
?实时处理
“Phase-awaremusicsuper-resolutionusinggenerativeadversarialnetworks”
03臻品母带
18
编曲录制混音母带什么是母带?
编曲
录制
混音
母带
歌曲制作流程
作曲
歌曲不同品质
?Master:192kHz/24bit
?SQ:最高48kHz/24bit,与母带差异在于
文档评论(0)