走进腾讯音乐天琴实验室,探索娱乐视听技术与体验的新乐章
探索娱乐视听技术与体验的新乐章
QQ音乐的全新一代听歌识曲技术如何在保持技术领先的现状下创新和突破?QQ音乐的银河音效如何突破传统DSP思路,进行技术升级,并形成高活跃的音效社区?全民K歌的唱歌评分如何全面升级?智能品鉴如何从多维度挖掘优质歌手和UGC作品给用户带来收益?元宇宙大背景下,虚拟世界和音乐如何结合?Music XR Maker 如何用AI驱动的方式打造一场虚拟偶像音乐表演?本专场腾讯音乐的天琴实验室及银河音效团队,将以音频为核心与大家一同探讨多媒体技术的现状、实现与思考,希望促进行业间的交流、探讨以及合作。
报名直通
# 出品人 #
赵伟峰
Producer
腾讯音乐天琴实验室
音频技术负责人
13级专家研究员
赵伟峰,腾讯音乐天琴实验室音频技术负责人,T13级专家工程师,十余年音频行业从业经验。毕业于宁波大学通信专业,2012年加入腾讯QQ音乐后一直负责音频研发工作。目前负责歌曲识别算法、K歌录唱算法、长音频字幕和朗读算法等3项核心技术,以及其他内外部合作的音频算法研发。带领团队获得国家专利奖、深圳市科技专利奖、公司级重大技术突破奖等多种奖项。先后牵头和中国科技大学、西北工业大学、清华大学等高校成功完成专项技术合作。并在“听见听不见的声音”歌单等公益项目中践行科技向善。
# 讲师与议题 #
Topic1
QQ音乐下一代听歌识曲技术
传统的听歌识曲技术是一种严格的基于音频内容的匹配检索技术,如果要通过传统听歌识曲技术识别到一首被人翻唱或者改编的歌曲,那么检索库中必须有这首同录音的歌曲。随着移动互联网的崛起,直播、K歌、短视频等用户翻唱、改编的歌曲越来越多,尤其是热门歌曲同质化严重,如果基于传统听歌识曲技术的系统,检索库不及时、大量的更新入这种内容,那么就会导致很多歌曲无法识别。为了解决当前用户痛点,我们探索出下一代听歌识曲技术。
内容大纲:
1. 听歌识曲面临的挑战
2. 听歌识曲中翻唱识别技术
3. 听歌识曲中多模态识别技术
4. 歌曲识别展望
Topic2
QQ音乐银河音效技术实践
音效渲染是音频或音乐播放器最为重要的后处理模块之一。本次分享将重点介绍银河音效在QQ音乐播放器中的创新应用,包括空间环绕效果和音效制作工具等内容。一方面,空间环绕效果一直深受广大用户追捧,也是银河音效在听歌体验方面持续优化的一种沉浸式效果。另一方面,面向音效发烧友的专业制作工具大大激发了用户创作个性化音效的热情,从而形成了高度活跃的音效社区。
内容大纲:
1. 音效在播放器中的应用
2. 空间环绕效果的设计
3. 音效制作工具的设计
4. 银河音效的未来展望
Topic3
歌唱评价与内容理解实践
歌唱评价是K歌系统中核心技术之一。近年来,歌唱评价领域也发生着多元化和深度化的变革。本次分享将重点介绍全民K歌的多维度评价技术和深度歌唱评价技术的实践,以及优质内容挖掘中使用的K歌智能品鉴系统。歌唱评价技术已落地在录唱、游戏和直播的多项场景中,激发了用户的录唱意愿和优质作品的观看时长。
内容大纲:
1. 歌唱评价概览
2. 实时多维打分
3. 深度歌唱评价
4. 智能品鉴系统
Topic4
音乐驱动虚拟人
元宇宙时代的娱乐场景下,通过高精度的AI驱动模型还原真人的歌舞表演,有着更低成本、更多创造性、精彩度、实时互动性的综合优势,是虚拟数字人驱动的最终形态。本次分享将重点介绍TME天琴实验室在音乐驱动领域的 Music XR Maker 系统,包括虚拟人舞蹈生成、歌唱表演生成、音乐灯光秀等方面的最新进展。
内容大纲:
1. Music XR Maker
2. 音乐生成虚拟人舞蹈
3. 歌声驱动虚拟人歌唱表演
4. 音乐灯光秀
微信扫码关注该文公众号作者