QQ音乐|AI时代，音乐科技如何触摸温度与浪漫？( 二 )

值得一提的是，团队还制作了“离线系统”的小彩蛋，在歌曲第一次未能成功识别后， QQ音乐会在一周之内自动向全曲库发起请求，直到识别成功再为用户发送反馈提醒。这种始终“牵挂”着待解用户需求的贴心设计，便是技术温度的体现。而类似细节需求的精准洞察，往往能为用户体验的提升带来四两拨千斤的效果。

QQ音乐听歌识曲功能

当下，视频APP的崛起改变了用户的观看习惯，为了适应这些改变， QQ音乐等平台也在播放页添加了竖屏MV 。在不改变音乐内核的前提下，利用短视频传播优势，尝试实现优质作品的“被记住” ，而不仅是“被听到” 。
在“天琴”的帮助下， QQ音乐会对横屏MV进行歌手检测、注意力检测，并通过多目标跟踪和注意力热力图等技术，实现对焦点运动轨迹的优化。在发掘了一段横屏MV中最精彩、最具美感的片段后，平台会将用户关注的区域裁剪下来并输出，实现“音乐视频竖屏化” 。实验显示， QQ音乐播放页静音视频、竖屏MV将用户的听歌时长提高了5.5% 。
此外，最能让人明显感知到AI技术温度的，当属在公益项目落地中的人文关怀。今年8月， QQ音乐运用天琴实验室的音频处理和合成的相关技术，制作了国内首张低频公益专辑《听见“听不见”的音乐》，让中高频听力损失的孩子们第一次听到完整的音乐，感受到了音乐的多种“色彩” 。
可见，以“让科技充满温度”为研发导向，在“AI技术赋能音乐”的时代新题中，浪漫且温暖的天琴实验室，交出了不一样的答卷。

中高频听力损失的孩子们第一次听低频公益专辑
除了音频技术和“音乐视频化”的探索外，在线K歌领域的技术赋能也在持续进行中。今年5月，一个名为《唱歌风水学概论》的视频在B站引发众多网友热议，视频诙谐幽默地讲述了音准、节奏、技巧、气息、情感五要素在一首歌演绎中的重要性，助力这段视频出圈的，正是TME旗下的全民K歌。
在以往的K歌评分软件中，技巧、情感等要素在打分中鲜有体现。利用多维度歌曲评价技术，全民K歌不仅实现了对歌曲演绎时颤音、滑音、装饰音的捕捉，还能从抑扬起伏等动态变化中“感受”用户的情感表达。
与此同时，多维度歌曲评价技术还成功应用于线下比赛中。去年8月的“校园星歌声”总决赛上， AI智能评分系统从选手歌唱特性、技巧、音域等维度对歌声进行科学分析，不仅为紧张的比赛增加了趣味性，而且提升了赛事评比的客观公正性。

“校园星歌声”总决赛上应用了AI智能评分系统
在科技向善的技术价值观下， “天琴”也尽量帮助每一位用户都拥有更好的表达。为此，全民K歌上线了智能修音技术，帮助用户免费体验百万修音师的服务；直播方面， QQ音乐从主播端和用户端同时发力，实时美白、去噪、超分、超帧技术正在完善QQ音乐全链路的视频质量。
可以看到，在打造听、唱、看一体化音娱平台的赛道上，音视频技术能力建设的“未雨绸缪”已帮助QQ音乐等平台占得先机。如今，天琴实验室已手握384项专利技术，拿下Mirex音频指纹大赛冠军、深圳市科技专利奖等多个国内外音视频重量级奖项，多项论文也被收录于ICASSP、IJCNN、INTERSPEECH等各大国际论坛组织。
技术的领先自然离不开优秀的人才，早在“天琴”正式推出之前，就邀请了多位海内外知名研究者加入，与国内顶尖实验室的合作也在同步进行中。
2020年， “天琴”与中国科学技术大学合作研发的时间戳技术在MIREX大赛中一举超过Spotify；同年，天琴实验室与西北工业大学顶尖实验室展开合作，在长音频的语音合成方面取得长足进展。而作为研究音乐科技的领军团队，他们还通过AI智能和人工辅助合成独特的logo音乐，创造了独属于天琴的旋律，宣告科技与音乐的结合可以多么多浪漫。