街坊秀 街坊秀

当前位置: 首页 » 街坊资讯 »

在线KTV+AI,即构让每一次欢唱“声”机勃勃

(来源:蚌埠新闻网)

转自:蚌埠新闻网

当“合唱挑战”刷屏年轻用户社交圈,“不是KTV 去不起,而是在线K歌更有性价比”成为Z世代口头禅。

与此同时,中老年群体正通过在线K歌APP连线老友、合唱经典老歌。

车载场景里的“旅途欢唱”让长途跋涉变成移动练歌房;

智能家居场景中更是兴起 “投影仪变身K歌房” 热潮……

如今,在线K歌早已打破年龄、空间与设备的边界,成为全民共享的娱乐社交方式。

AIGC的蓬勃发展,让这场“全民欢唱”变得更加丰富多彩。如今的AI,是藏在手机里的“全能歌友”。

你随口哼唱一段歌曲或者告诉AI一个创意,它能立刻生成完整歌曲;就算深夜想唱歌又怕打扰朋友,AI也能随时做你的唱歌搭子,倾听、陪伴你。

这些全场景多模态的在线K歌互动体验,背后离不开实时互动厂商的技术支撑。

作为行业最早推出实时合唱方案的厂商,即构科技持续聚焦实时音视频技术,自主研发Purio AI音频引擎和实时互动AI Agent方案,并先后推出了在线KTV、实时合唱、实时打分等方案和丰富配套,使在线K歌场景效果的显著提升,提升用户唱歌体验和互动氛围。

Purio AI音频引擎,提升在线K歌体验

即构Purio AI音频引擎凭借三大核心技术——AI降噪技术、AI回声消除技术和音量均衡技术,为用户带来前所未有的纯净、保真、极致舒适的听觉体验。

Purio具有全场景400+噪音种类识别与消除技术,在多重高精度AI技术加持下,抽丝剥茧剔除噪音,精准还原人声,人声保真度客观指标达到业界领先水平。

Purio的AI算法能够智能识别并消除高达99.9%的音频回声,多重高精度AI技术分离近端信号与回声信号,确保精准还原音质,人声保真度客观指标领先。

Purio还具备了AGC(自动增益控制)和动态响度均衡能力,可智能调节不同场景下的音量大小,让听觉体验更均衡、舒适。

在KTV场景中,Purio实现了音效的显著突破。

它集成先进技术和个性化服务,具备超低延迟适配、精准人声伴奏对齐、K歌专用音效,K歌打分技术等能力,为用户打造专业、愉悦的听觉享受,增强K歌互动性和娱乐体验。

在实时K歌应用案例中,开启AI回声消除后,用户单次K歌外放比例明显增长,短时(≤1min)与长时(≥3min)K歌外放时长占比分别提高了7%和12%。

真实时合唱

即构在行业内率先推出的在线实时合唱方案,把线下的K歌体验无缝的复制到线上,给用户带来更实时的陪伴和互动体验。

就算和朋友相隔千里,合唱时也能精准同步,就像站在同一个话筒前。这种“天涯若比邻”的陪伴感,让线上合唱彻底告别了“各唱各的”尴尬。

保证在线合唱实时同步最重要的前提是低延迟,需要将一端的歌声用最小的耗时传送到对端。

即构针对每个环节做以降低延迟为首要目标的优化,包括采集渲染延迟优化、音频前后处理算法优化、应用超低延迟编码方案、调整流控策略等。

通过对每个环节的“压榨”,在保障的合唱体验效果的前提下,即构将端到端的感官延迟降低至70ms。

实时打分

更懂国人娱乐需求的是,即构还原了线下KTV的“灵魂”——实时打分。

自主研发的实时打分方案,能从音准、节奏维度精准评分,边唱边打分,让普通人也能像选秀选手一样“针对性练歌”,唱歌的成就感直线飙升。

ZEGO即构自研KTV实时打分功能,通过分析演唱者的音高进行评判,得出演唱分数,音高线提取精确率高达99%,增强线上社交互动的可玩性,真实还原线下KTV的娱乐体验。

打分功能的具体实现,主要分为以下四个步骤:

第一步:将原唱做声伴分离,将人声和伴奏分离出来;

第二步:将原唱人声转化成标准音高线,以 MIDI 音高的形式显示在APP中;

第三步:提取演唱者实时的人声音高线,同样也以MIDI音高的形式显示在APP中,用户可以主观体验到自己音高的准确性;

第四步:利用打分算法,根据人声和原唱的差异进行评分。

在这个过程中,音高线的实现尤为重要。

即构自研音高线提取算法,使用AI模型,先分离出信噪比较高、保留较完整的人声。然后,ZEGO在传统算法的基础上结合HMM模型选择最优路径音高线,提取准确率高达99%。

打分策略算法决定演唱分数高低,演唱分数高低又关乎用户对于平台的使用体验。

ZEGO打分算法主要依据用户实时演唱音高线与原唱标准音高线的差异来评判,并贴合用户需求考虑用户体验,让评分也服从正态分布。

对于处于中间分布的大量群体得分达到正常可接受水平,而对于少数唱的很准的顶部群体,凸显出高分。

AI唱歌

今年,即构升级了实时互动AI Agent 2.0方案,开发者通过接入SDK及服务端API即可完成应用搭建,实现用户与AI Agent进行超低延迟的IM图文聊天、语音通话、数字人语音通话等多模态互动能力。

在AI陪伴场景中,也可以应用AI Agent 2.0方案,让AI唱歌,AI有记忆,可以配合用户随时唱歌或者随时停止,互动感拉满。

此外,即构在线KTV解决方案也配备了大量正版曲库,集成知名音乐版权商,帮助客户解决版权纠纷问题,让客户没有后顾之忧。

从场景拓展到AI赋能,在线KTV的进化从未停止。即构ZEGO正用扎实的技术功底,把“想唱就唱”的快乐送到每个角落。实时互动+AI技术的价值,或许就是让这些简单的快乐,变得“声”机勃勃,触手可及。

【广告】免责声明:本内容为广告,不代表蚌埠新闻网的观点及立场。所涉文、图、音视频等资料之一切权力和法律责任归材料提供方所有和承担。蚌埠新闻网登载此文出于传递更多信息之目的,对此文字、图片等所有信息的真实性不作任何保证或承诺。文章内容仅供参考,不构成投资、消费建议。据此操作,风险自担!!!

未经允许不得转载: 街坊秀 » 在线KTV+AI,即构让每一次欢唱“声”机勃勃