(资料图)
3月23日,实时互动云服务商声网在北京举办“凤鸣AI引擎”发布会,正式发布了囊括AI降噪、AI回声消除、空间音频、最佳音效在内的声网新一代音频技术智能引擎。开发者与企业可以如搭积木般灵活调用对应组件,并广泛应用在语聊社交、在线K歌、线上会议、游戏竞技、虚拟活动等诸多场景,为用户带来更纯净、更动听、更沉浸的语音互动体验,探索更多营收增长空间。
RTE场景不断丰富,高音质互动需求急需满足
实时音视频技术的发展带出大量的创新场景,从狼人杀、直播连麦到直播电商、在线K歌、互动播客、元宇宙,伴随着场景的不断扩展,用户对实时音视频体验的诉求也越来越高。
传统的RTC概念,从信息传递的角度出发,音频功能仅提供简单的语音沟通,满足单一的场景和通话标准,对于音质并无太高的需求,也就是所谓的“能够沟通”。伴随着实时互动创新场景的涌现,用户对于音频体验的需求也产生了从量变到质变的进化,比如在线K歌、线上会议等场景,用户的需求早已从能够沟通到希望“脱离现实”,屏蔽外界干扰,实现纯净沟通;对于元宇宙、虚拟活动、游戏竞技等场景,用户则是希望从简单沟通实现“极致拟真”的沉浸式体验。
同时,音频体验的提升能够增强平台用户的核心体验。比如,对噪音的抑制能够提升语聊房用户活跃度和留存,以及游戏开黑场景的通话时长;回声消除能显著提升用户的在线K歌体验;而立体、具备空间感的音频体验则能提升元宇宙社交、游戏竞技、线上会议、虚拟活动等场景中用户的临场感和沉浸感。
声网针对以上痛点和需求,声网凤鸣AI引擎应势而生。
3大音频能力+最佳音效实践 回归互动本真
通过AI驱动的方式,声网打通了音频采集、前后处理、云端传输、编解码等链路,旨在为用户打造更纯净、更动听、更沉浸的语音体验,在现有实时互动玩法的基础上锦上添花,赋能行业开发者和企业。
1.AI降噪强力抑制100+突发噪声,兼顾语音无损伤与混响抑制
想要在“脱离现实”的环境中办公、娱乐,屏蔽外界干扰是基础。相比于传统的降噪算法,凤鸣·AI降噪的效果有显著提升,可以一次性解决100+种突发性噪声,比如办公场景经常遇到的敲键盘、鼠标点击、电话铃声;家庭环境中遇到的小孩哭叫、装修、厨房做饭声;户外环境中的风声、雨声、汽车噪声等。
凤鸣·AI降噪在强降噪的同时还能兼顾高保真,即使在人声密集场景下,也能实现纯净通话体验,甚至还实现了在不增加额外运算量的前提下,对远场语音具有明显的混响抑制能力。如果用户在一个房间中距离麦克风较远,这时候对方听到的声音是模糊的,若使用了声网的AI降噪算法,对端也能清晰地听到该用户的声音。
此外,声网自研的AI推理引擎还可以使得AI降噪算法在Android、iOS、Mac、Windows、Web等主流平台以低精度损伤、高性能、低功耗方式运行,使用户的设备不卡不烫。经数据测算,仅开启凤鸣·AI降噪功能,相应设备CPU消耗增幅平均值
3.空间音频极致拟真,打造“声临其境”互动玩法
凤鸣·空间音频通过纯软件算法方案,模拟头部球面区域立体声场,利用范围音频、人声模糊、空气衰减模拟等能力,完美模拟现实听觉感受。当用户操作相应角色在虚拟场景里移动,可以实现根据虚拟人物的面部朝向、音源朝向、远近距离与上下高度,呈现不同声音效果。
空间音频是元宇宙和游戏这类具备3D场景玩法的最佳搭档,如狼人杀、虚拟演唱会、虚拟活动等场景,可以有效的增强用户在线上的互动、听觉体验,重构用户在虚拟世界的沉浸感与临场感。同时,开发者不必担心空间音频功能对于用户设备的影响,据数据测算,开启凤鸣·空间音频功能后,相应设备CPU消耗增幅平均值
多年来,声网汇总梳理语聊领域各类头部App的音效配置,综合声网超过万亿分钟的用户音效偏好的数据模型,并结合声网音频专家的多年沉淀与研究,能够为平台提供针对各种语音场景的最佳音效配置,助力平台用户享受行业顶尖的音效体验。目前已上线的最佳音效包括语聊社交、K歌、游戏陪玩、专业主播等场景。国内某头部语音社交平台就是通过声网提供的最佳音效配置方案,将空间音频、美声、电音等丰富的声音玩法融入互动中,增强平台留存和变现能力。
据声网音频娱乐产品负责人杨帆介绍,凤鸣AI引擎目前正在开发变声这一功能,用户将可以体验20+变声风格,多样角色扮演花式玩转语聊场景。声网算法专家许冉指出,凤鸣AI引擎代表声网在 RTC音频领域针对核心技术的长期投入和产出,以及声网基于音频核心能力衍生出各种复杂功能和高端效果的决心,未来声网将基于凤鸣AI引擎形成新一代RTC音频解决方案,比如探索更个性化的语音方案、语音超分、co-experiencing场景等。
发布会还邀请了仙巴科技创始人兼CEO薛达、扬帆出海创始人兼CEO刘武华、科大讯飞海外解决方案产品部产品总监吴浩亮、声网产品市场负责人朱超华及声网音频娱乐产品负责人杨帆,围绕“音频社交行业现状及海内外趋势展望、“音频技术与行业发展”等话题展开圆桌讨论。
谈到当前的音频社交行业,杨帆指出,音频社交近几年的市场规模仍在持续增长,依旧有广阔的发展空间,总体来说,音频社交的主要玩法集中在多人语聊房、1V1语聊、语音播客、游戏开黑等场景。薛达认为,作为用户之间情感的递进纽带,语音结合虚拟人以及类似ChatGPT这样的大模型,可能未来会带来一波新的社交热潮。
在市场火热的前景下,音频技术的提升对行业来说可谓如虎添翼。正如薛达提到,降噪技术是实现元宇宙空间中用户体验的一个必不可少因素,因为一般娱乐场景中都会播放背景音乐,加上人声和互动音效,如果没有空间音频和降噪,那用户体验会非常差。吴浩亮认为,声音是打造差异化社交玩法的一个重要能力,在社交音频这个赛道上,大致分为音视频直播、音频内容生态,以及泛娱乐音频三个类型,音频技术能力的提升可以有效助力业务端提升用户体验。
不仅国内市场火热,大量出海企业也押注音频社交这一赛道且扎堆中东、东南亚市场,刘武华认为中东市场这种大R市场天然契合音频社交的商业变现形态,而东南亚市场年轻用户多,社交需求旺盛又热衷于尝试新鲜事物,且这两个市场已有成熟的产品形态和产业链。此外,吴浩亮提到,东南亚和中东市场目前还处在快速发展阶段,市场机遇大、用户基数大,但还没有绝对的寡头形成,较之前传统社交类型来讲,音频社交的留存能力也较高,企业需要在用户感兴趣的窗口期尽快实现转化。
谈到音频社交的未来趋势,刘武华表示,社交+游戏、社交+元宇宙、社交+ AIGC 这几种玩法有不错的发展空间和前景。杨帆也认为,元宇宙方向的场景会更受年轻人青睐,另外 AIGC 配合语音转文字等应用,应该也会带来一波新AI音频社交热潮。
-
凭证式国债可以转让吗?电子式国债可以流通转让吗?凭证式国债不可以转让,就是不能卖给别人的意思。储蓄国债(凭证式)为记名国债,记名方式采用实名制,可以挂失,但不能更名,...
-
协议利率存款是什么意思?协议存款和定期存款的区别?协议利率存款的全称是整存整取定期协议利率存款,这是利率高于银行普通整存整取定期存款挂牌利率的一类整存整取定期存款,也...
-
国债价格和国债收益率的关系是什么?国债收益率高说明什么?负相关关系。国债价格与国债收益率之间为负相关关系,也就是说国债价格越高,收益率会越低。具体来看,一般情况下,当国债价...
-
微信零钱通会不会吃掉本金?零钱通会倒扣钱吗?不会,把钱放在微信零钱通里面跟放在支付宝余额宝里面是一个意思,安全性也一样,虽然零钱通理财产品无法承诺保本的,但平台...
-
大额存单到期后会自动回到银行卡上吗?大额存单到期不取会自动转存吗?会。大额存单产品持有到期后,资金将自动转回客户银行卡活期账户内,将不会自动续存,转回银行卡内的资金将以活期利率计算利...
-
凭证式国债可以转让吗?电子式国债可以流通转让吗?
2023-03-21 09:12:30
-
协议利率存款是什么意思?协议存款和定期存款的区别?
2023-03-21 09:11:56
-
国债价格和国债收益率的关系是什么?国债收益率高说明什么?
2023-03-21 09:11:20
-
微信零钱通会不会吃掉本金?零钱通会倒扣钱吗?
2023-03-21 09:10:40
-
大额存单到期后会自动回到银行卡上吗?大额存单到期不取会自动转存吗?
2023-03-21 09:10:02
-
“脱离”现实+极致拟真?声网凤鸣AI引擎来袭
2023-03-24 10:59:50
-
全球微动态丨存火灾隐患,现代、起亚在美国召回超57万辆汽车
2023-03-24 11:11:13
-
汝南县市场监管局全力推进制止餐饮浪费专项行动
2023-03-24 11:12:59
-
视焦点讯!广西桂林马拉松26日鸣枪开跑
2023-03-24 11:20:15
-
今日快看!天中环球港 打造天中城市新名片
2023-03-24 11:05:17
-
世界观点:南阳宛城区农村信用合作社开展突发事件应急处置演练活动
2023-03-24 11:17:07
-
全球热消息:上街区:开展“护苗行动” 助力学生健康成长
2023-03-24 11:10:23
-
切实抓好全市环境污染防治攻坚工作
2023-03-24 11:05:22
-
每日观点:汝南县自然资源局召开放管服改革推进会
2023-03-24 11:18:37
-
焦点快报!中国水周 | 保护母亲河,丹江大观苑在行动!
2023-03-24 11:17:27
-
全球新资讯:中原区区委书记李晓雷调研督导项目建设及文明城市创建工作
2023-03-24 11:21:53
-
当前时讯:这个作物基因被中国科学家研究破解 未来盐碱地有望变粮仓
2023-03-24 11:15:40
-
全球百事通!畅通“血脉” 惠民生,郑州中原区市政道路建设按下“快进键”
2023-03-24 11:12:20
-
今起可查!河南遴选公务员笔试成绩公布
2023-03-24 10:57:19
-
天天消息!广发卡携手宜家家居为实体经济注入金融动能
2023-03-24 11:08:55
-
通讯!驻马店市生态环境局驿城分局组织开展无人机实操飞行活动
2023-03-24 11:16:32
-
全球新消息丨OPPO Find X6系列发布 OPPO钱包“数字车钥匙”已支持百款车型
2023-03-24 11:19:52
-
天天快讯:驿城区人民政府与人民控股集团举行合作交流座谈会
2023-03-24 11:04:44
-
观察:不满美政府调查报告 “毒火车”,脱轨地居民邀独立人员检测化学物
2023-03-24 11:17:50
-
【新视野】聚焦AW2023上海时装周M SPACE开场论坛 中国设计师品牌江南布衣探索独具特色的可持续时尚发展路径
2023-03-24 10:57:58
-
版面Show | 3月24日 悦读今日《郑州晚报·经开时报》
2023-03-24 11:13:46
-
天天快讯:驿城区委书记深入辖区督导检查创文工作
2023-03-24 11:01:44
-
中外教授合作实现“三高”近红外钙钛矿LED制备
2023-03-24 11:08:36
-
全球头条:中牟县雁鸣湖镇开展消防安全夜查行动
2023-03-24 10:57:31
-
每日聚焦:郑州市北林路街道推进社会救助工作 提升民政服务能力
2023-03-24 11:00:30
-
重点聚焦!郑州市疾控中心到中牟县调研健康管理信息化建设工作
2023-03-24 11:04:27
-
治流感咳嗽,连花清咳片再获湖南省推荐
2023-03-24 11:11:14
-
南阳市委深改委会议暨财经委第十一次会议召开 朱是西主持并讲话 王智慧出席
2023-03-24 11:02:53
-
热文:文博体育公园提升改造工程将于4月开工建设
2023-03-24 11:18:28
-
最资讯丨@洛阳考生 2023年河南省考笔试成绩公布
2023-03-24 11:03:29