播报:“脱离”现实+极致拟真?声网凤鸣AI引擎来袭
2023-03-24 11:37:29来源:和讯
(资料图)
3月23日,实时互动云服务商声网在北京举办“凤鸣AI引擎”发布会,正式发布了囊括AI降噪、AI回声消除、空间音频、最佳音效在内的声网新一代音频技术智能引擎。开发者与企业可以如搭积木般灵活调用对应组件,并广泛应用在语聊社交、在线K歌、线上会议、游戏竞技、虚拟活动等诸多场景,为用户带来更纯净、更动听、更沉浸的语音互动体验,探索更多营收增长空间。
RTE场景不断丰富,高音质互动需求急需满足
实时音视频技术的发展带出大量的创新场景,从狼人杀、直播连麦到直播电商、在线K歌、互动播客、元宇宙,伴随着场景的不断扩展,用户对实时音视频体验的诉求也越来越高。
传统的RTC概念,从信息传递的角度出发,音频功能仅提供简单的语音沟通,满足单一的场景和通话标准,对于音质并无太高的需求,也就是所谓的“能够沟通”。伴随着实时互动创新场景的涌现,用户对于音频体验的需求也产生了从量变到质变的进化,比如在线K歌、线上会议等场景,用户的需求早已从能够沟通到希望“脱离现实”,屏蔽外界干扰,实现纯净沟通;对于元宇宙、虚拟活动、游戏竞技等场景,用户则是希望从简单沟通实现“极致拟真”的沉浸式体验。
同时,音频体验的提升能够增强平台用户的核心体验。比如,对噪音的抑制能够提升语聊房用户活跃度和留存,以及游戏开黑场景的通话时长;回声消除能显著提升用户的在线K歌体验;而立体、具备空间感的音频体验则能提升元宇宙社交、游戏竞技、线上会议、虚拟活动等场景中用户的临场感和沉浸感。
声网针对以上痛点和需求,声网凤鸣AI引擎应势而生。
3大音频能力+最佳音效实践 回归互动本真
通过AI驱动的方式,声网打通了音频采集、前后处理、云端传输、编解码等链路,旨在为用户打造更纯净、更动听、更沉浸的语音体验,在现有实时互动玩法的基础上锦上添花,赋能行业开发者和企业。
1.AI降噪强力抑制100+突发噪声,兼顾语音无损伤与混响抑制
想要在“脱离现实”的环境中办公、娱乐,屏蔽外界干扰是基础。相比于传统的降噪算法,凤鸣·AI降噪的效果有显著提升,可以一次性解决100+种突发性噪声,比如办公场景经常遇到的敲键盘、鼠标点击、电话铃声;家庭环境中遇到的小孩哭叫、装修、厨房做饭声;户外环境中的风声、雨声、汽车噪声等。
凤鸣·AI降噪在强降噪的同时还能兼顾高保真,即使在人声密集场景下,也能实现纯净通话体验,甚至还实现了在不增加额外运算量的前提下,对远场语音具有明显的混响抑制能力。如果用户在一个房间中距离麦克风较远,这时候对方听到的声音是模糊的,若使用了声网的AI降噪算法,对端也能清晰地听到该用户的声音。
此外,声网自研的AI推理引擎还可以使得AI降噪算法在Android、iOS、Mac、Windows、Web等主流平台以低精度损伤、高性能、低功耗方式运行,使用户的设备不卡不烫。经数据测算,仅开启凤鸣·AI降噪功能,相应设备CPU消耗增幅平均值
3.空间音频极致拟真,打造“声临其境”互动玩法
凤鸣·空间音频通过纯软件算法方案,模拟头部球面区域立体声场,利用范围音频、人声模糊、空气衰减模拟等能力,完美模拟现实听觉感受。当用户操作相应角色在虚拟场景里移动,可以实现根据虚拟人物的面部朝向、音源朝向、远近距离与上下高度,呈现不同声音效果。
空间音频是元宇宙和游戏这类具备3D场景玩法的最佳搭档,如狼人杀、虚拟演唱会、虚拟活动等场景,可以有效的增强用户在线上的互动、听觉体验,重构用户在虚拟世界的沉浸感与临场感。同时,开发者不必担心空间音频功能对于用户设备的影响,据数据测算,开启凤鸣·空间音频功能后,相应设备CPU消耗增幅平均值
多年来,声网汇总梳理语聊领域各类头部App的音效配置,综合声网超过万亿分钟的用户音效偏好的数据模型,并结合声网音频专家的多年沉淀与研究,能够为平台提供针对各种语音场景的最佳音效配置,助力平台用户享受行业顶尖的音效体验。目前已上线的最佳音效包括语聊社交、K歌、游戏陪玩、专业主播等场景。国内某头部语音社交平台就是通过声网提供的最佳音效配置方案,将空间音频、美声、电音等丰富的声音玩法融入互动中,增强平台留存和变现能力。
据声网音频娱乐产品负责人杨帆介绍,凤鸣AI引擎目前正在开发变声这一功能,用户将可以体验20+变声风格,多样角色扮演花式玩转语聊场景。声网算法专家许冉指出,凤鸣AI引擎代表声网在 RTC音频领域针对核心技术的长期投入和产出,以及声网基于音频核心能力衍生出各种复杂功能和高端效果的决心,未来声网将基于凤鸣AI引擎形成新一代RTC音频解决方案,比如探索更个性化的语音方案、语音超分、co-experiencing场景等。
发布会还邀请了仙巴科技创始人兼CEO薛达、扬帆出海创始人兼CEO刘武华、科大讯飞海外解决方案产品部产品总监吴浩亮、声网产品市场负责人朱超华及声网音频娱乐产品负责人杨帆,围绕“音频社交行业现状及海内外趋势展望、“音频技术与行业发展”等话题展开圆桌讨论。
谈到当前的音频社交行业,杨帆指出,音频社交近几年的市场规模仍在持续增长,依旧有广阔的发展空间,总体来说,音频社交的主要玩法集中在多人语聊房、1V1语聊、语音播客、游戏开黑等场景。薛达认为,作为用户之间情感的递进纽带,语音结合虚拟人以及类似ChatGPT这样的大模型,可能未来会带来一波新的社交热潮。
在市场火热的前景下,音频技术的提升对行业来说可谓如虎添翼。正如薛达提到,降噪技术是实现元宇宙空间中用户体验的一个必不可少因素,因为一般娱乐场景中都会播放背景音乐,加上人声和互动音效,如果没有空间音频和降噪,那用户体验会非常差。吴浩亮认为,声音是打造差异化社交玩法的一个重要能力,在社交音频这个赛道上,大致分为音视频直播、音频内容生态,以及泛娱乐音频三个类型,音频技术能力的提升可以有效助力业务端提升用户体验。
不仅国内市场火热,大量出海企业也押注音频社交这一赛道且扎堆中东、东南亚市场,刘武华认为中东市场这种大R市场天然契合音频社交的商业变现形态,而东南亚市场年轻用户多,社交需求旺盛又热衷于尝试新鲜事物,且这两个市场已有成熟的产品形态和产业链。此外,吴浩亮提到,东南亚和中东市场目前还处在快速发展阶段,市场机遇大、用户基数大,但还没有绝对的寡头形成,较之前传统社交类型来讲,音频社交的留存能力也较高,企业需要在用户感兴趣的窗口期尽快实现转化。
谈到音频社交的未来趋势,刘武华表示,社交+游戏、社交+元宇宙、社交+ AIGC 这几种玩法有不错的发展空间和前景。杨帆也认为,元宇宙方向的场景会更受年轻人青睐,另外 AIGC 配合语音转文字等应用,应该也会带来一波新AI音频社交热潮。
责任编辑:hnmd003
相关阅读
-
干1年顶3年!光伏巨头晶澳科技2022年净利翻倍,将再斥资128亿元扩产_世界速看料
日前,A股光伏板块遭遇重击,光伏行业一线梯队股价全线下跌,市值蒸发从数十亿至数百亿元不等,光伏板块...
2023-03-23 -
全球头条:ChatGPT出现严重技术漏洞!OpenAI创始人警告:我有点害怕AI了
据CGTN采访团队官方微博3月23日发布消息称,据BBC报道,最近爆火的ChatGPT出现了严重技术漏洞,用户在社...
2023-03-23
相关阅读
-
播报:“脱离”现实+极致拟真?声网凤鸣AI引擎来袭
3月23日,实时互动云服务商声网在北京举办“凤鸣AI引擎”发布会,正式发布了囊括AI降噪、AI回声消除、空...
-
环球即时看!意念控车?长安汽车公布头枕脑电控制系统专利
意念控车?长安汽车公布头枕脑电控制系统专利3月24日消息,据企查查显示,重庆长安汽车股份有限公司申请...
-
借壳上市是什么意思?借壳上市需要什么条件?
借壳上市是什么意思?借壳上市是一个金融术语,是指上市公司的母公司(集团公司)通过将主要资产注入到上市...
-
k线组合是什么?k线组合优缺点
k线组合是什么?k线组合是指由多根k线形成的组合图形,k线组合对股票后续走势有一定的指导意义,比如常见...
-
什么是借记卡?开通借记卡有什么危害?
什么是借记卡?借记卡,是指发卡银行向持卡人签发的,没有信用额度,持卡人先存款、后使用的一种银行卡。...
-
箱体震荡是什么意思?箱体震荡洗盘要多久?
箱体震荡是什么意思?体震荡一般出现在股票调整趋势中,根据股票的走势画出上下两条平行的线,股价在两条...
-
尾盘集合竞价拉升意味着什么意思?尾盘集合竞价挂单成交规则
尾盘集合竞价拉升意味着什么意思?股票尾盘集合竞价拉升意味着有一部分资金在尾盘抢筹,或者是有一部分资...
-
两阳夹一阴形态有几种?两阳夹一阴后期k线走势
两阳夹一阴形态有几种?(1)两阳夹一阴由3根K线组成。第一根K线和第三根K线为阳线,第二根K线为阴线。(2)...
-
门诊统筹怎么用?门诊统筹和门诊共济的区别
门诊统筹怎么用?首先,进入微信服务界面点击城市服务。然后,在城市服务界面点击医疗进入。最后,在医疗...
-
基药目录几年调整一次?医保目录和基药目录有什么区别?
基药目录几年调整一次?《国家基本药物目录管理办法》第九条 国家基本药物目录在保持数量相对稳定的基础...
-
信泰人寿保险怎么样?口碑好吗?_世界热议
信泰人寿保险在国内的运营时间虽然相对较短,但在不断地积累经验、提升服务质量方面表现突出。此外,信...
-
快消息!投保人申报的被保险人年龄不真实有什么影响?投保人有年龄限制吗?
在保险公司处理理赔申请时,会对被保险人的年龄进行核实。如果发现被保险人的实际年龄与申报的年龄不符...
-
团意险和雇主责任险有何区别?怎么投保? 时快讯
团意险和雇主责任险虽然都属于企业保险,但是它们的保障对象、保障范围和保障方式都存在一定的差异。团...
-
世界热推荐:中国保险十大排名介绍!什么样的保险公司才算好?
往年中国保险十大排名中,排名前三位分别是中国人寿保险、中国平安保险、中国太平洋保险。这三家公司的...
-
快消息!君康金生金世黄金版终身寿险怎么样?君康保险实力如何?
这款产品回本速度都比同类型产品要快,选择3年或者5年的缴费期为最佳。现金价值增长速度快,在同类型市...
-
股票几点收盘?收盘集合竞价什么意思?
股票几点收盘?股票9:30开市,15:00收市。上午9:15--9:25为集合竞价时间,其中9:15-9:20可以撤单,9...
-
股票市盈率怎么计算?市盈率一般多少合理?
股票市盈率怎么计算?市盈率计算公式:市盈率=每股市价 每股收益。反映了市场上投资者对股票投资收益和...
-
微速讯:传雷诺推进电动车业务IPO,正在挑选承销银行
传雷诺推进电动车业务IPO,正在挑选承销银行盖世汽车讯据外媒报道,知情人士透露,雷诺集团正邀请投资银...
-
三年或亏60亿美元,福特电动车业务太烧钱?-世界观天下
三年或亏60亿美元,福特电动车业务太烧钱?盖世汽车讯据外媒报道,3月23日,福特汽车在投资者和分析师的...
-
现代因起火风险在美国召回56.8万辆汽车|天天快报
现代因起火风险在美国召回56 8万辆汽车现代告知美国国家公路交通安全管理局(NHTSA),该公司在美国收...
-
如何从技术面分析股票?股票技术分析有哪几种?
如何从技术面分析股票?(l)交易量。它是股票市场的一个重要指标,对市场走势有很大影响。交易量的突然放...
-
期货平仓盈亏是实际盈亏吗?期货平仓盈亏怎么计算?
期货平仓盈亏是实际盈亏吗?平仓盈亏是实际盈亏。平仓盈亏与持仓盈亏相对。期货交易者在实际平仓时所发生...
-
股市利空什么意思?大涨前为何要发利空?
股市利空什么意思?股票利空是指市场上出现有可能促使股价下跌的消息。股票利空是一种股市专业用语,利空...
-
周转率是什么意思?周转率是不是越高越好?
周转率是什么意思?周转率就是对资产的利用率,通过对周转率进行计算,可以看出企业在一段时期内整体运营...
-
b轮融资是什么意思?b轮融资上市几率大吗?
b轮融资是什么意思?B轮融资指的是第二轮融资,代表公司的经营模式已趋渐成熟,已经拥有了完整的盈利模式...
-
天使基金是什么意思?天使基金和创投基金的区别
天使基金是什么意思?所谓天使基金就是专门投资于企业种子期、初创期的一种风险投资。因为它的作用主要是...
-
CPI指数是什么意思?cpi指数上涨意味着什么?
CPI指数是什么意思?CPI是指居民消费指数,可以直接反映家庭购买力的变化,当CPI居民消费水平上升,说明...
-
退机票保险费可以退吗?退机票手续费扣多少?
退机票保险费可以退吗?机票退票保险是不能退的。航空意外险是保险公司为航空旅客专门设计的一种针对性很...
-
转配股是什么意思?10转5股和10送5股区别
转配股是什么意思?股票配资是指上市公司向股民配资发行股票 这是上市公司发行新股的形式 一般上市公司...
-
量化交易是什么?散户如何做量化交易?
量化交易是什么?量化交易是指借助现代统计学和数学的方法,利用计算机技术来进行交易的证券投资方式,极...
精彩推荐
阅读排行
精彩推送
- 环球简讯:那曲市新挖掘非遗资源5...
- 世界最新:拉萨市城关区金珠西路...
- 增值税是什么意思?增值税的税收...
- 末代皇帝溥仪是否还有后人在世?...
- 现行建筑工程施工规范包含哪些内...
- 爱的理想生活是什么电视剧?爱的...
- 军事纪实小说有哪些?分享40部必...
- 黄奕主演的电影有哪些?介绍几部...
- 网资是什么?什么是网络资本运作...
- 五笔特殊符号有哪些?五笔输入法...
- 诺基亚e71手机游戏有哪些?老版...
- 搞笑口误有哪些?爆笑口误系列文...
- 王燕老公是谁?王艳现状怎么样?
- 什么是小盘股?小盘股市值一般多...
- 虚拟光驱是什么东西?虚拟光驱怎...
- 键盘上scrolllock是什么意思?键...
- 机器码是什么?机器码封了怎么解...
- 什么叫图像压缩比?图像压缩比越...
- 视频号怎么关闭?视频号可以看谁...
- 抖音账号被锁定什么意思?抖音账...
- qq好友查找是怎么加的?qq好友查...
- 宽带密码和wifi密码一样吗?家里...
- xls文件怎么打开?xls文件打开是...
- 苹果死机怎么办?苹果死机黑屏重...
- 新动态:长城保险怎么样可靠吗?...
- 人寿保险重大疾病险介绍!人寿保...
- 全球新资讯:基本保险金额是怎么...
- 排名第一的百万医疗险是哪款?百...
- 人民保险和人寿保险哪家好?有哪...
- 电脑微信打不开怎么回事?电脑微...