这些耳熟能详的VR语音技术方案 您都了解过吗?

人工智能 语音识别
期,Oculus为三星Gear VR虚拟现实头盔增加了两项分别名为“Parties”和“Rooms”功能,旨在提高用户在使用VR设备时进行更多的互动交流。

 近期,Oculus为三星Gear VR虚拟现实头盔增加了两项分别名为“Parties”和“Rooms”功能,旨在提高用户在使用VR设备时进行更多的互动交流。2016年FaceBook创始人扎克伯格在会上也讲到,“VR将成为下一个计算平台,将带领人们完全颠覆现有的网络社交模式。”VR社交概念被炒得如火如荼,但VR路途却并不那么美好,首先,现今面临的问题就是语音交互的问题。今天,小编就来为大家讲讲VR语音交互的这个问题。

[[185808]]

  一、科大讯飞语音引擎系统

  InterReco语音识别系统

  科大讯飞推出全球领先的InterReco语音识别系统,InterReco驱动自助语音服务和语音搜索业务,是语音商务(V-Commerce)的核心动力引擎。目前,InterReco语音识别系统已经能够利用先进的自助语音服务解决方案来处理日益增长的信息咨询、电子交易和客户的服务需求。基于InterReco的解决方案帮助用户在任何时候、任何地点通过随处可得的电话轻松自然的获得信息与服务,享受高效、稳定、便捷的应用体验。

  InterReco语音识别系统采用分布式架构,继承了科大讯飞久经考验的电信级语音平台高稳定的特点,可以满足电信级应用的高可靠性、高可用性要求。针对传统语音识别产品集成开发困难,业务设计繁琐的问题,InterReco产品大大简化了集成开发和业务开发的复杂度,为系统集成人员和业务开发人员提供了便捷、高效的开发环境。

InterReco产品的主要功能组成模块及结构

  InterReco语音识别系统主要包括应用接口、识别引擎和操作系统适配三个层次,这三个逻辑层共同构成完整的InterReco系统架构。

  应用接口是InterReco系统提供的开发接口,集成开发人员应关注这些接口的定义、功能和使用方法。识别引擎提供核心的语音识别功能,并作为应用接口的功能实现者;同时

  为了便于开发和使用,系统在这一层提供了一系列高效、易用的工具。操作系统适配层屏蔽了多操作系统的复杂性,为识别引擎提供操作系统相关的底层支持。

  InterReco语音识别系统按照逻辑组成可以分为识别语法(Grammar)、识别引擎核心(Recognizer Core)、语音端点检测(Voice Activation Detector)、音频输入(Audio Source)四个子系统,系统的主要设计和开发将按照这些子系统进行。

  嵌入式语音Aisound系列产品

  同样,科大讯飞还提供了电信级及嵌入式语音合成技术,嵌入式语音Aisound系列是公司一款全球领先的语音合成技术,其尺寸小,资源占用低,效率高,主要应用于嵌入式领域的语音合成软件模块。适用于不同行业的语音播报和应用需求。

  科大讯飞嵌入式语音方案主要提供:XFS3031CNP中文语音合成芯片、XFS4243CE中英文语音合成模块、XFS5152CE中英文语音合成芯片、XF-S4240中文语音合成模块等四套语音合成方案,目前已成功应用于车载调度仪、信息机、气象预警机、考勤机、排队机、手持智能仪表、税控机等各类信息终端产品上。另外,语音引擎还提供轻量级语音合成软件Aisound,支持的嵌入式平台和支持功能应用均非常广泛。

XFS3031CNP中文语音芯片系统构成图

科大讯飞语音合成系统框架图

  二、云知声“远场语音识别技术”方案

  在语音云平台方面,云知声主要在语音识别、语义理解以及语音合成等三方面具备自身的技术优势。语音交互作为VR领域的一个交互入口,云知声更是强调适应各种不同日常场景的交互技术,目前,云知声主要针对语音云平台、智能车载、智能家居、教育等四个垂直领域的语音识别技术提供解决方案。

  云知声研发的最新语音技术——“基于双麦克风阵列的远场语音识别方案”。 这款方案采用了世界领先的SSP技术可以有效抑制用户语音之外的噪声和混响效应,做到在95%以上的场景中可以有效地进行远场拾音,配合云知声的远场语音识别引擎,保证了5米距离内,达到精准的识别效果。同时,由于该方案只需要2只麦克风,安装位置灵活,也无需考虑设备朝向。

云知声“云端芯”生态

  云知声提供语音识别、语义理解、语音合成、声纹识别等多项语音核心技术,云知声开放平台支持一站式语音应用开发,可自主创建语音应用、并可添加相应的匹配需求方案,通过平台类型设置完成SDK集成包开发,并完成语音产品上线发布。

  三、声网Agora.io实时语音系统

[[185811]]

  声网Agora.io语音SDK采用全球独有的32khz超宽频音质,是普通电话音质的4倍,并提供多声道音效系统,实现VR体验中的“听声辩位”,堪比3D音效。更重要的是,实时语音还可以完美的与游戏背景音乐融合,大大增加了用户的临场感。

  除了音频处理上的优化,声网Agora.io依托全球部署的虚拟通信网络,确保为游戏应用提供不卡、不掉线、超低延迟的体验,特别针对网络状况不好情况下的独特优化,可极大提高游戏应用和游戏直播的互动性。这一“重量级武器”,开发者只需要30分钟集成即可轻松完成。

  针对无法实现基本的听音辨位问题,声网Agora.io推出了多声道音效系统解决方案。通过集成语音通话SDK,可获得拥有实时高清音质、32khz超带频的语音编解码器NOVA,实现VR画面中声音的立体化环绕,让用户感受到来自四面八方环绕的声音,同时通过智能化回声消除和降噪功能,让用户可以通过声音精准定位空间位置,实现良好的画面沉浸感受。

责任编辑:张燕妮 来源: 电子发烧友整理
相关推荐

2018-06-21 07:25:04

2021-02-22 09:00:00

Jenkins工具开发

2018-07-27 15:20:50

企业新兴技术

2021-01-07 05:40:13

BLE模块Android

2023-12-07 08:13:58

Java开发

2018-06-20 10:49:22

2020-11-24 09:45:17

删库程序员代码

2013-06-03 15:15:51

2019-09-17 09:31:10

2023-12-11 07:40:00

CDN网络服务器

2020-10-28 07:53:14

显示器

2015-11-06 09:39:52

2021-01-11 05:37:54

仓储模式接口

2020-11-26 13:21:09

应用开发Serverless

2015-11-06 10:52:51

2022-01-18 11:06:44

Wi-Fi路由器网络技术

2011-05-05 09:54:05

静态代码

2011-10-08 10:43:06

软件工程

2016-04-19 16:01:05

2022-03-03 08:15:19

云原生无服务器服务网格
点赞
收藏

51CTO技术栈公众号