【专利解密】肢体检测与语音交互技术的碰撞 京东方发明多模态智能语音系统

【嘉勤点评】京东方发明的结合体感检测的语音交互方案，能够实现肢体感应打开智能语音音箱，与整个智能设备整机进行交互，从而可以防止在语音交互单元关闭或者遇到问题时，及时打开或者重启语音交互单元，带给用户及时响应的智能体验。

集微网消息，物联网已成为全球新一轮科技革命与产业变革的重要驱动力，而智能音箱则是目前家用物联网技术的核心部件。现在市面上的智能音箱层出不穷，五花八门，例如百度推出的“小度”、苹果手机上的Siri上都属于智能语音技术。

智能语音技术的核心非常简要，即要让机器在语音对话这一环节拥有近似于人的能力，渗入人们的日常生活空间。在智能音箱上，麦克风作为智能语音音箱上的重要部件，在一定程度上决定了语音交互的能力。

为此，京东方在2021年5月28日申请了一项名为“语音交互系统及方法、智能设备”的发明专利（申请号202110594436.8），申请人为北京京东方显示技术有限公司。

在该专利中，发明了一种结合体感检测的语音交互方案，可以带给用户更加智能的体验。根据该专利目前公开的相关资料，让我们一起来看看这项技术方案吧。

如上图，为该专利中发明的语音交互系统的逻辑框图，该装置主要包括有语音交互单元100、光电感应单元200、指令控制单元300和图像采集单元400。语音交互单元用于采集并识别用户的语音指令；光电感应单元与语音交互单元相连接，可以接收用户的肢体指令。

该方案中，光电感应单元、语音交互单元和指令控制单元连接共同构成语音交互系统，可以根据用户的语音、肢体动作来与整机进行交互，解决了光电感应单元和语音单元的交互难题，具体可包括以下过程

1）用户可以通过语音交互单元控制智能设备执行相应的指令，实现语音交互功能；

2）当语音交互单元处于关闭状态时，则光电感应单元可以感应到用户的肢体指令，并向语音交互单元发送指令，以唤醒语音交互单元接收用户语音；

3）而当光电感应单元关闭时，用户还可以通过语音交互将其开启，以及时捕捉、采集用户的肢体指令。

因此，在该方案中，主要依赖于语音交互单元和用户进行交互，但同时也加入了用户的肢体动作识别，以防止在语音交互单元关闭或者遇到问题时，可以及时打开或者重启语音交互单元，带给用户及时响应的智能体验。

如上图，为上述方案中光电开关的结构示意图，光电开关包括外壳210、光电传感器220、线路板230、后盖240和第一号传输线束。外壳的内部中空，外壳包括前端和后端，前端设有指示标识211，后端呈开口形状；光电传感器和线路板都设置于外壳内，且线路板与光电传感器、第一号传输线束连接。

最后，如上图，为这种麦克风模组的结构爆炸图，该麦克风模组包括上盖110、两个收音麦克风、印刷电路板120、密封圈130和底盖140。其中，上盖内部中空，上盖包括前端和后端，前端设有两个收音孔，后端开口设置；两个收音麦克风安置于上盖内部，每一收音麦克风对应一个收音孔设置，且每一收音孔处设置密封圈，从而提供防水、防尘功能；印刷电路板设置在上盖内部并与收音麦克风连接。

以上就是京东方发明的结合体感检测的语音交互方案，该方案能够实现肢体感应打开智能语音音箱，与整个智能设备整机进行交互，从而可以防止在语音交互单元关闭或者遇到问题时，及时打开或者重启语音交互单元，带给用户及时响应的智能体验。