一种基于多音区交互的可见即可说系统的制作方法

本发明涉及计算机，具体地说，涉及一种基于多音区交互的可见即可说系统。

背景技术：

1、随着汽车智能化的快速发展，语音智能交互成为智能车端上一个必不可少的功能，该功能可以一定程度上提高用户驾驶的安全性以及便利性。

2、当前语音交互可以通过识别语音输入响应对车端整体的控制功能，并且通过识别语音输入的位置，通过语音交互进行多音区控制，但是现有的语音交互仅能够针对系统预设的一些简单的控制功能进行对应的语音控制，无法对车端交互应用端系统中所有控件进行交互控制。

技术实现思路

1、为了解决上述问题，本发明提出一种基于多音区交互的可见即可说系统，能够通过语音交互实现对车机应用端的控制界面中所有操控组件的控制，实现可见即可说的多音区语音交互功能。

2、本发明实施例提供一种基于多音区交互的可见即可说系统，所述系统包括语音助手模块以及多音区可见即可说sdk模块；

3、所述语音助手模块响应用户的语音输入，识别出所述语音输入中的控制功能和控制音区，作为识别结果，将识别结果发送至所述多音区可见即可说sdk模块；

4、所述多音区可见即可说sdk模块根据识别出控制功能和控制音区在预先根据应用端控制界面建立的匹配关系表匹配对应的控件信息，并将匹配的控件信息反馈到所述语音助手模块；

5、所述语音助手模块响应接收的控件信息，在所述应用端的控制界面执行对应控制。

6、优选地，所述多音区可见即可说sdk模块包括扫描单元、解析单元和关系表单元；

7、所述扫描单元对车机控制器应用端进行埋点，并扫描获取应用端布局控件的元素数据，并将扫描的元素数据发送给所述解析单元；

8、所述解析单元对接收的元素数据进行扫描，解析布局控件中父控件与控制功能的对应关系、父控件的子控件与各个控制音区的对应关系，并将解析出的对应关系发送至所述关系表单元；

9、所述关系表单元根据父控件与控制功能的对应关系、父控件的子控件与各个控制音区的对应关系，建立所述匹配关系表。

10、作为一种优选方案，所述多音区可见即可说sdk模块还包括匹配单元和分发单元；

11、所述匹配单元根据所述识别结果中控制功能和控制音区查询所述关系表单元中的匹配关系表，获取对应的父控件和子控件作为所述控件信息；

12、所述分发单元将获取的控件信息下发至所述语音助手模块执行应用端布局控件的指令。

13、优选地，所述语音助手模块包括识别单元；

14、所述识别单元响应于用户输入的可说识别开启指令，开启语音识别；当接收到用户的语音输入后，识别出语音输入控制功能和控制音区作为识别结果，并将识别结果发送至所述多音区可见即可说sdk模块的匹配单元。

15、优选地，所述语音助手模块通过识别出语音输入用户的所在位置，并识别语音输入的指令中是否包含控制功能的控制位置；当语音输入的指令包含控制功能的控制位置时，根据识别的控制位置匹配对应的控制音区；当语音输入的指令不包含控制功能的控制位置时，根据语音输入用户的所在位置匹配对应的控制音区。

16、作为一种优选方案，所述语音助手模块还包括唤醒单元和无障碍执行单元；

17、所述唤醒单元响应用户输入的音区触发唤醒请求，唤醒对应的音区缓存，并在唤醒音区缓存后，生成并发送可说扫描请求给所述无障碍执行单元；

18、所述无障碍执行单元根据接收的可说扫描请求发送对应的扫描服务请求给所述多音区可见即可说sdk模块的扫描单元，触发所述扫描单元扫描获取元素数据。

19、进一步地，所述多音区可见即可说sdk模块的匹配单元向所述语音助手模块的唤醒单元查询所述识别结果中的控制音区对应的缓存是否唤醒，将未唤醒的控制音区滤除；根据过滤后的识别结果中控制功能和控制音区查询所述关系表单元中的匹配关系表，获取对应的父控件和子控件作为所述控件信息。

20、优选地，所述语音助手模块的无障碍执行单元接收到所述控件信息后，触发车机控制器应用端上父控件界面的对应的子控件，以使应用端执行对应的功能响应。

21、进一步地，所述父控件包括车窗开启控件；

22、所述子控件包括前左车窗控件、前右车窗控件、后左车窗控件、后右车窗控件。

23、优选地，所述车机控制器应用端包括系统内部应用和第三方应用。

24、本发明提供一种基于多音区交互的可见即可说系统，所述系统包括语音助手模块以及多音区可见即可说sdk模块；所述语音助手模块响应用户的语音输入，识别出所述语音输入中的控制功能和控制音区，作为识别结果，将识别结果发送至所述多音区可见即可说sdk模块；所述多音区可见即可说sdk模块根据识别出控制功能和控制音区在预先根据应用端控制界面建立的匹配关系表匹配对应的控件信息，并将匹配的控件信息反馈到所述语音助手模块；所述语音助手模块响应接收的控件信息，在所述应用端的控制界面执行对应控制。能够通过语音交互实现对车机应用端的控制界面中所有操控组件的控制，实现可见即可说的多音区语音交互功能。

技术特征：

1.一种基于多音区交互的可见即可说系统，其特征在于，所述系统包括语音助手模块以及多音区可见即可说sdk模块；

2.根据权利要求1所述的基于多音区交互的可见即可说系统，其特征在于，所述多音区可见即可说sdk模块包括扫描单元、解析单元和关系表单元；

3.根据权利要求2所述的基于多音区交互的可见即可说系统，其特征在于，所述多音区可见即可说sdk模块还包括匹配单元和分发单元；

4.根据权利要求1所述的基于多音区交互的可见即可说系统，其特征在于，所述语音助手模块包括识别单元；

5.根据权利要求1所述的基于多音区交互的可见即可说系统，其特征在于，所述语音助手模块通过识别出语音输入用户的所在位置，并识别语音输入的指令中是否包含控制功能的控制位置；当语音输入的指令包含控制功能的控制位置时，根据识别的控制位置匹配对应的控制音区；当语音输入的指令不包含控制功能的控制位置时，根据语音输入用户的所在位置匹配对应的控制音区。

6.根据权利要求4所述的基于多音区交互的可见即可说系统，其特征在于，所述语音助手模块还包括唤醒单元和无障碍执行单元；

7.根据权利要求6所述的基于多音区交互的可见即可说系统，其特征在于，所述多音区可见即可说sdk模块的匹配单元向所述语音助手模块的唤醒单元查询所述识别结果中的控制音区对应的缓存是否唤醒，将未唤醒的控制音区滤除；根据过滤后的识别结果中控制功能和控制音区查询所述关系表单元中的匹配关系表，获取对应的父控件和子控件作为所述控件信息。

8.根据权利要求1所述的基于多音区交互的可见即可说系统，其特征在于，所述语音助手模块的无障碍执行单元接收到所述控件信息后，触发车机控制器应用端上父控件界面的对应的子控件，以使应用端执行对应的功能响应。

9.根据权利要求8所述的基于多音区交互的可见即可说系统，其特征在于，所述父控件包括车窗开启控件；

10.根据权利要求8所述的基于多音区交互的可见即可说系统，其特征在于，所述车机控制器应用端包括系统内部应用和第三方应用。

技术总结本发明公开了一种基于多音区交互的可见即可说系统，所述系统包括语音助手模块以及多音区可见即可说SDK模块；所述语音助手模块响应用户的语音输入，识别出所述语音输入中的控制功能和控制音区，作为识别结果，将识别结果发送至所述多音区可见即可说SDK模块；所述多音区可见即可说SDK模块根据识别出控制功能和控制音区在预先根据应用端控制界面建立的匹配关系表匹配对应的控件信息，并将匹配的控件信息反馈到所述语音助手模块；所述语音助手模块响应接收的控件信息，在所述应用端的控制界面执行对应控制。能够通过语音交互实现对车机应用端的控制界面中所有操控组件的控制，实现可见即可说的多音区语音交互功能。技术研发人员：邱俊,刘俊峰,张莹,冉光伟,王岳东受保护的技术使用者：星河智联汽车科技有限公司技术研发日：技术公布日：2024/2/29