一种云车机交互系统、方法、电子设备和存储介质与流程

本发明涉及云机交互技术，特别是涉及一种云车机交互系统、方法、电子设备和存储介质。

背景技术：

1、实现车载语音助手通常需要集成先进的硬件和软件技术。在硬件方面，必须配备高质量的麦克风阵列和扬声器系统，以及足够的计算cpu计算能力和网络连接单元来支持复杂的语音处理任务。软件层面则涉及到语音识别(asr)、自然语言理解(nlu)、对话管理、业务逻辑处理和语音合成(tts)等关键技术。集成方式通常为oem内置或后装方案。

2、但是传统的车机语音助手是没有语言大模型能力的，为了适应不断变化的用户需求和技术发展，车载语音助手需要进行软件更新和功能升级甚至安装特定的硬件来达到更强大的大模型语言交互能力。后期也要不断地更新和迭代。

技术实现思路

1、鉴于以上现有技术的缺点，本发明的目的在于提供一种云车机交互系统、方法、电子设备和存储介质，用于解决现有技术中传统车机受制于系统硬件无法直接接入语言模型的问题。

2、本发明提供一种云车机交互系统，包括：

3、云车机底座单元，云车机底座单元包括车载语音降噪模块、语言裁判模块和云机助手唤醒模块，车载语音降噪模块接收车载麦克风传输的音频信号并进行算法降噪得到助手选择信号；

4、传统语音助手单元，传统语音助手单元接收助手选择信号后启动传统语音助手，传统语音助手单元接收车载麦克风后续输入音频信号、并根据音频信号处理本地车机系统内的音频应用和车控应用；

5、远端云车机单元，远端云车机单元与云车机底座单元通过数据流信号连接，云机助手唤醒模块接收助手选择信号开启远端云车机单元，远端云车机单元包括语音助手软件模块和语音助手模型模块，远端云车机单元根据车载语音降噪模块输入的语音控制信号选择对应的语音助手软件模块或语音助手模型模块进行处理。

6、在本发明的一个实施例中，语音助手软件模块和语音助手模型模块之间为配合调配使用的关系，语音控制信号通过语音助手软件模块解析，再通过语音助手软件模块内部的适配器模块进行分析判断场景类型，场景类型包括应用场景类型和交互场景类型。

7、在本发明的一个实施例中，当适配器模块识别的场景类型为应用场景类型时，选择语音助手软件模块进行处理，当适配器模块识别的场景类型为交互场景类型时，选择语音助手模型模块进行处理。

8、在本发明的一个实施例中，语音助手软件模块还包括但不限于语音识别模块、对话管理模块、业务逻辑模块和适配器模块，语音识别模块接收车载语音降噪模块传输的音频信号、并将其转换为对应的文本信号传输至语音助手模型模块，业务逻辑模块执行具体的车载功能操作，适配器模块判断场景的场景类型。

9、在本发明的一个实施例中，语音助手模型模块包括语言大模型模块，语言大模型模块包括但不限于自然语言理解模块、自然语言生成模块、问答模块和对话管理模块，自然语言理解模块分析文本信号以确定用户意图，自然语言生成模块根据用户意图生成对应的答复文本，对话管理模块控制与用户的对话流程。

10、在本发明的一个实施例中，云车机底座单元和传统语音助手单元安装在车辆上，远端云车机单元安装在远端的云车机上，远端云车机单元和车辆的本地系统硬件解耦，可远程升级软件系统。

11、本发明还提供一种云车机交互方法，包括：

12、s1：在云车机底座中的语言裁判模块中设定传统助理音频信号和云车机助理音频信号；

13、s2：云车机底座中的车载语音降噪模块将乘客发送的初始音频信号经过算法降噪形成降噪音频信号、并将降噪音频信号输至语言裁判模块；

14、s3：语言裁判模块将降噪音频信号与预设的传统助理音频信号和云车机助理音频信号对比，得到与初始音频信号对应的助理选择；

15、s4：语言裁判模块根据助理选择唤醒对应的传统语音助手或云车机语音助手；

16、s5：对应的传统语音助手或云车机语音助手接收乘客后续的语音指示信号并进行相应的响应；

17、其中，唤醒传统语音助手时，传统语音助手接收车载麦克风后续输入音频信号、并根据音频信号处理本地车机系统内的音频应用和车控应用；唤醒云车机语音助手时，云车机语音助手根据车载语音降噪模块输入的语音控制信号选择语音助手软件模块或语音助手模型模块进行处理。

18、在本发明的一个实施例中，在s4中，当唤醒云车机语音助手时，车机语音助手根据车载语音降噪模块输入的语音控制信号选择对应的语音助手软件模块或语音助手模型模块进行处理，当语音助手软件模块的适配器模块识别的场景类型为应用场景类型时，选择语音助手软件模块进行处理，当适配器模块识别的场景类型为交互场景类型时，选择语音助手模型模块进行处理。

19、本发明还提供一种存储介质，其上存储有计算机程序，所述计算机程序用于使计算机存储并运行如上述任一项所述的系统。

20、本发明还提供一种电子装置，包括处理器单元，所述处理器单元执行如上述任一项所述的系统。

21、本发明提供的一种云车机交互系统、方法、电子设备和存储介质，将云车机底座单元和传统语音助手单元布置在车辆上，又将远端云车机单元布置在院端云机，通过数据流将云车机底座单元和远端云车机单元信号连通。在云车机底座单元设置了车载语音降噪模块、语言裁判模块和云机助手唤醒模块，车载语音降噪模块处理唤醒音频信号并通过语言裁判模块判定所选定的对应语音助手，云机助手唤醒模块负责唤醒远端云车机单元。远端云车机单元包括语音助手软件模块和语音助手模型模块，语音助手软件模块负责与系统应用对接，语音助手模型模块负责场景交互，主要体现在与乘客的动态对话使用。

技术特征：

1.一种云车机交互系统，其特征在于，包括：

2.根据权利要求1所述的云车机交互方法，其特征在于，所述语音助手软件模块和所述语音助手模型模块之间为配合调配使用的关系，所述语音控制信号通过所述语音助手软件模块解析，再通过语音助手软件模块内部的适配器模块进行分析判断场景类型，所述场景类型包括应用场景类型和交互场景类型。

3.根据权利要求2所述的云车机交互方法，其特征在于，当所述适配器模块识别的所述场景类型为所述应用场景类型时，选择所述语音助手软件模块进行处理，当所述适配器模块识别的所述场景类型为所述交互场景类型时，选择所述语音助手模型模块进行处理。

4.根据权利要求3所述的云车机交互方法，其特征在于，所述语音助手软件模块还包括但不限于语音识别模块、对话管理模块、业务逻辑模块和适配器模块，所述语音识别模块接收所述车载语音降噪模块传输的音频信号、并将其转换为对应的文本信号传输至所述语音助手模型模块，所述业务逻辑模块执行具体的车载功能操作，所述适配器模块判断所述场景的场景类型。

5.根据权利要求4所述的云车机交互方法，其特征在于，所述语音助手模型模块包括语言大模型模块，所述语言大模型模块包括但不限于自然语言理解模块、自然语言生成模块、问答模块和对话管理模块，所述自然语言理解模块分析所述文本信号以确定用户意图，所述自然语言生成模块根据所述用户意图生成对应的答复文本，所述对话管理模块控制与用户的对话流程。

6.根据权利要求5所述的云车机交互方法，其特征在于，所述云车机底座单元和所述传统语音助手单元安装在车辆上，所述远端云车机单元安装在远端的云车机上，所述远端云车机单元和所述车辆的本地系统硬件解耦，可远程升级软件系统。

7.一种云车机交互方法，其特征在于，包括：

8.根据权利要求7所述的云车机交互方法，其特征在于，在所述s4中，当唤醒所述云车机语音助手时，所述车机语音助手根据所述车载语音降噪模块输入的语音控制信号选择对应的所述语音助手软件模块或所述语音助手模型模块进行处理，当所述语音助手软件模块的适配器模块识别的场景类型为应用场景类型时，选择所述语音助手软件模块进行处理，当所述适配器模块识别的所述场景类型为所述交互场景类型时，选择所述语音助手模型模块进行处理。

9.一种存储介质，其特征在于，其上存储有计算机程序，所述计算机程序用于使计算机存储并运行如权利要求1-6中任一项所述的系统。

10.一种电子装置，其特征在于，包括处理器单元，所述处理器单元执行如权利要求7-8中任一项所述的方法。

技术总结本发明涉及一种云车机交互系统，包括云车机底座单元、传统语音助手单元和远端云车机单元。云车机底座单元包括车载语音降噪模块、语言裁判模块和云机助手唤醒模块，车载语音降噪模块接收车载麦克风传输的音频信号并进行算法降噪得到助手选择信号，助手选择信号输出至对应的助手单元唤醒语音助手。传统语音助手接收助手选择信号开启传统语音助手单元。远端云车机单元与云车机底座单元通过数据流信号连接，云机助手唤醒模块接收助手选择信号开启远端云车机单元，远端云车机单元包括语音助手软件模块和语音助手模型模块。本发明可以解决现有技术中传统车机受制于系统硬件无法直接接入语言模型的问题。技术研发人员：岳利超,余超,杨乾,王东海受保护的技术使用者：浙江吉利控股集团有限公司技术研发日：技术公布日：2024/5/27