一种用于铁路工务防护联络的对话识别方法、装置、设备及存储介质与流程

本申请涉及数据处理领域，尤其涉及一种用于铁路工务防护联络的对话识别方法、装置、设备及存储介质。

背景技术：

1、现今在一些作业场景如铁路工务段的铁路线路及桥隧设备的保养、维修工作等工务防护联络的场景下，在影响行车、人身安全的施工和维修作业及发生线路故障地点，需要监管作业人员的工作，要求作业人员工作全程都要录音，通过对录音分析，如分析对话内容以对作业人员进行监管。

2、目前，对于录音分析都是基于人工整理，由于对话过程中可能涉及多方通话，因此确定不同对话人的对话内容困难，并且每一录音的时间节点不统一，导致最终还原出完整的对话内容非常困难，并且人工整理的效率低下。

技术实现思路

1、本申请实施例提供一种用于铁路工务防护联络的对话识别方法、装置、设备及存储介质，以解决相关技术存在的至少一个问题，技术方案如下：

2、第一方面，本申请实施例提供了一种用于铁路防护联络的对话识别方法，包括：

3、获取多个采集终端的生物特征、录音数据以及录音数据的时间信息；

4、根据所述时间信息以及所述录音数据，确定文本数据；

5、根据所述生物特征以及所述文本数据，从所述文本数据中确定不同身份对应的文本内容；

6、通过所述时间信息，将所述文本内容进行时间对齐，确定对话识别结果。

7、在一种实施方式中，所述根据所述时间信息以及所述录音数据，确定文本数据之前还包括：

8、获取环境声音数据；

9、利用所述环境声音数据以及深度学习的降噪算法，对所述录音数据进行噪声抑制，得到降噪后的录音数据。

10、在一种实施方式中，所述根据所述时间信息以及所述录音数据，确定文本数据包括：

11、对所述录音数据进行自动语音识别，得到若干段的文本内容；

12、根据所述时间信息，确定每一所述文本内容对应的相对时间戳；

13、根据所述文本内容以及所述相对时间戳，确定文本数据。

14、在一种实施方式中，所述根据所述生物特征以及所述文本数据，从所述文本数据中确定不同身份对应的文本内容包括：

15、根据所述生物特征，确定所述生物特征对应的身份；

16、利用所述身份对对应的所述文本数据进行关联，确定不同身份对应的文本内容。

17、在一种实施方式中，所述通过所述时间信息，将所述文本内容进行时间对齐，确定对话识别结果包括：

18、根据所述时间信息中的录音开始时间以及每一所述文本内容对应的相对时间戳，确定每一所述文本内容的绝对时间戳；

19、根据所述绝对时间戳以及所述身份，对每一所述文本内容进行顺序排列，得到对话识别结果。

20、在一种实施方式中，所述根据所述绝对时间戳以及所述身份，对每一所述文本内容进行顺序排列，得到对话识别结果包括：

21、从所述绝对时间戳中，确定按照时间排列先后顺序位于最先的目标绝对时间戳；

22、根据所述目标绝对时间戳对应的目标文本内容，确定目标文本内容对应的目标身份；

23、按照所述目标绝对时间戳、所述目标身份以及所述目标文本内容的顺序，以预设格式生成对话内容；

24、从所述绝对时间戳中排除所述目标绝对时间戳，返回所述从所述绝对时间戳中，确定按照时间排列先后顺序位于最先的目标绝对时间戳的步骤，直至所述绝对时间戳为空，得到对话识别结果，其中所述对话识别结果包括多个对话内容。

25、在一种实施方式中，所述对所述录音数据进行自动语音识别，得到若干段的文本内容包括：

26、利用ac自动机结构的语音识别算法，对所述录音数据进行处理，得到若干段的候选文本；

27、将若干段的候选文本分别输入至预训练的大语言模型，得到若干段的文本内容。

28、第二方面，本申请实施例提供了一种用于铁路防护联络的对话识别装置，包括：

29、获取模块，用于获取多个采集终端的生物特征、录音数据以及录音数据的时间信息；

30、第一确定模块，用于根据所述时间信息以及所述录音数据，确定文本数据；

31、第二确定模块，用于根据所述生物特征以及所述文本数据，从所述文本数据中确定不同身份对应的文本内容；

32、对齐模块，用于通过所述时间信息，将所述文本内容进行时间对齐，确定对话识别结果。

33、在一种实施方式中，所述第一确定模块还用于：

34、获取环境声音数据；

35、利用所述环境声音数据以及深度学习的降噪算法，对所述录音数据进行噪声抑制，得到降噪后的录音数据。

36、第三方面，本申请实施例提供了一种用于铁路防护联络的电子设备，包括：处理器和存储器，该存储器中存储指令，该指令由该处理器加载并执行，以实现上述各方面任一种实施方式中的方法。

37、第四方面，本申请实施例提供了一种用于铁路防护联络的计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被执行时实现上述各方面任一种实施方式中的方法。

38、上述技术方案中的有益效果至少包括：

39、通过获取多个采集终端的生物特征、录音数据以及录音数据的时间信息，根据时间信息以及录音数据，确定文本数据，根据生物特征以及文本数据，从文本数据中确定不同身份对应的文本内容，基于生物特征确定不同身份对应的文本内容，提高效率以及准确性；通过时间信息，将文本内容进行时间对齐，确定对话识别结果，智能化确定对话识别结果，有利于提高整理效率以及准确率。

40、上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本申请进一步的方面、实施方式和特征将会是容易明白的。

技术特征：

1.一种用于铁路工务防护联络的对话识别方法，其特征在于，包括：

2.根据权利要求1所述用于铁路工务防护联络的对话识别方法，其特征在于：所述根据所述时间信息以及所述录音数据，确定文本数据之前还包括：

3.根据权利要求1或2所述用于铁路工务防护联络的对话识别方法，其特征在于：所述根据所述时间信息以及所述录音数据，确定文本数据包括：

4.根据权利要求3所述用于铁路工务防护联络的对话识别方法，其特征在于：所述根据所述生物特征以及所述文本数据，从所述文本数据中确定不同身份对应的文本内容包括：

5.根据权利要求3所述用于铁路工务防护联络的对话识别方法，其特征在于：所述通过所述时间信息，将所述文本内容进行时间对齐，确定对话识别结果包括：

6.根据权利要求5所述用于铁路工务防护联络的对话识别方法，其特征在于：所述根据所述绝对时间戳以及所述身份，对每一所述文本内容进行顺序排列，得到对话识别结果包括：

7.根据权利要求3所述用于铁路工务防护联络的对话识别方法，其特征在于：所述对所述录音数据进行自动语音识别，得到若干段的文本内容包括：

8.一种用于铁路防护联络的对话识别装置，其特征在于，包括：

9.一种用于铁路防护联络的电子设备，其特征在于，包括：处理器和存储器，所述存储器中存储指令，所述指令由所述处理器加载并执行，以实现如权利要求1-7任一项所述的方法。

10.一种用于铁路防护联络的计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被执行时实现如权利要求1-7中任一项所述的方法。

技术总结本申请提出一种用于铁路工务防护联络的对话识别方法、装置、设备及存储介质，用于铁路工务防护联络的对话识别方法通过获取多个采集终端的生物特征、录音数据以及录音数据的时间信息，根据时间信息以及录音数据，确定文本数据，根据生物特征以及文本数据，从文本数据中确定不同身份对应的文本内容，基于生物特征确定不同身份对应的文本内容，提高效率以及准确性；通过时间信息，将文本内容进行时间对齐，确定对话识别结果，智能化确定对话识别结果，有利于提高整理效率以及准确率。技术研发人员：张丽,林贤斌受保护的技术使用者：广州市讯途科技有限公司技术研发日：技术公布日：2024/6/11