一种智慧校园校车用智能考勤与安全管理方法及系统与流程

本技术涉及即时通讯的，尤其是涉及一种智慧校园校车用智能考勤与安全管理方法及系统。

背景技术：

1、考勤即考查出勤，通过某种方式获得师生、员工或某些团体、个人在特定场所及特定时间段内的出勤情况。

2、随着教育的普及和校园规模的扩大，校车作为一种重要的交通工具，在接送学生上下学方面发挥着越来越重要的作用。然而，现有的校车考勤系统普遍存在数据记录不准确、实时性不强的问题，导致学生安全保障的缺失。

3、具体来说，现有的校车考勤与安全管理系统存在如下问题：

4、现有的校车考勤管理系统普遍只关注学生上、下校车的记录，而对于学生在校车内的行为和安全状况缺乏有效的监控和管理，虽然通常情况下校车内会有随车教师等人员，但是随车人员也难以长时间将精力集中于所有学生身上，可能会造成对学生的安全保障缺失。

技术实现思路

1、为了解决上述问题，在对学生上、下校车进行记录，并且使学生于校车内的行为和安全状况得到有效的监控和管理，本技术提供了一种智慧校园校车用智能考勤与安全管理方法及系统。

2、本技术的上述发明目的一是通过以下技术方案得以实现的：

3、一种智慧校园校车用智能考勤与安全管理方法，包括步骤：

4、当接收到考勤识别终端所识别的身份信息时，在考勤报表中与该身份信息关联的副表生成对应的考勤记录信息；

5、响应于用户端基于需要访问的目标副表发送的令牌获取指令，向目标副表预设绑定的用户端发送临时令牌；

6、实时接收到图像采集终端发出的图像信息，并将接收到的图像信息输入至图像识别模型进行特征识别；

7、当接收到图像识别模型输出的异常连续帧信息时，获取该异常连续帧信息关联的身份信息；

8、向考勤识别终端预设绑定的显示终端发送告警信息，同时在与该身份信息关联的副表中生成对应的图像异常记录信息。

9、通过采用上述技术方案，学生上、下校车时，考勤识别终端对学生的身份信息进行识别并发出对应的身份识别信号，基于所识别的身份信息，在考勤报表中生成与该身份信息关联的副表以及对应的考勤记录信息，家长为了查看副表通过用户端发出令牌获取指令时，向其需要查看的目标副表预设绑定的用户端发送临时令牌，当用户端对临时令牌验证成功时，向该用户端发送目标副表的界面信息，学生进入校车内并按照规定坐好后，校车启动，在校车行驶过程中实时接收到图像采集终端发出的图像信息，并将图像信息输入至图像识别模型进行特征识别，当车内发生异常状况时，接收到图像识别模型输出的异常连续帧信息，获取该异常连续帧信息关联的身份信息，向考勤识别终端预设绑定的显示终端发送告警信息，以通知随车教师以及校车司机校车内发生异常状况，使其进行处理，同时在与该身份信息关联的副表中生成对应的图像异常记录信息，以通知对应的学生家长；本技术通过实时对校车内进行图像采集以及异常行为的识别，在学生上、下校车、请假缺勤等进行考勤确认以及于校车内发生异常状况时，通过在具有令牌保护的记录表内进行记录，并且在发生异常状况时对校车内的随行教师与司机进行提示告警，具有使学生于校车内的行为、安全状况以及考勤状况得到有效的监控和管理的同时，还能达到保护学生的个人隐私的效果。

10、本技术在一较佳示例中可以进一步配置为：所述响应于用户端基于需要访问的目标副表发送的令牌获取指令，向目标副表预设绑定的用户端发送临时令牌的步骤，包括步骤：

11、响应于用户端发送的令牌获取指令，获取目标副表关联的身份信息；

12、生成具有时限的临时令牌，并发送至该身份信息预设绑定的用户端；

13、若在时限内对令牌获取指令的临时令牌验证成功，向验证成功的用户端发送目标副表的界面信息。

14、通过采用上述技术方案，响应于用户端基于访问副表请求发出的令牌获取指令，将具有时限的临时令牌发送至目标副表关联的学生身份信息所预设绑定的家长用户端处，在时限内对临时令牌验证成功时，向验证成功的用户端发送目标副表的界面信息，通过对带有时限的临时令牌进行验证，提高对学生个人隐私的保护，并且验证成功的用户端即可对目标副表进行访问，即其他监护人可以协助因个人原因不便于查看的家长进行查看与管理，提高了灵活性以及实用性。

15、本技术在一较佳示例中可以进一步配置为：所述实时接收到图像采集终端发出的图像信息，并将接收到的图像信息输入至图像识别模型进行特征识别的步骤，包括步骤：

16、图像识别模型对实时接收到的图像信息进行识别，提取图像信息中的特征点进行跟踪比对；

17、当连续的预设数量帧数中的同一特征点出现异常时，图像识别模型识别出现异常的特征点对应乘客的身份信息；

18、图像识别模型基于出现异常的连续帧，生成关联有对应的身份信息的异常连续帧信息。

19、通过采用上述技术方案，图像识别模型对实时接收到的图像信息中的特征点进行跟踪比对，当识别到预设数量的连续帧数中的特征点出现异常时，对该出现异常的特征点对应的乘客进行身份信息识别，并生成关联有该身份信息的异常连续帧信息，通过对校车内图像信息的特征点进行比对，从而在校车内学生发生危险性异常行为时作出识别，具有使学生于校车内的行为以及安全状况得到有效的监控和管理的效果。

20、本技术在一较佳示例中可以进一步配置为：所述当接收到图像识别模型输出的异常连续帧信息时，获取该异常连续帧信息关联的身份信息的步骤之后，执行以下步骤：

21、基于预设的风险等级规则，对异常连续帧信息进行风险等级关联；

22、将异常连续帧信息中风险等级最高的图像帧设定为异常记录帧；

23、基于异常连续帧关联的身份信息，生成对应该身份信息的图像异常记录信息，所述图像异常记录信息包括异常记录帧。

24、通过采用上述技术方案，基于预设的风险等级规则，对异常连续帧信息的连续帧图像进行风险等级关联，将风险等级最高的图像帧设定为异常记录帧，生成包含该异常记录帧且对应异常连续帧关联的身份信息的图像异常记录信息，通过风险等级的关联，将风险等级最高的即最具有代表性的图像帧设定为异常记录帧，且基于异常记录帧生成图像异常记录，减少过多图像帧的记录，达到省流效果的同时也减轻家长因查看过多相似图像造成的负担。

25、本技术在一较佳示例中可以进一步配置为：所述当接收到考勤识别终端所识别的身份信息时，在考勤报表中与该身份信息关联的副表生成对应的考勤记录信息的步骤之后，执行以下步骤：

26、实时接收到音频采集终端发出的音频信息，并将接收到的音频信息输入至音频识别模型进行关键词识别匹配；

27、当接收到音频识别模型输出的异常关键词信息时，获取该异常关键词信息关联的身份信息；

28、向考勤识别终端预设绑定的显示终端发送告警信息，同时在与该身份信息关联的副表中生成对应的音频异常记录信息。

29、通过采用上述技术方案，在校车行驶过程中实时接收到音频采集终端发出的音频信息，并将音频信息输入至音频识别模型进行关键词识别匹配，当车内学生说出含有人身攻击等暴力词汇时，接收到音频识别模型输出的异常关键词信息，获取该异常关键词信息关联的身份信息，向考勤识别终端预设绑定的显示终端发送告警信息，以通知随车教师以及校车司机校车内发生异常状况，使其进行处理，同时在与该身份信息关联的副表中生成对应的音频异常记录信息，以通知对应的学生家长。

30、本技术在一较佳示例中可以进一步配置为：音频识别模型包括异常词汇匹配层以及语义关键词识别层，所述实时接收到音频采集终端发出的音频信息，并将接收到的音频信息输入至音频识别模型进行关键词识别匹配的步骤，包括步骤：

31、音频识别模型接收到音频信息时，语义关键词识别层实时对音频信息进行语义识别；

32、语义关键词识别层基于识别到的关键词信息，输出关键词特征向量至异常词汇匹配层进行匹配；

33、异常词汇匹配层匹配到异常关键词时，识别含有该异常关键词的音频信息所对应乘客的身份信息，并输出关联有该身份信息的异常关键词信息。

34、通过采用上述技术方案，语义关键词识别层实时对输入音频识别模型的音频信息进行语义识别，并基于识别到的关键词信息，输出关键词特征向量至异常词汇匹配层进行匹配，异常词汇匹配层对关键词特征向量匹配到异常关键词时，识别音频信息对应乘客的身份信息，并输出关联有该身份信息的异常关键词信息，异常词汇匹配层通过对关键词特征向量与其收集保存的具有人身攻击或侮辱性的网络词汇等进行匹配，匹配成功时输出关联有对应学生身份信息的异常关键词信息，对校车内学生的语言行为进行管控。

35、本技术在一较佳示例中可以进一步配置为：所述音频识别模型接收到音频信息时，语义关键词识别层实时对音频信息进行语义识别的步骤之后，执行以下步骤：

36、当语义关键词识别层在预设时间内识别到预设次数的同一不明词汇或相似不明词汇时，识别含有该不明词汇的音频信息所对应乘客的身份信息；

37、当接收到音频识别模型输出的不明音频信息时，将该不明音频信息发送至身份信息对应绑定的教师端。

38、通过采用上述技术方案，语义关键词识别层在预设时间内多次识别到同一不明词汇或相似不明词汇时，识别音频信息对应乘客的身份信息，当接收到音频识别模型输出的不明音频信息时，将该不明音频信息发送至身份信息对应绑定的教师端，当学生多次使用自创词汇或方言词汇时，为了方便教师确认该词汇是否具有攻击性等危害，将含有该不明词汇的不明音频发送至教师端供教师进行确认，从而增强对学生规范文明语言的管控。

39、本技术的上述发明目的二是通过以下技术方案得以实现的：

40、一种智慧校园校车用智能考勤与安全管理系统，包括：

41、考勤记录生成模块，用于当接收到考勤识别终端所识别的身份信息时，在考勤报表中与该身份信息关联的副表生成对应的考勤记录信息；

42、临时令牌处理模块，用于响应于用户端基于需要访问的目标副表发送的令牌获取指令，向目标副表预设绑定的用户端发送临时令牌；

43、图像处理模块，用于实时接收到图像采集终端发出的图像信息，并将接收到的图像信息输入至图像识别模型进行特征识别；

44、身份信息获取模块，用于当接收到图像识别模型输出的异常连续帧信息时，获取该异常连续帧信息关联的身份信息；

45、图像异常记录模块，用于向考勤识别终端预设绑定的显示终端发送告警信息，同时在与该身份信息关联的副表中生成对应的图像异常记录信息。

46、通过采用上述技术方案，考勤记录生成模块用于当接收到考勤识别终端所识别的身份信息时，在考勤报表中与该身份信息关联的副表生成对应的考勤记录信息；临时令牌处理模块用于响应于用户端基于需要访问的目标副表发送的令牌获取指令，向目标副表预设绑定的用户端发送临时令牌；图像处理模块用于实时接收到图像采集终端发出的图像信息，并将接收到的图像信息输入至图像识别模型进行特征识别；身份信息获取模块用于当接收到图像识别模型输出的异常连续帧信息时，获取该异常连续帧信息关联的身份信息；图像异常记录模块用于向考勤识别终端预设绑定的显示终端发送告警信息，同时在与该身份信息关联的副表中生成对应的图像异常记录信息。

47、综上所述，本技术包括以下至少一种有益技术效果：

48、1.本技术通过实时对校车内进行图像采集以及异常行为的识别，在学生上、下校车、请假缺勤等进行考勤确认以及于校车内发生异常状况时，通过在具有令牌保护的记录表内对其异常行为进行记录，并且在发生异常状况时对校车内的随行教师与司机进行提示告警，具有使学生于校车内的行为、安全状况以及考勤状况得到有效的监控和管理的同时，还能达到保护学生的个人隐私的效果；

49、2.本技术通过实时对校车内进行音频采集以及异常关键词的识别，在学生于校车内发生异常状况时，对校车内的随行教师与司机进行提示告警，同时将异常行为记录于其考勤记录副表中，具有使学生于校车内的语言行为得到有效的监控和管理的效果。