技术新讯 > 核算装置的制造及其应用技术 > 数据处理方法、系统、车辆、设备及存储介质与流程  >  正文

数据处理方法、系统、车辆、设备及存储介质与流程

  • 国知局
  • 2024-07-31 22:15:35

本技术涉及数据处理,尤其涉及一种数据处理方法、系统、车辆、设备及存储介质。

背景技术:

1、车辆的事件收集系统主要是在事件发生后,收集车辆行驶过程中产生的车辆数据,并发送给服务端,以使服务端对事件进行分析,推断事件发生的原因,根据事件突发性的特点,控制事件收集系统从车辆启动后就收集车辆数据,并存储至缓存空间中,以便在事件发生时可以提取相关车辆数据。

2、由于缓存空间有限,在数据即将存满时,现有方式主要通过上报当前存储的所有数据并清空缓存空间内的数据来存储新收集的数据。若当前上报的数据存在非法或不合规情况时,可能导致上报的数据脱离监管,造成敏感信息外泄的风险。

技术实现思路

1、本技术提供一种数据处理方法、系统、车辆、设备及存储介质,用以解决若当前上报的数据存在非法或不合规情况时,可能导致上报的数据脱离监管,造成敏感信息外泄的风险的问题。

2、第一方面,本技术提供一种数据处理方法,包括:

3、响应于上报数据的触发信号,从环形缓存空间中读取与所述触发信号对应时间段内的车辆数据片段;其中,所述上报数据的触发信号为在车辆发生目标事件时触发的信号;

4、将所述车辆数据片段中与预设待删除区域坐标相对应的数据片段删除,得到第一车辆数据片段;

5、将所述第一车辆数据片段中与预设图像标识相对应的数据片段处理,得到第二车辆数据片段;

6、将所述第二车辆数据片段作为上报数据发送至服务端。

7、在一种可能的设计中,所述响应于上报数据的触发信号,从环形缓存空间中读取与所述触发信号对应时间段内的车辆数据片段之前,所述方法还包括:

8、基于新建的信息收集线程,创建环形缓存空间;

9、获取收集的数据,并存入所述环形缓存空间中。

10、在一种可能的设计中,所述获取收集的数据,并存入所述环形缓存空间中,包括:

11、获取待存储的第一目标数据,所述第一目标数据包括:车辆在行驶过程中产生的车辆数据片段和长度片段,所述长度片段用于指示所述车辆数据片段的长度;

12、获取环形缓存空间的剩余存储长度;

13、确定所述第一目标数据的长度是否大于所述环形缓存空间的剩余存储长度;

14、若所述第一目标数据的长度大于所述环形缓存空间的剩余存储长度,则采用覆盖所述环形缓存空间中时间最早的第二目标数据的方式,在所述环形缓存空间中存储所述第一目标数据。

15、在一种可能的设计中,所述获取环形缓存空间的剩余存储长度,包括:

16、获取所述环形缓存空间的总长度、数据读取位置和数据写入位置;所述数据读取位置为所述缓存空间中时间最早的数据所在的起始位置,所述数据写入位置为所述缓存空间中时间最晚的数据所在的结束位置;

17、根据所述数据读取位置和数据写入位置,确定所述环形缓存空间已存储的数据所占用的长度;

18、根据所述缓存空间的总长度和已存储的数据所占用的长度的差值,确定所述环形缓存空间的剩余存储长度。

19、在一种可能的设计中,所述采用覆盖所述环形缓存空间中时间最早的第二目标数据的方式,在所述环形缓存空间中存储所述第一目标数据,包括:

20、根据所述第一目标数据的长度与所述剩余存储长度的差值,确定所述环形缓存空间待释放的存储长度;

21、根据所述待释放的存储长度,以所述数据读取位置作为起点,确定待释放的第二目标数据;所述第二目标数据占用的长度大于或等于所述第一目标数据的长度;

22、在所述环形缓存空间中释放所述第二目标数据,并在所述数据写入位置存储所述第一目标数据。

23、在一种可能的设计中,所述方法还包括:

24、若所述第一目标数据的长度小于或等于所述环形缓存空间的剩余存储长度,则在所述数据写入位置存储所述第一目标数据。

25、在一种可能的设计中,所述车辆数据片段包括地理信息数据和路况信息数据,所述第一车辆数据片段包括第一地理信息数据和第一路况信息数据;所述将所述车辆数据片段中与预设待删除区域坐标相对应的数据片段删除,得到第一车辆数据片段,包括:

26、根据所述地理信息数据和预设待删除区域坐标,确定包含所述预设待删除区域坐标重合的地理信息数据对应的采集时间段;

27、将与所述触发信号对应时间段内的车辆数据片段中位于所述采集时间段内的地理信息数据和路况信息数据删除,得到第一地理信息数据和第一路况信息数据。

28、在一种可能的设计中,所述将所述第一车辆数据片段中与预设图像标识相对应的数据片段处理,得到第二车辆数据片段,包括:

29、对所述第一地理信息数据和第一路况信息数据中的图像帧数据进行识别;

30、若存在含有预设图像标识的图像帧数据,则对该图像帧数据中的预设图像标识模糊化处理,得到第二车辆数据片段。

31、第二方面,本技术提供一种数据处理系统,包括:

32、获取模块,用于响应于上报数据的触发信号,从环形缓存空间中读取与所述触发信号对应时间段内的车辆数据片段;其中,所述上报数据的触发信号为在车辆发生目标事件时触发的信号;

33、处理模块,用于将所述车辆数据片段中与预设待删除区域坐标相对应的数据片段删除,得到第一车辆数据片段;将所述第一车辆数据片段中与预设图像标识相对应的数据片段处理,得到第二车辆数据片段;

34、发送模块,用于将所述第二车辆数据片段作为上报数据发送至服务端。

35、在一种可能的设计中,所述处理模块,还用于基于新建的信息收集线程,创建环形缓存空间;

36、触发获取模块获取收集的数据,并存入所述环形缓存空间中。

37、在一种可能的设计中,所述获取模块具体用于获取待存储的第一目标数据,所述第一目标数据包括:车辆在行驶过程中产生的车辆数据片段和长度片段,所述长度片段用于指示所述车辆数据片段的长度;

38、获取环形缓存空间的剩余存储长度;

39、所述处理模块具体用于确定所述第一目标数据的长度是否大于所述环形缓存空间的剩余存储长度;

40、若所述第一目标数据的长度大于所述环形缓存空间的剩余存储长度,则采用覆盖所述环形缓存空间中时间最早的第二目标数据的方式,在所述环形缓存空间中存储所述第一目标数据。

41、示例性的,所述获取模块具体用于获取所述环形缓存空间的总长度、数据读取位置和数据写入位置;所述数据读取位置为所述缓存空间中时间最早的数据所在的起始位置,所述数据写入位置为所述缓存空间中时间最晚的数据所在的结束位置;

42、所述处理模块具体用于根据所述数据读取位置和数据写入位置,确定所述环形缓存空间已存储的数据所占用的长度;

43、根据所述缓存空间的总长度和已存储的数据所占用的长度的差值,确定所述环形缓存空间的剩余存储长度。

44、所述处理模块具体用于根据所述第一目标数据的长度与所述剩余存储长度的差值,确定所述环形缓存空间待释放的存储长度;

45、根据所述待释放的存储长度,以所述数据读取位置作为起点,确定待释放的第二目标数据;所述第二目标数据占用的长度大于或等于所述第一目标数据的长度;

46、在所述环形缓存空间中释放所述第二目标数据,并在所述数据写入位置存储所述第一目标数据。

47、所述处理模块还具体用于若所述第一目标数据的长度小于或等于所述环形缓存空间的剩余存储长度,则在所述数据写入位置存储所述第一目标数据。

48、可选地,所述处理模块具体用于根据所述地理信息数据和预设待删除区域坐标,确定包含所述预设待删除区域坐标重合的地理信息数据对应的采集时间段;

49、将与所述触发信号对应时间段内的车辆数据片段中位于所述采集时间段内的地理信息数据和路况信息数据删除,得到第一地理信息数据和第一路况信息数据。

50、示例性的,所述处理模块具体用于对所述第一地理信息数据和第一路况信息数据中的图像帧数据进行识别;

51、若存在含有预设图像标识的图像帧数据,则对该图像帧数据中的预设图像标识模糊化处理,得到第二车辆数据片段。

52、第三方面,本技术提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;

53、所述存储器存储计算机执行指令;

54、所述处理器执行所述存储器存储的计算机执行指令,以实现数据处理方法。

55、第四方面,本技术提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现数据处理方法。

56、第五方面,本技术提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现数据处理方法。

57、第六方面,本技术提供一种车辆,包括数据处理系统。

58、本技术提供的数据处理方法、系统、车辆、设备及存储介质,通过响应于上报数据的触发信号,从所述环形缓存空间中读取与所述触发信号对应时间段内的车辆数据片段;将所述车辆数据片段中与预设待删除区域坐标相对应的数据片段删除,得到第一车辆数据片段;将所述第一车辆数据片段中与预设图像标识相对应的数据片段处理,得到第二车辆数据片段;将所述第二车辆数据片段作为上报数据发送至服务端,相对于现有技术中若当前上报的数据存在非法或不合规情况时,可能导致上报的数据脱离监管,造成敏感信息外泄的风险的缺陷,本技术利用环形缓存空间存储车辆数据片段,在数据上报前对存储的数据进行先地信再个信的合规处理,实现数据源头的合规处理,避免未合规的数据上传后造成敏感信息外泄的风险,并且将车辆数据片段和长度片段的存储结构将采集的第一目标数据存储至环形缓存空间中,利用环形缓存空间不分首尾的特点,使得新存储的数据只覆盖最早存储的数据,而不会影响到最晚存储的数据,实现第一目标数据的连续存储,利用长度片段的指示,提高剩余空间的管理效率和空间利用率,进而提升新获取数据的存储效率和存储数据量。

本文地址:https://www.jishuxx.com/zhuanli/20240731/192469.html

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。