自动驾驶车辆海量数据的获取方法与流程

本发明属于海量数据获取，具体涉及一种自动驾驶车辆海量数据的获取方法。

背景技术：

1、自动驾驶测试数据从产生到收集，再到数据中心后的自动处理的整个闭环过程对于自动驾驶算法迭代至关重要，而海量的测试数据如何低成本和高效的获取是其中非常关键的一环。

2、现有的自动驾驶车辆的海量数据通过以下方法获得：

3、首先，由专业设备使用专用电脑和硬盘，链接车辆拷贝数据；

4、然后，将电脑切换至专用网络，启动数据上传，安装操作文档配置上传信息；

5、最后，如果一次上传数据量过于庞大，上传地的带宽不足，亦可能选择硬盘寄送的方式。

6、然而，目前的智驾数据采集/传输存在以下问题：

7、第一，目前的采集流程复杂，对车辆设备需要有一定的业务基础和操作经验，普通人参与很难保证采集数据的完整性和过程的可靠性。

8、第二，智驾数据涉及人身安全、测绘机密等，对数据的加密性安全性要求极高。如何在保证数据安全的前提下，利用众包模式采集传输数据一直是个待解决命题。

9、第三，l4以上的自动驾驶需要海量路况和场景的数据进行训练，因此对数据采集、传输有着极苛刻的时效性要求。而目前的采集人数、采集设备的瓶颈严重影响了自动驾驶系统的实时需求。

10、第四，目前是由专业员使用设备人工拷贝数据并手动上传，平台缺乏对各个拷贝任务的系统性管理，以致存在同一车辆相同数据重复拷贝、上传的问题，也存在有车辆数据遗漏拷贝的风险。

11、第五，目前数据上传必须通过专用设备和网络，海量的数据对于上传地的网络带宽要求极高，以至于很多项目不得已采用硬盘寄送的方案。

技术实现思路

1、为了解决上述技术问题，本发明提出了一种自动驾驶车辆海量数据的获取方法。

2、为了达到上述目的，本发明的技术方案如下：

3、本发明公开一种自动驾驶车辆海量数据的获取方法，包括：

4、步骤s1：分布于各个地区的任意志愿者自愿注册数据采集平台，经数据采集平台审核后，分配对应账号；

5、步骤s2：数据采集平台与若干自动驾驶车辆通信连接，当车辆完成驾驶任务后，数据采集平台发布该车辆的数据待采集任务；

6、步骤s3：志愿者登陆数据采集平台，领取采集传输任务，数据采集平台为每个数据待采集任务选取合适志愿者，作为数据采集者；

7、步骤s4：数据采集者根据车辆定位信息，找到目标车辆，并将其链接移动硬盘，进行数据下载；

8、步骤s5：数据采集者登录数据采集平台，将移动硬盘内的数据进行上传。

9、在上述技术方案的基础上，还可做如下改进：

10、作为优选的方案，步骤s3具体包括：

11、步骤s3.1：志愿者采用电脑链接移动硬盘，并登录数据采集平台，领取采集传输任务；

12、步骤s3.2：数据传输平台发送一次性公钥和秘钥分别发送至目标车辆和移动硬盘内。

13、作为优选的方案，秘钥的有效期限与采集传输任务的有效期限一致，超过期限后或任务完成后秘钥自动作废。

14、作为优选的方案，步骤s3中，当志愿者领取采集传输任务后，移动硬盘被自动格式化和加密处理，并将解密指令发送至对应电脑和目标车辆；

15、当移动硬盘链接目标车辆时或链接对应电脑启动数据上传时，移动硬盘才会解密。

16、作为优选的方案，步骤s4包括：

17、步骤s4.1：数据采集者根据车辆定位信息，找到目标车辆；

18、步骤s4.2：将移动硬盘链接目标车辆，对移动硬盘解锁，移动硬盘可读；

19、步骤s4.3：目标车辆开启秘钥检测，校验移动硬盘和目标车辆的秘钥是否匹配；

20、若秘钥核对一致，则启动数据采集；

21、否则，不启动数据采集。

22、作为优选的方案，步骤s4.3中，若秘钥核对错误，则触发报警，目标车辆的车载摄像装置自动扫描周边情况并上报至数据采集平台；

23、若秘钥过期，将触发告警提示，目标车辆提示数据采集者秘钥过期，请重新进行任务申领。

24、作为优选的方案，目标车辆的数据在传输前，自动对数据进行偏移和加密处理，且数据加密的秘钥来自数据采集平台，当且仅当上传至数据采集平台才解密恢复其可读性。

25、作为优选的方案，步骤s5包括：

26、步骤s5.1：数据采集者将移动硬盘链接对应电脑，登录数据采集平台，对移动硬盘解锁，移动硬盘可读；

27、步骤s5.2：上传数据至数据采集平台，数据采集平台对数据解密后上传数据中心。

28、作为优选的方案，数据采集平台根据数据待采集任务的复杂度、数据量、紧急程度的不同给予志愿者不同的奖励。

29、作为优选的方案，数据采集平台根据志愿者的任务完成量、任务完成率、采集时效中的一种或多种指标对志愿者进行分级，且级别越高的志愿者获得优先任务分配的权利。

30、本发明公开一种自动驾驶车辆海量数据的获取方法，将分散在各地的自动驾驶测试车辆数据下载及上传工作采取实时任务的形式发布到数据采集平台，志愿者通过平台领取任务，基于个人所持有的电脑及家用网络完成数据获取及上传，具有以下有益效果：

31、第一，本发明招募志愿者，采用任务平台化的形式进行数据采集，降低采集的技术门槛，无需专业的采集设备，降低成本，提升数据采集效率。

32、第二，本发明所有数据采集任务通过平台自动化管理，不用配置大量的专业人员从事低效重复工作，减少大量人力成本支出。

33、第三，本发明采用多重安全机制对数据进行安全防护，保证数据的私密性，数据安全系数高，不会发生数据外泄。

34、第四，经过多重加密后的数据，可以在任意公共网络完成数据传输，无泄密风险，有大量上传节点作为依托，单一节点的网络带宽将不再是传输的瓶颈，传输效率大涨，突破带宽瓶颈。

技术特征：

1.自动驾驶车辆海量数据的获取方法，其特征在于，包括：

2.根据权利要求1所述的获取方法，其特征在于，所述步骤s3具体包括：

3.根据权利要求2所述的获取方法，其特征在于，秘钥的有效期限与采集传输任务的有效期限一致，超过期限后或任务完成后秘钥自动作废。

4.根据权利要求3所述的获取方法，其特征在于，所述步骤s3中，当志愿者领取采集传输任务后，移动硬盘被自动格式化和加密处理，并将解密指令发送至对应电脑和目标车辆；

5.根据权利要求4所述的获取方法，其特征在于，所述步骤s4包括：

6.根据权利要求5所述的获取方法，其特征在于，所述步骤s4.3中，若秘钥核对错误，则触发报警，目标车辆的车载摄像装置自动扫描周边情况并上报至数据采集平台；

7.根据权利要求6所述的获取方法，其特征在于，目标车辆的数据在传输前，自动对数据进行偏移和加密处理，且数据加密的秘钥来自数据采集平台，当且仅当上传至数据采集平台才解密恢复其可读性。

8.根据权利要求7所述的获取方法，其特征在于，所述步骤s5包括：

9.根据权利要求1-8任一项所述的获取方法，其特征在于，数据采集平台根据数据待采集任务的复杂度、数据量、紧急程度的不同给予志愿者不同的奖励。

10.根据权利要求1-8任一项所述的获取方法，其特征在于，数据采集平台根据志愿者的任务完成量、任务完成率、采集时效中的一种或多种指标对志愿者进行分级，且级别越高的志愿者获得优先任务分配的权利。

技术总结本发明公开一种自动驾驶车辆海量数据的获取，包括：分布于各个地区的任意志愿者自愿注册数据采集平台，经数据采集平台审核后，分配对应账号；数据采集平台与若干自动驾驶车辆通信连接，当车辆完成驾驶任务后，数据采集平台发布该车辆的数据待采集任务；志愿者登陆数据采集平台，领取采集传输任务，数据采集平台为每个数据待采集任务选取合适志愿者，作为数据采集者；数据采集者根据车辆定位信息，找到目标车辆，并将其链接移动硬盘，进行数据下载；数据采集者登录数据采集平台，将移动硬盘内的数据进行上传。本发明采用任务平台化的形式进行数据采集，降低采集的技术门槛，无需专业的采集设备，降低成本，提升数据采集效率，且数据安全系数高，不会发生数据外泄。技术研发人员：何弢,廖文龙,龚家伟受保护的技术使用者：酷哇科技有限公司技术研发日：技术公布日：2024/7/25