乘员特征信息提取方法及装置、控制器、车辆和存储介质与流程

本发明涉及车辆，尤其涉及一种乘员特征信息提取方法、一种计算机可读存储介质、一种控制器、一种乘员特征信息提取装置和一种车辆。

背景技术：

1、在目前车辆座舱感知方案中，常利用摄像头获取车内乘员的图像信息，由于车内乘员姿态各异、车内环境复杂，但摄像头位置固定，导致汽车座舱内摄像头拍摄信息常常仅可获取部分信息，无法在此场景下计算完整的乘员信息关键特征点。针对这一难题，目前的常见做法是依据大量的乘员信息库训练学习，依据可获取的特征点信息对比乘员信息库，预测其余的特征点信息进行补偿。

2、但是，该方法首先对数据集和训练算法有较高要求，对算法的硬件资源、成本要求高，其次，无法依据当前乘员的具体体型特征进行预测，导致预测的精度较差，例如部分乘员上半身比普通人更长，摄像头仅拍摄到上半身的特征点，在预测下半身的特征点时，会与实际偏差过大，最后该方法可解释性差，预测结果不稳定，鲁棒性差。

技术实现思路

1、本发明旨在至少在一定程度上解决相关技术中的技术问题之一。为此，本发明的第一个目的在于提出一种乘员特征信息提取方法，具有不需增加硬件、成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

2、本发明的第二个目的在于提出一种计算机可读存储介质。

3、本发明的第三个目的在于提出一种控制器。

4、本发明的第四个目的在于提出一种乘员特征信息提取装置。

5、本发明的第五个目的在于提出一种车辆。

6、为达到上述目的，本发明第一方面实施例提出了一种乘员特征信息提取方法，所述方法包括：获取所述乘员的当前视频帧和参考特征点集合；其中，所述参考特征点集合包括所述乘员的特征点间的相对位置关系；对所述当前视频帧进行特征点提取得到所述乘员的可识别特征点集合；基于所述可识别特征点集合和所述参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合；基于所述可识别特征点集合和所述未识别特征点集合得到所述乘员的特征信息。

7、根据本发明实施例的乘员特征信息提取方法，首先获取乘员的当前视频帧和参考特征点集合，并对当前视频帧进行特征点提取得到乘员的可识别特征点集合，然后基于可识别特征点集合和参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合，再基于可识别特征点集合和未识别特征点集合得到乘员的特征信息。由此，该方法具有不需增加硬件、成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

8、另外，根据本发明上述实施例的乘员特征信息提取方法，还可以具有如下的附加技术特征：

9、根据本发明的一个实施例，所述基于所述可识别特征点集合和所述参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合，包括：基于所述可识别特征点集合中的可识别特征点，从所述参考特征点集合中获取所述可识别特征点和所述未识别特征点集合中的未识别特征点之间的相对位置关系；基于所述相对位置关系和所述可识别特征点预测所述未识别特征点。

10、根据本发明的一个实施例，在基于所述可识别特征点集合和所述参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合前，所述方法还包括：获取所述可识别特征点集合中的可识别特征点数量和所述参考特征点集合中的参考特征点数量；在所述参考特征点数量大于等于所述可识别特征点数量的情况下，基于所述可识别特征点集合和所述参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合；在所述参考特征点数量小于所述可识别特征点数量的情况下，将所述可识别特征点集合作为所述乘员的特征信息。

11、根据本发明的一个实施例，在所述参考特征点数量小于所述可识别特征点数量的情况下，所述方法还包括：获取所述可识别特征点集合中可识别特征点间的相对位置关系；基于所述相对位置关系更新所述所述参考特征点集合。

12、根据本发明的一个实施例，所述方法还包括：根据所述参考特征点集合确定所述乘员是否为新乘员；在所述乘员为新乘员的情况下，对所述乘员进行用户注册。

13、根据本发明的一个实施例，所述可识别特征点和所述未识别特征点分别包括所述乘员的面部特征点、肩部特征点、肘部特征点、手腕特征点、臀部特征点、膝部特征点和脚踝特征点中的一种或多种。

14、为达到上述目的，本发明第二方面实施例提出了一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现上述的乘员特征信息提取方法。

15、根据本发明实施例的计算机可读存储介质，通过执行上述的乘员特征信息提取方法，能够具有成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

16、为达到上述目的，本发明第三方面实施例提出了一种控制器，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，所述处理器执行所述程序时，实现上述的乘员特征信息提取方法。

17、根据本发明实施例的控制器，通过执行上述的乘员特征信息提取方法，能够具有成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

18、为达到上述目的，本发明第四方面实施例提出了一种乘员特征信息提取装置，所述装置包括：第一获取模块，用于获取所述乘员的当前视频帧；第二获取模块，用于获取所述乘员的参考特征点集合；其中，所述参考特征点集合包括所述乘员的特征点间的相对位置关系；特征提取模块，用于对所述当前视频帧进行特征点提取得到所述乘员的可识别特征点集合；特征识别模块，用于基于所述可识别特征点集合和所述参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合，并基于所述可识别特征点集合和所述未识别特征点集合得到所述乘员的特征信息。

19、根据本发明实施例的乘员特征信息提取装置，第一获取模块获取乘员的当前视频帧；第二获取模块获取乘员的参考特征点集合；特征提取模块对当前视频帧进行特征点提取得到乘员的可识别特征点集合；特征识别模块基于可识别特征点集合和参考特征点集合中的特征点间的相对位置关系，预测未识别特征点集合，并基于可识别特征点集合和未识别特征点集合得到乘员的特征信息。由此，该装置具有不需增加硬件、成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

20、为达到上述目的，本发明第五方面实施例提出了一种车辆，包括上述的控制器，或者上述的乘员特征信息提取装置。

21、根据本发明实施例的车辆，通过上述的控制器或者乘员特征信息提取装置，能够具有成本低廉、鲁棒性强、乘员特征信息提取的完整度与准确度更高的优势，对后续汽车安全部件和系统的开发、乘员约束系统参数匹配和优化具有重要的研究意义。

22、本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。