具有面部识别和惯性测量的驾驶员情绪检测装置及方法与流程

技术特征：
1.一种结合面部识别和惯性测量单元的驾驶员情绪检测装置，其特征在于：包括近红外相机、远红外相机、可见光相机和近红外补光灯；还包括惯性测量单元、定位模块、gpu模块、4g模块和mcu模块；所述近红外相机、远红外相机和可见光相机均与gpu模块连接；所述惯性测量单元、定位模块、gpu模块、4g模块和近红外补光灯均与mcu模块。2.根据权利要求1所述的合面部识别和惯性测量单元的驾驶员情绪检测装置，其特征在于：所述可见光相机为rgb相机。3.根据权利要求1所述的合面部识别和惯性测量单元的驾驶员情绪检测装置，其特征在于：所述近红外相机的镜头为近红外带通滤光镜片。4.根据权利要求1所述的合面部识别和惯性测量单元的驾驶员情绪检测装置，其特征在于：所述远红外相机的镜头采用锗玻璃镜头。5.一种如权利要求1所述的检测装置的检测方法，其特征在于：包括如下步骤：步骤一：通过可见光相机用来捕捉人脸图形数据，使用透皮光学成像技术在图形数据的三色通道中跟踪面部17个独特的感兴趣区域，由原始数据提取的血红蛋白浓度分布图，rgb图层按时间变化的图像，可得到面部血液流动情况可得到的心率、血压、血氧浓度，提供情绪分析的生理指标信息；步骤二：采用近红外相机捕获的人脸表情识别的图形数据作为原始数据，并将驾驶员情绪进行归类；步骤三：采用远红外相机，获取远红外图像用以提取驾驶员脸部温度信息与面部微表情，其中驾驶员脸部温度高低与分布，作为情绪的动态分析数据来源；步骤四：采用惯性测量单元用来检测车身姿态，车身的姿态变化剧烈程度，进而演算路面状况和驾驶员的情绪外化，将车身姿态分析的结果将以前馈形式加入到环境因素中，姿态稳定性信息也作为情绪度分级的一个参考；步骤五：采用定位模块获取车辆的位置信息、车速和地理位置，进而通过4g模块进行网络通信，从而获取车辆所处地理位置的环境信息；步骤六：结合情绪综合分析算法，以近红外相机所获取的表情为情绪基础，rgb相机和远红外相机获取情绪程度、车速、情绪状态为情绪基础和情绪程度的结合；步骤七：由gpu模块、mcu模块和4g通讯模块三部分组成，其中gpu模块用来处理近红外相机、远红外相机、可见光相机所捕获图形数据，并进行图像识别与分析，mcu模块用来进行车身姿态计算与定位和车速数据获取，将图形处理与情绪分析结果以总线或i/o形式输出。6.根据权利要求5所述的检测装置的检测方法，其特征在于：所述步骤三中驾驶员脸部热像图中的面部微表情特征点为提取的眉毛、眼角、两侧脸蛋、鼻尖、鼻翼和嘴角下巴处。7.根据权利要求5所述的检测装置的检测方法，其特征在于：所述近红外补光灯采用恒流调光方式驱动。

技术总结
本发明涉及车辆驾驶中的智能驾驶辅助技术，具体为一种具有面部识别和惯性测量的驾驶员情绪检测装置及方法，可通过对驾驶员采用人脸技术的识别和判断，从而判断驾驶员是否处于路怒症状态，包括近红外相机、远红外相机、可见光相机和近红外补光灯；还包括惯性测量单元、定位模块、GPU模块、4G模块和MCU模块；所述近红外相机、远红外相机和可见光相机均与GPU模块连接；所述惯性测量单元、定位模块、GPU模块、4G模块和近红外补光灯均与MCU模块。模块和近红外补光灯均与MCU模块。模块和近红外补光灯均与MCU模块。


技术研发人员：梁新强 沈昱 邓亮 谢正华 刘健
受保护的技术使用者：常州星宇车灯股份有限公司
技术研发日：2020.11.20
技术公布日：2022/5/20