多模态非接触式生命体征监测的设备和方法与流程

本公开涉及生命体征的监测，并且更具体地，涉及一种使用多个模态使用视频来监测多个生命体征的设备和方法。

背景技术：

1、诸如心率(hr)、呼吸率(rr)、心率变异性(hrv)和氧饱和度(spo2)的生命体征的连续测量通常用于监测个体的心血管、呼吸和身体健康。当生命体征提供对象身体的内部工作的简要说明时，对这些生命体征的连续监测可以为临床医生提供有用的见解以诊断和跟踪健康状况的进展。另外，这些度量可以有益于分析个体的当前健康和随时间推移的进展。

2、用于获得生命体征的常规方法涉及具有用于监测这些生命体征的接触式传感器的医学装置。例如，呼吸系带可以使用运动或力传感器来监测胸部运动的动作并测量呼吸率。另外，具有ir光的led传感器已经用于监测通过用户指尖的血量流量以及连续测量心率和氧饱和度水平。

3、然而，用于监测生命体征的当前装置存在多种问题。例如，当专用硬件和特定传感器用于测量每个生命体征时，装置的总成本可能增加。另外，这些装置需要与对象连续接触(例如，在面部、皮肤、指尖、手腕和/或胸部上)，这可能导致皮肤刺激/损伤，阻碍用户的移动，是用户之间病毒交叉污染的媒介，由于装置的不受控制的运动而出错，并且通常在传感器/电线放置在用户身上时对用户造成不舒服。

4、分析面部图像的颜色特征以提取生理信号(例如，生命体征)的当前非接触式生命体征监测设备解决了关于需要与对象连续接触的装置的一些问题。然而，这些非接触式设备在面部图像未被正确分割、照明条件影响面部图像、在面部上呈现不同级别的显示和/或用户参与身体活动的情况下具有降低的性能。因此，需要一种改进的非接触式生命体征监测设备，其不需要个性化的硬件传感器，并且可以针对变化的环境/照明条件进行调整以提供准确的结果。

技术实现思路

1、技术方案

2、根据本公开的一个方面，一种多模态非接触式生命体征监测的方法可以包括：从视频捕获设备接收图像。所述方法可以包括识别所述图像内的对象的图像。所述方法可以包括将所述对象的所述图像分割成多个区段。所述方法可以包括对所述多个区段进行第一分析以识别至少一个颜色特征。所述方法可以包括对所述多个区段进行第二分析以识别至少一个运动特征。所述方法可以包括使用所述颜色特征和所述运动特征的组合来确定所述对象的多个生命体征。在所述方法中，第一分析和第二分析可以并行执行。

3、根据本公开的一个方面，多模态非接触式生命体征监测设备可以包括存储至少一个指令的存储器和至少一个处理器。所述至少一个处理器被配置为执行所述至少一个指令以执行从视频捕获装置接收图像。所述至少一个处理器可以执行识别所述图像内的对象的图像。所述至少一个处理器可以执行将所述对象的所述图像分割成多个区段。所述至少一个处理器可以执行对所述多个区段进行第一分析以识别至少一个颜色特征。所述至少一个处理器可以执行对所述多个区段进行第二分析以识别至少一个运动特征。所述至少一个处理器可以执行使用所述颜色特征和所述运动特征的组合来确定所述对象的多个生命体征。在所述至少一个处理器中，第一分析和第二分析可以并行执行。

4、根据本公开的一个方面，一种包括至少一个指令的计算机可读介质，所述至少一个指令在被执行时使得电子设备的至少一个处理器执行从视频捕获设备接收图像。所述至少一个处理器可以执行识别所述图像内的对象的图像。所述至少一个处理器可以执行将所述对象的所述图像分割成多个区段。所述至少一个处理器可以执行对所述多个区段进行第一分析以识别至少一个颜色特征。所述至少一个处理器可以执行对所述多个区段进行第二分析以识别至少一个运动特征。所述至少一个处理器可以执行使用所述颜色特征和所述运动特征的组合来确定所述对象的多个生命体征。在所述至少一个处理器中，第一分析和第二分析可以并行执行。

技术特征：

1.一种多模态非接触式生命体征监测的方法，包括：

2.如权利要求1所述的方法，其中，

3.如前述权利要求中任一项所述的方法，其中，

4.如前述权利要求中任一项所述的方法，其中，

5.如前述权利要求中任一项所述的方法，其中，

6.如前述权利要求中任一项所述的方法，其中，

7.如前述权利要求中任一项所述的方法，其中，

8.一种多模态非接触式生命体征监测设备，包括：

9.如权利要求8所述的设备，其中，

10.如权利要求8或权利要求9中任一项所述的设备，其中，

11.如权利要求8至10中任一项所述的设备，其中，

12.如权利要求8至11中任一项所述的设备，其中，

13.如权利要求8至12中任一项所述的设备，其中

14.如权利要求8至13中任一项所述的设备，其中，

15.一种计算机可读介质，包括：至少一个指令，在被执行时使电子设备的至少一个处理器执行与如权利要求1至7中任一项所述的方法相对应的操作。

技术总结多模态非接触式生命体征监测设备被配置为执行下面的操作。从视频捕获装置接收图像。在所述图像内识别对象的图像。所述对象的所述图像被分割为多个区段。对所述多个区段执行第一分析以识别至少一个颜色特征。对所述多个区段执行第二分析以识别至少一个运动特征。使用所述颜色特征和所述运动特征的组合，确定所述对象的多个生命体征。第一分析和第二分析并行执行。所述多个生命体征可以包括心率、呼吸率、氧饱和度、心率变异性和心房纤颤中的一个或更多个。技术研发人员：考罗什·瓦坦帕尔瓦尔,魏文川,朱立,郭美京,况吉龙,高军受保护的技术使用者：三星电子株式会社技术研发日：技术公布日：2024/6/13