封面图像识别方法、装置、终端和计算机可读存储介质与流程

本技术涉及视频处理，尤其涉及一种封面图像识别方法、装置、终端和计算机可读存储介质。

背景技术：

1、随着科技的发展，各种智能监控终端快速兴起，智能监控终端对相应的场景进行监控的同时，也会利用历史监控数据生成相应的视频，从而便于用户的查看。然而，生成相应的视频后，视频对应的封面图像往往是随机选取的，使得封面图像难以为用户提供有关该视频更多的可用信息。

技术实现思路

1、本技术实施例提供一种封面图像识别方法、装置、终端和计算机可读存储介质，可以解决视频对应的封面图像往往是随机选取的，使得封面图像难以为用户提供有关该视频更多的可用信息的技术问题。

2、第一方面，本技术实施例提供一种封面图像识别方法，应用于智能家居设备，所述方法包括：

3、采集所处环境的安防视频，从所述安防视频中提取基础事件对应的目标事件视频，对所述目标事件视频进行帧图像提取处理，得到视频帧图像；

4、基于图像信息度评分模型对所述视频帧图像进行信息度评分处理，得到每个视频帧图像对应的信息度评分；

5、从所述信息度评分中确定目标信息度评分，将所述目标信息度评分对应的目标视频帧图像作为所述目标事件视频对应的目标封面图像。

6、可选地，所述基于图像信息度评分模型对所述视频帧图像进行信息度评分处理，得到每个视频帧图像对应的信息度评分，包括：

7、将所述视频帧图像输入所述图像信息度评分模型，基于所述图像信息度评分模型对所述视频帧图像进行图像元素提取处理，得到所述视频帧图像中的图像元素；

8、以及对所述图像元素进行特征提取处理，得到元素特征，并确定所述元素特征对应的信息度信息，基于所述信息度信息确定所述视频帧图像的信息度评分，基于所述图像信息度评分模型得到每个视频帧图像对应的信息度评分。

9、可选地，所述基于所述图像信息度评分模型对所述视频帧图像进行图像元素提取处理，得到所述视频帧图像中的图像元素，包括：

10、基于所述图像信息度评分模型对所述视频帧图像进行对象识别处理，确定所述视频帧图像中每个像素点对应的对象标签；

11、确定所述视频帧图像中每个对象标签对应的全部像素点，基于所述每个对象标签对应的全部像素点得到所述对象标签对应的图像元素。

12、可选地，所述对所述图像元素进行特征提取处理，得到元素特征，包括：

13、对所述图像元素进行轮廓特征提取，得到图像元素轮廓特征；

14、对所述图像元素进行区域特征提取，得到图像元素区域特征；

15、基于所述图像元素轮廓特征和所述图像元素区域特征得到所述元素特征。

16、可选地，所述确定所述元素特征对应的信息度信息，包括：

17、获取所述元素特征对应图像元素的对象标签，基于所述对象标签对所述元素特征中图像元素轮廓特征进行对象轮廓信息提取，得到轮廓信息度信息；

18、基于所述对象标签对所述元素特征中图像元素区域特征进行对象区域信息提取，得到区域信息度信息；

19、基于所述轮廓信息度信息和所述区域信息度信息得到所述元素特征对应的信息度信息。

20、可选地，所述基于所述信息度信息确定所述视频帧图像的信息度评分，包括：

21、生成所述信息度信息对应的信息量信息和信息质量信息，确定所述信息量信息对应的信息量评分，确定所述信息质量信息对应的质量评分；

22、获取所述信息量评分对应的第一权重系数，获取所述质量评分对应的第二权重系数，所述第一权重和所述第二权重的和为1；

23、基于所述信息量评分和所述第一权重系数的乘积加上所述质量评分和所述第二权重系数的乘积，得到所述视频帧图像的信息度评分。

24、可选地，所述对所述目标事件视频进行帧图像提取处理，得到视频帧图像，包括：

25、基于单位时长对所述目标事件视频进行时段划分，得到所述目标事件视频对应的各单位时间段，提取所述目标事件视频中每个单位时间段内预设数量的视频帧图像。

26、可选地，所述从所述信息度评分中确定目标信息度评分，将所述目标信息度评分对应的目标视频帧图像作为所述目标事件视频对应的目标封面图像，包括：

27、获取信息度评分阈值，判断所述信息度评分中是否存在参考信息度评分大于或等于所述信息度评分阈值；

28、当所述信息度评分中存在目标信息度评分大于或等于所述信息度评分阈值时，将所述目标信息度评分对应的视频帧图像作为所述目标事件视频对应的目标封面图像，并对所述目标封面图像进行展示处理；

29、当所述信息度评分中不存在目标信息度评分大于或等于所述信息度评分阈值时，获取所述信息度评分中评分最高的参考信息度评分，将所述参考信息度评分作为所述目标信息度评分，将所述目标信息度评分对应的视频帧图像作为所述目标事件视频对应的目标封面图像，并对所述目标封面图像进行展示处理。

30、可选地，所述对所述目标封面图像进行展示处理，包括：

31、检测所述目标封面图像的数量，判断所述目标封面图像的数量是否大于或等于预设数量；

32、当所述目标封面图像的数量大于或等于所述预设数量时，对各目标封面图像进行图像预处理后进行动态切换显示；

33、当所述目标封面图像的数量小于所述预设数量时，对所述目标封面图像进行图像预处理后进行静态显示；其中，所述图像预处理包括图像增强处理和/或图像噪声去除处理。

34、可选地，所述方法还包括；

35、获取样本视频帧图像以及所述样本视频帧图像对应的样本信息度评分，获取初始图像信息度评分模型；

36、将所述样本视频帧图像输入所述初始图像信息度评分模型进行模型训练，通过所述初始图像信息度评分模型确定所述样本视频帧图像对应的参考信息度评分；

37、在所述模型训练过程中，基于所述样本信息度评分和所述参考信息度评分对所述初始图像信息度评分模型进行模型参数调整，得到图像信息度评分模型。

38、第二方面，本技术实施例提供一种封面图像识别装置，应用于智能家居设备，所述装置包括：

39、提取模块，适于采集所处环境的安防视频，从所述安防视频中提取基础事件对应的目标事件视频，对所述目标事件视频进行帧图像提取处理，得到视频帧图像；

40、评分模块，适于基于图像信息度评分模型对所述视频帧图像进行信息度评分处理，得到每个视频帧图像对应的信息度评分；

41、目标封面图像确定模块，适于从所述信息度评分中确定目标信息度评分，将所述目标信息度评分对应的目标视频帧图像作为所述目标事件视频对应的目标封面图像。

42、第三方面，本技术实施例提供一种电子设备，该电子设备包括：

43、处理器；以及

44、被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行上述中任一项所述的方法。

45、第四方面，本技术实施例提供一种计算机可读存储介质，其所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现上述中任一项所述的方法。

46、本技术实施例一些实施例提供的技术方案带来的有益效果至少包括：利用安防视频中的基础事件将安防视频划分为对应的目标事件视频，缩减了每个视频的信息量，使得各目标事件视频对应的目标封面图像可以准确全面对该基础事件进行时间内容表征，之后利用图像信息度评分模型对视频帧图像进行信息度评分处理得到每个视频帧图像对应的信息度评分，从而利用信息度评分对每个视频帧图像对应的图像的质量和内容丰富度进行表征，进而从信息度评分中确定目标信息度评分，将目标信息度评分对应的目标视频帧图像作为目标事件视频对应的目标封面图像，从而使得目标封面图像对应包含的信息以及图像的质量整体符合封面图像的标准，即目标封面图像包含的信息较多并且图像的质量较高。