一种视频增强处理方法、装置、设备和存储介质与流程

本发明涉及人工智能，尤其涉及一种视频增强处理方法、装置、设备和存储介质。

背景技术：

1、目前，为了提升视频视觉效果和观赏体验，很多视频采用了视频增强技术，以提升视频画质。当前视频内容增强方法主要包括以下几种：提升画面分辨率、提升视频帧率、基于hdr编解码的处理技术来提升画面的色彩、亮度、对比度、饱和度等。

2、然而，现有技术至少存在如下问题：现有技术中视频增强处理方式通常是按照既定的规则对完整视频的所有视频帧进行处理，其中提升分辨率和视频帧率的方法需要对视频每一帧内容进行处理，基于hdr编解码的处理技术需要对视频进行重新编解码，上述方法在计算量、处理性能，以及专用计算资源的消耗方面要求较高。

技术实现思路

1、本发明实施例的目的是提供一种视频增强处理方法、装置、设备和存储介质，其能够智能分析视频的关键视频镜头片段，单独对所述关键视频镜头片段进行增强处理，有效地减少数据处理量，节省计算资源。

2、为实现上述目的，本发明实施例提供了一种视频增强处理方法，包括：

3、获取待处理视频；

4、根据对所述待处理视频的剧情内容的分析结果，识别所述待处理视频中的关键视频镜头片段；

5、对所述关键视频镜头片段进行视频增强处理。

6、作为上述方案的改进，在所述识别所述待处理视频中的关键视频镜头片段之前，还包括：

7、通过检测所述待处理视频中的画面变化，确定所述待处理视频中镜头切换的时间节点；

8、根据所述时间节点，将所述待处理视频拆分为若干个视频镜头片段；

9、所述识别所述待处理视频中的关键视频镜头片段，包括：

10、在拆分后的所述若干个视频镜头片段中确定所述关键视频镜头片段。

11、作为上述方案的改进，所述根据对所述待处理视频的剧情内容的分析结果，识别所述待处理视频中的关键视频镜头片段，包括：

12、采用预设的图像识别算法，识别所述待处理视频的每一视频镜头片段中出现的对象；

13、提取每一所述视频镜头片段中每一所述对象的文本片段；其中，所述文本片段是根据所述对象所发语音生成的；

14、对每一所述文本片段进行摘要信息提取，得到每一所述文本片段对应的文本摘要；

15、根据每一所述文本摘要进行剧情内容分析，确定属于关键剧情且排名前n位的文本摘要，作为关键文本摘要；n≥1；

16、获取所述关键文本摘要对应的文本片段所在的视频镜头片段，作为所述关键视频镜头片段。

17、作为上述方案的改进，所述提取每一所述视频镜头片段中每一所述对象的文本片段，包括：

18、采用预设的文字识别算法，从每一所述视频镜头片段中提取每一所述对象对应的字幕内容；

19、采用预设的语音识别算法，从每一所述视频镜头片段中提取每一所述对象的语音内容，并转换为文本内容；

20、根据所述字幕内容对所述文本内容进行校准，生成每一所述对象的文本片段。

21、作为上述方案的改进，在所述获取待处理视频之后，所述方法还包括：

22、根据用户对所述待处理视频的喜好情况的分析结果，识别所述待处理视频中的关键视频镜头片段。

23、作为上述方案的改进，所述根据用户对所述待处理视频的喜好情况的分析结果，识别所述待处理视频中的关键视频镜头片段，包括：

24、获取所述待处理视频的每一视频镜头片段中出现的弹幕；

25、确定每一所述视频镜头片段中出现的总弹幕数量、目标类型的弹幕数量和弹幕的平均文字数量；

26、根据所述总弹幕数量、所述目标类型的弹幕数量、所述平均文字数量及对应预设的权重系数，计算每一所述视频镜头片段的关键性评分；

27、确定关键性评分排名前m位的视频镜头片段，作为所述关键视频镜头片段；m≥1；

28、则所述对所述关键视频镜头片段进行视频增强处理，包括：

29、采用预设的图像识别算法，识别每一所述视频镜头片段中出现的对象，并构建所述对象、所述对象的真实姓名和角色姓名的对应关系；

30、根据所述关键视频镜头片段中出现的弹幕中的真实姓名或角色姓名，确定所述弹幕所指向的对象，作为第一目标对象；

31、对所述关键视频镜头片段中的第一目标对象所在区域或所述第一目标对象上的特定区域进行增强处理。

32、作为上述方案的改进，所述根据用户对所述待处理视频的喜好情况的分析结果，识别所述待处理视频中的关键视频镜头片段，包括：

33、提取所述待处理视频的每一所述视频镜头片段中每一所述对象的文本片段；其中，所述文本片段是根据所述对象所发语音生成的；

34、获取对所述待处理视频的所有用户评论，在所述用户评论中确定热评文本；

35、计算每一所述热评文本与每一所述文本片段的相似性，确定所述热评文本与所述文本片段的对应关系；

36、根据所述热评文本对应的文本片段所在的视频镜头片段，作为所述关键视频镜头片段。

37、作为上述方案的改进，所述根据用户对所述待处理视频的喜好情况的分析结果，识别所述待处理视频中的关键视频镜头片段，包括：

38、采用预设的图像识别算法，识别所述待处理视频的每一所述视频镜头片段中出现的对象，并构建所述对象、所述对象的真实姓名和角色姓名的对应关系；

39、获取用户输入的增强处理指令；其中，所述增强处理指令中携带用户所要增强处理的对象的真实姓名或角色姓名；

40、根据所述增强处理指令中的真实姓名或角色姓名，确定所述用户所要增强处理的对象，作为第二目标对象；

41、获取所述第二目标对象所在的视频镜头片段，作为关键视频镜头片段；

42、则所述对所述关键视频镜头片段进行视频增强处理，包括：

43、对所述关键视频镜头片段中的所述第二目标对象所在区域或所述第二目标对象上的特定区域进行视频增强处理。

44、本发明实施例还提供了一种视频增强处理装置，包括：

45、视频获取模块，用于获取待处理视频；

46、镜头识别模块，用于根据对所述待处理视频的剧情内容的分析结果，识别所述待处理视频中的关键视频镜头片段；

47、视频处理模块，用于对所述关键视频镜头片段进行视频增强处理。

48、本发明实施例还提供了一种视频增强处理设备，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如上述任意一项所述的视频增强处理方法。

49、本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的计算机程序，其中，在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如上述任意一项所述的视频增强处理方法。

50、本发明实施例还提供了一种计算机程序产品，所述计算机程序产品包括计算机程序或计算机指令，所述计算机程序或所述计算机指令被处理器执行时实现如上述任意一项所述的视频增强处理方法。

51、与现有技术相比，本发明公开的视频增强处理方法、装置、设备和存储介质，通过对视频进行镜头片段拆分，并通过对剧情内容的动态分析，对核心剧情的镜头片段进行增强处理，对其余内容不做处理，与传统方法相比，本发明实施例不需要对全部视频内容进行处理，降低了视频内容增强处理的计算量以及对于计算资源的需求，可以适用于点播、直播等各种视频场景。