技术新讯 > 电子通信装置的制造及其应用技术 > 目标视频的超分处理方法、存储介质和电子设备与流程  >  正文

目标视频的超分处理方法、存储介质和电子设备与流程

  • 国知局
  • 2024-12-26 14:57:36

本技术涉及计算机领域,具体而言,涉及一种目标视频的超分处理方法、装置和存储介质及电子设备。

背景技术:

1、播放器在播放视频时,当用户本地网络较差,或者为了节省流量选择标清、极速清晰度都播放视频,或者视频源本来就不清晰时,播放器就会在视频画面解码出来时进行超分处理,进行画质的增强,这样就可以以低清视频流体验超高清视频的观看效果。

2、但是超分处理所需的计算量比较大,尤其是在面对播放倍数发生变化的情况下,使用超分处理会存在丢帧(画面连贯性体验较差)或者卡顿的问题。

3、究其原因,在于超分处理机制缺乏针对播放倍数变化的灵活适应性。由于未能根据不同播放倍数调整处理策略,超分处理在提升画质的同时,也引入了连贯性和流畅性方面的问题,进而导致目标视频的超分处理准确性较低的问题出现。因此,存在目标视频的超分处理准确性较低的问题。

4、针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

1、本技术实施例提供了一种目标视频的超分处理方法、装置和存储介质及电子设备,以至少解决目标视频的超分处理准确性较低的技术问题。

2、根据本技术实施例的一个方面,提供了一种目标视频的超分处理方法,包括:响应于对目标视频执行的超分处理请求,使用第一超分模型,对上述目标视频进行超分处理,得到第一视频,其中,上述超分处理请求用于请求对上述目标视频进行智能超分辨率处理,上述第一超分模型与上述第一视频的第一倍速之间具有对应关系;响应于对上述第一视频执行的倍速调整请求,使用第二超分模型,对上述调整倍速后的第一视频进行超分处理,得到第二视频,其中,上述倍速调整请求用于请求将上述第一倍速调整为第二倍速,上述第二超分模型与上述第二倍速之间具有上述对应关系。

3、根据本技术实施例的另一方面,还提供了一种目标视频的超分处理装置,包括:第一超分单元,用于响应于对目标视频执行的超分处理请求,使用第一超分模型,对上述目标视频进行超分处理,得到第一视频,其中,上述超分处理请求用于请求对上述目标视频进行智能超分辨率处理,上述第一超分模型与上述第一视频的第一倍速之间具有对应关系;第二超分单元,用于响应于对上述第一视频执行的倍速调整请求,使用第二超分模型,对上述调整倍速后的第一视频进行超分处理,得到第二视频,其中,上述倍速调整请求用于请求将上述第一倍速调整为第二倍速,上述第二超分模型与上述第二倍速之间具有上述对应关系。

4、作为一种可选的方案,上述装置还包括:获取单元,用于在上述使用第二超分模型,对上述调整倍速后的第一视频进行超分处理,得到第二视频之前,从至少两个候选超分模型中,获取与上述第二倍速之间具有上述对应关系的至少一个第二超分模型,其中,上述至少两个候选超分模型包括上述第一超分模型和上述至少一个第二超分模型。

5、作为一种可选的方案,上述获取单元,包括:第一获取模块,用于从人像超分模型、字幕超分模型、标志超分模型中,获取与上述第二倍速之间具有上述对应关系的至少一个第二超分模型,其中,上述人像超分模型用于对上述目标视频中的人像区域进行智能超分辨率处理,上述字幕超分模型用于对上述目标视频中的字幕区域进行智能超分辨率处理,上述标志超分模型用于对上述目标视频中的标志区域进行智能超分辨率处理。

6、作为一种可选的方案,上述获取单元,包括:第二获取模块,用于从至少两个精度的超分模型中,获取与上述第二倍速之间具有上述对应关系的至少一个第二超分模型,其中,上述至少两个候选超分模型包括上述至少两个精度的超分模型。

7、作为一种可选的方案,上述获取单元,包括:第三获取模块,用于在上述至少两个候选超分模型包括上述至少两个精度的超分模型的情况下,从至少两个精度的人像超分模型、至少两个精度的字幕超分模型、至少两个精度的标志超分模型中,获取与上述第二倍速之间具有上述对应关系的至少一个第二超分模型。

8、作为一种可选的方案,上述第三获取模块,包括:执行子模块,用于执行以下步骤,直至得到上述至少一个第二超分模型:从上述至少两个精度的人像超分模型中确定出第一精度的人像超分模型、从上述至少两个精度的字幕超分模型中确定出第二精度的字幕超分模型、从上述至少两个精度的标志超分模型中确定出第三精度的标志超分模型;在上述第一精度的人像超分模型对应的第一超分处理耗时、上述第二精度的字幕超分模型对应的第二超分处理耗时、上述第三精度的标志超分模型对应的第三超分处理耗时之间的耗时总和,满足上述第二倍速对应的超分处理耗时条件的情况下,将上述第一精度的人像超分模型、上述第二精度的字幕超分模型、上述第三精度的标志超分模型,确定为上述第二超分模型,得到上述至少一个第二超分模型;在上述第一超分处理耗时、上述第二超分处理耗时、上述第三超分处理耗时之间的耗时总和,不满足上述超分处理耗时条件的情况下,将上述第一精度的人像超分模型、上述第二精度的字幕超分模型、上述第三精度的标志超分模型进行调整,直至得到上述至少一个第二超分模型。

9、作为一种可选的方案,上述执行子模块,包括以下至少之一:第一调整子单元,用于将上述第一精度的人像超分模型调整为第四精度的人像超分模型,其中,上述至少两个精度的人像超分模型包括上述第四精度的人像超分模型;第二调整子单元,用于将上述第二精度的字幕超分模型调整为第五精度的字幕超分模型,其中,上述至少两个精度的字幕超分模型包括上述第五精度的字幕超分模型;第三调整子单元,用于将上述第三精度的标志超分模型调整为第六精度的标志超分模型,其中,上述至少两个精度的标志超分模型包括上述第六精度的标志超分模型;第四调整子单元,用于将上述第一精度的人像超分模型调整为空;第五调整子单元,用于将上述第二精度的字幕超分模型调整为空;第六调整子单元,用于将上述第三精度的标志超分模型调整为空。

10、作为一种可选的方案,上述第二超分单元,包括:增大模块,用于响应于对上述第一视频执行的倍速增大请求,得到增加倍速后的第一视频,其中,上述倍速调整请求包括上述倍速增大请求;第一超分模块,用于使用第一模型,对上述增加倍速后的第一视频进行超分处理,得到上述第二视频,其中,上述调整倍速后的第一视频包括上述增加倍速后的第一视频,上述第二超分模型包括上述第一模型,上述第一模型对应的超分处理耗时小于或等于上述第一超分模型对应的超分处理耗时;或,减少模块,用于响应于对上述第一视频执行的倍速减少请求,得到减少倍速后的第一视频,其中,上述倍速调整请求包括上述倍速减少请求;第二超分模块,用于使用第二模型,对上述减少倍速后的第一视频进行超分处理,得到上述第二视频,其中,上述调整倍速后的第一视频包括上述减少倍速后的第一视频,上述第二超分模型包括上述第二模型,上述第二模型对应的超分处理耗时大于或等于上述第一超分模型对应的超分处理耗时。

11、根据本技术实施例的又一个方面,提供一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行如以上目标视频的超分处理方法。

12、根据本技术实施例的又一方面,还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,上述处理器通过计算机程序执行上述的目标视频的超分处理方法。

13、在本技术实施例中,响应于对目标视频执行的超分处理请求,使用第一超分模型,对上述目标视频进行超分处理,得到第一视频,其中,上述超分处理请求用于请求对上述目标视频进行智能超分辨率处理,上述第一超分模型与上述第一视频的第一倍速之间具有对应关系;响应于对上述第一视频执行的倍速调整请求,使用第二超分模型,对上述调整倍速后的第一视频进行超分处理,得到第二视频,其中,上述倍速调整请求用于请求将上述第一倍速调整为第二倍速,上述第二超分模型与上述第二倍速之间具有上述对应关系。

14、当接收到对目标视频的超分处理请求时,本实施例会首先使用第一超分模型对视频进行处理。这一模型的选择并非随意,而是与视频的初始播放倍速(第一倍速)紧密相关,确保了处理过程与播放状态的匹配。通过这种方式,本实施例能够针对特定的播放倍速优化超分处理的效果,从而提升画质的增强效果。

15、进一步地,当用户调整视频播放倍数时,本实施例会响应这一变化,并切换到与新的播放倍速(第二倍速)相适应的第二超分模型进行再次处理。这种动态调整的策略关键在于,不同的超分模型与不同的播放倍速之间建立了精确的对应关系。这意味着,无论播放倍速如何变化,本实施例总能找到最适合当前状态的超分模型来进行处理,从而确保了超分处理的准确性和效率。

16、从技术角度来看,本实施例的有效性在于充分利用了超分模型的灵活性和可配置性。通过为不同的播放倍速定制专门的超分模型,能够更精确地控制处理过程中的计算负荷和资源分配,从而有效避免了丢帧和卡顿问题的出现。这不仅提升了超分处理的准确性,还显著改善了用户的观看体验,进而达到了为不同的播放倍速定制专门的超分模型,更精确地控制处理过程中的计算负荷和资源分配的目的,从而实现了提高目标视频的超分处理准确性的技术效果,进而解决了目标视频的超分处理准确性较低的技术问题。

本文地址:https://www.jishuxx.com/zhuanli/20241226/343977.html

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。