运动图像编码装置、解码装置的制作方法

本发明的实施方式涉及运动图像编码装置、解码装置。

背景技术：

1、为了高效地传输或记录运动图像，使用通过对运动图像进行编码来生成编码数据的运动图像编码装置，以及通过对该编码数据进行解码来生成解码图像的运动图像解码装置。

2、作为具体的运动图像编码方式，例如可以列举出h.264/avc、h.265/hevc(high-efficiency video coding：高效运动图像编码)方式等。

3、在这样的运动图像编码方式中，构成运动图像的图像(图片)通过分级结构来管理，并按每个cu进行编码/解码，所述分级结构包括：通过分割图像而得到的切片、通过分割切片而得到的编码树单元(ctu：coding tree unit)、通过分割编码树单元而得到的编码单位(有时也称为编码单元(coding unit：cu))以及通过分割编码单位而得到的转换单元(tu：transform unit)。

4、此外，在这样的运动图像编码方式中，通常，基于通过对输入图像进行编码/解码而得到的局部解码图像而生成预测图像，对从输入图像(原图像)中减去该预测图像而得到的预测误差(有时也称为“差分图像”或“残差图像”)进行编码。作为预测图像的生成方法，可列举出画面间预测(帧间预测)和画面内预测(帧内预测)。

5、此外，作为近年来的运动图像编码和解码的技术，可列举出非专利文献1。在非专利文献1中，规定了用于将图像的性质、显示方法、定时等与编码数据同时传输的辅助增强信息sei(supplemental enhancement information)消息(message)，公开了按能随机接入的单位传输被用作后滤波的神经网络滤波的拓扑和参数的sei。此外，还公开了按图片单位来传输是否进行后滤波处理的sei。

6、在非专利文献2中，作为改善非专利文献1的方法，记载有在神经网络的输入张量为整数值的情况下，按亮度和色差来分别定义比特长度的方法。

7、现有技术文献

8、非专利文献

9、非专利文献1

10、text of iso/iec 23002-7：202x(2nd ed.)dam1 additional sei messages，nov.2022.

11、非专利文献2

12、ahg9：comments on neural-network post-filter characteristics seimessage，jvet-ac0061，jan.2023.

技术实现思路

1、发明要解决的问题

2、在非专利文献1所公开的方法中，存在以下问题：在后滤波处理的输入张量的输入值的形式中使用整数值的情况下，输入至输入张量的强度控制值strengthcontrolval的值仅被定义为从解码信息中获得的0～1之间的实数值，无法进行通过无符号整数进行的处理。

3、此外，在非专利文献2中公开的方法中，在后滤波处理的输入张量的输入值的形式中使用整数值的情况下，按亮度和色差独立地定义比特长度。但是，与非专利文献1相同，存在以下问题：没有strengthcontrolval保持为实数值，并且按亮度和色差对不同的输入张量的精度应用strengthcontrolval的值的方法。

4、技术方案

5、本发明的一个方案的运动图像解码装置的特征在于，具有：图像解码装置，对编码数据进行解码来生成解码图像；以及后滤波处理装置，对所述解码图像进行后滤波处理，所述运动图像解码装置根据在所述后滤波处理中输入的解码图像的亮度和色差的输入形式，变换在生成所述解码图像的过程中获得的强度控制值来进行后滤波处理。

6、此外，在所述运动图像解码装置中，其特征在于，按亮度和色差生成独立的强度控制值，从编码数据中解码示出表示是整数还是实数的输入形式的信息、亮度比特深度以及色差比特深度，在所述信息为整数的情况下，使用亮度比特深度和色差比特深度变换所述强度控制值来进行后滤波处理。

7、此外，在所述运动图像解码装置中，其特征在于，按亮度和色差生成独立的强度控制值，根据在所述后滤波处理中输入的解码图像的亮度和色差的输入形式，变换强度控制值来进行后滤波处理。

8、本发明的一个方案的运动图像编码装置的特征在于，具有：图像编码装置，对输入图像进行编码；辅助增强信息生成装置，生成信息，所述信息确定在后滤波处理中输入的亮度和色差的解码图像的输入形式和在生成从图像编码装置输出的局部解码图像的过程中获得的强度控制值的输入形式；以及辅助增强信息编码装置，对所述辅助增强信息进行编码。

9、有益效果

10、通过采用这样的构成，能解决没有对后滤波处理的输入的强度控制值进行定义的方法的问题。

技术特征：

1.一种运动图像解码装置，是对神经网络后滤波特性辅助增强信息sei消息进行解码的运动图像解码装置，其特征在于，具备：

2.根据权利要求1所述的运动图像解码装置，其特征在于，

3.根据权利要求2所述的运动图像解码装置，其特征在于，

4.一种运动图像编码装置，是对神经网络后滤波特性辅助增强信息sei消息进行编码的运动图像编码装置，其特征在于，具备：

5.根据权利要求4所述的运动图像编码装置，其特征在于，

6.根据权利要求5所述的运动图像编码装置，其特征在于，

7.一种运动图像解码方法，是对神经网络后滤波特性辅助增强信息sei消息进行解码的运动图像解码方法，其特征在于，至少包括以下步骤：

8.一种运动图像编码方法，是对神经网络后滤波特性辅助增强信息sei消息进行编码的运动图像编码方法，其特征在于，至少包括以下步骤：

技术总结在传输速率低的情况下，由于编码失真而画质劣化，但运动图像编码、解码方式能通过使用了神经网络的后滤波处理来改善画质。但是，存在有时没有对后滤波处理的输入的强度控制值进行定义的方法的问题。本发明的一个方案的运动图像解码装置的特征在于，具有：图像解码装置，生成解码图像；以及后滤波处理装置，对所述解码图像进行后滤波处理，所述运动图像解码装置根据在所述后滤波处理中输入的解码图像的亮度和色差的输入形式，变换在生成所述解码图像的过程中获得强度控制值来进行后滤波处理。技术研发人员：中条健,猪饲知宏,八杉将伸,青野友子受保护的技术使用者：夏普株式会社技术研发日：技术公布日：2024/7/25