[go: up one dir, main page]

CN106851275A - 视频数据的自适应采样点偏移的处理装置及方法 - Google Patents

视频数据的自适应采样点偏移的处理装置及方法 Download PDF

Info

Publication number
CN106851275A
CN106851275A CN201611050073.7A CN201611050073A CN106851275A CN 106851275 A CN106851275 A CN 106851275A CN 201611050073 A CN201611050073 A CN 201611050073A CN 106851275 A CN106851275 A CN 106851275A
Authority
CN
China
Prior art keywords
adaptive
type pointer
offset type
point offset
adaptive sampling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201611050073.7A
Other languages
English (en)
Inventor
傅智铭
黄毓文
徐志玮
雷少民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN106851275A publication Critical patent/CN106851275A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供至少一种视频数据的自适应采样点偏移的处理装置及方法。其中，该方法包括，接收经过处理并重建的像素区块；由视频比特流中确定自适应采样点偏移类型指针，其中自适应采样点偏移类型指针是根据截断一元码二进制操作进行解码的，自适应采样点偏移类型指针是使用具有一个上下文的基于上下文的自适应二进制算术编码方式进行解码的，或者自适应采样点偏移类型指针是通过使用上下文模式与旁路模式的基于上下文的自适应二进制算术编码方式进行解码的；以及基于包含自适应采样点偏移类型指针的自适应采样点偏移信息，对经过处理并重建的像素区块实施自适应采样点偏移处理。本发明的优点之一在于保持CABAC压缩效率的同时，降低上下文模型的复杂度。

Description

视频数据的自适应采样点偏移的处理装置及方法
本申请是进入中国国家阶段日期为2014年11月10日(国际申请日为2013年4月2日，国际申请号为PCT/CN2013/073627)，中国申请号为CN201380024515.9，发明名称为“自适应采样点偏移信息的编解码装置及方法(Method and Apparatus for Coding ofSample Adaptive Offset Information)”的申请的分案申请。
相关案的交叉引用
本发明要求主张2012年5月29日提出的编号为61/652,564且命名为“The contextdesign of SAO syntax(自适应采样点偏移语法的上下文设计)”的美国临时专利申请，以及2012年6月22日提出的编号为61/662,967且命名为“Reduction of Context Models andContext Bins for SAO(用于自适应采样点偏移的上下文二进制位及上下文模型的简化)”的美国临时申请案的优先权。这些美国临时申请的全部内容在此引用并合并参考。
技术领域
本发明是有关于视频编解码(video coding)，更具体地，本发明是有关于自适应采样点偏移(Sample Adaptive Offset,SAO)信息的编解码。
背景技术
运动估计(Motion Estimation,ME)是一种有效的帧间(inter-frame)编解码技术，使用了视频序列的时域冗余。运动补偿(Motion Compensation,MC)帧间编解码已广泛用于各种国际视频编解码标准。在各种编解码标准中所采用的运动估计通常是基于区块(block-based)的技术，其中，可为每个宏块(macroblock)或类似的区块配置确定运动信息，例如编解码模式及运动向量。另外，也可适应性地使用帧内编解码(intra-coding)，其中图像在处理时无需参考其它图像。帧间预测(inter-predicted)或帧内预测(intra-predicted)的残差(residues)通常通过变换(transformation)，量化(quantization)及熵编码(entropy coding)进行进一步处理，以产生压缩的视频比特流(video bitstream)。在编码操作中，引入了编码失真效应(coding artifacts)，特别是在量化操作中。为了减少编码失真效应，可对重建的(reconstructed)视频应用额外的处理以增强在更新的编解码系统中的图像质量。该额外的处理经常配置为环路内(in-loop)操作，以便编码器和解码器可产生(derive)相同的参考图像。
图1为结合了环路内滤波操作的自适应的帧间/帧内视频编码系统的示意图。对于帧间预测，运动估计/运动补偿(ME/MC)112用于基于来自另外一个或多个图像的视频数据来提供预测数据。切换器(switch)114选择帧内预测110或来自ME/MC 112的帧间预测数据，选择出的预测数据供应至加法器116，以形成预测误差，也称为预测残差或残差。然后，预测误差经由变换器(Transformation,T)118处理，并紧接着进行量化(Quantization,Q)120处理。然后，变换并量化后的残差由熵编码器122进行编码，以形成对应于压缩的视频数据的视频比特流。然后，与变换系数有关的比特流与额外信息(side information)一起进行打包，其中额外信息例如运动，模式及与图像单元(image unit)有关的其它信息。额外信息也可通过熵编码进行处理，以减少所需的带宽。相应地，额外信息数据也可提供至图1所示的熵编码器122(图中未显示至熵编码器122的运动/模式路径)。当使用帧间预测模式时，之前重建的一个或多个参考图像需要用于形成预测残差。因而在编码器端使用重建的环路(loop)以产生重建的图像。因此，变换及量化后的残差通过反量化(InverseQuantization,IQ)124和反变换(Inverse Transformation,IT)126处理，以恢复(recovery)处理后的残差。然后，处理后的残差通过重建(Reconstruction,REC)128添加回到预测数据136，以重建视频数据。重建的视频数据储存在参考图像缓冲器134中，并用于其它帧的预测。
如图1所示，进入的视频数据在编码系统中经过了一系列的处理。来自REC 128的重建的视频数据可能受制于因一系列处理而带来的各种损失(impairments)。相应地，为了提高视频质量，在重建的视频数据用作预测数据之前应用各种环路处理。在研发的高效视频编解码(High Efficiency Video Coding,HEVC)标准中，解区块滤波器(DeblockingFilter,DF)130，SAO 131及自适应环路滤波器(Adaptive Loop Filter,ALF)132已发展用于增强图像质量。DF 130用于边界像素(boundary pixels)，以及DF处理依赖于潜在的(underlying)像素数据及与对应区块有关的编解码信息。没有DF特定的(DF-specific)额外信息需要并入(incorporated in)视频比特流。另一方面，SAO与ALF处理是自适应的，其中，滤波信息例如滤波器参数及滤波器类型可根据潜在的视频数据动态改变。因此，与SAO和ALF有关的滤波信息并入视频比特流，以便解码器可适当恢复所需的信息。此外，来自SAO和ALF的滤波器信息提供至熵编码器122以并入比特流。在图1中，DF 130首先应用于重建的视频。然后，SAO 131应用于DF处理的视频，以及ALF 132应用于SAO处理后的视频。然而，在DF，SAO和ALF之间的处理顺序可重新安排。在研发的HEVC视频标准中，环路滤波处理包括DF和SAO。
HEVC中的编解码处理应用于每个最大编码单元(Largest Coding Unit,LCU)。使用四叉树(quadtree)，LCU适应性地划分为多个编码单元。因此，LCU也成为编码树区块(Coding Tree Block,CTB)。在每个叶编码单元(Coding Unit,CU)中，对每个8×8区块执行DF，并在HEVC测试模型版本7.0(HEVC Test Model Version 7.0,HM-7.0)中，对8×8区块的边界应用DF。对于每个8×8区块，首先应用跨越垂直区块边界的水平滤波，然后应用跨越水平区块边界的垂直滤波。
如图1所示，在HM-7.0中也采用了SAO 131。SAO视为滤波处的处理仅应用于一个像素的特殊情形。为了应用SAO，图像可划分为多个LCU对齐的(LCU-aligned)区域。每个区域可在两个带偏移(Band Offset,BO)，四个边偏移(Edge Offset,EO)及无处理(OFF)中选择一个SAO类型。对于每个待处理的(也称为待滤波的)像素，BO使用像素强度将像素划分为带(band)。如图2所示，像素强度范围(pixel intensity range)平均分为32个带。四个连续的带形成组，其中起始带由sao_band_position所指示。一个较佳的4带组200如图2所示。该4带组的第一个带的位置由箭头210指示。在EO中，像素划分是首先将像素划分为不同的组(group)(也称为类，categories或classes)。每个像素的像素分类是基于3×3窗口(window)，如图3所示，对应于0°，90°，135°及45°的四个配置用于分类。一旦图像或区域中的所有像素分类完成，对于每组像素产生并传送一个偏移。在HM-7.0中，SAO应用于亮度和色度(chroma)分量，且每个亮度分量进行独立处理。除EO的类4之外，类似于BO，每类的所有像素产生一个偏移，其中，类4被强制使用0偏移。如下表1列示了EO像素的分类，其中“C”表示待分类的像素。
表1
如图1所示，ALF 132是HM-7.0中的另一环路内滤波，以增强图像质量。采用了多种类型的亮度滤波器的覆盖区(footprints)和色度滤波器的覆盖区。首先在水平方向上应用ALF操作。当水平ALF执行后，在垂直方向上应用ALF。在HM-7.0中，每个图像可使用最多16个亮度ALF滤波器和最多一个色度ALF滤波器。为了允许ALF的定位，存在两种模式用于为亮度像素选择滤波器。一种是基于区域的自适应(Region-based Adaptation,RA)模式，以及另一种是基于区块的自适应(Block-based Adaptation,BA)模式。除了在图像水平用于自适应模式选择的RA和BA之外，大于阈值的编码单元可进一步由滤波器使用旗标(filterusage flag)控制，以局部(locally)使用(enable)或不使用(disable)ALF操作。对于色度分量，由于相对平缓(flat)，在HM-7.0中没有使用局域自适应。且图像的两个色度分量共享同一个滤波器。在HM-7.0中，用于区域的ALF滤波器可由多个ALF滤波器中选取。另外，在HM-7.0中使用了多个滤波器的覆盖区。对于每个ALF滤波器，存在一组与该滤波器有关的滤波器参数。因此，ALF信息包含已选择的ALF滤波器的识别，滤波器覆盖区及滤波器参数。
如图1所示，DF130用于来自REC 128的重建的像素。然后，SAO 131应用于DF处理后的像素，以及ALF 132应用于SAO处理后的像素。虽然图1所示的处理顺序为DF，SAO和ALF，也可使用其它处理顺序。例如，SAO可应用于来自REC 128的重建的像素，DF处理后的重建的像素(即，对重建的像素应用DF)，ALF处理后的重建的像素(即，对重建的像素应用ALF)，DF处理后且ALF处理后的像素(即，对重建的像素应用DF，并对DF处理后的重建的像素应用ALF)，或者ALF处理后且DF处理后的像素(即，对重建的像素应用ALF，并对ALF处理后的重建的像素应用DF)。方便起见，“处理后的重建的像素”可指在SAO处理期间上述的任意类型的处理后的像素。“处理后的重建的像素”也包括来自REC 128的重建的像素。在此情形中，可考虑对来自REC 128的重建的像素应用空操作(null processing)。类似地，“处理后的重建的像素”也可指在ALF处理期间通过DF，SAO，DF和SAO，或者SAO和DF的各种类型的处理后的像素。同样，对于ALF处理，“处理后的重建的像素”也包括来自REC 128的重建的像素。
为了减少与SAO处理有关的额外信息，当前LCU的SAO信息可重新使用当前LCU上方或左侧的相邻LCU的SAO信息。SAO信息共享由merge语法指示。在HM-8.0中，SAO语法由sao_merge_left_flag，sao_merge_up_flag，sao_type_idx_luma，sao_type_index_chroma，sao_eo_class_luma，sao_eo_class_chroma，sao_band_position，sao_offset_abs及sao_offset_sign组成，如表2所示。语法sao_merge_left_flag表示当前LCU是否重新使用左侧LCU的SAO参数。语法sao_merge_up_flag表示当前LCU是否重新使用上方LCU的SAO参数。语法sao_type_idx表示已选择的SAO类型(分别用于亮度分量和色度分量的sao_type_idx_luma和sao_type_index_chroma)。在HM-8.0中，如表3所示，每个LCU可选择不处理(SAO-off)或应用包括BO和EO的SAO类型中的一个。请注意，SAO类型0度EO，90度EO，135度EO及45度EO由SAO语法sao_eo_class_luma和sao_eo_class_chroma表示。语法sao_offset_abs表示偏移量(offset magnitude)，以及语法sao_offset_sign表示偏移标志。语法cIdx表示三个色彩分量中的一个。类似的机制也可用于允许相邻的区块共享相同的ALF信息。请注意，HM-7.0和HM-8.0之间的语法表达式差别不影响熵编码方法。
在HM-7.0中，基于上下文的自适应二进制算术编码(Context-based AdaptiveBinary Arithmetic Coding,CABAC)用作熵编码器，以用于对SAO信息进行编码。如图4所示，CABAC操作400由二值化(binarization)，上下文模型化(context modeling)及二进制算术编码(Binary Arithmetic Coding,BAC)组成。在二值化步骤410中，每个语法元素映射至二进制字符串(在本说明书中也称为一个或多个二进制位bin)在上下文模型化步骤420中，为每个二进制位选择一个概率模型(probability model)。相应的概率模型可取决于之前编码的语法元素，二进制位指针(bin indices)，额外信息或上述任意组合。当二值化及上下文模型分配后，二进制位的值及其相关上下文模型提供至二进制算术编码引擎430，即BAC。二进制位的值可以根据语法元素和二进制位指针以两种编码模式进行编码。在说明书中，对应于常规编码模式的二进制位称为常规二进制位，以及对应于旁路(bypass)编码模式的二进制位称为旁路二进制位。在常规编码模式中，用于BAC的最大概率符元(MostProbable Symbol,MPS)的机率与最小概率符元(Least Probable Symbol,LPS)的机率均由相关的上下文模型产生。在旁路编码模式中，MPS和LPS的概率视为相等。在CABAC中，引入旁路模式以加速编码处理。对于有效压缩的(compression-efficient)CABAC设计，形成好的语法二值化和适当的上下文模型很重要。上下文模型设计需要匹配潜在的数据的统计，这可能会导致高处理复杂度。需要在保持CABAC的压缩效率的同时，降低与SAO信息有关的上下文模型的复杂度。
表2
表3
发明内容
有鉴于此，本发明提供至少一种视频数据的自适应采样点偏移的处理装置及方法。
本发明提供一种简化SAO类型指针(SAO type index)编解码的装置及方法，用于视频编解码系统。根据本发明的多个实施例使用截断一元码二进制操作(truncated unarybinarization)，使用仅有一个上下文的CABAC，或使用具有上下文模式和旁路模式的CABAC对SAO类型指针进行编码，其中上下文模式用于对与SAO类型指针有关的第一个二进制位，以及旁路模式用于任意剩余其它二进制位。SAO类型指针对应于与视频数据的亮度分量有关的第一SAO类型指针，或者与视频数据的色度分量有关的第二SAO类型指针。
本发明的优点之一在于能够在保持CABAC的压缩效率的同时，降低与SAO信息有关的上下文模型的复杂度。
附图说明
图1为使用帧间/帧内预测的较佳视频编码系统的示意图，其中结合了包括DF，SAO及ALF的环路滤波器处理。
图2为通过将像素强度范围平均划分为32个带进行BO的示例示意图。
图3为基于3×3窗口使用对应于0°，90°，135°及45°的四种配置进行EO像素分类的示意图。
图4为CABAC的较佳结构的示意图。
图5为结合本发明一实施例的用于视频编码器的在不同SAO语法元素之间共享上下文的SAO处理的较佳流程图。
图6为结合本发明一实施例的用于视频解码器的在不同SAO语法元素之间共享上下文的SAO处理的较佳流程图。
图7为结合本发明一实施例的用于视频编码器的使用复杂度简化的SAO类型指针编码的SAO处理的较佳流程图。
图8为结合本发明一实施例的用于视频解码器的使用复杂度简化的SAO类型指针解码的SAO处理的较佳流程图。
具体实施方式
如前所述，合并旗标(例如，sao_merge_left_flag及sao_merge_up_flag)的使用允许相邻的区块共享SAO信息，以减少所需的SAO信息。在HM-7.0中，语法元素sao_merge_left_flag及sao_merge_up_flag使用CABAC进行编码。用于潜在的符元(symbol)的上下文模型是基于符元的概率模型形成的。在HM-7.0中，用于sao_merge_left_flag和sao_merge_up_flag的上下文模型是分别形成的。此外，用于不同色彩分量(及Y，Cb，Cr)的上下文模型是分别形成的。
根据本发明的多个实施例允许与多个合并旗标有关的不同的语法元素共享同一个上下文模型。例如，色彩分量的合并左旗标和合并上旗标(即sao_merge_left_flag和sao_merge_up_flag)可共享同一个上下文模型。在此情形中，上下文模型可根据合并左旗标和合并上旗标的组合或联合统计进行设计。组合统计有可能不同于与合并左旗标和合并上旗标有关的个别的统计(individual statistics)。因此，组合的上下文模型有可能不同于与合并左旗标和合并上旗标有关的个别的上下文模型。在另一实施例中，不同色彩分量的上下文模型共享同一个上下文模型。在此情形中，对于不同的色彩分量，与合并左旗标有关的上下文模型是基于组合统计而设计的。在又一实施例中，不同色彩分量的合并上旗标共享同一个上下文模型。在此情形中，对于不同的色彩分量，与合并上旗标有关的上下文模型是基于组合统计而设计的。
在HM-7.0中，与SAO类型指针(例如，sao_type_idx_luma和sao_type_idx_chroma)有关的语法元素使用CABAC进行编码。在二值化后，与SAO类型指针有关的比特串(bitstrings)使用CABAC进行处理。为了降低复杂度，在一实施例中，SAO类型指针的编码是基于截断一元码二进制操作方法。例如，表3中所示SAO类型指针(包括亮度和色度)可由截断一元码集合{0,10,11}分别用于指针0至3来表示。在另一实施例中，用于SAO类型指针的CABAC仅使用一个上下文。在又一实施例中，用于SAO类型指针的CABAC对第一个二进制位使用上下文编码，并对剩下的二进制位使用旁路编码。例如，SAO类型指针的二值化可对应于{0,10,11}，且只有每个SAO类型指针的第一个二进制位使用上下文编码。剩余的二进制位使用旁路模式进行编码。
图5为结合本发明一实施例的用于视频编码系统的在不同SAO语法元素之间共享上下文的SAO处理的较佳流程图。如图1所示并在有关段落中，环路处理(DF，SAO或ALF)应用于重建的像素。此外，前面提到，处理后的重建的像素可指各种类型的处理后的重建的像素。如步骤510所示，由媒体(media)或处理器接收处理后的重建的像素的当前区块。处理后的重建的像素可能储存在媒体中，例如系统中的随机存取存储器(RAM)或动态随机存取存储器(DRAM)。因此，处理后的重建的像素需要由媒体中读回。同样，也可能SAO操作直接由负责产生处理后的重建的像素的另一处理器(例如中心处理单元，控制器或数字信号处理器)接收处理后的重建的像素。在此情形中，处理后的重建的像素将接收自处理器。区块可以是CTB，LCU或其它区块单元(例如宏块或其它类型)。在步骤520中，确定用于处理后的重建的像素区块的SAO语法元素(称为第一SAO语法元素)。第一SAO语法元素可对应于SAO合并旗标或与SAO处理相关的其它语法元素。在本领域中，SAO语法元素的确定已知。例如，在编码器端，合并旗标可使用率失真优化(rate-distortion optimization)来确定。然后，如步骤530所示，根据联合上下文模型对第一SAO语法元素应用CABAC编码，其中，第一SAO语法元素与至少一个第二语法元素共享联合上下文。联合上下文模型可根据第一SAO语法元素与所述至少一个第二语法元素的联合统计来形成。如步骤540所示，将编码后的第一SAO语法元素并入与视频数据有关的视频比特流，以便解码器能够由比特流恢复第一SAO语法元素。
图6为结合本发明一实施例的用于视频解码器的在不同SAO语法元素之间共享上下文的SAO处理的较佳流程图。如步骤610所示，由媒体或处理器接收与图像有关的处理后的重建的像素区块。在步骤620中，由视频比特流确定SAO语法元素(称为第一SAO语法元素)，其中，第一SAO语法元素是使用CABAC解码由视频比特流解码得到的，且第一SAO语法元素与至少一个第二语法元素共享联合上下文模型。若SAO语法元素尚未解码，则SAO语法元素的确定可对应于对SAO语法元素的解码。在本领域中，由比特流中解码语法元素的方法已知。若SAO语法元素通过并非SAO处理部分的熵解码器进行解码，则SAO语法元素的确定也可对应于接收SAO语法元素。如步骤630所示，当第一SAO语法元素恢复后，基于包括第一SAO语法元素的SAO信息，对处理后的重建的像素区块应用SAO处理。
图7为结合本发明一实施例的用于视频编码器的复杂度简化的SAO类型指针编码的SAO处理的较佳流程图。如步骤710所示，由媒体或处理器接收处理后的重建的像素的当前区块。处理后的重建的像素可能储存在媒体中，例如系统中的RAM或DRAM中。因此，处理后的重建的像素需要由媒体中读回。同样，有可能SAO处理直接由复杂产生处理后的重建的像素的另一处理器(例如中心处理单元，控制器或数字信号处理器)接收处理后的重建的像素。在此情形中，处理后的重建的像素将接收自处理器。区块可以是CTB，LCU或其它区块单元(例如宏块或其它类型)。在步骤720中，确定用于处理后的重建的像素区块的SAO类型指针。在本领域中，SAO类型指针的确定已知。例如，在编码器端，SAO类型指针可使用率失真优化来确定。然后，如步骤730所示，对SAO类型指针进行编码且并入视频比特流，以便在解码器端能够恢复SAO类型指针。编码后的SAO类型指针对应于根据截断一元码二进制操作进行编码的SAO类型指针，通过使用一个上下文的CABAC进行编码的SAO类型指针，或者使用上下文模式和旁路模式的CABAC进行编码的SAO类型指针，其中上下文模式用于与SAO类型指针有关的第一个二进制位，旁路模式用于与SAO类型指针有关的剩余二进制位。如步骤740所示，基于包括SAO类型指针的SAO信息，对处理后的重建的像素区块应用SAO处理。
图8为结合本发明一实施例的用于视频解码器的复杂度简化的SAO类型指针解码的SAO处理的较佳流程图。如步骤810所示，由媒体或处理器接收与图像有关的处理后的重建的像素区块，其中，处理后的重建的像素区块是由视频比特流解码得到的。如步骤820所示，由视频比特流确定SAO类型指针，其中，SAO类型指针是根据截断一元码二进制操作进行解码的，SAO类型指针是通过使用一个上下文的CABAC进行解码的，或者SAO类型指针是使用具有上下文模式和旁路模式的CABAC进行解码的，其中，上下文模式用于与SAO类型指针有关的第一个二进制位，旁路模式用于与SAO类型指针有关的任意剩余二进制位。如步骤830所示，当SAO类型指针确定后，基于包括SAO类型指针的SAO信息，对处理后的重建的像素应用SAO处理。
图5至图8所示的较佳流程图仅用于说明目的。本领域技术人员在不脱离本发明的精神前提下，可对上述步骤重新排序，组合或切分以实施本发明。
上面的描述能够使本领域技术人员以上文所提供的特定应用及其要求来实施本发明。本领域技术人员能够清楚了解上述实施例的多种变型，此处所定义的基本原则可应用于其它实施例。因此，本发明并不仅限于上面描述及显示的特定实施例，而是记载了符合本原则及新的特征的最广范围。为提供有关本发明的全面理解，上述详细记载中描述了各种具体细节。然而，本领域技术人员应理解本发明可以实施。
上述本发明的实施例可以各种硬件，软件代码或二者的组合来实施。例如，本发明的实施例可以是集成在视频压缩芯片中的电路或者集成在视频压缩软件中用以执行此处所述处理的程序代码。本发明的实施例也可以是由数字信号处理器(Digital SignalProcessor,DSP)执行以实现此处所述处理的程序代码。本发明也可包含一些可由计算机处理器、数字信号处理器、微处理器或场效可编程门阵列(Field Programmable Gate Array,FPGA)所执行的一些功能。通过执行定义了本发明所体现的特定方法的机器可读软件代码或固件代码，这些处理器可根据本发明配置用于执行特定任务。软件代码或固件代码可以不同程序语言和不同格式或类型进行开发。软件代码也可在不同的目标平台上进行编译。然而，不同的代码格式，软件代码的类型和语言以及配置代码以执行根据本发明的任务的其它方式均未脱离本发明的精神和范围。
在不脱离本发明的精神和范围内，本发明可实施为其它具体形式。上述实施例的各方面仅用于说明目的，并非用以限定目的。因此本发明的保护范围当视后附的权利要求所界定者为准，而非上述描述。任何在本发明权利要求及其均等性范围内所作的变更，均落入本发明权利要求范围内。

Claims (6)

1.一种视频数据的自适应采样点偏移的处理方法，用于视频解码器，其特征在于，所述视频数据的自适应采样点偏移的处理方法包含：
接收与图像有关的经过处理并重建的像素区块，其中，所述图像来自媒体或处理器，所述经过处理并重建的像素区块是由视频比特流中解码得到的；
由所述视频比特流中确定自适应采样点偏移类型指针，其中所述自适应采样点偏移类型指针是根据截断一元码二进制操作进行解码的，所述自适应采样点偏移类型指针是使用具有一个上下文的基于上下文的自适应二进制算术编码方式进行解码的，或者所述自适应采样点偏移类型指针是通过使用上下文模式与旁路模式的基于上下文的自适应二进制算术编码方式进行解码的，其中所述上下文模式用于与所述自适应采样点偏移类型指针有关的第一个二进制位，所述旁路模式用于与所述自适应采样点偏移类型指针有关的任意剩余其它二进制位；以及
基于包含所述自适应采样点偏移类型指针的自适应采样点偏移信息，对所述经过处理并重建的像素区块实施自适应采样点偏移处理。
2.根据权利要求1所述的视频数据的自适应采样点偏移的处理方法，其特征在于，所述自适应采样点偏移类型指针对应于第一自适应采样点偏移类型指针或第二自适应采样点偏移类型指针，其中所述第一自适应采样点偏移类型指针与所述视频数据的亮度分量有关，所述第二自适应采样点偏移类型指针与所述视频数据的色度分量有关。
3.一种视频数据的自适应采样点偏移的处理方法，用于视频编码器，其特征在于，所述视频数据的自适应采样点偏移的处理方法包含：
接收与图像有关的经过处理并重建的像素区块，其中所述图像来自媒体或处理器；
为所述经过处理并重建的像素区块确定自适应采样点偏移类型指针；
将编码后的所述自适应采样点偏移类型指针并入与所述视频数据有关的视频比特流，其中，编码后的所述自适应采样点偏移类型指针对应于根据截断一元码二进制操作进行编码的所述自适应采样点偏移类型指针，通过具有一个上下文的基于上下文的自适应二进制算术编码方式进行编码的所述自适应采样点偏移类型指针，或者通过使用上下文模式与旁路模式的基于上下文的二进制算术编码方式进行编码的所述自适应采样点偏移类型指针，其中所述上下文模式用于与所述自适应采样点偏移类型指针有关的第一个二进制位，所述旁路模式用于与所述自适应采样点偏移类型指针有关的任意剩余其它二进制位；以及
基于包含所述自适应采样点偏移类型指针的自适应采样点偏移信息，对所述经过处理并重建的像素区块实施自适应采样点偏移处理。
4.根据权利要求3所述的视频数据的自适应采样点偏移的处理方法，其特征在于，所述自适应采样点偏移类型指针对应于第一自适应采样点偏移类型指针或第二自适应采样点偏移类型指针，其中所述第一自适应采样点偏移类型指针与所述视频数据的亮度分量有关，所述第二自适应采样点偏移类型指针与所述视频数据的色度分量有关。
5.一种视频数据的自适应采样点偏移的处理装置，用于视频解码器，其特征在于，所述视频数据的自适应采样点偏移的处理装置包含：
接收与图像有关的经过处理并重建的像素区块的装置，其中，所述图像来自媒体或处理器，所述经过处理并重建的像素区块是由视频比特流中解码得到的；
由所述视频比特流中确定自适应采样点偏移类型指针的装置，其中所述自适应采样点偏移类型指针是根据截断一元码二进制操作进行解码的，所述自适应采样点偏移类型指针是使用具有一个上下文的基于上下文的自适应二进制算术编码方式进行解码的，或者所述自适应采样点偏移类型指针是通过使用上下文模式与旁路模式的基于上下文的自适应二进制算术编码方式进行解码的，其中所述上下文模式用于与所述自适应采样点偏移类型指针有关的第一个二进制位，所述旁路模式用于与所述自适应采样点偏移类型指针有关的任意剩余其它二进制位；以及
基于包含所述自适应采样点偏移类型指针的自适应采样点偏移信息，对所述经过处理并重建的像素区块实施自适应采样点偏移处理的装置。
6.一种视频数据的自适应采样点偏移的处理装置，用于视频编码器，其特征在于，所述视频数据的自适应采样点偏移的处理装置包含：
接收与图像有关的经过处理并重建的像素区块的装置，其中所述图像来自媒体或处理器；
为所述经过处理并重建的像素区块确定自适应采样点偏移类型指针的装置；
将编码后的所述自适应采样点偏移类型指针并入与所述视频数据有关的视频比特流的装置，其中，编码后的所述自适应采样点偏移类型指针对应于根据截断一元码二进制操作进行编码的所述自适应采样点偏移类型指针，通过具有一个上下文的基于上下文的自适应二进制算术编码方式进行编码的所述自适应采样点偏移类型指针，或者通过使用上下文模式与旁路模式的基于上下文的二进制算术编码方式进行编码的所述自适应采样点偏移类型指针，其中所述上下文模式用于与所述自适应采样点偏移类型指针有关的第一个二进制位，所述旁路模式用于与所述自适应采样点偏移类型指针有关的任意剩余其它二进制位；以及
基于包含所述自适应采样点偏移类型指针的自适应采样点偏移信息，对所述经过处理并重建的像素区块实施自适应采样点偏移处理的装置。
CN201611050073.7A 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法 Withdrawn CN106851275A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261652564P 2012-05-29 2012-05-29
US61/652,564 2012-05-29
US201261662967P 2012-06-22 2012-06-22
US61/662,967 2012-06-22
CN201380024515.9A CN104303506B (zh) 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201380024515.9A Division CN104303506B (zh) 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法

Publications (1)

Publication Number Publication Date
CN106851275A true CN106851275A (zh) 2017-06-13

Family

ID=49672372

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201611050073.7A Withdrawn CN106851275A (zh) 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法
CN201380024515.9A Active CN104303506B (zh) 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201380024515.9A Active CN104303506B (zh) 2012-05-29 2013-04-02 视频数据的自适应采样点偏移的处理装置及方法

Country Status (7)

Country Link
US (2) US9942571B2 (zh)
EP (2) EP3139616A1 (zh)
JP (2) JP6242385B2 (zh)
KR (1) KR101638720B1 (zh)
CN (2) CN106851275A (zh)
CA (2) CA2863549C (zh)
WO (1) WO2013177975A1 (zh)

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107835430A (zh) * 2012-05-25 2018-03-23 太阳专利托管公司 图像编码方法、图像解码方法、图像编码装置、图像解码装置以及图像编码解码装置
CA3217710A1 (en) 2012-05-25 2013-11-28 Sun Patent Trust Image encoding and decoding using context adaptive binary arithmetic coding with a bypass mode
WO2013175736A1 (ja) 2012-05-25 2013-11-28 パナソニック株式会社 動画像符号化方法、動画像符号化装置、動画像復号方法、動画像復号装置、および、動画像符号化復号装置
BR112014000369B1 (pt) 2012-05-25 2023-04-25 Sun Patent Trust Método de decodificação de imagem em movimento, aparelho de decodificação de imagem em movimento, método de codificação de imagem em movimento e aparelho de codificação de imagem em movimento
CN106851275A (zh) * 2012-05-29 2017-06-13 寰发股份有限公司 视频数据的自适应采样点偏移的处理装置及方法
EP4020990A1 (en) * 2012-06-04 2022-06-29 Sun Patent Trust Video image encoding device, video image decoding device
CN103636209B (zh) 2012-06-08 2017-09-26 太阳专利托管公司 图像解码方法和图像解码装置
TWI519135B (zh) * 2012-06-11 2016-01-21 三星電子股份有限公司 視訊解碼裝置
US10623759B2 (en) 2012-06-13 2020-04-14 Sony Corporation Decoupling enhancements in sample adaptive offset (SAO) for high efficiency video encoder (HEVC)
TWI595776B (zh) * 2012-06-27 2017-08-11 Sony Corp Image processing device and method
KR101962984B1 (ko) * 2012-06-27 2019-03-27 선 페이턴트 트러스트 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치 및 화상 부호화 복호 장치
AU2012203828B2 (en) * 2012-06-28 2015-12-10 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding a sample adaptive offset data of encoded video data
CN107172438B (zh) * 2012-07-02 2021-03-02 索尼公司 用于采样自适应偏移的编码装置和编码方法
CN105323583B (zh) * 2014-06-13 2019-11-15 财团法人工业技术研究院 编码方法、解码方法、编解码系统、编码器与解码器
EP2996269A1 (en) 2014-09-09 2016-03-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio splicing concept
EP3192263B1 (en) 2014-10-06 2020-01-01 Huawei Technologies Co., Ltd. Improved palette mode in high efficiency video coding (hevc) screen content coding (scc)
KR20170078671A (ko) * 2014-10-31 2017-07-07 삼성전자주식회사 다중 오프셋 방식을 적용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
US9942551B2 (en) * 2015-01-30 2018-04-10 Qualcomm Incorporated Palette index grouping for video coding
US11146788B2 (en) 2015-06-12 2021-10-12 Qualcomm Incorporated Grouping palette bypass bins for video coding
US10362310B2 (en) * 2015-10-21 2019-07-23 Qualcomm Incorporated Entropy coding techniques for display stream compression (DSC) of non-4:4:4 chroma sub-sampling
WO2017086740A1 (ko) * 2015-11-18 2017-05-26 한국전자통신연구원 인루프 필터를 이용한 비디오 복호화 방법 및 이를 위한 장치
EP3507980A4 (en) * 2016-09-20 2020-02-19 Mediatek Inc. METHODS AND APPARATUSES FOR PROCESSING ADAPTIVE SAMPLE OFFSET IN VIDEO CODING
WO2018068263A1 (zh) * 2016-10-13 2018-04-19 富士通株式会社 图像编码方法、装置以及图像处理设备
KR101873993B1 (ko) * 2016-11-18 2018-07-05 전자부품연구원 적응적 샘플 오프셋 파라미터 예측 방법 및 이를 위한 장치
CN109565604A (zh) * 2016-12-30 2019-04-02 华为技术有限公司 图像滤波方法、装置以及设备
MX2019014443A (es) 2017-05-31 2020-02-10 Interdigital Vc Holdings Inc Un metodo y un dispositivo para codificacion y decodificacion de imagenes.
US20200236355A1 (en) * 2017-08-01 2020-07-23 Sharp Kabushiki Kaisha Systems and methods for filtering reconstructed video data using adaptive loop filtering techniques
WO2019075638A1 (zh) * 2017-10-17 2019-04-25 北京金山云网络技术有限公司 编码和解码方法、装置、编码器、解码器及存储介质
EP3750320B1 (en) 2018-02-09 2023-11-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Adaptive in-loop filter with multiple feature-based classifications
GB2574425A (en) * 2018-06-05 2019-12-11 Canon Kk Video coding and decoding
GB2589221B (en) 2018-06-19 2023-03-22 Beijing Bytedance Network Tech Co Ltd Mode dependent MVD precision set
CN110891180B (zh) 2018-09-10 2023-11-17 华为技术有限公司 视频解码方法及视频解码器
KR102635047B1 (ko) 2018-09-19 2024-02-07 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 움직임 벡터 해상도를 가지는 어파인 모드에 대한 구문 재사용
CN118678107A (zh) * 2018-10-09 2024-09-20 三星电子株式会社 视频编码和解码方法以及用于发送比特流的设备
WO2020141906A1 (ko) * 2019-01-02 2020-07-09 엘지전자 주식회사 인트라 블록 카피 예측을 이용한 영상 코딩 방법 및 장치
CN113366851A (zh) 2019-01-31 2021-09-07 北京字节跳动网络技术有限公司 对称运动矢量差编解码模式的快速算法
EP3895429A4 (en) 2019-01-31 2022-08-10 Beijing Bytedance Network Technology Co., Ltd. CONTEXT FOR CODE AN ADAPTIVE MOTION VECTOR RESOLUTION IN AFFINE MODE
WO2020192747A1 (en) * 2019-03-27 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Motion information precision alignment in affine advanced motion vector prediction
US11516489B2 (en) 2019-06-24 2022-11-29 Tencent America LLC Method and apparatus for video coding
CN112135135A (zh) * 2019-06-24 2020-12-25 腾讯美国有限责任公司 视频解码方法、装置、计算机设备及存储介质
US12047567B2 (en) * 2021-01-26 2024-07-23 Beijing Dajia Internet Information Technology Co., Ltd. System and method for applying adaptive loop filter in video coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050147173A1 (en) * 2003-12-18 2005-07-07 Lsi Logic Corporation Low complexity transcoding between video streams using different entropy coding
CN101072350A (zh) * 2006-06-08 2007-11-14 威盛电子股份有限公司 译码系统及其译码方法
CN102256121A (zh) * 2010-05-21 2011-11-23 财团法人交大思源基金会 背景调适性二进制运算解码装置及其解码方法
CN104303506B (zh) * 2012-05-29 2017-08-01 寰发股份有限公司 视频数据的自适应采样点偏移的处理装置及方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9001899B2 (en) 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
US7932843B2 (en) * 2008-10-17 2011-04-26 Texas Instruments Incorporated Parallel CABAC decoding for video decompression
KR100991138B1 (ko) 2009-04-16 2010-11-01 한양대학교 산학협력단 부호화기 및 부호화기의 후보 모드 결정 방법
US8319672B2 (en) 2010-04-09 2012-11-27 Korea Electronics Technology Institute Decoding device for context-based adaptive binary arithmetic coding (CABAC) technique
US9094658B2 (en) * 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
US8913666B2 (en) * 2010-10-01 2014-12-16 Qualcomm Incorporated Entropy coding coefficients using a joint context model
CN107087180B (zh) * 2010-10-05 2019-10-29 寰发股份有限公司 基于分区基础的自适应环路滤波方法和装置
CN102231830B (zh) * 2010-11-23 2013-04-17 浙江大学 用于上下文算术编解码的运算单元
US9008170B2 (en) * 2011-05-10 2015-04-14 Qualcomm Incorporated Offset type and coefficients signaling method for sample adaptive offset
CA3203096A1 (en) * 2011-06-24 2012-12-27 Lg Electronic Inc. Image information encoding and decoding method
US20130003823A1 (en) * 2011-07-01 2013-01-03 Kiran Misra System for initializing an arithmetic coder
US8787688B2 (en) * 2011-10-13 2014-07-22 Sharp Laboratories Of America, Inc. Tracking a reference picture based on a designated picture on an electronic device
CA3217710A1 (en) 2012-05-25 2013-11-28 Sun Patent Trust Image encoding and decoding using context adaptive binary arithmetic coding with a bypass mode
CN107835430A (zh) 2012-05-25 2018-03-23 太阳专利托管公司 图像编码方法、图像解码方法、图像编码装置、图像解码装置以及图像编码解码装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050147173A1 (en) * 2003-12-18 2005-07-07 Lsi Logic Corporation Low complexity transcoding between video streams using different entropy coding
CN101072350A (zh) * 2006-06-08 2007-11-14 威盛电子股份有限公司 译码系统及其译码方法
CN102256121A (zh) * 2010-05-21 2011-11-23 财团法人交大思源基金会 背景调适性二进制运算解码装置及其解码方法
CN104303506B (zh) * 2012-05-29 2017-08-01 寰发股份有限公司 视频数据的自适应采样点偏移的处理装置及方法

Also Published As

Publication number Publication date
KR101638720B1 (ko) 2016-07-20
JP2015521443A (ja) 2015-07-27
CA2937449A1 (en) 2013-12-05
KR20140130171A (ko) 2014-11-07
US20150098513A1 (en) 2015-04-09
US9942571B2 (en) 2018-04-10
JP6242385B2 (ja) 2017-12-06
CA2863549A1 (en) 2013-12-05
EP3139616A1 (en) 2017-03-08
CA2863549C (en) 2018-12-04
EP2856758A1 (en) 2015-04-08
WO2013177975A1 (en) 2013-12-05
JP2016105652A (ja) 2016-06-09
CA2937449C (en) 2018-12-04
CN104303506A (zh) 2015-01-21
US20170041638A1 (en) 2017-02-09
EP2856758A4 (en) 2016-03-30
US10116967B2 (en) 2018-10-30
CN104303506B (zh) 2017-08-01

Similar Documents

Publication Publication Date Title
CN104303506B (zh) 视频数据的自适应采样点偏移的处理装置及方法
CN108028919B (zh) 一种视频或者图像编解码的方法及装置
US9872015B2 (en) Method and apparatus for improved in-loop filtering
CN105120270B (zh) 采用样本自适应偏移处理重构视频的方法及装置
EP2697973B1 (en) Method and apparatus for loop filtering across slice or tile boundaries
CN113615185B (zh) 用于视频编解码的方法和装置
KR101752612B1 (ko) 비디오 코딩을 위한 샘플 적응적 오프셋 프로세싱의 방법
JP7629450B2 (ja) 映像処理における量子化パラメータのシグナリング
CN114586369B (zh) 用于编解码视频序列的方法和装置
TW202046738A (zh) 視訊編碼系統之語法傳訊和參照限制的方法和裝置
CN116743997A (zh) 用信号通知子图像划分信息的方法和装置
TW202029758A (zh) 利用圖塊分組進行視訊資料編碼的方法及裝置
CN115428455A (zh) 调色板预测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20170613