[go: up one dir, main page]

JP6359101B2 - ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴 - Google Patents

ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴 Download PDF

Info

Publication number
JP6359101B2
JP6359101B2 JP2016522798A JP2016522798A JP6359101B2 JP 6359101 B2 JP6359101 B2 JP 6359101B2 JP 2016522798 A JP2016522798 A JP 2016522798A JP 2016522798 A JP2016522798 A JP 2016522798A JP 6359101 B2 JP6359101 B2 JP 6359101B2
Authority
JP
Japan
Prior art keywords
block
prediction
intra
value
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016522798A
Other languages
English (en)
Other versions
JP2016539542A (ja
Inventor
リー,ビン
シュイ,ジージュヨン
ジェイ. サリヴァン,ゲイリー
ジェイ. サリヴァン,ゲイリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2016539542A publication Critical patent/JP2016539542A/ja
Application granted granted Critical
Publication of JP6359101B2 publication Critical patent/JP6359101B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/57Motion estimation characterised by a search window with variable size or shape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

エンジニアは、デジタルビデオのビットレートを低減させるために、圧縮(ソース符号化とも呼ばれる)を使用する。圧縮は、ビデオ情報をより低いビットレート形式に変換することにより、ビデオ情報を記憶及び伝送するコストを低減させる。伸張(復号とも呼ばれる)は、圧縮形式からオリジナル情報のバージョンを再構成する。「コーデック」はエンコーダ/デコーダシステムである。
ここ20年の間、ITU−T H.261規格、H.262(MPEG−2又はISO/IEC 13818−2)規格、H.263規格、及びH.264(MPEG−4 AVC又はISO/IEC 14496−10)規格、並びに、MPEG−1(ISO/IEC 11172−2)規格、MPEG−4 Visual(ISO/IEC 14496−2)規格、及びSMPTE 421M規格を含む様々なビデオコーデック規格が採用されてきた。より最近では、HEVC(ITU−T H.265又はISO/IEC 23008−2)規格が承認されている。HEVC規格に対する拡張(例えば、スケーラブルビデオ符号化/復号に関するもの、サンプルビット深度又はクロマサンプリングレートの観点でのより高い忠実度を伴うビデオの符号化/復号に関するもの、又はマルチビュー符号化/復号に関するもの)を現在策定中である。ビデオコーデック規格は、通常、特定の特徴が符号化及び復号において使用されるときの符号化ビデオビットストリームにおけるパラメータを詳述する、符号化ビデオビットストリームのシンタックスのためのオプションを定義している。多くの場合、ビデオコーデック規格はまた、デコーダが復号において整合する結果を達成するために実行すべき復号オペレーションに関する詳細を提供している。コーデック規格とは別に、様々なプロプライエタリコーデックフォーマット(proprietary codec format)が、符号化ビデオビットストリームのシンタックスのための他のオプション及び対応する復号オペレーションを定義している。
イントラブロックコピー(「BC」)は、HEVC拡張のために検討されている予測モードである。イントラBC予測モードに関して、ピクチャの現ブロックのサンプル値は、同じピクチャ内の以前に再構成されたサンプル値を用いて予測される。ブロックベクトル(「BV」)は、現ブロックから、予測のために使用される以前に再構成されたサンプル値を含む、ピクチャの領域への変位を示す。BVは、ビットストリームにおいてシグナリングされる。イントラBC予測は、ピクチャ内予測の一形態であり、ピクチャのブロックのためのイントラBC予測は、同じピクチャ内のサンプル値以外のいずれのサンプル値も使用しない。
イントラBC予測モードが、現在、HEVC規格において規定されており、HEVC規格のための何らかの参照ソフトウェアにおいて実装されているが、イントラBC予測モードは、いくつかの問題を有している。例えば、イントラBC予測モードは、周波数変換/逆周波数変換、ループ内デブロックフィルタリング、及び制約付きイントラ予測のためのオプション等の、HEVC規格の様々な特徴と効果的には融合されていない。BV値を選択するプロセスは、効果的には制約されておらず、BV値の符号化は、ビットレート利用の観点で非効率的である。
要約すると、詳細な説明は、イントラブロックコピー(「BC」)予測モードにおけるイノベーションを提示している。例えば、そのようなイノベーションのうちのいくつかは、ブロックベクトル(「BV」)値をより効率的に選択する方法を提供する。他のイノベーションは、BV値をより効率的に符号化/復号する方法を提供する。さらに他のイノベーションは、ブロックがイントラBC予測モードを有するときにループ内デブロックフィルタリングをどのように実行するか、又は、制約付きイントラ予測が有効にされているときにイントラBC予測をどのように実行するか、に対処する。これらのイノベーションは、レート−歪み性能、並びに/又は、符号化及び復号の計算効率性の観点でより効率的であるイントラBC予測を容易にすることができる。
イントラBC予測モードのためのイノベーションは、方法の一部として、方法を実行するよう適合されたコンピューティングデバイスの一部として、又は、コンピューティングデバイスに方法を実行させるコンピュータ実行可能な命令を記憶した有体のコンピュータ読み取り可能な媒体の一部として実施され得る。様々な実施形態は、組み合わせて又は別々に、使用され得る。
本発明の前述の目的及び他の目的、特徴、並びに利点が、添付の図面を参照しながら進む以下の詳細な説明からより明らかになるであろう。
いくつかの説明する実施形態を実装することができる例示的なコンピューティングシステムの図。 いくつかの説明する実施形態を実装することができる例示的なネットワーク環境の図。 いくつかの説明する実施形態を実装することができる例示的なネットワーク環境の図。 いくつかの説明する実施形態を協働して実装することができる例示的なエンコーダシステムの図。 いくつかの説明する実施形態を協働して実装することができる例示的なデコーダシステムの図。 いくつかの説明する実施形態を協働して実装することができる例示的なビデオエンコーダを示す図。 いくつかの説明する実施形態を協働して実装することができる例示的なビデオエンコーダを示す図。 いくつかの説明する実施形態を協働して実装することができる例示的なビデオデコーダを示す図。 ピクチャのブロックのためのイントラBC予測を示す図。 BV値に関する探索範囲に対する例示的な制約を示す図。 BV値の選択に対する1以上の制約を受けてイントラBC予測モードで符号化するための一般化された技術を示すフローチャート。 ピクチャのブロックのための例示的なz走査順序を示す図。 フィルイン値により置換される再構成されていないサンプル値を有する領域を示す図。 フィルイン値により置換される再構成されていないサンプル値を有する領域を示す図。 制約付きイントラ予測が有効にされ得るときに符号化中又は復号中にイントラBC予測モードを使用するための一般化された技術を示すフローチャート。 制約付きイントラ予測が有効にされているときの許容可能なBV値に対する例示的な制約を示す図。 制約付きイントラ予測が有効にされているときにイントラBC予測モードを無効にする例示的なアプローチを示すテーブル。 符号化の際に利用することができる特性を有するBV値の例示的な範囲を示す図。 符号化の際に利用することができる特性を有するBV値の例示的な範囲を示す図。 BV値を符号化するための一般化された技術を示すフローチャート。 BV値を復号するための一般化された技術を示すフローチャート。 イントラBC予測モード及び代替の順周波数変換を使用して符号化するための一般化された技術を示すフローチャート。 イントラBC予測モード及び代替の逆周波数変換を使用して復号するための一般化された技術を示すフローチャート。 ブロックの予測モードに応じてループ内デブロックフィルタリングのアプローチを変更するための例示的なルールを示す図。 イントラBC予測モードを有するブロックに関する符号化中又は復号中のループ内デブロックフィルタリングのための一般化された技術を示すフローチャート。
詳細な説明は、符号化中及び/又は復号中のイントラブロックコピー(「BC」)予測モードの使用におけるイノベーションを提示している。詳細には、詳細な説明は、ブロックベクトル(「BV」)値の選択、BV値の符号化/復号、イントラBC予測モードと制約付きイントラ予測との融合、イントラBC予測モードが使用されているときの順周波数変換及び逆周波数変換の選択、及び、イントラBC予測モードを有するブロックの境界にわたるループ内デブロックフィルタリングのためのイノベーションを提示している。
本明細書で説明するオペレーションは、ビデオエンコーダ又はビデオデコーダにより実行されるものとして所々で説明されるが、多くの場合、このようなオペレーションは、別のタイプのメディア処理ツール(例えば、画像エンコーダ、画像デコーダ)により実行することができる。
本明細書で説明するイノベーションのうちのいくつかは、HEVC規格に固有のシンタックス要素及びオペレーションを参照して示される。例えば、HEVC規格のドラフトバージョンJCTVC−N1005(”High Efficiency Video Coding (HEVC) Range Extensions Text Specification: Draft 4”, JCTVC-N1005, July 2013)を参照する。本明細書で説明するイノベーションはまた、他の規格又はフォーマットのためにも実装することができる。
より一般的に、本明細書で説明する例に対する様々な代替例が可能である。例えば、本明細書で説明する方法のうちのいくつかは、例えば、説明する方法動作の順番を変えることにより、所定の方法動作を分けることにより、所定の方法動作を繰り返すことにより、又は所定の方法動作を省略することにより、変更することができる。開示する技術の様々な態様が、組み合わせて又は別々に、使用され得る。様々な実施形態が、説明するイノベーションのうちの1以上を使用する。本明細書で説明するイノベーションのうちのいくつかは、背景技術において記した問題のうちの1以上に対処する。一般的に、所与の技術/ツールが、そのような問題の全てを解決するわけではない。
I.例示的なコンピューティングシステム
図1は、説明するイノベーションのうちのいくつかを実装することができる適切なコンピューティングシステム(100)の一般化された例を示している。コンピューティングシステム(100)は、使用又は機能の範囲に関して限定を示唆するよう意図するものではない。なぜならば、本イノベーションは、多様な汎用コンピューティングシステム又は専用コンピューティングシステムにおいて実施することができるからである。
図1を参照すると、コンピューティングシステム(100)は、1以上の処理装置(110、115)及びメモリ(120、125)を含む。処理装置(110、115)はコンピュータ実行可能な命令を実行する。処理装置は、汎用中央処理装置(「CPU」)、特定用途向け集積回路(「ASIC」)におけるプロセッサ、又は任意の他のタイプのプロセッサとすることができる。マルチ処理システムにおいては、複数の処理装置が、処理能力を増大させるために、コンピュータ実行可能な命令を実行する。例えば、図1は、中央処理装置(110)に加えて、グラフィックス処理装置又は共処理装置(115)も示している。有体のメモリ(120、125)は、1以上の処理装置によりアクセス可能な、揮発性メモリ(例えば、レジスタ、キャッシュ、RAM)であってもよいし、不揮発性メモリ(例えば、ROM、EEPROM、フラッシュメモリ等)であってもよいし、これら2つの何らかの組合せであってもよい。メモリ(120、125)は、1以上の処理装置による実行に適したコンピュータ実行可能な命令の形態で、イントラBC予測モードのための1以上のイノベーションを実装するソフトウェア(180)を記憶する。
コンピューティングシステムはさらなる特徴を有することができる。例えば、コンピューティングシステム(100)は、ストレージ(140)、1以上の入力デバイス(150)、1以上の出力デバイス(160)、及び1以上の通信接続(170)を含む。バス、コントローラ、又はネットワーク等の相互接続機構(図示せず)が、コンピューティングシステム(100)のコンポーネントを相互接続する。通常、オペレーティングシステムソフトウェア(図示せず)が、コンピューティングシステム(100)において実行される他のソフトウェアのための動作環境を提供し、コンピューティングシステム(100)のコンポーネントの動作を調整する。
有体のストレージ(140)は、着脱可能であっても着脱不可能であってもよく、磁気ディスク、磁気テープ、磁気カセット、CD−ROM、DVD、又は、情報を記憶するために使用することができ、コンピューティングシステム(100)内でアクセスされ得る任意の他の媒体を含む。ストレージ(140)は、イントラBC予測モードのための1以上のイノベーションを実装するソフトウェア(180)の命令を記憶する。
1以上の入力デバイス(150)は、キーボード、マウス、ペン、若しくはトラックボール等のタッチ入力デバイス、音声入力デバイス、スキャニングデバイス、又はコンピューティングシステム(100)への入力を提供する別のデバイスとすることができる。ビデオに関して、1以上の入力デバイス(150)は、カメラ、ビデオカード、TVチューナカード、若しくはアナログ形態あるいはデジタル形態のビデオ入力を受け入れる同様のデバイス、又はビデオサンプルをコンピューティングシステム(100)に読み込むCD−ROMあるいはCD−RWとすることができる。1以上の出力デバイス(160)は、ディスプレイ、プリンタ、スピーカ、CDライタ、又はコンピューティングシステム(100)からの出力を提供する別のデバイスとすることができる。
1以上の通信接続(170)は、通信媒体を介した別のコンピューティングエンティティとの通信を可能にする。通信媒体は、変調されたデータ信号により、コンピュータ実行可能な命令、オーディオ入力、ビデオ入力、オーディオ出力、ビデオ出力、又は他のデータ等の情報を伝達する。変調されたデータ信号とは、信号内の情報を符号化するように設定又は変更された特性のうちの1以上を有する信号である。限定ではなく例として、通信媒体は、電気、光、RF、又は他のキャリアを使用することができる。
本イノベーションは、コンピュータ読み取り可能な媒体の一般的なコンテキストにおいて説明され得る。コンピュータ読み取り可能な媒体は、コンピューティング環境内でアクセスされ得る任意の利用可能な有体の媒体である。限定ではなく例として、コンピューティングシステム(100)において、コンピュータ読み取り可能な媒体は、メモリ(120、125)、ストレージ(140)、及びこれらの任意の組合せを含む。
本イノベーションは、コンピュータ実行可能な命令の一般的なコンテキストにおいて説明され得る。コンピュータ実行可能な命令は、例えば、プログラムモジュールに含まれ、コンピューティングシステムにおいて、ターゲット実プロセッサ又は仮想プロセッサ上で実行される。一般に、プログラムモジュールは、特定のタスクを実行する又は特定の抽象データ型を実装するルーチン、プログラム、ライブラリ、オブジェクト、クラス、コンポーネント、データ構造等を含む。プログラムモジュールの機能は、様々な実施形態において、必要に応じて、組み合わされてもよいし、プログラムモジュール間で分割されてもよい。プログラムモジュールのコンピュータ実行可能な命令は、ローカルコンピューティングシステム又は分散コンピューティングシステム内で実行され得る。
「システム」及び「デバイス」という用語は、本明細書において置き換え可能に使用される。文脈が別途明確に示さない限り、これらの用語は、コンピューティングシステム又はコンピューティングデバイスのタイプに関していかなる限定も示すものではない。一般に、コンピューティングシステム又はコンピューティングデバイスは、局在することもあるし分散されることもあり、専用ハードウェア及び/又は汎用ハードウェアと、本明細書で説明する機能を実装するソフトウェアと、の任意の組合せを含み得る。
開示する方法は、開示する方法のいずれかを実行するよう構成された専用コンピューティングハードウェアを用いて実装することもできる。例えば、開示する方法は、開示する方法のいずれかを実行するよう特別に設計又は構成された集積回路(例えば、ASIC(ASICデジタル信号処理装置(「DSP」))、グラフィックス処理装置(「GPU」)、又はフィールドプログラマブルゲートアレイ(「FPGA」)等のプログラマブルロジックデバイス(「PLD」)等)により実装することができる。
提示の目的上、詳細な説明では、コンピューティングシステムにおけるコンピュータオペレーションを説明するための「決定する」及び「使用する」のような用語が使用される。これらの用語は、コンピュータにより実行されるオペレーションの高レベル抽象表現であって、人間により実行される動作と混同すべきではない。これらの用語に対応する実際のコンピュータオペレーションは、実装に応じて変化する。
II.例示的なネットワーク環境
図2a及び図2bは、ビデオエンコーダ(220)及びビデオデコーダ(270)を含む例示的なネットワーク環境(201、202)を示している。エンコーダ(220)及びデコーダ(270)は、適切な通信プロトコルを用いて、ネットワーク(250)を介して接続される。ネットワーク(250)は、インターネット又は別のコンピュータネットワークを含み得る。
図2aに示されるネットワーク環境(201)において、各リアルタイム通信(「RTC」)ツール(210)は、双方向通信のためのエンコーダ(220)及びデコーダ(270)の両方を含む。所与のエンコーダ(220)は、HEVC規格の変形又は拡張、SMPTE 421M規格、ISO/IEC 14496−10規格(H.264又はAVCとしても知られている)、別の規格、又はプロプライエタリフォーマットに準拠する出力を生成することができ、対応するデコーダ(270)は、エンコーダ(220)からの符号化データを受け入れることができる。双方向通信は、ビデオ会議、ビデオ通話、又は他の2パーティ通信シナリオの一部であり得る。図2aのネットワーク環境(201)は、2つのリアルタイム通信ツール(210)を含むが、ネットワーク環境(201)は、マルチパーティ通信に参加する3以上のリアルタイム通信ツール(210)を含んでもよい。
リアルタイム通信ツール(210)は、エンコーダ(220)による符号化を管理する。図3は、リアルタイム通信ツール(210)に含まれ得る例示的なエンコーダシステム(300)を示している。代替的に、リアルタイム通信ツール(210)は、別のエンコーダシステムを使用してもよい。リアルタイム通信ツール(210)はまた、デコーダ(270)による復号も管理する。図4は、リアルタイム通信ツール(210)に含まれ得る例示的なデコーダシステム(400)を示している。代替的に、リアルタイム通信ツール(210)は、別のデコーダシステムを使用してもよい。
図2bに示されるネットワーク環境(202)において、符号化ツール(212)は、デコーダ(270)を含む複数の再生ツール(214)に配信するためのビデオを符号化するエンコーダ(220)を含む。一方向通信は、ビデオが符号化されて1つのロケーションから1以上の他のロケーションに送信される、ビデオ監視システム、ウェブカメラモニタリングシステム、リモートデスクトップ会議プレゼンテーション、又は他のシナリオのために提供され得る。図2bのネットワーク環境(202)は、2つの再生ツール(214)を含むが、ネットワーク環境(202)は、それより多い又はそれより少ない再生ツール(214)を含んでもよい。一般に、再生ツール(214)は、再生ツール(214)が受信するビデオのストリームを判定するために、符号化ツール(212)と通信する。再生ツール(214)は、ストリームを受信し、受信した符号化データを適切な期間の間バッファし、復号及び再生を開始する。
図3は、符号化ツール(212)に含まれ得る例示的なエンコーダシステム(300)を示している。代替的に、符号化ツール(212)は、別のエンコーダシステムを使用してもよい。符号化ツール(212)はまた、1以上の再生ツール(214)との接続を管理するためのサーバサイドコントローラロジックも含み得る。図4は、再生ツール(214)に含まれ得る例示的なデコーダシステム(400)を示している。代替的に、再生ツール(214)は、別のデコーダシステムを使用してもよい。再生ツール(214)はまた、符号化ツール(212)との接続を管理するためのクライアントサイドコントローラロジックも含み得る。
III.例示的なエンコーダシステム
図3は、いくつかの説明する実施形態を協働して実装することができる例示的なエンコーダシステム(300)のブロック図である。エンコーダシステム(300)は、リアルタイム通信のための低遅延符号化モード、トランスコーディングモード、及びファイル又はストリームからのメディア再生のための通常の符号化モード等の複数の符号化モードのうちのいずれかで動作することができる汎用符号化ツールであってもよいし、そのような1つの符号化モードのために適合された専用符号化ツールであってもよい。エンコーダシステム(300)は、オペレーティングシステムモジュールとして、アプリケーションライブラリの一部として、又はスタンドアロンアプリケーションとして、実装することができる。概して、エンコーダシステム(300)は、ビデオソース(310)から、一連のソースビデオフレーム(311)を受信し、チャネル(390)への出力として符号化データを生成する。チャネルに出力される符号化データは、イントラBC予測モードを用いて符号化されるコンテンツを含み得る。
ビデオソース(310)は、カメラ、チューナカード、記憶媒体、又は他のデジタルビデオソースとすることができる。ビデオソース(310)は、例えば、毎秒30フレームといったフレームレートで一連のビデオフレームを生成する。本明細書で使用されるとき、「フレーム」という用語は、一般に、ソースの符号化又は再構成された画像データを指す。プログレッシブビデオに関して、フレームはプログレッシブビデオフレームである。インターレースビデオに関して、例示的な実施形態において、インターレースビデオフレームは、符号化の前にインターレース解除される(de-interlaced)。代替的に、2つの相補的インターレースビデオフィールドが、インターレースビデオフレーム又は別々のフィールドとして符号化されてもよい。プログレッシブビデオフレームを示すかは別にして、「フレーム」又は「ピクチャ」という用語は、単一の対でないビデオフィールド、相補的な一対のビデオフィールド、所与の時間におけるビデオオブジェクトを表すビデオオブジェクトプレーン、又はより大きな画像における関心領域を示し得る。ビデオオブジェクトプレーン又は領域は、シーンの複数のオブジェクト又は領域を含むより大きな画像の一部であり得る。
到着ソースフレーム(311)は、複数のフレームバッファ記憶領域(321、322、...、32n)を含むソースフレーム一時メモリ記憶領域(320)に記憶される。フレームバッファ(321、322等)は、ソースフレーム記憶領域(320)内で1つのソースフレームを保持する。ソースフレーム(311)のうちの1以上がフレームバッファ(321、322等)に記憶された後、フレームセレクタ(330)が、ソースフレーム記憶領域(320)から個々のソースフレームを周期的に選択する。エンコーダ(340)への入力のためにフレームセレクタ(330)によりフレームが選択される順番は、ビデオソース(310)によりフレームが生成される順番とは異なり得る。例えば、一時的に後方予測を容易にするために、あるフレームが先の順番になることがある。エンコーダ(340)の前に、エンコーダシステム(300)は、符号化の前に選択されたフレーム(331)の前処理(例えば、フィルタリング)を実行するプリプロセッサ(図示せず)を含み得る。前処理はまた、符号化のためのプライマリ成分及びセカンダリ成分への色空間変換を含み得る。通常、符号化の前に、ビデオは、YUV等の色空間に変換されている。YUVでは、ルマ(Y)成分のサンプル値は、輝度値又は明度値を表し、クロマ(U、V)成分のサンプル値は、色差値を表す。クロマサンプル値は、(例えば、YUV4:2:0フォーマットに合わせるために)より低いクロマサンプリングレートにサブサンプリングされ得る、あるいは、クロマサンプル値は、(例えば、YUV4:4:4フォーマットに合わせるために)ルマサンプル値と同じ解像度を有し得る。あるいは、ビデオは、(例えば、RGB4:4:4フォーマットといった)別のフォーマットで符号化され得る。
エンコーダ(340)は、符号化フレーム(341)を生成するために、選択されたフレーム(331)を符号化するとともに、メモリ管理制御操作(「MMCO」)信号(342)又は参照ピクチャセット(「RPS」)情報を生成する。現フレームが、符号化された最初のフレームではない場合、符号化プロセスを実行するとき、エンコーダ(340)は、復号フレーム一時メモリ記憶領域(360)に記憶されている1以上の以前に符号化/復号されたフレーム(369)を使用することができる。そのような記憶されている復号フレーム(369)は、現ソースフレーム(331)のコンテンツのフレーム間予測のための参照フレームとして使用される。一般に、エンコーダ(340)は、タイルへの分割、イントラ予測推定及び予測、動き推定及び動き補償、周波数変換、量子化、並びにエントロピ符号化等の符号化タスクを実行する複数の符号化モジュールを含む。エンコーダ(340)により実行される正確なオペレーションは、圧縮フォーマットに応じて変わり得る。出力される符号化データのフォーマットは、HEVCフォーマットの変形又は拡張、Windows(登録商標) Media Videoフォーマット、VC−1フォーマット、MPEG−xフォーマット(例えば、MPEG−1、MPEG−2、又はMPEG−4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットであり得る。
エンコーダ(340)は、フレームを、同じサイズ又は異なるサイズの複数のタイルに分割することができる。例えば、エンコーダ(340)は、フレーム境界を用いてフレーム内のタイルの水平境界及び垂直境界を規定するタイル行及びタイル列に沿って、フレームを分割する。ここで、各タイルは矩形領域である。タイルは、並列処理のためのオプションを向上させるために、しばしば使用される。フレームはまた、1以上のスライスとして編成され得る。ここで、スライスは、フレーム全体又はフレームの一領域であり得る。スライスは、フレーム内の他のスライスとは独立して復号することができ、これは、誤り耐性を向上させる。スライス又はタイルのコンテンツは、符号化及び復号のために、ブロック又はサンプルの他のセットにさらに分割される。
HEVC規格に従ったシンタックスに関して、エンコーダは、フレーム(又はスライス若しくはタイル)のコンテンツを、符号化ツリーユニットに分割する。符号化ツリーユニット(「CTU」)は、1つのルマ符号化ツリーブロック(「CTB」)として編成されるルマサンプル値と、2つのクロマCTBとして編成される対応するクロマサンプル値と、を含む。CTU(及びそのCTB)のサイズは、エンコーダにより選択され、例えば、64×64サンプル値、32×32サンプル値、又は16×16サンプル値であり得る。CTUは、1以上の符号化ユニットを含む。符号化ユニット(「CU」)は、1つのルマ符号化ブロック(「CB」)と2つの対応するクロマCBとを有する。例えば、1つの64×64ルマCTBと2つの64×64クロマCTBを有するCTU(YUV4:4:4フォーマット)は、4つのCUに分割され得る。ここで、各CUは、1つの32×32ルマCBと2つの32×32クロマCBとを含み、各CUは、可能であれば、より小さなCUにさらに分割される。あるいは、別の例として、1つの64×64ルマCTBと2つの32×32クロマCTBとを有するCTU(YUV4:2:0フォーマット)は、4つのCUに分割され得る。ここで、各CUは、1つの32×32ルマCBと2つの16×16クロマCBとを含み、各CUは、可能であれば、より小さなCUにさらに分割される。CUの最小許容可能サイズ(例えば、8×8、16×16)が、ビットストリームにおいてシグナリングされ得る。
一般に、CUは、インター又はイントラ等の予測モードを有する。CUは、予測情報(例えば、予測モード詳細、変位値等)のシグナリング及び/又は予測処理のために、1以上の予測ユニットを含む。予測ユニット(「PU」)は、1つのルマ予測ブロック(「PB」)と2つのクロマPBとを有する。イントラ予測CUに関して、CUが最小サイズ(例えば、8×8)を有する場合を除いて、PUは、CUと同じサイズを有する。この場合、CUは、4つのより小さなPU(例えば、最小CUサイズが8×8である場合、それぞれ4×4である)に分割され得る、あるいは、PUは、CUに関してシンタックス要素により示される最小CUサイズを有し得る。CUはまた、残差符号化/復号のために、1以上の変換ユニットを有する。ここで、変換ユニット(「TU」)は、1つの変換ブロック(「TB」)と2つのクロマTBとを有する。イントラ予測CU内のPUは、1つのTU(PUとサイズが等しい)又は複数のTUを含み得る。本明細書で使用されるとき、「ブロック」という用語は、文脈に応じて、CB、PB、TB、又はサンプル値の他のセットを示し得る。エンコーダは、ビデオをCTU、CU、PU、TU等にどのように分割するかを決定する。
図3に戻ると、エンコーダは、ソースフレーム(331)内の他の以前に再構成されたサンプル値の観点でそのソースフレーム(331)のイントラ符号化ブロックを表現する。イントラBC予測に関して、イントラピクチャ推定部が、他の以前に再構成されたサンプル値に対するブロックの変位を推定する。イントラ予測参照領域とは、ブロックのためのBC予測値を生成するために使用される、フレーム内のサンプルの領域である。ブロックのためのイントラ空間予測に関して、イントラピクチャ推定部は、ブロックへの、隣接する再構成されたサンプル値の外挿(extrapolation)を推定する。イントラ予測推定部は、予測情報(イントラBC予測のためのブロックベクトル(「BV」)値及びイントラ空間予測のための予測モード(方向)等)を出力し、この予測情報が、エントロピ符号化される。イントラ予測予測部は、イントラ予測値を決定するために、予測情報を適用する。
エンコーダ(340)は、参照フレームからの予測の観点でソースフレーム(331)のインター符号化予測ブロックを表現する。動き推定部は、1以上の参照フレーム(369)に対するブロックの動きを推定する。複数の参照フレームが使用される場合、複数の参照フレームは、異なる時間的方向からのものであってもよいし、同じ時間的方向からのものであってもよい。動き補償予測参照領域とは、現フレームのブロックのサンプルのための動き補償予測値を生成するために使用される、1以上の参照フレーム内のサンプルの領域である。動き推定部は、動きベクトル情報等の動き情報を出力し、この動き情報が、エントロピ符号化される。動き補償部は、動き補償予測値を決定するために、動きベクトルを参照フレーム(369)に適用する。
エンコーダは、ブロックの予測値(イントラ又はインター)と対応するオリジナルの値との間の差(あれば)を決定する。このような予測残差値が、周波数変換、量子化、及びエントロピ符号化を用いて、さらに符号化される。例えば、エンコーダ(340)は、ピクチャ、タイル、スライス、及び/又はビデオの他の部分のための量子化パラメータ(「QP」)の値を設定し、それに従って変換係数を量子化する。エンコーダ(340)のエントロピ符号化部が、量子化された変換係数値に加えて、所定のサイド情報(例えば、動きベクトル情報、BV値、QP値、モード決定、パラメータ選択)も圧縮する。一般的なエントロピ符号化技術は、指数ゴロム符号化、算術符号化、差分符号化、ハフマン符号化、ランレングス符号化、「V2V(variable-length-to-variable-length)」符号化、「V2F(variable-length-to-fixed-length)」符号化、LZ符号化、辞書符号化、「PIPE(probability interval partitioning entropy)」符号化、及びこれらの組合せを含む。エントロピ符号化部は、様々な種類の情報のための様々な符号化技術を使用することができ、特定の符号化技術における複数の符号テーブルの中から選択することができる。
符号化フレーム(341)及びMMCO/RPS情報(342)が、復号プロセスエミュレータ(350)により処理される。復号プロセスエミュレータ(350)は、例えば、参照フレームを再構成する復号タスク等のデコーダの機能の一部を実装している。復号プロセスエミュレータ(350)は、MMCO/RPS情報(342)を使用して、所与の符号化フレーム(341)が、符号化される後続フレームのフレーム間予測において参照フレームとして使用するために再構成されて記憶される必要があるかどうかを判定する。符号化フレーム(341)が記憶される必要があるとMMCO/RPS情報(342)が示す場合、復号プロセスエミュレータ(350)は、符号化フレーム(341)を受信して対応する復号フレーム(351)を生成する、デコーダにより行われるであろう復号プロセスを模擬する。そうする際に、エンコーダ(340)が、復号フレーム記憶領域(360)に記憶されている1以上の復号フレーム(369)を使用したとき、復号プロセスエミュレータ(350)は、復号プロセスの一部として、記憶領域(360)から1以上の復号フレーム(369)を使用する。
復号フレーム一時メモリ記憶領域(360)は、複数のフレームバッファ記憶領域(361、362、...、36n)を含む。復号プロセスエミュレータ(350)は、MMCO/RPS情報(342)を使用して、参照フレームとして使用するためにエンコーダ(340)によりもはや必要とされなくなったフレームを有する任意のフレームバッファ(361、362等)を識別するために、記憶領域(360)のコンテンツを管理する。復号プロセスを模擬した後、復号プロセスエミュレータ(350)は、このように識別されるフレームバッファ(361、362等)に、新たに復号されたフレーム(351)を記憶する。
符号化フレーム(341)及びMMCO/RPS情報(342)は、一時符号化データ領域(370)にバッファされる。符号化データ領域(370)に収集される符号化データは、エレメンタリ符号化ビデオビットストリームのシンタックスの一部として、1以上のピクチャの符号化データを含む。符号化データ領域(370)に収集される符号化データはまた、(例えば、1以上の付加拡張情報(「SEI」)メッセージ又はビデオユーザビリティ情報(「VUI」)メッセージにおける1以上のパラメータとして、)符号化ビデオデータに関連するメディアメタデータを含み得る。
一時符号化データ領域(370)からの収集されたデータ(371)は、チャネルエンコーダ(380)により処理される。チャネルエンコーダ(380)は、(例えば、ISO/IEC 13818−1等のメディアストリーム多重化フォーマットに従って)メディアストリームとして伝送するために、収集されたデータをパケット化することができる。そのような場合、チャネルエンコーダ(380)は、メディア伝送ストリームのシンタックスの一部として、シンタックス要素を付加することができる。あるいは、チャネルエンコーダ(380)は、(例えば、ISO/IEC 14496−12等のメディアコンテナフォーマットに従って)ファイルとして記憶するために、収集されたデータを編成することができる。そのような場合、チャネルエンコーダ(380)は、メディア記憶ファイルのシンタックスの一部として、シンタックス要素を付加することができる。あるいは、より一般的に、チャネルエンコーダ(380)は、1以上のメディアシステム多重化プロトコル又はトランスポートプロトコルを実装することができる。そのような場合、チャネルエンコーダ(380)は、1以上のプロトコルのシンタックスの一部として、シンタックス要素を付加することができる。チャネルエンコーダ(380)は、チャネル(390)への出力を提供する。チャネル(390)は、ストレージ、通信接続、又は出力のための別のチャネルを表す。
IV.例示的なデコーダシステム
図4は、いくつかの説明する実施形態を協働して実装することができる例示的なデコーダシステム(400)のブロック図である。デコーダシステム(400)は、リアルタイム通信のための低遅延復号モード及びファイル又はストリームからのメディア再生のための通常の復号モード等の複数の復号モードのうちのいずれかで動作することができる汎用復号ツールであってもよいし、そのような1つの復号モードのために適合された専用復号ツールであってもよい。デコーダシステム(400)は、オペレーティングシステムモジュールとして、アプリケーションライブラリの一部として、又はスタンドアロンアプリケーションとして、実装することができる。概して、デコーダシステム(400)は、チャネル(410)から符号化データを受信し、出力先(490)への出力として再構成フレームを生成する。符号化データは、イントラBC予測モードを用いて符号化されたコンテンツを含み得る。
デコーダシステム(400)は、ストレージ、通信接続、又は入力としての符号化データのための別のチャネルを表し得るチャネル(410)を含む。チャネル(410)は、チャネル符号化された符号化データを生成する。チャネルデコーダ(420)は、符号化データを処理することができる。例えば、チャネルデコーダ(420)は、(例えば、ISO/IEC 13818−1等のメディアストリーム多重化フォーマットに従って)メディアストリームとして伝送するために収集されたデータを脱パケット化する。そのような場合、チャネルデコーダ(420)は、メディア伝送ストリームのシンタックスの一部として付加されたシンタックス要素を解析することができる。あるいは、チャネルデコーダ(420)は、(例えば、ISO/IEC 14496−12等のメディアコンテナフォーマットに従って)ファイルとして記憶するために収集された符号化ビデオデータを分離する。そのような場合、チャネルデコーダ(420)は、メディア記憶ファイルのシンタックスの一部として付加されたシンタックス要素を解析することができる。あるいは、より一般的に、チャネルデコーダ(420)は、1以上のメディアシステム逆多重化プロトコル又はトランスポートプロトコルを実装することができる。そのような場合、チャネルデコーダ(420)は、1以上のプロトコルのシンタックスの一部として付加されたシンタックス要素を解析することができる。
十分な量のデータが受信されるまで、チャネルデコーダ(420)から出力される符号化データ(421)は、一時符号化データ領域(430)に記憶される。符号化データ(421)は、符号化フレーム(431)及びMMCO/RPS情報(432)を含む。符号化データ領域(430)内の符号化データ(421)は、エレメンタリ符号化ビデオビットストリームのシンタックスの一部として、1以上のピクチャの符号化データを含む。符号化データ領域(430)内の符号化データ(421)はまた、(例えば、1以上のSEIメッセージ又はVUIメッセージにおける1以上のパラメータとして、)符号化ビデオデータに関連するメディアメタデータを含み得る。
一般に、符号化データ(421)がデコーダ(450)により使用されるまで、符号化データ領域(430)は、そのような符号化データ(421)を一時的に記憶する。その時点で、符号化フレーム(431)及びMMCO/RPS情報(432)の符号化データが、符号化データ領域(430)からデコーダ(450)に伝送される。復号が進むにつれ、新たな符号化データが、符号化データ領域(430)に追加され、符号化データ領域(430)に残っている最も古い符号化データが、デコーダ(450)に伝送される。
デコーダ(450)は、対応する復号フレーム(451)を生成するために、符号化フレーム(431)を周期的に復号する。必要に応じて、復号プロセスを実行するとき、デコーダ(450)は、フレーム間予測のための参照フレームとして、1以上の以前に復号されたフレーム(469)を使用することができる。デコーダ(450)は、復号フレーム一時メモリ記憶領域(460)から、そのような以前に復号されたフレーム(469)を読み出す。一般に、デコーダ(450)は、エントロピ復号、逆量子化、逆周波数変換、イントラ予測、動き補償、及びタイルのマージ等の復号タスクを実行する複数の復号モジュールを含む。デコーダ(450)により実行される正確なオペレーションは、圧縮フォーマットに応じて変わり得る。
例えば、デコーダ(450)は、圧縮フレーム又は一連のフレームの符号化データを受信し、復号フレーム(451)を含む出力を生成する。デコーダ(450)において、バッファは、圧縮フレームの符号化データを受け入れ、適切な時間に、受け入れた符号化データをエントロピ復号部に利用可能にする。エントロピ復号部は、通常はエンコーダにおいて実行されたエントロピ符号化の逆を適用することにより、エントロピ符号化された量子化データに加えて、エントロピ符号化されたサイド情報もエントロピ復号する。動き補償部は、再構成されているフレームのインター符号化ブロックの動き補償予測値を形成するために、動き情報を1以上の参照フレームに適用する。イントラ予測モジュールは、隣接する以前に再構成されたサンプル値から、現ブロックのサンプル値を空間的に予測することができる、又は、イントラBC予測に関して、フレーム内のイントラ予測領域の以前に再構成されたサンプル値を用いて、現ブロックのサンプル値を予測することができる。デコーダ(450)はまた、予測残差を再構成する。逆量子化部は、エントロピ復号されたデータを逆量子化する。例えば、デコーダ(450)は、ビットストリームにおけるシンタックス要素に基づいて、ピクチャ、タイル、スライス、及び/又はビデオの他の部分のためのQPの値を設定し、それに従って変換係数を逆量子化する。逆周波数変換部は、量子化された周波数領域データを空間領域情報に変換する。インター予測ブロックに関して、デコーダ(450)は、再構成された予測残差を動き補償予測と結合する。デコーダ(450)は、同様に、予測残差を、イントラ予測からの予測と結合することができる。ビデオデコーダ(450)における動き補償ループは、復号フレーム(451)内のブロック境界行及び/又はブロック境界列にわたる不連続さを平滑化する適応デブロッキングフィルタを含む。
復号フレーム一時メモリ記憶領域(460)は、複数のフレームバッファ記憶領域(461、462、...、46n)を含む。復号フレーム記憶領域(460)は、復号ピクチャバッファの一例である。デコーダ(450)は、MMCO/RPS情報(432)を使用して、復号フレーム(451)を記憶することができるフレームバッファ(461、462等)を識別する。デコーダ(450)は、そのフレームバッファに復号フレーム(451)を記憶する。
出力シーケンサ(480)は、MMCO/RPS情報(432)を使用して、出力順で生成される次のフレームが復号フレーム記憶領域(460)内で利用可能になるときを識別する。出力順で生成される次のフレーム(481)が、復号フレーム記憶領域(460)内で利用可能になったとき、そのフレームが、出力シーケンサ(480)により読み出され、出力先(490)(例えば、ディスプレイ)に出力される。一般に、復号フレーム記憶領域(460)から出力シーケンサ(480)によりフレームが出力される順番は、デコーダ(450)によりフレームが復号される順番とは異なり得る。
V.例示的なビデオエンコーダ
図5a及び図5bは、いくつかの説明する実施形態を協働して実装することができる一般化されたビデオエンコーダ(500)のブロック図である。エンコーダ(500)は、現ピクチャを含む一連のビデオピクチャを、入力ビデオ信号(505)として受信し、符号化ビデオビットストリーム(595)内の符号化データ(595)を、出力として生成する。
エンコーダ(500)は、ブロックベースであり、実装に依存するブロックフォーマットを使用する。ブロックは、例えば、予測段階、周波数変換段階、及び/又はエントロピ符号化段階において等の様々な段階において、さらに細分割され得る。例えば、ピクチャは、64×64ブロック、32×32ブロック、又は16×16ブロックに分割され得、今度は、それらのブロックが、符号化及び復号のために、サンプル値のより小さなブロックに分割され得る。HEVC規格のための符号化の実装において、エンコーダは、ピクチャを、CTU(CTB)、CU(CB)、PU(PB)、及びTU(TB)に分割する。
エンコーダ(500)は、ピクチャ内符号化及び/又はピクチャ間符号化を用いて、ピクチャを圧縮する。エンコーダ(500)のコンポーネントの多くが、ピクチャ内符号化及びピクチャ間符号化の両方のために使用される。これらのコンポーネントにより実行される正確なオペレーションは、圧縮される情報のタイプに応じて変わり得る。
タイル化モジュール(510)は、任意的に、ピクチャを、同じサイズ又は異なるサイズの複数のタイルに分割する。例えば、タイル化モジュール(510)は、ピクチャ境界を用いてピクチャ内のタイルの水平境界及び垂直境界を規定するタイル行及びタイル列に沿って、ピクチャを分割する。ここで、各タイルは矩形領域である。次いで、タイル化モジュール(510)は、これらのタイルを、1以上のタイルセットにグループ化することができる。ここで、タイルセットは、これらのタイルのうちの1以上のタイルのグループである。
一般符号化制御部(520)は、入力ビデオ信号(505)のピクチャに加えて、エンコーダ(500)の様々なモジュールからのフィードバック(図示せず)を受信する。概して、一般符号化制御部(520)は、符号化中に符号化パラメータを設定及び変更するために、他のモジュール(タイル化モジュール(510)、変換部/スケーリング部/量子化部(530)、スケーリング部/逆変換部(535)、イントラピクチャ推定部(540)、動き推定部(550)、及びイントラ/インタースイッチ等)に制御信号(図示せず)を供給する。詳細には、一般符号化制御部(520)は、符号化中にイントラBC予測を使用するかどうかとどのようにイントラBC予測を使用するかとを決定することができる。一般符号化制御部(520)はまた、例えば、レート−歪み解析を実行して、符号化中に中間結果を評価することができる。一般符号化制御部(520)は、符号化中になされた決定を示す一般制御データ(522)を生成するので、対応するデコーダは、整合する決定を行うことができる。一般制御データ(522)は、ヘッダフォーマット化部/エントロピ符号化部(590)に提供される。
現ピクチャが、ピクチャ間予測を用いて予測される場合、動き推定部(550)は、1以上の参照ピクチャに対する、入力ビデオ信号(505)の現ピクチャのサンプル値のブロックの動きを推定する。復号ピクチャバッファ(570)は、参照ピクチャとして使用するために、1以上の以前に再構成された符号化ピクチャをバッファする。複数の参照ピクチャが使用される場合、複数の参照ピクチャは、異なる時間的方向からのものであってもよいし、同じ時間的方向からのものであってもよい。動き推定部(550)は、サイド情報として、動きベクトルデータ及び参照ピクチャ選択データ等の動きデータ(552)を生成する。動きデータ(552)は、ヘッダフォーマット化部/エントロピ符号化部(590)及び動き補償部(555)に提供される。
動き補償部(555)は、動きベクトルを、復号ピクチャバッファ(570)からの1以上の再構成された参照ピクチャに適用する。動き補償部(555)は、現ピクチャのための動き補償予測を生成する。
エンコーダ(500)内の分離パス(separate path)において、イントラピクチャ推定部(540)は、入力ビデオ信号(505)の現ピクチャのサンプル値のブロックのためのピクチャ内予測をどのように実行するかを決定する。現ピクチャは、ピクチャ内符号化を用いて、全体又は一部が符号化され得る。イントラ空間予測に関して、現ピクチャの再構成(538)の値を用いて、イントラピクチャ推定部(540)は、現ピクチャの隣接する以前に再構成されたサンプル値から、現ピクチャの現ブロックのサンプル値をどのように空間的に予測するかを決定する。あるいは、イントラBC予測に関して、イントラピクチャ推定部(540)は、現ピクチャ内の異なる候補領域への、現ブロックのサンプル値の変位を推定する。イントラBC予測に関して、イントラ予測推定部(540)は、以下で説明する1以上の制約を用いて、BV選択プロセスを制約することができる。イントラ予測推定部(540)はまた、以下で説明するように、制約付きイントラ予測が有効にされているときには、イントラBC予測の使用を制限することができる。
イントラ予測推定部(540)は、サイド情報として、イントラ予測が空間予測を使用するかBC予測を使用するかを示す情報(例えば、イントラブロックごとのフラグ値)、予測モード方向(イントラ空間予測に関して)、及びBV値(イントラBC予測に関して)等のイントラ予測データ(542)を生成する。イントラ予測データ(542)は、ヘッダフォーマット化部/エントロピ符号化部(590)及びイントラピクチャ予測部(545)に提供される。
イントラピクチャ予測部(545)は、イントラ予測データ(542)に従って、現ピクチャの隣接する以前に再構成されたサンプル値から、現ピクチャの現ブロックのサンプル値を空間的に予測する。あるいは、イントラBC予測に関して、イントラピクチャ予測部(545)は、現ブロックのBV値により示されるイントラ予測領域の以前に再構成されたサンプル値を用いて、現ブロックのサンプル値を予測する。ピクチャのクロマデータが、ルマデータと同じ解像度を有する場合(例えば、フォーマットが、YUV4:4:4フォーマット又はRGB4:4:4フォーマットである場合)、クロマブロックに関して適用されるBV値は、ルマブロックに関して適用されるBV値と同じであり得る。一方、ピクチャのクロマデータが、ルマデータと比較して低い解像度を有する場合(例えば、フォーマットが、YUV4:2:0フォーマットである場合)、クロマブロックに関して適用されるBV値は、低減され得、可能であれば、クロマ解像度における差を調整するために丸められ得る(例えば、BV値の垂直成分及び水平成分を2で除算して、それらを整数値に切り捨てる又は丸めることにより)。
イントラ/インタースイッチは、所与のブロックのための予測(558)として使用するために、動き補償予測又はピクチャ内予測の値を選択する。予測(558)のブロックと、入力ビデオ信号(505)のオリジナルの現ピクチャの対応する部分と、の間の差(あれば)は、残差(518)の値を提供する。現ピクチャの再構成中に、再構成された残差値が、予測(558)と結合されて、ビデオ信号(505)からのオリジナルのコンテンツの再構成(538)が生成される。しかしながら、損失圧縮(lossy compression)では、それでも、いくつかの情報が、ビデオ信号(505)から失われる。
変換部/スケーリング部/量子化部(530)において、周波数変換部は、空間領域ビデオ情報を周波数領域(すなわち、スペクトル変換)データに変換する。ブロックベースのビデオ符号化に関して、周波数変換部は、離散コサイン変換(「DCT」)、その整数近似、又は別のタイプの順ブロック変換を予測残差データ(又は、予測(558)がヌルの場合にはサンプル値データ)のブロックに適用して、周波数変換係数のブロックを生成する。イントラBC予測が使用される場合、エンコーダ(500)は、以下で説明するように、少なくともいくつかのサイズのブロックのイントラBC予測残差値に関して、離散サイン変換(「DST」)、その整数近似、又は別のタイプの順ブロック変換(他のブロックに関して適用される変換とは異なる)を適用することができる。エンコーダ(500)はまた、そのような変換ステップがスキップされることを指示することができる。スケーリング部/量子化部は、変換係数をスケーリングして量子化する。例えば、量子化部は、フレームごとに、タイルごとに、スライスごとに、ブロックごとに、又は他の単位で変わるステップサイズで、一様でないスカラ量子化を周波数領域データに適用する。量子化された変換係数データ(532)は、ヘッダフォーマット化部/エントロピ符号化部(590)に提供される。
スケーリング部/逆変換部(535)において、スケーリング部/逆量子化部は、量子化された変換係数に対して、逆スケーリング及び逆量子化を実行する。逆周波数変換部は、逆周波数変換を実行して、再構成された予測残差又はサンプル値のブロックを生成する。エンコーダ(500)は、再構成された残差を、予測(558)の値(例えば、動き補償予測値、ピクチャ内予測値)と結合して、再構成(538)を形成する。
ピクチャ内予測に関して、再構成(538)の値は、イントラピクチャ推定部(540)及びイントラピクチャ予測部(545)にフィードバックされ得る。また、再構成(538)の値は、後続ピクチャの動き補償予測のためにも使用され得る。再構成(538)の値は、さらにフィルタリングされ得る。フィルタリング制御部(560)は、ビデオ信号(505)の所与のピクチャに関して、再構成(538)の値に対して、デブロックフィルタリング及びサンプル適応オフセット(「SAO」)フィルタリングをどのように実行するかを決定する。フィルタリング制御部(560)は、フィルタリング制御データ(562)を生成する。フィルタリング制御データ(562)は、ヘッダフォーマット化部/エントロピ符号化部(590)及びマージ部/1以上のフィルタ(565)に提供される。
マージ部/1以上のフィルタ(565)において、エンコーダ(500)は、異なるタイルからのコンテンツを、ピクチャの再構成バージョンにマージする。エンコーダ(500)は、フレーム内の境界にわたる不連続さを適応的に平滑化するために、フィルタリング制御データ(562)に従って、デブロックフィルタリング及びSAOフィルタリングを選択的に実行する。エンコーダ(500)は、以下で説明するように、予測モードが、それぞれのブロックに関して、イントラ空間予測であるかイントラBC予測であるかインター予測であるかに応じて、ループ内デブロックフィルタリングがピクチャのブロック間の境界に適用されるときに、異なるアプローチを適用することができる。タイル境界は、エンコーダ(500)の設定に応じて、選択的にフィルタリングされ得る又はフィルタリングされず、エンコーダ(500)は、そのようなフィルタリングが適用されたか否かを示すシンタックスを、符号化ビットストリーム内に提供することができる。復号ピクチャバッファ(570)は、後続の動き補償予測において使用するために、再構成された現ピクチャをバッファする。
ヘッダフォーマット化部/エントロピ符号化部(590)は、一般制御データ(522)、量子化された変換係数データ(532)、イントラ予測データ(542)、動きデータ(552)、及びフィルタリング制御データ(562)をフォーマット化及び/又はエントロピ符号化する。例えば、ヘッダフォーマット化部/エントロピ符号化部(590)は、様々なシンタックス要素のエントロピ符号化のために、コンテキスト適応バイナリ算術符号化を使用する。詳細には、BV値を符号化するときに、ヘッダフォーマット化部/エントロピ符号化部(590)は、以下で説明するように、BVの他方の成分(例えば、垂直成分)の値を考慮して、BVの一方の成分(例えば、水平成分)の値の出現の確率を利用することができる。
ヘッダフォーマット化部/エントロピ符号化部(590)は、符号化データを、符号化ビデオビットストリーム(595)内に提供する。符号化ビデオビットストリーム(595)のフォーマットは、HEVCフォーマットの変形又は拡張、Windows(登録商標) Media Videoフォーマット、VC−1フォーマット、MPEG−xフォーマット(例えば、MPEG−1、MPEG−2、又はMPEG−4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットであり得る。
実装及び所望の圧縮のタイプに応じて、エンコーダのモジュールを追加してもよいし、省略してもよいし、複数のモジュールに分割してもよいし、他のモジュールと結合してもよいし、且つ/又は同様のモジュールと置換してもよい。代替実施形態において、異なるモジュール及び/又はモジュールの他の構成を有するエンコーダは、説明した技術のうちの1以上を実行する。エンコーダの特定の実施形態は、通常、エンコーダ(500)の変形又は補完バージョンを使用する。エンコーダ(500)内のモジュール間の示された関係は、エンコーダ内の情報の一般的な流れを示すものである。他の関係は、簡潔さのため示されていない。
VI.例示的なビデオデコーダ
図6は、いくつかの説明する実施形態を協働して実装することができる一般化されたデコーダ(600)のブロック図である。デコーダ(600)は、符号化ビデオビットストリーム(605)内の符号化データを受信し、再構成ビデオ(695)のためのピクチャを含む出力を生成する。符号化ビデオビットストリーム(605)のフォーマットは、HEVCフォーマットの変形又は拡張、Windows(登録商標) Media Videoフォーマット、VC−1フォーマット、MPEG−xフォーマット(例えば、MPEG−1、MPEG−2、又はMPEG−4)、H.26xフォーマット(例えば、H.261、H.262、H.263、H.264)、又は別のフォーマットであり得る。
デコーダ(600)は、ブロックベースであり、実装に依存するブロックフォーマットを使用する。ブロックは、様々な段階において、さらに細分割され得る。例えば、ピクチャは、64×64ブロック、32×32ブロック、又は16×16ブロックに分割され得、今度は、それらのブロックが、サンプル値のより小さなブロックに分割され得る。HEVC規格のための復号の実装において、ピクチャは、CTU(CTB)、CU(CB)、PU(PB)、及びTU(TB)に分割される。
デコーダ(600)は、ピクチャ内復号及び/又はピクチャ間復号を用いて、ピクチャを伸張する。デコーダ(600)のコンポーネントの多くが、ピクチャ内復号及びピクチャ間復号の両方のために使用される。これらのコンポーネントにより実行される正確なオペレーションは、伸張される情報のタイプに応じて変わり得る。
バッファは、符号化ビデオビットストリーム(605)内の符号化データを受け入れ、受け入れた符号化データを解析部/エントロピ復号部(610)に利用可能にする。解析部/エントロピ復号部(610)は、通常はエンコーダ(500)において実行されたエントロピ符号化の逆(例えば、コンテキスト適応バイナリ算術復号)を適用することにより、エントロピ符号化されたデータをエントロピ復号する。詳細には、BV値を復号するとき、解析部/エントロピ復号部(610)は、以下で説明するように、BVのそれぞれの成分を復号することができる。解析及びエントロピ復号の結果として、解析部/エントロピ復号部(610)は、一般制御データ(622)、量子化された変換係数データ(632)、イントラ予測データ(642)、動きデータ(652)、及びフィルタリング制御データ(662)を生成する。
一般復号制御部(620)は、一般制御データ(622)を受信し、復号中に復号パラメータを設定及び変更するために、他のモジュール(スケーリング部/逆変換部(635)、イントラピクチャ予測部(645)、動き補償部(655)、及びイントラ/インタースイッチ等)に制御信号(図示せず)を供給する。
現ピクチャが、ピクチャ間予測を用いて予測される場合、動き補償部(655)は、動きベクトルデータ及び参照ピクチャ選択データ等の動きデータ(652)を受信する。動き補償部(655)は、動きベクトルを、復号ピクチャバッファ(670)からの1以上の再構成された参照ピクチャに適用する。動き補償部(655)は、現ピクチャのインター符号化ブロックのための動き補償予測を生成する。復号ピクチャバッファ(670)は、参照ピクチャとして使用するために、1以上の以前に再構成されたピクチャを記憶する。
デコーダ(600)内の分離パスにおいて、イントラ予測予測部(645)は、イントラ予測が空間予測を使用するかBC予測を使用するかを示す情報(例えば、イントラブロックごとのフラグ値)、予測モード方向(イントラ空間予測に関して)、及びBV値(イントラBC予測に関して)等のイントラ予測データ(642)を受信する。イントラ空間予測に関して、イントラピクチャ予測部(645)は、現ピクチャの再構成(638)の値を用いて、予測モードデータに従って、現ピクチャの隣接する以前に再構成されたサンプル値から、現ピクチャの現ブロックのサンプル値を空間的に予測する。あるいは、イントラBC予測に関して、イントラピクチャ予測部(645)は、現ブロックのBV値により示されるイントラ予測領域の以前に再構成されたサンプル値を用いて、現ブロックのサンプル値を予測する。イントラピクチャ予測部(645)はまた、以下で説明するように、制約付きイントラ予測が有効にされているときには、イントラBC予測の使用を制限することができる。
イントラ/インタースイッチは、所与のブロックのための予測(658)として使用するために、動き補償予測又はピクチャ内予測の値を選択する。例えば、HEVCシンタックスに従うと、イントラ/インタースイッチは、イントラ予測CU及びインター予測CUを含み得るピクチャのCUに関して符号化されたシンタックス要素に基づいて制御され得る。デコーダ(600)は、予測(658)を、再構成された残差値と結合して、ビデオ信号からのコンテンツの再構成(638)を生成する。
残差を再構成するために、スケーリング部/逆変換部(635)は、量子化された変換係数データ(632)を受信して処理する。スケーリング部/逆変換部(635)において、スケーリング部/逆量子化部は、量子化された変換係数に対して、逆スケーリング及び逆量子化を実行する。逆周波数変換部は、逆周波数変換を実行して、再構成された予測残差又はサンプル値のブロックを生成する。例えば、逆周波数変換部は、逆ブロック変換を周波数変換係数に適用して、サンプル値データ又は予測残差データを生成する。逆周波数変換は、逆DCT、その整数近似、又は別のタイプの逆周波数変換であり得る。イントラBC予測が使用される場合、デコーダ(600)は、以下で説明するように、少なくともいくつかのサイズのブロックのイントラBC予測残差値に関して、逆DST、その整数近似、又は別のタイプの逆ブロック変換(他のブロックに関して適用される変換とは異なる)を適用することができる。
ピクチャ内予測に関して、再構成(638)の値は、イントラピクチャ予測部(645)にフィードバックされ得る。ピクチャ間予測に関して、再構成(638)の値は、さらにフィルタリングされ得る。マージ部/1以上のフィルタ(665)において、デコーダ(600)は、異なるタイルからのコンテンツを、ピクチャの再構成バージョンにマージする。デコーダ(600)は、フレーム内の境界にわたる不連続さを適応的に平滑化するために、フィルタリング制御データ(662)とフィルタ適応のためのルールとに従って、デブロックフィルタリング及びSAOフィルタリングを選択的に実行する。デコーダ(600)は、以下で説明するように、予測モードが、それぞれのブロックに関して、イントラ空間予測であるかイントラBC予測であるかインター予測であるかに応じて、ループ内デブロックフィルタリングがピクチャのブロック間の境界に適用されるときに、異なるアプローチを適用することができる。タイル境界は、デコーダ(600)の設定又は符号化ビットストリームデータ内のシンタックスインジケーションに応じて、選択的にフィルタリングされ得る又はフィルタリングされない。復号ピクチャバッファ(670)は、後続の動き補償予測において使用するために、再構成された現ピクチャをバッファする。
デコーダ(600)はまた、後処理デブロックフィルタを含み得る。後処理デブロックフィルタは、任意的に、再構成ピクチャ内の不連続さを平滑化する。他のフィルタリング(デリングフィルタリング等)も、後処理フィルタリングの一部として適用され得る。
実装及び所望の伸張のタイプに応じて、デコーダのモジュールを追加してもよいし、省略してもよいし、複数のモジュールに分割してもよいし、他のモジュールと結合してもよいし、且つ/又は同様のモジュールと置換してもよい。代替実施形態において、異なるモジュール及び/又はモジュールの他の構成を有するデコーダは、説明した技術のうちの1以上を実行する。デコーダの特定の実施形態は、通常、デコーダ(600)の変形又は補完バージョンを使用する。デコーダ(600)内のモジュール間の示された関係は、デコーダ内の情報の一般的な流れを示すものである。他の関係は、簡潔さのため示されていない。
VII.イントラブロックコピー予測モードのためのイノベーション
このセクションは、イントラブロックコピー(「BC」)予測モードのための様々なイノベーションを提示する。これらのイノベーションのうちのいくつかは、ブロックベクトル(「BV」)値の選択に関するのに対し、他のイノベーションは、BV値の符号化/復号に関する。さらに他のイノベーションは、イントラBC予測モードと制約付きイントラ予測との融合、イントラBC予測モードが使用されているときの順周波数変換及び逆周波数変換の選択、又は、イントラBC予測モードを有するブロックの境界にわたるループ内デブロックフィルタリングに関する。これらのイノベーションは、レート−歪み性能、並びに/又は、符号化及び復号の計算効率性の観点でより効率的であるイントラBC予測を容易にすることができる。詳細には、イントラBC予測は、スクリーンキャプチャコンテンツ等の所定の「人工的に」作成されたビデオコンテンツを符号化する際のレート−歪み性能を向上させることができる。スクリーンキャプチャコンテンツは、一般に、繰り返し構造(例えば、グラフィックス、テキスト文字)を含み、これは、イントラBC予測が性能を向上させる機会を提供する。スクリーンキャプチャコンテンツは、通常、高クロマサンプリング解像度のフォーマット(例えば、YUV4:4:4又はRGB4:4:4)で符号化されるが、より低いクロマサンプリング解像度のフォーマット(例えば、YUV4:2:0)で符号化されてもよい。
A.イントラBC予測モード−序論
イントラBC予測モードに関して、ピクチャの現ブロックのサンプル値は、同じピクチャ内のサンプル値を用いて予測される。BVは、現ブロックから、予測のために使用されるサンプル値を含む、ピクチャの領域への変位を示す。通常、予測のために使用されるサンプル値は、以前に再構成されたサンプル値である。BVは、ビットストリームにおいてシグナリングされる。イントラBC予測は、ピクチャ内予測の一形態であり、ピクチャのブロックのためのイントラBC予測は、同じピクチャ内のサンプル値以外のいずれのサンプル値も使用しない。
図7は、現フレーム(710)の現ブロック(730)のためのイントラBC予測を示している。現ブロックは、符号化ユニット(「CU」)の符号化ブロック(「CB」)、予測ユニット(「PU」)の予測ブロック(「PB」)、変換ユニット(「TU」)の変換ブロック(「TB」)、又は他のブロックであり得る。現ブロックのサイズは、64×64、32×32、16×16、8×8、又は何らかの他のサイズであり得る。より一般的に、現ブロックのサイズは、m×nであり、ここで、m及びnの各々は、整数であり、m及びnは、互いに等しいこともあるし、異なる値を有することもある。代替的に、現ブロックは、何らかの他の形状(例えば、非矩形形状の符号化ビデオオブジェクトの領域)を有してもよい。
BV(740)は、現ブロック(730)から、予測のために使用されるサンプル値を含む、ピクチャの領域(750)への変位(又はオフセット)を示す。現ブロックの左上位置が、現フレームにおいて位置(x,y)にあると仮定し、イントラ予測領域の左上位置が、現フレームにおいて位置(x,y)にあると仮定する。BVは、変位(x−x,y−y)を示す。例えば、現ブロックの左上位置が、位置(320,256)にあり、イントラ予測領域の左上位置が、位置(295,270)にあるとすると、BV値は、(−25,14)である。負の水平変位は、現ブロックの左の位置を示し、負の垂直変位は、現ブロックの上の位置を示す。
いくつかの例示的な実装において、イントラ予測領域(750)は、現ブロック(730)と同じスライス及びタイル内にあるように制約される。そのようなイントラBC予測は、他のスライス又はタイル内のサンプル値を使用しない。イントラ予測領域(750)の位置は、1以上の他の制約(例えば、探索範囲に関するもの、インター符号化ブロックの再構成されたサンプル値の使用に関するもの)を受けることがある。
イントラBC予測の予測モードを有するブロックは、CB、PB、又は他のブロックであり得る。ブロックがCBである場合、ブロックのBVは、CUレベルでシグナリングされ得る(CU内の他のCBは、同じBV又はそのスケーリングバージョンを使用する)。あるいは、ブロックがPBである場合、ブロックのBVは、PUレベルでシグナリングされ得る(PU内の他のPBは、同じBV又はそのスケーリングバージョンを使用する)。より一般的に、イントラBC予測ブロックのBVは、ブロックのための適切なシンタックスレベルでシグナリングされる。
イントラBC予測モードに従った予測のブロックコピーオペレーションは、CBのレベルで実行され得る(BVがCBごとにシグナリングされる場合)又はPBのレベルで実行され得る(BVがPBごとにシグナリングされる場合)。例えば、16×16CBが1つの16×16PBを有すると仮定する。(PBの)BVは、16×16領域をブロックコピーするために適用される。イントラ予測領域が、予測される16×16ブロックとオーバーラップしないように制約される場合、BVは、水平方向又は垂直方向に少なくとも16の大きさ(magnitude)(絶対値)を有する。
代替的に、ブロックコピーオペレーションは、BVがPB又はCBに関してシグナリングされる場合であっても、PB又はCB内のTBのレベルで実行されてもよい。このように、TBに関して適用されるBVは、同じPB又はCB内の他のTBの位置を参照することができる。例えば、16×16CBが1つの16×16PBを有するが、残差符号化/復号のために16個の4×4TBに分割されると仮定する。(PBの)BVは、ラスタ走査順で最初のTBのための4×4領域をブロックコピーするために適用され、次いで、同じBVが、ラスタ走査順で2番目のTBのための4×4領域をブロックコピーするために適用される、等である。TBのためのBCオペレーションにおいて使用される4×4領域は、残差値を、同じCB内の以前に再構成されたTBの予測値と結合した後の、そのような以前に再構成されたTB内の位置を含み得る(BVは、予測されている同じTB内の位置をそれでも参照しない)。TBレベルでBCオペレーションを適用することは、比較的小さな大きさのBVの使用を容易にする。
CUのクロマブロックのためのイントラBC予測オペレーションは、一般に、そのCUのルマブロックのためのイントラBC予測オペレーションに対応する。通常、クロマPB及びクロマTBのセグメンテーションは、CU内のルマPB及びルマTBのセグメンテーションに直接的に対応する。ビデオのフォーマットがYUV4:4:4である場合、クロマPB及びクロマTBのサイズは、対応するルマPB及びルマTBのサイズに合致する。ビデオのフォーマットがYUV4:2:0である場合、クロマPB及びクロマTBは、対応するルマPB及びルマTBの半分の幅及び半分の高さである。しかしながら、ルマTBが最小変換サイズを有する場合、その最小変換サイズを有する1つのクロマTBが使用される。
いくつかの実装において、イントラBC予測CUに関して、PU内のクロマブロックのためのイントラBC予測は、クロマデータがルマデータと比較して低い解像度を有する場合(例えば、フォーマットがYUV4:2:0フォーマットである場合)可能であればスケーリングして丸めた後に、そのPU内のルマブロックのためのイントラBC予測と同じBV値を使用する。代替的に、PUのルマブロック及びクロマブロックに関して、異なるBV値がシグナリングされてもよい。
いくつかの実装において、PUのルマブロックの予測モードが、イントラBC予測である場合、そのPUのクロマブロックの予測モードもイントラBC予測である。例えば、予測モードが、PUに関してシグナリングされる。代替的に、予測モードは、PUのルマブロック及びクロマブロックの両方に関してではなく、一方に関してイントラBC予測であってもよい。
B.イントラBC予測モードのためのBV探索の制約
いくつかの例示的な実装において、エンコーダは、1以上の制約に従ってBV範囲を制限する。BV範囲を制限することにより、符号化中及び復号中にイントラBC予測のための高速メモリアクセスにより参照される、再構成されたサンプル値の領域を低減させることができ、これは、より低い実装コストをもたらす。
図8は、BV値の探索範囲に対する例示的な制約を示している。現フレーム(810)の現ブロック(830)に加えて、図8は、2つのCTB(820、822)により規定される探索範囲を示している。現CTB(820)は、現CTUの一部であり、現ブロック(830)を含む。現CTB(820)は、その左のCTB(822)により、現ブロック(830)に関して許容可能なBVを見つけることができる探索範囲を規定する。BV(842、844)は、探索範囲外にある領域を参照するので、これらのBV値(842、844)は許容されない。
いくつかの例示的な実装において、現ブロックのBV値の探索範囲は、現CTB及びその左のCTBである。例えば、CTBは、64×64サンプル値、32×32サンプル値、又は16×16サンプル値のサイズを有することができ、これは、128×64サンプル値、64×32サンプル値、又は32×16サンプル値の探索範囲をもたらす。現CTB及び左のCTB内のサンプル値のみが、現ブロックのためのイントラBC予測のために使用される。これは、探索プロセスを制約することにより、エンコーダ実装を単純化する。これはまた、デコーダがイントラ予測のために高速メモリにバッファするサンプル値の数を制限することにより、デコーダ実装を単純化する。別の制約は、イントラ予測は別のスライス又はタイルからのサンプル値を参照することができない、ということである。左上位置が(x,y)にある現m×nブロック、及び各々がCTBsizeY×CTBsizeYという寸法を有する1以上のCTBに関して、エンコーダは、水平成分BV[0]及び垂直成分BV[1]を有する2次元BVに関するこれらの制約を、以下のようにチェックすることができる。
・BV[0]≧−((x%CTBsizeY)+CTBsizeY
・BV[1]≧−(y%CTBsizeY
・位置(x,y)、位置(x+BV[0],y+BV[1])、及び位置(x+BV[0]+m−1,y+BV[1]+n−1)におけるサンプル値は、同じスライス内にある必要がある。
・位置(x,y)、位置(x+BV[0],y+BV[1])、及び位置(x+BV[0]+m−1,y+BV[1]+n−1)におけるサンプル値は、同じタイル内にある必要がある。
図9は、BV値の選択に対する1以上の制約を受けてイントラBC予測モードで符号化するための技術(900)を示している。図3又は図5a〜図5bを参照して説明したもの等のエンコーダは、技術(900)を実行することができる。
最初に、エンコーダは、ピクチャの現ブロックのBVを決定する(910)。現ブロックは、CB、PB、又は他のブロックであり得る。BVは、ピクチャ内の領域への変位を示す。BVを決定する際、エンコーダは、1以上の制約をチェックする。
1つの可能な制約に従って、エンコーダは、イントラBC予測のために使用されるサンプル値の範囲をチェックする。エンコーダは、候補イントラ予測領域が、現CTB及び1以上の他のCTB(例えば、現CTBの左のCTB)により規定される範囲内にあることをチェックすることができる。例えば、BVが、第1の成分BV[0]及び第2の成分BV[1]を有し、現ブロックの左上位置が、位置(x,y)にあり、1以上のCTBの各々が、幅CTBwidth及び高さCTBheightを有するとすると、BV[0]>=−((x%CTBwidth)+CTBwidth)且つBV[1]>=−(y%CTBheight)である場合に、制約が満たされる。エンコーダは、探索範囲内のBV[0]及びBV[1]の値の上限を同様にチェックすることができる:BV[0]<(CTBwidth−m−(x%CTBwidth))且つBV[1]<(CTBheight−n−(y%CTBheight))。代替的に、探索範囲は、より多くの又はより少ないCTBを含んでもよいし、探索範囲は、何らかの他の方法により規定されてもよい。
別の可能な制約に従って、エンコーダは、現スライス及びタイルに対する探索を制限する(すなわち、現ブロック及び領域は、ピクチャのたった1つのスライス及びピクチャのたった1つのタイルの一部である)。エンコーダは、現ブロックの左上位置、候補イントラ予測領域の左上位置、及び候補イントラ予測領域の右下位置が、1つのスライス及び1つのタイルの一部であることをチェックすることができる。例えば、(x,y)、(x+BV[0],y+BV[1])、及び(x+BV[0]+m−1,y+BV[1]+n−1)が、1つのスライス及び1つのタイルの一部である場合に、制約が満たされる。
代替的に、エンコーダは、他の制約及び/又は追加の制約をチェックしてもよい。
エンコーダは、BVを用いて、現ブロックのためのイントラBC予測を実行する(920)。例えば、エンコーダは、現ブロック全体のためのイントラBC予測を実行する。あるいは、エンコーダは、現ブロックに関連付けられた複数のブロックのためのイントラBC予測を実行する(例えば、BVを有する現PBに関連付けられている複数のTBのためのイントラBC予測をTBごとに実行する)。
エンコーダは、BVを符号化する(930)。例えば、エンコーダは、以下で説明するように、BVを符号化する(930)。エンコーダは、別のイントラBC予測モードブロックに対して、技術(900)を繰り返すことができる。
イントラBC予測に関して、エンコーダ及びデコーダは、再構成されたサンプル値を使用する。再構成されていないサンプル値は、まだ符号化されておらず再構成されていないピクチャの一部として提示され得る。イントラBC予測のために再構成されていないサンプル値を使用するのを避けるために、エンコーダは、実際の以前に再構成されたサンプル値のみが、BVに従って、イントラBC予測のために使用されるように、BVの許容可能な値に対する制約を設定することができる。
いくつかの例示的な実装において、エンコーダは、現ブロックのz走査順序と候補イントラ予測領域の右下位置を含むブロックのz走査順序とを考慮することにより、BV値をチェックする。より詳細には、エンコーダは、位置(x+BV[0]+m−1,y+BV[1]+n−1)を含むブロックのz走査順序が、(x,y)を含むブロックのz走査順序よりも小さいかどうかをチェックする。そうである場合、イントラ予測領域の右下位置を含むブロックは、以前に再構成されたものである(したがって、イントラ予測領域の残りの部分も以前に再構成されたものである)。BVはまた、イントラ予測領域が現ブロックとオーバーラップしないことを確実にする、BV[0]+m≦0という条件及びBV[1]+n≦0という条件のうちの少なくとも一方も満たす。
z走査順序は、ピクチャを分割するブロックのシーケンシャルに指定された順序に従う。図10は、現ブロック(1030)と候補BVに関してイントラ予測領域の右下位置を含み得るブロックとの例示的なz走査順序(1000)を示している。現ブロック(1030)は、CB、PB、又は他のブロックであり得る。z走査順序は、一般に、行内を左から右にシーケンシャルに進み、上から下に連続する行内で繰り返されるように、ブロックに割り当てられ。ブロックが分割されている場合、z走査順序は、分割ブロック内で再帰的に割り当てられる。HEVC規格のための符号化/復号の実装に関して、z走査順序は、CTBラスタ走査パターン(CTB行内を左から右に進み、上から下に連続するCTB行内で繰り返される)により、CTBからCTBに進む。CTBが分割されている場合、z走査順序は、分割CTB内の四分木(quadtree)のCBに関するラスタ走査パターンに従う。CBが(例えば、複数のCB又は複数のPBに)分割されている場合、z走査順序は、分割CB内のブロックに関するラスタ走査パターンに従う。
代替的に、イントラBC予測のために再構成されていないサンプル値を使用するのを避けるために、エンコーダ(及びデコーダ)は、再構成されていないサンプル値を、デフォルト値又は他の形で決定された値で置換してもよい。図11a及び図11bは、フィルイン値(fill-in value)により置換される再構成されていないサンプル値を有するイントラ予測領域の例を示している。図11aにおいて、現ブロック(1130)のイントラ予測領域(1150)は、以前に再構成された行のブロック内のいくつかのサンプル値を含むだけでなく、その行より下にある再構成されていないサンプル値も含む。図11bにおいて、イントラ予測領域(1152)は、現ブロック(1130)より上にあり現ブロック(1130)の左にある以前に再構成されたブロック内のいくつかのサンプル値を含むだけでなく、現ブロック(1130)内のいくつかの再構成されていないサンプル値も含む。エンコーダ(及びデコーダ)は、予め定められた値を用いて、再構成されていないサンプル値を埋める(フィルする(fill))ことができる。例えば、予め定められた値は、8のビット深度を有するサンプル値に関して、128(グレー)である。あるいは、予め定められた値は、別の値であってもよい。あるいは、予め定められた値を用いて埋める(フィルする)代わりに、再構成されていないサンプル値は、水平方向又は垂直方向の拡張(expanding)又は内挿により埋められても(フィルされても)よいし、角度方向拡張(angular directional expanding)、平面表面フィッティング拡張(planar surface fitting expanding)、又はいくつかの利用可能な再構成されたサンプル値の平均値を用いた拡張等の何らかの他の形の拡張又は内挿により埋められても(フィルされても)よい。そのような場合、エンコーダは、探索範囲にないサンプル値がイントラBC予測のために使用されないように、依然として制約をチェックすることができる。エンコーダはまた、再構成されていないサンプル値を埋める(フィルする)プロセスを制御するためのシンタックス情報を、符号化ビットストリームデータ内に提供することができる(例えば、使用される定数値を送信することにより、角度方向拡張の予測角度のインジケータを送信することにより、又は、拡張の複数の方法間で選択するためのインジケータを送信することにより)。
符号化中、エンコーダは、イントラBC予測プロセスの一部として、パッドサンプル値(padded sample value)(例えば、実際の再構成されたサンプル値内での内挿又は実際の再構成されたサンプル値からの外挿に基づく)、又は、予め定められた値(例えば、グレー値)を有するフィルインサンプル値を用いて、イントラ予測領域の再構成されていないサンプル値を埋める(フィルする)ことができる。復号中も同様に、デコーダは、イントラBC予測プロセスの一部として、パッドサンプル値、又は、予め定められた値を有するフィルインサンプル値を用いて、イントラ予測領域の再構成されていないサンプル値を埋める(フィルする)ことができる。
代替的に、イントラBC予測がTBごとに実行され得る場合(セクションGを参照)、エンコーダ及びデコーダは、イントラ予測領域と現ブロック(TB)との間の可能なオーバーラップについてチェックし、次いで、このチェックの結果を使用して、現TBがイントラBC予測オペレーションの適用のためにより小さなTBに分割されるべきであるかどうかを決定してもよい。現TBが、m×nのサイズを有すると仮定する(m及びnは、互いに等しいこともあるし、異なる値を有することもある)。BV[0]>−m且つBV[1]>−nである場合、イントラ予測領域は、現m×nTBとオーバーラップし、これは、現m×nTBがイントラBC予測オペレーションの適用のためにより小さなTBに分割される場合を除いて問題である。したがって、BV[0]>−m且つBV[1]>−nである場合、エンコーダ及びデコーダは、現TBを、より小さなTBに分割する。同じ条件が、より小さなTBに対してもチェックされる(例えば、再帰的にチェックされる)。分割後のm及びnのより小さな値に関してもBV[0]>−m且つBV[1]>−nである場合には、より小さなTBは、さらに分割され得る。
例えば、PBのBVが(−9,−5)であり、現TBが32×32ブロックであると仮定する。エンコーダ及びデコーダは、−9>−32且つ−5>−32であると判定し、これは、イントラ予測領域(左上角が、−9,−5だけ変位されている)が現32×32TBとオーバーラップするであろうことを示す。エンコーダ及びデコーダは、32×32TBを4つの16×16TBに分割する。各16×16TBについて、エンコーダ及びデコーダは、−9>−16且つ−5>−16であると判定し、これは、イントラ予測領域(左上角が、−9,−5だけ変位されている)が現16×16TBとオーバーラップするであろうことを示す。エンコーダ及びデコーダは、各16×16TBを続けて4つの8×8TBに分割する。8×8TBに関して、(−9,−5)のBVは、問題とはならないので、8×8TBは、さらに分割されることを強いられない。
このシナリオにおいて、BV値及びTBのサイズに起因して、TBが分割される場合、エンコーダは、そうでなければ現TBをより小さなTBに分割するかどうかをシグナリングするであろうフラグ値のシグナリングをスキップすることができる。符号化データのビットストリームは、現TBをより小さなTBに分割するよう指示するフラグ値を有さない。代わりに、デコーダは、BV値及びTBのサイズに起因して、TBが分割されるべきであることを推測することができる。これは、そうでなければTBの分割に関する情報をシグナリングするのに使用されるであろうビットを節約することができる。
C.制約付きイントラ予測が有効にされている場合のイントラBC予測モード
いくつかの例示的な実装において、イントラBC予測がどのように実行されるかは、制約付きイントラ予測が有効にされているかどうかに依拠する。制約付きイントラ予測は、(例えば、干渉からのビットフリップ又はパケット損失に起因して)符号化ビデオデータに取り込まれ得る誤りに対する耐性を制御するために使用される設定である。制約付きイントラ予測は、イントラ予測のためにどの再構成されたサンプル値を使用できるかを制限する。制約付きイントラ予測が有効にされている場合、インター符号化ブロックからの再構成されたサンプル値は、イントラBC予測又はイントラ空間予測のために使用することができない。ビットストリーム内のフラグは、制約付きイントラ予測が有効にされるかどうかを指示することができる。
図12は、制約付きイントラ予測が有効にされ得るときにイントラBC予測モードを使用するための技術(1200)を示している。図3又は図5a〜図5bを参照して説明したもの等のエンコーダは、技術(1200)を実行することができる。あるいは、図4又は図6を参照して説明したもの等のデコーダは、技術(1200)を実行することができる。
エンコーダ又はデコーダは、制約付きイントラ予測が有効にされているかどうかを判定する(1210)。例えば、エンコーダ又はデコーダは、制約付きイントラ予測が有効にされているかどうかを制御するフラグの値をチェックする。このフラグは、ピクチャパラメータセットの一部として又は何らかの他のレベルで、シグナリングされ得る。
エンコーダ又はデコーダは、制約付きイントラ予測が有効にされているかどうかに少なくとも部分的に応じて、現ブロックのためのイントラBC予測を実行する(1220)。以下で説明するように、制約付きイントラ予測が有効にされているかどうかに応じてイントラBC予測を調整するいくつかのアプローチが存在する。エンコーダ又はデコーダは、別のイントラBC予測モードブロックに対して、技術(1200)を繰り返すことができる。
一アプローチでは、エンコーダが、現ブロックのBVを決定するときに、制約付きイントラ予測が有効にされていれば、エンコーダは、候補イントラ予測領域のサンプル値が、インター符号化ブロックからの再構成されたサンプル値ではないことをチェックする。制約付きイントラ予測が有効にされていなければ、この制約は適用されず、イントラBC予測は、インター符号化ブロックからの再構成されたサンプル値を使用することができる。
図13は、制約付きイントラ予測が有効にされているときの許容可能なBV値に対するこの制約を示している。イントラ符号化ブロック内のイントラ予測領域のBV(1342、1344)は、このブロックがイントラ空間予測を用いて符号化されたかイントラBC予測を用いて符号化されたかにかかわらず、許容されている。例えば、制約付きイントラ予測が有効にされている場合、現ブロックのBVを決定するときに、エンコーダは、候補イントラ予測領域のサンプル値p[x][y]が、イントラ符号化ブロック内にあることをチェックする。すなわち、左上位置が位置(x,y)にある現m×nブロックに関して、エンコーダは、x=x+BV[0]...x+BV[0]+m−1、及び、y=y+BV[1]...y+BV[1]+n−1である全てのp[x][y]に対して、この条件をチェックする。
別のアプローチは、制約付きイントラ予測が有効にされている場合、インター符号化ブロックの再構成されたサンプル値の代わりに、フィルインサンプル値を使用する。制約付きイントラ予測が有効にされている場合、イントラBC予測は、インター符号化ブロックからの再構成されたサンプル値である、イントラ予測領域のサンプル値の代わりに、フィルインサンプル値又はパッドサンプル値(外挿又は内挿による)を決定することを含む。
さらに別のアプローチでは、制約付きイントラ予測が有効にされている場合、イントラBC予測は、非イントラスライスにおいて無効にされる。イントラBC予測は、(イントラ符号化コンテンツのみを有する)イントラスライスについて、及び、制約付きイントラ予測が有効にされていないときの非イントラスライスについて、依然として許容される。図14は、このアプローチを示している。図14において、シンタックステーブル(1400)内の条件は、イントラBC予測のために使用されるintra_bc_flagシンタックス要素の有無を示す。イントラBC予測が有効にされている(intra_block_copy_enabled_flagが1である)としても、イントラBCフラグは、現スライスがイントラスライスである(slice_typeがIである)又は制約付きイントラ予測が有効にされていない(constrained_intra_pred_flagが0である)場合にのみ、シグナリングされる。
D.BV値の符号化及び復号
いくつかの例示的な実装において、2次元BV値は、第2の成分の値を所与として、第1の成分の値の出現の確率を利用することにより、効率的に符号化される。
図15a及び図15bは、符号化の際に利用することができる特性を有するBV値の例示的な範囲を示している。図15a及び図15bにおいて、BVが、現m×nブロックに関して見つけられる(1530)。BVは、水平成分BV[0]及び垂直成分BV[1]を有する。イントラBC予測は、実際の再構成されたサンプル値を使用することのみに制約される。(再構成されていないサンプル値を参照する他のBV値の代替例が可能であり、このセクションの最後に説明される。)
イントラBC予測は、実際の再構成されたサンプル値しか使用しないので、BV[0]>−m且つBV[1]>−nの範囲のBV値は許容されない。この範囲では、候補イントラ予測領域は、少なくともいくつかの再構成されていないサンプル値を有する。
図15aに示されるように、BV[1]≦−nである場合、BV[0]は、正値又は負値を有し得る。しかしながら、BV[1]>−nである場合、許容可能なBVは、BV[0]≦−mを有する(イントラBC予測が、実際の再構成されたサンプル値を使用することのみに制約されると仮定して)。BVの水平成分は、オフセット値だけ調整され得る。これは、典型的なエントロピ符号化方式の符号化効率を向上させる。なぜならば、ゼロにより近い値が、より少ないビットを用いて符号化されるからである。例えば、BV[0]を直接符号化する代わりに、水平成分は、DV[0]=BV[0]+mとして符号化される。DV[0]値は、BV[0]よりも0に近く、通常、より少ないビットを用いて符号化される。DV[0]が、ビットストリームから復号されるときに、BV[0]は、DV[0]−mとして再構成することができる。詳細には、BVは、次のように再構成される。最初に、BV[1]が復号される。BV[1]>−nである場合、BV[0]=DV[0]−mである。そうでなければ(BV[1]≦−nである場合)、BV[0]=DV[0]である。
同様に、図15bに示されるように、BV[0]≦−mである場合、BV[1]は、正値又は負値を有し得る。しかしながら、BV[0]>−mである場合、許容可能なBVは、BV[1]≦−nを有する(イントラBC予測が、実際の再構成されたサンプル値を使用することのみに制約されると仮定して)。BVの垂直成分は、例えば、DV[1]=BV[1]+nのように、オフセット値だけ調整され得る。DV[1]が、ビットストリームから復号されるときに、BV[1]は、DV[1]−nとして再構成することができる。
代替的に、現ブロックの寸法m又はnに基づく代わりに、オフセット値は、ビットストリーム(例えば、シーケンスパラメータセット、ピクチャパラメータセット、又はスライスヘッダ)において設定されてもよいし、所与の予め定められた値であってもよい。例えば、オフセット値は、8、16、又は何らかの他の値に設定することができる。調整されたBV成分値は、ほとんどの場合において、そうされない場合よりもやはりゼロに近くなる。
図16は、BV値を符号化するための技術(1600)を示している。図3又は図5a〜図5bを参照して説明したもの等のエンコーダは、技術(1600)を実行することができる。
エンコーダは、ピクチャの現ブロックの2次元BVを決定する(1610)。BVは、第1の成分及び第2の成分を有する。例えば、エンコーダは、上述したように、1以上の制約を受ける探索範囲においてBVを探索する。エンコーダは、BVを用いて、現ブロックのためのイントラBC予測を実行する(1620)。例えば、エンコーダは、現ブロック全体のためのイントラBC予測を実行する。あるいは、エンコーダは、現ブロックに関連付けられた複数のブロックのためのイントラBC予測を実行する(例えば、BVを有する現PBに関連付けられている複数のTBのためのイントラBC予測をTBごとに実行する)。
エンコーダは、BVを符号化する(1630)。BVの符号化は、第2の成分の値を所与として、第1の成分の値の出現の確率を利用する。いくつかの実装において、第1のBV成分の値の符号化は、第2のBV成分の値に依拠する。エンコーダは、第2の成分の値を第1のオフセット値と比較し、次いで、第2のオフセット値を用いて、第1の成分の値を選択的に調整することができる。例えば、第1の成分は水平成分BV[0]であり、第2の成分は垂直成分BV[1]であり、現ブロックはm×nブロックである。第1のオフセット値はnに依拠し、第2のオフセット値はmに依拠する。垂直成分BV[1]の値が、−nよりも大きい場合、水平成分BV[0]の値は、mだけ増加される。この調整の後に、BVの符号化は、バイナリ算術符号化又は別の形態のエントロピ符号化を含み得る。
エンコーダは、別のイントラBC予測モードブロックに対して、技術(1600)を繰り返すことができる。
図17は、BV値を復号するための技術(1700)を示している。図4又は図6を参照して説明したもの等のデコーダは、技術(1700)を実行することができる。
デコーダは、ピクチャの現ブロックの2次元BVを復号する(1710)。BVは、第1の成分及び第2の成分を有する。デコーダは、第2の成分の値を所与として、第1の成分の値の出現の確率を利用する、BVの符号化の逆を行う。BVの復号は、バイナリ算術復号又は別の形態のエントロピ復号を含み得る。
バイナリ算術復号又は別のエントロピ復号の後、第1のBV成分の値が調整される。いくつかの実装において、第1のBV成分の値の復号は、第2のBV成分の値に依拠する。デコーダは、第2の成分の値を第1のオフセット値と比較し、次いで、第2のオフセット値を用いて、第1の成分の値を選択的に調整することができる。例えば、第1の成分は水平成分BV[0]であり、第2の成分は垂直成分BV[1]であり、現ブロックはm×nブロックである。第1のオフセット値はnに依拠し、第2のオフセット値はmに依拠する。垂直成分BV[1]の値が、−nよりも大きい場合、水平成分BV[0]の値は、mだけ減少される。
デコーダは、BVを用いて、現ブロックのためのイントラBC予測を実行する(1720)。例えば、デコーダは、現ブロック全体のためのイントラBC予測を実行する。あるいは、デコーダは、現ブロックに関連付けられた複数のブロックのためのイントラBC予測を実行する(例えば、BVを有する現PBに関連付けられている複数のTBのためのイントラBC予測をTBごとに実行する)。デコーダは、別のイントラBC予測モードブロックに対して、技術(1700)を繰り返すことができる。
代替的に、図16及び図17に示される技術(1600、1700)に関して、第1の成分は垂直成分BV[1]であり、第2の成分は水平成分BV[0]であり、第1のオフセット値はmに依拠し、第2のオフセット値はnに依拠する。水平成分BV[0]の値が、−mよりも大きい場合、垂直成分BV[1]の値は、(符号化中)nだけ増加されるか、又は、(復号中)mだけ減少される。
あるいは、図16及び図17に示される技術(1600、1700)に関して、第1の成分及び第2の成分は、第1の成分及び第2の成分の少なくともいくつかの組合せに関する符号が存在しないことを利用する方法により、一緒に符号化されてもよい。例えば、エンコーダ及びデコーダは、現ブロックに隣接する範囲にある第1の成分及び第2の成分の組合せに関して存在しない符号を含む可変長符号テーブルを使用する。
再構成されていないサンプル値を有するイントラ予測領域を参照するBV値が許容される場合、エンコーダ及びデコーダは、依然としてBV成分値を調整することができる。例えば、エンコーダは、BV成分のうちの一方の値を調整して、他方のBV成分の値を考慮して、平均してゼロにより近付ける。BV成分の調整された値は、正値を有し得るが、ゼロにより近い可能性がより高く、したがって、より少ないビットを用いて符号化される。
例示的な実装において、イントラBC予測は、BVのために整数値を使用する。小数変位(fractional displacement)(及び、したがって、再構成されたサンプル値間の小数内挿(fractional interpolation))は使用されない。代替的に、BVは、小数変位を有してもよい。
代替的に、探索範囲が制約されている場合、BV値の符号化及び復号は、モジュロラッピング(modulo wrapping)を使用してもよい。BV値の成分が、探索範囲外にある位置を示す場合、成分は、探索範囲の反対側に「ラップアラウンドし(wrap around)」、そこから続く。これは、変位の極値を符号化するのをより効率的にすることができる。例えば、xよりも大きい正変位が、探索範囲外を示すBV[0]値をもたらすであろう場合、BV[0]のxの変位は、探索範囲の反対側の極負値を示すために使用され得る。
(上述した)オフセット値の使用を含む、BV値のエントロピ符号化/復号とは別に、エンコーダ及びデコーダは、BV値を符号化/復号するときに、BV予測及び/又はマージモード/BV競合(BV prediction and/or merge mode/BV competition)を使用することができる。
符号化中及び復号中の基本的なBV予測に関して、現ブロックのBV値は、1以上の前のブロックのBV値に基づいて予測され得る。隣接ブロック(例えば、現ブロックの左のブロック)のBV値を使用して、現ブロックのBV値のBV予測子(predictor)を決定することができる。あるいは、現ブロックのBV値のBV予測子は、複数の隣接ブロック(例えば、現ブロックの左のブロック、上のブロック、及び左上のブロック)のBV値の成分ごとの中央値又は平均値であってもよい。符号化中、BV差が、BV値及びBV予測子を用いて決定され、BV差が符号化される。復号中、再構成されたBV差が、BV予測子と結合される。
あるいは、エンコーダ及びデコーダは、現ブロックに空間的に隣接する再構成ブロック(例えば、現ブロックの左のブロック、現ブロックの上のブロック等)のために使用されたBV値の中から、現ブロックの1以上の候補BV値を決定する。1以上の候補BV値はまた、現ブロックに時間的に隣接する再構成ブロックのために使用された1以上のBV値を含み得る。ここで、時間的に隣接するブロックは、別のピクチャ内の現ブロックとして対応する位置(例えば、同じ位置又は重なり合う位置)にあるものである。1以上の候補BV値のリストが、冗長なBV値を除外するために、符号化中及び復号中、ルールにより決定される。符号化中、エンコーダは、1以上の候補BV値のうちどの候補BV値を現ブロックのBV予測子として使用するかを示す1以上のシンタックス要素をシグナリングすることができる。いくつかのモードにおいて、そのBV予測子が、現ブロックのBV値として使用され得、これは、現ブロックのBV値を、候補BV値を提供した隣接するブロックのBV値と効率的に「マージする」。あるいは、エンコーダは、BV値及びBV予測子に基づくBV差を決定及び符号化することができる。BV差がシグナリングされるときに、BV予測子の選択が(候補BV値を選択するシンタックス要素のシグナリングなく)自動的に生じ得る。復号中、デコーダは、1以上の候補BV値のうちどの候補BV値を現ブロックのBV予測子として使用するかを示す1以上のシンタックス要素を受信することができる。いくつかのモードにおいて、そのBV予測子が、現ブロックのBV値として使用され得、これは、現ブロックのBV値を、候補BV値を提供した隣接するブロックのBV値と効率的に「マージする」。あるいは、デコーダは、BV差を受信及び復号することができ、デコーダは、このBV差をBV予測子と結合して、BV値を再構成する。BV差がシグナリングされるときに、BV予測子の選択が(候補BV値を選択するシンタックス要素のシグナリングなく)自動的に生じ得る。BV「スキップ」モード又はBV「ダイレクト」モードが提供され得、これらのモードにおいては、(ルールにより選択された)BV予測子が、現ブロックのBV値として使用され、残差値は、現ブロックに関してシグナリングされない。
E.イントラBC予測モードブロックのための順変換及び逆変換
イントラBC予測が使用される場合、いくつかの例示的な実装において、所定のサイズのルマ残差ブロックは、離散サイン変換(「DST」)又はその整数近似を用いて符号化され、逆DST又はその整数近似を用いて復号される。詳細には、DST(又はその整数近似)及び逆DST(又はその整数近似)は、イントラBC予測からの4×4ルマブロックの残差値に対して使用される。より一般的に、イントラBC予測が使用される場合、エンコーダは、イントラBC予測からのいくつかのサイズのルマブロックの残差値とクロマブロックとに対して、第1のタイプの順変換(「標準の」変換)を使用し、デコーダは、そのようなブロックに対して、第1のタイプの逆変換(「標準の」逆変換)を使用する。一方、他のサイズのルマブロックの残差値に対しては、エンコーダは、第2のタイプの順変換(「代替の」変換)を使用し、デコーダは、第2のタイプの逆変換(「代替の」逆変換)を使用する。
図18は、イントラBC予測モード及び代替の変換を用いて符号化するための一般化された技術(1800)を示している。図3又は図5a〜図5bを参照して説明したもの等のエンコーダは、技術(1800)を実行することができる。
エンコーダは、イントラBC予測モードを用いて、サンプル値を予測し(1810)、次いで、予測されたサンプル値及びオリジナルのサンプル値に基づいて、残差値を決定する(1820)。
エンコーダは、特別なブロック(例えば、特別なサイズを有するルマブロック)が符号化されているかどうかをチェックする(1825)。そうである場合、エンコーダは、代替の順変換を残差値に適用して変換係数を生成し(1832)、変換係数が、量子化及びエントロピ符号化される(1840)。例えば、エンコーダは、DST、その整数近似、又は他のタイプの順変換を、イントラBC予測からの4×4ルマブロックの残差値に適用する。そうでない場合、エンコーダは、標準の順変換を残差値に適用して変換係数を生成し(1830)、変換係数が、量子化及びエントロピ符号化される(1840)。例えば、エンコーダは、DCT、その整数近似、又は他のタイプの順変換を、イントラBC予測からの他のサイズのブロックの残差値とクロマブロックとに適用する。エンコーダは、別のイントラBC予測モードブロックに対して、技術(1800)を繰り返すことができる。
図19は、イントラBC予測モード及び代替の逆変換を用いて復号するための一般化された技術(1900)を示している。図4又は図6を参照して説明したもの等のデコーダは、技術(1900)を実行することができる。
デコーダは、変換係数をエントロピ復号及び逆量子化する(1910)。デコーダは、特別なブロック(例えば、特別なサイズを有するルマブロック)が復号されているかどうかをチェックする(1915)。そうである場合、デコーダは、代替の逆変換を変換係数に適用して残差値を生成する(1922)。例えば、デコーダは、逆DST、その整数近似、又は他のタイプの逆変換を、イントラBC予測からの4×4ルマブロックの残差値のための変換係数に適用する。そうでない場合、デコーダは、標準の逆変換を変換係数に適用する(1920)。例えば、デコーダは、逆DCT、その整数近似、又は他のタイプの逆変換を、イントラBC予測からの他のサイズのブロックとクロマブロックとに適用する。デコーダは、イントラBC予測モードを用いて、サンプル値を予測する(1930)。デコーダは、残差値と予測されたサンプル値とを結合して、サンプル値を再構成する(1940)。デコーダは、別のイントラBC予測モードブロックに対して、技術(1900)を繰り返すことができる。
F.イントラBC予測モードブロックのためのループ内デブロックフィルタリング
いくつかの例示的な実装において、ブロック間の境界にわたるデブロックフィルタリングは、それらのブロックの予測モード(例えば、イントラ空間予測、イントラBC予測、又はインター予測)に依拠する。また、いくつかの例示的な実装において、イントラBC予測ブロック間の境界にわたるデブロックフィルタリングは、BV値に応じて適応される。
一般に、デブロッキングフィルタは、ブロック(例えば、PB、TB)のブロック境界に隣接するサンプル値に選択的に適用される。ピクチャ境界、スライス境界、又はタイル境界におけるフィルタリングを無効にする又は変更するために、特別なルールが適用され得る。エンコーダ又はデコーダは、予測モード(イントラ空間、イントラBC予測、インター)、参照インデックス値及び動きベクトル値(インター符号化ブロックに関して)、BV値(イントラBC予測ブロックに関して)、並びにゼロでない変換係数の有無を含む様々なファクタに応じて、デブロックフィルタリングの強度を設定する。
例えば、ブロックP及びQが、共通の境界を有する隣接ブロックであると仮定する。ブロックP及びQの一方又は両方が、イントラ空間予測の予測モードを有する場合、フィルタリング強度は、(例えば、最も強いフィルタリングを指示する)第1の値を有する。一方、ブロックP及びQの両方が、インター符号化である場合、ブロックP及びQの両方が、イントラBC予測である場合、又は、ブロックP及びQの一方がインター符号化であり、他方がイントラBC予測である場合、フィルタリング強度は、(例えば、適度な(moderate)フィルタリングを指示する又はフィルタリングを指示しない)別の値を有する。
ブロックP及びQの両方が、インター符号化である場合、適度なフィルタリングを指示するフィルタリング強度値は、(a)いずれかのブロックがゼロでない変換係数を有する場合、(b)これら2つのブロックの参照インデックス値が等しくない場合、(c)これら2つのブロックの動きベクトル値が等しくない場合、又は(d)いずれかのブロックの2つの動きベクトル成分間の差が閾量(例えば、1サンプル)よりも大きい場合に、割り当てられる。そうでない場合(どの条件も満たされない場合)、フィルタリングを指示しないフィルタリング強度値が割り当てられる。
ブロックP及びQの両方が、イントラBC予測である場合、適度なフィルタリングを指示するフィルタリング強度値は、(a)いずれかのブロックがゼロでない変換係数を有する場合、(b)これら2つのブロックのBV値が等しくない場合、又は(c)いずれかのブロックのBV成分間の差が閾量(例えば、1サンプル)よりも大きい場合に、割り当てられる。そうでない場合(どの条件も満たされない場合)、フィルタリングを指示しないフィルタリング強度値が割り当てられる。
ブロックP及びQの一方がインター符号化であり、他方がイントラBC予測である場合、適度なフィルタリングを指示するフィルタリング強度値は、(a)いずれかのブロックがゼロでない変換係数を有する場合に、割り当てられる。そうでない場合、フィルタリングを指示しないフィルタリング強度値が割り当てられる。代替的に、ブロックP及びQの一方がインター符号化であり、他方がイントラBC予測である場合、フィルタリング強度値は、(例えば、最も強いフィルタリングを指示する)第1の値を有してもよい。
強いフィルタリング及び適度なフィルタリングに関して、そのようなフィルタリングは、量子化パラメータ値又は他の考慮事項に応じて、さらに調整され得る。代替的に、フィルタリング強度は、他のルールに従って、割り当てられる且つ/又は調整される。
図20は、ブロックの予測モードに応じてループ内デブロックフィルタリングのアプローチを変更するための例示的なルール(2000)を示している。2つの隣接ブロックのいずれかが、イントラ空間予測の予測モードを有する場合、エンコーダ又はデコーダは、これらのブロック間の境界に対して、デブロックフィルタリングの第1のアプローチ(例えば、強いフィルタリング)を適用する。そうではなく、2つの隣接ブロックの一方の予測モードがインター予測であり、他方の予測モードがイントラBC予測である場合、エンコーダ又はデコーダは、デブロックフィルタリングの第2のアプローチ(例えば、ゼロでない変換係数レベルの有無に応じて適度なフィルタリング又はフィルタリングなし)を適用する。そうではなく、2つの隣接ブロックの両方の予測モードが、イントラBC予測である場合、エンコーダ又はデコーダは、デブロックフィルタリングの第3のアプローチ(例えば、ゼロでない変換係数レベルの有無及びBV値に応じて適度なフィルタリング又はフィルタリングなし)を適用する。そうでない場合(両方のブロックの予測モードがインター予測である場合(図20には示されていない))、エンコーダ又はデコーダは、デブロックフィルタリングの第4のアプローチ(例えば、ゼロでない変換係数レベルの有無、参照インデックス値、及び動きベクトル値に応じて適度なフィルタリング又はフィルタリングなし)を適用する。全てのアプローチに関して、これらのフィルタリングは、量子化パラメータ値又は他の考慮事項に応じて、さらに調整され得る。
図21は、イントラBC予測モードを有するブロックに関するループ内デブロックフィルタリングのための技術(2100)を示している。図3又は図5a〜図5bを参照して説明したもの等のエンコーダは、技術(2100)を実行することができる。あるいは、図4又は図6を参照して説明したもの等のデコーダは、技術(2100)を実行することができる。
エンコーダ又はデコーダは、イントラBC予測の予測モードを有する少なくともいくつかのブロックを含むピクチャの第1のブロック及び第2のブロックを再構成する(2110)。
エンコーダ又はデコーダは、第1のブロックと第2のブロックとの間の境界にわたるループ内デブロックフィルタリングを実行する。ループ内デブロックフィルタリングの一部として、エンコーダ又はデコーダは、第1のブロック及び第2のブロックの各々の予測モードを決定し(2120)、予測モードに少なくとも部分的に応じた、デブロックフィルタリングのアプローチを使用する(2130)。詳細には、第1のブロック及び第2のブロックの両方の予測モードが、イントラBC予測である場合、エンコーダ又はデコーダは、第1のブロック及び第2のブロックそれぞれのBVの値に少なくとも部分的に基づいて、ループ内デブロックフィルタリングを調整する。
エンコーダ又はデコーダは、ピクチャ内の他のブロック境界に対して、技術(2100)を繰り返すことができる。
イントラBC予測に対するデブロックフィルタリング(及びSAOフィルタリング等のループ内オペレーション)のタイミングに関して、いくつかの実装において、イントラBC予測オペレーションは、ピクチャの前の部分に関して適用されるべきいずれのデブロックフィルタリングオペレーション及びSAOフィルタリングオペレーションよりも先行する。例えば、イントラBC予測オペレーションは、これらのフィルタリングプロセスの適用の前に、サンプル値の記憶されているコピーを使用することができる。これは、フィルタリングプロセスをイントラBC予測プロセスと同期させる必要性をなくす。これはまた、フィルタリングが、スライス、タイル等の外にあるサンプル値(又は、制約付きイントラ予測が有効にされている場合には、インター符号化ブロック内にあるサンプル値)を使用するときに、そのようなサンプル値への間接的な依存を防ぐ。
代替的に、イントラBC予測オペレーションは、ピクチャの前の部分に関して適用されるべきいずれのデブロックフィルタリングオペレーション及びSAOフィルタリングオペレーションの後に続いてもよい。これは、フィルタリングオペレーションと予測オペレーションとの同期を要し得るものであり、別のスライス、タイル等の中のサンプル値への依存をもたらし得る。一方、イントラBC予測のためにフィルタリングされたサンプル値を使用することは、レート−歪み性能の観点で効果的な圧縮を提供し得る。
G.イントラBC予測の特徴群を組み合わせた例示的な実装
前述したように、イントラBC予測の先の特徴は、別々に個々に使用され得る。あるいは、イントラBC予測の先の特徴は、組み合わせて使用されてもよい。
例えば、HEVCシンタックスに一般に従う1つの組合せ実装において、BV値は、PU(CU又はCUの一部であり得る)に関してシグナリングされる。PUは、1以上のTUを含み得る。イントラBC予測プロセスは、PUに関してシグナリングされるBV値を用いて、TBのレベルで、TBごとに動作する(全てのTBが同じBV値を使用し、現TBのためのイントラBC予測は、同じCU内の他の以前のTBの再構成されたサンプル値を使用することができる)。BV値は、1以上の隣接PUのBV値を用いて予測され得る。BV予測が使用されるか否かにかかわらず、BV値(又はBV差値)が、許容可能なBV値を考慮する形で、符号化され得る(例えば、水平方向/水平方向の許容される値を考慮することにより、又は、BV値を符号化するときにモジュロラッピングを使用することにより)。BV値の選択は、(a)エンコーダが、まだ符号化/再構成されていない領域内差に存在するサンプル値を参照させるであろうBV値を選択するのを禁止するように(すなわち、現TBのためのイントラ予測領域のサンプル値は、復号/ビットストリーム順で現TBよりも先行する他のTBによりカバーされる領域内に存在しなければならない;すなわち、所与のTBに関して、BV値は、そのTB外にある領域を参照すると制約される);(b)デコーダにおいて必要なメモリ容量を低減させるように(例えば、BV値に従った参照を、現CTB内及び現CTBの左の1つ又は2つのCTB内に制約することにより);(c)BV値に従った参照が、現スライス外、現タイル外、又は現ピクチャ外になるのを禁止するように;(d)制約付きイントラ予測が有効にされているときには、エンコーダが、ピクチャ間予測を用いたサンプル値を参照するであろうBV値を使用するのを禁止するように;制約される。
開示した本発明の原理を適用することができる多くの可能な実施形態の観点から、例示した実施形態は、本発明の好ましい例に過ぎないことを認識すべきであり、本発明の範囲を限定するものとして解釈すべきではない。むしろ、本発明の範囲は、請求項により定められる。したがって、我々は、請求項の範囲及び主旨に含まれる全てを、我々の発明として特許請求する。

Claims (7)

  1. コンピューティングデバイスにおける方法であって、
    ピクチャの第1のブロック及び第2のブロックを再構成するステップであって、前記ピクチャは、イントラブロックコピー予測を用いて符号化されている少なくともいくつかのブロックを含む、ステップと、
    前記第1のブロックと前記第2のブロックとの間の境界にわたるループ内デブロックフィルタリングを実行するステップであって、前記第1のブロック及び前記第2のブロックは、イントラブロックコピー予測を用いて符号化されており、前記ループ内デブロックフィルタリングを前記実行することは、前記第1のブロック及び前記第2のブロックそれぞれのブロックベクトルの値に基づいて、前記ループ内デブロックフィルタリングを調整することを含む、ステップと、
    を含み、
    前記ループ内デブロックフィルタリングを前記調整することは、フィルタリング強度値を割り当てることを含み、
    前記の割り当てられるフィルタリング強度値は、
    前記第1のブロック及び前記第2のブロックの前記ブロックベクトルの値が等しくない場合、又は
    前記第1のブロック及び前記第2のブロックのいずれかのブロックベクトル成分間の差が、閾量よりも大きい場合には、
    適度なフィルタリングを指示する、方法。
  2. 前記ピクチャを受信するステップと、
    前記ピクチャを符号化して、前記ピクチャの符号化データを生成するステップであって、前記ピクチャを前記符号化することは、前記再構成することと、ループ内デブロックフィルタリングを前記実行することと、を含む、ステップと、
    ビットストリームの一部として、前記ピクチャの前記符号化データを出力するステップと、
    をさらに含む、請求項1記載の方法。
  3. ビットストリームの一部として、前記ピクチャの符号化データを受信するステップと、
    前記符号化データを復号して、前記ピクチャを再構成するステップであって、前記復号することは、前記再構成することと、ループ内デブロックフィルタリングを前記実行することと、を含む、ステップと、
    をさらに含む、請求項1記載の方法。
  4. 前記閾量は1サンプルである、請求項記載の方法。
  5. コンピューティングデバイスに請求項1乃至4いずれか一項記載の方法を実行させるプログラム。
  6. 請求項5記載のプログラムを記憶している記憶媒体。
  7. ピクチャの第1のブロック及び第2のブロックを再構成する手段であって、前記ピクチャは、イントラブロックコピー予測を用いて符号化されている少なくともいくつかのブロックを含む、手段と、
    前記第1のブロックと前記第2のブロックとの間の境界にわたるループ内デブロックフィルタリングを実行する手段であって、前記第1のブロック及び前記第2のブロックは、イントラブロックコピー予測を用いて符号化されており、前記ループ内デブロックフィルタリングを前記実行することは、前記第1のブロック及び前記第2のブロックそれぞれのブロックベクトルの値に基づいて、前記ループ内デブロックフィルタリングを調整することを含む、手段と、
    を備え、
    前記ループ内デブロックフィルタリングを前記調整することは、フィルタリング強度値を割り当てることを含み、
    前記の割り当てられるフィルタリング強度値は、
    前記第1のブロック及び前記第2のブロックの前記ブロックベクトルの値が等しくない場合、又は
    前記第1のブロック及び前記第2のブロックのいずれかのブロックベクトル成分間の差が、閾量よりも大きい場合には、
    適度なフィルタリングを指示する、コンピューティングデバイス。
JP2016522798A 2013-10-14 2013-10-14 ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴 Active JP6359101B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/085165 WO2015054811A1 (en) 2013-10-14 2013-10-14 Features of intra block copy prediction mode for video and image coding and decoding

Publications (2)

Publication Number Publication Date
JP2016539542A JP2016539542A (ja) 2016-12-15
JP6359101B2 true JP6359101B2 (ja) 2018-07-18

Family

ID=52827518

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016522798A Active JP6359101B2 (ja) 2013-10-14 2013-10-14 ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴

Country Status (11)

Country Link
US (3) US10582213B2 (ja)
EP (1) EP3058739B1 (ja)
JP (1) JP6359101B2 (ja)
KR (2) KR102257269B1 (ja)
CN (1) CN105765974B (ja)
AU (1) AU2013403224B2 (ja)
BR (1) BR112016007151A2 (ja)
CA (2) CA2928495C (ja)
MX (1) MX373811B (ja)
RU (1) RU2654129C2 (ja)
WO (1) WO2015054811A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11140400B2 (en) 2015-06-05 2021-10-05 Sony Corporation Image processing apparatus and image processing method for intra BC prediction

Families Citing this family (122)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6359101B2 (ja) 2013-10-14 2018-07-18 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴
CN105659602B (zh) 2013-10-14 2019-10-08 微软技术许可有限责任公司 用于视频和图像编码的帧内块复制预测模式的编码器侧选项
CA2925183C (en) 2013-10-14 2020-03-10 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
WO2015078304A1 (en) * 2013-11-27 2015-06-04 Mediatek Singapore Pte. Ltd. Method of video coding using prediction based on intra picture block copy
CN104683805B (zh) * 2013-11-30 2019-09-17 同济大学 图像编码、解码方法及装置
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
BR112016015080A2 (pt) 2014-01-03 2017-08-08 Microsoft Technology Licensing Llc Predição de vetor de bloco em codificação / decodificação de vídeo e imagem
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
KR102319384B1 (ko) * 2014-03-31 2021-10-29 인텔렉추얼디스커버리 주식회사 템플릿 매칭 기반의 화면 내 픽쳐 부호화 및 복호화 방법 및 장치
AU2014202921B2 (en) * 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
US10785486B2 (en) 2014-06-19 2020-09-22 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
US9948949B2 (en) * 2014-06-20 2018-04-17 Qualcomm Incorporated Intra block copy block vector signaling for video coding
KR101961384B1 (ko) 2014-07-07 2019-03-25 에이치에프아이 이노베이션 인크. 인트라 블록 카피 검색 및 보상 범위의 방법
US10743034B2 (en) * 2014-09-15 2020-08-11 Hfi Innovation Inc. Method of deblocking for intra block copy in video coding
CN105874795B (zh) 2014-09-30 2019-11-29 微软技术许可有限责任公司 在波前并行处理被启用时对图片内预测模式的规则
US9955185B2 (en) * 2015-02-12 2018-04-24 Mediatek Inc. Method and apparatus of constrained intra block copy for coding video
CN111818340B (zh) 2015-05-29 2022-05-13 寰发股份有限公司 一种管理解码图像缓存器并解码视频比特流的方法及装置
EP3295660A4 (en) * 2015-06-03 2019-05-29 MediaTek Inc. METHOD FOR PALLET CODING OF IMAGE AND VIDEO DATA
EP3304907B1 (en) 2015-06-08 2022-03-23 VID SCALE, Inc. Intra block copy mode for screen content coding
GB2539211A (en) * 2015-06-08 2016-12-14 Canon Kk Enhanced coding and decoding using intra block copy mode
US10659783B2 (en) 2015-06-09 2020-05-19 Microsoft Technology Licensing, Llc Robust encoding/decoding of escape-coded pixels in palette mode
US10091506B2 (en) * 2015-06-11 2018-10-02 Sony Corporation Data-charge phase data compression architecture
CN115134609B (zh) * 2015-06-11 2025-02-21 杜比实验室特许公司 使用自适应去块滤波编码和解码图像的方法及其装置
US10027968B2 (en) * 2015-06-12 2018-07-17 Sony Corporation Data-charge phase data compression tool
EP3342165B1 (en) * 2015-09-08 2021-11-10 MediaTek Inc. Method and system of decoded picture buffer for intra block copy mode
WO2017137312A1 (en) * 2016-02-12 2017-08-17 Thomson, Licensing A method and device for intra-predictive encoding/decoding a coding unit comprising picture data, said intra-predictive encoding depending on a prediction tree and a transform tree
CA3025490A1 (en) * 2016-05-28 2017-12-07 Mediatek Inc. Method and apparatus of current picture referencing for video coding using affine motion compensation
KR101974261B1 (ko) 2016-06-24 2019-04-30 한국과학기술원 Cnn 기반 인루프 필터를 포함하는 부호화 방법과 장치 및 복호화 방법과 장치
WO2017222140A1 (ko) * 2016-06-24 2017-12-28 한국과학기술원 Cnn 기반 인루프 필터를 포함하는 부호화 방법과 장치 및 복호화 방법과 장치
WO2018051811A1 (ja) 2016-09-16 2018-03-22 ソニー株式会社 画像処理装置および画像処理方法
KR20230070062A (ko) * 2016-10-04 2023-05-19 주식회사 비원영상기술연구소 영상 데이터 부호화/복호화 방법 및 장치
CA3048242C (en) 2016-12-28 2023-10-31 Arris Enterprises Llc Improved video bitstream coding
US10924735B2 (en) 2016-12-28 2021-02-16 Sony Corporation Image processing apparatus and image processing method
WO2018134363A1 (en) * 2017-01-19 2018-07-26 Telefonaktiebolaget Lm Ericsson (Publ) Filter apparatus and methods
WO2019009129A1 (ja) 2017-07-03 2019-01-10 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
US10674159B2 (en) 2017-07-28 2020-06-02 Microsoft Technology Licensing, Llc Effective intra encoding for screen data
EP3451665A1 (en) * 2017-09-01 2019-03-06 Thomson Licensing Refinement of internal sub-blocks of a coding unit
EP3487177A1 (en) * 2017-11-21 2019-05-22 Thomson Licensing Method and apparatus for low-complexity bi-directional intra prediction in video encoding and decoding
US10986349B2 (en) * 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
US10873765B2 (en) * 2018-03-29 2020-12-22 Apple Inc. Techniques for high efficiency entropy coding of video data
WO2020005031A1 (ko) * 2018-06-28 2020-01-02 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN110933411B (zh) 2018-09-19 2023-12-12 北京字节跳动网络技术有限公司 用于帧内编码的邻近的相邻块的选择
US11172236B2 (en) 2018-09-21 2021-11-09 Tencent America LLC Method and apparatus for video decoding that defines a search range for a reference block indicated by a block vector
FR3086487A1 (fr) * 2018-09-21 2020-03-27 Orange Procedes et dispositifs de codage et de decodage d'un flux de donnees representatif d'au moins une image.
US10848782B2 (en) * 2018-09-21 2020-11-24 Tencent America LLC Method and apparatus for video coding
GB2577336A (en) 2018-09-24 2020-03-25 Sony Corp Image data encoding and decoding
CN113068030B (zh) 2018-10-12 2023-01-03 Oppo广东移动通信有限公司 视频图像分量预测方法及装置、计算机存储介质
WO2020098695A1 (en) 2018-11-13 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Construction method for a single type motion candidate list
US10848763B2 (en) * 2018-11-14 2020-11-24 Tencent America LLC Method and apparatus for improved context design for prediction mode and coded block flag (CBF)
WO2020103936A1 (en) 2018-11-22 2020-05-28 Beijing Bytedance Network Technology Co., Ltd. Pruning method for inter prediction with geometry partition
CN113170106B (zh) * 2018-11-28 2024-12-13 北京字节跳动网络技术有限公司 帧内块复制模式中运动参考的扩展方法
CN117915083A (zh) 2018-11-29 2024-04-19 北京字节跳动网络技术有限公司 块内拷贝模式和帧间预测工具之间的交互
JP7384831B2 (ja) * 2018-11-30 2023-11-21 テンセント・アメリカ・エルエルシー ビデオ符号化及び復号のための方法、装置及びコンピュータプログラム
US11115652B2 (en) 2018-12-07 2021-09-07 Tencent America LLC Method and apparatus for further improved context design for prediction mode and coded block flag (CBF)
EP3896969B1 (en) * 2018-12-12 2024-11-13 Humax Co., Ltd. Video signal processing using current picture reference
JP7418152B2 (ja) * 2018-12-17 2024-01-19 キヤノン株式会社 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法
CN113170195B (zh) 2018-12-22 2024-09-03 北京字节跳动网络技术有限公司 具有双树分割的帧内块复制模式
CN113261290B (zh) 2018-12-28 2024-03-12 北京字节跳动网络技术有限公司 基于修改历史的运动预测
US11758132B2 (en) * 2018-12-28 2023-09-12 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder and decoder, encoding method and decoding method with complexity handling for flexibly sized picture partitions
US11019359B2 (en) * 2019-01-15 2021-05-25 Tencent America LLC Chroma deblock filters for intra picture block compensation
US10771799B2 (en) * 2019-01-15 2020-09-08 Tencent America LLC Method and apparatus for video coding
CN113366853B (zh) * 2019-02-02 2024-08-02 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的缓冲区初始化
WO2020156544A1 (en) 2019-02-02 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Buffer initialization for intra block copy in video coding
US11595662B2 (en) * 2019-02-06 2023-02-28 Tencent America LLC Method and apparatus for neighboring block availability in video coding
CN113424526A (zh) 2019-02-17 2021-09-21 北京字节跳动网络技术有限公司 帧内块复制模式的应用性的限制
WO2020171681A1 (ko) * 2019-02-19 2020-08-27 주식회사 윌러스표준기술연구소 인트라 예측 기반 비디오 신호 처리 방법 및 장치
CN113519158B (zh) 2019-03-01 2024-06-18 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的块矢量表示
CN117395439A (zh) 2019-03-01 2024-01-12 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的基于方向的预测
CN113519164A (zh) 2019-03-02 2021-10-19 北京字节跳动网络技术有限公司 对分割结构的限制
CN117640927A (zh) 2019-03-04 2024-03-01 北京字节跳动网络技术有限公司 视频编解码中的帧内块复制中的实施方式方面
CN114666602B (zh) * 2019-03-09 2024-06-14 腾讯美国有限责任公司 视频编解码方法、装置及介质
CN118018720A (zh) * 2019-03-14 2024-05-10 Sk电信有限公司 视频编码和解码设备以及传输比特流的设备
US11240516B2 (en) 2019-03-20 2022-02-01 Tencent America LLC Coding mode signaling for small blocks
AU2020256658A1 (en) 2019-04-12 2021-10-28 Beijing Bytedance Network Technology Co., Ltd. Most probable mode list construction for matrix-based intra prediction
WO2020211769A1 (en) 2019-04-15 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Clipping parameter derivation in adaptive loop filter
CN117499679A (zh) 2019-04-16 2024-02-02 北京字节跳动网络技术有限公司 用于视频编解码的自适应环路滤波
WO2020211807A1 (en) * 2019-04-16 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Matrix derivation in intra coding mode
CN113711604B (zh) 2019-04-20 2023-10-27 北京字节跳动网络技术有限公司 视频编解码中色度和亮度语法元素的信令
CN113728640B (zh) 2019-04-23 2024-08-02 北京字节跳动网络技术有限公司 帧内预测和残差编解码
WO2020224581A1 (en) 2019-05-05 2020-11-12 Beijing Bytedance Network Technology Co., Ltd. Chroma deblocking harmonization for video coding
CN117176969A (zh) 2019-05-11 2023-12-05 抖音视界有限公司 用于视频编解码的去方块滤波器
WO2020232355A1 (en) * 2019-05-16 2020-11-19 Bytedance Inc. Intra block copy for screen content coding
CN115567707A (zh) 2019-05-30 2023-01-03 抖音视界有限公司 色度分量的自适应环路滤波
EP3959876A4 (en) 2019-05-31 2022-06-29 Beijing Bytedance Network Technology Co., Ltd. Restricted upsampling process in matrix-based intra prediction
WO2020244610A1 (en) 2019-06-05 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Context determination for matrix-based intra prediction
CN113950838A (zh) 2019-06-06 2022-01-18 北京字节跳动网络技术有限公司 基于子块的帧内块复制
WO2020253650A1 (en) 2019-06-16 2020-12-24 Beijing Bytedance Network Technology Co., Ltd. Interaction between screen content coding tools and motion information
US11070816B2 (en) 2019-06-18 2021-07-20 Tencent America LLC Conversion of decoded block vector for intra picture block compensation
CN113411590B (zh) * 2019-06-21 2022-03-08 杭州海康威视数字技术股份有限公司 预测模式的解码、编码方法及装置
WO2020259426A1 (en) 2019-06-22 2020-12-30 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list construction for intra block copy mode
JP7354610B2 (ja) * 2019-06-25 2023-10-03 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム
US11146808B2 (en) 2019-06-27 2021-10-12 Tencent America LLC Method and apparatus for video coding
WO2020259677A1 (en) * 2019-06-28 2020-12-30 Beijing Bytedance Network Technology Co., Ltd. Validity checks for a block vectors for intra block copy in video coding
MX2022000102A (es) * 2019-07-06 2022-02-03 Beijing Bytedance Network Tech Co Ltd Bufer de prediccion virtual para la copia intra-bloque en codificacion de video.
CN114175633B (zh) 2019-07-10 2023-12-29 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的样点标识
CN117579816A (zh) 2019-07-11 2024-02-20 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的比特流一致性约束
WO2021013239A1 (en) 2019-07-25 2021-01-28 Beijing Bytedance Network Technology Co., Ltd. Size restriction for intra-block copy virtual buffer
KR20220036937A (ko) 2019-07-25 2022-03-23 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 블록 복사 가상 버퍼에 대한 매핑 제한
US11553197B2 (en) * 2019-08-05 2023-01-10 Tencent America LLC Method and apparatus for intra picture block compensation
EP4513870A2 (en) 2019-08-15 2025-02-26 Beijing Dajia Internet Information Technology Co., Ltd. Small chroma block size restriction in video coding
WO2021032113A1 (en) 2019-08-19 2021-02-25 Beijing Bytedance Network Technology Co., Ltd. Updating for counter-based intra prediction mode
JP7305878B2 (ja) 2019-08-23 2023-07-10 北京字節跳動網絡技術有限公司 コーディングブロック又はサブブロック境界でのデブロッキングフィルタリング
WO2021036985A1 (en) 2019-08-24 2021-03-04 Beijing Bytedance Network Technology Co., Ltd. Context adaptive coding of block vectors
CN114342410B (zh) * 2019-09-05 2025-03-21 北京字节跳动网络技术有限公司 帧内块复制模式下块矢量的范围约束
KR20220053580A (ko) 2019-09-09 2022-04-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인트라 블록 복제 코딩 및 디코딩
WO2021051044A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter offset for chroma deblocking filtering
WO2021052495A1 (en) 2019-09-20 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Adaptive resolution change and scalable coding for screen contents
KR102735189B1 (ko) 2019-09-23 2024-11-28 두인 비전 컴퍼니 리미티드 가상 파이프라인 데이터 유닛에 기초한 인트라 블록 복사 가상 버퍼의 설정
MX2021011036A (es) 2019-09-24 2021-10-13 Guangdong Oppo Mobile Telecommunications Corp Ltd Procedimientos de determinacion del valor de prediccion, codificador, decodificador y medio de almacenamiento informatico.
WO2021072177A1 (en) 2019-10-09 2021-04-15 Bytedance Inc. Cross-component adaptive loop filtering in video coding
CN117528080A (zh) 2019-10-14 2024-02-06 字节跳动有限公司 视频处理中色度残差的联合编解码与滤波
WO2021091255A1 (ko) * 2019-11-05 2021-05-14 엘지전자 주식회사 영상/비디오 코딩을 위한 상위 레벨 신택스 시그널링 방법 및 장치
EP4055827A4 (en) 2019-12-09 2023-01-18 ByteDance Inc. USE OF QUANTIZATION GROUPS IN VIDEO CODING
CN114902657A (zh) 2019-12-31 2022-08-12 字节跳动有限公司 视频编解码中的自适应颜色变换
CN113411584A (zh) * 2020-03-17 2021-09-17 北京三星通信技术研究有限公司 视频编解码的方法和装置
WO2021185306A1 (en) 2020-03-18 2021-09-23 Beijing Bytedance Network Technology Co., Ltd. Intra block copy buffer and palette predictor update
US11743507B2 (en) 2020-12-16 2023-08-29 Tencent America LLC Method and apparatus for video filtering
US12120290B2 (en) 2021-09-17 2024-10-15 Tencent America LLC Method and apparatus for intra block copy mode coding with search range switching
US20220094984A1 (en) * 2021-12-06 2022-03-24 Atthar Mohammed Unrestricted intra content to improve video quality of real-time encoding
US11849129B2 (en) * 2022-03-18 2023-12-19 Qualcomm Incorporated Intra-block copy decoding using dynamic re-mapping of on-chip memory
WO2024209028A1 (en) * 2023-04-07 2024-10-10 Interdigital Ce Patent Holdings, Sas Padding of non-available intra samples in block-vector-based intra prediction

Family Cites Families (263)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2114404B (en) 1982-01-28 1986-07-02 British Broadcasting Corp Generating a colour video signal representative of a stored picture
JPH087553B2 (ja) 1988-10-27 1996-01-29 インターナショナル・ビジネス・マシーンズ・コーポレーション 色画像量子化方法及び装置
US5706290A (en) 1994-12-15 1998-01-06 Shaw; Venson Method and apparatus including system architecture for multimedia communication
US6389162B2 (en) 1996-02-15 2002-05-14 Canon Kabushiki Kaisha Image processing apparatus and method and medium
JPH10262258A (ja) 1997-03-19 1998-09-29 Sony Corp 画像符号化装置及び方法
JP2000102016A (ja) 1998-09-22 2000-04-07 Victor Co Of Japan Ltd 動き補償予測回路
JP2001251507A (ja) 2000-03-03 2001-09-14 Fujitsu Ltd 画像処理装置
US6701012B1 (en) 2000-07-24 2004-03-02 Sharp Laboratories Of America, Inc. Out-of-layer pixel generation for a decomposed-image layer
US6748116B1 (en) 2000-08-22 2004-06-08 Airzip, Inc. Apparatus and method for compressing and decompressing image files
DE10049571C1 (de) 2000-10-06 2002-06-13 Siemens Ag Verfahren und Anordnung zum Übertragen eines Vektors
US7023924B1 (en) 2000-12-28 2006-04-04 Emc Corporation Method of pausing an MPEG coded video stream
US6853755B2 (en) 2001-03-28 2005-02-08 Sharp Laboratories Of America, Inc. Method and apparatus for adaptive compression of scanned documents
US7031540B2 (en) 2001-09-12 2006-04-18 Mobitv, Inc. Transformation to increase the lempel-ziv compressibility of images with minimal visual distortion
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
US7120196B2 (en) 2002-04-29 2006-10-10 Ess Technology, Inc. Intra-prediction using intra-macroblock motion compensation
RU2314656C2 (ru) 2002-06-11 2008-01-10 Нокиа Корпорейшн Внутреннее кодирование, основанное на пространственном прогнозировании
US7289674B2 (en) 2002-06-11 2007-10-30 Nokia Corporation Spatial prediction based intra coding
US7016547B1 (en) 2002-06-28 2006-03-21 Microsoft Corporation Adaptive entropy encoding/decoding for screen capture content
US20060051068A1 (en) * 2003-01-10 2006-03-09 Thomson Licensing S.A. Decoder apparatus and method for smoothing artifacts created during error concealment
DE10301362B4 (de) 2003-01-16 2005-06-09 GEMAC-Gesellschaft für Mikroelektronikanwendung Chemnitz mbH Blockdatenkompressionssystem, bestehend aus einer Kompressionseinrichtung und einer Dekompressionseinrichtung, und Verfahren zur schnellen Blockdatenkompression mit Multi-Byte-Suche
US7373005B2 (en) 2003-04-10 2008-05-13 Micron Technology, Inc. Compression system for integrated sensor devices
US7609763B2 (en) * 2003-07-18 2009-10-27 Microsoft Corporation Advanced bi-directional predictive coding of video frames
JP5052891B2 (ja) 2003-08-26 2012-10-17 トムソン ライセンシング ハイブリッド・イントラ・インター符号化ブロックを符号化する方法及び装置
US7724827B2 (en) 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7317839B2 (en) 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
KR101044934B1 (ko) 2003-12-18 2011-06-28 삼성전자주식회사 움직임 벡터 추정방법 및 부호화 모드 결정방법
JP4591657B2 (ja) 2003-12-22 2010-12-01 キヤノン株式会社 動画像符号化装置及びその制御方法、プログラム
US8036271B2 (en) 2004-02-24 2011-10-11 Lsi Corporation Method and apparatus for determining a second picture for temporal direct-mode block prediction
JP4338654B2 (ja) 2004-03-18 2009-10-07 三洋電機株式会社 動きベクトル検出装置及び方法、及びその動きベクトル検出装置を利用可能な画像符号化装置
JP4418762B2 (ja) 2004-05-07 2010-02-24 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体
US8116374B2 (en) 2004-05-07 2012-02-14 Broadcom Corporation Method and system for generating a transform size syntax element for video decoding
KR100907847B1 (ko) 2004-07-20 2009-07-14 퀄컴 인코포레이티드 순간적 비디오 압축으로 이동 벡터 예측을 위한 방법 및장치
JP2006140683A (ja) 2004-11-11 2006-06-01 Canon Inc 画像符号化装置
JP2006140758A (ja) 2004-11-12 2006-06-01 Toshiba Corp 動画像符号化方法、動画像符号化装置および動画像符号化プログラム
US7720154B2 (en) 2004-11-12 2010-05-18 Industrial Technology Research Institute System and method for fast variable-size motion estimation
KR100679035B1 (ko) 2005-01-04 2007-02-06 삼성전자주식회사 인트라 bl 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
US20060274070A1 (en) 2005-04-19 2006-12-07 Herman Daniel L Techniques and workflows for computer graphics animation system
US20060282855A1 (en) 2005-05-05 2006-12-14 Digital Display Innovations, Llc Multiple remote display system
KR100716999B1 (ko) 2005-06-03 2007-05-10 삼성전자주식회사 영상의 대칭성을 이용한 인트라 예측 방법, 이를 이용한영상의 복호화, 부호화 방법 및 장치
KR101211665B1 (ko) 2005-08-12 2012-12-12 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
JP2007053561A (ja) 2005-08-17 2007-03-01 Matsushita Electric Ind Co Ltd 画像符号化装置および画像符号化方法
ATE425516T1 (de) 2005-08-19 2009-03-15 Ericsson Telefon Ab L M Texturkomprimierung auf der basis zweier farbtöne mit modifizierter helligkeit
US7986844B2 (en) 2005-11-22 2011-07-26 Intel Corporation Optimized video compression using hashing function
US7956930B2 (en) 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
US8792555B2 (en) 2006-01-31 2014-07-29 Qualcomm Incorporated Methods and systems for resizing multimedia content
CN101026761B (zh) 2006-02-17 2010-05-12 中国科学院自动化研究所 一种具有最小误差的快速变尺寸块匹配的运动估计方法
US7668382B2 (en) 2006-02-24 2010-02-23 Microsoft Corporation Block-based fast image compression
US7616816B2 (en) 2006-03-20 2009-11-10 Sarnoff Corporation System and method for mission-driven visual information retrieval and organization
CN101422047B (zh) 2006-04-14 2011-01-12 Nxp股份有限公司 图像边界处的运动估计方法及显示设备
WO2008004940A1 (en) 2006-07-07 2008-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Video data management
DE102007035204A1 (de) 2006-07-28 2008-02-07 Mediatek Inc. Videoverarbeitungs- und - betriebsvorrichtung
US8472527B2 (en) 2006-09-13 2013-06-25 Texas Instruments Incorporated Hierarchical motion estimation using original frame for sub-sampled reference
CN101518085A (zh) 2006-09-22 2009-08-26 汤姆森许可贸易公司 多通道视频编码和解码的方法及装置
FR2906433B1 (fr) 2006-09-22 2009-02-27 Canon Kk Procedes et dispositifs de codage et de decodage d'images, programme d'ordinateur les mettant en oeuvre et support d'informaton permettant de les mettre en oeuvre
US20080084924A1 (en) 2006-10-05 2008-04-10 Donald Martin Monro Matching pursuits basis selection design
US8218641B2 (en) 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture encoding using same-picture reference for pixel reconstruction
US8218640B2 (en) 2006-10-31 2012-07-10 Sony Computer Entertainment Inc. Picture decoding using same-picture reference for pixel reconstruction
JP2008154015A (ja) 2006-12-19 2008-07-03 Hitachi Ltd 復号化方法および符号化方法
US7907783B2 (en) 2007-01-24 2011-03-15 Samsung Electronics Co., Ltd. Apparatus and method of matching symbols in a text image coding and decoding system
CN100527842C (zh) 2007-01-26 2009-08-12 清华大学 基于背景的运动估计编码方法
US8472522B2 (en) 2007-02-23 2013-06-25 Nippon Telegraph And Telephone Corporation Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media which store the programs
US8160150B2 (en) 2007-04-10 2012-04-17 Texas Instruments Incorporated Method and system for rate distortion optimization
EP2145482A1 (en) 2007-04-19 2010-01-20 Thomson Licensing Adaptive reference picture data generation for intra prediction
US7903873B2 (en) 2007-09-13 2011-03-08 Microsoft Corporation Textual image coding
CN101420606A (zh) 2007-10-23 2009-04-29 青岛海信电器股份有限公司 图像处理方法和装置
JP2009147807A (ja) 2007-12-17 2009-07-02 Fujifilm Corp 画像処理装置
CN101232619B (zh) 2008-01-25 2011-05-11 浙江大学 嵌入帧内编码块的视频编码方法
TWI375472B (en) 2008-02-04 2012-10-21 Ind Tech Res Inst Intra prediction method for luma block of video
CN101552924B (zh) 2008-03-31 2011-08-03 深圳市融创天下科技发展有限公司 一种用于视频编码的空间预测方法
KR101655444B1 (ko) * 2008-04-11 2016-09-22 톰슨 라이센싱 변위된 인트라 예측과 템플릿 매칭을 위한 디블록 필터링
JP2009260473A (ja) 2008-04-14 2009-11-05 Canon Inc 色処理方法及び装置、プログラム、記録媒体
JP2010035137A (ja) 2008-07-01 2010-02-12 Sony Corp 画像処理装置および方法、並びにプログラム
US9445121B2 (en) 2008-08-04 2016-09-13 Dolby Laboratories Licensing Corporation Overlapped block disparity estimation and compensation architecture
US8213503B2 (en) 2008-09-05 2012-07-03 Microsoft Corporation Skip modes for inter-layer residual video coding and decoding
US8385404B2 (en) 2008-09-11 2013-02-26 Google Inc. System and method for video encoding using constructed reference frame
KR101306834B1 (ko) 2008-09-22 2013-09-10 에스케이텔레콤 주식회사 인트라 예측 모드의 예측 가능성을 이용한 영상 부호화/복호화 장치 및 방법
US8254704B2 (en) 2008-10-30 2012-08-28 Microsoft Corporation Remote computing platforms providing high-fidelity display and interactivity for clients
US8180165B2 (en) 2008-12-19 2012-05-15 Microsoft Corp. Accelerated screen codec
KR101359490B1 (ko) 2008-12-23 2014-02-10 에스케이 텔레콤주식회사 컬러 영상 부호화/복호화 방법 및 장치
TW201028018A (en) 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
CA2750735C (en) 2009-02-02 2018-09-18 Calgary Scientific Inc. Image data transmission
RU2420021C2 (ru) 2009-03-24 2011-05-27 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ сжатия изображений и видеопоследовательностей
EP2249571A1 (en) 2009-05-04 2010-11-10 Thomson Licensing SA Method and device for encoding an image frame comprising macroblocks
WO2010149554A1 (en) 2009-06-22 2010-12-29 Thomson Licensing Process for matching pursuit based coding of video data for a sequence of images
WO2011004598A1 (ja) 2009-07-10 2011-01-13 パナソニック株式会社 動画像符号化方法、装置、プログラム、および集積回路
CN101626512A (zh) 2009-08-11 2010-01-13 北京交通大学 一种基于相关性优化准则的多描述视频编码方法及装置
HUE034567T2 (en) 2009-10-01 2018-02-28 Sk Telecom Co Ltd Equipment for encoding an image using a split layer
CN102577392A (zh) 2009-10-20 2012-07-11 夏普株式会社 运动图像编码装置、运动图像解码装置以及数据结构
TWI566586B (zh) 2009-10-20 2017-01-11 湯姆生特許公司 一序列形象的現時區塊之寫碼方法和重建方法
JP5321426B2 (ja) 2009-11-26 2013-10-23 株式会社Jvcケンウッド 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法
KR101623124B1 (ko) 2009-12-03 2016-05-24 에스케이 텔레콤주식회사 비디오 인코딩 장치 및 그 인코딩 방법, 비디오 디코딩 장치 및 그 디코딩 방법, 및 거기에 이용되는 방향적 인트라 예측방법
CN102860006B (zh) 2010-02-05 2016-11-23 瑞典爱立信有限公司 管理预测运动向量候选
US20110194613A1 (en) 2010-02-11 2011-08-11 Qualcomm Incorporated Video coding with large macroblocks
JP5375676B2 (ja) 2010-03-04 2013-12-25 富士通株式会社 画像処理装置、画像処理方法、および画像処理プログラム
EP2553927B1 (fr) 2010-03-31 2018-11-28 Orange Procedes et dispositifs de codage et de decodage d'une sequence d'images mettant en oeuvre une prediction par compensation de mouvement avant, et programme d'ordinateur correspondant
KR101752418B1 (ko) 2010-04-09 2017-06-29 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US8619857B2 (en) 2010-04-09 2013-12-31 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
US8644375B2 (en) 2010-04-09 2014-02-04 Sharp Laboratories Of America, Inc. Methods and systems for intra prediction
CN105635737B (zh) 2010-04-09 2019-03-15 Lg电子株式会社 处理视频数据的方法和装置
US20110261880A1 (en) 2010-04-27 2011-10-27 Sony Corporation Boundary adaptive intra prediction for improving subjective video quality
KR20110123651A (ko) 2010-05-07 2011-11-15 한국전자통신연구원 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법
EP2583457A4 (en) 2010-06-21 2015-07-29 Thomson Licensing METHOD AND DEVICE FOR CODING AND DECODING IMAGE DATA
CN107105256A (zh) 2010-07-02 2017-08-29 数码士有限公司 用于帧内预测的解码图像的装置
KR101484281B1 (ko) 2010-07-09 2015-01-21 삼성전자주식회사 블록 병합을 이용한 비디오 부호화 방법 및 그 장치, 블록 병합을 이용한 비디오 복호화 방법 및 그 장치
EP2934009B1 (en) 2010-07-14 2017-07-12 Ntt Docomo, Inc. Low-complexity intra prediction for video coding
CN105163118B (zh) * 2010-07-20 2019-11-26 Sk电信有限公司 用于解码视频信号的解码方法
CN107071486B (zh) 2010-11-04 2020-10-30 Ge视频压缩有限责任公司 解码装置和方法、编码装置和方法、存储和传输图像方法
US8787459B2 (en) 2010-11-09 2014-07-22 Sony Computer Entertainment Inc. Video coding methods and apparatus
KR101756442B1 (ko) 2010-11-29 2017-07-11 에스케이텔레콤 주식회사 인트라예측모드의 중복성을 최소화하기 위한 영상 부호화/복호화 방법 및 장치
US8767835B2 (en) 2010-12-28 2014-07-01 Mitsubishi Electric Research Laboratories, Inc. Method for coding videos using dictionaries
US20120163457A1 (en) 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
KR101739579B1 (ko) 2011-01-04 2017-05-24 에스케이 텔레콤주식회사 코딩 유닛 단위 병렬 인트라예측을 이용한 부호화/복호화 방법 및 장치
US8913662B2 (en) 2011-01-06 2014-12-16 Qualcomm Incorporated Indicating intra-prediction mode selection for video coding using CABAC
KR20120080122A (ko) 2011-01-06 2012-07-16 삼성전자주식회사 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
CN106060563B (zh) 2011-01-07 2019-06-21 Lg电子株式会社 编码和解码图像信息的方法和使用该方法的装置
US8737480B2 (en) 2011-01-14 2014-05-27 Motorola Mobility Llc Joint spatial and temporal block merge mode for HEVC
US9066104B2 (en) 2011-01-14 2015-06-23 Google Inc. Spatial block merge mode
KR102222957B1 (ko) 2011-01-14 2021-03-04 지이 비디오 컴프레션, 엘엘씨 엔트로피 인코딩 및 디코딩 방식
US8755437B2 (en) 2011-03-17 2014-06-17 Mediatek Inc. Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate
KR101912059B1 (ko) 2011-01-19 2018-10-25 르네사스 일렉트로닉스 가부시키가이샤 화상 부호화 장치 및 화상 복호 장치
US9532066B2 (en) 2011-01-21 2016-12-27 Qualcomm Incorporated Motion vector prediction
US8548057B2 (en) 2011-01-25 2013-10-01 Microsoft Corporation Video coding redundancy reduction
US9319716B2 (en) 2011-01-27 2016-04-19 Qualcomm Incorporated Performing motion vector prediction for video coding
US9288501B2 (en) 2011-03-08 2016-03-15 Qualcomm Incorporated Motion vector predictors (MVPs) for bi-predictive inter mode in video coding
US9788019B2 (en) * 2011-03-09 2017-10-10 Hfi Innovation Inc. Method and apparatus of transform unit partition with reduced complexity
AU2011362447B2 (en) 2011-03-14 2015-09-24 Hfi Innovation Inc. Method and apparatus for deriving temporal motion vector prediction
PL2690870T3 (pl) 2011-03-21 2020-07-27 Lg Electronics Inc. Sposób wyboru predyktora wektora ruchu i urządzenie go stosujące
US8693547B2 (en) 2011-04-06 2014-04-08 Google Inc. Apparatus and method for coding using motion vector segmentation
TWI591621B (zh) 2011-04-21 2017-07-11 三星電子股份有限公司 線性預測編碼係數的量子化方法、聲音編碼方法、線性預測編碼係數的去量子化方法、聲音解碼方法以及記錄媒體
WO2012146320A1 (en) 2011-04-29 2012-11-01 Telefonaktiebolaget L M Ericsson (Publ) Encoder, decoder and methods thereof for texture compression
US20120281760A1 (en) 2011-05-04 2012-11-08 Hyung Joon Kim Iterative Grid-Pattern Motion Search
US8971416B2 (en) * 2011-05-05 2015-03-03 Vixs Systems, Inc Video decoder with vector processor and methods for use therewith
CN102137263B (zh) 2011-05-09 2013-07-03 松日数码发展(深圳)有限公司 基于cnm关键帧分类的分布式视频编码及解码方法
US20120294353A1 (en) 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
JPWO2012157443A1 (ja) 2011-05-16 2014-07-31 ソニー株式会社 画像処理装置、及び、画像処理方法
CN102238391B (zh) 2011-05-25 2016-12-07 深圳市云宙多媒体技术有限公司 一种预测编码方法、装置
JP5727873B2 (ja) 2011-06-10 2015-06-03 日本放送協会 動きベクトル検出装置、符号化装置、及びこれらのプログラム
CN103688533B (zh) 2011-06-20 2015-12-23 联发科技(新加坡)私人有限公司 可减少行存储器的色度帧内预测方法及装置
CN103621090B (zh) 2011-06-24 2017-09-15 寰发股份有限公司 移除运动向量预测子中冗余的方法与装置
AU2012277214B2 (en) * 2011-06-27 2016-05-05 Sun Patent Trust Decoding method, coding method, decoding apparatus, coding apparatus, and coding and decoding apparatus
US9060173B2 (en) * 2011-06-30 2015-06-16 Sharp Kabushiki Kaisha Context initialization based on decoder picture buffer
WO2013009896A1 (en) 2011-07-12 2013-01-17 Huawei Technologies Co. Ltd. Pixel-based intra prediction for coding in hevc
CN102223541B (zh) 2011-07-14 2013-07-03 北京工业大学 一种混合图像的编码方法
US9232237B2 (en) * 2011-08-05 2016-01-05 Texas Instruments Incorporated Block-based parallel deblocking filter in video coding
CN103748877B (zh) 2011-08-17 2017-05-10 联发科技(新加坡)私人有限公司 帧内预测方法和装置
KR101210892B1 (ko) 2011-08-29 2012-12-11 주식회사 아이벡스피티홀딩스 Amvp 모드에서의 예측 블록 생성 방법
US8804816B2 (en) 2011-08-30 2014-08-12 Microsoft Corporation Video encoding enhancements
US9578336B2 (en) 2011-08-31 2017-02-21 Texas Instruments Incorporated Hybrid video and graphics system with automatic content detection process, and other circuits, processes, and systems
US9451284B2 (en) 2011-10-10 2016-09-20 Qualcomm Incorporated Efficient signaling of reference picture sets
EP2769544A4 (en) 2011-10-21 2015-12-23 Nokia Technologies Oy VIDEO CODING METHOD AND DEVICE
GB2495990A (en) 2011-10-28 2013-05-01 Canon Kk Motion compensated image coding with omission of coding mode cost calculation for a motion predictor in a set.
US9484952B2 (en) 2011-11-03 2016-11-01 Qualcomm Incorporated Context state and probability initialization for context adaptive entropy coding
US10390046B2 (en) 2011-11-07 2019-08-20 Qualcomm Incorporated Coding significant coefficient information in transform skip mode
WO2013070960A2 (en) * 2011-11-08 2013-05-16 General Instrument Corporation Devices and methods for sample adaptive offset coding and/or signaling
EP3468184B1 (en) 2011-11-11 2022-07-27 GE Video Compression, LLC Effective wedgelet partition coding using prediction
US20130121417A1 (en) 2011-11-16 2013-05-16 Qualcomm Incorporated Constrained reference picture sets in wave front parallel processing of video data
WO2013072484A1 (en) 2011-11-18 2013-05-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Multi-view coding with efficient residual handling
US9883203B2 (en) 2011-11-18 2018-01-30 Qualcomm Incorporated Adaptive overlapped block motion compensation
CN103621097B (zh) 2011-11-25 2018-04-24 太阳专利托管公司 图像处理方法及图像处理装置
RU2493670C2 (ru) 2011-12-15 2013-09-20 Федеральное государственное автономное образовательное учреждение высшего профессионального образования "Национальный исследовательский университет "МИЭТ" Способ блочной межкадровой компенсации движения для видеокодеков
EP2795901A1 (en) 2011-12-20 2014-10-29 Motorola Mobility LLC Method and apparatus for efficient transform unit encoding
US9762904B2 (en) 2011-12-22 2017-09-12 Qualcomm Incorporated Performing motion vector prediction for video coding
US20130163664A1 (en) 2011-12-22 2013-06-27 Qualcomm Incorporated Unified partition mode table for intra-mode coding
US9900615B2 (en) 2011-12-28 2018-02-20 Microsoft Technology Licensing, Llc Representative motion information for temporal motion prediction in video encoding and decoding
WO2013102293A1 (en) 2012-01-04 2013-07-11 Mediatek Singapore Pte. Ltd. Improvements of luma-based chroma intra prediction
US9451252B2 (en) 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
US9749661B2 (en) 2012-01-18 2017-08-29 Qualcomm Incorporated Sub-streams for wavefront parallel processing in video coding
JP2013150173A (ja) 2012-01-19 2013-08-01 Sony Corp 画像処理装置および方法
US9210438B2 (en) 2012-01-20 2015-12-08 Sony Corporation Logical intra mode naming in HEVC video coding
CA3081964A1 (en) 2012-01-20 2013-07-25 Ge Video Compression, Llc Coding concept allowing parallel processing, transport demultiplexer and video bitstream
US20130188717A1 (en) 2012-01-20 2013-07-25 Qualcomm Incorporated Motion prediction in svc using partition mode without split flag
JP2013150215A (ja) 2012-01-20 2013-08-01 Fujitsu Ltd 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム
US10244246B2 (en) 2012-02-02 2019-03-26 Texas Instruments Incorporated Sub-pictures for pixel rate balancing on multi-core platforms
WO2013128010A2 (en) 2012-03-02 2013-09-06 Canon Kabushiki Kaisha Method and devices for encoding a sequence of images into a scalable video bit-stream, and decoding a corresponding scalable video bit-stream
US8737824B1 (en) 2012-03-09 2014-05-27 Google Inc. Adaptively encoding a media stream with compound prediction
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
JP2015515806A (ja) 2012-03-26 2015-05-28 ユークリッド・ディスカバリーズ・エルエルシーEuclid Discoveries,Llc コンテキストベースの映像符号化及び映像復号化
US20130258052A1 (en) 2012-03-28 2013-10-03 Qualcomm Incorporated Inter-view residual prediction in 3d video coding
US9838684B2 (en) 2012-04-11 2017-12-05 Qualcomm Incorporated Wavefront parallel processing for video coding
US20130272409A1 (en) 2012-04-12 2013-10-17 Qualcomm Incorporated Bandwidth reduction in video coding through applying the same reference index
US20150085932A1 (en) 2012-04-24 2015-03-26 Mediatek Inc. Method and apparatus of motion vector derivation for 3d video coding
GB2501535A (en) 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9521410B2 (en) 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
US9762903B2 (en) 2012-06-01 2017-09-12 Qualcomm Incorporated External pictures in video coding
CN102752595B (zh) 2012-06-29 2014-07-09 香港应用科技研究院有限公司 用于深度图编码和解码的混合型跳过模式
US9621905B2 (en) 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
US9602827B2 (en) 2012-07-02 2017-03-21 Qualcomm Incorporated Video parameter set including an offset syntax element
US9264713B2 (en) 2012-07-11 2016-02-16 Qualcomm Incorporated Rotation of prediction residual blocks in video coding with transform skipping
US9549182B2 (en) 2012-07-11 2017-01-17 Qualcomm Incorporated Repositioning of prediction residual blocks in video coding
US9467692B2 (en) 2012-08-31 2016-10-11 Qualcomm Incorporated Intra prediction improvements for scalable video coding
US20140071235A1 (en) 2012-09-13 2014-03-13 Qualcomm Incorporated Inter-view motion prediction for 3d video
EP2903269B1 (en) 2012-09-26 2019-01-02 Velos Media International Limited Image decoding method and image decoding apparatus
JPWO2014050948A1 (ja) 2012-09-28 2016-08-22 シャープ株式会社 画像復号装置、画像復号方法及び画像符号化装置
US9998755B2 (en) 2012-10-03 2018-06-12 Mediatek Inc. Method and apparatus for motion information inheritance in three-dimensional video coding
US9357214B2 (en) 2012-12-07 2016-05-31 Qualcomm Incorporated Advanced merge/skip mode and advanced motion vector prediction (AMVP) mode for 3D video
US9615090B2 (en) 2012-12-28 2017-04-04 Qualcomm Incorporated Parsing syntax elements in three-dimensional video coding
US9826244B2 (en) 2013-01-08 2017-11-21 Qualcomm Incorporated Device and method for scalable coding of video information based on high efficiency video coding
CN103067716B (zh) 2013-01-10 2016-06-29 华为技术有限公司 深度图像的编解码方法和编解码装置
US9800857B2 (en) 2013-03-08 2017-10-24 Qualcomm Incorporated Inter-view residual prediction in multi-view or 3-dimensional video coding
US9516306B2 (en) 2013-03-27 2016-12-06 Qualcomm Incorporated Depth coding modes signaling of depth data for 3D-HEVC
US10904551B2 (en) * 2013-04-05 2021-01-26 Texas Instruments Incorporated Video coding using intra block copy
CN103237226B (zh) 2013-04-07 2016-08-03 宁波大学 一种立体视频宏块丢失错误隐藏方法
WO2014166104A1 (en) 2013-04-12 2014-10-16 Mediatek Singapore Pte. Ltd. Removal of parsing dependency for illumination compensation
US11323747B2 (en) 2013-06-05 2022-05-03 Qualcomm Incorporated Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans
CN103281538B (zh) 2013-06-06 2016-01-13 上海交通大学 基于滚动哈希和块级别帧内预测的帧内编码方法
CN111800641B (zh) 2013-06-13 2023-08-25 上海天荷电子信息有限公司 同模式采用不同种类重构像素的图像编码解码方法和装置
US9300967B2 (en) 2013-06-19 2016-03-29 Apple Inc. Sample adaptive offset control
US10015515B2 (en) 2013-06-21 2018-07-03 Qualcomm Incorporated Intra prediction from a predictive block
GB2516422A (en) 2013-07-09 2015-01-28 Sony Corp Data encoding and decoding
US9558567B2 (en) 2013-07-12 2017-01-31 Qualcomm Incorporated Palette prediction in palette-based video coding
US20150016533A1 (en) 2013-07-12 2015-01-15 Qualcomm Incorporated Intra motion compensation extensions
US20150016516A1 (en) 2013-07-15 2015-01-15 Samsung Electronics Co., Ltd. Method for intra prediction improvements for oblique modes in video coding
EP3028466B1 (en) 2013-07-24 2022-01-26 Qualcomm Incorporated Simplified advanced motion prediction for 3d-hevc
CN112383781B (zh) 2013-08-16 2023-05-02 上海天荷电子信息有限公司 参考块的位置决定其重构阶段的块匹配编解码方法和装置
US9774879B2 (en) 2013-08-16 2017-09-26 Sony Corporation Intra-block copying enhancements for HEVC in-range-extension (RExt)
US10313682B2 (en) 2013-08-26 2019-06-04 Qualcomm Incorporated Determining regions when performing intra block copying
US9503715B2 (en) 2013-08-30 2016-11-22 Qualcomm Incorporated Constrained intra prediction in video coding
WO2015032350A1 (zh) 2013-09-07 2015-03-12 同济大学 一种使用块匹配的图像压缩方法和装置
US20150071357A1 (en) 2013-09-12 2015-03-12 Qualcomm Incorporated Partial intra block copying for video coding
AU2013228045A1 (en) 2013-09-13 2015-04-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
US10009629B2 (en) * 2013-10-11 2018-06-26 Sony Corporation Video coding system with search range and method of operation thereof
CA2925183C (en) 2013-10-14 2020-03-10 Microsoft Technology Licensing, Llc Features of base color index map mode for video and image coding and decoding
JP6359101B2 (ja) 2013-10-14 2018-07-18 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴
CN105659602B (zh) 2013-10-14 2019-10-08 微软技术许可有限责任公司 用于视频和图像编码的帧内块复制预测模式的编码器侧选项
US10291827B2 (en) 2013-11-22 2019-05-14 Futurewei Technologies, Inc. Advanced screen content coding solution
CN110336999B (zh) 2013-12-18 2021-09-03 寰发股份有限公司 利用调色板编码的编码视频数据区块的方法和装置
TWI536811B (zh) 2013-12-27 2016-06-01 財團法人工業技術研究院 影像處理方法與系統、解碼方法、編碼器與解碼器
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
BR112016015080A2 (pt) 2014-01-03 2017-08-08 Microsoft Technology Licensing Llc Predição de vetor de bloco em codificação / decodificação de vídeo e imagem
US9883197B2 (en) 2014-01-09 2018-01-30 Qualcomm Incorporated Intra prediction of chroma blocks using the same vector
US20150271515A1 (en) 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
GB2522844A (en) 2014-01-29 2015-08-12 Sony Corp Data encoding and decoding
US9699468B2 (en) 2014-02-10 2017-07-04 Microsoft Technology Licensing, Llc Adaptive screen and video coding scheme
KR101908205B1 (ko) 2014-02-21 2018-10-15 미디어텍 싱가폴 피티이. 엘티디. 인트라 화상 블록 카피에 기초한 예측을 이용하는 비디오 코딩 방법
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
AU2014385769B2 (en) 2014-03-04 2018-12-06 Microsoft Technology Licensing, Llc Block flipping and skip mode in intra block copy prediction
EP3114838B1 (en) 2014-03-04 2018-02-07 Microsoft Technology Licensing, LLC Hash table construction and availability checking for hash-based block matching
CN110233949B (zh) 2014-03-14 2021-07-30 寰发股份有限公司 调色板表初始化和管理的方法
KR101854066B1 (ko) 2014-03-17 2018-05-02 노키아 테크놀로지스 오와이 비디오 인코딩 및 디코딩을 위한 방법 및 기술 장비
US20150264348A1 (en) 2014-03-17 2015-09-17 Qualcomm Incorporated Dictionary coding of video content
US10477232B2 (en) 2014-03-21 2019-11-12 Qualcomm Incorporated Search region determination for intra block copy in video coding
US10432928B2 (en) 2014-03-21 2019-10-01 Qualcomm Incorporated Using a current picture as a reference for video coding
AU2014202682A1 (en) 2014-05-16 2015-12-03 Canon Kabushiki Kaisha Method, apparatus and system for copying a block of video samples
US11323733B2 (en) 2014-05-23 2022-05-03 Qualcomm Incorporated Predictor palette initialization in palette-based video coding
EP4033766A1 (en) 2014-06-19 2022-07-27 VID SCALE, Inc. Methods and systems for intra block copy coding with block vector derivation
US10785486B2 (en) 2014-06-19 2020-09-22 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
US9948949B2 (en) 2014-06-20 2018-04-17 Qualcomm Incorporated Intra block copy block vector signaling for video coding
US10477204B2 (en) 2014-06-20 2019-11-12 Sharp Kabushiki Kaisha Harmonized palette coding
KR101748620B1 (ko) 2014-06-20 2017-07-04 성균관대학교산학협력단 영상의 부호화/복호화 방법 및 이를 이용하는 장치
US20150381994A1 (en) 2014-06-27 2015-12-31 Futurewei Technologies, Inc. Advanced screen content coding with improved palette table and index map coding methods
US10412387B2 (en) 2014-08-22 2019-09-10 Qualcomm Incorporated Unified intra-block copy and inter-prediction
US10743034B2 (en) * 2014-09-15 2020-08-11 Hfi Innovation Inc. Method of deblocking for intra block copy in video coding
CN105874795B (zh) 2014-09-30 2019-11-29 微软技术许可有限责任公司 在波前并行处理被启用时对图片内预测模式的规则
US9832467B2 (en) * 2014-10-07 2017-11-28 Qualcomm Incorporated Deblock filtering for intra block copying
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
US10638140B2 (en) 2015-05-29 2020-04-28 Qualcomm Incorporated Slice level intra block copy and other video coding improvements
EP3342165B1 (en) * 2015-09-08 2021-11-10 MediaTek Inc. Method and system of decoded picture buffer for intra block copy mode
MX2018014492A (es) 2016-05-25 2019-08-12 Arris Entpr Llc Estructura de bloque de codificacion de jvet con particionamiento asimetrico.
JP2018032949A (ja) 2016-08-23 2018-03-01 キヤノン株式会社 動きベクトル検出装置およびその制御方法
US10817747B2 (en) 2019-03-14 2020-10-27 Ubicquia Iq Llc Homography through satellite image matching
JP7305879B2 (ja) 2019-08-23 2023-07-10 アップル インコーポレイテッド 映像信号の符号化/復号方法およびその装置
WO2021160168A1 (en) 2020-02-14 2021-08-19 Beijing Bytedance Network Technology Co., Ltd. Reference picture resampling activation in video coding

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11140400B2 (en) 2015-06-05 2021-10-05 Sony Corporation Image processing apparatus and image processing method for intra BC prediction

Also Published As

Publication number Publication date
RU2654129C2 (ru) 2018-05-16
CN105765974B (zh) 2019-07-02
JP2016539542A (ja) 2016-12-15
US11317113B2 (en) 2022-04-26
BR112016007151A2 (pt) 2017-09-12
KR20160072181A (ko) 2016-06-22
US12262045B2 (en) 2025-03-25
CA2928495A1 (en) 2015-04-23
US20160241868A1 (en) 2016-08-18
KR102257269B1 (ko) 2021-05-26
US20220201326A1 (en) 2022-06-23
EP3058739A1 (en) 2016-08-24
RU2016114182A (ru) 2017-10-18
EP3058739B1 (en) 2019-08-07
US20200177910A1 (en) 2020-06-04
CA2928495C (en) 2020-08-18
CA2924763A1 (en) 2015-04-23
MX2016004705A (es) 2016-07-18
US10582213B2 (en) 2020-03-03
WO2015054811A1 (en) 2015-04-23
EP3058739A4 (en) 2017-08-16
MX373811B (es) 2020-03-24
AU2013403224B2 (en) 2018-10-18
CN105765974A (zh) 2016-07-13
KR20200123268A (ko) 2020-10-28
AU2013403224A1 (en) 2016-03-31
KR102170169B1 (ko) 2020-10-26

Similar Documents

Publication Publication Date Title
US12262045B2 (en) Features of intra block copy prediction mode for video and image coding and decoding
US12244823B2 (en) Encoder-side options for intra block copy prediction mode for video and image coding
US12096024B2 (en) Features of base color index map mode for video and image coding and decoding
US20200092579A1 (en) Block vector prediction in video and image coding/decoding

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170808

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180404

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180522

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180619

R150 Certificate of patent or registration of utility model

Ref document number: 6359101

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250