[go: up one dir, main page]

JP2009502099A - スケーラブルビデオコーディングのための重み付け予測方法及び装置 - Google Patents

スケーラブルビデオコーディングのための重み付け予測方法及び装置 Download PDF

Info

Publication number
JP2009502099A
JP2009502099A JP2008522772A JP2008522772A JP2009502099A JP 2009502099 A JP2009502099 A JP 2009502099A JP 2008522772 A JP2008522772 A JP 2008522772A JP 2008522772 A JP2008522772 A JP 2008522772A JP 2009502099 A JP2009502099 A JP 2009502099A
Authority
JP
Japan
Prior art keywords
reference image
enhancement layer
lower layer
image
weighting parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008522772A
Other languages
English (en)
Other versions
JP5535479B2 (ja
Inventor
イン，ペン
ボイス，ジル，マクドナルド
パンディット，パーヴィン，ビバス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=36969701&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2009502099(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2009502099A publication Critical patent/JP2009502099A/ja
Application granted granted Critical
Publication of JP5535479B2 publication Critical patent/JP5535479B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

スケーラブルビデオエンコーダとデコーダ、及び対応するスケーラブルビデオ符号化方法及び復号方法を提供する。スケーラブルビデオエンコーダは、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを符号化するエンコーダ（１００）を有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。スケーラブルビデオデコーダは、画像の下位レイヤのブロックの復号に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを復号するデコーダ（２００）を有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。

Description

関連出願への相互参照
この出願は米国仮出願第６０／７０１，４６４号（２００５年７月２１日出願、発明の名称「スケーラブルビデオコーディングのための重み付け予測方法及び装置」の利益を主張するもの、その出願をここに参照援用する。
本発明はビデオの符号化及び復号に関し、より具体的にはスケーラブルなビデオの符号化及び復号のための重み付け予測方法及び装置に関する。
ＩＳＯ／ＩＥＣ ＭＰＥＧ−４パート１０ＡＶＣ ／ ＩＴＵ−Ｔ Ｈ．２６４（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａｎｉｚａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ／Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｅｌｅｃｔｒｏｔｅｃｈｎｉｃａｌ Ｃｏｍｍｉｓｓｉｏｎ （ＩＳＯ／ＩＥＣ） Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ−４ （ＭＰＥＧ−４） Ｐａｒｔ １０ Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ （ＡＶＣ） ｓｔａｎｄａｒｄ／Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｕｎｉｏｎ， Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｅｃｔｏｒ （ＩＴＵ−Ｔ） Ｈ．２６４ ｓｔａｎｄａｒｄ）（以下、「ＭＰＥＧ４／Ｈ．２６４」、または単に「Ｈ．２６４」と呼ぶ）は重み付け予測（Ｗｅｉｇｈｔｅｄ Ｐｒｅｄｉｃｔｉｏｎ）（ＷＰ）を含む最初の国際的なビデオ符号化標準である。重み付け予測は符号化効率を向上するために使われている。スケーラブルビデオコーディング（ＳＶＣ）は、Ｈ．２６４の改正として開発されたものであり、これも重み付け予測を使っている。しかし、ＳＶＣ（ＳＶＣ ｓｔａｎｄａｒｄ）はベースレイヤの重みとエンハンスメントレイヤの重みとの間の関係を明示的には規定していない。
重み付け予測はＨ．２６４のメインプロファイル（Ｍａｉｎ ｐｒｏｆｉｌｅ）、エクステンデッドプロファイル（Ｅｘｔｅｎｄｅｄ ｐｒｏｆｉｌｅ）及びハイプロファイル（Ｈｉｇｈ ｐｒｏｆｉｌｅ）でサポートされている。ＷＰを使用していることは、ＰスライスとＳＰスライスのシーケンスパラメータセット（ｓｅｑｕｅｎｃｅ ｐａｒａｍｅｔｅｒ ｓｅｔ）でｗｅｉｇｈｔｅｄ＿ｐｒｅｄ＿ｆｌａｇフィールドを使用し、Ｂスライスのシーケンスパラメータセットでｗｅｉｇｈｔｉｎｇ＿ｂｉｐｒｅｄ＿ｉｄｃフィールドを使用していることに現れている。ＷＰモードには明示モードと黙示モードの２つがある。明示モード（ｅｘｐｌｉｃｉｔ ｍｏｄｅ）はＰ、ＳＰ及びＢのそれぞれのスライスでサポートされている。黙示モードはＢスライスのみでサポートされている。
各スライスの各カラー成分の各参照画像インデックス（ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ ｉｎｄｅｘ）には１つの重み係数（ｗｅｉｇｈｔｉｎｇ ｆａｃｔｏｒ）とオフセットとが付随している。明示モードでは、これらのＷＰパラメータは符号化されてスライスヘッダに入っている。黙示モードでは、これらのパラメータは現在画像（ｃｕｒｒｅｎｔ ｐｉｃｔｕｒｅ）と参照画像の相対距離に基づいて求められる。
各マクロブロックまたはマクロブロックパーティション（ｍａｃｒｏｂｌｏｃｋ ｐａｒｔｉｔｉｏｎ）に対して、適用される重み付けパラメータは、現在マクロブロックまたは現在マクロブロックパーティションの参照画像インデックス（二重予測（ｂｉ−ｐｒｅｄｉｃｔｉｏｎ）の場合は複数の参照画像インデックス）に基づく。参照画像インデックスは符号化されてビットストリームに入っているか、スキップされたマクロブロックまたは直接モードマクロブロックについて求められる。参照画像インデックスを使ってどの重み付けパラメータを適用するかを信号として伝えると、重み付けパラメータインデックスをビットストリーム中に入れるよりもビットレートの効率がよい。参照画像インデックスは要求されているその他のビットレートフィールドに基づき入手可能だからである。
スケーラビリティ（ｓｃａｌａｂｉｌｉｔｙ）を確保する多数の方法が研究されて標準化されている。これには、ＭＰＥＧ−２とＨ．２６４のスケーラビリティプロファイルにおけるＳＮＲスケーラビリティ、空間スケーラビリティ、時間スケーラビリティ、ファイングレイン（ｆｉｎｅ ｇｒａｉｎ）スケーラビリティがある。また、Ｈ．２６４の改正として現在開発が進められているものもある。
空間スケーラビリティ、時間スケーラビリティ及びＳＮＲスケーラビリティでは、レイヤ間予測が大規模に組み込まれている。マクロブロック内とマクロブロック間では、前のレイヤの対応する信号を用いて予測が行われる。さらに、各レイヤの動き記述（ｍｏｔｉｏｎ ｄｅｓｃｒｉｐｔｉｏｎ）を使用して後続のエンハンスメントレイヤの動き記述を予測することができる。これらの方法は３つのカテゴリーに分けられる：レイヤ間テクスチャ内予測（ｉｎｔｅｒ−ｌａｙｅｒ ｉｎｔｒａ ｔｅｘｔｕｒｅ ｐｒｅｄｉｃｔｉｏｎ）、レイヤ間動き予測、及びレイヤ間残余予測である。
ジョイントスケーラブルビデオモデル（Ｊｏｉｎｔ Ｓｃａｌａｂｌｅ Ｖｉｄｅｏ Ｍｏｄｅｌ）（ＪＳＶＭ）２．０では、エンハンスメントレイヤマクロブロックはダイアディック（ｄｙａｄｉｃ）（２レイヤ）空間スケーラビリティの場合に、「ＢＡＳＥ＿ＬＡＹＥＲ＿ＭＯＤＥ」または「ＱＰＥＬ＿ＲＥＦＩＮＥＭＥＮＴ＿ＭＯＤＥ」の何れかを用いてスケーリングされたベースレイヤ動きデータを用いたレイヤ間予測を利用することができる。レイヤ間動き予測を使用する時は、前の例やの対応する（サンプリングされていない）ＭＢの（参照画像インデックスとそれに付随する重み付けパラメータとを含む）動きベクトルを使用して動き予測する。エンハンスメントレイヤとその前のレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）値が異なる場合、同じ参照画像について相異なる重み付けパラメータのセットをエンハンスメントレイヤに格納する必要がある。
こうした先行技術の欠点や不利な点を、本発明は解消する。本発明はスケーラブルビデオ符号化及び復号のための重み付け予測方法及び装置に関する。
本発明の一態様によると、スケーラブルビデオデコーダが提供される。該スケーラブルビデオデコーダは、画像の下位レイヤのブロックの復号に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを復号するデコーダを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明の他の一態様によると、スケーラブルビデオ復号方法が提供される。該方法は、画像の下位レイヤのブロックの復号に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを復号する段階を有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明のさらに他の一態様によると、スケーラブルビデオ信号データが符号化された記憶媒体が提供される。該方法は、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用して生成された、画像のエンハンスメントレイヤに符号化されたブロックを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。
本発明の上記その他の態様、特徴、及び有利性は、添付した図面を参照して読むと、実施形態の詳細な説明から明らかとなるであろう。
本発明はスケーラブルビデオの符号化及び復号のための重み付け予測方法及び装置に関する。
本発明の原理により、エンハンスメントレイヤの重み付け予測をするためにベースレイヤの重み付けパラメータを再使用する方法と装置を開示する。有利にも、本原理の実施形態によりメモリを節約し、エンコーダとデコーダの両方が複雑になることを避けることができる。さらに、本原理の実施形態によりビットレートを非常に低くすることもできる。
本発明の原理を説明する。
言うまでもなく、当業者は、ここに明示的に説明または図示していなくても、本発明の原理を実施し、かつ本発明の精神と範囲内に含まれる様々な構成を工夫することができる。
ここに記載したすべての例と条件付きの言葉は、発明者が技術発展に対してなした本発明の原理とコンセプトとを、読者が理解しやすいようにするためのものであり、その解釈は具体的に記載した実施例や条件に限定されるべきではない。
さらに、本発明の原理、態様、実施形態、及びその実施例のすべての記載は、その構成的等価物及び機能的等価物の両方を含むものである。また、かかる等価物は、現在知られている等価物及び将来開発される等価物を含み、すなわち、構成にかかわらず同じ機能を発揮する開発されるすべての要素を含む。
よって、例えば、当業者には言うまでもなく、ここに説明したブロック図は本発明の原理を化体する回路を概念的に示すものである。同様に、言うまでもなく、フローチャート、フロー図、状態遷移図、擬似コード等は、様々な方法（ｐｒｏｃｅｓｓｅｓ）を表し、これらの方法をコンピュータ読み取り可能媒体に実質的に表しても、（明示的に示していようがいまいが）コンピュータやプロセッサで実行してもよい。
図示した様々な要素の機能は、専用ハードウェアを用いても、ソフトウェアを実行可能なハードウェアと適当なソフトウェアとを組み合わせても提供できる。プロセッサを設けるとき、機能を単一の専用プロセッサで提供してもよいし、共有された単一のプロセッサで提供してもよいし、一部が共有された複数の個別プロセッサで提供してもよい。さらに、「プロセッサ」または「コントローラ」という用語を明示的に使用した場合、ソフトウェアを実行できるハードウェアのみをいうと解釈してはならず、限定はされないが、デジタルシグナルプロセッサ（ＤＳＰ）、ソフトウェアを記憶するＲＯＭ、ＲＡＭ、不揮発性記憶装置を黙示的に含んでもよい。
その他のハードウェアを従来のものでもカスタムのものであっても含んでもよい。同様に、図面に示したスイッチは概念的なものである。スイッチの機能は、プログラムロジックの動作、専用ロジックの動作、プログラム制御や専用ロジックのインターラクション、またはマニュアルで実行されてもよく、具体的な方法は実施者が文脈から判断して選択できる。
請求項において、特定の機能を実行する手段として表した要素は、その機能を実行するいかなる方法も含み、例えば、ａ）その機能を実行する回路要素の組合せと、ｂ）ファームウェアやマイクロコード等を含む任意の形式のソフトウェア及びそれと組み合わせたその機能を実行する適当な回路とを含む。請求項に記載した発明は、記載した様々な手段が提供する機能を、請求項に記載したように組み合わせることにある。よって、これらの機能を提供できる手段はどれでも、ここに示したものと等化であると見なせる。
本発明の実施形態により、ベースレイヤの重み付けパラメータをエンハンスメントレイヤについて再使用する方法と装置を開示する。ベースレイヤはエンハンスメントレイヤをダウンサンプリングしたものなので、エンハンスメントレイヤとベースレイヤとが、同じ参照画像に対して同じ重み付けパラメータのセット（ｓｅｔ）を有していた方がよい。
また、本原理によるその他の利点／特徴もある。１つの利点／特徴は、各エンハンスメントレイヤについて１つの重み付けパラメータのセットのみを記憶すればよく、メモリの使用量を節約できる。また、レイヤ間動き予測を使用する場合、デコーダは重み付けパラメータのどちらのセットを使用するか知る必要がある。ルックアップテーブルを利用して必要な情報を格納してもよい。
他の利点／特徴として、エンコーダとデコーダの両方の複雑性を低くすることができる。デコーダにおいて、本原理の実施形態により、解析（ｐａｒｓｉｎｇ）と、正しい重み付けパラメータのセットを探すためにテーブルをルックアップする複雑性とを減らすことができる。エンコーダにおいて、本発明の実施形態により、相異なるアルゴリズムを使用して重み付けパラメータの推定をする複雑性を減らすことができる。更新ステップを使用し、予測重みを考慮すると、同じ参照画像インデックスに対して複数の重み付けパラメータを有することにより、デコーダにおける逆更新ステップにおける動き情報の導出と、エンコーダにおける更新ステップとが複雑になる。
さらに別の利点／特徴は、非常に低ビットレートにおいて、本原理の実施形態はコーディング効率が少し有利である。重み付けパラメータをエンハンスメントレイヤのスライスヘッダで明示的には送信しないからである。
図１を参照して、本発明を適用できるジョイントスケーラブルビデオモデルバージョン２．０（以下、「ＪＳＶＭ２．０」）のエンコーダを参照数字１００で示した。ＪＳＶＭ２．０エンコーダ１００は、３つの空間レイヤと動き補償時間フィルタリングとを使用する。ＪＳＶＭエンコーダ１００は、２次元（２Ｄ）デシメータ１０４と、２次元デシメータ１０６と、動き補償時間フィルタリング（ＭＣＴＦ）モジュール１０８とを有し、各ユニットはビデオ信号データ１０２を受け取る入力を有している。
２次元デシメータ１０６の出力はＭＣＴＦモジュール１１０の入力と接続され信号通信している。ＭＣＴＦモジュール１１０の第１の出力は動きコーダ１１２の入力と接続され信号通信しており、ＭＣＴＦモジュール１１０の第２の出力は予測モジュール１１６の入力と接続され信号通信している。動きコーダ１１２の第１の出力はマルチプレクサ１１４の第１の入力と接続され信号通信している。動きコーダ１１２の第２の出力は動きコーダ１２４の第１の入力と接続され信号通信している。予測モジュール１１６の第１の出力は空間変換器１１８の入力と接続され信号通信している。空間変換器１１８の出力はマルチプレクサ１１４の第２の入力と接続され信号通信している。予測モジュール１４６の第２の出力は補間器１２０の入力と接続され信号通信している。補間器１２０の出力は予測モジュール１２２の第１の入力と接続され信号通信している。予測モジュール１２２の第１の出力は空間変換器１２６の入力と接続され信号通信している。空間変換器１２６の出力はマルチプレクサ１１４の第２の入力と接続され信号通信している。予測モジュール１２２の第２の出力は補間器１３０の入力と接続され信号通信している。補間器１３０の出力は予測モジュール１３４の第１の入力と接続され信号通信している。予測モジュール１３４の出力は空間変換器１３６の入力と接続され信号通信している。空間変換器１２６の出力はマルチプレクサ１１４の第２の入力と接続され信号通信している。
２次元デシメータ１０４の出力はＭＣＴＦモジュール１２８の入力と接続され信号通信している。ＭＣＴＦモジュール１２８の第１の出力は動きコーダ１２４の第２の入力と接続され信号通信している。動きコーダ１２４の第１の出力はマルチプレクサ１１４の第１の入力と接続され信号通信している。動きコーダ１２４の第２の出力は動きコーダ１３２の第１の入力と接続され信号通信している。ＭＣＴＦモジュール１２８の第２の出力は予測モジュール１２２の第２の入力と接続され信号通信している。
ＭＣＴＦモジュール１０８の第１の出力は動きコーダ１３２の第２の入力と接続され信号通信している。動きコーダ１３２の出力はマルチプレクサ１１４の第１の入力と接続され信号通信している。ＭＣＴＦモジュール１０８の第２の出力は予測モジュール１３４の第２の入力と接続され信号通信している。マルチプレクサ１１４は出力ビットストリーム１３８を出力する。
各空間レイヤについて、動き補償時間分解（ｍｏｔｉｏｎ ｃｏｍｐｅｎｓａｔｅｄ ｔｅｍｐｏｒａｌ ｄｅｃｏｍｐｏｓｉｔｉｏｎ）を行う。この分解により時間的スケーラビリティが得られる。下位の空間レイヤからの動き情報を上位のレイヤの動きの予測に使用できる。テクスチャ符号化の場合、連続する空間レイヤ間の空間予測を適用して冗長性を除去する。イントラ予測（ｉｎｔｒａ ｐｒｅｄｉｃｔｉｏｎ）または動き補償インター予測（ｍｏｔｉｏｎ ｃｏｍｐｅｎｓａｔｅｄ ｉｎｔｅｒ ｐｒｅｄｉｃｔｉｏｎ）から得られる残余信号を変換コーディング（ｔｒａｎｓｆｏｒｍ ｃｏｄｅｄ）する。クオリティベースレイヤ残余（ｑｕａｌｉｔｙ ｂａｓｅ ｌａｙｅｒ ｒｅｓｉｄｕａｌ）により各空間レイヤにおいて最低限の再構成品質が得られる。レイヤ間予測を適用していなければ、このクオリティベースレイヤをＨ．２６４準拠ストリームに符号化できる。クオリティスケーラビリティのため、クオリティエンハンスメントレイヤもエンコードする。これらのエンハンスメントレイヤを選択して、粗いまたは細かいグレインクオリティ（ＳＮＲ）スケーラビリティのいずれかを提供することができる。
図２を参照して、本発明を適用できるスケーラブルビデオデコーダを参照数字２００で示した。デマルチプレクサ２０２の入力を、スケーラブルビットストリームを受信するスケーラブルビデオデコーダ２００の入力として使用する。デマルチプレクサ２０２の第１の出力は空間逆変換ＳＮＲスケーラブルエントロピデコーダ２０４の入力と接続され信号通信している。空間逆変換ＳＮＲスケーラブルエントロピデコーダ２０４の第１の出力は予測モジュール２０６の第１の入力と接続され信号通信している。予測モジュール２０６の出力は逆ＭＣＴＦモジュール２０８の第１の入力と接続され信号通信している。
空間逆変換ＳＮＲスケーラブルエントロピデコーダ２０４の第２の出力は動きベクトル（ＭＶ）デコーダ２１０の第１の入力と接続され信号通信している。ＭＶデコーダ２１０の出力は逆ＭＣＴＦモジュール２０８の第２の入力と接続され信号通信している。
デマルチプレクサ２０２の第２の出力は空間逆変換ＳＮＲスケーラブルエントロピデコーダ２１２の入力と接続され信号通信している。空間逆変換ＳＮＲスケーラブルエントロピデコーダ２１２の第１の出力は予測モジュール２１４の第１の入力と接続され信号通信している。予測モジュール２１４の第１の出力は補間器２１６の入力と接続され信号通信している。補間モジュール２１６の出力は予測モジュール２０６の第２の入力と接続され信号通信している。予測モジュール２１４の第２の出力は逆ＭＣＴＦモジュール２１８の第１の入力と接続され信号通信している。
空間逆変換ＳＮＲスケーラブルエントロピデコーダ２１２の第２の出力はＭＶデコーダ２２０の第１の入力と接続され信号通信している。ＭＶデコーダ２２０の第１の出力はＭＶデコーダ２１０の第２の入力と接続され信号通信している。ＭＶデコーダ２２０の第２の出力は逆ＭＣＴＦモジュール２１８の第２の入力と接続され信号通信している。
デマルチプレクサ２０２の第３の出力は空間逆変換ＳＮＲスケーラブルエントロピデコーダ２２２の入力と接続され信号通信している。空間逆変換ＳＮＲスケーラブルエントロピデコーダ２２２の第１の出力は予測モジュール２２４の入力と接続され信号通信している。予測モジュール２２４の第１の出力は補間モジュール２２６の入力と接続され信号通信している。補間モジュール２２６の出力は予測モジュール２１４の第２の入力と接続され信号通信している。
予測モジュール２２４の第２の出力は逆ＭＣＴＦモジュール２２８の第１の入力と接続され信号通信している。空間逆変換ＳＮＲスケーラブルエントロピデコーダ２２２の第２の出力はＭＶデコーダ２３０の入力と接続され信号通信している。ＭＶデコーダ２３０の第１の出力はＭＶデコーダ２２０の第２の入力と接続され信号通信している。ＭＶデコーダ２３０の第２の出力は逆ＭＣＴＦモジュール２２８の第２の入力と接続され信号通信している。
逆ＭＣＴＦモジュール２２８の出力は、レイヤ０信号を出力するために、デコーダ２００の出力として利用できる。逆ＭＣＴＦモジュール２１８の出力は、レイヤ１信号を出力するために、デコーダ２００の出力として利用できる。逆ＭＣＴＦモジュール２０８の出力は、レイヤ２信号を出力するために、デコーダ２００の出力として利用できる。
本原理による第１の実施形態では新しいシンタックス（ｓｙｎｔａｘ）は使用しない。この第１の実施形態では、エンハンスメントレイヤはベースレイヤの重み（ｗｅｉｇｈｔｓ）を再使用する。第１の実施形態は、例えば、プロファイル（ｐｒｏｆｉｌｅ）またはレベル制約（ｌｅｖｅｌ ｃｏｎｓｔｒａｉｎｔ）として実施してもよい。条件（ｒｅｑｕｉｒｅｍｅｎｔ）をシーケンスまたは画像パラメータセット中に示すこともできる。
本原理の第２の実施形態では、１つのシンタックスエレメントｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇを、表１に示したようにスケーラブル拡張のスライスヘッダシンタックスに導入したので、エンコーダは、スライスベースの重み付け予測にどのモードを使用するか、適応的に選択できる。ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇがなければ、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇは０であると推論する。ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇが１である時、これはエンハンスメントレイヤがその前のレイヤからのｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）を再使用することを示す。
表１はスケーラブルビデオコーディングの重み付け予測のためのシンタックスを示す。
Figure 2009502099
Figure 2009502099

Figure 2009502099
デコーダでは、エンハンスメントレイヤがベースレイヤからの重みを再使用するとき、ベースレイヤ（または前のレイヤ）から現在のエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）をリマッピング（ｒｅｍａｐｐｉｎｇ）する。このプロセスは次の場合に利用される：第１の場合として、ベースレイヤの参照画像インデックス（ｒｅｆｅｒｅｎｃｅ ｐｉｃｔｕｒｅ ｉｎｄｅｘ）とエンハンスメントレイヤの参照画像インデックスが示す参照画像が異なる場合、または、第２の場合として、エンハンスメントレイヤで使用される参照画像と対応する（ｃｏｒｒｅｓｐｏｎｄｉｎｇ ｍａｔｃｈ）参照画像がベースレイヤにはない場合。第１の場合には、画像順序カウント（ｐｉｃｔｕｒｅ ｏｒｄｅｒ ｃｏｕｎｔ、ＰＯＣ）を使用して、ベースレイヤからエンハンスメントレイヤの正しい参照画像インデックスへ重み付けパラメータをマッピング（ｍａｐ）する。ベースレイヤで複数の重み付けパラメータを使用する場合、参照画像インデックスが最小である重み付けパラメータを最初にマッピングすることが、必ずしも必要ではないが好ましい。第２の場合、エンハンスメントレイヤで使用できない参照画像については、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇが０に設定されていることは当然である。ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）をベースレイヤ（または前のレイヤ）から現在のエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）へのリマッピング（ｒｅｍａｐｐｉｎｇ）は次のように求められる。このプロセスはｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）の承継（ｉｎｈｅｒｉｔａｎｃｅ）プロセスと呼ぶ。特に、この承継プロセスは、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇが１の時に行われる。このプロセスにより出力されるのは次の通りである：
Figure 2009502099
 ベース画像の導出プロセスが行われ（ｉｎｖｏｋｅｄ）、ｂａｓｅＰｉｃが出力される。Ｘを０または１のいずれかで置き換えるとして、以下が適用される：
− ｂａｓｅ＿ｌｕｍａ＿ｗｅｉｇｈｔ＿ＬＸ［］をベース画像ｂａｓｅＰｉｃのシンタックス要素ｌｕｍａ＿ｗｅｉｇｈｔ＿ＬＸ［］の値にする。
− ｂａｓｅ＿ｌｕｍａ＿ｏｆｆｓｅｔ＿ＬＸ［］をベース画像ｂａｓｅＰｉｃのシンタックス要素ｌｕｍａ＿ｏｆｆｓｅｔ＿ＬＸ［］の値にする。
− ｂａｓｅ＿ｃｈｒｏｍａ＿ｗｅｉｇｈｔ＿ＬＸ［］をベース画像ｂａｓｅＰｉｃのシンタックス要素ｃｈｒｏｍａ＿ｗｅｉｇｈｔ＿ＬＸ［］の値にする。
− ｂａｓｅ＿ｃｈｒｏｍａ＿ｏｆｆｓｅｔ＿ＬＸ［］をベース画像ｂａｓｅＰｉｃのシンタックス要素ｃｈｒｏｍａ＿ｏｆｆｓｅｔ＿ＬＸ［］の値にする。
− ｂａｓｅ＿ｌｕｍａ＿ｌｏｇ２＿ｗｅｉｇｈｔ＿ｄｅｎｏｍをベース画像ｂａｓｅＰｉｃのシンタックス要素ｌｕｍａ＿ｌｏｇ２＿ｗｅｉｇｈｔ＿ｄｅｎｏｍの値にする。
− ｂａｓｅ＿ｃｈｒｏｍａ＿ｌｏｇ２＿ｗｅｉｇｈｔ＿ｄｅｎｏｍをベース画像ｂａｓｅＰｉｃのシンタックス要素ｃｈｒｏｍａ＿ｌｏｇ２＿ｗｅｉｇｈｔ＿ｄｅｎｏｍの値にする。
− ＢａｓｅＲｅｆＰｉｃＬｉｓｔＸをベース画像ｂａｓｅＰｉｃの参照インデックスリストＲｅｆＰｉｃＬｉｓｔＸにする。
− 現在のスライス参照インデックスリストＲｅｆＰｉｃＬｉｓｔＸ（０からｎｕｍ＿ｒｅｆ＿ｉｄｘ＿ＩＸ＿ａｃｔｉｖｅ＿ｍｉｎｕｓ１までのループ）の各参照インデックスｒｅｆＩｄｘＬＸについて、現在のスライス中の関連する重み付けパラメータを次のように承継する：
− ｒｅｆＰｉｃをｒｅｆＩｄｘＬＸが参照する画像にする、
− 次の条件がすべて真である画像があれば、対応するベースレイヤの参照画像ｒｅｆＰｉｃＢａｓｅがあるとみなす。
− 画像ｒｅｆＰｉｃＢａｓｅのシンタックス要素ｄｅｐｅｎｄｅｎｃｙ＿ｉｄが画像ｒｅｆＰｉｃの変数ＤｅｐｅｎｄｅｎｃｙＩｄＢａｓｅと等しい。
− 画像ｒｅｆＰｉｃＢａｓｅのシンタックス要素ｑｕａｌｉｔｙ＿ｌｅｖｅｌが画像ｒｅｆＰｉｃの変数ＱｕａｌｉｔｙＬｅｖｅｌＢａｓｅと等しい。
− 画像ｒｅｆＰｉｃＢａｓｅのシンタックス要素ｆｒａｇｍｅｎｔ＿ｏｒｄｅｒが画像ｒｅｆＰｉｃの変数ＦｒａｇｍｅｎｔＯｒｄｅｒＢａｓｅと等しい。
− ＰｉｃＯｒｄｅｒＣｎｔ（ｒｅｆＰｉｃ）の値がＰｉｃＯｒｄｅｒＣｎｔ（ｒｅｆＰｉｃＢａｓｅ）の値に等しい。
− ｒｅｆＰｉｃＢａｓｅを参照する対応ベースレイヤ参照インデックスリストＢａｓｅＲｅｆＰｉｃＬｉｓｔＸに、参照インデックスが最小値であるインデックスｂａｓｅＲｅｆＩｄｘＬＸがある。
− ｒｅｆＰｉｃＢａｓｅがあれば、次を適用する：
− プロセスの後続ステップではｂａｓｅＲｅｆＩｄｘＬＸを使用付加とマークする。
Figure 2009502099
 − そうでなければ、
Figure 2009502099
 以下は承継プロセスを実施する方法の一例である：
Figure 2009502099
 エンハンスメントレイヤ画像とベースレイヤ画像のスライスのパーティショニングが同じであるとき、ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）のベースレイヤ（または下位のレイヤ）から現在のエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）へのリマッピングはスライスベースで行える。しかし、エンハンスメントレイヤとベースレイヤのスライスのパーティショニング（ｐｅｒｔｉｔｉｏｎｉｎｇ）が異なるとき、ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）のベースレイヤ（または下位のレイヤ）から現在のエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）へのリマッピングはマクロブロックベースで行う必要がある。例えば、ベースレイヤとエンハンスメントレイヤが同一の２つのスライスパーティションを有するとき、承継プロセスをスライスごとに１回コールすることができる。対照的に、ベースレイヤが２つのパーティションを有し、エンハンスメントレイヤが３つのパーティションを有するとき、マクロブロックベースで承継プロセスをコールする。
図３を参照するに、重み付け予測を用いた画像ブロックのスケーラブルビデオ符号化方法の一例を参照数字３００で示した。
開始ブロック３０５において、現在のエンハンスメントレイヤ（ＥＬ）画像の符号化を開始し、判断ブロック３１０に進む。判断ブロック３１０において、ベースレイヤ（ＢＬ）画像が現在のＥＬ画像にあるかどうか判断する。あれば、機能ブロック３５０に進む。なければ、機能ブロック３１５に進む。
機能ブロック３１５において、ＢＬ画像からの重みを取得し、機能ブロック３２０に進む。機能ブロック３２０において、ＢＬのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）をエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にリマッピングし、機能ブロック３２５に進む（ｐａｓｓｅｓ ｃｏｎｔｒｏｌ）。機能ブロック３２５において、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇを真に設定し、機能ブロック３３０に進む。機能ブロック３３０において、取得した重み（ｗｅｉｇｈｔｓ）で参照画像を重み付けし、機能ブロック３３５に進む。機能ブロック３３５において、スライスヘッダにｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇを書き込み、判断ブロック３４０に進む。判断ブロック３４０において、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇが真（ｔｒｕｅ）かどうか判断する。真であれば、機能ブロック３４５に進む。真でなければ、機能ブロック３６０に進む。
機能ブロック３５０において、ＥＬ画像の重みを計算し、機能ブロック３５５に進む。機能ブロック３５５において、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇを偽（ｆａｌｓｅ）に設定し、機能ブロック３３０に進む。
機能ブロック３４５において、重み付けした参照画像を用いてＥＬ画像を符号化し、終了ブロック３６５に進む。
機能ブロック３６０において、スライスヘッダに重み（ｗｅｉｇｈｔｓ）を書き込み、判断ブロック３４５に進む。
図４を参照するに、重み付け予測を用いた画像ブロックのスケーラブルビデオ復号方法の一例を参照数字４００で示した。
開始ブロック４０５において、現在のエンハンスメントレイヤ（ＥＬ）画像の復号を開始し、機能ブロック４１０に進む。機能ブロック４１０において、スライスヘッダのｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇを解析し、判断ブロック４１５に進む。判断ブロック４１５において、ｂａｓｅ＿ｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ＿ｆｌａｇが１かどうか判断する。１であれば、機能ブロック４２０に進む。１でなければ、機能ブロック４３５に進む。
機能ブロック４２０において、対応するベースレイヤ（ＢＬ）画像からＥＬ画像に重みをコピーし、機能ブロック４２５に進む。機能ブロック４２５において、ＢＬ画像のｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）をＥＬ画像のｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にリマッピングし、機能ブロック４３０に進む（ｐａｓｓｅｓ ｃｏｎｔｒｏｌ）。機能ブロック４３０において、取得した重み（ｗｅｉｇｈｔｓ）で参照画像を復号し、機能ブロック４４０に進む。
機能ブロック４３５において、重み付けパラメータ（ｗｅｉｇｈｔｉｎｇ ｐａｒａｍｅｔｅｒｓ）を解析し、機能ブロック４３０に進む。
図５を参照して、ｌｅｖｅｌ＿ｉｄｃシンタックス及びｐｒｏｆｉｌｅ＿ｉｄｃシンタックスを復号する方法の一例を参照数字５００で示した。
開始ブロック５０５から機能ブロック５１０に進む。機能ブロック５１０において、ｌｅｖｅｌ＿ｉｄｃシンタックスとｐｒｏｆｉｌｅ＿ｉｄｃシンタックスとを解析し、機能ブロック５１５に進む。機能ブロック５１５において、機能ブロック５１０で実行した解析に基づき、エンハンスメントレイヤの重み付け予測制約（ｗｅｉｇｈｔｅｄ ｐｒｅｄｉｃｔｉｏｎ ｃｏｎｓｔｒａｉｎｔ）を判断し、終了ブロック５２０に進む。
図６を参照して、エンハンスメントレイヤの重み付け予測制約を復号する方法の一例を参照数字６００で示した。
開始ブロック６０５から機能ブロック６１０に進む。機能ブロック６１０において、エンハンスメントレイヤの重み付け予測のシンタックスを解析し、終了ブロック６１５に進む。
ここで、本発明に付随する多くの有利性／特徴の一部を説明する。一部は上ですでに述べたことである。例えば、１つの有利性／特徴はスケーラブルビデオエンコーダであり、該エンコーダは、画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤに適用して、画像のエンハンスメントレイヤのブロックを符号化するエンコーダを有する。エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する。他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、明示的重み付けパラメータモードと黙示的重み付けパラメータモードを選択してエンハンスメントレイヤのブロックを符号化する。さらに他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤのブロックが下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像が下位レイヤ参照画像に対応するとき、常に、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するよう制約を課す。また、他の有利性／特徴として、上記の制約を有するスケーラブルビデオエンコーダにおいて、制約はプロファイルまたはレベル制約として定められ、またはシーケンス画像パラメータセットで信号として送られる。さらに、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤのスライスについて、スライスヘッダにシンタックスを付加し、同じ重み付けパラメータまたは異なる重み付けパラメータをエンハンスメントレイヤ参照画像に選択的に適用する。また、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤからエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスへのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）のリマッピングを行う。また、他の有利性／特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、画像順序カウントを使用して、下位レイヤからエンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする。また、他の有利性／特徴として、上記の画像順序カウントを用いてリマッピングをするスケーラブルビデオエンコーダにおいて、参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする。さらに、他の有利性／特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤにはない、エンハンスメントレイヤで使用される参照画像のｗｅｉｇｈｔｅｄ＿ｐｒｅｄｉｃｔｉｏｎ＿ｆｌａｇフィールドをゼロに設定する。また、他の有利性／特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、エンハンスメントレイヤで使用される参照画像と一致するものが下位レイヤにないとき、エンハンスメントレイヤで使用される参照画像に対応する参照画像インデックスの重み付けパラメータをスライスヘッダで送る。また、他の有利性／特徴として、上記のリマッピングをするスケーラブルビデオエンコーダにおいて、前記エンコーダは、エンハンスメントレイヤと下位レイヤの両方において画像のスライスパーティショニングが同じであるとき、スライスベースでリマッピングを行い、画像のエンハンスメントレイヤのスライスパーティショニングがその画像の下位レイヤのスライスパーティショニングと異なるとき、マクロブロックベースでリマッピングを行う。さらに、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、下位レイヤからのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスをエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にリマッピングする。また、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、重み付けパラメータの推定をスキップする。また、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して１つの重み付けパラメータのセットのみを格納する。また、他の有利性／特徴として、上記のスケーラブルビデオエンコーダにおいて、前記エンコーダは、異なる重み付けパラメータを適用するとき、またはエンハンスメントパラメータに下位レイヤがないとき、重み付けパラメータを推定する。
本発明の上記その他の特徴と有利性は、当業者はここに開示した教示に基づき容易に確認できるであろう。言うまでもなく、本発明の教示は、ハードウェア、ソフトウェア、ファームウェア、特殊用途プロセッサ、またはこれらの組み合わせなどのいろいろな形体で実施することができる。
最も好ましくは、本発明の教示をハードウェアとソフトウェアの組合せとして実施する。また、ソフトウェアはプログラム記録装置に実態的に化体されたアプリケーションプログラムとして実施してもよい。そのアプリケーションプログラムは、好適なアーキテクチャを有する機械にアップロードされ、実行される。好ましくは、機械は、中央処理装置（ＣＰＵ）、ランダムアクセスメモリ（ＲＡＭ）、及び入出力（Ｉ／Ｏ）インターフェイス等のハードウェアを有するコンピュータプラットフォームで実施される。コンピュータプラットフォームはオペレーティングシステムとマイクロコードも含んでもよい。ここに説明した様々なプロセスや機能は、ＣＰＵが実行できる、マイクロ命令コードの一部やアプリケーションプログラムの一部であってもよく、これらのいかなる組合せであってもよい。また、追加的データ記憶装置や印刷装置等その他の様々な周辺装置をコンピュータプラットフォームに接続してもよい。
さらに言うまでもなく、添付した図面に示したシステム構成要素や方法の一部はソフトウェアで実施されることが好ましいが、システム構成要素（または方法）間の実際的な結合は本発明をプログラムするそのプログラム方法に応じて異なる。ここに開示された本発明の教示を受けて、関連技術分野の当業者は、本発明の同様な実施形態や構成を考えることができるであろう。
例示した実施形態を添付した図面を参照して説明したが、言うまでもなく、本発明はこれらの実施形態には限定されず、当業者は、本発明の範囲と精神から逸脱することなく、様々な変化と修正を施すことができるであろう。かかる変更や修正はすべて添付した請求項に記載した本発明の範囲内に含まれるものである。
本発明は図面を参照してよりよく理解することができる。
本原理を適用できるジョイントスケーラブルビデオモデル（ＪＳＶＭ）２．０エンコーダの例を示すブロック図である。 本原理を適用できるデコーダの例を示すブロック図である。 本原理の一実施形態による、重み付け予測を用いて画像ブロックのスケーラブルビデオ符号化方法の例を示すフロー図である。 本原理の一実施形態による、重み付け予測を用いて画像ブロックのスケーラブルビデオ復号方法の例を示すフロー図である。 本原理の一実施形態による、ｌｅｖｅｌ＿ｉｄｃシンタックスとｐｒｏｆｉｌｅ＿ｉｄｃシンタックスの復号方法の例を示すフロー図である。 本原理の一実施形態による、エンハンスメントレイヤの重み付け予測制約（ｃｏｎｓｔｒａｉｎｔ）の復号方法の例を示すフロー図である。

Claims (29)

  1. 画像の下位レイヤのブロックの復号に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用して、画像のエンハンスメントレイヤのブロックを復号するデコーダを有し、エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する装置。
  2. 前記デコーダは、明示的重み付けパラメータモードまたは黙示的重み付けパラメータモードを使用するか決定してエンハンスメントレイヤのブロックを復号する、請求項１に記載の装置。
  3. 前記エンコーダは、エンハンスメントレイヤのブロックが下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像が下位レイヤ参照画像に対応するとき、常に、下位レイヤ参照画像に適用する重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するよう、対応するエンコーダにより課された制約を有する、請求項１に記載の装置。
  4. 制約はプロファイル及び／またはレベル制約として定められ、及び／またはシーケンス画像パラメータセットで信号として送られる、請求項３に記載の装置。
  5. 前記デコーダは、エンハンスメントレイヤのスライスについて、スライスヘッダのシンタックスを評価し、同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するか、または異なる重み付けパラメータを使用するか決定する、請求項１に記載の装置。
  6. 前記デコーダは、下位レイヤからエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスへのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）のリマッピングを行う、請求項１に記載の装置。
  7. 前記デコーダは、画像順序カウントを使用して、下位レイヤからエンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする、請求項６に記載の装置。
  8. 参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする、請求項７に記載の装置。
  9. 前記デコーダは、下位レイヤにはない、エンハンスメントレイヤで使用される参照画像のゼロに設定されたｗｅｉｇｈｔｅｄ＿ｐｒｅｄｉｃｔｉｏｎ＿ｆｌａｇフィールドを読む、請求項６に記載の装置。
  10. 前記デコーダは、エンハンスメントレイヤで使用される参照画像と一致するものが下位レイヤにないとき、エンハンスメントレイヤで使用される参照画像に対応する参照画像インデックスの重み付けパラメータをスライスヘッダで受け取る、請求項６に記載の装置。
  11. 前記デコーダは、エンハンスメントレイヤと下位レイヤの両方において画像のスライスパーティショニングが同じであるとき、スライスベースでリマッピングを行い、画像のエンハンスメントレイヤのスライスパーティショニングがその画像の下位レイヤのスライスパーティショニングと異なるとき、マクロブロックベースでリマッピングを行う、請求項６に記載の装置。
  12. 前記デコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、下位レイヤからのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスをエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にリマッピングする、請求項１に記載の装置。
  13. 前記デコーダは、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して１つの重み付けパラメータのセットのみを格納する、請求項１に記載の装置。
  14. 前記デコーダは、下位レイヤ参照画像に適用した重み付けパラメータと異なる重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、スライスヘッダからの重み付けパラメータを解析する、請求項１に記載の装置。
  15. 画像の下位レイヤのブロックの復号に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用して、画像のエンハンスメントレイヤのブロックを復号する段階を有し、エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する、スケーラブルビデオ復号方法。
  16. 前記復号段階は、明示的重み付けパラメータモードと黙示的重み付けパラメータモードを使用するか決定して、エンハンスメントレイヤのブロックを復号する、請求項１５に記載の方法。
  17. 前記復号段階は、エンハンスメントレイヤのブロックが下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像が下位レイヤ参照画像に対応するとき、常に、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するよう、対応するエンコーダにより課された制約に従う段階を有する、請求項１５に記載の方法。
  18. 制約はプロファイル及び／またはレベル制約として定められ、及び／またはシーケンス画像パラメータセットで信号として送られる、請求項１７に記載の方法。
  19. 前記復号段階は、エンハンスメントレイヤのスライスについて、スライスヘッダのシンタックスを評価し、同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するか、異なる重み付けパラメータを使用するか決定する段階を有する、請求項１５に記載の方法。
  20. 前記復号段階は、エンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスに下位レイヤからのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）のリマッピングを行う段階を有する、請求項１５に記載の方法。
  21. 前記リマッピングを行う段階は、画像順序カウントを使用して、下位レイヤからエンハンスメントレイヤの対応する参照画像インデックスに重み付けパラメータをリマッピングする、請求項２０に記載の方法。
  22. 参照画像インデックスが最も小さい重み付けパラメータを最初にリマッピングする、請求項２１に記載の方法。
  23. 前記復号段階は、下位レイヤにはない、エンハンスメントレイヤで使用される参照画像のゼロに設定されたｗｅｉｇｈｔｅｄ＿ｐｒｅｄｉｃｔｉｏｎ＿ｆｌａｇフィールドを読み出す段階を有する、請求項２０に記載の方法。
  24. 前記復号段階は、エンハンスメントレイヤで使用される参照画像と一致するものが下位レイヤにないとき、エンハンスメントレイヤで使用される参照画像に対応する参照画像インデックスの重み付けパラメータをスライスヘッダで受け取る段階を有する、請求項２０に記載の方法。
  25. エンハンスメントレイヤと下位レイヤの両方において画像のスライスパーティショニングが同じであるとき、スライスベースでリマッピングを行い、画像のエンハンスメントレイヤのスライスパーティショニングが下位レイヤのスライスパーティショニングと異なるとき、マクロブロックベースでリマッピングを行う、請求項２０に記載の方法。
  26. 前記復号段階は、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、下位レイヤからのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）シンタックスをエンハンスメントレイヤのｐｒｅｄ＿ｗｅｉｇｈｔ＿ｔａｂｌｅ（）にリマッピングする段階を有する、請求項１５に記載の方法。
  27. 前記復号段階は、下位レイヤ参照画像に適用した重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、各参照画像インデックスに対して１つの重み付けパラメータのセットのみを格納する段階を有する、請求項１５に記載の方法。
  28. 前記復号段階は、下位レイヤ参照画像に適用した重み付けパラメータと異なる重み付けパラメータをエンハンスメントレイヤ参照画像に適用するとき、スライスヘッダから重み付けパラメータを解析する段階を有する、請求項１５に記載の方法。
  29. 画像の下位レイヤのブロックの符号化に使用した、下位レイヤ参照画像に適用された重み付けパラメータと同じ重み付けパラメータをエンハンスメントレイヤ参照画像に適用して生成された、画像のエンハンスメントレイヤに符号化されたブロックを有し、エンハンスメントレイヤのブロックは下位レイヤのブロックに対応し、エンハンスメントレイヤ参照画像は下位レイヤ参照画像に対応する、符号化されたスケーラブルビデオを有する記憶媒体。
JP2008522772A 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置 Expired - Fee Related JP5535479B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US70146405P 2005-07-21 2005-07-21
US60/701,464 2005-07-21
PCT/US2006/019510 WO2007018669A1 (en) 2005-07-21 2006-05-19 Method and apparatus for weighted prediction for scalable video coding

Publications (2)

Publication Number Publication Date
JP2009502099A true JP2009502099A (ja) 2009-01-22
JP5535479B2 JP5535479B2 (ja) 2014-07-02

Family

ID=36969701

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2008522772A Expired - Fee Related JP5535479B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置
JP2008522773A Expired - Fee Related JP5484725B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2008522773A Expired - Fee Related JP5484725B2 (ja) 2005-07-21 2006-05-19 スケーラブルビデオコーディングのための重み付け予測方法及び装置

Country Status (13)

Country Link
US (2) US20090080535A1 (ja)
EP (2) EP1915871B1 (ja)
JP (2) JP5535479B2 (ja)
KR (2) KR101299848B1 (ja)
CN (2) CN101228795B (ja)
AU (2) AU2006277007B2 (ja)
BR (2) BRPI0613659B1 (ja)
MX (1) MX2008000906A (ja)
MY (2) MY149340A (ja)
RU (2) RU2406253C2 (ja)
TW (2) TWI324887B (ja)
WO (2) WO2007018670A1 (ja)
ZA (2) ZA200800248B (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010095556A1 (ja) * 2009-02-19 2010-08-26 ソニー株式会社 画像処理装置および方法
JPWO2010095557A1 (ja) * 2009-02-19 2012-08-23 ソニー株式会社 画像処理装置および方法
WO2014104104A1 (ja) * 2012-12-28 2014-07-03 日本電信電話株式会社 映像符号化装置および方法、映像復号装置および方法、及びそれらのプログラム
US8934531B2 (en) 2009-02-19 2015-01-13 Sony Corporation Image processing apparatus and method
JP2015525008A (ja) * 2012-01-31 2015-08-27 ヴィド スケール インコーポレイテッド スケーラブルな高効率ビデオコーディング（ｈｅｖｃ）のための参照ピクチャセット（ｒｐｓ）シグナリング
US10178399B2 (en) 2013-02-28 2019-01-08 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
US11025902B2 (en) 2012-05-31 2021-06-01 Nld Holdings I, Llc Systems and methods for the reuse of encoding information in encoding alternative streams of video data

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8340177B2 (en) 2004-07-12 2012-12-25 Microsoft Corporation Embedded base layer codec for 3D sub-band coding
KR20060070400A (ko) * 2004-12-20 2006-06-23 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
US8422546B2 (en) * 2005-05-25 2013-04-16 Microsoft Corporation Adaptive video encoding using a perceptual model
EP1806930A1 (en) * 2006-01-10 2007-07-11 Thomson Licensing Method and apparatus for constructing reference picture lists for scalable video
US8503536B2 (en) 2006-04-07 2013-08-06 Microsoft Corporation Quantization adjustments for DC shift artifacts
US8130828B2 (en) 2006-04-07 2012-03-06 Microsoft Corporation Adjusting quantization to preserve non-zero AC coefficients
US7995649B2 (en) 2006-04-07 2011-08-09 Microsoft Corporation Quantization adjustment based on texture level
US8711925B2 (en) 2006-05-05 2014-04-29 Microsoft Corporation Flexible quantization
GB2440004A (en) * 2006-07-10 2008-01-16 Mitsubishi Electric Inf Tech Fine granularity scalability encoding using a prediction signal formed using a weighted combination of the base layer and difference data
JP4747975B2 (ja) * 2006-07-14 2011-08-17 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
US20080013623A1 (en) * 2006-07-17 2008-01-17 Nokia Corporation Scalable video coding and decoding
US8238424B2 (en) 2007-02-09 2012-08-07 Microsoft Corporation Complexity-based adaptive preprocessing for multiple-pass video compression
US20080240257A1 (en) * 2007-03-26 2008-10-02 Microsoft Corporation Using quantization bias that accounts for relations between transform bins and quantization bins
US8498335B2 (en) 2007-03-26 2013-07-30 Microsoft Corporation Adaptive deadzone size adjustment in quantization
US8243797B2 (en) 2007-03-30 2012-08-14 Microsoft Corporation Regions of interest for quality adjustments
US8442337B2 (en) 2007-04-18 2013-05-14 Microsoft Corporation Encoding adjustments for animation content
US8331438B2 (en) * 2007-06-05 2012-12-11 Microsoft Corporation Adaptive selection of picture-level quantization parameters for predicted video pictures
TWI499304B (zh) * 2007-07-02 2015-09-01 Nippon Telegraph & Telephone 動畫像可縮放編碼方法及解碼方法、其裝置、其程式及記錄程式之記錄媒體
KR101123285B1 (ko) 2007-10-25 2012-03-20 니폰덴신뎅와 가부시키가이샤 동화상 스케일러블 부호화 방법 및 복호 방법, 그 장치, 그 프로그램 및 프로그램을 기록한 기록매체
US8750390B2 (en) 2008-01-10 2014-06-10 Microsoft Corporation Filtering and dithering as pre-processing before encoding
US8160132B2 (en) 2008-02-15 2012-04-17 Microsoft Corporation Reducing key picture popping effects in video
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US8711948B2 (en) 2008-03-21 2014-04-29 Microsoft Corporation Motion-compensated prediction of inter-layer residuals
US8189933B2 (en) 2008-03-31 2012-05-29 Microsoft Corporation Classifying and controlling encoding quality for textured, dark smooth and smooth video content
US8761253B2 (en) * 2008-05-28 2014-06-24 Nvidia Corporation Intra prediction mode search scheme
US8897359B2 (en) 2008-06-03 2014-11-25 Microsoft Corporation Adaptive quantization for enhancement layer video coding
KR101144539B1 (ko) * 2008-06-05 2012-05-14 한국전자통신연구원 스케일러블 비디오 코딩 비트스트림의 적응 변환 장치 및 그 방법
WO2010010942A1 (ja) * 2008-07-25 2010-01-28 ソニー株式会社 画像処理装置および方法
US9571856B2 (en) 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
EP2334082A1 (en) * 2008-09-17 2011-06-15 Sharp Kabushiki Kaisha Scalable video stream decoding apparatus and scalable video stream generating apparatus
US20100098156A1 (en) 2008-10-16 2010-04-22 Qualcomm Incorporated Weighted prediction based on vectorized entropy coding
JP5625342B2 (ja) * 2009-12-10 2014-11-19 ソニー株式会社 画像処理方法、画像処理装置、プログラム
KR101703327B1 (ko) * 2010-01-14 2017-02-06 삼성전자 주식회사 계층적 데이터 단위의 패턴 정보를 이용하는 비디오 부호화 방법과 그 장치, 및 비디오 복호화 방법과 그 장치
JP5428886B2 (ja) * 2010-01-19 2014-02-26 ソニー株式会社 情報処理装置、情報処理方法、及びそのプログラム
TWI666882B (zh) 2010-04-13 2019-07-21 美商Ｇｅ影像壓縮有限公司 在樣本陣列多元樹細分中之繼承技術
EP4398576A3 (en) 2010-04-13 2024-08-21 GE Video Compression, LLC Video coding using multi-tree sub-divisions of images
ES2590686T3 (es) 2010-04-13 2016-11-23 Ge Video Compression, Llc Fusión de regiones de muestra
CN106412606B (zh) 2010-04-13 2020-03-27 Ge视频压缩有限责任公司 解码数据流的方法、生成数据流的方法
JP5703781B2 (ja) 2010-09-03 2015-04-22 ソニー株式会社 画像処理装置および方法
JP5707412B2 (ja) * 2010-09-29 2015-04-30 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
WO2012042890A1 (ja) 2010-09-30 2012-04-05 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
RU2550539C1 (ru) 2011-04-25 2015-05-10 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ внутреннего предсказания и кодер и декодер, использующие его
JP5786478B2 (ja) * 2011-06-15 2015-09-30 富士通株式会社 動画像復号装置、動画像復号方法、及び動画像復号プログラム
US9106927B2 (en) 2011-09-23 2015-08-11 Qualcomm Incorporated Video coding with subsets of a reference picture set
US10003817B2 (en) 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
US9392235B2 (en) 2011-11-18 2016-07-12 Google Technology Holdings LLC Explicit way for signaling a collocated reference picture for video coding
EP3471420B1 (en) 2011-11-18 2020-05-13 Google Technology Holdings LLC An explicit way for signaling a collocated picture for high efficiency video coding (hevc)
US9143781B2 (en) 2012-04-03 2015-09-22 Qualcomm Incorporated Weighted prediction parameter coding
WO2013155028A1 (en) * 2012-04-09 2013-10-17 Vid Scale, Inc. Weighted prediction parameter signaling for video coding
WO2013154674A1 (en) 2012-04-11 2013-10-17 Motorola Mobility Llc Evaluation of signaling of collocated reference picture for temporal prediction
EP2839660B1 (en) * 2012-04-16 2020-10-07 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
US10609394B2 (en) * 2012-04-24 2020-03-31 Telefonaktiebolaget Lm Ericsson (Publ) Encoding and deriving parameters for coded multi-layer video sequences
US9253487B2 (en) 2012-05-31 2016-02-02 Qualcomm Incorporated Reference index for enhancement layer in scalable video coding
US10536710B2 (en) * 2012-06-27 2020-01-14 Intel Corporation Cross-layer cross-channel residual prediction
US9319681B2 (en) 2012-07-18 2016-04-19 Google Technology Holdings LLC Signaling of temporal motion vector predictor (MVP) enable flag
US20140056356A1 (en) * 2012-08-21 2014-02-27 Motorola Mobility Llc Method and apparatus for efficient signaling of weighted prediction in advanced coding schemes
US9554146B2 (en) 2012-09-21 2017-01-24 Qualcomm Incorporated Indication and activation of parameter sets for video coding
US20140092971A1 (en) * 2012-09-28 2014-04-03 Kiran Mukesh Misra Picture processing in scalable video systems
US10085038B2 (en) 2012-09-28 2018-09-25 Sony Corporation Encoding device, encoding method, decoding device, and decoding method
US9124899B2 (en) 2012-09-28 2015-09-01 Sharp Laboratories Of America, Inc. Motion derivation and coding for scaling video
US20140092972A1 (en) * 2012-09-29 2014-04-03 Kiran Mukesh Misra Picture processing in scalable video systems
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
KR101835358B1 (ko) 2012-10-01 2018-03-08 지이 비디오 컴프레션, 엘엘씨 향상 레이어 예측에 대한 인터-레이어 예측 기여를 이용한 스케일러블 비디오 코딩
US9294777B2 (en) * 2012-12-30 2016-03-22 Qualcomm Incorporated Progressive refinement with temporal scalability support in video coding
MX348561B (es) * 2013-07-12 2017-06-20 Sony Corp Aparato y método para la codificación de imágenes.
US20150016502A1 (en) * 2013-07-15 2015-01-15 Qualcomm Incorporated Device and method for scalable coding of video information
WO2015082763A1 (en) 2013-12-02 2015-06-11 Nokia Technologies Oy Video encoding and decoding
KR20230148859A (ko) 2016-12-01 2023-10-25 주식회사 엘지생활건강 맞춤형 화장품 제공 시스템 및 그의 동작 방법
CN118972566A (zh) * 2018-09-07 2024-11-15 松下电器（美国）知识产权公司 用于视频编码的系统和方法
US10764603B2 (en) 2018-12-31 2020-09-01 Alibaba Group Holding Limited Resolution-adaptive video coding
JP7539928B2 (ja) 2019-07-09 2024-08-26 アリババ・グループ・ホールディング・リミテッド 解像度適応型ビデオコーディング

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008535310A (ja) * 2005-03-25 2008-08-28 サムスン エレクトロニクス カンパニー リミテッド 加重予測を利用したビデオコーディングおよびデコーディング方法、このための装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5122875A (en) * 1991-02-27 1992-06-16 General Electric Company An HDTV compression system
CA2127151A1 (en) * 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
US6381349B1 (en) * 1997-11-12 2002-04-30 The University Of Utah Projector/backprojector with slice-to-slice blurring for efficient 3D scatter modeling
RU2201654C2 (ru) * 1997-12-23 2003-03-27 Томсон Лайсенсинг С.А. Способ низкошумового кодирования и декодирования
US6236878B1 (en) * 1998-05-22 2001-05-22 Charles A. Taylor Method for predictive modeling for planning medical interventions and simulating physiological conditions
US6310968B1 (en) * 1998-11-24 2001-10-30 Picker International, Inc. Source-assisted attenuation correction for emission computed tomography
US6392235B1 (en) * 1999-02-22 2002-05-21 The Arizona Board Of Regents On Behalf Of The University Of Arizona Coded-aperture system for planar imaging of volumetric sources
US6931060B1 (en) * 1999-12-07 2005-08-16 Intel Corporation Video processing of a quantized base layer and one or more enhancement layers
US6700933B1 (en) * 2000-02-15 2004-03-02 Microsoft Corporation System and method with advance predicted bit-plane coding for progressive fine-granularity scalable (PFGS) video coding
ATE297099T1 (de) * 2001-02-13 2005-06-15 Koninkl Philips Electronics Nv Verfahren zur codierung und decodierung von bewegungsschätzungen
US6895055B2 (en) * 2001-10-29 2005-05-17 Koninklijke Philips Electronics N.V. Bit-rate guided frequency weighting matrix selection
KR100508798B1 (ko) * 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
RU2325783C2 (ru) * 2002-07-15 2008-05-27 Томсон Лайсенсинг С.А. Адаптивное взвешивание эталонных изображений при кодировании видеосигнала
US7376186B2 (en) * 2002-07-15 2008-05-20 Thomson Licensing Motion estimation with weighting prediction
US7072394B2 (en) * 2002-08-27 2006-07-04 National Chiao Tung University Architecture and method for fine granularity scalable video coding
EP1547381A4 (en) * 2002-10-01 2010-11-03 Thomson Licensing IMPLIED WEIGHTING OF REFERENCE IMAGES IN A VIDEO PROCESSOR
JP2006525728A (ja) * 2003-04-29 2006-11-09 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 画像処理装置
KR100612849B1 (ko) * 2003-07-18 2006-08-14 삼성전자주식회사 영상 부호화 및 복호화 장치 및 방법
US7262417B2 (en) * 2004-03-26 2007-08-28 Board Of Regents, The University Of Texas System Method and system for improved image reconstruction and data collection for compton cameras
KR100763182B1 (ko) * 2005-05-02 2007-10-05 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치
KR100714696B1 (ko) * 2005-06-24 2007-05-04 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008535310A (ja) * 2005-03-25 2008-08-28 サムスン エレクトロニクス カンパニー リミテッド 加重予測を利用したビデオコーディングおよびデコーディング方法、このための装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JPN6011045777; Ｋｙｏｈｙｕｋ　Ｌｅｅ: 'Ｅｘｔｅｎｓｉｏｎ　ｏｆ　ｗｅｉｇｈｔｅｄ　ｐｒｅｄｉｃｔｉｏｎ　ｔｏ　ｍｕｌｔｉ　ｌａｙｅｒ　ｓｔｒｕｃｔｕｒｅ' Ｊｏｉｎｔ　Ｖｉｄｅｏ　Ｔｅａｍ（ＪＶＴ）　ｏｆ　ＩＳＯ／ＩＥＣ　ＭＰＥＧ　＆　ＩＴＵ-Ｔ　ＶＣＥＧ　（ＩＳＯ／ＩＥＣ　ＪＴＣ１／ＳＣ２９／ＷＧ１１　ａｎｄ　ＩＴＵ-Ｔ　ＳＧ１６　Ｑ．６）　１６ｔｈ , 20050720, ＩＴＵ-Ｔ *
JPN6011045779; ｗｆｔｐ３．ｉｔｕ．ｉｎｔ／ａｖ-ａｒｃｈ／ｊｖｔ-ｓｉｔｅ／２００５＿０７＿Ｐｏｚｎａｎ／ , 20050720, ＩＴＵ-Ｔ *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10491919B2 (en) 2009-02-19 2019-11-26 Sony Corporation Image processing apparatus and method
US8934531B2 (en) 2009-02-19 2015-01-13 Sony Corporation Image processing apparatus and method
JPWO2010095557A1 (ja) * 2009-02-19 2012-08-23 ソニー株式会社 画像処理装置および方法
US8457422B2 (en) 2009-02-19 2013-06-04 Sony Corporation Image processing device and method for generating a prediction image
US10931944B2 (en) 2009-02-19 2021-02-23 Sony Corporation Decoding device and method to generate a prediction image
US8824542B2 (en) 2009-02-19 2014-09-02 Sony Corporation Image processing apparatus and method
US9282345B2 (en) 2009-02-19 2016-03-08 Sony Corporation Image processing apparatus and method
US8995779B2 (en) 2009-02-19 2015-03-31 Sony Corporation Image processing device and method for generating a prediction image
US10721480B2 (en) 2009-02-19 2020-07-21 Sony Corporation Image processing apparatus and method
WO2010095556A1 (ja) * 2009-02-19 2010-08-26 ソニー株式会社 画像処理装置および方法
JPWO2010095556A1 (ja) * 2009-02-19 2012-08-23 ソニー株式会社 画像処理装置および方法
US9277235B2 (en) 2009-02-19 2016-03-01 Sony Corporation Image processing apparatus and method
US10321136B2 (en) 2009-02-19 2019-06-11 Sony Corporation Image processing apparatus and method
US9462294B2 (en) 2009-02-19 2016-10-04 Sony Corporation Image processing device and method to enable generation of a prediction image
US9872020B2 (en) 2009-02-19 2018-01-16 Sony Corporation Image processing device and method for generating prediction image
US10334244B2 (en) 2009-02-19 2019-06-25 Sony Corporation Image processing device and method for generation of prediction image
JP2015525008A (ja) * 2012-01-31 2015-08-27 ヴィド スケール インコーポレイテッド スケーラブルな高効率ビデオコーディング（ｈｅｖｃ）のための参照ピクチャセット（ｒｐｓ）シグナリング
US11445172B2 (en) 2012-01-31 2022-09-13 Vid Scale, Inc. Reference picture set (RPS) signaling for scalable high efficiency video coding (HEVC)
US11025902B2 (en) 2012-05-31 2021-06-01 Nld Holdings I, Llc Systems and methods for the reuse of encoding information in encoding alternative streams of video data
JP5894301B2 (ja) * 2012-12-28 2016-03-23 日本電信電話株式会社 映像符号化装置および方法、映像復号装置および方法、及びそれらのプログラム
CN104885462A (zh) * 2012-12-28 2015-09-02 日本电信电话株式会社 视频编码装置和方法、视频解码装置和方法、以及其程序
WO2014104104A1 (ja) * 2012-12-28 2014-07-03 日本電信電話株式会社 映像符号化装置および方法、映像復号装置および方法、及びそれらのプログラム
US10178399B2 (en) 2013-02-28 2019-01-08 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
US10728564B2 (en) 2013-02-28 2020-07-28 Sonic Ip, Llc Systems and methods of encoding multiple video streams for adaptive bitrate streaming

Also Published As

Publication number Publication date
BRPI0613657A2 (pt) 2011-01-25
AU2006277008A1 (en) 2007-02-15
KR101299390B1 (ko) 2013-08-22
KR101299848B1 (ko) 2013-08-23
JP5484725B2 (ja) 2014-05-07
AU2006277007B2 (en) 2011-10-27
TW200723886A (en) 2007-06-16
CN101228794A (zh) 2008-07-23
EP1915871A1 (en) 2008-04-30
TWI324887B (en) 2010-05-11
US20090080535A1 (en) 2009-03-26
MY147087A (en) 2012-10-31
EP1915870B1 (en) 2017-03-08
JP2009502100A (ja) 2009-01-22
KR20080031017A (ko) 2008-04-07
CN101228794B (zh) 2011-05-11
RU2411686C2 (ru) 2011-02-10
ZA200800244B (en) 2010-05-26
US20090207919A1 (en) 2009-08-20
RU2008106624A (ru) 2009-08-27
CN101228795A (zh) 2008-07-23
ZA200800248B (en) 2009-08-26
WO2007018670A1 (en) 2007-02-15
KR20080028945A (ko) 2008-04-02
RU2406253C2 (ru) 2010-12-10
EP1915870A1 (en) 2008-04-30
MX2008000906A (es) 2008-03-18
RU2008106629A (ru) 2009-08-27
EP1915871B1 (en) 2017-07-05
AU2006277008B2 (en) 2011-11-10
TWI325723B (en) 2010-06-01
MY149340A (en) 2013-08-30
CN101228795B (zh) 2011-09-07
TW200723887A (en) 2007-06-16
HK1118663A1 (en) 2009-02-13
WO2007018669A1 (en) 2007-02-15
BRPI0613659A2 (pt) 2011-01-25
BRPI0613657B1 (pt) 2019-05-07
BRPI0613659B1 (pt) 2019-06-04
AU2006277007A1 (en) 2007-02-15
JP5535479B2 (ja) 2014-07-02

Similar Documents

Publication Publication Date Title
JP5535479B2 (ja) スケーラブルビデオコーディングのための重み付け予測方法及び装置
US8311121B2 (en) Methods and apparatus for weighted prediction in scalable video encoding and decoding
KR101326610B1 (ko) 매크로블록 적응적 인터-층 인트라 텍스쳐 예측을 위한 방법 및 장치
US8867618B2 (en) Method and apparatus for weighted prediction for scalable video coding
CN117041602B (zh) 用于对视频信号进行编码的方法、计算设备和存储介质
US8275040B2 (en) Method and apparatus for weighted prediction for scalable video coding
HK40012187A (en) Methods and apparatus for video usability information (vui) for scalable video coding (svc)
HK40012187B (en) Methods and apparatus for video usability information (vui) for scalable video coding (svc)
HK1118663B (en) Method and apparatus for weighted prediction for scalable video coding
GB2512563A (en) Method and apparatus for encoding an image into a video bitstream and decoding corresponding video bitstream with weighted residual predictions

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090518

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110830

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20111130

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20111207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121030

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130129

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130430

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140325

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140423

R150 Certificate of patent or registration of utility model

Ref document number: 5535479

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees