JP2007295519A - マルチメディアコンテンツの複数の映像角度を表示装置で同時に再生するシステム及び方法 - Google Patents

Abstract

【課題】 マルチメディアの複数の映像角度を単一の表示装置で同時に表示する装置及び方法を提供する。
【解決手段】 方法は、マルチメディアコンテンツからビデオソース信号を読み込み、ビデオソース信号を複数の映像角度に多重分離し、マルチメディアコンテンツの符号化スキームにより映像角度のうち少なくとも２つを復号化し、復号化された映像角度のうち少なくとも２つをレンダリングし、レンダリングされた映像角度のうち少なくとも２つを最終ビデオ信号として組み立て、最終ビデオ信号を単一の表示装置に出力するステップからなる。
【選択図】 図５

Description

この発明は映像再生に関し、特にマルチメディアコンテンツの複数の映像角度を表示装置で同時に再生するシステム及び方法に関する。

マルチメディア技術の発展に伴い、マルチメディアコンテンツや映像は広く普及している。マルチメディア映像は、字幕、言語選択、あるいは複数の撮影角度で表現されたシーンなど、数々の機能を提供している。これら機能の増加に伴って、マルチメディアコンテンツの保存媒体の容量も増大しつつある。例えばＣＤは保存量７００ＭＢであり、ＤＶＤになると４．７ＧＢに達する。そのほか、固体記憶装置もマルチメディアコンテンツを保存することができ、その保存量と寸法は種類によって各々異なっている。

複数の映像角度を含んだマルチメディアコンテンツは、個人の好みによって映像角度（撮影角度に対応する）を選んで視聴することができる。のみならず、チャンネルや音声構成、字幕などを予め選び、お気に入りとして設定することも可能である。

そのうち撮影角度に対応する映像角度は、保存媒体（一般は光ディスク）で保存することができる。複数の映像角度が多重化されているビデオソース信号は、再生装置に読み込まれるときに抽出される。図１を参照する。図１は従来のマルチメディアコンテンツのビデオソース信号１００を表す説明図である。マルチメディアコンテンツはＤＶＤ、ＨＤＤＶＤないしＨＤＤ（ハードディスクドライブ）などの保存媒体に保存され、ビデオソース信号１００は、１本の信号線に多重化された複数の映像角度Ａ_１〜Ａ_ｎを含む。ビデオソース信号を再生するとき、映像角度（Ａ_１〜Ａ_ｎ）から所要のものを選んで視聴することができる。

例えば、サッカー試合の映像は、競技場全体をカバーする複数の撮影角度に対応する映像角度を含むことができる。これら映像角度は、例えば競技場の上から撮るものと、サイドラインから撮るものと、ゴールラインから撮るものがある。そうすると、試合映像は３つの角度から見ることができる。しかし、従来の技術はその中から１つを選んで視聴することしかできない。

図２を参照する。図２は従来のマルチメディアコンテンツを視聴するためのマルチメディアシステム２００を表す説明図である。マルチメディアシステム２００はマルチメディアディスク２１０と、マルチメディア再生装置２２０と、表示装置２３０を含む。マルチメディア再生装置２２０がマルチメディアディスク２１０からビデオソース信号を読み込むとき、ビデオソース信号は下記のように処理される。まずはナビゲーター２２２でビデオソース信号から１つの映像角度を分離・選出する。映像角度の選択はマルチメディア再生装置２２０のデフォルト設定またはユーザー入力によって行われ、選ばれた映像角度はその後、マルチメディアディスクに適合した圧縮／暗号化スキームで復号化される。最後は選ばれた映像角度をレンダリング装置２２６を経て表示装置２３０に出力する。

このように、ビデオソース信号１００に複数の映像角度を含ませることができるが、ナビゲーター２２２で選出し、かつ再生装置２２０から表示装置２３０に出力できる映像角度は１個のみである。そのため、表示装置２３０で表示するマルチメディアコンテンツは、毎回１つの映像角度のみで視聴するしかできない。
米国特許公開第２００３／０１１３０９６Ａ１

この発明は前述の問題を解決するため、マルチメディアコンテンツの複数の映像角度を表示装置で同時に再生するシステム及び方法を提供することを課題とする。

この発明はマルチメディアの複数の映像角度を単一の表示装置で同時に表示する方法を提供する。該方法は、マルチメディアコンテンツからビデオソース信号を読み込み、ビデオソース信号を複数の映像角度に多重分離し、マルチメディアコンテンツの符号化スキームにより映像角度のうち少なくとも２つを復号化し、復号化された映像角度のうち少なくとも２つをレンダリングし、レンダリングされた映像角度のうち少なくとも２つを最終ビデオ信号として組み立て、最終ビデオ信号を単一の表示装置に出力するステップからなる。

この発明は更にマルチメディア再生システムを提供する。該システムは、マルチメディアコンテンツからビデオソース信号を読み込んで複数の映像角度に多重分離するナビゲーターユニットと、マルチメディアコンテンツの符号化スキームにより複数の映像角度をそれぞれ復号化する少なくとも２個のデコーダーユニットと、復号化された複数の映像角度をそれぞれレンダリングする少なくとも２個のレンダリングユニットと、レンダリングされた映像角度の少なくとも２つを最終ビデオ信号として組み立てる角度組立装置とを含む。

この発明はマルチメディアコンテンツの複数の映像角度を表示装置で同時に再生することを可能にする。利用者は同時に複数ないし全部の角度で、または特定の映像角度だけ選んでマルチメディアコンテンツを視聴し、コンテンツの内容をより一層楽しめることができる。

かかる装置及び方法の特徴を詳述するために、具体的な実施例を挙げ、図を参照にして以下に説明する。

この発明は前述のような従来の問題を解決するため、マルチメディアコンテンツの複数の映像角度を表示装置で同時に再生するシステム及び方法を提供する。表示装置はユーザーのお好み設定によって複数の映像角度を単一の表示装置で表示し、表示装置の構成もユーザーの好みによって調整できる。例えば、分割画面モードまたはＰｉＰ（ピクチャー・イン・ピクチャー）モードの複数の画面で複数の映像角度を視聴することができる。映像角度はマルチメディアコンテンツの撮影角度に対応している。

従来の技術はマルチメディアコンテンツに含まれる複数の映像角度を同時に表示することができず、毎回１つの映像角度のみで視聴するしかできない。しかし、例えばサッカー試合を視聴する場合には、複数の角度で視聴することが望ましいと思われる。なぜなら、試合を楽しめるためには、１つの角度から見るだけでは足りないであろうと考えられる。複数の角度を同時に見ることは、視聴の楽しみを一層広げ、特定のシーンを見るために同じ箇所を繰り返して再生することを避けるのみならず、映像製作に対してより大きな柔軟性を与える効果がある。

図３を参照する。図３はこの発明によるマルチメディアコンテンツの複数の映像角度を表示装置で同時に表示するマルチメディアシステム３００を表す説明図である。マルチメディアシステム３００はマルチメディアコンテンツ３１０と、マルチメディア再生装置３２０と、マルチメディア再生装置３２０に結合される表示装置３３０とを含む。

マルチメディアコンテンツ３１０は光ディスク（ＤＶＤ、ＶＣＤ、ＢＤ（ブルーレイ ディスク）、ＨＤＤＶＤ）、ＨＤＤ形式の保存装置、または固体メモリーで保存され、複数の映像角度を含んだマルチメディアデータを有する。映像角度は、マルチメディアコンテンツ３１０の製作者が任意に撮った映像や画面の撮影角度に対応している。マルチメディアデータはビデオソース信号３１５を構成し、ビデオソース信号３１５はマルチメディア再生装置３２０に読み込まれる。ここでビデオソース信号３１５は例えば、衛星テレビ信号、デジタルテレビ信号または高精細度テレビ（ＨＤＴＶ）信号であり、マルチメディアコンテンツ３１０は例えば、テレビプロバイダーが提供する番組である。

マルチメディアコンテンツ３１０のビデオソース信号３１５を読み込むと、マルチメディア再生装置３２０は表示装置３３０に出力する前に下記のような処理を行う。まずはナビゲーター３２２でビデオソース信号３１５を複数の映像信号に多重分離（または分割）する。映像角度は撮影角度に対応し、本発明はすべて可能な映像形式に対応する。ビデオソース信号３１５を多重分離した後、各映像角度をデコーダー３２４でそれぞれ復号化する。図３に示すデコーダー３２４は映像角度の個数に応じてそれぞれ復号化を行う。復号化が完了した後、映像角度をレンダリング装置３２６に送り、表示装置３３０への出力に備える。図３に示すレンダリング装置３２６は、映像角度の個数に応じてそれぞれレンダリングを行う。レンダリングが完了した後、映像角度を角度組立装置３２８に送り、角度組立装置３２８が受信した映像角度を最終のビデオ信号として組み立て、表示装置３３０に出力する。

前述は、マルチメディアコンテンツのうちすべての映像角度を表示装置３３０に出力して同時に表示する実施例を示す。その代わりに、図３に示すように、マルチメディアシステム３００の再生装置３２０にユーザーインターフェイス３４０を結合し、表示装置３３０に出力する映像角度を利用者の好みによって選択できるようにすることも可能である。この場合、マルチメディアシステム３００はすべての映像角度を多重分離するが、選ばれた映像角度のみ復号化する。そうなると、デコーダー３２４とレンダリング装置３２６は選ばれた映像角度のみ処理するようになる。実際、映像角度の選択は、映像処理の過程においていずれの時点に行ってもよい。例えば、多重分離された映像角度をすべて復号化し、選ばれた映像角度のみレンダリングするか、あるいは映像角度をすべてレンダリングし、選ばれた映像角度のみ角度組立装置３２８に出力し、最終ビデオ信号として組み立てることが、いずれも可能である。

また、別の実施例（図示なし）として、各々形式が異なるデコーダーとレンダリング装置を用いることも可能である。この場合、ナビゲーターはマルチメディアコンテンツからビデオソース信号を読み込んで複数の映像角度に多重分離し、デコーダーは符号化スキームにより複数の映像角度を復号化し、レンダリング装置は複数の映像角度をレンダリングする。レンダリングが完了した後、角度組立装置は映像角度を最終のビデオ信号に組み立て、表示装置に送信する。

その後、前述のとおり、最終ビデオ信号は分割画面モード、ＰｉＰモードまたはその他ユーザーが選んだ表示モードで表示される。角度組立装置３２８は映像角度を組み立てるほか、映像角度の表示位置も同時に定める。図４を参照する。ＰｉＰモードでは、角度組立装置は角度Ａ１を画面の左下に表示し、角度Ａ２を画面の右下に表示し、角度Ａ３を残りの画面に表示するように表示位置を定める。また、別の実施例（図示なし）として、分割画面モードでは、ビデオ信号は任意に分割・表示される。これら最終ビデオ信号はいずれも、マルチメディア再生装置３２０から表示装置３３０に送信される。

マルチメディア再生装置３２０は例えば、ＤＶＤプレイヤー、光ディスクプレイヤー、コンピューターまたはグラフィックスカードである。マルチメディア再生装置３２０はこの発明で大きな役割を果たし、その形式は問わない。表示装置３３０は例えば、テレビ、プロジェクター、液晶ディスプレイ、またはコンピューターのモニターである。

また、ユーザーインターフェイス３４０をマルチメディア再生装置３２０に結合し、再生設定を行うことも可能である。例えば、ユーザーインターフェイス３４０を用いて、表示装置３３０に送る映像角度を指定するか、または映像角度の構成や、表示モード（分割画面またはＰｉＰ）、最終ビデオ信号における映像角度の表示位置を指定することができる。それに応じる出力端末と出力端末はユーザーインターフェイス３４０に設けられている。映像角度の選択はナビゲーター３２２または角度組立装置３２８で行われる。ナビゲーター３２２で行われれば、所要の映像角度のみ多重分離し、角度組立装置３２８で行われれば、すべての映像角度を処理し、所要の映像角度のみ最終ビデオ信号として組み立てる。

図５を参照する。図５はこの発明によるマルチメディアコンテンツの複数の映像角度を表示装置で同時に再生する方法を表すフローチャートである。下記のステップは順次に行わなくてもよいし、各ステップも必ずしも連続して行うものではない。つまり、その間に別のステップを差し込むことも可能である。

ステップ５１０：マルチメディアコンテンツからビデオソース信号を読み込む。

ステップ５２０：ビデオソース信号を複数の映像角度に多重分離する。

ステップ５３０：マルチメディアコンテンツの符号化スキームにより複数の映像角度をそれぞれ復号化する。

ステップ５４０：映像角度をそれぞれレンダリングする。

ステップ５５０：ユーザー好みによって映像角度を最終ビデオ信号として組み立てる。

ステップ５６０：最終ビデオ信号を表示装置に出力する。

以上はこの発明に好ましい実施例であって、この発明の実施の範囲を限定するものではない。よって、当業者のなし得る修正、もしくは変更であって、この発明の精神の下においてなされ、この発明に対して均等の効果を有するものは、いずれもこの発明の特許請求の範囲に属するものとする。

この発明は従来のデコーダーとレンダリング装置を複数設けることで、マルチメディアコンテンツの複数の映像角度を同時に再生することを可能にする。かかる装置と方法は実施可能である。

従来のマルチメディアコンテンツのビデオソース信号を表す説明図である。 従来のマルチメディアシステムを表す説明図である。 この発明によるマルチメディアシステムを表す説明図である。 ＰｉＰモードにおいて映像角度を別々の表示位置に表示することを表す説明図である。 この発明によるマルチメディアコンテンツの複数の映像角度を同時に再生する方法を表すフローチャートである。

符号の説明

１００、３１５ ビデオソース信号
２００、３００ マルチメディアシステム
２１０ マルチメディアディスク
３１０ マルチメディアコンテンツ
２２０、３２０ マルチメディア再生装置
２２２、３２２ ナビゲーター
２２４、３２４ デコーダー
２２６、３２６ レンダリング装置
２３０、３３０ 表示装置
３２８ 角度組立装置
３４０ ユーザーインターフェイス
Ａ１、Ａ２、Ａ３ 映像角度

Claims (20)

1. マルチメディアの複数の映像角度を単一の表示装置で同時に表示する方法であって、
   マルチメディアコンテンツからビデオソース信号を読み込み、
   ビデオソース信号を複数の映像角度に多重分離し、
   マルチメディアコンテンツの符号化スキームにより映像角度のうち少なくとも２つを復号化し、
   復号化された映像角度のうち少なくとも２つをレンダリングし、
   レンダリングされた映像角度のうち少なくとも２つを最終ビデオ信号として組み立て、
   最終ビデオ信号を単一の表示装置に出力するステップからなることを特徴とする表示方法。
2. 前記マルチメディアコンテンツはＤＶＤ、ＨＤＤＶＤ、ブルーレイディスクを含むことを特徴とする請求項１記載の表示方法。
3. 前記マルチメディアコンテンツは光ディスクを含むことを特徴とする請求項１記載の表示方法。
4. 前記マルチメディアコンテンツは固体記憶装置を含むことを特徴とする請求項１記載の表示方法。
5. 前記ビデオソース信号はデジタルテレビ衛星信号または高精細度テレビ（ＨＤＴＶ）信号を含むことを特徴とする請求項１記載の表示方法。
6. 前記表示方法は更に、
   所要の映像角度を少なくとも２つ選ぶステップを含むことを特徴とする請求項１記載の表示方法。
7. 前記表示方法は更に、マルチメディアコンテンツの符号化スキームにより、選ばれた映像角度を復号化するステップを含むことを特徴とする請求項６記載の表示方法。
8. 前記表示方法は更に、選ばれた映像角度をレンダリングするステップを含むことを特徴とする請求項６記載の表示方法。
9. 前記表示方法は更に、選ばれた映像角度を組み立てるステップを含むことを特徴とする請求項６記載の表示方法。
10. 前記最終ビデオ信号を単一の表示装置に表示するステップは、分割画面モードで最終ビデオ信号を単一の表示装置に表示することを含むことを特徴とする請求項１記載の表示方法。
11. 前記最終ビデオ信号を単一の表示装置に表示するステップは、ピクチャー・イン・ピクチャーモードで最終ビデオ信号を単一の表示装置に表示することを含むことを特徴とする請求項１記載の表示方法。
12. マルチメディア再生システムであって、
    マルチメディアコンテンツからビデオソース信号を読み込んで複数の映像角度に多重分離するナビゲーターユニットと、
    マルチメディアコンテンツの符号化スキームにより複数の映像角度をそれぞれ復号化する少なくとも２個のデコーダーユニットと、
    復号化された複数の映像角度をそれぞれレンダリングする少なくとも２個のレンダリングユニットと、
    レンダリングされた映像角度の少なくとも２つを最終ビデオ信号として組み立てる角度組立装置とを含むことを特徴とするマルチメディア再生システム。
13. 前記マルチメディアコンテンツはＤＶＤ、ＨＤＤＶＤ、ＢＤを含むことを特徴とする請求項１２記載のマルチメディア再生システム。
14. 前記マルチメディアコンテンツは光ディスクを含むことを特徴とする請求項１２記載のマルチメディア再生システム。
15. 前記マルチメディアコンテンツは固体記憶装置を含むことを特徴とする請求項１２記載のマルチメディア再生システム。
16. 前記ビデオソース信号はＤＴＶ衛星信号またはＨＤＴＶ信号を含むことを特徴とする請求項１２記載のマルチメディア再生システム。
17. 前記マルチメディア再生システムは更に、マルチメディアコンテンツの視聴者が所要の映像角度を少なくとも２つ選んで表示させることを可能にするユーザーインターフェイスを含むことを特徴とする請求項１２記載のマルチメディア再生システム。
18. 前記デコーダーユニットは選ばれた映像角度を同時に復号化することを特徴とする請求項１７記載のマルチメディア再生システム。
19. 前記レンダリングユニットは選ばれた映像角度を同時にレンダリングすることを特徴とする請求項１７記載のマルチメディア再生システム。
20. 前記角度組立装置は選ばれた映像角度を組み立てることを特徴とする請求項１７記載のマルチメディア再生システム。

Images