JP4679515B2 - Ａｖストリーム再生装置、デコーダ切り換え方法、方法プログラム、プログラム記録媒体、及び集積回路 - Google Patents

Description

本発明は、複数のＡＶストリームを複数のデコーダで再生するＡＶストリーム再生装置に関し、より特定的には、ユーザの視聴形態に応じてＡＶストリームをデコードするデコーダを適切に切り換えるＡＶストリーム再生装置、その装置が行うデコーダ切り換え方法、その方法を実行するためのプログラム、そのプログラムを記録した媒体、及び集積回路に関する。

近年、携帯電話には、音声だけではなく映像を伴う会話が可能なテレビ電話機能が搭載されてきている。また、一方では、テレビ放送のデジタル化に伴って、携帯電話でもテレビ視聴が可能なようにテレビ受信機能が搭載されてきている。これらの機能を実現するためには、各サービスに対応する映像や音声等のストリームデータをリアルタイムにデコード処理するためのデコーダを、携帯電話に備える必要がある。さらに、複数のサービスを同時に提供するには複数のデコーダを搭載する必要がある。

一方、デバイス技術の発展に従い、複数のストリームデータのコーデックに対応したデコーダが開発されている。このデコーダを搭載することにより、対応サービスに特化することのない汎用の携帯電話を製作することが可能となり、工業生産上の利点がある。

複数のサービスに対応可能なように複数のデコーダを搭載した携帯電話の一例を、以下に説明する。図１７は、携帯電話システムの概要構成及び携帯電話画面の表示例を示す図である。図１８は、携帯電話１７００のハードウェア構成の一例を示す図である。

図１７を参照して、携帯電話１７００は、通信網１７０１及び電話基地局１７０２を経由して、他の携帯電話（図示せず）から送信されるテレビ電話データを通信アンテナ１７２１で受信する。そして、携帯電話１７００は、受信したテレビ電話データをデコードして、ＬＣＤパネル１７５１にテレビ電話アプリケーションとして表示する。ここでは、テレビ電話アプリケーションの画像表示枠をＴＶ電話枠１７２０としている。
一方、携帯電話１７００は、放送局１７０３から送信されるテレビ放送データを放送アンテナ１７１１で受信する。そして、携帯電話１７００は、受信したテレビ放送データをデコードして、ＬＣＤパネル１７５１にテレビ受信アプリケーションとして表示する。ここでは、テレビ受信アプリケーションの表示する枠をＴＶ放送枠１７１０としている。

また、携帯電話１７００は、音声を出力するスピーカ１７６１、上記テレビ電話アプリケーション及びテレビ受信アプリケーションの動作をユーザが制御するためのキー１７３１を備えている。なお、携帯電話１７００において、本発明に直接関与しない他機能は説明を省略している。

図１８を参照して、携帯電話１７００は、全体の制御を行うＣＰＵ１８０１と、プログラム等が格納されたＲＯＭ１８０２及びＲＡＭ１８０３と、ＢＵＳ１８０５と、放送アンテナ１７１１を介して得られるテレビ放送データを受信するＴＶ受信部１８１０と、通信アンテナ１７２１を介してテレビ電話データを送受信する通信部１８２０と、キー１７３１のオン／オフを制御するキーコントローラ１８３０と、ＴＶ受信部１８１０及び通信部１８２０が受信したＡＶストリームのデコードを行う２つのデコーダＡ１８４１及びデコーダＢ１８４２と、デコードされた結果をＬＣＤパネル１７５１上のＴＶ放送枠１７１０及びＴＶ電話枠１７２０で表示させるＬＣＤコントローラ１８５０と、デコーダＡ１８４１及びデコーダＢ１８４２でデコードされた音声データをアナログ信号に変換してスピーカ１７６１に出力するＤ／Ａ変換器１８６０とを、少なくとも備えている。

次に、従来技術におけるデコーダとアプリケーションの画像表示枠との関係について説明する。
図１９は、従来の一般的な技術における、デコーダとアプリケーションの画像表示枠との関係を示している。画面表示例では、ＴＶ受信部１８１０がデコーダＡ１８４１に、通信部１８２０がデコーダＢ１８４２に、それぞれ固定的に接続されている。デコーダＡ１８４１でデコードされたデータがテレビ放送アプリケーションのＴＶ放送枠１７１０としてＬＣＤパネル１７５１に表示され、デコーダＢ１８４２でデコードされたデータがテレビ電話アプリケーションのＴＶ電話枠１７２０としてＬＣＤパネル１７５１に表示される。ここで、各アプリケーションの出力は画像表示枠のみならず、音声によりスピーカ１７６１からも出力される。図１８における出力部１８８０は、ＬＣＤパネル１７５１とスピーカ１７６１の両方を含む。

また、デコーダの接続方法として、複数のＡＶ機器と接続したデコード機能を有するディスプレイ装置からなるＡＶシステムにおいて、処理する信号に応じて適切な（処理可能な）デコーダを選択して復号化する技術も存在する（特許文献１を参照）。この技術では、例えば図２０に示すように、ＩＥＥＥ１３９４インタフェース２００１において、複数種別のストリームデータが入力された場合、データ分離機スイッチャー２００２によって、適切なデコーダにストリームデータを振り分けるものである。

一般に、携帯電話に複数のデコーダを搭載する場合、高性能のデコーダを搭載することが好ましい。しかしながら、デコーダの性能と、消費電力及び製造コストとの間には、トレードオフの関係がある。このため、多くの生産者は、携帯電話が提供するサービスと価格とのバランスの観点から、次の選択を迫られることになる。

高性能デコーダだけを搭載して携帯電話価格よりもサービス品質を優先させるか、低性能デコーダだけを搭載してサービス品質よりも携帯電話価格を優先させるか、の選択である。これ以外には、性能格差があるデコーダを複数搭載し、携帯電話価格もサービス品質も中間レベルをとることも考えられる。すなわち、主要なサービスに対しては高性能のデコーダを割り当て、他のサービスに対しては低性能のデコーダを割り当てるのである。

例えば、デコーダＡ１８４１を消費電力は高いが画質の良い高性能デコーダとし、デコーダＢ１８４２を消費電力は低いが画質の悪い低性能デコーダとする。そして、デコーダＡ１８４１とデコーダＢ１８４２とは、どちらともテレビ電話データのコーデックにも、テレビ放送データのコーデックにも対応しているとする。

ここで、従来の携帯電話による構成では、デコーダとその入力データとの組み合わせは、少なくともサービス開始時点で固定的に割り当てられるため、サービス中に動的にデコーダを切り替えることができないという問題がある。例えば、高性能のデコーダＡ１８４１を使用して高品質な画像でテレビ視聴中に、テレビ電話が着信した場合を考える。この場合、ユーザの興味は着信したテレビ電話に移っているが、高性能のデコーダＡ１８４１はテレビ視聴用にすでに割り当てられているため、テレビ電話は低性能のデコーダＢ１８４２を使用して低品質で実行しなければならない。

それ故に、本発明の目的は、サービス提供中であっても、複数のデコーダの中からＡＶストリームをデコードする適切なデコーダを動的に切り換えることができる、ＡＶストリーム再生装置及びデコーダ切り換え方法を提供することである。

本発明は、複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置に向けられている。そして、上記目的を達成させるために、本発明のＡＶストリーム再生装置は、ＡＶストリーム取得部、複数のデコーダ、デコーダ性能管理部、モード設定部、デコーダ管理部、デコーダ切り換え部、及び出力部とを備える。

ＡＶストリーム取得部は、複数のＡＶストリームを取得する。複数のデコーダは、複数のＡＶストリームをデコードする。デコーダ性能管理部は、複数のデコーダの性能に関する情報を管理する。モード設定部は、特定のデコーダが優先的に割り当てられるＡＶストリームを判断するためのユーザ視聴形態が設定される。デコーダ管理部は、モード設定部の設定及びデコーダ性能管理部の情報に基づき、ユーザが指示又は動作したユーザ視聴形態に応じて、各ＡＶストリームに割り当てるデコーダを決定する。デコーダ切り換え部は、デコーダ管理部による決定に従って、ＡＶストリームのデコードに使用するデコーダを切り換える。出力部は、複数のデコーダでデコードされた複数の画像を個別の画像表示枠を用いて同時に画面表示させる。

好ましい、ユーザ視聴形態は、各ＡＶストリームに対応した画像表示枠が出力部の画面上に表示された際の画面表示状態である。典型的な画面表示状態は、画像表示枠のＺ軸位置、画像表示枠のサイズ、画像表示枠の表示位置、又は画像表示枠内の輝度である。また、他の好ましいユーザ視聴形態としては、ＡＶストリーム再生装置の装置形状が考えられる。このＡＶストリーム再生装置の装置形状は、画面表示状態に付随して判断されても、独立して判断されてもよい。

上述したＡＶストリーム再生装置の各構成が行うそれぞれの処理は、一連の処理手順を与えるデコーダ切り換え方法として捉えることができる。この方法は、一連の処理手順をコンピュータに実行させるためのプログラムの形式で提供される。このプログラムは、コンピュータ読み取り可能な記録媒体に記録された形態で、コンピュータに導入されてもよい。また、上述したＡＶストリーム再生装置を構成するモード設定部、デコーダ管理部、デコーダ性能管理部、及びデコーダ切り換え部の機能ブロックは、集積回路であるＬＳＩとして実現されてもよい。

上記の本発明によれば、サービス提供中であっても、画面表示状態や装置形状（ユーザ視聴形態）の変化に応じて、ユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

以下、携帯電話に適用させた場合を一例に挙げて、本発明のＡＶストリーム再生装置及びデコーダ切り換え方法を説明する。なお、本発明のＡＶストリーム再生装置を用いたシステム構成及びＡＶストリーム再生装置のハードウェア構成は、図１７及び図１８で説明した通りである。

図１は、本発明の一実施形態に係るＡＶストリーム再生装置１００の構成例を示す図である。図１において、本発明のＡＶストリーム再生装置１００は、モード設定部１０１と、表示変更部１０２と、デコーダ管理部１０３と、デコーダ性能管理部１０４と、デコーダ切り換え部１０５と、通信部１０６と、ＴＶ受信部１０７と、デコーダＡ１０８と、デコーダＢ１０９と、出力部１１０とを備える。通信部１０６及びＴＶ受信部１０７は、ＡＶストリーム取得部を構成する。
まず、上述したＡＶストリーム再生装置１００の各構成の概要を以下に説明する。

モード設定部１０１は、デコーダを切り換える時の画面表示状態に関する表示属性情報、及び切り換えるデコーダの優先順位に関するデコーダ選択基準情報を保持している。図２Ａ及び図２Ｂに、モード設定部１０１が保持する、テーブル形式で与えられた表示属性情報２０１及びデコーダ選択基準情報２０２の一例を示す。図２Ａの例では、出力部１１０の画面に表示される画像の、画像表示枠のサイズ（値＝０）、画像表示枠のＺ軸位置（値＝１）、画像表示枠の上下位置（値＝２）、及び画像表示枠内の輝度（値＝３）が、表示属性として予め設定されている。画像表示枠のサイズでは、枠サイズが大きい方が優先的にデコーダが割り当てられる。画像表示枠のＺ軸位置では、Ｚ軸方向（奥行き）が浅い、すなわち手前の方が優先的にデコーダが割り当てられる。画像表示枠の上下位置では、画像表示枠の位置が上側の方が優先的にデコーダが割り当てられる。画像表示枠内の輝度では、画像表示枠の表示輝度が高い方が優先的にデコーダが割り当てられる。図２Ｂの例では、高画質なデコーダを優先すること（値＝０）、及び低消費電力なデコーダを優先すること（値＝１）が、デコーダ選択基準として予め設定されている。

ユーザは、この表示属性情報２０１及びデコーダ選択基準情報２０２の中から所望のデコーダ切り換え条件を選択し、デコーダ切り換え基準管理テーブル２０３としてモード設定部１０１に設定する。図２Ｃは、このデコーダ切り換え基準管理テーブル２０３の一例を示す図であり、表示属性として画像表示枠のＺ軸位置（値＝１）が、デコーダ選択基準として高画質（値＝０）が、それぞれ設定されている。

デコーダ性能管理部１０４は、ＡＶストリーム再生装置１００が備える複数のデコーダ（ハードウエアで構成されるデコーダＡ１０８及びデコーダＢ１０９に加え、ソフトウエアで構成されるデコーダを含む）に関して、そのデコーダの特性に関する情報であるデコーダ特性管理情報３０１を格納する。図３に、デコーダ性能管理部１０４が保持するデコーダ特性管理情報３０１の一例を示す。この図３の例では、デコーダ毎に、フレーム数（数が多いほど高画質）、消費電力及びハード／ソフト種別（ソフトの方が省電力効果が得られる）を管理している。また、ＩＤ「１」のハードデコーダが最も画質が高く（３０フレーム）、ＩＤ「３」のソフトデコーダが最も消費電力が低い（２００ｍＷｈ）ことを示している。

表示変更部１０２は、ユーザからの指示に従って、出力部１１０の画面における画像表示枠の出力状態を変更する。また、表示変更部１０２は、この変更の内容をデコーダ管理部１０３に通知する。

デコーダ管理部１０３は、通信部１０６、ＴＶ受信部１０７及び表示変更部１０２からの通知に基づいて、取得した各ＡＶストリームについて、アプリケーション種別、表示属性及び復調に使用するデコーダに関する情報を管理する。また、デコーダ管理部１０３は、この管理内容に従ってデコーダ切り換え部１０５における切り換え制御を指示する。この管理は、例えば後述する図５Ａ等に示した表示属性管理テーブルを用いて行われる。

通信部１０６は、電話基地局１７０２との間でテレビ電話用信号の送受信を行う（図１７を参照）。ＴＶ受信部１０７は、放送局１７０３からテレビ放送信号を受信する（図１７を参照）。デコーダ切り換え部１０５は、デコーダ管理部１０３からの指示に従って、ＡＶストリームを処理するデコーダを動的に切り換える。デコーダＡ１０８は、高画質の画像を提供できるハード構成による高性能のデコーダである。デコーダＢ１０９は、低画質の画像を提供できるハード構成による低性能のデコーダである。出力部１１０は、デコーダＡ１０８及び／又はデコーダＢ１０９でデコードされた画像を、ＬＣＤパネル１７５１及びスピーカ１７６１に出力する（図１８を参照）。

次に、本発明のＡＶストリーム再生装置１００が実行するデコーダ切り換え方法を、表示属性の種類毎に具体的に説明する。図４は、本発明の一実施形態に係るＡＶストリーム再生装置１００が実行するデコーダ切り換え方法の処理手順を示すフローチャートである。

［具体例１］
具体例１は、図２Ｃに示したデコーダ切り換え基準管理テーブル２０３の表示属性に画像表示枠のＺ軸位置（値＝１）が、デコーダ選択基準に高画質（値＝０）が、設定された場合を説明する。図５Ａ〜図５Ｃは、表示属性管理テーブル５０１〜５０３の例を示す図である。図６Ａ〜図６Ｃは、図５Ａ〜図５Ｃに対応する出力部１１０の表示画面６０１〜６０３の例を示す図である。

今、ＴＶ放送枠６１０とブラウザ枠６２０とが、図５Ａに示す表示属性管理テーブル５０１に従って、画面６０１に表示されている場合を考える（図６Ａ）。この場合、ＴＶ放送枠６１０のＺ軸順位が最上位であるので、テレビ放送の処理に高画質デコーダ（図３、デコーダＩＤ「１」）が割り当てられている。次に、この状態で、ＴＶ電話枠６３０が立ち上がったとする。この立ち上がり直後は、ＴＶ電話枠６３０がＺ軸方向の最も手前に来るため（図６Ｂ）、テレビ電話の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル５０２が変更される（図５Ｂ）。

その後、表示変更部１０２を介してユーザからＴＶ放送枠６１０を最も手前に表示するように指示を受けた場合、すなわち表示属性の変更指示があると（ステップＳ４０１）、テレビ放送の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル５０３が変更される（ステップＳ４０２、Ｓ４０３、図５Ｃ、図６Ｃ）。そして、全ての画像表示枠について、割り当てられた新デコーダＩＤと割り当て前の旧デコーダＩＤとが一致しているか否かが判断され（ステップＳ４０４、Ｓ４０５）、一致していない場合だけ旧デコーダは新デコーダに切り換えられる（ステップＳ４０６）。その後、新デコーダＩＤはリセットされる（ステップＳ４０７）。リセットされたＩＤは、例えば「０」である。全ての画像表示枠に対する処理が完了すると、デコーダ切り換え処理が終了する。

以上の処理によって、サービス提供中であっても、Ｚ軸方向の順位が最も手前となるユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

［具体例２］
具体例２は、図２Ｃに示したデコーダ切り換え基準管理テーブル２０３の表示属性に画像表示枠のサイズ（値＝０）が、デコーダ選択基準に高画質（値＝０）が、設定された場合を説明する。図７Ａ〜図７Ｃは、表示属性管理テーブル７０１〜７０３の例を示す図である。図８Ａ〜図８Ｃは、図７Ａ〜図７Ｃに対応する出力部１１０の表示画面８０１〜８０３の例を示す図である。

今、ＴＶ放送枠８１０だけが、画面８０１に表示されている場合を考える（図７Ａ、図８Ａ）。次に、この状態で、ＴＶ電話枠８２０が立ち上がったとする。立ち上がり直後は、このＴＶ電話枠８２０のサイズ（左上座標と右下座標とで定まる領域）がＴＶ放送枠８１０のサイズよりも小さいため（図８Ｂ）、テレビ放送の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル７０２が変更される（図７Ｂ）。なお、画像表示枠のサイズは、左上座標から右下座標までの対角線の長さに応じて算出すればよい。

その後、表示変更部１０２を介してユーザからＴＶ放送枠８１０のサイズを小さくかつＴＶ電話枠８２０のサイズを大きくするように指示を受けた場合（ステップＳ４０１）、テレビ電話の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル７０３が変更される（ステップＳ４０２、Ｓ４０３、図７Ｃ、図８Ｃ）。以降の処理は上述した通りである。

以上の処理によって、サービス提供中であっても、画像表示枠サイズが最も大きくなるユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

［具体例３］
具体例３は、図２Ｃに示したデコーダ切り換え基準管理テーブル２０３の表示属性に画像表示枠の上下位置（値＝２）が、デコーダ選択基準に高画質（値＝０）が、設定された場合を説明する。図９Ａ及び図９Ｂは、表示属性管理テーブル９０１及び９０２の例を示す図である。図１０Ａ及び図１０Ｂは、図９Ａ及び図９Ｂに対応する出力部１１０の表示画面１００１及び１００２の例を示す図である。

今、ＴＶ放送枠１０１０が画面１００１の上側に、ＴＶ電話枠１０２０が画面１００１の下側に、それぞれ表示されている場合を考える（図１０Ａ）。この状態では、テレビ放送の処理に高画質デコーダ（図３、デコーダＩＤ「１」）が割り当てられている（図９Ａ）。
その後、表示変更部１０２を介してユーザからＴＶ電話枠１０２０を上側にＴＶ放送枠１０１０を下側に移動させるように指示を受けた場合（ステップＳ４０１）、テレビ電話の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル９０２が変更される（ステップＳ４０２、Ｓ４０３、図９Ｂ、図１０Ｂ）。以降の処理は上述した通りである。

以上の処理によって、サービス提供中であっても、画像表示枠が最も上側に位置するユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

［具体例４］
具体例４は、図２Ｃに示したデコーダ切り換え基準管理テーブル２０３の表示属性に画像表示枠内の輝度（値＝３）が、デコーダ選択基準に高画質（値＝０）が、設定された場合を説明する。図１１Ａ及び図１１Ｂは、表示属性管理テーブル１１０１及び１１０２の例を示す図である。図１２Ａ及び図１２Ｂは、図１１Ａ及び図１１Ｂに対応する出力部１１０の表示画面１２０１及び１２０２の例を示す図である。

今、ＴＶ放送枠１２１０が高輝度（画面が明るい）で、及びＴＶ電話枠１２２０が低輝度（画面が暗い）で、画面１２０１にそれぞれ表示されている場合を考える（図１２Ａ）。この状態では、テレビ放送の処理に高画質デコーダ（図３、デコーダＩＤ「１」）が割り当てられている（図１１Ａ）。
その後、表示変更部１０２を介してユーザからＴＶ電話枠１２２０の輝度をＴＶ放送枠１２１０よりも上げるように指示を受けた場合（ステップＳ４０１）、テレビ電話の処理に高画質デコーダが割り当てられるように、表示属性管理テーブル１１０２が変更される（ステップＳ４０２、Ｓ４０３、図１１Ｂ、図１２Ｂ）。以降の処理は上述した通りである。

以上の処理によって、サービス提供中であっても、画像表示枠内の輝度が最も高いユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

［具体例５］
具体例１〜４までは、ＡＶストリーム再生装置１００の出力部１１０の画面表示状態に応じてデコーダの切り換えを行う方法を説明した。この具体例５では、ＡＶストリーム再生装置１００そのものの形状又は動作（例えば、表示部の折りたたみ、回転、フリップ（フレックス）、スライド、イヤホーンマイクの接続）、すなわち装置形状に応じてデコーダの切り換えを行う方法を説明する。なお、画面表示状態及び装置形状は、ユーザ視聴形態として解釈できる。

具体例５は、図２Ｃに示したデコーダ切り換え基準管理テーブル２０３の表示属性に装置形状が、デコーダ選択基準に高画質（値＝０）が、設定された場合を説明する。図１３は、表示属性管理テーブル１３０１の例を示す図である。図１４Ａ〜図１４Ｃは、ＡＶストリーム再生装置１００の装置形状例を示す図である。

今、ＡＶストリーム再生装置１００が折りたたまれた形状で、ユーザがテレビ放送を視聴している状況を考える（図１４Ａ）。この状態では、もちろんテレビ放送の処理に高画質デコーダ（図３、デコーダＩＤ「１」）が割り当てられている（図１３）。次に、この状態で、テレビ電話がかかってきたとする。かかってきた直後は、このテレビ電話の処理に低画質デコーダが割り当てられる（図１４Ｂ）。

その後、ユーザが、装置形状に定義されているＡＶストリーム再生装置１００の形状変更動作を起こした場合、テレビ電話の処理に高画質デコーダが割り当てられ、また枠サイズが大きくなるように、表示属性管理テーブル１３０１が変更される（ステップＳ４０２、Ｓ４０３、図１４Ｂ、図１４Ｃ、図１３）。以降の処理は上述した通りである。

以上の処理によって、サービス提供中であっても、ユーザによるＡＶストリーム再生装置１００の形状変更動作に応じて、ユーザの注目度が高い画像表示枠に表示されるＡＶストリームを、常に高画質デコーダを使用してデコードできるように切り換えることができる。

なお、デコーダの切り換えタイミングチャートは、図１５に示すように、時刻Ｔ０に表示変更があった場合には、時刻Ｔ１にデコーダの切り換え処理が終了するように設定されている。

図１で示したモード設定部１０１、デコーダ管理部１０３、デコーダ性能管理部１０４、及びデコーダ切り換え部１０５の各機能ブロックは、典型的には集積回路であるＬＳＩ１６００として実現される。これらは、個別に１チップ化されてもよいし、一部又は全てを含むように１チップ化されてもよい。図１６に、集積回路化の一例を示す。このＬＳＩ１６００は、集積回路化する機能ブロックの範囲例である。ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。ＬＳＩ製造後にプログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを、利用してもよい。
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてあり得る。

本発明に係るＡＶストリーム再生装置及びデコーダ切り換え方法は、テレビ放送やテレビ電話の画像を画面表示する通信装置等に利用可能であり、特に複数のデコーダの中からＡＶストリームをデコードする適切なデコーダを選択する場合等に適している。

本発明の一実施形態に係るＡＶストリーム再生装置の構成例を示す図 表示属性情報の一例 デコーダ選択基準情報の一例 デコーダ切り換え基準管理情報の一例 デコーダ特性管理情報の一例 本発明の一実施形態に係るデコーダ切り換え方法の処理手順を示すフローチャート 具体例１における表示属性管理テーブルの例 具体例１における表示属性管理テーブルの例 具体例１における表示属性管理テーブルの例 具体例１における表示画面の例 具体例１における表示画面の例 具体例１における表示画面の例 具体例２における表示属性管理テーブルの例 具体例２における表示属性管理テーブルの例 具体例２における表示属性管理テーブルの例 具体例２における表示画面の例 具体例２における表示画面の例 具体例２における表示画面の例 具体例３における表示属性管理テーブルの例 具体例３における表示属性管理テーブルの例 具体例３における表示画面の例 具体例３における表示画面の例 具体例４における表示属性管理テーブルの例 具体例４における表示属性管理テーブルの例 具体例４における表示画面の例 具体例４における表示画面の例 具体例５における表示属性管理テーブルの例 具体例５における表示画面の例 具体例５における表示画面の例 具体例５における表示画面の例 デコーダの切り換えを示すタイミングチャートの例 図１に示すＡＶストリーム再生装置の主要機能を集積回路化した場合の構成図 携帯電話システムの概要構成及び携帯電話画面の表示例を示す図 携帯電話のハードウェア構成の一例を示す図 従来技術における主要機能部分の構成例を示す図 従来技術における主要機能部分の構成例を示す図

符号の説明

１００ ＡＶストリーム
１０１ モード設定部
１０２ 表示変更部
１０３ デコーダ管理部
１０４ デコーダ性能管理部
１０５ デコーダ切り換え部
１０６、１８２０ 通信部
１０７、１８１０ ＴＶ受信部
１０８、１０９、１８４１、１８４２ デコーダ
１１０、１８８０ 出力部
１６００ ＬＳＩ
１７００ 携帯電話
１７０１ 通信網
１７０２ 電話基地局
１７０３ 放送局
１７３１ キー
１７５１ ＬＣＤパネル
１７６１ スピーカ
２００１ １３９４インタフェース
２００２ データ分離機スイッチャー

Claims (9)

1. 複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置であって、
   複数のＡＶストリームを取得するＡＶストリーム取得部と、
   前記ＡＶストリーム取得部で取得された複数のＡＶストリームをデコードする複数のデコーダと、
   前記複数のデコーダの性能に関する情報を管理するデコーダ性能管理部と、
   特定のデコーダが優先的に割り当てられるＡＶストリームを判断するための基準であって、ユーザ視聴形態に関する基準が設定されるモード設定部と、
   前記モード設定部に設定された基準及び前記デコーダ性能管理部の情報に基づき、ユーザの指示によりユーザの注目度が高い画像表示枠を特定し、前記ユーザの注目度が高い画像表示枠に表示されるＡＶストリームに高画質デコーダを割り当てるデコーダ管理部と、
   前記デコーダ管理部による割り当てに従って、ＡＶストリームのデコードに使用するデコーダを切り換えるデコーダ切り換え部と、
   前記複数のデコーダでデコードされた複数の画像を個別の画像表示枠を用いて同時に画面表示させる出力部とを備える、ＡＶストリーム再生装置。
2. 前記ユーザの注目度が高い画像表示枠は、画像表示枠の画面奥行方向の表示位置をもとに特定されることを特徴とする、請求項１に記載のＡＶストリーム再生装置。
3. 前記ユーザの注目度が高い画像表示枠は、画像表示枠のサイズをもとに特定されることを特徴とする、請求項１に記載のＡＶストリーム再生装置。
4. 前記ユーザの注目度が高い画像表示枠は、画像表示枠の表示位置をもとに特定されることを特徴とする、請求項１に記載のＡＶストリーム再生装置。
5. 前記ＡＶストリーム再生装置は、それぞれの画像表示枠内の輝度をユーザの指示により変更できるものであって、
   前記ユーザの注目度が高い画像表示枠は、画像表示枠内の輝度をもとに特定されることを特徴とする、請求項１に記載のＡＶストリーム再生装置。
6. 複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置が実行するデコーダ切り換え方法であって、
   複数のＡＶストリームを取得するステップと、
   前記複数のＡＶストリームをデコードするステップと、
   ユーザが指示又は動作したユーザ視聴形態を認識するステップと、
   予め設定された、複数のデコーダの性能に関する情報、及び特定のデコーダが優先的に割り当てられるＡＶストリームを判断するための基準であってユーザ視聴形態に関する基準に基づき、ユーザの指示によりユーザの注目度が高い画像表示枠を特定し、前記ユーザの注目度が高い画像表示枠に表示されるＡＶストリームに高画質デコーダを割り当てるステップと、
   前記割り当てるステップによる割り当てに従って、ＡＶストリームのデコードに使用するデコーダを切り換えるステップとを含む、デコーダ切り換え方法。
7. 複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置が、デコーダ切り換え方法を実行するためのプログラムであって、
   複数のＡＶストリームを取得するステップと、
   前記複数のＡＶストリームをデコードするステップと、
   ユーザが指示又は動作したユーザ視聴形態を認識するステップと、
   予め設定された、複数のデコーダの性能に関する情報、及び特定のデコーダが優先的に割り当てられるＡＶストリームを判断するための基準であってユーザ視聴形態に関する基準に基づき、ユーザの指示によりユーザの注目度が高い画像表示枠を特定し、前記ユーザの注目度が高い画像表示枠に表示されるＡＶストリームに高画質デコーダを割り当てるステップと、
   前記割り当てるステップによる割り当てに従って、ＡＶストリームのデコードに使用するデコーダを切り換えるステップとを含む、プログラム。
8. 複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置が、デコーダ切り換え方法を実行するためのプログラムを記録した媒体であって、
   複数のＡＶストリームを取得するステップと、
   前記複数のＡＶストリームをデコードするステップと、
   ユーザが指示又は動作したユーザ視聴形態を認識するステップと、
   予め設定された、複数のデコーダの性能に関する情報、及び特定のデコーダが優先的に割り当てられるＡＶストリームを判断するための基準であってユーザ視聴形態に関する基準に基づき、ユーザの指示によりユーザの注目度が高い画像表示枠を特定し、前記ユーザの注目度が高い画像表示枠に表示されるＡＶストリームに高画質デコーダを割り当てるステップと、
   前記割り当てるステップによる割り当てに従って、ＡＶストリームのデコードに使用するデコーダを切り換えるステップとを含む、記録媒体。
9. 複数のＡＶストリームから再生された画像を同時に画面表示するＡＶストリーム再生装置に用いられる集積回路であって、
   複数のＡＶストリームを取得するＡＶストリーム取得部と、取得された複数のＡＶストリームをデコードする複数のデコーダと、当該複数のデコーダでデコードされた複数の画像を個別の画像表示枠を用いて同時に画面表示させる出力部とを備えたＡＶストリーム再生装置に組み込まれ、
   前記複数のデコーダの性能に関する情報を管理するデコーダ性能管理部、
   特定のデコーダが優先的に割り当てられるＡＶストリームを判断するための基準であって、ユーザ視聴形態に関する基準が設定されるモード設定部、
   前記モード設定部に設定された基準及び前記デコーダ性能管理部の情報に基づき、ユーザの指示によりユーザの注目度が高い画像表示枠を特定し、前記ユーザの注目度が高い画像表示枠に表示されるＡＶストリームに高画質デコーダを割り当てるデコーダ管理部、及び
   前記デコーダ管理部による割り当てに従って、ＡＶストリームのデコードに使用するデコーダを切り換えるデコーダ切り換え部として機能する回路を集積した、集積回路。

Images