JP2006094415A - 映像装置及び映像ストリーミング方法 - Google Patents

Abstract

【課題】グラフィックスが重畳された映像装置の出力映像を映像装置とネットワーク接続された機器上で実時間で視聴可能とする。
【解決手段】映像信号にグラフィックスを重畳するグラフィックス処理部１１と、グラフィックス処理部１１の出力を符号化するＭＰＥＧエンコーダ５と、ＭＰＥＧエンコーダ５の出力をネットワーク端子１７を介して外部パーソナルコンピュータ３０へストリーミングするストリーミングサーバ１６とを具備する。
【選択図】 図１

Description

本発明はネットワーク機能を有し、映像データをパーソナルコンピュータ等の情報処理装置へ伝送する映像装置及び映像ストリーミング方法に関する。

従来、パーソナルコンピュータにおいて、ネットワーク装置とＴＶチューナ等の映像装置を接続する場合には、イーサネット（登録商標）、ＵＳＢ、ＩＥＥＥ１３９４等のインターフェースによって接続している。従って、映像装置側の内部バスとネットワーク装置側の内部バスとの間に、イーサネット（登録商標）コントローラ、ＵＳＢコントローラ、ＩＥＥＥ１３９４コントローラ等のハードウェアコントローラが必要になるとともに、コントローラを制御するためのファームウェアが必要になり、システム構成が煩雑かつ大型化する等の問題があった。これを解決するために、映像装置とネットワーク装置との間等、それぞれが異なる処理を行うプロセッサをもつ複数種の機能装置を複合させ、上記機能装置各々のバスを共有することによって、上記機能装置の接続に、ハードウェアコントローラ、コントローラ制御用ファームウェアを必要としない、複合装置のバス共有機能を実現する提案がある（例えば、特許文献１参照）。
特開２００３−２２３４１０号公報（段落［０００５］乃至［０００８］）

特許文献１記載の装置では、テレビチューナで受信した映像信号に従う映像データ（ＭＥＰＧ２データ）がワイヤレスＬＡＮを介して外部の無線機器にリアルタイム伝送される。そして、ワイヤレスＬＡＮの無線周波数帯域における電波状態が悪化して規定の伝送帯域が確保されない場合は、ＭＥＰＧ２データのビットレートを落として映像データのリアルタイム伝送を維持する。

一方、近年の映像装置は、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）などのＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を映像に重畳して、ユーザに表示されている映像の情報を示している。また、映像記録再生装置では、記録したタイトルの編集作業をＧＵＩでユーザに分かり易く表示しており、その映像は映像端子に接続されたＴＶ等の機器で表示されていた。

しかしながら、特許文献１記載の映像装置はネットワーク接続されているパーソナルコンピュータにはＧＵＩを重畳した映像を表示することができなかった。そのため、録画したタイトルの名前を付け替える等の編集作業をネットワーク接続されたパーソナルコンピュータ上で行う事ができなかった。

本発明の目的はネットワーク機能が付いた映像装置において、グラフィックスが重畳された映像装置の出力映像を映像装置とネットワーク接続された機器上で実時間で視聴可能とすることである。

本発明の一実施態様によれば、映像装置は映像信号にグラフィックスを重畳する手段と、前記グラフィックス重畳手段の出力を符号化する手段と、前記符号化手段の出力をネットワークを介して外部情報処理装置へストリーミングする手段とを具備するものである。

本発明の他の実施態様によれば、映像ストリーミング方法は映像信号にグラフィックスを重畳するステップと、前記グラフィックスが重畳された映像信号を符号化するステップと、前記符号化信号をネットワークを介して外部情報処理装置へストリーミングするステップとを具備するものである。

以上説明したように本発明によれば、グラフィックスが重畳された映像信号を符号化手段へフィードバックしているので、グラフィックスが重畳された映像装置の出力映像を映像装置とネットワーク接続された機器上で実時間で視聴可能である。

以下、図面を参照して本発明による映像装置の実施の形態を説明する。

図１は、本発明による映像装置の一実施形態としてのハードディスク及び／またはＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）へ音声を含む映像を記録、再生可能な映像記録再生装置の構成図である。

ＴＶ（テレビジョン）チューナ１または外部入力端子２から供給された音声を含む映像信号は、デコーダ３でデジタル信号にそれぞれ変換される。変換されたデジタル信号は、入力切替部４を介してＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）エンコーダ５に供給され、ここでＤＶＤ−ＶＲ（ビデオレコーディング）規格、あるいはＤＶＤ−Ｖ（ビデオ）規格に準拠した形式のデータに変換（圧縮符号化）される。変換後のデータは、データ処理部６を介して、ハードディスクドライブ（ＨＤＤ）７もしくはＤＶＤドライブ２０内に装着されたＤＶＤ−ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）／Ｒ（Ｒｅｃｏｒｄａｂｌｅ）ディスクに記録される。

記録された映像信号を再生する場合は、ＨＤＤ７またはＤＶＤ−ＲＡＭ／Ｒディスク８から符号化データを読み出し、データ処理部６を介してＭＰＥＧデコーダ９に供給され、デコード（伸長・復号）される。デコードされた映像信号は、出力切替部１０を介してグラフィックス処理部１１にてＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）などのＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）が重畳され、エンコーダ１２を介して映像出力端子１３と音声出力端子１４にそれぞれ出力される。出力端子１３より出力される映像信号は、図示しないＴＶモニタで、出力端子１４より出力されるオーディオ信号は、図示しないスピーカでそれぞれ再生される。

以上の記録再生に係る一連の各部全体の制御は、マイクロコンピュータである制御部１５で実行される。

ストリーミングサーバ１６はネットワーク端子１７を介してパーソナルコンピュータ（ＰＣ）３０とネットワーク接続され、パーソナルコンピュータ３０からのストリーミング要求に対して、ＭＰＥＧエンコーダ５から出力されたデータをデータ処理部６を介して取得し、ストリーミングのプロトコルに変換してパーソナルコンピュータ３０へ転送する。なお、ストリーミングサーバ１６はソフトウェアで実現する事も可能であり、その制御を制御部１５で実現したとしても機能としては同じである。

ＭＰＥＧエンコーダ５はＴＶチューナ１からの映像等を録画するために使われるが、上記したように、パーソナルコンピュータ３０からストリーミング要求があった時に、ストリーミングデータを作るためにも使われる。ＭＰＥＧエンコーダ５は同時に１つの映像しか符号化できないため、制御部１５は録画等の処理を優先して行うものとする。

入力切替部４にはデコーダ３の出力以外に、ＭＰＥＧデコーダ９の出力、グラフィックス処理部１１の出力もフィードバック信号として供給される。また、出力切替部１０にはＭＰＥＧデコーダ９の出力以外に、デコーダ３の出力も供給される。

ＭＰＥＧデコーダ９から入力切替部４への第１フィードバック経路ＦＢ１は、例えばＨＤＤ７に保存されている長時間記録したデータを、ＤＶＤ−ＲＡＭにコピーする際に、ＤＶＤの容量である４．７ＧＢ内に収まるサイズにするために記録ビットレートを下げて再エンコードするためのものである。このフィードバック経路ＦＢ１はＭＰＥＧデコーダ９の出力からデータを選択するように戻しているため、再エンコード中にグラフィックス処理部１１によりＧＵＩを表示していても、そのグラフィックスデータが一緒にＤＶＤ８等に記録されることはない。

グラフィックス処理部１１の出力から第２フィードバック経路ＦＢ２を介してデータを入力切替部４に戻しているため、第２フィードバック経路ＦＢ２から入力される信号をＭＰＥＧエンコーダ５で再エンコードすると、ＭＰＥＧデコーダ９の出力とＧＵＩが重畳された画像をＤＶＤ８等に記録することができる。

このように本実施形態では、ＴＶチューナ１や外部入力端子２から入力される映像信号の記録と、既に記録済みのデータを再生し、それを再エンコードすることによる複製作成のための記録及び再生画像とグラフィックスとを重畳した画像の記録を実現できる。

なお、フィードバック経路ＦＢ２は、グラフィックス処理部１１の出力をフィードバックするものであるが、エンコーダ１２の出力であるアナログ信号を、デコーダ３の入力にフィードバックする経路に変更してもよい。この場合は、エンコーダ１２によりＤ／Ａ変換及びデコーダ３によりＡ／Ｄ変換が実行されるので、多少の画質劣化が考えられるが、ＭＰＥＧデコーダ９の出力とＧＵＩが重畳されたデータをＭＰＥＧエンコーダ５にフィードバックするという機能は同じである。これらの入力経路を切り替える入力切替部４及びグラフィックス処理部１１への入力を切り替える出力切替部１０の制御も制御部１５で実行される。

以下、本実施形態の動作を説明する。

先ず、映像信号をＤＶＤ−Ｒメディア８にＤＶＤビデオフォーマットで記録する場合を説明する。入力切替部４の設定をフィードバック経路ではなくデコーダ３からの信号をＭＰＥＧエンコーダ５に入力するように切り替える。ＭＰＥＧエンコーダ５はＤＶＤビデオフォーマットを出力するように設定する。これにより、ＭＰＥＧエンコーダ５から出力されたＤＶＤビデオフォーマット準拠のデータが、データ処理部６を経由してＤＶＤドライブ２０内のＤＶＤ−Ｒメディア８に記録される。

次に、既にＨＤＤ７に記録されているＤＶＤ−ＶＲフォーマットのデータを、ＤＶＤビデオフォーマットでＤＶＤ−Ｒメディア８にコピーする手順を説明する。入力切替部４の設定を、ＭＰＥＧデコーダ９の出力をＭＰＥＧエンコーダ５に入力するようにフィードバック経路ＦＢ１からの入力に切り替える。この状態で記録を開始させると同時に、ＨＤＤ７内のＶＲフォーマットデータを再生すると、ＨＤＤ７内の記録データがＤＶＤ−ＲメディアにＤＶＤビデオフォーマットでコピーできる。このとき、コピーの進捗状況をグラフィックス処理部１１によりグラフィックスで重畳表示していても、フィードバック経路ＦＢ１はＭＰＥＧデコーダ９の出力のみをフィードバックするため、ＤＶＤ−Ｒメディア８にはＭＰＥＧデコーダ９の出力のみが記録され、グラフィックスが重畳されて記録されることはない。

次に、ＤＶＤ−Ｒメディア８に、ＤＶＤビデオフォーマットのメニューを作成する処理について説明する。

ＤＶＤビデオフォーマットのメニューは、記録されたタイトルの名称やサムネイル画像、記録時間などが表示されたものであり、ＭＰＥＧ−２形式で記録されている。メニュー画面の作成はグラフィックス処理部１１で行うが、グラフィックス処理部１１ではＭＰＥＧ−２形式のデータを出力できないため、ＭＰＥＧ−２形式への圧縮はＭＰＥＧエンコーダ５によって行うことになる。

ユーザがメニュー作成を指示したら、グラフィックス処理部１１の出力をＭＰＥＧエンコーダ５に戻すためのフィードバック経路ＦＢ２を選択するように、入力切替部４を切り替える。その後、ＭＰＥＧデコーダ９からの再生画像上に、グラフィックス処理部１１で描画するグラフィックスを重畳してメニュー画像を作成する。このメニュー画像は、フィードバック経路ＦＢ２を経由してＭＰＥＧエンコーダ５に入力され、ここでＭＰＥＧ−２形式のメニュー用データが作成される。

ＤＶＤビデオフォーマットのメニューデータには、サブピクチャーと呼ばれる情報が付加されている。このサブピクチャーには、ユーザがリモコンでメニュー内のボタンを選択したときの選択色などの情報が記述されている。制御部１５では、このサブピクチャーの作成を行い、ＭＰＥＧエンコーダ５で作成したＭＰＥＧ−２データと多重化する。

このようにして作成されたＤＶＤビデオフォーマットのメニューデータを、ＤＶＤ−Ｒメディア８に記録する。

次に、パーソナルコンピュータ３０からストリーミング要求があった時の動作を図２のフローチャートを用いて説明する。

本映像記録再生装置に接続されたパーソナルコンピュータ３０からストリーミング開始要求があると、ストリーミングサーバ１６はネットワーク端子１７を介して開始要求を受け付ける（Ｓ２１）。制御部１５はＭＰＥＧエンコーダ５が使用中か否か、すなわち録画中か否かを判定し（Ｓ２２）、使用中の場合は録画を優先するために、ストリーミングサーバ１６はストリーミングが不可能である事をネットワーク端子１７を介してパーソナルコンピュータ３０に通知する（Ｓ２３）。

ＭＰＥＧエンコーダ５が未使用の場合は、入力切替部４の入力経路をグラフィックス処理部１１の出力であるフィードバック経路ＦＢ２に切り替え（Ｓ２４）、ＭＰＥＧエンコーダ５を起動する（Ｓ２５）。この時、ＴＶチューナ１や外部入力端子２からの映像をストリーミングする場合は、出力切替部１０の入力はデコーダ３からの経路が選択され（Ｓ２６、Ｓ２７）、ＨＤＤ７やＤＶＤ８に記録されているタイトルをストリーミングする場合は、ＭＰＥＧデコーダ９からの経路が選択される（Ｓ２６、Ｓ２８）。

ＭＰＥＧエンコーダ５がエンコードを開始すると、ストリーミングサーバ１６はＭＰＥＧエンコーダ５が出力したデータをデータ処理部６より取得し、必要であればストリーミングの為のデータに加工し、ネットワーク端子１７を介してパーソナルコンピュータ３０に転送（ストリーミング）する（Ｓ２９）。

このようにパーソナルコンピュータ３０で視聴される信号はグラフィックス処理部１１からフィードバック経路ＦＢ２を介してＭＥＰＧエンコーダ５に供給される信号であるので、ＴＶモニタで表示される信号と同じであり、グラフィックスが重畳された状態でストリーミングされる。

次に、ストリーミング中にＴＶ番組をＨＤＤ等へ録画する要求が発生した時の動作を図３のフローチャートを用いて説明する。

ストリーミング中にＴＶ番組をＨＤＤへ録画する要求が発生した場合は、ストリーミングサーバ１６はパーソナルコンピュータ３０へストリーミングが不可となった事を通知する（Ｓ３１）。制御部１５はＭＰＥＧエンコーダ５の動作を一旦停止し（Ｓ３２）、入力切替部４の入力経路をグラフィックス処理部１１からのフィードバック経路ＦＢ２からデコーダ３からの経路に切り替える（Ｓ３３）。これにより、ストリーミングが中止される。この後、ＭＰＥＧエンコーダ５はＴＶチューナ１からの信号をＨＤＤ７へ録画するために、起動される（Ｓ３４）。このように、ＭＰＥＧエンコーダ５を録画とストリーミングの両方に使用するが、録画を優先することができる。

以上説明したように、本実施形態によれば、ＴＶモニタ等へ出力するグラフィックスが重畳された映像をフィードバック経路ＦＢ２によりＭＰＥＧエンコーダ５の入力へ接続し、エンコードしたデータをストリーミングサーバ１６からパーソナルコンピュータ３０へ転送する事により、パーソナルコンピュータ３０でＴＶモニタと同じ状態で、ＴＶ映像の実時間の視聴や、再生映像の実時間の視聴が可能となる。

なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

本発明による映像装置の一実施形態の構成を示すブロック図。 一実施形態においてパーソナルコンピュータからストリーミング要求があった時の手順を説明するための図。 一実施形態においてストリーミング中にＨＤＤへの録画要求があった時の手順を説明するための図。

符号の説明

１…ＴＶチューナ、３…デコーダ、４…入力切替部、５…ＭＰＥＧエンコーダ、６…データ処理部、７…ＨＤＤ、８…ＤＶＤ、９…ＭＰＥＧデコーダ、１０…出力切替部、１１…グラフィックス処理部、１２…エンコーダ、１５…制御部、１６…ストリーミングサーバ、１７…ネットワーク端子、３０…パーソナルコンピュータ。

Claims (12)

1. 映像信号にグラフィックスを重畳する手段と、
   前記グラフィックス重畳手段の出力を符号化する手段と、
   前記符号化手段の出力をネットワークを介して外部情報処理装置へストリーミングする手段と、
   を具備する映像装置。
2. 前記グラフィックス重畳手段の出力を表示する手段をさらに具備することを特徴とする請求項１に記載の映像装置。
3. 入力映像信号、あるいは前記グラフィックス重畳手段の出力を選択的に前記符号化手段に入力する手段をさらに具備することを特徴とする請求項１または２に記載の映像装置。
4. 前記符号化手段の出力を記録する手段と、
   前記記録手段に記録された映像信号を復号する手段と、
   前記復号手段の出力、あるいは入力映像信号を選択的に前記グラフィックス重畳手段に入力する手段と、
   をさらに具備することを特徴とする請求項１、２、または３に記載の映像装置。
5. 映像信号を符号化する手段と、
   前記符号化手段の出力を記録する手段と、
   前記符号化手段の出力をネットワークを介して外部情報処理装置へストリーミングする手段と、
   前記記録手段に記録された符号化信号を復号する手段と、
   前記復号手段の出力、あるいは入力映像信号にグラフィックスを重畳する手段と、
   前記グラフィックス重畳手段の出力、あるいは入力映像信号を前記符号化手段へ選択的に供給する切替手段と、
   を具備する映像装置。
6. 前記グラフィックス重畳手段の出力を表示する手段をさらに具備することを特徴とする請求項５に記載の映像装置。
7. 映像信号にグラフィックスを重畳するステップと、
   前記グラフィックスが重畳された映像信号を符号化するステップと、
   前記符号化信号をネットワークを介して外部情報処理装置へストリーミングするステップと、
   を具備する映像ストリーミング方法。
8. 前記グラフィックスが重畳された映像信号を表示するステップをさらに具備することを特徴とする請求項７に記載の映像ストリーミング方法。
9. 入力映像信号、あるいは前記グラフィックスが重畳された映像信号を選択的に前記符号化に供するステップをさらに具備することを特徴とする請求項７または８に記載の映像ストリーミング方法。
10. 前記符号化信号を記録媒体に記録するステップと、
    前記記録媒体に記録された符号化信号を復号するステップと、
    前記復号信号、あるいは入力映像信号を選択的に前記グラフィックス重畳に供するステップと、
    をさらに具備することを特徴とする請求項７、８または９に記載の映像ストリーミング方法。
11. 映像信号を符号化するステップと、
    前記符号化信号を記録媒体に記録するステップと、
    前記符号化信号をネットワークを介して外部情報処理装置へストリーミングするステップと、
    前記記録媒体に記録された符号化信号を復号するステップと、
    前記復号信号、あるいは入力映像信号にグラフィックスを重畳するステップと、
    前記グラフィックスが重畳された信号、あるいは入力映像信号を選択的に前記符号化に供するステップと、
    を具備する映像ストリーミング方法。
12. 前記グラフィックスが重畳された信号を表示するステップをさらに具備することを特徴とする請求項１１に記載の映像ストリーミング方法。

Images