JP3894362B2 - 複数動画像の閲覧装置および記録媒体 - Google Patents
複数動画像の閲覧装置および記録媒体 Download PDFInfo
- Publication number
- JP3894362B2 JP3894362B2 JP2001080946A JP2001080946A JP3894362B2 JP 3894362 B2 JP3894362 B2 JP 3894362B2 JP 2001080946 A JP2001080946 A JP 2001080946A JP 2001080946 A JP2001080946 A JP 2001080946A JP 3894362 B2 JP3894362 B2 JP 3894362B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- file
- proxy
- video file
- playback
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、複数の動画像の閲覧装置および記録媒体に関し、特に複数の映像を限られた伝送帯域や復号能力でも効率的に再生・閲覧することができるようにした複数の動画像の閲覧装置および記録媒体に関する。
【０００２】
【従来の技術】
複数の映像を同時再生する従来の第１方式を、図16に示す。図16において、制御部10からの制御により、映像再生部101〜10nは複数の映像データ１〜ｎを蓄積装置11から順次取り出して映像再生部101〜10nに入力させる。映像再生部101〜10nでは映像データを順次読み込んで、画面出力信号、オーディオ出力信号、および現在の再生時刻を表示部17に出力する。表示部17では再生時刻、画面出力信号、およびオーディオ出力信号を取り込んで、再生時刻の表示、画面出力、およびオーディオ出力を行う。
【０００３】
この場合、再生する映像データの個数分の処理負荷がかかるため、例えばソフトウェアで再生処理を行う場合、再生する映像数が限られるというデメリットがある。
【０００４】
複数の映像を同時再生し、指定した時刻から再生する従来の第２方式を図17に示す。図17において、例えば映像再生部101から映像全体の長さが再生長として再生開始時刻設定部201に入力される。再生開始時刻設定部201では再生を行う時刻を設定して、設定時刻を映像再生部101に出力する。映像再生部101では、設定時刻が入力されると、設定時刻付近の映像データの記録位置情報を設定して、蓄積装置11から指定した記録位置からの映像データを取り込んで再生を行う。
【０００５】
再生開始時刻設定部201での再生開始時刻の設定方法としては、以下のような方法が用いられる。
（１） 再生開始時刻を直接入力する。
（２） 映像全体の長さを100％として、そのうちの指定された比率を再生開始時刻とする。
【０００６】
前記（１）の例としてはタイムコード入力して再生を開始するようなものがある。また、前記（２）の例としては映像プレイヤーの再生位置を示すスクロールバーの位置を調整して再生時刻を設定するものがある。
【０００７】
図18は従来の第３方式を示す。図のように映像データは再生装置とネットワークで接続されたサーバシステムに格納されている。
【０００８】
図18において、制御部10からの制御により、映像再生部101から10nに映像再生を要求する。映像再生部101〜10nではｎ個の映像データ要求信号をネットワーク104を介してサーバシステム102に送出する。サーバシステム102では要求信号をビデオサーバ103で読みこみ、指定された映像データを蓄積装置11からビデオサーバ103に送出する。ビデオサーバ103ではｎ個の映像データをネットワーク104を介してクライアント端末105に送信する。
【０００９】
クライアント端末105では、送られてきた映像データを映像再生部101〜10nに転送する。映像再生部101〜10nでは映像データを読み込んで、画面出力信号やオーディオ出力信号、現在の再生時刻を表示部17に出力する。表示部17では、再生時刻、画面出力信号やオーディオ出力信号を取り込んで、再生時刻の表示、画面出力、オーディオ出力を行う。
【００１０】
また、映像再生部101〜10nから各映像について映像全体の長さが再生長として再生開始時刻設定部201に入力される。再生開始時刻設定部201は、各映像について再生を行う時刻を設定して、設定時刻を映像再生部101〜10nに出力する。映像再生部101〜10nは、設定時刻が入力されると設定時刻付近の映像データの記録位置情報を設定して、蓄積装置11から指定した記録位置からの映像データを取り込んで再生を行う。
【００１１】
再生開始時刻設定部201での再生開始時刻の設定方法としては、前記従来方式の（１）、（２）と同じ方法が用いられる。
【００１２】
【発明が解決しようとする課題】
前記した従来の第２、第３方式では、どの位置にどのような映像が含まれているのかがわからないため、ユーザはいくつかの時刻を設定してその時刻からの再生を試行的に行って目的の映像を見つけ、該目的の映像を再生するようにしている。このため、映像の検索には非常に多くの時間と手間がかかるという問題があった。
【００１３】
また、前記第３の従来方式の場合には、映像を伝送するために必要な帯域は映像の個数に依存するため、多くの映像を同時にネットワーク伝送するためには広帯域の回線が必要になるという問題があった。
【００１４】
本発明の目的は、前記した従来技術の問題点を解消し、蓄積装置に蓄積された映像ファイルやネットワーク接続されたサーバ内の映像ファイルについて、複数の映像ファイルを再生端末の処理負荷を増大させずに再生したり、限られたネットワーク帯域でも映像を伝送して閲覧できるようにしたり、また映像に含まれる映像シーンを閲覧、検索して再生したりすることのできる複数の動画像の配信装置を提供することにある。また、他の目的は、前記閲覧処理できるプログラムを記録したコンピュータ読み込み可能な記録媒体を提供することにある。
【００１６】
【課題を解決するための手段】
前記の目的を達成するために、本発明は指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、該映像記述ファイルに記述された映像情報で指定された第１の映像の第１本映像ファイルの映像データを順次読み込んで再生する本映像再生手段と、前記映像記述ファイルに記述された映像情報で指定された第２の映像の第２代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、前記本映像再生手段および代理映像再生手段で再生された第１本映像と第２代理映像とを表示する表示手段とを具備し、前記第２代理映像ファイルは、前記第２の映像の本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものである点に第１の特徴がある。
【００１７】
この特徴によれば、複数の映像を本映像と代理映像から構成して再生するようにしたので、複数の映像を限られた伝送帯域や復号能力でも効率的に再生することができるようになる。
【００１８】
また、本発明は、該第2の代理映像ファイルの再生表示を第2の本映像ファイルの再生表示に変更する手段と、該第1の本映像ファイルの再生表示を第1の代理映像ファイルの再生表示に変更する手段とを具備し、該第2の本映像ファイルの表示画面内または外に、該第1の代理映像ファイルを表示するようにした点に第２の特徴がある。
【００１９】
この特徴によれば、第１の本映像ファイルの再生表示と第２の代理映像ファイルの再生表示との間の変更を、任意に行えるようになる。
【００２２】
【発明の実施の形態】
以下に、図面を参照して、本発明を詳細に説明する。本発明の第１実施形態を、図１を参照して説明する。この実施形態は、本映像ファイルと代理映像ファイルを再生表示するようにしたものである。
【００２３】
図１において、制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルを蓄積装置11から読み込む。次に、映像記述ファイル処理部14は読み込まれた映像記述ファイルで指定された第1の本映像ファイルを蓄積装置11から順次取り出し、本映像再生部12に入力させる。本映像再生部12は、第1の本映像データを順次読み込んで、画面信号を出力する。表示部17は、本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで、画面出力およびオーディオ出力を行う。
【００２４】
また、映像記述ファイルで指定された第2の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部12は、第2の代理映像データを順次読み込んで、画面信号を出力する。表示部17は、代理映像再生部13からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００２５】
前記映像記述ファイルフォーマットとしては、Ｗ３Ｃ（World Wide Web Consortium）にて標準化されたＳＭＩＬ（Synchronized Multimedia Integration Language）等を用いて記述することができる。
【００２６】
映像記述ファイルフォーマットの１例として、例えば本映像１、代理映像２で構成される場合、下記のように記述することができる。
ＩＤ＃Ｍ１、画像サイズ（ＨＭ１，ＶＭ１）、表示位置（ＸＭ１，ＹＭ１）
ＩＤ＃Ｓ２、画像サイズ（ＨＳ２，ＶＳ２）、表示位置（ＸＳ２，ＹＳ２）
ＩＤ＃Ｍ１、ファイル格納位置＃Ｍ１、ファイル名＃Ｍ１
ＩＤ＃Ｓ２、ファイル格納位置＃Ｓ２、ファイル名＃Ｓ２
代理映像の出力位置については、図２（ａ）のように第1の本映像1の画面内に第2の代理映像2を表示したり、同図（ｂ）のように第1の本映像1の画面の外に第2の代理映像2を表示することができる。
【００２７】
ここで、代理映像ファイルは本映像ファイルに比べて、画像サイズや符号化ビットレートが小さいものを用いることができる。これにより、代理映像を再生するために必要な処理負荷を、本映像の再生に必要な処理負荷に比べて小さくすることができる。
【００２８】
さらに、代理映像ファイルとしては、本映像ファイルにくらべて再生時間が短い要約映像を用いることができる。要約映像としては、図３のような時間要約映像、図４のようなショット要約映像、図５のような静止画像要約映像を用いるようことができる。
【００２９】
時間要約映像の場合は、図3において、まず本映像をある時間間隔T1に分割する。次に分割された各T1区間について、例えば各区間の先頭のT2区間のみを抽出して、これらのT2区間を結合した映像を時間要約として用いる。
【００３０】
シーン要約映像の場合は、図4において、まず本映像を映像の切り替え単位であるショットに分割する。ショット分割の方法としては本出願人による特許出願である特開平１１−２５２５０９号公報等のカット点検出方法を用いることができる。次に各ショットS1、S2、・・・について、例えば各ショットの先頭のT1、T2、・・・区間のみを抽出してこれらの区間を結合した映像をショット要約として用いる。なお、T1、T2、・・・区間の長さとしては、一定の値を用いることや、ショット長に比例して長さを決定することが可能である。さらにショットの中からいくつかの代表ショットを結合してショット映像とすることも可能である。
【００３１】
静止画像要約映像の場合は、図5において、まず本映像から代表静止画像を選択する。選択方法としては、上で述べた時間要約やショット要約で用いた区間の先頭画像などを用いることができる。次にこれらの静止画像を結合して静止画像要約映像を作成する。この場合、代表する静止画像を一定時間表示して次の静止画像に切り替わるようにするために、ある時間間隔のダミー情報Dを付加して作成することにより擬似映像として用いることができる。
【００３２】
また、図１の代理映像再生部１３は本映像再生部１２に比べて、処理負荷の小さな再生処理方式を用いることができる。例えば、再生するフレーム数を一定間隔でサンプリングして再生処理フレーム数を削減して処理負荷を減らす方法がある。また、本出願人の特許出願である特願2000-000950「符号化動画像データ再生装置およびその記録媒体」のように、圧縮データを復号する際に画像情報の一部のみを復号して処理負荷を削減する方法もある。
【００３３】
次に、本発明の第２実施形態を、図６のブロック図を参照して説明する。この実施形態は、コマンド入力を用いて本映像ファイルと代理映像ファイルを切り替えるようにした点に特徴がある。
【００３４】
制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルを蓄積装置11から読み込み、第１実施形態で述べたように指定された第１の本映像1と第２の代理映像2を表示部１７に表示する。
【００３５】
次に、コマンド入力部１８からの制御により、本映像と代理映像を切り替えるために、制御部10から第2の映像ファイルが指定されると、映像記述ファイル処理部14には第2の本映像ファイルと第1の代理映像ファイルに関する情報が読み込まれる。次いで、該映像記述ファイル処理部14は、第２の本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させ、また第１の代理映像ファイルを代理映像再生部１３に入力させる。
【００３６】
本映像再生部12は、第２の本映像データを順次読み込んで、画面信号を出力する。表示部17は本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００３７】
また、映像記述ファイルで指定された第１の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部13では第１の代理映像データを順次読み込んで、画面信号を出力する。表示部17では代理映像再生部13からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００３８】
なお、第1の本映像から第2の本映像に切り替わり、第2の代理映像から第1の代理映像の再生に切り替わる際の再生開始時刻の設定はいくつかの設定方法を利用することができる。
【００３９】
一例として、再生時刻にかかわらず各映像の最初の時刻に設定する方法がある。他の方法として、図７のように第1の本映像の時刻を制御部10に入力して、その時刻を第1の代理映像の再生開始時刻と設定して再生を開始させ、第2の代理映像の時刻を制御部10に入力して、その時刻を第2の本映像の再生開始時刻として再生を開始させることも可能である。
【００４０】
次に、本発明の第３実施形態を、図８を参照して説明する。この実施形態は、コマンド入力を用いて本映像ファイルと複数の代理映像ファイルを切り替えるようにした点に特徴がある。
【００４１】
制御部10からの制御により映像記述ファイル処理部14は映像記述ファイルを蓄積装置11から読み込み、映像記述ファイルで指定された本映像ファイル（例えば第1映像ファイル）が蓄積装置11から本映像再生部12に順次読み込まれ、表示部17で映像を表示する。また映像記述ファイルで記述された代理映像ファイル1〜nが蓄積装置11から代理映像再生部71〜7nに順次読み込まれ、表示部17にｎ個の代理映像が表示される。
【００４２】
次に、コマンド入力部１８からの制御により、本映像を切り替えるために、制御部10からある代理映像ファイル（例えば第ｍ代理映像ファイル）が指定されると、映像記述ファイル処理部14には第ｍ本映像ファイルに関する情報が読み込まれ、第ｍ本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させる。本映像再生部12は、第ｍ本映像データを順次読み込んで、画像を表示する。この場合、再生中の本映像は再生中の代理映像の中の１つが再生されることになる。図９（ａ）に切り替えフロー図を示す。
【００４３】
これらの映像の表示方法については図２と同様に本映像の画面内にｎ個の代理映像を表示する方法や、本映像の画面の外に代理映像を表示する方法などがある。
【００４４】
ｎ個の代理映像再生に必要な処理負荷を本映像に比べて十分小さくすることにより、限られた処理能力を持つ再生装置でも1個の本映像とｎ個の代理映像を再生することができる。
【００４５】
第3実施形態の変形例としては以下のような映像切り替え方法がある。制御部10からの制御により映像記述ファイル処理部14では映像記述ファイルを蓄積装置11から読み込み、映像記述ファイルで指定された本映像ファイル（例えば第０映像ファイル）が蓄積装置11から本映像再生部12に順次読み込まれ表示部17で映像を表示する。また映像記述ファイルで記述された第１〜第ｎ映像ファイルの代理映像ファイル1〜nが蓄積装置11から代理映像再生部71〜7nに順次読み込まれ表示部17にn個の代理映像を表示する。
【００４６】
次に、コマンド入力部１８からの制御により制御部10からある代理映像ファイル（例えば第ｍ代理映像ファイル）が指定されると、第ｍ本映像ファイルを本映像映像再生部12で再生するとともに、映像記述ファイル処理部14では第0代理映像ファイルに関する情報が読み込まれ、第0代理映像ファイルを蓄積装置11から順次第ｍ代理映像再生部に読み込んで第ｍ代理映像の再生を第0代理映像ファイルの再生に切り替えることができる。これにより、常に再生されている本映像と異なった代理映像を再生することができ、映像検索効率を高めることができる。図９（ｂ）に、前記の処理の切り替えフロー図を示す。
【００４７】
次に、本発明の第４の実施形態を、図１０を参照して説明する。この実施形態は、本映像、本映像のシーン画像、および複数の代理映像を表示するようにした点に特徴がある。
【００４８】
図１０において、制御部10からの制御により映像記述ファイル処理部14では指定された映像記述ファイルを蓄積装置11から読み込む。次に、映像記述ファイル処理部１４では読み込まれた映像記述ファイルで指定された第1の本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させる。本映像再生部12は第1の本映像データを順次読み込んで、画面信号を出力する。表示部17は本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００４９】
また、映像記述ファイルで指定された第2の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部13は第2の代理映像データを順次読み込んで、画面信号を出力する。表示部17は代理映像再生部からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００５０】
また、制御部10からの制御によりシーン記述ファイル読み込み部91は、第1の本映像ファイルに対応するシーン記述ファイルを蓄積装置11から入力する。
【００５１】
本映像再生部12で得られる現在の再生時刻はシーン記述ファイル読み込み部91と時刻情報列出力部93に入力される。シーン記述ファイル読み込み部91では入力された現在の再生時刻情報に基づいて時刻情報列データと静止画像列データを蓄積装置11から取り出してそれぞれ時刻情報列出力部93と静止画像列出力部94に入力させ、時刻情報列と静止画像列を表示部17で表示する。本映像と代理映像の表示方法については図2のような方法を用いることができる。また、本映像と時刻情報列、静止画像情報列については図11のような表示方法を用いることができる。
【００５２】
表示内容の更新は時刻情報列出力部93にて行う。表示内容の更新のタイミングとしては、再生映像の時刻が時刻情報列の指定された位置の時刻を過ぎたときに表示内容の更新を行うことができる。時刻Tvで再生中の映像をV(Tv)、シーン記述ファイルにおけるn番目の時刻情報をTn、静止画像をPnとするとTvがTn+1以降になった時点で更新することができる。
【００５３】
例えば、本映像の再生映像の時刻TvがTn≦Tv<Tn+1の間は図11(a)のように時刻情報Tnと静止画像Pnを中心に５つの時刻情報列と静止画像列が表示されている。再生映像の時刻TvがTn+1以上になった時点で同図(b)のように時刻情報と静止画像の位置が左に移動し、新たな時刻情報Tn+3と静止画像Pn+3が入力されて右端に表示される。
【００５４】
他の１つの例としては、再生映像の時刻TvがTn≦Tv<Tn+5の間は図12(a)のように時刻情報Tnと静止画像Pnから５つの時刻情報列と静止画像列が表示されている。再生映像の時刻TvがTn+5以上になった時点で同図(b)のようにすべての時刻情報列と静止画像列を消去し、新たな時刻情報Tn+5と静止画像Pn+5から始まる時刻情報列と静止画像列を表示することも可能である。
【００５５】
入力する時刻情報列データとしては、現在の再生時刻前後に位置する時刻情報列データを蓄積装置11に蓄積された時刻情報列ファイルから読み出すことができる。また、静止画像列データとしては、読み出した時刻情報列データに対応した静止画像列を蓄積装置11に蓄積された静止画像ファイルから読み出すことができる。
【００５６】
また、時刻情報列データの内容としては、映像に関するさまざまな記述方法を用いることができる。一例としては、指定されたタイムステップで増加するタイムコード列、映像のシーン切り替わりを示すカット点の先頭のタイムコード列、シーンの中心を示すキーフレーム点のタイムコード列、付随するオーディオの無音から有音に切り替わる点を示すタイムコード列、拍手や笑い声など特定の効果音が発生した時刻を示すタイムコード列、テロップやCG画像など特定の画像発生した時刻を示すタイムコード列、ユーザが任意に指定したタイムコード列、あるいはこれらを組み合わせたタイムコード列などを用いることができる。また、各シーンのスタート時刻と区間長を時刻情報列として用いることもできる。
【００５７】
図13(a)は映像シーン切り替え時刻を時刻情報とし、その時刻の画像を静止画像列として用いる例を示す。図13(b)はシーン内のキーフレーム点の時刻を時刻情報とし、その時刻の画像を静止画像列として用いる例を示す。
【００５８】
なお、シーン記述ファイルを蓄積装置11からシーン記述ファイル読み込み部91に読み込む場合、シーン記述ファイル全体を読み込む場合と固定した時刻情報列と静止画像列に対応するシーン記述ファイルのみ読み込む場合と2種類の方法が可能である。前者の場合はすべての情報を蓄積するので読み込み時間がかかるという問題点があるが、一旦読み込んだあとはシーン記述情報を高速に出力できるという利点がある。一方後者の場合はシーン記述ファイルの読み込み時間は短いが、シーン記述情報の表示を更新するたびにシーン記述情報を蓄積装置11から読み込む必要がある。
【００５９】
次に、本発明の第５の実施形態を、図14を参照して説明する。この実施形態は、コマンド入力部35で指定された映像ファイル情報が配信制御部３４に入力され、配信制御部34からの制御により、コマンド入力部35で指定された映像データが蓄積装置11から順次取り出されて本映像送出部31aおよび／または代理映像送出部31bに入力される。同様に、配信制御部34からの制御によりコマンド入力部35で指定された映像に関するシーン記述データが蓄積装置11から順次取り出されてシーン記述データ送出部32に入力される。
【００６０】
本映像送出部３１ａ、代理映像送出部３１ｂ、およびシーン記述データ送出部32から本および／または代理映像データとシーン記述データがそれぞれ指定されたデータ速度で読み出されてネットワーク送出部33に入力され、それぞれのデータがネットワークに送出される。
【００６１】
本映像送出レートは、映像ファイルのファイルサイズと映像再生時間から単位時間あたりの情報量を計算して決定することができる。また、シーン記述データ送出レートについては、シーン記述ファイルサイズと映像再生時間から単位時間あたりの情報量を計算して決定することができる。また、他の方法として、シーン記述ファイルで最後に表示すべき時刻とシーン記述ファイルサイズから単位時間あたりの情報量を計算して送出レートを決定することができる。
【００６２】
また、コマンド入力部35はネットワーク26経由で接続された端末からの入力をネットワーク受信部36で受信してその情報をコマンド入力として用いてもよい。
【００６３】
次に、本発明の第６の実施形態を、図15を用いて説明する。この実施形態では、まず、制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルをサーバ２０の蓄積装置11からネットワーク２７を介して読み込む。次に、映像記述ファイル処理部14は読み込まれた映像記述ファイルで指定された本映像ファイル、代理映像ファイルを制御部１０経由でネットワーク送信部53に出力される。また、クライアント装置（端末装置）30のコマンド入力部18で指定された映像ファイル情報が制御部10に入力され、ネットワーク送信部53に出力される。ネットワーク送信部53からネットワーク27を介してサーバ装置20のネットワーク受信部36に入力され、コマンド入力処理がコマンド入力部35を通じて行われ、配信制御部34からの制御により、指定された映像データ群が蓄積装置11から順次取り出されて本映像送出部３１ａに入力される。同様に、配信制御部34からの制御によりコマンド入力部18で指定された映像に関するシーン記述データが蓄積装置30から順次取り出されてシーン記述データ送出部32に入力される。また、映像記述ファイル処理部１４で制御部１０に指定された代理映像が、配信制御部３４からの制御により、代理映像送出部３１ｂに入力される。
【００６４】
本映像送出部31ａ、代理映像送出部３１ｂ、およびシーン記述データ送出部32から、本映像データ、代理映像データおよびシーン記述データがそれぞれ指定されたデータ速度で読み出されてネットワーク送信部33に入力され、それぞれのデータがネットワーク27に送出される。送出された映像データ、代理映像データ、およびシーン記述データはネットワーク27を介してネットワーク受信部51に入力され、キャッシュメモリ52に一時蓄積される。
【００６５】
キャッシュメモリ52から本映像情報、シーン記述情報、代理映像情報は、それぞれ本映像再生部12、シーン記述情報読み込み部91、代理映像再生部13に入力される。映像記述ファイル処理部14の動作は、図10の動作と同様であるので、説明を省略する。
【００６６】
キャッシュメモリ52には、現在表示部17で表示されている本映像情報、代理映像およびシーン記述情報の、次に表示すべき映像情報、代理映像、およびシーン記述情報を、サーバ２０からネットワーク２７を介して逐次読み込んでおく。
【００６７】
一般に、シーン記述情報ファイル容量が大きい場合、シーン記述情報を読み込むたびに大きな帯域を必要となるため、次のシーン記述情報を読み込むまでの時間がかかったり、また映像データを蓄積装置から読み込むための帯域が阻害されたりする可能性がある。しかしながら、上記のキャッシュメモリ52を用いると、シーン記述情報を連続的に表示部17に表示できるようになる。また、シーン記述データを連続的にキャッシュメモリ52に読み込むことでデータ伝送帯域を一定化することができるため、映像データをネットワーク接続された映像配信装置から読み込みに必要な帯域を阻害することがなくなり映像も連続的に再生が可能となる。
【００６８】
前記した各実施形態の映像閲覧装置および映像配信装置は、パソコンにより実現するのが好適であり、該各実施形態の処理のプログラムをコンピュータ読み取り可能なプログラム記録媒体に記録して提供することができる。該記録媒体には、光ディスク、フロッピーディスク、ハードディスクなどの過般型記録媒体が含まれるのは勿論、ネットワークのように、データを一時的に記録保持するような伝送媒体も含まれる。
【００６９】
【発明の効果】
以上のように、本発明によれば、複数の映像を本映像と代理映像から構成し、これらの映像を再生するようにしたので、複数の映像を限られた伝送帯域や復号能力でも効率的に再生することができるようになる。
【００７０】
また、映像に含まれる映像シーンを閲覧、検索して再生することができるようになる。
【００７１】
また、映像の再生に合わせてシーン記述情報を表示することにより、再生中の映像前後の検索、閲覧を効率的に行うことが可能になる。
【００７３】
また、本発明の処理を実現するプログラムをコンピュータ読み取り可能な記録媒体に記録することにより、本発明をコンピュータで実現可能になる。
【図面の簡単な説明】
【図１】 本発明の第１実施形態の概略の構成を示すブロック図である。
【図２】 本映像と代理映像の表示例を示す図である。
【図３】 第１の要約映像の説明図である。
【図４】 第２の要約映像の説明図である。
【図５】 第３の要約映像の説明図である。
【図６】 本発明の第２実施形態の概略の構成を示すブロック図である。
【図７】 第２実施形態の変形例を示すブロック図である。
【図８】 本発明の第３実施形態の概略の構成を示すブロック図である。
【図９】 本映像と代理映像の切替え処理の説明図である。
【図１０】 本発明の第４実施形態の概略の構成を示すブロック図である。
【図１１】 図１０の表示部に表示される表示例の説明図である。
【図１２】 図１０の表示部に表示される他の表示例の説明図である。
【図１３】 時刻情報列と静止画像列の一具体例を説明する図である。
【図１４】 本発明の第５実施形態の概略の構成を示すブロック図である。
【図１５】 本発明の第６実施形態の概略の構成を示すブロック図である。
【図１６】 第１の従来装置のブロック図である。
【図１７】 第２の従来装置のブロック図である。
【図１８】 第３の従来装置のブロック図である。
【符号の説明】
１・・・本映像、２・・・代理映像、１０・・・制御部、１１・・・蓄積装置、１２・・・本映像再生部、１３・・・代理映像再生部、１４・・・映像記述ファイル処理部、１７・・・表示部、１８・・・コマンド入力部、２０・・・サーバ、２６・・・ネットワーク、３０・・・クライアント、３１ａ・・・本映像送出部、３１ｂ・・・代理映像送出部、３２・・・シーン記述データ送出部、３３・・・ネットワーク送信部、３４・・・配信制御部、３６・・・ネットワーク受信部、９１・・・シーン記述ファイル読込部。
【発明の属する技術分野】
本発明は、複数の動画像の閲覧装置および記録媒体に関し、特に複数の映像を限られた伝送帯域や復号能力でも効率的に再生・閲覧することができるようにした複数の動画像の閲覧装置および記録媒体に関する。
【０００２】
【従来の技術】
複数の映像を同時再生する従来の第１方式を、図16に示す。図16において、制御部10からの制御により、映像再生部101〜10nは複数の映像データ１〜ｎを蓄積装置11から順次取り出して映像再生部101〜10nに入力させる。映像再生部101〜10nでは映像データを順次読み込んで、画面出力信号、オーディオ出力信号、および現在の再生時刻を表示部17に出力する。表示部17では再生時刻、画面出力信号、およびオーディオ出力信号を取り込んで、再生時刻の表示、画面出力、およびオーディオ出力を行う。
【０００３】
この場合、再生する映像データの個数分の処理負荷がかかるため、例えばソフトウェアで再生処理を行う場合、再生する映像数が限られるというデメリットがある。
【０００４】
複数の映像を同時再生し、指定した時刻から再生する従来の第２方式を図17に示す。図17において、例えば映像再生部101から映像全体の長さが再生長として再生開始時刻設定部201に入力される。再生開始時刻設定部201では再生を行う時刻を設定して、設定時刻を映像再生部101に出力する。映像再生部101では、設定時刻が入力されると、設定時刻付近の映像データの記録位置情報を設定して、蓄積装置11から指定した記録位置からの映像データを取り込んで再生を行う。
【０００５】
再生開始時刻設定部201での再生開始時刻の設定方法としては、以下のような方法が用いられる。
（１） 再生開始時刻を直接入力する。
（２） 映像全体の長さを100％として、そのうちの指定された比率を再生開始時刻とする。
【０００６】
前記（１）の例としてはタイムコード入力して再生を開始するようなものがある。また、前記（２）の例としては映像プレイヤーの再生位置を示すスクロールバーの位置を調整して再生時刻を設定するものがある。
【０００７】
図18は従来の第３方式を示す。図のように映像データは再生装置とネットワークで接続されたサーバシステムに格納されている。
【０００８】
図18において、制御部10からの制御により、映像再生部101から10nに映像再生を要求する。映像再生部101〜10nではｎ個の映像データ要求信号をネットワーク104を介してサーバシステム102に送出する。サーバシステム102では要求信号をビデオサーバ103で読みこみ、指定された映像データを蓄積装置11からビデオサーバ103に送出する。ビデオサーバ103ではｎ個の映像データをネットワーク104を介してクライアント端末105に送信する。
【０００９】
クライアント端末105では、送られてきた映像データを映像再生部101〜10nに転送する。映像再生部101〜10nでは映像データを読み込んで、画面出力信号やオーディオ出力信号、現在の再生時刻を表示部17に出力する。表示部17では、再生時刻、画面出力信号やオーディオ出力信号を取り込んで、再生時刻の表示、画面出力、オーディオ出力を行う。
【００１０】
また、映像再生部101〜10nから各映像について映像全体の長さが再生長として再生開始時刻設定部201に入力される。再生開始時刻設定部201は、各映像について再生を行う時刻を設定して、設定時刻を映像再生部101〜10nに出力する。映像再生部101〜10nは、設定時刻が入力されると設定時刻付近の映像データの記録位置情報を設定して、蓄積装置11から指定した記録位置からの映像データを取り込んで再生を行う。
【００１１】
再生開始時刻設定部201での再生開始時刻の設定方法としては、前記従来方式の（１）、（２）と同じ方法が用いられる。
【００１２】
【発明が解決しようとする課題】
前記した従来の第２、第３方式では、どの位置にどのような映像が含まれているのかがわからないため、ユーザはいくつかの時刻を設定してその時刻からの再生を試行的に行って目的の映像を見つけ、該目的の映像を再生するようにしている。このため、映像の検索には非常に多くの時間と手間がかかるという問題があった。
【００１３】
また、前記第３の従来方式の場合には、映像を伝送するために必要な帯域は映像の個数に依存するため、多くの映像を同時にネットワーク伝送するためには広帯域の回線が必要になるという問題があった。
【００１４】
本発明の目的は、前記した従来技術の問題点を解消し、蓄積装置に蓄積された映像ファイルやネットワーク接続されたサーバ内の映像ファイルについて、複数の映像ファイルを再生端末の処理負荷を増大させずに再生したり、限られたネットワーク帯域でも映像を伝送して閲覧できるようにしたり、また映像に含まれる映像シーンを閲覧、検索して再生したりすることのできる複数の動画像の配信装置を提供することにある。また、他の目的は、前記閲覧処理できるプログラムを記録したコンピュータ読み込み可能な記録媒体を提供することにある。
【００１６】
【課題を解決するための手段】
前記の目的を達成するために、本発明は指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、該映像記述ファイルに記述された映像情報で指定された第１の映像の第１本映像ファイルの映像データを順次読み込んで再生する本映像再生手段と、前記映像記述ファイルに記述された映像情報で指定された第２の映像の第２代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、前記本映像再生手段および代理映像再生手段で再生された第１本映像と第２代理映像とを表示する表示手段とを具備し、前記第２代理映像ファイルは、前記第２の映像の本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものである点に第１の特徴がある。
【００１７】
この特徴によれば、複数の映像を本映像と代理映像から構成して再生するようにしたので、複数の映像を限られた伝送帯域や復号能力でも効率的に再生することができるようになる。
【００１８】
また、本発明は、該第2の代理映像ファイルの再生表示を第2の本映像ファイルの再生表示に変更する手段と、該第1の本映像ファイルの再生表示を第1の代理映像ファイルの再生表示に変更する手段とを具備し、該第2の本映像ファイルの表示画面内または外に、該第1の代理映像ファイルを表示するようにした点に第２の特徴がある。
【００１９】
この特徴によれば、第１の本映像ファイルの再生表示と第２の代理映像ファイルの再生表示との間の変更を、任意に行えるようになる。
【００２２】
【発明の実施の形態】
以下に、図面を参照して、本発明を詳細に説明する。本発明の第１実施形態を、図１を参照して説明する。この実施形態は、本映像ファイルと代理映像ファイルを再生表示するようにしたものである。
【００２３】
図１において、制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルを蓄積装置11から読み込む。次に、映像記述ファイル処理部14は読み込まれた映像記述ファイルで指定された第1の本映像ファイルを蓄積装置11から順次取り出し、本映像再生部12に入力させる。本映像再生部12は、第1の本映像データを順次読み込んで、画面信号を出力する。表示部17は、本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで、画面出力およびオーディオ出力を行う。
【００２４】
また、映像記述ファイルで指定された第2の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部12は、第2の代理映像データを順次読み込んで、画面信号を出力する。表示部17は、代理映像再生部13からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００２５】
前記映像記述ファイルフォーマットとしては、Ｗ３Ｃ（World Wide Web Consortium）にて標準化されたＳＭＩＬ（Synchronized Multimedia Integration Language）等を用いて記述することができる。
【００２６】
映像記述ファイルフォーマットの１例として、例えば本映像１、代理映像２で構成される場合、下記のように記述することができる。
ＩＤ＃Ｍ１、画像サイズ（ＨＭ１，ＶＭ１）、表示位置（ＸＭ１，ＹＭ１）
ＩＤ＃Ｓ２、画像サイズ（ＨＳ２，ＶＳ２）、表示位置（ＸＳ２，ＹＳ２）
ＩＤ＃Ｍ１、ファイル格納位置＃Ｍ１、ファイル名＃Ｍ１
ＩＤ＃Ｓ２、ファイル格納位置＃Ｓ２、ファイル名＃Ｓ２
代理映像の出力位置については、図２（ａ）のように第1の本映像1の画面内に第2の代理映像2を表示したり、同図（ｂ）のように第1の本映像1の画面の外に第2の代理映像2を表示することができる。
【００２７】
ここで、代理映像ファイルは本映像ファイルに比べて、画像サイズや符号化ビットレートが小さいものを用いることができる。これにより、代理映像を再生するために必要な処理負荷を、本映像の再生に必要な処理負荷に比べて小さくすることができる。
【００２８】
さらに、代理映像ファイルとしては、本映像ファイルにくらべて再生時間が短い要約映像を用いることができる。要約映像としては、図３のような時間要約映像、図４のようなショット要約映像、図５のような静止画像要約映像を用いるようことができる。
【００２９】
時間要約映像の場合は、図3において、まず本映像をある時間間隔T1に分割する。次に分割された各T1区間について、例えば各区間の先頭のT2区間のみを抽出して、これらのT2区間を結合した映像を時間要約として用いる。
【００３０】
シーン要約映像の場合は、図4において、まず本映像を映像の切り替え単位であるショットに分割する。ショット分割の方法としては本出願人による特許出願である特開平１１−２５２５０９号公報等のカット点検出方法を用いることができる。次に各ショットS1、S2、・・・について、例えば各ショットの先頭のT1、T2、・・・区間のみを抽出してこれらの区間を結合した映像をショット要約として用いる。なお、T1、T2、・・・区間の長さとしては、一定の値を用いることや、ショット長に比例して長さを決定することが可能である。さらにショットの中からいくつかの代表ショットを結合してショット映像とすることも可能である。
【００３１】
静止画像要約映像の場合は、図5において、まず本映像から代表静止画像を選択する。選択方法としては、上で述べた時間要約やショット要約で用いた区間の先頭画像などを用いることができる。次にこれらの静止画像を結合して静止画像要約映像を作成する。この場合、代表する静止画像を一定時間表示して次の静止画像に切り替わるようにするために、ある時間間隔のダミー情報Dを付加して作成することにより擬似映像として用いることができる。
【００３２】
また、図１の代理映像再生部１３は本映像再生部１２に比べて、処理負荷の小さな再生処理方式を用いることができる。例えば、再生するフレーム数を一定間隔でサンプリングして再生処理フレーム数を削減して処理負荷を減らす方法がある。また、本出願人の特許出願である特願2000-000950「符号化動画像データ再生装置およびその記録媒体」のように、圧縮データを復号する際に画像情報の一部のみを復号して処理負荷を削減する方法もある。
【００３３】
次に、本発明の第２実施形態を、図６のブロック図を参照して説明する。この実施形態は、コマンド入力を用いて本映像ファイルと代理映像ファイルを切り替えるようにした点に特徴がある。
【００３４】
制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルを蓄積装置11から読み込み、第１実施形態で述べたように指定された第１の本映像1と第２の代理映像2を表示部１７に表示する。
【００３５】
次に、コマンド入力部１８からの制御により、本映像と代理映像を切り替えるために、制御部10から第2の映像ファイルが指定されると、映像記述ファイル処理部14には第2の本映像ファイルと第1の代理映像ファイルに関する情報が読み込まれる。次いで、該映像記述ファイル処理部14は、第２の本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させ、また第１の代理映像ファイルを代理映像再生部１３に入力させる。
【００３６】
本映像再生部12は、第２の本映像データを順次読み込んで、画面信号を出力する。表示部17は本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００３７】
また、映像記述ファイルで指定された第１の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部13では第１の代理映像データを順次読み込んで、画面信号を出力する。表示部17では代理映像再生部13からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００３８】
なお、第1の本映像から第2の本映像に切り替わり、第2の代理映像から第1の代理映像の再生に切り替わる際の再生開始時刻の設定はいくつかの設定方法を利用することができる。
【００３９】
一例として、再生時刻にかかわらず各映像の最初の時刻に設定する方法がある。他の方法として、図７のように第1の本映像の時刻を制御部10に入力して、その時刻を第1の代理映像の再生開始時刻と設定して再生を開始させ、第2の代理映像の時刻を制御部10に入力して、その時刻を第2の本映像の再生開始時刻として再生を開始させることも可能である。
【００４０】
次に、本発明の第３実施形態を、図８を参照して説明する。この実施形態は、コマンド入力を用いて本映像ファイルと複数の代理映像ファイルを切り替えるようにした点に特徴がある。
【００４１】
制御部10からの制御により映像記述ファイル処理部14は映像記述ファイルを蓄積装置11から読み込み、映像記述ファイルで指定された本映像ファイル（例えば第1映像ファイル）が蓄積装置11から本映像再生部12に順次読み込まれ、表示部17で映像を表示する。また映像記述ファイルで記述された代理映像ファイル1〜nが蓄積装置11から代理映像再生部71〜7nに順次読み込まれ、表示部17にｎ個の代理映像が表示される。
【００４２】
次に、コマンド入力部１８からの制御により、本映像を切り替えるために、制御部10からある代理映像ファイル（例えば第ｍ代理映像ファイル）が指定されると、映像記述ファイル処理部14には第ｍ本映像ファイルに関する情報が読み込まれ、第ｍ本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させる。本映像再生部12は、第ｍ本映像データを順次読み込んで、画像を表示する。この場合、再生中の本映像は再生中の代理映像の中の１つが再生されることになる。図９（ａ）に切り替えフロー図を示す。
【００４３】
これらの映像の表示方法については図２と同様に本映像の画面内にｎ個の代理映像を表示する方法や、本映像の画面の外に代理映像を表示する方法などがある。
【００４４】
ｎ個の代理映像再生に必要な処理負荷を本映像に比べて十分小さくすることにより、限られた処理能力を持つ再生装置でも1個の本映像とｎ個の代理映像を再生することができる。
【００４５】
第3実施形態の変形例としては以下のような映像切り替え方法がある。制御部10からの制御により映像記述ファイル処理部14では映像記述ファイルを蓄積装置11から読み込み、映像記述ファイルで指定された本映像ファイル（例えば第０映像ファイル）が蓄積装置11から本映像再生部12に順次読み込まれ表示部17で映像を表示する。また映像記述ファイルで記述された第１〜第ｎ映像ファイルの代理映像ファイル1〜nが蓄積装置11から代理映像再生部71〜7nに順次読み込まれ表示部17にn個の代理映像を表示する。
【００４６】
次に、コマンド入力部１８からの制御により制御部10からある代理映像ファイル（例えば第ｍ代理映像ファイル）が指定されると、第ｍ本映像ファイルを本映像映像再生部12で再生するとともに、映像記述ファイル処理部14では第0代理映像ファイルに関する情報が読み込まれ、第0代理映像ファイルを蓄積装置11から順次第ｍ代理映像再生部に読み込んで第ｍ代理映像の再生を第0代理映像ファイルの再生に切り替えることができる。これにより、常に再生されている本映像と異なった代理映像を再生することができ、映像検索効率を高めることができる。図９（ｂ）に、前記の処理の切り替えフロー図を示す。
【００４７】
次に、本発明の第４の実施形態を、図１０を参照して説明する。この実施形態は、本映像、本映像のシーン画像、および複数の代理映像を表示するようにした点に特徴がある。
【００４８】
図１０において、制御部10からの制御により映像記述ファイル処理部14では指定された映像記述ファイルを蓄積装置11から読み込む。次に、映像記述ファイル処理部１４では読み込まれた映像記述ファイルで指定された第1の本映像ファイルを蓄積装置11から順次取り出して本映像再生部12に入力させる。本映像再生部12は第1の本映像データを順次読み込んで、画面信号を出力する。表示部17は本映像再生部12からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００４９】
また、映像記述ファイルで指定された第2の映像の代理映像ファイルを蓄積装置11から順次取り出して代理映像再生部13に入力させる。代理映像再生部13は第2の代理映像データを順次読み込んで、画面信号を出力する。表示部17は代理映像再生部からの画面出力信号やオーディオ出力信号を取り込んで画面出力およびオーディオ出力を行う。
【００５０】
また、制御部10からの制御によりシーン記述ファイル読み込み部91は、第1の本映像ファイルに対応するシーン記述ファイルを蓄積装置11から入力する。
【００５１】
本映像再生部12で得られる現在の再生時刻はシーン記述ファイル読み込み部91と時刻情報列出力部93に入力される。シーン記述ファイル読み込み部91では入力された現在の再生時刻情報に基づいて時刻情報列データと静止画像列データを蓄積装置11から取り出してそれぞれ時刻情報列出力部93と静止画像列出力部94に入力させ、時刻情報列と静止画像列を表示部17で表示する。本映像と代理映像の表示方法については図2のような方法を用いることができる。また、本映像と時刻情報列、静止画像情報列については図11のような表示方法を用いることができる。
【００５２】
表示内容の更新は時刻情報列出力部93にて行う。表示内容の更新のタイミングとしては、再生映像の時刻が時刻情報列の指定された位置の時刻を過ぎたときに表示内容の更新を行うことができる。時刻Tvで再生中の映像をV(Tv)、シーン記述ファイルにおけるn番目の時刻情報をTn、静止画像をPnとするとTvがTn+1以降になった時点で更新することができる。
【００５３】
例えば、本映像の再生映像の時刻TvがTn≦Tv<Tn+1の間は図11(a)のように時刻情報Tnと静止画像Pnを中心に５つの時刻情報列と静止画像列が表示されている。再生映像の時刻TvがTn+1以上になった時点で同図(b)のように時刻情報と静止画像の位置が左に移動し、新たな時刻情報Tn+3と静止画像Pn+3が入力されて右端に表示される。
【００５４】
他の１つの例としては、再生映像の時刻TvがTn≦Tv<Tn+5の間は図12(a)のように時刻情報Tnと静止画像Pnから５つの時刻情報列と静止画像列が表示されている。再生映像の時刻TvがTn+5以上になった時点で同図(b)のようにすべての時刻情報列と静止画像列を消去し、新たな時刻情報Tn+5と静止画像Pn+5から始まる時刻情報列と静止画像列を表示することも可能である。
【００５５】
入力する時刻情報列データとしては、現在の再生時刻前後に位置する時刻情報列データを蓄積装置11に蓄積された時刻情報列ファイルから読み出すことができる。また、静止画像列データとしては、読み出した時刻情報列データに対応した静止画像列を蓄積装置11に蓄積された静止画像ファイルから読み出すことができる。
【００５６】
また、時刻情報列データの内容としては、映像に関するさまざまな記述方法を用いることができる。一例としては、指定されたタイムステップで増加するタイムコード列、映像のシーン切り替わりを示すカット点の先頭のタイムコード列、シーンの中心を示すキーフレーム点のタイムコード列、付随するオーディオの無音から有音に切り替わる点を示すタイムコード列、拍手や笑い声など特定の効果音が発生した時刻を示すタイムコード列、テロップやCG画像など特定の画像発生した時刻を示すタイムコード列、ユーザが任意に指定したタイムコード列、あるいはこれらを組み合わせたタイムコード列などを用いることができる。また、各シーンのスタート時刻と区間長を時刻情報列として用いることもできる。
【００５７】
図13(a)は映像シーン切り替え時刻を時刻情報とし、その時刻の画像を静止画像列として用いる例を示す。図13(b)はシーン内のキーフレーム点の時刻を時刻情報とし、その時刻の画像を静止画像列として用いる例を示す。
【００５８】
なお、シーン記述ファイルを蓄積装置11からシーン記述ファイル読み込み部91に読み込む場合、シーン記述ファイル全体を読み込む場合と固定した時刻情報列と静止画像列に対応するシーン記述ファイルのみ読み込む場合と2種類の方法が可能である。前者の場合はすべての情報を蓄積するので読み込み時間がかかるという問題点があるが、一旦読み込んだあとはシーン記述情報を高速に出力できるという利点がある。一方後者の場合はシーン記述ファイルの読み込み時間は短いが、シーン記述情報の表示を更新するたびにシーン記述情報を蓄積装置11から読み込む必要がある。
【００５９】
次に、本発明の第５の実施形態を、図14を参照して説明する。この実施形態は、コマンド入力部35で指定された映像ファイル情報が配信制御部３４に入力され、配信制御部34からの制御により、コマンド入力部35で指定された映像データが蓄積装置11から順次取り出されて本映像送出部31aおよび／または代理映像送出部31bに入力される。同様に、配信制御部34からの制御によりコマンド入力部35で指定された映像に関するシーン記述データが蓄積装置11から順次取り出されてシーン記述データ送出部32に入力される。
【００６０】
本映像送出部３１ａ、代理映像送出部３１ｂ、およびシーン記述データ送出部32から本および／または代理映像データとシーン記述データがそれぞれ指定されたデータ速度で読み出されてネットワーク送出部33に入力され、それぞれのデータがネットワークに送出される。
【００６１】
本映像送出レートは、映像ファイルのファイルサイズと映像再生時間から単位時間あたりの情報量を計算して決定することができる。また、シーン記述データ送出レートについては、シーン記述ファイルサイズと映像再生時間から単位時間あたりの情報量を計算して決定することができる。また、他の方法として、シーン記述ファイルで最後に表示すべき時刻とシーン記述ファイルサイズから単位時間あたりの情報量を計算して送出レートを決定することができる。
【００６２】
また、コマンド入力部35はネットワーク26経由で接続された端末からの入力をネットワーク受信部36で受信してその情報をコマンド入力として用いてもよい。
【００６３】
次に、本発明の第６の実施形態を、図15を用いて説明する。この実施形態では、まず、制御部10からの制御により、映像記述ファイル処理部14は指定された映像記述ファイルをサーバ２０の蓄積装置11からネットワーク２７を介して読み込む。次に、映像記述ファイル処理部14は読み込まれた映像記述ファイルで指定された本映像ファイル、代理映像ファイルを制御部１０経由でネットワーク送信部53に出力される。また、クライアント装置（端末装置）30のコマンド入力部18で指定された映像ファイル情報が制御部10に入力され、ネットワーク送信部53に出力される。ネットワーク送信部53からネットワーク27を介してサーバ装置20のネットワーク受信部36に入力され、コマンド入力処理がコマンド入力部35を通じて行われ、配信制御部34からの制御により、指定された映像データ群が蓄積装置11から順次取り出されて本映像送出部３１ａに入力される。同様に、配信制御部34からの制御によりコマンド入力部18で指定された映像に関するシーン記述データが蓄積装置30から順次取り出されてシーン記述データ送出部32に入力される。また、映像記述ファイル処理部１４で制御部１０に指定された代理映像が、配信制御部３４からの制御により、代理映像送出部３１ｂに入力される。
【００６４】
本映像送出部31ａ、代理映像送出部３１ｂ、およびシーン記述データ送出部32から、本映像データ、代理映像データおよびシーン記述データがそれぞれ指定されたデータ速度で読み出されてネットワーク送信部33に入力され、それぞれのデータがネットワーク27に送出される。送出された映像データ、代理映像データ、およびシーン記述データはネットワーク27を介してネットワーク受信部51に入力され、キャッシュメモリ52に一時蓄積される。
【００６５】
キャッシュメモリ52から本映像情報、シーン記述情報、代理映像情報は、それぞれ本映像再生部12、シーン記述情報読み込み部91、代理映像再生部13に入力される。映像記述ファイル処理部14の動作は、図10の動作と同様であるので、説明を省略する。
【００６６】
キャッシュメモリ52には、現在表示部17で表示されている本映像情報、代理映像およびシーン記述情報の、次に表示すべき映像情報、代理映像、およびシーン記述情報を、サーバ２０からネットワーク２７を介して逐次読み込んでおく。
【００６７】
一般に、シーン記述情報ファイル容量が大きい場合、シーン記述情報を読み込むたびに大きな帯域を必要となるため、次のシーン記述情報を読み込むまでの時間がかかったり、また映像データを蓄積装置から読み込むための帯域が阻害されたりする可能性がある。しかしながら、上記のキャッシュメモリ52を用いると、シーン記述情報を連続的に表示部17に表示できるようになる。また、シーン記述データを連続的にキャッシュメモリ52に読み込むことでデータ伝送帯域を一定化することができるため、映像データをネットワーク接続された映像配信装置から読み込みに必要な帯域を阻害することがなくなり映像も連続的に再生が可能となる。
【００６８】
前記した各実施形態の映像閲覧装置および映像配信装置は、パソコンにより実現するのが好適であり、該各実施形態の処理のプログラムをコンピュータ読み取り可能なプログラム記録媒体に記録して提供することができる。該記録媒体には、光ディスク、フロッピーディスク、ハードディスクなどの過般型記録媒体が含まれるのは勿論、ネットワークのように、データを一時的に記録保持するような伝送媒体も含まれる。
【００６９】
【発明の効果】
以上のように、本発明によれば、複数の映像を本映像と代理映像から構成し、これらの映像を再生するようにしたので、複数の映像を限られた伝送帯域や復号能力でも効率的に再生することができるようになる。
【００７０】
また、映像に含まれる映像シーンを閲覧、検索して再生することができるようになる。
【００７１】
また、映像の再生に合わせてシーン記述情報を表示することにより、再生中の映像前後の検索、閲覧を効率的に行うことが可能になる。
【００７３】
また、本発明の処理を実現するプログラムをコンピュータ読み取り可能な記録媒体に記録することにより、本発明をコンピュータで実現可能になる。
【図面の簡単な説明】
【図１】 本発明の第１実施形態の概略の構成を示すブロック図である。
【図２】 本映像と代理映像の表示例を示す図である。
【図３】 第１の要約映像の説明図である。
【図４】 第２の要約映像の説明図である。
【図５】 第３の要約映像の説明図である。
【図６】 本発明の第２実施形態の概略の構成を示すブロック図である。
【図７】 第２実施形態の変形例を示すブロック図である。
【図８】 本発明の第３実施形態の概略の構成を示すブロック図である。
【図９】 本映像と代理映像の切替え処理の説明図である。
【図１０】 本発明の第４実施形態の概略の構成を示すブロック図である。
【図１１】 図１０の表示部に表示される表示例の説明図である。
【図１２】 図１０の表示部に表示される他の表示例の説明図である。
【図１３】 時刻情報列と静止画像列の一具体例を説明する図である。
【図１４】 本発明の第５実施形態の概略の構成を示すブロック図である。
【図１５】 本発明の第６実施形態の概略の構成を示すブロック図である。
【図１６】 第１の従来装置のブロック図である。
【図１７】 第２の従来装置のブロック図である。
【図１８】 第３の従来装置のブロック図である。
【符号の説明】
１・・・本映像、２・・・代理映像、１０・・・制御部、１１・・・蓄積装置、１２・・・本映像再生部、１３・・・代理映像再生部、１４・・・映像記述ファイル処理部、１７・・・表示部、１８・・・コマンド入力部、２０・・・サーバ、２６・・・ネットワーク、３０・・・クライアント、３１ａ・・・本映像送出部、３１ｂ・・・代理映像送出部、３２・・・シーン記述データ送出部、３３・・・ネットワーク送信部、３４・・・配信制御部、３６・・・ネットワーク受信部、９１・・・シーン記述ファイル読込部。
Claims (16)
- 指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、
該映像記述ファイルに記述された映像情報で指定された第１の映像の第１本映像ファイルの映像データを順次読み込んで再生する本映像再生手段と、
前記映像記述ファイルに記述された映像情報で指定された第２の映像の第２代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、
前記本映像再生手段および代理映像再生手段で再生された第１本映像と第２代理映像とを表示する表示手段とを具備し、
前記第２代理映像ファイルは、前記第２の映像の本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものであることを特徴とする複数動画像の閲覧装置。 - 請求項１に記載の複数動画像の閲覧装置において、
前記第1の本映像ファイルの表示画面内または外に、前記第2の代理映像ファイルを再生表示することを特徴とする複数動画像の閲覧装置。 - 請求項２に記載の複数動画像の閲覧装置において、
該第2の代理映像ファイルの再生表示を第2の本映像ファイルの再生表示に変更する手段と、
該第1の本映像ファイルの再生表示を第1の代理映像ファイルの再生表示に変更する手段とを具備し、
該第2の本映像ファイルの表示画面内または外に、該第1の代理映像ファイルを表示することを特徴とする複数動画像の閲覧装置。 - 指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、
該映像記述ファイルに記述された映像情報で指定された複数の映像ファイルの代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、
該表示された代理映像ファイルから１つの映像ファイルを選択する手段と、
該選択された代理映像ファイルを、本映像ファイルの再生表示に変更する手段とを具備し、
前記代理映像ファイルは、該本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものであり、前記本映像ファイルの再生表示に切り換える際に、前記代理映像の再生時刻を該任意の本映像ファイルの再生開始時刻とする複数動画像の閲覧装置。 - 指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、
該映像記述ファイルで指定された第1の本映像ファイルの映像データを順次読み込んで再生する本映像再生手段と、
該映像記述ファイルで指定された第1〜第ｎの代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、
該表示されたｎ個の代理映像ファイルから任意の代理映像ファイルを選択する手段と、
表示されている第1の本映像ファイルを、該選択された任意の代理本映像ファイルの本映像再生表示に切り換える手段とを具備し、
前記代理映像ファイルは、その本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものであり、前記任意の本映像ファイルの再生表示に切り換える際に、該任意の代理映像の再生時刻を該任意の本映像ファイルの再生開始時刻とする複数動画像の閲覧装置。 - 指定した映像群の映像記述ファイルを読み込む映像記述ファイル処理手段と、
該映像記述ファイルに記述された映像情報で指定された第1の本映像ファイルの映像データを順次読み込んで再生する本映像再生手段と、
該映像記述ファイルに記述された映像情報で指定された第2〜ｎの代理映像ファイルの映像データを順次読み込んで再生する代理映像再生手段と、
該再生された代理映像ファイルから任意の代理映像ファイルを選択する手段と、
該選択された任意の代理映像ファイルの再生表示を第1の本映像ファイルの再生表示に変更し、前記第１の本映像ファイルを前記任意の代理映像ファイルの再生表示に変更する手段とを具備し、
前記代理映像ファイルは、その本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくしたものである複数動画像の閲覧装置。 - 請求項６に記載の複数動画像の映像閲覧装置において、
前記任意の代理映像ファイルを前記第１の本映像ファイルの再生表示に切り換える際に、該任意の代理映像ファイルの再生時刻を第1の本映像ファイルの再生開始時刻とし、前記第１の本映像ファイルを前記任意の本映像ファイルの再生表示に切り換える際に、該第１の本映像ファイルの再生時刻を該任意の代理映像ファイルの再生開始時刻とすることを特徴とする複数動画像の閲覧装置。 - 請求項１ないし７のいずれかに記載の複数動画像の閲覧装置において、
選択された本映像ファイル内のシーンを記述するシーン記述ファイルを読み込む手段を具備し、
該シーン記述ファイルに記述されたシーン情報を基に、本映像ファイル内のシーンを前記表示手段に表示することを特徴とする複数動画像の閲覧装置。 - 請求項８に記載の複数動画像の閲覧装置において、
前記シーン記述ファイルに記述されたシーン情報は、前記本映像ファイルの再生時刻前後に存在するシーンであることを特徴とする複数動画像の閲覧装置。 - 請求項８に記載の複数動画像の閲覧装置において、
前記シーン記述ファイルに記述されたシーン情報は、時刻情報と静止画像であり、
前記時刻情報のうち、前記本映像ファイルの再生時刻前後に存在する時刻情報列を出力する手段と、
前記静止画像のうち、前記時刻情報列に対応する静止画像列を出力する手段とを具備し、
前記表示手段に、前記時刻情報列と静止画像列とを表示するようにしたことを特徴とする複数動画像の閲覧装置。 - 請求項１０に記載の複数動画像の閲覧装置において、
前記本映像ファイルの再生時刻に同期して、前記時刻情報列と前記静止画像列の表示を変更するようにしたことを特徴とする複数動画像の閲覧装置。 - 請求項１に記載の閲覧装置において、
前記代理映像ファイルは本映像ファイルの要約映像を利用することを特徴とする閲覧装置。 - 請求項１２に記載の閲覧装置において、
前記要約映像は本映像ファイルを一定時間区間に区切った区間内の一部を抽出した映像を結合して作成された要約映像を利用することを特徴とする複数動画像の閲覧装置。 - 請求項１２に記載の閲覧装置において、
前記要約映像は本映像ファイルをショット分割した各ショット区間内の一部を抽出した映像を結合して作成された要約映像を利用することを特徴とする複数動画像の閲覧装置。 - 請求項１２に記載の閲覧装置において、
前記要約映像は本映像ファイル内のいくつかの時刻の画面を抽出した静止画像を結合して作成された要約映像を利用することを特徴とする複数動画像の閲覧装置。 - コンピュータを、
指定した映像群の映像記述ファイルを読み込む手段と、
該映像記述ファイルに記述された映像情報で指定された第１の映像の第１本映像ファイルを再生する手段と、
該映像記述ファイルに記述された映像情報で指定された、本映像ファイルに比べて、ファイルサイズまたは符号化ビットレートを小さくした第２の映像の第２代理映像ファイルを再生する手段と、
前記手段で再生された第１の本映像と第２の代理映像とを表示するデータを作る手段として機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001080946A JP3894362B2 (ja) | 2001-03-21 | 2001-03-21 | 複数動画像の閲覧装置および記録媒体 |
| US10/082,268 US7697815B2 (en) | 2001-02-28 | 2002-02-26 | Video playback unit, video delivery unit and recording medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001080946A JP3894362B2 (ja) | 2001-03-21 | 2001-03-21 | 複数動画像の閲覧装置および記録媒体 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005239719A Division JP4484220B2 (ja) | 2005-08-22 | 2005-08-22 | 映像配信装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002281454A JP2002281454A (ja) | 2002-09-27 |
| JP3894362B2 true JP3894362B2 (ja) | 2007-03-22 |
Family
ID=18937133
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001080946A Expired - Fee Related JP3894362B2 (ja) | 2001-02-28 | 2001-03-21 | 複数動画像の閲覧装置および記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3894362B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007096393A (ja) * | 2005-09-27 | 2007-04-12 | Alpine Electronics Inc | 車載ビデオ表示装置及び車載ビデオ再生装置 |
| JP5667059B2 (ja) * | 2009-08-21 | 2015-02-12 | トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ | コンテンツ再生装置およびコンテンツ再生方法 |
| JP6823367B2 (ja) * | 2015-11-13 | 2021-02-03 | 株式会社コーチ・エィ | 画像表示システム、画像表示方法、および画像表示プログラム |
-
2001
- 2001-03-21 JP JP2001080946A patent/JP3894362B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2002281454A (ja) | 2002-09-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4270379B2 (ja) | デジタル情報の効率的な伝送および再生 | |
| US7139470B2 (en) | Navigation for MPEG streams | |
| JPWO2002023908A1 (ja) | ネットワーク動画音声の配信方法、その装置及び動画音声の作成方法 | |
| JP4516682B2 (ja) | 映像記録再生装置 | |
| JP2003114845A (ja) | メディア変換方法およびメディア変換装置 | |
| JP2003510626A (ja) | 字幕情報表示機能を有する字幕ｍｐ３プレーヤー、字幕ｍｐ３情報構造及び字幕ｍｐ３情報再生方法 | |
| KR20050013050A (ko) | 동화상 데이터 재생 장치 | |
| US7697815B2 (en) | Video playback unit, video delivery unit and recording medium | |
| KR101731829B1 (ko) | 디지털 영상 수신기의 디지털 콘텐츠 처리 장치 및 방법 | |
| JP3894362B2 (ja) | 複数動画像の閲覧装置および記録媒体 | |
| US20020158895A1 (en) | Method of and a system for distributing interactive audiovisual works in a server and client system | |
| JP4993390B2 (ja) | 複数動画像の閲覧装置 | |
| EP1677540A1 (en) | Content reproduce system, reproduce device, reproduce method, and distribution server | |
| JP4484220B2 (ja) | 映像配信装置 | |
| JP3471401B2 (ja) | 蓄積ａｖ情報通信装置 | |
| JP3838485B2 (ja) | 映像配信装置および映像再生装置 | |
| JPH10276407A (ja) | ビデオ情報提供管理方法およびシステム | |
| JP3177470B2 (ja) | 再生装置 | |
| US20050025453A1 (en) | Program, data processing method, and system of same | |
| JP4038872B2 (ja) | 映像信号符号化システム | |
| JPH09326777A (ja) | マルチメディアデータ伝送方法およびシステム | |
| JP2005197839A (ja) | トランスポートストリームの特殊再生方法及びトランスポートストリームの記録再生装置 | |
| JP3951430B2 (ja) | 映像信号符号化システム | |
| JPH10276408A (ja) | ビデオ情報提供制御方法およびシステム | |
| JPWO2010134479A1 (ja) | 動画表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050608 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050622 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050822 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060726 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060824 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20061005 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061206 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061206 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101222 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121222 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |