【０００１】
【産業上の利用分野】
この発明は、ハードディスクレコーダなどの映像記録再生装置に関する。
【０００２】
【従来の技術】
記録内容を再生するときには、どのようなコンテンツが録画されているのかを検索できるようにするのが便利であり、このため、各録画コンテンツから任意の静止画像を抽出し、これをサムネイル画像として録画コンテンツのリスト表示を行うものがある。更には、このリスト表示上で望みの番組を指定して再生することも可能になっている。そして、前記サムネイル画像を録画開始時の画像を元にして自動作成したり、一番組について複数枚のサムネイルを生成するものも知られている（特許文献１参照）。
【０００３】
【特許文献１】
特開２００１−１８４８４４号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、上記従来の技術では、目的の録画番組を容易に探し出すことができるものの、その録画番組内の所望の場面を素早く検索してそこから再生したいといった要求に応えることはできない。
【０００５】
この発明は、上記の事情に鑑み、録画番組内の所望の場面を素早く検索することができる映像記録再生装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
この発明の映像記録再生装置は、上記の課題を解決するために、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び場面切り替わりと推定されるごとに生成した場面番号を対応付けて記録する手段と、ユーザ入力された場面番号に基づいて場面映像抽出情報を取得し、この場面映像抽出情報により特定される映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【０００７】
上記構成であれば、場面切り替わりが推定されることで場面番号が生成され、各場面番号に場面映像抽出情報が対応付けられる。ユーザは番組内の所望の場面が何番の場面番号に対応するかは分からないものの、例えば、所望の場面が番組の中程であると記憶しているのであれば、中間当たりの場面番号を選択すればよいことになる。この場面番号の選択によって或る場面から再生が行われることになるが、これを見たユーザは所望の場面が当該再生場面よりも後或いは前であることを判断し易くなり、その後は手動の早送りや巻き戻し操作にて所望の場面を素早く検索できることになる。
【０００８】
また、この発明の映像記録再生装置は、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報を記録する手段と、前記場面映像抽出情報により特定される場面映像を縮小表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【０００９】
上記の構成であれば、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報が記録され、本来の再生に先立って各場面映像が画面に縮小表示され、ユーザは縮小表示された場面映像のなかから所望の場面映像或いはそれに時間的に近い場面映像を選択してそこから再生開始させることができる。
【００１０】
また、この発明の映像記録再生装置は、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び当該場面映像の縮小映像を対応付けて記録する手段と、前記縮小映像を表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【００１１】
かかる構成においては、予め縮小映像作成して記録するため、その記憶のための容量が必要になるが、上述の構成と同様に縮小画像にて場面選択が行えるため、ユーザは容易に場面検索できることになる。
【００１２】
前記推定手段は、動画／静止画変化判定により場面切り替わりを推定するようになっていてもよい。また、前記推定手段は、動画／静止画変化判定により場面切り替わりが推定され、且つ、音声レベル変化判定にて場面切り替わりが推定できた場合に、場面切り替わり推定を行うように構成されていてもよい。また、場面切り替わり推定に伴う上記処理後に時間計測を実行し、一定時間経過前には新たに場面切り替わり推定がなされてもこの推定に対しては上記処理は実行しないように構成されていてもよいものである。
【００１３】
【発明の実施の形態】
以下、この発明の実施形態を図１乃至図４に基づいて説明するが、ここではＢＳ（Ｂｒｏａｄｃａｓｔｉｎｇ Ｓａｔｅｌｌｉｔｅ）ディジタル放送を受信して記録する放送受信記録再生装置を例示している。また、録画テープに記録する構成を先に例示し、後にハードディスクに記録する例を示す。
【００１４】
図１において、アンテナ１は、屋外において所定の方向に向けて配置されており、ＢＳから送られてくるディジタル放送波を受信する。このアンテナ１は、一般に周波数変換器を備え、受信／周波数変換した信号をチューナ２に与える。
【００１５】
チューナ２は、受信した高周波ディジタル変調信号のうちから特定周波数の信号を取り出す。すなわち、ディジタル放送の複数のトランスポンダのなかから一つを選択する処理を行う。また、チューナ２は、復調回路、逆インタリーブ回路、誤り訂正回路などを備えることにより、選択したディジタル変調信号を復調してトランスポート・ストリームを出力する。
【００１６】
デマルチプレクサ（ＤＥＭＵＸ）３は、前記トランスポート・ストリームを、ＭＰＥＧ２（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ２）のビデオストリーム、オーディオストリーム、及びＰＳＩ／ＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ／Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）などに分離する。デマルチプレクサ３は、ビデオストリームとオーディオストリームをＡＶデコーダ４に供給し、ＰＳＩ／ＳＩ等をシステムコントローラ１３に供給する。
【００１７】
映像処理回路５はＡＶデコーダ４から映像データを受け取り、Ｄ／Ａ変換を行い、例えばＮＴＳＣフォーマットのコンポジット信号に変換する。音声信号処理回路６はＡＶデコーダ４から出力された音声データを受け取り、Ｄ／Ａ変換を行い、右（Ｒ）音のアナログ信号および左（Ｌ）音のアナログ信号を生成する。なお、後述するように、映像処理回路５によって動画画素割合を生成し、音声処理回路６によって音声レベルを出力するようにしている。
【００１８】
映像出力回路７及び音声出力回路８は出力抵抗、増幅器、及びスイッチ等を備える。前記スイッチはシステムコントローラ１３によって制御され、映像出力回路７及び音声出力回路８からは、受信映像・音声と再生映像・音声が切り替えられて出力される。
【００１９】
ＯＳＤ（オンスクリーンディスプレイ）表示回路１２は、システムコントローラ１３から出力指示された文字情報に基づく映像信号を加算器２０に出力する。加算器２０は前記映像信号を映像処理回路５から出力される映像信号に組み込む処理を行う。上記ＯＳＤ表示回路１２により、前述のＰＳＩに含まれるサービス情報に基づくＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）画面表示が実現されるほか、後述する場面番号表示などの各種表示が行えることになる。
【００２０】
メモリ（例えば、ＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリ等）１４には、番組情報、ユーザ入力情報、システムコントローラ１３により実行されるプログラム、番組予約情報（開始時間、終了時間、受信チャンネル等）などが格納される、また、メモリ１４には、受信番組を記録テープに録画する際に、番組における各場面の場面番号及び後述する場面映像抽出情報がカセット番号に対応付けられて格納される。
【００２１】
リモコン送信機１０は、当該放送受信装置３０に指令を送出するための送信機である。このリモコン送信機１０に設けられた図示しないキーを操作すると、そのキーに対応した指令を意味する信号光（リモコン信号）が図示しない発光部から送出される。リモコン受光器１１は、前記信号光を受光し、これを電気信号に変換してシステムコンローラ１３に与える。
【００２２】
システムコントローラ１３は、前記リモコン送信機１０などによるユーザ指示に対応した各種処理を行う。更に、システムコントローラ１３は、記録テープに映像信号の記録／再生を行うＶＣＲ（ビデオカセットレコーダ）部１６に対する制御も行う。そして、この発明にかかわる処理として、カセット番号をカセットテープから取得する処理、カセットテープに番組を録画する際に録画番組上の場面切り替わりを推定する処理、場面切り替わりを推定するごとにカウントアップした値を場面番号とする処理、ＶＣＲ部１６からテープ走行カウンタ値を取得する処理、及び場面切り替わり推定した時点のテープ走行カウンタ値（場面映像抽出情報）と前記場面番号とを対応付けた場面リストを生成し、この場面リストを前記カセット番号の場面リストとしてメモリ１４に格納する処理を実行する。
【００２３】
ＶＣＲ部１６のテープ装填部にカセットテープがセットされると、カセット番号読取部にてカセット番号が読み取られ、このカセット番号がシステムコントローラ１３に通知される。カセット番号の取得は、例えば、カセットテープ筐体にバーコードを貼り付けておき、前記カセット番号読取部としてバーコードリーダーを設けておくことで実現できる。
【００２４】
システムコントローラ１３は、上述のごとく、番組の録画に際して、上記カセット番号に対応させて場面リストを作成して記憶する。そして、後日、前記カセットテープがセットされたときには、そのカセット番号をキーにしてメモリ１４から場面リストを読み出し、この場面リストにおける場面番号をオンスクリーン表示する。そして、ユーザによりリモコン送信機１０の数値キーが押下されると、これを認識して数字列情報を生成し、更に、ユーザによりリモコン送信機１０の決定キーが操作されると、これを認識して前記数字列を確定し、この数字列を場面番号とし、これに対応付けられているテープ走行カウンタ値をメモリ１４から取得すると共にＶＣＲ部１６から現在テープ走行カウンタ値を取得し、両カウンタ値の比較によって巻き戻しと早送りのいずれかを判定し、現在テープ走行カウンタ値が前記テープ走行カウンタ値に一致するまでＶＣＲ部１６にテープ走行指令を与え、一致した後には再生指令を与える。なお、現在テープ走行カウンタ値が前記テープ走行カウンタ値より幾分少ない値となる時点（指定場面よりも時間にして数秒程度前）に再生指令を与えるようにしてもよい。
【００２５】
（場面切り替わり推定処理）
場面が切り替わるときには、前フレーム映像と現在フレーム映像との対応位置画素データが相違するものとなる。また、動画／静止画判定法として、１フレーム映像の所定位置の複数対象画素について、前フレーム画素データと現在フレーム画素データとの比較を行い、所定値以上の差異が生じた画素の全対象画素に対する割合（動画画素割合）を算出し、前記割合が基準値以上のときに動画であると判定し、それ以外は静止画であるとする方法がある。この処理を利用し、動画と判定されたときには、場面の切り替わりであると推定し、静止画と判定されている間は、場面の切り替わりではないと推定するようにする。なお、場面切り替わりは通常の動画よりも動画画素割合は多いと考えられるので、前記基準値は通常の動画判定時の値よりも高い値としてもよいものである。
【００２６】
また、場面が切り替わるときには、音声レベルに変化が見られることが多い。そこで、数秒間程度の幅で音声レベルを検出・更新していく処理を行い、図２（ａ）に示すように、前述の動画判定により場面切り替わりと推定した時点を境としてその前側音声レベルの平均値と後側音声レベルの平均値とを比較し、所定量以上の差異がある場合に、場面切り替わりと推定するようにしてもよい。また、場面が切り替わるときには、音声が途切れる、或いは音声レベルが小さくなることも多い。そこで、図２（ｂ）に示すように、前記数秒間程度の幅で単に音声レベルの平均値が基準値以下となったときに場面切り替わりと推定するようにしてもよい。ただし、このような音声レベルによる場面切り替わり推定では、最後の音声レベル検出まで待つ必要があるから、動画判定された時点の場面映像抽出情報は暫定的なものとし、音声レベルによる場面切り替わり推定がなされた時点で前記暫定的な場面映像抽出情報を採用する一方、音声レベルによる場面切り替わり推定がなされなかったときには、暫定的な場面映像抽出情報を破棄する。
【００２７】
図３のフローチャートは、場面切り替わりの推定処理例を示している。システムコントローラ１３は、録画処理を開始すると（ステップＳ１）、録画終了命令の有無を監視する（ステップＳ２）。録画終了命令を受けた場合には（ステップＳ２でＮＯ）、録画を終了する（ステップＳ３）。録画終了命令がない場合には（ステップＳ２でＹＥＳ）、動画静止画判別情報を取得し（ステップＳ４）、動画画素の割合が基準値以上であるかどうかを判断する（ステップＳ５）。動画画素割合が基準値以上でない場合にはステップＳ２に戻り、基準値以上であるときには判別に音声レベルを使用するかどうかを判断する（ステップＳ６）。音声レベルを使用するかどうかはユーザが予め設定しておく。音声レベルを使用しない場合にはステップＳ８へ進む。一方、音声レベルを使用するときには（ステップＳ６でＹＥＳ）、システムコントローラ１３は音声レベルが基準値以下であるかどうかを判断し（ステップＳ７）、基準値以下でないときにはステップＳ２に戻る。音声レベルが基準値以下であるときには（ステップＳ７でＹＥＳ）、場面が切り替わったと推定し（ステップＳ８）、場面番号を書き込むことになる（ステップＳ９）。
【００２８】
ところで、コマーシャルや頻繁な場面切り替わりが存在する番組であると、場面数がかなり増えて目的場面の検索効率が低下することが予想される。そこで、場面取得後の一定時間内には次の場面取得は行わないとする設定を設けておき、ユーザが選択できるようにしておくのがよい。例えば、図４のフローチャートに示しているように、システムコントローラ１３は、録画処理を開始すると（ステップＳ１１）、場面の切り替わりを監視する（ステップＳ１２）。場面の切り替わりを推定したときには（ステップＳ１２でＹＥＳ）、前の場面からの経過時間を判定する（ステップＳ１３）。そして、システムコントローラ１３は、経過時間が規定時間以下であるかどうかを判断し（ステップＳ１４）、規定時間以下であるときにはそのままステップＳ１２に戻る。一方、規定時間以下でないときには（ステップＳ１４でＮＯ）、場面番号を付けて（ステップＳ１５）、ステップＳ１２に戻ることになる。
【００２９】
上述した図１の構成例では、アナログ信号化した番組映像をＶＣＲに録画させることとしたが、これに限るものではなく、ディジタル映像データやＭＰＥＧデータを内蔵の録画装置や外付けの録画装置に記録するようにしてもよいものである。外付けの録画装置はＩＥＥＥ１３９４インターフェイスなどを用いて接続・制御することができる。録画装置としては、テープレコーダの他、ハードディスクなどのディスク型記録媒体を用いる装置を採用することができる。ハードディスクなどを用いる場合には、テープ走行カウンタ値ではなく、場面番号と画像格納場所を示す記録アドレスデータ（ハードディスクであれば、シリンダ番号、ヘッド番号、セクタ番号等の物理アドレス、或いは論理アドレス）とを対応付けた場面リストを録画番組毎に記憶しておけばよい。そして、これらの情報はメモリ１４ではなくハードディスク自体に格納すればよい。また、このようにハードディスクを用いる場合には、場面番号の表示に代えて、サムネイル画像（場面縮小画像）の表示を行うことが容易になる。
【００３０】
例えば、場面切り替わり推定された時点でシステムコントローラ１３の側から内蔵ハードディスクにその時点の記録アドレスを問い合わせ、内蔵ハードディスクから返された記録アドレスをメモリ１４に記録したり、或いは、場面切り替わり推定された時点でシステムコントローラ１３の側から内蔵ハードディスクにその時点の記録アドレスをサムネイル画像用の記録アドレスとして保持するよう指令を与え、内蔵ハードディスク側で記録中の動画映像のファイルの情報として前記記録アドレスを保持する処理を行うようにしてもよい。また、場面映像抽出情報を録画開始時からの各場面切り替わり推定時の時間情報とし、場面リスト表示に際し、録画ＭＰＥＧデータのタイムコードを検索し、前記各場面切り替わり推定時の時間情報に合致するタイムコード値を持つ映像をそれぞれ再生し、メモリに展開してサムネイル表示処理を行うようにしてもよい。サムネイル画像を表示する場合、システムコントローラ１３は、前記記録アドレス等に基づいて静止画を再生し、例えば図示しないＶＲＡＭ（フレームメモリ）上に９画面分の静止映像表示エリアを設定して書き込む。或る番組について１〜１７の取得場面が存在すれば、ハードディスクから１〜９番に対応する静止映像データ（場面映像）を読み出し、縮小処理（画素間引き処理）を行ってサムネイル化し、前記ＶＲＡＭの９つのエリアに対して描画処理を行い、当該ＶＲＡＭに読み出しアドレスを与え、読み出された１フレーム分の映像データを映像処理回路５に与える。また、次ページを示すキーが操作されたときには、１０〜１７番の静止映像データを読み出し、前記ＶＲＡＭのうちの８つのエリアに対して描画処理を行うことになる。リモコン送信機１０の方向キーの操作や数値キーの操作を検出してサムネイル画像を選択し、特定されたサムネイル画像（決定キーが操作された時点で選択されているサムネイル画像）に対応する映像から（記録アドレスから）再生を開始することになる。
【００３１】
また、サムネイル画像を予め作成しておいて、録画番組映像データとは別個に内蔵ハードディスクの専用のエリアやメモリ１４に格納するようにしてもよいものである。なお、録画番組のサムネイル化表示自体は既存技術であり、既存のどのような技術を用いても構わないものである。また、サムネイルの対象となる映像データはＭＰＥＧデータ中のＩピクチャとするのがよい。また、アナログ放送を受信する構成においてディジタル録画を行うのであれば、Ａ／Ｄ変換器やＭＰＥＧエンコーダなどを備えればよい。
【００３２】
【発明の効果】
以上説明したように、この発明によれば、録画番組の所望の場面を簡単に検索することができるという効果を奏する。
【図面の簡単な説明】
【図１】この発明の実施形態のディジタル放送受信装置（映像記録再生装置）を示したブロック図である。
【図２】同図（ａ）（ｂ）は音声レベルによる場面切り替わり推定を説明する説明図である。
【図３】処理内容を示したフローチャートである。
【図４】処理内容を示したフローチャートである。
【符号の説明】
１ アンテナ
２ チューナ
３ デマルチプレクサ（ＤＥＭＵＸ）
４ ＡＶデコーダ
１２ ＯＳＤ回路
１３ システムコントローラ
１４ メモリ[0001]
[Industrial application fields]
The present invention relates to a video recording / reproducing apparatus such as a hard disk recorder.
[0002]
[Prior art]
When playing back recorded content, it is convenient to be able to search what content is recorded. For this reason, an arbitrary still image is extracted from each recorded content and recorded as a thumbnail image. Some display a list of contents. Further, it is possible to designate and reproduce a desired program on the list display. There are also known methods that automatically create the thumbnail image based on the image at the start of recording, or generate a plurality of thumbnails for one program (see Patent Document 1).
[0003]
[Patent Document 1]
Japanese Patent Laid-Open No. 2001-184844
[Problems to be solved by the invention]
However, although the above-described conventional technique can easily find a target recorded program, it cannot respond to a request for quickly searching for a desired scene in the recorded program and reproducing it from there.
[0005]
In view of the above circumstances, an object of the present invention is to provide a video recording / reproducing apparatus capable of quickly searching for a desired scene in a recorded program.
[0006]
[Means for Solving the Problems]
In order to solve the above-described problem, the video recording / playback apparatus of the present invention estimates recording / playback control means for recording and playing back a moving image on an internal recording medium or an external recording medium, and scene switching in the moving image. Means for recording, scene video extraction information for reproducing the video at the time when scene switching is estimated, scene number generated every time scene switching is estimated, and scene input by the user Means for acquiring scene video extraction information based on the number and executing video playback from the video specified by the scene video extraction information.
[0007]
If it is the said structure, a scene number will be produced | generated by estimating a scene change, and scene image | video extraction information will be matched with each scene number. Although the user does not know what scene number the desired scene in the program corresponds to, for example, if the user remembers that the desired scene is in the middle of the program, the scene number per middle You just have to choose. By selecting this scene number, playback is performed from a certain scene, but it becomes easier for the user who sees the scene to determine that the desired scene is after or before the playback scene. A desired scene can be quickly searched by fast forward and rewind operations.
[0008]
The video recording / playback apparatus according to the present invention includes a recording / playback control means for recording and playing back a moving picture on an internal recording medium or an external recording medium, an estimation means for estimating a scene change in the moving picture, and a scene changeover Means for recording scene video extraction information for reproducing the video at the estimated time point, means for generating a video signal for reducing the scene video specified by the scene video extraction information, and the reduced display Means for executing moving image reproduction from the video specified by the user in the scene video.
[0009]
With the above configuration, the scene video extraction information for playing the video at the time when the scene is estimated to be switched is recorded, and each scene video is reduced and displayed on the screen before the original playback, and the user is reduced and displayed. It is possible to select a desired scene video or a scene video close in time from the selected scene videos and start playback from there.
[0010]
The video recording / playback apparatus according to the present invention includes a recording / playback control means for recording and playing back a moving picture on an internal recording medium or an external recording medium, an estimation means for estimating a scene change in the moving picture, and a scene changeover Means for recording scene video extraction information for reproducing the video at the estimated time point and a reduced video of the scene video, means for generating a video signal for displaying the reduced video, and the reduced display Means for executing moving image playback from the video specified by the user in the scene video.
[0011]
In such a configuration, since a reduced video is created and recorded in advance, a capacity for storage is required. However, since the scene can be selected with a reduced image as in the above configuration, the user can easily search for a scene. become.
[0012]
The estimation means may estimate a scene change by moving image / still image change determination. The estimation means may be configured to estimate a scene change when a scene change is estimated by a moving image / still image change determination and a scene change can be estimated by an audio level change determination. . Further, it may be configured such that time measurement is performed after the above process associated with the scene change estimation, and the above process is not executed for this estimation even if a new scene change estimation is made before a certain period of time has elapsed. Is.
[0013]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to FIGS. 1 to 4. Here, a broadcast receiving / recording / reproducing apparatus for receiving and recording BS (Broadcasting Satellite) digital broadcasting is illustrated. In addition, a configuration for recording on a recording tape is exemplified first, and an example for recording on a hard disk later is shown.
[0014]
In FIG. 1, an antenna 1 is arranged outdoors in a predetermined direction, and receives a digital broadcast wave transmitted from a BS. The antenna 1 generally includes a frequency converter, and supplies a received / frequency converted signal to the tuner 2.
[0015]
The tuner 2 extracts a signal having a specific frequency from the received high frequency digital modulation signal. That is, a process of selecting one from a plurality of transponders of digital broadcasting is performed. Further, the tuner 2 includes a demodulation circuit, a deinterleave circuit, an error correction circuit, and the like, thereby demodulating the selected digital modulation signal and outputting a transport stream.
[0016]
The demultiplexer (DEMUX) 3 separates the transport stream into MPEG2 (Moving Picture Experts Group 2) video stream, audio stream, PSI / SI (Program Specific Information / Service Information), and the like. The demultiplexer 3 supplies the video stream and the audio stream to the AV decoder 4 and supplies PSI / SI and the like to the system controller 13.
[0017]
The video processing circuit 5 receives the video data from the AV decoder 4, performs D / A conversion, and converts it into, for example, a composite signal in the NTSC format. The audio signal processing circuit 6 receives the audio data output from the AV decoder 4, performs D / A conversion, and generates a right (R) sound analog signal and a left (L) sound analog signal. As will be described later, the video pixel ratio is generated by the video processing circuit 5 and the audio level is output by the audio processing circuit 6.
[0018]
The video output circuit 7 and the audio output circuit 8 include an output resistor, an amplifier, a switch, and the like. The switch is controlled by the system controller 13, and the received video / audio and the reproduced video / audio are switched and output from the video output circuit 7 and the audio output circuit 8.
[0019]
The OSD (On Screen Display) display circuit 12 outputs a video signal based on character information instructed to be output from the system controller 13 to the adder 20. The adder 20 performs processing for incorporating the video signal into the video signal output from the video processing circuit 5. The OSD display circuit 12 realizes an EPG (Electronic Program Guide) screen display based on the service information included in the PSI described above, and various displays such as a scene number display described later.
[0020]
The memory (for example, RAM, ROM, EEPROM, flash memory, etc.) 14 includes program information, user input information, a program executed by the system controller 13, program reservation information (start time, end time, reception channel, etc.) and the like. In addition, when the received program is recorded on the recording tape, the scene number of each scene in the program and scene video extraction information described later are stored in the memory 14 in association with the cassette number.
[0021]
The remote control transmitter 10 is a transmitter for sending a command to the broadcast receiving device 30. When a key (not shown) provided on the remote control transmitter 10 is operated, signal light (remote control signal) indicating a command corresponding to the key is transmitted from a light emitting unit (not shown). The remote control light receiver 11 receives the signal light, converts it into an electrical signal, and supplies it to the system controller 13.
[0022]
The system controller 13 performs various processes corresponding to user instructions from the remote control transmitter 10 or the like. Further, the system controller 13 also controls a VCR (video cassette recorder) unit 16 for recording / reproducing video signals on / from a recording tape. And, as a process related to the present invention, a process for obtaining a cassette number from a cassette tape, a process for estimating a scene change on a recorded program when a program is recorded on the cassette tape, a value counted up every time a scene change is estimated A scene list in which a tape running counter value (scene video extraction information) at the time when a scene change is estimated and the scene number is associated is generated. The scene list is stored in the memory 14 as the cassette number scene list.
[0023]
When a cassette tape is set in the tape loading unit of the VCR unit 16, the cassette number is read by the cassette number reading unit, and this cassette number is notified to the system controller 13. Acquisition of a cassette number can be realized, for example, by pasting a barcode on a cassette tape housing and providing a barcode reader as the cassette number reading unit.
[0024]
As described above, the system controller 13 creates and stores a scene list corresponding to the cassette number when recording a program. When the cassette tape is set at a later date, the scene list is read from the memory 14 using the cassette number as a key, and the scene number in the scene list is displayed on the screen. When the numeric key of the remote control transmitter 10 is pressed by the user, it is recognized and numeric string information is generated. Further, when the determination key of the remote control transmitter 10 is operated by the user, this is recognized. The numeric string is determined, the numeric string is set as the scene number, the tape running counter value associated therewith is obtained from the memory 14, and the current tape running counter value is obtained from the VCR unit 16, and both counter values are obtained. The tape running command is given to the VCR unit 16 until the current tape running counter value matches the tape running counter value, and the reproduction command is given after the match. Note that a reproduction command may be given when the current tape running counter value becomes slightly smaller than the tape running counter value (several seconds before the designated scene).
[0025]
(Scene change estimation process)
When the scene is switched, the corresponding position pixel data of the previous frame video and the current frame video are different. In addition, as a moving image / still image determination method, comparison is performed between the previous frame pixel data and the current frame pixel data for a plurality of target pixels at a predetermined position of one frame video, and all target pixels having a difference greater than a predetermined value are compared. There is a method in which a ratio (moving picture pixel ratio) with respect to is calculated, a moving picture is determined when the ratio is equal to or greater than a reference value, and a still picture is obtained otherwise. By using this process, when it is determined that the video is a moving image, it is estimated that the scene is switched, and while it is determined that it is a still image, it is estimated that the scene is not switched. Since the scene change is considered to have a moving image pixel ratio larger than that of a normal moving image, the reference value may be a value higher than the value at the time of normal moving image determination.
[0026]
Also, when the scene changes, the audio level often changes. Therefore, a process of detecting and updating the sound level within a range of several seconds is performed, and as shown in FIG. The average value may be compared with the average value of the rear audio level, and when there is a difference of a predetermined amount or more, it may be estimated that the scene is switched. Also, when the scene changes, the sound is often interrupted or the sound level is reduced. Therefore, as shown in FIG. 2 (b), it may be estimated that the scene is switched when the average value of the audio level is equal to or less than the reference value within the width of about several seconds. However, in such scene switching estimation based on the audio level, it is necessary to wait until the last audio level is detected, so the scene video extraction information at the time of the video determination is assumed to be provisional, and scene switching estimation based on the audio level is performed. The temporary scene video extraction information is adopted at the time, and when the scene change estimation based on the audio level is not made, the temporary scene video extraction information is discarded.
[0027]
The flowchart of FIG. 3 shows an example of scene switching estimation processing. When starting the recording process (step S1), the system controller 13 monitors the presence or absence of a recording end command (step S2). If a recording end command is received (NO in step S2), the recording ends (step S3). If there is no recording end command (YES in step S2), moving image still image determination information is acquired (step S4), and it is determined whether the ratio of moving image pixels is equal to or greater than a reference value (step S5). When the moving picture pixel ratio is not equal to or higher than the reference value, the process returns to step S2, and when it is equal to or higher than the reference value, it is determined whether or not the sound level is used for determination (step S6). Whether or not to use the sound level is set in advance by the user. If the audio level is not used, the process proceeds to step S8. On the other hand, when the audio level is used (YES in step S6), the system controller 13 determines whether the audio level is below the reference value (step S7), and returns to step S2 if it is not below the reference value. When the audio level is below the reference value (YES in step S7), it is estimated that the scene has been switched (step S8), and the scene number is written (step S9).
[0028]
By the way, in the case of a program in which commercials and frequent scene changes exist, it is expected that the number of scenes will increase considerably and the search efficiency of the target scene will decrease. Therefore, it is preferable to provide a setting so that the next scene acquisition is not performed within a certain time after the scene acquisition so that the user can select it. For example, as shown in the flowchart of FIG. 4, when the system controller 13 starts the recording process (step S11), the system controller 13 monitors the switching of scenes (step S12). When the scene change is estimated (YES in step S12), the elapsed time from the previous scene is determined (step S13). Then, the system controller 13 determines whether or not the elapsed time is equal to or shorter than the specified time (step S14), and when it is equal to or shorter than the specified time, the system controller 13 returns to step S12 as it is. On the other hand, when it is not less than the specified time (NO in step S14), a scene number is assigned (step S15), and the process returns to step S12.
[0029]
In the configuration example of FIG. 1 described above, the analog video program video is recorded on the VCR. However, the present invention is not limited to this. Digital video data and MPEG data can be recorded in a built-in recording device or an external recording device. It may be recorded. An external recording apparatus can be connected and controlled using an IEEE 1394 interface or the like. As a recording device, a device using a disk-type recording medium such as a hard disk can be employed in addition to a tape recorder. When using a hard disk or the like, not the tape running counter value but the recording address data indicating the scene number and the image storage location (in the case of a hard disk, a physical address such as a cylinder number, head number, sector number, or logical address) It is sufficient to store a scene list in which each is recorded for each recorded program. These pieces of information may be stored not in the memory 14 but in the hard disk itself. Further, when the hard disk is used in this way, it becomes easy to display thumbnail images (scene reduced images) instead of displaying the scene numbers.
[0030]
For example, when the scene change is estimated, the system controller 13 inquires the internal hard disk about the recording address at that time, and records the recording address returned from the internal hard disk in the memory 14, or when the scene change is estimated. Then, the system controller 13 gives an instruction to the internal hard disk to hold the current recording address as the recording address for the thumbnail image, and the internal hard disk side holds the recording address as information of the moving image video file being recorded. Processing may be performed. Also, the scene video extraction information is used as time information at the time of each scene change estimation from the start of recording, and when displaying the scene list, the time code of the recorded MPEG data is searched, and the time that matches the time information at the time of each scene change estimation Each video having a code value may be played back and expanded in a memory for thumbnail display processing. When displaying a thumbnail image, the system controller 13 reproduces a still image based on the recording address or the like, and sets and writes a still image display area for nine screens on a VRAM (frame memory) (not shown), for example. If there are 1 to 17 acquisition scenes for a certain program, still video data (scene videos) corresponding to Nos. 1 to 9 are read from the hard disk, reduced to a thumbnail (pixel thinning process), and converted into thumbnails. Drawing processing is performed on nine areas, a read address is given to the VRAM, and the read video data for one frame is given to the video processing circuit 5. When the key indicating the next page is operated, the 10th to 17th still image data is read, and the drawing process is performed on the eight areas of the VRAM. From the video corresponding to the specified thumbnail image (thumbnail image selected at the time when the enter key is operated) by selecting the operation of the direction key or the numerical key of the remote control transmitter 10 and selecting the thumbnail image. Playback will start (from the recording address).
[0031]
A thumbnail image may be created in advance and stored in a dedicated area of the internal hard disk or the memory 14 separately from the recorded program video data. Note that the thumbnail display of the recorded program itself is an existing technology, and any existing technology may be used. The video data to be thumbnailed is preferably an I picture in MPEG data. Further, if digital recording is performed in a configuration for receiving an analog broadcast, an A / D converter, an MPEG encoder, or the like may be provided.
[0032]
【The invention's effect】
As described above, according to the present invention, it is possible to easily search for a desired scene of a recorded program.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a digital broadcast receiving apparatus (video recording / reproducing apparatus) according to an embodiment of the present invention.
FIGS. 2A and 2B are explanatory diagrams for explaining scene switching estimation based on sound levels.
FIG. 3 is a flowchart showing processing contents.
FIG. 4 is a flowchart showing processing contents.
[Explanation of symbols]
1 Antenna 2 Tuner 3 Demultiplexer (DEMUX)
4 AV decoder 12 OSD circuit 13 System controller 14 Memory
