[go: up one dir, main page]

JP4909856B2 - 電子機器および表示方法 - Google Patents

電子機器および表示方法 Download PDF

Info

Publication number
JP4909856B2
JP4909856B2 JP2007252457A JP2007252457A JP4909856B2 JP 4909856 B2 JP4909856 B2 JP 4909856B2 JP 2007252457 A JP2007252457 A JP 2007252457A JP 2007252457 A JP2007252457 A JP 2007252457A JP 4909856 B2 JP4909856 B2 JP 4909856B2
Authority
JP
Japan
Prior art keywords
section
video content
content data
attribute
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007252457A
Other languages
English (en)
Other versions
JP2009088689A (ja
Inventor
浩平 桃崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2007252457A priority Critical patent/JP4909856B2/ja
Priority to US12/203,819 priority patent/US8285114B2/en
Publication of JP2009088689A publication Critical patent/JP2009088689A/ja
Application granted granted Critical
Publication of JP4909856B2 publication Critical patent/JP4909856B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Description

本発明は映像コンテンツデータの概要を表示する電子機器および表示方法に関する。
一般に、ビデオレコーダ、パーソナルコンピュータといった電子機器は、テレビジョン放送番組データのような各種映像コンテンツデータを記録および再生することが可能である。この場合、電子機器に格納された各映像コンテンツデータにはタイトル名が付加されるが、タイトル名だけでは、ユーザが、各映像コンテンツデータがどのような内容のものであるかを把握することは困難である。このため、映像コンテンツデータの内容を把握するためには、その映像コンテンツデータを再生することが必要となる。しかし、総時間長の長い映像コンテンツデータの再生には、たとえ早送り再生機能等を用いた場合であっても、多くの時間が要される。
そこで、最近では、映像コンテンツデータから抽出された幾つかの静止画それぞれに対応するサムネイル画像の一覧を表示する技術が開発され始めている。
特許文献１には、登場人物一覧表示機能を有する装置が開示されている。この装置は、映像コンテンツにおける登場人物の一覧として、映像コンテンツにおける登場人物それぞれの顔の画像を並べて表示する機能を有している。
特開２００１−３０９２６９号公報
サムネイル画像の一覧表示は、映像コンテンツデータの概要をユーザに提示する技術として有用である。
しかし、実際には、表示可能なサムネイル画像の枚数には制限がある。このため、サムネイル画像の一覧だけでは、ユーザが映像コンテンツ内の各部分の詳細までを把握することは困難である。
また通常、多くの映像コンテンツデータは、例えばコマーシャル区間およびそれ以外の区間のような、複数種の属性区間を含んでいる。
しかし、特許文献１の登場人物一覧表示機能においては、属性区間については何ら考慮されておらず、登場人物それぞれの顔の画像が単純に表示されるのみである。
したがって、映像コンテンツデータ内のある特定の属性区間の内容をユーザに提示するための新たな機能の実現が必要である。
本発明は上述の事情を考慮してなされたものであり、ある特定の属性区間に着目して映像コンテンツデータの内容をユーザに提示することができる電子機器および表示方法を提供することを目的とする。
上述の課題を解決するため、請求項１に係る本発明の電子機器は、映像コンテンツデータ内に含まれる、コマーシャル区間、コマーシャル区間以外の区間、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間を含む複数の属性区間の内の少なくとも１つの所定属性区間の開始および終了の時点を規定する区間属性情報であって、前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する複数の部分区間を含む場合、前記複数の部分区間の各々の開始および終了の時点を規定する区間属性情報を格納する記憶装置と、前記映像コンテンツデータから抽出された静止画像それぞれをそれら静止画像の出現時間順に一列に並べて前記表示画面上の表示エリア上に表示すると共に、前記表示エリア上の前記複数の静止画像の中から選択された静止画像を第１の横幅サイズで表示し且つ他の各静止画像を前記第１の横幅サイズよりも小さい横幅サイズで表示する静止画像表示手段と、前記区間属性情報に基づいて、前記映像コンテンツデータのシーケンス内における前記所定属性区間内の前記複数の部分区間の位置をそれぞれ示す複数のバー領域が配置される区間バーを前記表示画面上に表示する表示処理手段と、前記複数の部分区間から選択された部分区間の前記映像コンテンツデータの再生を要求するイベントが入力された場合、前記区間属性情報に基づいて、前記選択された部分区間から抽出された静止画像が表示されている前記表示エリア上の画像表示位置を特定し、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データが前記特定された画像表示位置上に前記第１の横幅サイズで表示されるように、前記特定された画像表示位置上で、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始する再生処理手段とを具備することを特徴とする。
また、請求項５に係る本発明は、映像コンテンツデータの概要を表示するための表示方法であって、前記映像コンテンツデータに含まれるオーディオデータを分析し、前記映像コンテンツデータ内に含まれる、コマーシャル区間、コマーシャル区間以外の区間、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間を含む複数の属性区間の内の少なくとも１つの所定属性区間の開始および終了の時点を規定する区間属性情報であって、前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する複数の部分区間を含む場合、前記複数の部分区間の各々の開始および終了の時点を規定する区間属性情報を出力するインデキシング処理を実行するステップと、前記映像コンテンツデータから抽出された静止画像それぞれをそれら静止画像の出現時間順に一列に並べて前記表示画面上の表示エリア上に表示すると共に、前記表示エリア上の前記複数の静止画像の中から選択された静止画像を第１の横幅サイズで表示し且つ他の各静止画像を前記第１の横幅サイズよりも小さい横幅サイズで表示するステップと、前記区間属性情報に基づいて、前記映像コンテンツデータのシーケンス内における前記所定属性区間内の前記複数の部分区間の位置をそれぞれ示す複数のバー領域が配置される区間バーを前記表示画面上に表示するステップと、前記複数の部分区間から選択された部分区間に属する前記映像コンテンツデータの再生を要求するイベントが入力された場合、前記区間属性情報に基づいて、前記選択された部分区間から抽出された静止画像が表示されている前記表示エリア上の画像表示位置を特定し、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データが前記特定された画像表示位置上に前記第１の横幅サイズで表示されるように、前記特定された画像表示位置上で、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始する再生処理ステップとを具備することを特徴とする。
本発明によれば、ある特定の属性区間に着目して映像コンテンツデータの内容をユーザに提示することができる。
以下、図面を参照して、本発明の実施形態を説明する。
まず、図１および図２を参照して、本発明の一実施形態に係る電子機器の構成を説明する。本実施形態の電子機器は、例えば、情報処理装置として機能するノートブック型の携帯型パーソナルコンピュータ１０から実現されている。
このパーソナルコンピュータ１０は、放送番組データ、外部機器から入力されるビデオデータといった、映像コンテンツデータ（オーディオビジュアルコンテンツデータ）を記録および再生することができる。即ち、パーソナルコンピュータ１０は、テレビジョン放送信号によって放送される放送番組データの視聴および録画を実行するためのテレビジョン（ＴＶ）機能を有している。このＴＶ機能は、例えば、パーソナルコンピュータ１０に予めインストールされているＴＶアプリケーションプログラムによって実現されている。また、ＴＶ機能は、外部のＡＶ機器から入力されるビデオデータを記録する機能、および記録されたビデオデータおよび記録された放送番組データを再生する機能も有している。
さらに、パーソナルコンピュータ１０は、パーソナルコンピュータ１０に格納されたビデオデータ、放送番組データのような映像コンテンツデータに含まれる所定属性区間の位置を検出し、その映像コンテンツデータのシーケンス内における所定属性区間の位置を示すバー領域を含む区間バーを表示画面上に表示するインデキシング情報表示機能を有している。このインデキシング情報表示機能は、例えば、ＴＶ機能内にその一機能として実装されている。
所定属性区間としては、例えば、コマーシャル区間（ＣＭ区間）、ＣＭ区間以外の区間（本編区間）、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間、の内の少なくとも１つが用いられる。
さらに、パーソナルコンピュータ１０は、所定属性区間に着目して映像コンテンツデータ内に含まれる動画像データを（簡易的に）再生するプレビュー機能も有している。例えばユーザによる区間バーの操作によってある属性区間が選択された場合、パーソナルコンピュータ１０は、選択された属性区間に属する映像コンテンツデータ内の動画像データの（簡易的な）再生（プレビュー再生）を区間バーと同じ表示画面上で行う。
また、インデキシング情報表示機能は、映像コンテンツデータ内に含まれる動画像データから抽出された静止画像の一覧等を表示するサムネイル画像表示機能を有している。このサムネイル画像表示機能は、映像コンテンツデータの概要等をユーザに提示するための機能である。
さらに、インデキシング情報表示機能は、映像コンテンツデータに登場する人物の顔画像の一覧等を表示する顔画像一覧表示機能も有している。この顔画像一覧表示機能は、映像コンテンツデータ全体の中のどの時間帯にどの人物が登場するのかをユーザに提示することができる。また、この顔画像一覧表示機能は、映像コンテンツデータ内に含まれる所定の属性区間に着目して人物の一覧を表示することもできる。
図１はコンピュータ１０のディスプレイユニットを開いた状態における斜視図である。本コンピュータ１０は、コンピュータ本体１１と、ディスプレイユニット１２とから構成されている。ディスプレイユニット１２には、ＴＦＴ−ＬＣＤ（Thin Film Transistor Liquid Crystal Display）１７から構成される表示装置が組み込まれている。
ディスプレイユニット１２は、コンピュータ本体１１に対し、コンピュータ本体１１の上面が露出される開放位置とコンピュータ本体１１の上面を覆う閉塞位置との間を回動自在に取り付けられている。コンピュータ本体１１は薄い箱形の筐体を有しており、その上面にはキーボード１３、本コンピュータ１０をパワーオン／パワーオフするためのパワーボタン１４、入力操作パネル１５、タッチパッド１６、およびスピーカ１８Ａ，１８Ｂなどが配置されている。
入力操作パネル１５は、押されたボタンに対応するイベントを入力する入力装置であり、複数の機能をそれぞれ起動するための複数のボタンを備えている。これらボタン群には、ＴＶ機能（視聴、録画、録画された放送番組データ／ビデオデータの再生）を制御するための操作ボタン群も含まれている。また、コンピュータ本体１１の正面には、本コンピュータ１０のＴＶ機能をリモート制御するリモコンユニットとの通信を実行するためのリモコンユニットインタフェース部２０が設けられている。リモコンユニットインタフェース部２０は、赤外線信号受信部などから構成されている。
コンピュータ本体１１の例えば右側面には、ＴＶ放送用のアンテナ端子１９が設けられている。また、コンピュータ本体１１の例えば背面には、例えばＨＤＭＩ(high-definition multimedia interface)規格に対応した外部ディスプレイ接続端子が設けられている。この外部ディスプレイ接続端子は、放送番組データのような映像コンテンツデータに含まれる映像データ（動画像データ）を外部ディスプレイに出力するために用いられる。
次に、図２を参照して、本コンピュータ１０のシステム構成について説明する。
本コンピュータ１０は、図２に示されているように、ＣＰＵ１０１、ノースブリッジ１０２、主メモリ１０３、サウスブリッジ１０４、グラフィクスプロセッシングユニット（ＧＰＵ）１０５、ビデオメモリ（ＶＲＡＭ）１０５Ａ、サウンドコントローラ１０６、ＢＩＯＳ−ＲＯＭ１０９、ＬＡＮコントローラ１１０、ハードディスクドライブ（ＨＤＤ）１１１、ＤＶＤドライブ１１２、ビデオプロセッサ１１３、メモリ１１３Ａ、カードコントローラ１１３、無線ＬＡＮコントローラ１１４、IEEE 1394コントローラ１１５、エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６、ＴＶチューナ１１７、およびＥＥＰＲＯＭ１１８等を備えている。
ＣＰＵ１０１は本コンピュータ１０の動作を制御するプロセッサであり、ハードディスクドライブ（ＨＤＤ）１１１から主メモリ１０３にロードされる、オペレーティングシステム（ＯＳ）２０１、およびＴＶアプリケーションプログラム２０２のような各種アプリケーションプログラムを実行する。ＴＶアプリケーションプログラム２０２はＴＶ機能を実行するためのソフトウェアである。このＴＶアプリケーションプログラム２０２は、ＴＶチューナ１１７によって受信された放送番組データを視聴するためのライブ再生処理、受信された放送番組データをＨＤＤ１１１に記録する録画処理、およびＨＤＤ１１１に記録された放送番組データ／ビデオデータを再生する再生処理等を実行する。また、ＣＰＵ１０１は、ＢＩＯＳ−ＲＯＭ１０９に格納されたＢＩＯＳ（Basic Input Output System）も実行する。ＢＩＯＳはハードウェア制御のためのプログラムである。
ノースブリッジ１０２はＣＰＵ１０１のローカルバスとサウスブリッジ１０４との間を接続するブリッジデバイスである。ノースブリッジ１０２には、主メモリ１０３をアクセス制御するメモリコントローラも内蔵されている。また、ノースブリッジ１０２は、PCI EXPRESS規格のシリアルバスなどを介してＧＰＵ１０５との通信を実行する機能も有している。
ＧＰＵ１０５は、本コンピュータ１０のディスプレイモニタとして使用されるＬＣＤ１７を制御する表示コントローラである。このＧＰＵ１０５によって生成される表示信号はＬＣＤ１７に送られる。また、ＧＰＵ１０５は、ＨＤＭＩ制御回路３およびＨＤＭＩ端子２を介して、外部ディスプレイ装置１にデジタル映像信号を送出することもできる。
ＨＤＭＩ端子２は上述の外部ディスプレイ接続端子である。ＨＤＭＩ端子２は、非圧縮のデジタル映像信号と、デジタルオーディオ信号とを一本のケーブルでテレビのような外部ディスプレイ装置１に送出することができる。ＨＤＭＩ制御回路３は、ＨＤＭＩモニタと称される外部ディスプレイ装置１にデジタル映像信号をＨＤＭＩ端子２を介して送出するためのインタフェースである。
サウスブリッジ１０４は、ＬＰＣ（Low Pin Count）バス上の各デバイス、およびＰＣＩ（Peripheral Component Interconnect）バス上の各デバイスを制御する。また、サウスブリッジ１０４は、ハードディスクドライブ（ＨＤＤ）１１１およびＤＶＤドライブ１１２を制御するためのＩＤＥ（Integrated Drive Electronics）コントローラを内蔵している。さらに、サウスブリッジ１０４は、サウンドコントローラ１０６との通信を実行する機能も有している。
またさらに、サウスブリッジ１０４には、PCI EXPRESS規格のシリアルバスなどを介してビデオプロセッサ１１３が接続されている。
ビデオプロセッサ１１３は、映像インデキシング等に関する各種処理を実行するプロセッサである。このビデオプロセッサ１１３は、映像インデキシング処理を実行するためのインデキシング処理部として機能する。すなわち、映像インデキシング処理においては、ビデオプロセッサ１１３は、サムネイル画像取得処理を実行する。サムネイル画像取得処理においては、ビデオプロセッサ１１３は、映像コンテンツデータのシーケンスを構成する複数の区間の各々から少なくとも１フレームの静止画像を抽出する。複数の区間それぞれの時間長は例えば等間隔である。この場合、ビデオプロセッサ１１３は、映像コンテンツデータに含まれる動画像データから等時間間隔毎に少なくとも１フレームの静止画像を抽出する。もちろん、複数の区間それぞれの時間長は必ずしも等間隔である必要はない。例えば、映像コンテンツデータに含まれる動画像データが圧縮符号化されているならば、フレーム内符号化されたピクチャであるＩ（イントラ）ピクチャのみを圧縮符号化された動画像データから抽出してもよい。また、ビデオプロセッサ１１３は、映像コンテンツデータ内の動画像データの各カットまたは各シーンを検出し、検出された各カットまたは各シーンから少なくとも１フレームの静止画像を抽出することもできる。
映像インデキシング処理においては、顔画像抽出処理も行われる。この顔画像抽出処理においては、ビデオプロセッサ１１３は、映像コンテンツデータに含まれる動画像データから複数の顔画像を抽出する。顔画像の抽出は、例えば、動画像データの各フレームから顔領域を検出する顔検出処理、検出された顔領域をフレームから切り出す切り出し処理等によって実行される。顔領域の検出は、例えば、各フレームの画像の特徴を解析して、予め用意された顔画像特徴サンプルと類似する特徴を有する領域を探索することによって行うことができる。顔画像特徴サンプルは、多数の人物それぞれの顔画像特徴を統計的に処理することによって得られた特徴データである。
さらに、ビデオプロセッサ１１３は、例えば、映像コンテンツデータ内に含まれるコマーシャル（ＣＭ）区間を検出する処理、および音声インデキシング処理も実行する。通常、各ＣＭ区間の時間長は、予め決められた幾つかの時間長の内の１つに設定されている。また、ＣＭ区間の前後には一定時間長の無音期間が存在する。したがって、ＣＭ区間の検出処理においては、例えば、映像コンテンツデータ内に含まれるオーディオデータが分析され、一定時間長の無音区間が検出される。そして、検出された連続する２つの無音区間に挾まれ、且つ一定値以上の時間長を有する部分データを含む区間が、ＣＭ区間として検出される。
音声インデキシング処理は、映像コンテンツデータ内に含まれるオーディオデータを分析して、映像コンテンツデータ内に含まれる、音楽が流れている音楽区間、および人物によるトークが行われているトーク区間を検出するインデキシング処理である。音声インデキシング処理においては、例えば、オーディオデータの周波数スペクトルの特徴が分析され、その周波数スペクトルの特徴に応じて、音楽区間、およびトーク区間が検出される。音楽区間に対応する周波数スペクトルの特徴と、トーク区間に対応する周波数スペクトルの特徴とは互いに異なるので、周波数スペクトルの特徴を分析することによって、音楽区間およびトーク区間のそれぞれを検出することができる。また、音楽区間に対応する周波数スペクトルの特徴とトーク区間に対応する周波数スペクトルの特徴とが混ざり合った周波数スペクトルを有する区間は、音楽区間とトーク区間とが重なった重畳区間として検出することができる。
トーク区間の検出処理においては、例えば、話者セグメンテーション技術または話者クラスタリング技術等が用いられ、これによって話者の切り替わりも検出される。同一の話者（または同一の話者グループ）が連続してトークしている期間が、一つのトーク区間となる。
さらに、音声インデキシング処理は、映像コンテンツデータ内の各部分データ（一定時間長のデータ）毎に歓声レベルを検出する歓声レベル検出処理、および映像コンテンツデータ内の各部分データ毎に盛り上がりレベルを検出する盛り上がりレベル検出処理を実行する。
歓声レベルは、歓声の大きさを示す。歓声は、大勢の人の声が合わさった音である。大勢の人の声が合わさった音は、ある特定の周波数スペクトルの分布を有する。歓声レベル検出処理においては、映像コンテンツデータに含まれるオーディオデータの周波数スペクトルが分析され、そしてその周波数スペクトルの分析結果に従って、各部分データの歓声レベルが検出される。盛り上がりレベルは、ある一定以上の音量レベルがある一定時間長以上連続的に発生する区間の音量レベルである。例えば、比較的盛大な拍手、大きな笑い声のような音の音量レベルが、盛り上がりレベルである。盛り上がりレベル検出処理においては、映像コンテンツデータに含まれるオーディオデータの音量の分布が分析され、その分析結果に従って、各部分データの盛り上がりレベルが検出される。
メモリ１１３Ａは、ビデオプロセッサ１１３の作業メモリとして用いられる。インデキシング処理（ＣＭ検出処理、映像インデキシング処理、および音声インデキシング処理）を実行するためには多くの演算量が必要とされる。本実施形態においては、ＣＰＵ１０１とは異なる専用のプロセッサであるビデオプロセッサ１１３がバックエンドプロセッサとして使用され、このビデオプロセッサ１１３によってインデキシング処理が実行される。よって、ＣＰＵ１０１の負荷の増加を招くことなく、インデキシング処理を実行することが出来る。なお、ＣＭ検出処理は上述したようにオーディオデータを解析することによって実行することができるので、以下では、ＣＭ検出処理を音声インデキシング処理内の１つの処理として扱うことにする。
サウンドコントローラ１０６は音源デバイスであり、再生対象のオーディオデータをスピーカ１８Ａ，１８ＢまたはＨＤＭＩ制御回路３に出力する。
無線ＬＡＮコントローラ１１４は、たとえばIEEE 802.11規格の無線通信を実行する無線通信デバイスである。IEEE 1394コントローラ１１５は、IEEE 1394規格のシリアルバスを介して外部機器との通信を実行する。
エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、電力管理のためのエンベデッドコントローラと、キーボード（ＫＢ）１３およびタッチパッド１６を制御するためのキーボードコントローラとが集積された１チップマイクロコンピュータである。このエンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、ユーザによるパワーボタン１４の操作に応じて本コンピュータ１０をパワーオン／パワーオフする機能を有している。さらに、エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、リモコンユニットインタフェース２０との通信を実行する機能を有している。
ＴＶチューナ１１７はテレビジョン（ＴＶ）放送信号によって放送される放送番組データを受信する受信装置であり、アンテナ端子１９に接続されている。このＴＶチューナ１１７は、例えば、地上波デジタルＴＶ放送のようなデジタル放送番組データを受信可能なデジタルＴＶチューナとして実現されている。また、ＴＶチューナ１１７は、外部機器から入力されるビデオデータをキャプチャする機能も有している。
次に、図３を参照して、本実施形態のインデキシング情報表示機能について説明する。
放送番組データのような映像コンテンツデータに対するインデキシング処理（映像インデキシング処理、および音声インデキシング処理）は、上述したように、インデキシング処理部として機能するビデオプロセッサ１１３によって実行される。
ビデオプロセッサ１１３は、ＴＶアプリケーションプログラム２０２の制御の下、例えば、ユーザによって指定された録画済みの放送番組データ等の映像コンテンツデータに対してインデキシング処理を実行する。また、ビデオプロセッサ１１３は、ＴＶチューナ１１７によって受信された放送番組データをＨＤＤ１１１に格納する録画処理と並行して、当該放送番組データに対するインデキシング処理を実行することもできる。
映像インデキシング処理においては、ビデオプロセッサ１１３は、サムネイル画像取得処理を実行する。サムネイル画像は、映像コンテンツデータ内の動画像データを構成する複数の区間それぞれから抽出された複数のフレームの各々に対応する静止画像（縮小画像）である。すなわち、ビデオプロセッサ１１３は、動画像データの各区間毎に１以上のフレームを抽出し、抽出した各フレームに対応する画像（サムネイル画像）と、そのサムネイル画像が出現する時点を示すタイムスタンプ情報ＴＳとを出力する。ビデオプロセッサ１１３から出力されるサムネイル画像取得結果データ（サムネイル画像、タイムスタンプ情報ＴＳ）は、データベース１１１Ａにサムネイルインデキシング情報として格納される。このデータベース１１１Ａは、ＨＤＤ１１１内に用意されたインデキシングデータ記憶用の記憶領域である。
各サムネイル画像に対応するタイムスタンプ情報としては、映像コンテンツデータの開始から当該サムネイル画像のフレームが登場するまでの経過時間、または当該サムネイル画像のフレームのフレーム番号、等を使用することが出来る。
さらに、映像インデキシング処理においては、ビデオプロセッサ１１３は、顔画像を抽出する処理も実行する。ビデオプロセッサ１１３は、映像コンテンツデータに含まれる動画像データをフレーム単位で解析する。そして、ビデオプロセッサ１１３は、動画像データを構成する複数のフレームそれぞれから人物の顔画像を抽出すると共に、抽出された各顔画像が動画像データ内に登場する時点を示すタイムスタンプ情報を出力する。
さらに、ビデオプロセッサ１１３は、抽出された各顔画像のサイズ（解像度）も出力する。ビデオプロセッサ１１３から出力される顔検出結果データ（顔画像、タイムスタンプ情報ＴＳ、およびサイズ）は、データベース１１１Ａに顔画像インデキシング情報として格納される。
また、音声インデキシング処理においては、ビデオプロセッサ１１３は、映像コンテンツに含まれるオーディオデータを分析して、映像コンテンツデータ内に含まれる複数種の属性区間（ＣＭ区間、音楽区間、およびトーク区間）を検出し、検出された各属性区間の開始および終了の時点を規定する区間属性情報を出力する。この区間属性情報は、例えば、各属性区間毎にその属性区間の開始時点および終了時点をそれぞれ示す時間情報から構成することができる。また、区間属性情報を、属性区間の開始時点を示す情報とその属性区間の時間長を示す情報とによって構成してもよい。
この区間属性情報は、属性検出結果情報としてデータベース１１１Ａに格納される。さらに、音声インデキシング処理においては、ビデオプロセッサ１１３は、上述の歓声レベル検出処理および盛り上がりレベル検出処理も実行する。これら歓声レベル検出処理の結果および盛り上がりレベル検出処理の結果も、上述の属性検出結果情報の一部としてデータベース１１１Ａに格納される。
属性検出結果情報（区間属性情報）は、図４に示されているように、例えば、ＣＭ区間テーブル、音楽区間テーブル、トーク区間テーブル、および歓声／盛り上がりテーブルから構成されている。
ＣＭ区間テーブルは、検出されたＣＭ区間の開始時点および終了時点を示すＣＭ区間属性情報を格納する。映像コンテンツデータの開始位置から終端位置までのシーケンス内に複数のＣＭ区間が存在する場合には、それら複数のＣＭ区間それぞれに対応するＣＭ区間属性情報がＣＭ区間テーブルに格納される。ＣＭ区間テーブルにおいては、検出された各ＣＭ区間毎に当該ＣＭ区間の開始時点および終了時点をそれぞれ示すスタートタイム情報およびエンドタイム情報が格納される。
音楽区間テーブルは、検出された音楽区間の開始時点および終了時点を示す音楽区間属性情報を格納する。映像コンテンツデータの開始位置から終端位置までのシーケンス内に複数の音楽区間が存在する場合には、それら複数の音楽区間それぞれに対応する音楽区間属性情報が音楽区間テーブルに格納される。音楽区間テーブルにおいては、検出された各音楽区間毎に当該音楽区間の開始時点および終了時点をそれぞれ示すスタートタイム情報およびエンドタイム情報が格納される。
トーク区間テーブルは、検出されたトーク区間の開始時点および終了時点を示す音楽区間属性情報を格納する。映像コンテンツデータの開始位置から終端位置までのシーケンス内に複数のトーク区間が存在する場合には、それら複数のトーク区間それぞれに対応するトーク区間属性情報がトーク区間テーブルに格納される。トーク区間テーブルにおいては、検出された各トーク区間毎に当該トーク区間の開始時点および終了時点をそれぞれ示すスタートタイム情報およびエンドタイム情報が格納される。
歓声／盛り上がりテーブルは、映像コンテンツデータ内の一定時間長の部分データ（タイムセグメントＴ１，Ｔ２，Ｔ３，…）それぞれにおける歓声レベルおよび盛り上がりレベルを格納する。
図３に示されているように、ＴＶアプリケーションプログラム２０２は、上述のインデキシング情報表示機能を実行するためのインデキシング情報表示処理部３０１を含んでいる。このインデキシング情報表示処理部３０１は、例えば、インデキシングビューワプログラムとして実現されており、データベース１１１Ａに格納されたインデキシング情報（顔画像インデキシング情報、サムネイルインデキシング情報、区間属性情報、等）を用いて、映像コンテンツデータの概要を俯瞰するためのインデキシングビュー画面を表示する。
具体的には、インデキシング情報表示処理部３０１は、データベース１１１Ａから区間属性情報（ＣＭ区間属性情報、音楽区間属性情報、トーク区間属性情報）を読み出し、その区間属性情報に従って、映像コンテンツデータの開始位置から終端位置までのシーケンス内における各属性区間（ＣＭ区間、音楽区間、トーク区間）の位置（開始時点から終了時点までの区間）を示すバー領域を含む区間バーを、インデキシングビュー画面上に表示する。この区間バーは、例えば、３つのサブ区間バー、つまりＣＭ区間の位置を示すＣＭ区間バー、音楽区間の位置を示す音楽区間バー、トーク区間の位置を示すトーク区間バーを含んでいる。
シーケンス内に複数のＣＭ区間が存在する場合、複数のＣＭ区間それぞれの位置を示す複数のバー領域がＣＭ区間バー内に表示される。同様に、シーケンス内に複数の音楽区間が存在する場合には複数の音楽区間それぞれの位置を示す複数のバー領域が音楽区間バー内に表示され、シーケンス内に複数のトーク区間が存在する場合には複数のトーク区間それぞれの位置を示す複数のバー領域がトーク区間バー内に表示される。以下では、シーケンス内に分散して存在する複数のＣＭ区間の各々を部分ＣＭ区間と称し、シーケンス内に分散して存在する複数の音楽区間のそれぞれを部分音楽区間と称し、シーケンス内に分散して存在する複数のトーク区間のそれぞれを部分トーク区間と称する。
インデキシングビュー画面上に区間バーを表示することにより、映像コンテンツデータのどの部分にどのような属性を有する区間が出現するのかを、ユーザに提示することができる。したがって、ユーザは、区間属性を考慮して、映像コンテンツデータ全体を俯瞰することができる。なお、ＣＭ区間バー、音楽区間バー、トーク区間バーに加え、ＣＭ区間以外の区間（本編区間）の位置を示すバー領域を含む本編区間バーを表示してもよい。
さらに、インデキシング情報表示処理部３０１は、データベース１１１Ａから歓声レベル情報および盛り上がりレベル情報を読み出し、それら歓声レベル情報および盛り上がりレベル情報に従って、映像コンテンツデータの開始位置から終端位置までのシーケンス内における歓声レベルの変化および盛り上がりレベルの変化をそれぞれ示すグラフを、インデキシングビュー画面上の顔サムネイル表示エリア上に表示する。
このレベル表示エリアを見ることにより、ユーザに、映像コンテンツデータ内のどの辺りに大きな歓声が生じた区間が存在し、また映像コンテンツデータ内のどの辺りに盛り上がりの大きな区間が存在するかを提示することができる。ユーザは、区間属性と、歓声レベルと、盛り上がりレベルとを考慮して、映像コンテンツデータ全体を俯瞰することができる。
なお、例えば、ある一定値以上の歓声レベルを有する区間（歓声区間）、およびある一定値以上の盛り上がりレベルを有する区間（盛り上がり区間）などを属性区間として使用することもできる。この場合、歓声区間の位置を示すバー領域を含む歓声区間バー、および盛り上がり区間の位置を示すバー領域を含む盛り上がり区間バーも、ＣＭ区間バー、音楽区間バー、トーク区間バー、本編区間バーと一緒に、インデキシングビュー画面上に表示される。
またインデキシング情報表示処理部３０１は、データベース１１１Ａから顔画像インデキシング情報（顔画像、タイムスタンプ情報ＴＳ、およびサイズ）を読み出し、そしてその顔画像インデキシング情報を用いて、映像コンテンツデータに登場する人物の顔画像の一覧を、インデキシングビュー画面上の２次元の表示エリア（以下、顔サムネイル表示エリアと称する）上に表示する。この場合、インデキシング情報表示処理部３０１は、映像コンテンツデータの総時間長を、例えば等間隔で、複数の時間帯に分割し、時間帯毎に、抽出された顔画像の内から当該時間帯に登場する顔画像を所定個選択する。そして、インデキシング情報表示処理部３０１は、時間帯毎に、選択した所定個の顔画像それぞれを並べて表示する。
すなわち、２次元の顔サムネイル表示エリアは、複数の行および複数の列を含むマトリクス状に配置された複数の顔画像表示エリアを含む。複数の列それぞれには、映像コンテンツデータの総時間長を構成する複数の時間帯が割り当てられている。具体的には、例えば、複数の列それぞれには、映像コンテンツデータの総時間長をこれら複数の列の数で等間隔に分割することによって得られる、互いに同一の時間長を有する複数の時間帯がそれぞれ割り当てられる。もちろん、各列に割り当てられる時間帯は必ずしも同一の時間長でなくてもよい。
インデキシング情報表示処理部３０１は、顔画像それぞれに対応するタイムスタンプ情報ＴＳに基づき、各列内に属する行数分の顔画像表示エリア上に、当該各列に割り当てられた時間帯に属する顔画像それぞれを、例えば、それら顔画像の出現頻度順（顔画像の検出時間長順）のような順序で並べて表示する。この場合、例えば、当該各列に割り当てられた時間帯に属する顔画像の内から、出現頻度（登場頻度）の高い順に顔画像が行数分だけ選択され、選択された顔画像が登場頻度順に上から下に向かって並んで配置される。もちろん、出現頻度順ではなく、各列に割り当てられた時間帯に出現する顔画像それぞれを、その出現順に並べて表示してもよい。
この顔画像一覧表示機能により、映像コンテンツデータ全体の中のどの時間帯にどの人物が登場するのかをユーザに分かりやすく提示することができる。顔サムネイル表示エリアの具体的な構成例については、図６以降で後述する。
また、インデキシング情報表示処理部３０１は、データベース１１１Ａからサムネイルインデキシング情報（サムネイル、タイムスタンプ情報ＴＳ）を読み出し、そしてサムネイルインデキシング情報を用いて、サムネイル画像それぞれを、顔サムネイル表示エリアの下方側または上方側の一方に配置されたサムネイル表示エリア（以下、じゃばらサムネイル表示エリアと称する）上に、それらサムネイル画像の出現時間順に一列に並べて表示する。
映像コンテンツデータによっては、顔画像が登場しない時間帯も存在する。したがって、インデキシングビュー画面上に顔サムネイル表示エリアのみならず、じゃばらサムネイル表示エリアも表示することにより、顔画像が登場しない時間帯においても、その時間帯の映像コンテンツデータの内容をユーザに提示することができる。
次に、図５を参照して、インデキシングビューワプログラムと連携して動作するＴＶアプリケーションプログラム２０２の機能構成を説明する。
ＴＶアプリケーションプログラム２０２は、上述のインデキシング情報表示処理部３０１に加え、記録処理部４０１、インデキシング制御部４０２、プレビュー処理部４０３、再生処理部４０４等を備えている。インデキシング情報表示処理部３０１、インデキシング制御部４０２、およびプレビュー処理部４０３は、インデキシングビューワプログラムによって実現することができる。
記録処理部４０１は、ＴＶチューナ１１７によって受信された放送番組データ、または外部機器から入力されるビデオデータをＨＤＤ１１１に記録する記録処理を実行する。また、記録処理部４０１は、ユーザによって予め設定された録画予約情報（チャンネル番号、日時）によって指定される放送番組データをＴＶチューナ１１７を用いて受信し、その放送番組データをＨＤＤ１１１に記録する予約録画処理も実行する。
インデキシング制御部４０２は、ビデオプロセッサ（インデキシング処理部）１１３を制御して、インデキシング処理（映像インデキシング処理、音声インデキシング処理）をビデオプロセッサ１１３に実行させる。ユーザは、録画対象の放送番組データ毎にインデキシング処理を実行するか否かを指定することができる。例えば、インデキシング処理の実行が指示された録画対象の放送番組データについては、その放送番組データがＨＤＤ１１１に記録された後に、インデキシング処理が自動的に開始される。また、ユーザは、既にＨＤＤ１１１に格納されている映像コンテンツデータの内から、インデキシング処理を実行すべき映像コンテンツデータを指定することもできる。
プレビュー処理部４０３は、ユーザによって映像コンテンツデータ内のある任意の属性区間の（簡易的な）再生（プレビュー再生）が要求された場合、その属性区間に属する映像コンテンツデータの動画像データの（簡易的な）再生（プレビュー再生）をインデキシングビュー画面上で実行する。ユーザは、プレビュー再生すべき部分を、上述の区間バーを用いて指定することができる。すなわち、ユーザによるリモコンユニット、キーボード、マウス等の操作によって区間バー（ＣＭ区間バー、音楽区間バー、トーク区間バー、本編区間バー、歓声区間バー、盛り上がり区間バー）上のバー領域が選択されたならば、その選択されたバー領域に対応する属性区間がプレビュー再生される。
プレビュー再生は、インデキシングビュー画面上の任意の表示エリア上で行うことができる。本実施形態では、プレビュー再生は例えば上述のじゃばらサムネイル表示エリアを用いて行うことができる。上述したように、じゃばらサムネイル表示エリアに表示される複数の静止画像（サムネイル画像）は、映像コンテンツデータの複数の区間それぞれから抽出された静止画像である。したがって、じゃばらサムネイル表示エリアに表示される各静止画像（サムネイル画像）には、映像コンテンツデータ内のある区間が割り当てられている。プレビュー処理部４０３は、ある属性区間の動画像データの再生を要求するイベントが入力された時、まず、じゃばらサムネイル表示エリア上の複数のサムネイル画像それぞれに対応する複数の区間の中で、再生が要求された属性区間に属する区間を特定し、次いで、特定された区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置を特定する。そして、プレビュー処理部４０３は、その特定された画像表示位置上で、再生が要求された属性区間内の動画像データの（簡易的な）再生（プレビュー再生）を実行する。
すなわち、じゃばらサムネイル表示エリア上においては、通常は、複数のサムネイル画像それぞれが時間順に並んで表示されているが、プレビュー再生時においては、再生対象の属性区間に属する動画像データから抽出されたサムネイル画像に対応する画像表示位置については、その動画像データのプレビュー再生に使用される。プレビュー再生に使用される画像表示位置は、動画像データの再生の進行に伴って、じゃばらサムネイル表示エリア上を移動することができる。例えば、ユーザによって指定された属性区間内に、連続する第１の区間と第２の区間とが属している場合には、第１の区間に属する映像コンテンツデータの動画データの再生は、第１の区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置で行われる。第１の区間に属する映像コンテンツデータの動画データの再生が終了すると、指定された属性区間内に属する映像コンテンツデータの動画像データの再生に使用される画像表示位置は、第２の区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置に変更される。そして、第２の区間に属する映像コンテンツデータの動画データの再生は、変更後の画像表示位置、つまり第２の区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置で行われる。
再生処理部４０４は、ＨＤＤ１１１に格納されている各映像コンテンツデータを、インデキシングビュー画面とは異なる画面（ウィンドウ）上で再生する処理を実行する。また、再生処理部４０４は、ある映像コンテンツデータの顔画像一覧の中の一つの顔画像が選択されている状態でユーザ操作によって再生指示イベントが入力された時、選択されている顔画像が登場する時点よりも所定時間前の時点から映像コンテンツデータの再生を開始する機能を有している。
なお、インデキシング処理は、必ずしもビデオプロセッサ１１３によって実行する必要はなく、例えば、ＴＶアプリケーションプログラム２０２にインデキシング処理を実行する機能を設けてもよい。この場合、インデキシング処理は、インデキシングビューワプログラム、またはＴＶアプリケーションプログラム２０２の制御の下に、ＣＰＵ１０１によって実行される。
次に、図６乃至図８を参照して、インデキシングビュー画面の具体的な構成について説明する。
図６には、インデキシング情報表示処理部３０１によってＬＣＤ１７に表示されるインデキシングビュー画面の例が示されている。このインデキシングビュー画面は、ある映像コンテンツデータ（例えば放送番組データ）をインデキシング処理することによって得られた画面である。このインデキシングビュー画面は、顔画像の一覧を表示するための上述の顔サムネイル表示エリアと、上述のレベル表示エリアと、上述の区間バーと、サムネイル画像の一覧をじゃばら形式で表示するための上述のじゃばらサムネイル表示エリアとを含んでいる。
ここで、じゃばら形式とは、選択されているサムネイル画像を通常サイズで表示し、他の各サムネイル画像についてはその横方向サイズを縮小して表示する表示形式である。
つまり、インデキシング情報表示処理部３０１は、ユーザ操作によって選択されたサムネイル画像を第１の横幅サイズで表示し、他の各サムネイル画像の横幅サイズを第１の横幅サイズよりも小さい横幅サイズで表示する。図６においては、選択されたサムネイル画像との距離が大きいサムネイル画像ほど、その横方向サイズが縮小されている。つまり、選択されたサムネイル画像は通常サイズで表示され、その選択されたサムネイル画像の近傍の各サムネイル画像はその横幅が縮小された状態で表示され、さらに他の各サムネイル画像は僅かな横幅で表示される。選択されているサムネイル画像には、さらに矩形の枠を付加してもよい。
ユーザの操作（リモコンユニットのボタン、カーソルキー等）により、じゃばらサムネイル表示エリア上のいずれか１つのサムネイル画像を選択することができる。
レベル表示エリアにおいては、歓声レベルの変化を示すグラフ（図６中の濃い色で示されるグラフ）と、歓声レベルの変化を示すグラフ（図６中の薄い色で示されるグラフ）が表示される。
区間バーは、例えば、トーク区間バーと、音楽区間バーと、ＣＭ区間バーとを含んでいる。ＣＭ区間バーにおいては、各ＣＭ区間（各部分ＣＭ区間）の位置にバー領域（図６の黒色の帯状領域）が表示される。音楽区間バーにおいては、各音楽区間（各部分音楽区間）の位置にバー領域（図６のクロスハッチングされた帯状領域）が表示される。トーク区間バーにおいては、各トーク区間（各部分トーク区間）の位置にバー領域（図６のハッチングされた帯状領域）が表示される。ユーザは、リモコンユニットのボタン、上下左右等のカーソルキーの操作により、トーク区間バー、音楽区間バーと、ＣＭ区間バーのいずれか一つを選択することができる。また、ユーザは、リモコンユニットのボタン、上下左右等のカーソルキーの操作により、選択された区間バー内の一つのバー領域を選択することもできる。
図７は、顔サムネイル表示エリアの構成例が示されている。
顔サムネイル表示エリアは、複数の行と複数の列とを含むマトリクス状に配置された複数個の顔画像表示エリアを含んでいる。図７においては、顔サムネイル表示エリアは６行×１６列から構成されている。顔サムネイル表示エリアに含まれる顔画像表示エリアの数は、９６個である。
列１〜列１６のそれぞれには、例えば、映像コンテンツデータ（映像コンテンツデータに含まれる動画像データ）の総時間長を列数（＝１６）で等間隔で分割することによって得られる、互いに同一の時間長Ｔを有する複数の時間帯がそれぞれ割り当てられる。
例えば、映像コンテンツデータの総時間長が２時間であるならば、その２時間が１６個の時間帯に等間隔で分割される。この場合、各時間帯の時間長Ｔは、７．５分である。例えば、列１には、先頭0:00:00から0:07:30までの時間帯が割り当てられ、列２には、0:07:30から0:15:00までの時間帯が割り当てられ、列３には、0:15:00から0:22:30までの時間帯が割り当てられる。映像コンテンツデータの総時間長に応じて、各時間帯の時間長Ｔは変化する。
もちろん、複数の列それぞれに割り当てられる時間帯の長さは、必ずしも同一である必要はない。
インデキシング情報表示処理部３０１は、ビデオプロセッサ１１３によって抽出された顔画像それぞれに対応するタイムスタンプ情報に基づき、各列内の６個の顔画像表示エリア上に、当該各列に割り当てられた時間帯に属する顔画像それぞれをたとえば上述の頻度順に並べて表示する。この場合、インデキシング情報表示処理部３０１は、表示処理対象の列に割り当てられた時間帯に属する顔画像の内から行数分（６個）の顔画像を選択し、選択した行数分の顔画像それぞれを並べて表示する。
このように、顔サムネイル表示エリアにおいては、左端位置（1,1）を基点とし、右端位置(6,16)を映像コンテンツデータの終端とする時間軸が用いられている。
顔サムネイル表示エリアの各顔画像表示エリアに表示される顔画像のサイズは“大”、“中”、“小”の内からユーザが選択することができる。行と列の数は、ユーザが選択した顔画像のサイズに応じて変化される。顔画像のサイズと行と列の数との関係は、次の通りである。
（１）“大”の場合； ３行×８列
（２）“中”の場合； ６行×１６列
（３）“小”の場合： １０行×２４列
“大”の場合においては、各顔画像は、例えば、１８０×１８０ピクセルのサイズで表示される。“中”の場合においては、各顔画像は、例えば、９０×９０ピクセルのサイズで表示される。“小”の場合においては、各顔画像は、例えば、６０×６０ピクセルのサイズで表示される。デフォルトの顔画像サイズは、例えば、“中”に設定されている。
顔サムネイル表示エリア内の各顔画像は、選択されていない“標準”状態、選択されている“フォーカス”状態の２つの状態のいずれかに設定される。“フォーカス”状態の顔画像のサイズは、“標準”状態の時のサイズ（１８０×１８０、９０×９０、または６０×６０）よりも大きく設定される。図７においては、座標(１，１２)の顔画像が“フォーカス”状態である場合を示している。
じゃばらサムネイル表示エリアに表示されるサムネイル画像の枚数は、ユーザ設定に従って、例えば２４０枚、１４４枚、９６枚、４８枚のいずれかに設定される。デフォルトは例えば２４０枚である。この場合、動画像データは２４０個の区間（２４０個の時間帯）に区分され、２４０個の区間それぞれから抽出された２４０枚のサムネイル画像が時間順に並んでじゃばらサムネイル表示エリアに表示される。
サムネイル画像は、選択されていない“標準”状態、選択されている“フォーカス”状態の２つの状態のいずれかに設定される。“フォーカス”状態のサムネイル画像は、他のサムネイル画像よりも大きいサイズで表示される。
次に、図８を参照して、顔サムネイル表示エリアとじゃばらサムネイル表示エリアとの関係について説明する。
同一列に属する顔画像表示エリア群の集合、つまり顔サムネイル表示エリア内の個々の列を“大区間”と称する。また、“大区間”をさらに分割したものを“小区間”と称する。１つの大区間に含まれる小区間の数は、じゃばらサムネイル表示エリアに表示されるサムネイル画像の数を顔サムネイル表示エリアの列数で割った商で与えられる。例えば、顔サムネイル表示エリアが６行×１６列で、じゃばらサムネイル表示エリアに表示されるサムネイル画像の数が２４０枚であるならば、１つの大区間に含まれる小区間の数は、１５（＝２４０÷１６）となる。１つの大区間は１５個の小区間を含む。換言すれば、１つの大区間に対応する時間帯には、１５枚のサムネイル画像が属することになる。
じゃばらサムネイル表示エリア上のあるサムネイル画像が選択された時、インデキシング情報表示処理部３０１は、選択されたサムネイル画像のタイムスタンプ情報に基づき、顔サムネイル表示エリア内の複数の列（複数の大区間）の内で、選択されたサムネイル画像が属する時間帯が割り当てられた列（大区間）を選択する。選択される大区間は、選択されたサムネイル画像が属する区間（小区間）を含む大区間である。そして、インデキシング情報表示処理部３０１は、選択した大区間を強調表示する。
さらに、インデキシング情報表示処理部３０１は、選択されたサムネイル画像と選択された大区間との間を接続する縦長のバーを表示する。この縦長のバーは、選択されたサムネイル画像に対応する小区間が、選択された大区間に含まれる１５個の小区間の内のどの小区間に対応するかを提示するために使用される。縦長のバーは、選択された大区間に含まれる１５個の小区間の内で、選択されたサムネイル画像に対応する小区間の位置に表示される。例えば、選択されたサムネイル画像が、ある大区間に対応する時間帯に属する１５枚のサムネイル画像の内の先頭の画像、つまり大区間内の先頭の小区間に対応する画像であるならば、選択されたサムネイル画像は、縦長のバーによって大区間の左端に接続される。また、例えば、選択されたサムネイル画像が、ある大区間に対応する時間帯に属する１５枚のサムネイル画像の内の終端の画像、つまり大区間内の終端の小区間に対応する画像であるならば、選択されたサムネイル画像は、縦長のバーによって大区間の右端に接続される。
このように、じゃばらサムネイル表示エリア上のサムネイル画像が選択された時には、顔サムネイル表示エリア内の複数の列の内から、選択されたサムネイル画像が属する時間帯が割り当てられている列（大区間）が自動選択される。これにより、ユーザは、選択したサムネイル画像が、顔サムネイル表示エリア内のどの列（大区間）に対応する画像であるかを識別することができる。さらに、縦長のバーにより、ユーザは、選択したサムネイル画像が、どの列（大区間）内のどの辺りの時点に対応する画像であるかも識別することができる。
また、インデキシング情報表示処理部３０１は、選択されたサムネイル画像のタイムスタンプ情報に基づいて、選択されたサムネイル画像が出現する時点を示す時間情報もインデキシングビュー画面上に表示する。
“現在位置変更”ボタンは選択されているサムネイル画像を変更するための操作ボタンである。“現在位置変更”ボタンがフォーカスされている状態でユーザが左カーソルキーまたは右カーソルキーを操作すると、選択対象のサムネイル画像は、例えば１小区間単位で、左または右に移動する。
なお、じゃばらサムネイル表示エリア上のサムネイル画像の表示は、必ずしもじゃばら形式を用いる必要はなく、例えば、図９に示すように、複数のサムネイル画像を同じサイズで並べて表示するようにしてもよい。図９においては、動画像データは６つの区間（６つの小区間）に区分されており、区間１〜６の６つの区間それぞれに属する６つのサムネイル画像がじゃばらサムネイル表示エリア上に並んで表示されている。
次に、図１０乃至図１３を参照して、じゃばらサムネイル表示エリア上で行われるプレビュー再生処理を説明する。
図１０は、図９で説明したじゃばらサムネイル表示エリア上でプレビュー再生が行われる様子を示している。ユーザの操作によって選択された属性区間が区間３である場合、または選択された属性区間に属する幾つかの区間の内の先頭の区間が区間３である場合、区間３に属するサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置がプレビュー再生位置として特定される。そして、区間３に属するサムネイル画像の画像表示位置上で、区間３からの動画像データのプレビュー再生、つまり選択された属性区間内に属する動画像データのプレビュー再生が開始される。
もし、じゃばらサムネイル表示エリア上に表示されている区間３のサムネイル画像が当該区間３内の先頭のフレームの静止画であるならば、表示されている区間３のサムネイル画像が出現する時点から動画像データのプレビュー再生が開始される。もし、サムネイル表示エリア上に表示されている区間３のサムネイル画像が当該区間３内の複数のフレーム内の中間位置に位置するフレームの静止画であるならば、当該区間３内の先頭フレームから動画像データのプレビュー再生が開始される。もちろん、じゃばらサムネイル表示エリア上に表示されている区間３のサムネイル画像が当該区間３内の先頭フレームである否かにかかわらず、表示されている区間３のサムネイル画像が出現する時点から動画像データのプレビュー再生を開始するようにしてもよい。
ユーザによって選択された属性区間に例えば区間３，４，５，６が属する場合、区間３の動画像データのプレビュー再生のみならず、次の区間４，５，６それぞれの動画像データのプレビュー再生も、区間３に属するサムネイル画像の画像表示位置上で実行することができる。
また、ユーザの操作によって選択された属性区間が区間１である場合、または選択された属性区間に属する幾つかの区間の内の先頭の区間が区間１である場合には、区間１に属するサムネイル画像の画像表示位置上で、選択された属性区間の動画像データのプレビュー再生が開始される。同様に、ユーザの操作によって選択された属性区間が区間１である場合、または選択された属性区間に属する幾つかの区間の内の先頭の区間が区間１である場合には、区間４に属するサムネイル画像の画像表示位置上で、選択された属性区間の動画像データのプレビュー再生が開始される。
図１１には、プレビュー再生対象の区間の変更に応じて、プレビュー再生に使用される画像表示位置を自動的に変更する例が示されている。
例えば、ユーザの操作によって選択された属性区間が区間３から区間６を含む場合、区間３に属するサムネイル画像の画像表示位置がプレビュー再生位置として特定される。そして、区間３に属するサムネイル画像の画像表示位置上で、区間３からの動画像データのプレビュー再生が開始される。この後、プレビュー再生処理の進行によって再生対象区間が区間３から区間４に移る時、プレビュー再生に使用される画像表示位置は、区間４に属するサムネイル画像の画像表示位置に変更される。そして、区間４に属するサムネイル画像の画像表示位置上で、区間４の動画像データのプレビュー再生が行われる。
この後、プレビュー再生処理の進行によって再生対象区間が区間４から区間５に移る時、プレビュー再生に使用される画像表示位置は、区間５に属するサムネイル画像の画像表示位置に変更される。そして、区間５に属するサムネイル画像の画像表示位置上で、区間５の動画像データのプレビュー再生が行われる。
さらに、この後、プレビュー再生処理の進行によって再生対象区間が区間５から区間６に移る時、プレビュー再生に使用される画像表示位置は、区間６に属するサムネイル画像の画像表示位置に変更される。そして、区間６に属するサムネイル画像の画像表示位置上で、区間６の動画像データのプレビュー再生が行われる。
このように、本実施形態では、プレビュー再生に使用されるじゃばらサムネイル表示エリア上の画像表示位置はプレビュー再生の進行に伴って自動的に移動され、これにより常にプレビュー再生対象区間の動画像データを当該プレビュー再生対象区間から抽出されたサムネイル画像に対応する画像表示位置に表示することができる。よって、プレビュー再生処理中に、現在プレビュー再生されている動画像データが映像コンテンツデータ全体の中のどの辺りであるかをユーザに対してリアルタイムに提示することが可能となる。
図１２は、じゃばら形式表示を用いてプレビュー再生を行う場合の例を示している。
例えば、ユーザの操作によって選択された属性区間が区間３から区間６を含む場合、区間３に属するサムネイル画像の画像表示位置がプレビュー再生位置として特定される。この場合、じゃばらサムネイル表示エリア上の複数のサムネイル画像の内、区間３に属するサムネイル画像が選択され、区間３に属するサムネイル画像は通常サイズに拡大される。そして、区間３に属するサムネイル画像の画像表示位置上で、区間３からの動画像データのプレビュー再生が開始される。この後、プレビュー再生処理の進行によって再生対象区間が区間３から区間４に移る時、区間４に属するサムネイル画像が選択され、プレビュー再生に使用される画像表示位置は、区間４に属するサムネイル画像の画像表示位置に変更される。選択された区間４に属するサムネイル画像は通常サイズに拡大される。そして、区間４に属するサムネイル画像の画像表示位置上で、区間４の動画像データのプレビュー再生が行われる。
この後、プレビュー再生処理の進行によって再生対象区間が区間４から区間５に移る時、区間５に属するサムネイル画像が選択され、プレビュー再生に使用される画像表示位置は、区間５に属するサムネイル画像の画像表示位置に変更される。選択された区間５に属するサムネイル画像は通常サイズに拡大される。そして、区間５に属するサムネイル画像の画像表示位置上で、区間５の動画像データのプレビュー再生が行われる。
この後、プレビュー再生処理の進行によって再生対象区間が区間５から区間６に移る時、区間６に属するサムネイル画像が選択され、プレビュー再生に使用される画像表示位置は、区間６に属するサムネイル画像の画像表示位置に変更される。選択された区間６に属するサムネイル画像は通常サイズに拡大される。そして、区間６に属するサムネイル画像の画像表示位置上で、区間６の動画像データのプレビュー再生が行われる。
なお、選択された属性区間の動画像データのプレビュー再生においては、当該属性区間の動画像データから抽出された複数の静止画像を、所定時間間隔で順次表示するようにしてもよい。この場合、映像インデキシング処理においては、各区間毎（各小区間毎）に複数のフレーム分の静止画像を抽出すればよい。
図１３は、選択された属性区間のプレビュー再生を当該属性区間から抽出された複数の静止画像を用いて実行する場合の例が示されている。
図１３においては、区間４に対応するじゃばらサムネイル表示エリア上のサムネイル画像が動画像データの先頭から１分３０秒目のフレームの静止画像であり、区間５に対応するじゃばらサムネイル表示エリア上のサムネイル画像が動画像データの先頭から１分３６秒目のフレームの静止画像である場合を想定している。
区間４および区間５のプレビュー再生を行う場合には、まず、１分３０秒目の静止画像（静止画１）が、１分３０秒目の静止画像に対応する画像表示位置上で表示され、続いて、同じ画像表示位置上で、例えば１分３３秒目の静止画像（静止画２）が表示される。静止画２は、１分３０秒目の静止画像と１分３６秒目の静止画像との間の中間に位置する静止画像である。
この後、区間５に属する１分３６秒目の静止画像が選択され、プレビュー再生に使用される画像表示位置は、１分３６秒目の静止画像の画像表示位置に変更される。そして、その変更された画像表示位置上で、１分３６秒目の静止画像（静止画３）が表示され、続いて、同じ画像表示位置上で、例えば１分３９秒目の静止画像（静止画４）が表示される。静止画４は、１分３６秒目の静止画像と、次の区間６に対応する位置に表示されている１分４２秒目の静止画像との間の中間に位置する静止画像である。
図１４は、ＣＭ区間バー内の１つのバー領域が選択された場合に対応するインデキシングビュー画面の例を示している。図１４においては、ＣＭ区間バー内の選択されたバー領域は枠で囲んだ状態で示されている。
ＣＭ区間バー内の１つのバー領域がユーザによって選択されると、選択されたバー領域に対応するＣＭ区間（選択されたＣＭ区間）に属する動画像データのプレビュー再生が、例えば、選択されたＣＭ区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行われる。また、選択されたバー領域に対応するＣＭ区間のプレビュー再生のみならず、全てのＣＭ区間それぞれに属する動画像データのプレビュー再生を行ってもよい。例えば、映像コンテンツデータのシーケンス内に第１の部分ＣＭ区間および第２の部分ＣＭ区間が分散して存在する場合、プレビュー処理部４０３は、ＣＭ区間属性情報に基づいて、まず、第１の部分ＣＭ区間内に属する動画像データのプレビュー再生を、例えば、第１の部分ＣＭ区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。第１の部分ＣＭ区間内に属する動画像データのプレビュー再生が終了すると、プレビュー処理部４０３は、第１の部分ＣＭ区間と第２の部分ＣＭ区間との間の他の区間の動画像データのプレビュー再生をスキップして、第２の部分ＣＭ区間内に属する動画像データのプレビュー再生を、例えば、第２の部分ＣＭ区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、各部分ＣＭ区間のプレビュー再生の順序は異なってもよい。例えば、選択されたバー領域が第２の部分ＣＭ区間に対応する場合、プレビュー処理部４０３は、まず、第２の部分ＣＭ区間内に属する動画像データのプレビュー再生を、例えば、第２の部分ＣＭ区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。第２の部分ＣＭ区間内に属する動画像データのプレビュー再生が終了すると、プレビュー再生部４０３は、続いて第１の部分ＣＭ区間内に属する動画像データのプレビュー再生を、例えば、第１の部分ＣＭ区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、インデキシング情報表示処理部３０１は、選択されたバー領域に対応するＣＭ区間（選択されたＣＭ区間）に属する顔画像と、他のＣＭ区間に属する顔画像とを検出する。そして、インデキシング情報表示処理部３０１は、選択されたＣＭ区間に属する顔画像を例えば二重の枠で囲まれた状態で表示し、他のＣＭ区間に属する顔画像を例えば一重の枠で囲まれた状態で表示する。表示の仕方はこれに限られず、枠で示したものを強調（大きく、明るく等）表示したり、それ以外を抑制（小さく、暗く、淡く等）表示したり、顔画像の隅の方にマークを表示したり、それ以外を除外して、枠で示した顔画像のみを表示したりすることができる。
ＣＭ区間バー内のバー領域以外の部分がユーザによって選択されたときは、ＣＭ区間以外の区間（本編区間）に属する動画像データのプレビュー再生を行うようにしてもよい。
図１５は、音楽区間バー内の１つのバー領域が選択された場合に対応するインデキシングビュー画面の例を示している。図１５においては、選択されたバー領域は枠で囲んだ状態で示されている。
音楽区間バー内の１つのバー領域がユーザによって選択されると、選択されたバー領域に対応する音楽区間（選択された音楽区間）に属する動画像データのプレビュー再生が、選択された音楽区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行われる。また、選択されたバー領域に対応する音楽区間のプレビュー再生のみならず、全ての音楽区間それぞれに属する動画像データのプレビュー再生を行ってもよい。この場合、プレビュー処理部４０３は、（１）ＣＭ区間を含む全区間の中から音楽区間それぞれを検出する処理、または（２）ＣＭ区間以外の本編区間の中から音楽区間それぞれを検出する処理を実行する。（２）の検出処理は、例えば、ＣＭ区間属性情報と音楽区間属性情報とに基づいて行うことができる。そして、（１）または（２）によって検出された音楽区間それぞれに属する動画像データのプレビュー再生が行われる。この場合、ある音楽区間とそれに後続する次の音楽区間との間の他の区間のプレビュー再生はスキップされる。
例えば、映像コンテンツデータのシーケンス内に第１の部分音楽区間および第２の部分音楽区間が分散して存在する場合、プレビュー処理部４０３は、音楽区間属性情報に基づいて、まず、第１の部分音楽区間内に属する動画像データのプレビュー再生を、例えば、第１の部分音楽区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置上で行う。第１の部分音楽区間内に属する動画像データのプレビュー再生が終了すると、プレビュー処理部４０３は、第１の部分音楽区間と第２の部分音楽区間との間の他の区間のプレビュー再生をスキップして、第２の部分音楽区間内に属する動画像データのプレビュー再生を、例えば、第２の部分音楽区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、各部分音楽区間のプレビュー再生の順序は異なってもよい。例えば、選択されたバー領域が第２の部分音楽区間に対応する場合、プレビュー処理部４０３は、まず、第２の部分音楽区間内に属する動画像データのプレビュー再生を、例えば、第２の部分音楽区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。第２の部分音楽区間内に属する動画像データのプレビュー再生が終了すると、プレビュー再生部４０３は、続いて第１の部分音楽区間内に属する動画像データのプレビュー再生を、例えば、第１の部分音楽区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、インデキシング情報表示処理部３０１は、選択されたバー領域に対応する音楽区間（選択された音楽区間）に属する顔画像と、他の音楽区間に属する顔画像とを検出する。そして、インデキシング情報表示処理部３０１は、選択された音楽区間に属する顔画像を例えば二重の枠で囲まれた状態で表示し、他の音楽区間に属する顔画像を例えば一重の枠で囲まれた状態で表示する。表示の仕方はこれに限られず、枠で示したものを強調（大きく、明るく等）表示したり、それ以外を抑制（小さく、暗く、淡く等）表示したり、顔画像の隅の方にマークを表示したり、それ以外を除外して、枠で示した顔画像のみを表示したりすることができる。
音楽区間バー内のバー領域以外の部分がユーザによって選択されたときは、音楽区間以外の他の全ての区間に属する動画像データのプレビュー再生を行うようにしてもよい。
図１６は、トーク区間バー内の１つのバー領域が選択された場合に対応するインデキシングビュー画面の例を示している。図１６においては、選択されたバー領域は枠で囲んだ状態で示されている。
トーク区間バー内の１つのバー領域がユーザによって選択されると、選択されたバー領域に対応するトーク区間（選択されたトーク区間）に属する動画像データのプレビュー再生が、選択されたトーク区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行われる。また、選択されたバー領域に対応するトーク区間のプレビュー再生のみならず、全てのトーク区間それぞれに属する動画像データのプレビュー再生を行ってもよい。この場合、プレビュー処理部４０３は、（１）ＣＭ区間を含む全区間の中からトーク区間それぞれを検出する処理、または（２）ＣＭ区間以外の本編区間の中からトーク区間それぞれを検出する処理を実行する。（２）の検出処理は、例えば、ＣＭ区間属性情報とトーク区間属性情報とに基づいて行うことができる。そして、（１）または（２）によって検出されたトーク区間それぞれに属する動画像データのプレビュー再生が行われる。この場合、あるトーク区間とそれに後続する次のトーク区間との間の他の区間のプレビュー再生はスキップされる。
例えば、映像コンテンツデータのシーケンス内に第１の部分トーク区間および第２の部分トーク区間が分散して存在する場合、プレビュー処理部４０３は、トーク区間属性情報に基づいて、まず、第１の部分トーク区間内に属する動画像データのプレビュー再生を、例えば、第１の部分トーク区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置上で行う。第１の部分トーク区間内に属する動画像データのプレビュー再生が終了すると、プレビュー処理部４０３は、第１の部分トーク区間と第２の部分トーク区間との間の他の区間のプレビュー再生をスキップして、第２の部分トーク区間内に属する動画像データのプレビュー再生を、例えば、第２の部分トーク区間から抽出されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、各トーク区間のプレビュー再生の順序は異なってもよい。例えば、選択されたバー領域が第２の部分トーク区間に対応する場合、プレビュー処理部４０３は、まず、第２の部分トーク区間内に属する動画像データのプレビュー再生を、例えば、第２の部分トーク区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。第２の部分トーク区間内に属する動画像データのプレビュー再生が終了すると、プレビュー再生部４０３は、続いて第１の部分トーク区間内に属する動画像データのプレビュー再生を、例えば、第１の部分トーク区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行う。
また、インデキシング情報表示処理部３０１は、選択されたバー領域に対応するトーク区間（選択されたトーク区間）に属する顔画像と、他のトーク区間に属する顔画像とを検出する。そして、インデキシング情報表示処理部３０１は、選択されたトーク区間に属する顔画像を例えば二重の枠で囲まれた状態で表示し、他のトーク区間に属する顔画像を例えば一重の枠で囲まれた状態で表示する。表示の仕方はこれに限られず、枠で示したものを強調（大きく、明るく等）表示したり、それ以外を抑制（小さく、暗く、淡く等）表示したり、顔画像の隅の方にマークを表示したり、それ以外を除外して、枠で示した顔画像のみを表示したりすることができる。
トーク区間バー内のバー領域以外の部分がユーザによって選択されたときは、トーク区間以外の他の全ての区間に属する動画像データのプレビュー再生を行うようにしてもよい。
図１７は、区間バーの他の構成例が示されている。
図１７においては、区間バーは、２つのサブ区間バー、つまり音楽／トーク区間バーと、ＣＭ区間バーから構成されている。ＣＭ区間バーは、ＣＭ区間の位置を示す。音楽／トーク区間バーは、ＣＭ区間以外の区間（本編区間）内における音楽区間の位置およびトーク区間の位置をそれぞれ示す。ユーザによってＣＭ区間バーが選択された場合、ＣＭ区間に属する動画像データが検出され、その検出された動画像データのプレビュー再生が行われる。またユーザによって音楽／トーク区間バーが選択された場合、本編区間内に属する動画像データが検出され、その検出された動画像データのプレビュー再生が行われる。またユーザによって音楽／トーク区間バー内のあるトークバー領域が選択された場合、選択されたトークバー領域に対応するトーク区間に属する動画像データが検出され、その検出された動画像データのプレビュー再生が行われる。さらに、ユーザによって音楽／トーク区間バー内のある音楽バー領域が選択された場合、選択された音楽バー領域に対応する音楽区間に属する動画像データが検出され、その検出された動画像データのプレビュー再生が行われる。
図１８は、区間バーのさらに他の構成例が示されている。
図１８においては、区間バーは、５つのサブ区間バー、つまりＣＭ区間バー、音楽区間バー、トーク区間バー、歓声区間バー、および盛り上がり区間バーから構成されている。
歓声区間バー内の１つのバー領域がユーザによって選択されると、選択されたバー領域に対応する歓声区間（選択された歓声区間）に属する動画像データのプレビュー再生が、選択された歓声区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行われる。また、選択されたバー領域に対応する歓声区間のプレビュー再生のみならず、全ての歓声区間それぞれに属する動画像データのプレビュー再生を行ってもよい。この場合、プレビュー処理部４０３は、（１）ＣＭ区間を含む全区間の中から歓声区間それぞれを検出する処理、または（２）ＣＭ区間以外の本編区間の中から歓声区間それぞれを検出する処理を実行する。そして、（１）または（２）によって検出された歓声区間それぞれに属する動画像データのプレビュー再生が行われる。この場合、ある歓声区間とそれに後続する次の歓声区間との間の他の区間のプレビュー再生はスキップされる。
盛り上がり区間バー内の１つのバー領域がユーザによって選択されると、選択されたバー領域に対応する盛り上がり区間（選択された盛り上がり区間）に属する動画像データのプレビュー再生が、選択された盛り上がり区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置上で行われる。また、選択されたバー領域に対応する盛り上がり区間のプレビュー再生のみならず、全ての盛り上がり区間それぞれに属する動画像データのプレビュー再生を行ってもよい。この場合、プレビュー処理部４０３は、（１）ＣＭ区間を含む全区間の中から盛り上がり区間それぞれを検出する処理、または（２）ＣＭ区間以外の本編区間の中から盛り上がり区間それぞれを検出する処理を実行する。そして、（１）または（２）によって検出された盛り上がり区間それぞれに属する動画像データのプレビュー再生が行われる。この場合、ある盛り上がり区間とそれに後続する次の盛り上がり区間との間の他の区間のプレビュー再生はスキップされる。
なお、上記５つのサブ区間バー（ＣＭ区間バー、音楽区間バー、トーク区間バー、歓声区間バー、および盛り上がり区間バー）に加え、さらに、本編区間の位置を示すバー領域を含む本編区間バーを表示するようにしてもよい。
また、ＣＭ区間以外の区間が本編区間となるので、ＣＭ区間バーを、ＣＭ区間および本編区間の双方を示すサブ区間バーとして使用することも出来る。
図１９は、インデキシングビュー画面の他の例が示している。
図１９のインデキシングビュー画面上には、プレビュー再生された動画像データを表示するためのプレビューエリアが配置されている。ユーザによって指定された所定の属性区間に属する映像コンテンツデータの動画像データのプレビュー再生は、プレビューエリア上で行われる。
次に、図２０のフローチャートを参照して、インデキシングビューワプログラムによって実行されるインデキシング画面表示処理の手順を説明する。
まず、インデキシング情報表示処理部３０１は、データベース１１１Ａに格納されている顔画像それぞれを、それら顔画像に対応するタイムスタンプ情報に基づいて、それら顔画像の登場時間順にソートする（ステップＳ１０１）。次いで、インデキシング情報表示処理部３０１は、ユーザによって指定された表示すべき顔画像サイズに応じて行及び列の数を決定すると共に、例えばインデキシング対象の映像コンテンツデータの総時間長を列数で均等に分割することによって、各列（大区間）に割り当てる時間帯を算出する。そして、インデキシング情報表示処理部３０１は、表示処理対象の列に割り当てられた時間帯内に属する顔画像の内から、行数分の顔画像を選択する（ステップＳ１０２）。
次いで、インデキシング情報表示処理部３０１は、表示処理対象の列内の複数の顔画像表示エリアに、選択した顔画像それぞれを例えば出現頻度順に並べて表示する（ステップＳ１０３）。出現頻度の高い顔画像ほど、上方の顔画像表示エリアに表示される。
ステップＳ１０２，Ｓ１０３の処理は、全ての列に対する処理が完了するまで、表示処理対象の列の番号を更新しながら繰り返し実行される（ステップＳ１０４，Ｓ１０５）。
なお、表示処理対象の列に割り当てられた時間帯内に属する顔画像の数が行数よりも少ない場合には、対応する時間帯内に属するサムネイル画像を表示処理対象の列に表示することも出来る。
全ての列に対する処理が完了すると（ステップＳ１０４のＮＯ）、インデキシング情報表示処理部３０１は、データベース１１Ａに格納されているサムネイル画像それぞれを、それらサムネイル画像それぞれのタイムスタンプ情報に基づいて、じゃばらサムネイル表示エリア上にそれらサムネイル画像が出現する時間順に一列に並べて表示する（ステップＳ１０６）。
次いで、インデキシング情報表示処理部３０１は、データベース１１１Ａから歓声レベル情報および盛り上がりレベル情報を読み出し、それら歓声レベル情報および盛り上がりレベル情報に従って、レベル表示エリア上に、映像コンテンツデータの開始位置から終端位置までのシーケンス内における歓声レベルの変化を示すグラフと、シーケンス内における盛り上がりレベルの変化をそれぞれ示すグラフとを表示する（ステップＳ１０７）。
次に、インデキシング情報表示処理部３０１は、データベース１１１ＡからＣＭ区間属性情報、音楽区間属性情報、およびトーク区間属性情報を読み出し、それらＣＭ区間属性情報、音楽区間属性情報、およびトーク区間属性情報に基づいて、ＣＭ区間バー、音楽区間バー、トーク区間バーをそれぞれ表示する（ステップＳ１０８）。ＣＭ区間バーには、ＣＭ区間の位置を示すバー領域が表示される。同様に、音楽区間バーには音楽区間の位置を示すバー領域が表示され、トーク区間バーにはトーク区間の位置を示すトークバー領域が表示される。
この後、もしユーザの操作によってある属性区間（ＣＭ区間、音楽区間、トーク区間、ＣＭ区間以外の本編区間）のプレビュー再生の実行が要求されたならば（ステップＳ１０９のＹＥＳ）、プレビュー処理部４０３は、例えばじゃばらサムネイル表示エリア上で、再生が要求された属性区間内の動画像データのプレビュー再生を行う（ステップＳ１１０）。ステップＳ１１０では、プレビュー処理部４０３は、まず、じゃばらサムネイル表示エリアに表示されている複数のサムネイル画像それぞれに対応する複数の小区間の中で、再生が要求された属性区間に対応する小区間（例えば、再生が要求された属性区間に属する複数の小区間の中の先頭の小区間）を特定し、そしてその特定した小区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置を特定する。そして、プレビュー処理部４０３は、その特定されたじゃばらサムネイル表示エリアの画像表示位置上で、再生が要求された属性区間の動画像データのプレビュー再生を開始する。換言すれば、再生が要求された属性区間から抽出されたサムネイル画像列の先頭のサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置が、プレビュー再生が行われる画像表示位置となる。再生された動画像データは、特定されたじゃばらサムネイル表示エリアの画像表示位置上に表示される。
プレビュー再生は、ユーザによってある区間バー内のバー領域が選択されたことに応答して実行するようにしてもよい。
また、ユーザによってある区間バー内のバー領域が選択された時に、プレビュー再生と同時に、選択されたバー領域に対応する属性区間に属する各顔画像と他の属性区間に属する各顔画像とを互いに区別して表示する処理を行ってもよい。この場合、インデキシング情報処理部３０１は、選択されたバー領域に対応する所定の属性区間を示す区間属性情報と、顔画像インデキシング情報に含まれる複数の顔画像それぞれに対応するタイムスタンプ情報とに基づき、複数の顔画像を所定の属性区間に属する第１の顔画像グループと所定の属性区間以外の他の区間に属する第２の顔画像グループとに分類し、第１の顔画像グループおよび第２の顔画像グループのいずれか一方のグループに属する各顔画像を、他方のグループに属する各顔画像と区別して顔サムネイル表示エリア上に表示する。例えば、ユーザによってＣＭ区間のバー領域が選択されたならば、そのＣＭ区間のプレビュー再生が例えばじゃばらサムネイル表示エリア上で行われると共に、ＣＭ区間に属する各顔画像が本編区間に属する各顔画像と区別された状態で顔サムネイル表示エリア上に表示される。この場合、ＣＭ区間に属する各顔画像のみを表示し、本編区間に属する各顔画像を表示しないようにしてもよい。
次に、図２１のフローチャートを参照して、プレビュー再生処理の具体的な手順の例を説明する。
ユーザによるリモコンユニット、マウス、キーボード等の操作によってプレビュー再生の開始が指示されると、プレビュー再生を要求するイベント（プレビュー再生指示）がインデキシングビューワプログラムに入力される。このプレビュー再生指示が入力された時（ステップＳ２０１のＹＥＳ）、プレビュー処理部４０３は、ユーザによって選択されている区間バーのバー領域に従って、プレビュー再生を実行すべき区間（プレビュー再生対象区間）を特定する（ステップＳ２０２）。
次いで、プレビュー処理部４０３は、じゃばらサムネイル表示エリアに表示されているサムネイル画像それぞれのタイムスタンプ情報と、選択されたバー領域によって指定される属性区間の開始および終了の時点を規定する区間属性情報とに基づいて、プレビュー再生に使用するじゃばらサムネイル表示エリア上の画像表示位置を特定する（ステップＳ２０３）。このステップＳ２０３では、プレビュー処理部４０３は、じゃばらサムネイル表示エリアに表示されている複数のサムネイル画像それぞれに対応する複数の小区間の中で、指定された属性区間に属する小区間（例えば、指定された属性区間に属する複数の小区間の中の先頭の小区間）を特定し、そしてその特定した小区間から抽出されたサムネイル画像が表示されるじゃばらサムネイル表示エリア上の画像表示位置を特定する。次いで、プレビュー処理部４０３は、指定された属性区間に属する動画像データを、特定した画像表示位置上で再生する（ステップＳ２０４）。
プレビュー再生の実行中においては、プレビュー処理部４０３は、プレビュー再生の進行によって、プレビュー再生対象の小区間が、次の小区間に移るタイミングが到来したか否かを判定する（ステップＳ２０５）。プレビュー再生対象の小区間が次の小区間に移るタイミングが到来した場合、プレビュー処理部４０３は、次の小区間から抽出されたじゃばらサムネイル表示エリア上のサムネイル画像を新たに選択し、動画像データの再生に使用されるじゃばらサムネイル表示エリア上の画像表示位置を、新たに選択されたサムネイル画像が表示されているじゃばらサムネイル表示エリア上の画像表示位置に変更する（ステップＳ２０６）。そして、プレビュー処理部４０３は、次の小区間の動画像データのプレビュー再生を、変更後の画像表示位置で行う（ステップＳ２０４）。
以上のように、本実施形態においては、区間バーを表示することにより、どの属性区間が映像コンテンツデータ内のどの辺りの位置に出現するのかをユーザに提示することができる。また、例えばユーザによる区間バーの選択操作に応じて、任意の属性区間をプレビュー再生することができるので、映像コンテンツデータ全体ではなく、映像コンテンツデータ内の特定の属性区間に着目して映像コンテンツデータの内容をユーザに提示することが可能となる。よって、ユーザは、例えば、映像コンテンツデータ内のＣＭ区間またはＣＭ区間以外の区間（本編区間）に着目して映像コンテンツデータを俯瞰できる。また他の属性区間（音楽、トーク、歓声、盛り上がり、本編、等）に着目して映像コンテンツデータを俯瞰することもできる。
また、本実施形態では、プレビュー再生をじゃばらサムネイル表示エリア上で行うことができるので、インデキシングビュー画面上に専用のプレビュー用エリアを設ける必要が無くなる。また、プレビュー再生は、プレビュー再生対象の属性区間から抽出されたサムネイル画像に対応するじゃばらサムネイル表示エリア上で行われるので、ユーザは、じゃばらサムネイル表示エリアのみに目を向けるだけで、プレビュー再生されている動画像データが映像コンテンツデータ内のどの部分に対応するものであるかを、容易に把握することが出来る。
さらに、本実施形態では、プレビュー再生に使用されるじゃばらサムネイル表示エリア上の画像表示位置はプレビュー再生の進行に伴って自動的に移動することができ、これにより常にプレビュー再生対象区間の動画像データを当該プレビュー再生対象区間から抽出されたサムネイル画像に対応する画像表示位置に表示することができる。よって、プレビュー再生処理中に、現在プレビュー再生されている動画像データが映像コンテンツデータ全体の中のどの辺りであるかをユーザに対してリアルタイムに提示することが可能となる。
なお、本実施形態では、インデキシング処理部として機能するビデオプロセッサ１１３によってインデキシング情報（顔画像インデキシング情報、区間属性情報、等）を生成したが、例えば、放送番組データ内に予め当該放送番組データに対応するインデキシング情報が含まれている場合には、それを利用することができる。必要なインデキシング情報がすべて揃っていれば、インデキシング処理を行う必要はない。よって、本実施形態のインデキシング情報表示機能およびプレビュー機能は、データベース１１１Ａとインデキシングビューワプログラム(インデキシング情報表示処理部３０１、プレビュー処理部４０３)のみによっても実現することが出来る。
また、本実施形態では、複数種の属性区間を使用する場合を例示したが、例えばＣＭ区間のような、特定の１つの属性区間のみを使用する構成であってもよい。
また、本実施形態では、複数種の属性区間（ＣＭ区間、本編区間、音楽区間、トーク区間、歓声区間、盛り上がり区間）内の２以上の任意の属性区間をNOT/AND/OR等の条件によって組合せることにより、ある特定の条件を満たす区間を検出することができる。この場合、ユーザは、２以上の任意の属性区間を例えば区間バーを用いて指定することができ、かつそれら２以上の任意の属性区間に適用すべきNOT/AND/OR等の条件を例えばインデックスビュー画面上に表示されるメニュー等を用いて指定することができる。このように、２以上の任意の属性区間およびそれら２以上の任意の属性区間に適用すべきNOT/AND/OR等の条件をユーザに指定させる機能をインデキシングビューワプログラムに設けることにより、インデキシングビューワプログラムは、指定された２以上の任意の属性区間それぞれの区間属性情報と、指定されたNOT/AND/OR等の条件とに基づいて、プレビュー再生対象の区間を特定することが出来る。
また、本実施形態では、区間属性情報として開始時点を示す時間情報と終了時点を示す時間情報とを用いる例を説明したが、区間属性情報は各区間の開始および終了の時点を規定する情報であればよいので、区間の開始時点を示す情報と区間の時間長を示す情報とを区間属性情報として用いても良い。
また、本実施形態のインデキシング情報表示処理およびプレビュー処理の手順は全てソフトウェアによって実現することができるので、このソフトウェアをコンピュータ読み取り可能な記憶媒体を通じて通常のコンピュータに導入することにより、本実施形態と同様の効果を容易に実現することができる。
また、本実施形態の電子機器はコンピュータ１０によって実現するのみならず、例えば、ＨＤＤレコーダ、ＤＶＤレコーダ、テレビジョン装置といった様々なコンシューマ電子機器によって実現することもできる。この場合、インデキシング情報表示処理およびプレビュー処理の機能は、ＤＳＰ、マイクロコンピュータのようなハードウェアによって実現することができる。
また、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。
本発明の一実施形態に係る電子機器の概観の例を示す斜視図。 同実施形態の電子機器のシステム構成の例を示すブロック図。 同実施形態の電子機器のインデキシング情報表示機能を説明するためのブロック図。 同実施形態の電子機器で用いられる区間属性情報（属性検出結果情報）の例を示す図。 同実施形態の電子機器で用いられるプログラムの機能構成を示すブロック図。 同実施形態の電子機器によって表示装置に表示されるインデキシングビュー画面の例を示す図。 図６のインデキシングビュー画面内に含まれる顔サムネイル表示エリアの構成例を示す図。 図６のインデキシングビュー画面内に含まれる、顔サムネイル表示エリアとじゃばらサムネイル表示エリアとの関係を説明するための図。 図６のインデキシングビュー画面内に含まれるじゃばらサムネイル表示エリアの例を示す図。 図９のじゃばらサムネイル表示エリアを用いてプレビュー再生が行われる様子を示す図。 図９のじゃばらサムネイル表示エリア上をプレビュー再生用画像表示位置が移動する様子を示す図。 図６のインデキシングビュー画面内に含まれるじゃばらサムネイル表示エリア上の選択されたサムネイル画像の画像表示位置を利用してプレビュー再生が行われる様子を示す図。 同実施形態の電子機器によって実行されるプレビュー再生処理を複数の静止画像を順次表示することによって実行する場合の例を示す図。 図６のインデキシングビュー画面上でＣＭ区間が選択された場合のインデキシングビュー画面の例を示す図。 図６のインデキシングビュー画面上で音楽区間が選択された場合のインデキシングビュー画面の例を示す図。 図６のインデキシングビュー画面上でトーク区間が選択された場合のインデキシングビュー画面の例を示す図。 図６のインデキシングビュー画面上に表示される区間バーの例を示す図。 図６のインデキシングビュー画面上に表示される区間バーの他の例を示す図。 同実施形態の電子機器によって表示装置に表示されるインデキシングビュー画面の他の例を示す図。 同実施形態の電子機器によって実行されるインデキシング情報表示処理の手順の例を示すフローチャート。 同実施形態の電子機器によって実行されるプレビュー処理の手順を示すフローチャート。
符号の説明
１０…電子機器（コンピュータ）、１１１Ａ…データベース、１１３…ビデオプロセッサ、１１７…ＴＶチューナ、３０１…インデキシング情報表示処理部、４０２…インデキシング制御部、４０３…プレビュー処理部。

Claims (6)

  1. 映像コンテンツデータ内に含まれる、コマーシャル区間、コマーシャル区間以外の区間、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間を含む複数の属性区間の内の少なくとも１つの所定属性区間の開始および終了の時点を規定する区間属性情報であって、前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する複数の部分区間を含む場合、前記複数の部分区間の各々の開始および終了の時点を規定する区間属性情報を格納する記憶装置と、
    前記映像コンテンツデータから抽出された静止画像それぞれをそれら静止画像の出現時間順に一列に並べて前記表示画面上の表示エリア上に表示すると共に、前記表示エリア上の前記複数の静止画像の中から選択された静止画像を第１の横幅サイズで表示し且つ他の各静止画像を前記第１の横幅サイズよりも小さい横幅サイズで表示する静止画像表示手段と、
    前記区間属性情報に基づいて、前記映像コンテンツデータのシーケンス内における前記所定属性区間内の前記複数の部分区間の位置をそれぞれ示す複数のバー領域が配置される区間バーを前記表示画面上に表示する表示処理手段と、
    前記複数の部分区間から選択された部分区間に属する前記映像コンテンツデータの再生を要求するイベントが入力された場合、前記区間属性情報に基づいて、前記選択された部分区間から抽出された静止画像が表示されている前記表示エリア上の画像表示位置を特定し、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データが前記特定された画像表示位置上に前記第１の横幅サイズで表示されるように、前記特定された画像表示位置上で、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始する再生処理手段とを具備することを特徴とする電子機器。
  2. 前記再生処理手段は、前記複数のバー領域の１つがユーザによって選択された場合、前記選択されたバー領域に対応する部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始するように構成されていることを特徴とする請求項１記載の電子機器。
  3. 前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する第１の部分区間および第２の部分区間を含む場合、前記再生処理手段は、前記区間属性情報に従って、前記第１の部分区間内に属する前記映像コンテンツデータ内の動画像データの再生を開始し、前記第１の部分区間内に属する前記映像コンテンツデータ内の動画像データの再生が終了した後に、前記第１の部分区間と前記第２の部分区間との間の区間の再生をスキップして前記第２の部分区間内に属する前記映像コンテンツデータ内の動画像データの再生を開始するように構成されていることを特徴とする請求項１記載の電子機器。
  4. 前記再生処理手段は、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を行うために、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データから抽出された複数の静止画像を順次表示する処理を実行するように構成されていることを特徴とする請求項１記載の電子機器。
  5. 映像コンテンツデータの概要を表示するための表示方法であって、
    前記映像コンテンツデータに含まれるオーディオデータを分析し、前記映像コンテンツデータ内に含まれる、コマーシャル区間、コマーシャル区間以外の区間、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間を含む複数の属性区間の内の少なくとも１つの所定属性区間の開始および終了の時点を規定する区間属性情報であって、前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する複数の部分区間を含む場合、前記複数の部分区間の各々の開始および終了の時点を規定する区間属性情報を出力するインデキシング処理を実行するステップと、
    前記映像コンテンツデータから抽出された静止画像それぞれをそれら静止画像の出現時間順に一列に並べて前記表示画面上の表示エリア上に表示すると共に、前記表示エリア上の前記複数の静止画像の中から選択された静止画像を第１の横幅サイズで表示し且つ他の各静止画像を前記第１の横幅サイズよりも小さい横幅サイズで表示するステップと、
    前記区間属性情報に基づいて、前記映像コンテンツデータのシーケンス内における前記所定属性区間内の前記複数の部分区間の位置をそれぞれ示す複数のバー領域が配置される区間バーを前記表示画面上に表示するステップと、
    前記複数の部分区間から選択された部分区間に属する前記映像コンテンツデータの再生を要求するイベントが入力された場合、前記区間属性情報に基づいて、前記選択された部分区間から抽出された静止画像が表示されている前記表示エリア上の画像表示位置を特定し、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データが前記特定された画像表示位置上に前記第１の横幅サイズで表示されるように、前記特定された画像表示位置上で、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始する再生処理ステップとを具備することを特徴とする表示方法。
  6. コンピュータに、
    前記映像コンテンツデータに含まれるオーディオデータを分析し、前記映像コンテンツデータ内に含まれる、コマーシャル区間、コマーシャル区間以外の区間、音楽が流れている音楽区間、人物によるトークが行われているトーク区間、歓声レベルが所定値以上である歓声区間、および盛り上がりレベルが所定値以上である盛り上がり区間を含む複数の属性区間の内の少なくとも１つの所定属性区間の開始および終了の時点を規定する区間属性情報であって、前記所定属性区間が前記映像コンテンツデータのシーケンス内に分散して存在する複数の部分区間を含む場合、前記複数の部分区間の各々の開始および終了の時点を規定する区間属性情報を出力するインデキシング処理を実行する手順と、
    前記映像コンテンツデータから抽出された静止画像それぞれをそれら静止画像の出現時間順に一列に並べて前記表示画面上の表示エリア上に表示すると共に、前記表示エリア上の前記複数の静止画像の中から選択された静止画像を第１の横幅サイズで表示し且つ他の各静止画像を前記第１の横幅サイズよりも小さい横幅サイズで表示する手順と、
    前記区間属性情報に基づいて、前記映像コンテンツデータのシーケンス内における前記所定属性区間内の前記複数の部分区間の位置をそれぞれ示す複数のバー領域が配置される区間バーを前記表示画面上に表示する手順と、
    前記複数の部分区間から選択された部分区間の前記映像コンテンツデータの再生を要求するイベントが入力された場合、前記区間属性情報に基づいて、前記選択された部分区間から抽出された静止画像が表示されている前記表示エリア上の画像表示位置を特定し、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データが前記特定された画像表示位置上に前記第１の横幅サイズで表示されるように、前記特定された画像表示位置上で、前記選択された部分区間に属する前記映像コンテンツデータ内の動画像データの再生を開始する手順とを実行させるためのプログラム。
JP2007252457A 2007-09-27 2007-09-27 電子機器および表示方法 Active JP4909856B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2007252457A JP4909856B2 (ja) 2007-09-27 2007-09-27 電子機器および表示方法
US12/203,819 US8285114B2 (en) 2007-09-27 2008-09-03 Electronic apparatus and display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007252457A JP4909856B2 (ja) 2007-09-27 2007-09-27 電子機器および表示方法

Publications (2)

Publication Number Publication Date
JP2009088689A JP2009088689A (ja) 2009-04-23
JP4909856B2 true JP4909856B2 (ja) 2012-04-04

Family

ID=40509934

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007252457A Active JP4909856B2 (ja) 2007-09-27 2007-09-27 電子機器および表示方法

Country Status (2)

Country Link
US (1) US8285114B2 (ja)
JP (1) JP4909856B2 (ja)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102187683B (zh) * 2008-10-21 2014-09-10 富士通株式会社 数据传送装置和数据接收装置
US8707181B2 (en) * 2008-11-12 2014-04-22 Apple Inc. Preview of next media object to play
JP5423199B2 (ja) * 2009-07-17 2014-02-19 三菱電機株式会社 映像記録再生装置および映像記録再生方法
JP2011065277A (ja) * 2009-09-15 2011-03-31 Toshiba Corp 電子機器、画像表示方法およびコンテンツ再生プログラム
WO2011081011A1 (en) * 2009-12-28 2011-07-07 Semiconductor Energy Laboratory Co., Ltd. Liquid crystal display device and manufacturing method thereof
JP2011223471A (ja) * 2010-04-13 2011-11-04 Toshiba Corp 放送録画装置、方法及びプログラム
US9484065B2 (en) * 2010-10-15 2016-11-01 Microsoft Technology Licensing, Llc Intelligent determination of replays based on event identification
US8667519B2 (en) 2010-11-12 2014-03-04 Microsoft Corporation Automatic passive and anonymous feedback system
JP5754119B2 (ja) * 2010-12-07 2015-07-29 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US8654148B2 (en) * 2010-12-23 2014-02-18 Sony Corporation Display control apparatus for deciding a retrieval range for displaying stored pieces of information
US9477932B2 (en) * 2011-01-17 2016-10-25 General Electric Company System and method for providing visualization of a parameter on multiple branches of a distribution network
KR101954794B1 (ko) * 2012-01-20 2019-05-31 삼성전자주식회사 영상 표시 장치에서 멀티미디어 컨텐츠의 재생구간을 탐색하기 위한 장치 및 방법
KR101515623B1 (ko) * 2012-05-14 2015-04-28 삼성전자주식회사 벤디드 디스플레이를 갖는 휴대단말의 기능 운용 방법 및 장치
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
US12149779B2 (en) 2013-03-15 2024-11-19 Apple Inc. Advertisement user interface
JP2014216943A (ja) * 2013-04-26 2014-11-17 株式会社東芝 電子機器、方法、及びプログラム
USD788795S1 (en) * 2013-09-03 2017-06-06 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
US20150113551A1 (en) * 2013-10-23 2015-04-23 Samsung Electronics Co., Ltd. Computing system with content delivery mechanism and method of operation thereof
TWI505113B (zh) * 2014-03-18 2015-10-21 Vivotek Inc 監視系統及其影像搜尋方法
USD759665S1 (en) * 2014-05-13 2016-06-21 Google Inc. Display panel or portion thereof with animated computer icon
CN111782128B (zh) 2014-06-24 2023-12-08 苹果公司 用于在用户界面中导航的列界面
CN110297594B (zh) 2014-06-24 2022-09-06 苹果公司 输入设备和用户界面交互
USD784366S1 (en) * 2015-02-25 2017-04-18 Lg Electronics Inc. Display panel with animated graphical user interface
JP2017010481A (ja) * 2015-06-26 2017-01-12 シャープ株式会社 コンテンツ表示装置及びプログラム
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
US11966560B2 (en) 2016-10-26 2024-04-23 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
JP6161224B1 (ja) * 2016-12-28 2017-07-12 アンバス株式会社 人物情報表示装置、人物情報表示方法及び人物情報表示プログラム
CN107483816B (zh) * 2017-08-11 2021-01-26 西安易朴通讯技术有限公司 图像处理方法、装置及电子设备
US10425687B1 (en) 2017-10-10 2019-09-24 Facebook, Inc. Systems and methods for determining television consumption behavior
US10841651B1 (en) 2017-10-10 2020-11-17 Facebook, Inc. Systems and methods for determining television consumption behavior
US12307082B2 (en) 2018-02-21 2025-05-20 Apple Inc. Scrollable set of content items with locking feature
AU2019100574B4 (en) 2018-06-03 2020-02-20 Apple Inc. Setup procedures for an electronic device
JP7713287B2 (ja) * 2018-11-29 2025-07-25 株式会社リコー 表示端末、共用システム、表示制御方法およびプログラム
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
WO2020198237A1 (en) 2019-03-24 2020-10-01 Apple Inc. User interfaces including selectable representations of content items
CN114297620A (zh) 2019-03-24 2022-04-08 苹果公司 用于媒体浏览应用程序的用户界面
CN114302210B (zh) 2019-03-24 2024-07-05 苹果公司 用于查看和访问电子设备上的内容的用户界面
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
EP3977245A1 (en) 2019-05-31 2022-04-06 Apple Inc. User interfaces for a podcast browsing and playback application
US11157556B2 (en) 2019-12-20 2021-10-26 Sling Media Pvt Ltd Method and apparatus for thumbnail generation for a video device
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3109786B2 (ja) * 1994-03-10 2000-11-20 シャープ株式会社 画像表示装置
US9171545B2 (en) * 1999-04-19 2015-10-27 At&T Intellectual Property Ii, L.P. Browsing and retrieval of full broadcast-quality video
JP4587416B2 (ja) 2000-04-25 2010-11-24 富士通株式会社 デジタル映像コンテンツ閲覧装置及び方法
JP2004207948A (ja) 2002-12-25 2004-07-22 Fuji Xerox Co Ltd ビデオ閲覧システム
JP2006054622A (ja) 2004-08-10 2006-02-23 Sony Corp 情報信号処理方法、情報信号処理装置及びプログラム記録媒体
JP2006086612A (ja) * 2004-09-14 2006-03-30 Sony Corp 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
JP4774940B2 (ja) * 2005-11-14 2011-09-21 ソニー株式会社 情報処理装置、表示方法及びそのプログラム
JP2007142785A (ja) * 2005-11-18 2007-06-07 Hitachi Ltd 記録再生装置
US20080155627A1 (en) * 2006-12-04 2008-06-26 O'connor Daniel Systems and methods of searching for and presenting video and audio

Also Published As

Publication number Publication date
US8285114B2 (en) 2012-10-09
JP2009088689A (ja) 2009-04-23
US20090089837A1 (en) 2009-04-02

Similar Documents

Publication Publication Date Title
JP4909856B2 (ja) 電子機器および表示方法
JP4834640B2 (ja) 電子機器および画像表示制御方法
JP4496264B2 (ja) 電子機器及び映像表示方法
JP4322945B2 (ja) 電子機器、及び画像表示制御方法
JP5057918B2 (ja) 電子機器およびシーン種類表示方法
JP4909854B2 (ja) 電子機器および表示処理方法
JP4834639B2 (ja) 電子機器および画像表示制御方法
JP4331240B2 (ja) 電子機器および画像表示方法
JP2009076982A (ja) 電子機器および顔画像表示方法
JP4856105B2 (ja) 電子機器および表示処理方法
JP2009038680A (ja) 電子機器および顔画像表示方法
JP2009089065A (ja) 電子機器および顔画像表示装置
JP2009081699A (ja) 電子機器および顔画像抽出制御方法
JP4709929B2 (ja) 電子機器および表示制御方法
JP5330551B2 (ja) 電子機器および表示処理方法
JP5039020B2 (ja) 電子機器および映像コンテンツ情報表示方法
JP5198609B2 (ja) 電子機器および表示制御方法並びにプログラム
JP4987653B2 (ja) 電子機器および画像表示方法
JP5232291B2 (ja) 電子機器および顔画像表示方法
JP5349651B2 (ja) 電子機器、顔画像抽出制御方法およびプログラム
JP5318171B2 (ja) 電子機器および画像表示制御方法
JP5566984B2 (ja) 電子機器および画像表示方法
JP2009200827A (ja) 電子機器および画像表示方法
JP2009088904A (ja) 情報処理装置および顔画像表示方法
JP5038836B2 (ja) 情報処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100720

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110927

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111220

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120116

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150120

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4909856

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150120

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

Free format text: JAPANESE INTERMEDIATE CODE: R313121

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250