JP2001211428A

JP2001211428A - 可変速信号再生装置、可変速信号再生方法および記録媒体

Info

Publication number: JP2001211428A
Application number: JP2000017232A
Authority: JP
Inventors: Haruka Nakakane; 晴香中兼; Tsutomu Uenoyama; 上野山　　努
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2000-01-26
Filing date: 2000-01-26
Publication date: 2001-08-03

Abstract

(57)【要約】【課題】内容的に相関関係を有する複数ストリームの
信号を可変速再生しても、該相関関係を保ちながら可変
速再生可能な可変速信号再生装置、可変速信号再生方法
および記録媒体を提供すること。【解決手段】複数のストリームの各イベントが互いに
相関関係を有する場合、相関関係があるイベントのリン
ク情報を生成するリンク情報生成部を有する。また、異
なるストリームを記録した記録媒体１と、記録媒体から
読み出した入力データからリンク情報を含んだ情報ラベ
ルを抽出する情報ラベル抽出部２０１と、各ストリーム
のイベント間のリンク状態を保ちながら再生情報入力系
２０３から指示された再生速度で信号が再生されるよう
イベントの伸縮方法を決定する同期制御部２０２と、決
定された伸縮方法で各イベントに対して伸縮処理を行
い、出力信号を生成する伸縮処理部２０４と、伸縮／生
成された一ストリームの出力信号を出力する信号出力処
理部２０５とを有する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は可変速信号再生装
置、可変速信号再生方法および該方法を実行させるため
のプログラムを記録した記録媒体に係り、特に、映像信
号や音声信号等の信号の再生速度が可変な可変速信号再
生装置、可変速信号再生方法および記録媒体に関する。

【０００２】

【従来の技術】従来、映像信号や音声信号等の信号を記
録媒体に蓄積して再生する信号再生装置に対して、時間
短縮のために短時間で再生したい、また、再生内容が分
かりにくいのでゆっくりと再生したいなどの再生速度に
関する要求があったため、信号の高速／低速再生機能を
備えた信号再生装置が開発されてきた。

【０００３】しかしながら、例えば音声信号を単純に高
速再生すると、再生された音声のピッチが高くなりかつ
早口になるため、内容が把握しにくくなってしまうとい
った問題があった。そこで、該問題点を解決するため
に、音声信号を時間軸方向に一定間隔で分割して、全体
に対して所定割合の音声信号を標準速度で再生すると、
連続性の欠落した内容または会話となってしまい、か
つ、音声信号の波形の不連続性に伴うノイズの発生が起
きて聞き取りにくくなってしまうといった不具合が生じ
てしまう。

【０００４】このため、可変速再生しても再生内容を理
解しやすく、かつ聞き取りやすい可変速再生方法とし
て、無音信号の削除や基本波形（母音）の間引きなど、
非線形的な信号の伸縮によって可変速再生を行う方法が
開発されている。このような可変速再生を実現する再生
装置および方法が、特開平１０−１７２２４５号公報に
開示されている。該公報には、音声信号を記録媒体に記
録するときに音声信号の特徴を示す付加情報（サブコー
ド）を音声信号と共に記録することによって、再生時に
種々の特殊再生が可能な技術が開示されている。

【０００５】また、従来の可変速信号再生装置１０とし
ては、例えば図３１に示すようなものがある。該可変速
信号再生装置１０は、記録媒体２、再生データ処理系３
０１、サブコード検出系３０２、システムコントローラ
３０３および音声信号処理系３０４を備え、指示された
再生モードに応じて再生速度を可変としている。

【０００６】まず、記録媒体２には、音声信号の種類や
音声信号が無音か有音かなどといった特徴を示すサブコ
ードと共に音声信号が記録されている。再生データ処理
系３０１は、記録媒体２から読み出されたデータをサブ
コードと音声信号に分離する。また、システムコントロ
ーラ３０３は、スキップ再生等の再生モードをサブコー
ド検出系３０２に指示する。

【０００７】また、サブコード検出系３０２は、システ
ムコントローラ３０３からの再生モードに関する指示に
従って、再生データ処理系３０１から入力されたサブコ
ードを所定のパラメータと比較し、音声信号処理系３０
４に入力された音声信号を信号出力系に送出するか否か
を判定する。音声信号の送出が不要である場合、サブコ
ード検出系３０２は、音声信号を信号出力系に送出しな
いよう指示する制御信号を音声信号処理系３０４に供給
する。また、音声信号の送出が指示された場合、音声信
号処理系３０４は該音声信号を信号出力系に送出する。

【０００８】

【発明が解決しようとする課題】しかしながら、上記従
来の可変速信号再生装置１０にあっては、複数の音声信
号（以下、一種類の連続した信号をストリームという）
が存在し、サブコードに記述された各音声信号に関する
特徴が異なる場合、ある時刻の音声信号に対して該音声
信号を信号出力系に送出するか否かの判定は各ストリー
ムで異なるため、信号出力系においてストリームごとに
音声信号の再生時刻がずれてしまい、再生時刻の同期が
取れなくなってしまうという問題点があった。

【０００９】例えば、図３２に示すように、２人の発言
者の音声信号が別々のストリームとして入力されている
ような場合、発言者の会話を高速再生すると、可変速信
号再生装置１０では、各ストリームの無音部分を削除し
て再生するため、各発言者の発言時間の違いにより、内
容が前後して再生されてしまうといった事態が生じ得
る。このように、高速再生して時間の短縮を図っても内
容が前後してしまうと、再生内容の意味的な理解が困難
になってしまうといった問題点があった。

【００１０】本発明は、上記従来の問題点に鑑みてなさ
れたものであって、内容的に相関関係を有する複数スト
リームの信号を可変速再生しても、該相関関係を保ちな
がら可変速再生可能な可変速信号再生装置、可変速信号
再生方法および記録媒体を提供することを目的としてい
る。

【００１１】

【課題を解決するための手段】上記課題を解決するため
に、本発明の請求項１に係る可変速信号再生装置は、連
続したストリーム信号を所定の規則で時間軸方向に分割
して生成されたデータ信号、および該データ信号の特徴
を示す情報ラベルを一組としたイベントから、前記情報
ラベルのみを抽出する情報ラベル抽出手段と、前記情報
ラベル抽出手段によって抽出された情報ラベルと、前記
情報ラベルを用いて作成された、異なるストリーム信号
の各イベント間の相関関係を示すイベントリンクテーブ
ルとを用いて、イベント間の相関関係を保ちながら所望
の再生速度で前記ストリーム信号を再生するよう各イベ
ントのデータ信号の再生時刻を決定するイベント制御手
段と、前記イベント制御手段によって決定された再生時
刻にデータ信号を再生するよう、該データ信号を伸縮処
理して出力する伸縮／出力処理手段と、を備え、前記デ
ータ信号の特徴を示す情報ラベルは、前記データ信号の
再生時刻を示す再生時間情報と、前記情報ラベルを有す
るイベントのイベント番号と、前記情報ラベルを有する
イベントと他のストリーム信号のイベントとの相関関係
を示すリンク情報と、を有するものである。

【００１２】また、請求項２に係る可変速信号再生装置
は、請求項１に記載の可変速信号再生装置において、前
記リンク情報は、前記情報ラベル抽出手段によって抽出
された情報ラベルの再生時間情報と、一イベントと他の
イベントとの相関関係の有無を決定するための規定値と
を用いて、異なるストリーム信号のイベントとの相関関
係を示すリンク情報を全ストリーム信号の各イベントに
対して生成するリンク情報生成手段によって生成され、
前記リンク情報生成手段は、生成したリンク情報を用い
て各イベント間の相関関係を示すイベントリンクテーブ
ルを作成するものである。

【００１３】また、請求項３に係る可変速信号再生装置
は、請求項１または２に記載の可変速信号再生装置にお
いて、前記データ信号の特徴を示す情報ラベルは、前記
情報ラベルを有するイベントの重要度を示すイベント重
要度をさらに有し、前記イベント重要度に応じてイベン
トの伸縮率を決定する伸縮制御手段をさらに備えたもの
である。

【００１４】また、請求項４に係る可変速信号再生装置
は、請求項３に記載の可変速信号再生装置において、前
記伸縮制御手段は、イベントの重要度を示すイベント重
要度に対する閾値を算出して、前記イベント重要度およ
び前記閾値から各イベントの伸縮率を決定するものであ
る。

【００１５】また、請求項５に係る可変速信号再生装置
は、請求項３に記載の可変速信号再生装置において、前
記伸縮制御手段は、イベントの重要度を示すイベント重
要度に応じた伸縮率を算出して、前記イベント重要度お
よび前記伸縮率から各イベントの伸縮率を決定するもの
である。

【００１６】また、請求項６に係る可変速信号再生装置
は、請求項１または２に記載の可変速信号再生装置にお
いて、各イベントにおけるデータ信号の再生時刻のどの
点に基準点を設けるかを決定する基準点決定手段を備
え、前記イベント制御手段は、前記基準点に基づいて、
イベント間の相関関係を保ちながら所望の再生速度で前
記ストリーム信号を再生するよう各イベントのデータ信
号の再生時刻を決定するものである。

【００１７】また、請求項７に係る可変速信号再生装置
は、請求項６に記載の可変速信号再生装置において、前
記基準点決定手段は、データ信号の再生開始時刻、再生
終了時刻、および再生開始時刻と再生終了時刻の両方の
いずれかに基準点を設けるものである。

【００１８】また、請求項８に係る可変速信号再生方法
は、連続したストリーム信号を所定の規則で時間軸方向
に分割して生成されたデータ信号、および該データ信号
の特徴を示す情報ラベルを一組としたイベントから、前
記情報ラベルのみを抽出する情報ラベル抽出ステップ
と、前記情報ラベル抽出ステップによって抽出された情
報ラベルと、前記情報ラベルを用いて作成された、異な
るストリーム信号の各イベント間の相関関係を示すイベ
ントリンクテーブルとを用いて、イベント間の相関関係
を保ちながら所望の再生速度で前記ストリーム信号を再
生するよう各イベントのデータ信号の再生時刻を決定す
るイベント制御ステップと、前記イベント制御ステップ
によって決定された再生時刻にデータ信号を再生するよ
う、該データ信号を伸縮処理して出力する伸縮／出力処
理ステップと、を有し、前記データ信号の特徴を示す情
報ラベルは、前記データ信号の再生時刻を示す再生時間
情報と、前記情報ラベルを有するイベントのイベント番
号と、前記情報ラベルを有するイベントと他のストリー
ム信号のイベントとの相関関係を示すリンク情報と、を
有するものである。

【００１９】また、請求項９に係る可変速信号再生方法
は、請求項８に記載の可変速信号再生方法において、前
記リンク情報は、前記情報ラベル抽出ステップによって
抽出された情報ラベルの再生時間情報と、一イベントと
他のイベントとの相関関係の有無を決定するための規定
値とを用いて、異なるストリーム信号のイベントとの相
関関係を示すリンク情報を全ストリーム信号の各イベン
トに対して生成するリンク情報生成ステップによって生
成され、前記リンク情報生成ステップは、生成したリン
ク情報を用いて各イベント間の相関関係を示すイベント
リンクテーブルを作成するイベントリンクテーブル作成
ステップを含むものである。

【００２０】また、請求項１０に係る可変速信号再生方
法は、請求項８または９に記載の可変速信号再生方法に
おいて、前記データ信号の特徴を示す情報ラベルは、前
記情報ラベルを有するイベントの重要度を示すイベント
重要度をさらに有し、前記イベント重要度に応じてイベ
ントの伸縮率を決定する伸縮制御ステップをさらに有す
るものである。

【００２１】また、請求項１１に係る可変速信号再生方
法は、請求項１０に記載の可変速信号再生方法におい
て、前記伸縮制御ステップは、イベントの重要度を示す
イベント重要度に対する閾値を算出して、前記イベント
重要度および前記閾値から各イベントの伸縮率を決定す
るものである。

【００２２】また、請求項１２に係る可変速信号再生方
法は、請求項１０に記載の可変速信号再生方法におい
て、前記伸縮制御ステップは、イベントの重要度を示す
イベント重要度に応じた伸縮率を算出して、前記イベン
ト重要度および前記伸縮率から各イベントの伸縮率を決
定するものである。

【００２３】また、請求項１３に係る可変速信号再生方
法は、請求項８または９に記載の可変速信号再生方法に
おいて、各イベントにおけるデータ信号の再生時刻のど
の点に基準点を設けるかを決定する基準点決定ステップ
を有し、前記イベント制御ステップは、前記基準点に基
づいて、イベント間の相関関係を保ちながら所望の再生
速度で前記ストリーム信号を再生するよう各イベントの
データ信号の再生時刻を決定するものである。

【００２４】また、請求項１４に係る可変速信号再生方
法は、請求項１３に記載の可変速信号再生方法におい
て、前記基準点決定ステップは、データ信号の再生開始
時刻、再生終了時刻、および再生開始時刻と再生終了時
刻の両方のいずれかに基準点を設けるものである。

【００２５】さらに、請求項１５に係るコンピュータに
より読み取り可能な記録媒体は、請求項８、９、１０、
１１、１２、１３または１４に記載の可変速信号再生方
法をコンピュータに実行させるためのプログラムとして
記録したものである。

【００２６】本発明に係る可変速信号再生装置、可変速
信号再生方法および記録媒体では、情報ラベル抽出手段
（情報ラベル抽出ステップ）において、連続したストリ
ーム信号を所定の規則で時間軸方向に分割して生成され
たデータ信号、および該データ信号の特徴を示す情報ラ
ベルを一組としたイベントから情報ラベルのみを抽出
し、イベント制御手段（イベント制御ステップ）におい
て、情報ラベル抽出手段（情報ラベル抽出ステップ）に
よって抽出された情報ラベルと、情報ラベルを用いて作
成された異なるストリーム信号の各イベント間の相関関
係を示すイベントリンクテーブルとを用いて、イベント
間の相関関係を保ちながら所望の再生速度でストリーム
信号を再生するよう各イベントのデータ信号の再生時刻
を決定し、伸縮／出力処理手段（伸縮／出力処理ステッ
プ）において、イベント制御手段（イベント制御ステッ
プ）によって決定された再生時刻にデータ信号を再生す
るよう、該データ信号を伸縮処理し出力している。な
お、情報ラベルは、データ信号の再生時刻を示す再生時
間情報と、該情報ラベルを有するイベントのイベント番
号と、該情報ラベルを有するイベントと他のストリーム
信号のイベントとの相関関係を示すリンク情報とを有す
るものである。

【００２７】また、請求項２に係る可変速信号再生装
置、請求項９に係る可変速信号再生方法および請求項１
５に係る記録媒体では、情報ラベル抽出手段（情報ラベ
ル抽出ステップ）によって抽出された情報ラベルの再生
時間情報と、一イベントと他のイベントとの相関関係の
有無を決定するための規定値とを用いて、リンク情報生
成手段（リンク情報生成ステップ）において、異なるス
トリーム信号のイベントとの相関関係を示すリンク情報
を全ストリーム信号の各イベントに対して生成し、ま
た、イベントリンクテーブル作成ステップにおいて、生
成したリンク情報を用いて各イベント間の相関関係を示
すイベントリンクテーブルを作成している。

【００２８】したがって、可変速再生のためにデータ信
号を伸縮処理して再生時刻を変えた場合においても、イ
ベントの相関関係が崩れて再生内容が前後することなく
データ信号を可変速再生することができる。特に高速再
生した場合、利用者は短時間で正確に再生内容を知るこ
とができる。このため、例えば、会議に遅れて到着した
場合においても、利用者は会議の流れを短時間で正確に
理解することができる。

【００２９】また、請求項３に係る可変速信号再生装
置、請求項１０に係る可変速信号再生方法および請求項
１５に係る記録媒体では、情報ラベルが、該情報ラベル
を有するイベントの重要度を示すイベント重要度をさら
に有し、伸縮制御手段（伸縮制御ステップ）において、
イベント重要度に応じてイベントの伸縮率を決定してい
る。

【００３０】特に、請求項４に係る可変速信号再生装
置、請求項１１に係る可変速信号再生方法および請求項
１５に係る記録媒体では、伸縮制御手段（伸縮制御ステ
ップ）において、イベントの重要度を示すイベント重要
度に対する閾値を算出して、イベント重要度および閾値
から各イベントの伸縮率を決定している。また、請求項
５に係る可変速信号再生装置、請求項１２に係る可変速
信号再生方法および請求項１５に係る記録媒体では、伸
縮制御手段（伸縮制御ステップ）において、イベントの
重要度を示すイベント重要度に応じた伸縮率を算出し
て、イベント重要度および伸縮率から各イベントの伸縮
率を決定している。

【００３１】したがって、意味的に重要な内容のイベン
トを優先的に再生して、意味的に重要な内容を持たない
イベントは再生しないまたは短縮して再生することによ
り、意味的に重要な内容のイベントの欠落を回避しなが
ら可変速再生することができる。特に、高速再生した場
合、利用者は要点をおさえつつ短時間で再生内容を知る
ことができる。

【００３２】さらに、請求項６に係る可変速信号再生装
置、請求項１３に係る可変速信号再生方法および請求項
１５に係る記録媒体では、基準点決定手段（基準点決定
ステップ）において、各イベントにおけるデータ信号の
再生時刻のどの点に基準点を設けるかを決定し、イベン
ト制御手段（イベント制御ステップ）において、イベン
ト間の相関関係を保ちながら所望の再生速度で前記スト
リーム信号を再生するよう各イベントのデータ信号の再
生時刻を、基準点に基づき決定している。

【００３３】特に、請求項７に係る可変速信号再生装
置、請求項１４に係る可変速信号再生方法および請求項
１５に係る記録媒体では、基準点決定手段（基準点決定
ステップ）において、データ信号の再生開始時刻、再生
終了時刻、および再生開始時刻と再生終了時刻の両方の
いずれかに基準点を設けることが望ましい。

【００３４】したがって、可変速再生のためにデータ信
号を伸縮処理して再生時刻を変えた場合においても、各
基準点の時間軸上における前後関係を崩さずに再生時刻
を制御することができるため、再生内容が前後すること
なくデータ信号を可変速再生することができる。特に高
速再生した場合、利用者は短時間で正確に再生内容を知
ることができ、低速再生した場合、利用者は内容を理解
しながら再生を進めることができる。

【００３５】

【発明の実施の形態】以下、本発明の可変速信号再生装
置、可変速信号再生方法および記録媒体の実施の形態に
ついて、〔第１の実施形態〕、〔第２の実施形態〕、
〔第３の実施形態〕の順に図面を参照して詳細に説明す
る。なお、各実施形態の説明では、本発明に係る可変速
信号再生装置および可変速信号再生方法について詳述す
るが、本発明に係る記録媒体については、可変速信号再
生方法を実行させるためのプログラムを記録した記録媒
体であることから、その説明は以下の可変速信号再生方
法の説明に含まれるものである。

【００３６】まず、本発明に係る実施形態においては、
映像や音声等を再生することができる情報の集まりであ
る信号（以下、一種類の連続した信号をストリームとい
う）が入力され、各信号はイベントというある意味を持
った区間の単位に時間軸方向で区切られる。イベントと
は、音声信号の場合は会話の一発言、また、映像信号の
場合は一シーンなどを一単位とするものである。

【００３７】より詳しくは、信号が音声信号である場
合、図１に示すように、音声信号は有音か無音かによっ
て区切られ、各有音部分または各無音部分が一イベント
とされる。例えば、音声信号の内容が会議などで会話し
ている話者一人の発言である場合、音声信号を会話の発
言の開始点と終了点で区切り、その開始点から終了点ま
での区間を一イベントとし、また、終了点から次の発言
の開始点までの区間を一イベントとする。

【００３８】このようにしてイベント単位に区切られた
信号は、イベントごとに信号の特徴が抽出され、再生時
間情報やイベント番号を含む情報ラベルがサブコードと
して各イベントの実際の音声信号であるデータ信号にそ
れぞれ付加される。すなわち、図２に示すように、一イ
ベントの信号と一イベントの信号に付加された情報ラベ
ルとの組が入力データとして記録媒体に記録される。以
下、入力データのデータ信号部分をデータ信号部と称
し、情報ラベル部分を情報ラベル部と称す。なお、再生
時間情報は、データ信号の再生を開始する時間軸上の時
刻を示す再生開始時刻と、データ信号の再生を終了する
時間軸上の時刻を示す再生終了時刻とを含む情報であ
り、イベント番号は、ストリームが開始されてからの連
続するイベントの通し番号であり、ストリームの中で一
意に決定されている。

【００３９】なお、図２に示した例では、情報ラベル部
がデータ信号部のヘッダ情報として付加されているが、
データ信号部のヘッダ情報としてではなく、別の記録媒
体に記録されていても良い。また、データ信号部は入力
信号として与えられる信号であり、その単位はイベント
単位でも、記録媒体に記録される最小の単位でも構わな
いが、一データ信号部の中に複数のイベントは存在しな
い。

【００４０】次に、複数のストリームが存在して、例え
ば質問に対する回答などのように、各ストリームのイベ
ント単位に区切られた信号（以下、単にイベントと称
す）が互いに相関関係を有する場合、あるストリームの
イベントが他のストリームのイベントと意味的な相関関
係があるか判定され、相関関係があるイベントのリンク
情報が生成される。以下、リンク判定およびリンク情報
の生成処理について、図３を参照して説明する。図３
は、本発明に係る可変速信号再生装置におけるリンク判
定およびリンク情報の生成に関する部分を示すブロック
構成図である。

【００４１】まず、可変速信号再生装置１０は、それぞ
れ異なるストリームを記録した記録媒体１と、記録媒体
から読み出した入力データから情報ラベル部を抽出する
情報ラベル抽出部２０１とを備え、さらにリンク情報入
力系２０６と、特許請求の範囲のリンク情報生成手段に
該当するリンク情報生成部２０７とを備えている。な
お、一記録媒体と一情報ラベル抽出部との組を一入力系
１０１とする。

【００４２】リンク情報入力系２０６は、所定の時間情
報である規定値Ｔ_lkをリンク情報生成部２０７に供給す
るものである。また、リンク情報生成部２０７は、例え
ば、記録媒体１に記録されているデータ信号が音声信号
である場合、あるイベントの再生開始時刻から規定値Ｔ
_lk以内に他の入力系において発生したイベントがあると
き、これら２つのイベントは意味的に対応関係がある、
すなわちリンクするとみなしてリンク情報を生成するも
のである。

【００４３】次に、ある入力系１０１−Ｋの記録媒体１
に記録されているストリームＳ_Kが有するイベントのリ
ンク情報を生成する処理について、図４および図５を参
照して説明する。なお、図４はリンク情報生成処理のメ
インルーチンを説明するフローチャートであり、図５は
図４に示すメインルーチンのサブルーチンを説明するフ
ローチャートである。

【００４４】該リンク情報生成処理を行うためには、入
力系１０１−Ｋの記録媒体１に記録されているストリー
ムＳ_Kが有する全イベントに対して、他のストリームに
リンクするイベントがあるかどうかを、再生開始時刻を
用いて順に検索する。以下、入力系１０１−Ｋのストリ
ームＳ_Kにおいて検索するイベント番号を"Ｌ"とする。

【００４５】まず、ステップＳ１０１では、イベント番
号"Ｌ"を初期値として"０"に設定する。次に、ステップ
Ｓ１０３では、記録媒体１から現在のイベント番号"Ｌ"
のイベントＩ_Lを読み込み、該イベントＩ_Lの情報ラベル
から再生開始時刻を調べる。次に、ステップＳ１０５で
は、入力系１０１−Ｋの以外の全入力系に対してリンク
するイベントが存在するかを順に判定して、リンクする
イベントがあればリンク情報を生成する。

【００４６】該ステップＳ１０５は、サブルーチンとし
て、図５のフローチャートに示す処理を行う。まずステ
ップＳ１５１において、規定値Ｔ_lkをリンク情報入力系
２０６から得る。次に、ステップＳ１５３では、他の入
力系１０１−Ｍの記録媒体１に記録されているストリー
ムＳ_Mのストリーム番号"Ｍ"を、初期値として"０"に設
定する。次に、ステップＳ１５５では、入力系１０１−
ＭのストリームＳ_Mの各イベントとストリームＳ_Kのイベ
ントＩ_Lとがリンクするかを、規定値Ｔ_lkを用いて判定
する。次に、ステップＳ１５７では、リンクするイベン
トの情報ラベル部から該イベントの再生時間情報および
イベント番号を得て、リンク情報を生成する。このと
き、リンクするイベントが存在しない場合は、何も生成
しない。

【００４７】次に、ステップＳ１５９では、全入力系の
ストリームに対して、ステップＳ１５５およびＳ１５７
の処理が終了してかを判定し、終了していなければ（Ｎ
ｏ）、ステップＳ１６１に進んでストリーム番号"Ｍ"を
1つインクリメント（Ｍ＝Ｍ＋１）した後にステップＳ
１５５に戻り、終了していれば（Ｙｅｓ）図４に示すメ
インルーチンに戻る。

【００４８】次に、ステップＳ１０７では、入力系１０
１−Ｋの全イベントに対してリンクの判定およびリンク
情報の生成が終了したかを判定し、終了していなければ
（Ｎｏ）ステップＳ１０９に進んでイベント番号"Ｌ"を
１つインクリメント（Ｌ＝Ｌ＋１）した後にステップＳ
１０３に戻り、終了していれば（Ｙｅｓ）リンク判定お
よびリンク情報の生成処理を終了する。

【００４９】次に、ステップＳ１５７において生成され
るリンク情報の構成と、情報ラベル部への該リンク情報
の付加について説明する。例えば、図６に示すように、
ストリームＡおよびストリームＢの２つのストリームが
存在し、ストリームＢの話者による「今日の天気はどう
?」との質問に対して、ストリームＡの話者が「曇って
いるみたい」と答えたとする。この会話において、スト
リームＢの質問「今日の天気はどう?」をイベントＢ−
１とし、ストリームＡの応答「曇っているみたい」をイ
ベントＡ−２とする。また、イベントＡ−２に対して、
ストリームＢの話者が「夕方に雨は降るかしら?」と質
問して、ストリームＡの話者が「たぶん」と答えたとす
る。この会話において、ストリームＢの質問「夕方に雨
は降るかしら?」をイベントＢ−３とし、ストリームＡ
の応答「たぶん」をイベントＡ―４とする。

【００５０】このように各ストリームをイベントとして
区切った場合、図７に示すように、イベントＢ−１に対
してイベントＡ―２がリンクし（Ｂ−１→Ａ−２）、イ
ベントＡ−２に対してイベントＢ−３がリンクし（Ａ−
２→Ｂ−３）、イベントＢ−３に対してイベントＡ−４
がリンクしている（Ｂ−３→Ａ−４）と判定され、各イ
ベントに対して、上述したリンク情報の生成処理が行わ
れる。

【００５１】リンク情報は、当該イベントに対して前に
リンクしている（時間軸上で前に再生される）イベント
（以下、前リンクイベントと称す）のイベント番号と、
前リンクイベントの再生開始時刻と当該イベントの再生
開始時刻との差を示す前リンク時間関係と、当該イベン
トに対して後にリンクしている（時間軸上で後に再生さ
れる）イベント（以下、後リンクイベントと称す）のイ
ベント番号と、後リンクイベントの再生開始時刻と当該
イベントの再生開始時刻との差を示す後リンク時間関係
とから構成されている。

【００５２】このようにして生成されたリンク情報は、
該当するイベントの情報ラベル部に付加される。例えば
イベントＡ−２の情報ラベルには、図８に示すように、
イベントＡ−２の再生開始時刻ＴＳ_A2および再生終了時
刻ＴＥ_A2を含む再生時間情報と、イベント番号Ａ−２
と、前リンクイベントのイベント番号Ｂ−１、前リンク
時間関係３８０（ミリ秒）、後リンクイベントのイベン
ト番号Ｂ−３および後リンク時間関係４５０（ミリ秒）
を含むリンク情報とが含まれる。

【００５３】同様に、他のイベントの情報ラベル部にも
リンク情報が付加されるが、このとき同時に、図９に示
すような、全入力系のストリームが有するイベントのリ
ンク状況を示すイベントリンクテーブルが、各イベント
の情報ラベル部から生成される。該イベントリンクテー
ブルには、各イベントに対して、イベント番号、前リン
クイベントのイベント番号、前リンク時間関係、後リン
クイベントのイベント番号および後リンク時間関係がそ
れぞれ対応したテーブルであり、下記に説明するが、異
なるストリームのイベント間のリンク状態を保ちながら
イベントを伸縮してイベントの再生時刻を制御するとき
に利用される。なお、イベントリンクテーブル２は、信
号再生実行前にリンク情報から新たに作成しても良い。

【００５４】次に、内容的に相関関係を有する複数スト
リームの信号に対して、異なるストリームのイベント間
のリンク状態を保ちながら信号を伸縮処理して可変速再
生する可変速信号再生装置および可変速信号再生方法の
実施形態について説明する。

【００５５】〔第１の実施形態〕図１０は、本発明の第
１の実施形態に係る可変速信号再生装置を示すブロック
構成図である。同図において、本実施形態の可変速信号
再生装置は、記録媒体１と、特許請求の範囲の情報ラベ
ル抽出手段に該当する情報ラベル抽出部２０１と、イベ
ント制御手段に該当する同期制御部２０２と、再生情報
入力系２０３と、伸縮／出力処理手段に該当する伸縮処
理部２０４および信号出力処理部２０５とを備えて構成
されている。

【００５６】まず、記録媒体１は、実際の映像や音声等
の信号であるデータ信号部と該信号の特徴が記述された
情報ラベル部とを含むイベントの集合体である一ストリ
ームの入力データを記憶している。また、情報ラベル抽
出部２０１は、記憶媒体１から読み出した入力データか
ら各イベントの情報ラベルを抽出して同期制御部２０２
に入力し、データ信号を伸縮処理部２０４に入力する。

【００５７】また、再生情報入力系２０３は、信号の再
生速度を決定する情報（以下、再生速度情報と称す）を
同期制御部２０２に供給している。また、同期制御部２
０３は、情報ラベル抽出部２０１によって抽出された各
イベントの情報ラベルと、再生情報入力系２０３から供
給された再生速度情報とから、各ストリームのイベント
間のリンク状態を保ちながら再生速度情報によって示さ
れた再生速度で信号が再生されるよう再生時刻を制御し
て、イベントの伸縮方法を決定する。

【００５８】例えば、図６に示すように、ストリームＡ
およびストリームＢの２つのストリームが存在し、イベ
ントＢ−１に対してイベントＡ−２が時間関係ｔ１（ミ
リ秒）でリンクしている（Ｂ−１→Ａ−２）とき、図１
１に示すように、再生結果がイベントＡ−２→イベント
Ｂ−１とならないように設定された規定値Ｔ（ミリ秒）
が再生時のイベントＢ−１とイベントＡ−２との新たな
時間関係となるよう、イベントＡ−２の一つ前に存在す
るイベントＡ−１の再生時間を決定する。すなわち、イ
ベントＢ−１の再生開始から規定値Ｔ（ミリ秒）後にイ
ベントＡ−２の再生が開始されるようイベントＡ−２の
再生開始時刻を決定すると、イベントＡ−１の再生終了
時刻が自動的に決定されるため、イベントＡ−１の伸縮
方法が決定される。

【００５９】なお、規定値Ｔは０以上の値を取り、例え
ば、再生情報入力系２０３から供給される再生速度情報
によって決定され、再生速度や伸縮状況等に応じて動的
に変化するものであっても良い。

【００６０】例えば、図１２に示すように、イベントＢ
−１に対してイベントＡ−２がリンクし、イベントＡ−
２に対してイベントＢ−２がリンクしている（Ｂ−１→
Ａ−２→Ｂ−２）とき、規定値Ｔを０とすると、イベン
トＢ−２の再生開始時刻がイベントＡ−２の再生開始時
刻、すなわちイベントＢ−１の再生開始時刻と同じにな
ってしまうため、このような場合、同期制御部２０２
は、イベントＡ−２とイベントＢ−２の時間関係を規定
値Ｔとはせずに、イベントＢ−１の再生終了後にイベン
トＢ−２の再生が開始されるよう規定値ＴをＴ′とす
る。

【００６１】このように、同期制御部２０２は、あるイ
ベントＩ_Lに対して他のストリームのイベントＩ_Xが時間
関係ｔでリンクしているとき、イベントＩ_Lとイベント
Ｉ_Xとの順序関係を保ちながら、かつイベントＩ_Lとイベ
ントＩ_Xとの新たな時間関係が規定値Ｔとなるよう、イ
ベントＩ_Xの一つ前に存在するイベントＩ_X-1の再生時間
を伸縮して再生するという伸縮方法を決定して、該伸縮
方法を示す信号を伸縮処理部２０４に供給する。また、
リンクするイベントが存在しない場合、同期制御部２０
２はイベントの伸縮を行わない方法を決定する。

【００６２】また、伸縮処理部２０４は、同期制御部２
０２から供給された伸縮方法を示す信号に基づいて、情
報ラベル抽出部２０１から入力されたデータ信号に対す
る伸縮処理を各イベントに対して行い、出力信号を生成
する。このとき、同期制御部２０２から供給された信号
が伸縮を行わないという信号であれば、伸縮処理を行わ
ない。さらに、信号出力処理部２０５は、伸縮処理部２
０４によって伸縮／生成された一ストリームの出力信号
を出力する。

【００６３】図１３に、イベントＢ−１→イベントＡ−
２→イベントＢ−３→イベントＡ−４→…とリンクした
図６に示した信号に対して、同期制御部２０２が各スト
リームのイベント間の再生時刻に関する相関関係を保ち
ながら各イベントの再生時刻を制御して高速再生した結
果を示す。

【００６４】本実施形態においては、一ストリームの入
力データを記録する記録媒体と情報ラベル抽出部との組
を入力系１０１とし、伸縮処理部２０４と信号出力処理
部２０５との組を出力系１０２とする。図１０に示す本
実施形態の可変速信号再生装置１００では、入力系１０
１および出力系１０２をそれぞれＮ（Ｎ≧１）個備えて
いる。但し、各入力系および各出力系の構成は同一であ
る。

【００６５】なお、記録媒体１は各入力系にそれぞれ具
備されている必要はなく、複数の入力系が一つの記録媒
体を共有したり、可変速信号再生装置全体で一つだけを
具備していても良い。また、各出力系の伸縮処理部２０
４で伸縮／生成された出力信号を合成して、一つの信号
として信号出力処理部２０５から出力しても良い。

【００６６】次に、本実施形態に係る可変速信号再生装
置１００が行う可変速信号再生方法について、図１４〜
図１６を参照して説明する。なお、図１４は本実施形態
に係る可変速信号再生方法のメインルーチンを説明する
フローチャートであり、図１５は図１４に示すメインル
ーチンのサブルーチンを説明するフローチャートであ
り、図１６は図１５に示すサブルーチンのサブルーチン
を説明するフローチャートである。

【００６７】以下、可変速信号再生装置１００は、Ｎ個
（Ｎ≧１）の入力系１０１および出力系１０２を有し、
かつＮ種類のストリームが各入力系に入力されているも
のとし、Ｋ番目（１≦Ｋ≦Ｎ）の入力系１０１−Ｋに記
録されているストリームに対して処理を行うものとす
る。

【００６８】まず、図１４において、ステップＳ２０１
では、初期設定としてＫ＝１に設定する。次に、ステッ
プＳ２０３では、入力系１０１−Ｋが有する記録媒体１
に記録されたストリームからイベントを順に読み出し
て、情報ラベル抽出部２０１においてイベントをデータ
信号部と情報ラベル部とに分割する。次に、ステップＳ
２０５では、異なるストリームのイベント間のリンク状
態を保ちながら伸縮方法を決定するために、図１５に示
すサブルーチンに移行する。同図では、入力系１０１−
Ｋのイベント番号"Ｌ"のイベントＩ_Lに対する同期制御
部２０２による伸縮方法決定処理について説明する。

【００６９】図１５におけるステップＳ２３１では、入
力系１０１−Ｋの情報ラベル抽出部２０１からイベント
Ｉ_Lの情報ラベルを読み込む。次に、ステップＳ２３３
では、図９に示すようなイベントリンクテーブルが生成
されているかを判別し、生成されていなければステップ
Ｓ２３５に進んで読み込んだ情報ラベルからイベントリ
ンクテーブルを生成し、ステップＳ２３７に進む。ま
た、イベントリンクテーブルが生成済みであれば、ステ
ップＳ２３７に進む。ステップＳ２３７では、イベント
Ｉ_Lの再生開始時刻を決定して、イベントＩ_Lの一つ前に
存在するイベントＩ_L-1の伸縮方法を決定するために、
図１６に示すサブルーチンに移行する。

【００７０】図１６におけるステップＳ２５１では、イ
ベントリンクテーブルを参照して、イベントＩ_Lが他の
ストリームのイベントとリンクしているか判定する。該
ステップＳ２５１において、イベントＩ_Lがリンクする
イベントを持つと判定されればステップＳ２５３に進
み、リンクするイベントを持たないと判定されればステ
ップＳ２５５に進む。

【００７１】ステップＳ２５３では、イベントＩ_Lと該
イベントＩ_Lの一つ前に存在するイベントＩ_L-1との時間
関係が規定値ＴとなるようイベントＩ_Lの再生開始時刻
を決定する。また、ステップＳ２５５では、同期制御部
２０２によるイベントの再生時刻の制御は行われず、イ
ベントＩ_Lの再生開始時刻がイベントＩ_L-1の再生終了時
刻後となるよう、イベントＩ_Lの再生開始時刻を決定す
る。

【００７２】ステップＳ２５３またはステップＳ２５５
が終了するとステップＳ２５７に進み、決定された時刻
にイベントＩ_Lのデータ信号が再生されるようイベント
Ｉ_L-1の伸縮方法を決定する。ステップＳ２５７が終了
すると図１５に示したサブルーチンに戻る。ステップＳ
２３９では、決定されたイベントＩ_L-1の伸縮方法を出
力して、図１４に示したメインルーチンに戻る。

【００７３】ステップＳ２０７では、図１５および図１
６のサブルーチンにおいて決定された伸縮方法を示す信
号を出力系１０２−Ｋの伸縮処理部２０４に供給し、イ
ベントの伸縮処理を行う。次に、ステップＳ２０９で
は、入力系１０１−Ｋの入力データが全て処理されたか
を判定し、全て処理されていれば（Ｙｅｓ）ステップＳ
２１１に進んで、入力系の数"Ｎ"を１つデクリメント
（Ｎ＝Ｎ−１）した後にステップＳ２１３に進み、入力
データが全て処理されていなければ（Ｎｏ）ステップＳ
２１３に進む。

【００７４】ステップＳ２１３では、入力系の数"Ｎ"を
判定し、Ｎ＝１であればステップＳ２０３に戻って入力
系１０１−Ｋの処理を続け、Ｎ＞１であればステップＳ
２１５に進んで入力系の番号"Ｋ"をインクリメント（Ｋ
＝Ｋ＋１）した後にステップＳ２０３に戻って、次の入
力系１０１−Ｋ＋１（但し、Ｋ＝ＮのときはＫ＋１＝
１）の処理を行い、Ｎ＝０であれば本実施形態に係る可
変速信号再生方法のメインルーチンを終了する。

【００７５】以上説明したように、本実施形態の可変速
信号再生装置および可変速信号再生方法では、異なるス
トリームのイベント間の相関関係を保ちながらイベント
を伸縮処理しているため、内容が前後することなく信号
を可変速再生することができる。また、特に高速再生の
場合、利用者は短時間で正確に再生内容を知ることがで
きる。

【００７６】〔第２の実施形態〕図１７は、本発明の第
２の実施形態に係る可変速信号再生装置を示すブロック
構成図である。同図において、図１０（第１の実施形
態）と重複する部分には同一の符号を附して説明を省略
する。本実施形態の可変速信号再生装置２００は、第１
の実施形態の可変速信号再生装置１００が有する構成要
素に加えて、特許請求の範囲の伸縮制御手段に該当する
伸縮制御部２１１をさらに備えて構成されている。

【００７７】該伸縮制御部２１１は、再生情報入力系２
０３から供給された再生速度情報と、同期制御部２０２
から供給される伸縮情報とから、イベント重要度に応じ
たイベントの伸縮率を決定するものである。また、本実
施形態の同期制御部２０２は、その時点での実際の伸縮
結果を示す伸縮情報を算出する図示しない伸縮情報算出
部を含んでいる。

【００７８】なお、イベント重要度とは、そのイベント
のデータ信号の内容が意味的にどのくらい重要であるか
を定量的に示す情報であり、図１８に示すように、各イ
ベントの情報ラベル部に付加されている。該イベント重
要度は、音声信号の場合においては、例えば、有音／無
音、会話の内容、発言の時間、音声のレベル変化等から
決定される。

【００７９】図１９に示す例では、イベント重要度を１
０段階で評価して、重要度が最も高い場合を１０とし、
最も低い場合を１とし、無音と判定されたイベントのイ
ベント重要度には１を割り当て、発言時間が長く音声の
レベルが高いイベント程、より高いイベント重要度を割
り当てている。

【００８０】また、伸縮率とは、イベント単位に区切ら
れた信号を標準速度で再生したときの再生時間に対する
伸縮後の再生時間の比である。例えば、信号の再生時間
が半分になったときの圧縮率は５０％、倍になったとき
の圧縮率は２００％であるという。

【００８１】本実施形態によれば、伸縮率が１００％に
近いほどそのイベントの伸縮率が低いとされ、１００％
から離れるに従って伸縮率が高いとされる。また、意味
的に重要な内容のイベント重要度の高いイベントに対し
ては低い伸縮率で伸縮され、意味的に重要な内容を持た
ないイベント重要度の低いイベントに対しては高い伸縮
率で伸縮される。

【００８２】以下に、本実施形態に係る可変速信号再生
について説明する。本実施形態に係る可変速信号再生
は、（１）イベント重要度に対する閾値を設定してイベ
ントを間引き伸縮する第１の方法と、（２）イベント重
要度に応じて伸縮率を変えてイベントを伸縮する第２の
方法とがある。

【００８３】まず、第１の方法では、再生情報入力系２
０３から供給された再生速度情報から信号全体の伸縮率
を算出して、イベント重要度の閾値を設定する。なお、
標準速度での再生時間やイベント重要度の分布はストリ
ームごとに異なるので、閾値は動的に変化するものとす
る。

【００８４】該第１の方法の一実施例として、図２０に
は、ストリームＡおよびストリームＢの２つのストリー
ムが存在し、イベント重要度が１０段階に設定され、ス
トリームＡのイベントＡ−１のイベント重要度が１０、
イベントＡ−２のイベント重要度が９、イベントＡ−３
〜イベントＡ−６のイベント重要度が２であり、ストリ
ームＢのイベントＢ−１のイベント重要度が２、イベン
トＢ−２のイベント重要度が１、イベントＢ−３のイベ
ント重要度が４、イベントＢ−４のイベント重要度が
２、イベントＢ−５のイベント重要度が８、イベントＢ
−６のイベント重要度が９であり、閾値が５である例が
示されている。本実施例では、イベント重要度が５以上
のイベントを伸縮率１００％とし、５未満のイベントは
伸縮率０％として該イベントを間引き、出力信号を生成
している。

【００８５】また、第２の方法では、再生情報入力系２
０３から供給された再生速度情報から信号全体の伸縮率
を算出して、イベントごとの伸縮率を設定する。なお、
標準速度での再生時間やイベント重要度の分布はストリ
ームごとに異なるので、イベント重要度ごとの伸縮率は
動的に変化するものとする。

【００８６】該第２の方法の一実施例として、図２１に
は、図６（１６１）に示した実施例と全く同じストリー
ム、イベントおよびイベント重要度が示されているが、
第１の方法とは異なり、イベント重要度が１０のイベン
トの伸縮率を１００％、イベント重要度が９のイベント
の伸縮率を９０％、またイベント重要度が１のイベント
の伸縮率を１０％というように、イベント重要度の数値
によって段階的に伸縮率を設定して、該伸縮率に応じて
イベントを伸縮している。

【００８７】このように、伸縮制御部２１１は、各入力
系の情報ラベル部２０１において抽出されたイベント重
要度を含む情報ラベルと、再生情報入力系２０３から供
給された再生速度情報と、同期制御部２０２が有する伸
縮情報算出部が算出した伸縮情報とから、前記第１の方
法であれば閾値を計算してイベント重要度に対する伸縮
率を算出し、前記第２の方法であればイベント重要度ご
との伸縮率を算出して、これら算出された伸縮率を同期
制御部２０２に供給する。

【００８８】次に、本実施形態に係る可変速信号再生装
置２００が行う可変速信号再生方法について説明する。
なお、本実施形態に係る可変速信号再生方法のメインル
ーチンは、第１の実施形態に係る可変速信号再生方法の
メインルーチン（図１４）と略同様であるが、ステップ
Ｓ２０５のサブルーチンが第１の実施形態とは異なるた
め、以下、該サブルーチンについて図２２を参照して説
明する。なお、該サブルーチンは伸縮処理部２１１にお
ける処理である。

【００８９】同図において、まず、ステップＳ３０１で
は、情報ラベルを受け取り、情報ラベルに含まれている
再生時間情報から信号を標準速度で再生した時の再生時
間の総和Ｓを算出する。次に、ステップＳ３０３では、
再生情報入力系２０３から供給された再生速度情報が示
す再生速度ｗと再生時間の総和Ｓとから、ｗ倍速で信号
を再生したときの再生時間の総和Ｓｗ＝Ｓ／ｗを理論値
として算出する。

【００９０】次に、ステップＳ３０５では、同期制御部
２０２によって実際に伸縮処理が行われた後の再生時間
の総和Ｓｗ′を実測値として得る。次に、ステップＳ３
０７では、再生時間の総和Ｓｗ′（実測値）が再生時間
の総和Ｓｗ（理論値）に近づくよう伸縮率を決定して、
該サブルーチンを終了する。

【００９１】図２３に、再生速度ｗを２倍速（ｗ＝２）
としたときの、伸縮処理部２１１における処理の実施例
を説明する。本実施例では、それぞれ１〜１０のイベン
ト重要度が割り当てられた１０個のイベントを有する信
号を、標準速度で再生したときの再生時間の総和をＳと
する。ｗ＝２であるため、２倍速で信号を再生したとき
の理論値としての再生時間の総和Ｓ₂はＳ／２となる。

【００９２】次に、前記第１の方法で伸縮するとき、伸
縮処理部２１１が閾値を５と設定されたとすると、イベ
ント重要度が４以下のイベントに対しては伸縮率を０％
と決定され、イベント重要度が５以上のイベントに対し
ては伸縮率を１００％と決定される。したがって、イベ
ント重要度が４以下のイベントは間引きされ、出力信号
が生成される。また、前記第２の方法で伸縮するとき、
設定されたイベント重要度ごとの伸縮率に応じてイベン
トを伸縮して、出力信号が生成される。

【００９３】以上説明したように、本実施形態の可変速
信号再生装置および可変速信号再生方法では、イベント
重要度に応じて伸縮率を変えることによって、意味的に
重要な内容のイベントを優先的に再生して、意味的に重
要な内容を持たないイベントは再生しないまたは短縮し
て再生している。したがって、特に高速再生の場合、意
味的に重要な内容のイベントの欠落を回避しながら再生
することができるめ、利用者は要点をおさえつつ短時間
で正確に再生内容を知ることができる。

【００９４】〔第３の実施形態〕図２４は、本発明の第
３の実施形態に係る可変速信号再生装置を示すブロック
構成図である。同図において、図１０（第１の実施形
態）と重複する部分には同一の符号を附して説明を省略
する。本実施形態の可変速信号再生装置３００は、第１
の実施形態の可変速信号再生装置１００が有する構成要
素に加えて、特許請求の範囲の基準点決定手段に該当す
る基準点情報入力系２２１をさらに備えて構成されてい
る。

【００９５】該基準点情報入力系２２１は、イベントを
一連の信号として再生したときの時間軸上のどの時刻を
基準点とするかを示す基準点情報を、同期制御部２０２
に供給するものである。本実施形態では、該基準点を利
用してイベントの再生時刻を制御することによって、異
なるストリームのイベント間のリンク状態を保ちながら
信号を伸縮処理して可変速再生する。

【００９６】基準点とは、イベントを一連の信号として
再生したときの時間軸上における、各イベントの所定の
時刻であり、図２５にその一例を示す。該例では、図２
５の符号２０１に示すように、ストリームＡおよびスト
リームＢの２つのストリームが存在し、ストリームＡの
イベントＡ−１に対してストリームＢのイベントＢ−２
がリンクして（Ａ−１→Ｂ−１）おり、各イベントに基
準点が設けられている。

【００９７】このように、ストリームＡのイベントＡ−
１に対してストリームＢのイベントＢ−２がリンクして
いる（Ａ−１→Ｂ−１）ため、イベントＡ−１の基準点
はイベントＢ−１の基準点よりも時間軸上先でなければ
ならないが、この相関関係は、伸縮処理が行われても保
たれていなければならない。例えば、イベントＡ−１が
質問であり、イベントＢ−１がイベントＡ−１の質問に
対する回答である場合、図２５の符号２０３に示すよう
に、伸縮処理の結果、イベントＢ−１の再生開始時刻が
イベントＡ−１の再生開始時刻よりも時間軸上先になっ
てしまうと、質問（イベントＡ−１）よりも回答（イベ
ントＢ−１）が先に再生されてしまうこととなり、質疑
の順序が逆になってしまう。このようなとき、再生内容
の意味的な理解が困難になってしまう。

【００９８】このような状況を回避するため、図２５の
符号２０２に示すように、本実施形態では各イベントに
基準点を付加して、伸縮処理後も各基準点の時間軸上に
おける前後関係が崩れないように再生時刻を制御するこ
とによって、イベント間のリンク状態を保持している。

【００９９】本実施形態においては、イベントを一連の
信号として再生したとき、基準点を各イベントの（１）
再生開始時刻、（２）再生終了時刻、（３）再生開始時
刻および再生終了時刻に設ける３つの手法がある。以
下、図２５と同様に、２つのリンクされたイベントＡ−
１およびイベントＢ−１（Ａ−１→Ｂ−１）を例に、各
手法を各実施例として説明する。

【０１００】（実施例１）まず、基準点を各イベントの
再生開始時刻に設けた例について、図２６を参照して説
明する。イベントＡ−１における伸縮前の基準点を
Ｔ_A1、伸縮後の基準点をＴ′_A1とし、イベントＢ−１に
おける伸縮前の基準点をＴ_B1、伸縮後の基準点をＴ′_B1
とする。本実施例では、イベントＡ−１に対してイベン
トＢ−１がリンクしている（Ａ−１→Ｂ−１）ため、図
２６の符号２１１に示すように、イベントＡ−１の伸縮
前基準点Ｔ_A1はイベントＢ−１の伸縮前基準点Ｔ_B1より
も時間軸上先（Ｔ_A1＜Ｔ_B1）である。

【０１０１】本実施例では、このような相関関係を有し
たイベントを含む信号を可変速再生する際、伸縮処理後
もＡ−１→Ｂ−１のリンク状態を保つため、図２６の符
号２１２に示すように、伸縮後の基準点Ｔ′_A1および
Ｔ′_B1の時間的な前後関係がＴ′_A1≦Ｔ′_B1となるよう
イベントＢ−１の再生時刻を制御している。すなわち、
イベントＢ−１に対しては、Ｔ′_A1≦Ｔ′_B1の関係を保
つ範囲で再生開始時刻をずらすことができる。このよう
に、イベントＢ−１の再生開始時刻を時間軸上でイベン
トＡ−１の再生開始時刻まで早めているため、再生時間
を短縮することができる。

【０１０２】（実施例２）次に、基準点を各イベントの
再生終了時刻に設けた例について、図２７を参照して説
明する。イベントＡ−１における伸縮前の基準点を
Ｔ_A2、伸縮後の基準点をＴ′_A2とし、イベントＢ−１に
おける伸縮前の基準点をＴ_B2、伸縮後の基準点をＴ′_B2
とする。本実施例でも、実施例１と同様にイベントＡ−
１に対してイベントＢ−１がリンクしている（Ａ−１→
Ｂ−１）ため、図２７の符号２２１に示すように、イベ
ントＡ−１の伸縮前基準点Ｔ_A2はイベントＢ−１の伸縮
前基準点Ｔ_B2よりも時間軸上先（Ｔ_A2＜Ｔ_B2）である。

【０１０３】本実施例では、このような相関関係を有し
たイベントを含む信号を可変速再生する際、伸縮処理後
もＡ−１→Ｂ−１のリンク状態を保つため、図２７の符
号２２２に示すように、伸縮後の基準点Ｔ′_A2および
Ｔ′_B2の時間的な前後関係がＴ′_A2≦Ｔ′_B2となるよう
イベントＢ−１の再生時刻を制御している。すなわち、
イベントＢ−１に対しては、Ｔ′_A2≦Ｔ′_B2の関係を保
つ範囲で再生終了時刻をずらすことができる。

【０１０４】イベントＢ−１の再生時間がイベントＡ−
１の再生時間よりも短いとき、イベントＡ−１の再生開
始時刻とイベントＢ−１の再生開始時刻とを同時にして
しまうと、イベントＡ−１の再生が終了する前にイベン
トＢ−１の再生が終了してしまい、例えば、イベントＡ
−１が質問、イベントＢ−１がイベントＡ−１の質問に
対する回答である場合などにおいては、質問の内容が分
からないままに回答が終了してしまうなどの不具合が生
じる可能性があるが、本実施例のように、基準点を再生
終了時刻に設けて再生終了時刻を同時にすることによっ
て、イベントＡ−１をある程度再生した後にイベントＢ
−１を再生することができるため、利用者にとって再生
内容を理解しやすい可変速信号再生を実現することがで
きる。

【０１０５】（実施例３）最後に、基準点を各イベント
の再生開始時刻および再生終了時刻の２ヶ所に設けた例
について、図２８を参照して説明する。イベントＡ−１
における伸縮前の再生開始時刻および再生終了時刻の基
準点をそれぞれＴ_A31およびＴ_A32、伸縮後の再生開始時
刻および再生終了時刻の基準点をＴ′_A31およびＴ′_A32
とし、イベントＢ−１における伸縮前の再生開始時刻お
よび再生終了時刻の基準点をそれぞれＴ_B31および
Ｔ_B32、伸縮後の再生開始時刻および再生終了時刻の基
準点をＴ′ _B31およびＴ′_B32とする。

【０１０６】本実施例でも、実施例１と同様にイベント
Ａ−１に対してイベントＢ−１がリンクしている（Ａ−
１→Ｂ−１）ため、図２８の符号２３１に示すように、
イベントＡ−１の伸縮前再生時基準点Ｔ_A31はイベント
Ｂ−１の伸縮前再生時基準点Ｔ_B31よりも時間軸上先
（Ｔ_A31＜Ｔ_B31）であり、イベントＡ−１の伸縮前終了
時基準点Ｔ_A32はイベントＢ−１の伸縮前終了時基準点
Ｔ_B32よりも時間軸上先（Ｔ_A32＜Ｔ_B32）、であり、か
つ、イベントＡ−１の伸縮前終了時基準点Ｔ_A32はイベ
ントＢ−１の伸縮前再生時基準点Ｔ_B31よりも時間軸上
先（Ｔ_A32＜Ｔ_B31）である。

【０１０７】本実施例では、このような相関関係を有し
たイベントを含む信号を可変速再生する際、伸縮処理後
もＡ−１→Ｂ−１のリンク状態を保つため、図２８の符
号２３２に示すように、伸縮後の基準点の時間的な前後
関係がＴ′_A31＜Ｔ′_B31、Ｔ′_A32＜Ｔ′_B32かつＴ′
_A32≦Ｔ′_B31となるようイベントＢ−１の再生時刻を制
御している。すなわち、イベントＢ−１に対しては、
Ｔ′_A32≦Ｔ′_B31の関係を保つ範囲で再生開始時刻をず
らすことができる。

【０１０８】イベントＡ−１の再生終了時刻とイベント
Ｂ−１の再生開始時刻との間に時間的なブランクがある
場合、イベントＢ−１の再生開始時刻を早めることによ
って、再生時間を短縮することができる。また、イベン
トＡ−１およびイベントＢ−１の再生が重ならないた
め、利用者にとって再生内容を理解しやすい可変速再生
を実現することができる。

【０１０９】また、別の実施例として、実施例３のよう
に基準点を各イベントの再生開始時刻および再生終了時
刻の２ヶ所に設け、図２９の符号２４１に示すように、
伸縮前の時間軸上における基準点の前後関係がＴ_A31＜
Ｔ_B31、Ｔ_A32＜Ｔ_B32かつＴ_A3 ₂＞Ｔ_B31である場合、す
なわち、イベントＡ−１が終了する前にイベントＢ−１
が開始されてしまうような場合、図２９の符号２４２に
示すように、イベントＢ−１の再生開始時刻がイベント
Ａ−１の再生終了時刻よりも時間軸上後になる（Ｔ′
_A32≦Ｔ′_B31）よう再生時刻を制御することもできる。
したがって、例えば発言などのイベントが重なっている
場合などにおいて、同時に発言されたイベントが重なら
ないよう伸張することによって、利用者にとって各イベ
ントの再生内容を理解しやすい可変速再生を実現するこ
とができる。

【０１１０】なお、上記実施例の基準点付加方法は、イ
ベントの再生時間や状況に応じて、組み合わせて利用し
ても良い。

【０１１１】上記実施例を実施するために、同期制御部
２０２は、各入力系の情報ラベル抽出部２０１から情報
ラベルを受け取り、再生情報入力系２０３から供給され
た再生速度情報と、基準点情報入力系２２１から供給さ
れた時間軸上のどの時刻を基準点とするかを示す基準点
情報基準点情報と、情報ラベルに記述された各イベント
のリンク情報とから、異なるストリームのイベント間の
リンク状態を保ちながら再生速度情報が示す再生速度で
再生されるよう、再生時刻を制御制御している。

【０１１２】次に、本実施形態に係る可変速信号再生装
置３００が行う可変速信号再生方法について説明する。
なお、本実施形態に係る可変速信号再生方法のメインル
ーチンは第１の実施形態に係る可変速信号再生方法のメ
インルーチン（図１４）と略同様であり、図１５に示し
たステップＳ２０５のサブルーチンも略同様であるが、
図１６に示したステップＳ２３７のサブルーチンが第１
の実施形態とは異なるため、以下、該サブルーチンにつ
いて図３０を参照して説明する。なお、該サブルーチン
は、イベントの再生開始時刻に基準点を設けた実施例１
に関する同期制御部２０２における処理である。

【０１１３】図３０において、まず、ステップＳ４０１
では、イベントリンクテーブルを参照して、イベント番
号"Ｌ"のイベントＩ_Lが他のストリームのイベントとリ
ンクしているか判定する。該ステップＳ４０１におい
て、イベントＩ_Lがリンクするイベントを持つと判定さ
れればステップＳ４０３に進み、リンクするイベントを
持たないと判定されればステップＳ４０５に進む。

【０１１４】ステップＳ４０３では、イベントＡ−１に
おける伸縮後の基準点Ｔ′_A1とイベントＢ−１における
伸縮後の基準点Ｔ′_B1との時間的な前後関係がＴ′_A1≦
Ｔ′ _B1となるよう、イベントＢ−１の再生開始時刻を決
定する。また、ステップＳ４０５では、イベントＩ_Lの
再生開始時刻がイベントＩ_Lの一つ前に存在するイベン
トＩ_L-1の再生終了時刻後となるようイベントＩ_Lの再生
開始時刻を決定する。

【０１１５】ステップＳ４０３またはステップＳ４０５
が終了するとステップＳ４０７に進み、決定された時刻
にイベントＩ_Lのデータ信号が再生されるようイベント
Ｉ_L-1の伸縮方法を決定して、該サブルーチンを終了す
る。なお、他の実施例を実施するときには、ステップＳ
４０３の条件判定が変わる。

【０１１６】以上説明したように、本実施形態の可変速
信号再生装置および可変速信号再生方法では、各イベン
トに基準点を設け、該基準点を参照することによって異
なるストリームのイベント間の相関関係を保ちながらイ
ベントを伸縮処理しているため、内容が前後することな
く信号を可変速再生することができる。特に高速再生の
場合は短時間で正確に再生内容を知ることができ、低速
再生の場合は内容を理解しながら再生を進めることがで
きる。

【０１１７】

【発明の効果】以上説明したように、本発明の可変速信
号再生装置、可変速信号再生方法および記録媒体によれ
ば、情報ラベル抽出手段（情報ラベル抽出ステップ）に
おいて、連続したストリーム信号を所定の規則で時間軸
方向に分割して生成されたデータ信号、および該データ
信号の特徴を示す情報ラベルを一組としたイベントから
情報ラベルのみを抽出し、イベント制御手段（イベント
制御ステップ）において、情報ラベル抽出手段（情報ラ
ベル抽出ステップ）によって抽出された情報ラベルと、
情報ラベルを用いて作成された異なるストリーム信号の
各イベント間の相関関係を示すイベントリンクテーブル
とを用いて、イベント間の相関関係を保ちながら所望の
再生速度でストリーム信号を再生するよう各イベントの
データ信号の再生時刻を決定し、伸縮／出力処理手段
（伸縮／出力処理ステップ）において、イベント制御手
段（イベント制御ステップ）によって決定された再生時
刻にデータ信号を再生するよう、該データ信号を伸縮処
理し出力している。なお、情報ラベルは、データ信号の
再生時刻を示す再生時間情報と、該情報ラベルを有する
イベントのイベント番号と、該情報ラベルを有するイベ
ントと他のストリーム信号のイベントとの相関関係を示
すリンク情報とを有するものである。

【０１１８】また、情報ラベル抽出手段（情報ラベル抽
出ステップ）によって抽出された情報ラベルの再生時間
情報と、一イベントと他のイベントとの相関関係の有無
を決定するための規定値とを用いて、リンク情報生成手
段（リンク情報生成ステップ）において、異なるストリ
ーム信号のイベントとの相関関係を示すリンク情報を全
ストリーム信号の各イベントに対して生成し、また、イ
ベントリンクテーブル作成ステップにおいて、生成した
リンク情報を用いて各イベント間の相関関係を示すイベ
ントリンクテーブルを作成している。

【０１１９】したがって、可変速再生のためにデータ信
号を伸縮処理して再生時刻を変えた場合においても、イ
ベントの相関関係が崩れて再生内容が前後することなく
データ信号を可変速再生し得る可変速信号再生装置、可
変速信号再生方法および記録媒体を提供することができ
る。また、特に高速再生した場合、利用者は短時間で正
確に再生内容を知ることができため、例えば、会議に遅
れて到着した場合においても、利用者は会議の流れを短
時間で正確に理解することができる。

【図面の簡単な説明】

【図１】ストリームとイベントとの関係を示す説明図で
ある。

【図２】イベントのデータ構造を説明する説明図であ
る。

【図３】本発明に係る可変速信号再生装置におけるリン
ク判定およびリンク情報の生成に関する部分を示すブロ
ック構成図である。

【図４】リンク情報生成処理のメインルーチンを説明す
るフローチャートである。

【図５】図４に示すメインルーチンのサブルーチンを説
明するフローチャートである。

【図６】２つのストリームおよび各イベント間の相関関
係を示す説明図である。

【図７】図６に示すイベント間の相関関係を示す説明図
である。

【図８】リンク情報を含む一イベントのデータ構造を説
明する説明図である。

【図９】イベントリンクテーブルを示す説明図である。

【図１０】本発明の第１の実施形態に係る可変速信号再
生装置を示すブロック構成図である。

【図１１】伸縮前後の２つのストリームの一部を示す説
明図である。

【図１２】伸縮前後の２つのストリームの一部を示す説
明図である。

【図１３】伸縮後の２つのストリームを示す説明図であ
る。

【図１４】第１の実施形態に係る可変速信号再生方法の
メインルーチンを説明するフローチャートである。

【図１５】図１４に示すメインルーチンのサブルーチン
を説明するフローチャートである。

【図１６】図１５に示すサブルーチンのサブルーチンを
説明するフローチャートである。

【図１７】本発明の第２の実施形態に係る可変速信号再
生装置を示すブロック構成図である。

【図１８】イベント重要度を含む一イベントのデータ構
造を説明する説明図である。

【図１９】複数のイベントを有する一ストリームおよび
各イベントのイベント重要度を説明する説明図である。

【図２０】第２の実施形態の可変速信号再生方法に係る
第１の方法の実施例を示す説明図である。

【図２１】第２の実施形態の可変速信号再生方法に係る
第２の方法の実施例を示す説明図である。

【図２２】図１４に示すメインルーチンの第２の実施形
態に係るサブルーチンを説明するフローチャートであ
る。

【図２３】伸縮処理部における処理の実施例を説明する
説明図である。

【図２４】本発明の第３の実施形態に係る可変速信号再
生装置を示すブロック構成図である。

【図２５】伸縮前後の２つのイベントと基準点との関係
を説明する説明図である。

【図２６】第３の実施形態の可変速信号再生方法に係る
実施例１を説明する説明図である。

【図２７】第３の実施形態の可変速信号再生方法に係る
実施例２を説明する説明図である。

【図２８】第３の実施形態の可変速信号再生方法に係る
実施例３を説明する説明図である。

【図２９】第３の実施形態の可変速信号再生方法に係る
別の実施例を説明する説明図である。

【図３０】図１４に示すメインルーチンの第３の実施形
態に係るサブルーチンを説明するフローチャートであ
る。

【図３１】従来の可変速信号再生装置を示すブロック構
成図である。

【図３２】従来の可変速信号再生装置を用いて可変速再
生したときのイベントの状態を示す説明図である。

【符号の説明】

１記録媒体１０１入力系１０２出力系２０１情報ラベル抽出部２０２同期制御部２０３再生情報入力系２０４伸縮処理部２０５信号出力処理部２１１伸縮制御部２２１基準点情報入力系

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5C053 GA08 GA09 GB06 GB09 GB11 HA21 HA40 JA12 JA22 5D045 BA02 9A001 BB03 BB04 EE04 FF03 GG05 HH15 HH16 HH18 HH23 HH34 KK31 KK37 KK43 LL02

Claims

【特許請求の範囲】

【請求項１】連続したストリーム信号を所定の規則で
時間軸方向に分割して生成されたデータ信号、および該
データ信号の特徴を示す情報ラベルを一組としたイベン
トから、前記情報ラベルのみを抽出する情報ラベル抽出
手段と、前記情報ラベル抽出手段によって抽出された情報ラベル
と、前記情報ラベルを用いて作成された、異なるストリ
ーム信号の各イベント間の相関関係を示すイベントリン
クテーブルとを用いて、イベント間の相関関係を保ちな
がら所望の再生速度で前記ストリーム信号を再生するよ
う各イベントのデータ信号の再生時刻を決定するイベン
ト制御手段と、前記イベント制御手段によって決定された再生時刻にデ
ータ信号を再生するよう、該データ信号を伸縮処理して
出力する伸縮／出力処理手段と、を備え、前記データ信号の特徴を示す情報ラベルは、前記データ
信号の再生時刻を示す再生時間情報と、前記情報ラベル
を有するイベントのイベント番号と、前記情報ラベルを
有するイベントと他のストリーム信号のイベントとの相
関関係を示すリンク情報と、を有することを特徴とする
可変速信号再生装置。
【請求項２】前記リンク情報は、前記情報ラベル抽出
手段によって抽出された情報ラベルの再生時間情報と、
一イベントと他のイベントとの相関関係の有無を決定す
るための規定値とを用いて、異なるストリーム信号のイ
ベントとの相関関係を示すリンク情報を全ストリーム信
号の各イベントに対して生成するリンク情報生成手段に
よって生成され、前記リンク情報生成手段は、生成したリンク情報を用い
て各イベント間の相関関係を示すイベントリンクテーブ
ルを作成することを特徴とする請求項１記載の可変速信
号再生装置。
【請求項３】前記データ信号の特徴を示す情報ラベル
は、前記情報ラベルを有するイベントの重要度を示すイ
ベント重要度をさらに有し、当該可変速信号再生装置は、前記イベント重要度に応じ
てイベントの伸縮率を決定する伸縮制御手段をさらに備
えたことを特徴とする請求項１または２記載の可変速信
号再生装置。
【請求項４】前記伸縮制御手段は、イベントの重要度
を示すイベント重要度に対する閾値を算出して、前記イ
ベント重要度および前記閾値から各イベントの伸縮率を
決定することを特徴とする請求項３記載の可変速信号再
生装置。
【請求項５】前記伸縮制御手段は、イベントの重要度
を示すイベント重要度に応じた伸縮率を算出して、前記
イベント重要度および前記伸縮率から各イベントの伸縮
率を決定することを特徴とする請求項３記載の可変速信
号再生装置。
【請求項６】当該可変速信号再生装置は、各イベント
におけるデータ信号の再生時刻のどの点に基準点を設け
るかを決定する基準点決定手段を備え、前記イベント制御手段は、前記基準点に基づいて、イベ
ント間の相関関係を保ちながら所望の再生速度で前記ス
トリーム信号を再生するよう各イベントのデータ信号の
再生時刻を決定することを特徴とする請求項１または２
記載の可変速信号再生装置。
【請求項７】前記基準点決定手段は、データ信号の再
生開始時刻、再生終了時刻、および再生開始時刻と再生
終了時刻の両方のいずれかに基準点を設けることを特徴
とする請求項６記載の可変速信号再生装置。
【請求項８】連続したストリーム信号を所定の規則で
時間軸方向に分割して生成されたデータ信号、および該
データ信号の特徴を示す情報ラベルを一組としたイベン
トから、前記情報ラベルのみを抽出する情報ラベル抽出
ステップと、前記情報ラベル抽出ステップによって抽出された情報ラ
ベルと、前記情報ラベルを用いて作成された、異なるス
トリーム信号の各イベント間の相関関係を示すイベント
リンクテーブルとを用いて、イベント間の相関関係を保
ちながら所望の再生速度で前記ストリーム信号を再生す
るよう各イベントのデータ信号の再生時刻を決定するイ
ベント制御ステップと、前記イベント制御ステップによって決定された再生時刻
にデータ信号を再生するよう、該データ信号を伸縮処理
して出力する伸縮／出力処理ステップと、を有し、前記データ信号の特徴を示す情報ラベルは、前記データ
信号の再生時刻を示す再生時間情報と、前記情報ラベル
を有するイベントのイベント番号と、前記情報ラベルを
有するイベントと他のストリーム信号のイベントとの相
関関係を示すリンク情報と、を有することを特徴とする
可変速信号再生方法。
【請求項９】前記リンク情報は、前記情報ラベル抽出
ステップによって抽出された情報ラベルの再生時間情報
と、一イベントと他のイベントとの相関関係の有無を決
定するための規定値とを用いて、異なるストリーム信号
のイベントとの相関関係を示すリンク情報を全ストリー
ム信号の各イベントに対して生成するリンク情報生成ス
テップによって生成され、前記リンク情報生成ステップは、生成したリンク情報を
用いて各イベント間の相関関係を示すイベントリンクテ
ーブルを作成するイベントリンクテーブル作成ステップ
を含むことを特徴とする請求項８記載の可変速信号再生
方法。
【請求項１０】前記データ信号の特徴を示す情報ラベ
ルは、前記情報ラベルを有するイベントの重要度を示す
イベント重要度をさらに有し、当該可変速信号再生方法は、前記イベント重要度に応じ
てイベントの伸縮率を決定する伸縮制御ステップをさら
に有することを特徴とする請求項８または９記載の可変
速信号再生方法。
【請求項１１】前記伸縮制御ステップは、イベントの
重要度を示すイベント重要度に対する閾値を算出して、
前記イベント重要度および前記閾値から各イベントの伸
縮率を決定することを特徴とする請求項１０記載の可変
速信号再生方法。
【請求項１２】前記伸縮制御ステップは、イベントの
重要度を示すイベント重要度に応じた伸縮率を算出し
て、前記イベント重要度および前記伸縮率から各イベン
トの伸縮率を決定することを特徴とする請求項１０記載
の可変速信号再生方法。
【請求項１３】当該可変速信号再生方法は、各イベン
トにおけるデータ信号の再生時刻のどの点に基準点を設
けるかを決定する基準点決定ステップを有し、前記イベント制御ステップは、前記基準点に基づいて、
イベント間の相関関係を保ちながら所望の再生速度で前
記ストリーム信号を再生するよう各イベントのデータ信
号の再生時刻を決定することを特徴とする請求項８また
は９記載の可変速信号再生方法。
【請求項１４】前記基準点決定ステップは、データ信
号の再生開始時刻、再生終了時刻、および再生開始時刻
と再生終了時刻の両方のいずれかに基準点を設けること
を特徴とする請求項１３記載の可変速信号再生方法。
【請求項１５】請求項８、９、１０、１１、１２、１
３または１４に記載の可変速信号再生方法をコンピュー
タに実行させるためのプログラムとして記録したコンピ
ュータにより読み取り可能な記録媒体。