JP3648322B2

JP3648322B2 - Information supply system, information supply apparatus and output terminal

Info

Publication number: JP3648322B2
Application number: JP08414596A
Authority: JP
Inventors: 誠布谷
Original assignee: Brother Industries Ltd; Xing Inc
Current assignee: Brother Industries Ltd; Xing Inc
Priority date: 1996-04-05
Filing date: 1996-04-05
Publication date: 2005-05-18
Anticipated expiration: 2016-04-05
Also published as: JPH09275419A

Description

【０００１】
【発明の属する技術分野】
本発明は、オーディオ情報あるいはビデオ情報の少なくともいずれか一方とプライベート情報とを含む外部出力用情報を情報供給装置から出力端末に供給し、その出力端末にて外部出力用情報に基づく所定の外部出力処理をさせる技術に関し、特に情報圧縮が施されている情報の供給技術に関する。
【０００２】
【従来の技術および発明が解決しようとする課題】
従来より、映画やいわゆるカラオケ等のようにオーディオ情報あるいはビデオ情報の少なくともいずれか一方を備えるものについては、情報圧縮用符号化規格の一つであるＭＰＥＧ（Ｍoving Ｐicture Ｉmage Ｃoding Ｅxperts Ｇroupe）による情報圧縮がなされた状態で供給することが考えられている。このＭＰＥＧにおいてはプライベート情報があり、オーディオ情報やビデオ情報と同じように時刻管理情報をヘッダ部分に含む形式でパケット化されたプライベートパケットとして記憶しておくことができる。そのため、例えば映画であれば、翻訳した字幕をこのプライベート情報として供給することが考えられている。
【０００３】
しかしながら、例えば映画においては、もちろん場面に応じた音響効果が施されているのであるが、さらに照明による演出効果があればより一層楽しむことができる。例えば映画であれば、落ち着いたダンスの場面、火薬が爆発する激しい場面等に応じてその場面に近い照明環境を視聴している人に提供すればより一層の臨場感を与えることができる。同様にカラオケであっても照明による演出効果があればより一層楽しむことができる。
【０００４】
もちろん、これらは上記映画やカラオケに限定されることなく、近年のマルチメディア技術の発展に伴い、適用可能な範囲はますます拡大していくと思われる。さらには、照明環境だけではなく、その他の環境を制御することでさらにバーチャルリアリティ化することが可能である。
【０００５】
そこで、本発明はプライベート情報を例えば照明等の環境を制御するために用いることによって、オーディオあるいはビデオ情報を利用する者がより一層楽しめるようにした情報供給システム及びそのシステムに用いて有効な情報供給装置や出力端末を提供することを目的とする。
【０００６】
【課題を解決するための手段及び発明の効果】
上記目的を達成するためになされた請求項１に記載の発明は、オーディオ情報とプライベート情報とを含む外部出力用情報を情報供給装置から伝送路を介して出力端末に供給し、その出力端末にて前記外部出力用情報に基づく所定の外部出力処理をさせるようにした情報供給システムにおいて、前記情報供給装置は、前記オーディオ情報を、所定の情報圧縮用符号化規格に基づき、所定のアクセス・ユニット毎にいつ再生するかを示す時刻管理情報をヘッダ部分に含む形式でパケット化した状態で記憶しておく基本情報記憶手段と、前記プライベート情報を、前記オーディオ情報の出力に対応した環境形成手段制御用のパルス信号を出力させるため、パルス出力スタイル情報及びパルス周波数の管理情報を含めて前記所定の情報圧縮用符号化規格に基づいてパケット化した状態で記憶しておくプライベート情報記憶手段と、前記パケット化されているオーディオ情報とプライベート情報とを、プライベート情報がオーディオ情報よりも時間的に早い位置に配されるよう時系列に多重化してトランスポートストリームを生成する多重化手段とを備え、前記出力端末は、前記情報供給装置から供給されたトランスポートストリームを、オーディオ側とプライベート側のパケットに分離する分離手段と、該分離手段によって分離されたオーディオ側のパケットより前記時刻管理情報を読み出し、再生すべき所定の時刻になった場合に、該当するパケットのオーディオ情報を再生して、演奏音あるいは映像として出力する基本情報再生出力手段と、前記分離手段によって分離されたプライベート側のパケットを、前記パルス出力スタイル情報及びパルス周波数の管理情報に基づくと共に、前記基本情報再生出力手段において対応するオーディオ情報の再生タイミングに基づいて再生し、環境形成手段制御用のパルス信号として出力するパルス出力制御手段とを備えることを特徴とする情報供給システムである。
【０００７】
本発明の情報供給システムは、オーディオ情報とプライベート情報とを含む外部出力用情報を情報供給装置から伝送路を介して出力端末に供給し、その出力端末にて外部出力用情報に基づく所定の外部出力処理をさせるようにしたものである。
【０００８】
ここで、情報供給装置の基本情報記憶手段は、オーディオ情報を、所定の情報圧縮用符号化規格に基づき、所定のアクセス・ユニット毎にいつ再生するかを示す時刻管理情報をヘッダ部分に含む形式でパケット化した状態で記憶している。また、プライベート情報記憶手段は、オーディオ情報の出力に対応した環境形成手段制御用のパルス信号を出力させるため、パルス出力スタイル情報及びパルス周波数の管理情報を含めて所定の情報圧縮用符号化規格に基づいてパケット化した状態で記憶している。
【０００９】
そして、多重化手段が、パケット化されているオーディオ情報とプライベート情報とを、プライベート情報がオーディオ情報よりも時間的に早い位置に配されるよう時系列に多重化してトランスポートストリーム（以下、ＴＳとも略記する。）を生成し、このＴＳが情報供給装置から出力端末に供給される。
【００１０】
一方、出力端末においては、分離手段が、情報供給装置から供給されたＴＳを、オーディオ側とプライベート側のパケットに分離する。そして、基本情報再生出力手段が、分離手段によって分離されたオーディオ側のパケットより時刻管理情報を読み出し、再生すべき所定の時刻になった場合に、該当するパケットのオーディオ情報を再生して、演奏音あるいは映像として再生出力する。
【００１１】
また、パルス出力制御手段は、分離手段によって分離されたプライベート側のパケットを、パルス出力スタイル情報及びパルス周波数の管理情報に基づくと共に、基本情報再生出力手段において対応するオーディオ情報が復号化されるタイミングを基準として再生し、環境形成手段制御用のパルス信号として出力する。
【００１２】
このように、オーディオ情報とプライベート情報とを含む外部出力用情報を情報圧縮を施した状態で情報供給装置から出力端末に供給しても、出力端末側において、オーディオ情報が再生されるタイミングを基準としてプライベート情報を再生するため、プライベート情報を、オーディオ情報に対して同期のとれた状態で出力することができる。そして、このプライベート情報はパルス出力スタイル情報及びパルス周波数の管理情報に基づく環境形成手段制御用のパルス信号として出力することができるので、パルス信号によって制御可能な装置をオーディオ情報に同期させて制御できる。
【００１３】
例えば請求項２に示すように、パルス出力手段より出力されたパルス信号によって制御する対象となる環境形成手段を、基本情報再生出力手段によって出力された演奏音によって形成される音場あるいは出力された映像を視認可能な場の照明環境を人工的に形成する照明環境形成手段とすることが考えられる。例えば映画においては、もちろん場面に応じた音響効果が元々施されているが、さらに照明による演出効果を加えればより一層楽しむことができる。例えば映画であれば、落ち着いたダンスの場面、火薬が爆発する激しい場面等に応じてその場面に近い照明環境を視聴者に提供すればより一層の臨場感を与えることができる。同様にカラオケであってもカラオケ伴奏に応じて変化する演出効果があればより一層楽しむことができる。
【００１４】
なお、この照明環境形成手段としては、いわゆる自らが光源となる照明器具だけでなく、カラオケボックスやディスコ等にあるミラーボール等も含まれる。そして、その制御としては明るさや色を変更するだけでなく、ミラーボールであれば回転の有無や回転速度の制御等が考えられる。
【００１５】
そして、これらは上記映画やカラオケに限定されることなく、近年のマルチメディア技術の発展に伴い、適用可能な範囲はますます拡大していくと思われる。さらには、照明環境に関してだけではなく、その他の環境を制御することでさらにバーチャルリアリティ化することも可能である。例えば、照明以外の環境形成手段としては、送風手段、温度調節手段、臭い発生手段あるいはスモーク発生手段等が考えられる。
【００１６】
前記送風手段によって音場等に風を送れば、例えば海のイメージの曲や冬のイメージの曲・映像の場合に臨場感を増進させることができる。また、温度調節手段によって音場等の温度を調節すれば、例えば冬のイメージの曲・映像の場合に温度を低めにすれば臨場感が増す。なお、いわゆる空調手段によって、送風機能とその送風する空気温度を変化させることによって音場等の温度調節をする温度調節機能とを使い分けたり、組み合わせたりすることで、上記送風手段と温度調節手段とを兼用させることができる。例えば、組み合せの例としては、冬の海のイメージの曲・映像の場合に冷風を送って臨場感を高めるといった具合いである。
【００１７】
また、臭い発生手段は音場等に所定の臭いを送るもので、例えば海のイメージの曲・映像の場合に海の臭いを発生させたり、山や森のイメージの曲・映像の場合に森林の臭いを発生させたりすることが考えられる。なお、この臭いを音場に送る場合には上記送風手段を利用してもよい。例えば、送風口に臭い発生源を配置し、風に乗せて臭いを送るといった具合いである。
【００１８】
そして、スモーク発生手段は音場等にスモークを発生させるもので、幻想的なイメージの曲・映像の場合に用いると効果的である。
このように、主に人間の五感に訴えるような環境形成手段を用いて曲や映像に応じた環境を形成することにより、臨場感が増し、例えばカラオケに用いれば歌唱者だけでなく周りで聞いている人も十分に楽しめる。なお、上述した各種環境形成の手段以外にも、例えば利用者が座る椅子を揺れるようにしておき、船や汽車等に乗っている臨場感を形成したりすること等も考えられる。
【００１９】
一方、このような情報供給システムに用いて有効な情報供給装置としては、請求項３に示すように、オーディオ情報とプライベート情報とを含む外部出力用情報を、その外部出力用情報に基づいて所定の外部出力処理を行なう出力端末に伝送路を介して供給する情報供給装置において、前記オーディオ情報を、所定の情報圧縮用符号化規格に基づき、所定のアクセス・ユニット毎にいつ再生するかを示す時刻管理情報をヘッダ部分に含む形式でパケット化した状態で記憶しておく基本情報記憶手段と、前記プライベート情報を、前記オーディオ情報の出力に対応した環境形成手段制御用のパルス信号を出力させるため、パルス出力スタイル情報及びパルス周波数の管理情報を含めて前記所定の情報圧縮用符号化規格に基づいてパケット化した状態で記憶しておくプライベート情報記憶手段と、前記パケット化されているオーディオ情報とプライベート情報とを、プライベート情報がオーディオ情報よりも時間的に早い位置に配されるよう時系列に多重化してトランスポートストリームを生成する多重化手段とを備え、そのトランスポートストリーム状態で前記出力端末に供給することを特徴とするものが挙げられる。
【００２０】
また、このような情報供給システムに用いて有効な出力端末としては、請求項４に示すように、オーディオ情報とプライベート情報とを含む外部出力用情報を情報供給装置から伝送路を介して供給してもらい、その外部出力用情報に基づいて所定の外部出力処理を実行する出力端末であって、前記情報供給装置からは、所定の情報圧縮用符号化規格に基づき、所定のアクセス・ユニット毎にいつ再生するかを示す時刻管理情報をヘッダ部分に含む形式でパケット化した状態のオーディオ情報と、前記所定の情報圧縮用符号化規格に基づいてパケット化した状態のプライベート情報とを、プライベート情報がオーディオ情報よりも時間的に早い位置に配されるよう時系列に多重化して生成されたトランスポートストリームを送信される出力端末において、前記プライベート情報は、前記オーディオ情報の出力に対応した環境形成手段制御用のパルス信号を出力させるためのものであり、パルス出力スタイル情報及びパルス周波数の管理情報も設定されており、前記情報供給装置から供給されたトランスポートストリームを、オーディオ側とプライベート側のパケットに分離する分離手段と、該分離手段によって分離されたオーディオ側のパケットより前記時刻管理情報を読み出し、再生すべき所定の時刻になった場合に、該当するパケットのオーディオ情報を再生して、演奏音あるいは映像として出力する基本情報再生出力手段と、前記分離手段によって分離されたプライベート側のパケットを、前記パルス出力スタイル情報及びパルス周波数の管理情報に基づくと共に、前記基本情報再生出力手段において対応するオーディオ情報の再生タイミングに基づいて再生し、環境形成手段制御用のパルス信号として出力するパルス出力制御手段とを備えることを特徴とするものが挙げられる。
【００２１】
そして、この請求項４に記載の出力端末においては、請求項５に示すように、前記パルス出力手段より出力されたパルス信号によって制御する対象となる環境形成手段は、前記基本情報再生出力手段によって出力された演奏音によって形成される音場あるいは出力された映像を視認可能な場の照明環境を人工的に形成する照明環境形成手段であることを特徴とすることが考えられる。
【００２２】
これら請求項３〜５に示した情報供給装置や出力端末は上述の情報供給システムに用いて有効であるが、請求項３に示す情報供給装置あるいは請求項４に示す出力端末においても、請求項１のシステムについて説明したものと同様の作用・効果を奏し、また、請求項５に示す出力端末については、請求項２のシステムについて説明したものと同様の作用・効果を奏するので、重複した作用・効果の説明は省略する。
【００２３】
【発明の実施の形態】
次に、本発明の一実施形態を詳しく説明する。
図１は、本実施形態の出力端末６０の構成を示すブロック図、図２は、出力端末６０と、その出力端末６０に情報を供給する情報供給装置２０を含む情報供給システム１０の構成を示すブロック図である。
【００２４】
本情報供給システム１０は、情報供給装置２０と出力端末６０とが、同軸ケーブル等で構成される伝送路９０を介して接続されて構成されている。また、情報供給装置２０にはエンコード装置５０が付属しているが、このエンコード装置５０は情報供給装置２０に着脱可能である。なお、図２では出力端末６０を１台だけ図示してあるが、複数の出力端末６０が１台の情報供給装置２０に接続されるのが普通である。また、伝送路９０は、有線・無線のいかんを問わず、あらゆるものが考えられる。
【００２５】
まず、エンコード装置５０について図３を参照して説明する。エンコード装置５０は、情報供給装置２０が出力端末６０へ供給するための情報を外部より入力するために用いるものである。本エンコード装置５０は、ビデオエンコーダ５１と、ビデオＰＥＳパケッタイザ５２と、オーディオエンコーダ５３と、オーディオＰＥＳパケッタイザ５４と、編集装置５５と、プライベートＰＥＳパケッタイザ５６と、入出力装置５７とを備えている。
【００２６】
前記ビデオエンコーダ５１は、外部から入力されたアナログのビデオ信号をエンコードしてデジタルデータ列に変換可能であり、このデジタルデータ列化されたビデオ信号はビデオＰＥＳパケッタイザ５２により、この場合はＭＰＥＧ２規格に従ってＰＥＳパケット化され、ビデオＰＥＳパケットとして出力される。このビデオＰＥＳパケットは、図５（Ａ）に示すように、ヘッダ部と実効データ部とから構成されている。ヘッダ部は、パケットの開始コード・パケット長・ヘッダ長・再生時刻管理情報などから構成される。
【００２７】
同様に、前記オーディオエンコーダ５３は、外部から入力されたアナログのオーディオ信号をエンコードしてデジタルデータ列に変換可能であり、このデジタルデータ列化されたオーディオ信号はオーディオＰＥＳパケッタイザ５４により、ＭＰＥＧ２規格に従ってＰＥＳパケット化され、オーディオＰＥＳパケットとして出力される。このオーディオＰＥＳパケットのデータ構成は、図５（Ｂ）に示すように、上記ビデオＰＥＳパケットと実効データ部の内容が違うだけで、基本的な構成は同様である。なお、パケットを識別するためのＰＩＤ（Ｐacket Ｉdentification ）はパケット開始コードに含まれている。
【００２８】
一方、プライベートデータもプライベートＰＥＳパケットとして出力されることになるのであるが、本実施形態においては、このプライベートＰＥＳパケット中にパルス信号を出力するための制御データを含ませる。このパルス信号出力用の制御データは、オーディオ情報あるいはビデオ情報との同期を取る必要があるものであり、本実施形態ではオーディオ情報と同期を取るために次のような編集がなされて作成される。
【００２９】
カラオケの場合を例に取ると、プライベートデータとして、カラオケ曲のオーディオ信号に対応して照明制御データが外部のパーソナルコンピュータ（パソコン、図示略）等から編集装置５５に入力される。この制御データは、所定の単位毎に再生時刻を設定する必要がある。そして、これをオーディオ情報の再生時刻管理情報を基にして設定するのである。そのために、オーディオＰＥＳパケッタイザ５４からオーディオＰＥＳパケットの再生時刻管理情報を取得できるようにされている。また、入出力装置５７から所定の指示を入力したり、現在の設定状況を表示出力させたりして、マニュアルでも編集作業ができるように構成されている。例えば照明制御態様を編集作業者が変更設定できるようにされている。
【００３０】
このような編集作業を経て、さらにプライベートＰＥＳパケッタイザ５６により、ＭＰＥＧ２規格に従ってＰＥＳパケット化され、プライベートＰＥＳパケットとして出力されるのであるが、このプライベートＰＥＳパケットのデータ構成は図５（Ｃ）に示すようになる。ヘッダ部は上記ビデオＰＥＳパケットやオーディオＰＥＳパケットと同様にパケットの開始コード・パケット長・ヘッダ長・再生時刻管理情報を備える。そして、実効データとしては、パルス出力スタイルや周波数管理情報等が含まれることとなる。
【００３１】
パルス出力スタイルとは、図６に示すように、そのパルスの出力方向や出力タイプであり、図６ではパルスの出力方向として「正」、出力タイプとして「オープンコレクタ」が設定されている。なお、図８は、例えばステップ角が９０゜の２相（Ａ，Ｂ）相モータ用に出力するパルス例であり、パルス出力方向が「正」であれば、図８（イ）に示すようにＡ相が９０゜進み、パルス出力方向が「負」であれば、図８（ロ）に示すようにＢ相が９０゜進むように設定されている。
【００３２】
一方、周波数管理情報は本実施形態の場合には指定周波数ＮＯ．である。なお、この指定周波数ＮＯ．に対しては、図７に示すように対応する周波数が設定されている。例えば指定周波数ＮＯ．「０」に対しては１０ＫＨｚ、指定周波数ＮＯ．「１」に対しては２０ＫＨｚ、といった具合いである。なお、図７に示す対応関係を示すテーブルは、後述するパルス出力制御装置８２（図１参照）の内部メモリに格納されている。
【００３３】
続いて、情報供給装置２０の構成について説明する。
上記エンコード装置５０が情報供給装置２０に接続されている時には、図２に示すように、ビデオＰＥＳパケッタイザ５２からの出力としてのビデオＰＥＳパケットは情報供給装置２０の入力インタフェース２１に入力され、オーディオＰＥＳパケッタイザ５４の出力としてのオーディオＰＥＳパケットは入力インタフェース２２に入力され、プライベートＰＥＳパケッタイザ５６の出力としてのプライベートＰＥＳパケットは入力インタフェース２３に入力される構造である。
【００３４】
入力インタフェース２１に入力されたビデオＰＥＳパケット及び入力インタフェース２２に入力されたオーディオＰＥＳパケットは、バス２４を介して映像音声記憶装置制御部２５に転送され、映像音声記憶装置制御部２５により基本情報記憶手段としての映像音声記憶装置２６ａ，２６ｂの所定の領域に書き込まれ記憶される。映像音声記憶装置２６ａ，２６ｂに記憶されているＰＥＳパケット化されたビデオデータ及びオーディオデータは、映像音声記憶装置制御部２５による読み出しが可能である。
【００３５】
また、入力インタフェース２３から入力されたプライベートＰＥＳパケットは、プライベート記憶装置制御部２７に転送され、プライベート情報記憶手段としてのプライベート記憶装置２８の所定の領域に書き込まれ記憶される。プライベート記憶装置２８に記憶されているＰＥＳパケット化されたプライベートデータは、プライベート記憶装置制御部２７による読み出しが可能である。
【００３６】
前記映像音声記憶装置制御部２５は、映像音声記憶装置２６ａ，２６ｂに記憶されているビデオデータを読み出してビデオ緩衝メモリ３１に転送し、オーディオデータを読み出してオーディオ緩衝メモリ３２に転送することができる。また、プライベート記憶装置制御部２７は、プライベート記憶装置２８に記憶されているプライベートデータを読み出してプライベート緩衝メモリ４１に転送することができる。
【００３７】
ビデオ緩衝メモリ３１では、映像音声記憶装置制御部２５から送られてくるビデオデータを一旦記憶して、多重化手段としてのマルチプレクサ３５からの要求に応じて出力することができる。同様に、オーディオ緩衝メモリ３２は、映像音声記憶装置制御部２５から送られてくるオーディオデータを一旦記憶して、マルチプレクサ３５からの要求に応じて出力することができる。また、プライベート緩衝メモリ４１では、プライベート記憶装置制御部２７から送られてくるプライベートデータ列を一旦記憶して、マルチプレクサ３５からの要求に応じて出力することができる。
【００３８】
マルチプレクサ３５は、３つの緩衝メモリ３１，３２，４１から送られてくるビデオデータのＰＥＳパケット列とオーディオデータのＰＥＳパケット列とプライベートデータのＰＥＳパケット列とを多重化して図４に示すような１本のトランスポートストリーム（ＴＳ）とし、出力インタフェース３６を通してヘッドエンド３７に出力することができる。なお、図４においては、ビデオＰＥＳ、プライベートＰＥＳ、オーディオＰＥＳの各パケットがその順番で１つずつ多重化されているが、パケットの順番や数は必ずしも限定されない。但し、プライベートＰＥＳパケットをＴＳに挿入する場合に、出力端末６０側にてパルス出力させるタイミングの基準となるべきオーディオＰＥＳパケットの直前に配置されるように連結して多重化すれば、後述する出力端末６０でのＴＳの再生時には、基本となるオーディオデータを再生する際、そのオーディオデータに対応して出力すべきプライベートデータが必ず検知されることになるため、パルス出力がオーディオ再生に間に合わなくなることがない。
【００３９】
なお、図示は省略しているが、この情報供給装置２０には、前述したビデオ緩衝メモリ３１、オーディオ緩衝メモリ３２、プライベート緩衝メモリ４１、マルチプレクサ３５および出力インタフェース３６からなるデータ出力機構が複数設けられており、ヘッドエンド３７は、これら複数のデータ出力機構から送られてくるＴＳを各出力インタフェース３６に割り当てられているチャンネルにて伝送路９０に送出することができる。また、ヘッドエンド３７は、モデム４７から送られてくる信号を双方向通信用のチャンネルで送出し、伝送路９０から双方向通信用のチャンネルで入力された信号をモデム４７に転送することができる。
【００４０】
モデム４７は、バス２４を介して制御手段としての入出力制御部３０に接続されており、入出力制御部３０は、モデム４７およびヘッドエンド３７を介して、伝送路９０によって接続されている出力端末６０にデータを送信したり、出力端末６０からのデータを受け取ることができる。また、入出力制御部３０は、前述した情報供給装置２０の各部の動作を制御することができる。
【００４１】
次に、図１を参照して出力端末６０の構成について説明する。
図１に示すように、出力端末６０は、端末各部の動作を制御するための制御手段としての中央制御装置６１を備えている。この中央制御装置６１は周知のマイクロコンピュータとして構成されている。中央制御装置６１には、キーボード（図示略）を有する入力手段としての入力装置６３が接続されており、入力装置６３を操作すれば、中央制御装置６１に各種のデータや指示を入力することができる。また、中央制御装置６１は、モデム６２を介して伝送路９０に接続されており、前述の双方向通信用のチャンネルを使用して情報供給装置２０の入出力制御部３０と通信することができる。
【００４２】
さらに、伝送路９０には、受信手段としてのチューナ６４が接続されている。チューナ６４は、中央制御装置６１の指示に応じてチャンネルを選択し、その選択されたチャンネルで送信されてくる情報を受信することができる。
チューナ６４によって受信された情報は、分離手段としてのシステムデコーダ６５に送出される。このシステムデコーダ６５は、チューナ６４によって受信され転送されてくるＴＳ（トランスポートストリーム）を、ビデオＰＥＳパケットとオーディオＰＥＳパケットとプライベートＰＥＳパケットとに分離し、それぞれビデオバッファ７３、オーディオバッファ６６、プライベートバッファ８１に出力することができる。
【００４３】
オーディオデコーダ６７は、オーディオバッファ６６よりオーディオＰＥＳパケットを読み出して復号し、アナログのオーディオ信号としてアンプ６９に出力することができる。アンプ６９は、オーディオ信号を増幅してスピーカ７０に送り、音声出力させることができる。なお、アンプ６９は、ミキシング機能を備えており、図１に破線で示すようにマイク７１が接続されている場合には、マイク７１から入力される例えばカラオケ利用者の歌唱音声信号とオーディオデコーダ６７からのオーディオ信号とをミキシングした後に増幅して、スピーカ７０に出力できる。つまり、この出力端末６０をカラオケ装置として使用することが可能である。
【００４４】
また、ビデオデコーダ７４は、ビデオバッファ７３よりビデオＰＥＳパケットを読み出して復号し、アナログのビデオ信号として映像出力装置７５に出力することができる。この映像出力装置７５は、ビデオデコーダ７４からのビデオ信号を表示手段としてのモニタテレビ７６に出力することができる。モニタテレビ７６では、ビデオ信号に基づく映像が表示される。
【００４５】
一方、パルス出力制御装置８２は、プライベートバッファ８１よりプライベートＰＥＳパケットを読み出して復号し、パルス信号を作成して、「照明環境形成手段」としての照明手段７８に出力する。なお、上述したように、パルス出力制御装置８２の内部メモリには、指定周波数ＮＯ．（０，１，２，…）とそれに対応する周波数（１０ＫＨｚ，２０ＫＨｚ，３０ＫＨｚ，…）の関係を示すテーブルが格納されている。そして、プライベートＰＥＳパケットを復号して得たパルスの出力方向や出力タイプと、指定周波数ＮＯ．に対応する周波数に基づいて、パルス信号を照明手段７８に出力するのである。
【００４６】
また、照明手段７８は、パルス出力制御装置８２からのパルス信号によって明るさ等を制御可能なものであればよく、具体的にはステッピングモータやインバータ等を備えており、入力されたパルス信号によってステッピングモータやインバータが駆動することとなる。なお、この照明手段としては、いわゆる自らが光源となる照明器具だけでなく、例えばカラオケボックスやディスコ等にあるミラーボール等も含まれる。そして、その制御としては明るさや色を変更するだけでなく、ミラーボールであれば回転の有無や回転速度の制御等が考えられる。
【００４７】
また、ここまでの説明から明らかなように、オーディオデコーダ６７、アンプ６９、スピーカ７０、ビデオデコーダ７４、映像出力装置７５、モニタテレビ７６等が基本情報再生出力手段に相当し、パルス出力制御装置８２等がパルス出力制御手段に相当する。
【００４８】
次に、本実施形態の情報供給システム１０の動作について説明する。
まず、出力端末６０の利用者が、入力装置６３を操作して所望の情報の供給を要求すると、中央制御装置６１はこの情報の送出要求をモデム６２を通し、伝送路９０を介して情報供給装置２０に送信する。なお、利用者は、入力装置６３にて所定のキーを操作することにより、例えば所望の映画やカラオケ曲の番号を指定することができる。
【００４９】
一方、情報供給装置２０では、入出力制御部３０がモデム４７を通してこの要求を受信する。次に、入出力制御部３０は、指定された情報に対応するオーディオデータ及びプライベートデータ、そして、背景映像としてふさわしいビデオデータ（例えばカラオケであれば曲のジャンルなどによって適宜選択される。）の読み出しと、入出力制御部３０が選定したデータ出力機構のビデオ緩衝メモリ３１、オーディオ緩衝メモリ３２並びにプライベート緩衝メモリ４１への転送を、映像音声記憶装置制御部２５及びプライベート記憶装置制御部２７にそれぞれ指示する。
【００５０】
さらに、入出力制御部３０は、上記の選定したデータ出力機構の出力インタフェース３６に割り当てられているチャンネルを、情報を要求してきた出力端末６０に通知する。
出力端末６０では、中央制御装置６１がチューナ６４にチャンネルの選択を指示する。こうして出力端末６０は、そのチャンネルによりＴＳ（トランスポートストリーム）が送信されてくるのを待つ。
【００５１】
次に、情報供給装置２０では、映像音声記憶装置制御部２５が映像音声記憶装置２６ａ、２６ｂから、所定のビデオデータを読み出してビデオ緩衝メモリ３１に転送し、またオーディオデータを読み出してオーディオ緩衝メモリ３２に転送する。一方、プライベート記憶装置制御部２７がプライベート記憶装置２８から、所定のプライベートデータを読み出してプライベート緩衝メモリ４１に転送する。
【００５２】
ビデオ緩衝メモリ３１、オーディオ緩衝メモリ３２及びプライベート緩衝メモリ４１からそれぞれ読み出されたビデオデータ、オーディオデータ及びプライベートデータはマルチプレクサ３５に入力する。
マルチプレクサ３５は、その３つの緩衝メモリ３１，３２，４１から送られてくるビデオデータのＰＥＳパケット列とオーディオデータのＰＥＳパケット列とプライベートデータのＰＥＳパケット列とを多重化して１本のＴＳを生成し、出力インタフェース３６を通してヘッドエンド３７に出力する。ヘッドエンド３７は、このＴＳを所定のチャンネルにて送出する。
【００５３】
出力端末６０では、チューナ６４が上記指定されたチャンネルによりそのＴＳを受信することとなる。
このＴＳを受信した時点からの出力端末６０における動作について、図９〜１２も参照して説明する。
【００５４】
図９は、システムデコーダ６５において実行される処理である。まず最初のステップＳ１にて、ＴＳパケットを取得したかどうかを判断する。ＴＳパケットを取得した場合には、Ｓ２へ移行して、そのＰＩＤの解読を行なう。
ＴＳパケットは、オーディオＰＥＳ、ビデオＰＥＳ、プライベートＰＥＳのいずれであっても、図５の（Ａ）〜（Ｃ）に示すようにパケット開始コードを持っており、そのパケット開始コードにＰＩＤが含まれている。したがって、Ｓ２ではそのＰＩＤを解読し、その解読結果に応じてＳ３〜Ｓ５の判断を行なう。
【００５５】
つまり、取得したＴＳパケットがオーディオＰＥＳパケットであれば（Ｓ３：ＹＥＳ）、Ｓ６に移行してオーディオバッファ６６に振り分ける。また、プライベートＰＥＳパケットであれば（Ｓ４：ＹＥＳ）、Ｓ７に移行してプライベートバッファ８１に振り分け、ビデオＰＥＳパケットであれば（Ｓ５：ＹＥＳ）、Ｓ８に移行してビデオバッファ７３に振り分ける。
Ｓ６〜Ｓ８の処理終了後はＳ１に戻り、次のＴＳパケットを待つ。
【００５６】
このようにして、ＰＩＤに基づいてオーディオバッファ６６、プライベートバッファ８１、ビデオバッファ７３に振り分けられたオーディオＰＥＳパケット、プライベートＰＥＳパケット、ビデオＰＥＳパケットは、それぞれオーディオデコーダ６７、パルス出力制御装置８２、ビデオデコーダ７４に読み出されて所定の処理を実行する。以下、各処理について説明する。
【００５７】
最初に、ビデオデコーダ７４での処理を図１０を参照して説明する。
まずＳ１１にて、ビデオバッファ７３よりビデオＰＥＳパケットを読み出す。そして、Ｓ１２にて、そのＰＥＳパケットの中のヘッダ部（図５（Ａ）参照）より再生時刻管理情報を読み出す。
【００５８】
続くＳ１３では、再生すべき時刻になっているかどうかを判断し、再生時刻になっていれば、Ｓ１４に移行し、ビデオＰＥＳパケットを復号してアナログのビデオ信号として映像出力装置７５に出力する。このビデオ出力処理の終了後は、Ｓ１１へ戻り、次のビデオＰＥＳパケットを読み出し、Ｓ１２以降の処理を繰り返す。
【００５９】
なお、上記Ｓ１３での再生時刻かどうかは、基本となる同期信号と再生時刻管理情報との比較で判断する。最初に同期信号がリセットされてからビデオデコーダ７４は再生処理を開始し、この基本となる同期信号が再生時刻管理情報と一致した場合にＳ１３で肯定判断となる。
【００６０】
次に、オーディオデコーダ６７での処理を図１１を参照して説明する。
まずＳ２１にて、オーディオバッファ６６よりオーディオＰＥＳパケットを読み出す。そして、Ｓ２２にて、そのオーディオＰＥＳパケットの中のヘッダ部（図５（Ｂ）参照）より再生時刻管理情報を読み出す。
【００６１】
続くＳ２３では、再生すべき時刻になっているかどうかを判断する。このＳ２３での再生時刻かどうかも、上記ビデオＰＥＳパケットの場合と同様である。すなわち、基本の同期信号がリセットされてからオーディオデコーダ６７が再生処理を開始し、この基本となる同期信号が再生時刻管理情報と一致した場合にＳ２３で肯定判断となる。Ｓ２３で肯定判断、つまり再生時刻になっていれば、Ｓ２４に移行して、パルス出力制御装置８２に通知を行なう。この通知内容は、再生時刻管理情報である。
【００６２】
そして、Ｓ２４の処理終了後Ｓ２５へ移行する。Ｓ２５では、オーディオＰＥＳパケットを復号してアナログのオーディオ信号としてアンプ６９に出力する。このオーディオ出力処理の終了後は、Ｓ２１へ戻り、次のオーディオＰＥＳパケットを読み出し、Ｓ２２以降の処理を繰り返す。
【００６３】
次に、パルス出力制御装置８２での処理を図１２を参照して説明する。
まずＳ３１にて、プライベートバッファ８１よりプライベートＰＥＳパケットを読み出す。そして、Ｓ３２にて、その読み出したプライベートＰＥＳパケットの中のヘッダ部（図５（Ｃ）参照）より再生時刻管理情報を読み出す。続くＳ３３では、上記図１１のＳ２４の処理の結果オーディオデコーダ６７より出力された通知を入手する。
【００６４】
そして、Ｓ３４で再生すべきタイミングになっているかどうかを判断する。このＳ３４での再生タイミングかどうかは次のように判断する。すなわち、Ｓ３３で入手したオーディオデコーダ６７からの通知（オーディオＰＥＳパケットにおける再生時刻管理情報）を基にし、そのオーディオＰＥＳパケットの再生時刻が、Ｓ３２で読み出したプライベートＰＥＳパケットの再生時刻管理情報と一致した場合にＳ３４で肯定判断となる。
【００６５】
Ｓ３４で肯定判断、つまり再生タイミングであればＳ３５に移行する。Ｓ３５では、プライベートバッファ８１よりプライベートＰＥＳパケットを読み出して復号する。上述したように、パルス出力制御装置８２の内部メモリには、指定周波数ＮＯ．（０，１，２，…）とそれに対応する周波数（１０ＫＨｚ，２０ＫＨｚ，３０ＫＨｚ，…）の関係を示すテーブルが格納されている。そして、プライベートＰＥＳパケットを復号して得たパルスの出力方向や出力タイプと、指定周波数ＮＯ．に対応する周波数に基づいて作成したパルス信号を、照明手段７８に出力するのである。
【００６６】
以上のような処理が実行されることにより、オーディオデコーダ６７から出力されたアナログのオーディオ信号はアンプ６９にて増幅され、スピーカ７０に送られて音声出力される。また、ビデオデコーダ６８から出力されたアナログのビデオ信号は、映像出力装置７２からモニタテレビ７６にて表示される。このようにして、映画あるいはカラオケを楽しむことができる。
【００６７】
そして、本実施形態の場合にはオーディオ信号の再生タイミングに同期させてパルス信号を照明手段７８に出力し、このパルス信号によって照明手段７８での明るさ等を変更することができる。例えば映画においては、もちろん場面に応じた音響効果が元々施されているが、さらに照明による演出効果を加えればより一層楽しむことができる。映画中の落ち着いたダンスの場面、火薬が爆発する激しい場面等に応じてその場面に近い照明環境を視聴者に提供すればより一層の臨場感を与えることができる。同様にカラオケであってもカラオケ伴奏に応じて変化する照明演出効果があればより一層楽しむことができる。
【００６８】
なお、上述したように、この照明手段７８としては自らが光源となる照明器具だけでなくミラーボール等も含まれ、その制御としては明るさや色を変更するだけでなく、ミラーボールの回転速度等も調整できる。
以上、本発明の実施の形態について説明したが、本発明はこのような実施形態に限定されるものではなく、本発明の主旨を逸脱しない範囲でさまざまな態様に実施できることは言うまでもない。
【００６９】
例えば、上記実施形態では、オーディオ情報とビデオ情報をセットにして供給しているが、それらいずれか一方であってもよい。例えばビデオ情報とそれに対応するプライベート情報の組み合わせであってもよい。
また、上記実施形態では、照明環境の制御に関して説明したが、それに限られず、その他の環境を制御することでさらにバーチャルリアリティ化することも可能である。例えば、照明以外の環境形成手段としては、送風手段、温度調節手段、臭い発生手段あるいはスモーク発生手段等が考えられる。
【００７０】
送風手段によって音場等に風を送れば、例えば海のイメージの曲や冬のイメージの曲・映像の場合に臨場感を増進させることができ、また、温度調節手段によって音場等の温度を調節すれば、例えば冬のイメージの曲・映像の場合に温度を低めにすれば臨場感が増す。なお、いわゆる空調手段によって、送風機能とその送風する空気温度を変化させることによって音場等の温度調節をする温度調節機能とを使い分けたり、組み合わせたりすることで、上記送風手段と温度調節手段とを兼用させることができる。
【００７１】
また、臭い発生手段は音場等に所定の臭いを送るもので、例えば海のイメージの曲・映像の場合に海の臭いを発生させたり、山や森のイメージの曲・映像の場合に森林の臭いを発生させたりすることが考えられる。なお、この臭いを音場に送る場合には上記送風手段を利用してもよい。例えば、送風口に臭い発生源を配置し、風に乗せて臭いを送るといった具合いである。
【００７２】
そして、スモーク発生手段は音場等にスモークを発生させるもので、幻想的なイメージの曲・映像の場合に用いると効果的である。
このように、主に人間の五感に訴えるような環境形成手段を用いて曲や映像に応じた環境を形成することにより、臨場感が増し、例えばカラオケに用いれば歌唱者だけでなく周りで聞いている人も十分に楽しめる。なお、上述した各種環境形成の手段以外にも、例えば利用者が座る椅子を揺れるようにしておき、船や汽車等に乗っている臨場感を形成したりすること等も考えられる。何れにしても、パルス信号によって制御できるステッピングモータやインバータ等を備えていればよいので、上述した各種環境形成手段への適用もできる。
【図面の簡単な説明】
【図１】実施形態の出力端末の構成を示すブロック図である。
【図２】実施形態の情報供給システムの構成を示すブロック図である。
【図３】実施形態のエンコード装置の構成を示すブロック図である。
【図４】情報供給装置から供給されるトランスポートストリームの概略説明図である。
【図５】（Ａ）はビデオＰＥＳパケットのデータ構成を示す説明図、（Ｂ）はオーディオＰＥＳパケットのデータ構成を示す説明図、（Ｃ）はプライベートＰＥＳパケットのデータ構成を示す説明図である。
【図６】プライベートＰＥＳパケットに実効データとして含まれるルス出力スタイル及び周波数管理情報の説明図である。
【図７】指定周波数ＮＯ．と周波数との対応関係を示すテーブルの説明図である。
【図８】ステップ角が９０゜の２相（Ａ，Ｂ）相モータ用に出力するパルス例の説明図である。
【図９】出力端末のシステムデコーダにおいて実行される処理を示すフローチャートである。
【図１０】出力端末のビデオデコーダにおいて実行される処理を示すフローチャートである。
【図１１】出力端末のオーディオデコーダにおいて実行される処理を示すフローチャートである。
【図１２】出力端末のパルス出力制御装置において実行される処理を示すフローチャートである。
【符号の説明】
１０…情報供給システム２０…情報供給装置
２５…映像音声記憶装置制御部２６ａ，２６ｂ…映像音声記憶装置
２７…プライベート記憶装置制御部２８…プライベート記憶装置
３０…入出力制御部３１…ビデオ緩衝メモリ
３２…オーディオ緩衝メモリ３５…マルチプレクサ
３６…出力インタフェース３７…ヘッドエンド
４１…プライベート緩衝メモリ５０…エンコード装置
５１…ビデオエンコーダ５２…ビデオＰＥＳパケッタイザ
５３…オーディオエンコーダ５４…オーディオＰＥＳパケッタイザ
５５…編集装置５６…プライベートＰＥＳパケッタイザ
５７…入出力装置６０…出力端末
６１…中央制御装置６４…チューナ
６５…システムデコーダ６６…オーディオバッファ
６７…オーディオデコーダ６９…アンプ
７０…スピーカ７３…ビデオバッファ
７４…ビデオデコーダ７５…映像出力装置
７６…モニタテレビ７８…照明手段
８１…プライベートバッファ８２…パルス出力制御装置
９０…伝送路[0001]
BACKGROUND OF THE INVENTION
The present invention supplies external output information including at least one of audio information and video information and private information from an information supply device to an output terminal, and a predetermined external output based on the external output information at the output terminal. More particularly, the present invention relates to a technology for supplying information that has been subjected to information compression.
[0002]
[Background Art and Problems to be Solved by the Invention]
Conventionally, information having at least one of audio information and video information, such as movies and so-called karaoke, is compressed by MPEG (Moving Picture Image Coding Experts Group) which is one of information compression coding standards. It is considered to supply in a state where In this MPEG, there is private information, and it can be stored as a private packet packetized in a format that includes time management information in the header portion in the same way as audio information and video information. Therefore, for example, in the case of a movie, it is considered to supply translated subtitles as this private information.
[0003]
However, in a movie, for example, an acoustic effect according to the scene is given, but it can be further enjoyed if there is an effect by illumination. For example, in the case of a movie, a more realistic sensation can be provided by providing a person who is watching a lighting environment close to the scene according to a calm dance scene, a severe scene where explosives explode, or the like. Similarly, even in karaoke, if there is a production effect by illumination, it can be further enjoyed.
[0004]
Of course, these are not limited to the above-mentioned movies and karaoke, but with the recent development of multimedia technology, the applicable range is expected to expand further. Furthermore, it is possible to further make virtual reality by controlling not only the lighting environment but also other environments.
[0005]
Accordingly, the present invention provides an information supply system in which private information is used for controlling an environment such as lighting, so that a person who uses audio or video information can enjoy it further, and an information supply effective for use in the system. An object is to provide a device and an output terminal.
[0006]
[Means for Solving the Problems and Effects of the Invention]
In order to achieve the above object, the invention according to claim 1 provides audio information. News and Information supply system for supplying external output information including private information from an information supply device to an output terminal via a transmission line, and causing the output terminal to perform predetermined external output processing based on the external output information The information supply device includes: News Basic information storage means for storing time management information indicating when to reproduce for each predetermined access unit in a packetized form in a header part based on a predetermined information compression coding standard; The private information is changed to the audio information. Informative In order to output a pulse signal for controlling the environment forming means corresponding to the output, it is stored in a packetized state based on the predetermined information compression coding standard including pulse output style information and pulse frequency management information. Private information storage means for storing the packetized audio information News and Private information Private information is placed in a position earlier in time than audio information Multiplexing means for multiplexing in time series to generate a transport stream, wherein the output terminal converts the transport stream supplied from the information supply device into an audio Side and Separation means for separating packets on the private side and audio separated by the separation means Side When the time management information is read from the packet and the predetermined time to be reproduced is reached, the audio information of the corresponding packet is displayed. News Based on the pulse output style information and pulse frequency management information, basic information reproduction output means for reproducing and outputting as performance sound or video and private side packets separated by the separation means, and reproducing the basic information Audio information corresponding to the output means Informative An information supply system comprising pulse output control means for reproducing based on reproduction timing and outputting as a pulse signal for controlling the environment forming means.
[0007]
The information supply system of the present invention provides audio information. News and private Information for external output including information is supplied from an information supply device to an output terminal via a transmission line, and the output terminal performs predetermined external output processing based on the information for external output.
[0008]
Here, the basic information storage means of the information supply device is the audio information. News Based on a predetermined information compression coding standard, time management information indicating when to reproduce for each predetermined access unit is stored in a packetized form in a header portion. Also, the private information storage means is an audio information. Informative In order to output a pulse signal for controlling the environment forming means corresponding to the output, it is stored in a packetized state based on a predetermined information compression coding standard including pulse output style information and pulse frequency management information. .
[0009]
The multiplexing means then transmits the packetized audio information. News and Private information Private information is placed in a position earlier in time than audio information A transport stream (hereinafter abbreviated as TS) is generated by multiplexing in time series, and this TS is supplied from the information supply device to the output terminal.
[0010]
On the other hand, in the output terminal, the separating means converts the TS supplied from the information supply device into the audio terminal. Side and Separated into private side packets. Then, the basic information reproduction / output means is the audio separated by the separation means. Side When the time management information is read from the packet and the specified time to be played is reached, the audio information of the corresponding packet News Playback and output as performance sound or video.
[0011]
Further, the pulse output control means converts the private-side packet separated by the separation means based on the pulse output style information and the pulse frequency management information, and the corresponding audio information in the basic information reproduction output means. News Reproduction is performed with the decoding timing as a reference, and is output as a pulse signal for controlling the environment forming means.
[0012]
In this way, audio information News and Even if external output information including private information is supplied from the information supply device to the output terminal in a state where information compression is performed, the audio information is not received on the output terminal side. News Since private information is played back based on the playback timing, the private information In the news On the other hand, it can be output in a synchronized state. The private information can be output as a pulse signal for controlling the environment forming means based on the pulse output style information and the pulse frequency management information. In the news Can be controlled synchronously.
[0013]
For example, as described in claim 2, the environment forming means to be controlled by the pulse signal output from the pulse output means is the sound field formed by the performance sound output by the basic information reproduction output means or the output It is conceivable to use an illumination environment forming means for artificially forming an illumination environment in a place where an image can be viewed. For example, in movies, of course, sound effects according to the scene are originally applied, but if the effects of lighting are further added, it can be further enjoyed. For example, in the case of a movie, a more realistic sensation can be provided by providing the viewer with a lighting environment close to the scene in accordance with a calm dance scene, a severe scene where explosives explode, and the like. Similarly, even if it is karaoke, if there is an effect that changes according to the karaoke accompaniment, it can be further enjoyed.
[0014]
In addition, as this illumination environment formation means, the mirror ball etc. which exist in a karaoke box, a disco, etc. are included as well as the so-called lighting fixture which becomes a light source. As the control, not only the brightness and color are changed, but in the case of a mirror ball, the presence / absence of rotation and the control of the rotation speed can be considered.
[0015]
These are not limited to the above-mentioned movies and karaoke, but the applicable range is expected to expand further with the recent development of multimedia technology. Furthermore, not only the lighting environment but also other virtual environments can be realized by controlling other environments. For example, as the environment forming means other than lighting, a blowing means, a temperature adjusting means, an odor generating means, a smoke generating means, or the like can be considered.
[0016]
If wind is sent to the sound field or the like by the air blowing means, for example, in the case of a song of a sea image or a song / video of a winter image, the presence can be enhanced. Further, if the temperature of the sound field or the like is adjusted by the temperature adjusting means, for example, if the temperature is lowered in the case of a song or video of a winter image, the sense of presence increases. Note that the air blowing means and the temperature adjusting means for adjusting the temperature of the sound field or the like by changing the temperature of the air to be blown by using a so-called air-conditioning means are used or combined, so that the air blowing means and the temperature adjusting means Can also be used. For example, as an example of the combination, in the case of a song / video of a winter sea image, a cool wind is sent to enhance the presence.
[0017]
Also, the odor generating means sends a predetermined odor to the sound field. For example, it generates a sea odor in the case of a song / video of an ocean image, or a forest in the case of a song / video of a mountain or forest image. It may be possible to generate an odor. In addition, when sending this smell to a sound field, you may utilize the said ventilation means. For example, an odor generating source is arranged at the air outlet, and the odor is sent on the wind.
[0018]
The smoke generating means generates smoke in the sound field or the like, and is effective when used in the case of a fantasy song or video.
In this way, by creating an environment according to the song and video using environment forming means that appeals mainly to the human senses, for example, if used for karaoke, it is heard not only by singers but also around Even people who enjoy it can enjoy it enough. In addition to the various environment forming means described above, for example, it is conceivable that a chair on which a user sits is shaken to form a sense of presence on a ship or a train.
[0019]
On the other hand, as an information supply device effective for use in such an information supply system, as shown in claim 3, audio information is provided. News and In the information supply apparatus for supplying external output information including private information to an output terminal that performs predetermined external output processing based on the external output information via a transmission line, the audio information is provided. News Basic information storage means for storing time management information indicating when to reproduce for each predetermined access unit in a packetized form in a header part based on a predetermined information compression coding standard; The private information is changed to the audio information. Informative In order to output a pulse signal for controlling the environment forming means corresponding to the output, it is stored in a packetized state based on the predetermined information compression coding standard including pulse output style information and pulse frequency management information. Private information storage means for storing the packetized audio information News and Private information Private information is placed in a position earlier in time than audio information Multiplexing means for multiplexing in time series and generating a transport stream, and supplying the output terminal in the transport stream state.
[0020]
Further, as an output terminal effective for use in such an information supply system, as shown in claim 4, audio information is provided. News and An output terminal for receiving external output information including private information from an information supply device via a transmission line and executing a predetermined external output process based on the external output information, the information supply device Is based on a predetermined information compression coding standard, and audio information in a packetized state in which the time management information indicating when to reproduce for each predetermined access unit is included in the header portion is included. News and Private information in a packetized state based on the predetermined information compression coding standard , So that private information is placed earlier in time than audio information In the output terminal to which the transport stream generated by multiplexing in time series is transmitted, the private information is the audio information. News Output the pulse signal for controlling the environment forming means corresponding to the output of the output, the pulse output style information and the management information of the pulse frequency are also set, the transport stream supplied from the information supply device ,audio Side and Separation means for separating packets on the private side and audio separated by the separation means Side When the time management information is read from the packet and the predetermined time to be played is reached, the audio information of the corresponding packet is displayed. News Based on the pulse output style information and pulse frequency management information, basic information reproduction output means for reproducing and outputting as performance sound or video and private side packets separated by the separation means, and reproducing the basic information Audio information corresponding to the output means Informative And a pulse output control unit that reproduces based on the reproduction timing and outputs a pulse signal for controlling the environment forming unit.
[0021]
In the output terminal according to claim 4, as shown in claim 5, the environment forming means to be controlled by the pulse signal output from the pulse output means is the basic information reproduction output means. It is conceivable that the illumination environment forming means artificially forms an illumination environment of a sound field formed by the output performance sound or a field where the output video can be visually recognized.
[0022]
These information supply devices and output terminals shown in claims 3 to 5 are effective for use in the information supply system described above, but the information supply device shown in claim 3 or the output terminal shown in claim 4 are also claimed. The operation and effect similar to those described for the system of No. 1 are exhibited, and the output terminal shown in claim 5 exhibits the same operations and effects as those described for the system of Claim 2, so that duplicated operations are achieved.・ Description of effects is omitted.
[0023]
DETAILED DESCRIPTION OF THE INVENTION
Next, an embodiment of the present invention will be described in detail.
FIG. 1 is a block diagram illustrating a configuration of an output terminal 60 according to the present embodiment. FIG. 2 illustrates a configuration of an information supply system 10 including an output terminal 60 and an information supply apparatus 20 that supplies information to the output terminal 60. It is a block diagram.
[0024]
The information supply system 10 is configured by connecting an information supply apparatus 20 and an output terminal 60 via a transmission line 90 formed of a coaxial cable or the like. The information supply device 20 includes an encoding device 50 that is detachable from the information supply device 20. In FIG. 2, only one output terminal 60 is illustrated, but a plurality of output terminals 60 are usually connected to one information supply apparatus 20. Any transmission line 90 may be considered regardless of whether it is wired or wireless.
[0025]
First, the encoding apparatus 50 will be described with reference to FIG. The encoding device 50 is used for inputting information to be supplied from the information supply device 20 to the output terminal 60 from the outside. The encoding device 50 includes a video encoder 51, a video PES packetizer 52, an audio encoder 53, an audio PES packetizer 54, an editing device 55, a private PES packetizer 56, and an input / output device 57.
[0026]
The video encoder 51 can encode an analog video signal inputted from the outside and convert it into a digital data string. The digital data string is converted into a digital data string by the video PES packetizer 52, in this case according to the MPEG2 standard. PES packets are converted and output as video PES packets. As shown in FIG. 5A, the video PES packet is composed of a header portion and an effective data portion. The header part includes a packet start code, a packet length, a header length, reproduction time management information, and the like.
[0027]
Similarly, the audio encoder 53 can encode an analog audio signal input from the outside and convert it into a digital data string. The audio signal converted into the digital data string is converted by the audio PES packetizer 54 in accordance with the MPEG2 standard. A PES packet is generated and output as an audio PES packet. As shown in FIG. 5B, the data structure of the audio PES packet is the same as that of the video PES packet except for the contents of the effective data portion. A PID (Packet Identification) for identifying a packet is included in the packet start code.
[0028]
On the other hand, private data is also output as a private PES packet. In this embodiment, control data for outputting a pulse signal is included in the private PES packet. This pulse signal output control data needs to be synchronized with audio information or video information. In this embodiment, in order to synchronize with audio information, the following editing is performed and created. .
[0029]
Taking the case of karaoke as an example, lighting control data corresponding to the audio signal of the karaoke song is input to the editing device 55 from an external personal computer (personal computer, not shown) or the like as private data. For this control data, it is necessary to set the reproduction time for each predetermined unit. This is set based on the reproduction time management information of the audio information. Therefore, the reproduction time management information of the audio PES packet can be acquired from the audio PES packetizer 54. Further, it is configured such that a manual operation can be performed by inputting a predetermined instruction from the input / output device 57 or displaying and outputting the current setting status. For example, the editing operator can change and set the lighting control mode.
[0030]
After such editing work, the private PES packetizer 56 further converts the packet into a PES packet according to the MPEG2 standard and outputs it as a private PES packet. The data structure of this private PES packet is as shown in FIG. become. The header portion includes packet start code, packet length, header length, and reproduction time management information, similar to the video PES packet and audio PES packet. The effective data includes a pulse output style, frequency management information, and the like.
[0031]
As shown in FIG. 6, the pulse output style is the output direction or output type of the pulse. In FIG. 6, “positive” is set as the pulse output direction and “open collector” is set as the output type. FIG. 8 is an example of a pulse output for a two-phase (A, B) phase motor having a step angle of 90 °, for example. If the pulse output direction is “positive”, as shown in FIG. If the A phase advances 90 ° and the pulse output direction is “negative”, the B phase is set to advance 90 ° as shown in FIG.
[0032]
On the other hand, in the case of the present embodiment, the frequency management information is designated frequency NO. It is. The designated frequency NO. For this, a corresponding frequency is set as shown in FIG. For example, the specified frequency NO. For “0”, 10 kHz, designated frequency NO. For “1”, it is 20 KHz. 7 is stored in an internal memory of a pulse output control device 82 (see FIG. 1) to be described later.
[0033]
Next, the configuration of the information supply device 20 will be described.
When the encoding device 50 is connected to the information supply device 20, as shown in FIG. 2, the video PES packet as the output from the video PES packetizer 52 is input to the input interface 21 of the information supply device 20, and the audio PES. The audio PES packet as the output of the packetizer 54 is input to the input interface 22, and the private PES packet as the output of the private PES packetizer 56 is input to the input interface 23.
[0034]
The video PES packet input to the input interface 21 and the audio PES packet input to the input interface 22 are transferred to the video / audio storage device control unit 25 via the bus 24, and the video / audio storage device control unit 25 stores basic information. It is written and stored in a predetermined area of the video / audio storage devices 26a and 26b as means. The video / audio storage device control unit 25 can read the video data and audio data that are PES packets stored in the video / audio storage devices 26a and 26b.
[0035]
Also, the private PES packet input from the input interface 23 is transferred to the private storage device control unit 27 and written and stored in a predetermined area of the private storage device 28 as private information storage means. The PES packetized private data stored in the private storage device 28 can be read by the private storage device control unit 27.
[0036]
The video / audio storage device control unit 25 can read the video data stored in the video / audio storage devices 26 a and 26 b and transfer it to the video buffer memory 31, and can read the audio data and transfer it to the audio buffer memory 32. . Further, the private storage device control unit 27 can read private data stored in the private storage device 28 and transfer it to the private buffer memory 41.
[0037]
The video buffer memory 31 can temporarily store the video data sent from the video / audio storage device control unit 25 and output it in response to a request from the multiplexer 35 as multiplexing means. Similarly, the audio buffer memory 32 can temporarily store the audio data sent from the video / audio storage device control unit 25 and output it in response to a request from the multiplexer 35. The private buffer memory 41 can temporarily store a private data string sent from the private storage device control unit 27 and output it in response to a request from the multiplexer 35.
[0038]
The multiplexer 35 multiplexes the PES packet sequence of video data, the PES packet sequence of audio data, and the PES packet sequence of private data sent from the three buffer memories 31, 32, and 41 as shown in FIG. The transport stream (TS) can be output to the head end 37 through the output interface 36. In FIG. 4, video PES, private PES, and audio PES packets are multiplexed one by one in that order, but the order and number of packets are not necessarily limited. However, when a private PES packet is inserted into a TS, if it is connected and multiplexed so as to be placed immediately before an audio PES packet that should be used as a reference for timing of pulse output on the output terminal 60 side, output described later When TS is played back on the terminal 60, when playing back the basic audio data, private data to be output corresponding to the audio data is always detected, so that the pulse output is not in time for audio playback. There is no.
[0039]
Although not shown, the information supply apparatus 20 is provided with a plurality of data output mechanisms including the video buffer memory 31, the audio buffer memory 32, the private buffer memory 41, the multiplexer 35, and the output interface 36 described above. The head end 37 can send the TS sent from the plurality of data output mechanisms to the transmission line 90 through the channel assigned to each output interface 36. Further, the head end 37 can transmit a signal sent from the modem 47 through a channel for bidirectional communication, and can transfer a signal input from the transmission path 90 through the channel for bidirectional communication to the modem 47. .
[0040]
The modem 47 is connected to an input / output control unit 30 as control means via the bus 24, and the input / output control unit 30 is connected to the output line 90 via the modem 47 and the head end 37. Data can be transmitted to the terminal 60 and data from the output terminal 60 can be received. Further, the input / output control unit 30 can control the operation of each unit of the information supply device 20 described above.
[0041]
Next, the configuration of the output terminal 60 will be described with reference to FIG.
As shown in FIG. 1, the output terminal 60 includes a central control device 61 as control means for controlling the operation of each part of the terminal. The central controller 61 is configured as a well-known microcomputer. The central control device 61 is connected with an input device 63 as an input means having a keyboard (not shown). When the input device 63 is operated, various data and instructions can be input to the central control device 61. it can. The central control device 61 is connected to the transmission line 90 via the modem 62 and can communicate with the input / output control unit 30 of the information supply device 20 using the above-described bidirectional communication channel. .
[0042]
Further, a tuner 64 as a receiving means is connected to the transmission path 90. The tuner 64 can select a channel in accordance with an instruction from the central control device 61, and can receive information transmitted on the selected channel.
Information received by the tuner 64 is sent to a system decoder 65 as a separating means. The system decoder 65 separates a TS (transport stream) received and transferred by the tuner 64 into a video PES packet, an audio PES packet, and a private PES packet, and a video buffer 73, an audio buffer 66, and a private buffer, respectively. 81 can be output.
[0043]
The audio decoder 67 can read and decode the audio PES packet from the audio buffer 66 and output it to the amplifier 69 as an analog audio signal. The amplifier 69 can amplify the audio signal and send it to the speaker 70 for sound output. The amplifier 69 has a mixing function. When a microphone 71 is connected as shown by a broken line in FIG. 1, for example, a karaoke user's singing voice signal input from the microphone 71 and an audio decoder 67. Can be amplified and then output to the speaker 70. That is, this output terminal 60 can be used as a karaoke device.
[0044]
Further, the video decoder 74 can read and decode the video PES packet from the video buffer 73 and output it to the video output device 75 as an analog video signal. The video output device 75 can output the video signal from the video decoder 74 to a monitor television 76 as display means. On the monitor television 76, an image based on the video signal is displayed.
[0045]
On the other hand, the pulse output control device 82 reads and decodes the private PES packet from the private buffer 81, creates a pulse signal, and outputs it to the illumination means 78 as "illumination environment forming means". As described above, the designated frequency NO. A table indicating the relationship between (0, 1, 2,...) And the corresponding frequencies (10 KHz, 20 KHz, 30 KHz,...) Is stored. The output direction and output type of the pulse obtained by decoding the private PES packet, and the designated frequency NO. A pulse signal is output to the illumination means 78 based on the frequency corresponding to.
[0046]
Moreover, the illumination means 78 should just be able to control a brightness etc. with the pulse signal from the pulse output control apparatus 82, and is specifically provided with the stepping motor, the inverter, etc., and by the input pulse signal A stepping motor and an inverter are driven. Note that the illumination means includes not only a so-called illuminator that serves as a light source but also a mirror ball in a karaoke box or a disco, for example. As the control, not only the brightness and color are changed, but in the case of a mirror ball, the presence / absence of rotation and the control of the rotation speed can be considered.
[0047]
As is clear from the above description, the audio decoder 67, the amplifier 69, the speaker 70, the video decoder 74, the video output device 75, the monitor television 76, and the like correspond to basic information reproduction output means, and the pulse output control device 82. Etc. correspond to pulse output control means.
[0048]
Next, the operation of the information supply system 10 of this embodiment will be described.
First, when a user of the output terminal 60 operates the input device 63 to request supply of desired information, the central control device 61 sends a request for sending this information through the modem 62 and supplies information via the transmission line 90. Transmit to device 20. Note that the user can designate a desired movie or karaoke song number, for example, by operating a predetermined key on the input device 63.
[0049]
On the other hand, in the information supply apparatus 20, the input / output control unit 30 receives this request through the modem 47. Next, the input / output control unit 30 reads out audio data and private data corresponding to the designated information, and video data suitable for the background video (for example, if it is karaoke, it is appropriately selected depending on the genre of the song). Instruct the video / audio storage device control unit 25 and the private storage device control unit 27 to transfer the data output mechanism selected by the input / output control unit 30 to the video buffer memory 31, the audio buffer memory 32, and the private buffer memory 41, respectively. To do.
[0050]
Further, the input / output control unit 30 notifies the output terminal 60 that has requested information about the channel assigned to the output interface 36 of the selected data output mechanism.
In the output terminal 60, the central controller 61 instructs the tuner 64 to select a channel. In this way, the output terminal 60 waits for a TS (transport stream) to be transmitted through the channel.
[0051]
Next, in the information supply device 20, the video / audio storage device controller 25 reads predetermined video data from the video / audio storage devices 26a and 26b and transfers it to the video buffer memory 31, and also reads the audio data to read the audio buffer memory. 32. On the other hand, the private storage device control unit 27 reads predetermined private data from the private storage device 28 and transfers it to the private buffer memory 41.
[0052]
Video data, audio data, and private data read from the video buffer memory 31, audio buffer memory 32, and private buffer memory 41 are input to the multiplexer 35.
The multiplexer 35 generates one TS by multiplexing the PES packet sequence of video data, the PES packet sequence of audio data, and the PES packet sequence of private data sent from the three buffer memories 31, 32, and 41. Then, the data is output to the head end 37 through the output interface 36. The head end 37 sends this TS through a predetermined channel.
[0053]
In the output terminal 60, the tuner 64 receives the TS through the designated channel.
The operation of the output terminal 60 from the time when this TS is received will be described with reference to FIGS.
[0054]
FIG. 9 shows processing executed in the system decoder 65. First, in the first step S1, it is determined whether a TS packet has been acquired. When the TS packet is acquired, the process proceeds to S2 and the PID is decoded.
A TS packet has a packet start code as shown in (A) to (C) of FIG. 5 regardless of whether it is an audio PES, video PES, or private PES, and the packet start code includes a PID. ing. Therefore, in S2, the PID is decrypted, and S3 to S5 are determined according to the decryption result.
[0055]
That is, if the acquired TS packet is an audio PES packet (S3: YES), the process proceeds to S6 and is distributed to the audio buffer 66. If it is a private PES packet (S4: YES), the process proceeds to S7 and is allocated to the private buffer 81. If it is a video PES packet (S5: YES), the process proceeds to S8 and is allocated to the video buffer 73.
After the processing of S6 to S8 is completed, the process returns to S1 and waits for the next TS packet.
[0056]
In this way, the audio PES packet, the private PES packet, and the video PES packet distributed to the audio buffer 66, the private buffer 81, and the video buffer 73 based on the PID are the audio decoder 67, the pulse output control device 82, and the video decoder, respectively. The data is read to 74 to execute a predetermined process. Hereinafter, each process will be described.
[0057]
First, processing in the video decoder 74 will be described with reference to FIG.
First, in step S11, a video PES packet is read from the video buffer 73. In S12, reproduction time management information is read from the header portion (see FIG. 5A) in the PES packet.
[0058]
In subsequent S13, it is determined whether or not it is time to reproduce, and if it is the reproduction time, the process proceeds to S14, where the video PES packet is decoded and output to the video output device 75 as an analog video signal. After the video output process is completed, the process returns to S11, the next video PES packet is read, and the processes after S12 are repeated.
[0059]
Whether or not it is the reproduction time in S13 is determined by comparing the basic synchronization signal with the reproduction time management information. The video decoder 74 starts reproduction processing after the synchronization signal is reset first, and when the basic synchronization signal matches the reproduction time management information, an affirmative determination is made in S13.
[0060]
Next, processing in the audio decoder 67 will be described with reference to FIG.
First, in step S21, an audio PES packet is read from the audio buffer 66. In S22, reproduction time management information is read from the header portion (see FIG. 5B) in the audio PES packet.
[0061]
In subsequent S23, it is determined whether or not it is time to reproduce. The playback time in S23 is the same as in the video PES packet. That is, after the basic synchronization signal is reset, the audio decoder 67 starts the reproduction process, and when this basic synchronization signal matches the reproduction time management information, an affirmative determination is made in S23. If an affirmative determination is made in S23, that is, if the playback time is reached, then the flow shifts to S24 to notify the pulse output controller 82. This notification content is reproduction time management information.
[0062]
Then, after the process of S24 ends, the process proceeds to S25. In S25, the audio PES packet is decoded and output to the amplifier 69 as an analog audio signal. After the audio output process is completed, the process returns to S21, the next audio PES packet is read, and the processes after S22 are repeated.
[0063]
Next, processing in the pulse output control device 82 will be described with reference to FIG.
First, in step S31, a private PES packet is read from the private buffer 81. In S32, reproduction time management information is read from the header portion (see FIG. 5C) in the read private PES packet. In subsequent S33, the notification output from the audio decoder 67 as a result of the processing in S24 of FIG. 11 is obtained.
[0064]
Then, in S34, it is determined whether or not it is time to reproduce. Whether or not it is the reproduction timing in S34 is determined as follows. That is, based on the notification (reproduction time management information in the audio PES packet) from the audio decoder 67 obtained in S33, the reproduction time of the audio PES packet matches the reproduction time management information of the private PES packet read out in S32. In this case, an affirmative determination is made in S34.
[0065]
If an affirmative determination is made in S34, that is, if the reproduction timing, the process proceeds to S35. In S35, the private PES packet is read from the private buffer 81 and decoded. As described above, in the internal memory of the pulse output control device 82, the designated frequency NO. A table indicating the relationship between (0, 1, 2,...) And the corresponding frequencies (10 KHz, 20 KHz, 30 KHz,...) Is stored. The output direction and output type of the pulse obtained by decoding the private PES packet, and the designated frequency NO. The pulse signal created based on the frequency corresponding to is output to the illumination means 78.
[0066]
By executing the processing as described above, the analog audio signal output from the audio decoder 67 is amplified by the amplifier 69, sent to the speaker 70, and output as sound. The analog video signal output from the video decoder 68 is displayed on the monitor television 76 from the video output device 72. In this way, a movie or karaoke can be enjoyed.
[0067]
In the case of this embodiment, a pulse signal is output to the illumination unit 78 in synchronization with the reproduction timing of the audio signal, and the brightness or the like in the illumination unit 78 can be changed by this pulse signal. For example, in movies, of course, sound effects according to the scene are originally applied, but if the effects of lighting are further added, it can be further enjoyed. A more realistic sensation can be provided by providing viewers with a lighting environment that is close to the scenes of a calm dance scene in a movie or an intense scene where explosives explode. Similarly, even if it is karaoke, if there is an illumination effect that changes according to the karaoke accompaniment, it can be further enjoyed.
[0068]
As described above, the illuminating means 78 includes not only a luminaire that itself serves as a light source but also a mirror ball, etc. The control includes not only changing the brightness and color, but also the rotational speed of the mirror ball, etc. Can also be adjusted.
As mentioned above, although embodiment of this invention was described, it cannot be overemphasized that this invention is not limited to such embodiment, and can be implemented in a various aspect in the range which does not deviate from the main point of this invention.
[0069]
For example, in the above embodiment, audio information and video information are supplied as a set, but either one of them may be provided. For example, it may be a combination of video information and corresponding private information.
Moreover, although the said embodiment demonstrated the control of lighting environment, it is not restricted to it, It is also possible to make it virtual reality further by controlling another environment. For example, as the environment forming means other than lighting, a blowing means, a temperature adjusting means, an odor generating means, a smoke generating means, or the like can be considered.
[0070]
If wind is sent to the sound field, etc. by the air blowing means, for example, in the case of a song of the sea image or a song / video of the winter image, the presence can be enhanced, and the temperature of the sound field etc. can be increased by the temperature adjusting means. For example, if the temperature is lowered in the case of a song / video with a winter image, the presence is increased. Note that the air blowing means and the temperature adjusting means for adjusting the temperature of the sound field or the like by changing the temperature of the air to be blown by using a so-called air-conditioning means are used or combined, so that the air blowing means and the temperature adjusting means Can also be used.
[0071]
Also, the odor generating means sends a predetermined odor to the sound field. For example, it generates a sea odor in the case of a song / video of an ocean image, or a forest in the case of a song / video of a mountain or forest image. It may be possible to generate an odor. In addition, when sending this smell to a sound field, you may utilize the said ventilation means. For example, an odor generating source is arranged at the air outlet, and the odor is sent on the wind.
[0072]
The smoke generating means generates smoke in the sound field or the like, and is effective when used in the case of a fantasy song or video.
In this way, by creating an environment according to the song and video using environment forming means that appeals mainly to the human senses, for example, if used for karaoke, it is heard not only by singers but also around Even people who enjoy it can enjoy it enough. In addition to the various environment forming means described above, for example, it is conceivable that a chair on which a user sits is shaken to form a sense of presence on a ship or a train. In any case, since a stepping motor, an inverter, or the like that can be controlled by a pulse signal need only be provided, it can be applied to the various environment forming means described above.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration of an output terminal according to an embodiment.
FIG. 2 is a block diagram illustrating a configuration of an information supply system according to the embodiment.
FIG. 3 is a block diagram illustrating a configuration of the encoding apparatus according to the embodiment.
FIG. 4 is a schematic explanatory diagram of a transport stream supplied from an information supply device.
5A is an explanatory diagram showing a data configuration of a video PES packet, FIG. 5B is an explanatory diagram showing a data configuration of an audio PES packet, and FIG. 5C is an explanatory diagram showing a data configuration of a private PES packet; .
FIG. 6 is an explanatory diagram of a loss output style and frequency management information included as effective data in a private PES packet.
[Fig. 7] Designated frequency NO. It is explanatory drawing of the table which shows the corresponding relationship between and frequency.
FIG. 8 is an explanatory diagram of a pulse example output for a two-phase (A, B) phase motor having a step angle of 90 °.
FIG. 9 is a flowchart showing processing executed in the system decoder of the output terminal.
FIG. 10 is a flowchart showing processing executed in the video decoder of the output terminal.
FIG. 11 is a flowchart showing processing executed in the audio decoder of the output terminal.
FIG. 12 is a flowchart showing processing executed in the pulse output control device of the output terminal.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 ... Information supply system 20 ... Information supply apparatus
25 ... Video / audio storage device controller 26a, 26b ... Video / audio storage device
27 ... Private storage device control unit 28 ... Private storage device
30 ... Input / output control unit 31 ... Video buffer memory
32 ... Audio buffer memory 35 ... Multiplexer
36 ... Output interface 37 ... Head end
41 ... Private buffer memory 50 ... Encoding device
51 ... Video encoder 52 ... Video PES packetizer
53 ... Audio encoder 54 ... Audio PES packetizer
55 ... Editing device 56 ... Private PES packetizer
57 ... Input / output device 60 ... Output terminal
61 ... Central control device 64 ... Tuner
65 ... System decoder 66 ... Audio buffer
67 ... Audio decoder 69 ... Amplifier
70 ... Speaker 73 ... Video buffer
74 ... Video decoder 75 ... Video output device
76 ... Monitor TV 78 ... Illumination means
81 ... Private buffer 82 ... Pulse output control device
90 ... transmission path

Claims

It is supplied to the output terminal via a transmission path external output information from the information supply apparatus including the audio information and private information, so as to a predetermined external output process based on the external output information at its output terminal Information supply system
The information supply device includes:
Basic wherein the audio information based on a predetermined information compression coding standard, stored in a state of being packetized in a format comprising time management information indicating when to play for each predetermined access unit in the header portion Information storage means;
The private information, for outputting a pulse signal for environmental forming means control corresponding to the output of the audio information, including the management information of the pulse output style information and the pulse frequency to the predetermined information compression coding standard Private information storage means for storing the packetized state based on,
An audio information and private information that is the packetized and multiplexing means for generating a transport stream by multiplexing the time series so that private information is placed in temporally earlier position than the audio information ,
The output terminal is
Separating means for separating the transport stream supplied from the information supply device into audio- side and private-side packets;
Reading the time management information from the packet of the separated audio side by the separating means, if it becomes a predetermined time to be reproduced, by reproducing the audio information of the corresponding packet, and outputs the performance sound or video Basic information reproduction output means;
The packets of the separated private side by the separating means and based on the management information of the pulse output style information and the pulse frequency, and reproduced based on the reproduction timing of the audio information corresponding in the basic information reproduction output means, environmental An information supply system comprising: pulse output control means for outputting as a pulse signal for forming means control.

The information supply system according to claim 1,
The environment forming means to be controlled by the pulse signal output from the pulse output means is a sound field formed by the performance sound output by the basic information reproduction output means or a place where the output video can be viewed. An information supply system which is a lighting environment forming means for artificially forming a lighting environment.

The information supply apparatus for supplying via the transmission path external output information to the output terminal for performing predetermined external output process based on the external output information including the audio information and private information,
Basic wherein the audio information based on a predetermined information compression coding standard, stored in a state of being packetized in a format comprising time management information indicating when to play for each predetermined access unit in the header portion Information storage means;
The private information, for outputting a pulse signal for environmental forming means control corresponding to the output of the audio information, including the management information of the pulse output style information and the pulse frequency to the predetermined information compression coding standard Private information storage means for storing the packetized state based on,
An audio information and private information that is the packetized and multiplexing means for generating a transport stream by multiplexing the time series so that private information is placed in temporally earlier position than the audio information The information supply apparatus supplies the output terminal with the transport stream state.

Have delivered over the transmission path external output information including the audio information and private information from the information supplying apparatus, an output terminal for executing a predetermined external output process based on the external output information, said the information supply device, based on predetermined information compression coding standard, and audio information in a state in which packet the time management information indicating when to play for each predetermined access unit in a format including a header portion Transformer generated by multiplexing the private information packetized based on the predetermined information compression coding standard in time series so that the private information is arranged at a position earlier in time than the audio information. At the output terminal where the port stream is sent,
The private information, the is intended for outputting a pulse signal for environmental forming means control corresponding to the output of the audio information, and be set management information of the pulse output style information and the pulse frequency,
Separating means for separating the transport stream supplied from the information supply device into audio- side and private-side packets;
Reading the time management information from the packet of the separated audio side by the separating means, if it becomes a predetermined time to be reproduced, by reproducing the audio information of the corresponding packet, and outputs the performance sound or video Basic information reproduction output means;
The packets of the separated private side by the separating means and based on the management information of the pulse output style information and the pulse frequency, and reproduced based on the reproduction timing of the audio information corresponding in the basic information reproduction output means, environmental An output terminal comprising: pulse output control means for outputting as a pulse signal for controlling the forming means.

The output terminal according to claim 4, wherein
The environment forming means to be controlled by the pulse signal output from the pulse output means is a sound field formed by the performance sound output by the basic information reproduction output means or a place where the output video can be viewed. An output terminal which is an illumination environment forming means for artificially forming an illumination environment.