JP2006238325A - カメラシステム - Google Patents

Abstract

【課題】Ｔｅｌｅ／Ｗｉｄｅカメラを有するカメラシステムにおいて、Ｔｅｌｅカメラの映像を表示機器において見ながらＰＴＺなどの制御を行った場合でも、表示映像が見やすく、かつ記録映像においても見やすくなるようなカメラシステムの提供。
【解決手段】被写体を中心に狭い範囲を撮影する高倍率ズームが可能なＴｅｌｅカメラ手段と、被写体周辺を含む広い範囲を撮影する広角度撮影が可能なＷｉｄｅカメラ手段とを備えたカメラシステムであって、ＴｅｌｅカメラをＰＴＺ（パン、チルト、ズーム）制御する手段と、ＴｅｌｅカメラとＷｉｄｅカメラで通信を行う手段と、ＴｅｌｅカメラのＰＴＺ制御に従った映像をＷｉｄｅ映像から切り出す手段と、Ｗｉｄｅ映像から切り出した映像をＴｅｌｅ映像に拡大する手段と、Ｔｅｌｅ映像とＷｉｄｅ映像を切り替えて送信する手段とを備え、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用することを特徴とするカメラシステム。
【選択図】 図１

Description

本発明は、複数のカメラを有するカメラシステムに関するものである。

従来、被写体を様々な角度から撮影するために被写体の周辺に異なる角度で複数配置した構成をとるカメラシステムや、同時刻に様々な映像を撮影するために様々な場所に複数配置した構成をとるカメラシステムがある（例えば特許文献１参照）。

このような複数のカメラを利用したカメラシステムの中に、被写体を拡大して撮影することを目的とする高倍率のズームが可能なＴｅｌｅカメラと、被写体周辺の広い範囲を撮影することを目的とする広角度撮影が可能なＷｉｄｅカメラを有するカメラシステムがある。
特開２０００−１１３１６６号公報（第１８頁、第１図及び第２図、第２３頁、第２１図）

しかしながら、上記のようなＴｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムにおいて、ＴｅｌｅカメラをＰＴＺすると、Ｔｅｌｅカメラの映像はＷｉｄｅカメラに比べて拡大された映像となるので、Ｔｅｌｅカメラ移動中の映像はブレのため不安定となる。また、移動スピードが高速になるにつれ、さらに不安定な映像となり、Ｔｅｌｅカメラの映像を表示機器において見ながら制御した場合において、目的の被写体をとらえることやすばやく別の被写体に移動することは難しい。さらに、記録された映像に関してもＴｅｌｅカメラの移動中の映像は見づらい映像となる。

本発明は、上記のような問題点を解決するためになされたもので、Ｔｅｌｅ／Ｗｉｄｅカメラを有するカメラシステムにおいて、Ｔｅｌｅカメラの映像を表示機器において見ながらＰＴＺなどの制御を行った場合でも、表示映像が見やすく、かつ記録映像においても見やすくなるようなカメラシステムを提供することを目的とする。

上記の目的を達成するために、本発明は、第１の手段として、被写体を中心に狭い範囲を撮影する高倍率ズームが可能なＴｅｌｅカメラ手段と、被写体周辺を含む広い範囲を撮影する広角度撮影が可能なＷｉｄｅカメラ手段とを備えたカメラシステムであって、ＴｅｌｅカメラをＰＴＺ（パン、チルト、ズーム）制御する手段と、ＴｅｌｅカメラとＷｉｄｅカメラで通信を行う手段と、ＴｅｌｅカメラのＰＴＺ制御に従った映像をＷｉｄｅ映像から切り出す手段と、Ｗｉｄｅ映像から切り出した映像をＴｅｌｅ映像に拡大する手段と、Ｔｅｌｅ映像とＷｉｄｅ映像を切り替えて送信する手段とを備え、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用することを特徴とするカメラシステムである。

また、第２の手段として、Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅカメラ画角の変更を指示する手段とを備えたカメラシステムであって、Ｔｅｌｅカメラ画角の変更指示が逐次変更の場合、Ｔｅｌｅカメラ画角の目的映像範囲と現映像範囲の間をＷｉｄｅ映像から切り出して一定時間で移動しながら送信することを特徴とするカメラシステムである。

また、第３の手段として、Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅカメラ画角の変更を指示する手段とを備えたカメラシステムであって、Ｔｅｌｅカメラ画角の変更指示が瞬時変更の場合、Ｔｅｌｅカメラ画角の目的映像範囲をＷｉｄｅ映像から切り出して送信することを特徴とするカメラシステムである。

また、第４の手段として、Ｔｅｌｅカメラ画角とＷｉｄｅカメラ映像から切り出した映像範囲が一致した場合に、Ｗｉｄｅカメラ映像からＴｅｌｅカメラ映像に切り替えることを特徴とするカメラシステムである。

また、第５の手段として、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用中の時や、切り替わりの時において、ユーザーに報知する手段を備えることを特徴とするカメラシステムである。

また、第６の手段として、Ｔｅｌｅカメラの移動時間を予測して、移動割合を決めることを特徴とするカメラシステムである。

また、第７の手段として、Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅ／Ｗｉｄｅカメラ画角の変更を指示する手段とを備えたカメラシステムであって、Ｗｉｄｅカメラ画角の変更指示がある場合においても、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用する手段を備えるカメラシステムである。

本発明によれば、Ｔｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムにおいて、Ｔｅｌｅカメラの映像を表示しながらＴｅｌｅカメラをＰＴＺするときに、Ｔｅｌｅ映像を含むＷｉｄｅ映像があれば、Ｗｉｄｅ映像からＴｅｌｅ映像を切り出し、拡大するなどの画像処理を行うことでＴｅｌｅ映像に代用し、Ｔｅｌｅカメラが移動停止後本来のＴｅｌｅ映像に切り替えることで、Ｔｅｌｅカメラ移動中において安定した映像を表示及び記録することができ、さらにすばやくＴｅｌｅカメラ画角を移動することもできるカメラシステムを提供することができるという効果を生む。

以下本発明を実施するための最良の形態を、実施例により詳しく説明する。

（第１の実施形態）
図１は、本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムの構成図の一例である。

図１において、１０１はＷｉｄｅカメラであり、主に広角度撮影に優れ、被写体周辺の広い範囲を撮影する。

１０２は雲台であり、Ｗｉｄｅカメラ１０１を乗せ、Ｗｉｄｅカメラ１０１のパン、チルトを行う。

１０３はＴｅｌｅカメラであり、主にズーム機能に優れ、被写体を拡大して撮影する。

１０４は雲台であり、Ｔｅｌｅカメラ１０３を乗せ、Ｔｅｌｅカメラ１０３のパン、チルトを行う。また、雲台１０２と雲台１０４は連動して動作することも可能である。

１０５はＴｅｌｅカメラの画角を示している。

１０６はＷｉｄｅカメラの画角を示している。

１０７は表示機器であり、Ｗｉｄｅカメラ１０１の画像やＴｅｌｅカメラ１０３の画像を同時または切り替えることにより表示することができる。また、記録装置１０８に記録されている画像も表示することができる。

図２は、本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ映像と表示機器の表示映像例である。

図２において、２０１はＴｅｌｅ／Ｗｉｄｅカメラ画角（図上）及び表示映像（図下）であり、上下共に同時刻である。また、２０２、２０３も２０１と同様の構成画面となり、２０１、２０２、２０３の順に時間が経過している。２０４、２０５、２０６はＴｅｌｅ画角であり、Ｗｉｄｅ画角２０７、２０８、２０９の画角内にある。２１０、２１１、２１２は表示映像であり、Ｔｅｌｅカメラの映像を表示させている。

２０１の状態は、Ｔｅｌｅ／Ｗｉｄｅカメラ共に静止している状態である。この状態では、Ｔｅｌｅカメラの映像を２１０の表示画面に表示させる場合、２０４のＴｅｌｅカメラ画角の映像がそのまま表示される。

次に、２０２の状態は、Ｔｅｌｅカメラの映像を表示したまま、Ｔｅｌｅカメラを移動させようとした場合である。このように、Ｔｅｌｅカメラの映像を表示したまま、Ｔｅｌｅカメラを移動させると、移動中のＴｅｌｅ画角２０５の映像はブレのため不安定となり、移動スピードに応じてさらに不安定な映像となる。一方、Ｗｉｄｅカメラは停止したままなので、Ｗｉｄｅ画角２０８の映像は安定した映像を表示することができる。そこで、Ｔｅｌｅ画角２０５の移動範囲がＷｉｄｅ画角２０８の範囲内であれば、Ｗｉｄｅ画角２０８の映像からＴｅｌｅ画角２０５の映像を切り出し、拡大するなどの画像処理を行うことで、Ｔｅｌｅ映像に代用する。なお、一連のカメラ切り替え制御及び画像処理を自動で行うことで、ユーザーは特に意識せずに、操作することができる。また、ユーザーが任意に決める実施形態でもよい。

そして、２０３の状態は、Ｔｅｌｅカメラの移動が停止後、Ｔｅｌｅ画像２０６が安定した画像を表示することができるので、Ｗｉｄｅ画像で代用していた表示画像２１２をＴｅｌｅ画像２０６に切り替えることで、２０１の状態に戻る。

図３は、本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラと表示機器の内部ブロック図である。

図３において、３０１はＴｅｌｅカメラ、３０８はＷｉｄｅカメラ、３１５は表示機器、３２０は記録装置である。なお、Ｔｅｌｅカメラ３０１、Ｗｉｄｅカメラ３０８、表示機器３１５、記録装置３２０はそれぞれ近傍として説明しているが、遠隔地であってもよい。

３０２はＴｅｌｅカメラの撮像装置であり、レンズ、センサー、現像装置を含む。本実施形態ではセンサーにＣＣＤを想定しているが、ＣＭＯＳセンサーの場合も現像及び画像処理の方法が異なるだけで本実施形態を実施することは可能である。また、ズーム機能も備えている。

３０３はＴｅｌｅカメラのカメラ制御部であり、Ｔｅｌｅカメラの制御をすべて行う。また、Ｗｉｄｅカメラ３０８とも連動して動作することが可能である。

３０４はＴｅｌｅカメラ３０１のパン、チルト制御を行い、カメラ制御部３０３にしたがい、Ｗｉｄｅカメラ３０８と連動する。

３０５は画像処理部であり、撮像装置３０２で撮影した映像の画像処理を行う。３０６は記録部であり、撮像装置３０２で撮影した映像を記録する。また、カメラ制御部３０３が本装置の制御を行うためのプログラムコードやデータも格納されている。本実施形態においてはメモリとしてＲＯＭ（リードオンリメモリ）やＲＡＭ（ランダムアクセスメモリ）とＤＶテープ、ＤＶＤ、カード類のような着脱可能な記録メディアまたはＨＤＤのように着脱不可な記録媒体を想定している。３０７は通信部であり、複数のカメラと通信を行うことができる。本実施形態においては、Ｗｉｄｅカメラ３０８と表示機器３１５と記録装置３２０と通信を行うことができる。Ｗｉｄｅカメラ３０８において３０９〜２１４は、それぞれ３０２から３０７に対応する。

３１６は通信部であり、複数のカメラと通信を行うことができる。本実施形態においては、Ｔｅｌｅカメラ３０１とＷｉｄｅカメラ３０８と記録装置３２０と通信を行うことができる。３１７は表示制御部であり、通信部３１６と表示装置３１８の表示制御を行う。

３１８は表示装置であり、複数のカメラ映像を表示することができる。また、記録装置に記録されている映像データを表示することもできる。

３１９は入力装置であり、キーなどの入力デバイスを想定している。この表示機器３１５の入力装置３１９を利用して、Ｔｅｌｅカメラ画角を変更したり、Ｔｅｌｅ／Ｗｉｄｅカメラ映像の表示を切り替えたりする。また、入力装置はＴｅｌｅ／Ｗｉｄｅカメラ側に備える構成でもよい。

３２１は通信部であり、複数のカメラと通信を行うことができる。本実施形態においては、Ｔｅｌｅカメラ３０１とＷｉｄｅカメラ３０８と表示機器３１５と通信を行うことができる。

３２２は制御部であり、通信部３２１とストレージ３２３の制御を行う。３２３はストレージであり、本実施形態ではＨＤＤを想定しているが、映像を記録できるものであればよい。

図４は、本発明第１の実施形態において、Ｔｅｌｅ／Ｗｉｄｅカメラの映像を表示機器と記録装置に送信する際のＴｅｌｅ／Ｗｉｄｅカメラのフローチャートである。

図４において、ステップＳ４０１〜４１８はＴｅｌｅカメラ、ステップＳ４１９〜４３２はＷｉｄｅカメラの処理である。

ステップＳ４０１はＴｅｌｅカメラ制御信号を確認する。

ステップＳ４０２はＴｅｌｅカメラ制御信号からＴｅｌｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ４０４、移動していない場合はＳ４０３の処理を行う。

ステップＳ４０３はＴｅｌｅカメラ映像をＴｅｌｅカメラ映像として表示機器及び記録装置に送信する。

ステップＳ４０４はＷｉｄｅカメラに制御信号要求を行う。

ステップＳ４０５はＷｉｄｅカメラ信号を確認する。

ステップＳ４０６はＷｉｄｅカメラ信号がＷｉｄｅカメラ制御信号であるかどうかを判断し、Ｗｉｄｅカメラ制御信号の場合はステップＳ４０８、Ｗｉｄｅカメラ制御信号でない場合はＳ４０７の処理を行う。

ステップＳ４０７はステップＳ４０４でＷｉｄｅカメラに制御信号要求を送信してからＷｉｄｅカメラ制御信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ４０５、１秒経過後はステップＳ４０３の処理を行う。なお、時間はこの限りでない。

ステップＳ４０８はＷｉｄｅカメラ制御信号よりＷｉｄｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ４０３、移動していない場合はステップＳ４０９の処理を行う。

ステップＳ４０９はステップＳ４０１のＴｅｌｅカメラ制御信号と、ステップＳ４０５のＷｉｄｅカメラ制御信号から両カメラの画角を調査する。本実施形態においては、Ｔｅｌｅ／Ｗｉｄｅカメラが一体化しており、予め画角と雲台の位置情報を設定することで制御信号より画角が調査できることを想定しているが、画角の判断は、直接画像認証によって行ったり、特徴点より判断したりするなど様々な方法が考えられる。

ステップＳ４１０はステップＳ４０９で調査したＴｅｌｅ／Ｗｉｄｅカメラの画角において、Ｔｅｌｅカメラの画角がＷｉｄｅカメラの画角範囲内にあるかどうかを判断し、範囲内にある場合はステップＳ４１１、範囲内にない場合はステップＳ４０３の処理を行う。

ステップＳ４１１はＷｉｄｅカメラにＴｅｌｅカメラの映像代用要求を送信する。Ｔｅｌｅカメラ映像代用要求にはＷｉｄｅカメラ映像中の切り出し位置情報や画像サイズ情報なども含まれる。

ステップＳ４１２はＷｉｄｅカメラ信号を確認する。

ステップＳ４１３はＷｉｄｅカメラ信号がＷｉｄｅカメラ映像代用開始信号であるかどうかを判断し、Ｗｉｄｅカメラ映像代用開始信号の場合はステップＳ４１５、Ｗｉｄｅカメラ制御信号でない場合はＳ４１４の処理を行う。

ステップＳ４１４はステップＳ４１１でＷｉｄｅカメラに映像代用要求を送信してからＷｉｄｅカメラ映像代用開始信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ４１２、１秒経過後はステップＳ４０３の処理を行う。なお、時間はこの限りでない。

ステップＳ４１５はＴｅｌｅカメラ映像を表示機器及び記録装置へ送信するのを停止する。

ステップＳ４１６はＴｅｌｅカメラ制御信号を確認する。

ステップＳ４１７はＴｅｌｅカメラ制御信号からＴｅｌｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ４１６、移動していない場合はＳ４１８の処理を行う。

ステップＳ４１８はＷｉｄｅカメラに映像代用停止要求を送信する。

ステップＳ４１９はＴｅｌｅカメラ信号を確認する。

ステップＳ４２０はＴｅｌｅカメラ信号がＷｉｄｅカメラ制御信号要求であるかどうかを判断し、Ｗｉｄｅカメラ制御信号要求である場合はステップＳ４２２、Ｗｉｄｅカメラ制御信号要求でない場合はＳ４２１の処理を行う。

ステップＳ４２１はＷｉｄｅカメラ映像をＷｉｄｅカメラ映像として表示機器及び記録装置に送信する。

ステップＳ４２２はＴｅｌｅカメラにＷｉｄｅカメラ制御信号を送信する。

ステップＳ４２３はＴｅｌｅカメラ信号を確認する。

ステップＳ４２４はＴｅｌｅカメラ信号がＴｅｌｅカメラ映像代用要求であるかどうかを判断し、Ｔｅｌｅカメラ映像代用要求の場合はステップＳ４２６、Ｔｅｌｅカメラ映像代用要求でない場合はＳ４２５の処理を行う。

ステップＳ４２５はステップＳ４２２でＴｅｌｅカメラにＷｉｄｅカメラ制御信号を送信してからＷｉｄｅカメラ制御信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ４２３、１秒経過後はステップＳ４２１の処理を行う。なお、時間はこの限りでない。

ステップＳ４２６はＴｅｌｅカメラから送信されてきたＴｅｌｅカメラ映像代用要求情報に付加された切り出し位置情報に従って、Ｗｉｄｅカメラ映像からＴｅｌｅカメラ映像を切り出す。

ステップＳ４２７はＴｅｌｅカメラから送信されてきたＴｅｌｅカメラ映像代用要求情報に付加された画像サイズ情報に従って、Ｗｉｄｅカメラ映像切り出したＴｅｌｅカメラ映像を拡大する。

ステップＳ４２８はＴｅｌｅカメラに対してＷｉｄｅカメラにおいてＴｅｌｅカメラ映像代用開始信号を送信する。
ステップＳ４２９はＷｉｄｅカメラ映像をＷｉｄｅカメラ映像、Ｔｅｌｅ映像用に画像処理したＷｉｄｅカメラ映像をＴｅｌｅ映像とし、表示機器及び記録装置に送信する。

ステップＳ４３０はＴｅｌｅカメラ信号を確認する。

ステップＳ４３１はＴｅｌｅカメラ信号が映像代用停止要求であるかどうかを判断し、映像代用停止要求の場合はステップＳ４２１、映像代用停止要求でない場合はＳ４２９の処理を行う
以上のような実施形態において、Ｔｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムにおいて、Ｔｅｌｅカメラの映像を表示しながらＴｅｌｅカメラをＰＴＺするときに、Ｔｅｌｅ画像を含むＷｉｄｅ映像があれば、Ｗｉｄｅ映像からＴｅｌｅ映像を切り出し、拡大するなどの画像処理を行うことでＴｅｌｅ映像に代用し、Ｔｅｌｅカメラが移動停止後本来のＴｅｌｅ映像に切り替えることで、Ｔｅｌｅカメラ移動中においても安定した映像を表示及び記録することができるカメラシステムを提供することができる。

なお、本実施形態においてＴｅｌｅカメラ映像をＷｉｄｅカメラ映像で代用する際の画像処理をＴｅｌｅカメラ側で主に行ったが、Ｗｉｄｅカメラ側やＴｅｌｅカメラ／Ｗｉｄｅカメラ分担で行うことでもよい。

（第２の実施形態）
本発明第２の実施形態は、第一の実施形態において表示機器からのＴｅｌｅカメラ画角の変更指示に着目した実施例である。

図５は、本発明第２の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ映像と表示機器の表示映像例である。

図５において、５０１はＴｅｌｅ／Ｗｉｄｅカメラ画角を指示する表示映像サブ（図上）及び表示映像メイン（図下）であり、上下共に同時刻である。また、５０２、５０３も５０１と同様の構成画面となり、５０１、５０２、５０３の順に時間が経過している。５０４、５０５、５０６、５１３はＴｅｌｅ画角であり、Ｗｉｄｅ画角５０７、５０８、５０９の画角内にある。５１０、５１１、５１２は表示映像メインであり、表示映像サブで指示したＴｅｌｅカメラ画角の映像を表示している。

５０１の状態は、Ｔｅｌｅ／Ｗｉｄｅカメラ共に静止している状態である。この状態では、Ｔｅｌｅカメラ画角の映像を表示画面メイン５１０に表示させる場合、Ｔｅｌｅカメラ画角５０４の映像がそのまま表示される。

ここで、Ｔｅｌｅカメラ画角５０４の映像を表示したまま、現映像範囲から目標映像範囲５１３までＴｅｌｅカメラ画角の逐次変更指示をする。

その場合、５０２のように５０１の現映像範囲と５１３の目標映像範囲の間を一定間隔毎にＷｉｄｅカメラ画角５０８の映像から切り出してＴｅｌｅカメラ画角５０５の映像に代用し、表示映像メイン５１１に表示する。そして、その間にＴｅｌｅカメラ画角を現映像範囲から目標映像範囲まで移動させる。なお、切り出す間隔は、現映像範囲から目標映像範囲までの移動時間を予測し、移動割合を調整することもできる。したがって、表示はＷｉｄｅカメラ画角をＴｅｌｅカメラ画角に代用しているので、Ｔｅｌｅカメラ画角を高速に移動しても、映像のブレなどを気にする必要がなくなる。

そして、５０３のようにＴｅｌｅカメラ画角５０６の移動が目標映像範囲に到達後、Ｗｉｄｅカメラ画角５０９の映像で代用していた表示画像メイン５１２をＴｅｌｅカメラ画角５０６の映像に切り替えることで、現映像範囲から目標映像範囲までの移動をすばやくすることができ、さらにその間の表示も見やすくすることができる。

図６は、本発明第２の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ、表示機器、記録装置間のシーケンス図である。

６０１は表示機器がＴｅｌｅカメラに対してＴｅｌｅカメラ映像の表示要求を行っている。

６０２はＴｅｌｅカメラが表示機器からの映像表示要求に対して、表示機器にＴｅｌｅカメラ映像を送信している。

６０３はＴｅｌｅカメラが表示機器からの映像表示要求に対して、記録装置にＴｅｌｅカメラ映像を送信している。

６０４は表示機器がＴｅｌｅカメラ映像を表示している状態で、Ｔｅｌｅカメラに対して、画角の変更を指示している。

６０５はＴｅｌｅカメラが表示機器からの画角変更の指示があったことを、Ｗｉｄｅカメラに伝えるために制御信号を送信している。

６０６はＷｉｄｅカメラがＴｅｌｅカメラの画角変更があったことを確認し、Ｗｉｄｅ画面で代用するための情報をＴｅｌｅカメラに送信している。

６０７はＴｅｌｅカメラがＷｉｄｅカメラからの制御信号とＴｅｌｅカメラの制御信号より、Ｗｉｄｅカメラでの代用が可能である場合に、Ｗｉｄｅカメラに対して代用要求を送信する。

６０８はＷｉｄｅカメラがＴｅｌｅカメラからの代用要求に対して、Ｗｉｄｅカメラで代用を開始することをＴｅｌｅカメラに送信している。

６０９はＷｉｄｅカメラがＴｅｌｅカメラ映像に加工したＷｉｄｅカメラ映像を表示機器に送信する。

６１０はＷｉｄｅカメラがＴｅｌｅカメラ映像に加工したＷｉｄｅカメラ映像を記録装置に送信する。

６１１は表示機器がＴｅｌｅカメラ画角の変更を停止する指示をＴｅｌｅカメラに送信する。

６１２はＴｅｌｅカメラが表示機器からのＴｅｌｅカメラ画角の変更を停止する指示を受け、Ｗｉｄｅカメラに対して映像代用停止要求を送信する。

６１３は表示機器からのＴｅｌｅカメラ画角変更指示がなくなったため、Ｔｅｌｅカメラが表示機器からの映像表示要求に対して、表示機器にＴｅｌｅカメラ映像を送信している。

６１４は表示機器からのＴｅｌｅカメラ画角変更指示がなくなったため、Ｔｅｌｅカメラが表示機器からの映像表示要求に対して、記録装置にＴｅｌｅカメラ映像を送信している。

以上のような実施形態において、Ｔｅｌｅ／Ｗｉｄｅカメラ、表示機器、記録装置を含むカメラシステムにおいて、表示機器からのＴｅｌｅカメラ画角の変更指示に対して、Ｔｅｌｅカメラの映像を表示しながらＴｅｌｅカメラの画角を変更するときに、Ｔｅｌｅ画像を含むＷｉｄｅ映像があれば、Ｗｉｄｅ映像からＴｅｌｅ映像を切り出し、拡大するなどの画像処理を行うことでＴｅｌｅ映像に代用し、Ｔｅｌｅカメラが移動停止後本来のＴｅｌｅ映像に切り替えることで、Ｔｅｌｅカメラ移動中においても安定した映像を表示及び記録することができるカメラシステムを提供することができる。

（第３の実施形態）
本発明第３の実施形態では、第２の実施例の図５においてＴｅｌｅカメラ画角５０４の映像を表示したまま、現映像範囲から目標映像範囲５１３までＴｅｌｅカメラ画角の移動を逐次変更指示で行ったが、瞬時変更指示で行った場合について説明する。

図５において、Ｔｅｌｅカメラ画角５０４の映像を表示したまま、現映像範囲５０４から目標映像範囲５１３までＴｅｌｅカメラ画角の瞬時変更指示をする。

その場合、目標映像範囲をＷｉｄｅカメラ画角５０８の映像から切り出してＴｅｌｅカメラ画角５０５の映像に代用し、表示映像メイン５１１に表示する。

そして、５０３のようにＴｅｌｅカメラ画角５０６の移動が目標映像範囲に到達後、Ｗｉｄｅカメラ画角５０９の映像で代用していた表示画像メイン５１２をＴｅｌｅカメラ画角５０６の映像に切り替えることで、現映像範囲から目標映像範囲までの移動を瞬時に行うことができる。

（第４の実施形態）
第１〜第３の実施形態においては、Ｗｉｄｅカメラが移動中の場合は、Ｔｅｌｅカメラが移動中にＷｉｄｅカメラ映像で代用することはできなかった。

解決策のひとつとして、Ｔｅｌｅカメラが移動中はＷｉｄｅカメラを移動させないように制御することも考えられるが、機能が制限されてしまうため、本実施形態では、ＴｅｌｅカメラとＷｉｄｅカメラを交互に移動させることで、Ｔｅｌｅカメラ移動中のＷｉｄｅカメラ映像で代用する期間を調整し、上記問題に対応する。

図７は、本発明第２の実施形態において、Ｔｅｌｅ／Ｗｉｄｅカメラの映像を表示機器と記録装置に送信する際のＴｅｌｅ／Ｗｉｄｅカメラのフローチャートである。

図７において、ステップＳ７０１〜７２３はＴｅｌｅカメラ、ステップＳ７２４〜７４４はＷｉｄｅカメラの処理である。

ステップＳ７０１はＴｅｌｅカメラ制御信号を確認する。

ステップＳ７０２はＴｅｌｅカメラ制御信号からＴｅｌｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ７０４、移動していない場合はＳ７０３の処理を行う。

ステップＳ７０３はＴｅｌｅカメラ映像をＴｅｌｅカメラ映像として表示機器及び記録装置に送信する。

ステップＳ７０４はＷｉｄｅカメラに制御信号要求を行う。

ステップＳ７０５はＷｉｄｅカメラ信号を確認する。

ステップＳ７０６はＷｉｄｅカメラ信号がＷｉｄｅカメラ制御信号であるかどうかを判断し、Ｗｉｄｅカメラ制御信号の場合はステップＳ７０８、Ｗｉｄｅカメラ制御信号でない場合はＳ７０７の処理を行う。

ステップＳ７０７はステップＳ７０４でＷｉｄｅカメラに制御信号要求を送信してからＷｉｄｅカメラ制御信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ７０５、１秒経過後はステップＳ７０３の処理を行う。なお、時間はこの限りでない。

ステップＳ７０８はＷｉｄｅカメラ制御信号よりＷｉｄｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ７０９、移動していない場合はステップＳ７１３の処理を行う。

ステップＳ７０９はＷｉｄｅカメラに移動停止信号を送信する。

ステップＳ７１０はＷｉｄｅカメラ信号を確認する。

ステップＳ７１１はＷｉｄｅカメラ信号がＷｉｄｅカメラ移動停止確認信号であるかどうかを判断し、Ｗｉｄｅカメラ移動停止確認信号の場合はステップＳ７１３、Ｗｉｄｅカメラ移動停止確認信号でない場合はステップＳ７１２の処理を行う。

ステップＳ７１２はステップＳ７０９でＷｉｄｅカメラに移動停止信号を送信してからＷｉｄｅカメラ移動停止確認信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ７１０、１秒経過後はステップＳ７０３の処理を行う。なお、時間はこの限りでない。

ステップＳ７１３はステップＳ７０１のＴｅｌｅカメラ制御信号と、ステップＳ７０５のＷｉｄｅカメラ制御信号またはステップＳ７１０のＷｉｄｅカメラ移動停止確認信号から両カメラの画角を調査する。本実施形態においては、Ｔｅｌｅ／Ｗｉｄｅカメラが一体化しており、予め画角と雲台の位置情報を設定することで制御信号より画角が調査できることを想定しているが、画角の判断は、直接画像認証によって行ったり、特徴点より判断したりするなど様々な方法が考えられる。

ステップＳ７１４はステップＳ７１３で調査したＴｅｌｅ／Ｗｉｄｅカメラの画角において、Ｔｅｌｅカメラの画角がＷｉｄｅカメラの画角範囲内にあるかどうかを判断し、範囲内にある場合はステップＳ７１５、範囲内にない場合はステップＳ７０３の処理を行う。

ステップＳ７１５はＷｉｄｅカメラにＴｅｌｅカメラの映像代用要求を送信する。Ｔｅｌｅカメラ映像代用要求にはＷｉｄｅカメラ映像中の切り出し位置情報や画像サイズ情報なども含まれる。

ステップＳ７１６はＷｉｄｅカメラ信号を確認する。

ステップＳ７１７はＷｉｄｅカメラ信号がＷｉｄｅカメラ映像代用開始信号であるかどうかを判断し、Ｗｉｄｅカメラ映像代用開始信号の場合はステップＳ７１９、Ｗｉｄｅカメラ制御信号でない場合はＳ７１８の処理を行う。

ステップＳ７１８はステップＳ７１５でＷｉｄｅカメラに映像代用要求を送信してからＷｉｄｅカメラ映像代用開始信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ７１６、１秒経過後はステップＳ７０３の処理を行う。なお、時間はこの限りでない。

ステップＳ７１９はＴｅｌｅカメラ映像を表示機器及び記録装置へ送信するのを停止する。

ステップＳ７２０はＴｅｌｅカメラ制御信号を確認する。

ステップＳ７２１はＴｅｌｅカメラ制御信号からＴｅｌｅカメラが移動している状態かどうかを判断し、移動している場合はステップＳ７２２、移動していない場合はＳ７２３の処理を行う。

ステップＳ７２２はステップＳ７１９でＴｅｌｅカメラ映像を表示機器及び記録装置へ送信することを停止してから０．１秒以内であるかどうかを判断している。０．１秒以内の場合はステップＳ７２０、０．１秒経過後はステップＳ７２３の処理を行う。つまり、ここで設定された時間だけＷｉｄｅカメラ映像でＴｅｌｅカメラ映像を代用できる。なお、時間はこの限りでない。

ステップＳ７２３はＷｉｄｅカメラに映像代用停止要求を送信する。

ステップＳ７２４はＴｅｌｅカメラ信号を確認する。
ステップＳ７２５はＴｅｌｅカメラ信号がＷｉｄｅカメラ制御信号要求であるかどうかを判断し、Ｗｉｄｅカメラ制御信号要求である場合はステップＳ７２７、Ｗｉｄｅカメラ制御信号要求でない場合はＳ７２６の処理を行う。

ステップＳ７２６はＷｉｄｅカメラ映像をＷｉｄｅカメラ映像として表示機器及び記録装置に送信する。

ステップＳ７２７はＴｅｌｅカメラにＷｉｄｅカメラ制御信号を送信する。

ステップＳ７２８はＷｉｄｅカメラ制御信号よりＷｉｄｅカメラが移動中であるかどうかを判断し、移動中である場合はステップＳ７２９、移動中でない場合はステップＳ７３４の処理を行う。

ステップＳ７２９はＴｅｌｅカメラ信号を確認する。

ステップＳ７３０はＴｅｌｅカメラ信号がＷｉｄｅカメラ移動停止信号であるかどうかを判断し、Ｗｉｄｅカメラ移動停止信号の場合はステップＳ７３２、Ｗｉｄｅカメラ移動停止信号でない場合はＳ７３１の処理を行う。

ステップＳ７３１はステップＳ７２７でＴｅｌｅカメラにＷｉｄｅカメラ制御信号を送信してからＷｉｄｅカメラ制御信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ７２９、１秒経過後はステップＳ７２６の処理を行う。なお、時間はこの限りでない。

ステップＳ７３２はＷｉｄｅカメラの移動を停止する。

ステップＳ７３３はＴｅｌｅカメラにＷｉｄｅカメラ移動停止確認信号を送信する。

ステップＳ７３４はＴｅｌｅカメラ信号を確認する。

ステップＳ７３５はＴｅｌｅカメラ信号がＴｅｌｅカメラ映像代用要求であるかどうかを判断し、Ｔｅｌｅカメラ映像代用要求の場合はステップＳ７３７、Ｔｅｌｅカメラ映像代用要求でない場合はＳ７３６の処理を行う。

ステップＳ７３６はステップＳ７２９またはステップＳ７３３で、ＴｅｌｅカメラにＷｉｄｅカメラ信号を送信してからＷｉｄｅカメラ制御信号が受信できるまでに１秒以内であるかどうかを判断している。１秒以内の場合はステップＳ７３４、１秒経過後はステップＳ７２６の処理を行う。

ステップＳ７３７はＴｅｌｅカメラから送信されてきたＴｅｌｅカメラ映像代用要求情報に付加された切り出し位置情報に従って、Ｗｉｄｅカメラ映像からＴｅｌｅカメラ映像を切り出す。

ステップＳ７３８はＴｅｌｅカメラから送信されてきたＴｅｌｅカメラ映像代用要求情報に付加された画像サイズ情報に従って、Ｗｉｄｅカメラ映像切り出したＴｅｌｅカメラ映像を拡大する。

ステップＳ７３９はＴｅｌｅカメラに対してＷｉｄｅカメラにおいてＴｅｌｅカメラ映像代用開始信号を送信する。

ステップＳ７４０はＷｉｄｅカメラ映像をＷｉｄｅカメラ映像、Ｔｅｌｅ映像用に画像処理したＷｉｄｅカメラ映像をＴｅｌｅ映像とし、表示機器及び記録装置に送信する。

ステップＳ７４１はＴｅｌｅカメラ信号を確認する。

ステップＳ７４２はＴｅｌｅカメラ信号が映像代用停止要求であるかどうかを判断し、映像代用停止要求の場合はステップＳ７４３、映像代用停止要求でない場合はＳ７４０の処理を行う。

ステップＳ７４３はＷｉｄｅカメラ映像をＷｉｄｅカメラ映像として表示機器及び記録装置に送信する。

ステップＳ７４４はステップＳ７４１でＴｅｌｅカメラ信号を受信してからの０．１秒以内であるかどうかを判断し、０．１秒以内であればステップＳ７４３、０．１秒経過後はステップＳ７２６の処理を行う。なお、時間はこの限りでない。

以上のような実施形態において、Ｔｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムにおいて、Ｔｅｌｅカメラの映像を表示しながらＴｅｌｅカメラをＰＴＺするときに、Ｔｅｌｅ画像を含むＷｉｄｅ映像があれば、Ｗｉｄｅ映像からＴｅｌｅ映像を切り出し、拡大するなどの画像処理を行うことでＴｅｌｅ映像に代用し、Ｔｅｌｅカメラが移動停止後本来のＴｅｌｅ映像に切り替えることで、Ｔｅｌｅカメラ移動中においても安定した映像を表示及び記録することができるカメラシステムを提供することができる。

さらに、Ｗｉｄｅカメラが移動中の場合においても、図７のステップＳ７２２の代用時間とステップＳ７４４の代用外時間を調整することにより、Ｔｅｌｅカメラ映像とＷｉｄｅカメラ映像を交互に利用することで、カメラの移動速度は低下するものの、両カメラ移動中においてもＴｅｌｅカメラ移動中の映像をＷｉｄｅカメラ映像で代用することができる。

なお、本実施形態においてＴｅｌｅカメラ映像をＷｉｄｅカメラ映像で代用する 際の画像処理をＴｅｌｅカメラ側で主に行ったが、Ｗｉｄｅカメラ側やＴｅｌｅカメラ／Ｗｉｄｅカメラ分担で行うことでもよい。

（第５の実施形態）
第１〜第４の実施形態においては、Ｔｅｌｅカメラ画角がＷｉｄｅカメラ画角の範囲内にない場合は、Ｔｅｌｅカメラの移動中にＷｉｄｅカメラ映像で代用することはできなかった。

解決策のひとつとして、Ｔｅｌｅカメラ画角がＷｉｄｅカメラ画角の範囲外に移動しようとした場合は、Ｔｅｌｅカメラ画角をＷｉｄｅカメラ画角の外へ移動できなくしたりする方法も考えられるが、機能が制限されてしまうため、本実施形態では、Ｔｅｌｅカメラ画角の移動に合わせてＷｉｄｅカメラを自動制御させ、Ｔｅｌｅカメラ画角が常にＷｉｄｅカメラ画角範囲内にあるようにする。

自動制御の方法としては、Ｔｅｌｅカメラ画角がＷｉｄｅカメラ画角範囲外へ移動し様としたときに、同時に画角を移動させる方法、Ｔｅｌｅカメラ画角がＷｉｄｅカメラ画角範囲外へ移動する前に、Ｔｅｌｅカメラ画角の移動に伴いＷｉｄｅカメラ画角も移動させる方法などがあるが、自動制御の方法は特に限定しない。

本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラを含むカメラシステムの構成図 本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ画像と表示機器の表示画像例 本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラと表示機器の内部ブロック図 本発明第１の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラの映像を表示機器と記録装置に送信する際のＴｅｌｅ／Ｗｉｄｅカメラのフローチャート 本発明第２の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ映像と表示機器の表示映像例 本発明第２の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラ、表示機器、記録装置間のシーケンス図 本発明第の実施形態によるＴｅｌｅ／Ｗｉｄｅカメラの映像を表示機器と記録装置に送信する際のＴｅｌｅ／Ｗｉｄｅカメラのフローチャート

符号の説明

１０１ Ｗｉｄｅカメラ
１０２ Ｗｉｄｅカメラの雲台
１０３ Ｔｅｌｅカメラ
１０４ Ｔｅｌｅカメラの雲台
１０５ Ｔｅｌｅカメラの画角
１０６ Ｗｉｄｅカメラの画角
１０７ 表示機器
１０８ 記録装置

Claims (7)

1. 被写体を中心に狭い範囲を撮影する高倍率ズームが可能なＴｅｌｅカメラ手段と、被写体周辺を含む広い範囲を撮影する広角度撮影が可能なＷｉｄｅカメラ手段とを備えたカメラシステムであって、ＴｅｌｅカメラをＰＴＺ（パン、チルト、ズーム）制御する手段と、ＴｅｌｅカメラとＷｉｄｅカメラで通信を行う手段と、ＴｅｌｅカメラのＰＴＺ制御に従った映像をＷｉｄｅ映像から切り出す手段と、Ｗｉｄｅ映像から切り出した映像をＴｅｌｅ映像に拡大する手段と、Ｔｅｌｅ映像とＷｉｄｅ映像を切り替えて送信する手段とを備え、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用することを特徴とするカメラシステム。
2. Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅカメラ画角の変更を指示する手段とを備えた請求項１記載のカメラシステムであって、Ｔｅｌｅカメラ画角の変更指示が逐次変更の場合、Ｔｅｌｅカメラ画角の目的映像範囲と現映像範囲の間をＷｉｄｅ映像から切り出して一定時間で移動しながら送信することを特徴とするカメラシステム。
3. Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅカメラ画角の変更を指示する手段とを備えた請求項１記載のカメラシステムであって、Ｔｅｌｅカメラ画角の変更指示が瞬時変更の場合、Ｔｅｌｅカメラ画角の目的映像範囲をＷｉｄｅ映像から切り出して送信することを特徴とするカメラシステム。
4. 請求項１記載のカメラシステムであって、Ｔｅｌｅカメラ画角とＷｉｄｅカメラ映像から切り出した映像範囲が一致した場合に、Ｗｉｄｅカメラ映像からＴｅｌｅカメラ映像に切り替えることを特徴とするカメラシステム。
5. 請求項１記載のカメラシステムであって、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用中の時や、切り替わりの時において、ユーザーに報知する手段を備えることを特徴とするカメラシステム。
6. 請求項２記載のカメラシステムであって、Ｔｅｌｅカメラの移動時間を予測して、移動割合を決めることを特徴とするカメラシステム。
7. Ｔｅｌｅ／Ｗｉｄｅカメラ映像を表示する表示機器手段と、Ｔｅｌｅ／Ｗｉｄｅカメラ画角の変更を指示する手段とを備えた請求項１記載のカメラシステムであって、Ｗｉｄｅカメラ画角の変更指示がある場合においても、Ｔｅｌｅカメラが移動中の映像をＷｉｄｅカメラ映像で代用する手段を備える、請求項１記載のカメラシステム。

Images