JP2012165071A - 撮像装置、受信装置、映像送信システムおよび映像送信方法 - Google Patents

Abstract

【課題】映像送信時のバッテリ消費を抑制可能な撮像装置、受信装置、映像送信システム、映像送信方法を提供する。
【解決手段】カメラ１０は、他のピクチャを参照せずに復号可能な第１ピクチャＰ１と、直前の符号化データＥＤの、他のピクチャを参照して復号可能な１以上の第２ピクチャとを組合せた送信用データＴＤをサーバ３０に間欠的に送信し、間欠的な送信の間の空時間にパワーセーブモードに移行する。これにより、第１ピクチャＰ１をサーバ３０に対してリアルタイムに提供しつつ、カメラ１０のバッテリ消費を抑制することができる。
【選択図】図７

Description

本発明は、撮像装置、受信装置、映像送信システムおよび映像送信方法に関する。

近年、バッテリ駆動される小型カメラを用いた、監視システム等の映像送信システムが実用化されている。映像送信システムでは、カメラがアクセスポイントを通じてサーバ等の受信装置に映像データを送信し、サーバが映像データを受信して処理する。サーバでは、物体検知や動体検知等、リアルタイム性を要求される、映像データの解析処理が行われる。

このような映像送信システムのカメラでは、解析処理のリアルタイム性を担保するために映像データを受信装置に定常的に送信することが要求されるので、データ送信のためにバッテリが常に消費されることになる。このため、映像送信システムの実現上、カメラのバッテリ消費を抑えることが課題となっていた。

このため、本発明は、映像送信時のバッテリ消費を抑制可能な撮像装置、受信装置、映像送信システム、映像送信方法を提供しようとするものである。

本発明のある観点によれば、他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなる符号化データを生成する符号化データ生成部と、符号化データの第１ピクチャと、符号化データの直前の符号化データの１以上の第２ピクチャとを組合せて送信用データを生成する送信用データ生成部と、映像ストリームを構成する複数の送信用データを送信用データの単位で間欠的に送信する無線通信部とを備える撮像装置が提供される。

無線通信部は、アクティブモードとパワーセーブモードからなる動作モードを有し、送信用データを送信した後に動作モードをパワーセーブモードに切替え、次の送信データを送信する前に動作モードをアクティブモードに切替える通信制御部をさらに備えてもよい。

無線通信部は、パワーセーブモードで搬送波の検波を停止してもよい。

撮像装置は、少なくとも無線通信部に動作電源を供給する電源供給部をさらに備えてもよい。

送信用データ生成部は、符号化データの第１ピクチャ、符号化データの直前の符号化データの１以上の第２ピクチャの順序でピクチャを配した送信用データを生成してもよい。

送信用データ生成部は、符号化データの１以上の第２ピクチャ、符号化データの直後の符号化データの第１ピクチャの順序でピクチャを配した送信用データを生成してもよい。

無線通信部は、それぞれの送信用データに含まれる１以上の第２ピクチャをまとめて、第１ピクチャとともに送信することで、複数の送信用データを送信用データの単位で間欠的に送信してもよい。

本発明の他の観点によれば、映像ストリームを構成する複数の送信用データを送信用データの単位で間欠的に受信する通信部であって、符号化データが他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなり、送信用データが符号化データの第１ピクチャと、符号化データの直前の符号化データの１以上の第２ピクチャとを組合せて生成される通信部と、送信用データに含まれる少なくとも第１ピクチャを解析処理する解析処理部とを備える受信装置が提供される。

受信装置は、送信用データに含まれる第１ピクチャの復号データと、送信用データの直前の送信用データに含まれる１以上の第２ピクチャの復号データとを組合せて映像データを生成する映像データ生成部をさらに備えてもよい。

本発明の他の観点によれば、前述した撮像装置と受信装置を備える映像送信システムが提供される。

本発明の他の観点によれば、他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなる符号化データを生成し、符号化データの第１ピクチャと、符号化データの直前の符号化データの１以上の第２ピクチャとを組合せて送信用データを生成し、映像ストリームを構成する複数の送信用データを送信用データの単位で間欠的に送信することを含む映像送信方法が提供される。

本発明の他の観点によれば、上記映像送信方法をコンピュータに実行させるためのプログラムが提供される。ここで、プログラムは、コンピュータ読取り可能な記録媒体を用いて提供されてもよく、通信手段等を介して提供されてもよい。

本発明によれば、映像送信時のバッテリ消費を抑制可能な撮像装置、受信装置、映像送信システム、映像送信方法を提供することができる。

本発明の実施形態に係る映像送信システムを示す図である。 本発明の実施形態に係るカメラの構成を示すブロック図である。 本発明の実施形態に係るサーバの構成を示すブロック図である。 符号化データと送信用データの構成例を示す図である。 送信用データの構成例を示す図である。 カメラの動作を示すフロー図である。 本発明の実施形態に係る映像送信システムでの映像送信方法を示す図である。 サーバの動作を示すフロー図である。 一般的な映像送信システムでの映像送信方法を示す図である。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

［１．一般的な映像送信システム］
まず、図９を参照して、一般的な映像送信システムでの映像送信方法について説明する。

図９は、一般的な映像送信システムでの映像送信方法を示す図である。図９に示すように、映像送信システムでは、カメラ１が映像データを不図示のアクセスポイントＡＰおよびネットワークＮＷを通じてサーバ３に送信し、サーバ３が映像データを受信してリアルタイムに解析処理する。

カメラ１は、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）２、Ｈ．２６４｜ＡＶＣ（ＩＴＵ−Ｔ勧告ＭＰＥＧ−４ Ｐａｒｔ１０：Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）等の方式で映像データを圧縮符号化する。映像データは、単独復号可能なピクチャ（第１ピクチャＰ１）と、このピクチャの差分であるピクチャ（第２ピクチャＰ２）として圧縮符号化される。なお、ピクチャとは、画像を意味し、１つのピクチャが１つの画像に相当する。圧縮符号化は、直交変換等を用いたフレーム内符号化とともに、動き補償を用いたフレーム間符号化（予測符号化）により行われる。

単独復号可能な第１ピクチャＰ１は、フレーム内符号化により符号化されるＩＤＲ（Ｉｎｓｔａｎｔｅｎｏｕｓ Ｄｅｃｏｄｉｎｇ Ｒｅｆｒｅｓｈ）ピクチャ、Ｉ（Ｉｎｔｒａ−ｄｅｃｏｄｅｄ）ピクチャ等であり、他のピクチャを参照せずに復号できる。単独復号不能な第２ピクチャＰ２は、フレーム間符号化により符号化されるＰ（Ｐｒｅｄｉｃｔｉｖｅ−ｃｏｄｅｄ）ピクチャ、Ｂ（Ｂｉ−ｄｉｒｅｃｔｉｏｎａｌｌｙ ｐｒｅｄｉｃｔｉｖｅ−ｃｏｄｅｄ）ピクチャ等であり、他のピクチャを参照しなければ復号できない。

カメラ１は、映像データを圧縮符号化し、符号化データＥＤ（符号化データの総称）を送信する。図９では、符号化データＥＤ１、ＥＤ２、ＥＤ３、ＥＤ４、…が順次に送信される。符号化データＥＤは、第１ピクチャＰ１と、このピクチャの差分である１以上の第２ピクチャＰ２とからなる。符号化データＥＤには、第１ピクチャＰ１に続いて１以上の第２ピクチャＰ２が配される。サーバ３は、符号化データＥＤを受信し、第１ピクチャＰ１を優先的に抽出し、抽出したピクチャを復号してリアルタイムに解析処理する。

このため、カメラ１では、解析処理のリアルタイム性を担保するために第１ピクチャＰ１をサーバ３に定期的に送信することが要求される。また、第１ピクチャＰ１または第２ピクチャＰ２を生成するたびに、生成したピクチャが逐次的に送信される。よって、カメラ１のバッテリは、複数の符号化データＥＤからなる映像ストリームの送信期間に亘って、データ送信のために常に消費されることになる。

［２．本発明の実施形態に係る映像送信システムの構成］
つぎに、図１から図３を参照して、本発明の実施形態に係る映像送信システムの構成について説明する。

図１は、本発明の実施形態に係る映像送信システムを示す図である。図１に示すように、映像送信システムは、カメラ１０、サーバ３０、アクセスポイントＡＰおよびネットワークＮＷを含んでいる。カメラ１０は、バッテリ駆動される小型の撮像装置であり、アクセスポイントＡＰに接続される。サーバ３０は、物体検知や動体検知等、リアルタイム性を要求される映像解析処理を行う情報処理装置であり、有線または無線でネットワークＮＷに接続される。アクセスポイントＡＰは、無線通信用のブリッジ、ルーター等であり、カメラ１０とネットワークＮＷとの間を接続する。

カメラ１０は、映像データをアクセスポイントＡＰに送信する。アクセスポイントＡＰは、カメラ１０との間でデータのバッファリングおよび送受信を行い、同様にネットワークＮＷを通じてサーバ３０との間でデータのバッファリングおよび送受信を行う。サーバ３０は、映像データを受信して解析処理する。なお、カメラ１０は、アクセスポイントＡＰまたは他のアクセスポイントを通じて他のサーバに接続されてもよい。また、サーバ３０は、不図示のユーザ端末等に映像データや解析処理の結果等を送信してもよい。

［２−１．カメラの構成］
図２は、本発明の実施形態に係るカメラ１０の構成を示すブロック図である。図２に示すように、カメラ１０は、光学系１１、カメラ制御部１２、映像取得部１３、符号化データ生成部１４、送信用データ生成部１５、無線通信部１６、通信制御部１７、電源供給部１８、記憶部１９および制御部２０を含んでいる。

光学系１１は、レンズ系、絞り・フォーカス調整機構、ズーム・シャッタ機構等からなり、被写体からの光を映像取得部１３に導く。カメラ制御部１２は、制御部２０から供給される制御信号に基づき光学系１１を制御する。制御信号は、後述する撮像素子から出力される撮像信号の情報に基づき制御部２０により生成される。

映像取得部１３は、撮像素子、撮像信号処理部、映像信号処理部等からなる。撮像素子は、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等からなり、光学系１１から導かれる光を電気信号に変換し、電気信号を信号処理して撮像信号として出力する。撮像信号処理部は、ＣＤＳ（Ｃｏｒｒｅｌａｔｅｄ Ｄｏｕｂｌｅ Ｓａｍｐｌｉｎｇ）回路、ＡＧＣ（Ａｕｔｏ Ｇａｉｎ Ｃｏｎｔｒｏｌ）回路、ＡＤＣ（Ａｎａｌｏｇ Ｄｉｇｉｔａｌ Ｃｏｎｖｅｒｔｅｒ）回路等からなり、撮像素子から供給される撮像信号を信号処理してデジタル信号として出力する。映像信号処理部は、γ補正回路、ホワイトバランス補正回路等からなり、撮像信号処理部から供給されるデジタル信号を信号処理して映像データとして出力する。

符号化データ生成部１４は、映像エンコーダ等からなり、映像取得部１３から供給される映像データを圧縮符号化し、符号化データＥＤを生成する。映像データは、ＭＰＥＧ２、Ｈ．２６４｜ＡＶＣ等の方式で圧縮符号化される。圧縮符号化は、直交変換等を用いたフレーム内符号化とともに、動き補償を用いたフレーム間符号化（予測符号化）により行われる。符号化データＥＤは、他のピクチャを参照せずに復号可能な第１ピクチャＰ１と、他のピクチャを参照しなければ復号できない第２ピクチャＰ２とからなる。第１ピクチャＰ１は、フレーム内符号化されたピクチャであり、第２ピクチャＰ２は、第１ピクチャＰ１の差分として、フレーム間符号化されたピクチャである。符号化データＥＤは、第１ピクチャＰ１と、これに続いて配される１以上の第２ピクチャＰ２とを含んでいる。

送信用データ生成部１５は、データ処理装置からなり、符号化データ生成部１４から供給される符号化データＥＤに含まれる第１ピクチャＰ１と第２ピクチャＰ２を区分し、送信用データＴＤを生成する。送信用データＴＤ（送信用データの総称）は、基本的に、ある符号化データＥＤの第１ピクチャＰ１と、この符号化データＥＤの直前の符号化データＥＤの１以上の第２ピクチャＰ２とを組合せたデータである。

無線通信部１６は、送受信回路等からなり、アクセスポイントＡＰとの間で送信用データＴＤ等のデータを送受信する。無線通信部１６では、映像ストリームを構成する複数の送信用データＴＤが送信用データＴＤの単位で間欠的に送信される。間欠的な送信は、送信用データＴＤに含まれる１以上の第２ピクチャＰ２をまとめて、第１ピクチャＰ１とともに送信することで行われる。無線通信部１６は、アクティブモードまたはパワーセーブモードの動作モードで動作する。アクティブモードでは、電源供給部１８から送受信回路に定常的に電源が供給され、パワーセーブモードでは、電源の必要性に応じて間欠的に電源が供給される。

通信制御部１７は、制御部２０から供給される制御信号に基づき無線通信部１６の動作を制御する。通信制御部１７は、送信用データＴＤを送信した直後に動作モードをパワーセーブモードに切替え、次の送信用データＴＤを送信する直前に動作モードをアクティブモードに切替える。

電源供給部１８は、充電可能または充電不能なバッテリ等からなり、無線通信部１６を含むカメラ１０の各部に動作電源を供給する。電源供給部１８では、制御部２０から供給される制御信号に基づき、無線通信部１６への電源供給が制御される。電源供給部１８は、動作電源の供給先となる各部や電源供給部１８を制御する制御部２０、通信制御部１７と接続される。

記憶部１９は、メモリ、ハードディスク等からなり、映像データ、符号化データＥＤ、送信用データＴＤ等を格納する。制御部２０は、ＣＰＵ、ＲＯＭ、ＲＡＭ等からなり、カメラ１０の動作に必要な演算および制御を行う。制御部２０は、ＲＯＭ等に記憶されているプログラムを読出し、ＲＡＭ上に展開して実行することで、カメラ１０の動作を制御する。制御部２０は、カメラ制御部１２、映像取得部１３、符号化データ生成部１４、送信用データ生成部１５、通信制御部１７、記憶部１９とバス２１を通じて接続される。

［２−２．サーバの構成］
図３は、本発明の実施形態に係るサーバ３０の構成を示すブロック図である。図３に示すように、サーバ３０は、通信部３１、解析処理部３２、映像復号部３３、映像データ生成部３４、記憶部３５および制御部３６を含んでいる。

通信部３１は、送受信回路等からなり、ネットワークＮＷを通じてアクセスポイントＡＰとの間で送信用データＴＤ等のデータを送受信する。また、通信部３１は、ネットワークＮＷまたは他のネットワークを通じて不図示のユーザ端末等に映像ストリームや解析処理の結果を送信してもよい。

解析処理部３２は、データ処理装置からなり、送信用データＴＤを用いて、物体検知や動体検知等、リアルタイム性を要求される解析処理を行う。解析処理には、送信用データＴＤから抽出されて復号された第１ピクチャＰ１が優先的に利用される。第１ピクチャＰ１は、他のピクチャの差分である第２ピクチャＰ２とは異なり、１ピクチャのデータを十分に有しているため、解析処理に優先的に利用される。ただし、解析処理には、第１ピクチャＰ１とともに１以上の第２ピクチャＰ２が利用されてもよい。

映像復号部３３は、映像デコーダ等からなり、送信用データＴＤに含まれるピクチャを伸張復号し、復号データを出力する。伸張復号は、フレーム内符号化およびフレーム間符号化に対応して行われる。

映像データ生成部３４は、データ処理装置からなり、送信用データＴＤから映像データを生成する。前述したように、送信用データＴＤは、基本的に、ある符号化データＥＤの第１ピクチャＰ１と、この符号化データＥＤの直前の符号化データＥＤの１以上の第２ピクチャＰ２とを組合せたデータである。よって、映像データは、送信用データＴＤに含まれる第１ピクチャＰ１の復号データと、この送信用データＴＤの後続の送信用データＴＤに含まれる１以上の第２ピクチャＰ２の復号データとを組合せることで生成される。

記憶部３５は、メモリ、ハードディスク等からなり、送信用データＴＤ、符号化データＥＤ、復号データ、映像データ等を格納する。制御部３６は、ＣＰＵ、ＲＯＭ、ＲＡＭ等からなり、サーバ３０の動作に必要な演算および制御を行う。制御部３６は、ＲＯＭ等に記憶されているプログラムを読出し、ＲＡＭ上に展開して実行することで、サーバ３０の動作を制御する。制御部３６は、サーバ３０の各部とバス２１を通じて接続される。

［３．符号化データＥＤと送信用データＴＤ］
つぎに、図４および図５を参照して、符号化データＥＤと送信用データＴＤについて説明する。

図４は、符号化データＥＤと送信用データＴＤの構成例を示す図である。図４に示す例では、映像ストリームを構成する各符号化データＥＤ１、ＥＤ２、ＥＤ３、…は、複数のネットワークＮＷ抽象レイヤ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔ Ｌａｙｅｒ：ＮＡＬ）ユニットから構成されている。具体的に、符号化データＥＤは、ＮＡＬ（ＩＤＲ）、ＮＡＬ（Ｐ）、ＮＡＬ（Ｂ１）、ＮＡＬ（Ｂ２）、ＮＡＬ（Ｂ３）のユニットから構成されている。

ＮＡＬユニットは、ＩＤＲピクチャ（ＩＤＲ）、Ｐピクチャ（Ｐ）、Ｂピクチャ（Ｂ１〜Ｂ３）のデータをそれぞれに含んでいる。また、符号化データＥＤの先頭およびＮＡＬユニット間には、ＮＡＬユニットの境界を示すデリミタＤが配置されている。なお、ＩＤＲピクチャは、単独復号可能な第１ピクチャＰ１であり、ＰピクチャおよびＢピクチャは、単独復号不能な第２ピクチャＰ２である。

送信用データＴＤは、符号化データＥＤの第１ピクチャＰ１と、この符号化データＥＤの直前の符号化データＥＤの１以上の第２ピクチャＰ２とを組合せて生成される。具体的には、符号化データＥＤ１の第１ピクチャＰ１から送信用データＴＤ１が生成される。符号化データＥＤ１の１以上の第２ピクチャＰ２と符号化データＥＤ２の第１ピクチャＰ１とから送信用データＴＤ２が生成される。符号化データＥＤ２の１以上の第２ピクチャＰ２と符号化データＥＤ３の第１ピクチャＰ１とから送信用データＴＤ３が生成される。送信用データＴＤの先頭には、送信用データＴＤを示す独自のヘッダＨが配置され、ＮＡＬユニット間には、デリミタＤが配置されている。

図５は、送信用データＴＤの構成例を示す図である。図５には、図４に対応して、符号化データＥＤｉ−１の１以上の第２ピクチャＰ２、この符号化データＥＤｉ−１の直後の符号化データＥＤｉの第１ピクチャＰ１の順序でピクチャを配して生成された送信用データＴＤｉ（ＴＤＡ）が示されている。なお、ｉは、２以上の自然数である。しかし、これとは逆に、送信用データＴＤｉ（ＴＤＢ）に示すように、符号化データＥＤｉの第１ピクチャＰ１、この符号化データＥＤｉの直前の符号化データＥＤｉ−１の１以上の第２ピクチャＰ２の順序でピクチャを配して生成されてもよい。

なお、図４および図５は、符号化データＥＤや送信用データＴＤの構成を限定するものではない。例えば、ＮＡＬユニットの数やピクチャの種類は、符号化データＥＤ間や送信用データＴＤ間で任意に規定される。もちろん、符号化データＥＤや送信用データＴＤには、ＩＤＲピクチャに代えてまたはＩＤＲピクチャとともに、第１ピクチャＰ１としてＩピクチャのＮＡＬユニットが含まれてもよい。

［４．本発明の実施形態に係る映像送信システムの動作］
つぎに、図６から図８を参照して、カメラ１０およびサーバ３０の動作について説明する。

図６は、カメラ１０の動作を示すフロー図である。図６に示すように、映像取得部１３は、光学系１１から導かれる光に対応する映像データを生成し（ステップＳ１１）、符号化データ生成部１４に供給する。符号化データ生成部１４は、映像取得部１３から供給される映像データをピクチャに圧縮符号化し（ステップＳ１２）、ピクチャを制御部２０に供給する。圧縮符号化は、フレーム内符号化およびフレーム間符号化（予測符号化）により行われる。映像データは、符号化データＥＤ毎に、第１ピクチャＰ１と、これに続く１以上の第２ピクチャＰ２の順序で圧縮符号化される。

制御部２０は、符号化データＥＤを構成するピクチャを供給されると、このピクチャが第２ピクチャＰ２であるかを判定する（ステップＳ１３）。このピクチャが単独復号不能な第２ピクチャＰ２である場合（ステップＳ１３で「Ｙｅｓ」）、制御部２０は、このピクチャ（第２ピクチャＰ２）を記憶部１９に格納する（ステップＳ１４）。ここで、制御部２０は、供給順序を特定可能なように、１以上の第２ピクチャＰ２を格納する。そして、第１ピクチャＰ１の供給が確認されるまで、ステップＳ１１〜Ｓ１４以降の処理が繰り返される。

一方、このピクチャが単独復号可能な第１ピクチャＰ１である場合（ステップＳ１３で「Ｎｏ」）、ステップＳ１５以降の処理が実行される。制御部２０は、記憶部１９から１以上の第２ピクチャＰ２を読出し（ステップＳ１５）、このピクチャ（第１ピクチャＰ１）とともに送信用データ生成部１５に供給する。なお、読出された第２ピクチャＰ２は、他の符号化データＥＤを処理する際に再び読み出されないように管理される。

送信用データ生成部１５は、符号化データＥＤｉの第１ピクチャＰ１と符号化データＥＤｉ−１の１以上の第２ピクチャＰ２を組合せて送信用データＴＤｉを生成し（ステップＳ１６）、送信用データＴＤｉを制御部２０に供給する。なお、ｉは、２以上の自然数である。また、送信用データＴＤ１は、第２ピクチャＰ２を含まず、符号化データＥＤ１の第１ピクチャＰ１からなる。ここで、図５に示した送信用データＴＤＡを生成する場合、符号化データＥＤｉ−１の１以上の第２ピクチャＰ２、符号化データＥＤｉの第１ピクチャＰ１の順序でピクチャが配される。また、図５に示した送信用データＴＤＢを生成する場合、符号化データＥＤｉの第１ピクチャＰ１、符号化データＥＤｉ−１の１以上の第２ピクチャＰ２の順序でピクチャが配される。

制御部２０は、送信用データＴＤを無線通信部１６に転送するとともに、無線通信部１６の動作モードをアクティブモードに切替えるための制御信号を通信制御部１７に出力する。通信制御部１７は、無線通信部１６への電源供給を開始するための制御信号を電源供給部１８に出力し、無線通信部１６は、動作モードをパワーセーブモードからアクティブモードに切替え（ステップＳ１７）、送信用データＴＤを送信する（ステップＳ１８）。無線通信部１６は、送信用データＴＤに含まれる１以上の第２ピクチャＰ２をまとめて、第１ピクチャＰ１とともに送信する。なお、送信データの送信中にステップＳ１１〜Ｓ１６の処理が行われてもよい。

送信用データＴＤの送信が終了すると、制御部２０は、動作モードをパワーセーブモードに切替えるための制御信号を通信制御部１７に出力する。通信制御部１７は、無線通信部１６への電源供給を終了するための制御信号を電源供給部１８に出力し、無線通信部１６は、動作モードをアクティブモードからパワーセーブモードに切替える（ステップＳ１９）。

図７は、本発明の実施形態に係る映像送信システムでの映像送信方法を示す図である。図７に示すように、カメラ１０は、前述した手順で、映像ストリームを構成する送信用データＴＤ１、ＴＤ２、ＴＤ３、ＴＤ４、…を送信用データＴＤの単位で間欠的に送信する。各送信用データＴＤは、１以上の第２ピクチャＰ２をまとめて、第１ピクチャＰ１とともに送信される。そして、カメラ１０は、各送信用データＴＤを送信した直後にパワーセーブモードに移行し、次の送信用データＴＤを送信する直前にアクティブモードに復帰する。

ここで、図９を参照して説明した一般的な映像送信システムでは、第１ピクチャＰ１または第２ピクチャＰ２を生成するたびに、生成したピクチャが逐次的に送信される。よって、カメラ１０のバッテリは、複数の符号化データＥＤからなる映像ストリームの送信期間に亘って、データ送信のために常に消費されることになる。

一方、本発明の実施形態に係る映像送信システムでは、ピクチャを逐次的に送信する代わりに、ピクチャを送信用データＴＤにブロック化して間欠的に送信する。これにより、データを送信しない期間には、ＩＥＥＥ８０２.１１に規定するＰＳＭ（Ｐｏｗｅｒ−Ｓａｖｉｎｇ Ｍｏｄｅ）等のパワーセーブモードに無線通信部１６を移行させることができる。そして、パワーセーブモードでは、搬送波の検波を行わないことで、搬送波の検出およびフレーム受信のためのバッテリ消費を最小限に抑制することが可能となる。

さらに、ピクチャを送信用データＴＤにブロック化して送信することで、ＩＥＥＥ８０２．１１ｎに規定するアグリゲーション効果が得られる。よって、一般的な映像送信方法でデータ送信の毎に実施する搬送波感知多重
アクセス／衝突回避方式（Ｃａｒｒｉｅｒ Ｓｅｎｓｅ Ｍｕｌｔｉｐｌｅ Ａｃｃｅｓｓ／Ｃｏｌｌｉｓｉｏｎ Ａｖｏｉｄａｎｃｅ：ＣＳＭＡ／ＣＡ）の処理回数を抑えることで、バッテリ消費を抑制することが可能となる。

図８は、サーバ３０の動作を示すフロー図である。図８に示すように、通信部３１は、送信用データＴＤを受信し（ステップＳ３１）、制御部３６に供給する。制御部３６は、映像データを解析処理するかを決定する（ステップＳ３２）。

解析処理する場合（ステップＳ３２で「Ｙｅｓ」）、制御部３６は、送信用データＴＤから第１ピクチャＰ１を抽出し（ステップＳ３３）、第１ピクチャＰ１を映像復号部３３に供給する。映像復号部３３は、第１ピクチャＰ１を復号し（ステップＳ３４）、復号データを解析処理部３２に供給する。解析処理部３２は、復号データに対して、物体検知や動体検知等の解析処理を施し（ステップＳ３５）、処理結果を出力する。処理結果は、ネットワークＮＷを通じて外部装置に送信されてもよく、記憶部３５等に格納されてもよい。映像復号部３３は、さらに１以上の第２ピクチャＰ２を復号し（ステップＳ３６）、復号データを映像データ生成部３４に供給する。映像データ生成部３４は、復号データから映像データを生成して記憶部３５に格納する（ステップＳ３７）。

映像データ生成部３４は、送信用データＴＤｉに含まれる第１ピクチャＰ１の復号データと、送信用データＴＤｉ＋１に含まれる１以上の第２ピクチャＰ２の復号データとを組合せて符号化データＥＤｉに対応する映像データを生成する。なお、ｉは、１以上の自然数である。

一方、解析処理しない場合（ステップＳ３２で「Ｎｏ」）、制御部３６は、送信用データＴＤを映像復号部３３に供給する。映像復号部３３は、第１ピクチャＰ１および１以上の第２ピクチャＰ２を復号し（ステップＳ３８）、復号データを映像データ生成部３４に供給する。映像データ生成部３４は、復号データから映像データを生成して記憶部３５に格納する（ステップＳ３９）。

なお、制御部３６は、映像データや解析処理の結果をユーザ端末等に送信してもよい。この場合、制御部３６は、ユーザ端末等からの指示に応じて、記憶部３５から映像データや解析処理を読出し、読出したデータを通信部３１を通じてユーザ端末等に送信する。

本発明の実施形態に係る映像送信システムでは、ピクチャを逐次的に受信する代わりに、ピクチャを送信用データＴＤにブロック化して間欠的に受信する。しかし、映像解析処理に優先的に利用される第１ピクチャＰ１については、一般的な映像送信方法と同様に、実時間に近いタイミングで受信される。

特に、符号化データＥＤの第１ピクチャＰ１、この符号化データＥＤの直前の符号化データＥＤの１以上の第２ピクチャＰ２の順序でピクチャを配して生成された送信用データＴＤ（図５の送信用データＴＤＢ等）を受信すれば、映像解析処理に用いる第１ピクチャＰ１を容易に検出することができる。一方、符号化データＥＤの１以上の第２ピクチャＰ２、この符号化データＥＤの直後の符号化データＥＤの第１ピクチャＰ１の順序でピクチャを配して生成された送信用データＴＤ（図５の送信用データＴＤＡ等）を受信すれば、映像ストリーム中のピクチャの順序に従って映像データが格納されるので、映像ストリームを容易に再生することができる。

［５．まとめ］
以上説明したように、本発明の実施形態に係る映像送信システムによれば、ピクチャを逐次的に送信する代わりに、送信用データＴＤにブロック化して間欠的に送信することで、データを送信しない期間には無線通信装置（無線通信部１６等）をパワーセーブモードに移行させることができる。これにより、一般的な映像送信システムでの映像送信方法に比して、映像送信時のバッテリ消費を最小限に抑制することができる。

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

１、１０ カメラ
１１ 光学系
１２ カメラ制御部
１３ 映像取得部
１４ 符号化データ生成部
１５ 送信用データ生成部
１６ 無線通信部
１７ 通信制御部
１８ 電源供給部
１９、３５ 記憶部
２０、３６ 制御部
２１、７ バス
３、３０ サーバ
３１ 通信部
３２ 解析処理部
３３ 映像復号部
３４ 映像データ生成部
ＡＰ アクセスポイント
ＮＷ ネットワーク
ＥＤ、ＥＤ１〜ＥＤ４ 符号化データ
ＴＤ、ＴＤ１〜ＴＤ４ 送信用データ

Claims (11)

1. 他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなる符号化データを生成する符号化データ生成部と、
   前記符号化データの前記第１ピクチャと、前記符号化データの直前の符号化データの前記１以上の第２ピクチャとを組合せて送信用データを生成する送信用データ生成部と、
   映像ストリームを構成する複数の前記送信用データを前記送信用データの単位で間欠的に送信する無線通信部と
   を備える撮像装置。
2. 前記無線通信部は、アクティブモードとパワーセーブモードからなる動作モードを有し、
   前記送信用データを送信した後に前記動作モードを前記パワーセーブモードに切替え、次の送信データを送信する前に前記動作モードを前記アクティブモードに切替える通信制御部をさらに備える、請求項１に記載の撮像装置。
3. 前記無線通信部は、前記パワーセーブモードで搬送波の検波を停止する、請求項２に記載の撮像装置。
4. 少なくとも前記無線通信部に動作電源を供給する電源供給部をさらに備える、請求項１から３のうちいずれか１項に記載の撮像装置。
5. 前記送信用データ生成部は、前記符号化データの前記第１ピクチャ、前記符号化データの直前の符号化データの前記１以上の第２ピクチャの順序でピクチャを配した送信用データを生成する、請求項１から４のうちいずれか１項に記載の撮像装置。
6. 前記送信用データ生成部は、前記符号化データの前記１以上の第２ピクチャ、前記符号化データの直後の符号化データの前記第１ピクチャの順序でピクチャを配した送信用データを生成する、請求項１から４のうちいずれか１項に記載の撮像装置。
7. 前記無線通信部は、それぞれの前記送信用データに含まれる前記１以上の第２ピクチャをまとめて、前記第１ピクチャとともに送信することで、前記複数の送信用データを前記送信用データの単位で間欠的に送信する、請求項１から６のうちいずれか１項に記載の撮像装置。
8. 映像ストリームを構成する複数の送信用データを前記送信用データの単位で間欠的に受信する通信部であって、符号化データが他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなり、前記送信用データが前記符号化データの前記第１ピクチャと、前記符号化データの直前の符号化データの前記１以上の第２ピクチャとを組合せて生成される通信部と、
   前記送信用データに含まれる少なくとも前記第１ピクチャを解析処理する解析処理部と
   を備える受信装置。
9. 前記送信用データに含まれる前記第１ピクチャの復号データと、前記送信用データの直前の送信用データに含まれる前記１以上の第２ピクチャの復号データとを組合せて映像データを生成する映像データ生成部をさらに備える、請求項８に記載の撮像装置。
10. 他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなる符号化データを生成する符号化データ生成部と、
    前記符号化データの前記第１ピクチャと、前記符号化データの直前の符号化データの前記１以上の第２ピクチャとを組合せて送信用データを生成する送信用データ生成部と、
    映像ストリームを構成する複数の前記送信用データを前記送信用データの単位で間欠的に送信する無線通信部とを有する撮像装置と、
    前記複数の送信用データを間欠的に受信する通信部と、
    前記送信用データに含まれる少なくとも前記第１ピクチャを解析処理する解析処理部とを有する受信装置と
    を備える映像送信システム。
11. 他のピクチャを参照せずに復号可能な第１ピクチャと、他のピクチャを参照して復号可能な１以上の第２ピクチャとからなる符号化データを生成し、
    前記符号化データの前記第１ピクチャと、前記符号化データの直前の符号化データの前記１以上の第２ピクチャとを組合せて送信用データを生成し、
    映像ストリームを構成する複数の前記送信用データを前記送信用データの単位で間欠的に送信すること
    を含む映像送信方法。

Images