JP2010114842A - 撮像装置及び撮像方法 - Google Patents

Abstract

【課題】可視光通信を用いて容易に意図通りの写真を撮影することが可能な撮像装置を提供すること。
【解決手段】撮影画像における顔の位置を指定する顔位置指定部と、撮影画像に含まれる顔の位置を認識する顔認識部と、顔位置指定部で指定した位置と、顔認識部で認識した位置との位置関係を判定する位置判定部と、位置判定部での判定結果に基づいた情報を変調するデータ変調部と、データ変調部で変調した情報が重畳された可視光を発光する可視光発光部と、を含む、撮像装置が提供される。その結果、可視光通信を用いて容易に意図通りの写真を撮影することが可能になる。
【選択図】図１

Description

本発明は、撮像装置及び撮像方法に関し、特に可視光通信機能を備える撮像装置に関する。

デジタルスチルカメラ等の撮像装置の分野において、消費電力を低減させたり、装置の小型化・軽量化を図ったりするために、撮影を補助する補助光の発光にＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ；発光ダイオード）が用いられ始めている。そして、ＬＥＤから発光される光に情報を重畳して送信しようとする可視光通信技術も撮像装置の分野において用いられ始めている（例えば、特許文献１、２参照）。

さて、デジタルスチルカメラを用いて、自分で自分を撮影しようとする場合には、三脚やテーブル等にデジタルスチルカメラを固定してアングルを決めた後に、セルフタイマーモードで撮影する方法がある。また、自分で自分の画像を撮影しようとする場合には、デジタルスチルカメラに顔検出機能を組み込み、被写体の顔が笑顔になった時点で自動撮影を開始するといった方法もある。

特開２００７−３１２２０４号公報 特開２００７−２９５４４６号公報

しかし、デジタルスチルカメラを固定してアングルを決めた後にセルフタイマーモードを使用して自分で自分を撮影する場合では、所望の位置に顔が来るように撮影するのは難しい。すなわち、セルフタイマーモードで撮影する場合には、カメラと立ち位置とを何度も往復して撮影を繰り返し、何度も撮影画像を確認することで、ようやく所望の画像を撮影できることが多く、撮影に時間がかかってしまうという問題があった。また、被写体の状態を検出して自動撮影する場合であっても、撮影者が自分の位置を判断することは出来ず、顔に焦点が合っている場合であっても背景が隠れてしまっているなど、意図通りの写真を撮影することが難しいという問題があった。

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、可視光通信を用いて意図通りの写真を容易に撮影することが可能な、新規かつ改良された撮像装置及び撮像方法を提供することにある。

上記課題を解決するために、本発明のある観点によれば、撮影画像における顔の位置を指定する顔位置指定部と、撮影画像に含まれる顔の位置を認識する顔認識部と、顔位置指定部で指定した位置と、顔認識部で認識した位置との位置関係を判定する位置判定部と、位置判定部での判定結果に基づいた情報を変調するデータ変調部と、データ変調部で変調した情報が重畳された可視光を発光する可視光発光部と、を含む、撮像装置が提供される。

かかる構成によれば、顔位置指定部は撮影画像における顔の位置を指定し、顔認識部は撮影画像に含まれる顔の位置を認識する。そして、位置判定部は顔位置指定部で指定した位置と、顔認識部で認識した位置との位置関係を判定し、データ変調部は位置判定部での判定結果に基づいた情報を変調し、可視光発光部はデータ変調部で変調した情報が重畳された可視光を発光する。その結果、撮像しようとする画像に対して顔認識処理を実行し、顔認識処理の結果認識できた顔の位置と、予め指定した顔の位置との位置関係に応じてデータを生成し、可視光通信によって該データを送信することで、可視光通信を用いて意図通りの写真を容易に撮影することが可能となる。

位置判定部の判定の結果、顔位置指定部で指定した位置と、顔認識部で認識した位置とが一致している場合には、データ変調部は撮影を開始する旨の情報を変調してもよい。

位置判定部は、可視光発光部が撮影を開始する旨の情報が重畳された可視光を発光した後に、顔位置指定部で指定した位置と、顔認識部で認識した位置との位置関係を再度判定し、データ変調部は、位置判定部が判定した結果、顔位置指定部で指定した位置と、顔認識部で認識した位置とが一致していない場合には、撮影を中止する旨の情報を変調してもよい。

位置判定部の判定の結果、顔位置指定部で指定した位置と、顔認識部で認識した位置とが一致していない場合には、データ変調部は顔の位置を移動させるための情報を変調してもよい。

また、上記課題を解決するために、本発明の別の観点によれば、撮影画像における顔の位置を指定する顔位置指定ステップと、撮影画像に含まれる顔の位置を認識する顔認識ステップと、顔位置指定ステップで指定した位置と、顔認識ステップで認識した位置との位置関係を判定する位置判定ステップと、位置判定ステップでの判定結果に基づいた情報を変調するデータ変調ステップと、データ変調ステップで変調した情報が重畳された可視光を発光する可視光発光ステップと、を含む、撮像方法が提供される。

かかる構成によれば、顔位置指定ステップは撮影画像における顔の位置を指定し、顔認識ステップは撮影画像に含まれる顔の位置を認識する。そして、位置判定ステップは顔位置指定ステップで指定した位置と、顔認識ステップで認識した位置との位置関係を判定し、データ変調ステップは位置判定ステップでの判定結果に基づいた情報を変調し、可視光発光ステップはデータ変調ステップで変調した情報が重畳された可視光を発光する。その結果、撮像しようとする画像に対して顔認識処理を実行し、顔認識処理の結果認識できた顔の位置と、予め指定した顔の位置との位置関係に応じてデータを生成し、可視光通信によって該データを送信することで、可視光通信を用いて意図通りの写真を容易に撮影することが可能となる。

以上説明したように本発明によれば、可視光通信を用いて容易に意図通りの写真を撮影することが可能な、新規かつ改良された撮像装置及び撮像方法を提供することができる。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

まず、本発明の一実施形態にかかる撮像装置の構成について説明する。図１は、本発明の一実施形態にかかる撮像装置１００の構成について説明する説明図である。以下、図１を用いて本発明の一実施形態にかかる撮像装置１００の構成について説明する。

図５に示したように、本発明の第１の実施形態に係る撮像装置１００は、ズームレンズ１０２と、絞り１０４と、フォーカスレンズ１０６と、駆動装置１０２ａ、１０４ａ、１０６ａと、ＣＭＯＳイメージセンサ１０８と、アンプ一体型のＣＤＳ（Ｃｏｒｒｅｌａｔｅｄ Ｄｏｕｂｌｅ Ｓａｍｐｌｉｎｇ）回路１１０と、Ａ／Ｄ変換器１１２と、画像入力コントローラ１１４と、画像信号処理部１１６と、圧縮処理部１２０と、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）ドライバ１２２と、ＬＣＤ１２４と、制御部１２８と、操作部１３２と、メモリ１３４と、ＶＲＡＭ（Ｖｉｄｅｏ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３６と、メディアコントローラ１３８と、記録メディア１４０と、モータドライバ１４２ａ、１４２ｂ、１４２ｃと、ＬＥＤドライバ１５６と、ＬＥＤ１５８と、を含んで構成される。

ズームレンズ１０２は、駆動装置１０２ａによって光軸方向に前後して移動させることで焦点距離が連続的に変化するレンズであり、被写体の大きさを変化して撮影する。絞り１０４は、画像を撮影する際に、駆動装置１０４ａによって、ＣＭＯＳイメージセンサ１０８に入ってくる光量を調節する。フォーカスレンズ１０６は、駆動装置１０６ａによって光軸方向に前後して移動させることで被写体のピントを調節するものである。本実施形態では、フォーカスレンズ１０６を遠距離から近距離に駆動させながら、複数の露光時間で露光制御することで合焦評価値を得る。

本実施形態においては、ズームレンズ１０２およびフォーカスレンズ１０６は１枚のみ示しているが、ズームレンズ１０２の枚数は２枚以上であってもよく、フォーカスレンズ１０６の枚数も２枚以上であってもよい。

ＣＭＯＳイメージセンサ１０８は、本発明のＸ−Ｙアドレス型撮像素子の一例であり、ズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６から入射された光を電気信号に変換するための素子である。本実施形態においては電子シャッタによって入射光を制御して、電気信号を取り出す時間を調節しているが、メカシャッタを用いて入射光を制御して、電気信号を取り出す時間を調節してもよい。

ＣＤＳ回路１１０は、ＣＭＯＳイメージセンサ１０８から出力された電気信号の雑音を除去する、サンプリング回路の一種であるＣＤＳ回路と、雑音を除去した後に電気信号を増幅するアンプとが一体となった回路である。本実施形態ではＣＤＳ回路とアンプとが一体となった回路を用いて撮像装置１００を構成しているが、ＣＤＳ回路とアンプとを別々の回路で構成してもよい。

Ａ／Ｄ変換器１１２は、ＣＭＯＳイメージセンサ１０８で生成された電気信号をデジタル信号に変換して、画像の生データを生成するものである。

画像入力コントローラ１１４は、Ａ／Ｄ変換器で生成された画像の生データのメモリ１３４への入力を制御するものである。

画像信号処理部１１６は、ＣＭＯＳイメージセンサ１０８から得られる画像の生データに対して、光量のゲイン補正やホワイトバランスを調整するものである。画像信号処理部１１６は、本発明の露光データ取得部としての機能を有しており、撮影した画像の露光データを取得する。露光データには合焦評価値（ＡＦ評価値）やＡＥ（Ａｕｔｏ Ｅｘｐｏｓｕｒｅ；自動露光）評価値を含んでおり、画像信号処理部１１６において合焦評価値やＡＥ評価値を算出する。

圧縮処理部１２０は、画像信号処理部１１６で光量のゲイン補正やホワイトバランスの調整が行われた画像を、適切な形式の画像データに圧縮する。画像の圧縮形式は可逆形式であっても非可逆形式であってもよい。適切な形式の例として、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）形式やＪＰＥＧ２０００形式に変換してもよい。

ＬＣＤ１２４は、撮影操作する前のライブビュー表示や、撮像装置１００の各種設定画面や、撮影した画像を表示する。画像データや撮像装置１００の各種情報のＬＣＤ１２４への表示は、ＬＣＤドライバ１２２を介して行われる。

制御部１２８は、ＣＭＯＳイメージセンサ１０８やＣＤＳ回路１１０などに対して信号系の命令を行ったり、操作部１３２の操作に対する操作系の命令を行ったりする。本実施形態においては、制御部を１つだけ含んでいるが、信号系の命令と操作系の命令とを別々の制御部で（例えば、ＣＰＵとＤＳＰに分けて）実行するようにしてもよい。

操作部１３２は、撮像装置１００の操作を行ったり、撮影時の各種の設定を行ったりするための部材が配置されている。操作部１３２に配置される部材には、電源ボタン、撮影モードの選択する十字キーおよび選択ボタン、被写体の撮影動作を開始するシャッタボタン等を含んでいてもよい。

メモリ１３４は、撮影した画像を一時的に記憶するものである。メモリ１３４は、複数の画像を記憶できるだけの記憶容量を有している。メモリ１３４への画像の読み書きは画像入力コントローラ１１４によって制御される。メモリ１３４としては、例えば、図５に示したようにＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）を用いてもよい。

ＶＲＡＭ１３６は、ＬＣＤ１２４に表示する内容を保持するものであり、ＬＣＤ１２４の解像度や最大発色数はＶＲＡＭ１３６の容量に依存する。

記録メディア１４０は、画像記録部の一例であり、撮影した画像や画像合成部１１８で合成した画像を記録するものである。記録メディア１４０への入出力は、メディアコントローラ１３８によって制御される。記録メディア１４０には、フラッシュメモリにデータを記録するカード型の記憶装置であるメモリカードを用いることができる。

モータドライバ１４２ａ、１４２ｂ、１４２ｃはズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を動作させる駆動装置１０２ａ、１０４ａ、１０６ａを制御する。モータドライバ１４２ａ、１４２ｂ、１４２ｃを介してズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を動作させることで、被写体の大きさや光の量、ピントを調節する。

ＬＥＤドライバ１５６は、ＬＥＤ１５８に対して電流を供給するものである。ＬＥＤ１５８は、本発明の可視光発光部の一例であり、ＬＥＤドライバ１５６からの電流の供給を受けて発光するものである。ＬＥＤ１５８がＬＥＤドライバ１５６から電流の供給を受けて発光することで、被写体に対して光を照射することができる。

ＬＥＤ１５８は、同一の色を発するものを１つだけ設けてもよく、同一の色を発するものを複数設けてもよい。さらに、本発明の撮像装置は異なる色で（例えば、赤、青、緑の三原色で）発光するＬＥＤをさらに設けてもよい。

そして、本実施形態にかかる撮像装置１００は、ＬＥＤ１５８が発光する可視光によって情報を送信する可視光通信機能を備える。撮像装置１００は、制御部１２８においてＬＥＤ１５８の発光パターンを制御することで、可視光に重畳して情報を送信することができる。

上述した制御部１２８は、タイミングジェネレータ（ＴＧ）１４４と、顔位置指定部１４６と、顔認識部１４８と、位置判定部１５０と、データ変調部１５２と、を含んで構成される。

タイミングジェネレータ１４４は、ＣＭＯＳイメージセンサ１０８にタイミング信号を入力する。タイミングジェネレータ１４４からのタイミング信号によりシャッタ速度が決定される。つまり、タイミングジェネレータ１４４からのタイミング信号によりＣＭＯＳイメージセンサ１０８の駆動が制御され、ＣＭＯＳイメージセンサ１０８が駆動する時間内に被写体からの映像光を入射することで、画像データの基となる電気信号が生成される。

顔位置指定部１４６は、撮像装置１００で撮像しようとする画像における顔の位置を指定するものである。撮像装置１００で撮像しようとする画像における顔の位置は、撮像者の操作によって指定することができ、撮像者の操作に応じて顔位置指定部で顔の位置が指定される。

顔認識部１４８は、撮像装置１００で撮像しようとする画像に含まれている顔の位置を認識するものである。撮像装置１００で撮像しようとする画像における顔の位置を、予め顔位置指定部１４６で指定し、撮像装置１００で撮像しようとしている画像に含まれている顔の位置を顔認識部１４８で認識することで、撮像者が望んでいる位置に顔があるかどうかを判定することが可能となる。

位置判定部１５０は、顔位置指定部１４６で指定した顔の位置と、顔認識部１４８が認識した顔の位置との位置関係を判定するものである。位置判定部１５０の判定結果によって、後述のデータ変調部１５２で変調するデータの内容が決まる。

位置判定部１５０において、顔位置指定部１４６で指定した顔の位置と、顔認識部１４８が認識した顔の位置とが一致していると判定した場合には、制御部１２８は、データ変調部１５２に対して、位置が合っている旨の情報を変調するように指示する。一方、位置判定部１５０において、顔位置指定部１４６で指定した顔の位置と、顔認識部１４８が認識した顔の位置とが一致していないと判定した場合には、制御部１２８は、データ変調部１５２に対して、位置が異なっている旨の情報を変調するように指示する。

なお、位置判定部１５０における位置関係の判定処理は、顔認識部１４８で顔が認識できた直後に開始するのではなく、顔認識部１４８での顔認識処理の結果、認識された顔の位置が所定の時間、所定の範囲を超えて移動しなかった時点で開始してもよい。

データ変調部１５２は、位置判定部１５０の判定結果に応じた情報を、可視光通信用のデータに変調するものである。上述したように、位置判定部１５０において、顔位置指定部１４６で指定した顔の位置と、顔認識部１４８が認識した顔の位置とが一致していると判定した場合には、制御部１２８の指示に基づいて、位置が合っている旨の情報を変調する。また、位置判定部１５０において、顔位置指定部１４６で指定した顔の位置と、顔認識部１４８が認識した顔の位置とが一致していないと判定した場合には、制御部１２８の指示に基づいて、位置が異なっている旨の情報を変調する。具体的な情報の内容については後に詳述する。また、可視光通信用のデータへの変調方法については、本発明とは直接関係がないため、ここでは詳細な説明は割愛する。

以上、図１を用いて本発明の一実施形態にかかる撮像装置１００の構成について説明した。次に、本発明の一実施形態にかかる撮像装置１００の動作について説明する。

図２は、本発明の一実施形態にかかる撮像装置１００の動作について説明する流れ図である。以下、図２を用いて、本発明の一実施形態にかかる撮像装置１００の動作について説明する。

本発明の一実施形態にかかる撮像装置１００を用いて自分の画像を撮影するには、まず撮影場所を選択して、撮像装置１００の操作によって撮影画像における顔の位置を指定する（ステップＳ１０２）。

図３は、撮像装置１００を用いて、撮影画像における顔の位置を指定する場合の一例について説明する説明図である。図３では、ＬＣＤ１２４に、被写体の顔の位置を設定するための顔枠１６２を表示させている状態について示している。撮像装置１００のＬＣＤ１２４にライブビュー表示されている画像に対して、上下左右ボタン１３２ｂを用いて顔枠１６２をＬＣＤ１２４上で移動させることができる。また、ズームボタン１３２ｃを用いて顔枠の大きさを変化させることができる。顔枠１６２の動作は顔位置指定部１４６で制御する。

上記ステップＳ１０２で顔の位置を指定すると、続いて撮像装置１００の動作モードを撮影判断モードに移行させる（ステップＳ１０４）。本実施形態における撮影判断モードとは、ズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を通して撮像装置１００に入ってくる画像に対して顔認識処理を実行し、顔の位置が予め指定した位置に存在した場合に、自動的に撮影を開始するモードのことである。撮影判断モードへは、例えば撮影者によるシャッタボタン１３２ａや上下左右ボタン１３２ｂの操作によって移行させるようにしてもよい。

上記ステップＳ１０４で、撮像装置１００の動作モードを撮影判断モードに移行させると、ズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を通して撮像装置１００に入ってくる画像に対して、顔認識部１４８で顔認識処理を実行する。ズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を通して撮像装置１００に入ってくる画像は、ＬＣＤ１２４にライブビュー表示させてもよい。

そして、顔認識部１４８で顔認識処理を実行して得られる顔の位置と、上記ステップＳ１０２で指定した顔枠の位置とのずれを位置判定部１５０で検出する（ステップＳ１０６）。そして、ステップＳ１０６における判定の結果、顔認識部１４８で顔認識処理を実行して得られる顔の位置が、上記ステップＳ１０２で指定した顔の位置と合っているかどうかを位置判定部１５０で判定する（ステップＳ１０８）。なお、ステップＳ１０８での、位置判定部１５０における位置関係の判定処理は、顔認識部１４８で顔が認識できた直後に開始するのではなく、顔認識部１４８での顔認識処理の結果、認識された顔の位置が所定の時間、所定の範囲を超えて移動しなかった時点で開始してもよい。

図４は、撮像装置１００による被写体の顔の位置判定の一例について示す説明図である。図４では、ズームレンズ１０２、絞り１０４およびフォーカスレンズ１０６を通して撮像装置１００に入り、ＬＣＤ１２４に表示されている画像に対して顔検出処理を実行し、検出した顔と、予め指定した顔枠１６２との位置関係を説明する。図４に示した例では、顔検出処理で検出した顔の位置が、顔枠１６２の位置から左にずれている。

上記ステップＳ１０８における判定の結果、顔認識部１４８で顔認識処理を実行して得られる顔の位置と、上記ステップＳ１０２で指定した顔枠の位置とが一致しておらず、上記ステップＳ１０２で指定した顔枠の位置に顔が存在しない場合には、データ変調部１５２において、顔の位置の移動を被撮影者に対して通知するデータを変調し、可視光通信データを生成する（ステップＳ１１０）。顔の位置の移動を通知するデータは、例えば文字、画像、音声等によって生成される。例えば文字によって顔の位置の移動を被撮影者に対して通知する場合には、「右」、「左」等の文字データを変調して可視光通信データを生成する。また例えば、画像によって顔の位置の移動を被撮影者に対して通知する場合には、右向きや左向き矢印等の画像データを変調して可視光通信データを生成する。また例えば、音声によって顔の位置の移動を被撮影者に対して通知する場合には、「右です」、「左です」等の音声データを変調して可視光通信データを生成する。

また、上記ステップＳ１０２で指定した顔枠の位置に顔が存在した場合であっても、顔枠に対して顔が大きすぎる場合には、位置判定部１５０は、被撮影者が撮像装置１００に近づきすぎていると判断してもよい。かかる場合には、制御部１２８はデータ変調部１５２に対し、撮像装置１００から離れるよう促すためのデータの変調を指示する。

また、上記ステップＳ１０２で指定した顔枠の位置に顔が存在した場合であっても、顔枠に対して顔が小さすぎる場合には、位置判定部１５０は、被撮影者が撮像装置１００から離れすぎていると判断してもよい。かかる場合には、制御部１２８はデータ変調部１５２に対し、撮像装置１００に近づくよう促すためのデータの変調を指示する。

なお、顔認識部１４８で顔認識処理を実行した結果、顔が２つ以上検出された場合には、検出された顔のうち、上記ステップＳ１０２で指定した顔枠の位置に最も近い顔が対象であると判断し、上記ステップＳ１０２で指定した顔枠の位置に最も近い顔に対して位置判定処理を行ってもよい。

また、顔認識部１４８で顔認識処理を実行した結果、顔が２つ以上検出された場合には、データ変調部１５２において、複数人写っている旨を被撮影者に対して通知するデータを変調してもよい。

上記ステップＳ１１０で可視光通信データを生成すると、撮像装置１００は、ＬＥＤ１５８から発光される可視光にデータを重畳して、可視光通信データを送信する（ステップＳ１１２）。撮像装置１００から可視光通信データを送信すると、上記ステップＳ１０６に戻って、顔認識部１４８による顔認識処理を再度実行する。ＬＥＤ１５８から発光される可視光を、例えば被撮影者が保持している携帯端末で受光し、当該携帯端末で復調することで、撮像装置１００からの情報を当該携帯端末で確認することができる。

なお、本実施形態にかかる撮像装置１００における、可視光通信データの生成方法は、任意の方法を用いることが可能であり、特定の方法に限定されるものではない。例えば、一般的に用いられている、赤、青、緑のそれぞれの色で発光するＬＥＤにデータを割り当てて発光パターンを調整する方式（色多重方式）を用いて、可視光通信データを生成してもよい。

図５は、撮像装置１００からの情報を可視光で受信する場合の一例について示したものである。図５では、撮像装置１００と、撮像装置１００からの情報を受信する携帯端末２００と、を図示している。携帯端末２００は、ＬＥＤ１５８から発光される可視光を受光し、ＬＥＤ１５８の発光パターンに基づいて情報を復調し、復調した情報を出力する機能を有する端末である。そして、携帯端末２００は、撮像装置１００を用いた撮影時には、被写体となる人物が保有しておくことが望ましい。なお、携帯端末２００としては、可視光に重畳された情報を復調できる

上記ステップＳ１１２において、撮像装置１００のＬＥＤ１５８から可視光が発光されると、携帯端末２００は、ＬＥＤ１５８からの可視光を受光し、受光した可視光の発光パターンに基づいて情報を復調する。そして、携帯端末２００では、復調した情報を画面に表示したり、スピーカから出力したりすることで、撮像装置１００で生成された情報を出力することができる。

例えば、図４に示した例のように、被写体の顔の位置が、予め指定した顔枠１６２の位置より左にずれていた場合には、撮像装置１００からは、被写体に対して、（被写体側から見て）左に移動するよう促す情報が、可視光に重畳して送信される。撮像装置１００で発光された可視光を、被写体が保有する携帯端末２００で受光し、復調することで、被写体となっている人物は、自分がどの方向に移動すれば良いのかを把握することが可能となる。

一方、上記ステップＳ１０６における顔認識処理、および上記ステップＳ１０８における判定処理の結果、上記ステップＳ１０２で指定した顔枠の位置に顔が存在した場合には、撮影開始を通知するデータをデータ変調部１５２において変調し、可視光通信データを生成する（ステップＳ１１４）。そして撮像装置１００は、ステップＳ１１４で生成された、撮影開始を通知するための可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信する（ステップＳ１１６）。撮影開始を通知するデータが重畳された可視光を、被写体が保有する携帯端末２００で受光し、復調することで、被写体となっている人物は、撮像装置１００で撮影が開始されることを把握することが可能となる。

上記ステップＳ１１６で、撮像装置１００が、撮影開始を通知するための可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信すると、続いて撮像装置１００はセルフタイマーモードに移行する（ステップＳ１１８）。そして、所定の時間が経過すると、撮像装置１００は自動的に撮像処理を実行し、被写体を撮影する（ステップＳ１２０）。なお、撮像装置１００がセルフタイマーモードに移行する際には、撮像装置１００は、セルフタイマー用のＬＥＤの発光を開始してもよい。撮像装置１００がセルフタイマー用のＬＥＤの発光を開始することで、被撮影者はセルフタイマーによる撮影の開始を認識することができる。

以上、図２〜図５を用いて、本発明の一実施形態にかかる撮像装置１００の動作について説明した。以上説明したように、本発明の一実施形態にかかる撮像装置１００を用いることで、撮像装置１００から離れた場所に位置する被写体に対して、撮影位置を指示することができる。

なお、上記ステップＳ１０４で撮影判断モードへ移行してから所定の時間が経過するまでに、顔認識部１４８で顔認識処理を実行しても顔を検出できなかった場合には、制御部１２８は、撮影判断モードを停止させてもよい。また、上記ステップＳ１０４で撮影判断モードへ移行してから所定の時間が経過しても、顔認識部１４８で顔認識処理を実行しても顔を検出できなかった場合には、顔が認識できなかった旨をデータ変調部１５０で変調して可視光通信データを生成し、当該可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信してもよい。

なお、上述の例では、撮像装置１００は、顔認識処理の結果あらかじめ指定した顔枠の位置に顔が存在した場合には、撮影開始を通知するデータを送信し、そのままセルフタイマーモードに移行していたが、撮影開始を通知するデータを送信してからセルフタイマーモードに移行するまでに、被写体が動いてしまう場合も考えられる。以下においては、撮影開始を通知するデータを送信してからセルフタイマーモードに移行するまで、再度顔の位置を判定する処理を実行する場合について説明する。

図６は、本発明の一実施形態にかかる撮像装置１００の動作の別の例について説明する流れ図である。以下、図６を用いて、本発明の一実施形態にかかる撮像装置１００の動作の別の例について説明する。

なお、図６に示した流れ図において、ステップＳ１０２からステップＳ１１６までは、図２に示した流れ図における各ステップと同一であるため、詳細な説明は省略する。

ステップＳ１１６において、撮像装置１００が、撮影開始を通知するための可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信すると、続いて、セルフタイマーモードに移行する前に、顔認識部１４８による顔認識処理および位置判定部１５０による顔位置の判定処理を実行し、あらかじめ指定した顔の位置に被写体の顔が位置しているかどうかを判定する（ステップＳ１２２）。

上記ステップＳ１２２での判定の結果、予め指定した顔の位置に、顔認識部１４８で検出した被写体の顔が位置している場合には、撮像装置１００はそのままセルフタイマーモードに移行し（ステップＳ１２４）、所定の時間の経過後に、撮像装置１００は自動的に撮像処理を実行し、被写体を撮影する（ステップＳ１２６）。撮像装置１００がセルフタイマーモードに移行する際には、撮像装置１００は、セルフタイマー用のＬＥＤの発光を開始してもよい。撮像装置１００がセルフタイマー用のＬＥＤの発光を開始することで、被撮影者はセルフタイマーによる撮影の開始を認識することができる。

一方、上記ステップＳ１２２での判定の結果、予め指定した顔の位置に、顔認識部１４８で検出した被写体の顔が位置しなくなった場合には、制御部１２８はデータ変調部１５２に対し、指定位置からの顔の逸脱を知らせるデータを変調するよう指示する。指示を受けたデータ変調部１５２は、指定位置からの顔の逸脱を知らせるデータを変調し、可視光通信データを生成する（ステップＳ１２８）。そして撮像装置１００は、ステップＳ１２８で生成された、指定位置からの顔の逸脱を通知するための可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信する（ステップＳ１３０）。

なお、指定位置からの顔の逸脱を知らせるデータは、多少の位置のずれが生じた場合には変調せずに、予め指定した顔枠に、顔認識部１４８で検出した被写体の顔が全く重なっていない場合に限って、データ変調部１５２において変調するようにしてもよい。

上記ステップＳ１３０で、指定位置からの顔の逸脱を通知するための可視光通信データを送信した撮像装置１００は、続いて、制御部１２８においてセルフタイマーの動作を停止させ（ステップＳ１３２）、制御部１２８はデータ変調部１５２に対し、セルフタイマーの動作の停止を知らせるデータを変調するよう指示する。指示を受けたデータ変調部１５２は、セルフタイマーの動作の停止を知らせるデータを変調し、可視光通信データを生成する（ステップＳ１３４）。

そして撮像装置１００は、上記ステップＳ１３４で生成された、セルフタイマーの動作の停止を通知するための可視光通信データを、ＬＥＤ１５８から発光される可視光に重畳して送信する（ステップＳ１３６）。ステップＳ１３６で、セルフタイマーの動作の停止を通知するための可視光通信データを送信すると、ステップＳ１０６に戻って、顔認識部１４８による顔認識処理を実行する。なお、撮像装置１００がセルフタイマーの動作を開始する際にセルフタイマー用のＬＥＤの発光を開始していた場合には、撮像装置１００がセルフタイマーの動作を停止するときは、セルフタイマー用のＬＥＤの発光を停止することが望ましい。

このように、撮影開始を通知するデータを送信してからセルフタイマーモードに移行するまでに、被写体が動いてしまった場合には、あらかじめ指定した位置からの顔の逸脱およびセルフタイマーの停止を、撮像装置１００から可視光通信によって送信することで、撮像装置１００から離れた場所に位置している被写体に対して、あらかじめ指定した位置からずれてしまったことを通知することができる。そして、被写体は、可視光通信によって送信されたデータを復調することができる装置（例えば携帯端末２００）を保有することにより、撮像装置１００から送信された情報を受け取ることが可能になる。

なお、上述の例では、指定位置からの顔の逸脱およびセルフタイマーの停止に関する情報を撮像装置１００で生成し、２度に渡って撮像装置１００から送信したが、本発明においてはかかる例に限定されないことは言うまでもない。例えば、指定位置からの逸脱およびセルフタイマーの停止に関する情報をまとめて一度に撮像装置１００から可視光通信によって送信してもよい。

以上説明したように、本発明の一実施形態によれば、撮像装置１００を用いて、予め撮影しようとする画像における顔の位置を指定し、撮影判断モードに移行させることで、撮像装置１００で顔認識処理を実行し、予め指定した位置と、顔認識処理で認識できた顔の位置とが一致した場合に、自動的に撮像装置１００で撮影処理が開始される。また、顔の位置が一致していない場合には、可視光通信を用いて被写体に対して顔の位置の移動を促す情報を送信する。これにより、自分で自分の写真を撮影する場合に、撮像装置１００と自分の立ち位置との間を何度も往復することなく、希望のレイアウトで写真を撮影することができる。

なお、上述した撮像装置１００の動作は、撮像装置１００の内部にコンピュータプログラムを記憶させ、当該コンピュータプログラムを制御部１２８が読み出して順次実行することによってなされるようにしてもよい。

以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。

本発明は、撮像装置に適用可能であり、特に可視光通信機能を備えた撮像装置に適用可能である。

本発明の一実施形態にかかる撮像装置１００の構成について説明する説明図である。 本発明の一実施形態にかかる撮像装置１００の動作について説明する流れ図である。 撮影画像における顔の位置を指定する場合の一例について説明する説明図である。 被写体の顔の位置判定の一例について示す説明図である。 撮像装置１００からの情報を可視光で受信する場合の一例について示したものである。 本発明の一実施形態にかかる撮像装置１００の動作の別の例について説明する流れ図である。

符号の説明

１００ 撮像装置
１０２ ズームレンズ
１０４ 絞り
１０６ フォーカスレンズ
１０２ａ、１０４ａ、１０６ａ 駆動装置
１０８ ＣＭＯＳイメージセンサ
１１０ ＣＤＳ回路
１１２ Ａ／Ｄ変換器
１１４ 画像入力コントローラ
１１６ 画像信号処理部
１２０ 圧縮処理部
１２２ ＬＣＤドライバ
１２４ ＬＣＤ
１２８ 制御部
１３２ 操作部
１３２ａ シャッタボタン
１３２ｂ 上下左右ボタン
１３２ｃ ズームボタン
１３４ メモリ
１３６ ＶＲＡＭ
１３８ メディアコントローラ
１４０ 記録メディア
１４４ タイミングジェネレータ
１４６ 顔位置指定部
１４８ 顔認識部
１５０ 位置判定部
１５２ データ変調部
１５６ ＬＥＤドライバ
１５８ ＬＥＤ
２００ 携帯端末

Claims (5)

1. 撮影画像における顔の位置を指定する顔位置指定部と、
   撮影画像に含まれる顔の位置を認識する顔認識部と、
   前記顔位置指定部で指定した位置と、前記顔認識部で認識した位置との位置関係を判定する位置判定部と、
   前記位置判定部での判定結果に基づいた情報を変調するデータ変調部と、
   前記データ変調部で変調した情報が重畳された可視光を発光する可視光発光部と、
   を含む、撮像装置。
2. 前記位置判定部の判定の結果、前記顔位置指定部で指定した位置と、前記顔認識部で認識した位置とが一致している場合には、前記データ変調部は撮影を開始する旨の情報を変調する、請求項１に記載の撮像装置。
3. 前記位置判定部は、前記可視光発光部が前記撮影を開始する旨の情報が重畳された可視光を発光した後に、前記顔位置指定部で指定した位置と、前記顔認識部で認識した位置との位置関係を再度判定し、
   前記データ変調部は、前記位置判定部が判定した結果、前記顔位置指定部で指定した位置と、前記顔認識部で認識した位置とが一致していない場合には、撮影を中止する旨の情報を変調する、請求項２に記載の撮像装置。
4. 前記位置判定部の判定の結果、前記顔位置指定部で指定した位置と、前記顔認識部で認識した位置とが一致していない場合には、前記データ変調部は顔の位置を移動させるための情報を変調する、請求項１に記載の撮像装置。
5. 撮影画像における顔の位置を指定する顔位置指定ステップと、
   撮影画像に含まれる顔の位置を認識する顔認識ステップと、
   前記顔位置指定ステップで指定した位置と、前記顔認識ステップで認識した位置との位置関係を判定する位置判定ステップと、
   前記位置判定ステップでの判定結果に基づいた情報を変調するデータ変調ステップと、
   前記データ変調ステップで変調した情報が重畳された可視光を発光する可視光発光ステップと、
   を含む、撮像方法。
   

Images