JP4683337B2 - 画像表示装置及び画像表示方法 - Google Patents

Description

本発明は画像表示装置及び画像表示方法に係り、特に撮影した画像から顔を検出する技術に関する。

特許文献１の画像再生システムでは、ユーザ１０Ａ、１０Ｂが撮影装置１０Ａ又は１Ｂを用いて撮影した人物画像データと、その人物画像データに基づいた認証信号がＷｅｂサイト３０を介して基地局４０に取り込まれ、フォルダ作成部１９において該認証信号基づき画像フォルダが作られ、記録される。そして、ユーザ１０Ａ、１０Ｂが鑑賞者となって再生装置５０により撮影画像を鑑賞する場合、ユーザ１０Ａ、１０Ｂの顔情報がＷｅｂサイト３０を介して基地局４０に取り込まれ、該顔情報が個人認証処理部１７にて認証され、その認証結果に基づき、上記画像フォルダの画像データが選択再生され、Ｗｅｂサイト３０を介して再生装置５０側に取り込まれ、再生される。
特開２００５−３５４２１０号公報

特許文献１の画像再生システムは、基地局にアップロードした画像を鑑賞する場合に、ユーザの顔情報を基地局にアップロードして認証するものであって、画像を閲覧するためには、画像を予めアップロードしておく必要がある。また、画像の閲覧の都度、ユーザの認証を行うため、手間がかかるという問題があった。

本発明はこのような事情に鑑みてなされたもので、個人認証技術により、撮影画像の中から所望の被写体が写っている画像を容易に検索して再生することができる画像表示装置及び画像表示方法を提供することを目的とする。

上記課題を解決するために、本発明の請求項１に係る画像表示装置は、画像を撮影する撮影手段と、前記画像を記録する記録手段と、前記画像を表示する表示手段と、前記撮影された画像から顔を検出する顔検出手段と、前記顔検出手段により検出された顔の特徴量を取得する顔特徴量取得手段と、前記撮影手段により画像を撮影する撮影モードと、個人認証による再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替手段と、前記動作モードが個人認証による再生モードに設定された場合に、前記記録手段に記録された画像の中から画像を選択する画像選択手段と、前記画像選択手段により選択された画像から検出された顔の特徴量に基づいて、前記記録手段に記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出手段と、前記動作モードが個人認証による再生モードに設定された場合に、前記関連画像を前記表示手段に表示する表示制御手段とを備えることを特徴とする。

請求項１に係る発明によれば、動作モードを撮影モードに設定して人物の顔を撮影した後、個人認証による再生モードに設定することにより、撮影した画像の中から画像を選択して、選択した画像から検出した顔と同一人物の顔が写っている関連画像を、記録手段に記録された画像の中から読み出して再生することができる。

請求項２に係る発明は、請求項１の画像表示装置において、前記画像選択手段は、前記記録手段に最後に記録された画像を選択することを特徴とする。

請求項２に係る発明によれば、撮影モード時に最後に撮影された人物の顔が写っている関連画像を読み出して再生することができる。

請求項３に係る画像表示装置は、画像を撮影する撮影手段と、前記撮影手段に前記画像の撮影指示を入力する撮影指示手段と、前記画像を記録する記録手段と、前記画像を表示する表示手段と、前記撮影された画像から顔を検出する顔検出手段と、前記顔検出手段により検出された顔の特徴量を取得する顔特徴量取得手段と、前記撮影手段により画像を撮影する撮影モードと、前記表示手段により画像を再生表示する再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替手段と、前記動作モードが再生モードに設定されたときに、前記撮影指示手段からの撮影指示に応じて前記撮影手段によりモニタ画像を撮影する撮影制御手段と、前記再生モード時に撮影されたモニタ画像から検出された顔の特徴量に基づいて、前記記録手段に記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出手段と、前記関連画像を前記表示手段に表示する表示制御手段とを備えることを特徴とする。

請求項３に係る発明によれば、画像の再生時に、所望の人物の顔を含むモニタ画像を撮影することにより、モニタ画像に写っている人物の顔を含む関連画像を、記録手段に記録された画像の中から読み出して再生することができる。

請求項４に係る発明は、請求項３の画像表示装置において、前記表示制御手段は、前記関連画像とともに、前記モニタ画像を前記表示手段に表示することを特徴とする。

請求項４に係る発明によれば、モニタ画像に写っている人物の顔を含む関連画像を記録手段から読み出す際に、関連画像とモニタ画像とを表示手段に同時に表示することができる。

請求項５に係る発明は、請求項３の画像表示装置において、前記表示制御手段は、前記モニタ画像から検出された顔の画像を切り出して、前記関連画像とともに前記表示手段に表示することを特徴とする。

請求項５に係る発明によれば、モニタ画像に写っている人物の顔を含む関連画像を記録手段から読み出して表示する際に、モニタ画像から切り出した顔の画像と関連画像とを表示手段に同時に表示することができる。

請求項６に係る発明は、請求項１から５の画像表示装置において、前記顔特徴量取得手段は、前記顔検出手段により検出された顔の特徴量を取得して、該顔の特徴量を該画像と関連付けて前記記録手段に記録し、前記個人認証による再生モード時には、前記記録手段から前記顔の特徴量を取得することを特徴とする。

請求項６に係る発明によれば、記録手段に記録された画像から検出した顔の特徴量の情報を記録手段内のファイル等に予め記録しておくことができる。

請求項７に係る発明は、請求項１から６の画像表示装置において、前記顔特徴量取得手段は、前記撮影モード時、前記画像が撮影される都度又は前記撮影モード以外の動作モード時のいずれかに、前記画像から顔の特徴量を取得することを特徴とする。

請求項８に係る発明は、請求項１から７の画像表示装置において、前記関連画像検出手段は、前記関連画像が動画の場合に、前記同一人物の顔を含むフレームを取得し、前記表示制御手段は、前記関連画像検出手段により取得されたフレームを前記表示手段に表示することを特徴とする。

請求項８に係る発明によれば、関連画像が動画の場合にも表示を効果的に行うことができる。

請求項９に係る発明は、請求項１から８の画像表示装置において、前記画像選択手段によって選択された画像から複数の顔が検出された場合に、前記複数の顔の中から主要被写体を指定する主要被写体指定手段を更に備え、前記関連画像検出手段は、前記主要被写体を含む画像を検出することを特徴とする。また、請求項１０に係る発明は、請求項９の画像表示装置において、前記主要被写体検出手段は、顔らしさの評価値である顔らしさ度が最も高い又は所定値以上の顔、顔の大きさが最大又は所定値以上の顔、画像の中心に最も近い又は画像の中心からの距離が所定値以下の顔、又は顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔のうち少なくとも１つの条件に従って主要被写体を指定することを特徴とする。また、請求項１１に係る発明は、請求項９の画像表示装置において、前記主要被写体検出手段は、前記画像が動画の場合に、顔らしさの評価値である顔らしさ度が最も高い又は所定値以上の顔、顔の大きさが最大又は所定値以上の顔、画像の中心に最も近い顔、写っているフレーム数又は写っている時間が最大の顔、写っているフレーム数と動画ファイルの総フレーム数の比が所定値以上の顔、写っている時間と動画ファイルの再生時間の比が所定値以上の顔、顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔、写っているフレーム数又は写っている時間が所定値以上で、且つ、顔らしさ度又は顔の大きさの少なくとも一方が所定値以上の顔のうち少なくとも１つの条件に従って主要被写体を指定することを特徴とする。

請求項９から１１に係る発明によれば、複数の顔が検出された画像の中から、主要被写体の画像を特定して、主要被写体を含む関連画像を表示することができる。

請求項１２に係る画像表示方法は、撮影手段により画像を撮影する撮影工程と、前記画像を記録する記録工程と、前記画像を表示手段に表示する表示工程と、前記撮影された画像から顔を検出する顔検出工程と、前記顔検出工程において検出された顔の特徴量を取得する顔特徴量取得工程と、前記撮影手段により画像を撮影する撮影モードと、個人認証による再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替工程と、前記動作モードが個人認証による再生モードに設定された場合に、前記記録された画像の中から画像を選択する画像選択工程と、前記画像選択工程において選択された画像から検出された顔の特徴量に基づいて、前記記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出工程と、前記動作モードが個人認証による再生モードに設定された場合に、前記関連画像を前記表示手段に表示する表示制御工程とを備えることを特徴とする。

請求項１３に係る画像表示方法は、撮影手段により画像を撮影する撮影工程と、前記撮影工程に前記画像の撮影指示を入力する撮影指示工程と、前記画像を記録する記録工程と、前記画像を表示手段に表示する表示工程と、前記撮影された画像から顔を検出する顔検出工程と、前記顔検出工程において検出された顔の特徴量を取得する顔特徴量取得工程と、前記撮影手段により画像を撮影する撮影モードと、前記表示手段により画像を再生表示する再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替工程と、前記動作モードが再生モードに設定されたときに、前記撮影指示に応じて前記撮影手段によりモニタ画像を撮影する撮影制御工程と、前記再生モード時に撮影されたモニタ画像から検出された顔の特徴量に基づいて、前記記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出工程と、前記関連画像を前記表示手段に表示する表示制御工程とを備えることを特徴とする。

請求項１４に係る発明は、請求項１３の画像表示方法において、前記表示制御工程は、前記関連画像とともに、前記モニタ画像を前記表示手段に表示する工程を備えることを特徴とする。

請求項１５に係る発明は、請求項１３の画像表示方法において、前記表示制御工程は、前記モニタ画像から検出された顔の画像を切り出す工程と、前記切り出した顔の画像を、前記関連画像とともに前記表示手段に表示する工程とを備えることを特徴とする。

請求項１６に係る発明は、請求項１３から１５の画像表示方法において、前記顔特徴量取得工程において、前記顔検出工程により検出された顔の特徴量を取得して、該顔の特徴量を該画像と関連付けて前記記録工程に記録しておき、前記個人認証による再生モード時に、前記記録した前記顔の特徴量を取得する工程を更に備えることを特徴とする。

本発明によれば、個人認証技術により、撮影画像の中から所望の被写体が写っている画像を容易に検索して再生することができる。

以下、添付図面に従って本発明に係る画像表示装置及び画像表示方法の好ましい実施の形態について説明する。

［画像表示装置撮影装置の構成］
図１は、本発明の第１の実施形態に係る画像表示装置の外観を示す斜視図である。図１に示すように、画像表示装置１０は、静止画や動画の記録及び再生機能を備えた撮影装置（電子カメラ）である。撮影装置１０のカメラボディ１２は、扁平状の四角い箱型に形成されている。カメラボディ１２の前面には、レンズが組み込まれたレンズ鏡筒１４が設けられている。また、カメラボディ１２の上面には、シャッタボタン１６及び電源スイッチ１８が設けられている。カメラボディ１２の背面には、表示部（液晶モニタ）２０、ファインダ接眼窓２２、モードスイッチ２４、汎用キー２６、ＭＥＮＵ／ＯＫボタン２８、キャンセルボタン３０、ディスプレイボタン３２及びファンクションボタン３４が設けられている。

電源スイッチ１８は、スライド式のスイッチであり、撮影装置１０の電源は、電源スイッチ１８をスライド操作することによりＯＮ／ＯＦＦされる。

シャッタボタン１６は、いわゆる「半押し」と「全押し」とからなる２段ストロークタイプのボタンで構成されており、「半押し」でＡＦ（Auto Focus：自動焦点合わせ）、ＡＥ（Auto Exposure：自動露出）が機能し、「全押し」で撮影が実行される。

モードスイッチ２４は、撮影装置１０の動作モードを切り替えるスイッチとして機能し、その設定位置によって、静止画の撮影を行う「静止画撮影モード」、動画の撮影を行う「動画撮影モード」、撮影した画像を再生する「再生モード」又は「個人認証による再生モード」のいずれかに切り替えられる。なお、個人認証による再生モードについては後述する。

液晶モニタ２０は、再生モード時には画像の再生用モニタとして機能するとともに、静止画又は動画撮影モード時にはフレーミング用のスルー画を表示する電子ビューファインダとして機能する。ディスプレイボタン３２は、この液晶モニタ２０のＯＮ／ＯＦＦ切替ボタンとして機能する。また、液晶モニタ２０は、ユーザインターフェース用表示画面としても利用され、必要に応じてメニュー情報や選択項目、設定内容等の情報が表示される。なお、液晶モニタ２０に代えて、有機ＥＬ（electro-luminescence）等の他の方式の表示装置を用いることも可能である。

ＭＥＮＵ／ＯＫボタン２８は、メニュー画面の表示を指示するボタンとして機能し、このＭＥＮＵ／ＯＫボタン２８が押されることにより、各動作モードからセットアップモードに遷移し、液晶モニタ２０に設定画面が表示される。上記セットアップモードでは、露出値、色合い、ＩＳＯ感度、記録画素数等の画質調整に関する項目や、セルフタイマーの設定、測光方式の切替、デジタルズームを使用するか否か等の調整項目の設定が行われる。上記セットアップモードにおいて、ＭＥＮＵ／ＯＫボタン２８は、選択した項目の確定や動作の実行を指示するボタンとして機能し、キャンセルボタン３０は、設定画面において選択した項目の取消や、設定内容を１つ前の状態に戻すことを指示するボタンとして機能する。

汎用キー２６は、再生モード時に再生する画像を選択したり、設定画面において項目を選択するためのカーソルを移動するカーソルシフトキーとして機能する。汎用キー２６は、カーソルを左右方向に移動させる左ボタン２６Ａ及び右ボタン２６Ｃと、カーソルを上下方向に移動させる上下ボタン２６Ｂとから構成される。なお、左ボタン２６Ａ及び右ボタン２６Ｃは押しボタンにより構成され、上下ボタン２６Ｂは上下方向に揺動自在なシーソーボタンにより構成される。

また、上下ボタン２６Ｂは、静止画又は動画撮影モード時にはズーム操作用の操作ボタンとして機能する。即ち、静止画又は動画撮影モードの下、上下ボタン２６Ｂを上方向に操作することにより、ズームがテレ方向に操作され、ズームボタン２６Ｂを下方向に操作することにより、ズームがワイド方向に操作される。

また、上下ボタン２６Ｂは、再生モードの下、再生画像のズームボタンとしても機能する。即ち、再生モードの下、上下ボタン２６Ｂを上方向に操作することにより、再生画像が拡大表示され、下方向に操作することにより、再生画像が縮小表示される。

また、再生モードの下、左ボタン２６Ａは、コマ戻しボタン（１コマ前の画像が表示されるように指示するボタン）として機能し、右ボタン２６Ｃは、コマ送りボタン（１コマ後の画像が表示されるように指示するボタン）として機能する。

左ボタン２６Ａは、静止画又は動画撮影モードの下、マクロ機能（接写機能）のＯＮ／ＯＦＦを切り替えるボタンとして機能し、左ボタン２６Ａを押圧操作することにより、マクロ機能がＯＮ又はＯＦＦされる。

また、右ボタン２６Ｃは、静止画又は動画撮影モードの下、フラッシュモードを切り替えるボタンとして機能し、右ボタン２６Ｃを押圧操作することにより、フラッシュモードがフラッシュ発光又は発光禁止の各モードに設定される。

図２は、撮影装置１０の電気的構成を示すブロック図である。図２に示す撮影装置１０は、撮影装置１０全体の動作は中央処理装置（ＣＰＵ）５０によって統括制御される。ＣＰＵ５０は、所定のプログラムに従って本カメラシステムを制御する制御手段として機能するとともに、自動露出（ＡＥ）演算、自動焦点調節（ＡＦ）演算、ホワイトバランス（ＷＢ）調整演算等、各種演算を実施する演算手段として機能する。電源回路５２は、本カメラシステムの各ブロックに電源を供給する。

ＣＰＵ５０には、バス５４を介してＲＯＭ（Read Only Memory）５６及びＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）５８が接続されている。ＲＯＭ５６には、ＣＰＵ５０が実行するプログラム及び制御に必要な各種データ等が格納され、ＥＥＰＲＯＭ５８には、ＣＣＤ画素欠陥情報、カメラ動作に関する各種定数／情報等が格納されている。

また、メモリ（ＳＤＲＡＭ、Synchronous Dynamic Random Access Memory）６０は、プログラムの展開領域及びＣＰＵ５０の演算作業用領域として利用されるとともに、画像データや音声データの一時記憶領域として利用される。ＶＲＡＭ（Video Random Access Memory）６２は、画像データ専用の一時記憶メモリであり、Ａ領域６２ＡとＢ領域６２Ｂを含んでいる。なお、メモリ６０とＶＲＡＭ６２は共用することが可能である。

撮影装置１０には、シャッタボタン１６や電源スイッチ１８、モードスイッチ２４、汎用キー２６、ＭＥＮＵ／ＯＫボタン２８、キャンセルボタン３０、ディスプレイボタン３２、ファンクションボタン３４等の操作部材を含む操作部６４が設けられている。これら各種の操作部６４からの信号はＣＰＵ５０に入力され、ＣＰＵ５０は入力信号に基づいて撮影装置１０の各回路を制御し、例えば、レンズ駆動制御、撮影動作制御、画像処理制御、画像データの記録／再生制御、液晶モニタ２０の表示制御等を行う。

撮影装置１０は、メディアソケット（メディア装着部）６８を有し、メディアソケット６８には記録メディア７０を装着することができる。記録メディア７０の形態は特に限定されず、ｘＤピクチャカード（商標）、スマートメディア（商標）に代表される半導体メモリカード、可搬型小型ハードディスク、磁気ディスク、光ディスク、光磁気ディスク等の種々の媒体を用いることができる。メディアコントローラ７２は、メディアソケット６８に装着される記録メディア７０に適した入出力信号の受渡しを行うために所要の信号変換を行う。

また、撮影装置１０は、パーソナルコンピュータ等の外部機器と接続するための通信手段として外部接続インターフェース部（外部接続Ｉ／Ｆ）７４を備えている。撮影装置１０は、図示せぬＵＳＢケーブル等を用いて撮影装置１０と外部機器を接続することにより、外部機器との間でデータの受渡しが可能となる。もちろん、通信方式はＵＳＢに限らず、IEEE1394やBluetooth（登録商標）等の他の通信方式を適用してもよい。

［動作モード］
図３は、動作モードの遷移を示す図である。上述のように、撮影装置１０は、静止画及び動画撮影モード、再生モード及び個人認証による再生モードの４つの動作モードを備えており、動作モードはモードスイッチ２４により切替可能となっている。

［撮影モード］
まず、撮影モードについて説明する。モードスイッチ２４によって撮影モードが選択されると、カラーＣＣＤ固体撮像素子７６（以下の説明では、ＣＣＤ７６と記載する）を含む撮像部に電源が供給され、撮影可能な状態になる。

レンズユニット７８は、フォーカスレンズ８０及びズームレンズ８２を含む撮影レンズ８４と、絞り兼用メカシャッタ８６とを含む光学ユニットである。撮影レンズ８４のフォーカシングは、フォーカスレンズ８０をフォーカスモータ８０Ａによって移動させることにより行われ、ズーミングは、ズームレンズ８２をズームモータ８２Ａで移動させることにより行われる。フォーカスモータ８０Ａとズームモータ８２Ａは、それぞれフォーカスモータドライバ８０Ｂとズームモータドライバ８２Ｂにより駆動制御される。ＣＰＵ１０は、このフォーカスモータドライバ８０Ｂとズームモータドライバ８２Ｂに制御信号を出力して制御する。

絞り８６は、いわゆるターレット型絞りで構成されており、Ｆ２．８からＦ８の絞り孔が穿孔されたターレット板を回転させて絞り値（Ｆ値）を変化させる。この絞り８６の駆動はアイリスモータ８６Ａによって行われる。アイリスモータ８６Ａはアイリスモータドライバ８６Ｂにより駆動制御される。ＣＰＵ５０は、このアイリスモータドライバ８６Ｂに制御信号を出力して制御する。

レンズユニット７８を通過した光は、ＣＣＤ７６の受光面に結像される。ＣＣＤ７６の受光面には多数のフォトダイオード（受光素子）が２次元的に配列されており、各フォトダイオードに対応して赤（Ｒ）、緑（Ｇ）、青（Ｂ）の原色カラーフィルタが所定の配列構造で配置されている。ＣＣＤ７６は、各フォトダイオードの電荷蓄積時間（シャッタースピード）を制御する電子シャッター機能を有している。ＣＰＵ５０は、タイミングジェネレータ（ＴＧ）８８を介してＣＣＤ７６での電荷蓄積時間を制御する。また、ＣＰＵ５０は、ＣＣＤ７６に対して、ＯＦＤ（Overflow Drain）の電位を制御して、ＣＣＤ７６を構成するフォトダイオードに蓄積される信号電荷の上限値を調整する。

ＣＣＤ７６の受光面に結像された被写体像は、各フォトダイオードによって入射光量に応じた量の信号電荷に変換される。各フォトダイオードに蓄積された信号電荷は、ＣＰＵ５０の指令に従いＴＧ８８から与えられる駆動パルス（読み出しパルス、垂直転送クロック、水平転送クロック）に基づいて信号電荷に応じた電圧信号（画像信号）として順次読み出される。

ＣＣＤ７６から出力された信号はアナログ処理部（ＣＤＳ／ＡＭＰ）９０に送られ、ここで画素ごとのＲ、Ｇ、Ｂ信号がサンプリングホールド（相関２重サンプリング処理）され、増幅された後、Ａ／Ｄ変換器９２に加えられる。Ａ／Ｄ変換器９２によってデジタル信号に変換された点順次のＲ、Ｇ、Ｂ信号は、画像入力コントローラ９４を介してメモリ６０に記憶される。

画像信号処理回路９６は、メモリ６０に記憶されたＲ、Ｇ、Ｂ信号をＣＰＵ５０の指令に従って処理する。すなわち、画像信号処理回路９６は、同時化回路（単板ＣＣＤのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス調整回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含む画像処理手段として機能し、ＣＰＵ５０からのコマンドに従ってメモリ６０を活用しながら所定の信号処理を行う。

画像信号処理回路９６に入力されたＲＧＢの画像データは、画像信号処理回路９６において輝度信号（Ｙ信号）及び色差信号（Ｃｒ、Ｃｂ信号）に変換されるとともに、ガンマ補正等の所定の処理が施される。画像信号処理回路９６で処理された画像データはＶＲＡＭ６２に格納される。

撮影画像を液晶モニタ２０にモニタ出力する場合、ＶＲＡＭ６２から画像データが読み出され、バス５４を介してビデオエンコーダ９８に送られる。ビデオエンコーダ９８は、入力された画像データを表示用の所定方式のビデオ信号（例えば、ＮＴＳＣ方式のカラー複合画像信号）に変換して液晶モニタ２０に出力する。

ＣＣＤ７６から出力される画像信号によって、１コマ分の画像を表す画像データがＶＲＡＭ６２のＡ領域６２ＡとＢ領域６２Ｂとで交互に書き換えられる。ＶＲＡＭ６２のＡ領域６２Ａ及びＢ領域６２Ｂのうち、画像データが書き換えられている方の領域以外の領域から、書き込まれている画像データが読み出される。このようにしてＶＲＡＭ６２内の画像データが定期的に書き換えられ、その画像データから生成される画像信号が液晶モニタ２０に供給されることにより、撮影中の映像がリアルタイムに液晶モニタ２０に表示される。撮影者は、液晶モニタ２０に表示される映像（プレビュー画像）によって撮影画角を確認できる。

シャッタボタン１６が半押しされ、Ｓ１がオンすると、撮影装置１０はＡＥ及びＡＦ処理を開始する。すなわち、ＣＣＤ７６から出力された画像信号はＡ／Ｄ変換後に画像入力コントローラ９４を介してＡＦ検出回路１００並びにＡＥ／ＡＷＢ検出回路１０２に入力される。

ＡＥ／ＡＷＢ検出回路１０２は、１画面を複数の分割エリア（例えば、８×８又は１６×１６）に分割し、この分割エリアごとにＲＧＢ信号を積算する回路を含み、その積算値をＣＰＵ５０に提供する。ＣＰＵ５０は、ＡＥ／ＡＷＢ検出回路１０２から得た積算値に基づいて被写体の明るさ（被写体輝度）を検出し、撮影に適した露出値（撮影ＥＶ値）を算出する。ＣＰＵ５０は、求めた露出値と所定のプログラム線図に従って、絞り値とシャッタースピードを決定し、これに従いＣＣＤ７６の電子シャッター及びアイリスを制御して適正な露光量を得る。

また、ＡＥ／ＡＷＢ検出回路１０２は、自動ホワイトバランス調整時に、分割エリアごとにＲＧＢ信号の色別の平均積算値を算出し、その算出結果をＣＰＵ５０に提供する。ＣＰＵ５０は、Ｒの積算値、Ｂの積算値、Ｇの積算値を得て、分割エリアごとにＲ／Ｇ及びＢ／Ｇの比を求め、これらＲ／Ｇ、Ｂ／Ｇの値のＲ／Ｇ、Ｂ／Ｇ軸座標の色空間における分布等に基づいて光源種の判別を行い、判別された光源種に応じてホワイトバランス調整回路のＲ、Ｇ、Ｂ信号に対するゲイン値（ホワイトバランスゲイン）を制御し、各色チャンネルの信号に補正をかける。

撮影装置１０におけるＡＦ制御は、例えば、画像信号のＧ信号の高周波成分が極大になるようにフォーカスレンズ８０を移動させるコントラストＡＦが適用される。すなわち、ＡＦ検出回路１００は、Ｇ信号の高周波成分のみを通過させるハイパスフィルタ、絶対値化処理部、画面内（例えば、画面中央部）にあらかじめ設定されているフォーカス対象エリア内の信号を切り出すＡＦエリア抽出部及びＡＦエリア内の絶対値データを積算する積算部から構成される。

ＡＦ検出回路１００により求められた積算値のデータはＣＰＵ５０に通知される。ＣＰＵ５０は、フォーカスモータドライバ８０Ｂを制御してフォーカスレンズ８０を移動させながら、複数のＡＦ検出ポイントで焦点評価値（ＡＦ評価値）を演算し、評価値が極大となるレンズ位置を合焦位置として決定する。そして、ＣＰＵ５０は、求めた合焦位置にフォーカスレンズ８０を移動させるようにフォーカスモータドライバ８０Ｂを制御する。なお、ＡＦ評価値の演算はＧ信号を利用する態様に限らず、輝度信号（Ｙ信号）を利用してもよい。

シャッタボタン１６が半押しされ、Ｓ１オンによってＡＥ／ＡＦ処理が行われ、シャッタボタン１６が全押しされ、Ｓ２オンによって記録用の撮影動作がスタートする。Ｓ２オンに応動して取得された画像データは画像信号処理回路９６において輝度／色差信号（Ｙ／Ｃ信号）に変換され、ガンマ補正等の所定の処理が施された後、メモリ６０に格納される。

メモリ６０に格納されたＹ／Ｃ信号は、圧縮伸張回路１０４によって所定のフォーマットに従って圧縮された後、メディアコントローラ７２を介して記録メディア７０に記録される。例えば、静止画についてはＪＰＥＧ（Joint Photographic Experts Group）形式、動画についてはＡＶＩ（Audio Video Interleaving）形式、Motion-JPEGの画像ファイルとして記録される。

記録メディア７０に記録された画像ファイルは、顔検出装置１１０により顔検出処理が施される。顔検出処理の方式としては、例えば、原画像から肌色に指定した色と近い色を持つ画素を取り出し、取り出した領域を顔領域として検出するものがある。この顔検出処理は、例えば、肌色を他の色と区別するための色空間上で、あらかじめサンプリングした肌色の情報から色空間上の肌色の範囲を定め、各画素の色が定めた範囲に入っているか否かを判定することにより行われる。

顔検出装置１１０は、上記顔検出処理により検出された顔の特徴量を算出してＣＰＵ５０に出力する。ＣＰＵ５０は、顔検出装置１１０から入力された顔特徴量と画像ファイルとを関連付けて、画像管理ファイルＤ１０に格納する。ここで、顔の特徴量とは、例えば、画像中における顔領域の位置や大きさ（顔領域を囲む矩形又は楕円領域の面積、又は顔領域の肌色領域の面積）、目や鼻、耳、口、眉の位置や大きさ、髪の生え際の位置等である。なお、目や鼻、耳、口、眉、生え際は、例えば、肌色領域内の黒色の領域や赤色領域を検出し、その相対位置から算出される。

また、顔検出装置１１０は、顔の特徴量とともに、顔領域の顔らしさの評価値（顔らしさ度）を算出してＣＰＵ５０に出力する。ここで、顔らしさ度は、顔検出装置１１０により検出された領域が顔領域であるかどうかを示すパラメータであり、例えば、肌色の度合等により算出される。顔検出装置１１０は、画像中から検出された肌色領域ごとに、この顔らしさ度を算出して、この顔らしさ度が所定値以上の肌色領域を顔領域と判断する。

なお、動画の画像ファイルの場合には、顔検出装置１１０により、顔領域が検出されたフレームの番号又は顔が写っている時間帯の情報が、顔の特徴量と関連付けられて、ＣＰＵ５０に出力される。

なお、顔検出処理は、撮影の都度行うようにしてもよいし、記録メディア７０内の画像のうち、顔検出処理が施されていない画像に対して撮影モードの終了時にまとめて行うようにしてもよい。

図４は、記録メディア７０のフォルダツリー構造を示す図である。図４に示す例では、画像ファイルＰ１０からＰ１６は、記録メディア７０内のフォルダ「/DCIM/100_FUJI/」に格納され、画像管理ファイルＤ１０は、フォルダ「/KANRI/」に格納される。なお、記録メディア７０のフォルダ構成については、図４に限定されるものではない。

図５は、画像管理ファイルＤ１０の構成例を示す図である。図５に示すように、画像管理ファイルＤ１０は、ｘｍｌ形式により記述されており、<image>タグの間に、各画像ファイルＰ１０からＰ１６に関する情報が記録される。なお、画像管理ファイルＤ１０は、例えば、ＨＴＭＬやＳＭＩＬ等の言語で記述されるようにしてもよい。

図５において、<date>タグには、画像ファイルの撮影日又は更新日が記録され、<file>タグには、画像ファイルを特定するための情報（例えば、ファイルパスや画像ファイルに固有の識別子）が記録される。<face>タグの間には、画像ファイルから検出された顔特徴量や顔らしさ度が記録される。なお、図５において、<eye_size>タグは目の大きさであり、<nose_size>タグは鼻の大きさである。

なお、顔の特徴量は、例えば、各画像ファイルのヘッダ情報（例えば、EXIFタグ情報）に記録されるようにしてもよい。

［再生モード］
モードスイッチ２４により再生モードが選択されると、記録メディア７０に記録されている最終の画像ファイル（最後に記録された画像ファイル）の圧縮データが読み出される。最後の記録に係る画像ファイルが静止画ファイルの場合、この読み出された画像圧縮データは、圧縮伸張回路１０４を介して非圧縮のＹＣ信号に伸張され、画像信号処理回路９６及びビデオエンコーダ９８を介して表示用の信号に変換された後、液晶モニタ２０に出力される。これにより、当該画像ファイルの画像内容が液晶モニタ２０の画面上に表示される。

静止画の１コマ再生中（動画の先頭フレーム再生中も含む）に、左ボタン２６Ａ及び右ボタン２６Ｃを操作することによって、再生対象の画像ファイルを切り換えること（順コマ送り／逆コマ送り）ができる（図３参照）。コマ送りされた位置の画像ファイルが記録メディア７０から読み出され、上記と同様にして静止画像や動画が液晶モニタ２０に再生表示される。

また、再生モード時に、パーソナルコンピュータやテレビ等の外部ディスプレイがビデオ入出力端子１０６を介して撮影装置１０に接続されている場合には、記録メディア７０に記録されている画像ファイルはビデオ出力回路１０８により処理されて、この外部ディスプレイに再生表示される。

［個人認証による再生モード］
モードスイッチ２４により個人認証による再生モードが選択されると、個人認証装置１１２により、記録メディア７０から画像管理ファイルＤ１０が読み込まれる。個人認証装置１１２は、記録メディア７０に記録されている最終の画像ファイル（最後に記録された画像ファイル）から検出された顔Ｘの特徴量の情報を取得して、記録メディア７０内の他の画像ファイルの顔の特徴量と比較する。個人認証装置１１２は、記録メディア７０に記録された画像ファイルの中から、最後の記録に係る画像ファイルと同一人物の顔を含む画像ファイル（関連画像）を特定し、該関連画像の画像ファイルの情報をＣＰＵ５０に出力する。ＣＰＵ５０は、個人認証装置１１２により選択された関連画像の画像ファイルを取得して液晶モニタ２０に表示する。

ここで、個人認証装置１１２は、例えば、記録メディア７０内の画像から検出された顔の特徴量を座標軸とする多次元マップを作成して、最後の記録に係る画像ファイルと同一人物の顔を含む画像ファイル（関連画像）を特定する。図６は、顔の特徴量の多次元マップを示すグラフである。図６に示す多次元マップは、顔の特徴量Ａ、Ｂ…を座標軸としており、当該多次元マップ上には、個人認証装置１１２により、記録メディア７０内の画像ファイルから検出された顔の特徴量がプロットされる。ここで、顔の特徴量Ａ、Ｂ、…は、例えば、検出された顔における目や鼻、耳、口、眉、髪の生え際の相対位置や、目や鼻、耳、口、眉大きさと顔の大きさとの比等である。なお、図６では、Ａ軸及びＢ軸以外は図示を省略する。

個人認証装置１１２は、最後の記録に係る画像ファイルから検出された顔Ｘ（座標：ＦＸ）に近い顔、例えば、個人認証装置１１２は、上記多次元マップにおいて、座標ＦＸを中心とする所定の半径の球ＣＸ内にプロットされた顔を含む画像ファイルを絞り込んで特定する。

なお、画像を絞り込む際には、顔らしさ度や顔の大きさが所定値以下の画像ファイルは、絞り込みの対象から外すようにしてもよい。

上記の処理の結果、図３に示すように、最後の記録に係る画像Ｐ１６が被写体人物の顔Ｘを含んでいる場合には、個人認証による再生モードに遷移すると、顔Ｘが検出された関連画像Ｐ１２とＰ１６が個人認証装置１１２により特定されて液晶モニタ２０に表示される。関連画像のコマ送り／コマ戻しは、再生モード時と同様にそれぞれ右ボタン２６Ｃ及び左ボタン２６Ａにより行われる。

なお、上記顔Ｘの特徴量により絞り込まれた関連画像が動画ファイルを含む場合には、当該動画ファイル内の顔Ｘを含むフレームが個人認証装置１１２により選択して表示するようにすればよい。この場合、個人認証装置１１２は、顔Ｘを含むフレームのうち、例えば、（１）一番先頭のフレーム、（２）表情（例えば、顔の特徴量のパラメータ）が最も近いと判断された顔を含むフレーム、（３）検出された顔の大きさが最大のフレーム、（４）検出された顔の顔らしさ度が最も高いフレーム、又は（５）上記の組み合わせの条件に従って表示用のフレームを選択する。

そして、個人認証装置１１２により選択された表示用のフレームが選択されてＭＥＮＵ／ＯＫボタン２８が押下されると、当該動画ファイルが再生される。顔Ｘを含む動画ファイルを再生する際には、例えば、（１）動画ファイルの最初のフレームから再生する、（２）顔Ｘが最初に登場したフレームから再生する、（３）上記表示用のフレームから再生する、（４）顔Ｘが写っているフレームのみ再生するようにすればよい。

［撮影モードの処理］
以下、各動作モードにおける撮影装置１０の処理の流れについて、図７から図９のフローチャートを参照して説明する。図７は、撮影モード時における処理の流れを示すフローチャートである。

まず、モードスイッチ２４により動作モードが撮影モードに設定されると、ＣＰＵ５０により、電源回路５２が制御されてＣＣＤ７６を含む撮像部に電源が供給され、撮影モードが開始される。そして、液晶モニタ２０によりプレビュー画像が表示される（ステップＳ１０）。

次に、シャッタボタン１６が押下されると（ステップＳ１２のＹｅｓ）、ＣＰＵ５０によりＳ１オン及びＳ２オン信号が検出されて、画像の撮影が実行され（ステップＳ１４）、撮影画像のファイルが記録メディア７０に書き込まれる（ステップＳ１６）。

次に、顔検出装置１１０により、撮影画像の顔検出処理が実行され、顔検出処理の結果がＣＰＵ５０に入力される。そして、ＣＰＵ５０により、撮影画像から顔が検出されたかどうかが判断される（ステップＳ１８）。撮影画像から顔が検出された場合には（ステップＳ１８のＮｏ）、顔検出装置１１０からの入力に基づいて、検出された顔の特徴量が撮影画像ファイルのパスとともに、図５に示した画像管理ファイルＤ１０に書き込まれて（ステップＳ２０）、ステップＳ２２に進む。一方、撮影画像から顔が検出されなかった場合には（ステップＳ１８のＹｅｓ）、そのままステップＳ２２に進む。

次に、動作モードの変更がなされなければ（ステップＳ２２のＮｏ、ステップＳ２４のＮｏ）、ステップＳ１０に戻る。一方、モードスイッチ２４により動作モードが再生モードに設定されると（ステップＳ２２のＹｅｓ）、再生モードの処理に遷移する。また、モードスイッチ２４により動作モードが個人認証による再生モードに設定されると（ステップＳ２２のＮｏ、ステップＳ２４のＹｅｓ）、ＣＰＵ５０により、画像管理ファイルが参照され、最後に撮影された画像から顔が検出されたかどうかが判断される（ステップＳ２６）。そして、撮影画像から顔が検出されていない場合には（ステップＳ２６のＹｅｓ）、再生モードに遷移する。一方、撮影画像から顔が検出されている場合には（ステップＳ２６のＮｏ）、個人認証による再生モードに遷移する。

［再生モードの処理］
図８は、再生モード時における処理の流れを示すフローチャートである。まず、再生モードが開始されると、記録メディア７０に最後に記録された画像ファイルが読み出されて、液晶モニタ２０に表示される（ステップＳ３０）。再生モード時には、左ボタン２６Ａの押下に応じて（ステップＳ３２のＹｅｓ）、表示画像のコマ戻しが行われ（ステップＳ３４）、右ボタン２６Ｃの押下に応じて（ステップＳ３６のＹｅｓ）、表示画像のコマ送りが行われる（ステップＳ３８）。

次に、動作モードの変更がなされなければ（ステップＳ４０のＮｏ、ステップＳ４２のＮｏ）、ステップＳ３２に戻る。一方、モードスイッチ２４により動作モードが撮影モードに設定されると（ステップＳ４０のＹｅｓ）、撮影モードの処理に遷移する。また、モードスイッチ２４により動作モードが個人認証による再生モードに設定されると（ステップＳ４０のＮｏ、ステップＳ４２のＹｅｓ）、ＣＰＵ５０により、画像管理ファイルＤ１０が参照され、最後に撮影された画像から顔が検出されたかどうかが判断される（ステップＳ４４）。そして、撮影画像から顔が検出されていない場合には（ステップＳ４４のＹｅｓ）、再生モードが継続する。一方、撮影画像から顔が検出されている場合には（ステップＳ４４のＮｏ）、個人認証による再生モードに遷移する。

［個人認証による再生モードの処理］
図９は、個人認証による再生モード時における処理の流れを示すフローチャートである。まず、個人認証による再生モードが開始されると、ＣＰＵ５０により、画像管理ファイルＤ１０が参照されて、最後に撮影された被写体人物の顔Ｘの特徴量が読み込まれる（ステップＳ５０）。次に、ＣＰＵ５０により、画像管理ファイルＤ１０から読み込まれた顔Ｘの特徴量に基づいて、記録メディア７０内の画像の中から関連画像が絞り込まれる（ステップＳ５２）。そして、絞り込まれた関連画像のうち最も新しい又は古いものが液晶モニタ２０に表示される（ステップＳ５４）。関連画像Ｐ２２及びＰ２６の表示中には、左ボタン２６Ａの押下に応じて（ステップＳ５６のＹｅｓ）、関連画像の画像群内においてコマ戻しが行われるとともに（ステップＳ５８）、右ボタン２６Ｃの押下に応じて（ステップＳ６０のＹｅｓ）、関連画像の画像群内においてコマ送りが行われる（ステップＳ６２）。

次に、動作モードの変更がなされなければ（ステップＳ６４のＮｏ、ステップＳ６６のＮｏ）、ステップＳ５６に戻る。一方、モードスイッチ２４により動作モードが撮影モードに設定されると（ステップＳ６４のＹｅｓ）、撮影モードの処理に遷移する。また、モードスイッチ２４により動作モードが再生モードに設定されると（ステップＳ６４のＮｏ、ステップＳ６６のＹｅｓ）、再生モードの処理に遷移する。

本実施形態によれば、動作モードを撮影モードに設定して人物の顔を撮影した後、個人認証による再生モードに設定することにより、撮影した画像の中から画像を選択して、選択した画像から検出した顔と同一人物の顔が写っている関連画像を、記録メディア７０に記録された画像の中から読み出して再生することができる。

なお、個人認証による再生モードにおいて、最後の記録に係る画像ファイルから複数の顔が検出された場合には、個人認証装置１１２により、顔の位置や大きさ、顔らしさ度等に基づいて主要被写体を選択して、主要被写体を含む画像を特定して液晶モニタ２０に表示するようにすればよい。例えば、最後の記録に係る画像ファイルが静止画ファイルの場合には、当該静止画ファイルから検出された顔のうち、（１）顔らしさ度が最も高い又は所定値以上の顔、（２）顔の大きさが最大又は所定値以上の顔、（３）画像の中心に最も近い又は画像の中心からの距離が所定値以下の顔、又は（４）上記の組み合わせの条件（例えば、顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔等）に従って主要被写体を選択する。

一方、最後の記録に係る画像ファイルが動画ファイルの場合には、個人認証装置１１２は、当該動画ファイルから検出された顔のうち、（１）顔らしさ度が最も高い又は所定値以上の顔、（２）顔の大きさが最大又は所定値以上の顔、（３）画像の中心に最も近い顔、（４）写っているフレーム数又は写っている時間が最大の顔、（５）写っているフレーム数と動画ファイルの総フレーム数の比が所定値以上の顔、（６）写っている時間と動画ファイルの再生時間の比が所定値以上の顔、又は（７）上記の組み合わせの条件（例えば、（７−１）顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔、（７−２）写っているフレーム数又は写っている時間が所定値以上で、且つ、顔らしさ度又は顔の大きさの少なくとも一方が所定値以上の顔等）に従って主要被写体を選択する。

なお、主要被写体は複数検出するようにしてもよい。主要被写体を複数検出した場合には、例えば、最後の記録に係る画像ファイルから検出された顔を顔らしさ度や大きさの順に、例えば、主要被写体Ｘ１、Ｘ２…のように配列する。そして、個人認証による再生モード時において、主要被写体を含む画像を再生する際には、主要被写体の配列に従って、（主要被写体Ｘ１を含む画像群）、（主要被写体Ｘ２を含む画像群）…のように再生すればよい。

これにより、個人認証による再生モードにおいて、最後に撮影された画像の主要被写体と思われる顔を含む画像を選択して再生表示することができる。なお、主要被写体は、ユーザの操作入力により、所望の数だけ選択可能としてもよい。

また、本実施形態では、最後に撮影された画像から顔が検出された場合に、個人認証による再生モードに遷移するようにしたが、ユーザが任意に指定した画像から検出された顔の特徴量を取得して、画像を絞り込んで表示するようにしてもよい。

また、本実施形態では、個人認証による再生モードにおいて、関連画像とともに最後の記録に係る画像を表示してもよい。また、最後の記録に係る画像から顔の画像を切り出して、関連画像とともに表示するようにしてもよい。

［第２の実施形態］
以下、本発明の第２の実施形態について説明する。図１０は本発明の第２の実施形態に係る画像表示装置（撮影装置）の外観を示す斜視図であり、図１１は当該画像表示装置（撮影装置）の電気的構成を示すブロック図である。また、図１２は、動作モードの遷移を示す図である。なお、以下の説明において、上記第１の実施形態と同様の構成については、同一の符号を付して説明を省略する。

本実施形態の撮影装置１０は、「静止画撮影モード」、「動画撮影モード」及び「再生モード」の３つの動作モードを備えており、これらの動作モードは、図１０及び図１１に示すモードスイッチ２４により設定される。

再生モードは、撮影済み画像が全て再生される通常の再生モードと、通常の再生モードからシャッタボタン１６の半押し／半押しの解除に応じて遷移する画像モニタモード及びモニタ人物再生モードを含んでいる。図１２に示すように、再生モード時にシャッタボタン１６が半押しされると（Ｓ１オン）、画像モニタモードに遷移する。

画像モニタモードでは、ＣＣＤ７６を含む撮像部に電源が供給されて、画像が撮影され、撮影されたモニタ画像Ｐ２８が液晶モニタ２０に表示される。そして、顔検出装置１１０により、モニタ画像Ｐ２８から顔の検出処理が行われ、上記顔検出処理により検出された顔Ｘの特徴量が算出される。

モニタ画像Ｐ２８から顔が検出された後、シャッタボタン１６の半押しが解除されると、モニタ人物再生モードに遷移する。モニタ人物再生モードでは、顔検出装置１１０によりモニタ画像Ｐ２８から検出された顔Ｘの特徴量が個人認証装置１１２に出力される。個人認証装置１１２は、顔Ｘの特徴量の情報を取得して、記録メディア７０内の他の画像ファイルの顔の特徴量と比較する。個人認証装置１１２は、記録メディア７０に記録された画像の中から、最後の記録に係る画像ファイルと同一人物の顔を含む画像ファイル（関連画像）を特定し、該関連画像の画像ファイルの情報をＣＰＵ５０に出力する。ＣＰＵ５０は、個人認証装置１１２により選択された関連画像の画像ファイルを取得して液晶モニタ２０に表示する。これにより、画像モニタモードにおいて撮影されたモニタ画像Ｐ２８の被写体と同一の被写体の画像が選択されて液晶モニタ２０に表示される。

なお、顔検出処理及び同一人物の顔を含む画像の特定処理の詳細については、上記第１の実施形態と同様であるため説明を省略する。また、関連画像に動画ファイルが含まれる場合の処理については、上記第１の実施形態と同様である。

次に、モニタ人物再生モードにおいて、シャッタボタン１６が半押しされると、画像モニタモードに遷移して、再びモニタ画像の撮影が行われる。

一方、画像モニタモードにおいて、顔検出処理が終了する前、又はモニタ画像Ｐ２８から顔が検出されなかった場合に、シャッタボタン１６の半押しが解除されると、通常の再生モードに戻る。

また、本実施形態では、シャッタボタン１６の半押し及び半押しの解除により、通常の再生モード、画像モニタモード及びモニタ人物再生モードの間のモード切替を行うようにしたが、例えば、シャッタボタン１６の全押し又は全押し解除により行うようにしてもよいし、専用の操作部材（例えば、モードスイッチ２４）を設けてもよい。

［撮影モード］
以下、各動作モード時における撮影装置１０の処理の流れについて、図１３から図１６のフローチャートを参照して説明する。図１３は、撮影モード時における処理の流れを示すフローチャートである。

まず、モードスイッチ２４により動作モードが撮影モードに設定されると、ＣＰＵ５０により、電源回路５２が制御されてＣＣＤ７６を含む撮像部に電源が供給され、撮影モードが開始される。そして、液晶モニタ２０によりプレビュー画像が表示される（ステップＳ７０）。

次に、シャッタボタン１６が押下されると（ステップＳ７２のＹｅｓ）、ＣＰＵ５０によりＳ１オン及びＳ２オン信号が検出されて、画像の撮影が実行され（ステップＳ７４）、撮影画像のファイルが記録メディア７０に書き込まれる（ステップＳ７６）。

次に、顔検出装置１１０により、撮影画像の顔検出処理が実行され、顔検出処理の結果がＣＰＵ５０に入力され、ＣＰＵ５０により、撮影画像から顔が検出されたかどうかが判断される（ステップＳ７８）。そして、撮影画像から顔が検出された場合には（ステップＳ７８のＮｏ）、顔検出装置１１０からの入力に基づいて、検出された顔の特徴量が撮影画像ファイルのパスとともに、画像管理ファイルＤ１０（図５参照）に書き込まれて（ステップＳ８０）、ステップＳ８２に進む。一方、撮影画像から顔が検出されなかった場合には（ステップＳ７８のＹｅｓ）、そのままステップＳ８２に進む。

次に、動作モードの変更がなされなければ（ステップＳ８２のＮｏ）、ステップＳ７０に戻る。一方、モードスイッチ２４により動作モードが再生モードに設定されると（ステップＳ８２のＹｅｓ）、再生モードの処理に遷移する。

［再生モード］
次に、再生モード時における処理の流れについて、図１４のフローチャートを参照して説明する。まず、再生モードが開始されると、記録メディア７０に最後に記録された画像ファイルが読み出されて、液晶モニタ２０に表示される（ステップＳ９０）。再生モード時には、左ボタン２６Ａの押下に応じて（ステップＳ９２のＹｅｓ）、表示画像のコマ戻しが行われ（ステップＳ９４）、右ボタン２６Ｃの押下に応じて（ステップＳ９６のＹｅｓ）、表示画像のコマ送りが行われる（ステップＳ９８）。

次に、動作モードの変更がなされなければ（ステップＳ１００のＮｏ、ステップＳ１０２のＮｏ）、ステップＳ９２に戻る。一方、シャッタボタン１６が半押しされると（ステップＳ１００のＹｅｓ）、画像モニタモードの処理に遷移する。また、モードスイッチ２４により動作モードが撮影モードに設定されると（ステップＳ１００のＮｏ、ステップＳ１０２のＹｅｓ）、撮影モードの処理に遷移する。

［画像モニタモード］
次に、画像モニタモード時における処理の流れについて、図１５のフローチャートを参照して説明する。まず、再生モード時にシャッタボタン１６が半押しされると、撮影準備が実行され（ステップＳ１１０）、モニタ画像Ｐ２８が撮影される（ステップＳ１１２）。そして、顔検出装置１１０により、モニタ画像Ｐ２８から顔の検出処理が実行されて、顔の検出処理の結果がＣＰＵ５０に出力される。

次に、ＣＰＵ５０により、上記顔の検出処理の結果に基づいて、モニタ画像Ｐ２８から顔が検出されたかどうかが判断される（ステップＳ１１４）。モニタ画像Ｐ２８から顔が検出されなかった場合には（ステップＳ１１４のＮｏ）、モニタ画像Ｐ２８が液晶モニタ２０に表示されて（ステップＳ１１６）、ステップＳ１２０に進む。一方、モニタ画像Ｐ２８から顔が検出された場合には（ステップＳ１１４のＹｅｓ）、モニタ画像Ｐ２８が液晶モニタ２０に表示されるとともに、モニタ画像Ｐ２８から検出された顔Ｘに顔検出枠Ｒ１０が付される（ステップＳ１１８）。なお、ステップＳ１１８では、顔検出枠Ｒ１０を汎用キー２６により、ユーザが設定できるようにしてもよい。

次に、シャッタボタン１６の半押しが解除されると（ステップＳ１２０のＹｅｓ）、モニタ画像Ｐ２８から顔が検出されていない場合には（ステップＳ１２２のＹｅｓ）、再生モードに遷移する。一方、モニタ画像Ｐ２８から顔が検出された場合には（ステップＳ１２２のＮｏ）、モニタ人物再生モードに遷移する。

［モニタ人物再生モード］
次に、モニタ人物再生モード時における処理の流れについて、図１６のフローチャートを参照して説明する。まず、モニタ人物再生モードが開始されると、ＣＰＵ５０により、上記画像モニタモードにおいて取得した顔の特徴量が読み込まれる（ステップＳ１３０）。そして、ＣＰＵ５０により、ステップＳ１３０において読み込まれた顔の特徴量に基づいて、記録メディア７０内の関連画像が絞り込まれて（ステップＳ１３２）、絞り込まれた関連画像のうち最も新しい又は古いものが液晶モニタ２０に表示される（ステップＳ１３４）。

関連画像Ｐ２２及びＰ２６の表示中には、左ボタン２６Ａの押下に応じて（ステップＳ１３６のＹｅｓ）、関連画像の画像群内においてコマ戻しが行われるとともに（ステップＳ１３８）、右ボタン２６Ｃの押下に応じて（ステップＳ１４０のＹｅｓ）、関連画像の画像群内においてコマ送りが行われる（ステップＳ１４２）。

次に、動作モードの変更がなされなければ（ステップＳ１４４のＮｏ）、ステップＳ１３６に戻る。一方、シャッタボタン１６が半押しされると（ステップＳ１４４のＹｅｓ）、画像モニタモードに遷移する。

本実施形態によれば、再生モード時に、所望の人物の顔を含むモニタ画像を撮影することにより、記録メディア７０に記録された画像の中から、モニタ画像に写っている人物の顔を含む関連画像を読み出して再生することができる。

なお、モニタ画像Ｐ２８から複数の顔が検出された場合の処理については、上記第１の実施形態と同様である。

［第３の実施形態］
図１７は、本発明の第３の実施形態に係る画像表示装置（撮影装置）の動作モードの遷移を示す図である。なお、撮影モード及び通常の再生モードについては、上記第２の実施形態と同様であるため説明を省略する。図１７に示すように、通常の再生モード時にシャッタボタン１６が半押しされると（Ｓ１オン）、画像モニタモードに遷移する。

画像モニタモードでは、ＣＣＤ７６を含む撮像部に電源が供給されて、画像が撮影され、撮影されたモニタ画像Ｐ２８が液晶モニタ２０に表示される。そして、顔検出装置１１０により顔の検出処理が行われ、上記顔検出処理により検出された顔Ｘの特徴量が算出されて、個人認証装置１１２に出力される。個人認証装置１１２は、顔Ｘの特徴量の情報を取得して、記録メディア７０内の他の画像ファイルの顔の特徴量と比較し、記録メディア７０に記録された画像の中から、最後の記録に係る画像ファイルと同一人物の顔を含む画像ファイル（関連画像）を特定し、該関連画像の画像ファイルの情報をＣＰＵ５０に出力する。ＣＰＵ５０は、個人認証装置１１２により選択された関連画像の画像ファイルを取得して液晶モニタ２０の関連画像表示領域Ａ１０に表示する。

［画像モニタモード］
次に、画像モニタモード時における処理の流れについて、図１８のフローチャートを参照して説明する。まず、再生モード時にシャッタボタン１６が半押しされると、撮影準備が実行され（ステップＳ１５０）、モニタ画像Ｐ２８が撮影される（ステップＳ１５２）。そして、顔検出装置１１０により、モニタ画像Ｐ２８から顔の検出処理が実行されて、顔の検出処理の結果がＣＰＵ５０に出力される。

次に、ＣＰＵ５０により、上記顔の検出処理の結果に基づいて、モニタ画像Ｐ２８から顔が検出されたかどうかが判断される（ステップＳ１５４）。モニタ画像Ｐ２８から顔が検出されなかった場合には（ステップＳ１５４のＮｏ）、モニタ画像Ｐ２８が液晶モニタ２０に表示されて（ステップＳ１５６）、ステップＳ１６６に進む。一方、モニタ画像Ｐ２８から顔が検出された場合には（ステップＳ１５４のＹｅｓ）、モニタ画像Ｐ２８が液晶モニタ２０に表示されるとともに、モニタ画像Ｐ２８から検出された顔に顔検出枠Ｒ１０が付される（ステップＳ１５８）。なお、ステップＳ１５８では、顔検出枠Ｒ１０を汎用キー２６により、ユーザが設定できるようにしてもよい。

次に、ＣＰＵ５０により、ステップＳ１５４において検出された顔の特徴量に基づいて、記録メディア７０内の画像が絞り込まれる（ステップＳ１６０）。そして、モニタ画像Ｐ２８から検出された顔Ｘと同一人物の顔を含む画像ファイルが検出された場合には（ステップＳ１６２のＹｅｓ）、液晶モニタ２０の関連画像表示領域Ａ１０に一覧表示（サムネイル表示）される（ステップＳ１６４）。一方、モニタ画像Ｐ２８から検出された顔Ｘと同一人物の顔を含む画像ファイルが検出されなかった場合には（ステップＳ１６２のＮｏ）、そのままステップＳ１６６に進む。

次に、シャッタボタン１６の半押しが解除されると（ステップＳ１６６のＹｅｓ）、モニタ画像Ｐ２８から顔が検出されていない場合には（ステップＳ１６８のＹｅｓ）、再生モードに遷移する。一方、モニタ画像Ｐ２８から顔が検出された場合には（ステップＳ１６８のＮｏ）、モニタ人物再生モードに遷移する。

［モニタ人物再生モード］
次に、モニタ人物再生モード時における処理の流れについて、図１９のフローチャートを参照して説明する。まず、モニタ人物再生モードが開始されると、ＣＰＵ５０により、画像モニタモードにおいて絞り込まれた関連画像の画像ファイルが記録メディア７０から読み込まれて（ステップＳ１８０）、表示用のデータが取得される（ステップＳ１８２）。そして、関連画像のうち最も新しい又は古いものが液晶モニタ２０に表示される（ステップＳ１８４）。

関連画像Ｐ２２及びＰ２６の表示中には、左ボタン２６Ａの押下に応じて（ステップＳ１８６のＹｅｓ）、関連画像の画像群内においてコマ戻しが行われるとともに（ステップＳ１８８）、右ボタン２６Ｃの押下に応じて（ステップＳ１９０のＹｅｓ）、関連画像の画像群内においてコマ送りが行われる（ステップＳ１９２）。

次に、動作モードの変更がなされなければ（ステップＳ１９４のＮｏ、ステップＳ１９６のＮｏ）、ステップＳ１８６に戻る。一方、シャッタボタン１６が半押しされると（ステップＳ１９４のＹｅｓ）、画像モニタモードに遷移する。また、モードスイッチ２４が撮影モードに設定されると（ステップＳ１９６のＹｅｓ）、撮影モードに遷移する。

本実施形態によれば、モニタ画像Ｐ２８に写っている人物の顔を含む関連画像を記録メディア７０から読み出す際に、関連画像とモニタ画像Ｐ２８とを液晶モニタ２０に同時に表示することができる。

［第４の実施形態］
図２０は、本発明の第４の実施形態に係る画像表示装置（撮影装置）の動作モードの遷移を示す図である。なお、撮影モード、再生モード及び画像モニタモードについては、上記第２の実施形態と同様であるため説明を省略する。図２０に示すように、本実施形態では、モニタ人物再生モード時において、モニタ画像Ｐ２８から検出された顔Ｘを表示するための領域Ａ２０が設けられる。

図２１は、本実施形態に係るモニタ人物再生モード時における処理の流れを示すフローチャートである。まず、モニタ人物再生モードが開始されると、ＣＰＵ５０により、上記画像モニタモードにおいて取得した顔の特徴量が読み込まれる（ステップＳ２００）。そして、ＣＰＵ５０により、ステップＳ１３０において読み込まれた顔の特徴量に基づいて、記録メディア７０内の画像が絞り込まれて（ステップＳ２０２）、絞り込まれた関連画像が、モニタ画像Ｐ２８から検出された顔Ｘとともに液晶モニタ２０に表示される（ステップＳ２０４）。

関連画像Ｐ２２及びＰ２６の表示中には、左ボタン２６Ａの押下に応じて（ステップＳ２０６のＹｅｓ）、関連画像の画像群内においてコマ戻しが行われるとともに（ステップＳ２０８）、右ボタン２６Ｃの押下に応じて（ステップＳ２１０のＹｅｓ）、関連画像の画像群内においてコマ送りが行われる（ステップＳ２１２）。

次に、動作モードの変更がなされなければ（ステップＳ２１４のＮｏ、ステップＳ２１６のＮｏ）、ステップＳ２０６に戻る。一方、シャッタボタン１６が半押しされると（ステップＳ２１４のＹｅｓ）、画像モニタモードに遷移する。また、モードスイッチ２４が撮影モードに設定されると（ステップＳ２１６のＹｅｓ）、撮影モードに遷移する。

本実施形態によれば、モニタ画像Ｐ２８に写っている人物の顔を含む関連画像を記録メディア７０から読み出して表示する際に、モニタ画像Ｐ２８から切り出した顔の画像と関連画像とを液晶モニタ２０に同時に表示することができる。

なお、上記の各実施形態の処理を行うプログラムを、撮影装置のほか、パーソナルコンピュータ（ＰＣ）や携帯情報端末（ＰＤＡ）、携帯フォトプレーヤー、携帯電話等の画像撮影、表示機能を有する装置に適用することにより、本発明の撮影装置を実現することができる。

本発明の第１の実施形態に係る画像表示装置（撮影装置）の外観を示す斜視図 本発明の第１の実施形態に係る画像表示装置（撮影装置）の電気的構成を示すブロック図 動作モードの遷移を示す図 記録メディア７０のフォルダツリー構造を示す図 画像管理ファイルＤ１０の構成例を示す図 顔の特徴量の多次元マップを示すグラフ 撮影モード時における処理の流れを示すフローチャート 再生モード時における処理の流れを示すフローチャート 個人認証による再生モード時における処理の流れを示すフローチャート 本発明の第２の実施形態に係る画像表示装置（撮影装置）の外観を示す斜視図 本発明の第２の実施形態に係る画像表示装置（撮影装置）の電気的構成を示すブロック図 本発明の第２の実施形態に係る画像表示装置（撮影装置）の動作モードの遷移を示す図 撮影モード時における処理の流れを示すフローチャート 再生モード時における処理の流れを示すフローチャート 画像モニタモード時における処理の流れを示すフローチャート モニタ人物再生モード時における処理の流れを示すフローチャート 本発明の第３の実施形態に係る画像表示装置（撮影装置）の動作モードの遷移を示す図 画像モニタモード時における処理の流れを示すフローチャート モニタ人物再生モード時における処理の流れを示すフローチャート 本発明の第４の実施形態に係る画像表示装置（撮影装置）の動作モードの遷移を示す図 本発明の第４の実施形態に係るモニタ人物再生モード時における処理の流れを示すフローチャート

符号の説明

１０…撮影装置（電子カメラ）、１２…カメラボディ、１４…レンズ鏡筒、１６…レリーズボタン、１８…電源スイッチ、２０…表示部（液晶モニタ）、２２…ファインダ接眼窓、２４…モードスイッチ、２６…汎用キー、２８…ＭＥＮＵ／ＯＫボタン、３０…キャンセルボタン、３２…ディスプレイボタン、３４…ファンクションボタン、５０…ＣＰＵ、１１０…顔検出装置、１１２…個人認証装置

Claims (16)

1. 画像を撮影する撮影手段と、
   前記画像を記録する記録手段と、
   前記画像を表示する表示手段と、
   前記撮影された画像から顔を検出する顔検出手段と、
   前記顔検出手段により検出された顔の特徴量を取得する顔特徴量取得手段と、
   前記撮影手段により画像を撮影する撮影モードと、個人認証による再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替手段と、
   前記動作モードが個人認証による再生モードに設定された場合に、前記記録手段に記録された画像の中から画像を選択する画像選択手段と、
   前記画像選択手段により選択された画像から検出された顔の特徴量に基づいて、前記記録手段に記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出手段と、
   前記動作モードが個人認証による再生モードに設定された場合に、前記関連画像を前記表示手段に表示する表示制御手段と、
   を備えることを特徴とする画像表示装置。
2. 前記画像選択手段は、前記記録手段に最後に記録された画像を選択することを特徴とする請求項１記載の画像表示装置。
3. 画像を撮影する撮影手段と、
   前記撮影手段に前記画像の撮影指示を入力する撮影指示手段と、
   前記画像を記録する記録手段と、
   前記画像を表示する表示手段と、
   前記撮影された画像から顔を検出する顔検出手段と、
   前記顔検出手段により検出された顔の特徴量を取得する顔特徴量取得手段と、
   前記撮影手段により画像を撮影する撮影モードと、前記表示手段により画像を再生表示する再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替手段と、
   前記動作モードが再生モードに設定されたときに、前記撮影指示手段からの撮影指示に応じて前記撮影手段によりモニタ画像を撮影する撮影制御手段と、
   前記再生モード時に撮影されたモニタ画像から検出された顔の特徴量に基づいて、前記記録手段に記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出手段と、
   前記関連画像を前記表示手段に表示する表示制御手段と、
   を備えることを特徴とする画像表示装置。
4. 前記表示制御手段は、前記関連画像とともに、前記モニタ画像を前記表示手段に表示することを特徴とする請求項３記載の画像表示装置。
5. 前記表示制御手段は、前記モニタ画像から検出された顔の画像を切り出して、前記関連画像とともに前記表示手段に表示することを特徴とする請求項３記載の画像表示装置。
6. 前記顔特徴量取得手段は、前記顔検出手段により検出された顔の特徴量を取得して、該顔の特徴量を該画像と関連付けて前記記録手段に記録し、前記個人認証による再生モード時には、前記記録手段から前記顔の特徴量を取得することを特徴とする請求項１から５のいずれか１項記載の画像表示装置。
7. 前記顔特徴量取得手段は、前記撮影モード時、前記画像が撮影される都度又は前記撮影モード以外の動作モード時のいずれかに、前記画像から顔の特徴量を取得することを特徴とする請求項１から６のいずれか１項記載の画像表示装置。
8. 前記関連画像検出手段は、前記関連画像が動画の場合に、前記同一人物の顔を含むフレームを取得し、
   前記表示制御手段は、前記関連画像検出手段により取得されたフレームを前記表示手段に表示することを特徴とする請求項１から７のいずれか１項記載の画像表示装置。
9. 前記画像選択手段によって選択された画像から複数の顔が検出された場合に、前記複数の顔の中から主要被写体を指定する主要被写体指定手段を更に備え、
   前記関連画像検出手段は、前記主要被写体を含む画像を検出することを特徴とする請求項１から８のいずれか１項記載の画像表示装置。
10. 前記主要被写体検出手段は、顔らしさの評価値である顔らしさ度が最も高い又は所定値以上の顔、顔の大きさが最大又は所定値以上の顔、画像の中心に最も近い又は画像の中心からの距離が所定値以下の顔、又は顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔のうち少なくとも１つの条件に従って主要被写体を指定することを特徴とする請求項９記載の画像表示装置。
11. 前記主要被写体検出手段は、前記画像が動画の場合に、顔らしさの評価値である顔らしさ度が最も高い又は所定値以上の顔、顔の大きさが最大又は所定値以上の顔、画像の中心に最も近い顔、写っているフレーム数又は写っている時間が最大の顔、写っているフレーム数と動画ファイルの総フレーム数の比が所定値以上の顔、写っている時間と動画ファイルの再生時間の比が所定値以上の顔、顔らしさ度又は大きさの少なくとも一方が所定値以上で、且つ、画像の中心に近い顔、写っているフレーム数又は写っている時間が所定値以上で、且つ、顔らしさ度又は顔の大きさの少なくとも一方が所定値以上の顔のうち少なくとも１つの条件に従って主要被写体を指定することを特徴とする請求項９記載の画像表示装置。
12. 撮影手段により画像を撮影する撮影工程と、
    前記画像を記録する記録工程と、
    前記画像を表示手段に表示する表示工程と、
    前記撮影された画像から顔を検出する顔検出工程と、
    前記顔検出工程において検出された顔の特徴量を取得する顔特徴量取得工程と、
    前記撮影手段により画像を撮影する撮影モードと、個人認証による再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替工程と、
    前記動作モードが個人認証による再生モードに設定された場合に、前記記録された画像の中から画像を選択する画像選択工程と、
    前記画像選択工程において選択された画像から検出された顔の特徴量に基づいて、前記記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出工程と、
    前記動作モードが個人認証による再生モードに設定された場合に、前記関連画像を前記表示手段に表示する表示制御工程と、
    を備えることを特徴とする画像表示方法。
13. 撮影手段により画像を撮影する撮影工程と、
    前記撮影工程に前記画像の撮影指示を入力する撮影指示工程と、
    前記画像を記録する記録工程と、
    前記画像を表示手段に表示する表示工程と、
    前記撮影された画像から顔を検出する顔検出工程と、
    前記顔検出工程において検出された顔の特徴量を取得する顔特徴量取得工程と、
    前記撮影手段により画像を撮影する撮影モードと、前記表示手段により画像を再生表示する再生モードの少なくとも２つの動作モードの間で動作モードを切り替える動作モード切替工程と、
    前記動作モードが再生モードに設定されたときに、前記撮影指示に応じて前記撮影手段によりモニタ画像を撮影する撮影制御工程と、
    前記再生モード時に撮影されたモニタ画像から検出された顔の特徴量に基づいて、前記記録された画像の中から、同一人物の顔を含む関連画像を検出する関連画像検出工程と、
    前記関連画像を前記表示手段に表示する表示制御工程と、
    を備えることを特徴とする画像表示方法。
14. 前記表示制御工程は、前記関連画像とともに、前記モニタ画像を前記表示手段に表示する工程を備えることを特徴とする請求項１３記載の画像表示方法。
15. 前記表示制御工程は、
    前記モニタ画像から検出された顔の画像を切り出す工程と、
    前記切り出した顔の画像を、前記関連画像とともに前記表示手段に表示する工程と、
    を備えることを特徴とする請求項１３記載の画像表示方法。
16. 前記顔特徴量取得工程において、前記顔検出工程により検出された顔の特徴量を取得して、該顔の特徴量を該画像と関連付けて前記記録工程に記録しておき、
    前記個人認証による再生モード時に、前記記録した前記顔の特徴量を取得する工程を更に備えることを特徴とする請求項１３から１５のいずれか１項記載の画像表示方法。

Images