JP2021153229A

JP2021153229A - 情報処理装置、撮像装置、方法、プログラム及び記憶媒体

Info

Publication number: JP2021153229A
Application number: JP2020052382A
Authority: JP
Inventors: 憲太朗小暮; Kentaro Kogure
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2020-03-24
Filing date: 2020-03-24
Publication date: 2021-09-30
Also published as: US11570373B2; CN113452922A; US20210306543A1; EP3886429A1

Abstract

【課題】被写体の特定の領域に露出を合わせる際の安定性を向上させること。【解決手段】画像を取得する取得手段と、画像から被写体を検出する第１の検出手段と、第１の検出手段により検出した被写体の輝度に応じて露出を制御する露出制御手段と、露出制御手段により露出制御された画像から被写体の一部を検出する第２の検出手段と、第１の検出手段が検出した被写体の第１の輝度と、第２の検出手段が検出した被写体の一部の第２の輝度との差分を記憶する記憶手段と、を備え、露出制御手段は、第２の検出手段により被写体の一部を検出した場合には、被写体の一部の輝度に応じて露出を制御し、第２の検出手段により前記被写体の一部を検出した状態からロストした状態となった場合には、第１の検出手段により検出した被写体の輝度と差分とに基づいてオフセットさせた輝度に応じて露出を制御する。【選択図】図５

Description

本発明は、情報処理装置、撮像装置、方法、プログラム及び記憶媒体に関する。

従来、基準画像における所定領域と所定領域以外の領域との間における明るさの差を示す関係情報に基づいて露出補正を行う技術が知られている（たとえば、特許文献１参照）。

特開２００６−７４１４４号公報

本発明が解決しようとする課題は、被写体の特定の領域に露出を合わせる際の安定性を向上させることである。

本発明は、以下の解決手段によって上記課題を解決する。

本発明に係る情報処理装置は、画像を取得する取得手段と、前記画像から被写体を検出する第１の検出手段と、前記第１の検出手段により検出した前記被写体の輝度に応じて露出を制御する露出制御手段と、前記露出制御手段により露出制御された画像から前記被写体の一部を検出する第２の検出手段と、前記第１の検出手段が検出した前記被写体の第１の輝度と、前記第２の検出手段が検出した前記被写体の一部の第２の輝度との差分を記憶する記憶手段と、を備え、前記露出制御手段は、前記第２の検出手段により前記被写体の一部を検出した場合には、前記被写体の一部の輝度に応じて露出を制御し、前記第２の検出手段により前記被写体の一部を検出した状態からロストした状態となった場合には、前記第１の検出手段により検出した前記被写体の輝度と前記差分とに基づいてオフセットさせた輝度に応じて露出を制御することを特徴とする。

撮像装置のハードウェア構成の一例を示す図である。撮像部の一例を示す図である。撮像装置のソフトウェア構成の一例を示す図である。撮影画像内において人物および顔が検出された場合を表した図である。第１の実施形態に係るフローチャートである。第１の実施形態に係る人物の顔および人体の輝度情報の算出結果を示した表である。第１の実施形態に係る露出制御部で制御する露出制御の速度の違いを示したグラフである。第１の実施形態に係る図４の人物の位置が変化し顔をロストした場合の撮影画像の例である。第１の実施形態に係る図８の人物の位置が変化し図５のフローチャートの処理を実行した場合の撮影画像の例である。第２の実施形態に係る撮像システムの構成の一例を示す図である。第２の実施形態に係るフローチャートである。第２の実施形態に係る複数の人物および顔の輝度情報を記憶する際の一例を示す表である。第２の実施形態に係る複数の人物の顔および人体の輝度情報、座標の算出結果および付随する記憶情報を示した表である。

図１は、カメラ１０のハードウェア構成の一例を示す図である。カメラ１０は、ハードウェア構成として、撮像部１１と、ＣＰＵ１２と、メモリ１３と、入力部１４と、表示部１５と、通信部１６と、を含む。撮像部１１は、被写体像を撮像する。撮像部１１の詳細は後述する図２に示す。ＣＰＵ１２は、カメラ１０の全体を制御する。メモリ１３は、プログラム、撮像部１１で撮像された画像、設定値等を記憶する。入力部１４は、ユーザーの選択操作等を入力し、ＣＰＵ１２に渡す。表示部１５は、ＣＰＵ１２の制御に基づき画面等を表示する。通信部１６は、カメラ１０をネットワークに接続し、他の装置との通信等を制御する。

図２は、撮像部１１の一例を示す図である。撮像部１１は、数枚のレンズ群からなるレンズ２０１、ＣＣＤやＣＭＯＳ等の撮像素子２０２を備える。また、撮像部１１は、雑音軽減を行う相関二重サンプリング（ＣｏｒｒｅｌａｔｅｄＤｏｕｂｌｅＳａｍｐｌｉｎｇ：ＣＤＳ）回路２０３を備える。また、撮像部１１は、カメラのゲイン制御を自動で行うゲインコントロールアンプ回路（ＡｕｔｏｍａｔｉｃＧａｉｎＣｏｎｔｒｏｌ：ＡＧＣ）２０４を備える。また、撮像部１１は、アナログ信号をデジタル信号へと変換を行うＡ／Ｄ変換２０５を備える。

図３は、カメラ１０のソフトウェア構成の一例を示す図である。撮像制御部１０１は、撮像部１１の制御を行う。露出制御部１０２は撮影時の露出の制御を行う。画像生成部１０３は、露出制御部１０２で決められた露出で撮影された画像を生成する。検出部１０４は、画像生成部１０３で生成された画像に対して特定のオブジェクト検出を行う。輝度算出部１０５は、画像生成部１０３で生成された画像の所定領域の輝度を算出する。記憶部１０６は、画像に関する輝度情報または特定のオブジェクトに関連する情報を記憶する。出力部１０７は、画像生成部１０３で生成された画像を外部に出力する。

次に、上述した各構成要素の動作について詳しく説明を行う。まず、撮像装置について、図２及び図３を用いて詳しく説明を行う。レンズ２０１は、被写体像を後段の撮像素子２０２に結像させる。また、レンズ２０１は単焦点やズームレンズなど種々のレンズが構成可能である。撮像素子２０２は、撮像光学系としてのレンズ２０１を介して結像された被写体像を電気信号に変換する。さらに、レンズ２０１と撮像素子２０２の間に物理的に光量を調節可能な絞りを備えてもよい。ＣＤＳ回路２０３は、撮像素子２０２から出力された電気信号に対して相関二重サンプリング処理等を実施する。ＡＧＣアンプ２０４は、ＣＤＳ回路２０３から出力された電気信号に対して増幅処理等を行う。Ａ／Ｄ変換２０５は、ＡＧＣアンプ２０４により増幅処理されたアナログ信号をデジタル信号へと変換する。撮像制御部１０１は、撮像部１１から得られた輝度信号及び色信号を露出制御部１０２に渡す。露出制御部１０２は、撮像部１１のレンズ２０１内の絞りや撮像素子２０２で設定されるシャッタースピード、ＡＧＣ２０４で制御されるゲインなどを制御する。そして、予め決められたプログラム線図に則して、撮影画像が所定の明るさを維持するように目標値を定めて自動で露出制御を行う。画像生成部１０３は、露出制御部１０２で決められた露出で画像を撮影した画像を生成する。このとき種々の一般的な画像処理を行ってもよい。例えば、ガンマ補正、ホワイトバランス処理、カラーバランス処理、シャープネス処理、ノイズ低減処理、収差補正、シェーディング補正等が含まれる。ここで、露出制御部１０２で設定する露出レベルに応じて画像生成部１０３における各種画像処理パラメータを変更してもよい。例えば、露出制御部１０２で制御しているゲインが高いほどノイズ低減処理のレベルを強くする処理等が含まれる。検出部１０４は、画像生成部１０３で種々の画像処理を行った画像において人物の顔や人体等の特定オブジェクトの検出を行い、それぞれ異なるオブジェクトとして検出が可能である。また、検出部１０４で検出対象とするオブジェクトの種別や大きさなどを予め決めてもよいし、ユーザーが任意に選択可能にしてもよい。図４は撮影画像で人体および顔が検出されている様子を表している図であり、オブジェクト２０は屋外から建物等の入り口に侵入してくる人物、実線矩形３０は顔検出枠、破線矩形３１は人体検出枠をそれぞれ表している。また、図４中の点線矩形３２は顔検出および人体検出可能枠を表しており、枠内の顔または人体のみを検出可能にしてもよい。また、顔および人体枠の位置は固定位置でもよいし、ユーザーが任意に指定可能にしてもよい。更に、顔と人体の検出可能枠を独立で設定することを許可してもよい。図４中の点線矩形３２の顔および人体検出可能枠を設定することで、ここで、図４の人体検出枠３１は人体全体でもよいし、頭部の形状を検出し人体検出としてもよい。輝度算出部１０５は、検出部１０４で検出された人体や人物の顔を含む特定のオブジェクトの所定タイミングにおける輝度を算出する。輝度の算出方法は、検出された特定のオブジェクトを含む所定領域の平均輝度でもよいし、重みづけ平均でもよい。オブジェクトを含む所定領域は矩形枠全体でもよいし、検出されたオブジェクト内部の全体また一部でもよい。検出部１０４で特定の顔および人体が検出された場合、当該特定の顔および人体毎に、顔検出時の人体輝度、顔検出時の顔輝度、人体検出時の人体輝度、人体基準の顔輝度との差分等を算出してもよい。このとき、顔または人体の輝度および画像全体の輝度差を算出し、顔または人体の輝度が画面全体の輝度と比較して相対的に低い場合に逆光シーンであると判定（シーン判定）してもよい。記憶部１０６は、輝度算出部１０５で算出された上述の各種輝度および輝度差を含む輝度情報を記憶する。出力部１０７は、画像生成部１０３で種々の画像処理を行った画像を出力する。出力部１０７の出力先としてはカメラ１０に内蔵されているディスプレイでもよいし、通信部１６を介して接続されている外部の端末装置でもよい。

（第１の実施形態）
以下、図５のフローチャートを参照して、本発明の第１の実施例による撮像装置について説明する。この撮像装置において、図３は、第１の実施形態に係る撮像装置の構成を示す図である。ここでは、撮像制御部１０１、露出制御部１０２、画像生成部１０３、検出部１０４、輝度算出部１０５、記憶部１０６、出力部１０７が、主に動作することにより図５のフローチャートに示す処理が実現される。また、撮像装置１０で撮影している被写体環境としては、図４の人物２０が明るい屋外から暗い屋内へ侵入しようとしている状況で、時間は日中で外光が強く差し込むような逆光シーンであることを前提とする。

まず、撮像制御部１０１、露出制御部１０２、画像生成部１０３を経て生成された画像に対して輝度算出部１０５で、撮影画像が逆光シーンであるかどうか判定を行う（ステップＳ１００）。逆光シーンであるかどうかは、公知の手法として、画像内の複数の所定領域の輝度差から判定してもよいし、輝度ヒストグラムを算出して所定以上または所定以下の輝度の画素数の割合が所定以上の場合に逆光シーンであると判断してもよい。ステップＳ１００で逆光シーンであると判定された場合は、人体検出を行い、画像内に人体が存在するかどうかを判定する（ステップＳ１０１）。ステップＳ１０１において、検出部１０４で人体が検出された場合、所定の人体輝度と顔輝度に関する情報が記憶部１０６に記憶されているかどうかを判定する（ステップＳ１０２）。ステップＳ１０２において、所定の人体輝度と顔輝度が記憶部１０６に記憶されていないと判定された場合は、露出制御部１０２が人体に対して露出制御を行う（ステップＳ１０３）。ステップＳ１０３で人体に露出を合わせていく過程で、顔を検出するかどうかを判定する（ステップＳ１０４）。ステップＳ１０４において、検出部１０４で顔が検出された場合は、顔が検出された時点の人体輝度と顔輝度を算出し記憶部１０６に記憶する（ステップ１０５）。ここで、図６は図４の人物２０に対して、画像の輝度の最小値を０、最大値を２５５としたときの、ステップＳ１０３ではじめに人体を顔検出時の人体輝度、顔検出時の顔輝度、人体輝度を基準とした顔輝度との差分をそれぞれ算出した結果を表した表である。ステップＳ１０５で輝度算出手段１０５が算出した各種人体と顔に関する輝度情報を記憶部１０６に記憶した後、ステップＳ１０４において検出部１０４で検出された顔に対して露出制御を行う。

一方で、検出部１０４で人体は検出されているが一度検出していた顔をロストした場合は、以下の処理を行う。ステップ１０２において、ステップＳ１０５で一度人体輝度および顔輝度に関する情報が記憶されている場合、輝度算出部１０５が画像の輝度が所定以上変化していないかどうかを判定する（ステップＳ１０７）。ここで、顔をロストした状態としては、検出していた顔の一部または全体が遮蔽物等の影響で検出できなくなる、または顔の向きの変化等によって検出部１０４で検出していた顔が検出できなくなることとする。画像全体の変化は、画像内の複数の所定領域内の輝度変化、または輝度ヒストグラムの各分布の所定以上の変化から判定してもよい。また、検出部１０４で検出していた人体および顔を両方ロストした場合は、所定時間経過後に通常の露出制御にしてもよい。通常の露出制御は、画像全体に対し平均測光、中央重点測光、評価測光、スポット測光のような一般的な種々の測光方式を採用してもよい。

ステップＳ１０７において、画像の輝度変化が所定以下の場合は、露出制御１０２で所定の目標値に対して露出制御する時の速度を速くしてもよい（ステップＳ１０８）。図７は、ステップＳ１０８における、露出制御部１０２の露出制御の速度の違いの例を表したグラフである。図８のグラフ上の実線が通常速度で破線が速度を速くした場合を示しており、破線の露出制御のほうが目標輝度に到達するまでの時間が早いことを表している。本来、常時顔に対して相対的に速い露出制御をすることが望ましいが、目標輝度が定まらない状態で露出制御の速度をあげてしまうと、目標輝度に対してオーバーしてしまう等安定性が悪くなってしまう場合がある。また、露出制御１０２の露出制御の速度を変更するための手段は、絞り・ゲイン・シャッタースピードの内少なくとも１つの単位時間あたりの制御する分解能を粗くしてもよい。ステップ１０８で露出制御部１０２の露出制御の速度を変更した後、露出制御部１０２は、記憶部１０６に記憶されている顔輝度と人体輝度の輝度差を取得する。そして、検出部１０４で検出された人体に対して当該輝度差分オフセットさせた目標値を設定し露出制御を行う（ステップＳ１０９）。図６のステップＳ１０５で記憶された人体輝度基準の顔輝度との差分を参照すると、＋３０なので、検出部１０４で検出された人体の輝度に対して常に＋３０目標値をオフセットしておくことで、人体のみ検出中の状態でも顔に適した露出を維持できる。一方、ステップＳ１０７において、画像の輝度変化が所定以上の場合は、記憶部１０６に記憶されている顔輝度および人体輝度の輝度差に関して相関関係が成り立たない場合がある。そのため、ステップＳ１０４〜Ｓ１０６の処理を実行して再度顔輝度および人体輝度を記憶部１０６に記憶し直してもよい。図４の人物２０が更に屋内に侵入し、顔が黒潰れてロストしてしまうような環境下でも、ステップＳ１０７〜ステップＳ１０９の処理を実行した場合は、図１０のように通常より人体に対して顔の目標値相当の露出制御が可能となり黒潰れを抑制できる。また、一度人物２０が完全にロストした状態から、人物２０の人体を検出した場合においては、通常よりも速い速度で人物２０の人体に対して人物２０の顔に適した露出制御が可能となる。

したがって、上述のステップＳ１０１〜ステップ１０９の処理を実行することで、検出部１０４で１度検出した顔に対して、ロストした場合の露出の安定性、およびロスト後に再度同じ顔に露出を合わせる際の露出の即応性が向上する。

（第２の実施形態）
以下、図１０を参照して、本発明の第２の実施例による撮像システムについて説明する。図１０は、第２の実施形態に係る撮像システムの構成を示す図である。ここでは、撮像装置１０およびクライアント装置４０が、主に動作することにより図１１のフローチャートに示す処理が実現される。図１０中の撮像装置１０およびクライアント装置４０に含まれる各要素１０１〜１０７に関しては同一の処理内容のため説明を省略する。クライアント装置４０の送信部２０１は、輝度算出部１０５および記憶部１０６から取得した輝度情報に基づいて撮像装置１０へ少なくとも露出制御に関する命令を送信する。撮像装置１０の受信部２０２は、クライアント装置４０からの命令を受信し、少なくとも露出制御部１０２へ命令を送る。識別部２０３は、検出部１０４で検出された顔および人体を含む特定のオブジェクトの個体を特徴量抽出やパターンマッチングを行い識別する。また、撮像装置１０およびクライアント装置４０間に対してローカルネットワークを用いて通信を行ってもよいし、インターネットなどのグローバルネットワークを介して通信を行ってもよい。撮像装置１０で撮影している被写体環境としては、図１２のように、人物２０および人物２１がそれぞれ明るい屋外から暗い屋内へ侵入しようとしている状況で、日中の外光が強く差し込むような逆光シーンであることを前提とする。また、図１２中の実線３０、破線３１は、図４と同様の処理のため説明を省略する。

次に、図１１のフローチャートを参照して、本発明の第２の実施例における撮像システムについて説明する。図１１中のステップＳ１０１〜Ｓ１０８に関しては第１の実施形態で説明した図５のフローチャートの各処理と同様のため説明を省略する。ステップＳ１００からステップＳ１０３を経て、ステップＳ１０４で顔を検出した場合、識別部２０３で顔および人体を識別し、固有のＩＤを割り振る。そして、夫々の顔画像、人体シルエット、人体輝度と顔輝度に関する情報を紐づけて記憶部１０６に記憶してもよい（ステップＳ２０１）。このとき、図１２中の人物２０の顔ＩＤは００１、人体ＩＤは１００１とし、人物２１の顔ＩＤは００２、人体ＩＤは１００２とする。また、検出部１０４または識別部２０３は公知の技術を用いて顔画像の特徴量または人体のシルエットから個体の特定および認識がある程度可能であるとする。更に、検出部１０４で人体検出および顔検出した時の画像上の２次元座標を紐づけて記憶部１０６に記憶してもよい。図１３は、図１２中の人物２０と人物２１の夫々の顔および人体の輝度情報および検出時の２次元座標を各ＩＤに紐づけて表した表である。例えば、図１３の表のように顔検出枠および人体検出枠の２次元座標を表現してもよい。すなわち、画像の解像度に合わせて画像上の左下を（ｘ，ｙ）＝（０，０）、右上を（ｘ，ｙ）＝（１９２０，１０８０）とした、枠の始点のｘ座標をｘ、枠の始点のｙ座標をｙ、枠の幅をｖ，枠の高さをｈと表現できる。また、ｘ，ｙ，ｖ，ｈのそれぞれの最大値は、解像度に依存しない十分に大きな値でもよい。このとき、図１３の顔画像の特徴量から、図１３の表に示されていない顔の各器官の特徴、肌の色、髪の色・長さ、人種等を推定し紐づけてもよい。更に、人種や実際の肌の色が推定できる場合は、記憶部１０６に記憶されている人体基準の顔輝度差分に対して更にオフセットをしてもよい。

一方、ステップＳ１０８を経て複数の顔および人体に関する輝度情報が記憶された状態において、以下の処理を行う。すなわち、逆光シーンにおける顔が検出されていない状態で検出されている人物が複数存在するかどうか、記憶部１０６に記憶されている当該複数の人体に紐づく夫々の顔輝度の最小値と最大値が所定範囲内であるかどうかを判定する（ステップＳ２０２）。例えば、最小値と最大値が顔検出可能な輝度範囲であるかどうかを判定しもよい。ステップＳ２０２において、顔輝度の最小および最大値の範囲外である場合は、当該複数の人体に紐づく夫々の人体基準の顔輝度との差分の平均値分オフセットした目標値で露出制御してもよい（ステップＳ２０３）。ステップＳ２０２で、最小値および最大値が所定範囲を超えている場合は、検出部１０４で検出されている人体および紐づく顔に対して優先度が設定されているかどうかを判定する（ステップＳ２０４）。このとき、検出部１０４で検出された顔の輝度および識別部２０３で識別された人種や肌の色の情報の統計データから、前述の輝度範囲を調整してもよい。ステップＳ２０４で、優先度が設定されている場合は、優先度が高い人体および紐づく顔の輝度差分オフセットさせた目標値で露出制御を行ってよい（ステップＳ２０５）。一方、ステップＳ２０４で、優先度が設定されていない場合は、検出部１０４で検出されている人体に対して予め決められた順位付けを行い、順位が高い人体および紐づく顔の輝度差分オフセットさせた目標値で露出制御を行ってもよい（ステップＳ２０６）。ここで、予め決められた順位付けは、検出された顔または人体の検出順序、２次元座標が特定の領域付近、または画像中心からの距離、または大きさが大きいなどを考慮して順位付けを行ってもよい。

上述のステップＳ２０１〜Ｓ２０６の処理を実行することで、検出された人物が複数存在する場合においても適切に顔の輝度を考慮した露出制御を行うことができる。

（その他の実施形態）
本発明における制御の一部または全部を上述した実施形態の機能を実現するプログラム（ソフトウェア）をネットワーク又は各種記憶媒体を介して撮像装置や情報処理装置に供給するようにしてもよい。そしてその撮像装置や情報処理装置におけるコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行するようにしてもよい。その場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することとなる。

また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

１０カメラ
１１撮像部
１２ＣＰＵ
１３メモリ
１４入力部
１５表示部
１６通信部

Claims

画像を取得する取得手段と、
前記画像から被写体を検出する第１の検出手段と、
前記第１の検出手段により検出した前記被写体の輝度に応じて露出を制御する露出制御手段と、
前記露出制御手段により露出制御された画像から前記被写体の一部を検出する第２の検出手段と、
前記第１の検出手段が検出した前記被写体の第１の輝度と、前記第２の検出手段が検出した前記被写体の一部の第２の輝度との差分を記憶する記憶手段と、
を備え、
前記露出制御手段は、前記第２の検出手段により前記被写体の一部を検出した場合には、前記被写体の一部の輝度に応じて露出を制御し、前記第２の検出手段により前記被写体の一部を検出した状態からロストした状態となった場合には、前記第１の検出手段により検出した前記被写体の輝度と前記差分とに基づいてオフセットさせた輝度に応じて露出を制御することを特徴とする情報処理装置。
シーン判定手段をさらに備え、
前記シーン判定手段が逆光シーンと判断した場合に、前記記憶手段に記憶されている前記差分に応じてオフセットさせた輝度に応じて露出を制御することを特徴とする請求項１に記載の情報処理装置。
前記露出制御手段は、前記差分に応じて露出制御の速度を変化させることを特徴とする請求項１又は２に記載の情報処理装置。
前記露出制御手段は、前記差分が大きいほど露出制御の速度を早くすることを特徴とする請求項１から３のいずれか一項に記載の情報処理装置。
前記第１の検出手段または前記第２の検出手段によって複数の対象が検出された場合は、所定の順序、大きさによって優先度を変更することを特徴とする請求項１から４のいずれか一項に記載の情報処理装置。
前記第１の検出手段は人体を検出し、前記第２の検出手段は顔を検出することを特徴とする請求項１から５のいずれか一項に記載の情報処理装置。
前記第２の検出手段により検出した顔から、人種、肌の色、又は各器官の特徴を識別する識別手段をさらに備え、
前記露出制御手段は、前記識別手段により識別した複数の顔の情報から得られる統計データに応じてオフセットさせる輝度の範囲を変更することを特徴とする請求項６に記載の情報処理装置。
請求項１から７のいずれか一項に記載の情報処理装置を備えた撮像装置。
画像の露出を制御するための方法であって、
画像を取得する取得ステップと、
前記画像から被写体を検出する第１の検出ステップと、
前記第１の検出ステップにより検出した前記被写体の輝度に応じて露出を制御する露出制御ステップと、
前記露出制御ステップにより露出制御された画像から前記被写体の一部を検出する第２の検出ステップと、
前記第１の検出すてが検出した前記被写体の第１の輝度と、前記第２の検出手段が検出した前記被写体の一部の第２の輝度との差分を記憶する記憶ステップと、
を備え、
前記露出制御ステップは、前記第２の検出ステップにより前記被写体の一部を検出した場合には、前記被写体の一部の輝度に応じて露出を制御し、前記第２の検出ステップにより前記被写体の一部を検出した状態からロストした状態となった場合には、前記第１の検出ステップにより検出した前記被写体の輝度と前記差分とに基づいてオフセットさせた輝度に応じて露出を制御することを特徴とする方法。
コンピュータに、画像の露出を制御するための方法を実行させるためのプログラムであって、前記方法は、
画像を取得する取得ステップと、
前記画像から被写体を検出する第１の検出ステップと、
前記第１の検出ステップにより検出した前記被写体の輝度に応じて露出を制御する露出制御ステップと、
前記露出制御ステップにより露出制御された画像から前記被写体の一部を検出する第２の検出ステップと、
前記第１の検出すてが検出した前記被写体の第１の輝度と、前記第２の検出手段が検出した前記被写体の一部の第２の輝度との差分を記憶する記憶ステップと、
を備え、
前記露出制御ステップは、前記第２の検出ステップにより前記被写体の一部を検出した場合には、前記被写体の一部の輝度に応じて露出を制御し、前記第２の検出ステップにより前記被写体の一部を検出した状態からロストした状態となった場合には、前記第１の検出ステップにより検出した前記被写体の輝度と前記差分とに基づいてオフセットさせた輝度に応じて露出を制御することを特徴とするプログラム。
請求項１０に記載のプログラムを記憶したコンピュータで読み取り可能な記憶媒体。