[go: up one dir, main page]

JP4732303B2 - 撮像装置 - Google Patents

撮像装置 Download PDF

Info

Publication number
JP4732303B2
JP4732303B2 JP2006299385A JP2006299385A JP4732303B2 JP 4732303 B2 JP4732303 B2 JP 4732303B2 JP 2006299385 A JP2006299385 A JP 2006299385A JP 2006299385 A JP2006299385 A JP 2006299385A JP 4732303 B2 JP4732303 B2 JP 4732303B2
Authority
JP
Japan
Prior art keywords
focus
area
distortion
unit
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006299385A
Other languages
English (en)
Other versions
JP2008118387A (ja
JP2008118387A5 (ja
Inventor
義浩 本間
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2006299385A priority Critical patent/JP4732303B2/ja
Publication of JP2008118387A publication Critical patent/JP2008118387A/ja
Publication of JP2008118387A5 publication Critical patent/JP2008118387A5/ja
Application granted granted Critical
Publication of JP4732303B2 publication Critical patent/JP4732303B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Automatic Focus Adjustment (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Focusing (AREA)

Description

本発明は撮像装置に関し、特に光学系で生じる被写体像の歪みが合焦制御へ与える影響を抑制した撮像装置に関する。
従来、デジタルカメラなどの撮像装置においては、オートフォーカス機構が広く用いられている。オートフォーカス機構における合焦位置の検出方法には様々なものが提案されている。代表的な方法としては、例えば、特許文献1に開示されるように、画像信号に含まれる周波数成分(直流成分を除く)が合焦位置で最大になることを利用し、画像信号に含まれる周波数成分の量を評価値として合焦状態を検出する方法が知られている。
なお、このような合焦位置の検出は、通常、撮像画像の部分領域に対して実行される。そして、特許文献2では、合焦位置を検出する領域を決定する方法として、撮像画像に含まれる人物の眼を検出し、検出された眼を含む領域で合焦位置を検出するようにすることが開示されている。
一方、特許文献3及び特許文献4では、撮像画像を複数の領域に分割し、領域の位置に応じて重み付けをして合焦制御を行う場合に、光学系の特性による像の歪みを考慮した重み付け値を用いることが提案されている。
更に、特許文献5では、光学系による像の歪みが生じている場合に、被写体の状態、フォーカシングおよびフレーミングを的確に把握するために、像の歪みを補正した画像を表示する方法が提案されている。
特開平3−1668号公報 特開2005−128156号公報 特開平5−257893号 特開平6−237413号公報 特開平11−088732号公報 特開平9−251534号公報 M.A.Turk and A.P.Pentland, "Face recognition using eigenfaces", Proc. of IEEE Conf. on Computer Vision and Pattern Recognition, pp.586-591, 1991.
撮像装置において、例えば、ビューファインダーに表示するために逐次撮影している画像から被写体の顔領域を検出し、顔領域に対して合焦制御を行う場合を考える。この場合、撮像装置の光学系での歪みが殆どない場合には、撮像画像に歪み補正することなく表示画像として用いることができる。
従って、撮像画像から検出された顔領域を示す枠の位置と、表示画像中の顔領域との対応は適正である。なお、合焦制御を行う領域をユーザに報知するために表示される枠をフォーカス枠、実際の合焦制御に用いられる、フォーカス枠に対応した撮像画像中の領域を合焦制御領域(画像信号の領域)と呼ぶ。
図6は、光学系の歪みが無視できる程度である場合の表示画像とフォーカス枠との例を示す図である。なお、図面において、図6のように画像中に示されるグリッドは、画像の歪みの程度を視覚的に掴みやすくするために付加されたものであり、実際には表示されない。図6では、グリッドで表される正方形に歪みがなく、光学系の歪みが無視できる程度(つまり、歪み補正の必要がない程度)であることを示している。
このような場合、フォーカス枠111及び112は、表示画像中の顔領域と対応した位置に表示されることはもちろん、表示画像の元となっている撮像画像中の顔領域ともよく対応している。これは、撮像画像から表示画像を生成する際に歪み補正を行っていないことから当然の結果である。
フォーカス枠111及び112と撮像画像の顔領域との対応が適正であるため、合焦制御領域内の合焦制御では、被写体の顔の位置における合焦評価値が最も高くなる。図8(a)が、この状態を表しているものとする。
一方、図7に示すように、光学系の特性により、撮像画像に歪みが生じたとする。図7では、グリッドの変形からたる型歪みが生じていることが分かる。このように一見して判別できるような歪みを有する画像を表示することは好ましくないため、表示画像の生成時に歪み補正が行われる。そして、歪み補正された表示画像に基づいて顔検出処理が行われる。その結果、撮像画像に歪みが生じた場合も、図6と同等の表示がなされ、見かけ上は区別が付かない。しかし、見かけ上フォーカス枠111及び112が示す領域と、合焦制御領域との関係は、撮像画像に歪みがない場合と異なったものとなる。
つまり、歪み補正後の表示画像における顔領域に対応したフォーカス枠111及び112の位置は、歪みを有する撮像画像における顔領域に対応したフォーカス枠113及び114の位置から、歪みに応じた量だけずれることになる。
この結果、フォーカス枠111及び112に対応した撮像画像中の領域を用いて合焦制御の評価値を求めると、顔とは異なる被写体に合焦するように制御してしまう場合がある。例えば、図7に示す例では、撮像画像中の、フォーカス枠111及び112に対応する領域内に、背景の家のように高コントラストの被写体が含まれる。そのため、顔領域ではなく、家に焦点が合うように制御してしまう。図8(b)は、焦点制御領域中に含まれる顔以外の画像の影響によって顔とは異なる距離の評価値が高くなった合焦評価値の例を示す。
このように、従来技術では、表示用の画像から検出した顔領域の情報を、そのまま撮像画像に当てはめて焦点制御領域を決定していた。そのため、撮像画像の歪みが無視できる程度で、表示用画像が歪み補正されない場合には問題ないが、歪みが無視できず、表示用画像が歪み補正される場合には、顔領域でない部分に合焦してしまう虞があった。
また、被写体像の歪みが合焦制御の精度に影響を与えるという点に関しては、顔領域を合焦制御領域とする場合に限定されない。例えば、ユーザが表示画面中で合焦制御領域を指定する場合であっても、表示用画像で指定された領域と、合焦制御に用いられる画像データの領域とにずれが生じることになり、同様の問題が生じる。
本発明はこのような従来技術の問題点を解決するためになされたものであり、撮像画像に歪みが生じた場合であっても、精度良く合焦可能な撮像装置を提供することを目的とする。
上述の目的は、光学系により結像された被写体像を画像信号に変換する撮像手段と、画像信号に反映された光学系による光学歪みを補正し、補正画像データを出力する歪み補正手段と、補正画像データに基づいて光学系の合焦状態を検出するためのフォーカス枠を設定する設定手段と、設定手段により設定されたフォーカス枠に応じて撮像手段により出力された画像信号の領域を指定する指定手段と、指定手段により指定された領域の画像信号に基づいて光学系の合焦状態を検出する焦点検出手段とを有し、指定手段は、フォーカス枠に対応する補正画像データの領域に歪み補正手段による補正と逆の処理を適用して歪み補正前の画像信号におけるフォーカス枠に対応する領域を求め、当領域を指定することを特徴とする本発明の撮像装置によって達成される。
このような構成により、本発明によれば、撮像画像に歪みが生じた場合であっても精度良く合焦可能な撮像装置が実現できる。
<第1の実施形態>
以下、添付図面を参照して本発明の好適な実施形態について説明する。
図1は、本発明の第1の実施形態に係る撮像装置の一例としてのデジタルカメラ100の機能構成例を示すブロック図である。
図1において、光学系2は1枚又は複数枚のレンズで構成され、被写体像を結像する。光学系2は、自動焦点制御に用いるフォーカスレンズも備えている。被写体像の光学歪みは、被写体からの光線が光学系2を通過する過程で、光学系2を構成するレンズの収差によって生じる。光学系2はレンズ情報として画角や絞り等の情報を他の構成要素からの要求に応じて供給可能である。
モータ4は光学系2のフォーカスレンズを移動させる。撮像素子10は例えば数百万画素程度の画素数を有する光電変換素子であり、CCDセンサーやCMOSセンサーなどが一般に用いられる。光学系2が結像した被写体像を撮像素子10により画素単位の電気信号(画像信号)に変換する。なお、撮像素子10には通常カラーフィルターや光学ローパスフィルタ等の周辺部品が設けられるが、本発明とは直接関係ないため説明を省略する。
撮像素子10から読み出されたアナログ画像信号は、A/D変換器12によりデジタル画像データに変換される。
フレームバッファ14は、DRAMやDRAMの読み書きを制御するメモリコントローラなどで構成される。フレームバッファ14は、A/D変換器12からの画像データや、後述する現像処理部16からの現像済み画像データを一時的に蓄えるために用いられる。
現像処理部16は、A/D変換器12からのデジタル画像データやフレームバッファ14で保持されたデジタル画像データに対して現像処理を行う。具体的には、例えばデジタルカメラで一般的に用いられるJPEG形式の画像データファイルを生成する前段階のYUVデータを生成する。処理結果は撮像画像データとしてフレームバッファ14に記憶する。
歪み補正部18は、光学系2を構成するレンズの収差によって被写体像及び撮像画像データに生じる光学歪み、例えば糸巻き型やたる型の歪みを補正し、歪みの無い被写体像を表す画像データ(補正画像データ)を出力する。本実施形態において、歪み補正部18は、フレームバッファ14に記憶された画像データに対し、読み出し方法を調整することにより画像データに反映された光学歪みを補正する。
顔検出部20は、歪み補正部18が出力する補正画像データに対して顔検出処理を行い、被写体中に含まれる人間の顔の領域(顔領域)を検出する。顔検出部20における顔検出結果は、顔領域情報(例えば顔領域の位置情報)として表示制御部22及び逆歪み補正部26へ供給される。表示制御部22は、顔検出部20からの顔領域情報に基づき、補正画像データにおける顔領域を示すフォーカス枠を決定し、フォーカス枠の表示データを生成する。フォーカス枠は、例えば顔領域に外接する方形状の枠である。そして、表示制御部22は、表示部23に対し、フレームバッファ14からの画像データもしくは歪み補正部18からの補正画像データと、フォーカス枠との合成画像データを表示させる。なお、本実施形態においては説明及び理解を容易にするため、常に補正画像データを表示するものとする。
なお、顔検出部20が検出する顔領域は必ずしも顔全体を含む必要はなく、顔の一部領域であっても良い。なお、一部領域である場合には、少なくとも眼の領域を含むことが好ましい。
表示部23は、例えばLCDであり、デジタルカメラ100の各種設定を行うためのユーザインタフェースを表示したり、撮影した画像を再生表示したり、電子ビューファインダーとして機能したりする。なお、表示部23はテレビジョン受像機やディスプレイモニタの様な外部装置であっても良い。
逆歪み補正部26は、顔検出部20からの顔検出領域に基づき、補正画像データにおける顔領域に対応する、歪み補正前の撮像画像データ中の顔領域を求める。求めた顔領域の情報は、測距領域指定部28へ出力する。具体的には逆歪み補正部26は、顔検出部20が検出した顔領域に対し、歪み補正部18と逆の処理を適用することで、歪み補正前の撮像画像データ中の対応領域を求める。
測距領域指定部28は、逆歪み補正部26からの顔領域情報に基づき、撮像画像データ中の、合焦制御に用いる合焦制御領域を決定する。具体的には、測距領域指定部28は、現像処理部16が出力するYUV形式の画像データに対し、逆歪み補正部26からの顔領域情報が示す顔領域に対応する領域(例えば顔領域に外接する方形状領域)を合焦制御領域として指定する。そして、測距領域指定部28は、指定した合焦制御領域に関する情報(例えば、合焦制御領域の位置と大きさを表す情報)をフォーカス用評価値取得部30へ出力する。
フォーカス用評価値取得部30は、測距領域指定部28から供給される合焦制御領域に関する情報に基づいて、現像処理部16から合焦制御領域に対応する輝度(Y)成分データを取得し、この輝度成分データから光学系の合焦状態を示すフォーカス用評価値を算出する。フォーカス用評価値は、合焦制御部32へ供給される。フォーカス用評価値取得部30と合焦制御部32をあわせて焦点検出部と称する。
合焦制御部32は、フォーカス用評価値取得部30からの評価値を受けて、フォーカスモータ駆動部34を制御し、評価値が最大となる位置を探索する。フォーカスモータ駆動部34は、合焦制御部32からの指示によってモータ4を制御し、光学系2に含まれるフォーカスレンズをを移動させる。
次に、本実施形態における歪み補正部18の動作についてさらに説明する。
光学レンズには収差があるため、光学レンズを介して結像される被写体像には光学歪みが発生する。撮像素子は光学系2が結像する被写体像をそのまま画像信号に変換するため、画像信号も被写体像が有する光学歪みの影響を受ける。代表的な光学歪みには、図2(a)に示すような「糸まき型歪み」や図2(b)に示すような「たる型歪み」がある。図2は、点線で示した範囲の被写体の像が、光学歪みにより実線の形状で結像されていることを示す。
被写体像の光学歪みは、例えば、被写体像をデジタルデータ化し、歪みに応じて画素データを再配置することで補正することが可能である。
例えば、図3のように、たる型歪みが生じた画像を補正する場合を考える。図3においては、A〜D点が歪みによりa〜d点に結像した状態を示している。この場合、実線で示される歪んだ被写体像は、A/D変換器12によりデジタル画像データに変換され、フレームバッファ14に一時記憶される。
歪み補正部18は、補正後の画像を生成する際、A点の画素としてa点の画素を、B点の画素としてb点の画素を、C点の画素としてc点の画素を、D点の画素としてd点の画素をそれぞれ読み出すことにより、歪みを補正した画像を生成することができる。なお、歪みによりA−B間の画素数と実際のa−b間の画素数とが異なる場合、補間や間引きなどにより画素数を合わせることができる。光学歪みを補正する方法については、従来からさまざまな提案がされており、また本発明においてはどのような補正方法も理論上使用可能であるため、これ以上の説明は行わない。
次に、顔検出部20の動作について説明する。
本実施形態において、人物の顔領域の検出には、公知の顔検出技術を利用できる。
具体的には、非特許文献1に記載されるような、主成分分析による固有顔(eigenface)を用いた方法や、特許文献6に記載されるような、目、鼻、口等の特徴点を利用した方法を利用可能である。これらの方法は、入力画像と複数の標準パターンとのパターンマッチング結果に基づき、入力画像中に人物の顔が含まれているかどうかを判定するものである。
本実施形態では、顔検出部20に予め人物の顔の標準パターンを保持させておく。そして、顔検出部20は、フレームバッファ14のDRAMに保存されている撮像画像データ又は、歪み補正部18が出力する補正画像データと、標準パターンとの間でパターンマッチングを行い、人物の顔が含まれるか否かを判定する。人物の顔と判定される領域(顔領域)が検出された場合、顔検出部20は個々の顔領域についての情報を表示制御部22及び測距領域指定部28へ出力する。この、顔領域についての情報は、表示制御部22及び測距領域指定部28が顔領域を特定可能な任意の情報であってよいが、例えば顔領域に外接する最小の方形を規定する座標値などであってよい。
次に、逆歪み補正部26の動作について説明する。
逆歪み補正部26は、歪み補正部18で行う光学系2の歪み補正と逆の処理を行う。例えば、図3における点線が歪み補正後の画像とすると、実線で示される歪み補正前の画像への変換(逆変換)を行う処理に相当する。従って、A〜D点はそれぞれa〜d点に変換される。
ただし、歪み補正部18が原則として撮像画像データ全体に対して補正処理を行うのに対し、逆歪み補正部26は、補正画像データのうち顔検出部20からの顔領域情報に対応する領域のみに対して補正処理を行えばよい点で異なる。また、逆補正後の領域を囲む画素の座標が求まれば領域を特定することができるので、領域内の全画素に対する処理を行う必要もない。従って、処理負荷は小さく、複数の顔領域があっても短時間で補正処理を行うことができる。
逆歪み補正部26は、歪み補正部18がどのような補正を行ったかの情報を記憶しておき、その情報を用いて逆変換を行ってもよいし、光学系2の歪み特性を予め記憶しておき、撮影条件に対応する歪み特性を用いてもよい。歪み補正部18と同様、逆歪み補正部26も公知の手法を適用することにより実現できるため詳細な説明は省略する。
このようにして逆歪み補正部26は、補正前の撮像画像データにおける、顔検出部20からの顔領域情報が示す領域に対応する領域を合焦制御用の顔領域として求め、その位置や大きさを特定可能な顔領域情報を測距領域指定部28へ出力する。
次に、本実施形態のデジタルカメラ100におけるオートフォーカス動作について説明する。
一般に、被写体に人物が含まれる場合、その人物に合焦した撮影が望まれることが多いが、特に人物が撮影範囲の中央にいない場合など、背景に合焦してしまうことがある。そのため、顔検出技術を用い、被写体中の人物の顔に合焦するような合焦制御を行うことで、ユーザの意図に沿った撮影結果を提供できる可能性が高くなると考えられる。
しかし、従来技術の課題として説明したように、従来は表示用画像に対して顔検出を行った結果をそのまま用いて合焦制御領域を指定していた。そのため、表示用画像が歪み補正されている場合には、表示用画像で検出される顔領域と、合焦制御に用いる撮像画像中の顔領域とにずれが生じ、期待される合焦制御結果が得られない場合があった。
このずれを解消するには、合焦制御にも歪み補正後の画像データを使用することが考えられるが、以下の点から望ましくない。1つは、歪み補正を行うと、合焦制御の評価値を求める上で重要な高周波数成分が失われ、合焦精度が低下することである。
そのため、本実施形態では、歪み補正後の画像データに対して行う顔検出処理の結果に対して歪み補正処理と逆の処理を行うことで、歪み補正前の画像データにおける顔領域を求める。そして、この顔領域に基づいて決定した合焦制御領域で合焦制御を行うことで、顔検出処理の負荷を増加させることなく、精度の良い合焦制御を実現する。
図4は、デジタルカメラ100の各部の動作タイミングを説明するためのタイミングチャートである。
図4(a)は、A/D変換器12が出力するデジタル画像データであり、表示部23を電子ビューファインダーとして機能させるため、30fps(約33mSec間隔)のフレームレートを有する。図4(b)は、A/D変換器12の出力するデジタル画像データを現像処理部16で現像した結果(撮像画像データ)が出力されるタイミングを示す。撮像画像データは、現像処理に要する時間だけデジタル画像データよりも遅れて出力されている。上述のように、撮像画像データはフレームバッファ14へ一時記憶される。
図4(c)は、撮像画像データをフレームバッファ14に蓄えてから、歪み補正部18による歪み補正処理が行われるタイミングを示す。図4(c)に示すように、撮像画像データは、フレームバッファ14にある程度(ここでは画像の約半分程度)蓄積された時点から歪み補正部18が読み出しを開始し、歪み補正データを生成する。
図4(d)は、歪み補正部18の出力、すなわち顔検出部20の入力タイミングを示す。歪み補正処理自体は処理負荷が大きく、補正完了までの時間はかかるが、入力から出力開始までの時間差はほとんど無い。
図4(e)は、顔検出部20の出力タイミングを、図4(f)は、逆歪み補正部26の出力タイミングをそれぞれ示す。
図4に示すように、1フレーム目の画像データに対する逆歪み補正部26の出力が完了するのは、3フレーム目の画像データが出力され始める程度のタイミングである。フォーカス用評価値取得部30では、測距領域指定部28から供給される合焦制御領域の元となった逆歪み補正部26の出力タイミングにあった画像データを用いて評価値取得を行う。従って、図4の例では、フレームバッファ14は少なくも3フレーム分の画像データを一時記憶する容量を有する必要がある。
このように、合焦制御用の評価値を取得開始する前に数フレームの遅延が生じるが、各フレームの画像に対して合焦制御領域を指定することが可能であり、動きの大きい被写体であっても十分追従して合焦制御することが可能である。
以上説明したように、本実施形態によれば、顔領域に対して合焦制御を行うことの可能な撮像装置において、合焦制御に用いる顔領域を、歪み補正後の画像データから検出した顔領域に逆歪み補正して求める。これにより、被写体像に光学歪みがある場合であっても、正しく顔領域に対して合焦制御を行うことができ、精度良い合焦制御が実現される。
歪み補正後の画像データに対する顔検出処理は、フォーカス枠を表示するために行われる処理であるため、顔検出処理の負荷は増加しない。また、逆歪み補正は顔領域のみに対して行えばよいため、処理負荷は小さく、高速な処理が可能であり、顔領域の動きが大きくても十分な追従性をもって合焦制御を行うことができる。
<第2の実施形態>
図5は、本発明の第2の実施形態に係る撮像装置の一例としてのデジタルカメラ110の機能構成例を示すブロック図である。
図5において、図1と同じ構成には同じ参照数字を付してその説明を省略する。本実施形態のデジタルカメラ110は、図1の顔検出部20の変わりに合焦領域指定部21が、また新たに操作部35が設けられている。
第1の実施形態におけるデジタルカメラ100は、フォーカス枠を顔領域に基づいてカメラ側が自動で設定するものであった。これに対し、本実施形態のデジタルカメラ110は、フォーカス枠をユーザが指定可能である点で異なる。
上述のように、光学歪みにより、表示されるフォーカス枠が示す領域と合焦制御に用いられる画像データ中の領域とのずれが生じる問題は、顔領域に基づいてフォーカス枠を決定する場合に限らず存在する。そして、本発明は、ユーザがフォーカス枠を指定するデジタルカメラに対しても適用可能である。
本実施形態のデジタルカメラ110において、操作部35はユーザがデジタルカメラ110に指示を入力するために設けられ、スイッチ、ボタン、ダイヤル、タッチパネル、ジョイスティック等の入力デバイスを備える。図9は、本実施形態のデジタルカメラ110におけるフォーカス枠の設定動作を説明する図である。
方向キー72及び設定ボタン73は、操作部35に含まれる。ユーザは、表示画面中のフォーカス枠71を方向キー72を操作することで所望の位置に移動させ、設定ボタン73を押下することで、フォーカス枠71の位置を指定可能である。なお、ここではフォーカス枠71の大きさが固定である場合を例として説明したが、フォーカス枠71の大きさについてもある程度の範囲内で設定可能としてもよい。
操作部35の操作は合焦領域指定部21へ入力され、設定ボタン73が押下された時点におけるフォーカス枠の位置及び大きさのうち、少なくとも位置に関する情報が逆歪み補正部26へ入力される。
逆歪み補正部26は、第1の実施形態と同様にして、歪み補正前の撮像画像データにおける、フォーカス枠71の対応領域を求め、対応領域の情報を測距領域指定部28へ与える。その後も、第1の実施形態と同様に処理が行われ、合焦制御領域に対して合焦制御が行われる。
このように、本実施形態によれば、光学歪みの有無にかかわらず、操作部を通じてユーザが補正画像データに対して指定したフォーカス枠に従って、精度良い合焦制御を行うことが可能である。
<他の実施形態>
なお、光学歪みの大きい場所で顔領域が検出された場合(第1の実施形態)や、フォーカス枠が指定された場合(第2の実施形態)、最終的に逆歪み補正部26で逆補正して求まる撮像画像データにおける対応領域は大きく歪むことになる。そして、歪みの大きな領域での合焦制御の精度は、歪みの少ない領域での合焦制御の精度よりも低くなる。そのため、例えば複数の顔領域が検出されたり、複数のフォーカス枠が指定されたりして複数の合焦制御領域に対して合焦制御を行う場合、歪みの大きな合焦制御領域は優先度を低下させたり、場合によっては使用しないようにすることも可能である。逆にいうと、歪みが小さい合焦制御領域ほど優先度を上げて使用するようにする。
光学歪みは画角が大きいほど(広角であるほど)大きく、また、像の周辺に近いほど大きくなることが知られている。従って、例えば光学系2の画角が所定の画角以上であり、かつ顔領域の検出位置(或いは指定されたフォーカス枠の位置)が予め定めた範囲よりも周縁であれば、その顔領域は歪みが大きいと判断することができる。
具体的には、例えば逆歪み補正部26が光学系2の画角をレンズ情報として取得する。そして、判定手段としての逆歪み補正部26は、画角の大きさと、顔検出部20からの顔領域情報(第1の実施形態)や合焦領域指定部21からのフォーカス枠の位置情報(第2の実施形態)により、これら領域が光学歪みの大きな領域にあるか否かを判定する。そして、歪みが大きい領域にあると判定される場合には、逆補正処理自体を行わないことも可能である。あるいは、得られた領域情報に対し、歪みが大きいことを示すフラグ等を付与して測距領域指定部28へ出力する。測距領域指定部28は、歪みが大きい領域に対しては合焦制御領域として指定しなかったり、歪みが小さい領域よりも低い優先度又は重み付けを付与する。フォーカス用評価値取得部30は、合焦制御領域の各々について評価値を求め、重み付けをして合焦制御部32へ出力する。
歪みの少ない合焦制御領域に重み付けして合焦制御を行うことで、合焦精度を向上させることができる。また、歪みの大きな合焦制御領域を用いない場合には、合焦制御の処理負荷を軽減することもできる。
本発明の第1の実施形態に係る撮像装置の一例としてのデジタルカメラ100の機能構成例を示すブロック図である。 光学歪みの代表例である糸巻き型歪みとたる型歪みを示す図である。 たる型歪みの補正方法の一例を説明する図である。 本発明の第1の実施形態のデジタルカメラ100の各部の動作タイミングを説明するためのタイミングチャートである。 本発明の第2の実施形態に係る撮像装置の一例としてのデジタルカメラ110の機能構成例を示すブロック図である。 光学系の歪みが無視できる程度である場合の表示画像とフォーカス枠との例を示す図である。 光学系の歪みが無視できない程度である場合の撮像画像中の顔領域と、表示用画像の顔領域とのずれを説明する図である。 図6及び図7の状態における合焦評価値の違いを説明する図である。 本発明の第2の実施形態のデジタルカメラ110におけるフォーカス枠の設定動作を説明する図である。

Claims (4)

  1. 光学系により結像された被写体像を画像信号に変換する撮像手段と、
    前記画像信号に反映された前記光学系による光学歪みを補正し、補正画像データを出力する歪み補正手段と、
    前記補正画像データに基づいて前記光学系の合焦状態を検出するためのフォーカス枠を設定する設定手段と、
    前記設定手段により設定されたフォーカス枠に応じて前記撮像手段により出力された画像信号の領域を指定する指定手段と、
    前記指定手段により指定された領域の画像信号に基づいて前記光学系の合焦状態を検出する焦点検出手段とを有し、
    前記指定手段は、前記フォーカス枠に対応する前記補正画像データの領域に前記歪み補正手段による補正と逆の処理を適用して歪み補正前の前記画像信号における前記フォーカス枠に対応する領域を求め、当該領域を指定することを特徴とする撮像装置。
  2. 前記補正画像データに対して顔検出処理を行い、検出された顔領域を表す顔領域情報を出力する顔検出手段をさらに有し、
    前記設定手段は、前記顔領域情報に基づいて前記フォーカス枠を設定することを特徴とする請求項1記載の撮像装置。
  3. ユーザが前記撮像装置に指示を入力するための操作手段をさらに有し、
    前記設定手段は、前記操作手段に入力された指示に基づいて前記フォーカス枠を設定することを特徴とする請求項1または2記載の撮像装置。
  4. 前記焦点検出手段は、前記フォーカス枠が複数設定された場合、当該複数のフォーカス枠のうち前記光学系による光学歪みが小さい位置に設定されたフォーカス枠に対応する領域の画像信号を優先して用いて前記光学系の合焦状態を検出することを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。
JP2006299385A 2006-11-02 2006-11-02 撮像装置 Expired - Fee Related JP4732303B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006299385A JP4732303B2 (ja) 2006-11-02 2006-11-02 撮像装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006299385A JP4732303B2 (ja) 2006-11-02 2006-11-02 撮像装置

Publications (3)

Publication Number Publication Date
JP2008118387A JP2008118387A (ja) 2008-05-22
JP2008118387A5 JP2008118387A5 (ja) 2009-12-17
JP4732303B2 true JP4732303B2 (ja) 2011-07-27

Family

ID=39503962

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006299385A Expired - Fee Related JP4732303B2 (ja) 2006-11-02 2006-11-02 撮像装置

Country Status (1)

Country Link
JP (1) JP4732303B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11568521B2 (en) 2019-05-31 2023-01-31 Canon Kabushiki Kaisha Apparatus, method thereof, and recording medium

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101599885B1 (ko) * 2009-09-29 2016-03-04 삼성전자주식회사 디지털 촬영 장치 및 촬영 방법
JP5938842B2 (ja) * 2010-01-26 2016-06-22 カシオ計算機株式会社 撮像装置及びaf評価値算出方法、並びにプログラム
JP5872171B2 (ja) * 2011-02-17 2016-03-01 クラリオン株式会社 カメラシステム
JP6196772B2 (ja) * 2012-12-21 2017-09-13 キヤノン株式会社 焦点検出装置、焦点検出方法およびプログラム、並びに撮像装置
JP6016622B2 (ja) * 2012-12-26 2016-10-26 キヤノン株式会社 撮像装置及びその制御方法、並びにプログラム
JP6547742B2 (ja) * 2014-05-26 2019-07-24 ソニー株式会社 撮像制御装置、撮像装置および撮像制御方法
JP2016134686A (ja) * 2015-01-16 2016-07-25 オリンパス株式会社 撮像装置及び撮像方法
CN105812653B (zh) * 2015-01-16 2019-05-10 奥林巴斯株式会社 摄像装置和摄像方法
JP2017009815A (ja) * 2015-06-23 2017-01-12 オリンパス株式会社 焦点検出装置、焦点検出方法、およびカメラシステム
JP6971589B2 (ja) * 2017-02-28 2021-11-24 キヤノン株式会社 撮像装置、撮像システム、その制御方法およびプログラム
KR102263540B1 (ko) * 2019-09-27 2021-06-14 (주)베이다스 왜곡 영상 내에 gt 영역 설정 방법 및 장치

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3260929B2 (ja) * 1993-10-15 2002-02-25 オリンパス光学工業株式会社 映像処理装置
JP3683392B2 (ja) * 1997-09-08 2005-08-17 株式会社リコー 固体撮像カメラ
JP4553346B2 (ja) * 2003-10-22 2010-09-29 キヤノン株式会社 焦点調節装置及び焦点調節方法
JP4185468B2 (ja) * 2004-03-29 2008-11-26 富士フイルム株式会社 露光装置及び撮影画像の補正方法
JP2006094202A (ja) * 2004-09-24 2006-04-06 Casio Comput Co Ltd 撮像装置、合焦処理方法及びプログラム
JP4639837B2 (ja) * 2005-02-15 2011-02-23 株式会社ニコン 電子カメラ

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11568521B2 (en) 2019-05-31 2023-01-31 Canon Kabushiki Kaisha Apparatus, method thereof, and recording medium

Also Published As

Publication number Publication date
JP2008118387A (ja) 2008-05-22

Similar Documents

Publication Publication Date Title
JP4732303B2 (ja) 撮像装置
JP4154400B2 (ja) 撮像装置及びその制御方法及びプログラム
JP4645685B2 (ja) カメラ、カメラ制御プログラム及び撮影方法
JP4999268B2 (ja) 電子カメラ及びプログラム
US8077216B2 (en) Image pickup apparatus with a human face detecting function, method and program product for detecting a human face
JP4784678B2 (ja) 撮像装置、撮像方法及びプログラム
JP5623915B2 (ja) 撮像装置
US8350918B2 (en) Image capturing apparatus and control method therefor
JP2008109336A (ja) 画像処理装置および撮像装置
JP2005348181A (ja) 撮影装置及びその制御方法並びに制御用プログラム
JP6652039B2 (ja) 撮像装置、撮像方法及びプログラム
CN101076997B (zh) 照相机和用于照相机的图像处理方法
JP2014090420A (ja) 撮像装置、撮像方法及びプログラム
JP4953770B2 (ja) 撮像装置
KR20120002834A (ko) 참조 영상을 제공하는 촬상장치 및 그의 참조 영상 제공방법
JP2007251927A (ja) 赤目補正機能を有するカメラ
JP2009089220A (ja) 撮像装置
JP4632417B2 (ja) 撮像装置、及びその制御方法
JP5170217B2 (ja) カメラ、カメラ制御プログラム及び撮影方法
JP5332668B2 (ja) 撮像装置および被写体検出プログラム
JP5417920B2 (ja) 画像処理装置、画像処理方法、電子カメラおよび画像処理プログラム
EP2091233B1 (en) Imaging apparatus
JP4687619B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP6862225B2 (ja) 撮像装置、撮像装置の制御方法、及びプログラム
JP7271316B2 (ja) 撮像装置及びその制御方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091028

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091028

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110407

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110415

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110420

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140428

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees