JP2009027298A - 撮像装置および撮像装置の制御方法 - Google Patents

Abstract

【課題】 ＣＣＤＡＦ方式を用いたコンパクトデジタルカメラにおいても、ぼかし処理を可能にする。
【解決手段】 システム制御部０２は、画面中央部分のＡＦ評価値エリアのうち、最も近距離にあるエリアをＡＦエリアとして判定し（ｓｔｅｐ０１−００４）、さらにＡＦエリアと等距離にあるブロックを主要被写体ブロックとして判定し（ｓｔｅｐ０１−００５）、次いで、主要被写体ブロック１０３に相当する位置の画像データの平均輝度を算出して記憶する（ｓｔｅｐ０１−００６）。次に、システム制御部０２は、得られた主要被写体ブロック１０３の情報と、撮像した画像を基に主要被写体領域を判定し（ｓｔｅｐ０１−００７）、さらに、主要被写体領域１０４の情報を基に、主要被写体画像の抽出処理、背景画像のぼかし処理、合成処理を順次行う（ｓｔｅｐ０１−００８〜０１０）。
【選択図】図３

Description

本発明は、ぼかし処理機能を備えたデジタルスチールカメラ等の撮像装置および撮像装置の制御方法に関する。

コンパクトデジタルカメラで用いられる撮像素子は、一眼レフカメラで用いられる撮像素子や銀塩フィルムよりも小さく、そのため同じ画角の画像を撮影するために必要な撮影光学系の焦点距離は短い。焦点距離が短いと、撮影光学系のＦ数を同じにしても、被写界深度が深くなる。焦点距離が短くなることに比例させてＦ数を小さくすることができれば被写界深度を浅くすることができるが、撮影光学系を大口径化する必要があり、サイズおよびコストが増大する。このため、コンパクトデジタルカメラで撮影すると、相対的に広い距離範囲に対して焦点が合うことになる。これは、同じ明るさの画像を撮影したときにぼけの少ない画像が得られるという点では長所ともなるが、ポートレートのように背景のぼけ具合が重要な画像を撮影するときは、背景までも鮮明になってしまって逆に短所になる。上記の不都合を解決すべく、画像処理により背景をぼかすカメラが特許文献１〜４として提案されている。

特開２０００−２０７５４９号公報 特開２０００−２５９８２３号公報 特開２００５−１７５９５６号公報 特開平９−３１８８７０号公報

ところで、適切にぼかしを行う領域を判定したり、適切なぼかし量でぼかすためには、画像内の領域毎の距離情報が必要であるが、上記のような従来の提案では、肝心の距離情報の取得方法が不明確であったり、２系統の撮像素子を含む光学系を用いているため、サイズおよびコストが増大するという不具合がある。加えて従来の提案では、利用者が撮影前にぼかし量を適切に、つまり利用者の意図に合うように調節するための考慮がなされておらず、ぼけ味を加えるといった微妙な画像調整に耐えうるものではなかった。
本発明は、以上のような状況を鑑みてなされたもので、特別なハードウェアを用いることなく、通常コンパクトデジタルカメラで用いられているＣＣＤＡＦ方式を用いながらも、適切なぼかし処理を行うことのできるカメラとしての撮像装置および撮像装置の制御方法を提案することを目的としている。

上記課題を解決するために、請求項１の撮像装置は、被写体を撮像するための撮像素子と、撮像素子に被写体像を結像させる撮像レンズと、焦点調節を行なうためにレンズを移動させる移動手段と、画像内の所定領域毎の合焦度を判定する手段とを具備する撮像装置において、前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定するレンズ位置判定手段と、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定する距離判定手段と、フォーカスを合わせる被写体の画像領域を判定する画像領域判定手段と、該領域以外の画像に距離に基づいた画像処理を行う画像処理手段とを具備することを特徴とする。

請求項２の撮像装置は、請求項１に記載の撮像装置において、前記画像処理手段は画像のぼかし処理をするぼかし処理手段であることを特徴とする。

請求項３の撮像装置は、請求項１または２に記載の撮像装置において、連続的に得られる画像を表示する表示手段と、得られた画像の画像変化に基づいて前記距離判定手段により距離情報を取得し、連続的に得られる各々の画像に対して前記画像処理手段により画像処理を行う手段とを具備することを特徴とする。

請求項４の撮像装置は、請求項３に記載の撮像装置において、前記画像変化は被写体の位置する画像領域の明るさ情報の変化に基づくことを特徴とする。

請求項５の撮像装置は、請求項３に記載の撮像装置において、前記画像変化は被写体の位置する画像領域の色情報の変化に基づくことを特徴とする。

請求項６の撮像装置は、請求項３に記載の撮像装置において、前記画像変化は被写体の位置する画像領域の画像パターンの変化に基づくことを特徴とする。

請求項７の撮像装置の制御方法は、撮像素子により被写体を撮像し、撮像レンズにより撮像素子に被写体像を結像し、レンズの移動により焦点調節を行なって、画像内の所定領域毎の合焦度を判定する撮像装置の制御方法において、前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定し、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定し、フォーカスを合わせる被写体の画像領域を判定し、該領域以外の画像に距離に基づいた画像処理を行うことを特徴とする。

請求項８の撮像装置の制御方法は、請求項７に記載の撮像装置の制御方法において、前記画像処理は画像のぼかし処理であることを特徴とする。

請求項９の撮像装置の制御方法は、請求項７または８に記載の撮像装置の制御方法において、連続的に得られる画像を表示し、所定の画像変化に基づき、前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする。

請求項１０の撮像装置の制御方法は、請求項９に記載の撮像装置の制御方法において、前記画像変化は被写体の位置する画像領域の明るさ情報の変化に基づくことを特徴とする。

請求項１１の撮像装置の制御方法は、請求項９に記載の撮像装置の制御方法において、前記画像変化は被写体の位置する画像領域の色情報の変化に基づくことを特徴とする。

請求項１２の撮像装置の制御方法は、請求項９に記載の撮像装置の制御方法において、前記画像変化は被写体の位置する画像領域の画像パターンの変化に基づくことを特徴とする。

請求項１３の撮像装置は、被写体を撮像するための撮像素子と、撮像素子に被写体像を結像させる撮像レンズと、焦点調節を行なうためにレンズを移動させる移動手段と、画像内の所定領域毎の合焦度を判定する手段とを具備する撮像装置において、前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定するレンズ位置判定手段と、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定する距離判定手段と、主要被写体の位置する画像領域を判定する画像領域判定手段と、該領域以外の画像に距離に基づいた画像処理を行う画像処理手段とを具備することを特徴とする。

請求項１４の撮像装置は、請求項１３に記載の撮像装置において、前記画像処理手段は画像のぼかし処理手段であることを特徴とする。

請求項１５の撮像装置は、請求項１３または１４に記載の撮像装置において、連続的に得られる画像を表示する表示手段と、所定の操作に基づいて前記距離情報の取得の動作を行い、連続的に得られる各々の画像に対して前記画像処理手段により画像処理を行う手段とを具備することを特徴とする。

請求項１６の撮像装置は、請求項１５に記載の撮像装置において、前記所定の操作はぼかし量の変更の操作であることを特徴とする。

請求項１７の撮像装置は、請求項１３または１４に記載の撮像装置において、主要被写体の位置する領域の判定は顔検出によることを特徴とする。

請求項１８の撮像装置は、請求項１７に記載の撮像装置において、連続的に得られる画像を表示する表示手段と、顔検出結果の変化に基づいて前記距離情報の取得の動作を行い、連続的に得られる各々の画像に対して前記画像処理を行う手段とを具備することを特徴とする。

請求項１９の撮像装置は、請求項１３乃至１８のいずれかに記載の撮像装置において、主要被写体の位置する領域の判定に距離情報を用いることを特徴とする。

請求項２０の撮像装置の制御方法は、撮像素子により被写体を撮像し、撮像レンズにより撮像素子に被写体像を結像し、レンズの移動により焦点調節を行なって、画像内の所定領域毎の合焦度を判定する撮像装置の制御方法において、前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定し、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定し、主要被写体の位置する画像領域を判定し、該領域以外の画像に距離に基づいた画像処理を行うことを特徴とする。

請求項２１の撮像装置の制御方法は、請求項２０に記載の撮像装置の制御方法において、前記画像処理は画像のぼかし処理であることを特徴とする。

請求項２２の撮像装置の制御方法は、請求項２０または２１に記載の撮像装置の制御方法において、連続的に得られる画像を表示し、所定の操作に基づいて前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする。

請求項２３の撮像装置の制御方法は、請求項２２に記載の撮像装置の制御方法において、前記所定の操作はぼかし量の変更の操作であることを特徴とする。

請求項２４の撮像装置の制御方法は、請求項２０または２１に記載の撮像装置の制御方法において、主要被写体の位置する領域の判定は顔検出によることを特徴とする。

請求項２５の撮像装置の制御方法は、請求項２４に記載の撮像装置の制御方法において、連続的に得られる画像を表示し、顔検出結果の変化に基づいて前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする。

請求項２６の撮像装置の制御方法は、請求項２０乃至２５のいずれかに記載の撮像装置の制御方法において、主要被写体の位置する領域の判定に、距離情報を用いることを特徴とする。

以上述べたように本発明によれば、次のような効果がある。
（１）請求項１の撮像装置および請求項７の撮像装置の制御方法の発明では、ＣＣＤＡＦにより距離を判定するように構成されているので、特別なハードウェアや処理を用いること無く、距離に基づいた画像処理を行うことができる。
（２）請求項２の撮像装置および請求項８の撮像装置の制御方法の発明では、ＣＣＤＡＦにより距離を判定するように構成されているので、特別なハードウェアや処理を用いること無く、画像のぼかし処理を行うことができる。
（３）請求項３〜６の撮像装置および請求項９〜１２の撮像装置の制御方法の発明では、画像変化に基づいて再測距を行うように構成されているので、利用者の利便性を損なうことなく、距離に基づいた画像処理を行うことができ、また、画像のぼかし処理を行うことができる。

（４）請求項１３の撮像装置および請求項２０の撮像装置の制御方法では、ＣＣＤＡＦにより距離を判定するように構成されているので、特別なハードウェアや処理を用いること無く、距離に基づいた画像処理を行うことができる。
（５）請求項１４の撮像装置および請求項２１の撮像装置の制御方法では、ＣＣＤＡＦにより距離を判定するように構成されているので、特別なハードウェアや処理を用いること無く、画像のぼかし処理を行うことができる。
（６）請求項１５の撮像装置および請求項２２の撮像装置の制御方法では、利用者の操作に基づいて再測距を行うように構成されているので、利用者の利便性を損なうことなく、請求項１３、１４、２０、２１の効果を得ることができる。

（７）請求項１６の撮像装置および請求項２３の撮像装置の制御方法では、利用者のぼかし量変更の操作に基づいて再測距を行うように構成されているので、利用者の利便性を損なうことなく、請求項１３、１４、２０、２１の効果を得ることができる。
（８）請求項１７の撮像装置および請求項２４の撮像装置の制御方法では、顔検出により主要被写体の位置する領域を判定するように構成されているので、多くの撮影シーンで確実に主要被写体を判別することができ、適切な画像処理を行うことができる。
（９）請求項１８の撮像装置および請求項２５の撮像装置の制御方法では、顔検出結果の変化に基づいて再測距を行うように構成されているので、利用者の利便性を損なうことなく、請求項１３、１４、１７、２０、２１、２４の効果を得ることができる。
（１０）請求項１９の撮像装置および請求項２６の撮像装置の制御方法では、主要被写体の位置する領域の判定に、距離情報を用いるように構成されているので、より精度良く領域を判定することができ、高品質な画像処理を行うことができる。

〔請求項１〜１２の発明の実施形態〕
以下、図に基づいて本発明の実施形態を説明する。図１に装置および接続機器の構成を示す。図１において、０１はデジタルスチルカメラ装置である。０２は、デジタルスチルカメラ装置０１全体の制御を行うために設けられたＣＰＵ、ＮＡＮＤフラッシュメモリ、ＳＤＲＡＭ、タイマー等からなるシステム制御部である。０３は、撮像のために設けられた光学系部品（レンズ及びレンズ駆動モータ）、ＣＣＤ、ＣＣＤ駆動回路、Ａ／Ｄ変換器等からなる撮像部である。

０４は、撮像部で得られた画像信号に種々の画像処理を施すと共に、撮像部０３のＣＣＤ駆動タイミング、レンズ駆動モータを制御してズーミング、フォーカシング、露出調整等を行い、また、画像の圧縮伸長を行うために設けられた画像処理用ＤＳＰ（デジタルシグナルプロセッサ）、ＲＡＭ等からなる画像処理部である。０５は、画像処理部で処理された画像信号をＬＣＤへ表示するための信号処理を行い、また、ユーザーインターフェイスのための種々のグラフィック画像を生成しＬＣＤへ表示するために設けられたＤ／Ａ変換器、オンスクリーンディスプレイコントローラ等からなる表示制御部である。

０６は、画像を表示し、また、ユーザーインターフェイスのためのグラフィックを表示するために設けられたＬＣＤである。０７は、記録メディアとのインターフェイスのために設けられたメモリカードコントローラ等からなる記録メディアインターフェイス部である。０８は、圧縮された画像信号や画像に纏わる種々の情報を記憶するために設けられたフラッシュメモリ等からなる、デジタルスチルカメラ装置０１から着脱可能な記録メディアである。

０９は、図示されていないキー、ダイアル等のユーザーインターフェイスの状態検出を行い、またメインＣＰＵへの主電源制御を行うために設けられた、サブＣＰＵ等からなるハードキーインターフェイス部である。１０は、ＵＳＢを接続してデータ通信を行うために設けられた通信コントローラからなる通信インターフェイス部である。１１は、デジタルスチルカメラ装置０１をＵＳＢで接続し、デジタルスチルカメラ装置０１からの画像を転送して再生したり、デジタルスチルカメラ装置０１へ各種設定を行うためのＰＣである。

まず、従来の起動動作について説明する。利用者が図示されていない電源ボタンを押下すると、ハードキーインターフェイス部０９はメインＣＰＵへの電源供給をオンする。システム制御部０２内のメインＣＰＵは、まずＮＡＮＤフラッシュメモリのブート部からアクセス（プログラム実行）を開始し、ブートプログラムによってプログラム・データをＳＤＲＡＭへ転送する。ＳＤＲＡＭへの転送が完了すると、プログラムの実行ポインタ（プログラムカウンタ）を、転送したＳＤＲＡＭ上のプログラムに移し、以降はＳＤＲＡＭ上のプログラムにより起動処理を開始する。

起動処理には、ＯＳ（オペレーティングシステム）の初期化や鏡胴の繰りだし処理、記録メディアの初期化処理などが含まれる。鏡胴の繰り出し処理は、画像処理部０４を介して撮像部０３のレンズ駆動モータに所定の間隔（２ｍＳ）毎にパルス信号を与えることで行う。また、記録メディアの初期化処理は、記録メディアインターフェイス部０７を介して記録メディア０８への電源とクロックを供給した後、記録メディア０８へ初期化コマンドを発行する。実際の初期化処理は記録メディア０８内で行われ、システム制御部０２はその完了を検知するために記録メディア０８のステータスを１０ｍＳ間隔でポーリングする。

続いて撮影時の動作について説明する。利用者は撮影に先立ち、図示されていない種々のキー、ダイヤルを操作し、撮影モード（高画質モード、低画質モード等）を決定する。利用者の操作内容はハードキーインターフェイス部０９を通じてシステム制御部０２で判別され、システム制御部０２は、操作に応じて表示制御部０５へガイダンスグラフィックを生成して、利用者に次操作を促す。システム制御部０２は、撮影モードが決定されると、モードに応じた処理パラメタを画像処理部０４へ設定する。

あるいはまた、利用者は図示されていないズームレバーを操作し、画角（構図）を決定する。利用者の操作内容はハードキーインターフェイス部０９を通じてシステム制御部０２で判別され、システム制御部０２は、操作に応じて撮像部０３を制御しレンズを駆動する。撮像部０３は画像処理部０４からの制御に従い、実際の撮影に先だって、モニタリング画像を表示するための撮像動作を開始する。

撮像されたデータは連続的に画像処理部０４へ送られ、画像処理部０４では色空間変換、ガンマ補正、ホワイトバランス調整などの処理を施した後、画像データを表示制御部０５へ送る。表示制御部０５では、画像データを信号処理してＬＣＤ０６へ表示し、利用者へ撮像状態を提示する。図示されていないレリーズボタンが押されると、その操作はモード設定と同様にしてハードキーインターフェイス部０９を通じてシステム制御部０２で判別される。

撮像部０３は画像処理部０４からの制御に従い、フォーカス合わせを行った後、取り込んだ画像を画像処理部０４へ送り、画像処理部０４は、撮影モードに応じた画像処理、圧縮処理を行う。システム制御部０２は、圧縮された画像データを読み出し、さらにヘッダー情報を付加した後、記録メディアインターフェイス部０７を通じて記録メディア０８へ書き込む。以上で一連の撮影動作を完了する。

続いて、本発明の実施例１として、輝度変化に基づき距離情報の取得を行う場合の例について説明する。動作フローを図３に示す。本フローはモニタリング中の動作に関わる動作を示している。モニタリング動作を開始すると、システム制御部０２は、後述するぼかし量パラメタを初期値（＝５）に設定する（ｓｔｅｐ０１−００１）。システム制御部０２は画像処理部０４及び撮像部０３を制御し、ＣＣＤＡＦのスキャン動作を行う（ｓｔｅｐ０１−００２）。続いてシステム制御部０２は、各画像の位置毎の距離の判定を行う（ｓｔｅｐ０１−００３）。

以下、図２を参照しながら説明する。図２（Ａ）において、１００はモニタリング画像の画角、１０１は１つのＡＦ評価値エリアを示している。図のように、ＡＦ評価値エリアは、画角内を均等に分割した小領域となっており、ＣＣＤＡＦにより各領域毎のＡＦ評価値（領域内の画像のコントラストの積算値）が得られる。システム制御部０２は、各領域毎に、ＣＣＤＡＦのスキャンにより得られたレンズ位置毎のＡＦ評価値を、所定のアルゴリズムに基づき解析し、ＡＦ評価値のピーク位置に相当するレンズの駆動位置を判定する。さらにシステム制御部０２は、各領域毎に、現在のズーム位置からレンズの駆動位置を距離情報に変換する。

ＡＦ評価値の技術的な定義は、公知文献（特開２０００−１５２０６５公報−段落００１６）に記載されているが、更に詳しくは、ＡＦ評価値はエリア内の各画素に対し、水平方向のＨＰＦの演算を行い、得られた結果を加算して得られるものである。ＨＰＦの係数は、例えば、ｋｉ={−１,−２,６,−２,−１}といった値が用いられる。ｋ０は注目画素の水平方向−２の座標の画素に乗算される係数、ｋ１は注目画素の水平方向−１の座標の画素に乗算される係数、ｋ３は注目画素に乗算される係数、ｋ４は注目画素の水平方向+１の座標の画素に乗算される係数、ｋ５は注目画素の水平方向+２の座標の画素に乗算される係数である。

ＡＦ評価値から距離情報を取得するには、ガウスの結像方程式、１/ａ+１/ｂ=１/ｆ、から、ａ=ｂｆ/(ｂ−ｆ)、として求められる。ここで、ａ：レンズから被写体までの距離、ｂ：レンズから撮像素子間の距離、ｆ：レンズの焦点距離、である。レンズから被写体までの距離ａが求める距離情報である。レンズの焦点距離ｆは、撮影時のズーム位置により一意に求められる。レンズから撮像素子間の距離ｂは、ＡＦ評価値のピークの得られたフォーカスレンズの駆動位置から一意に求められる。以上により、画角１００内の全領域のＡＦ評価値エリア１０１毎の距離情報を得ることができる。

また、図２（Ａ）において、１０２はＡＦでフォーカスを合わせるエリアに設定されたＡＦエリアを示している。システム制御部０２は、画面中央部分のＡＦ評価値エリアのうち、最も近距離にあるエリアをＡＦエリアとして判定し（ｓｔｅｐ０１−００４）、さらにＡＦエリアと等距離にあるブロックを主要被写体ブロックとして判定する（ｓｔｅｐ０１−００５）。図２（Ｂ）において、１０３は主要被写体ブロックを示している（主要被写体ブロック１０３はＡＦエリア１０２を含む）。

このときシステム制御部０２は、主要被写体ブロック１０３に相当する位置の画像データの平均輝度を算出して記憶する（ｓｔｅｐ０１−００６）。また、システム制御部０２は、得られた主要被写体ブロック１０３の情報と、撮像した画像を基に主要被写体領域を判定する（ｓｔｅｐ０１−００７）。この処理は、従来の画像処理（輪郭抽出）により、主要被写体ブロック１０３を含む任意形状の領域の判定を行う。

図２（Ｃ）において、１０４は主要被写体領域を示している。画像処理部０４は、主要被写体領域１０４の情報を基に、主要被写体画像の抽出処理、背景画像のぼかし処理、合成処理を順次行う（ｓｔｅｐ０１−００８〜０１０）。図２（Ｄ）において、１０５は撮影画像、１０６は主要被写体、１０７は抽出した主要被写体画像、１０８は背景画像、１０９はぼかした背景画像、１１０は合成画像を示している。

主要被写体の抽出処理（ｓｔｅｐ０１−００８）では、主要被写体領域１０４に沿って画像を分離することで、主要被写体の抽出を行う。結果として、撮影画像１０５は主要被写体画像１０７と背景画像１０８に分離される。背景画像のぼかし処理（ｓｔｅｐ０１−００９）では、背景画像１０８にぼかし量パラメタに基づくぼかし処理を行い、ぼかした背景画像１０９を生成する。この処理は、ぼかし量パラメタで指定されたサイズ（５の場合、５ｘ５）の平滑フィルタ処理である。

平滑フィルタ処理では、下式のように入力画像（Ｉｎ(ｘ,ｙ))に平滑フィルタ（ｋ(ｉｘ,ｉｙ)）を演算し、出力画像(Ｏｕｔ(ｘ,ｙ)）を得る。

ここで、Ｉｎ：入力画像、Ｏｕｔ：出力画像、ｋ：平滑フィルタ、ｆｓ：平滑フィルタサイズ(>=１)、であり、本実施例では、ｋ(ｉｘ,ｉｙ)=１、ｉｘ：０〜ｆｓ−１、ｉｙ：０〜ｆｓ−１とする。ぼかし量パラメタは、利用者の操作により変更されるパラメタで、ぼかし量の大小を制御する。このパラメタにより、上述した平滑フィルタのサイズが変更される。数１においてｆｓがぼかしパラメタに相当し、後述するｓｔｅｐ０１−０１５において、利用者の操作に応じて１ずつ値が変化する。

入力画像（Ｉｎ(ｘ,ｙ)）におけるｘとｙは、注目画素の座標値（水平座標ｘ、垂直座標ｙ）を示す。平滑フィルタ（ｋ(ｉｘ,ｉｙ)）におけるｉｘとｉｙは、平滑フィルタ係数の位置（水平方向ｉｘ、垂直方向ｉｙ）を示す。数１により、注目画素の値は、その周辺画素（１辺がサイズｆｓの正方形）の平均値に置き換わる。ｆｓが大きくなると、平均化する領域のサイズが大きくなり、強いぼかしの効果が得られる。ｆｓ=１の場合は、注目画素のみの平均値となるため値は変化せず、ぼかしの効果は無い。

合成処理（ｓｔｅｐ０１−０１０）では、ぼかした背景画像１０９に主要被写体画像１０７を重ね合わせて合成を行い、合成画像１１０を生成する。生成した合成画像は、表示制御部０５を介してＬＣＤ０６へ表示される（ｓｔｅｐ０１−０１１）。以上で１コマのモニタリング画像の処理が完了する。このときシステム制御部０２は、主要被写体ブロック１０３に相当する位置の画像データの平均輝度を算出し（ｓｔｅｐ０１−０１２）、ｓｔｅｐ０１−００６で算出して記憶した値と比較し、所定量以上の差があった場合には、再度ＣＣＤＡＦのスキャン動作へ移行する（ｓｔｅｐ０１−０１３）。

また、ぼかし量の変更の操作が行われた場合には、操作に応じてぼかし量パラメタを変更し（ｓｔｅｐ０１−０１４、０１５）、以上の動作をモニタリング終了まで繰り返し実行する（ｓｔｅｐ０１−０１６）。１コマ毎のモニタリング画像の処理は、ｓｔｅｐ０１−００７から繰り返し行われる。本実施例においては、平均輝度により主要被写体部分の変化を検出するような構成について示したが、輝度のヒストグラムにより変化を検出しても良い。また、ＡＷＢ制御に用いられる評価値（Ｒ積算値、Ｂ積算値）でも良い。

続いて、本発明の実施例２として、パターン変化に基づき距離情報の取得を行う場合の例について説明する。動作フローを図４に示す。ｓｔｅｐ０２−００１〜ｓｔｅｐ０２−００５の処理は、ｓｔｅｐ０１と同じである。主要被写体のブロック判定を終えると、システム制御部０２は、主要被写体ブロック１０３に相当する位置の画像データをシステム制御部０２内のワークメモリへコピーする（ｓｔｅｐ０１−００６）。ｓｔｅｐ０２−００７〜ｓｔｅｐ０２−０１１の処理は、ｓｔｅｐ０１と同じである。

合成画像を表示すると、システム制御部０２は、主要被写体ブロック１０３に相当する位置の画像データをｓｔｅｐ０１−００６でコピーしたワークメモリ内の画像データと比較し（ｓｔｅｐ０１−０１２）、所定量以上の差があった場合には、再度ＣＣＤＡＦのスキャン動作へ移行する（ｓｔｅｐ０１−０１３）。

ｓｔｅｐ０１−００９に関して、本実施例においては、ぼかし量パラメタに従って背景画像１０８を一律にぼかす例について示したが、背景画像を距離に応じて複数に分割し距離に応じてぼかし量を変えることも可能である。その場合、ｓｔｅｐ０１−００９のぼかし処理において、ｓｔｅｐ０１−００３において得られる画像の位置毎の距離に基づき、背景画像１０８をさらに複数の画像に分割し、遠距離にある画像に対しては、前述したぼかしパラメタを＋１してぼかし処理を行う。なお、”カメラで撮影時にぼかし処理を行うことのメリット”は、ぼかした効果を撮影前にスルー画で確認することができるので、ぼけに合わせた構図で最適な写真を撮影できることである。

上記の場合、ｓｔｅｐ０１−００９のぼかし処理において、ｓｔｅｐ０１−００３において得られる画像の位置毎の距離に基づき、背景画像１０８をさらに複数の画像に分割し、距離に応じたぼかしパラメタを決定してぼかし処理を行う。ぼかし量パラメタｆｓは、次式で決定する。
ｆｓ=Ｋｆ|(ａ'−ａ)| / (ａ'ａ) （小数点以下切り上げ）
ここで、ａ'：ぼかし処理を行う背景までの距離、ａ：合焦している被写体までの距離、ｆ：レンズの焦点距離、Ｋ：撮像素子や絞りにより決定する係数（例えば１.２Ｅ３)、である。

〔請求項１３〜２６の発明の実施形態〕
以下に本発明の実施例について説明する。図１に装置及び接続機器の構成を示す。図１において、０１はデジタルスチルカメラ装置である。０２は、デジタルスチルカメラ装置０１全体の制御を行うために設けられた、ＣＰＵ、ＮＡＮＤフラッシュメモリ、ＳＤＲＡＭ、タイマー等からなるシステム制御部である。０３は、撮像のために設けられた光学系部品（レンズ及びレンズ駆動モータ）、ＣＣＤ、ＣＣＤ駆動回路、Ａ／Ｄ変換器等からなる撮像部である。

０４は、撮像部で得られた画像信号に種々の画像処理を施すと共に、撮像部０３のＣＣＤ駆動タイミング、レンズ駆動モータを制御してズーミング、フォーカシング、露出調整等を行い、また、画像の圧縮伸長を行うために設けられた画像処理用ＤＳＰ（デジタルシグナルプロセッサ）、ＲＡＭ等からなる画像処理部である。０５は、画像処理部で処理された画像信号をＬＣＤへ表示するための信号処理を行い、また、ユーザーインターフェイスのための種々のグラフィック画像を生成しＬＣＤへ表示するために設けられたＤ／Ａ変換器、オンスクリーンディスプレイコントローラ等からなる表示制御部である。

０６は、画像を表示し、また、ユーザーインターフェイスのためのグラフィックを表示するために設けられたＬＣＤである。０７は、記録メディアとのインターフェイスのために設けられたメモリカードコントローラ等からなる記録メディアインターフェイス部である。０８は、圧縮された画像信号や画像に纏わる種々の情報を記憶するために設けられたフラッシュメモリ等からなる、デジタルスチルカメラ装置０１から着脱可能な記録メディアである。

０９は、図示されていないキー、ダイアル等のユーザーインターフェイスの状態検出を行い、またメインＣＰＵへの主電源制御を行うために設けられた、サブＣＰＵ等からなるハードキーインターフェイス部である。１０は、ＵＳＢを接続してデータ通信を行うために設けられた通信コントローラからなる通信インターフェイス部である。１１は、デジタルスチルカメラ装置０１をＵＳＢで接続し、デジタルスチルカメラ装置０１からの画像を転送して再生したり、デジタルスチルカメラ装置０１へ各種設定を行うためのＰＣである。

まず、従来の起動動作について説明する。利用者が図示されていない電源ボタンを押下すると、ハードキーインターフェイス部０９はメインＣＰＵへの電源供給をオンする。システム制御部０２内のメインＣＰＵは、まずＮＡＮＤフラッシュメモリのブート部からアクセス（プログラム実行）を開始し、ブートプログラムによってプログラム・データをＳＤＲＡＭへ転送する。ＳＤＲＡＭへの転送が完了すると、プログラムの実行ポインタ（プログラムカウンタ）を、転送したＳＤＲＡＭ上のプログラムに移し、以降はＳＤＲＡＭ上のプログラムにより起動処理を開始する。

起動処理には、ＯＳ（オペレーティングシステム）の初期化や鏡胴の繰りだし処理、記録メディアの初期化処理などが含まれる。
鏡胴の繰り出し処理は、画像処理部０４を介して撮像部０３のレンズ駆動モータに所定の間隔（２ｍＳ）毎にパルス信号を与えることで行う。また、記録メディアの初期化処理は、記録メディアインターフェイス部０７を介して記録メディア０８への電源とクロックを供給した後、記録メディア０８へ初期化コマンドを発行する。実際の初期化処理は記録メディア０８内で行われ、システム制御部０２はその完了を検知するために記録メディア０８のステータスを１０ｍＳ間隔でポーリングする。

続いて撮影時の動作について説明する。ダイヤルを操作し、撮影モード（高画質モード、低画質モード等）を決定する。利用者の操作内容はハードキーインターフェイス部０９を通じてシステム制御部０２で判別され、システム制御部０２は、操作に応じて表示制御部０５へガイダンスグラフィックを生成して、利用者に次操作を促す。システム制御部０２は、撮影モードが決定されると、モードに応じた処理パラメタを画像処理部０４へ設定する。

あるいはまた、利用者は図示されていないズームレバーを操作し、画角（構図）を決定する。利用者の操作内容はハードキーインターフェイス部０９を通じてシステム制御部０２で判別され、システム制御部０２は、操作に応じて撮像部０３を制御しレンズを駆動する。撮像部０３は画像処理部０４からの制御に従い、実際の撮影に先だって、モニタリング画像を表示するための撮像動作を開始すると同時に、画像処理部０４は顔検出の処理を起動する。

撮像されたデータは連続的に画像処理部０４へ送られ、画像処理部０４では色空間変換、ガンマ補正、ホワイトバランス調整などの処理を施した後、画像データを表示制御部０５へ送る。また、この時同時に画像処理部０４では、顔検出結果を用いた露出の検出を行い、撮像部０３を制御して調整を行う。表示制御部０５では、画像データを信号処理してＬＣＤ０６へ表示し、利用者へ撮像状態を提示する。図示されていないレリーズボタンが押されると、その操作はモード設定と同様にしてハードキーインターフェイス部０９を通じてシステム制御部０２で判別される。

撮像部０３は画像処理部０４からの制御に従い、フォーカス合わせを行った後、取り込んだ画像を画像処理部０４へ送り、画像処理部０４は、撮影モードに応じた画像処理、圧縮処理を行う。システム制御部０２は、圧縮された画像データを読み出し、さらにヘッダー情報を付加した後、記録メディアインターフェイス部０７を通じて記録メディア０８へ書き込む。以上で一連の撮影動作を完了する。

続いて、本発明の実施例３として、顔検出結果に基づき距離情報の取得を行う場合の例について説明する。動作フローを図６に示す。本フローはモニタリング中の動作に関わる動作を示している。モニタリング動作を開始すると、システム制御部０２は、後述するぼかし量パラメタを初期値（＝５）に設定する（ｓｔｅｐ０３−００１）。画像処理部０４で顔が検出されると（ｓｔｅｐ０３−００２）、システム制御部０２は画像処理部０４及び撮像部０３を制御し、ＣＣＤＡＦのスキャン動作を行う（ｓｔｅｐ０３−００３）。続いてシステム制御部０２は、各画像の位置毎の距離の判定を行う（ｓｔｅｐ０３−００４）。

以下、図５を参照しながら説明する。図５（Ａ）において、１００はモニタリング画像の画角、１０１は１つのＡＦ評価値エリアを示している。図のように、ＡＦ評価値エリアは、画角内を均等に分割した小領域となっており、ＣＣＤＡＦにより各領域毎のＡＦ評価値（領域内の画像のコントラストの積算値）が得られる。システム制御部０２は、各領域毎に、ＣＣＤＡＦのスキャンにより得られたレンズ位置毎のＡＦ評価値を、所定のアルゴリズムに基づき解析し、ＡＦ評価値のピーク位置に相当するレンズの駆動位置を判定する。さらにシステム制御部０２は、各領域毎に、現在のズーム位置からレンズの駆動位置を距離情報に変換する。

ＡＦ評価値の技術的な定義は、公知文献（特開２０００−１５２０６５−段落００１６）に記載されているが、更に詳しくは、ＡＦ評価値はエリア内の各画素に対し、水平方向のＨＰＦの演算を行い、得られた結果を加算して得られるものである。ＨＰＦの係数は、例えば、ｋｉ={−１, −２, ６, −２, −１}といった値が用いられる。ｋ０は注目画素の水平方向−２の座標の画素に乗算される係数、ｋ１は注目画素の水平方向−１の座標の画素に乗算される係数、ｋ３は注目画素に乗算される係数、ｋ４は注目画素の水平方向−１の座標の画素に乗算される係数、ｋ５は注目画素の水平方向＋２の座標の画素に乗算される係数である。

ＡＦ評価値から距離情報を取得するには、ガウスの結像方程式、１/ａ+１/ｂ=１/ｆ、から、ａ=ｂｆ/(ｂ−ｆ)、として求められる。ここで、ａ：レンズから被写体までの距離、ｂ：レンズから撮像素子間の距離、ｆ：レンズの焦点距離、である。レンズから被写体までの距離ａが求める距離情報である。レンズの焦点距離ｆは、撮影時のズーム位置により一意に求められる。レンズから撮像素子間の距離ｂは、ＡＦ評価値のピークの得られたフォーカスレンズの駆動位置から一意に求められる。以上により、画角１００内の全領域のＡＦ評価値エリア１０１毎の距離情報を得ることができる。

また、図５（Ａ）において、１０２は顔検出エリア、１０３は顔検出エリアに含まれるＡＦ評価値エリアである顔検出ブロックを示している。システム制御部０２は、顔検出エリア１０２に含まれるＡＦ評価値エリアを顔検出ブロック１０３として判定し（ｓｔｅｐ０３−００５）、さらに顔検出ブロック１０３と等距離にあるブロックを主要被写体ブロックとして判定する（ｓｔｅｐ０３−００６）。図５（Ｂ）において、１０４は主要被写体ブロックを示している（主要被写体ブロック１０４は顔検出ブロック１０３を含む）。

システム制御部０２は、得られた主要被写体ブロック１０４の情報と、撮像した画像を基に主要被写体領域を判定する（ｓｔｅｐ０３−００７）。この処理は、従来の画像処理（輪郭抽出）により、主要被写体ブロック１０４を含む任意形状の領域の判定を行う。図５（Ｃ）において、１０５は主要被写体領域を示している。画像処理部０４は、主要被写体領域１０５の情報を基に、主要被写体画像の抽出処理、背景画像のぼかし処理、合成処理を順次行う（ｓｔｅｐ０３−００８〜０１０）。

図５（Ｄ）において、１０６は撮影画像、１０７は主要被写体、１０８は抽出した主要被写体画像、１０９は背景画像、１１０はぼかした背景画像、１１１は合成画像を示している。主要被写体の抽出処理（ｓｔｅｐ０３−００８）では、主要被写体領域１０５に沿って画像を分離することで、主要被写体の抽出を行う。結果として、撮影画像１０６は主要被写体画像１０８と背景画像１０９に分離される。背景画像のぼかし処理（ｓｔｅｐ０３−００９）では、背景画像１０９にぼかし量パラメタに基づくぼかし処理を行い、ぼかした背景画像１１０を生成する。この処理は、ぼかし量パラメタで指定されたサイズ（５の場合、５ｘ５）の平滑フィルタ処理である。

平滑フィルタ処理では、下式のように入力画像（Ｉｎ(ｘ,ｙ))に平滑フィルタ（ｋ(ｉｘ,ｉｙ)）を演算し、出力画像(Ｏｕｔ(ｘ,ｙ)）を得る。

ここで、Ｉｎ：入力画像、Ｏｕｔ：出力画像、ｋ：平滑フィルタ、ｆｓ：平滑フィルタサイズ(>=１)、であり、本実施例では、ｋ(ｉｘ,ｉｙ)=１、ｉｘ：０〜ｆｓ−１、ｉｙ：０〜ｆｓ−１とする。ぼかし量パラメタは、利用者の操作により変更されるパラメタで、ぼかし量の大小を制御する。このパラメタにより、上述した平滑フィルタのサイズが変更される。数２においてｆｓがぼかしパラメタに相当し、後述するｓｔｅｐ０３−０１５において、利用者の操作に応じて１ずつ値が変化する。

入力画像（Ｉｎ(ｘ,ｙ)）におけるｘとｙは、注目画素の座標値（水平座標ｘ、垂直座標ｙ）を示す。平滑フィルタ（ｋ(ｉｘ,ｉｙ)）におけるｉｘとｉｙは、平滑フィルタ係数の位置（水平方向ｉｘ、垂直方向ｉｙ）を示す。数２により、注目画素の値は、その周辺画素（１辺がサイズｆｓの正方形）の平均値に置き換わる。ｆｓが大きくなると、平均化する領域のサイズが大きくなり、強いぼかしの効果が得られる。ｆｓ=１の場合は、注目画素のみの平均値となるため値は変化せず、ぼかしの効果は無い。

合成処理（ｓｔｅｐ０３−０１０）では、ぼかした背景画像１１０に主要被写体画像１０８を重ね合わせて合成を行い、合成画像１１１を生成する。生成した合成画像は、表示制御部０５を介してＬＣＤ０６へ表示される（ｓｔｅｐ０３−０１１）。以上で１コマのモニタリング画像の処理が完了し、このときもし、顔が検出されなくなっていた場合には、再度顔検出待ちの処理へ移行する（ｓｔｅｐ０３−０１２）。あるいは、検出した顔の位置が、ｓｔｅｐ０３−００２で検出した時の位置から、所定量以上離れたことを検出した場合には、再度ＣＣＤＡＦのスキャン動作へ移行する（ｓｔｅｐ０３−０１３）。なお顔検出の処理は、画像処理部０４で並行して行われている。

また、ぼかし量の変更の操作が行われた場合には、操作に応じてぼかし量パラメタを変更し（ｓｔｅｐ０３−０１４、０１５）、以上の動作をモニタリング終了まで繰り返し実行する（ｓｔｅｐ０３−０１６）。コマ毎のモニタリング画像の処理は、ｓｔｅｐ０３−００７から繰り返し行われる。

続いて、本発明の実施例４として、利用者の操作に基づき距離情報の取得を行う場合の例について説明する。動作フローを図７に示す。ｓｔｅｐ０４−００１〜ｓｔｅｐ０４−０１２の処理は、ｓｔｅｐ０３と同じである。ぼかし量の変更の操作が行われた場合には、操作に応じてぼかし量パラメタを変更すると共に（ｓｔｅｐ０４−０１３、０１４）、再度ＣＣＤＡＦのスキャン動作へ移行する。

ｓｔｅｐ０３−００９に関して、本実施例においては、ぼかし量パラメタに従って背景画像１０９を一律にぼかす例について示したが、背景画像を距離に応じて複数に分割し距離に応じてぼかし量を変えることも可能である。その場合、ｓｔｅｐ０３−００９のぼかし処理において、ｓｔｅｐ０３−００４において得られる画像の位置毎の距離に基づき、背景画像１０９をさらに複数の画像に分割し、遠距離にある画像に対しては、前述したぼかしパラメタを＋１してぼかし処理を行う。なお、”カメラで撮影時にぼかし処理を行うことのメリット”は、ぼかした効果を撮影前にスルー画で確認することができるので、ぼけに合わせた構図で最適な写真を撮影できることである。

上記の場合、ｓｔｅｐ０３−００９のぼかし処理において、ｓｔｅｐ０３−００４において得られる画像の位置毎の距離に基づき、背景画像１０９をさらに複数の画像に分割し、距離に応じたぼかしパラメタを決定してぼかし処理を行う。ぼかし量パラメタｆｓは、次式で決定する。
ｆｓ=Ｋｆ|(ａ'−ａ)| / (ａ'ａ)（小数点以下切り上げ）
ここで、ａ'：ぼかし処理を行う背景までの距離、ａ：合焦している被写体までの距離、ｆ：レンズの焦点距離、Ｋ：撮像素子や絞りにより決定する係数（例えば１.２Ｅ３)、である。

本発明の実施形態の構成を示すブロック図である。 本発明の実施例１の画面の説明図である。 本発明の実施例１の動作フローである。 本発明の実施例２の動作フローである。 本発明の実施例３の画面の説明図である。 本発明の実施例３の動作フローである。 本発明の実施例４の動作フローである。

符号の説明

０１ デジタルスチルカメラ装置
０２ システム制御部
０３ 撮像部
０４ 画像処理部
０５ 表示制御部
０６ ＬＣＤ
０７ 記録メディアインターフェイス部
０８ 記録メディア
０９ ハードキーインターフェイス部
１０ 通信インターフェイス部
１１ ＰＣ

Claims (26)

1. 被写体を撮像するための撮像素子と、撮像素子に被写体像を結像させる撮像レンズと、焦点調節を行なうためにレンズを移動させる移動手段と、画像内の所定領域毎の合焦度を判定する手段とを具備する撮像装置において、
   前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定するレンズ位置判定手段と、
   該レンズ位置から画像内の所定領域毎の被写体までの距離を判定する距離判定手段と、
   フォーカスを合わせる被写体の画像領域を判定する画像領域判定手段と、
   該領域以外の画像に距離に基づいた画像処理を行う画像処理手段と、
   を具備することを特徴とする撮像装置。
2. 請求項１に記載の撮像装置において、
   前記画像処理手段は画像のぼかし処理をするぼかし処理手段であることを特徴とする撮像装置。
3. 請求項１または２に記載の撮像装置において、
   連続的に得られる画像を表示する表示手段と、
   得られた画像の画像変化に基づいて前記距離判定手段により距離情報を取得し、連続的に得られる各々の画像に対して前記画像処理手段により画像処理を行う手段と、
   を具備することを特徴とする撮像装置。
4. 請求項３に記載の撮像装置において、
   前記画像変化は被写体の位置する画像領域の明るさ情報の変化に基づくことを特徴とする撮像装置。
5. 請求項３に記載の撮像装置において、
   前記画像変化は被写体の位置する画像領域の色情報の変化に基づくことを特徴とする撮像装置。
6. 請求項３に記載の撮像装置において、
   前記画像変化は被写体の位置する画像領域の画像パターンの変化に基づくことを特徴とする撮像装置。
7. 撮像素子により被写体を撮像し、撮像レンズにより撮像素子に被写体像を結像し、レンズの移動により焦点調節を行なって、画像内の所定領域毎の合焦度を判定する撮像装置の制御方法において、
   前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定し、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定し、フォーカスを合わせる被写体の画像領域を判定し、該領域以外の画像に距離に基づいた画像処理を行うことを特徴とする撮像装置の制御方法。
8. 請求項７に記載の撮像装置の制御方法において、
   前記画像処理は画像のぼかし処理であることを特徴とする撮像装置の制御方法。
9. 請求項７または８に記載の撮像装置の制御方法において、
   連続的に得られる画像を表示し、所定の画像変化に基づき、前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする撮像装置の制御方法。
10. 請求項９に記載の撮像装置の制御方法において、
    前記画像変化は被写体の位置する画像領域の明るさ情報の変化に基づくことを特徴とする撮像装置の制御方法。
11. 請求項９に記載の撮像装置の制御方法において、
    前記画像変化は被写体の位置する画像領域の色情報の変化に基づくことを特徴とする撮像装置の制御方法。
12. 請求項９に記載の撮像装置の制御方法において、
    前記画像変化は被写体の位置する画像領域の画像パターンの変化に基づくことを特徴とする撮像装置の制御方法。
13. 被写体を撮像するための撮像素子と、撮像素子に被写体像を結像させる撮像レンズと、焦点調節を行なうためにレンズを移動させる移動手段と、画像内の所定領域毎の合焦度を判定する手段とを具備する撮像装置において、
    前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定するレンズ位置判定手段と、
    該レンズ位置から画像内の所定領域毎の被写体までの距離を判定する距離判定手段と、
    主要被写体の位置する画像領域を判定する画像領域判定手段と、
    該領域以外の画像に距離に基づいた画像処理を行う画像処理手段と、
    を具備することを特徴とする撮像装置。
14. 請求項１３に記載の撮像装置において、
    前記画像処理手段は画像のぼかし処理手段であることを特徴とする撮像装置。
15. 請求項１３または１４に記載の撮像装置において、
    連続的に得られる画像を表示する表示手段と、
    所定の操作に基づいて前記距離情報の取得の動作を行い、連続的に得られる各々の画像に対して前記画像処理手段により画像処理を行う手段と、
    を具備することを特徴とする撮像装置。
16. 請求項１５に記載の撮像装置において、
    前記所定の操作はぼかし量の変更の操作であることを特徴とする撮像装置。
17. 請求項１３または１４に記載の撮像装置において、
    主要被写体の位置する領域の判定は顔検出によることを特徴とする撮像装置。
18. 請求項１７に記載の撮像装置において、
    連続的に得られる画像を表示する表示手段と、
    顔検出結果の変化に基づいて前記距離情報の取得の動作を行い、連続的に得られる各々の画像に対して前記画像処理を行う手段と、
    を具備することを特徴とする撮像装置。
19. 請求項１３乃至１８のいずれかに記載の撮像装置において、
    主要被写体の位置する領域の判定に距離情報を用いることを特徴とする撮像装置。
20. 撮像素子により被写体を撮像し、撮像レンズにより撮像素子に被写体像を結像し、レンズの移動により焦点調節を行なって、画像内の所定領域毎の合焦度を判定する撮像装置の制御方法において、
    前記レンズの各移動位置ごとの合焦度を得て、合焦度が最大となるレンズ位置を判定し、該レンズ位置から画像内の所定領域毎の被写体までの距離を判定し、主要被写体の位置する画像領域を判定し、該領域以外の画像に距離に基づいた画像処理を行うことを特徴とする撮像装置の制御方法。
21. 請求項２０に記載の撮像装置の制御方法において、
    前記画像処理は画像のぼかし処理であることを特徴とする撮像装置の制御方法。
22. 請求項２０または２１に記載の撮像装置の制御方法において、
    連続的に得られる画像を表示し、所定の操作に基づいて前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする撮像装置の制御方法。
23. 請求項２２に記載の撮像装置の制御方法において、
    前記所定の操作はぼかし量の変更の操作であることを特徴とする撮像装置の制御方法。
24. 請求項２０または２１に記載の撮像装置の制御方法において、
    主要被写体の位置する領域の判定は顔検出によることを特徴とする撮像装置の制御方法。
25. 請求項２４に記載の撮像装置の制御方法において、
    連続的に得られる画像を表示し、顔検出結果の変化に基づいて前記距離情報の取得の動作を行って、連続的に得られる各々の画像に対して前記画像処理を行うことを特徴とする撮像装置の制御方法。
26. 請求項２０乃至２５のいずれかに記載の撮像装置の制御方法において、
    主要被写体の位置する領域の判定に、距離情報を用いることを特徴とする撮像装置の制御方法。