JP6104060B2 - 撮像装置、撮像方法 - Google Patents

Description

本発明は、明時画像データと暗時画像データとを取得して暗電流を補正する撮像装置、撮像方法に関する。

暗電流により発生する画像のノイズは、Ｓ／Ｎ比が低下する場合、例えば低輝度の被写体を長時間露光して画像を取得する場合などに目立つために、こうした暗電流ノイズの除去については従来より種々の提案がなされている。

例えば、特開２０００−２０９５０６号公報には、暗電流が撮像素子の温度や露出時間に応じて増減することに鑑みて、明時画像を撮像した直後に、撮像素子全体を遮光した状態で明時画像と同じ露出時間だけ電荷蓄積動作を行って暗電流成分に起因する暗時画像を取得し、明時画像から暗時画像を減算することにより、暗電流による画質の低下を低減する技術が記載されている。

また、特開２００４−２２９０３２号公報には、明時画像の撮影に伴って暗時画像の撮影を行う煩雑さを軽減するための、次のような技術が記載されている。すなわち、デジタルカメラを出荷する前に、シャッタ速度とカメラ感度の組み合わせを異ならせて複数回のダーク露光撮影を行い、得られた複数のダーク画像データをメモリに記憶させておく。そして、実撮影時には、実撮影画像データを得たときのシャッタ速度とカメラ感度に対応するノイズ補正データを、メモリから読み出したダーク画像データに基づき算出し、算出したノイズ補正データを実撮影画像データから減算してノイズを除去する。

ところで、長時間露光を行う際に、露光中の画像の様子を確認することができる技術として、いわゆるライブバルブ撮影の技術が提案され製品化されている。このライブバルブ撮影は、長時間露光画像を複数の露光画像に時分割して読み出し表示することにより、画像が露光されていく様子を観察することができるようにする技術である。

このライブバルブ撮影において、暗電流ノイズを除去する処理を、図２４および図２５を参照して説明する。図２４は明時画像をライブバルブ撮影するときの動作を示すタイミングチャート、図２５は暗時画像をライブバルブ撮影するときの動作を示すタイミングチャートである。なお、図２４および図２５には、全露光時間Ｔｅｘｐを３つの分割露光時間Ｔｅｘｐ１，Ｔｅｘｐ２，Ｔｅｘｐ３に分割する場合を例示している。

図２４に示すように、明時画像のライブバルブ撮影は、メカニカルシャッタ（以下では、「メカニカル」を適宜「メカ」と省略する）を開いて、画素にリセットパルスＲＳＴを印加してリセットすることにより開始される。

そして露光開始から第１の分割露光時間Ｔｅｘｐ１が経過したところで、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより第１回目の画素の読み出しを行い、撮像データとして第１の時分割明時画像データＡ１を取得する。取得した時分割明時画像データＡ１は、必要な画像処理を行った後に、撮像装置の表示部に表示される。

続いて、第１回目の画素の読み出しから第２の分割露光時間Ｔｅｘｐ２が経過したところで、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより第２回目の画素の読み出しを行い、撮像データとして第２の時分割明時画像データＡ２を取得する。取得した時分割明時画像データＡ２は、第１の時分割明時画像データＡ１と加算され、必要な画像処理を行った後に、撮像装置の表示部に表示される。これにより、露光開始時点から露光時間（Ｔｅｘｐ１＋Ｔｅｘｐ２）だけの露光を行ったのに等しい画像が表示部に表示されることになる。

さらに、第２回目の画素の読み出しから第３の分割露光時間Ｔｅｘｐ３が経過したところで、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより第３回目の画素の読み出しを行い、撮像データとして第３の時分割明時画像データＡ３を取得する。なお、全画素の読み出しが終了したところで、メカシャッタを閉じる。取得した時分割明時画像データＡ３は、第１の時分割明時画像データＡ１および第２の時分割明時画像データＡ２と加算され（つまり、明時画像データＡ＝Ａ１＋Ａ２＋Ａ３が算出され）、必要な画像処理を行った後に、撮像装置の表示部に表示される。これにより、露光開始時点から全露光時間Ｔｅｘｐだけの露光を行ったのに等しい画像が表示部に表示されることになる。

このような明時画像の撮像を行ったら、明時画像を撮像した時点の暗電流とできるだけ相関性の高い暗電流を取得するために、遅滞なく引き続いて暗時画像の撮像を行う。

この暗時画像の取得は図２５に示すように行われ、撮像がメカシャッタを閉じた状態で行われること以外は、撮像データの取得までの処理は明時画像のライブバルブ撮影と同様となる。ただし、時分割露光により取得される時分割暗時画像データは、時分割明時画像データとは異なり、表示部には表示されない。

こうして全ての時分割暗時画像データＢ１，Ｂ２，Ｂ３が取得されたら、これらを加算して、露光開始時点から全露光時間Ｔｅｘｐだけの露光を行ったのに等しい暗時画像データＢ＝Ｂ１＋Ｂ２＋Ｂ３を算出する。そして、明時画像データＡ＝Ａ１＋Ａ２＋Ａ３から暗時画像データＢ＝Ｂ１＋Ｂ２＋Ｂ３を減算することにより、暗電流成分が低減された画像データを生成して、その後にゲインアップやその他の画像処理等を行って保存する。

このような処理により、バルブ撮影時に形成されていく画像の様子をライブビューで確認することができるとともに、固定パターンノイズ（ＦＰＮ）が低減された画像を取得することが可能となる。

上述したようなライブバルブ撮影は、露光時間が長時間となるために、撮像装置を三脚などにより固定して実施することが前提となっている。

特開２０００−２０９５０６号公報 特開２００４−２２９０３２号公報

ここでもし、上述したようなライブバルブ撮影を、三脚等を利用することなく手持ちで行おうとする場合には、ブレ補正が必須になると考えられる。

ブレ補正には、レンズまたは撮像素子をブレ補正方向に駆動するメカブレ補正と、撮像素子の撮像面に相対する被写体像の移動に応じて一定の被写体部分が常に収まるように画像の一部を切り出す電子的ブレ補正と、がある。

メカブレ補正は、撮像素子に対する光学的な被写体像の位置を一定に保つようにブレを補正するものであるために、上述したように明時画像から暗時画像を減算することでＦＰＮを除去することが可能である。

一方、電子的ブレ補正は、ＦＰＮが撮像素子の撮像面における固定位置に発生するのに対して、画像の切り出し部分はブレに応じて変化し、つまり電子的ブレ補正を行った明時画像中のＦＰＮの位置が変化することになるために、明時画像から暗時画像を単純に減算してもＦＰＮを良好に除去することはできない。

従って、ライブバルブ撮影においてはメカブレ補正のみを行うことが考えられるが、メカブレ補正だけでは長時間露光となるバルブ撮影に対して補正量が十分であるとはいえず、強力なメカブレ補正機能を搭載しようとすると、コストが増加して撮像装置が大型化してしまうことになる。

本発明は上記事情に鑑みてなされたものであり、手持ちによるライブバルブ撮影を、撮像装置を大型化させることなく低コストで実現することができる撮像装置、撮像方法を提供することを目的としている。

本発明の第１の態様による撮像装置は、結像した被写体像を、１回の撮影における露光時間を複数の分割露光時間に分割して撮像素子により撮像し、複数枚の時分割明時画像データから構成される明時画像データを取得する明時画像撮像部と、上記撮像素子を遮光して、上記明時画像データを取得したのと同一の露光時間の暗時画像データを取得する暗時画像撮像部と、ブレを検出するブレ検出部と、上記ブレ検出部により検出されたブレに基づいて、上記時分割明時画像データ毎にブレが補正された時分割切出明時画像データを切り出す電子的ブレ補正部と、表示部と、上記明時画像撮像部が分割露光をする毎に、上記ブレが補正された後の時分割切出明時画像データを、過去に取得された時分割切出明時画像データと加算し、加算後の時分割切出明時画像データから表示用画像を生成して、上記表示部に表示させる画像処理部と、上記暗時画像データの画素値を、上記露光時間に対する上記分割露光時間の比である露光時間比に分割して、上記時分割明時画像データに各対応する上記暗時画像データを構成する時分割暗時画像データを取得し、上記時分割暗時画像データ毎に、上記時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す暗時画像切出部と、上記時分割切出明時画像データから上記時分割切出暗時画像データを減算することにより、暗電流が補正された補正画像データを生成する暗電流補正部と、を備えている。

本発明の第２の態様による撮像方法は、結像した被写体像を、１回の撮影における露光時間を複数の分割露光時間に分割して撮像素子により撮像し、複数枚の時分割明時画像データから構成される明時画像データを取得する明時画像撮像ステップと、上記撮像素子を遮光して、上記明時画像データを取得したのと同一の露光時間の暗時画像データを取得する暗時画像撮像ステップと、ブレを検出するブレ検出ステップと、上記ブレ検出ステップにより検出されたブレに基づいて、上記時分割明時画像データ毎にブレが補正された時分割切出明時画像データを切り出す電子的ブレ補正ステップと、上記明時画像撮像ステップが分割露光をする毎に、上記ブレが補正された後の時分割切出明時画像データを、過去に取得された時分割切出明時画像データと加算し、加算後の時分割切出明時画像データから表示用画像を生成して、表示部に表示させる画像処理ステップと、上記暗時画像データの画素値を、上記露光時間に対する上記分割露光時間の比である露光時間比に分割して、上記時分割明時画像データに各対応する上記暗時画像データを構成する時分割暗時画像データを取得し、上記時分割暗時画像データ毎に、上記時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す暗時画像切出ステップと、上記時分割切出明時画像データから上記時分割切出暗時画像データを減算することにより、暗電流が補正された補正画像データを生成する暗電流補正ステップと、を備えている。

本発明の撮像装置、撮像方法によれば、手持ちによるライブバルブ撮影を、撮像装置を大型化させることなく低コストで実現することが可能となる。

本発明の実施形態１における撮像装置の構成を示すブロック図。 上記実施形態１において、被写体像が撮像素子に結像している様子を示す図。 上記実施形態１において、図２よりも撮像装置がやや左上に移動したときに被写体像が撮像素子に結像している様子を示す図。 上記実施形態１において、図２および図３よりも撮像装置がさらに左上に移動したときに被写体像が撮像素子に結像している様子を示す図。 上記実施形態１において、図２〜図４の状態で撮像された各時分割画像を加算して得られる加算画像の様子を示す図。 上記実施形態１において、図２に対応するメカブレ補正の初期状態を示す図。 上記実施形態１において、図３に対応して撮像素子をやや左上に移動しメカブレ補正を行うときの様子を示す図。 上記実施形態１において、図４に対応して撮像素子をさらに左上に移動しメカブレ補正を行うときの様子を示す図。 上記実施形態１において、図６〜図８の状態で撮像された各時分割画像を加算して得られる加算画像の様子を示す図。 上記実施形態１において、図２に対応する画像中の被写体像のブレの様子を示す図。 上記実施形態１において、図３に対応する画像中の被写体像のブレの様子を示す図。 上記実施形態１において、図４に対応する画像中の被写体像のブレの様子を示す図。 上記実施形態１において、図１０に対応する電子的ブレ補正の初期状態を示す図。 上記実施形態１において、図１１に対応して切出領域をやや右下へ移動し電子的ブレ補正を行うときの様子を示す図。 上記実施形態１において、図１２に対応して切出領域をさらに右下へ移動し電子的ブレ補正を行うときの様子を示す図。 上記実施形態１において、明時画像をライブバルブ撮影するときの動作を示すタイミングチャート。 上記実施形態１において、暗時画像をライブバルブ撮影するときの動作を示すタイミングチャート。 上記実施形態１において、時分割切出明時画像データと時分割切出暗時画像データとに基づき暗電流が補正された補正画像データを生成する様子を示す図。 上記実施形態１におけるブレ補正ライブバルブの処理を示すフローチャート。 上記実施形態１において、図１９のステップＳ２における明時撮影の処理を示すフローチャート。 上記実施形態１において、図１９のステップＳ３における暗時撮影の処理を示すフローチャート。 本発明の実施形態２において、暗時画像をライブバルブ撮影するときの動作を示すタイミングチャート。 上記実施形態２において、図１９のステップＳ３における暗時撮影の処理を示すフローチャート。 従来において、明時画像をライブバルブ撮影するときの動作を示すタイミングチャート。 従来において、暗時画像をライブバルブ撮影するときの動作を示すタイミングチャート。

以下、図面を参照して本発明の実施の形態を説明する。
［実施形態１］

図１から図２１は本発明の実施形態１を示したものであり、図１は撮像装置の構成を示すブロック図である。

この撮像装置は、図１に示すように、レンズ１と、撮像部２と、画像処理部３と、ＡＦ評価値演算部４と、表示部５と、ブレ検出部７と、メカニカルブレ補正部８と、露光制御部９と、フォーカス制御部１０と、カメラ操作部１１と、カメラ制御部１２と、メカニカルシャッタ１３と、を備えている。なお、図１にはメモリカード６も記載されているが、このメモリカード６は撮像装置に対して着脱可能に構成されているために、撮像装置に固有の構成でなくても構わない。

レンズ１は、光学的な被写体像を撮像部２に含まれる撮像素子２ａの撮像領域に結像するものである。このレンズ１は、フォーカスレンズやズームレンズ、絞り等を備え、さらに本実施形態においてはブレ補正機能も備えたものとなっている。

メカニカルシャッタ１３は、レンズ１から撮像素子２ａへの光路上に配設されていて、被写体像の撮像素子２ａへの通過と、撮像素子２ａの遮光とを制御するものである。

撮像部２は、レンズ１により結像された被写体像を光電変換して画像信号として出力する撮像素子２ａや、この撮像素子２ａから出力された画像信号を増幅した後にデジタル信号に変換する信号処理回路などを含んでいる。なお、本実施形態においては、撮像部２はレンズ１の撮影光軸に垂直な面内を移動可能に構成されていて、ブレ補正機能を備えたものとなっている。そして、撮像部２は、結像した被写体像を撮像素子２ａにより撮像して明時画像データを取得する明時画像撮像部と、撮像素子２ａをメカニカルシャッタ１３により遮光して明時画像データを取得したのと同一の露光時間の暗時画像データを取得する暗時画像撮像部と、を兼ねたものとなっている。これら明時画像データおよび暗時画像データは、本実施形態においては、カメラ制御部１２および露光制御部９の制御に基づいて時分割露光を行うことにより、時分割明時画像データおよび時分割暗時画像データとして取得されるようになっている。

画像処理部３は、撮像部２から出力される画像信号に、デモザイキングや色補正、エッジ補正、色空間変換、ガンマ変換などの各種の画像処理を行うものである。この画像処理部３は、撮像素子２ａの全撮像領域の画像の一部を切り出す画像切出部３ａを備えている。この画像切出部３ａは、ブレ検出部７により検出されたブレに基づいて明時画像データからブレが補正された切出明時画像データを切り出す電子的ブレ補正部と、暗時画像データから切出明時画像データと同じ切り出し位置の切出暗時画像データを切り出す暗時画像切出部と、を兼ねたものとなっている。また、画像処理部３は、切出明時画像データから切出暗時画像データを減算することにより、暗電流が補正された補正画像データを生成する暗電流補正部として機能する。さらに、画像処理部３は、時分割露光で取得された画像データを加算する処理も行う。

ＡＦ評価値演算部４は、撮像部２から出力された画像信号に基づいてＡＦ評価値を算出し、カメラ制御部１２へ出力するものである。すなわち、この撮像装置は、例えば像面位相差ＡＦ、あるいはコントラストＡＦによりオートフォーカスを行うように構成されたものとなっている。なお、像面位相差ＡＦを行う場合には、撮像素子２ａも位相差検出用画素を備えた構成となっている。

表示部５は、画像処理部３により表示用に画像処理された画像信号に基づき、画像を表示するものである。この表示部５は、ライブビュー表示（ライブバルブ表示を含む）や静止画像表示を行うとともに、この撮像装置に係る各種の情報等も表示するようになっている。

メモリカード６は、画像処理部３により記録用に画像処理された画像信号を保存するための記録媒体である。

ブレ検出部７は、加速度センサ等を有して構成され、この撮像装置のブレを検出してカメラ制御部１２へ出力するものである。

メカニカルブレ補正部８は、カメラ制御部１２の制御の下に、ブレ検出部７により検出されたブレと画像切出部３ａの切出領域の位置（切出位置）とに基づいて、撮像素子２ａ（より詳しくは、撮像素子２ａの切出領域）と被写体像との相対的なブレを機械的に補正するものである。具体的に、メカニカルブレ補正部８は、ブレ検出部７により検出されたブレのベクトルから画像切出部３ａによる切出位置のベクトル（標準切出位置を規準とした現在の切出位置のベクトル）を減算した結果のブレのベクトルを相殺するように、レンズ１と撮像素子２ａとの少なくとも一方を移動させてブレを軽減する。なお、以下においては簡単のために、撮像素子２ａを移動させてブレを軽減するものとして説明するが、レンズ１を移動させてブレを軽減しても良いし、撮像素子２ａの移動とレンズ１の移動とを併用してブレを軽減しても構わない。メカニカルブレ補正部８は、撮像素子２ａのメカブレ補正量をカメラ制御部１２へ出力するようになっている。

露光制御部９は、カメラ制御部１２により決定されたシャッタ速度（露光時間）に基づいて、該カメラ制御部１２の制御の下に、メカニカルシャッタ１３と撮像素子２ａの素子シャッタとを制御し画像を取得するものである。露光制御部９は、カメラ制御部１２により決定された絞り値に基づいて、レンズ１に含まれる絞りの制御等も行うようになっている。また、露光制御部９は、撮像素子２ａ、メカニカルシャッタ１３、および絞りの駆動情報をカメラ制御部１２へ出力するようになっている。

フォーカス制御部１０は、焦点を調節するためにレンズ１を駆動するものである。すなわち、フォーカス制御部１０は、ＡＦ評価値演算部４からＡＦ評価値を受けたカメラ制御部１２の制御に基づいて、レンズ１に含まれるフォーカスレンズを駆動し、撮像素子２ａに結像される被写体像が合焦に至るようにする。また、フォーカス制御部１０は、レンズ位置などのレンズ駆動情報をカメラ制御部１２へ出力するようになっている。

カメラ操作部１１は、この撮像装置に対する各種の操作入力を行うための操作部である。このカメラ操作部１１には、撮像装置の電源をオン／オフするための電源スイッチ、静止画撮影、動画撮影などを指示入力するためのレリーズボタン、撮影モードや再生モード、ライブビューモードなどを設定するためのモードボタン等の操作部材が含まれている。ここに、モードボタンにより設定可能な撮影モードは、大きく分けて静止画撮影モードと動画撮影モードとがあり、静止画撮影モードにおいてはオート、絞り優先、シャッタ速度優先、マニュアル、バルブ等の各撮影モードをさらに設定可能となっている。そしてライブバルブ撮影は、バルブ撮影モードにおいてライブビューモードが設定されているときに、例えばレリーズボタンの入力操作に応じて実行される。

カメラ制御部１２は、フォーカス制御部１０からのレンズ駆動情報やＡＦ評価値演算部４からのＡＦ評価値、露光制御部９からの各駆動情報、ブレ検出部７からの撮像装置のブレ、メカニカルブレ補正部８からのメカブレ補正量、画像処理部３からの情報、カメラ操作部１１からの操作入力などに基づいて、画像処理部３、メモリカード６、メカニカルブレ補正部８、露光制御部９、フォーカス制御部１０等を含むこの撮像装置全体を制御するものである。また、カメラ制御部１２は、図示しない内部メモリを備えており、後述する時分割切出明時画像データの各切出位置を記憶するようになっている。

次に、図２〜図５を参照して、撮像装置のブレにより発生する画像中の被写体像のブレについて説明する。ここに図２は被写体像が撮像素子２ａに結像している様子を示す図、図３は図２よりも撮像装置がやや左上に移動したときに被写体像が撮像素子２ａに結像している様子を示す図、図４は図２および図３よりも撮像装置がさらに左上に移動したときに被写体像が撮像素子２ａに結像している様子を示す図、図５は図２〜図４の状態で撮像された各時分割画像を加算して得られる加算画像の様子を示す図である。

まず、図２に示すように、被写体ＯＢＪ上の一点の像が、レンズ１により撮像素子２ａ上のある点に結像しているものとする。なお、図２において、被写体ＯＢＪ上の一点からレンズ１の開口中心を通って撮像素子２ａに至る主光線を一点鎖線で示している（なお、比較のために図３および図４に示す一点鎖線も、この図２に示す位置関係における主光線である（つまり、図３または図４に示す位置関係における主光線ではない））。

この図２に示す状態よりも撮像装置がやや左上に移動すると、図３に示すように、上述した被写体ＯＢＪ上の一点の像は、撮像素子２ａの撮像面上において図２によりもやや左上の位置に結像する。

図２および図３よりも撮像装置がさらに左上に移動すると、図４に示すように、上述した被写体ＯＢＪ上の一点の像は、撮像素子２ａの撮像面上において、図３よりもさらに左上の位置に結像する。

従って、図２〜図４の状態でそれぞれ撮像された画像における電子的な被写体像Ｉｏｂｊ１〜Ｉｏｂｊ３の位置は各異なるために、加算して得られる加算画像ＩＭＧは図５に示すように被写体がブレた画像となる。ここで、撮像装置が左上に移動しているために、撮像範囲内の被写体像は図５に示すように右下にずれて写ることになる。

次に、図６〜図９を参照して、メカニカルブレ補正部８により撮像素子２ａを駆動してブレ補正を行う場合について説明する。ここに図６は図２に対応するメカブレ補正の初期状態を示す図、図７は図３に対応して撮像素子２ａをやや左上に移動しメカブレ補正を行うときの様子を示す図、図８は図４に対応して撮像素子２ａをさらに左上に移動しメカブレ補正を行うときの様子を示す図、図９は図６〜図８の状態で撮像された各時分割画像を加算して得られる加算画像の様子を示す図である。なお、図６〜図８においては、撮像素子２ａのセンサシフト移動範囲ＳＡを２点鎖線により示している。また、図６〜図８は横方向から見た模式図であるため、左右方向については明示されていないが、撮像部２は左右方向にも移動可能であり、上下方向と同様に左右方向にもセンサシフト移動範囲ＳＡが存在する。

図６に示す初期状態はメカブレ補正を開始する時点であるために、撮像素子２ａはまだシフトされておらず、センサシフト移動範囲ＳＡの中央に位置している。

図７に示す状態では、図３に示したように撮像面の左上方向に移動した被写体像を、図６に示した撮像面上における被写体像の位置と同じ位置に結像させるために、撮像素子２ａをセンサシフト移動範囲ＳＡの左上の位置にシフトしている。

図８に示す状態では、図４に示したように撮像面のさらに左上方向に移動した被写体像を、図６に示した撮像面上における被写体像の位置と同じ位置に結像させるために、撮像素子２ａをセンサシフト移動範囲ＳＡのさらに左上の位置にシフトしている。

こうして、図６〜図８の状態でそれぞれ撮像された画像における被写体像Ｉｏｂｊ１〜Ｉｏｂｊ３の位置はほぼ同一となるために、加算して得られる加算画像ＩＭＧは図９に示すように被写体像のブレが低減された画像となる。

続いて、図１０〜図１２を参照して、画像の切り出しを行う場合における、撮像装置のブレにより発生する画像中の被写体像のブレについて説明する。ここに図１０は図２に対応する画像中の被写体像のブレの様子を示す図、図１１は図３に対応する画像中の被写体像のブレの様子を示す図、図１２は図４に対応する画像中の被写体像のブレの様子を示す図である。なお、図１０〜図１２および後述する図１３〜図１５においては、撮像素子２ａの全撮像領域をＥＡ、切出領域をＩＡによりそれぞれ示している。

図１０〜図１２においてはブレ補正を行っていないために、全撮像領域ＥＡの中心と同一位置を中心とする標準切出位置の切出領域ＩＡは変更されない。従って、図１０〜図１２における被写体像Ｉｏｂｊ１〜Ｉｏｂｊ３の位置は図２〜図４における位置（図５参照）と同一であり、切出領域ＩＡが記録画像や表示画像として用いられることになるために幾らか電子ズームでズームアップした状態の画像となる点のみが異なる。従って、図１０〜図１２の切出領域ＩＡを加算して得られる加算画像は、ややズームアップされている点を除いて、図５に示したような被写体がブレた画像と同様である。

次に、図１３〜図１５を参照して、電子的ブレ補正部として機能する画像切出部３ａによりブレ補正を行う場合について説明する。ここに図１３は図１０に対応する電子的ブレ補正の初期状態を示す図、図１４は図１１に対応して切出領域ＩＡをやや右下へ移動し電子的ブレ補正を行うときの様子を示す図、図１５は図１２に対応して切出領域ＩＡをさらに右下へ移動し電子的ブレ補正を行うときの様子を示す図である。

図１３〜図１５においては、図１０〜図１２に対応した全撮像領域ＥＡにおける被写体像Ｉｏｂｊ１〜Ｉｏｂｊ３の移動に応じて、切出領域ＩＡにおける被写体像Ｉｏｂｊ１〜Ｉｏｂｊ３の位置が同一となるように切出領域ＩＡをシフトしたものである。このような図１３〜図１５の切出領域ＩＡを加算して得られる加算画像は、ややズームアップされている点を除いて、図９に示したような被写体像のブレが低減された画像と同様である。

そして本実施形態においては、上述したようなメカニカルブレ補正部８による機械的なブレ補正と、画像切出部３ａによる電子的なブレ補正と、を組み合わせることで強力なブレ補正を実現し、長時間露光となるライブバルブ撮影を行うようになっている。

このようなライブバルブ撮影について、図１６〜図２１を参照して説明する。ここに、図１６は明時画像をライブバルブ撮影するときの動作を示すタイミングチャート、図１７は暗時画像をライブバルブ撮影するときの動作を示すタイミングチャート、図１８は時分割切出明時画像データと時分割切出暗時画像データとに基づき暗電流が補正された補正画像データを生成する様子を示す図、図１９はブレ補正ライブバルブの処理を示すフローチャート、図２０は図１９のステップＳ２における明時撮影の処理を示すフローチャート、図２１は図１９のステップＳ３における暗時撮影の処理を示すフローチャートである。

図１９に示すように、撮像装置がライブバルブ撮影モードに設定されてこのブレ補正ライブバルブの処理が開始されると、カメラ操作部１１のレリーズボタンによりライブバルブ撮影の開始が指示されるのを待機する（ステップＳ１）。

ここでレリーズ操作が行われた場合には、図２０に示す明時撮影の処理を行う（ステップＳ２）。この明時撮影の処理は、明時画像データを、露光時間を複数の分割露光時間に分割した複数枚の時分割明時画像データとして取得し、時分割明時画像データ毎にブレが補正された時分割切出明時画像データを切り出す処理である。

この明時撮影の処理に入ると、まず、メカニカルブレ補正部８によるメカブレ補正を開始する（ステップＳ１１）。

次に、図１６に示すように、メカニカルシャッタ１３を開いて（ステップＳ１２）、垂直同期信号ＶＤに同期してリセットパルスＲＳＴの印加を開始することにより露光を開始する（ステップＳ１３）。なお、この図１６にはリセットパルスＲＳＴがライン毎に順次印加されるローリング読み出しの例を示しているが、一括読み出しであっても勿論構わない。

そして、分割露光の回数をカウントするカウンタｎに１を設定し、第１回目の時分割露光に係るメカブレ補正量（水平方向補正量ΔＭｘ１、垂直方向補正量ΔＭｙ１）にそれぞれ０を設定するなどの初期設定を行う（ステップＳ１４）。このメカブレ補正量の初期値は、後段の暗時撮影において用いるために、カメラ制御部１２の内部メモリに補正量動作プロファイルとして記憶しておく。

そして、分割露光時間Ｔｅｘｐｎ（図１６に示す例では、Ｔｅｘｐ１〜Ｔｅｘｐ３の内の分割露光回数ｎに対応する時間）が経過するのを待機する（ステップＳ１５）。この分割露光時間Ｔｅｘｐｎが経過している最中もメカニカルブレ補正部８が動作してメカブレ補正が継続的に行われているために、露光中の画像のブレは低減されている。

分割露光時間Ｔｅｘｐｎが経過したら、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより第ｎ回目の時分割露光に係る画素の読み出しを行うとともに、読み出し後の画素における次の（つまり、（ｎ＋１）回目の）時分割露光を開始する（ステップＳ１６）。

このステップＳ１６において撮像データとして読み出されるのは、第ｎ回目の時分割露光に係る全撮像領域ＥＡの時分割明時画像データである。

ステップＳ１６の処理を行ったら、メカニカルブレ補正部８をリセットして初期位置に戻すとともに（ステップＳ１７）、リセット直前のメカニカルブレ補正部８の駆動量を、次の時分割露光における切出位置として用いるために（さらに、後段の暗時撮影において用いるために）、カメラ制御部１２の内部メモリにメカブレ補正量（ΔＭｘ（ｎ＋１），ΔＭｙ（ｎ＋１））として記憶しておく（ステップＳ１８）。このメカブレ補正量（ΔＭｘ（ｎ＋１），ΔＭｙ（ｎ＋１））も、上述した補正量動作プロファイルである。

このような処理を行うのは、次の理由による。リアルタイムのブレ補正を電子的ブレ補正で行おうとすると、ブレの周期よりも十分に短い時間間隔を時分割露光時間として画像を時分割読み出ししなければならず、読み出し回数が多くなって消費電力が増すとともに、読出ノイズが増加してしまうことになる。そこで、リアルタイムのブレ補正はメカニカルブレ補正部８により行うことにし、各時分割露光中にメカニカルブレ補正部８が十分な機能を発揮することができるように、１枚の時分割明時画像データが取得される毎に（つまり、各時分割露光を開始する時点で）メカニカルブレ補正部８をリセットして初期位置に戻す。そして、リセット直前までメカニカルブレ補正が担っていたメカブレ補正量は電子的ブレ補正により担うこととする。これにより、メカニカルブレ補正の特長と電子的ブレ補正の特長とをうまく組み合わせて、消費電力や読出ノイズを増加させることなく、強力なブレ補正をリアルタイムで行うことが可能となる。

こうして、第ｎ回目の時分割露光に係るメカニカルブレ補正部８の駆動量である画像切出位置（ΔＢｘｎ，ΔＢｙｎ）を、ｎ＝１のときにはステップＳ１４において初期設定されたメカブレ補正量（ΔＭｘ１，ΔＭｙ１）、ｎ≧２のときには第（ｎ−１）回目の時分割露光が終了する直前のメカブレ補正量（ΔＭｘｎ，ΔＭｙｎ）に設定して、全撮像領域ＥＡの時分割明時画像データから切出領域ＩＡの時分割切出明時画像データＡｎ（図１６に示す例では、Ａ１〜Ａ３の内の分割露光回数ｎに対応する時分割切出明時画像データ）を切り出す電子ブレ補正を行う（ステップＳ１９）。ここで（ΔＢｘｎ，ΔＢｙｎ）は、前回の切り出し位置に対する差分切り出し位置である。つまり、前回切り出し位置に対して切り出し位置を（ΔＢｘｎ，ΔＢｙｎ）ずらして切り出す。ただしここで、画像切出位置がピクセルを単位とし、メカブレ補正量がμｍを単位とするなどの単位系の相違等がある場合には、適宜の定数を乗算することはいうまでもない。このときには、時分割切出明時画像データＡｎの切出位置は、第（ｎ−１）回目の時分割露光を終了してメカニカルブレ補正部８をリセットする直前のメカニカルブレ補正部８の駆動量に相当する位置である。

そして、画像処理部３により、切り出した時分割切出明時画像データＡｎを過去に取得した時分割切出明時画像データＡ１〜Ａ（ｎ−１）と加算して、表示用の画像処理を行い、表示部５に表示する（ステップＳ２０）。このような処理を行うことにより、露光開始時点から露光時間（Ｔｅｘｐ１＋…＋Ｔｅｘｐｎ）だけの露光を行ったのに等しい画像が表示部に表示されることになり、バルブ撮影時に形成されていく画像の様子をライブビューで確認することが可能となる。しかも、表示される画像は、ブレが低減されたものとなっている。

その後、レリーズボタンが例えば押圧されない状態に移行したか否か等に基づき、明時撮影の処理を終了するか否かを判定する（ステップＳ２１）。

ここで明時撮影の処理をまだ終了しない場合には、ｎの値を１つ増加させてから（ステップＳ２２）、ステップＳ１５へ戻って上述したような処理を繰り返して行う。

また、ステップＳ２１において、明時撮影の処理を終了すると判定された場合には、カウンタｎの値を明時撮影時のカウンタ最大数ｎｍａｘとしてカメラ制御部１２の内部メモリに記憶するとともに、電力消費量を低減するためにメカブレ補正部８の駆動を停止してステップＳ１１で開始したメカブレ補正を終了し（ステップＳ２３）、図１９に示したブレ補正ライブバルブの処理へ復帰する。ここで明時撮影終了はレリーズスイッチの操作によって指示され、分割露光時間はこのレリーズ操作のタイミングで決定される。よって、一般的に最後の分割露光時間は他の分割露光時間と異なることになる。

再び図１９の処理に戻ると、次に、図２１に示す暗時撮影の処理を行う（ステップＳ３）。この暗時撮影の処理は、ステップＳ２の処理により取得した複数枚の時分割明時画像データと同一の複数の分割露光時間に分割して時分割暗時画像データを取得し、時分割明時画像データに各対応する暗時画像データを構成する時分割暗時画像データ毎に、時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す処理である。

この暗時撮影の処理に入ると、まず図１６の右端に示すように、メカニカルシャッタ１３を閉じる（ステップＳ３１）。従って、図１７においても、メカニカルシャッタ１３は引き続き閉じた状態となっている。

この暗時状態で、垂直同期信号ＶＤに同期してリセットパルスＲＳＴの印加を開始することにより露光を開始する（ステップＳ３２）。

次に、分割露光の回数をカウントするカウンタｎに１を設定するなどの初期設定を行う（ステップＳ３３）。

続いて、第ｎ回目の分割露光における、明時撮影と同一の分割露光時間Ｔｅｘｐｎが経過するのを待機する（ステップＳ３４）。

分割露光時間Ｔｅｘｐｎが経過したら、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより第ｎ回目の時分割露光に係る画素の読み出しを行うとともに、読み出し後の画素における次の（つまり、（ｎ＋１）回目の）時分割露光を開始する（ステップＳ３５）。

ステップＳ３５の処理を行ったら、暗時撮影の第ｎ回目の時分割露光に係る画像切出位置（ΔＤｘｎ，ΔＤｙｎ）を、明時撮影の第ｎ回目の時分割露光に係る画像切出位置（ΔＢｘｎ，ΔＢｙｎ）に、つまり、図２０のステップＳ１４およびステップＳ１８においてカメラ制御部１２の内部メモリに明時撮影時の電子ブレ補正の補正量動作プロファイルとして記憶しておいたメカブレ補正量（ΔＭｘｎ，ΔＭｙｎ）に設定して、全撮像領域ＥＡの時分割暗時画像データから切出領域ＩＡの時分割切出暗時画像データＢｎ（図１７に示す例では、Ｂ１〜Ｂ３の内の分割露光回数ｎに対応する時分割暗時画像データ）を切り出す暗時画像切出を行う（ステップＳ３６）。ここで（ΔＤｘｎ，ΔＤｙｎ）は、前回の切り出し位置に対する差分切り出し位置である。つまり、前回切り出し位置に対して切り出し位置を（ΔＤｘｎ，ΔＤｙｎ）ずらして切り出す。

その後、カウンタｎが明時撮影時のカウンタ最大数ｎｍａｘに達したか否かに基づき、暗時撮影の処理を終了するか否かを判定する（ステップＳ３７）。

ここで暗時撮影の処理をまだ終了しない場合には、ｎの値を１つ増加させてから（ステップＳ３８）、ステップＳ３４へ戻って上述したような処理を繰り返して行う。

また、ステップＳ３７において、暗時撮影の処理を終了すると判定された場合には、図１９に示したブレ補正ライブバルブの処理へ復帰する。

再び図１９の処理に戻ると、図１８に示すように、時分割切出明時画像データＡ１〜Ａｎｍａｘを加算することにより、全露光時間Ｔｅｘｐ＝（Ｔｅｘｐ１＋Ｔｅｘｐ２＋…＋Ｔｅｘｐｎｍａｘ）の加算明時画像データＡをＡ＝Ａ１＋Ａ２＋…＋Ａｎｍａｘのように算出する（ステップＳ４）。

同様に、図１８に示すように、時分割切出暗時画像データＢ１〜Ｂｎｍａｘを加算することにより、全露光時間Ｔｅｘｐ＝（Ｔｅｘｐ１＋Ｔｅｘｐ２＋…＋Ｔｅｘｐｎｍａｘ）の加算暗時画像データＢをＢ＝Ｂ１＋Ｂ２＋…＋Ｂｎｍａｘのように算出する（ステップＳ５）。なお、図１８には、加算暗時画像データＢ中に被写体像を１点鎖線で示しているが、この被写体像は参考のために記載したものであり、実際に露光されるものではない。

そして、暗電流補正部として機能する画像処理部３は、加算明時画像データＡから加算暗時画像データＢを減算することにより、暗電流ノイズを除去した補正画像データＡ’をＡ’＝Ａ−Ｂのように算出する（ステップＳ６）。ここに、「暗電流ノイズの除去」は、暗電流ノイズを完全に除去する場合だけでなく、暗電流ノイズを一部除去する場合も含み、「暗電流ノイズの低減（軽減）」と言い替えることも可能である。

なお、ここでは、時分割切出明時画像データＡ１〜Ａｎｍａｘ同士、および時分割切出暗時画像データＢ１〜Ｂｎｍａｘ同士をそれぞれ加算してから暗電流ノイズを除去した補正画像データＡ’を算出したが、この演算順序に限るものではなく、同一の結果が得られればどのような順序で演算を行っても構わない。例えば、暗電流ノイズを除去した時分割明時画像データを（Ａ１−Ｂ１），（Ａ２−Ｂ２），…，（Ａｎｍａｘ−Ｂｎｍａｘ）のようにまず算出してから、これらを加算することにより暗電流ノイズを除去した補正画像データＡ’を得るようにしても構わない。

その後、図１８に示すように補正画像データＡ’にゲインＧを乗算して、増幅された補正画像データＡ”を算出し（ステップＳ７）、画像処理部３により各種の画像処理を行ってメモリカード６に記録し、あるいは表示部５に撮影結果として得られた画像を表示して（ステップＳ８）、このブレ補正ライブバルブの処理を終了する。

このような実施形態１によれば、明時画像を時分割で撮影して表示するようにしたために、バルブ撮影時に形成されていく画像の様子をライブビューで確認することが可能となる。

また、メカニカルブレ補正はメカブレ補正量がセンサシフト移動範囲ＳＡの境界に達したところで限界となり、電子的ブレ補正は切出領域ＩＡが全撮像領域ＥＡの境界に達したところで限界となるが、これらのメカニカルブレ補正と電子的ブレ補正とを組み合わせたために、強力なブレ補正を実現して手持ち撮影にも対応することが可能となる。加えて、本実施形態の構成によれば、メカニカルブレ補正のみで強力なブレ補正を実現する場合のようなコストの増加および撮像装置の大型化を抑制することができる。

さらに、分割露光中のリアルタイムのブレ補正をメカニカルブレ補正により行い、１回の分割露光が終了する毎にメカニカルブレ補正をリセットして、リセット直前のメカブレ補正量を電子的ブレ補正により担うようにしたために、リアルタイムのブレ補正を電子的ブレ補正により行う必要がなく消費電力や読出ノイズの増加を抑制することができる。

そして、明時画像から暗時画像を減算するようにしたために、暗電流ノイズを除去した画像を得ることができる。

このとき、明時画像の電子的ブレ補正の切出位置を記憶して、暗時画像についても明時画像と同じ切出位置から切り出すようにしたために、明時画像と暗時画像とで固定パターンノイズ（ＦＰＮ）の位置がずれることがなくなり、補正を高精度に行うことが可能となる。

こうして、手持ちによるライブバルブ撮影を、撮像装置を大型化させることなく低コストで実現することが可能となる。
［実施形態２］

図２２および図２３は本発明の実施形態２を示したものであり、図２２は暗時画像をライブバルブ撮影するときの動作を示すタイミングチャート、図２３は図１９のステップＳ３における暗時撮影の処理を示すフローチャートである。

この実施形態２において、上述の実施形態１と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。

本実施形態２は、上述した実施形態１に対して、暗時画像を取得して加算暗時画像データＢを得るまでの処理を異ならせるようにしたものである。

この暗時撮影の処理は、暗時画像切出部として機能する画像切出部３ａにより、暗時画像データの画素値を、露光時間Ｔｅｘｐに対する分割露光時間Ｔｅｘｐｎの比である露光時間比に分割して時分割暗時画像データを取得し、時分割明時画像データに各対応する暗時画像データを構成する時分割暗時画像データ毎に、時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す処理である。

すなわち、図１９のステップＳ３において暗時撮影の処理に入ると、本実施形態においては図２２に示す処理を実行する。

するとまず、ステップＳ３１と同様にメカニカルシャッタ１３を閉じ（ステップＳ４１）、ステップＳ３２と同様に露光を開始する（ステップＳ４２）。

そして、本実施形態では、分割露光時間Ｔｅｘｐｎに代えて、全露光時間Ｔｅｘｐが経過するのを待機する（ステップＳ４３）。すなわち、本実施形態では暗時画像に関しては分割露光を行わず、全露光時間Ｔｅｘｐの露光を１回で行うようになっている。

全露光時間Ｔｅｘｐが経過したら、垂直同期信号ＶＤに同期して読出パルスＲＤの印加を開始することにより画素の読み出しを行う（ステップＳ４４）。

続いて、得られた全露光時間Ｔｅｘｐの暗時画像データを、明時撮影時のカウンタ最大数ｎｍａｘ個に分割して、複数枚の時分割暗時画像データを取得する（ステップＳ４５）。この分割は、画素数等は変更することなく画素値のみを分ける分割である。つまり、時分割暗時画像データは、暗時画像切出部として機能する画像切出部３ａにより、暗時画像データの各画素の画素値を、全露光時間Ｔｅｘｐに対する分割露光時間Ｔｅｘｐｎの比である露光時間比に分割して取得される。

その後、時分割暗時画像データの処理枚数をカウントするためのカウンタｎに１を設定するなどの初期設定を行う（ステップＳ４６）。

そして、第ｎ枚目の時分割暗時画像データの画像切出位置（ΔＤｘｎ，ΔＤｙｎ）を、明時撮影の第ｎ回目の時分割露光に係る画像切出位置（ΔＢｘｎ，ΔＢｙｎ）、つまりメカブレ補正量（ΔＭｘｎ，ΔＭｙｎ）に設定して、全撮像領域ＥＡの時分割暗時画像データから切出領域ＩＡの時分割切出暗時画像データＢｎを切り出す暗時画像切出を行う（ステップＳ４７）。

その後、カウンタｎが明時撮影時のカウンタ最大数ｎｍａｘに達したか否かに基づき、暗時撮影の処理を終了するか否かを判定する（ステップＳ４８）。

ここで暗時撮影の処理をまだ終了しない場合には、ｎの値を１つ増加させてから（ステップＳ４９）、ステップＳ４７へ戻って上述したような処理を繰り返して行う。

また、ステップＳ４８において、暗時撮影の処理を終了すると判定された場合には、図１９に示したブレ補正ライブバルブの処理へ復帰する。

なお、上述した実施形態１においては、暗時撮影に先だって明時撮影を行っていたが、これは、明時撮影を先に行わないと、暗時撮影における分割露光時間および切出領域が決定されないためであった。しかし、本実施形態の場合には、全ての時分割明時画像データおよび暗時画像データが取得された後に、暗時画像データを分割して時分割暗時画像データを取得する手順であるために、明時撮影に先だって暗時撮影を行うことも可能となっている。

このような実施形態２によれば、上述した実施形態１とほぼ同様の効果を奏するとともに、暗時画像の読み出し回数が１回で済むために、読み出し時の電力を削減することができる。さらに、上述した実施形態１の処理では明時画像の読出回数がｎｍａｘ回、暗時画像の読出回数がｎｍａｘ回の合計２ｎｍａｘ回であったが、本実施形態の処理では、明時画像の読出回数がｎｍａｘ回、暗時画像の読出回数が１回の合計（ｎｍａｘ＋１）回となるために、読み出しノイズを低減することが可能となる。読み出しノイズ量が読み出し回数の平方根に比例するノイズモデルを例に挙げれば、実施形態１のノイズ量√（２ｎｍａｘ）に対する実施形態２のノイズ量√（ｎｍａｘ＋１）は、ｎｍａｘが大きくなるほど１／√２≒０．７に漸近するために、ｎｍａｘが大きい値であればおよそ３割の読み出しノイズを削減することができることになる。また、実施形態１，２では、メカニカルブレ補正を毎回、初期位置にリセットするような処理として説明したが、初期位置へのリセットを毎回行わなければならないわけではないことは言うまでもない。つまり、初期位置にリセットするのに代えて、メカニカルブレ補正駆動範囲の初期位置（中心）に近い領域側に（初期位置寄りに）セットすることによっても、ほぼ同様の目的を達成することが可能である。これは例えば、メカニカルブレ補正の駆動初期位置にリセットするための駆動時間が露光時間に対して比較的長い場合には、初期位置まで戻すことなく初期位置に近付ける駆動だけを行って、駆動時間を制限すべき場合も発生するためである。
［変形技術］

次に、上述した各実施形態の変形技術について説明する。ここでも、上述の各実施形態と同様である部分については説明を適宜省略する。

上述において、補正画像の算出に関して、
（Ａ１＋Ａ２＋…＋Ａｎｍａｘ）−（Ｂ１＋Ｂ２＋…＋Ｂｎｍａｘ）
＝（Ａ１−Ｂ１）＋（Ａ２−Ｂ２）＋…＋（Ａｎｍａｘ−Ｂｎｍａｘ）
が成り立つために、左辺の演算に代えて右辺の演算を行っても良いことを述べた。

これらの数式に表れるＡｎ，Ｂｎ（ここに、ｎ＝１，２，…，ｎｍａｘ）は、それぞれ切出領域ＩＡから得られた時分割切出明時画像データ、時分割切出暗時画像データであり、全撮像領域ＥＡから得られる切り出し前の時分割明時画像データをαｎ、時分割暗時画像データをβｎで表すとする。

また、切り出しは、ｎの数字が同じであればαｎとβｎとで切出領域が同一となるために、ｎに対応する切り出し演算子（作用素）を「ｆｎ・」で表すものとする。さらに、ｎ＝１〜ｎｍａｘまでの加算をΣにより表すことにする。

すると、上記数式は、次のように書き換えられる。
Σｆｎ・αｎ−Σｆｎ・βｎ＝Σ（ｆｎ・αｎ−ｆｎ・βｎ）

この数式（の例えば右辺）は、さらに、次のように変形可能である。
Σ（ｆｎ・αｎ−ｆｎ・βｎ）＝Σｆｎ・（αｎ−βｎ）

従って、全撮像領域ＥＡから得られる時分割明時画像データαｎから、全撮像領域ＥＡから得られる時分割暗時画像データβｎを減算して暗電流ノイズを低減した補正時分割画像データを取得した後に、この補正時分割画像データに対して切り出し演算「ｆｎ・」を行って電子的ブレ補正を行った切出補正時分割画像データを取得しても、同様の結果を得ることが可能である。この切出補正時分割画像データは、その後に加算されて補正画像データが生成される。

ただしこの場合には、暗時撮影と明時撮影との内の、先に撮影が行われる方の時分割明時画像データαｎまたは時分割暗時画像データβｎを全て記憶しておくことが必要である。この全時分割画像を記憶するための複数フレーム分のバッファメモリ等でなる記憶部としては、メモリカード６を利用することが可能であり、あるいは撮像装置内に専用の記憶部を設けても構わない。なお、時分割暗時画像データβｎは、上述した実施形態１のように時分割露光を行って取得したものであっても良いし、上述した実施形態２のように１回の露光を行った後に分割して取得したものであっても構わない。

この変形技術の場合の構成は、例えば次のようになる。

［構成１］
露光時間を複数の分割露光時間に分割して結像した被写体像を撮像素子により撮像し複数枚の時分割明時画像データを取得する明時撮影と、上記撮像素子を遮光して上記露光時間の暗時画像データを取得する暗時撮影と、を任意の順序で行う撮像部と、
上記明時撮影と上記暗時撮影との内の、先行して行われた方の画像データを少なくとも記憶する記憶部と、
上記明時撮影時のブレを検出するブレ検出部と、
上記時分割明時画像データから、上記時分割明時画像データに各対応する上記暗時画像データを構成する時分割暗時画像データを減算することにより、暗電流が補正された補正時分割画像データを取得する暗電流補正部と、
上記ブレ検出部により検出されたブレに基づいて、上記補正時分割画像データ毎にブレが補正された切出補正時分割画像データを切り出す電子的ブレ補正部と、
切出補正時分割画像データを加算して補正画像データを生成する加算部と、
を備えたことを特徴とする撮像装置。

［構成２］
上記時分割暗時画像データは、上記撮像部により、複数枚の上記時分割明時画像データと同一の複数の分割露光時間に分割して取得されたものであることを特徴とする構成１に記載の撮像装置。

［構成３］
上記暗時画像データの画素値を、上記露光時間に対する上記分割露光時間の比である露光時間比に分割して上記時分割暗時画像データを取得する分割部をさらに備えたことを特徴とする構成１に記載の撮像装置。

これらの構成における具体的な構成としては、例えば、撮像部は撮像部２が対応し、記憶部は上述したようにメモリカード６や撮像装置内に設けた専用の記憶部等が対応し、加算部は画像処理部３が対応し、分割部は画像処理部３が対応する。また、撮像装置としての構成１〜３を説明したが、撮像装置と同様の処理を行う撮像方法であっても良い。

この変形技術によっても、上述した各実施形態とほぼ同様の効果を奏することができる。

なお、上述した各実施形態等では、メカブレ補正と電子的ブレ補正との両方を用いる例を説明した。しかし、電子的ブレ補正は、ブレの典型的な周期よりも十分に短い時間を時分割露光時間とする前提の下で、全撮像領域ＥＡに対する切出領域ＩＡの大きさをより小さくすれば、より強力なブレ補正能力を獲得することができる。従って、切出領域ＩＡが小さくなっても良いのであれば、つまり画角が狭くなったり記録画像の画素数が少なくなったりしても構わないのであれば、電子的ブレ補正のみでも上述した各実施形態等とほぼ同様の効果を奏することができる。従ってこの場合には、電子的ブレ補正に、メカブレ補正を併用しなくても構わない。そして、この場合には、手持ちによるライブバルブ撮影を、撮像装置を大型化させることなく低コストで実現することができるだけでなく、メカブレ補正が不要であるために、より一層の低コスト化を図ることができる。

また、上述では主として撮像装置について説明したが、撮像装置と同様の処理を行う撮像方法であっても良いし、撮像装置と同様の処理をコンピュータに実行させるための撮像プログラム、該撮像プログラムを記録するコンピュータにより読み取り可能な一時的でない記録媒体、等であっても構わない。

本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明の態様を形成することができる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除しても良い。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能であることは勿論である。

１…レンズ
２…撮像部
２ａ…撮像素子
３…画像処理部
３ａ…画像切出部
４…ＡＦ評価値演算部
５…表示部
６…メモリカード
７…ブレ検出部
８…メカニカルブレ補正部
９…露光制御部
１０…フォーカス制御部
１１…カメラ操作部
１２…カメラ制御部
１３…メカニカルシャッタ

Claims (3)

1. 結像した被写体像を、１回の撮影における露光時間を複数の分割露光時間に分割して撮像素子により撮像し、複数枚の時分割明時画像データから構成される明時画像データを取得する明時画像撮像部と、
   上記撮像素子を遮光して、上記明時画像データを取得したのと同一の露光時間の暗時画像データを取得する暗時画像撮像部と、
   ブレを検出するブレ検出部と、
   上記ブレ検出部により検出されたブレに基づいて、上記時分割明時画像データ毎にブレが補正された時分割切出明時画像データを切り出す電子的ブレ補正部と、
   表示部と、
   上記明時画像撮像部が分割露光をする毎に、上記ブレが補正された後の時分割切出明時画像データを、過去に取得された時分割切出明時画像データと加算し、加算後の時分割切出明時画像データから表示用画像を生成して、上記表示部に表示させる画像処理部と、
   上記暗時画像データの画素値を、上記露光時間に対する上記分割露光時間の比である露光時間比に分割して、上記時分割明時画像データに各対応する上記暗時画像データを構成する時分割暗時画像データを取得し、上記時分割暗時画像データ毎に、上記時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す暗時画像切出部と、
   上記時分割切出明時画像データから上記時分割切出暗時画像データを減算することにより、暗電流が補正された補正画像データを生成する暗電流補正部と、
   を備えたことを特徴とする撮像装置。
2. 上記ブレ検出部により検出されたブレに基づいて、上記撮像素子と上記被写体像との相対的なブレを機械的に補正するメカニカルブレ補正部をさらに備え、
   上記メカニカルブレ補正部は、複数枚の上記時分割明時画像データのそれぞれを露光している最中に動作するとともに、１枚の時分割明時画像データが取得される毎に初期位置あるいは初期位置寄りにセットされ、
   上記電子的ブレ補正部は、初期位置あるいは初期位置寄りへのセット直前の上記メカニカルブレ補正部の駆動量に相当する切出位置の時分割切出明時画像データを、初期位置あるいは初期位置寄りへのセット後の上記時分割明時画像データが取得される際に切り出すことを特徴とする請求項１に記載の撮像装置。
3. 結像した被写体像を、１回の撮影における露光時間を複数の分割露光時間に分割して撮像素子により撮像し、複数枚の時分割明時画像データから構成される明時画像データを取得する明時画像撮像ステップと、
   上記撮像素子を遮光して、上記明時画像データを取得したのと同一の露光時間の暗時画像データを取得する暗時画像撮像ステップと、
   ブレを検出するブレ検出ステップと、
   上記ブレ検出ステップにより検出されたブレに基づいて、上記時分割明時画像データ毎にブレが補正された時分割切出明時画像データを切り出す電子的ブレ補正ステップと、
   上記明時画像撮像ステップが分割露光をする毎に、上記ブレが補正された後の時分割切出明時画像データを、過去に取得された時分割切出明時画像データと加算し、加算後の時分割切出明時画像データから表示用画像を生成して、表示部に表示させる画像処理ステップと、
   上記暗時画像データの画素値を、上記露光時間に対する上記分割露光時間の比である露光時間比に分割して、上記時分割明時画像データに各対応する上記暗時画像データを構成する時分割暗時画像データを取得し、上記時分割暗時画像データ毎に、上記時分割切出明時画像データと同じ切り出し位置の時分割切出暗時画像データを切り出す暗時画像切出ステップと、
   上記時分割切出明時画像データから上記時分割切出暗時画像データを減算することにより、暗電流が補正された補正画像データを生成する暗電流補正ステップと、
   を備えたことを特徴とする撮像方法。

Images