JP2010161453A - 赤外線照射式撮像装置 - Google Patents

Abstract

【課題】低照度下において、良好なホワイトバランス処理を施すことができる赤外線照射式装置を提供する。
【解決手段】赤外線撮像制御を行って撮像を行う場合に、赤外線撮像信号を色毎に可視光演算撮像信号と、赤外線演算撮像信号と、に分離する。また、可視光撮像信号に基づいて光源判別を行い、光源判別の結果に基づいてホワイトバランス撮像信号を生成し、ホワイトバランス撮像信号を色毎に積分し、可視光演算撮像信号の色バランスを整合して、色整合撮像信号を生成する。この色整合撮像信号に対して、光源判別の結果に基づいて、ホワイトバランス補正撮像信号を生成し、赤外線演算撮像信号とホワイトバランス補正撮像信号とに画像処理を施して、カラー画像信号を生成する。
【選択図】図１

Description

本発明は、低照度下の被写体に対して、赤外線を照射して撮像が可能である赤外線照射式撮像装置に関するものである。

ＣＣＤやＭＯＳ型センサ等の撮像素子（イメージセンサ）の分光感度特性は、人間の目と異なり、可視光成分だけでなく赤外線成分に対しても感度を有しているため、デジタルスチルカメラ、ムービーカメラ、医療用カメラ等の撮像装置では、この撮像素子の前面に赤外線カットフィルタを配置して可視光のみを受光するようにしている。

このような撮像装置では、赤外線カットフィルタを外して赤外線成分も受光するようにすれば、撮像素子に入射する光量が増大し、低照度下においても被写体を明るく撮像することが可能となる。しかしながら、赤外線の波長は人間の目で感知できない波長領域にあって、赤外線には本来の色情報がないので、赤外線成分を含んだ撮像画像はホワイトバランスが著しく劣化してしまう。そのために、通常の赤外線照射式撮像装置では、赤外線成分を含んだ撮像信号は輝度信号として扱われて、モノクロ画像が生成される。

近年、このような撮像装置を用いて、モノクロ画像ではなく実際の見た目に近いカラー画像を生成できるようにすることが市場から要求されている。

特許文献１には、赤外線カットフィルタが外部位置に配置されている場合には（ナイトショット撮影時には）、赤外成分を考慮した黒体カーブデータＬＢが読み出されて黒体カーブ制御が行われる。或いは、映像信号Ｒ，Ｇ，Ｂの比が１になるようにグレーワールド制御が行われる。これにより、撮影状況に応じて、最適なホワイトバランス制御が行われるとの記載がある。
特開２００５−１３０３１７号公報

しかしながら、前者の赤外成分を考慮した黒体カーブデータＬＢによる黒体カーブ制御は、可視光量と赤外線量との比率、及び／または、差分が不明であるままに、赤外線カットフィルタの配置によって黒体カーブデータＬＡ、ＬＢが選択されるので、この黒体カーブの最適化が為されていない。

また、後者のグレーワールド制御は、被写体の色に偏りがないことを前提とした制御であるため、被写体の色に偏りがある場合はホワイトバランスを適切に処理させることができない。

本発明は、これらの技術的課題に鑑みてなされたものであって、赤外線を照射することで低照度下の被写体を明るく撮像することを可能にする赤外線照射式撮像装置において、ホワイトバランスを適切に処理させ、色再現性の高いカラー画像を得られるようにすることを目的とする。

低照度下の被写体に対して、赤外線を照射して撮像が可能である赤外線照射式撮像装置であって、被写体に対して赤外線を照射する赤外線照射手段と、被写体を結像して光学像を生成する光学手段と、光学手段の光路上に対して進退可能な構造であって、光学像に含まれる赤外線を遮断して、可視光から成る光学像を生成するための赤外線カットフィルタと、被写体に対して赤外線を照射させずに、且つ、赤外線カットフィルタを光路上に対して挿入させる可視光撮像制御と、被写体に対して赤外線を照射して、且つ、赤外線カットフィルタを光路上から退出させる赤外線撮像制御と、を備える赤外線制御手段と、光学像を光電変換して色毎に可視光撮像信号、または、赤外線撮像信号を生成する撮像手段と、可視光撮像信号と赤外線撮像信号との比率、及び／または、差分に基づいて、赤外線撮像信号を色毎に可視光演算撮像信号と、赤外線演算撮像信号と、に分離して出力する色毎可視光演算分離手段と、可視光撮像信号に対して、可視光撮像制御時に照射されている光源が黒体の軌跡であるかどうかを判別する光源判別を有し、光源判別の結果に基づいてホワイトバランスを施して、ホワイトバランス撮像信号を生成する第１のホワイトバランス処理手段と、ホワイトバランス撮像信号を色毎に積分し、積分値の比率である可視光色毎比率に基づいて可視光演算撮像信号の色バランスを整合して、色整合撮像信号を生成する色バランス整合手段と、色整合撮像信号に対して、光源判別の結果に基づいてホワイトバランス補正を施し、ホワイト補正撮像信号を生成する第２のホワイトバランス処理手段と、ホワイト補正撮像信号と、赤外線演算撮像信号と、に画像処理を施して、カラー画像信号を生成する画像処理手段と、を具備する。

本発明によれば、低照度下の被写体に対して赤外線を照射して撮像する場合に於いて、その被写体に色の偏りがある場合であったとしても、良好なホワイトバランスが得られる効果がある。

以下、図面を参照して本発明の実施形態について説明する。

（第１の実施形態）
図１は、本発明の第１の実施形態による赤外線照射式撮像装置の構成を示すブロック図である。

図１に於いて、この赤外線照射式撮像装置は、赤外線発光ダイオード（赤外線照射手段）１と、レンズ（光学手段）２と、赤外線カットフィルタ３と、赤外線制御部（赤外線制御手段）４と、イメージセンサ（撮像手段）５と、ＲＧＢ毎可視光演算分離部（色毎可視光演算分離手段）６と、第１のホワイトバランス処理部（第１のホワイトバランス処理手段）７と、色バランス整合部（色バランス整合手段）８と、第２のホワイトバランス処理部（第２のホワイトバランス処理手段）９と、画像処理部（画像処理手段）１０と、より構成されている。

赤外線発光ダイオード１は、被写体１１に対して赤外線を照射するものである。レンズ２は、被写体１１を結像して光学像を生成するものである。赤外線カットフィルタ３は、レンズ２の光路上に対して進退可能な構造であって、光学像に含まれる赤外線を遮断して、可視光から成る光学像を生成するものである。

赤外線制御部４は、被写体１１に対して赤外線を照射させずに、且つ、赤外線カットフィルタ３を光路上に対して挿入させる可視光撮像制御と、被写体１１に対して赤外線を照射して、且つ、赤外線カットフィルタ３を光路上から退出させる赤外線撮像制御と、を備えるものである。イメージセンサ５は、光学像を光電変換してＲＧＢ各色毎に可視光撮像信号ＲＧＢｘｙ、または、ＲＧＢ各色毎に赤外線撮像信号ＲＧＢＩｘｙを生成するものである。

ＲＧＢ毎可視光演算分離部６は、可視光撮像信号ＲＧＢｘｙと赤外線撮像信号ＲＧＢＩｘｙとの比率、及び／または、差分に基づいて、赤外線撮像信号ＲＧＢＩｘｙをＲＧＢ各色毎に可視光演算撮像信号［ＲＧＢｘｙ］と、赤外線演算撮像信号［Ｉｘｙ］と、に分離して出力するものである。

この演算分離の具体的な例について説明する。

先ず、可視光撮像信号ＲＧＢｘｙについて、
ＲＧＢｘｙ＝（Ｒ，Ｇ，Ｂ）ｘｙ
とＲＧＢ各色毎に分解してからＲＧＢ各色毎に積分すれば、
（ΣＲ，ΣＧ，ΣＢ）
＝（∬（Ｒｘｙ）ｄｘｄｙ，∬（Ｇｘｙ）ｄｘｄｙ，∬（Ｂｘｙ）ｄｘｄｙ）
である。

また、赤外線撮像信号ＲＧＢＩｘｙについて、
Ｉｘｙ＝（ｒＩ，ｇＩ，ｂＩ）ｘｙ
であるので、
ＲＧＢＩｘｙ
＝（（Ｒ＋ｒＩ），（Ｇ＋ｇＩ），（Ｂ＋ｂＩ））ｘｙ
とＲＧＢ各色毎に分解してからＲＧＢ各色毎に積分すれば、
（Σ（Ｒ＋ｒＩ），Σ（Ｇ＋ｇＩ），Σ（Ｂ＋ｂＩ））
＝（∬（（Ｒ＋ｒＩ）ｘｙ）ｄｘｄｙ，∬（（Ｇ＋ｇＩ）ｘｙ）ｄｘｄｙ，∬（（Ｂ＋ｂＩ）ｘｙ）ｄｘｄｙ）
である。

ここで、赤外線撮像信号ＲＧＢＩｘｙのＲ色、（Ｒ＋ｒＩ）ｘｙについて、可視光演算撮像信号［Ｒｘｙ］と、赤外線演算撮像信号［ｒＩｘｙ］とに比率で分離する方法を示せば、
［Ｒｘｙ］＝（Ｒ＋ｒＩ）ｘｙ＊ΣＲ／Σ（Ｒ＋ｒＩ）
［ｒＩｘｙ］＝（Ｒ＋ｒＩ）ｘｙ−［Ｒｘｙ］
である。

Ｇ色、及び、Ｂ色についてもＲ色と同様にして、
［Ｇｘｙ］＝（Ｇ＋ｇＩ）ｘｙ＊ΣＧ／Σ（Ｇ＋ｇＩ）
［ｇＩｘｙ］＝（Ｇ＋ｇＩ）ｘｙ−［Ｇｘｙ］
［Ｂｘｙ］＝（Ｂ＋ｂＩ）ｘｙ＊ΣＢ／Σ（Ｂ＋ｂＩ）
［ｂＩｘｙ］＝（Ｂ＋ｂＩ）ｘｙ−［Ｂｘｙ］
である。

このようにして、
ＲＧＢＩｘｙ
＝［ＲＧＢｘｙ］＋［（ｒＩ，ｇＩ，ｂＩ）ｘｙ］
＝［ＲＧＢｘｙ］＋［Ｉｘｙ］
というように比率による演算分離が為される。

或いは、赤外線撮像信号ＲＧＢＩｘｙのＲ色、（Ｒ＋ｒＩ）ｘｙについて、可視光演算撮像信号［Ｒｘｙ］と、赤外線演算撮像信号［ｒＩｘｙ］とに差分で分離する方法を示せば、
［Ｒｘｙ］＝（Ｒ＋ｒＩ）ｘｙ−ｒＩｘｙ
［ｒＩｘｙ］＝（Ｒ＋ｒＩ）ｘｙ−［Ｒｘｙ］
である。ここで、ｒＩｘｙ信号は、可視光撮像信号ＲＧＢｘｙ、及び、赤外線撮像信号ＲＧＢＩｘｙの差分に基づいて抽出されるｘｙ信号である。

Ｇ色、及び、Ｂ色についても同様にして、
［Ｇｘｙ］＝（Ｇ＋ｇＩ）ｘｙ−ｇＩｘｙ
［ｇＩｘｙ］＝（Ｇ＋ｇＩ）ｘｙ−［Ｇｘｙ］
［Ｂｘｙ］＝（Ｂ＋ｂＩ）ｘｙ−ｂＩｘｙ
［ｂＩｘｙ］＝（Ｂ＋ｒＩ）ｘｙ−［Ｂｘｙ］
である。

このようにして、差分による演算分離であっても、
ＲＧＢＩｘｙ
＝［ＲＧＢｘｙ］＋［（ｒＩ，ｇＩ，ｂＩ）ｘｙ］
＝［ＲＧＢｘｙ］＋［Ｉｘｙ］
と演算することが可能である。

第１のホワイトバランス処理部７は、可視光撮像信号ＲＧＢｘｙに対して、可視光撮像制御時に照射されている光源が黒体（例えば、太陽の黒体）の軌跡であるかどうかを判別する光源判別を有し、この光源判別の結果に基づいてホワイトバランスを施して、ホワイトバランス撮像信号ｗＲＧＢｘｙを生成するものである。

また、この第１のホワイトバランス処理部７による光源判別によって、可視光撮像制御時の照射光源が黒体の軌跡ではないと判別された場合には、この光源判別は、照射光源が蛍光灯によるものであるかどうかを判別する。

色バランス整合部８は、ホワイトバランス撮像信号ｗＲＧＢｘｙをＲＧＢ各色毎に積分し、その積分値の比率である可視光色毎比率（ΣＲ：ΣＧ：ΣＢ）に基づいて可視光演算
撮像信号［ＲＧＢｘｙ］の色バランスを整合して、色整合撮像信号ｃ［ＲＧＢｘｙ］を生成するものである。

第２のホワイトバランス処理部９は、色整合撮像信号ｃ［ＲＧＢｘｙ］に対して、前述した光源判別の結果（記憶）に基づいてホワイトバランス補正を施し、ホワイト補正撮像信号ｗ［ＲＧＢｘｙ］を生成するものである。

画像処理部１０は、このようにして得られたホワイト補正撮像信号ｗ［ＲＧＢｘｙ］と、赤外線演算撮像信号［Ｉｘｙ］と、に対して画像処理を施してから合成し、または、合成してから画像処理を施して、カラー画像信号を生成するものである。

図２は、低照度下の白色被写体１１を可視光撮像条件にて撮像した場合のＲＧＢ各色毎の撮像信号レベル（Ｒ，Ｇ，Ｂ）の一例を示すグラフである。

図３は、低照度下の白色被写体１１を赤外線撮像条件にて撮像した場合のＲＧＢ各色毎の撮像信号レベル（Ｒ，Ｇ，Ｂ）の一例を示すグラフである。

図２、及び、図３に於いて、斜線で示されている部分は可視光成分にて光電変換された撮像信号のレベルが示されており、また、図３に於いて、白枠で示されている部分は、赤外線成分にて光電変換された撮像信号のレベルが示されている。

また、図３は、赤外線を照射して撮像することで、撮像信号のＧ信号レベルが最低被写体照度時のＧ信号レベルに至るまで改善されていることが示されている。図３に於いては、低照度下の被写体１１が明るく撮像されていることが示されている。

図４は、図３で示された撮像信号レベル（Ｒ，Ｇ，Ｂ）が可視光演算撮像信号レベル（Ｒ，Ｇ，Ｂ）と、赤外線演算撮像信号レベルＩＲと、に分離された一例を示すグラフである。

図４は、ＲＧＢ毎可視光演算分離部６によって、撮像信号ＲＧＢＩｘｙが可視光演算撮像信号［ＲＧＢｘｙ］と、赤外線演算撮像信号［Ｉｘｙ］と、に分離され、そのｘｙ平面信号の中の１画素についての一例である。

図５は、図４で示された可視光演算撮像信号レベル（Ｒ，Ｇ，Ｂ）に色バランス整合が施された一例を示すグラフである。

図５に於いて、可視光演算撮像信号レベル（Ｒ，Ｇ，Ｂ）は色バランスが整合されて、ＲＧＢ各色の信号レベルが略揃った様子が示されている。これは、可視光演算撮像信号［ＲＧＢｘｙ］は、可視光色毎比率ΣＲ：ΣＧ：ΣＢに基づいて色バランスが整合されて、
色整合撮像信号ｃ［ＲＧＢｘｙ］が生成されるからである。

しかしながら、この色バランスはフレーム内のＲＧＢ各色毎の積分値を揃えるのであって、白色被写体１１を白く映す（写す）機能ではないので、例えば、図５に示されるように、ＲＧＢ各色に於いて、略揃っているものの必ずしも正確に一律に揃っているとは限らないのである。

図６は、図５で示された色整合撮像信号レベル（Ｒ，Ｇ，Ｂ）をベクトルスコープにて表した一例を示している。

図６に於いて、この色整合撮像信号レベル（Ｒ，Ｇ，Ｂ）は、白色被写体１１を撮像して得られる白の輝点であるにも関わらず、ベクトルスコープの中心点から若干ズレていることが示されている。

このような色整合撮像信号レベル（Ｒ，Ｇ，Ｂ）のズレは、つまり、色整合撮像信号ｃ［ＲＧＢｘｙ］のホワイトバランスの精度が甘いということである。そこで、この色整合撮像信号ｃ［ＲＧＢｘｙ］は、第２のホワイトバランス処理部９によって、この若干ズレている白の輝点の位相を補正するホワイトバランス補正が施される。

この第２のホワイトバランス処理部９は、色整合撮像信号ｃ［ＲＧＢｘｙ］の中から信号レベルが相対的に高い信号を抽出し、この抽出信号と黒体の軌跡とを照合させてホワイト領域を推定し、この推定されたホワイト領域に対してホワイトバランス補正を施すものである。また、抽出信号と黒体の軌跡とを照合した結果、この抽出信号が黒体の軌跡と照合不一致となった場合は、抽出信号と蛍光灯の色度範囲とを照合させてホワイト領域を推定する。

この抽出信号について補足説明をする。

図７は、一様な照度下に於ける各色毎の反射率（％）の一例を示している。

図７に示されるように、白色（Ｗ）被写体１１は他の色（黄Ｙｅ，シアンＣｙ，緑Ｇ，マジェンダＭｇ，赤Ｒ，青Ｂ）の被写体１１と比べて反射率（％）が高い被写体１１であることが統計的に多いのである。

このように、色整合撮像信号ｃ［ＲＧＢｘｙ］の中から信号レベルが相対的に高い信号を抽出するということは、反射率（％）の高い被写体１１のｘｙ平面座標を抽出するということであり、この抽出信号が暫定的なホワイト領域の１次候補となる。

図８は、抽出信号と、光源判別（黒体の軌跡、蛍光灯）の範囲と、をベクトルスコープにて表した一例を示している。

図８で示されるように、第２のホワイトバランス処理部９は、抽出信号（暫定的なホワイト領域の１次候補）の色相、及び、彩度と、黒体の軌跡、または、蛍光灯光源の色度範囲とを照合させてホワイト領域（２次）を推定する。換言すれば、被写体１１の反射率（％）の推定からホワイト領域の１次候補を抽出し、その１次抽出信号に対して、更に、第１のホワイトバランス処理部７で得られた光源判別の結果と照らし合わせることでホワイト領域（２次）を推定するのである。

図９は、ホワイト領域（２次）に対してホワイトバランス補正が施された様子をベクトルスコープにて表した一例を示している。

前述したように、第２のホワイトバランス処理部９による２次抽出によって推定されたホワイト領域に対して、第１のホワイトバランス処理部７で得られた光源判別の結果に基づいたホワイトバランス補正が施されるのである。

図１０は、ホワイト領域の輝点の位相がベクトルスコープの中心点に補正された一例を示している。

図１０は、色整合撮像信号レベル（Ｒ，Ｇ，Ｂ）に対して、前述したホワイトバランス補正が施されて、ここで、図５で示されたグラフと比較してみれば、ＲＧＢ各色に於いて白レベルが一律に揃えられたことが示されている。

前述してきたように、本発明の第１の実施形態による赤外線照射式撮像装置は、低照度下の被写体１１に対して赤外線を照射して撮像する場合に於いて、その被写体１１に色の偏りがある場合であったとしても、良好なホワイトバランス処理を施すことが可能である。

（第２の実施形態）
図１１は、本発明の第２の実施形態による赤外線照射式撮像装置の構成を示すブロック図である。

図１１に於いて、この赤外線照射式撮像装置は、赤外線発光ダイオード１（赤外線照射手段）と、レンズ２（光学手段）と、赤外線カットフィルタ３と、赤外線制御部４（赤外線制御手段）と、イメージセンサ５（撮像手段）と、ＲＧＢ毎可視光演算分離部６（色毎可視光演算分離手段）と、第１／第２のホワイトバランス処理部２０（第１／第２のホワイトバランス処理手段）と、色バランス整合部８（色バランス整合手段）と、画像処理部１０（画像処理手段）と、より構成されている。

図１１に示されるように、第２の実施形態による赤外線照射式撮像装置は、第１の実施形態による赤外線照射式撮像装置と比較してみれば、第１のホワイトバランス処理部７と、第２のホワイトバランス処理部９との代わりに、第１／第２のホワイトバランス処理部２０を具備したものである。

図１で既に示された第１のホワイトバランス処理部７と、第２のホワイトバランス処理部９とは共用する演算処理回路を有するので、図１１で示された第１／第２のホワイトバランス処理部２０のように両者を統合したデバイスとして具備しても良いのである。また、図１１で示された赤外線制御部４は、第１のホワイトバランスの実行と、第２のホワイトバランスの実行との切り換え制御をする。

このように、統合されたホワイトバランス処理部を具備させることで、この赤外線照射式撮像装置のコストダウン、及び、ダウンサイジングが設計されても良い。

尚、第２の実施形態による赤外線照射式撮像装置の各ブロックに於ける動作作用については、第１の実施形態のものと同じであるので、その説明は省略する。

前述してきたように、本発明の第２の実施形態による赤外線照射式撮像装置は、低照度下の被写体１１に対して赤外線を照射して撮像する場合に於いて、その被写体１１に色の偏りがある場合であったとしても、良好なホワイトバランス処理を施すことが可能である。

また、本発明の第１の実施形態、及び、第２の実施形態による赤外線照射式撮像装置は、動画用カメラ、静止画用カメラ、計測器、産業用カメラ、医療用カメラ、映画撮影用カメラなど、様々な商品に応用することができるものである。

以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。

更に、前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

本発明の第１の実施形態による赤外線照射式撮像装置の構成を示すブロック図である。 低照度下の白色被写体を可視光撮像条件にて撮像した場合のＲＧＢ各色毎の撮像信号レベル（Ｒ，Ｇ，Ｂ）の一例を示すグラフである。 低照度下の白色被写体を赤外線撮像条件にて撮像した場合のＲＧＢ各色毎の撮像信号レベル（Ｒ，Ｇ，Ｂ）の一例を示すグラフである。 図３で示された撮像信号レベル（Ｒ，Ｇ，Ｂ）が可視光演算撮像信号レベル（Ｒ，Ｇ，Ｂ）と、赤外線演算撮像信号レベルＩＲと、に分離された一例を示すグラフである。 図４で示された可視光演算撮像信号レベル（Ｒ，Ｇ，Ｂ）に色バランス整合が施された一例を示すグラフである。 図５で示された色整合撮像信号レベル（Ｒ，Ｇ，Ｂ）をベクトルスコープにて表した一例を示している。 一様な照度下に於ける各色毎の反射率（％）の一例を示している。 抽出信号と、光源判別（黒体の軌跡、蛍光灯）の範囲と、をベクトルスコープにて表した一例を示している。 ホワイト領域（２次）に対してホワイトバランス補正が施された様子をベクトルスコープにて表した一例を示している。 ホワイト領域の輝点の位相がベクトルスコープの中心点に補正された一例を示している。 本発明の第２の実施形態による赤外線照射式撮像装置の構成を示すブロック図である。

１ 赤外線発光ダイオード（赤外線照射手段）
２ レンズ（光学手段）
３ 赤外線カットフィルタ
４ 赤外線制御部（赤外線制御手段）
５ イメージセンサ（撮像手段）
６ ＲＧＢ毎可視光演算分離部（色毎可視光演算分離手段）
７ 第１のホワイトバランス処理部（第１のホワイトバランス処理手段）
８ 色バランス整合部（色バランス整合手段）
９ 第２のホワイトバランス処理部（第２のホワイトバランス処理手段）
１０ 画像処理部（画像処理手段）
１１ 被写体
２０ 第１／第２のホワイトバランス処理部

Claims (4)

1. 低照度下の被写体に対して、赤外線を照射して撮像が可能である赤外線照射式撮像装置であって、
   前記被写体に対して前記赤外線を照射する赤外線照射手段と、
   前記被写体を結像して光学像を生成する光学手段と、
   前記光学手段の光路上に対して進退可能な構造であって、前記光学像に含まれる赤外線を遮断して、可視光から成る前記光学像を生成するための赤外線カットフィルタと、
   前記被写体に対して前記赤外線を照射させずに、且つ、前記赤外線カットフィルタを前記光路上に対して挿入させる可視光撮像制御と、前記被写体に対して前記赤外線を照射して、且つ、前記赤外線カットフィルタを前記光路上から退出させる赤外線撮像制御と、を備える赤外線制御手段と、
   前記光学像を光電変換して色毎に可視光撮像信号、または、赤外線撮像信号を生成する撮像手段と、
   前記可視光撮像信号と前記赤外線撮像信号との比率、及び／または、差分に基づいて、前記赤外線撮像信号を前記色毎に可視光演算撮像信号と、赤外線演算撮像信号と、に分離して出力する色毎可視光演算分離手段と、
   前記可視光撮像信号に対して、前記可視光撮像制御時に照射されている光源が黒体の軌跡であるかどうかを判別する光源判別を有し、該光源判別の結果に基づいてホワイトバランスを施して、ホワイトバランス撮像信号を生成する第１のホワイトバランス処理手段と、
   前記ホワイトバランス撮像信号を前記色毎に積分し、該積分値の比率である可視光色毎比率に基づいて前記可視光演算撮像信号の色バランスを整合して、色整合撮像信号を生成する色バランス整合手段と、
   前記色整合撮像信号に対して、前記光源判別の結果に基づいてホワイトバランス補正を施し、ホワイト補正撮像信号を生成する第２のホワイトバランス処理手段と、
   前記ホワイト補正撮像信号と、前記赤外線演算撮像信号と、に画像処理を施して、カラー画像信号を生成する画像処理手段と、
   を具備することを特徴とする赤外線照射式撮像装置。
2. 前記第１のホワイトバランス処理部による前記光源判別によって、前記可視光撮像制御時の前記照射光源が前記黒体の軌跡ではないと判別された場合には、
   前記光源判別は、前記照射光源が蛍光灯によるものであるかどうかを判別する
   ことを特徴とする請求項１に記載の赤外線照射式撮像装置。
3. 前記第２のホワイトバランス処理手段は、前記色整合撮像信号の中から信号レベルが相対的に高い信号を抽出し、該抽出信号を前記黒体の軌跡、または、前記蛍光灯と照合させてホワイト領域を推定し、該ホワイト領域に対してホワイトバランス補正を施す
   ことを特徴とする請求項２に記載の赤外線照射式撮像装置。
4. 前記第１のホワイトバランス処理手段と、前記第２のホワイトバランス処理手段とは、共用する演算処理回路を有し、
   前記赤外線制御手段は、前記第１のホワイトバランス処理手段と、前記第２のホワイトバランス処理手段との切り換え制御をする
   ことを特徴とする請求項１に記載の赤外線照射式撮像装置。

Images