[go: up one dir, main page]

JP5245947B2 - Imaging apparatus, imaging method, program, and recording medium - Google Patents

Imaging apparatus, imaging method, program, and recording medium Download PDF

Info

Publication number
JP5245947B2
JP5245947B2 JP2009063473A JP2009063473A JP5245947B2 JP 5245947 B2 JP5245947 B2 JP 5245947B2 JP 2009063473 A JP2009063473 A JP 2009063473A JP 2009063473 A JP2009063473 A JP 2009063473A JP 5245947 B2 JP5245947 B2 JP 5245947B2
Authority
JP
Japan
Prior art keywords
sunlight
image data
angle
view
imaging device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009063473A
Other languages
Japanese (ja)
Other versions
JP2010219810A (en
Inventor
紀克 新浪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2009063473A priority Critical patent/JP5245947B2/en
Publication of JP2010219810A publication Critical patent/JP2010219810A/en
Application granted granted Critical
Publication of JP5245947B2 publication Critical patent/JP5245947B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Color Television Image Signal Generators (AREA)

Description

本発明は、露出調整を行う撮像装置、撮像方法、プログラム及び記録媒体に関する。   The present invention relates to an imaging apparatus that performs exposure adjustment, an imaging method, a program, and a recording medium.

近年、逆光状態を判別して露光補正を行うデジタルカメラ等が普及している。このようなデジタルカメラでは、1画角内の輝度分布の状態、或いは、輝度ヒストグラムから中央部と周辺部の輝度差を検出することで逆光状態を判定し、その判定結果に応じて逆光シーンに最適な露出補正を行っている。   In recent years, digital cameras and the like that detect backlight conditions and perform exposure correction have become widespread. In such a digital camera, the backlight distribution state is determined by detecting the brightness distribution state within one angle of view or the brightness difference between the central part and the peripheral part from the brightness histogram, and the backlight scene is set according to the determination result. Optimal exposure compensation is performed.

例えば、画角の輝度に基づいて、逆光や過順光に適応した露出制御を行う技術が開示されている(例えば、特許文献1)。上記特許文献1の技術では、まず、所定のブロックから得られた輝度レベルを所定の基準レベルとし、各ブロック全体の平均輝度値が所定の基準レベルの範囲内であるか否かを判定する。次に、被写体の距離と被写体間の関係に応じて、所定のブロックからなるエリアにおける輝度を代表輝度として算出し、エリアにおいて閾値条件を満たすブロックの割合を求める。そして、閾値条件を満たすブロックの割合から生成された補正量に基づいて露出制御量を定め、露出制御を行っている。   For example, a technique for performing exposure control adapted to backlight or excessively forward light based on the brightness of the angle of view is disclosed (for example, Patent Document 1). In the technique disclosed in Patent Document 1, first, the luminance level obtained from a predetermined block is set as a predetermined reference level, and it is determined whether or not the average luminance value of each block is within the range of the predetermined reference level. Next, the luminance in an area composed of predetermined blocks is calculated as the representative luminance according to the distance between the subjects and the relationship between the subjects, and the ratio of blocks satisfying the threshold value in the area is obtained. Then, the exposure control amount is determined based on the correction amount generated from the ratio of the blocks that satisfy the threshold condition, and exposure control is performed.

上記特許文献1の技術では、露出制御を行う際に、画角内での被写体の輝度分布、或いは、ヒストグラム分布から、撮影対象とする被写体の明るさ(例えば、輝度レベル)に対して背景が明るい(例えば、輝度が高い)ような状態を逆光状態と判定している。そして、逆光状態であると判断した場合に、予め設定されている標準的な撮像素子感度、絞り値、シャッター速度の設定に対して補正を行っている。しかしながら、上記特許文献1の技術では、撮影画像の輝度分布の状態により、逆光でない場合でも逆光状態と誤判断するおそれがあるという課題があった。さらに、上記誤判断の結果、露出オーバーとなる場合や、逆光状態であるにも関わらず通常撮影状態と判断して露出アンダーとなる場合が多く、精度良く逆光シーンを判定することができないという課題があった。   In the technique of the above-mentioned patent document 1, when performing exposure control, the background is compared with the brightness (for example, the brightness level) of the subject to be photographed from the brightness distribution of the subject within the angle of view or the histogram distribution. A bright state (for example, high brightness) is determined as a backlight state. When it is determined that the backlight is in the backlit state, correction is performed for preset standard image sensor sensitivity, aperture value, and shutter speed settings. However, the technique disclosed in Patent Document 1 has a problem in that it may be erroneously determined to be a backlight state even when it is not backlit due to the state of the luminance distribution of the captured image. Furthermore, as a result of the above misjudgment, there are many cases where overexposure occurs, or even though the backlight is in the backlit state, the normal shooting state is often overexposed, and the backlight scene cannot be accurately determined. was there.

本発明はこのような実情を鑑みてなされたものであり、上記課題を解決し、逆光状態判別の精度を向上させ、撮影状態に合わせて常に最適な露出補正を行うことができる撮像装置、撮像方法、プログラム及び記録媒体を提供することを目的とする。   The present invention has been made in view of such circumstances, an imaging apparatus and an imaging apparatus that can solve the above-mentioned problems, improve the accuracy of backlight state determination, and always perform optimum exposure correction according to the shooting state. An object is to provide a method, a program, and a recording medium.

本発明の撮像装置は、赤外線を検出する赤外線検出手段と、撮像装置の傾きを検出する傾き検出手段と、撮像素子から出力される画像データに画像処理を行う画像処理手段と、撮像装置による撮影画角内に太陽光が含まれるか否かを判定する太陽光有無判定手段と、を備え、赤外線検出手段は、赤外線の検出に基づいて電気信号を出力し、画像処理手段は、画像データの輝度情報を出力し、太陽光有無判定手段は、赤外線検出段により出力される電気信号と、傾き検出手段により検出される撮像装置の傾きと、画像処理手段により出力される画像データの輝度情報と、に基づいて、撮影画角内に太陽光が含まれるか否かを判定することを特徴とする。   An image pickup apparatus according to the present invention includes an infrared detection unit that detects infrared rays, an inclination detection unit that detects an inclination of the image pickup device, an image processing unit that performs image processing on image data output from the image pickup device, and photographing by the image pickup device. Sunlight presence / absence determination means for determining whether or not sunlight is included in the angle of view, the infrared detection means outputs an electrical signal based on detection of infrared rays, and the image processing means Luminance information is output, and the sunlight presence / absence determination means includes an electrical signal output by the infrared detection stage, an inclination of the imaging device detected by the inclination detection means, and luminance information of the image data output by the image processing means. Based on the above, it is determined whether or not sunlight is included in the shooting angle of view.

本発明の撮像方法は、赤外線を検出し、赤外線の検出に基づいて電気信号を出力する赤外線検出ステップと、撮像装置の傾きを検出する傾き検出ステップと、撮像素子から出力される画像データに画像処理を行い、画像データの輝度情報を出力する画像処理ステップと、撮像装置による撮影画角内に太陽光が含まれるか否かを判定する太陽光有無判定ステップと、を備え、太陽光有無判定ステップは、赤外線検ステップにより出力される電気信号と、傾き検出ステップにより検出される撮像装置の傾きと、画像処理ステップにより出力される画像データの輝度情報と、に基づいて、撮影画角内に太陽光が含まれるか否かを判定することを特徴とする。   The imaging method of the present invention includes an infrared detection step for detecting infrared rays and outputting an electrical signal based on the detection of infrared rays, an inclination detection step for detecting an inclination of the imaging device, and image data output from the imaging device. An image processing step for performing processing and outputting luminance information of the image data, and a sunlight presence / absence determining step for determining whether or not sunlight is included in a shooting angle of view by the imaging device. The step is based on the electrical signal output by the infrared detection step, the tilt of the imaging device detected by the tilt detection step, and the luminance information of the image data output by the image processing step. It is characterized by determining whether sunlight is contained.

本発明のプログラムは、赤外線を検出し、赤外線の検出に基づいて電気信号を出力する処理と、撮像装置の傾きを検出する処理と、撮像素子から出力される画像データに画像処理を行い、画像データの輝度情報を出力する処理と、電気信号と、撮像装置の傾きと、画像データの輝度情報と、に基づいて、撮像装置による撮影画角内に太陽光が含まれるか否かを判定する処理と、をコンピュータに実行させることを特徴とする。   The program of the present invention detects an infrared ray, outputs an electric signal based on the detection of the infrared ray, detects an inclination of the imaging device, performs image processing on the image data output from the imaging device, and outputs an image. Whether or not sunlight is included in the shooting angle of view by the imaging device is determined based on the process of outputting the luminance information of the data, the electrical signal, the tilt of the imaging device, and the luminance information of the image data. And causing the computer to execute the processing.

本発明の記録媒体は、上記プログラムを記録したコンピュータ読取可能な記録媒体である。   The recording medium of the present invention is a computer-readable recording medium on which the program is recorded.

本発明によれば、逆光状態判別の精度を向上させることが可能となる。   According to the present invention, it is possible to improve the accuracy of backlight state determination.

本実施形態に係る撮像装置の概略構成例を示すブロック図である。It is a block diagram which shows the example of schematic structure of the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置の概略構成例を示すブロック図である。It is a block diagram which shows the example of schematic structure of the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置の露出制御動作例を説明するためのブロック図である。It is a block diagram for demonstrating the exposure control operation example of the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置における赤外線有無判定動作例を示すフローチャートである。It is a flowchart which shows the infrared rays presence determination operation example in the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置における傾き判定動作例を示すフローチャートである。It is a flowchart which shows the example of inclination determination operation | movement in the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置の傾き角例を示す図である。It is a figure which shows the example of the inclination angle of the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置における高輝度ブロック判定動作例を示すフローチャートである。It is a flowchart which shows the high-intensity block determination operation example in the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置における太陽ブロック判定動作例を示すフローチャートである。It is a flowchart which shows the sun block determination operation example in the imaging device which concerns on this embodiment. 本実施形態に係る撮像装置におけるホワイトバランス制御動作例を示すフローチャートである。It is a flowchart which shows the white balance control operation example in the imaging device which concerns on this embodiment.

以下に本発明の実施形態の例について、図面を用いて詳細に説明する。尚、同様の構成要素には同一の符号を付し、重複する説明は省略する。   Hereinafter, examples of embodiments of the present invention will be described in detail with reference to the drawings. In addition, the same code | symbol is attached | subjected to the same component and the overlapping description is abbreviate | omitted.

図1は、本実施形態に係る撮像装置の概略構成例を示す。図1に示すように、本実施形態に係る撮像装置1は、赤外線検出部10、傾き検出部20、画像処理部30、制御部75、を備えている。赤外線検出部10は、赤外線を感知する。赤外線検出部10としては、例えば赤外線センサ等を適用することができる。傾き検出部20は、撮像装置1の傾きを検出する。傾き検出部20としては、例えば加速度センサ等を適用することができる。画像処理部30は、画像データに各種画像処理を行う。   FIG. 1 shows a schematic configuration example of an imaging apparatus according to the present embodiment. As shown in FIG. 1, the imaging apparatus 1 according to the present embodiment includes an infrared detection unit 10, an inclination detection unit 20, an image processing unit 30, and a control unit 75. The infrared detector 10 senses infrared rays. As the infrared detection unit 10, for example, an infrared sensor or the like can be applied. The tilt detection unit 20 detects the tilt of the imaging device 1. As the inclination detection unit 20, for example, an acceleration sensor or the like can be applied. The image processing unit 30 performs various image processes on the image data.

図2は、上記図1よりも詳細な撮像装置1の構成例を示す。図2に示すように、本実施形態に係る撮像装置1は、上記赤外線検出部10、傾き検出部20、画像処理部30に加え、光学素子40、撮像素子50、A/D変換部60、露光制御部70、を備えている。   FIG. 2 shows a configuration example of the imaging apparatus 1 in more detail than FIG. As shown in FIG. 2, the imaging apparatus 1 according to the present embodiment includes an optical element 40, an imaging element 50, an A / D conversion unit 60, in addition to the infrared detection unit 10, the inclination detection unit 20, and the image processing unit 30. An exposure control unit 70 is provided.

対象物の像は、光学素子40を介して撮像素子50に結像される。撮像素子50は、結像した対象物の像を電気信号である画像信号(画像データ)に変換する。A/D変換部60は、画像信号をデジタル信号に変換する。露光制御部70は、光量制御部71、増幅部72、撮像素子駆動部73、輝度信号検波部74、制御部75、を有する。   An image of the object is formed on the image sensor 50 via the optical element 40. The imaging element 50 converts the image of the formed object into an image signal (image data) that is an electrical signal. The A / D converter 60 converts the image signal into a digital signal. The exposure control unit 70 includes a light amount control unit 71, an amplification unit 72, an image sensor driving unit 73, a luminance signal detection unit 74, and a control unit 75.

光量制御部71は、例えば絞りであり、光学素子40から撮像素子50に入射する光量を制御する。増幅部72は、撮像素子50から出力された画像信号を増幅する。撮像素子駆動部73は、例えばシャッター等であり、露光時間を制御する。輝度信号検波部74は、画像信号に基づいて輝度信号検波を出力する。制御部75は、露光制御部70の制御を行う集中演算装置である。ここで、制御部75として、CPU(Central Processing Unit)を適用することができるが、CPUは、露光制御手段70に加え、赤外線検出部10、傾き検出部20、画像処理部30、光学素子40、撮像素子50、A/D変換部60等の制御も行う。   The light amount control unit 71 is, for example, a diaphragm, and controls the amount of light incident on the image sensor 50 from the optical element 40. The amplifying unit 72 amplifies the image signal output from the image sensor 50. The image sensor driving unit 73 is, for example, a shutter and controls the exposure time. The luminance signal detection unit 74 outputs luminance signal detection based on the image signal. The control unit 75 is a central processing unit that controls the exposure control unit 70. Here, a CPU (Central Processing Unit) can be applied as the control unit 75, but the CPU in addition to the exposure control means 70, the infrared detection unit 10, the inclination detection unit 20, the image processing unit 30, and the optical element 40. The image sensor 50, the A / D converter 60, and the like are also controlled.

図3は、本実施形態に係る撮像装置1の動作例を説明するための図である。図3に示すように、光学素子40を介して対象物の像を撮像素子50上に結像する。そして、撮像素子50は、結像した対象物の像を電気信号である画像信号に変換する。この撮像素子50から出力された画像信号は、増幅部72により増幅され、A/D変換部60によりデジタル信号に変換される。デジタル化された画像信号は、画像処理部30に供給される。上記デジタル信号が入力された輝度信号検波部74は、輝度信号検波信号を生成する。   FIG. 3 is a diagram for explaining an operation example of the imaging apparatus 1 according to the present embodiment. As shown in FIG. 3, an image of the object is formed on the image sensor 50 via the optical element 40. The image sensor 50 converts the image of the formed object into an image signal that is an electrical signal. The image signal output from the image sensor 50 is amplified by the amplification unit 72 and converted into a digital signal by the A / D conversion unit 60. The digitized image signal is supplied to the image processing unit 30. The luminance signal detection unit 74 to which the digital signal is input generates a luminance signal detection signal.

次に、制御部75は、輝度信号検波部74により生成された輝度信号検波信号を受け取り、輝度信号検波信号と、赤外線検出10及び傾き検出部20から入力された検出結果とに基づいて、光量制御部71、増幅部72及び撮像素子駆動部73を制御する。具体的には、光量制御部71の開口度を可変することで撮像素子50に入射される光量を制御する。そして、増幅部72の増幅率を可変することで、A/D変換部60に入力される信号レベルを制御する。さらに、撮像素子駆動部73の露光時間(例えば、シャッタースピード)を可変することで撮像素子50から出力される信号レベルを制御する。上述したように、常に適正露出となるように予め設定されたEV線図に合わせ、露出制御を行う。   Next, the control unit 75 receives the luminance signal detection signal generated by the luminance signal detection unit 74, and based on the luminance signal detection signal and the detection results input from the infrared detection unit 10 and the inclination detection unit 20, the light amount The controller 71, the amplifier 72, and the image sensor driving unit 73 are controlled. Specifically, the amount of light incident on the image sensor 50 is controlled by varying the aperture of the light amount controller 71. Then, the signal level input to the A / D converter 60 is controlled by varying the amplification factor of the amplifier 72. Further, the signal level output from the image sensor 50 is controlled by changing the exposure time (for example, shutter speed) of the image sensor drive unit 73. As described above, exposure control is performed in accordance with an EV diagram set in advance so as to always provide proper exposure.

(赤外線検出部)
次に、赤外線検出部10について詳細に説明する。本実施形態では、赤外線検出部10として、赤外線のみに感度を持ち、指向性の強い赤外線センサを適用することができる。特に、受光角が狭いフォトトランジスタが好適であるが、これに限定されるものではない。
(Infrared detector)
Next, the infrared detection unit 10 will be described in detail. In the present embodiment, an infrared sensor having sensitivity only to infrared rays and having high directivity can be applied as the infrared detection unit 10. In particular, a phototransistor having a narrow light receiving angle is suitable, but is not limited thereto.

上記したような赤外線検出部10は、撮影対象方向に太陽光があり、赤外線が検出される状態での出力レベルと、赤外線が検出されない状態での出力レベル(Voff)との差が大きい。また、赤外線検出部10の受光方向に太陽がある場合、その出力レベルの差はより大きくなる。   The infrared detection unit 10 as described above has a large difference between an output level in a state where there is sunlight in the shooting target direction and infrared is detected and an output level (Voff) in a state where no infrared is detected. Further, when the sun is in the light receiving direction of the infrared detecting unit 10, the difference in output level becomes larger.

図4は、本実施形態に係る撮像装置1における撮影対象方向に太陽があるか否かを判定する動作例を示す。以下に、赤外線検出部10の受光方向における赤外線有無判定動作例について図4に示すフローチャートを用いて説明する。   FIG. 4 shows an operation example for determining whether or not the sun is in the shooting target direction in the imaging apparatus 1 according to the present embodiment. Hereinafter, an example of an infrared presence / absence determination operation in the light receiving direction of the infrared detection unit 10 will be described with reference to the flowchart shown in FIG.

まず、赤外線検出部10の出力レベルを取得する(ステップS401)。次に、フィルタ処理を行い(ステップS402)、上記ステップS401で取得した出力レベル(Vir)と赤外線を検出しない状態での赤外線検出部10の出力レベル(Voff)との差が判定閾値α以上であるか否かを判定する(ステップS403)。出力レベル(Vir)と赤外線を検出しない状態での出力レベル(Voff)との差が判定閾値α以上である場合、つまり|Vir−Voff|>αの場合(ステップS403/YES)には、赤外線検出部10の受光方向に赤外線があると判定し、撮影対象方向に太陽があると判定する(ステップS404)。   First, the output level of the infrared detector 10 is acquired (step S401). Next, filter processing is performed (step S402), and the difference between the output level (Vir) acquired in step S401 and the output level (Voff) of the infrared detection unit 10 in a state where no infrared is detected is equal to or greater than the determination threshold α. It is determined whether or not there is (step S403). If the difference between the output level (Vir) and the output level (Voff) in the state where no infrared rays are detected is greater than or equal to the determination threshold value α, that is, if | Vir−Voff |> α (step S403 / YES), infrared rays It is determined that there is infrared light in the light receiving direction of the detection unit 10, and it is determined that the sun is in the shooting target direction (step S404).

他方、出力レベル(Vir)と赤外線を検出しない状態での出力レベル(Voff)との差が判定閾値α以下である場合、つまり|Vir−Voff|≦αの場合(ステップS403/NO)には、赤外線検出部10の受光方向に赤外線がないと判定し、撮影対象方向に太陽がないと判定する(ステップS405)。   On the other hand, when the difference between the output level (Vir) and the output level (Voff) in the state where no infrared rays are detected is equal to or smaller than the determination threshold value α, that is, when | Vir−Voff | ≦ α (step S403 / NO). Then, it is determined that there is no infrared ray in the light receiving direction of the infrared detecting unit 10, and it is determined that there is no sun in the shooting target direction (step S405).

(傾き検出部)
次に、傾き検出部20について詳細に説明する。本実施形態では、傾き検出部20として加速度センサを適用することができる。特に、3軸加速度センサが好適であるが、これに限定されるものではない。このような傾き検出部20は、撮影時の撮像装置1の傾き角度を算出する。
(Tilt detector)
Next, the tilt detection unit 20 will be described in detail. In the present embodiment, an acceleration sensor can be applied as the inclination detection unit 20. In particular, a triaxial acceleration sensor is suitable, but is not limited to this. Such a tilt detection unit 20 calculates the tilt angle of the imaging device 1 at the time of shooting.

図5は、本実施形態に係る撮像装置1の水平基準に対する傾きを検出する動作例を示す。以下に、本実施形態に係る撮像装置1の水平基準に対する傾きを検出する動作例について、図5に示すフローチャートを用いて説明する。尚、本実施形態では、図6に示すように撮影方向に対して水平基準から垂直方向の角度を角度Aとする。   FIG. 5 shows an operation example for detecting the inclination with respect to the horizontal reference of the imaging apparatus 1 according to the present embodiment. Below, the operation example which detects the inclination with respect to the horizontal reference | standard of the imaging device 1 which concerns on this embodiment is demonstrated using the flowchart shown in FIG. In the present embodiment, as shown in FIG. 6, the angle A is the angle from the horizontal reference to the vertical direction with respect to the shooting direction.

まず、傾き検出部20の各軸の出力レベルから撮影時の撮像装置1の傾き情報を算出し、取得する(ステップS501)。次に、フィルタ処理を行い(ステップS502)、上記ステップS501で取得した情報から、撮像装置1の水平基準に対する傾きを示す角度Aが上向きに、つまり重力方向とは反対方向に一定角度β以上であるか否かを判定する(ステップS503)。角度Aが上向きに一定角度β以上である場合(ステップS503/YES)、撮影範囲内に太陽が存在する可能性があると判定する(ステップS504)。他方、角度Aが上向きに一定角度β以下である場合(ステップS503/NO)、撮影範囲内に太陽が存在する可能性がないと判定する(ステップS505)。   First, the tilt information of the imaging device 1 at the time of shooting is calculated and acquired from the output level of each axis of the tilt detector 20 (step S501). Next, filter processing is performed (step S502), and from the information acquired in step S501, the angle A indicating the inclination of the imaging device 1 with respect to the horizontal reference is upward, that is, a certain angle β or more in the direction opposite to the gravitational direction. It is determined whether or not there is (step S503). When the angle A is equal to or larger than the certain angle β upward (step S503 / YES), it is determined that there is a possibility that the sun exists in the imaging range (step S504). On the other hand, when the angle A is not more than a certain angle β upward (step S503 / NO), it is determined that there is no possibility that the sun exists in the imaging range (step S505).

ここで、撮像装置本体を傾けて、例えば縦撮り等で撮影を行う場合には、水準器から得られる撮影状態の角度を検出し、その撮影角度に対して撮像装置1が上向きに一定角度β以上あるかを判定し、上述したように、撮影範囲内に太陽が存在する可能性があるか否かを判定する。   Here, when the imaging apparatus body is tilted and shooting is performed, for example, in vertical shooting, the angle of the shooting state obtained from the level is detected, and the imaging apparatus 1 is directed upward by a certain angle β with respect to the shooting angle. It is determined whether or not there is the above, and as described above, it is determined whether or not there is a possibility that the sun exists in the photographing range.

(輝度信号検波部)
次に、輝度信号検波部74について詳細に説明する。輝度信号検波部74は、1画角を縦32ブロック、横32ブロックのトータル1024ブロックに分割し、それぞれのブロック内の輝度値を演算する計算部を備えている。計算部は、各ブロック内の全画素の輝度平均値をブロック輝度値として、1画角の映像信号を1024(=32×32)のブロックに分割した各ブロックの輝度平均値を算出して出力する。ここで、各ブロックの輝度平均値をYn(n=0〜1023)とする。
(Luminance signal detector)
Next, the luminance signal detector 74 will be described in detail. The luminance signal detection unit 74 includes a calculation unit that divides one angle of view into a total of 1024 blocks of 32 vertical blocks and 32 horizontal blocks and calculates the luminance value in each block. The calculation unit calculates the luminance average value of each block obtained by dividing the video signal of one angle of view into 1024 (= 32 × 32) blocks using the luminance average value of all the pixels in each block as the block luminance value, and outputs it. To do. Here, the luminance average value of each block is Yn (n = 0 to 1023).

図7は、本実施形態に係る撮像装置において、撮影画角内のブロックが高輝度ブロックであるかを判定する動作例を示す。以下に、本実施形態に係る撮像装置において、撮影画角内のブロックが高輝度ブロックであるかを判定する動作例について、図7に示すフローチャートを用いて説明する。   FIG. 7 shows an operation example for determining whether a block within a shooting angle of view is a high-intensity block in the imaging apparatus according to the present embodiment. Hereinafter, in the imaging apparatus according to the present embodiment, an operation example for determining whether a block within a shooting angle of view is a high-intensity block will be described with reference to a flowchart shown in FIG.

まず、輝度信号検波部74は、1画角の映像信号を1024(=32×32)のブロックに分割し、分割した各分割ブロックの輝度平均値Ynを算出して制御部75に出力する(ステップS701)。各分割ブロックの輝度平均値Ynを取得した制御部75は、全ブロックの輝度平均値Yavgを算出し(ステップS702)、輝度信号検波部74から取得した分割ブロックの輝度平均値Ynと全ブロックの輝度平均値Yavgとの差を算出する。そして、制御部75は、分割ブロックの輝度平均値Ynと全ブロックの輝度平均値Yavgとの差が判定閾値γ以上であるか否かを判定する(ステップS703)。   First, the luminance signal detection unit 74 divides a video signal of one angle of view into 1024 (= 32 × 32) blocks, calculates a luminance average value Yn of each divided block, and outputs the luminance average value Yn to the control unit 75 ( Step S701). The control unit 75 that has acquired the average luminance value Yn of each divided block calculates the average luminance value Yavg of all blocks (step S702), and the average luminance value Yn of the divided blocks acquired from the luminance signal detection unit 74 and all the blocks. The difference from the luminance average value Yavg is calculated. Then, the control unit 75 determines whether or not the difference between the average luminance value Yn of the divided blocks and the average luminance value Yavg of all the blocks is equal to or larger than the determination threshold γ (step S703).

分割ブロックの輝度平均値Ynと全ブロックの輝度平均値Yavgとの差が判定閾値γ以上である場合(ステップS703/YES)は、制御部75は、その分割ブロックを高輝度ブロックであると判定する(ステップS704)。他方、分割ブロックの輝度平均値Ynと全ブロックの輝度平均値Yavgとの差が判定閾値γ以下である場合(ステップS703/NO)には、制御部75は、その分割ブロックを高輝度ブロックでないと判定する(ステップS705)。   When the difference between the average luminance value Yn of the divided blocks and the average luminance value Yavg of all the blocks is equal to or larger than the determination threshold γ (step S703 / YES), the control unit 75 determines that the divided block is a high luminance block. (Step S704). On the other hand, when the difference between the luminance average value Yn of the divided block and the luminance average value Yavg of all the blocks is equal to or less than the determination threshold γ (step S703 / NO), the control unit 75 does not determine the divided block as a high luminance block. (Step S705).

尚、本実施形態では、全ブロックの輝度平均値Yavgを制御部75が算出する例を挙げて説明したが、これに限定されるものではない。例えば、全ブロックの輝度平均値Yavgも輝度信号検波部74が算出し、分割ブロックの輝度平均値Yn及び全ブロックの輝度平均値Yavgを制御部75に出力するようにしてもよい。   In the present embodiment, the example in which the control unit 75 calculates the luminance average value Yavg of all blocks has been described. However, the present invention is not limited to this. For example, the luminance signal detection unit 74 may calculate the luminance average value Yavg of all blocks and output the luminance average value Yn of the divided blocks and the luminance average value Yavg of all blocks to the control unit 75.

(露出制御)
次に、本実施形態に係る撮像装置1の露出制御について説明する。本実施形態では、太陽ブロックと判定されたブロックの有無に基づいて露出制御を行う。図8は、本実施形態に係る撮像装置1において、撮影画角内に太陽ブロックがあるか否かを判定する動作例を示す。以下、本実施形態に係る撮像装置1において、撮影画角内に太陽ブロックがあるか否かを判定する動作例について、図8に示すフローチャートを用いて説明する。
(Exposure control)
Next, exposure control of the imaging apparatus 1 according to the present embodiment will be described. In this embodiment, exposure control is performed based on the presence or absence of a block determined as a sun block. FIG. 8 shows an operation example for determining whether or not there is a sun block within the shooting angle of view in the imaging apparatus 1 according to the present embodiment. Hereinafter, in the imaging device 1 according to the present embodiment, an operation example for determining whether or not there is a sun block within the shooting angle of view will be described with reference to the flowchart shown in FIG.

まず、上記図4に示す処理を行うことで、赤外線検出部10の出力に基づいて上述した赤外線有無判定を行い(ステップS801)、撮影対象方向に太陽があるか否かを判定する(ステップS802)。撮影対象方向に太陽があると判定された場合(ステップS802/YES)は、撮像装置1の傾き判定を行う(ステップS803)。他方、撮影対象方向に太陽がないと判定された場合(ステップS802/NO)には、制御部75は、太陽ブロックはないと判定し(ステップS804)、動作を終了する。   First, by performing the process shown in FIG. 4, the above-described infrared presence / absence determination is performed based on the output of the infrared detection unit 10 (step S801), and it is determined whether or not the sun is in the shooting target direction (step S802). ). When it is determined that the sun is in the shooting target direction (step S802 / YES), the inclination of the imaging device 1 is determined (step S803). On the other hand, when it is determined that there is no sun in the shooting target direction (step S802 / NO), the control unit 75 determines that there is no sun block (step S804) and ends the operation.

上記ステップS803において、上記図5に示す処理を行い、傾き検出部20の検出情報に基づいて上述した撮像装置1の傾き判定を行うことで、撮像装置1の上向きの傾きが一定角度以上あるか否かを判定する(ステップS805)。撮像装置1の上向きの傾きが一定角度以上あると判定された場合(ステップS805/YES)は、高輝度ブロック判定を行う(ステップS806)。他方、撮像装置1の上向きの傾きが一定角度以上ないと判定された場合(ステップS805/NO)は、制御部75は、太陽ブロックはないと判定し(ステップS804)、動作を終了する。   In step S803, whether the upward tilt of the imaging device 1 is equal to or greater than a certain angle by performing the processing shown in FIG. 5 and performing the tilt determination of the imaging device 1 based on the detection information of the tilt detection unit 20 described above. It is determined whether or not (step S805). When it is determined that the upward tilt of the imaging apparatus 1 is equal to or greater than a certain angle (step S805 / YES), high-intensity block determination is performed (step S806). On the other hand, when it determines with the upward inclination of the imaging device 1 not being beyond a fixed angle (step S805 / NO), the control part 75 determines with there being no sun block (step S804), and complete | finishes operation | movement.

上記ステップS806において、上記図7に示す処理を行い、輝度信号検波部74及び制御部75により上述した高輝度ブロック判定を行うことで、1画角の映像信号を1024のブロックに分割後の各分割ブロックが高輝度ブロックであるか否かを判定する(ステップS807)。分割ブロックが、高輝度ブロックであると判定された場合(ステップS807/YES)は、制御部75は、その分割ブロックが太陽ブロックであると判定する(ステップS808)。他方、分割ブロックが、高輝度ブロックでないと判定された場合(ステップS807/YES)には、制御部75は、その分割ブロックが太陽ブロックでないと判定する(ステップS804)。   In step S806, the processing shown in FIG. 7 is performed, and the luminance signal detection unit 74 and the control unit 75 perform the above-described high-luminance block determination, whereby each video signal having one angle of view is divided into 1024 blocks. It is determined whether or not the divided block is a high luminance block (step S807). If it is determined that the divided block is a high luminance block (step S807 / YES), the control unit 75 determines that the divided block is a sun block (step S808). On the other hand, when it determines with a division | segmentation block not being a high-intensity block (step S807 / YES), the control part 75 determines with the division | segmentation block not being a sun block (step S804).

制御部75は、上述したように太陽ブロックであると判定されたブロックの輝度情報を除去して露出演算を行う。ここで、露出演算では、各ブロックに対してそれぞれ特定な係数を掛け、さらに全ブロック積算値を係数の積算値で割ることで露出演算の輝度評価値Yevを得る。輝度評価値演算において、撮影画角に太陽ブロックがあると判断した場合には、制御部75は、太陽ブロックの係数を0としてブロック数を減らした状態で演算を行う。輝度評価値Yevは、下記式(1)を用いて演算する。   As described above, the control unit 75 performs exposure calculation by removing the luminance information of the block determined to be the sun block. Here, in the exposure calculation, the luminance evaluation value Yev of the exposure calculation is obtained by multiplying each block by a specific coefficient and dividing the total integrated value of the blocks by the integrated value of the coefficients. In the brightness evaluation value calculation, when it is determined that there is a sun block at the shooting angle of view, the control unit 75 performs the calculation with the sun block coefficient set to 0 and the number of blocks reduced. The luminance evaluation value Yev is calculated using the following formula (1).

Yev=Σ(kn×Yn)/Σkn(n=0〜1023)・・・式(1)   Yev = Σ (kn × Yn) / Σkn (n = 0 to 1023) (1)

尚、上記式(1)のknは、各ブロックにおけるウエイトを示している。knは、例えば、中央部が大きく周辺部が小さい値、つまり中央部に重点をおいた値を設定するが、これに限定されるものではない。また、太陽ブロックと判定されたブロックについては、kn=0として輝度評価値Yevの演算を行う。このように取得した輝度評価値を利用することで、撮影画角内に太陽があるような逆光状態において、正確な露出制御を行うことができる。   In the above formula (1), kn represents the weight in each block. For example, kn is set to a value with a large central portion and a small peripheral portion, that is, a value with an emphasis on the central portion, but is not limited thereto. For the block determined to be a sun block, the brightness evaluation value Yev is calculated with kn = 0. By using the luminance evaluation value acquired in this way, accurate exposure control can be performed in a backlight state where the sun is within the shooting angle of view.

(オートフォーカス制御)
次に上述した露出制御を応用するオートフォーカス(自動合焦)制御について説明する。上記図8に示す処理を行い、太陽ブロック判定を行うことで太陽ブロックの有無を判定し、太陽ブロックと判定されたブロックがある場合には、その太陽ブロックを除去して合焦用検波信号の演算を行う。これにより、太陽部分の高輝度信号による偽合焦を低減することができ、より精度の高いオートフォーカスを実現することができる。
(Auto focus control)
Next, autofocus (automatic focus) control that applies the above-described exposure control will be described. The processing shown in FIG. 8 is performed to determine the presence or absence of the sun block by performing the sun block determination. When there is a block determined to be the sun block, the sun block is removed and the detection signal for focusing is detected. Perform the operation. Thereby, the false focus by the high-intensity signal of a solar part can be reduced, and a more accurate autofocus can be implement | achieved.

(ホワイトバランス制御)
次に、ホワイトバランス制御について説明する。本実施形態では、撮影画角内の太陽ブロックの位置及び撮像装置1の傾き情報から、太陽の位置、例えば高さを判定し、ホワイトバランスを制御する。図9は、本実施形態に係る撮像装置1におけるオートホワイトバランス制御の動作例を示す。以下に、本実施形態に係る撮像装置1におけるオートホワイトバランス制御の動作例について、図9に示すフローチャートを用いて説明する。
(White balance control)
Next, white balance control will be described. In the present embodiment, the position of the sun, for example, the height is determined from the position of the sun block within the shooting angle of view and the tilt information of the imaging device 1, and the white balance is controlled. FIG. 9 shows an operation example of auto white balance control in the imaging apparatus 1 according to the present embodiment. Hereinafter, an operation example of auto white balance control in the imaging apparatus 1 according to the present embodiment will be described with reference to a flowchart shown in FIG.

まず、上記図4に示す処理を行うことで、赤外線検出部10からの出力に基づいて上述した赤外線有無判定を行い(ステップS901)、撮影対象方向に太陽があるか否かを判定する(ステップS902)。撮影対象方向に太陽があると判定された場合(ステップS902/YES)は、撮像装置1の傾き判定を行う(ステップS903)。他方、撮影対象方向に太陽がないと判定された場合(ステップS902/NO)には、通常のホワイトバランス演算により補正値を出力し(ステップS904)、動作を終了する。   First, by performing the process shown in FIG. 4, the above-described infrared presence / absence determination is performed based on the output from the infrared detection unit 10 (step S901), and it is determined whether or not the sun is in the shooting target direction (step S901). S902). When it is determined that the sun is in the shooting target direction (step S902 / YES), the inclination of the imaging device 1 is determined (step S903). On the other hand, when it is determined that there is no sun in the shooting target direction (step S902 / NO), a correction value is output by normal white balance calculation (step S904), and the operation is terminated.

上記ステップS903において、上記図5に示す処理を行い、傾き検出部20の検出情報に基づいて上述した撮像装置1の傾き判定を行うことで、撮像装置1の上向きの傾きが一定角度以上あるか否かを判定する(ステップS905)。撮像装置1の上向きの傾きが一定角度以上あると判定された場合(ステップS905/YES)は、高輝度ブロック判定を行う(ステップS906)。他方、撮像装置1の上向きの傾きが一定角度以上ないと判定された場合(ステップS905/NO)には、通常のホワイトバランス演算により補正値を出力し(ステップS904)、動作を終了する。   In step S903, the process shown in FIG. 5 is performed, and the above-described inclination determination of the imaging apparatus 1 is performed based on the detection information of the inclination detection unit 20, so that the upward inclination of the imaging apparatus 1 is greater than a certain angle. It is determined whether or not (step S905). When it is determined that the upward inclination of the imaging apparatus 1 is equal to or greater than a certain angle (step S905 / YES), high-intensity block determination is performed (step S906). On the other hand, when it is determined that the upward inclination of the imaging apparatus 1 is not equal to or greater than a certain angle (step S905 / NO), a correction value is output by normal white balance calculation (step S904), and the operation is terminated.

上記ステップS906において、上記図7に示す処理を行い、輝度信号検波部74及び制御部75により上述した高輝度ブロック判定を行うことで、1画角の映像信号を16×16の256分割された分割ブロックが高輝度ブロックであるか否かを判定する(ステップS907)。分割ブロックが、高輝度ブロックでないと判定された場合(ステップS907/YES)には、通常のホワイトバランス演算により補正値を出力し(ステップS904)、動作を終了する。尚、本実施形態では画角の映像信号を16×16の256分割する例を挙げて説明したが、これに限定されるものではない。   In step S906, the processing shown in FIG. 7 is performed, and the luminance signal detection unit 74 and the control unit 75 perform the above-described high luminance block determination, so that the video signal of one angle of view is divided into 256 of 16 × 16. It is determined whether or not the divided block is a high luminance block (step S907). If it is determined that the divided block is not a high luminance block (step S907 / YES), a correction value is output by normal white balance calculation (step S904), and the operation is terminated. In the present embodiment, an example in which a video signal of an angle of view is divided into 16 × 16 256 has been described. However, the present invention is not limited to this.

他方、上記ステップS907において、分割ブロックが、高輝度ブロックであると判定された場合(ステップS907/YES)は、高輝度ブロックの位置に太陽光があると判断する。そして、高輝度ブロックと撮像装置1の傾きから、太陽の角度・高さを算出する(ステップS908)。さらに、予め用意された太陽光の角度と色温度とを関連づけて記憶した色温度テーブルから、撮影条件下(例えば、太陽の高さ)での太陽光の色温度を推定し(ステップS909)、推定された色温度に対して最適な補正となるようホワイトバランス演算により補正値を出力する(ステップS910)。これにより、撮影対象物の有彩色情報によるオートホワイトバランスの誤動作を抑えることができ、より正確なオートホワイトバランス制御を実現することができる。   On the other hand, if it is determined in step S907 that the divided block is a high luminance block (step S907 / YES), it is determined that there is sunlight at the position of the high luminance block. Then, the sun angle and height are calculated from the high luminance block and the inclination of the imaging device 1 (step S908). Furthermore, the color temperature of sunlight under a shooting condition (for example, the height of the sun) is estimated from a color temperature table stored in association with the angle of sunlight and the color temperature prepared in advance (step S909). A correction value is output by white balance calculation so as to achieve an optimum correction for the estimated color temperature (step S910). As a result, malfunction of auto white balance due to chromatic color information of the object to be photographed can be suppressed, and more accurate auto white balance control can be realized.

尚、色温度テーブルには、太陽の位置に基づいた平均的な色温度情報や色温度情報に合わせた適正補正データ情報を予め記憶しておく。色温度情報としては、例えば、日中、すなわち太陽の高さが高い場合には色温度6000K程度とし、夕方、すなわち太陽の高さが低い場合には色温度4500K程度とすることができるが、これに限定されるものではない。   In the color temperature table, average color temperature information based on the position of the sun and appropriate correction data information according to the color temperature information are stored in advance. As the color temperature information, for example, the color temperature can be about 6000 K in the daytime, that is, when the sun is high, and the color temperature can be about 4500 K in the evening, that is, when the sun is low, It is not limited to this.

以上のように、本実施形態では、赤外線検出部により撮像装置に向けられた太陽光の有無を判定し、さらに傾き検出部により撮像装置の傾き角度を検出することで、撮影画角内における太陽の有無を判定する。また、輝度信号検波部より得られる、1画角を複数に分割されたブロックの各輝度値により、撮影画角中の輝度分布状態について解析を行い、撮影画角における太陽光の位置を検出する。そして、制御部が輝度分布状態及び各ブロックの太陽光の有無に基づいて、露出演算用の輝度評価値Yevを算出する。   As described above, in the present embodiment, the infrared ray detection unit determines the presence or absence of sunlight directed to the imaging device, and the inclination detection unit detects the tilt angle of the imaging device, so that the sun within the shooting field angle is detected. The presence or absence of is determined. Also, the luminance distribution state in the shooting angle of view is analyzed based on each luminance value of the block obtained by dividing the one angle of view obtained from the luminance signal detection unit, and the position of sunlight in the shooting angle of view is detected. . And a control part calculates the brightness | luminance evaluation value Yev for exposure calculation based on the brightness distribution state and the presence or absence of sunlight of each block.

上述したように算出された輝度評価値Yevにより露出制御を決定するパラメータ、例えば絞り、増幅率、シャッター等の調整が行われる。これにより、撮影画角内に太陽を含むような逆光状態において、太陽の影響を受けず安定した適正な露出を得ることが可能となる。すなわち、逆光状態判別の精度を向上させ、撮影状態に合わせて常に最適な露出補正を行うことが可能となる。   Adjustment of parameters for determining exposure control based on the brightness evaluation value Yev calculated as described above, such as an aperture, an amplification factor, and a shutter, is performed. This makes it possible to obtain a stable and appropriate exposure without being influenced by the sun in a backlight state where the sun is included in the shooting angle of view. That is, it is possible to improve the accuracy of the backlight state determination and always perform the optimum exposure correction according to the shooting state.

また、画像信号中における太陽光の位置情報を利用することで、太陽部分の高輝度信号による偽合焦を低減することが可能となり、より精度の高いオートフォーカスを実現することが可能となる。さらに、画像信号中における太陽光の位置情報を利用することで、撮影対象物の有彩色情報によるオートホワイトバランスの誤動作を抑えることができ、より正確なオートホワイトバランス制御を実現することが可能となる。   Further, by using the position information of sunlight in the image signal, it is possible to reduce false focusing due to a high luminance signal of the sun portion, and it is possible to realize autofocus with higher accuracy. Furthermore, by using the position information of sunlight in the image signal, it is possible to suppress malfunction of auto white balance due to chromatic color information of the object to be photographed and to realize more accurate auto white balance control. Become.

尚、各図のフローチャートに示す処理を、CPUが実行するためのプログラムは本発明によるプログラムを構成する。このプログラムを記録するコンピュータ読み取り可能な記録媒体としては、半導体記憶部や光学的及び/又は磁気的な記憶部等を用いることができる。このようなプログラム及び記録媒体を、前述した各実施形態とは異なる構成のシステム等で用い、そこのCPUで上記プログラムを実行させることにより、本発明と実質的に同じ効果を得ることができる。   Note that a program for the CPU to execute the processing shown in the flowcharts of the respective drawings constitutes a program according to the present invention. As a computer-readable recording medium for recording the program, a semiconductor storage unit, an optical and / or magnetic storage unit, or the like can be used. By using such a program and a recording medium in a system having a configuration different from that of each of the above-described embodiments and causing the CPU to execute the program, substantially the same effect as the present invention can be obtained.

以上好適な実施の形態に基づき具体的に説明したが、本発明は上述した撮像装置、撮像方法、プログラム及び記録媒体に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であるということは言うまでもない。   Although specifically described based on the preferred embodiments, the present invention is not limited to the above-described imaging apparatus, imaging method, program, and recording medium, and various modifications can be made without departing from the scope of the invention. Needless to say.

本発明は、撮像装置だけでなく、様々な電子デバイスに適用することが可能である。   The present invention can be applied not only to an imaging apparatus but also to various electronic devices.

1 撮像装置
10 赤外線検出部
20 傾き検出部
30 画像処理部
40 光学素子
50 撮像素子
60 A/D変換部
70 露光制御部
71 光量制御部
72 増幅部
73 撮像素子駆動部
74 輝度信号検波部
75 制御部
DESCRIPTION OF SYMBOLS 1 Imaging device 10 Infrared detection part 20 Inclination detection part 30 Image processing part 40 Optical element 50 Imaging element 60 A / D conversion part 70 Exposure control part 71 Light quantity control part 72 Amplification part 73 Imaging element drive part 74 Luminance signal detection part 75 Control Part

特開2000−050153号公報JP 2000-050153 A

Claims (15)

赤外線を検出する赤外線検出手段と、
撮像装置の傾きを検出する傾き検出手段と、
撮像素子から出力される画像データに画像処理を行う画像処理手段と、
前記撮像装置による撮影画角内に太陽光が含まれるか否かを判定する太陽光有無判定手段と、を備え、
前記赤外線検出手段は、前記赤外線の検出に基づいて電気信号を出力し、
前記画像処理手段は、前記画像データの輝度情報を出力し、
前記太陽光有無判定手段は、前記赤外線検出段により出力される電気信号と、前記傾き検出手段により検出される前記撮像装置の傾きと、前記画像処理手段により出力される前記画像データの輝度情報と、に基づいて、前記撮影画角内に太陽光が含まれるか否かを判定することを特徴とする撮像装置。
Infrared detecting means for detecting infrared;
Tilt detecting means for detecting the tilt of the imaging device;
Image processing means for performing image processing on image data output from the image sensor;
Solar light presence / absence determining means for determining whether or not sunlight is included in a field angle of view by the imaging device,
The infrared detection means outputs an electrical signal based on the detection of the infrared;
The image processing means outputs luminance information of the image data;
The sunlight presence / absence determination means includes an electrical signal output by the infrared detection stage, an inclination of the imaging device detected by the inclination detection means, and luminance information of the image data output by the image processing means. Based on the above, it is determined whether or not sunlight is included in the shooting angle of view.
前記太陽光有無判定手段は、
前記赤外線検出手段から出力される電気信号と、撮影対象方向に太陽光が存在しない状態での前記赤外線検出手段の出力レベルとの差が所定値以上であり、
前記傾き検出手段により取得される前記撮像装置の傾きが、水平基準に対して重力方向とは反対方向に所定角度以上であり、
1画角分の前記画像データの平均輝度値と、1画角分の前記画像データを所定ブロック数に分割したときのブロックの平均輝度値と、の差が所定値以上である場合に、
前記撮影画角内に太陽光が含まれると判定することを特徴とする請求項1記載の撮像装置。
The sunlight presence determination means is
The difference between the electrical signal output from the infrared detection means and the output level of the infrared detection means in a state where sunlight does not exist in the direction of the image capturing object is a predetermined value or more,
The inclination of the imaging device acquired by the inclination detection means is equal to or greater than a predetermined angle in a direction opposite to the gravitational direction with respect to a horizontal reference;
When the difference between the average luminance value of the image data for one angle of view and the average luminance value of the blocks when the image data for one angle of view is divided into a predetermined number of blocks is greater than or equal to a predetermined value,
The imaging apparatus according to claim 1, wherein it is determined that sunlight is included in the shooting angle of view.
前記太陽光有無判定手段は、前記1画角分の前記画像データの平均輝度値との差が所定値以上の平均輝度値を有するブロックを、太陽光を含有する太陽光ブロックであると判定することを特徴とする請求項2記載の撮像装置。   The sunlight presence / absence determining means determines that a block having an average luminance value equal to or greater than a predetermined value as a difference from an average luminance value of the image data for the one angle of view is a sunlight block containing sunlight. The imaging apparatus according to claim 2. 前記画像データに基づいて露出を制御する露出制御手段をさらに備え、
前記露出制御手段は、前記太陽光有無判定手段により撮影画角内に太陽光が含まれると判定された場合に、前記画像データの輝度情報から前記太陽光部分の輝度情報を除去して露出を制御することを特徴とする請求項1から3の何れか1項に記載の撮像装置。
Exposure control means for controlling exposure based on the image data;
The exposure control means removes the brightness information of the sunlight part from the brightness information of the image data when the sunlight presence / absence determination means determines that sunlight is included in the shooting angle of view. The imaging apparatus according to claim 1, wherein the imaging apparatus is controlled.
前記撮像素子に入射する光量を制御する光量制御手段と、
露光時間を制御する撮像素子駆動手段と、
前記撮像素子から出力された画像データの信号を増幅する増幅手段と、を備え、
前記露出制御手段は、前記太陽光有無判定手段の判定に基づいて、前記光量制御手段と撮像素子駆動手段と増幅手段とを制御することを特徴とする請求項4記載の撮像装置。
A light amount control means for controlling a light amount incident on the image sensor;
Image sensor driving means for controlling the exposure time;
Amplifying means for amplifying the signal of the image data output from the image sensor;
5. The image pickup apparatus according to claim 4, wherein the exposure control unit controls the light amount control unit, the image sensor driving unit, and the amplification unit based on the determination by the sunlight presence / absence determination unit.
前記画像データに基づいて自動合焦を制御する自動合焦制御手段をさらに備え、
前記自動合焦制御手段は、前記太陽光有無判定手段により撮影画角内に太陽光が含まれると判定された場合に、前記画像データの情報から前記太陽光部分の情報を除去して自動合焦を制御することを特徴とする請求項1から5の何れか1項に記載の撮像装置。
Automatic focusing control means for controlling automatic focusing based on the image data,
The automatic focusing control means removes the information of the sunlight part from the information of the image data when the sunlight presence / absence determination means determines that sunlight is included in the shooting angle of view. The imaging apparatus according to claim 1, wherein focus is controlled.
太陽光の角度と色温度とを関連づけて記憶する色温度記憶手段と、
前記画像データに基づいてホワイトバランスを制御するホワイトバランス制御手段と、をさらに備え、
前記ホワイトバランス制御手段は、前記太陽光有無判定手段により撮影画角内に太陽光が含まれると判定された場合に、前記太陽光部分から前記太陽光の角度を推定し、前記太陽光の角度と前記色温度記憶手段に記憶された色温度とに基づいて、ホワイトバランスを制御することを特徴とする請求項1から6の何れか1項に記載の撮像装置。
Color temperature storage means for storing the angle of sunlight and the color temperature in association with each other;
White balance control means for controlling white balance based on the image data,
The white balance control unit estimates the angle of the sunlight from the sunlight part when the sunlight presence / absence determination unit determines that sunlight is included in the shooting angle of view, and the angle of the sunlight The image pickup apparatus according to claim 1, wherein white balance is controlled based on the color temperature stored in the color temperature storage unit.
赤外線を検出し、前記赤外線の検出に基づいて電気信号を出力する赤外線検出ステップと、
撮像装置の傾きを検出する傾き検出ステップと、
撮像素子から出力される画像データに画像処理を行い、前記画像データの輝度情報を出力する画像処理ステップと、
前記撮像装置による撮影画角内に太陽光が含まれるか否かを判定する太陽光有無判定ステップと、を備え、
前記太陽光有無判定ステップは、前記赤外線検ステップにより出力される電気信号と、前記傾き検出ステップにより検出される前記撮像装置の傾きと、前記画像処理ステップにより出力される前記画像データの輝度情報と、に基づいて、前記撮影画角内に太陽光が含まれるか否かを判定することを特徴とする撮像方法。
An infrared detection step of detecting infrared rays and outputting an electrical signal based on the detection of the infrared rays;
A tilt detection step for detecting the tilt of the imaging device;
An image processing step of performing image processing on the image data output from the image sensor and outputting luminance information of the image data;
And a sunlight presence / absence determination step for determining whether or not sunlight is included in a field angle of view by the imaging device,
The sunlight presence / absence determination step includes an electrical signal output by the infrared detection step, a tilt of the imaging device detected by the tilt detection step, and luminance information of the image data output by the image processing step. Based on the above, it is determined whether or not sunlight is included in the shooting angle of view.
前記太陽光有無判定ステップは、
前記赤外線検出ステップで出力される電気信号と、撮影対象方向に太陽光が存在しない状態での出力レベルとの差が所定値以上であり、
前記傾き検出ステップにより取得される前記撮像装置の傾きが、水平基準に対して重力方向とは反対方向に所定角度以上であり、
1画角分の前記画像データの平均輝度値と、1画角分の前記画像データを所定ブロック数に分割したときのブロックの平均輝度値と、の差が所定値以上である場合に、
前記撮影画角内に太陽光が含まれると判定することを特徴とする請求項8記載の撮像方法。
The sunlight presence determination step includes
The difference between the electrical signal output in the infrared detection step and the output level in the absence of sunlight in the shooting target direction is a predetermined value or more,
The inclination of the imaging device acquired by the inclination detection step is a predetermined angle or more in a direction opposite to the gravitational direction with respect to a horizontal reference;
When the difference between the average luminance value of the image data for one angle of view and the average luminance value of the blocks when the image data for one angle of view is divided into a predetermined number of blocks is greater than or equal to a predetermined value,
The imaging method according to claim 8, wherein sunlight is determined to be included in the shooting angle of view.
前記太陽光有無判定ステップは、前記1画角分の前記画像データの平均輝度値との差が所定値以上の平均輝度値を有するブロックを、太陽光を含有する太陽光ブロックであると判定することを特徴とする請求項9記載の撮像方法。   In the sunlight presence / absence determining step, a block having an average luminance value that is equal to or greater than a predetermined value with respect to the average luminance value of the image data for the one angle of view is determined to be a sunlight block containing sunlight. The imaging method according to claim 9. 前記画像データに基づいて露出を制御する露出制御ステップをさらに備え、
前記露出制御ステップは、前記太陽光有無判定ステップにより撮影画角内に太陽光が含まれると判定された場合に、前記画像データの輝度情報から前記太陽光部分の輝度情報を除去して露出を制御することを特徴とする請求項8から10の何れか1項に記載の撮像方法。
An exposure control step of controlling exposure based on the image data;
In the exposure control step, when it is determined by the sunlight presence / absence determination step that sunlight is included in the shooting angle of view, the exposure is performed by removing the luminance information of the sunlight portion from the luminance information of the image data. The imaging method according to claim 8, wherein the imaging method is controlled.
前記画像データに基づいて自動合焦を制御する自動合焦制御ステップをさらに備え、
前記自動合焦制御ステップは、前記太陽光有無判定ステップにより撮影画角内に太陽光が含まれると判定された場合に、前記画像データの情報から前記太陽光部分の情報を除去して自動合焦を制御することを特徴とする請求項8から11の何れか1項に記載の撮像方法。
An automatic focusing control step for controlling automatic focusing based on the image data;
In the automatic focusing control step, when it is determined by the sunlight presence / absence determination step that sunlight is included in the shooting angle of view, the information on the sunlight portion is removed from the information of the image data to perform automatic focusing. The imaging method according to claim 8, wherein focus is controlled.
太陽光の角度と色温度とを関連づけて記憶する色温度記憶ステップと、
前記画像データに基づいてホワイトバランスを制御するホワイトバランス制御ステップと、をさらに備え、
前記ホワイトバランス制御ステップは、前記太陽光有無判定ステップにより撮影画角内に太陽光が含まれると判定された場合に、前記太陽光部分から前記太陽光の角度を推定し、前記太陽光の角度と前記色温度記憶ステップで記憶された色温度とに基づいて、ホワイトバランスを制御することを特徴とする請求項8から12の何れか1項に記載の撮像方法。
A color temperature storage step for storing the angle of sunlight and the color temperature in association with each other;
A white balance control step for controlling white balance based on the image data, and
The white balance control step estimates the angle of sunlight from the sunlight portion when the sunlight presence / absence determination step determines that sunlight is included in the shooting angle of view, and the angle of sunlight The imaging method according to claim 8, wherein white balance is controlled based on the color temperature stored in the color temperature storage step.
赤外線を検出し、前記赤外線の検出に基づいて電気信号を出力する処理と、
撮像装置の傾きを検出する処理と、
撮像素子から出力される画像データに画像処理を行い、前記画像データの輝度情報を出力する処理と、
前記電気信号と前記撮像装置の傾きと前記画像データの輝度情報とに基づいて、前記撮像装置による撮影画角内に太陽光が含まれるか否かを判定する処理と、をコンピュータに実行させることを特徴とするプログラム。
Detecting infrared rays and outputting an electric signal based on the detection of the infrared rays;
Processing to detect the tilt of the imaging device;
Performing image processing on image data output from the image sensor, and outputting luminance information of the image data;
Causing the computer to execute a process of determining whether or not sunlight is included in a shooting angle of view by the imaging device based on the electrical signal, the tilt of the imaging device, and the luminance information of the image data. A program characterized by
請求項14記載のプログラムを記録したコンピュータ読取可能な記録媒体。   The computer-readable recording medium which recorded the program of Claim 14.
JP2009063473A 2009-03-16 2009-03-16 Imaging apparatus, imaging method, program, and recording medium Expired - Fee Related JP5245947B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009063473A JP5245947B2 (en) 2009-03-16 2009-03-16 Imaging apparatus, imaging method, program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009063473A JP5245947B2 (en) 2009-03-16 2009-03-16 Imaging apparatus, imaging method, program, and recording medium

Publications (2)

Publication Number Publication Date
JP2010219810A JP2010219810A (en) 2010-09-30
JP5245947B2 true JP5245947B2 (en) 2013-07-24

Family

ID=42978170

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009063473A Expired - Fee Related JP5245947B2 (en) 2009-03-16 2009-03-16 Imaging apparatus, imaging method, program, and recording medium

Country Status (1)

Country Link
JP (1) JP5245947B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5423138B2 (en) * 2009-05-18 2014-02-19 パナソニック株式会社 Imaging device
JP5935432B2 (en) * 2012-03-22 2016-06-15 株式会社リコー Image processing apparatus, image processing method, and imaging apparatus
JP5980535B2 (en) * 2012-03-26 2016-08-31 オリンパス株式会社 Imaging device and image data recording method
KR101907657B1 (en) 2018-05-23 2018-10-12 엘아이지넥스원 주식회사 Apparatus securing exposure time of image sensor
EP3719529A1 (en) 2019-03-20 2020-10-07 Ricoh Company, Ltd. Range finding device and range finding method
WO2020230930A1 (en) * 2019-05-16 2020-11-19 엘지전자 주식회사 Thermal imaging camera and control method thereof

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03274971A (en) * 1990-03-26 1991-12-05 Mitsubishi Electric Corp Infrared ray image pickup device
JP2000050153A (en) * 1998-07-30 2000-02-18 Ricoh Co Ltd Exposure control method, medium storing exposure control program and exposure controller
JP2002182106A (en) * 2000-12-18 2002-06-26 Ricoh Co Ltd Focusing control system for digital still video camera
JP2006041800A (en) * 2004-07-26 2006-02-09 Fuji Photo Film Co Ltd Photography device
JP2007251258A (en) * 2006-03-13 2007-09-27 Fujitsu Ten Ltd Image recognizing device
JP2008160406A (en) * 2006-12-22 2008-07-10 Fujifilm Corp Photographing device

Also Published As

Publication number Publication date
JP2010219810A (en) 2010-09-30

Similar Documents

Publication Publication Date Title
JP4483930B2 (en) Imaging apparatus, control method thereof, and program
JP4936534B2 (en) Imaging apparatus and focus control method
JP6518452B2 (en) Imaging apparatus and imaging method
US8310589B2 (en) Digital still camera including shooting control device and method of controlling same
JP5245947B2 (en) Imaging apparatus, imaging method, program, and recording medium
JP2008052123A (en) Imaging apparatus
JP2006005520A (en) Imaging apparatus
US9706131B2 (en) Image combining apparatus for generating a combined image from a plurality of images, image combining system, and image combining method
JP2008289032A (en) Imaging apparatus
US10200589B2 (en) Autofocus apparatus and optical apparatus
JP5769773B2 (en) Camera system and focus detection pixel correction method
JP2021196643A (en) Inference device, imaging device, learning device, inference method, learning method and program
WO2012093663A1 (en) Image processing device, image capturing device, and image processing program
JP2007328360A (en) Automatic focusing camera and photographing method
JP2002330335A (en) Still picture image pickup device
JP5159295B2 (en) Automatic focusing device and imaging device
JP5030883B2 (en) Digital still camera and control method thereof
KR101579734B1 (en) Digital photographing apparatus, control method thereof, and recording medium storing a program for executing the same
US10187559B2 (en) Flash band determination device for detecting flash band, method of controlling the same, storage medium, and image pickup apparatus
JP2010072559A (en) Imaging apparatus and object area extracting method
US11956538B2 (en) Image capturing apparatus that performs blur correction and method of controlling same
JP6272006B2 (en) Imaging apparatus, image processing method, and program
US20220394174A1 (en) Information processing apparatus that notifies subject blur, image capturing apparatus, information processing method, and control method
JP2008263386A (en) Still image pickup apparatus
JP2017125985A (en) Imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120622

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130325

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160419

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees