[go: up one dir, main page]

JP2011029691A - Imaging apparatus - Google Patents

Imaging apparatus Download PDF

Info

Publication number
JP2011029691A
JP2011029691A JP2009170151A JP2009170151A JP2011029691A JP 2011029691 A JP2011029691 A JP 2011029691A JP 2009170151 A JP2009170151 A JP 2009170151A JP 2009170151 A JP2009170151 A JP 2009170151A JP 2011029691 A JP2011029691 A JP 2011029691A
Authority
JP
Japan
Prior art keywords
image
imaging
background
user
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009170151A
Other languages
Japanese (ja)
Inventor
Hironao Otsu
弘直 大津
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2009170151A priority Critical patent/JP2011029691A/en
Publication of JP2011029691A publication Critical patent/JP2011029691A/en
Withdrawn legal-status Critical Current

Links

Landscapes

  • Exposure Control For Cameras (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an imaging apparatus capable of selecting or correcting a captured image having a desired image frame or angle of field at a user-desired timing after imaging. <P>SOLUTION: The imaging apparatus includes an optical system for generating an optical image from an object, an adjustment part for adjusting a focal length of the optical system, an imaging part for photoelectrically converting the optical image for imaging to generate the imaging signal, an operation part for operating the start timing and stop timing of a continuous imaging period for continuously capturing the optical image and the background imaging timing for capturing the optical image including the background of the object at the previous time frame and/or next time frame of the continuous imaging period by a series of operations, and an image processing part for generating an image signal by performing image processing to the imaging signal. The adjustment part performs adjustment so that the focal length is shortened when the timing of the background imaging is operated. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、ユーザが所望する撮像画像を得るためのユーザ補助機能を備えた撮像装置に関するものである。   The present invention relates to an imaging apparatus having a user assistance function for obtaining a captured image desired by a user.

近年に於いて、熟練したユーザでなくても所望する撮像画像を得るためのユーザ補助機能を備えた撮像装置が市場から要求されている。   In recent years, there has been a demand from the market for an imaging apparatus having a user assistance function for obtaining a desired captured image even if it is not a skilled user.

例えば、下記特許文献1に記載の電子スチルカメラおよび撮影方法は、ユーザがシャッターチャンスを逃した場合でも、ユーザが押したシャッタータイミング前後の再生画像に対してシャッターを押し直すことで、シャッタータイミングの修正ができる。   For example, in the electronic still camera and the photographing method described in Patent Document 1 below, even when the user misses a shutter opportunity, the shutter timing is changed by pressing the shutter again with respect to the reproduced images before and after the shutter timing pressed by the user. Can be corrected.

一方で、下記特許文献2に記載のズーム機能付きカメラでは、一度の操作で複数の焦点距離による撮像が自動的に為されることで、ユーザの操作した焦点距離がユーザの所望する画角でなかったとしても、撮像後に所望の画角が選択できる。   On the other hand, in the camera with a zoom function described in Patent Document 2 below, imaging at a plurality of focal lengths is automatically performed with a single operation, so that the focal length operated by the user is at the angle of view desired by the user. Even if not, a desired angle of view can be selected after imaging.

特許第3713973号公報Japanese Patent No. 3713973 特許第3915265号公報Japanese Patent No. 3915265

ユーザが所望する撮像画像を得るためのユーザ補助機能について考察すれば、ユーザがスポーツ選手などの動的被写体を撮像する際に、課題1)シャッターチャンスを逃してしまって、所望するタイミングの撮像画像が得られていない。課題2)ユーザによるフレーミング操作の失敗(手ブレを含む)に起因して、所望する画枠の撮像画像が得られていない。という2つの課題がある。   Considering the user assistance function for obtaining a desired captured image by the user, when the user images a dynamic subject such as a sports player, the problem 1) missed a photo opportunity, and the captured image at the desired timing. Is not obtained. Problem 2) A captured image of a desired image frame is not obtained due to failure of the framing operation by the user (including camera shake). There are two issues.

例えば、特許文献1に記載の電子スチルカメラおよび撮影方法は、課題1)については、ユーザが押したシャッタータイミング前後の再生画像に対してシャッターを押し直すことで、シャッタータイミングの修正ができる。しかしながら、課題2)については、ユーザが所望するタイミングに於いて、画像の画枠を修正する機能はない。   For example, in the electronic still camera and the photographing method described in Patent Document 1, with respect to the problem 1), the shutter timing can be corrected by pressing the shutter again with respect to the reproduced images before and after the shutter timing pressed by the user. However, for the problem 2), there is no function for correcting the image frame at the timing desired by the user.

一方で、特許文献2に記載のズーム機能付きカメラは、課題2)については、撮像後に所望の画角が選択できるので、所望する画枠の画像を得るためには、この選択画角の画像に対して所望する画枠にトリミングすれば良い。しかしながら、課題1)については、ユーザが所望する画枠に於いて、シャッタータイミングの修正をする機能はない。   On the other hand, since the camera with a zoom function described in Patent Document 2 can select a desired angle of view after shooting for the problem 2), in order to obtain an image of a desired image frame, an image of this selected angle of view is used. In contrast, the image may be trimmed to a desired image frame. However, for the problem 1), there is no function for correcting the shutter timing in the image frame desired by the user.

本発明は、前述した課題1)、課題2)に鑑みて、撮像後にユーザが所望するタイミングで、且つ、所望する画枠または画角である撮像画像を選択または補正できる撮像装置を提供することを目的としている。   In view of the above-described problems 1) and 2), the present invention provides an imaging apparatus capable of selecting or correcting a captured image having a desired image frame or angle of view at a timing desired by a user after imaging. It is an object.

本発明のある態様に係る撮像装置は、被写体から光学像を生成する光学系と、前記光学系の焦点距離を調節する調節部と、前記光学像を光電変換して撮像し、該撮像信号を生成する撮像部と、前記光学像を連続的に撮像する連続撮像期間の開始タイミング及び停止タイミング、及び、該連続撮像期間の前時及び/または後時に前記被写体の背景を含んだ前記光学像を撮像する背景撮像のタイミング、を一連の操作にて操作するための操作部と、前記撮像信号に画像処理を施して画像信号を生成する画像処理部と、を備える。前記調節部は、前記背景撮像のタイミングが操作されると、前記焦点距離が短くなるように調節する。   An imaging apparatus according to an aspect of the present invention includes an optical system that generates an optical image from a subject, an adjustment unit that adjusts a focal length of the optical system, and photoelectrically converts the optical image to capture the image signal. An imaging unit to generate, and a start timing and a stop timing of a continuous imaging period in which the optical image is continuously captured, and the optical image including the background of the subject before and / or after the continuous imaging period. An operation unit for operating the timing of background imaging for imaging by a series of operations, and an image processing unit that performs image processing on the imaging signal to generate an image signal. The adjusting unit adjusts the focal length to be short when the timing of background imaging is operated.

本発明によれば、ユーザが所望するタイミングの撮像画像が得られる効果がある。   According to the present invention, there is an effect that a captured image at a timing desired by a user can be obtained.

また、本発明によれば、ユーザが所望する画枠または画角である撮像画像が得られる効果がある。   Further, according to the present invention, there is an effect that a captured image having an image frame or an angle of view desired by the user can be obtained.

本発明の第1の実施形態による撮像装置の基本構成を示すブロック図である。1 is a block diagram illustrating a basic configuration of an imaging apparatus according to a first embodiment of the present invention. ユーザによる一連の操作と、各操作に於ける操作部の状態と、の関係についての一例を夫々示す図である。It is a figure which shows an example about the relationship between a series of operation by a user, and the state of the operation part in each operation, respectively. 本発明の第1の実施形態による撮像装置の操作手順を示すフローチャートである。It is a flowchart which shows the operation procedure of the imaging device by the 1st Embodiment of this invention. 本発明の第1の実施形態による撮像装置の基本的な概念を示す概念図である。It is a conceptual diagram which shows the basic concept of the imaging device by the 1st Embodiment of this invention. ユーザが意図しない失敗撮像にて得られた撮像画像のイメージ画像である。It is an image of a captured image obtained by unsuccessful imaging that is not intended by the user. 連続撮像期間に撮像される撮像画像の一例を示すイメージ画像である。It is an image image which shows an example of the captured image imaged in the continuous imaging period. 背景撮像にて撮像される撮像画像の一例を示すイメージ画像である。It is an image image which shows an example of the captured image imaged by background imaging. 図1及び図4で示された合成画像の一例を示すイメージ画像である。FIG. 5 is an image showing an example of the composite image shown in FIGS. 1 and 4. FIG. 図8で示された合成画像に対して、ユーザが所望するトリミングを施した合成画像の一例を示すイメージ画像である。It is an image image which shows an example of the synthesized image which performed the trimming which a user desires with respect to the synthesized image shown in FIG. 本発明の第2の実施形態による撮像装置の基本構成を示すブロック図である。It is a block diagram which shows the basic composition of the imaging device by the 2nd Embodiment of this invention. 図7で示された背景画像の部分画像に、図6a〜図6dの撮像画像群を重ねて示したイメージ画像である。6 is an image image in which the captured image group of FIGS. 6a to 6d is superimposed on the partial image of the background image shown in FIG. 図7で示された背景画像から生成された動画像と、図6a〜図6dで示された選択画像群とを画像合成して生成された合成動画像の一例を示すイメージ画像である。8 is an image image showing an example of a synthesized moving image generated by synthesizing the moving image generated from the background image shown in FIG. 7 and the selected image group shown in FIGS. 6a to 6d. 図7で示された背景画像から生成された背景動画像の一例を示すイメージ画像である。It is an image image which shows an example of the background moving image produced | generated from the background image shown in FIG.

以下、図面を参照して本発明の実施形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(第1の実施形態)
図1は、本発明の第1の実施形態による撮像装置の基本構成を示すブロック図である。
(First embodiment)
FIG. 1 is a block diagram showing a basic configuration of an imaging apparatus according to the first embodiment of the present invention.

図1に於いて、この撮像装置は、可変焦点レンズ(光学系)10と、レンズドライバ(調節部)11と、ズームリング12と、イメージセンサ(撮像部)13と、操作部14と、画像処理部15と、選択部16と、合成部17と、より構成されている。   In FIG. 1, the imaging apparatus includes a variable focus lens (optical system) 10, a lens driver (adjustment unit) 11, a zoom ring 12, an image sensor (imaging unit) 13, an operation unit 14, and an image. The processing unit 15, the selection unit 16, and the synthesis unit 17 are configured.

可変焦点レンズ10は、焦点距離可変にて被写体から光学像を生成し、この光学像をイメージセンサ13の撮像面に出力する。レンズドライバ11は、この可変焦点レンズ10の焦点距離を調節する。ズームリング12は、ユーザが所望する焦点距離をレンズドライバ11に反映させるためのものであって、ユーザのズームリング12に対する操作からズームリング12の回転速度、回転位相をレンズドライバ11に対して出力する。尚、このズームリング12は、リング形状に限らず、ズームレバーやズーム釦、ズームダイヤルなどであっても良い。   The variable focus lens 10 generates an optical image from a subject with a variable focal length, and outputs the optical image to the imaging surface of the image sensor 13. The lens driver 11 adjusts the focal length of the variable focus lens 10. The zoom ring 12 is for reflecting the focal length desired by the user to the lens driver 11, and outputs the rotation speed and rotation phase of the zoom ring 12 to the lens driver 11 from the user's operation on the zoom ring 12. To do. The zoom ring 12 is not limited to a ring shape, and may be a zoom lever, a zoom button, a zoom dial, or the like.

イメージセンサ13は、光学像を光電変換して撮像し、撮像信号を生成し、画像処理部15に出力する。操作部14は、このイメージセンサ13に対して、光学像を連続的に撮像する連続撮像期間を開始する第1の操作と、連続撮像期間を停止する第2の操作とを操作する。この第2の操作が操作された場合には、同時に、操作部はレンズドライバに対して、被写体の背景を含んだ光学像を撮像する背景撮像のタイミングを入力する。そして、レンズドライバによって焦点距離は可変焦点レンズの最短焦点距離(広角端)に調節される。これら第1の操作と第2の操作は、ユーザによる一連の操作にて為される。尚、ユーザによる一連の操作については図2a〜図2d、及び、図3を用いて後述する。   The image sensor 13 photoelectrically converts and captures an optical image, generates an image signal, and outputs the image signal to the image processing unit 15. The operation unit 14 operates the image sensor 13 with a first operation for starting a continuous imaging period in which optical images are continuously captured and a second operation for stopping the continuous imaging period. When this second operation is operated, at the same time, the operation unit inputs timing of background imaging for capturing an optical image including the background of the subject to the lens driver. The focal length is adjusted by the lens driver to the shortest focal length (wide-angle end) of the variable focal length lens. The first operation and the second operation are performed by a series of operations by the user. A series of operations by the user will be described later with reference to FIGS. 2A to 2D and FIG.

画像処理部15は、撮像信号に画像処理を施して画像信号を生成し、連続撮像期間にて得られる複数フレームの画像信号を選択部16に出力し、背景撮像時にて得られる画像信号(背景画像)を合成部17に出力する。選択部16は、連続撮像期間にて得られる複数の画像信号の中から任意の選択画像をユーザに選択させるためのものであって、この選択画像を合成部17に出力する。合成部17は、この選択画像と背景画像とを画像合成して合成画像を生成する。   The image processing unit 15 performs image processing on the imaging signal to generate an image signal, outputs a plurality of frame image signals obtained in a continuous imaging period to the selection unit 16, and obtains an image signal (background) obtained at the time of background imaging. Image) is output to the combining unit 17. The selection unit 16 is for causing the user to select an arbitrary selection image from a plurality of image signals obtained in the continuous imaging period, and outputs the selection image to the synthesis unit 17. The synthesizer 17 synthesizes the selected image and the background image to generate a synthesized image.

図2a〜図2dは、ユーザによる一連の操作と、各操作に於ける操作部14の状態と、の関係についての一例を夫々示す図である。   2a to 2d are diagrams each illustrating an example of a relationship between a series of operations performed by the user and the state of the operation unit 14 in each operation.

先ず、図2aは、この操作部14が未だ押されていない未押し状態(ロック解除)が示されている。ロックとは、操作部14が押された状態で一時的に固定される機構のことである。次に、図2bは、一般的には半押しと言われる、半押し状態(ロックせず)が示されている。この半押し状態は、操作部14がロックされていない状態であるので、ユーザが指を半押しの状態に維持する必要がある。ここで、ユーザが指を離せば、再び図2aの未押し状態に戻る。   First, FIG. 2a shows an unpressed state (unlocked) in which the operation unit 14 is not yet pressed. The lock is a mechanism that is temporarily fixed while the operation unit 14 is pressed. Next, FIG. 2b shows a half-pressed state (not locked), commonly referred to as half-press. This half-pressed state is a state in which the operation unit 14 is not locked, so the user needs to maintain the finger half-pressed. Here, if the user releases the finger, the state returns to the unpressed state in FIG. 2a again.

図2cは、図2bで示された半押し状態から、更に深く押された全押し状態が示されている。この全押し状態になると操作部14はロックされる。ここで、ユーザが指を離しても、図2dで示されるように、操作部14は全押し状態がロックされる。また、図2aで示された未押し状態から、図2bで示された半押し状態で留まらず、そのまま一気に図2cで示された全押し状態にすることもできる。   FIG. 2c shows a fully-pressed state in which the button is pressed further deeper than the half-pressed state shown in FIG. 2b. When in the fully depressed state, the operation unit 14 is locked. Here, even if the user lifts his / her finger, as shown in FIG. Also, the unpressed state shown in FIG. 2a does not stay in the half-pressed state shown in FIG. 2b, but can be changed to the full-pressed state shown in FIG.

図2dは、図2cで示された全押し状態からユーザが指を離した状態が示されている。図2dで示されるように、この全押し状態はロック(一時固定)されている。図2dの全押し(ロック)状態から、ユーザが再び全押しする再押し状態(ロック解除)になると、外見上は図2cで示されたようになり、この時、ユーザが指を離せば、再び図2aで示された未押し状態に戻る。   FIG. 2d shows a state where the user has released his / her finger from the fully pressed state shown in FIG. 2c. As shown in FIG. 2d, this fully pressed state is locked (temporarily fixed). From the fully pressed (locked) state of FIG. 2d to the re-pressed state (unlocked) in which the user fully presses again, the appearance is as shown in FIG. 2c. At this time, if the user releases the finger, Again, it returns to the unpressed state shown in FIG. 2a.

図3は、本発明の第1の実施形態による撮像装置の操作手順を示すフローチャートである。   FIG. 3 is a flowchart showing an operation procedure of the imaging apparatus according to the first embodiment of the present invention.

図3に於いて、この撮像装置は、前述したユーザによる一連の操作(各操作に於ける操作部14の状態)に従って、連続撮像期間と、背景撮像時と、が制御される。   In FIG. 3, in this imaging apparatus, the continuous imaging period and the background imaging are controlled according to the above-described series of operations by the user (the state of the operation unit 14 in each operation).

先ず、図3で示されるスタートから始まる。このスタートの時点では、前述した操作部14の状態は、図2aで示された未押し状態であるとする。或いは、撮像装置の電源が落とされると、操作部14が強制的にこの未押し状態になる機構であっても良い。   First, start from the start shown in FIG. At the time of this start, it is assumed that the state of the operation unit 14 described above is the unpressed state shown in FIG. Alternatively, a mechanism may be used in which the operation unit 14 is forcibly pushed when the power of the imaging apparatus is turned off.

次に、ステップS1にて、操作部14が図2bで示された半押し状態(ロックせず)であるか、または、図2aで示された未押し状態であるかどうかについて判定される。ステップS1に於いて、半押し状態であればステップS2に移行する。   Next, in step S1, it is determined whether or not the operation unit 14 is in the half-pressed state (not locked) shown in FIG. 2b, or is not pressed in the state shown in FIG. 2a. If it is in the half-pressed state in step S1, the process proceeds to step S2.

ステップS2では、例えば、AE(自動露光制御)、AF(自動合焦制御)、AWB(自動ホワイトバランス制御)、顔検出、青空検出、文字検出、などが集中的に為される。これらの制御が完了すると、ステップS3に移行する。また、ステップS1に於いて、半押し状態ではない場合(図2a)もステップS3に移行する。   In step S2, for example, AE (automatic exposure control), AF (automatic focus control), AWB (automatic white balance control), face detection, blue sky detection, character detection, and the like are concentrated. When these controls are completed, the process proceeds to step S3. Also, in step S1, if the half-pressed state is not reached (FIG. 2a), the process also proceeds to step S3.

ステップS3では、操作部14が図2c(全押し状態)または図2d(全押しロック状態)で示されるような全押し状態であるかどうかについて判定される。ここで、全押し状態であればステップS4に移行する。また、全押し状態ではない場合(図2aまたは図2b)はステップS1に移行する。   In step S3, it is determined whether or not the operation unit 14 is in the fully pressed state as shown in FIG. 2c (fully pressed state) or FIG. 2d (fully pressed locked state). Here, if it is fully pressed, the process proceeds to step S4. If it is not fully depressed (FIG. 2a or 2b), the process proceeds to step S1.

ステップS4では、イメージセンサ13が有効画素mにて、連続撮像期間が開始される。そして、ステップS5に移行する。ステップS5では、図2dで示された全押しロック状態の操作部14が、図2cで示されたように、ユーザによって再び押される再押し状態となった後、この操作部14がロック解除されて、再び、図2aで示された未押し状態に判定されるまでの期間、このステップS5に留まる。ここで、再押し状態によるロック解除(即ち、未押し状態)が判定されればステップS6に移行する。   In step S4, the image sensor 13 starts a continuous imaging period at the effective pixel m. Then, the process proceeds to step S5. In step S5, the operation unit 14 in the fully-pressed locked state shown in FIG. 2d is re-pressed again by the user as shown in FIG. 2c, and then the operation unit 14 is unlocked. Then, again, it remains in this step S5 until it is determined to be in the non-pressed state shown in FIG. 2a. Here, if it is determined that the lock is released by the re-pressed state (that is, the non-pressed state), the process proceeds to step S6.

ステップS6では、イメージセンサ13による連続撮像期間が停止される。そして、ステップS7に移行する。ステップS7では、図1で示された可変焦点レンズ10が広角端(最短焦点)に強制的にドライブされる。そして、ステップS8に移行する。   In step S6, the continuous imaging period by the image sensor 13 is stopped. Then, the process proceeds to step S7. In step S7, the variable focus lens 10 shown in FIG. 1 is forcibly driven to the wide angle end (shortest focus). Then, the process proceeds to step S8.

ステップS8では、イメージセンサ13が有効画素n(但し、n>m)にて、背景撮像が為される。尚、画像合成の際の選択画像と背景画像との解像度を同程度にするように、背景撮像時の有効画素nを連続撮像期間の有効画素mより大きくしている。また、連続撮像期間では、撮像の連続性を向上させる目的から、撮像信号のフレームレートを高速にしたいので、背景撮像時よりも有効画素数を減らしている。そして、このステップS8による背景撮像が完了すれば、スタートから示されてきたユーザによる一連の操作手順が一巡して、再び、ステップS1に移行する。   In step S8, the image sensor 13 performs background imaging at the effective pixel n (where n> m). Note that the effective pixel n at the time of background imaging is set to be larger than the effective pixel m of the continuous imaging period so that the resolution of the selected image and the background image at the time of image composition are approximately equal. Also, in the continuous imaging period, the number of effective pixels is reduced compared to background imaging because it is desired to increase the frame rate of the imaging signal for the purpose of improving the continuity of imaging. When the background imaging in step S8 is completed, a series of operation procedures by the user indicated from the start is completed, and the process proceeds to step S1 again.

図4は、本発明の第1の実施形態による撮像装置の基本的な概念を示す概念図である。   FIG. 4 is a conceptual diagram showing a basic concept of the imaging apparatus according to the first embodiment of the present invention.

図4に於いて、この概念図は、図1にて既に示されたブロック図の上に、ユーザが被写体を撮像する際の一連の操作と、その操作に連動して可変焦点レンズ10が制御されることについて、更に説明書きを加えた概念図である。   In FIG. 4, this conceptual diagram is based on the block diagram already shown in FIG. 1, and a series of operations when the user images the subject, and the variable focus lens 10 is controlled in conjunction with the operations. It is the conceptual diagram which added the explanatory note about what is done.

先ず、ユーザは、被写体の中からユーザの注目する注目被写体に対して撮像する画角(破線1)を調節しつつ、撮像画枠をフレーミングする。この画角調節はユーザによるズームリング操作によって、レンズドライバ11を介して、可変焦点レンズ10の主点(破線2)から焦点(破線3)までの焦点距離が調節されることにより調節される。ここで、この焦点距離の調節範囲は、レンズの主点が望遠端(破線4)から広角端(破線5)までの移動可能な範囲のことである。また、この時点に於いては、ユーザによる操作部14に対する操作は、図2aで示された未押し状態にあるとする。   First, the user frames the captured image frame while adjusting the angle of view (broken line 1) for the subject of interest of the user from among the subjects. This angle of view is adjusted by adjusting the focal length from the principal point (dashed line 2) to the focal point (dashed line 3) of the variable focus lens 10 through the lens driver 11 by a zoom ring operation by the user. Here, the focal length adjustment range is a range in which the principal point of the lens is movable from the telephoto end (dashed line 4) to the wide-angle end (dashed line 5). At this time, it is assumed that the operation on the operation unit 14 by the user is in the unpressed state shown in FIG.

次に、ユーザは、所望する撮像画枠をフレーミングしたら、注目被写体が所望のタイミングに至ることを待たずに、操作部14を図2cで示された全押し状態にする。ここで、ユーザが指を離せば、図2dで示された全押しロック状態になり、イメージセンサ13による連続撮像期間が開始される。この期間に於いて、ユーザは、画角を変更しながら撮像することもできるし、或いは、画角を固定したままに撮像画枠のフレーミングを変更しながら撮像することもできる。つまり、ユーザは注目被写体に対して撮像画枠の動体追尾を行う。   Next, after framing the desired captured image frame, the user puts the operation unit 14 in the fully pressed state shown in FIG. 2c without waiting for the target subject to reach the desired timing. Here, when the user lifts his / her finger, the full-press lock state shown in FIG. 2D is entered, and the continuous imaging period by the image sensor 13 is started. In this period, the user can take an image while changing the angle of view, or can take an image while changing the framing of the imaged image frame while fixing the angle of view. That is, the user performs moving body tracking of the captured image frame with respect to the subject of interest.

そして、この連続撮像期間に於いて、注目被写体が所望のタイミングに至った後、ユーザは、再び、操作部14を図2cで示された再押し状態(ロック解除)にすれば、操作部14は図2aで示された未押し状態に戻って、イメージセンサ13による連続撮像期間が停止される。この時、操作部14からレンズドライバ11に対してLAST信号が出力される。   Then, in this continuous imaging period, after the subject of interest reaches a desired timing, if the user again pushes the operation unit 14 into the re-pressed state (unlocked) shown in FIG. 2a returns to the unpressed state shown in FIG. 2a, and the continuous imaging period by the image sensor 13 is stopped. At this time, a LAST signal is output from the operation unit 14 to the lens driver 11.

このLAST信号がレンズドライバ11に受信されると、可変焦点レンズ10の焦点距離を強制的に最短焦点距離に調節する。つまり、レンズの主点が広角端にドライブ(駆動)されて、ユーザが調節した注目被写体に対する撮像画角から、背景被写体を含む広角端(破線6)に自動的に調節される。   When the LAST signal is received by the lens driver 11, the focal length of the variable focus lens 10 is forcibly adjusted to the shortest focal length. That is, the principal point of the lens is driven (driven) to the wide-angle end, and is automatically adjusted from the imaging angle of view for the subject of interest adjusted by the user to the wide-angle end (broken line 6) including the background subject.

この可変焦点レンズ10の広角端ドライブが完了すると、イメージセンサ13は有効画素n(ここで、n>m)にて、背景の撮像を実施する。このようにして、ユーザによる一連の操作と、その操作に連動して可変焦点レンズ10が制御され、注目被写体の連続撮像と背景被写体の広角撮像が為される。そして、新たな撮影シーン(TAKE2による撮り直し撮影シーンを含む)による連続撮像期間(図2dで示された全押しロック状態)を待機する。   When the wide-angle end drive of the varifocal lens 10 is completed, the image sensor 13 performs background imaging at the effective pixel n (where n> m). In this way, a series of operations by the user and the variable focus lens 10 are controlled in conjunction with the operations, and continuous imaging of the subject of interest and wide-angle imaging of the background subject are performed. Then, it waits for a continuous imaging period (full-press locked state shown in FIG. 2d) by a new imaging scene (including a re-shooting imaging scene by TAKE2).

図1〜図4を用いて説明してきたように、ユーザの意思によって注目被写体の連続撮像が為され、且つ、ユーザによる一連の操作によって自動的に背景被写体の広角撮像(LAST)が為される。そして、この連続撮像から選択画像が選択されて、背景画像と画像合成される。例えば、画像合成は、選択画像を縮小して背景画像と位置合わせして、背景画像の一部分を縮小した選択画像に置き換えることにより行われる。   As described with reference to FIGS. 1 to 4, continuous imaging of the subject of interest is performed according to the user's intention, and wide-angle imaging (LAST) of the background subject is automatically performed by a series of operations by the user. . Then, the selected image is selected from the continuous imaging, and the image is synthesized with the background image. For example, the image synthesis is performed by reducing the selected image and aligning it with the background image, and replacing a part of the background image with the reduced selected image.

ここで、従来技術による撮像画像について鑑みれば、ユーザがスポーツ選手などの動的被写体を撮像する際に、シャッターチャンスを逃してしまって、所望するタイミングの撮像画像が得られていなかったり、ユーザによるフレーミング操作の失敗(手ブレを含む)に起因して、所望する画枠の撮像画像が得られていなかったりしていた。   Here, in view of the captured image according to the prior art, when the user captures a dynamic subject such as a sports player, the user misses a photo opportunity, and the captured image at a desired timing is not obtained, Due to a failure of the framing operation (including camera shake), a captured image of a desired image frame has not been obtained.

図5a〜図5cは、ユーザが子供の運動会(徒競争)のシーンをアスペクト比4:3の静止画像として撮像した際に、ユーザが意図しない失敗撮像にて得られた撮像画像のイメージ画像である。
図5aは、ユーザがシャッターチャンスを逃した場合の撮像画像の一例を示すイメージ画像である。
図5bは、ユーザがフレーミング操作の失敗(手ブレを含む)をした場合の撮像画像の一例を示すイメージ画像である。
図5cは、ユーザが予測し得なかった障害物被写体が発生した場合の撮像画像の一例を示すイメージ画像である。
5a to 5c are image images of captured images obtained by unsuccessful imaging that the user did not intend when the user captured a scene of a children's athletic meet (competition) as a still image with an aspect ratio of 4: 3. is there.
FIG. 5 a is an image showing an example of a captured image when the user misses a photo opportunity.
FIG. 5b is an image showing an example of a captured image when the user has failed in the framing operation (including camera shake).
FIG. 5c is an image showing an example of a captured image when an obstacle subject that the user could not predict has occurred.

図5aに於いて、この画像は、子供が競技を終えた後の撮像画像であって、ユーザが所望するタイミングの撮像画像は、子供が一着でゴールインしたシーンか、または、ゴールイン直前のシーンであった。   In FIG. 5a, this image is a captured image after the child finishes the competition, and the captured image at a timing desired by the user is a scene where the child finishes in the first place or a scene immediately before the goal-in. Met.

図5bに於いて、この画像は、ユーザが所望するタイミングの撮像画像であって、子供が一着でゴールインしたシーンが撮像できている。しかしながら、その画像の構図(画枠)は、第3者による後頭部が大半を占めており、ユーザが所望する構図ではない。   In FIG. 5 b, this image is a captured image at a timing desired by the user, and a scene in which a child finishes at first can be captured. However, the composition (image frame) of the image is mostly composed of the back of the head by a third party, and is not the composition desired by the user.

図5cに於いて、この画像は、ユーザが所望するゴールイン直前のタイミングによる撮像であるが、この撮像の瞬間に、前方にいた第3者がユーザの予測に反して突発的に飛び跳ねてしまい、この第3者による後頭部によって注目被写体である子供が半分隠れてしまう構図となった。この構図は、ユーザが所望する構図ではない。   In FIG. 5c, this image is an image taken at the timing immediately before the goal-in desired by the user, but at the moment of this imaging, a third party who was in front suddenly jumped against the user's prediction, The composition was such that the child, who is the subject of interest, was half hidden by the back of the head by the third party. This composition is not the composition desired by the user.

従来技術による失敗撮像に対して、これらの失敗撮像を回避するために、本発明の第1の実施形態による撮像方法及びその撮像画像について順次説明する。   In order to avoid the failed imaging according to the prior art, the imaging method and the captured image according to the first embodiment of the present invention will be sequentially described.

図6a〜図6fは、図3で示されたステップS4である連続撮像開始からステップS6である連続撮像停止までに撮像される撮像画像の一例を示すイメージ画像である。   6a to 6f are image images showing examples of captured images captured from the start of continuous imaging which is step S4 shown in FIG. 3 to the stop of continuous imaging which is step S6.

図6a〜図6fに於いて、これらの画像は、ユーザが子供の運動会(徒競争)を撮像してアスペクト比4:3の静止画像を所望する際に、ユーザの一連の操作によって撮像される連続撮像期間によって生成されるアスペクト比16:9の連写画像(または、プログレッシブ動画像)である。   In FIGS. 6 a to 6 f, these images are captured by a series of operations of the user when the user images a children's athletic meet (competition) and desires a still image with an aspect ratio of 4: 3. It is a continuous shot image (or progressive moving image) with an aspect ratio of 16: 9 generated during the continuous imaging period.

図6aは、連続撮像開始時の撮像画像であり、図6fは、連続撮像停止時の撮像画像である。この図6fが撮像されると、図4で示したようにLAST信号が出力されて、可変焦点レンズ10の広角端ドライブが自動的に為される。   6A is a captured image at the time of starting continuous imaging, and FIG. 6F is a captured image at the time of stopping continuous imaging. When this FIG. 6f is imaged, a LAST signal is output as shown in FIG. 4, and the wide-angle end drive of the variable focus lens 10 is automatically performed.

尚、アスペクト比の4:3から16:9への変更は、動画撮像機能と静止画撮像機能との双方を兼ね揃えた撮像装置を想定している。   Note that the change of the aspect ratio from 4: 3 to 16: 9 assumes an imaging apparatus that has both a moving image imaging function and a still image imaging function.

図7は、図3で示されたステップS8である背景撮像にて撮像される撮像画像の一例を示すイメージ画像である。   FIG. 7 is an image illustrating an example of a captured image captured by the background imaging that is step S8 illustrated in FIG.

図7に於いて、この画像の中央領域にある画像は、図6fと略同じであることが示されている。これは、この背景画像が連続撮像停止時の直後のタイミングによる撮像であるからである。   In FIG. 7, the image in the central region of this image is shown to be substantially the same as FIG. 6f. This is because the background image is imaged at a timing immediately after the continuous imaging is stopped.

図8は、図1及び図4で示された合成画像の一例を示すイメージ画像である。   FIG. 8 is an image showing an example of the composite image shown in FIGS. 1 and 4.

図8に於いて、この画像は、ユーザの意思によって選択された図6dの画像と、図7の画像と、が画像合成されて生成されたものである。この図6dは、図1及び図4で示された選択部16によって、図6a〜図6fで示された複数の画像の中から選択された選択画像である。   In FIG. 8, this image is generated by image synthesis of the image of FIG. 6d selected by the user's intention and the image of FIG. FIG. 6d is a selection image selected from the plurality of images shown in FIGS. 6a to 6f by the selection unit 16 shown in FIGS.

尚、図8に示されるように、注目被写体である子供が2人いるかのように画像合成されている。これは、時系列の異なる2つのタイミングで得られた撮像画像が同一の画枠内に合成されたからである。   As shown in FIG. 8, the images are synthesized as if there were two children as the subject of interest. This is because the captured images obtained at two timings with different time series are combined in the same image frame.

図9は、図8で示された合成画像に対して、ユーザが所望するトリミングを施した合成画像の一例を示すイメージ画像である。   FIG. 9 is an image image showing an example of a composite image obtained by performing trimming desired by the user on the composite image shown in FIG.

図9に示されるように、ユーザによる撮像期間及び撮像時には必ずしも完成された画像ではなくても、前述してきたような画像合成に至るまでの撮像方法と、その後処理に合成画像に対してトリミング(図示なし)を施すことによって、ユーザが所望するタイミングの撮像であって、且つ、ユーザが所望する画枠による撮像画像が得られる。   As shown in FIG. 9, even if the image is not necessarily a completed image at the time of image capture by the user and at the time of image capture, the image capture method up to image composition as described above and the trimming of the composite image for subsequent processing ( By applying (not shown), it is possible to obtain a captured image of an image at a timing desired by the user and an image frame desired by the user.

また、図8では注目被写体である子供が2人分に撮れる問題点があったが、図9に示されるようなトリミングを施すことによって、この問題点については解消される。   Further, in FIG. 8, there is a problem that two children can be taken as the subject of interest, but this problem can be solved by performing trimming as shown in FIG.

尚、前述したトリミングにて解決しない構図である場合に於いては、後処理にて特定領域の画像ぼかし処理をすれば良い。   In the case where the composition is not solved by the above-described trimming, the image blurring process for the specific area may be performed in the post-processing.

前述してきたように、本発明の第1の実施形態による撮像装置は、撮像後にユーザが所望するタイミングで、且つ、所望する画枠または画角である撮像画像を選択または補正できる。   As described above, the imaging apparatus according to the first embodiment of the present invention can select or correct a captured image having a desired image frame or angle of view at a timing desired by the user after imaging.

(第2の実施形態)
第2の実施形態について概略を説明するならば、背景画像を連続的に幾何学変換(電子式ズーム及び/または電子式パンニング)して動画像を生成する。この動画像に前述した画像合成を施して合成動画像が生成される。または、画像合成を施さない背景動画像が生成される。
(Second Embodiment)
To briefly explain the second embodiment, a background image is continuously geometrically converted (electronic zoom and / or electronic panning) to generate a moving image. This moving image is subjected to the above-described image combining to generate a combined moving image. Alternatively, a background moving image that is not subjected to image composition is generated.

尚、以下に述べる第2の実施形態に於いて、撮像装置の基本的な構成及び動作については、前述した第1の実施形態と同じであるので、説明の重複を避けるため、同一の部分には同一の参照番号を付して、その図示及び詳細な説明を省略し、異なる部分についてのみ説明する。   In the second embodiment described below, the basic configuration and operation of the imaging apparatus are the same as those in the first embodiment described above. Are denoted by the same reference numerals, illustration and detailed description thereof are omitted, and only different portions will be described.

図10は、本発明の第2の実施形態による撮像装置の基本構成を示すブロック図である。   FIG. 10 is a block diagram showing a basic configuration of an imaging apparatus according to the second embodiment of the present invention.

図10に於いて、この撮像装置は、第1の実施形態で示した撮像装置の構成に対して、動画像生成部20の構成を更に具備したものである。   In FIG. 10, the imaging apparatus further includes a configuration of a moving image generation unit 20 in addition to the configuration of the imaging apparatus shown in the first embodiment.

先ず、図10に示される合成動画像の生成について説明する。ユーザによって被写体が連続撮像され、例えば、図6a〜図6fのような撮像画像群が選択部16に出力される。撮像後、ユーザはこの選択部16によって連続した複数フレームによる撮像画像、例えば、図6a〜図6dを選択する。こうして得られた選択画像群は動画像生成部20と合成部17とに出力される。   First, generation of the synthesized moving image shown in FIG. 10 will be described. The subject is continuously imaged by the user and, for example, a group of captured images as illustrated in FIGS. 6 a to 6 f is output to the selection unit 16. After imaging, the user selects captured images of a plurality of consecutive frames, for example, FIGS. The selected image group thus obtained is output to the moving image generation unit 20 and the synthesis unit 17.

図11は、図7で示された背景画像の部分画像に、図6a〜図6dの撮像画像群を重ねて示したイメージ画像である。   FIG. 11 is an image image in which the captured image group of FIGS. 6a to 6d is superimposed on the partial image of the background image shown in FIG.

図11に示されるように、注目被写体(徒競争を走る子供)の動きについては、上下のブレがそれほど目立っていない。しかしながら、図6a〜図6dの撮像画像群を夫々見比べてみると、注目被写体は撮像画枠に対して上下にブレていることがわかる。これは、注目被写体が上下に動いているのではなく、ユーザの手ブレに起因して撮像画枠が上下に動いているからである。   As shown in FIG. 11, the movement of the subject of interest (the child who runs in competition) is not so noticeable. However, when the captured image groups of FIGS. 6a to 6d are compared, it can be seen that the subject of interest is vertically blurred relative to the captured image frame. This is because the object of interest is not moving up and down, but the captured image frame is moving up and down due to camera shake of the user.

ここで、図11に示される動画像生成部20は、この選択画像群(図6a〜図6d)の夫々の画像相関に基づいて、選択画像群の画枠の動きを低周波化する補正画枠を生成する。この画枠の動きを低周波化する方法は、一般的な電子式手ブレ補正を応用した方法である。この電子式手ブレ補正とは、時間的に近接する画像間を画像相関により位置合わせして、画像画枠のブレを軽減させる補正のことである。この位置合わせによって画枠の動きの高周波成分が除去されて低周波化がなされる。   Here, the moving image generation unit 20 shown in FIG. 11 performs a correction image for reducing the frequency of the motion of the image frame of the selected image group based on the respective image correlations of the selected image group (FIGS. 6a to 6d). Generate a frame. The method for lowering the frequency of the motion of the image frame is a method that applies general electronic image stabilization. This electronic camera shake correction is a correction that reduces image blurring by aligning images that are temporally close by image correlation. By this alignment, the high-frequency component of the motion of the image frame is removed and the frequency is lowered.

一般的な電子式手ブレ補正による補正画枠は、撮像時の画枠よりも小さくなってしまう問題点があるのに対して、第2の実施形態による合成動画像の生成のための補正画枠は、背景画像の画像範囲内に於いて、撮像時の画枠よりも大きくすることができる。   While there is a problem that a correction image frame by general electronic image stabilization is smaller than an image frame at the time of imaging, a correction image frame for generating a synthesized moving image according to the second embodiment is used. The frame can be made larger than the image frame at the time of imaging within the image range of the background image.

また、動画像生成部20は、この補正画枠に対して背景画像を連続的に幾何学変換して動画像を生成する。そして、合成部17は、この補正画枠の範囲内に、この動画像と選択画像群とを順次画像合成することで合成動画像を生成する。   In addition, the moving image generating unit 20 generates a moving image by continuously geometrically converting the background image with respect to the corrected image frame. Then, the synthesizing unit 17 generates a synthesized moving image by sequentially synthesizing the moving image and the selected image group within the range of the correction image frame.

図12a〜図12dは、補正画枠の範囲内に、図7で示された背景画像から生成された動画像と、図6a〜図6dで示された選択画像群とを画像合成して生成された合成動画像の一例を示すイメージ画像である。   12a to 12d are generated by synthesizing the moving image generated from the background image shown in FIG. 7 and the selected image group shown in FIGS. 6a to 6d within the range of the correction image frame. It is an image image which shows an example of the synthesized video image.

ここで、図12aは図6aと同じ画像である。また、図12dは図6dと同じ画像である。しかしながら、図12b及び図12cと図6b及び図6cとを比べてみれば、異なる画像であることがわかる。図6bの画像画枠の平面位相は、図12bに示される破線の位相にある。ここで、平面位相とは、周期的な現象(手ブレ)の過程として発生する画枠ブレのことである。この画枠ブレは、図12aと図12bとの画像相関によって位置合わせされて、図12bの実線に示される補正画枠のように補正される。また、図6cの画像画枠の平面位相は、図12cに示される破線の位相にあって、図12b(実線)と図12cとの画像相関によって図12cの実線に示される補正画枠が生成され、画像画枠の低周波化が実現している。   Here, FIG. 12a is the same image as FIG. 6a. FIG. 12d is the same image as FIG. 6d. However, comparing FIGS. 12b and 12c with FIGS. 6b and 6c, it can be seen that the images are different. The planar phase of the image frame in FIG. 6b is in the phase of the broken line shown in FIG. 12b. Here, the plane phase refers to image frame blur that occurs as a process of a periodic phenomenon (camera shake). This image frame blur is aligned by the image correlation between FIG. 12a and FIG. 12b, and is corrected like a corrected image frame indicated by a solid line in FIG. 12b. The plane phase of the image frame in FIG. 6c is the phase of the broken line shown in FIG. 12c, and the corrected image frame shown in the solid line in FIG. 12c is generated by the image correlation between FIG. 12b (solid line) and FIG. Thus, the frequency of the image frame is reduced.

このように、図12a〜図12dは、前述したように、低周波化された補正画枠の範囲内に収められた画像であって、撮像画枠(図6a〜図6d)にあった手ブレが電子式に補正されている。   As described above, FIGS. 12a to 12d are images stored in the range of the corrected image frame whose frequency has been lowered as described above, and the hand that was in the captured image frame (FIGS. 6a to 6d). Blur is corrected electronically.

仮に、一般的な電子式手ブレ補正であるならば、補正量に反比例して撮像のサンプリング数が減少するので画像が解像度劣化する。しかしながら、合成動画像による手ブレ補正である場合は、背景画像によって部分的に画像補填されているので、撮像のサンプリング数減少による解像度劣化などを抑制することができる。   If it is a general electronic camera shake correction, the number of imaging samplings decreases in inverse proportion to the correction amount, so that the resolution of the image deteriorates. However, in the case of the camera shake correction using the synthesized moving image, since the image is partially compensated by the background image, it is possible to suppress degradation in resolution due to a decrease in the number of samplings for imaging.

尚、図12a〜図12dに示された補正画枠については、図7で示された背景画像の範囲内に於いて、ユーザが所望する画枠または画角に選択または補正できる。   The corrected image frames shown in FIGS. 12a to 12d can be selected or corrected to a desired image frame or angle of view within the range of the background image shown in FIG.

次に、図10に示される背景動画像の生成について説明する。背景動画像を生成する際には、先ず、ユーザによる一連の操作によって広角撮像された背景画像が選択部16に入力される。そして、この背景画像の中からユーザが複数の画枠を選択して、この選択された画枠群を動画像生成部20に出力する。   Next, generation of the background moving image shown in FIG. 10 will be described. When generating a background moving image, first, a background image captured at a wide angle by a series of operations by a user is input to the selection unit 16. Then, the user selects a plurality of image frames from the background image, and outputs the selected image frame group to the moving image generation unit 20.

続いて、この動画像生成部20は、入力された選択画枠群に基づいて、背景画像を連続的に幾何学変換して背景動画像を生成する。この背景動画像は、背景画像から生成され、合成画像を必要としない。   Subsequently, the moving image generation unit 20 generates a background moving image by continuously geometrically converting the background image based on the input selected image frame group. The background moving image is generated from the background image and does not require a composite image.

図13a〜図13dは、図7で示された背景画像から生成された背景動画像の一例を示すイメージ画像である。   13a to 13d are image images showing an example of the background moving image generated from the background image shown in FIG.

図13a〜図13dに於いて、この背景動画像は、ユーザが注目する注目被写体(徒競争を走る子供)が撮像されていない。しかしながら、動画像(映像)コンテンツを作る際には、こうした背景の動画像があった方がコンテンツの視聴者に対してコンテンツの内容を理解させるのに便利である。   In FIGS. 13a to 13d, the background moving image does not capture the subject of interest (a child who runs in competition) that the user pays attention to. However, when creating moving image (video) content, the presence of such a background moving image is convenient for allowing the content viewer to understand the content.

ここで、図13a〜図13dは、校舎の時計がズームインされた画枠(図13a)から始まって、図13b、図13cと徐々にズームアウトさせて、校舎全体の画枠(図13d)に至る。このズームイン及びズームアウトは、背景画像の連続的な幾何学変換、つまり、一般的には電子式ズーム及び電子式パンニングといわれる画像処理と等価の画像変換である。   Here, FIGS. 13a to 13d start from an image frame (FIG. 13a) in which the school building clock is zoomed in, and gradually zoom out as shown in FIGS. 13b and 13c to obtain an image frame of the entire school building (FIG. 13d). It reaches. This zoom-in and zoom-out is a continuous geometric transformation of the background image, that is, an image transformation equivalent to image processing generally referred to as electronic zoom and electronic panning.

そして、このようにして生成された図13a〜図13dによる背景動画像の後に、図12a〜図12dによる合成動画像を続けることによって、動画像コンテンツの完成度を向上させることができる。   Then, after the background moving image according to FIGS. 13a to 13d generated in this manner is followed by the synthesized moving image according to FIGS. 12a to 12d, the completeness of the moving image content can be improved.

前述してきたように、本発明の第2の実施形態による撮像装置は、撮像後にユーザが所望するタイミングを含む動画像で、且つ、所望する画枠または画角(手ブレの抑制を含む)である動画像を選択または補正できる。   As described above, the imaging apparatus according to the second embodiment of the present invention is a moving image including a timing desired by the user after imaging, and a desired image frame or angle of view (including suppression of camera shake). A moving image can be selected or corrected.

以上、図面を参照して本発明の実施形態について詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。例えば、前述の実施形態では、背景撮像時に、可変焦点レンズの焦点距離を最短焦点距離に調節する構成としたが、焦点距離を連続撮影時より短くする構成であれば、これに限定されるものではない。   The embodiment of the present invention has been described in detail above with reference to the drawings. However, the specific configuration is not limited to this embodiment, and includes design changes and the like without departing from the gist of the present invention. For example, in the above-described embodiment, the configuration is such that the focal length of the variable focal length lens is adjusted to the shortest focal length at the time of background imaging, but the configuration is limited to this as long as the focal length is shorter than that at the time of continuous shooting. is not.

更に、前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。   Further, the above-described embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effect described in the column of the effect of the invention Can be obtained as an invention.

10 可変焦点レンズ(光学系)
11 レンズドライバ(調節部)
12 ズームリング
13 イメージセンサ(撮像部)
14 操作部
15 画像処理部
16 選択部
17 合成部
20 画像生成部
10 Variable focus lens (optical system)
11 Lens driver (adjustment unit)
12 Zoom ring 13 Image sensor (imaging part)
14 operation unit 15 image processing unit 16 selection unit 17 composition unit 20 image generation unit

Claims (6)

被写体から光学像を生成する光学系と、
前記光学系の焦点距離を調節する調節部と、
前記光学像を光電変換して撮像し、該撮像信号を生成する撮像部と、
前記光学像を連続的に撮像する連続撮像期間の開始タイミング及び停止タイミング、及び、該連続撮像期間の前時及び/または後時に前記被写体の背景を含んだ前記光学像を撮像する背景撮像のタイミング、を一連の操作にて操作するための操作部と、
前記撮像信号に画像処理を施して画像信号を生成する画像処理部と、
を備え、
前記調節部は、前記背景撮像のタイミングが操作されると、前記焦点距離が短くなるように調節する
ことを特徴とする撮像装置。
An optical system for generating an optical image from a subject;
An adjustment unit for adjusting the focal length of the optical system;
An imaging unit that photoelectrically converts the optical image and generates the imaging signal;
Start timing and stop timing of a continuous imaging period for continuously capturing the optical image, and background imaging timing for capturing the optical image including the background of the subject before and / or after the continuous imaging period , In a series of operations,
An image processing unit that performs image processing on the imaging signal to generate an image signal;
With
The adjustment device adjusts the focal length so that the focal length is shortened when the timing of background imaging is operated.
前記連続撮像期間にて得られる複数の前記画像信号の中から任意の選択画像を選択するための選択部と、
前記選択画像と、前記背景撮像時にて得られる背景画像と、を画像合成して合成画像を生成する合成部と、
を更に備える
ことを特徴とする請求項1に記載の撮像装置。
A selection unit for selecting an arbitrary selected image from the plurality of image signals obtained in the continuous imaging period;
A synthesizing unit that synthesizes the selected image and a background image obtained at the time of background imaging to generate a synthesized image;
The imaging apparatus according to claim 1, further comprising:
前記背景画像を連続的に幾何学変換して動画像を生成する動画像生成部を更に備え、
前記動画像生成部は、複数選択された前記選択画像の画像相関に基づいて、前記選択画像の画枠の動きを低周波化する補正画枠を生成し、
前記合成部は、前記補正画枠の範囲内に前記選択画像と前記背景画像とを画像合成して合成動画像を生成する
ことを特徴とする請求項2に記載の撮像装置。
A moving image generating unit that continuously generates a moving image by geometrically converting the background image;
The moving image generation unit generates a corrected image frame that lowers the frequency of the image frame of the selected image based on the image correlation of the selected images.
The imaging apparatus according to claim 2, wherein the synthesizing unit generates a synthesized moving image by synthesizing the selected image and the background image within a range of the correction image frame.
前記背景撮像時にて得られる背景画像の中から複数の画枠を選択するための選択部と、
前記選択された画枠に基づいて、前記背景画像を連続的に幾何学変換して背景動画像を生成する動画像生成部と、
を更に備える
ことを特徴とする請求項1に記載の撮像装置。
A selection unit for selecting a plurality of image frames from the background image obtained by the background imaging;
Based on the selected image frame, a moving image generation unit that continuously converts the background image to generate a background moving image;
The imaging apparatus according to claim 1, further comprising:
前記連続撮像期間が操作される期間、前記撮像部は有効画素数mが読み出され、
前記背景撮像時が操作される時、前記撮像部は有効画素数nが読み出され、
前記有効画素数は、m<nである
ことを特徴とする請求項1に記載の撮像装置。
During the period in which the continuous imaging period is operated, the imaging unit reads out the effective pixel number m,
When the background imaging is operated, the imaging unit reads the effective pixel number n,
The imaging device according to claim 1, wherein the number of effective pixels is m <n.
前記有効画素m領域のアスペクト比は、略16:9であり、
前記有効画素n領域のアスペクト比は、略4:3である
ことを特徴とする請求項5に記載の撮像装置。
The effective pixel m area has an aspect ratio of about 16: 9,
The imaging apparatus according to claim 5, wherein an aspect ratio of the effective pixel n region is approximately 4: 3.
JP2009170151A 2009-07-21 2009-07-21 Imaging apparatus Withdrawn JP2011029691A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009170151A JP2011029691A (en) 2009-07-21 2009-07-21 Imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009170151A JP2011029691A (en) 2009-07-21 2009-07-21 Imaging apparatus

Publications (1)

Publication Number Publication Date
JP2011029691A true JP2011029691A (en) 2011-02-10

Family

ID=43637980

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009170151A Withdrawn JP2011029691A (en) 2009-07-21 2009-07-21 Imaging apparatus

Country Status (1)

Country Link
JP (1) JP2011029691A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10121265B2 (en) 2014-03-25 2018-11-06 Sony Corporation Image processing device and method to calculate luminosity of an environmental light of an image

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10121265B2 (en) 2014-03-25 2018-11-06 Sony Corporation Image processing device and method to calculate luminosity of an environmental light of an image

Similar Documents

Publication Publication Date Title
US9473698B2 (en) Imaging device and imaging method
CN103312969B (en) Image synthesizer and image combining method
JP4900401B2 (en) Imaging apparatus and program
JP2019054461A (en) Imaging apparatus and imaging method
US9270887B2 (en) Imaging apparatus and display method for displaying through image and image processing information
US9241109B2 (en) Image capturing apparatus, control method, and recording medium for moving image generation
JP2006222935A (en) Electronic still camera, image capturing method, program and storage medium
JP2011147008A (en) Imaging apparatus, imaging method, and, imaging program
JP2005031200A (en) Imaging apparatus
JP5578442B2 (en) Imaging apparatus, image composition method, and program
JP2013046259A (en) Video apparatus, control method, and program
JP2016092609A (en) Imaging device and control method of imaging device
JP4606486B2 (en) Image processing apparatus and photographing apparatus
JP2010074535A (en) Photographing apparatus and photographing method
JP2010178164A (en) Imaging apparatus
JP2004221992A (en) Imaging device and program
JP6717690B2 (en) Imaging device, imaging method, and program
JP7645660B2 (en) Image capture device and control method thereof
JP5482148B2 (en) Autofocus adjustment circuit and imaging apparatus
JP2018152630A (en) Image processing apparatus and method, and imaging apparatus
JP2019036885A (en) Image processing apparatus and image processing method
WO2017061095A1 (en) Image capture device
JP2011029691A (en) Imaging apparatus
JP2006091915A (en) Imaging apparatus
JP2009239637A (en) Imaging apparatus and imaging control method

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20121002