[go: up one dir, main page]

JP4510193B2 - Focus adjustment device and focus adjustment method - Google Patents

Focus adjustment device and focus adjustment method Download PDF

Info

Publication number
JP4510193B2
JP4510193B2 JP32842499A JP32842499A JP4510193B2 JP 4510193 B2 JP4510193 B2 JP 4510193B2 JP 32842499 A JP32842499 A JP 32842499A JP 32842499 A JP32842499 A JP 32842499A JP 4510193 B2 JP4510193 B2 JP 4510193B2
Authority
JP
Japan
Prior art keywords
focus lens
moving
sharpness
image
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP32842499A
Other languages
Japanese (ja)
Other versions
JP2000214379A (en
Inventor
仁志 保田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP32842499A priority Critical patent/JP4510193B2/en
Publication of JP2000214379A publication Critical patent/JP2000214379A/en
Application granted granted Critical
Publication of JP4510193B2 publication Critical patent/JP4510193B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、各種のビデオカメラ等用いられる焦点調節装置及び焦点調節方法に関するものである。
【0002】
【従来の技術】
近年、ビデオカメラ等をはじめとする映像機器の進歩は、目覚ましく、オートフォーカス制御、オートアイリス制御、ズーム機能等が標準的に装備され、あらゆる部分において、操作性の改善、多機能化がはかられている。
【0003】
ところでオートフォーカス装置を見ると、撮像素子等により、被写体像を光電変換して得られた映像信号中より画面の鮮鋭度を検出しAF評価値として、それが最大となるようにフォーカスレンズ位置を制御して、焦点調節を行うようにした方式が主流になりつつある。
【0004】
上記AF評価値としては、一般にある帯域のバンドパスフィルターにより抽出された映像信号の高周波成分のレベル等を用いている。これは、通常の被写体像を撮影した場合、図2に示すように焦点が合ってくるにしたがって値は大きくなり、そのレベルが最大になる点を合焦位置としている。
【0005】
実際のビデオカメラでは、図1に示すように、AFマイコン115によりAF評価値処理回路114の出力信号レベルが最大となるようにフォーカスレンズ105を移動させ自動焦点調節を行っている。
【0006】
そして、AFマイコン115は図3に示すように、フォーカスレンズ105を微少駆動動作を行い、合焦であると判別されると合焦処理を行う。合焦していないと判別されたときには、AF評価値が大きくなる方向が判別されていればその方向にフォーカスレンズ105を駆動(山登り駆動)する。そして、AF評価値の頂点に達すると再び微少駆動動作を行う。その後、合焦していると判別されると、その時のAF評価値と最新のAF評価値とを比較して所定レベル以上差があれば再起動と判定し、微少駆動動作を行う。
【0007】
次に、従来の微少駆動動作について図9で説明する。ステップS901は処理の開始を示している。ステップS902ではAF評価値処理回路からAF評価値を取り込む、ステップS903においては、ステップS902で取り込んだ評価値が前回の評価値より小さければステップS904へ進み、ステップS902で取り込んだ評価値が前回の評価値より大きければステップS905へ進む。ステップS904では前回の逆方向に所定量フォーカスレンズを駆動する。一方、ステップS905では前回の順方向に所定量フォーカスレンズを駆動する。
【0008】
ステップS906においては、所定回数連続して合焦方向と判断される方向が同一であればステップS907へ進み、所定回数連続して同一方向に進んでいなければステップS908に進む。ステップS908においては、所定時間フォースレンズが同一エリアにいるすなわちレンズ位置が所定範囲に留まっていればステップS909へ進み、所定時間フォーカスレンズが同一エリアにいなければステップS910へ進み処理を終了する。ステップS907では方向判別できたとして、ステップS910へ進み処理を終了する。ステップS909では合焦判別できたとして処理を終了する。
【0009】
このように、再起動判定→微少駆動→山登り駆動→微少駆動→再起動判定を繰返しながらフォーカスレンズを移動させ従来ではAF評価値を常に最大にするようにカメラAFマイコン115は制御している。
【0010】
【発明が解決しようとする課題】
しかしながら、上記のような従来の焦点調節装置では次のような問題点があった。
【0011】
AF評価値は、一般にある帯域のバンドパスフィルターにより抽出された映像信号の高周波成分のレベルであるため、被写体により合焦点での評価値のピークレベルは一定にはならない。
【0012】
AF評価値が同じ値でも片方は合焦していて、一方は合焦していないということがありうる。
【0013】
したがって、例えば被写体の輝度レベルが変化したときに、レンズを動かして評価値が増えていても実はボケているということがあり、評価値が増えているからといってそのままの方向にレンズを移動していると、ボケが目立ってしまうということがあった。
【0014】
本発明は、上記のような問題点を解決するためになされたものであり、確実に焦点調整を行うことができる焦点調節装置及び焦点調節方法を提供することを目的とする。
【0015】
【課題を解決するための手段】
本発明の焦点調節装置及び焦点調節方法は、次のように構成したものである。
【0016】
被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続して同じ場合は前記フォーカスレンズを当該移動方向と同一方向に移動することを禁止するよう制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段を備えた。
【0017】
被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続して同じ場合は前記フォーカスレンズを当該移動方向と逆の方向に移動させるように制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段を備えた。
【0018】
被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、前記フォーカスレンズが所定量動く前後の画像の鮮鋭度の増減を比較し、該画像の鮮鋭度が増加する方向を判定する比較判定手段と、前記比較判定手段の判定に伴い画像の鮮鋭度が高くなる方向に前記フォーカスレンズを移動させるとともに、前記比較判定手段の判定に伴う前記フォーカスレンズの移動する方向が所定回数連続して同一のときに前記フォーカスレンズの移動方向を前記比較判定手段の判定による画像鮮鋭度が高くなる方向に関わらず反転させるように制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段とを備えた。
【0025】
【発明の実施の形態】
図1は本発明に係るビデオカメラの構成を示すブロック図である。図1において、101は固定の第1群レンズ、102は変倍を行う変倍レンズ、103は絞り、104は固定の第2群レンズ、105は変倍に伴う焦点面の移動を補正する機能とピント合わせの機能を兼ね備えたフォーカスコンペレンズ(以下フォーカスレンズ)である。
【0026】
106は撮像素子であるCCD、107はCCD106の出力を増幅するAGCであり後述のカメラAFマイコン115からの信号によって増幅率が調節される。108はカメラ信号処理回路である。110,112はそれぞれ変倍レンズ102、フォーカスレンズ105を移動させるためのアクチュエータ(モータ)、111,113はそれぞれアクチュエータ110,112を後述のカメラAFマイコン115からの信号により駆動するドライバである。
【0027】
114は撮像素子106の出力信号中より焦点検出に用いられる高域成分を図2に示す焦点電圧(AF評価値)として抽出するAF評価値処理回路、115は本システム全体を総合的に制御するとともに、AF評価値処理回路114の出力にもとづいて、アクチュエータ110,112を制御するAFマイコンである。
【0028】
上記構成のビデオカメラにおいて、カメラAFマイコン115(禁止手段、比較判定手段、制御手段)はフォーカスレンズ(焦点調節部材)105を移動手段であるモータ112、ドライバ113により光軸方向に移動させてAF評価値が最大となるように焦点調節動作を行う。そして、フォーカスレンズ105が所定量動作前後のAF評価値の増減を比較してAF評価値が増加する方向を判定し、その判定方向にフォーカスレンズ105を所定量ずつ移動させるとともに、その判定方向が判定回数連続して同一の時にその方向への移動を禁止し、フォーカスレンズ105の移動方向を反転させるように制御する。
【0029】
上記カメラAFマイコン115の制御について図3〜図7を用いて詳しく説明する。図3でメインのAF処理を説明する。ステップS301は処理の開始を示している。ステップS302で微少駆動動作を行い、合焦か、合焦でないならどちらの方向に合焦点があるかを判別する。細かい動作の説明は後に譲る。ステップS303においては、ステップS302で合焦と判別された場合はステップS309へ行き合焦処理を行い、ステップS302で合焦と判別されなかった場合はステップS304へ行く。
【0030】
ステップS304においては、ステップS302で方向判別ができている場合はステップS305へ行き山登り処理を行い、ステップS302で方向判別ができていない場合はステップS302へ戻し微少駆動動作を継続する。ステップS305では、評価値が大きくなる方向へ高速でレンズを山上り駆動する。細かい動作の説明は後に譲る。
【0031】
ステップS306において、ステップS305で評価値の頂点を越えたと判別された場合は、ステップS307へ行き、ステップS305で評価値の頂点を越えたと判別されない場合はステップS305へ戻り山登り動作を継続する。ステップS307では、山登り駆動中の評価値の頂点にレンズを戻す。ステップS308においては、ステップS307で頂点に戻った場合はステップS302へ戻り再び微少駆動動作をおこない、ステップS307で頂点に戻っていない場合はステップS307へ戻り頂点に戻す動作を継続する。
【0032】
次に、ステップS309からの合焦動作について説明する。ステップS309ではAF評価値を保持する。ステップS310では、ステップS309で保持したAF評価値と最新のAF評価値とを比較し所定レベル以上差があれば再起動と判定する。ステップS311においては、ステップS310で再起動と判定されていれば、ステップS302へ行き微少駆動動作を再開し、ステップS310で再起動と判定されていなければステップS312へ行く。ステップS312では、レンズを停止しステップS310へ戻り再起動判定を継続する。
【0033】
ここで、前記ステップ302の微少駆動動作(低速駆動動作)について詳しく説明する。カメラAFマイコンの制御について図4を用いて詳しく説明する。この図は従来の技術における図9に相当する制御である。なお、従来と同様の処理を行うステップは同じステップ番号を付している。
【0034】
まず、微少駆動動作について図4で説明する。ステップS901は処理の開始を示している。ステップS902ではAF評価値処理回路114からAF評価値を取り込む、ステップS903においては、ステップS902で取り込んだ評価値が前回の評価値より小さければステップS904へ進み、ステップS902で取り込んだ評価値が前回の評価値より大きければステップS401へ進む。
【0035】
ステップS401においては、所定回数連続して同一方向に移動していればステップS904へ進み、所定回数連続して同一方向に移動していなければステップS905へ進む。ステップS904では前回の逆方向に所定量フォーカスレンズを駆動する。ステップS905では前回の順方向に所定量フォーカスレンズを駆動する。つまり、所定回数以上同じ方向に移動してきている時は、評価値が増えていても反転する。これにより、被写体変化によって評価値が増えてしまうような時に、誤ってフォーカスレンズ105がボケる方向に移動し続けてしまうようなことがなくなる。
【0036】
ステップS906においては、所定回数連続して合焦方向と判断される方向が同一であればステップS907へ進み、所定回数連続して同一方向に進んでいなければステップS908へ進む。ステップS908においては、所定時間の間同一エリアにいればステップS909へ進み、所定時間の間同一エリアにいなければステップS910へ進み処理を終了する。ステップS907では方向判別できたとして、ステップS910へ進み処理を終了する。ステップS909では合焦判別できたとして処理を終了する。
【0037】
上記レンズ動作の時間経過を示したのが図5である。ここでAの間にCCDに蓄積された電荷に対する評価値AがTA で取り込まれ、Bの間にCCDに蓄積された電荷に対する評価値BがTB で取り込まれる、TB では、評価値A,Bを比較し、A<Bであればそのまま順方向に移動し、一方A>Bであれば逆方向にする。
【0038】
次に、前記ステップ305、306の山登り動作(高速駆動動作)について図6を用いて説明する。ステップS601は処理の開始を示している。ステップS602ではAF評価値処理回路からAF評価値を取り込む、ステップS603においては、ステップS602で取り込んだ評価値が前回の評価評価値より大きければステップS604へ進み、ステップS602で取り込んだ評価値が前回の評価値より小さければステップS605へ進む。
【0039】
ステップS604では前回の順方向の速度でフォーカスレンズを駆動し、ステップS602へ戻る。一方、ステップS605においては、評価値がピークを越えて減っていなければステップS606へ進み、評価値がピークを越えて減っていればステップS607へ進み処理を終了する。ステップS606では、前回と逆方向に所定の速度でフォーカスレンズを駆動し、ステップS602へ戻る。
【0040】
上記レンズ動作を説明したのが図7である。ここで、Aはピークを越えて減少しているので合焦点があるとして山登り動作を終了し、微少駆動動作に移行する、一方、Bはピークが無く減少しているので方向を間違えたものとして反転し、山登り動作を続ける。
【0041】
なお、図3,図4,図6の処理動作は不図示のROMにあらかじめ格納されているプログラムに基づいてAFマイコン115の指示により実行される。
【0042】
上述したように、前記微少駆動動作に於いて、従来の方法では評価値が増えているときにはステップS902→ステップS903→ステップS905の処理を行い同じ方向に移動し続けてしまっていたが、本発明では、ステップS902→ステップS903→ステップ401→ステップS905の処理を所定回数連続して行った後は、ステップS902→ステップS903→ステップS401→ステップS905の処理を行いレンズが所定方向に連続して移動した場合に一度反転させることで、被写体変化によるAF評価値の変化で方向判定を誤ることが無くなる。
【0043】
これを図8のようにレンズの移動を示す図で見ると、フォーカスレンズの移動に関わらずAF評価値が増加するような時に、従来であればステップS902→ステップS903→ステップS905の処理を行い同じ方向に移動し続けてしまうので、図8(a)のようにフォーカスレンズがある一方向に移動してしまう。それに対し、本発明によれば、ステップS902→ステップS903→ステップS401→ステップS905の処理を行えば3回数連続して行った後は、ステップS902→ステップS903→ステップS401→ステップS904の処理行うので、図8(b)のように特定の位置に留まっていることが可能となり、確実な焦点調節を実現することができる。
【0044】
このように本実施例では、レンズが所定方向に連続して移動した場合に一度反転させることで、被写体変化によるAF評価値の変化で方向判定を誤ることが無くなる。例えば、フォーカスレンズの移動に関わらずAF評価値が増加するような時に、従来であれば図8(a)のようにフォーカスレンズがある一方向に移動してしまうのに対し、本発明によれば図8(b)のように特定の位置に留まっていることが可能となり、確実な焦点調節を実現することができる。
【0045】
【発明の効果】
以上説明したように、本発明によれば、レンズが所定方向に連続して移動した場合に一度反転させることで、被写体変化によるAF評価値の変化で方向判定を誤ることが無くなり、確実な焦点調節を実現することができるという効果がある。
【図面の簡単な説明】
【図1】本発明の実施例に係わるビデオカメラの構成を示すブロック図
【図2】フォーカスレンズ位置と焦点電圧レベルとの関係を示す図
【図3】一実施例のメインAF処理動作を示すフローチャート
【図4】一実施例の微少駆動動作を示すフローチャート
【図5】一実施例のレンズ動作の時間経過を示す図
【図6】一実施例の山登り駆動動作を示すフローチャート
【図7】一実施例のレンズ動作を示す図
【図8】レンズ移動位置の比較を示す図
【図9】従来の微少駆動動作を示すフローチャート
【符号の説明】
101 第1群レンズ
102 変倍レンズ
103 絞り
104 第2群レンズ
105 フォーカスレンズ
106 CCD
110 アクチュエータ(モータ)
111 ドライバ
112 アクチュエータ(モータ)
113 ドライバ
114 AF評価値処理回路
115 カメラAFマイコン(禁止手段、制御手段、比較判定手段)
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a focus adjustment device and a focus adjustment method used for various video cameras and the like.
[0002]
[Prior art]
In recent years, video devices such as video cameras have made remarkable progress, and auto focus control, auto iris control, zoom function, etc. are equipped as standard, improving operability and increasing functionality in every part. ing.
[0003]
By the way, when looking at the autofocus device, the imaging lens or the like detects the sharpness of the screen from the video signal obtained by photoelectrically converting the subject image, and sets the focus lens position so that it becomes the maximum AF evaluation value. The method of controlling and performing focus adjustment is becoming mainstream.
[0004]
As the AF evaluation value, the level of a high frequency component of a video signal extracted by a band pass filter in a certain band is generally used. When a normal subject image is photographed, the value increases as the focus is achieved as shown in FIG. 2, and the point at which the level becomes maximum is set as the in-focus position.
[0005]
In an actual video camera, as shown in FIG. 1, the AF microcomputer 115 moves the focus lens 105 so that the output signal level of the AF evaluation value processing circuit 114 is maximized, and performs automatic focus adjustment.
[0006]
Then, as shown in FIG. 3, the AF microcomputer 115 performs a slight drive operation of the focus lens 105, and performs focusing processing when it is determined that the focus lens 105 is in focus. When it is determined that the subject is not in focus, if the direction in which the AF evaluation value increases is determined, the focus lens 105 is driven (hill-climbing drive) in that direction. Then, when the peak of the AF evaluation value is reached, the minute driving operation is performed again. Thereafter, when it is determined that the subject is in focus, the AF evaluation value at that time is compared with the latest AF evaluation value, and if there is a difference of a predetermined level or more, it is determined that the system is restarted, and a minute driving operation is performed.
[0007]
Next, a conventional minute driving operation will be described with reference to FIG. Step S901 indicates the start of processing. In step S902, an AF evaluation value is fetched from the AF evaluation value processing circuit. In step S903, if the evaluation value fetched in step S902 is smaller than the previous evaluation value, the process proceeds to step S904, and the evaluation value fetched in step S902 is the previous evaluation value. If greater than the evaluation value, the process proceeds to step S905. In step S904, the focus lens is driven by a predetermined amount in the reverse direction of the previous time. On the other hand, in step S905, the focus lens is driven by a predetermined amount in the previous forward direction.
[0008]
In step S906, if the direction determined to be the in-focus direction is the same for a predetermined number of times, the process proceeds to step S907. If the direction has not been continued for the predetermined number of times in the same direction, the process proceeds to step S908. In step S908, if the force lens is in the same area for a predetermined time, that is, if the lens position remains in the predetermined range, the process proceeds to step S909, and if the focus lens is not in the same area for a predetermined time, the process proceeds to step S910 and the process is terminated. In step S907, it is determined that the direction can be determined, and the process proceeds to step S910 to end the process. In step S909, it is determined that the in-focus state has been determined, and the process ends.
[0009]
In this way, the camera AF microcomputer 115 is controlled so that the AF evaluation value is always maximized by moving the focus lens while repeating the restart determination → minor drive → mountain climbing drive → minor drive → restart determination.
[0010]
[Problems to be solved by the invention]
However, the conventional focusing device as described above has the following problems.
[0011]
Since the AF evaluation value is generally the level of the high-frequency component of the video signal extracted by a band pass filter in a certain band, the peak level of the evaluation value at the focal point is not constant depending on the subject.
[0012]
Even if the AF evaluation value is the same, one of them may be in focus and the other may not be in focus.
[0013]
Therefore, for example, when the brightness level of the subject changes, even if the evaluation value increases when the lens is moved, it may actually be out of focus, and just because the evaluation value increases, the lens moves in the same direction. When I was doing it, there was a case where blur was conspicuous.
[0014]
The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a focus adjustment device and a focus adjustment method capable of reliably performing focus adjustment.
[0015]
[Means for Solving the Problems]
The focus adjustment apparatus and the focus adjustment method of the present invention are configured as follows.
[0016]
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. If the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the previously acquired image, the device is moved in the same direction as the movement direction of the focus lens, and if low, the focus lens And moving the focus lens in the same direction as the movement direction when the movement direction of the focus lens is the same for a predetermined number of times, and prohibiting the movement of the focus lens in the same direction as the movement direction. If the lens is moved beyond a predetermined range during a predetermined time, the focus lens is moved in that direction. Comprising a control means for controlling to move at a faster rate.
[0017]
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. If the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the previously acquired image, the device is moved in the same direction as the movement direction of the focus lens, and if low, the focus lens When the movement direction of the focus lens is the same continuously for a predetermined number of times , the focus lens is controlled to move in the direction opposite to the movement direction. If the focus lens is moved beyond a predetermined range during a predetermined time, the focus lens is moved faster in that direction. Comprising a control means for moving at speed.
[0018]
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. An apparatus for comparing increase / decrease of the sharpness of the image before and after the focus lens moves by a predetermined amount, and for determining the direction in which the sharpness of the image increases; The focus lens is moved in a direction in which the sharpness of the focus lens increases, and the direction of movement of the focus lens is compared when the direction of movement of the focus lens accompanying the determination of the comparison determination unit is the same for a predetermined number of times. determining controls to reverse regardless of the direction in which the image sharpness is increased by the determination means, the focus lens for a predetermined time When it is moved beyond a predetermined range during has a control means for controlling to move the focus lens in the direction at a faster rate.
[0025]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 1 is a block diagram showing a configuration of a video camera according to the present invention. In FIG. 1, 101 is a fixed first lens group, 102 is a variable power lens for zooming, 103 is a stop, 104 is a fixed second lens group, and 105 is a function for correcting movement of the focal plane due to zooming. And a focus lens that combines the functions of focusing.
[0026]
Reference numeral 106 denotes a CCD serving as an image sensor, and 107 denotes an AGC that amplifies the output of the CCD 106. The amplification factor is adjusted by a signal from a camera AF microcomputer 115 described later. Reference numeral 108 denotes a camera signal processing circuit. Reference numerals 110 and 112 denote actuators (motors) for moving the variable magnification lens 102 and the focus lens 105, respectively. Reference numerals 111 and 113 denote drivers for driving the actuators 110 and 112 by signals from a camera AF microcomputer 115 described later.
[0027]
Reference numeral 114 denotes an AF evaluation value processing circuit that extracts a high frequency component used for focus detection from the output signal of the image sensor 106 as a focus voltage (AF evaluation value) shown in FIG. 2, and 115 comprehensively controls the entire system. The AF microcomputer controls the actuators 110 and 112 based on the output of the AF evaluation value processing circuit 114.
[0028]
In the video camera having the above configuration, the camera AF microcomputer 115 (prohibiting means, comparison determining means, control means) moves the focus lens (focus adjustment member) 105 in the optical axis direction by the motor 112 and the driver 113 as moving means. The focus adjustment operation is performed so that the evaluation value is maximized. The focus lens 105 compares the increase and decrease of the AF evaluation value before and after the operation by a predetermined amount to determine the direction in which the AF evaluation value increases, moves the focus lens 105 by a predetermined amount in the determination direction, and the determination direction is When the number of determinations is the same for the same number of times, the movement in that direction is prohibited, and the movement direction of the focus lens 105 is reversed.
[0029]
The control of the camera AF microcomputer 115 will be described in detail with reference to FIGS. The main AF process will be described with reference to FIG. Step S301 indicates the start of processing. In step S302, a minute driving operation is performed, and it is determined which direction is in focus when it is in focus or not in focus. A detailed explanation of the operation will be given later. In step S303, when it is determined that the focus is achieved in step S302, the process proceeds to step S309 to perform a focusing process, and when it is not determined that the focus is achieved in step S302, the process proceeds to step S304.
[0030]
In step S304, if the direction can be determined in step S302, the process goes to step S305 to perform hill climbing processing. If the direction cannot be determined in step S302, the process returns to step S302 to continue the minute driving operation. In step S305, the lens is hill-climbed at high speed in the direction in which the evaluation value increases. A detailed explanation of the operation will be given later.
[0031]
In step S306, if it is determined in step S305 that the vertex of the evaluation value has been exceeded, the process proceeds to step S307. If it is not determined in step S305 that the vertex of the evaluation value has been exceeded, the process returns to step S305 to continue the hill climbing operation. In step S307, the lens is returned to the apex of the evaluation value during hill-climbing driving. In step S308, when returning to the apex in step S307, the process returns to step S302 to perform the minute driving operation again. When not returning to the apex in step S307, the operation returns to step S307 and returns to the apex.
[0032]
Next, the focusing operation from step S309 will be described. In step S309, the AF evaluation value is held. In step S310, the AF evaluation value held in step S309 is compared with the latest AF evaluation value. In step S311, if it is determined to be restarted in step S310, the process goes to step S302 to resume the minute driving operation, and if it is not determined to be restarted in step S310, the process goes to step S312. In step S312, the lens is stopped and the process returns to step S310 to continue the restart determination.
[0033]
Here, the minute drive operation (low-speed drive operation) in step 302 will be described in detail. The control of the camera AF microcomputer will be described in detail with reference to FIG. This figure shows the control corresponding to FIG. 9 in the prior art. In addition, the same step number is attached | subjected to the step which performs the process similar to the past.
[0034]
First, the minute driving operation will be described with reference to FIG. Step S901 indicates the start of processing. In step S902, an AF evaluation value is fetched from the AF evaluation value processing circuit 114. In step S903, if the evaluation value fetched in step S902 is smaller than the previous evaluation value, the process proceeds to step S904, and the evaluation value fetched in step S902 is the previous time. If it is larger than the evaluation value, the process proceeds to step S401.
[0035]
In step S401, if it has moved in the same direction for a predetermined number of times, the process proceeds to step S904, and if it has not moved in the same direction for a predetermined number of times, the process proceeds to step S905. In step S904, the focus lens is driven by a predetermined amount in the reverse direction of the previous time. In step S905, the focus lens is driven by a predetermined amount in the previous forward direction. That is, when moving in the same direction a predetermined number of times or more, it is reversed even if the evaluation value increases. As a result, when the evaluation value increases due to a change in the subject, there is no possibility that the focus lens 105 continues to move in the blurring direction by mistake.
[0036]
In step S906, if the direction determined to be the in-focus direction is the same continuously for a predetermined number of times, the process proceeds to step S907, and if the direction is not continuously continued for the predetermined number of times, the process proceeds to step S908. In step S908, if it is in the same area for a predetermined time, the process proceeds to step S909, and if it is not in the same area for a predetermined time, the process proceeds to step S910 and the process is terminated. In step S907, it is determined that the direction can be determined, and the process proceeds to step S910 to end the process. In step S909, it is determined that the in-focus state has been determined, and the process ends.
[0037]
FIG. 5 shows the time course of the lens operation. Here, the evaluation value A for the charge accumulated in the CCD during A is taken in by T A , and the evaluation value B for the charge accumulated in the CCD during B is taken in by T B. In T B , the evaluation value is taken A and B are compared, and if A <B, it moves in the forward direction as it is, while if A> B, it is in the reverse direction.
[0038]
Next, the hill climbing operation (high-speed driving operation) in steps 305 and 306 will be described with reference to FIG. Step S601 indicates the start of processing. In step S602, an AF evaluation value is acquired from the AF evaluation value processing circuit. In step S603, if the evaluation value acquired in step S602 is larger than the previous evaluation evaluation value, the process proceeds to step S604, and the evaluation value acquired in step S602 is the previous time. If it is smaller than the evaluation value, the process proceeds to step S605.
[0039]
In step S604, the focus lens is driven at the previous forward speed, and the process returns to step S602. On the other hand, in step S605, if the evaluation value has not decreased beyond the peak, the process proceeds to step S606, and if the evaluation value has decreased beyond the peak, the process proceeds to step S607 to end the process. In step S606, the focus lens is driven at a predetermined speed in the direction opposite to the previous time, and the process returns to step S602.
[0040]
FIG. 7 illustrates the lens operation. Here, since A has decreased beyond the peak, the hill-climbing operation is terminated because there is an in-focus point, and the operation shifts to a minute driving operation. On the other hand, since B has decreased without a peak, the direction is wrong. Invert and continue climbing.
[0041]
3, 4, and 6 are executed by an instruction from the AF microcomputer 115 based on a program stored in advance in a ROM (not shown).
[0042]
As described above, in the minute driving operation, when the evaluation value is increased in the conventional method, the process of step S902 → step S903 → step S905 is performed and the movement continues in the same direction. Then, after the process of step S902 → step S903 → step 401 → step S905 is continuously performed a predetermined number of times, the process of step S902 → step S903 → step S401 → step S905 is performed to continuously move the lens in a predetermined direction. In such a case, the direction is not erroneously determined due to a change in the AF evaluation value due to a change in the subject by reversing once.
[0043]
As shown in FIG. 8 showing the movement of the lens, when the AF evaluation value increases regardless of the movement of the focus lens, in the conventional case, the processing of step S902 → step S903 → step S905 is performed. Since the movement continues in the same direction, the focus lens moves in one direction as shown in FIG. On the other hand, according to the present invention, if the process of step S902 → step S903 → step S401 → step S905 is performed three times continuously, the process of step S902 → step S903 → step S401 → step S904 is performed. As shown in FIG. 8B, it is possible to remain at a specific position, and it is possible to realize a sure focus adjustment.
[0044]
As described above, in this embodiment, when the lens is continuously moved in a predetermined direction, it is reversed once, so that the direction determination is not erroneously caused by the change of the AF evaluation value due to the subject change. For example, when the AF evaluation value increases regardless of the movement of the focus lens, the focus lens moves in one direction as shown in FIG. 8B, it is possible to remain at a specific position as shown in FIG. 8B, and it is possible to realize reliable focus adjustment.
[0045]
【The invention's effect】
As described above, according to the present invention, when the lens continuously moves in a predetermined direction, it is reversed once, so that the direction determination is not erroneous due to the change of the AF evaluation value due to the change of the subject, and the reliable focus is achieved. There is an effect that adjustment can be realized.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a video camera according to an embodiment of the present invention. FIG. 2 is a diagram showing a relationship between a focus lens position and a focus voltage level. FIG. Flowchart FIG. 4 is a flowchart showing a minute driving operation of one embodiment. FIG. 5 is a diagram showing a time course of lens operation of one embodiment. FIG. 6 is a flowchart showing a hill-climbing driving operation of one embodiment. FIG. 8 is a diagram showing a lens operation of the embodiment. FIG. 8 is a diagram showing a comparison of lens moving positions. FIG. 9 is a flowchart showing a conventional micro drive operation.
101 First lens group 102 Variable magnification lens 103 Diaphragm 104 Second lens group 105 Focus lens 106 CCD
110 Actuator (Motor)
111 Driver 112 Actuator (Motor)
113 driver 114 AF evaluation value processing circuit 115 camera AF microcomputer (prohibiting means, control means, comparison determination means)

Claims (9)

被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、
前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続して同じ場合は前記フォーカスレンズを当該移動方向と同一方向に移動することを禁止するよう制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段を備えたことを特徴とする焦点調節装置。
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. A device,
If the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the image acquired last time, the image is moved in the same direction as the movement direction of the focus lens. When the movement direction of the focus lens is the same for a predetermined number of times , the focus lens is controlled to be prohibited from moving in the same direction as the movement direction . A focus adjustment device comprising control means for controlling the focus lens to move at a higher speed in the direction when it is moved beyond a predetermined range .
被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、
前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続して同じ場合は前記フォーカスレンズを当該移動方向と逆の方向に移動させるように制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段を備えたことを特徴とする焦点調節装置。
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. A device,
If the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the image acquired last time, the image is moved in the same direction as the movement direction of the focus lens. When the moving direction of the focus lens is the same for a predetermined number of times , the focus lens is controlled to move in a direction opposite to the moving direction, and the focus lens is moved during a predetermined time. A focus adjustment apparatus comprising control means for controlling the focus lens to move at a higher speed in the direction when the lens is moved beyond a predetermined range .
被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節装置であって、
前記フォーカスレンズが所定量動く前後の画像の鮮鋭度の増減を比較し、該画像の鮮鋭度が増加する方向を判定する比較判定手段と、
前記比較判定手段の判定に伴い画像の鮮鋭度が高くなる方向に前記フォーカスレンズを移動させるとともに、前記比較判定手段の判定に伴う前記フォーカスレンズの移動する方向が所定回数連続して同一のときに前記フォーカスレンズの移動方向を前記比較判定手段の判定による画像鮮鋭度が高くなる方向に関わらず反転させるように制御し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動するように制御する制御手段とを備えたことを特徴とする焦点調節装置。
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. A device,
Comparison determination means for comparing the increase and decrease of the sharpness of the image before and after the focus lens moves by a predetermined amount, and determining the direction in which the sharpness of the image increases;
When the focus lens is moved in a direction in which the sharpness of the image is increased in accordance with the determination of the comparison determination unit, and the movement direction of the focus lens in accordance with the determination of the comparison determination unit is the same for a predetermined number of times continuously. The moving direction of the focus lens is controlled to be reversed regardless of the direction in which the image sharpness determined by the comparison / determination means increases , and the focus lens is moved beyond a predetermined range during a predetermined time. And a control means for controlling the focus lens to move at a higher speed in that direction .
前記制御手段は、前記フォーカスレンズを微小駆動する第1の駆動モードと前記フォーカスレンズを当該第1の駆動モードよりも高速に移動する第2の駆動モードを有し、前記第1のモードにおいて、前記禁止の制御を行うことを特徴とする請求項1記載の焦点調節装置。The control means has a first drive mode for minutely driving the focus lens and a second drive mode for moving the focus lens at a higher speed than the first drive mode. In the first mode, The focus adjustment apparatus according to claim 1 , wherein the prohibition control is performed. 前記制御手段は、前記フォーカスレンズを微小駆動する第1の駆動モードと前記フォーカスレンズを当該第1の駆動モードよりも高速に移動する第2の駆動モードを有し、前記第1のモードにおいて、前記移動方向を逆の方向にする制御を行うことを特徴とする請求項2に記載の焦点調節装置。  The control means has a first drive mode for finely driving the focus lens and a second drive mode for moving the focus lens at a higher speed than the first drive mode. In the first mode, The focus adjustment apparatus according to claim 2, wherein control is performed so that the moving direction is opposite. 前記制御手段は、前記フォーカスレンズを微小駆動する第1の駆動モードと前記フォーカスレンズを当該第1の駆動モードよりも高速に移動する第2の駆動モードを有し、前記第1のモードにおいて、前記反転の制御を行うことを特徴とする請求項3に記載の焦点調節装置。  The control means has a first drive mode for finely driving the focus lens and a second drive mode for moving the focus lens at a higher speed than the first drive mode. In the first mode, The focus adjustment apparatus according to claim 3, wherein the inversion is controlled. 被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節方法であって、前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続してい同じ場合は前記フォーカスレンズを当該移動方向と同一方向に移動することを禁止し、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動させることを特徴とする焦点調節方法。Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. The focus lens is moved in the same direction as the moving direction of the focus lens if the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the image acquired last time. When the moving direction of the focus lens is the same for a predetermined number of times , the focus lens is prohibited from moving in the same direction as the moving direction. If the focus lens is moved beyond the predetermined range during the time, the focus lens is moved faster in that direction. Focusing method characterized by moving at speed. 被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節方法であって、前記フォーカスレンズを移動させて取得した画像の鮮鋭度が前回取得した画像の鮮鋭度よりも高ければ前記フォーカスレンズの当該移動方向と同一方向に移動させ低ければ前記フォーカスレンズの当該移動方向と逆方向に移動させるとともに、前記フォーカスレンズの移動方向が所定回数連続して同じ場合は前記フォーカスレンズを当該移動方向と逆の方向に移動させ、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動させることを特徴とする焦点調節方法。Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. The focus lens is moved in the same direction as the moving direction of the focus lens if the sharpness of the image acquired by moving the focus lens is higher than the sharpness of the image acquired last time. When the movement direction of the focus lens is the same for a predetermined number of times, the focus lens is moved in a direction opposite to the movement direction, and the focus lens is moved for a predetermined time. The focus lens is moved at a faster speed in that direction. Focusing method comprising Rukoto. 被写体を撮影することにより撮像手段から得られる映像信号の所定の高周波成分に基づいて画像の鮮鋭度が高くなるようにフォーカスレンズを移動手段により光軸方向に移動させて焦点調節動作を行う焦点調節方法であって、
前記フォーカスレンズが所定量動く前後の画像の鮮鋭度の増減を比較し、該画像の鮮鋭度が増加する方向を判定し、
前記判定に伴い画像の鮮鋭度が高くなる方向に前記フォーカスレンズを移動させるとともに、前記判定に伴う前記フォーカスレンズの移動する方向が所定回数連続して同一のときに前記フォーカスレンズの移動方向を前記判定による画像の鮮鋭度が高くなる方向に関わらず反転させ、また、前記フォーカスレンズが所定時間の間に所定の範囲を超えて移動された場合には、その方向に前記フォーカスレンズをより速い速度で移動させることを特徴とする焦点調節方法。
Focus adjustment is performed by moving the focus lens in the direction of the optical axis by the moving means so that the sharpness of the image is increased based on a predetermined high-frequency component of the video signal obtained from the imaging means by photographing the subject. A method,
Compare the increase and decrease of the sharpness of the image before and after the focus lens moves a predetermined amount, determine the direction in which the sharpness of the image increases,
The focus lens is moved in a direction in which the sharpness of the image is increased in accordance with the determination, and the moving direction of the focus lens is determined when the movement direction of the focus lens in the determination is the same for a predetermined number of times. The image is reversed regardless of the direction in which the sharpness of the image increases , and when the focus lens is moved beyond a predetermined range during a predetermined time, the focus lens is moved at a higher speed in that direction. in focusing and wherein the Rukoto move.
JP32842499A 1998-11-19 1999-11-18 Focus adjustment device and focus adjustment method Expired - Fee Related JP4510193B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP32842499A JP4510193B2 (en) 1998-11-19 1999-11-18 Focus adjustment device and focus adjustment method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP10-329564 1998-11-19
JP32956498 1998-11-19
JP32842499A JP4510193B2 (en) 1998-11-19 1999-11-18 Focus adjustment device and focus adjustment method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010086901A Division JP4630947B2 (en) 1998-11-19 2010-04-05 Focus detection apparatus and focus adjustment method

Publications (2)

Publication Number Publication Date
JP2000214379A JP2000214379A (en) 2000-08-04
JP4510193B2 true JP4510193B2 (en) 2010-07-21

Family

ID=26572872

Family Applications (1)

Application Number Title Priority Date Filing Date
JP32842499A Expired - Fee Related JP4510193B2 (en) 1998-11-19 1999-11-18 Focus adjustment device and focus adjustment method

Country Status (1)

Country Link
JP (1) JP4510193B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010243922A (en) * 2009-04-08 2010-10-28 Canon Inc Imaging apparatus and method of controlling the same

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63207278A (en) * 1987-02-23 1988-08-26 Sanyo Electric Co Ltd Auto-focusing video camera
JPH04404A (en) * 1990-04-18 1992-01-06 Sony Corp Video camera
JPH07298120A (en) * 1994-04-27 1995-11-10 Canon Inc Automatic focusing adjustment device
JPH0846853A (en) * 1994-08-01 1996-02-16 Canon Inc Image pickup device
JPH1051679A (en) * 1996-07-30 1998-02-20 Canon Inc Method and device for automatic focus adjustment and storage medium

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63175816A (en) * 1987-01-16 1988-07-20 Fuji Electric Co Ltd Automatic focus adjustment method
JPH01162076A (en) * 1987-12-18 1989-06-26 Victor Co Of Japan Ltd Auto-focus system
JPH1051675A (en) * 1996-07-29 1998-02-20 Ikegami Tsushinki Co Ltd Focus control device and method and storage medium

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63207278A (en) * 1987-02-23 1988-08-26 Sanyo Electric Co Ltd Auto-focusing video camera
JPH04404A (en) * 1990-04-18 1992-01-06 Sony Corp Video camera
JPH07298120A (en) * 1994-04-27 1995-11-10 Canon Inc Automatic focusing adjustment device
JPH0846853A (en) * 1994-08-01 1996-02-16 Canon Inc Image pickup device
JPH1051679A (en) * 1996-07-30 1998-02-20 Canon Inc Method and device for automatic focus adjustment and storage medium

Also Published As

Publication number Publication date
JP2000214379A (en) 2000-08-04

Similar Documents

Publication Publication Date Title
US6236431B1 (en) Video camera apparatus with distance measurement area adjusted based on electronic magnification
JP4795155B2 (en) Optical device, imaging device, and control method thereof
JP4630947B2 (en) Focus detection apparatus and focus adjustment method
EP0447913B1 (en) Lens control system
JP2008058788A (en) Focusing device, image pickup apparatus and control method
JP4074911B2 (en) Lens system
JP3535603B2 (en) Automatic focusing device
US5402175A (en) Automatic focusing device wherein lens movement is controlled in accordance with lens hunting
JP4510193B2 (en) Focus adjustment device and focus adjustment method
JP4994733B2 (en) Automatic focusing device and imaging device
JP3548184B2 (en) Focus adjustment device and camera
JPH0662301A (en) Video camera
JPH0614245A (en) Video camera
JP3841129B2 (en) Camera lens control device
JP4579572B2 (en) Drive control device for optical equipment
JP3513180B2 (en) Imaging device
JPH0686142A (en) Image pickup device
JPH0933792A (en) Lens driving device and image pickup device
JPH05191701A (en) Image pickup device or lens position controller
JP2810403B2 (en) Automatic focusing device
JP3689497B2 (en) Automatic focusing method and apparatus
JPH05300422A (en) Focus controller
JP5389117B2 (en) Imaging apparatus, automatic focus adjustment apparatus, and automatic focus adjustment method
JP2005250127A (en) Autofocus system
JP3610093B2 (en) Imaging device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100112

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100405

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100427

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100430

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130514

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140514

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees