JP4575691B2 - Video scope of electronic endoscope device with electronic shutter function - Google Patents
Video scope of electronic endoscope device with electronic shutter function Download PDFInfo
- Publication number
- JP4575691B2 JP4575691B2 JP2004086727A JP2004086727A JP4575691B2 JP 4575691 B2 JP4575691 B2 JP 4575691B2 JP 2004086727 A JP2004086727 A JP 2004086727A JP 2004086727 A JP2004086727 A JP 2004086727A JP 4575691 B2 JP4575691 B2 JP 4575691B2
- Authority
- JP
- Japan
- Prior art keywords
- brightness adjustment
- processor
- electronic endoscope
- execution
- adjustment processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Endoscopes (AREA)
- Studio Devices (AREA)
Description
本発明は、撮像素子を有するビデオスコープを備えた電子内視鏡装置に関し、特に、モニタに表示される被写体像の明るさを自動的に調整するための明るさ調整処理に関する。 The present invention relates to an electronic endoscope apparatus including a video scope having an image sensor, and more particularly to a brightness adjustment process for automatically adjusting the brightness of a subject image displayed on a monitor.
従来の電子内視鏡装置においては、表示される被写体像を適正な明るさで維持するため、絞り等を調整することにより被写体へ照射される照明光の光量を調整する調光機能がプロセッサ(あるいは光源装置)に備えられており、また、電子シャッタ機能を発揮させてCCDの電荷蓄積時間を調整することにより明るさ調整処理を行うこともできる。電子シャッタ動作可能なビデオスコープ(電子内視鏡)を、電子シャッタ制御部を備えたプロセッサ(あるいは光源装置)に接続させた場合、電子シャッタ動作可能であることを判別し、電子シャッタ動作を電子内視鏡装置全体で実行する(特許文献1参照)。
電子シャッタ制御部も備えることでプロセッサと関係なく単独で電子シャッタ動作を実現可能であるビデオスコープの場合、プロセッサの性能、種類に応じて電子シャッタ動作を制御する必要がある。例えば、電子シャッタ動作を作動させた方がよい場合にプロセッサの自動調光機能を作動させた場合、被写体像の明るさが適切に維持されない事態が生じる。また、プロセッサ(光源装置)には自動調光機能を備えた機種と備えていない機種が存在している。したがって、電子シャッタ機能による明るさ調整処理を独自に(ビデオスコープ単独で)実現可能なビデオスコープを、あらゆるタイプのプロセッサ(光源装置)に対しても接続可能にする必要がある。 In the case of a video scope that can also realize an electronic shutter operation independently of the processor by including an electronic shutter control unit, it is necessary to control the electronic shutter operation according to the performance and type of the processor. For example, when it is better to operate the electronic shutter operation, when the automatic light control function of the processor is operated, a situation in which the brightness of the subject image is not properly maintained occurs. In addition, there are models that have an automatic light control function and models that do not have a processor (light source device). Therefore, it is necessary to make it possible to connect a video scope that can independently implement brightness adjustment processing using the electronic shutter function (by itself) to any type of processor (light source device).
そこで本発明では、電子シャッタ機能を単独で実現できるビデオスコープを使用する場合において、プロセッサの種類、設定状態等に従って被写体像の明るさを適正に維持することができる電子内視鏡装置のビデオスコープを提供することを課題とする。 Therefore, in the present invention, when using a video scope that can realize the electronic shutter function alone, the video scope of the electronic endoscope apparatus that can appropriately maintain the brightness of the subject image according to the type of the processor, the setting state, and the like. It is an issue to provide.
本発明のビデオスコープは、撮像素子を有し、光源装置および光源部を含むプロセッサいずれかに選択的に接続されるビデオスコープであり、独自に(ビデオスコープ単独で)明るさ調整処理を実現できるビデオスコープである。ビデオスコープは、明るさ調整処理手段と、調整処理切替設定手段とを備える。 The video scope of the present invention is a video scope that has an image sensor and is selectively connected to either a light source device or a processor including a light source unit, and can independently perform brightness adjustment processing (by itself). It is a video scope. The video scope includes brightness adjustment processing means and adjustment processing switching setting means.
明るさ調整処理手段は、撮像素子から読み出される画像信号に基づく輝度信号に従い、表示される被写体像を適正な明るさで維持するように、撮像素子に対する電子シャッタ機能を制御した明るさ調整処理を実行する。そして、明るさ調整処理切替設定手段は、明るさ調整処理手段による明るさ調整処理の実行と非実行とを切替・設定する。ビデオスコープ側での明るさ調整処理を選択的に実行できるため、プロセッサの機種、プロセッサの使用設定状態に合わせて明るさ調整処理を実行することができ、最も適した明るさ調整処理を実行させることが可能になる。 The brightness adjustment processing means performs brightness adjustment processing in which the electronic shutter function for the image sensor is controlled so that the displayed subject image is maintained at an appropriate brightness in accordance with the luminance signal based on the image signal read from the image sensor. Execute. Then, the brightness adjustment process switching setting unit switches and sets between execution and non-execution of the brightness adjustment process by the brightness adjustment process unit. Since the brightness adjustment process on the video scope can be executed selectively, the brightness adjustment process can be executed according to the processor model and processor usage setting status, and the most suitable brightness adjustment process is executed. It becomes possible.
例えば明るさ調整処理切替設定手段は、オペレータによる切替操作に従い、明るさ調整処理の実行と非実行とを切り替えるのがよい。あるいは、前回使用時の設定に合わせて切り替えるのがよい。この場合、明るさ調整処理切替設定手段により設定された明るさ調整処理の実行および非実行いずれかをデータとして記憶するメモリが設けられ、明るさ調整処理切替設定手段は、電源ON状態になると、前回使用時にメモリに記憶されたデータに基づいて、明るさ調整処理の実行、非実行を設定する。 For example, the brightness adjustment process switching setting unit may switch between execution and non-execution of the brightness adjustment process in accordance with a switching operation by the operator. Or it is good to switch according to the setting at the time of previous use. In this case, a memory for storing either execution or non-execution of the brightness adjustment process set by the brightness adjustment process switch setting unit as data is provided, and when the brightness adjustment process switch setting unit is in a power-on state, Execution / non-execution of brightness adjustment processing is set based on data stored in the memory at the previous use.
プロセッサに自動調光機能がある場合にはプロセッサによる自動調光処理を実行させ、自動調光機能が無い場合には電子シャッタ機能による明るさ調整処理行うのがよい。そのため、光源装置あるいはプロセッサに自動調光機能が備えられている機種か否かを判別する機種判別手段を設け、明るさ調整処理切替設定手段は、プロセッサあるいは光源装置に自動調光機能が備えられていない場合、明るさ調整処理の実行を設定するのがよい。 When the processor has an automatic dimming function, it is preferable to execute the automatic dimming process by the processor, and when there is no automatic dimming function, the brightness adjustment process by the electronic shutter function is preferably performed. Therefore, a model discriminating unit for discriminating whether or not the light source device or the processor is equipped with an automatic dimming function is provided, and the brightness adjustment process switching setting unit is provided with the automatic dimming function in the processor or the light source device. If not, execution of brightness adjustment processing should be set.
プロセッサには、自動調光機能とともにオペレータの操作による手動調光が可能な機種も存在する。そのため、プロセッサにおける自動/手動設定に従って電子シャッタ機能による明るさ調整処理を非実行/実行させるのがよい。そのため、光源装置あるいはプロセッサの自動調光機能に関して手動もしくは自動設定されているかを判別する自動/手動判別手段を設け、明るさ調整処理切替設定手段が、手動設定されている場合には明るさ調整処理の実行を設定し、自動設定されている場合には明るさ調整処理の非実行を設定するのがよい。 Some types of processors are capable of manual light control by an operator's operation as well as an automatic light control function. For this reason, it is preferable to perform non-execution / execution of brightness adjustment processing by the electronic shutter function in accordance with automatic / manual setting in the processor. For this reason, an automatic / manual discrimination means for discriminating whether the automatic light control function of the light source device or the processor is set manually or automatically is provided. If the brightness adjustment processing switching setting means is set manually, the brightness adjustment is performed. It is preferable to set execution of the process, and to set non-execution of the brightness adjustment process when the process is automatically set.
一方、術者によっては、自ら手動設定した状態で観察し続けることを希望する場合がある。そのため、光源装置あるいはプロセッサの調光機能の手動設定に関し、ビデオスコープでの明るさ調整処理を禁止する強制手動設定であるか否かを判別する強制手動設定判別手段を設け、明るさ調整処理切替設定手段が、強制手動設定されている場合には明るさ調整処理の非実行を設定するのがよい。
On the other hand, some surgeons may wish to continue observing in a manually set state. Therefore, with regard to manual setting of the light control function of the light source device or processor, a forced manual setting determining means for determining whether or not the forced manual setting prohibiting the brightness adjustment processing in the video scope is provided, and the brightness adjustment processing switching is performed. When the setting means is set to forced manual setting, it is preferable to set non-execution of brightness adjustment processing.
プロセッサへデータ送信を要求することによってプロセッサの機種、調光設定を判断し、電子シャッタ機能による明るさ調整処理の実行を決定してもよく、あるいはプロセッサとの相互通信処理の中で、電子シャッタ機能による明るさ調整処理の実行を決定してもよい。前者の場合、光源装置あるいはプロセッサの自動調光機能に関するデータを送信要求するデータ送信要求手段を設け、明るさ調整処理切替設定手段は、送信要求に対して送られてきた自動調光機能に関するデータに基づき、明るさ調整処理の実行と非実行とを切替・設定する。一方後者の場合、光源装置あるいはプロセッサとの間で自動調光機能に関するデータを相互通信するデータ通信手段を設け、明るさ調整処理切替設定手段は、送られてくる自動調光機能に関するデータに基づき、明るさ調整処理の実行と非実行とを切替・設定する。 The processor type and dimming setting may be determined by requesting data transmission to the processor, and the execution of brightness adjustment processing by the electronic shutter function may be determined, or the electronic shutter may be determined during mutual communication processing with the processor. Execution of brightness adjustment processing by function may be determined. In the former case, data transmission requesting means for requesting transmission of data relating to the automatic light control function of the light source device or the processor is provided, and the brightness adjustment processing switching setting means is data relating to the automatic light control function transmitted in response to the transmission request. Based on the above, the execution / non-execution of brightness adjustment processing is switched / set. On the other hand, in the latter case, data communication means for mutual communication of data relating to the automatic dimming function is provided with the light source device or the processor, and the brightness adjustment processing switching setting means is based on the received data relating to the automatic dimming function. The brightness adjustment process is switched and set between execution and non-execution.
本発明のプログラムは、撮像素子を有し、光源装置あるいはプロセッサに接続されるビデオスコープの明るさ調整処理に関するプログラムであって、撮像素子から読み出される画像信号に基づく輝度信号に従い、表示される被写体像を適正な明るさで維持するように、撮像素子に対する電子シャッタ機能を制御した明るさ調整処理を実行する明るさ調整処理手段と、明るさ調整処理手段による明るさ調整処理の実行と非実行とを切替・設定可能な明るさ調整処理切替設定手段とを機能させることを特徴とする。 The program of the present invention is a program related to the brightness adjustment processing of a video scope that has an image sensor and is connected to a light source device or a processor, and displays a subject in accordance with a luminance signal based on an image signal read from the image sensor Brightness adjustment processing means for executing brightness adjustment processing in which the electronic shutter function for the image sensor is controlled so as to maintain an image with appropriate brightness, and execution and non-execution of brightness adjustment processing by the brightness adjustment processing means And a brightness adjustment processing switching setting means that can be switched and set.
本発明によれば、プロセッサの種類、設定状態等に合わせて被写体像の明るさを適正に維持することができる。 According to the present invention, the brightness of the subject image can be appropriately maintained according to the type of processor, the setting state, and the like.
以下、図面を参照して本発明の実施形態について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、第1の実施形態である電子内視鏡装置のブロック図である。 FIG. 1 is a block diagram of an electronic endoscope apparatus according to the first embodiment.
電子内視鏡装置では、CCD54を有するビデオスコープ50と、CCD54から読み出される画像信号を処理するプロセッサ10とが備えられ、被写体像を表示するモニタ32やキーボード34がプロセッサ10に接続される。ビデオスコープ50は、プロセッサ10に着脱自在に接続される。
The electronic endoscope apparatus includes a
ランプ点灯スイッチ(図示せず)が操作されてONになると、ランプ制御部11Aを含むランプ電源11から光源ランプ12へ電源が供給される。光源ランプ12から放射された光は、集光レンズ14を介してビデオスコープ50内に設けられたライトガイド51の入射端51Aに入射する。ライトガイド51は、光源ランプ部12から放射される光をビデオスコープ50の先端側へ伝達する光ファイバー束であり、ライトガイド51を通った光は出射端51Bから出射し、拡散レンズである配光レンズ52を介して観察部位Sに光が照射される。
When a lamp lighting switch (not shown) is operated and turned on, power is supplied from the
観察部位Sにおいて反射した光は、対物レンズ53を通り、これにより観察部位Sの被写体像がCCD54の受光面に形成される。本実施形態では、カラー撮像方式として単板同時式が適用されており、CCDの受光面上にはイエロー(Ye)、シアン(Cy)、マゼンタ(Mg)、グリーン(G)の色要素が市松状に並べられた補色カラーフィルタ(図示せず)が受光面の各画素に対応するよう配置されている。CCD54では、補色カラーフィルタを通る色に応じた被写体像の画像信号が光電変換により発生し、所定時間間隔ごとに1フレームもしくは1フィールド分の画像信号が、色差線順次方式に従って順次読み出される。カラーテレビジョン方式として例えばNTSC方式が適用されており、1/30秒間隔ごとに1フレーム(1/60秒間隔ごとに1フィールド)分の画像信号が順次読み出され、ゲイン調整用のAGC(Auto Gain Control、ここでは図示せず)を介して信号処理回路55へ送られる。
The light reflected at the observation site S passes through the
信号処理回路55には、増幅処理を行うための初期プロセス回路、輝度信号と色信号に分離するための信号分離処理回路、R、G、Bの原色信号を生成するR、G、Bマトリクス回路、ホワイトバランス調整回路、ガンマ補正回路、画像輪郭の強調を行う画像輪郭強調回路、輝度信号、色差信号を生成するためのカラーマトリクス回路などが設けられている(いずれも図示せず)。信号処理回路55に入力された画像信号に対してこれらの回路で様々な処理が施されることにより映像信号が生成され、プロセッサ10に送られる。また、CCD54を駆動するため、駆動信号を所定のタイミングで出力するCCD駆動回路(図示せず)が設けられている。
The
プロセッサ信号処理回路28では、信号処理回路55から送られてくる映像信号に対して所定の処理が施される。処理された映像信号は、NTSCコンポジット信号、Y/C分離信号(Sビデオ信号)、RGB分離信号などのビデオ信号としてモニタ32へ出力され、これにより被写体像がモニタ32に映し出される。
In the processor
プロセッサCPU24を含むシステムコントロール回路22はプロセッサ10全体を制御し、調光回路23、ランプ電源11のランプ制御部11A、プロセッサ信号処理回路28などの各回路に制御信号を出力する。タイミングコントロール回路30では、信号の処理タイミングを調整するクロックパルスがプロセッサ10内の各回路に出力され、また、ビデオ信号に付随される同期信号がプロセッサ信号処理回路28に送られる。ROM25にはプロセッサの機種に関するデータが記憶されており、RAM26には、ビデオスコープ50から送られてくるデータが記憶される。
A system control circuit 22 including a
ビデオスコープ50内には、ビデオスコープ50全体を制御するスコープ制御部56、データ書き換え可能なEEPROM57が設けられており、スコープ制御に関するプログラムがスコープ制御部56内のROM58に記憶されている。スコープ制御部56はEEPROM57からデータを読み出すとともに、信号処理回路55を制御する。ビデオスコープ50がプロセッサ10に接続されると、スコープ制御部56とシステムコントロール回路22との間で適時データが送受信され、必要に応じてスコープ制御部56からシステムコントロール回路22へ、あるいはシステムコントロール回路22からスコープ制御部56へデータが送信される。
In the
ビデオスコープ50では、電子シャッタ機能を利用して被写体像の明るさ調整処理を実行することが可能であり、信号処理回路55において被写体像の明るさを示す輝度信号が画像信号に基づいて生成され、スコープ制御部56へ送られる。そして、検出された輝度信号に基づき、電子シャッタ速度等を制御するため、スコープ制御部56から信号処理回路55へ制御信号が送られる。この制御信号に基づき、CCD54における電荷蓄積時間を調整するための駆動信号が信号処理回路55からCCD54へ出力される。
The
ビデオスコープ50には、電子シャッタ機能による明るさ調整処理を実行ON/OFFさせる切替スイッチ59が設けられており、ユーザが必要に応じて操作する。スコープ制御部56は、切替スイッチ59から送られてくる信号に基づいて、電子シャッタ機能による明るさ調整処理を実行する。また、ビデオスコープ50には、VTRスイッチ、フリーズスイッチ、コピースイッチ(いずれも図示せず)が設けられており、必要に応じて操作される。
The
ライトガイド51の入射端51Aと集光レンズ14との間には被写体Sに照される光の光量を調整するための絞り16が設けられており、モータ18の駆動によって開閉する。図1に示すプロセッサ10では、調光回路23によって絞り16を通過する光、すなわち被写体Sへ照射される光の光量調整が実行可能であり、電子シャッタ機能を備えていないビデオスコープが接続された場合など一定の条件においてプロセッサ10による自動調光処理が実行される。この場合、信号処理回路55から出力される輝度信号が順次調光回路23へ入力され、この輝度信号に基いて調光回路23からモータドライバ20へ制御信号が送られ、絞り16が所定量だけ開閉するように、モータ18がモータドライバ20によって駆動される。フロントパネル96には、ホワイトバランス調整を実行するためのホワイトバランス実行スイッチ96A、自動調光/手動調光を設定するための調光設定スイッチ96Bを含む一連のパネルスイッチPSが設けられている。手動調光が設定された場合、術者は、絞り開閉操作部材(図示せず)を操作することにより絞り16を所定量開閉させて被写体像の明るさを調整することができる。
A
図2は、スコープ制御部56によって実行されるスコープの制御処理を示した図である。プロセッサ10からの電源供給によりビデオスコープ50の電源がON状態になると、実行開始される。
FIG. 2 is a diagram showing a scope control process executed by the
ステップS101では、CCD54や信号処理回路55などが初期設定され、信号処理回路55内のレジスタに対するデータ設定、各変数の設定等が行われる。ステップS102では、ビデオスコープ50の切替スイッチ59を除いたスイッチに関連する処理が実行される。ここでは、図示しないVTRスイッチ、フリーズスイッチ、コピースイッチに対する操作に応じた処理が実行され、操作に応じてビデオスコープ50からプロセッサ10へデータが送信される。
In step S101, the
ステップS103では、プロセッサ10に対する通信処理が実行され、プロセッサ10との間でデータが相互に送受信される。ステップS104では、信号処理回路55の機能を制御するための制御信号がスコープ制御部56から信号処理回路55へ送信される。ステップS105では、上記ステップS102〜S104以外の処理が実行される。
In step S <b> 103, communication processing for the
ステップS106では、電子シャッタ変数“ae”が1であるか否かが判断される。電子シャッタ変数“ae”は、ビデオスコープ50において電子シャッタ機能を用いた被写体像の明るさ調整処理を実行するか否かを表す変数であり、ae=1の場合には電子シャッタ機能による明るさ調整処理の実行を示し、ae=0の場合には電子シャッタ機能による明るさ調整処理を実行しないこと(非実行)を示す。
In step S106, it is determined whether or not the electronic shutter variable “ae” is “1”. The electronic shutter variable “ae” is a variable indicating whether or not to perform the brightness adjustment processing of the subject image using the electronic shutter function in the
ステップS106においてae=1である、すなわち電子シャッタ機能による明るさ調整処理が実行されると判断された場合、ステップS107へ進み、明るさ調整処理が実行される。ステップS107が実行されると、ステップS102へ戻る。一方、ステップS106においてae=1ではなくae=0であると判断された場合、ステップS107は実行されずにステップS102へ戻る。ビデオスコープ50の電源がOFF状態になるまでステップS102〜S107(またはS102〜S106)が繰り返し実行される。
If it is determined in step S106 that ae = 1, that is, the brightness adjustment process by the electronic shutter function is executed, the process proceeds to step S107, and the brightness adjustment process is executed. When step S107 is executed, the process returns to step S102. On the other hand, if it is determined in step S106 that ae = 0 instead of ae = 1, step S107 is not executed and the process returns to step S102. Steps S102 to S107 (or S102 to S106) are repeatedly executed until the
図3は、図2のステップS107のサブルーチンである明るさ調整処理を示した図である。 FIG. 3 is a diagram showing brightness adjustment processing, which is a subroutine of step S107 in FIG.
ステップS201では、前回の明るさ調整処理から1フィールド分の走査時間(ここでは1/60秒)が経過しているか否かが判断される。ここでは、図2のステップS102〜S107にわたる実行処理時間が1フィールド走査時間に比べて非常に短いため、1画面分の被写体像に応じた輝度データの得られる時間に合わせて明るさ調整処理が実行される。1フィールド分の走査時間が経過していないと判断されると、明るさ調整処理は行われないままサブルーチンが終了する。一方、1フィールド分の走査時間が経過していると判断された場合、ステップS202へ進む。 In step S201, it is determined whether or not the scanning time for one field (here, 1/60 seconds) has elapsed since the previous brightness adjustment processing. Here, since the execution processing time in steps S102 to S107 in FIG. 2 is very short compared to the one-field scanning time, the brightness adjustment processing is performed in accordance with the time when the luminance data corresponding to the subject image for one screen is obtained. Executed. If it is determined that the scanning time for one field has not elapsed, the subroutine ends without performing the brightness adjustment processing. On the other hand, if it is determined that the scanning time for one field has elapsed, the process proceeds to step S202.
ステップS202では、輝度データが信号処理回路55から読み出され、スコープ制御部56へ送られる。そして、ステップS203では、読み出された輝度データの値と参照値とが比較される。ここでは、被写体像の明るさを示す輝度データは、平均輝度値(輝度レベル)として求められ、平均輝度値は0〜255のいずれかの整数値として算出される。
In step S 202, the luminance data is read from the
ステップS204では、平均輝度値と参照値との差または比に基づき、電子シャッタ速度、すなわち電荷蓄積時間が調整される。輝度平均値が参照値よりも大きい場合、電子シャッタ速度を上げ、輝度平均値が参照値よりも小さい場合、電子シャッタ速度を遅くする。なお、電子シャッタ速度の調整だけでは被写体像を適正な明るさで表示できない場合、AGCのゲインを増加させる処理が施される。そして、ステップS205では、決定された電子シャッタ速度が信号処理回路55内のレジスタに設定される。ステップS205が実行されると、サブルーチンは終了する。
In step S204, the electronic shutter speed, that is, the charge accumulation time is adjusted based on the difference or ratio between the average luminance value and the reference value. When the average brightness value is larger than the reference value, the electronic shutter speed is increased, and when the average brightness value is smaller than the reference value, the electronic shutter speed is decreased. If the subject image cannot be displayed with appropriate brightness only by adjusting the electronic shutter speed, processing for increasing the gain of AGC is performed. In step S205, the determined electronic shutter speed is set in a register in the
図4は、図2のステップS105のサブルーチンを示した図であり、第1の実施形態では、電子シャッタ機能による明るさ調整処理の設定が、他の処理(S105)において施される。
FIG. 4 is a diagram showing a subroutine of step S105 in FIG. 2. In the first embodiment, the setting of the brightness adjustment processing by the electronic shutter function is performed in other processing (S105) .
ステップS301では、切替スイッチ59のON/OFF状態が検出される。そして、ステップS302では、切替スイッチ59がON状態であるか否かが判断される。切替スイッチ59がON状態であると判断されると、ステップS303へ進み、電子シャッタ機能による明るさ調整処理を実行することが決定され、電子シャッタ変数ae=1に設定される。一方、切替スイッチ59がON状態ではないと判断された場合、ステップS304へ進み、電子シャッタ機能による明るさ調整処理を実行しないことが決定され、電子シャッタ変数ae=0に設定される。電子シャッタ変数ae=1に設定された場合、プロセッサにおいて自動調光処理を実行しないように、コマンドデータが接続されたプロセッサへ送信される。 In step S301, the ON / OFF state of the changeover switch 59 is detected. In step S302, it is determined whether or not the changeover switch 59 is in the ON state. If it is determined that the changeover switch 59 is in the ON state, the process proceeds to step S303, where it is determined to execute brightness adjustment processing by the electronic shutter function, and the electronic shutter variable ae = 1 is set. On the other hand, if it is determined that the changeover switch 59 is not in the ON state, the process proceeds to step S304, where it is determined not to execute the brightness adjustment processing by the electronic shutter function, and the electronic shutter variable ae = 0 is set. When the electronic shutter variable ae = 1 is set, command data is transmitted to the connected processor so that the automatic light control processing is not executed in the processor.
このように第1の実施形態によれば、電子シャッタ機能による明るさ調整処理がビデオスコープ50において実行可能であり、スコープ制御部56によりCCD54の駆動信号が制御される。そして、明るさ調整処理の実行/非実行を定める切替スイッチ59がビデオスコープ50に設けられており、術者がON/OFF操作することにより、明るさ調整処理の実行/非実行が切替設定される(S302〜S304)。
As described above, according to the first embodiment, the brightness adjustment process by the electronic shutter function can be executed in the
術者ではなくビデオスコープ50の業者のみ切り替えることができるように、切替スイッチ59をスコープ内部に設けてもよい。あるいは、術者がキーボード等を操作することによって切り替えるように構成してもよい。
The changeover switch 59 may be provided inside the scope so that only the
次に、図5を用いて第2の実施形態である電子内視鏡装置について説明する。第2の実施形態では、メモリに記憶されたデータに基づいて電子シャッタ機能による明るさ調整処理の設定を実行する。その他の構成については、第1の実施形態と同じである。 Next, the electronic endoscope apparatus according to the second embodiment will be described with reference to FIG. In the second embodiment, setting of brightness adjustment processing by the electronic shutter function is executed based on data stored in the memory. Other configurations are the same as those in the first embodiment.
図5は、図2のステップS101のサブルーチンを示した図であり、第2の実施形態では、電子シャッタ機能による明るさ調整処理の設定が初期設定処理において実行される。 FIG. 5 is a diagram showing a subroutine of step S101 in FIG. 2, and in the second embodiment, setting of brightness adjustment processing by the electronic shutter function is executed in the initial setting processing.
ステップS401では、電子シャッタ決定変数beがEEPROM57から読み出される。電子シャッタ決定変数“b e”は、前回使用時にEEPROM57に記憶されたデータであり、電子シャッタ機能による明るさ調整処理が実行されていた場合にはbe=1、実行されていない場合にはbe=0に設定される。ビデオスコープ50が電源ON状態になると電子シャッタ決定変数beに応じたデータがスコープ制御部56へ送られる。
In step S <b> 401, the electronic shutter determination variable be is read from the
ステップS402では、読み出された電子シャッタ決定変数beの値が1、すなわち前回使用時において電子シャッタ機能による明るさ調整処理が実行されていたか否かが判断される。電子シャッタ決定変数be=1であると判断された場合、ステップS403に進み、電子シャッタ変数ae=1に設定される。一方、電子シャッタ決定変数be=1ではなく0であると判断された場合、ステップS404へ進み、電子シャッタ変数ae=0に設定される。 In step S402, it is determined whether or not the read value of the electronic shutter determination variable be is 1, that is, whether or not brightness adjustment processing by the electronic shutter function has been executed at the previous use. If it is determined that the electronic shutter determination variable be = 1, the process proceeds to step S403, where the electronic shutter variable ae = 1 is set. On the other hand, when it is determined that the electronic shutter determination variable be = 1 is not 1 but 0, the process proceeds to step S404, and the electronic shutter variable ae = 0 is set.
次に、図6を用いて第3の実施形態である電子内視鏡装置について説明する。第3の実施形態では、プロセッサの機種を判別して電子シャッタ機能による明るさ調整処理の設定を実行する。それ以外の構成については、第1、第2の実施形態と同じである。 Next, an electronic endoscope apparatus according to a third embodiment will be described with reference to FIG. In the third embodiment, the model of the processor is discriminated and the brightness adjustment processing setting by the electronic shutter function is executed. Other configurations are the same as those in the first and second embodiments.
図6は、図2のステップS101のサブルーチンを示した図であり、第3の実施形態では、電子シャッタ機能による明るさ調整処理の設定が初期設定処理において実行される。 FIG. 6 is a diagram showing a subroutine of step S101 in FIG. 2, and in the third embodiment, setting of brightness adjustment processing by the electronic shutter function is executed in the initial setting processing.
ステップS501では、電源ONと同時に接続されたプロセッサから送られてくるプロセッサの機種に関するデータを検出する。ここでのプロセッサの機種は自動調光機能を備えているか否かによって分類されている。例えば図1に示すように接続されているプロセッサに自動調光機能が備えられている場合、「High」レベルの信号がビデオスコープ50へ送信され、自動調光機能が備えられていない場合、「Low」レベルの信号がビデオスコープ50に送信される。
In step S501, data relating to the processor model sent from the connected processor at the same time when the power is turned on is detected. The processor models here are classified according to whether or not they have an automatic dimming function. For example, when the processor connected as shown in FIG. 1 has an automatic dimming function, a signal of “High” level is transmitted to the
ステップS502では、送られてきたプロセッサの機種に関する信号のレベルがLowであるか、すなわちプロセッサに自動調光機能が備えられていないか否かが判断される。信号のレベルがLowであると判断された場合、ステップS503に進み、電子シャッタ機能による明るさ調整処理の実行が決定され、電子シャッタ変数ae=1に設定される。一方、信号のレベルがLowではないと判断された場合、ステップS504へ進み、電子シャッタ変数ae=0に設定される。これにより、明るさ調整処理はプロセッサの自動調光機能によって実現される。 In step S502, it is determined whether or not the level of the signal relating to the type of processor sent is low, that is, whether or not the processor is not equipped with an automatic dimming function. If it is determined that the signal level is Low, the process proceeds to step S503, where execution of brightness adjustment processing by the electronic shutter function is determined, and the electronic shutter variable ae = 1 is set. On the other hand, if it is determined that the signal level is not low, the process proceeds to step S504, where the electronic shutter variable ae = 0 is set. Thereby, the brightness adjustment process is realized by the automatic light control function of the processor.
次に、図7を用いて第4の実施形態である電子内視鏡装置について説明する。第4の実施形態では、プロセッサの自動調光機能の有無および自動/手動設定の判別に基づき、電子シャッタ機能による明るさ調整処理の設定を行う。それ以外の構成については、第1の実施形態と同じである。 Next, an electronic endoscope apparatus according to a fourth embodiment will be described with reference to FIG. In the fourth embodiment, the brightness adjustment process is set by the electronic shutter function based on the presence / absence of the automatic light control function of the processor and the determination of the automatic / manual setting. About another structure, it is the same as 1st Embodiment.
図7は、図2のステップS101のサブルーチン内で行なわれる処理を示した図であり、第4の実施形態では、電子シャッタ機能による明るさ調整処理の設定が初期設定処理S101において実行される。尚この図7の処理は、図2のステップS105の処理として、繰り返し処理(S102〜S107)において実行されるとしてもよい。 FIG. 7 is a diagram showing processing performed in the subroutine of step S101 of FIG. 2. In the fourth embodiment, setting of brightness adjustment processing by the electronic shutter function is executed in the initial setting processing S101. Note that the processing in FIG. 7 may be executed in repetitive processing (S102 to S107) as processing in step S105 in FIG.
ステップS601では、自動調光に関するデータの送信を要求するコマンドデータが接続されたプロセッサに対して送信される。ステップS602では、所定の時間が(例えば1秒間)が経過しているか否かが判断される。プロセッサからの応答データが受信されないまま所定時間が経過したと判断された場合、このままサブルーチンは終了する。一方、所定時間経過していないと判断された場合、ステップS603へ進む。 In step S601, command data for requesting transmission of data related to automatic light control is transmitted to the connected processor. In step S602, it is determined whether a predetermined time (for example, 1 second) has elapsed. When it is determined that the predetermined time has passed without receiving response data from the processor, the subroutine ends as it is. On the other hand, if it is determined that the predetermined time has not elapsed, the process proceeds to step S603.
ステップS603では、プロセッサからの応答データが受信されたか否かが判断される。プロセッサから応答データが受信されてないと判断された場合、ステップS602へ戻る。一方、プロセッサからの応答データが受信されたと判断された場合、ステップS604へ進む。ステップS604では、プロセッサからの応答データが明るさ調整に関するデータであるか否かが判断される。 In step S603, it is determined whether response data from the processor has been received. If it is determined that no response data has been received from the processor, the process returns to step S602. On the other hand, if it is determined that the response data from the processor has been received, the process proceeds to step S604. In step S604, it is determined whether the response data from the processor is data relating to brightness adjustment.
第4の実施形態では、明るさ調整に関する応答データの上位4ビットがah(データがaxh(x=0〜fh))で表現されており、プロセッサの機種(自動調光機能の有無)、および自動調光の自動/手動設定によってデータ値が異なる。自動調光機能の無いプロセッサである場合には「a0h」、自動調光機能があって自動設定の場合には「a1h」、自動調光機能があって手動設定の場合には「a2h」、そして自動調光機能があって強制的手動設定の場合には「a3h」で表されている。ここで強制的手動設定は、術者により決定された手動設定を他のビデオスコープ50の接続等に関係なく維持するものであり、キーボード34の操作等によって設定される。またこれらのデータとは別に、ビデオスコープ50の電子シャッタ機能の有無に関するデータの送信を要求するプロセッサ側からのコマンドデータがあり、それは「aah」で表される。
In the fourth embodiment, the upper 4 bits of the response data related to the brightness adjustment are expressed as ah (data is axh (x = 0 to fh)), the processor model (with or without automatic dimming function), and The data value varies depending on the automatic / manual setting of automatic dimming. “A0h” if the processor does not have an automatic dimming function, “a1h” if it has an automatic dimming function and automatic setting, and “a2h” if it has an automatic dimming function and manual setting. In the case where there is an automatic light control function and forced manual setting is performed, it is represented by “a3h”. Here, the forced manual setting is to maintain the manual setting determined by the operator regardless of the connection of the
ステップS604において、プロセッサからの応答データが明るさ調整に関するデータではないと判断された場合、ステップS602へ戻る。一方、プロセッサからの応答データが明るさ調整に関するデータであると判断された場合(データがaxh(x = 0 〜fh )の場合)、ステップS605へ進む。
If it is determined in step S604 that the response data from the processor is not data relating to brightness adjustment, the process returns to step S602. On the other hand, when it is determined that the response data from the processor is data related to brightness adjustment ( when the data is axh (x = 0 to fh)) , the process proceeds to step S605.
ステップS605では、データが「aah」であるか、すなわち、プロセッサ側からの電子シャッタ機能の有無に関するデータ送信を要求するコマンドデータであるか否かが判断される。受信データが「aah」であると判断された場合、ステップS602へ戻る。一方、受信データが「aah」ではないと判断された場合、ステップS606へ進む。 In step S605, it is determined whether or not the data is “aah”, that is, whether or not the data is command data requesting data transmission regarding the presence or absence of the electronic shutter function from the processor side. If it is determined that the received data is “aah”, the process returns to step S602. On the other hand, if it is determined that the received data is not “aah”, the process proceeds to step S606.
ステップS606では、受信データが「a0h」、あるいは「a2h」であるか否かが判断される。すなわち、自動調光機能がプロセッサに備えられていない、あるいは自動調光に関して手動設定されているか否かが判断される。受信データが「a0h」、あるいは「a2h」であると判断された場合、ステップS607へ進み、電子シャッタ機能による明るさ調整処理を実行することが決定され、電子シャッタ変数ae=1に設定される。一方、受信データが「a0h」あるいは「a2h」でない、すなわち、自動調光機能のあるプロセッサであって自動設定されている、あるいは強制的手動設定されていると判断された場合、ステップS608へ進み、電子シャッタ機能による明るさ調整処理を行わず、プロセッサによる調光処理を行うことが決定され、電子シャッタ変数ae=0に設定される。 In step S606, it is determined whether the received data is “a0h” or “a2h”. That is, it is determined whether the automatic dimming function is not provided in the processor or whether the automatic dimming is set manually. If it is determined that the received data is “a0h” or “a2h”, the process proceeds to step S607, where it is determined to execute brightness adjustment processing by the electronic shutter function, and the electronic shutter variable ae = 1 is set. . On the other hand, if the received data is not “a0h” or “a2h”, that is, it is determined that the processor has an automatic dimming function and is automatically set or forcedly set manually, the process proceeds to step S608. Then, it is decided not to perform the brightness adjustment processing by the electronic shutter function but to perform the light control processing by the processor, and the electronic shutter variable ae = 0 is set.
次に、図8を用いて第5の実施形態である電子内視鏡装置について説明する。第5の実施形態では、自動的にプロセッサから送られてくるデータの情報に基づき、電子シャッタ機能による明るさ調整処理の実行を設定する。それ以外の構成については、第1の実施形態と同じである。 Next, an electronic endoscope apparatus according to a fifth embodiment will be described with reference to FIG. In the fifth embodiment, execution of brightness adjustment processing by the electronic shutter function is set based on information of data automatically sent from the processor. About another structure, it is the same as 1st Embodiment.
図8は、図2のステップS103のサブルーチンを示した図であり、第5の実施形態では、プロセッサに対する通信処理において電子シャッタ機能による明るさ調整処理の設定が行われる。 FIG. 8 is a diagram showing a subroutine of step S103 in FIG. 2, and in the fifth embodiment, setting of brightness adjustment processing by the electronic shutter function is performed in communication processing for the processor.
ステップS701では、接続されたプロセッサからデータが送信されているか否かが判断される。プロセッサからデータが送信されていないと判断された場合、そのままサブルーチンは終了する。一方、プロセッサからデータが送信されていると判断された場合、ステップS702へ進む。 In step S701, it is determined whether data is transmitted from the connected processor. If it is determined that no data has been transmitted from the processor, the subroutine ends. On the other hand, if it is determined that data is being transmitted from the processor, the process proceeds to step S702.
ステップS702では、送信されてきたデータが明るさ調整処理に関するデータであるか否かが判断される。第6の実施形態と同様に、明るさ調整処理に関するデータに関しては、送信されてきたデータの上位4ビットがah、即ちデータはaxh(x=0〜fh)で表されている。明るさ調整処理に関するデータではないと判断された場合、ステップS708に進み、送信されたデータに応じた処理が実行される。一方、明るさ調整処理に関するデータであると判断された場合、ステップS703へ進む。 In step S702, it is determined whether or not the transmitted data is data related to brightness adjustment processing. As in the sixth embodiment, regarding the data relating to the brightness adjustment process, the upper 4 bits of the transmitted data are represented by ah, that is, the data is represented by axh (x = 0 to fh). If it is determined that the data is not related to brightness adjustment processing, the process proceeds to step S708, and processing according to the transmitted data is executed. On the other hand, if it is determined that the data is related to the brightness adjustment processing, the process proceeds to step S703.
ステップS703では、明るさ調整処理に関する受信データが「aah」であるか、すなわち、プロセッサ側がスコープの明るさ調整処理に関するデータ送信を要求しているか否かが判断される。受信データが「aah」であると判断された場合、ステップS707へ進み、ビデオスコープ50の電子シャッタ機能による明るさ調整処理に関するデータがプロセッサ10へ送信される。送信される電子シャッタ機能に関するデータは、電子シャッタ機能による明るさ調整処理を実行させる「a1h」、電子シャッタ機能による明るさ調整処理を実行させない「a2h」いずれかによって表される。電子シャッタ変数ae=1の場合には電子シャッタ機能に関するデータは「a1h」で表され、一方、電子シャッタ変数ae=0の場合には電子シャッタ機能に関するデータは「a2h」で表される。一方、ステップS703において、明るさ調整処理に関するデータが「aah」ではないと判断された場合、ステップS704へ進む。
In step S703, it is determined whether the received data related to the brightness adjustment process is “aah”, that is, whether the processor side requests data transmission related to the brightness adjustment process of the scope. If it is determined that the received data is “aah”, the process proceeds to step
ステップS704〜S706では、図8のステップS606〜S608と同様の処理が施される。すなわち、自動調光機能がプロセッサに備えられていない、あるいは調光に関して手動設定されているか否かが判断され、自動調光機能がプロセッサに備えられていない、あるいは調光に関して手動設定されている場合には電子シャッタ機能による明るさ調整処理の実行が決定され、プロセッサの調光機能が自動設定あるいは強制手動設定の場合には電子シャッタ機能による明るさ調整処理の非実行が決定される。 In steps S704 to S706, processing similar to that in steps S606 to S608 in FIG. 8 is performed. That is, it is determined whether the automatic dimming function is not provided in the processor or is manually set for dimming, and the automatic dimming function is not provided in the processor or is manually set for dimming. In this case, execution of the brightness adjustment process by the electronic shutter function is determined. When the dimming function of the processor is automatic setting or forced manual setting, execution of the brightness adjustment process by the electronic shutter function is determined.
第1〜第5の実施形態では、プロセッサは、光源部と信号処理部の両方を備え、光源部と信号処理部は一体的である。しかしながら、光源装置と信号処理装置とをそれぞれ独立させて設ける構成にしてもよい。 In the first to fifth embodiments, the processor includes both the light source unit and the signal processing unit, and the light source unit and the signal processing unit are integrated. However, the light source device and the signal processing device may be provided separately from each other.
10 プロセッサ
50 ビデオスコープ
54 CCD(撮像素子)
56 スコープ制御部
57 EEPROM(メモリ)
59 切替スイッチ
10
56
59 selector switch
Claims (7)
前記撮像素子から読み出される画像信号に基づく輝度信号に従い、表示される被写体像を適正な明るさで維持するように、前記撮像素子に対する電子シャッタ機能を制御した明るさ調整処理を実行する明るさ調整処理手段と、
前記明るさ調整処理手段による明るさ調整処理の実行と非実行とを切替・設定可能な明るさ調整処理切替設定手段とを備え、
前記光源装置あるいはプロセッサの自動調光機能に関するデータを送信要求するデータ送信要求手段をさらに有し、
前記明るさ調整処理切替設定手段が、送信要求に対して送られてきた自動調光機能に関するデータに基づき、明るさ調整処理の実行と非実行とを自動的に切替・設定することを特徴とする電子内視鏡装置の電子内視鏡。 An electronic endoscope having an image pickup element at a distal end portion, connected to a light source device or a processor, and capable of performing brightness adjustment processing by an electronic shutter function alone ,
Brightness adjustment for executing brightness adjustment processing for controlling the electronic shutter function for the image sensor so as to maintain a displayed subject image with appropriate brightness according to a luminance signal based on an image signal read from the image sensor Processing means;
Brightness adjustment processing switching setting means capable of switching and setting between execution and non-execution of brightness adjustment processing by the brightness adjustment processing means ,
Further comprising data transmission requesting means for requesting transmission of data relating to the automatic light control function of the light source device or processor,
The brightness adjustment processing switching setting means automatically switches / sets execution and non-execution of the brightness adjustment processing based on data relating to the automatic light control function sent in response to the transmission request. the electronic endoscope of the electronic endoscope apparatus.
前記明るさ調整処理切替設定手段が、手動設定されている場合には明るさ調整処理の実行を設定し、自動設定されている場合には明るさ調整処理の非実行を設定することを特徴とする請求項1に記載の電子内視鏡装置の電子内視鏡。 An automatic / manual determining means for determining whether the automatic light control function of the light source device or the processor is set manually or automatically;
The brightness adjustment processing switching setting means sets execution of brightness adjustment processing when manually set, and sets non-execution of brightness adjustment processing when automatically set. The electronic endoscope of the electronic endoscope apparatus according to claim 1.
前記明るさ調整処理切替設定手段が、強制手動設定されている場合には明るさ調整処理の非実行を設定することを特徴とする請求項3に記載の電子内視鏡装置の電子内視鏡。 For manual setting of the automatic light control function of the light source device or processor, further comprising a forced manual setting determining means for determining whether or not the forced manual setting for prohibiting the brightness adjustment processing in the electronic endoscope ,
The electronic endoscope of the electronic endoscope apparatus according to claim 3 , wherein the brightness adjustment process switching setting unit sets non-execution of the brightness adjustment process when forced manual setting is performed. .
前記明るさ調整処理切替設定手段が、前記プロセッサあるいは光源装置に自動調光機能が備えられていない場合、明るさ調整処理の実行を設定することを特徴とする請求項3に記載の電子内視鏡装置の電子内視鏡。 A model discriminating means for discriminating whether or not the light source device or the processor is equipped with an automatic light control function;
4. The electronic endoscope according to claim 3 , wherein the brightness adjustment processing switching setting unit sets execution of brightness adjustment processing when the processor or the light source device is not provided with an automatic light control function. Electronic endoscope of mirror device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004086727A JP4575691B2 (en) | 2004-03-24 | 2004-03-24 | Video scope of electronic endoscope device with electronic shutter function |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004086727A JP4575691B2 (en) | 2004-03-24 | 2004-03-24 | Video scope of electronic endoscope device with electronic shutter function |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005270288A JP2005270288A (en) | 2005-10-06 |
| JP4575691B2 true JP4575691B2 (en) | 2010-11-04 |
Family
ID=35170568
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004086727A Expired - Fee Related JP4575691B2 (en) | 2004-03-24 | 2004-03-24 | Video scope of electronic endoscope device with electronic shutter function |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4575691B2 (en) |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07246185A (en) * | 1994-03-09 | 1995-09-26 | Fuji Photo Optical Co Ltd | Imaging device creating visible and infrared images |
| JPH11225954A (en) * | 1998-02-16 | 1999-08-24 | Olympus Optical Co Ltd | Electronic endoscope device |
| JP2001112712A (en) * | 1999-10-18 | 2001-04-24 | Olympus Optical Co Ltd | Endoscopic imaging device |
-
2004
- 2004-03-24 JP JP2004086727A patent/JP4575691B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2005270288A (en) | 2005-10-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4390440B2 (en) | Automatic dimming device for endoscope and electronic endoscope device | |
| JP4338337B2 (en) | Electronic endoscope apparatus for performing color adjustment processing and video scope of electronic endoscope apparatus | |
| JP4745790B2 (en) | Electronic endoscope device | |
| JP4349856B2 (en) | Electronic endoscope device capable of automatic dimming | |
| JP4575691B2 (en) | Video scope of electronic endoscope device with electronic shutter function | |
| JP4010816B2 (en) | Electronic endoscope device | |
| JP4786875B2 (en) | Videoscope of electronic endoscope device capable of brightness adjustment processing | |
| JP5325396B2 (en) | Imaging system | |
| JP3958761B2 (en) | Dimming signal generator for endoscope | |
| JP4459506B2 (en) | Automatic dimming device for endoscope and electronic endoscope device | |
| JP4475874B2 (en) | Processor for electronic endoscope device | |
| JP4502666B2 (en) | Videoscope of electronic endoscope device capable of brightness adjustment processing | |
| JP4801381B2 (en) | Electronic endoscope device | |
| JP4390536B2 (en) | Endoscope white balance adjustment device and electronic endoscope device | |
| JP4464083B2 (en) | Electronic endoscope device | |
| JP2005270266A (en) | Electronic endoscope device | |
| JP3940016B2 (en) | Electronic endoscope device capable of recording still images | |
| JP4566703B2 (en) | Electronic endoscope device | |
| KR100744523B1 (en) | Projector with image capturing function and its image capturing method | |
| JP4426220B2 (en) | Electronic endoscope device capable of split photometry | |
| JP2010279457A (en) | Electronic endoscope, electronic endoscopic system, and color adjusting method | |
| JP4024632B2 (en) | Electronic endoscope device capable of recording still images | |
| JP4131007B2 (en) | Automatic dimming device for endoscope and electronic endoscope device | |
| JP4101933B2 (en) | Electronic endoscope device | |
| JP4555056B2 (en) | Electronic endoscope device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070306 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20080501 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091215 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091222 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100217 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100810 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100820 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130827 Year of fee payment: 3 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |