[go: up one dir, main page]

JP6196599B2 - Endoscope processor device and method of operating endoscope processor device - Google Patents

Endoscope processor device and method of operating endoscope processor device Download PDF

Info

Publication number
JP6196599B2
JP6196599B2 JP2014202653A JP2014202653A JP6196599B2 JP 6196599 B2 JP6196599 B2 JP 6196599B2 JP 2014202653 A JP2014202653 A JP 2014202653A JP 2014202653 A JP2014202653 A JP 2014202653A JP 6196599 B2 JP6196599 B2 JP 6196599B2
Authority
JP
Japan
Prior art keywords
blood vessel
image
timing
image signal
index value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014202653A
Other languages
Japanese (ja)
Other versions
JP2016067781A (en
Inventor
泰士 白石
泰士 白石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2014202653A priority Critical patent/JP6196599B2/en
Publication of JP2016067781A publication Critical patent/JP2016067781A/en
Application granted granted Critical
Publication of JP6196599B2 publication Critical patent/JP6196599B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)

Description

本発明は、画像内の血管から求められる不鮮鋭度、及び血管指標値を用いて、不良画像の判定を行う内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法に関する。   The present invention relates to an endoscopic processor device that determines a defective image by using a degree of unsharpness obtained from a blood vessel in an image and a blood vessel index value, and an operating method of the endoscopic processor device.

近年の医療においては、内視鏡用光源装置(以下、光源装置という)、電子内視鏡(以下、内視鏡という)、プロセッサ装置を備える内視鏡システムを用いた診断が広く行われている。光源装置は、観察対象を照明するための照明光を発生する。内視鏡は、撮像センサを備え、照明光で照明された観察対象を撮像して画像信号を生成する。プロセッサ装置は、内視鏡から送信された画像信号に画像処理を施して、モニタに表示するための画像を生成する。   In recent medical treatments, diagnosis using an endoscope system including an endoscope light source device (hereinafter referred to as a light source device), an electronic endoscope (hereinafter referred to as an endoscope), and a processor device is widely performed. Yes. The light source device generates illumination light for illuminating the observation target. The endoscope includes an image sensor and images an observation target illuminated with illumination light to generate an image signal. The processor device performs image processing on the image signal transmitted from the endoscope, and generates an image to be displayed on the monitor.

内視鏡システムを用いた診断では、まず、病変の可能性がある病変可能性部位を拾い上げるために、非拡大観察でスクリーニングが行われる。そして、病変可能性部位を拾い上げた場合は、内視鏡の先端部を病変可能性部位に接近、または光学ズームにより病変可能性部位を拡大した拡大観察で詳細な診断が行われる。拡大観察時は、内視鏡の操作や観察対象の拍動によって画像にブレやピンボケが発生し易く、診断に重要な血管等が不明瞭な不良画像が取得される場合がある。不良画像はドクターの誤診を招くおそれがあるため、プロセッサ装置によって、取得された画像が不良画像であると判定した上で、画像を補正する等の画像処理が行われている(下記、特許文献1参照)。   In the diagnosis using the endoscope system, first, screening is performed by non-magnifying observation in order to pick up a possible lesion site that may be a lesion. When a lesion-possible site is picked up, a detailed diagnosis is performed by enlarging the lesion-possible site by approaching the distal end of the endoscope to the lesion-possible site or by optical zoom. During magnified observation, there may be a case where a defective image in which blood vessels or the like important for diagnosis are unclear is easily obtained due to blurring or blurring of the image due to the operation of the endoscope or the pulsation of the observation target. Since a defective image may cause a doctor's misdiagnosis, the processor device determines that the acquired image is a defective image, and then performs image processing such as correcting the image (the following patent document). 1).

特許第5562808号Japanese Patent No. 5562808

近年の内視鏡分野においては、血管形状や血管密度などの血管に関する情報を血管指標値として数値化することにより、病変部の診断を更に客観的に行おうという動きがある。このように血管に関する情報を数値化する場合には、画像中において血管が明瞭に写っていることが前提である。   In the endoscope field in recent years, there is a movement to further objectively diagnose a lesioned part by digitizing information on blood vessels such as a blood vessel shape and a blood vessel density as a blood vessel index value. In this way, when information about blood vessels is digitized, it is assumed that blood vessels are clearly shown in the image.

しかしながら、上述したように、内視鏡の診断中においては、内視鏡の操作や観察対象の拍動などにより、画像にブレやピンボケが生じて、画像中の血管を明瞭に写し出すことが難しい場合がある。特に、拡大観察時のように、内視鏡先端部を静止した状態で観察する場合には、内視鏡や観察対象による僅かな動きでも画像中の血管の視認性に影響が及ぶため、血管を明瞭に写し出すことが更に難しくなる。   However, as described above, during the diagnosis of the endoscope, the image is blurred or blurred due to the operation of the endoscope or the pulsation of the observation target, and it is difficult to clearly display the blood vessels in the image. There is a case. In particular, when observing in a state where the distal end portion of the endoscope is stationary as in magnified observation, even a slight movement by the endoscope or the observation target affects the visibility of the blood vessels in the image. It becomes even more difficult to project clearly.

これに対して、特許文献1による方法で、ブレやピンボケを補正して血管を明瞭化してから、血管指標値を求めることが考えられる。ここで、特許文献1では、画像内で血管交差部を抽出し、この血管交差部から求めた動き量に基づいて、ブレの補正を行っている。しかしながら、既に画像にブレやピンボケが発生している状態では、動き量を正確に求めることが難しい。この場合には、ブレを完全に補正することはできず、結果として、血管指標値を正確に算出することも難しくなる。   On the other hand, it is conceivable that the blood vessel index value is obtained after the blood vessel is clarified by correcting the blur and the blur by the method according to Patent Document 1. Here, in Patent Document 1, a blood vessel intersection is extracted from an image, and blur correction is performed based on the amount of motion obtained from the blood vessel intersection. However, it is difficult to accurately determine the amount of movement when the image has already been blurred or out of focus. In this case, the blur cannot be corrected completely, and as a result, it is difficult to accurately calculate the blood vessel index value.

本発明は、内視鏡による観察中に画像にブレやピンボケが生ずる場合であっても、血管に関する情報を正確に表示することができる内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法を提供することを目的とする。   The present invention relates to an endoscopic processor device and an endoscopic processor device capable of accurately displaying blood vessel information even when blurring or out of focus occurs in an image during observation with an endoscope. It aims at providing the operating method of.

上記目的を達成するために、本発明の内視鏡用のプロセッサ装置は、内視鏡によって観察対象を撮像して得られた画像信号を異なるタイミングで取得する画像信号取得部と、画像信号から血管を抽出して、血管画像信号を生成する血管抽出部と、抽出された血管から、血管指標値を算出する血管指標値算出部と、血管指標値から、画像信号に基づく画像が鮮鋭度に関して不良画像であるか否かの判定を行う判定部と、判定の結果に基づく処理を、血管画像信号と血管指標値との少なくともいずれかに対して行う判定後処理部とを備え、判定部は、血管指標値が一定値以上変化した場合に、不良画像であると判定するTo achieve the above object, an endoscope processor device according to the present invention includes an image signal acquisition unit that acquires an image signal obtained by imaging an observation target with an endoscope at different timings, and an image signal. A blood vessel extraction unit that extracts a blood vessel and generates a blood vessel image signal, a blood vessel index value calculation unit that calculates a blood vessel index value from the extracted blood vessel, and an image based on the image signal from the blood vessel index value comprising a determining unit which determines whether a defective image, a process based on the result of the determination, a determination postprocessing section which performs for at least one of the blood vessel image signal and the blood vessel index value, the determination unit Is determined to be a defective image when the blood vessel index value changes by a certain value or more .

本発明の内視鏡用のプロセッサ装置の作動方法は、画像信号取得部が、内視鏡によって観察対象を撮像して得られた画像信号を異なるタイミングで取得するステップと、血管抽出部が、画像信号から血管を抽出して、血管画像信号を生成するステップと、血管指標値算出部が、抽出された血管から、血管指標値を算出するステップと、判定部が、血管指標値から、画像信号に基づく画像が鮮鋭度に関して不良画像であるか否かの判定を行うステップと、判定後処理部が、判定の結果に基づく処理を、血管画像信号と血管指標値との少なくともいずれかに対して行うステップとを備え、判定部は、血管指標値が一定値以上変化した場合に、不良画像であると判定するIn the operating method of the processor device for an endoscope of the present invention, the image signal acquisition unit acquires the image signal obtained by imaging the observation target with the endoscope at different timings, and the blood vessel extraction unit includes: Extracting a blood vessel from the image signal and generating a blood vessel image signal; a blood vessel index value calculating unit calculating a blood vessel index value from the extracted blood vessel; and a determining unit calculating the image from the blood vessel index value. A step of determining whether the image based on the signal is a defective image with respect to sharpness, and a post-determination processing unit that performs processing based on the determination result for at least one of the blood vessel image signal and the blood vessel index value comprising the steps performed by the determination unit, when the blood vessel index value has changed more than a certain value, it is determined to be defective image.

血管指標値算出部は、血管の幅、血管の密度、血管の本数、血管の走行方向、血管の形状、血管のシャープさのうち少なくとも1つから、血管指標値を算出することが好ましい。   The blood vessel index value calculation unit preferably calculates the blood vessel index value from at least one of the width of the blood vessel, the density of the blood vessel, the number of blood vessels, the traveling direction of the blood vessel, the shape of the blood vessel, and the sharpness of the blood vessel.

画像信号取得部は、第1のタイミングで画像信号を取得し、第1のタイミングよりも前の第2のタイミングで画像信号を取得し、血管抽出部は、第1のタイミングで取得した画像信号から血管を抽出して第1のタイミングの血管画像信号を生成し、第2のタイミングで取得した画像信号から血管を抽出して第2のタイミングの血管画像信号を生成し、血管指標値算出部は、第1のタイミングで取得した画像信号から抽出された血管に基づいて第1のタイミングの血管指標値を算出し、第2のタイミングで取得した画像信号から抽出された血管に基づいて第2のタイミングの血管指標値を算出し、判定部は、第2のタイミングの血管指標値に対して第1のタイミングの血管指標値が一定値以上変化した場合に、不良画像であると判定することが好ましい。   The image signal acquisition unit acquires the image signal at the first timing, acquires the image signal at the second timing before the first timing, and the blood vessel extraction unit acquires the image signal acquired at the first timing. A blood vessel is extracted from the first timing to generate a blood vessel image signal at the first timing, a blood vessel is extracted from the image signal acquired at the second timing to generate a second timing blood vessel image signal, and a blood vessel index value calculation unit Calculates the blood vessel index value at the first timing based on the blood vessel extracted from the image signal acquired at the first timing, and the second based on the blood vessel extracted from the image signal acquired at the second timing. And the determination unit determines that the image is a defective image when the blood vessel index value at the first timing changes by a predetermined value or more with respect to the blood vessel index value at the second timing. But Masui.

判定の結果に基づいて画像を生成する画像生成部を備えることが好ましい。   It is preferable to include an image generation unit that generates an image based on the determination result.

判定後処理部は、不良画像であると判定された場合、画像信号に基づく画像に対して画像補正処理を行う画像補正部を有することが好ましい。画像信号取得部は、第1のタイミングで画像信号を取得し、第1のタイミングよりも前の第2のタイミングで画像信号を取得し、画像補正部は、画像補正処理を、第2のタイミングの画像信号に基づいて行うことが好ましい。第1のタイミングの画像信号と第2のタイミングの画像信号との間の移動量を算出する移動量算出部と、移動量から、第1のタイミングの血管と第2のタイミングの血管との位置合わせを行う位置合わせ部とを有し、画像補正部は、画像補正処理を、移動量に基づいて行うことが好ましい。   The post-determination processing unit preferably includes an image correction unit that performs image correction processing on an image based on the image signal when it is determined that the image is a defective image. The image signal acquisition unit acquires the image signal at the first timing, acquires the image signal at the second timing before the first timing, and the image correction unit performs the image correction processing at the second timing. It is preferable to carry out based on the image signal. A movement amount calculation unit that calculates a movement amount between the image signal at the first timing and the image signal at the second timing, and the positions of the blood vessel at the first timing and the blood vessel at the second timing from the movement amount The image correction unit preferably performs image correction processing based on the movement amount.

画像生成部は、不良画像であると判定された場合、第2のタイミングの血管を、第1のタイミングの画像に対してオーバーラップさせた画像を生成することが好ましい。血管指標値算出部は、第1のタイミングで取得した画像信号から抽出された血管に基づいて第1のタイミングの血管指標値を算出し、第2のタイミングで取得した画像信号から抽出された血管に基づいて第2のタイミングの血管指標値を算出し、画像生成部は、不良画像であると判定された場合、第2のタイミングの血管指標値に基づく情報を、第1のタイミングの画像に対してオーバーラップさせた画像を生成することが好ましい。画像生成部は、第1のタイミングの血管指標値を第2のタイミングの血管指標値に置き換えることが好ましい。   When it is determined that the image is a defective image, the image generation unit preferably generates an image in which the blood vessel at the second timing overlaps the image at the first timing. The blood vessel index value calculation unit calculates the blood vessel index value at the first timing based on the blood vessel extracted from the image signal acquired at the first timing, and the blood vessel extracted from the image signal acquired at the second timing. And when the image generation unit determines that the image is a defective image, the image generation unit converts the information based on the blood vessel index value at the second timing into the image at the first timing. It is preferable to generate an overlapped image. The image generation unit preferably replaces the blood vessel index value at the first timing with the blood vessel index value at the second timing.

判定後処理部は、不良画像であると判定された場合、血管指標値に対して指標値補正処理を行う指標値補正部を有することが好ましい。画像信号取得部は、第1のタイミングで画像信号を取得し、第1のタイミングよりも前の第2のタイミングで画像信号を取得し、指標値補正部は、指標値補正処理を、第1のタイミングよりも前の第2のタイミングの画像信号に基づいて行うことが好ましい。第1のタイミングの画像信号と第2のタイミングの画像信号との間の移動量を算出する移動量算出部を有し、指標値補正部は、指標値補正処理を、移動量に基づいて行うことが好ましい。移動量から、第1のタイミングの血管を第2のタイミングの血管の位置に合わせる血管位置補正部を有することが好ましい。   The post-determination processing unit preferably includes an index value correction unit that performs an index value correction process on the blood vessel index value when it is determined that the image is a defective image. The image signal acquisition unit acquires the image signal at the first timing, acquires the image signal at the second timing before the first timing, and the index value correction unit performs the index value correction processing in the first timing. It is preferable to carry out based on the image signal at the second timing before the timing. A movement amount calculation unit that calculates a movement amount between the image signal at the first timing and the image signal at the second timing has an index value correction unit that performs the index value correction process based on the movement amount. It is preferable. It is preferable to have a blood vessel position correction unit that adjusts the blood vessel at the first timing to the position of the blood vessel at the second timing based on the movement amount.

画像生成部は、不良画像であると判定された場合、第2のタイミングの血管を、第1のタイミングの画像に対してオーバーラップさせた画像を生成することが好ましい。血管指標値算出部は、第2のタイミングで取得した画像信号から抽出された血管に基づいて第2のタイミングの血管指標値を算出し、画像生成部は、不良画像であると判定された場合、第2のタイミングの血管指標値に基づく情報を、第1のタイミングの画像に対してオーバーラップさせた画像を生成することが好ましい。   When it is determined that the image is a defective image, the image generation unit preferably generates an image in which the blood vessel at the second timing overlaps the image at the first timing. When the blood vessel index value calculation unit calculates the blood vessel index value at the second timing based on the blood vessel extracted from the image signal acquired at the second timing, and the image generation unit determines that the image is a defective image It is preferable to generate an image in which information based on the blood vessel index value at the second timing is overlapped with the image at the first timing.

画像生成部は、不良画像であると判定された場合に、血管に基づく情報、及び血管指標値に基づく情報を非表示とすることが好ましい。画像生成部は、不良画像であると判定された場合に、画像信号に基づく画像に対して警告を表示することが好ましい。   When it is determined that the image is a defective image, the image generation unit preferably hides information based on blood vessels and information based on blood vessel index values. When the image generation unit determines that the image is a defective image, it is preferable to display a warning for the image based on the image signal.

本発明によれば、画像内の血管から求められる血管指標値を用いて、不良画像を正確に判定することにより、血管に関する情報を正確に表示できる内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法を提供することができる。   According to the present invention, a processor device for an endoscope that can accurately display information on blood vessels by accurately determining a defective image using a blood vessel index value obtained from the blood vessels in the image. It is possible to provide a method of operating the processor device of the present invention.

内視鏡システムの外観図である。It is an external view of an endoscope system. 内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of an endoscope system. 紫色光、青色光、緑色光、及び赤色光の分光スペクトルを示すグラフである。It is a graph which shows the spectrum of purple light, blue light, green light, and red light. カラーフィルタの分光特性を示すグラフである。It is a graph which shows the spectral characteristic of a color filter. 特殊画像処理部の機能を示すブロック図である。It is a block diagram which shows the function of a special image process part. 血管抽出部の機能を示すブロック図である。It is a block diagram which shows the function of a blood vessel extraction part. 血管からの光が拡散される様子を示す説明図である。It is explanatory drawing which shows a mode that the light from the blood vessel is diffused. 撮像センサでの受光量の分布を表すグラフである。It is a graph showing distribution of the received light quantity in an image sensor. 血管位置信号の生成方法を示す説明図である。It is explanatory drawing which shows the production | generation method of the blood vessel position signal. 血管幅信号の生成方法を示す説明図である。It is explanatory drawing which shows the production | generation method of the blood vessel width signal. 血管画像信号の模式図である。It is a schematic diagram of a blood vessel image signal. 不良画像の判定方法を示すフローチャートである。It is a flowchart which shows the determination method of a defective image. 画像補正部の機能を示すブロック図である。It is a block diagram which shows the function of an image correction part. 血管強調画像信号の模式図である。It is a schematic diagram of a blood vessel emphasis image signal. 擬似カラー化した特殊画像信号の模式図である。It is a schematic diagram of a special image signal that has been pseudo-colored. 関心領域付きの特殊画像信号の模式図である。It is a schematic diagram of a special image signal with a region of interest. 警告表示に関する情報を付与した特殊画像信号の模式図である。It is a schematic diagram of a special image signal to which information related to warning display is given. 第1実施形態のフローチャートである。It is a flowchart of a 1st embodiment. 第2実施形態の特殊画像処理部の機能を示すブロック図である。It is a block diagram which shows the function of the special image process part of 2nd Embodiment. 第2実施形態の指標値補正部の機能を示すブロック図である。It is a block diagram which shows the function of the index value correction | amendment part of 2nd Embodiment. 第3実施形態の内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of the endoscope system of 3rd Embodiment. 白色光の発光スペクトルを示すグラフである。It is a graph which shows the emission spectrum of white light. 特殊光の発光スペクトルを示すグラフである。It is a graph which shows the emission spectrum of special light. 第4実施形態の内視鏡システムの機能を示すブロック図である。It is a block diagram which shows the function of the endoscope system of 4th Embodiment. 回転フィルタを示す平面図である。It is a top view which shows a rotation filter.

[第1実施形態]
図1に示すように、内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16と、モニタ18と、コンソール19とを有する。内視鏡12は、光源装置14と光学的に接続されるとともに、プロセッサ装置16と電気的に接続される。内視鏡12は、観察対象の体内に挿入される挿入部12aと、挿入部12aの基端部分に設けられた操作部12bと、挿入部12aの先端側に設けられた湾曲部12c及び先端部12dとを有している。操作部12bのアングルノブ12eを操作することにより、湾曲部12cは湾曲動作する。この湾曲動作によって、先端部12dが所望の方向に向けられる。
[First Embodiment]
As shown in FIG. 1, the endoscope system 10 includes an endoscope 12, a light source device 14, a processor device 16, a monitor 18, and a console 19. The endoscope 12 is optically connected to the light source device 14 and electrically connected to the processor device 16. The endoscope 12 includes an insertion portion 12a to be inserted into the body to be observed, an operation portion 12b provided at the proximal end portion of the insertion portion 12a, a bending portion 12c provided at the distal end side of the insertion portion 12a, and a distal end. Part 12d. By operating the angle knob 12e of the operation unit 12b, the bending unit 12c performs a bending operation. By this bending operation, the distal end portion 12d is directed in a desired direction.

また、操作部12bには、アングルノブ12eの他、モード切替SW(モード切替スイッチ)12fと、静止画取得指示部12gと、ズーム操作部12hとが設けられている。モード切替SW12fは、観察モードの切り替え操作に用いられる。内視鏡システム10は、観察モードとして通常観察モードと特殊観察モードとを有している。通常観察モードは、照明光に白色光を用いて観察対象を撮像して得た自然な色合いの画像(以下、通常画像という)をモニタ18に表示する。特殊観察モードは、特定の波長帯域の光を照明光として得られる画像(以下、特殊画像という)をモニタ18に表示する。静止画取得指示部12gは、内視鏡システム10に静止画像を取得させるとともに、取得させた静止画像をストレージ(図示省略)に保存させるために用いられる。ズーム操作部12hは、観察対象を拡大表示した拡大観察と、拡大観察をしない非拡大観察との変更を指示するために用いられる。   In addition to the angle knob 12e, the operation unit 12b is provided with a mode switch SW (mode switch) 12f, a still image acquisition instruction unit 12g, and a zoom operation unit 12h. The mode switching SW 12f is used for an observation mode switching operation. The endoscope system 10 has a normal observation mode and a special observation mode as observation modes. In the normal observation mode, an image having a natural color (hereinafter referred to as a normal image) obtained by imaging an observation target using white light as illumination light is displayed on the monitor 18. In the special observation mode, an image obtained by using light of a specific wavelength band as illumination light (hereinafter referred to as a special image) is displayed on the monitor 18. The still image acquisition instruction unit 12g is used to cause the endoscope system 10 to acquire a still image and to store the acquired still image in a storage (not shown). The zoom operation unit 12h is used to instruct a change between magnified observation in which an observation target is magnified and non-magnified observation in which magnified observation is not performed.

プロセッサ装置16は、モニタ18及びコンソール19と電気的に接続される。モニタ18は、観察対象の画像や、観察対象の画像に付帯する情報等を出力表示する。コンソール19は、機能設定等の入力操作を受け付けるユーザインタフェースとして機能する。なお、プロセッサ装置16には、画像や画像情報等を記録する外付けの記録部(図示省略)を接続してもよい。   The processor device 16 is electrically connected to the monitor 18 and the console 19. The monitor 18 outputs and displays an image to be observed, information attached to the image to be observed, and the like. The console 19 functions as a user interface that receives input operations such as function settings. The processor device 16 may be connected to an external recording unit (not shown) for recording images, image information, and the like.

図2に示すように、光源装置14は、光源20と、光源20を制御する光源制御部22と、を備えている。光源20は、例えば複数の半導体光源を有し、これらをそれぞれ点灯または消灯し、点灯する場合には各半導体光源の発光量を制御することにより、観察対象に照射する照明光を発生する。本実施形態では、光源20は、V−LED(Violet Light Emitting Diode)20a、B−LED(Blue Light Emitting Diode)20b、G−LED(Green Light Emitting Diode)20c、及びR−LED(Red Light Emitting Diode)20dの4色のLEDを有する。   As shown in FIG. 2, the light source device 14 includes a light source 20 and a light source control unit 22 that controls the light source 20. The light source 20 includes, for example, a plurality of semiconductor light sources, and these are turned on or off, and when they are turned on, the amount of light emitted from each semiconductor light source is controlled to generate illumination light that irradiates the observation target. In the present embodiment, the light source 20 includes a V-LED (Violet Light Emitting Diode) 20a, a B-LED (Blue Light Emitting Diode) 20b, a G-LED (Green Light Emitting Diode) 20c, and an R-LED (Red Light Emitting Diode). Diode) 20d has four-color LEDs.

図3に示すように、V−LED20aは、中心波長405nm、波長帯域380nm〜420nmの紫色光Vを発する紫色半導体光源である。B−LED20bは、中心波長460nm、波長帯域420nm〜500nmの青色光Bを発する青色半導体光源である。G−LED20cは、波長帯域が480nm〜600nmに及ぶ緑色光Gを発する緑色半導体光源である。R−LED20dは、中心波長620nm〜630nmで、波長帯域が600nm〜650nmに及び赤色光Rを発する赤色半導体光源である。なお、V−LED20aとB−LED20bの中心波長は、±5nmから±10nm程度の幅を有する。   As shown in FIG. 3, the V-LED 20a is a violet semiconductor light source that emits violet light V having a center wavelength of 405 nm and a wavelength band of 380 nm to 420 nm. The B-LED 20b is a blue semiconductor light source that emits blue light B having a center wavelength of 460 nm and a wavelength band of 420 nm to 500 nm. The G-LED 20c is a green semiconductor light source that emits green light G having a wavelength band ranging from 480 nm to 600 nm. The R-LED 20d is a red semiconductor light source that emits red light R with a center wavelength of 620 nm to 630 nm and a wavelength band of 600 nm to 650 nm. The center wavelengths of the V-LED 20a and the B-LED 20b have a width of about ± 5 nm to ± 10 nm.

これらの各LED20a〜20dの点灯や消灯、点灯時の発光量等は、光源制御部22が各々に独立した制御信号を入力するによって各々に制御することができる。本実施形態では、通常観察モード及び特殊観察モードのどちらの観察モードでも、光源制御部22は、V−LED20a、B−LED20b、G−LED20c、及びR−LED20dを全て点灯させる。このため、紫色光V、青色光B、緑色光G、及び赤色光Rを含む白色光が、通常観察モード及び特殊観察モードの照明光として用いられる。   The lighting and extinguishing of each of these LEDs 20a to 20d, the light emission amount at the time of lighting, and the like can be controlled by the light source control unit 22 by inputting an independent control signal. In this embodiment, the light source control unit 22 turns on all the V-LEDs 20a, B-LEDs 20b, G-LEDs 20c, and R-LEDs 20d in both the normal observation mode and the special observation mode. For this reason, white light including purple light V, blue light B, green light G, and red light R is used as illumination light in the normal observation mode and special observation mode.

各LED20a〜20dが発する各色の光は、ミラーやレンズ等で形成される光路結合部23を介して、挿入部12a内に挿通されたライトガイド41に入射される。ライトガイド41は、内視鏡12及びユニバーサルコード(内視鏡12と、光源装置14及びプロセッサ装置16を接続するコード)に内蔵されている。ライトガイド41は、光源20が発生した照明光を、内視鏡12の先端部12dまで伝搬する。   The light of each color emitted from each LED 20a to 20d is incident on a light guide 41 inserted into the insertion portion 12a through an optical path coupling portion 23 formed by a mirror, a lens, or the like. The light guide 41 is built in the endoscope 12 and the universal cord (a cord connecting the endoscope 12, the light source device 14, and the processor device 16). The light guide 41 propagates the illumination light generated by the light source 20 to the distal end portion 12 d of the endoscope 12.

内視鏡12の先端部12dには、照明光学系30aと撮像光学系30bが設けられている。照明光学系30aは照明レンズ45を有しており、ライトガイド41によって伝搬された照明光は照明レンズ45を介して観察対象に照射される。撮像光学系30bは、対物レンズ46、ズームレンズ47、撮像センサ48を有している。照明光を照射したことによる観察対象からの反射光、散乱光、及び蛍光等の各種の光は、対物レンズ46及びズームレンズ47を介して撮像センサ48に入射する。これにより、撮像センサ48に観察対象の像が結像される。なお、ズームレンズ47は、ズーム操作部12hを操作することでテレ端とワイド端との間で自在に移動され、撮像センサ48に結像する観察対象の反射像を拡大または縮小する。   The distal end portion 12d of the endoscope 12 is provided with an illumination optical system 30a and an imaging optical system 30b. The illumination optical system 30 a has an illumination lens 45, and the illumination light propagated by the light guide 41 is irradiated to the observation object via the illumination lens 45. The imaging optical system 30 b includes an objective lens 46, a zoom lens 47, and an imaging sensor 48. Various types of light such as reflected light, scattered light, and fluorescence from the observation target due to the irradiation of the illumination light enter the image sensor 48 via the objective lens 46 and the zoom lens 47. As a result, an image to be observed is formed on the image sensor 48. The zoom lens 47 is freely moved between the tele end and the wide end by operating the zoom operation unit 12h, and enlarges or reduces the reflected image of the observation object formed on the image sensor 48.

撮像センサ48は、照明光が照射された観察対象を撮像するカラー撮像センサである。撮像センサ48の各画素には、図4に示すR(赤色)カラーフィルタ、G(緑色)カラーフィルタ、B(青色)カラーフィルタのいずれかが各画素に設けられている。このため、撮像センサ48は、紫色から青色の光をBカラーフィルタが設けられたB画素(青色画素)で受光し、緑色の光をGカラーフィルタが設けられたG画素(緑色画素)で受光し、赤色の光をRカラーフィルタが設けられたR画素(赤色画素)で受光する。そして、各色の画素から、RGB各色の画像信号を出力する。   The imaging sensor 48 is a color imaging sensor that images an observation target irradiated with illumination light. Each pixel of the image sensor 48 is provided with any of an R (red) color filter, a G (green) color filter, and a B (blue) color filter shown in FIG. Therefore, the imaging sensor 48 receives purple to blue light at the B pixel (blue pixel) provided with the B color filter, and receives green light at the G pixel (green pixel) provided with the G color filter. The red light is received by the R pixel (red pixel) provided with the R color filter. Then, RGB color image signals are output from each color pixel.

撮像センサ48としては、CCD(Charge Coupled Device)撮像センサやCMOS(Complementary Metal-Oxide Semiconductor)撮像センサを利用可能である。また、原色の撮像センサ48の代わりに、C(シアン)、M(マゼンタ)、Y(イエロー)及びG(緑)の補色フィルタを備えた補色撮像センサを用いても良い。補色撮像センサを用いる場合には、CMYGの四色の画像信号が出力されるので、補色−原色色変換によって、CMYGの4色の画像信号をRGBの3色の画像信号に変換することにより、撮像センサ48と同様のRGB画像信号を得ることができる。また、撮像センサ48の代わりに、カラーフィルタを設けていないモノクロセンサを用いても良い。   As the image sensor 48, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) image sensor can be used. Further, instead of the primary color imaging sensor 48, a complementary color imaging sensor including complementary color filters of C (cyan), M (magenta), Y (yellow), and G (green) may be used. When the complementary color image sensor is used, CMYG four-color image signals are output. By converting the CMYG four-color image signals into RGB three-color image signals by complementary color-primary color conversion, An RGB image signal similar to that of the image sensor 48 can be obtained. Further, instead of the imaging sensor 48, a monochrome sensor without a color filter may be used.

CDS/AGC回路51は、撮像センサ48から得られるアナログの画像信号に相関二重サンプリング(CDS;Correlated Double Sampling)や自動利得制御(AGC;Automatic Gain Control)を行う。CDS/AGC回路51を経た画像信号は、A/D(Analog to Digital)コンバータ52により、デジタル画像信号に変換される。A/D変換後のデジタル画像信号がプロセッサ装置16に入力される。   The CDS / AGC circuit 51 performs correlated double sampling (CDS) and automatic gain control (AGC) on the analog image signal obtained from the image sensor 48. The image signal that has passed through the CDS / AGC circuit 51 is converted into a digital image signal by an A / D (Analog to Digital) converter 52. The digital image signal after A / D conversion is input to the processor device 16.

プロセッサ装置16は、画像信号取得部54と、DSP(Digital Signal Processor)56と、ノイズ除去部58と、画像処理切替部61と、通常画像処理部66と、特殊画像処理部67と、映像信号生成部68とを備えている。画像信号取得部54は、CDS/AGC回路51及びA/Dコンバータ52を介して、撮像センサ48からデジタルの画像信号を取得する。   The processor device 16 includes an image signal acquisition unit 54, a DSP (Digital Signal Processor) 56, a noise removal unit 58, an image processing switching unit 61, a normal image processing unit 66, a special image processing unit 67, and a video signal. And a generating unit 68. The image signal acquisition unit 54 acquires a digital image signal from the imaging sensor 48 via the CDS / AGC circuit 51 and the A / D converter 52.

DSP56は、取得した画像信号に対して、欠陥補正処理、オフセット処理、ゲイン補正処理、リニアマトリクス処理、ガンマ変換処理、デモザイク処理等の各種信号処理を施す。欠陥補正処理では、撮像センサ48の欠陥画素の信号が補正される。オフセット処理では、欠陥補正処理が施された画像信号から暗電流成分が除かれ、正確な零レベルが設定される。ゲイン補正処理では、オフセット処理後の画像信号に特定のゲインを乗じることにより信号レベルが整えられる。   The DSP 56 performs various signal processing such as defect correction processing, offset processing, gain correction processing, linear matrix processing, gamma conversion processing, and demosaicing processing on the acquired image signal. In the defect correction process, the signal of the defective pixel of the image sensor 48 is corrected. In the offset process, the dark current component is removed from the image signal subjected to the defect correction process, and an accurate zero level is set. In the gain correction process, the signal level is adjusted by multiplying the image signal after the offset process by a specific gain.

ゲイン補正処理後の画像信号には、色再現性を高めるためのリニアマトリクス処理が施される。その後、ガンマ変換処理によって明るさや彩度が整えられる。ガンマ変換処理後の画像信号には、デモザイク処理(等方化処理、または同時化処理とも言う)が施され、各画素で不足した色の信号が補間によって生成される。このデモザイク処理によって、全画素がRGB各色の信号を有するようになる。ノイズ除去部58は、DSP56でデモザイク処理等が施された画像信号に対してノイズ除去処理(例えば移動平均法やメディアンフィルタ法等による)を施すことによってノイズを除去する。ノイズが除去された画像信号は、画像処理切替部61に送信される。モード切替SW12fの操作によって通常観察モードにセットされている場合、画像処理切替部61は、RGB各色の画像信号を通常画像処理部66に送信し、特殊観察モードにセットされている場合には、RGB画像信号を特殊画像処理部67に送信する。   The image signal after gain correction processing is subjected to linear matrix processing for improving color reproducibility. After that, brightness and saturation are adjusted by gamma conversion processing. The image signal after the gamma conversion processing is subjected to demosaic processing (also referred to as isotropic processing or synchronization processing), and a signal of a color that is insufficient at each pixel is generated by interpolation. By this demosaic processing, all the pixels have RGB signals. The noise removal unit 58 removes noise by performing noise removal processing (for example, using a moving average method, a median filter method, or the like) on the image signal that has been demosaiced by the DSP 56. The image signal from which the noise has been removed is transmitted to the image processing switching unit 61. When the normal observation mode is set by the operation of the mode switch SW12f, the image processing switching unit 61 transmits the RGB color image signals to the normal image processing unit 66, and when the special observation mode is set, The RGB image signal is transmitted to the special image processing unit 67.

通常画像処理部66は、通常観察モードに設定されている場合に作動し、RGB画像信号に対して、色変換処理、色彩強調処理、及び構造強調処理を行い、通常画像信号を生成する。色変換処理では、RGB画像信号に対して3×3のマトリクス処理、階調変換処理、及び3次元LUT(ルックアップテーブル)処理などにより色変換処理を行う。色彩強調処理は、色変換処理済みの画像信号に対して行われる。構造強調処理は、例えば表層血管やピットパターン等の観察対象の構造を強調する処理であり、色彩強調処理後の画像信号に対して行われる。上記のように、構造強調処理まで各種画像処理等を施した通常画像信号を用いたカラー画像が通常画像である。   The normal image processing unit 66 operates when the normal observation mode is set, and performs a color conversion process, a color enhancement process, and a structure enhancement process on the RGB image signal to generate a normal image signal. In the color conversion processing, color conversion processing is performed on the RGB image signal by 3 × 3 matrix processing, gradation conversion processing, three-dimensional LUT (look-up table) processing, and the like. The color enhancement process is performed on the image signal that has been subjected to the color conversion process. The structure enhancement process is a process for enhancing a structure to be observed such as a surface blood vessel or a pit pattern, and is performed on the image signal after the color enhancement process. As described above, a color image using a normal image signal that has been subjected to various types of image processing up to the structure enhancement processing is a normal image.

特殊画像処理部67は、特殊観察モードに設定されている場合に作動する画像処理部であり、RGB画像信号に基づいて特殊画像を生成する。図5に示すように、特殊画像処理部67は、血管抽出部70と、血管指標値算出部72と、判定部74と、画像補正部76(判定後処理部)と、特殊画像生成部78と、を備える。なお、以下の説明においては、特殊画像処理部67の機能を、第1のタイミングで取得された画像信号(以下、単に画像信号ともいう)を用いて説明を行う。   The special image processing unit 67 is an image processing unit that operates when the special observation mode is set, and generates a special image based on the RGB image signal. As shown in FIG. 5, the special image processing unit 67 includes a blood vessel extraction unit 70, a blood vessel index value calculation unit 72, a determination unit 74, an image correction unit 76 (post-determination processing unit), and a special image generation unit 78. And comprising. In the following description, the function of the special image processing unit 67 will be described using an image signal acquired at the first timing (hereinafter also simply referred to as an image signal).

血管抽出部70は、画像信号から、観察対象の血管を抽出した血管画像信号を生成する。図6に示すように、血管抽出部70は、血管位置信号生成部80と、血管幅信号生成部81と、血管画像信号生成部82と、を備える。   The blood vessel extraction unit 70 generates a blood vessel image signal obtained by extracting a blood vessel to be observed from the image signal. As illustrated in FIG. 6, the blood vessel extraction unit 70 includes a blood vessel position signal generation unit 80, a blood vessel width signal generation unit 81, and a blood vessel image signal generation unit 82.

血管位置信号生成部80は、画像信号を用いて、観察対象の血管の位置を表す血管位置信号を生成する。具体的には、血管位置信号生成部80は、ブラックハット処理によって、入力された画像信号から観察対象の血管を抽出し、さらにブラックハット処理後の画像信号を、二値化することにより、血管を表す画素の画素値が特定の正値(例えば「1」)を有し、それ以外の画素の画素値が零の血管位置信号を生成する。血管位置信号は、血管画像信号生成部82に入力される。   The blood vessel position signal generation unit 80 generates a blood vessel position signal representing the position of the blood vessel to be observed using the image signal. Specifically, the blood vessel position signal generation unit 80 extracts a blood vessel to be observed from the input image signal by the black hat process, and further binarizes the image signal after the black hat process, thereby obtaining a blood vessel. A blood vessel position signal having a specific positive value (for example, “1”) and a pixel value of the other pixels being zero is generated. The blood vessel position signal is input to the blood vessel image signal generation unit 82.

ブラックハット処理は、ノイズを除きつつ、近隣の画素と比較して画素値が小さい画素を抽出するモルフォロジー処理(モフォロジー処理とも言う)であり、クロージング処理を施した画像信号から、元の画像信号を減算する処理である。クロージング処理は、明るい領域を膨張させる膨張(dilation)処理を行った後、明るい領域を収縮させる収縮(erosion)処理を施す処理である。撮像センサ48から得られる画像信号は観察対象から入射する光の光量に比例する画素値を有している。そして、血管は粘膜等に比べて照明光を吸収しやすいヘモグロビンを多く含む。したがって、血管は画像信号中では画素値が小さいので、ブラックハット処理によって血管を抽出することができる。また、クロージング処理をした画像信号から元の画像信号を減算するので、ブラックハット処理後の画像信号では、血管を表す画素の画素値は大きい値になる。   The black hat process is a morphological process (also referred to as a morphological process) that extracts a pixel having a smaller pixel value than a neighboring pixel while removing noise, and the original image signal is obtained from the image signal subjected to the closing process. This is a subtraction process. The closing process is a process of performing an erosion process for contracting a bright area after performing a dilation process for expanding a bright area. The image signal obtained from the image sensor 48 has a pixel value proportional to the amount of light incident from the observation target. The blood vessel contains a lot of hemoglobin that easily absorbs illumination light compared to the mucous membrane. Therefore, since the blood vessel has a small pixel value in the image signal, the blood vessel can be extracted by the black hat process. In addition, since the original image signal is subtracted from the image signal subjected to the closing process, the pixel value of the pixel representing the blood vessel is a large value in the image signal after the black hat process.

ブラックハット処理に用いる構造要素(カーネルともいう)の大きさや形状等が適切に設定されていれば、ブラックハット処理後の画像信号を二値化することにより、ほぼ血管だけを正確に抽出することができる。このため、血管位置信号生成部80が生成する血管位置信号は、血管の位置を正確に表している。但し、血管位置信号が表す血管は、幅(画像上での太さ)は不正確であり、誤差を含んでいる。これは、図7に示すように、血管84からの光85は、観察対象86を伝搬する間に、散乱等によって拡散されるからである。図8に示すように、血管84からの光85が散乱等によって拡散されることで、撮像センサ48での受光量の分布がガウス関数型に広がるとすると、図9に示すように、ブラックハット処理後の画像信号88を二値化して、血管位置信号89を生成すると、二値化するための閾値Thの設定値によって、血管位置信号89中での血管84の幅は変化してしまう。したがって、血管位置信号89は血管84の位置は正確であるが、血管84の幅には誤差がある。血管84の位置が正確であるとは、ノイズがなく、抽出されたものがほぼ血管84だけであることを言う。   If the size, shape, etc. of the structural elements (also called kernels) used for black hat processing are set appropriately, only the blood vessels can be accurately extracted by binarizing the image signal after black hat processing. Can do. For this reason, the blood vessel position signal generated by the blood vessel position signal generation unit 80 accurately represents the position of the blood vessel. However, the blood vessel represented by the blood vessel position signal has an inaccurate width (thickness on the image) and includes an error. This is because the light 85 from the blood vessel 84 is diffused by scattering or the like while propagating through the observation object 86, as shown in FIG. As shown in FIG. 8, when the light 85 from the blood vessel 84 is diffused by scattering or the like, and the distribution of the amount of light received by the imaging sensor 48 spreads in a Gaussian function type, as shown in FIG. When the processed image signal 88 is binarized to generate the blood vessel position signal 89, the width of the blood vessel 84 in the blood vessel position signal 89 changes depending on the setting value of the threshold Th for binarization. Therefore, the blood vessel position signal 89 is accurate in the position of the blood vessel 84, but there is an error in the width of the blood vessel 84. The accurate position of the blood vessel 84 means that there is no noise and only the blood vessel 84 is extracted.

なお、特殊画像処理部67は画像処理切替部61からRGB各色の画像信号を受信するが、血管位置信号生成部80はこれらのうち少なくとも青色波長帯域に対応するB画像信号を用いて血管位置信号を生成する。これは、RGB各色の画像信号のうち、B画像信号は、病変等の診断に重要性が高い粘膜表層付近にある血管のコントラストが最も高い画像信号だからである。設定により、粘膜下の比較的深い位置にある血管を抽出する場合には、緑色波長帯域に対応するG画像信号を使用しても良い。   Note that the special image processing unit 67 receives RGB color image signals from the image processing switching unit 61, and the blood vessel position signal generation unit 80 uses the B image signal corresponding to at least the blue wavelength band among these to output the blood vessel position signal. Is generated. This is because of the RGB image signals, the B image signal is the image signal with the highest contrast of blood vessels in the vicinity of the mucosal surface layer, which is highly important for the diagnosis of lesions and the like. When extracting a blood vessel at a relatively deep position below the mucosa by setting, a G image signal corresponding to the green wavelength band may be used.

血管幅信号生成部81は、画像信号を用いて、観察対象の血管の幅を表す血管幅信号を生成し、血管画像信号生成部82に入力する。具体的には、血管幅信号生成部81は、ブラックハット処理によって、観察対象の血管を抽出し、さらにブラックハット処理後の画像信号にLOGフィルタ(Laplacian Of Gaussian Filter)処理を施す。そして、LOGフィルタ処理を施した後の画像信号の零点を用いて、二値の血管幅信号を生成する。LOGフィルタ処理は、ガウシアンフィルタ処理とラプラシアンフィルタ処理との複合フィルタ処理であり、ガウシアンフィルタ処理によって画像信号を平滑化してノイズを除去した後に、ラプラシアンフィルタ処理によって二階微分をするフィルタ処理である。すなわち、血管幅信号生成部81は、二階微分後の画像信号の零点を用いて血管幅信号を生成する。   The blood vessel width signal generation unit 81 generates a blood vessel width signal representing the width of the blood vessel to be observed using the image signal, and inputs it to the blood vessel image signal generation unit 82. Specifically, the blood vessel width signal generation unit 81 extracts a blood vessel to be observed by black hat processing, and further performs LOG filter (Laplacian Of Gaussian Filter) processing on the image signal after the black hat processing. Then, a binary blood vessel width signal is generated using the zero point of the image signal after the LOG filter processing. The LOG filter process is a composite filter process of a Gaussian filter process and a Laplacian filter process, and is a filter process for smoothing an image signal by Gaussian filter process to remove noise and then performing second order differentiation by Laplacian filter process. That is, the blood vessel width signal generation unit 81 generates a blood vessel width signal using the zero point of the image signal after the second order differentiation.

例えば、図10(A)に示すブラックハット処理後の画像信号88に対してLOGフィルタ処理を施すと、図10(B)に示すように、LOGフィルタ処理後の画像信号90の零点は、血管84のエッジをほぼ正確に表す。このため、図10(C)に示すように、血管幅信号生成部81は、LOGフィルタ処理後の画像信号90の零点間かつ画素値が負の領域を抽出することにより、血管幅信号91を生成する。血管幅信号91では、血管を表す領域を特定の正値(例えば「1」)を有する「白」の画素で表し、血管以外の領域を画素値が零の「黒」の画素で表す。上記生成方法から分かる通り、血管幅信号91は、血管84の幅が正確である。但し、微分をするラプラシアンフィルタ処理を用いるので、極僅かなノイズでも強調され、血管84以外のものもノイズとして抽出されてしまう。したがって、血管幅信号91は、血管84の幅を正確に表すが、血管84以外のノイズをも含んでいる。   For example, when the LOG filter process is performed on the image signal 88 after the black hat process shown in FIG. 10A, the zero point of the image signal 90 after the LOG filter process is a blood vessel as shown in FIG. The 84 edges are represented almost exactly. Therefore, as shown in FIG. 10C, the blood vessel width signal generation unit 81 extracts the blood vessel width signal 91 by extracting a region between zero points and a negative pixel value of the image signal 90 after the LOG filter processing. Generate. In the blood vessel width signal 91, a region representing a blood vessel is represented by a “white” pixel having a specific positive value (for example, “1”), and a region other than the blood vessel is represented by a “black” pixel having a pixel value of zero. As can be seen from the above generation method, the width of the blood vessel 84 is accurate in the blood vessel width signal 91. However, since Laplacian filter processing for differentiating is used, even a very small amount of noise is emphasized, and those other than the blood vessel 84 are also extracted as noise. Therefore, the blood vessel width signal 91 accurately represents the width of the blood vessel 84, but also includes noise other than the blood vessel 84.

血管画像信号生成部82は、血管位置信号と血管幅信号とを用いて、観察対象の血管を表す血管画像信号を生成する。具体的には、血管位置信号と血管幅信号との論理積(“AND”)によって、血管画像信号を生成する。血管位置信号と血管幅信号との論理積をとると、血管位置信号と血管幅信号とで共通して特定の正値を有する画素だけが抽出され、血管位置信号または血管幅信号のいずれかのみで特定の正値を有する画素は画素値が零の画素になる。したがって、血管画像信号が表す血管は、血管位置信号で表される位置に有り、かつ、血管幅信号で表される幅を有する。さらに、血管画像信号には、血管以外のノイズ成分もほとんど含まれない。すなわち、図11に示すように、血管画像信号92は、位置及び幅を正確に、元の画像信号から血管だけを抽出した画像信号に対応する。血管画像信号92は、血管幅信号に表れるノイズはなく、粘膜の表層付近にある表層血管93、及び表層血管93の中でも粘膜の表面に極めて近い深さに分布する極表層血管94の位置が正しく、かつ表層血管93及び極表層血管94の幅も正しい。このように、表層血管93及び極表層血管94を抽出できるのは、紫色光Vを含む照明光を用いているからである。   The blood vessel image signal generation unit 82 generates a blood vessel image signal representing the blood vessel to be observed using the blood vessel position signal and the blood vessel width signal. Specifically, a blood vessel image signal is generated by a logical product (“AND”) of the blood vessel position signal and the blood vessel width signal. When the logical product of the blood vessel position signal and the blood vessel width signal is taken, only the pixels having a specific positive value in common with the blood vessel position signal and the blood vessel width signal are extracted, and only one of the blood vessel position signal and the blood vessel width signal is extracted. A pixel having a specific positive value becomes a pixel having a pixel value of zero. Accordingly, the blood vessel represented by the blood vessel image signal is at a position represented by the blood vessel position signal and has a width represented by the blood vessel width signal. Further, the blood vessel image signal contains almost no noise components other than blood vessels. That is, as shown in FIG. 11, the blood vessel image signal 92 corresponds to an image signal obtained by extracting only blood vessels from the original image signal with accurate position and width. The blood vessel image signal 92 has no noise appearing in the blood vessel width signal, and the position of the superficial blood vessel 93 near the surface of the mucous membrane and the extreme superficial blood vessel 94 distributed at a depth very close to the surface of the mucosa among the superficial blood vessels 93 are correct. And the widths of the superficial blood vessel 93 and the extreme superficial blood vessel 94 are also correct. The reason why the superficial blood vessel 93 and the polar superficial blood vessel 94 can be extracted is that illumination light including purple light V is used.

なお、血管幅信号生成部81が、RGB各色の画像信号のうち、少なくとも青色波長帯域に対応するB画像信号を用いて血管幅信号を生成するのは、血管位置信号生成部80と同じである。設定によっては、G画像信号を使用する場合がある。   Note that the blood vessel width signal generation unit 81 generates a blood vessel width signal using a B image signal corresponding to at least the blue wavelength band among the RGB image signals in the same manner as the blood vessel position signal generation unit 80. . Depending on the setting, a G image signal may be used.

図5に示すように、血管指標値算出部72は、血管画像信号92が表す血管を指標化した血管指標値を算出する。血管指標値は、血管画像信号92が表す血管の幅、血管の密度、血管の本数、血管の走行方向、血管の形状、血管のシャープさ等である。例えば、血管の密度(単位面積中にある血管の割合)を血管指標値として算出する場合、血管画像信号92から、血管の密度を算出する画素を中心に含む特定の大きさ(単位面積)の領域を切り出し、その領域内の全画素に占める表層血管93及び極表層血管94の割合を算出する。これを血管画像信号92の全画素に対して行うことで、血管画像信号92の各画素の血管の密度を算出する。算出された血管指標値は、判定部74に送信される。   As shown in FIG. 5, the blood vessel index value calculation unit 72 calculates a blood vessel index value obtained by indexing the blood vessel represented by the blood vessel image signal 92. The blood vessel index value includes the width of the blood vessel represented by the blood vessel image signal 92, the density of the blood vessel, the number of blood vessels, the running direction of the blood vessel, the shape of the blood vessel, the sharpness of the blood vessel, and the like. For example, when calculating the blood vessel density (ratio of blood vessels in a unit area) as a blood vessel index value, the blood vessel image signal 92 has a specific size (unit area) centered on a pixel for calculating the blood vessel density. A region is cut out, and the ratio of the superficial blood vessel 93 and the polar superficial blood vessel 94 occupying all the pixels in the region is calculated. By performing this operation for all the pixels of the blood vessel image signal 92, the blood vessel density of each pixel of the blood vessel image signal 92 is calculated. The calculated blood vessel index value is transmitted to the determination unit 74.

なお、内視鏡システム10では複数のタイミングで観察対象を撮像しており、血管指標値算出部72は、各タイミングの血管指標値を算出する。そして、血管指標値は、内視鏡の操作や観察対象の拍動などにより画像にブレやピンボケが生じた場合、この前後のタイミングで値が変化する。一方で、ブレやピンボケがない場合、前後のタイミングで血管指標値は一定の値となる。このため、血管指標値は、画像にブレやピンボケが生じたか否かの判定に用いることができる。   Note that the endoscope system 10 images an observation target at a plurality of timings, and the blood vessel index value calculation unit 72 calculates a blood vessel index value at each timing. The blood vessel index value changes at the timing before and after this when the image is shaken or blurred due to the operation of the endoscope or the pulsation of the observation target. On the other hand, when there is no blur or out of focus, the blood vessel index value becomes a constant value at the timing before and after. For this reason, the blood vessel index value can be used to determine whether or not blurring or defocusing has occurred in the image.

判定部74は、血管指標値算出部72から受信した血管指標値を用いて、第1のタイミングで得られた血管画像信号92に対応する画像が、鮮鋭度に関して不良画像であるか否かの判定を行う。判定結果は画像補正部76に送信する。鮮鋭度は、画像中の血管がどれほど明瞭に表れているかを示す度合いであり、鮮鋭度が大きいほど画像のブレやピンボケが小さく、細い血管が明瞭に表されていることを示している。不良画像は、鮮鋭度が小さく、細い血管が不明瞭な画像である。なお、判定部74は、各タイミングの血管指標値を記憶する血管指標値用メモリ(図示省略)を備えており、血管指標値を受信する毎に、この血管指標値用メモリに記憶するようになっている。   The determination unit 74 uses the blood vessel index value received from the blood vessel index value calculation unit 72 to determine whether the image corresponding to the blood vessel image signal 92 obtained at the first timing is a defective image with respect to the sharpness. Make a decision. The determination result is transmitted to the image correction unit 76. The sharpness is a degree indicating how clearly the blood vessels in the image appear, and the greater the sharpness, the smaller the blurring and blurring of the image and the clearer the blood vessels are expressed. A defective image is an image with low sharpness and unclear thin blood vessels. The determination unit 74 includes a blood vessel index value memory (not shown) for storing the blood vessel index value at each timing, and stores the blood vessel index value in the blood vessel index value memory every time the blood vessel index value is received. It has become.

図12に示すように、判定部74は、第1のタイミングの血管指標値と、第1のタイミングよりも前の、第2のタイミングの血管指標値とを比較し、第2のタイミングの血管指標値に対して、第1のタイミングの血管指標値が一定値以上変化した場合に、第1のタイミングの画像が不良画像であると判定する。   As illustrated in FIG. 12, the determination unit 74 compares the blood vessel index value at the first timing with the blood vessel index value at the second timing before the first timing, and the blood vessel at the second timing. When the blood vessel index value at the first timing changes by a certain value or more with respect to the index value, it is determined that the image at the first timing is a defective image.

また、第2のタイミングの血管指標値に対して、第1のタイミングの血管指標値が一定値未満であった場合には、第1のタイミングの血管画像信号92に対して周波数解析を行う。周波数解析では、細い血管に対応する高周波成分と、太い血管に対応する低周波成分とが得られる。そして、第1のタイミングの血管画像信号92に含まれる高周波成分が第2のタイミングの血管画像信号に含まれる高周波成分よりも少なく、かつ第1のタイミングの血管画像信号92に含まれる低周波成分が第2のタイミングの血管画像信号に含まれる低周波成分よりも多い場合、判定部74は、第1のタイミングの画像が不良画像であると判定する。   When the blood vessel index value at the first timing is less than a certain value with respect to the blood vessel index value at the second timing, frequency analysis is performed on the blood vessel image signal 92 at the first timing. In the frequency analysis, a high frequency component corresponding to a thin blood vessel and a low frequency component corresponding to a thick blood vessel are obtained. Then, the high-frequency component included in the blood vessel image signal 92 at the first timing is less than the high-frequency component included in the blood vessel image signal at the second timing, and the low-frequency component included in the blood vessel image signal 92 at the first timing. Is greater than the low-frequency component included in the blood vessel image signal at the second timing, the determination unit 74 determines that the image at the first timing is a defective image.

第1のタイミングの血管画像信号92に含まれる高周波成分が第2のタイミングの血管画像信号に含まれる高周波成分以上であり、かつ第1のタイミングの血管画像信号92に含まれる低周波成分が第2のタイミングの血管画像信号に含まれる低周波成分以下である場合、判定部74は、第1のタイミングの画像が不良画像でないと判定する。   The high frequency component included in the first timing blood vessel image signal 92 is greater than or equal to the high frequency component included in the second timing blood vessel image signal, and the low frequency component included in the first timing blood vessel image signal 92 is the first timing. If it is equal to or lower than the low-frequency component included in the blood vessel image signal at the timing 2, the determination unit 74 determines that the image at the first timing is not a defective image.

画像補正部76は、判定部74の判定の結果、不良画像であると判定された場合、第1のタイミングの血管画像信号に対して画像補正処理を実行する。図13に示すように、画像補正部76には、信号切換部96と、移動量算出部97と、位置合わせ部98とが設けられている。   As a result of the determination by the determination unit 74, the image correction unit 76 performs image correction processing on the blood vessel image signal at the first timing when it is determined as a defective image. As shown in FIG. 13, the image correction unit 76 includes a signal switching unit 96, a movement amount calculation unit 97, and an alignment unit 98.

信号切換部96は、判定部74から血管画像信号、及び判定結果を受信し、判定の結果、不良画像であると判定された場合には血管画像信号を移動量算出部97に送信し、不良画像でないと判定された場合には血管画像信号を特殊画像生成部78に送信するように、送信先を切り替える。   The signal switching unit 96 receives the blood vessel image signal and the determination result from the determination unit 74, and transmits the blood vessel image signal to the movement amount calculation unit 97 when the determination result indicates that the image is a defective image. When it is determined that the image is not an image, the transmission destination is switched so that the blood vessel image signal is transmitted to the special image generation unit 78.

移動量算出部97は、信号切換部96から血管画像信号を受信し、第1のタイミングの血管画像信号と第2のタイミングの血管画像信号との間の移動量を算出する。具体的には、第1のタイミングの血管画像信号に表された血管、及び第2のタイミングの血管画像信号に表された血管に対応する画素について、画像信号の比較演算を行うことにより、X方向への移動量、及びY方向への移動量を算出する。   The movement amount calculation unit 97 receives the blood vessel image signal from the signal switching unit 96 and calculates the movement amount between the blood vessel image signal at the first timing and the blood vessel image signal at the second timing. Specifically, by performing a comparison calculation of the image signals for the blood vessels represented in the blood vessel image signal at the first timing and the blood vessels represented in the blood vessel image signal at the second timing, X The movement amount in the direction and the movement amount in the Y direction are calculated.

位置合わせ部98は、移動量算出部97で算出された移動量を用いて、第1のタイミングの血管画像信号に表された血管と、第2のタイミングの血管画像信号に表された血管との間の位置合わせを行う。位置合わせを行う際は、第1のタイミングの血管画像信号を、移動量の分だけ位置ずれを打ち消す方向に移動させる。これにより、第1のタイミングの血管画像信号に表された血管の位置が、第2のタイミングの血管画像信号に表された血管の位置に合わせられる。位置合わせ後の血管画像信号は、特殊画像生成部78に送信する。   The alignment unit 98 uses the movement amount calculated by the movement amount calculation unit 97 and the blood vessel represented in the blood vessel image signal at the first timing and the blood vessel represented in the blood vessel image signal at the second timing. Align between the two. When performing alignment, the blood vessel image signal at the first timing is moved in a direction to cancel the positional shift by the amount of movement. Thereby, the position of the blood vessel represented in the blood vessel image signal at the first timing is matched with the position of the blood vessel represented in the blood vessel image signal at the second timing. The blood vessel image signal after alignment is transmitted to the special image generation unit 78.

特殊画像生成部78は、第1のタイミングで取得された画像信号と血管画像信号と血管指標値とを用いて、特殊画像信号を生成する。特殊画像信号を用いた画像が特殊画像である。具体的には、特殊画像生成部78は、第1のタイミングで取得された画像信号に対して、色変換処理、色彩強調処理、及び構造強調処理を行い、ベース画像信号を生成する。次に、ベース画像信号に対して、血管画像信号をオーバーラップ処理することにより、血管強調画像信号を生成する。図14に示すように、血管強調画像信号100に基づく画像は、観察対象の起伏等の形状101が観察可能であるとともに、表層血管93及び極表層血管94が強調されている。   The special image generation unit 78 generates a special image signal using the image signal, the blood vessel image signal, and the blood vessel index value acquired at the first timing. An image using the special image signal is a special image. Specifically, the special image generation unit 78 performs a color conversion process, a color enhancement process, and a structure enhancement process on the image signal acquired at the first timing, and generates a base image signal. Next, a blood vessel emphasis image signal is generated by overlapping the blood vessel image signal with respect to the base image signal. As shown in FIG. 14, in the image based on the blood vessel emphasized image signal 100, the shape 101 such as the undulation to be observed can be observed, and the superficial blood vessel 93 and the extreme superficial blood vessel 94 are emphasized.

また、特殊画像生成部78では、血管強調画像信号100に対して、血管指標値に基づく情報をオーバーラップ処理することにより、特殊画像信号を生成する。具体的には、血管強調画像信号100に対して、血管指標値に応じて色付け処理することにより、疑似カラーの特殊画像信号102を得る。例えば、図15に示す特殊画像信号102においては、血管指標値が一定値以上の領域103が疑似カラーで表示されるとともに、この疑似カラーの領域103は血管指標値に応じて異なる色で表示されている。また、血管強調画像信号100に対して、血管指標値に基づいて関心領域(ROI(Region of Interest))104の設定を行うことで、関心領域付きの特殊画像信号105を得る。例えば、図16に示す特殊画像信号105においては、血管指標値が一定値以上である領域に、関心領域104であることを示す枠が表示されている。なお、血管指標値に基づくオーバーラップ処理は、第1のタイミングの血管指標値を第2のタイミングの血管指標値に置き換えて行ってもよい。これは、不良画像にブレやピンボケが生じている場合に特に有効である。   The special image generation unit 78 generates a special image signal by performing overlap processing on the blood vessel emphasized image signal 100 with information based on the blood vessel index value. Specifically, the pseudo-color special image signal 102 is obtained by subjecting the blood vessel emphasized image signal 100 to color processing according to the blood vessel index value. For example, in the special image signal 102 shown in FIG. 15, the region 103 having a blood vessel index value equal to or greater than a certain value is displayed in a pseudo color, and the pseudo color region 103 is displayed in a different color according to the blood vessel index value. ing. Further, a region of interest (ROI (Region of Interest)) 104 is set for the blood vessel enhanced image signal 100 based on the blood vessel index value, thereby obtaining a special image signal 105 with a region of interest. For example, in the special image signal 105 shown in FIG. 16, a frame indicating the region of interest 104 is displayed in a region where the blood vessel index value is a certain value or more. Note that the overlap processing based on the blood vessel index value may be performed by replacing the blood vessel index value at the first timing with the blood vessel index value at the second timing. This is particularly effective when a defective image is blurred or out of focus.

なお、判定部74で不良画像と判定された場合には、特殊画像生成部78は、血管強調画像信号100に対して、警告表示に関する情報106をオーバーラップ処理して、特殊画像信号107を生成する。例えば、警告表示に関する情報としては、図17に示すように、モニタ18上の右上領域などに、「現在の画像は「不良画像」です」と表示する。また、判定部74で不良画像と判定された場合には、特殊画像生成部78は、血管強調画像信号100に対して、血管、及び血管指標値に基づく情報を非表示とする(つまりオーバーラップ処理しない)ようにしてもよい。例えば、血管指標値に応じて色付け処理する場合には、判定部74で不良画像と判定されたときに、色付け処理を行わないようにする。なお、画像補正部76で、移動量が極めて大きく、位置合わせができない場合に、上記の警告表示を行ってもよい。   When the determination unit 74 determines that the image is defective, the special image generation unit 78 generates a special image signal 107 by overlapping information 106 related to warning display on the blood vessel emphasized image signal 100. To do. For example, as information regarding the warning display, as shown in FIG. 17, “current image is“ defective image ”” is displayed in the upper right area on the monitor 18. When the determination unit 74 determines that the image is defective, the special image generation unit 78 does not display information based on the blood vessel and the blood vessel index value with respect to the blood vessel emphasized image signal 100 (that is, overlap). (Do not process). For example, when the coloring process is performed according to the blood vessel index value, the coloring process is not performed when the determination unit 74 determines that the image is defective. Note that the warning display may be performed when the image correction unit 76 has a very large movement amount and cannot be aligned.

映像信号生成部68は、通常画像処理部66または特殊画像生成部78から受信した画像信号を、モニタ18で表示可能な画像として表示するための映像信号に変換し、モニタ18に順次出力する。これにより、モニタ18には、通常画像信号が入力された場合は通常画像を表示し、特殊画像信号が入力された場合は特殊画像を表示する。   The video signal generation unit 68 converts the image signal received from the normal image processing unit 66 or the special image generation unit 78 into a video signal to be displayed as an image that can be displayed on the monitor 18, and sequentially outputs the video signal to the monitor 18. Thus, the normal image is displayed on the monitor 18 when a normal image signal is input, and the special image is displayed when a special image signal is input.

次に、図18に示すフローチャートに沿って、本発明の作用を説明する。まず、通常観察モードにおいてスクリーニングが行われる(S11)。このスクリーニング時に、ブラウニッシュエリアや発赤等の病変の可能性がある部位(以下、病変可能性部位という)を発見すると(S12)、ドクターは、内視鏡12の移動操作を停止し(S13)、モード切替SW12fを操作して観察モードを特殊観察モードに切り替える(S14)。   Next, the operation of the present invention will be described along the flowchart shown in FIG. First, screening is performed in the normal observation mode (S11). At the time of this screening, if a site with potential lesion such as a brownish area or redness (hereinafter referred to as a possible lesion) is found (S12), the doctor stops the movement operation of the endoscope 12 (S13). Then, the mode switching SW 12f is operated to switch the observation mode to the special observation mode (S14).

特殊観察モードにおいて、第1のタイミングで観察対象を撮像して画像信号を取得する(S15)。画像信号から観察対象の血管の抽出を行い(S16)、観察対象の血管を表す血管画像信号を生成する(S17)。生成された血管画像信号から、血管を指標化した血管指標値を算出する(S18)。そして、血管指標値を用いて不良画像の判定が行われる(S19)。   In the special observation mode, the observation target is imaged at the first timing to acquire an image signal (S15). A blood vessel to be observed is extracted from the image signal (S16), and a blood vessel image signal representing the blood vessel to be observed is generated (S17). A blood vessel index value obtained by indexing a blood vessel is calculated from the generated blood vessel image signal (S18). Then, the defective image is determined using the blood vessel index value (S19).

判定の際は、まず、第1のタイミングの血管指標値と、第1のタイミングよりも前の第2のタイミングの血管指標値とを比較し、第2のタイミングの血管指標値に対して、第1のタイミングの血管指標値が一定値以上変化した場合に、不良画像であると判定する。また、第2のタイミングの血管指標値に対して、第1のタイミングの血管指標値が一定値未満であった場合、第1のタイミングの血管画像信号に対して周波数解析を行い、第1のタイミングの血管画像信号に含まれる高周波成分が第2のタイミングの血管画像信号に含まれる高周波成分よりも少なく、かつ第1のタイミングの血管画像信号に含まれる低周波成分が第2のタイミングの血管画像信号に含まれる低周波成分よりも多い場合、不良画像であると判定する。これに対し、第1のタイミングの血管画像信号に含まれる高周波成分が第2のタイミングの血管画像信号に含まれる高周波成分以上であり、かつ第1のタイミングの血管画像信号に含まれる低周波成分が第2のタイミングの血管画像信号に含まれる低周波成分以下である場合、不良画像でないと判定する。   At the time of determination, first, the blood vessel index value at the first timing is compared with the blood vessel index value at the second timing before the first timing, and for the blood vessel index value at the second timing, When the blood vessel index value at the first timing changes by a certain value or more, it is determined as a defective image. When the blood vessel index value at the first timing is less than a certain value with respect to the blood vessel index value at the second timing, the frequency analysis is performed on the blood vessel image signal at the first timing, The high-frequency component contained in the blood vessel image signal at the timing is less than the high-frequency component contained in the blood vessel image signal at the second timing, and the low-frequency component contained in the blood vessel image signal at the first timing is the blood vessel at the second timing. When there are more than low frequency components included in the image signal, it is determined that the image is defective. On the other hand, the high frequency component included in the blood vessel image signal at the first timing is equal to or higher than the high frequency component included in the blood vessel image signal at the second timing, and the low frequency component included in the blood vessel image signal at the first timing. Is less than the low frequency component included in the blood vessel image signal at the second timing, it is determined that the image is not a defective image.

不良画像であると判定された場合に、第1のタイミングの血管画像信号と第2のタイミングの血管画像信号との間の移動量を算出するとともに、移動量を用いて、第1のタイミングの血管画像信号に表された血管と、第2のタイミングの血管画像信号に表された血管との間で位置合わせする画像補正処理が行われる(S20)。一方、不良画像でないと判定された場合には、画像補正処理は行われない。その後、第1のタイミングで取得された画像信号と、判定後処理が施された血管画像信号と、血管指標値とを用いて、特殊画像信号の生成が行われる(S21)。そして、特殊画像信号に基づいて特殊画像が生成され(S22)、この特殊画像がモニタ18に表示される(S23)。特殊観察モードは、通常観察モードに切り替えられるか(S24)、診断終了(S25)まで繰り返し行われる。   When it is determined that the image is a defective image, the movement amount between the blood vessel image signal at the first timing and the blood vessel image signal at the second timing is calculated, and the movement amount is used to calculate the first timing. Image correction processing for aligning the blood vessel represented in the blood vessel image signal and the blood vessel represented in the blood vessel image signal at the second timing is performed (S20). On the other hand, when it is determined that the image is not defective, the image correction process is not performed. Thereafter, a special image signal is generated using the image signal acquired at the first timing, the blood vessel image signal subjected to post-determination processing, and the blood vessel index value (S21). Then, a special image is generated based on the special image signal (S22), and this special image is displayed on the monitor 18 (S23). The special observation mode is repeated until the normal observation mode is switched (S24) or the diagnosis is completed (S25).

以上のように、本発明は、特殊観察モードにおいて、第1のタイミングで取得された画像信号から血管を抽出し、抽出された血管から算出される血管指標値を用いて、第1のタイミングの画像が不良画像であるか否かの判定を正確に行うことができる。そして、判定の結果に応じた判定後処理を第1のタイミングで取得された画像信号に施すため、血管に関する情報を正確に表示できる。   As described above, in the special observation mode, the present invention extracts a blood vessel from the image signal acquired at the first timing, and uses the blood vessel index value calculated from the extracted blood vessel to perform the first timing. It is possible to accurately determine whether an image is a defective image. And since the post-determination process according to the determination result is performed on the image signal acquired at the first timing, information about the blood vessel can be accurately displayed.

[第2実施形態]
第1実施形態では、不良画像であると判定された場合に、第1のタイミングの血管画像信号に対して画像補正処理を行っているが、第2実施形態では、第1のタイミングの血管指標値に対して指標値補正処理を行う。図19に示すように、第2実施形態では、特殊画像処理部67に代えて特殊画像処理部110を備えている。特殊画像処理部110には、指標値補正部114(判定後処理部)と、血管位置補正部116とが設けられている。その他の部材は第1実施形態と同じなので省略する。
[Second Embodiment]
In the first embodiment, when it is determined that the image is a defective image, the image correction process is performed on the blood vessel image signal at the first timing. In the second embodiment, the blood vessel index at the first timing is used. An index value correction process is performed on the value. As shown in FIG. 19, in the second embodiment, a special image processing unit 110 is provided instead of the special image processing unit 67. The special image processing unit 110 includes an index value correction unit 114 (post-determination processing unit) and a blood vessel position correction unit 116. Since other members are the same as those in the first embodiment, the description thereof is omitted.

図20に示すように、指標値補正部114は、信号切換部120と、移動量算出部121と、補正処理部122とを備えている。   As illustrated in FIG. 20, the index value correction unit 114 includes a signal switching unit 120, a movement amount calculation unit 121, and a correction processing unit 122.

信号切換部120は、判定部74から判定結果、血管指標値算出部72から血管指標値を受信し、判定の結果、不良画像である場合には血管指標値を補正処理部122に送信し、不良画像でない場合には血管指標値を特殊画像生成部78に送信するように、送信先を切り替える。   The signal switching unit 120 receives the determination result from the determination unit 74 and the blood vessel index value from the blood vessel index value calculation unit 72. If the determination result is a defective image, the signal switching unit 120 transmits the blood vessel index value to the correction processing unit 122. If it is not a defective image, the transmission destination is switched so that the blood vessel index value is transmitted to the special image generation unit 78.

移動量算出部121は、血管抽出部70から血管画像信号を受信し、第1のタイミングの血管画像信号と第2のタイミングの血管画像信号との間の移動量を算出する。移動量の算出については、上記第1実施形態の移動量算出部97と同様であり、第1のタイミングの血管画像信号に表された血管、及び第2のタイミングの血管画像信号に表された血管に対応する画素について、画像信号の比較演算を行うことにより、X方向への移動量、及びY方向への移動量を算出する。   The movement amount calculation unit 121 receives the blood vessel image signal from the blood vessel extraction unit 70 and calculates the movement amount between the blood vessel image signal at the first timing and the blood vessel image signal at the second timing. The calculation of the movement amount is the same as that of the movement amount calculation unit 97 of the first embodiment, and is expressed in the blood vessel represented in the blood vessel image signal at the first timing and the blood vessel image signal in the second timing. For the pixel corresponding to the blood vessel, the amount of movement in the X direction and the amount of movement in the Y direction are calculated by performing a comparison operation of the image signals.

補正処理部122は、信号切換部120から血管指標値、移動量算出部121から移動量を受信し、移動量の大きさに応じて、第1のタイミングの血管指標値に対する指標値補正処理を実行する。血管指標値は、移動量が零の場合(ブレやピンボケが無い場合)に正しい数値が算出され、移動量が大きくなるほど正しい数値からの変化が大きくなる。このため、移動量の分だけ血管指標値に対して指標値補正処理を行うことにより正確な血管指標値が得られる。   The correction processing unit 122 receives the blood vessel index value from the signal switching unit 120 and the movement amount from the movement amount calculation unit 121, and performs an index value correction process on the blood vessel index value at the first timing according to the magnitude of the movement amount. Run. The blood vessel index value is calculated as a correct numerical value when the movement amount is zero (when there is no blur or blur), and the change from the correct numerical value increases as the movement amount increases. Therefore, an accurate blood vessel index value can be obtained by performing the index value correction process on the blood vessel index value by the amount of movement.

血管位置補正部116は、血管抽出部70から血管画像信号、指標値補正部114から移動量を受信し、移動量を用いて、第1のタイミングの血管画像信号に表された血管と、第2のタイミングの血管画像信号に表された血管との間の位置合わせを行う(図19参照)。位置合わせについては、上記実施形態の位置合わせ部98と同様に、第1のタイミングの血管画像信号を、移動量の分だけ位置ずれを打ち消す方向に移動させる。これにより、第1のタイミングの血管画像信号に表された血管の位置が、第2のタイミングの血管画像信号に表された血管の位置に合わせられる。位置合わせ後の血管画像信号は、特殊画像生成部78に送信する。特殊画像生成部78では、第1実施形態と同様に、判定の結果に応じて、血管指標値に基づく情報をオーバーラップ処理、警告表示に関する情報のオーバーラップ処理、血管指標値に基づく情報を非表示とするなどの処理が行われる。   The blood vessel position correction unit 116 receives the blood vessel image signal from the blood vessel extraction unit 70 and the movement amount from the index value correction unit 114, and uses the movement amount to represent the blood vessel represented in the blood vessel image signal at the first timing, Position alignment with the blood vessel represented in the blood vessel image signal at timing 2 is performed (see FIG. 19). Regarding the alignment, similarly to the alignment unit 98 of the above-described embodiment, the blood vessel image signal at the first timing is moved in a direction to cancel the positional deviation by the amount of movement. Thereby, the position of the blood vessel represented in the blood vessel image signal at the first timing is matched with the position of the blood vessel represented in the blood vessel image signal at the second timing. The blood vessel image signal after alignment is transmitted to the special image generation unit 78. Similar to the first embodiment, the special image generation unit 78 performs overlap processing on information based on the blood vessel index value, overlap processing on information related to warning display, and information based on the blood vessel index value according to the determination result. Processing such as displaying is performed.

以上のように、第2実施形態では、第1のタイミングの血管指標値に対して指標値補正処理を行うことにより正確な血管指標値が得られるため、血管に関する情報を正確に表示できる。   As described above, in the second embodiment, an accurate blood vessel index value can be obtained by performing the index value correction process on the blood vessel index value at the first timing, so that information related to blood vessels can be accurately displayed.

[第3実施形態]
第3実施形態では、第1、第2実施形態で示した4色のLED20a〜20dの代わりに、レーザ光源と蛍光体を用いて観察対象の照明を行う。それ以外については、第1実施形態と同様である。
[Third Embodiment]
In the third embodiment, the observation target is illuminated using a laser light source and a phosphor instead of the four-color LEDs 20a to 20d shown in the first and second embodiments. The rest is the same as in the first embodiment.

図21に示すように、第2実施形態の内視鏡システム200では、光源装置14において、4色のLED20a〜20dの代わりに、中心波長445±10nmの青色レーザ光を発する青色レーザ光源(図21では「445LD」と表記)204と、中心波長405±10nmの青紫色レーザ光を発する青紫色レーザ光源(図21では「405LD」と表記)206とが設けられている。これら各光源204、206の半導体発光素子からの発光は、光源制御部208により個別に制御されており、青色レーザ光源204の出射光と、青紫色レーザ光源206の出射光の光量比は変更自在になっている。   As shown in FIG. 21, in the endoscope system 200 of the second embodiment, in the light source device 14, instead of the four color LEDs 20a to 20d, a blue laser light source (see FIG. 21) that emits blue laser light having a central wavelength of 445 ± 10 nm. 21, a blue-violet laser light source (denoted as “405LD” in FIG. 21) 206 that emits blue-violet laser light having a center wavelength of 405 ± 10 nm is provided. Light emission from the semiconductor light emitting elements of these light sources 204 and 206 is individually controlled by the light source control unit 208, and the light quantity ratio between the emitted light of the blue laser light source 204 and the emitted light of the blue-violet laser light source 206 is freely changeable. It has become.

光源制御部208は、通常観察モードの場合には、青色レーザ光源204を駆動させる。これに対して、特殊観察モードの場合には、青色レーザ光源204と青紫色レーザ光源206の両方を駆動させるとともに、青色レーザ光の発光比率を青紫色レーザ光の発光比率よりも大きくなるように制御している。以上の各光源204、206から出射されるレーザ光は、集光レンズ、光ファイバ、合波器などの光学部材(いずれも図示せず)を介して、ライトガイド41に入射する。   The light source control unit 208 drives the blue laser light source 204 in the normal observation mode. On the other hand, in the special observation mode, both the blue laser light source 204 and the blue violet laser light source 206 are driven, and the emission ratio of the blue laser light is larger than the emission ratio of the blue violet laser light. I have control. The laser beams emitted from the light sources 204 and 206 are incident on the light guide 41 through optical members (all not shown) such as a condenser lens, an optical fiber, and a multiplexer.

なお、青色レーザ光又は青紫色レーザ光の半値幅は±10nm程度にすることが好ましい。また、青色レーザ光源204及び青紫色レーザ光源206は、ブロードエリア型のInGaN系レーザダイオードが利用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオードを用いることもできる。また、上記光源として、発光ダイオード等の発光体を用いた構成としてもよい。   Note that the full width at half maximum of the blue laser beam or the blue-violet laser beam is preferably about ± 10 nm. As the blue laser light source 204 and the blue-violet laser light source 206, a broad area type InGaN laser diode can be used, and an InGaNAs laser diode or a GaNAs laser diode can also be used. In addition, a light-emitting body such as a light-emitting diode may be used as the light source.

照明光学系30aには、照明レンズ45の他に、ライトガイド41からの青色レーザ光又は青紫色レーザ光が入射する蛍光体210が設けられている。蛍光体210に、青色レーザ光が照射されることで、蛍光体210から蛍光が発せられる。また、一部の青色レーザ光は、そのまま蛍光体210を透過する。青紫色レーザ光は、蛍光体210を励起させることなく透過する。蛍光体210を出射した光は、照明レンズ45を介して、検体内に照射される。   In addition to the illumination lens 45, the illumination optical system 30a is provided with a phosphor 210 on which blue laser light or blue-violet laser light from the light guide 41 is incident. When the phosphor 210 is irradiated with the blue laser light, the phosphor 210 emits fluorescence. Some of the blue laser light passes through the phosphor 210 as it is. The blue-violet laser light is transmitted without exciting the phosphor 210. The light emitted from the phosphor 210 is irradiated into the specimen through the illumination lens 45.

ここで、通常観察モードにおいては、主として青色レーザ光が蛍光体210に入射するため、図22に示すような、青色レーザ光、及び青色レーザ光により蛍光体210から励起発光する蛍光を合波した白色光が、観察対象に照射される。一方、特殊観察モードにおいては、青紫色レーザ光と青色レーザ光の両方が蛍光体210に入射するため、図23に示すような、青紫色レーザ光、青色レーザ光、及び青色レーザ光により蛍光体210から励起発光する蛍光を合波した特殊光が、検体内に照射される。   Here, in the normal observation mode, mainly the blue laser light is incident on the phosphor 210. Therefore, as shown in FIG. 22, the blue laser light and the fluorescence emitted from the phosphor 210 by the blue laser light are combined. White light is irradiated to the observation target. On the other hand, in the special observation mode, since both the blue-violet laser beam and the blue laser beam are incident on the phosphor 210, the phosphor is generated by the blue-violet laser beam, the blue laser beam, and the blue laser beam as shown in FIG. Special light obtained by combining fluorescence excited and emitted from 210 is irradiated into the specimen.

なお、蛍光体210は、青色レーザ光の一部を吸収して、緑色〜黄色に励起発光する複数種の蛍光体(例えばYAG系蛍光体、或いはBAM(BaMgAl1017)等の蛍光体)を含んで構成されるものを使用することが好ましい。本構成例のように、半導体発光素子を蛍光体210の励起光源として用いれば、高い発光効率で高強度の白色光が得られ、白色光の強度を容易に調整できる上に、白色光の色温度、色度の変化を小さく抑えることができる。 The phosphor 210 absorbs part of the blue laser light and emits green to yellow excitation light (for example, YAG phosphor or phosphor such as BAM (BaMgAl 10 O 17 )). It is preferable to use what is comprised including. If a semiconductor light emitting device is used as an excitation light source for the phosphor 210 as in this configuration example, high intensity white light can be obtained with high luminous efficiency, and the intensity of white light can be easily adjusted. Changes in temperature and chromaticity can be kept small.

[第4実施形態]
第4実施形態では、第1、第2実施形態で示した4色のLED20a〜20dの代わりに、キセノンランプなどの広帯域光源と回転フィルタを用いて観察対象の照明を行う。また、カラーの撮像センサ48に代えて、モノクロの撮像センサで観察対象の撮像を行う。それ以外については、第1実施形態と同様である。
[Fourth Embodiment]
In the fourth embodiment, instead of the four-color LEDs 20a to 20d shown in the first and second embodiments, the observation target is illuminated using a broadband light source such as a xenon lamp and a rotary filter. Further, instead of the color image sensor 48, the observation target is imaged by a monochrome image sensor. The rest is the same as in the first embodiment.

図24に示すように、第3実施形態の内視鏡システム300では、光源装置14において、4色のLED20a〜20dに代えて、広帯域光源302、回転フィルタ304、フィルタ切替部305が設けられている。また、撮像光学系30bには、カラーの撮像センサ48の代わりに、カラーフィルタが設けられていないモノクロの撮像センサ306が設けられている。   As shown in FIG. 24, in the endoscope system 300 of the third embodiment, the light source device 14 is provided with a broadband light source 302, a rotary filter 304, and a filter switching unit 305 instead of the four-color LEDs 20a to 20d. Yes. The imaging optical system 30b is provided with a monochrome imaging sensor 306 that is not provided with a color filter, instead of the color imaging sensor 48.

広帯域光源302はキセノンランプ、白色LEDなどであり、波長域が青色から赤色に及ぶ白色光を発する。回転フィルタ304は、内側に設けられた通常観察モード用フィルタ308と、外側に設けられた特殊観察モード用フィルタ309とを備えている(図25参照)。フィルタ切替部305は、回転フィルタ304を径方向に移動させるものであり、モード切替SW12fにより通常観察モードにセットされたときに、回転フィルタ304の通常観察モード用フィルタ308を白色光の光路に挿入し、特殊観察モードにセットされたときに、回転フィルタ304の特殊観察モード用フィルタ309を白色光の光路に挿入する。   The broadband light source 302 is a xenon lamp, a white LED, or the like, and emits white light having a wavelength range from blue to red. The rotary filter 304 includes a normal observation mode filter 308 provided on the inner side and a special observation mode filter 309 provided on the outer side (see FIG. 25). The filter switching unit 305 moves the rotary filter 304 in the radial direction. When the normal switching mode is set by the mode switching SW 12f, the normal switching mode filter 308 of the rotating filter 304 is inserted into the white light path. When the special observation mode is set, the special observation mode filter 309 of the rotation filter 304 is inserted into the optical path of white light.

図25に示すように、通常観察モード用フィルタ308には、周方向に沿って、白色光のうち青色光を透過させるBフィルタ308a、白色光のうち緑色光を透過させるGフィルタ308b、白色光のうち赤色光を透過させるRフィルタ308cが設けられている。したがって、通常観察モード時には、回転フィルタ304が回転することで、青色光、緑色光、赤色光が交互に観察対象に照射される。   As shown in FIG. 25, the normal observation mode filter 308 includes, along the circumferential direction, a B filter 308a that transmits blue light of white light, a G filter 308b that transmits green light of white light, and white light. Among them, an R filter 308c that transmits red light is provided. Therefore, in the normal observation mode, the rotation filter 304 is rotated, so that blue light, green light, and red light are alternately irradiated on the observation target.

特殊観察モード用フィルタ309には、周方向に沿って、白色光のうち特定波長の青色狭帯域光を透過させるBnフィルタ309aと、白色光のうち緑色光を透過させるGフィルタ309b、白色光のうち赤色光を透過させるRフィルタ309cが設けられている。したがって、特殊観察モード時には、回転フィルタ304が回転することで、青色狭帯域光、緑色光、赤色光が交互に観察対象に照射される。   The special observation mode filter 309 includes, along the circumferential direction, a Bn filter 309a that transmits blue narrow-band light having a specific wavelength among white light, a G filter 309b that transmits green light among white light, and white light. Among them, an R filter 309c that transmits red light is provided. Therefore, in the special observation mode, the rotation filter 304 is rotated so that blue narrow band light, green light, and red light are alternately irradiated on the observation target.

内視鏡システム300では、通常観察モード時には、青色光、緑色光、赤色光が観察対象に照射される毎にモノクロの撮像センサ306で検体内を撮像する。これにより、RGBの3色の画像信号が得られる。そして、それらRGB画像信号に基づいて、上記第1実施形態と同様の方法で、通常画像が生成される。   In the endoscope system 300, in the normal observation mode, the monochrome imaging sensor 306 images the inside of the specimen every time blue light, green light, and red light are irradiated on the observation target. Thereby, RGB image signals of three colors are obtained. Based on the RGB image signals, a normal image is generated by the same method as in the first embodiment.

一方、特殊観察モード時には、青色狭帯域光、緑色光、赤色光が観察対象に照射される毎にモノクロの撮像センサ306で検体内を撮像する。これにより、Bn画像信号と、G画像信号、R画像信号が得られる。これらBn画像信号と、G画像信号、R画像信号に基づいて、特殊画像の生成が行われる。特殊画像の生成には、B画像信号の代わりに、Bn画像信号が用いられる。それ以外については、第1実施形態と同様の方法で特殊画像の生成が行われる。   On the other hand, in the special observation mode, the monochrome imaging sensor 306 images the inside of the specimen every time the observation target is irradiated with blue narrow band light, green light, and red light. Thereby, a Bn image signal, a G image signal, and an R image signal are obtained. A special image is generated based on the Bn image signal, the G image signal, and the R image signal. For the generation of the special image, a Bn image signal is used instead of the B image signal. Other than that, a special image is generated in the same manner as in the first embodiment.

なお、上記実施形態では、特殊画像処理部において、第1のタイミングの画像が不良画像であるか否かの判定を行い、不良画像である場合に画像補正処理、または指標値補正処理を行っているが、通常画像処理部において、不良画像であるか否かの判定を行い、不良画像である場合に画像補正処理、または指標値補正処理を行うようにしてもよい。   In the above embodiment, the special image processing unit determines whether the image at the first timing is a defective image. If the image is a defective image, the special image processing unit performs image correction processing or index value correction processing. However, the normal image processing unit may determine whether or not the image is a defective image, and may perform an image correction process or an index value correction process when the image is a defective image.

10、200、300 内視鏡システム
12 内視鏡
14 光源装置
16 プロセッサ装置
20 光源
53 画像信号取得部
67,110 特殊画像処理部
70 血管抽出部
72 血管指標値算出部
74 判定部
76 画像補正部
78 特殊画像生成部
97,121 移動量算出部
98 位置合わせ部
116 血管位置補正部
114 指標値補正部
122 補正処理部
10, 200, 300 Endoscope system 12 Endoscope 14 Light source device 16 Processor device 20 Light source 53 Image signal acquisition unit 67, 110 Special image processing unit 70 Blood vessel extraction unit 72 Blood vessel index value calculation unit 74 Determination unit 76 Image correction unit 78 Special image generation unit 97, 121 Movement amount calculation unit 98 Position alignment unit 116 Blood vessel position correction unit 114 Index value correction unit 122 Correction processing unit

Claims (19)

内視鏡によって観察対象を撮像して得られた画像信号を異なるタイミングで取得する画像信号取得部と、
前記画像信号から血管を抽出して、血管画像信号を生成する血管抽出部と、
抽出された血管から、血管指標値を算出する血管指標値算出部と、
前記血管指標値から、前記画像信号に基づく画像が鮮鋭度に関して不良画像であるか否かの判定を行う判定部と、
前記判定の結果に基づく処理を、前記血管画像信号と前記血管指標値との少なくともいずれかに対して行う判定後処理部と
を備え
前記判定部は、前記血管指標値が一定値以上変化した場合に、前記不良画像であると判定することを特徴とする内視鏡用のプロセッサ装置。
An image signal acquisition unit that acquires image signals obtained by imaging an observation target with an endoscope at different timings;
A blood vessel extraction unit that extracts a blood vessel from the image signal and generates a blood vessel image signal;
A blood vessel index value calculation unit for calculating a blood vessel index value from the extracted blood vessels;
A determination unit that determines whether the image based on the image signal is a defective image with respect to the sharpness from the blood vessel index value;
A post-determination processing unit that performs processing based on the determination result on at least one of the blood vessel image signal and the blood vessel index value ;
Equipped with a,
The processor unit for an endoscope , wherein the determination unit determines that the image is a defective image when the blood vessel index value changes by a predetermined value or more .
前記血管指標値算出部は、血管の幅、血管の密度、血管の本数、血管の走行方向、血管の形状、血管のシャープさのうち少なくとも1つから、前記血管指標値を算出することを特徴とする請求項記載のプロセッサ装置。 The blood vessel index value calculation unit calculates the blood vessel index value from at least one of a blood vessel width, a blood vessel density, the number of blood vessels, a blood vessel traveling direction, a blood vessel shape, and a blood vessel sharpness. The processor device according to claim 1 . 前記画像信号取得部は、第1のタイミングで画像信号を取得し、前記第1のタイミングよりも前の第2のタイミングで画像信号を取得し、
前記血管抽出部は、前記第1のタイミングで取得した画像信号から血管を抽出して前記第1のタイミングの血管画像信号を生成し、前記第2のタイミングで取得した画像信号から血管を抽出して前記第2のタイミングの血管画像信号を生成し、
前記血管指標値算出部は、前記第1のタイミングで取得した画像信号から抽出された血管に基づいて前記第1のタイミングの血管指標値を算出し、前記第2のタイミングで取得した画像信号から抽出された血管に基づいて前記第2のタイミングの血管指標値を算出し、
前記判定部は、前記第2のタイミングの血管指標値に対して前記第1のタイミングの血管指標値が一定値以上変化した場合に、前記不良画像であると判定することを特徴とする請求項記載のプロセッサ装置。
The image signal acquisition unit acquires an image signal at a first timing, acquires an image signal at a second timing before the first timing,
The blood vessel extraction unit extracts a blood vessel from the image signal acquired at the first timing by generating a blood vessel image signal at the first timing by extracting a blood vessel from the image signal acquired at the first timing. To generate a blood vessel image signal at the second timing,
The blood vessel index value calculation unit calculates a blood vessel index value at the first timing based on a blood vessel extracted from the image signal acquired at the first timing, and from the image signal acquired at the second timing. Calculating a blood vessel index value of the second timing based on the extracted blood vessels;
The determination unit, when the blood vessel index value at the first timing changes by a predetermined value or more with respect to the blood vessel index value at the second timing, determines that the image is the defective image. 2. The processor device according to 2 .
前記判定の結果に基づいて画像を生成する画像生成部を備えることを特徴とする請求項1記載のプロセッサ装置。   The processor device according to claim 1, further comprising an image generation unit configured to generate an image based on the determination result. 前記判定後処理部は、前記不良画像であると判定された場合、前記画像信号に基づく画像に対して画像補正処理を行う画像補正部を有することを特徴とする請求項記載のプロセッサ装置。 The processor apparatus according to claim 4 , wherein the post-determination processing unit includes an image correction unit that performs an image correction process on an image based on the image signal when it is determined that the image is a defective image. 前記画像信号取得部は、第1のタイミングで画像信号を取得し、前記第1のタイミングよりも前の第2のタイミングで画像信号を取得し、
前記画像補正部は、前記画像補正処理を、前記第2のタイミングの画像信号に基づいて行うことを特徴とする請求項記載のプロセッサ装置。
The image signal acquisition unit acquires an image signal at a first timing, acquires an image signal at a second timing before the first timing,
6. The processor device according to claim 5 , wherein the image correction unit performs the image correction processing based on the image signal at the second timing.
前記第1のタイミングの画像信号と前記第2のタイミングの画像信号との間の移動量を算出する移動量算出部と、
前記移動量から、前記第1のタイミングの血管と前記第2のタイミングの血管との位置合わせを行う位置合わせ部とを有し、
前記画像補正部は、前記画像補正処理を、前記移動量に基づいて行うことを特徴とする請求項記載のプロセッサ装置。
A movement amount calculation unit for calculating a movement amount between the image signal at the first timing and the image signal at the second timing;
An alignment unit that aligns the blood vessel of the first timing and the blood vessel of the second timing from the movement amount;
The processor device according to claim 6 , wherein the image correction unit performs the image correction processing based on the movement amount.
前記画像生成部は、前記不良画像であると判定された場合、前記第2のタイミングの血管を、前記第1のタイミングの画像に対してオーバーラップさせた画像を生成することを特徴とする請求項記載のプロセッサ装置。 The image generation unit generates an image in which the blood vessel at the second timing overlaps the image at the first timing when it is determined that the image is the defective image. Item 8. The processor device according to Item 7 . 前記血管指標値算出部は、前記第1のタイミングで取得した画像信号から抽出された血管に基づいて前記第1のタイミングの血管指標値を算出し、前記第2のタイミングで取得した画像信号から抽出された血管に基づいて前記第2のタイミングの血管指標値を算出し、
前記画像生成部は、前記不良画像であると判定された場合、前記第2のタイミングの血管指標値に基づく情報を、前記第1のタイミングの画像に対してオーバーラップさせた画像を生成することを特徴とする請求項7または8記載のプロセッサ装置。
The blood vessel index value calculation unit calculates a blood vessel index value at the first timing based on a blood vessel extracted from the image signal acquired at the first timing, and from the image signal acquired at the second timing. Calculating a blood vessel index value of the second timing based on the extracted blood vessels;
When it is determined that the image is the defective image, the image generation unit generates an image in which information based on the blood vessel index value at the second timing is overlapped with the image at the first timing. 9. A processor device according to claim 7 or 8, wherein:
前記画像生成部は、前記第1のタイミングの血管指標値を前記第2のタイミングの血管指標値に置き換えることを特徴とする請求項記載のプロセッサ装置。 The processor device according to claim 9 , wherein the image generation unit replaces the blood vessel index value at the first timing with the blood vessel index value at the second timing. 前記判定後処理部は、前記不良画像であると判定された場合、前記血管指標値に対して指標値補正処理を行う指標値補正部を有することを特徴とする請求項記載のプロセッサ装置。 The processor apparatus according to claim 4 , wherein the post-determination processing unit includes an index value correction unit that performs an index value correction process on the blood vessel index value when it is determined that the image is a defective image. 前記画像信号取得部は、第1のタイミングで画像信号を取得し、前記第1のタイミングよりも前の第2のタイミングで画像信号を取得し、
前記指標値補正部は、前記指標値補正処理を、前記第2のタイミングの画像信号に基づいて行うことを特徴とする請求項11記載のプロセッサ装置。
The image signal acquisition unit acquires an image signal at a first timing, acquires an image signal at a second timing before the first timing,
12. The processor device according to claim 11, wherein the index value correction unit performs the index value correction processing based on the image signal at the second timing.
前記第1のタイミングの画像信号と前記第2のタイミングの画像信号との間の移動量を算出する移動量算出部を有し、
前記指標値補正部は、前記指標値補正処理を、前記移動量に基づいて行うことを特徴とする請求項12記載のプロセッサ装置。
A movement amount calculation unit for calculating a movement amount between the image signal at the first timing and the image signal at the second timing;
13. The processor device according to claim 12, wherein the index value correction unit performs the index value correction processing based on the movement amount.
前記移動量から、前記第1のタイミングの血管を前記第2のタイミングの血管の位置に合わせる血管位置補正部を有することを特徴とする請求項13記載のプロセッサ装置。 14. The processor device according to claim 13 , further comprising a blood vessel position correction unit that adjusts the blood vessel at the first timing to the position of the blood vessel at the second timing based on the movement amount. 前記画像生成部は、前記不良画像であると判定された場合、前記第2のタイミングの血管を、前記第1のタイミングの画像に対してオーバーラップさせた画像を生成することを特徴とする請求項14記載のプロセッサ装置。 The image generation unit generates an image in which the blood vessel at the second timing overlaps the image at the first timing when it is determined that the image is the defective image. Item 15. The processor device according to Item 14 . 前記血管指標値算出部は、前記第2のタイミングで取得した画像信号から抽出された血管に基づいて前記第2のタイミングの血管指標値を算出し、
前記画像生成部は、前記不良画像であると判定された場合、前記第2のタイミングの血管指標値に基づく情報を、前記第1のタイミングの画像に対してオーバーラップさせた画像を生成することを特徴とする請求項14または15記載のプロセッサ装置。
The blood vessel index value calculating unit calculates a blood vessel index value at the second timing based on a blood vessel extracted from the image signal acquired at the second timing;
When it is determined that the image is the defective image, the image generation unit generates an image in which information based on the blood vessel index value at the second timing is overlapped with the image at the first timing. The processor device according to claim 14 or 15,
前記画像生成部は、前記不良画像であると判定された場合に、前記血管に基づく情報、及び前記血管指標値に基づく情報を非表示とすることを特徴とする請求項4ないし16いずれか1項記載のプロセッサ装置。 The image generation unit, when the it is determined to be defective image, information based on the blood vessel, and any one of claims 4 to 16, characterized in that the hidden information based on the blood vessel index value 1 A processor device according to item. 前記画像生成部は、前記不良画像であると判定された場合に、前記画像信号に基づく画像に対して警告を表示することを特徴とする請求項4ないし17いずれか1項記載のプロセッサ装置。 18. The processor device according to claim 4 , wherein the image generation unit displays a warning for an image based on the image signal when it is determined that the image is a defective image. 画像信号取得部が、内視鏡によって観察対象を撮像して得られた画像信号を異なるタイミングで取得するステップと、
血管抽出部が、前記画像信号から血管を抽出して、血管画像信号を生成するステップと、
血管指標値算出部が、抽出された血管から、血管指標値を算出するステップと、
判定部が、前記血管指標値から、前記画像信号に基づく画像が鮮鋭度に関して不良画像であるか否かの判定を行うステップと、
判定後処理部が、前記判定の結果に基づく処理を、前記血管画像信号と前記血管指標値との少なくともいずれかに対して行うステップと
を備え
前記判定部は、前記血管指標値が一定値以上変化した場合に、前記不良画像であると判定することを特徴とする内視鏡用のプロセッサ装置の作動方法。
An image signal acquisition unit acquiring image signals obtained by imaging an observation target with an endoscope at different timings;
A blood vessel extraction unit extracting a blood vessel from the image signal to generate a blood vessel image signal;
A blood vessel index value calculating unit calculating a blood vessel index value from the extracted blood vessels;
A step of determining whether the image based on the image signal is a defective image with respect to sharpness from the blood vessel index value;
A step in which the post-determination processing unit performs processing based on the result of the determination for at least one of the blood vessel image signal and the blood vessel index value ;
Equipped with a,
The operation method of the processor device for an endoscope , wherein the determination unit determines that the image is a defective image when the blood vessel index value changes by a predetermined value or more .
JP2014202653A 2014-09-30 2014-09-30 Endoscope processor device and method of operating endoscope processor device Active JP6196599B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014202653A JP6196599B2 (en) 2014-09-30 2014-09-30 Endoscope processor device and method of operating endoscope processor device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014202653A JP6196599B2 (en) 2014-09-30 2014-09-30 Endoscope processor device and method of operating endoscope processor device

Publications (2)

Publication Number Publication Date
JP2016067781A JP2016067781A (en) 2016-05-09
JP6196599B2 true JP6196599B2 (en) 2017-09-13

Family

ID=55863382

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014202653A Active JP6196599B2 (en) 2014-09-30 2014-09-30 Endoscope processor device and method of operating endoscope processor device

Country Status (1)

Country Link
JP (1) JP6196599B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019123986A1 (en) * 2017-12-22 2019-06-27 富士フイルム株式会社 Medical image processing device and method, endoscope system, processor device, and diagnosis support device and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011110230A (en) * 2009-11-27 2011-06-09 Fujifilm Corp Fluorescent photographic apparatus
JP5562808B2 (en) * 2010-11-11 2014-07-30 オリンパス株式会社 Endoscope apparatus and program
JP5657375B2 (en) * 2010-12-24 2015-01-21 オリンパス株式会社 Endoscope apparatus and program

Also Published As

Publication number Publication date
JP2016067781A (en) 2016-05-09

Similar Documents

Publication Publication Date Title
JP6285383B2 (en) Image processing apparatus, endoscope system, operation method of image processing apparatus, and operation method of endoscope system
JP5992936B2 (en) Endoscope system, processor device for endoscope system, operation method of endoscope system, operation method of processor device for endoscope system
WO2018159363A1 (en) Endoscope system and method for operating same
JP5887367B2 (en) Processor device, endoscope system, and operation method of endoscope system
JP6243364B2 (en) Endoscope processor, operation method, and control program
JP6092792B2 (en) Endoscope system processor device, endoscope system, operating method of endoscope system processor device, operating method of endoscope system
JP5789280B2 (en) Processor device, endoscope system, and operation method of endoscope system
JP2015146924A (en) Endoscope system, processor device of endoscope system, operation method of endoscope system, and operation method of processor device
JP6210962B2 (en) Endoscope system, processor device, operation method of endoscope system, and operation method of processor device
JP6259747B2 (en) Processor device, endoscope system, operating method of processor device, and program
JP6054806B2 (en) Image processing apparatus and method for operating endoscope system
US20190246874A1 (en) Processor device, endoscope system, and method of operating processor device
JP6562554B2 (en) Endoscope system, processor device, and signal processing method for endoscope system
JP6085649B2 (en) Endoscope light source device and endoscope system
JP6085648B2 (en) Endoscope light source device and endoscope system
JP6017669B2 (en) Image processing apparatus and method for operating endoscope system
JP6129686B2 (en) Endoscope system, processor device, operation method, and table creation method
JP6616071B2 (en) Endoscope processor device, operation method of endoscope processor device, control program for endoscope
JP6254502B2 (en) Endoscope light source device and endoscope system
JP6214503B2 (en) Endoscope light source device and endoscope system
JP6243311B2 (en) Endoscope processor device, operation method of endoscope processor device, control program for endoscope
JP6285373B2 (en) Endoscope system, processor device, and operation method of endoscope system
JP6196599B2 (en) Endoscope processor device and method of operating endoscope processor device
WO2020217883A1 (en) Image processing device and method for operating same
JP2016067779A (en) Endoscope system, processor device, method for operating endoscope system, and method for operating processor device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160803

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170726

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170809

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170818

R150 Certificate of patent or registration of utility model

Ref document number: 6196599

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250