JP6580446B2 - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP6580446B2 JP6580446B2 JP2015200803A JP2015200803A JP6580446B2 JP 6580446 B2 JP6580446 B2 JP 6580446B2 JP 2015200803 A JP2015200803 A JP 2015200803A JP 2015200803 A JP2015200803 A JP 2015200803A JP 6580446 B2 JP6580446 B2 JP 6580446B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- blood vessel
- analysis
- image processing
- procedure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 22
- 238000003672 processing method Methods 0.000 title claims description 15
- 210000004204 blood vessel Anatomy 0.000 claims description 79
- 238000004458 analytical method Methods 0.000 claims description 63
- 238000000034 method Methods 0.000 claims description 44
- 238000010827 pathological analysis Methods 0.000 claims description 15
- 238000004364 calculation method Methods 0.000 claims description 14
- 230000003902 lesion Effects 0.000 claims description 8
- 238000012935 Averaging Methods 0.000 claims description 3
- 238000009499 grossing Methods 0.000 claims description 3
- 206010028980 Neoplasm Diseases 0.000 description 13
- 238000003384 imaging method Methods 0.000 description 11
- 238000003745 diagnosis Methods 0.000 description 9
- 208000003200 Adenoma Diseases 0.000 description 6
- 238000000605 extraction Methods 0.000 description 6
- 206010001233 Adenoma benign Diseases 0.000 description 5
- 201000011510 cancer Diseases 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 210000001035 gastrointestinal tract Anatomy 0.000 description 4
- 238000010606 normalization Methods 0.000 description 4
- 238000012706 support-vector machine Methods 0.000 description 4
- 210000001519 tissue Anatomy 0.000 description 4
- 208000027121 wild type ATTR amyloidosis Diseases 0.000 description 4
- 238000001839 endoscopy Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 241001270131 Agaricus moelleri Species 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 210000003855 cell nucleus Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000003331 infrared imaging Methods 0.000 description 2
- 102100032723 Structural maintenance of chromosomes protein 3 Human genes 0.000 description 1
- 101710117918 Structural maintenance of chromosomes protein 3 Proteins 0.000 description 1
- 238000000701 chemical imaging Methods 0.000 description 1
- 238000007621 cluster analysis Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 210000000981 epithelium Anatomy 0.000 description 1
- 210000003238 esophagus Anatomy 0.000 description 1
- 210000002429 large intestine Anatomy 0.000 description 1
- 238000012417 linear regression Methods 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 238000001000 micrograph Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004400 mucous membrane Anatomy 0.000 description 1
- 230000001575 pathological effect Effects 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 210000000813 small intestine Anatomy 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Landscapes
- Endoscopes (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Description
病変表面が撮像されている撮像画像の全体の濃淡について2階テンソル以上の高階解析画像を作成し、作成した高階解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析機能と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類機能と、
を備える。
画像処理装置が、
病変表面が撮像されている撮像画像の全体の濃淡について2階テンソル以上の高階解析画像を作成し、作成した高階解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析手順と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類手順と、
を行う。
前記撮像画像を用いてマルチスケール線状度画像を生成し、前記マルチスケール線状度画像のなかから線状度が予め定められた第1の閾値以上の領域を血管候補領域として抽出し、前記マルチスケール線状度画像のなかから線状度が前記第1の閾値よりも小さな第2の閾値以上の領域でありかつ前記血管候補領域と重複する部分を持つ領域を抽出して前記血管候補領域へ加えて血管候補領域画像を生成し、前記血管候補領域画像から血管領域を抽出して撮像画像の全体の血管特徴量を求め、
前記分類手順において、前記複数のテクスチャ特徴量の組合せ及び前記血管特徴量に基づいて、病理診断に対応した分類を行ってもよい。
マルチスケール線状度画像を生成するに際し、平滑化に用いるガウシアンフィルタの標準偏差として、複数の値を用いてもよい。
前記高階解析画像における複数の方向に対してテクスチャ特徴量の算出を行い、前記複数の方向のテクスチャ特徴量を平均化することで、前記高階解析画像のテクスチャ特徴量の算出を行ってもよい。
テクスチャ解析手順S102では、CPU11が、撮像画像の全体の濃淡についてテクスチャ解析を行う。
血管特徴量算出手順S103では、CPU11が、血管領域を抽出し、抽出した血管領域を用いて血管特徴量を求める。
分類手順S104では、CPU11が、テクスチャ解析の結果及び血管特徴量を用いて、病理診断に対応した分類を行う。
テクスチャ解析手順S102では、解析部111が、撮像画像について、縮小(S201)、グレースケール化(S202)、ノイズ除去(S203)、局所コントラスト正規化(S204)、濃淡構造解析(S205)、テクスチャ特徴量算出(S206)を行う。
撮像画像がカラー画像である場合、ステップS202を実行する。ステップS202では、カラー画像をグレースケール画像に変換する。図4に、グレースケール化後の画像の一例を示す。
ステップS203では、撮像画像に含まれるノイズを除去する。ノイズの除去方法は任意であり、例えば、メディアンフィルタを用いることができる。図5に、ノイズ除去後の画像の一例を示す。
ステップS204では、光源ムラを除去するため、画像全体のコントラストを均一にする局所コントラスト正規化を行う。図6に、局所コントラスト正規化後の画像の一例を示す。
ステップS312では、画像領域を細線化し芯線画素を抽出する。これにより、図21のような、細線化画像が得られる。
ステップS313では、血管領域画像を距離変換し、距離画像を作成する。距離変換は、例えば、血管領域に含まれる各画素について、最も近い背景画素への距離、すなわち血管領域以外の画素への距離を求め、この距離を値として持つ画像へと変換する。これにより、図22のような、距離画像が得られる。
ステップS315では、最大面積領域抽出画像及び細線化画像を重ね合わせた最大面積領域の芯線画素上に配置されている距離画像の最大距離値と最小距離値を用いて、最大血管の最小最大径比を求める。
ステップS316では、血管領域画像に含まれる血管領域の面積を求め、全体画像中に占める血管領域の割合を求める。
111:解析部
112:分類部
12:記憶部
91:撮像装置
92:画像処理装置
93:表示装置
Claims (6)
- 病変表面が撮像されている撮像画像の全体の濃淡について2階テンソル以上の高階解析画像を作成し、作成した高階解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析機能と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類機能と、
を備える画像処理装置。 - 画像処理装置が、
病変表面が撮像されている撮像画像の全体の濃淡について2階テンソル以上の高階解析画像を作成し、作成した高階解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析手順と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類手順と、
を行う画像処理方法。 - 前記解析手順において、前記撮像画像を用いてマルチスケール線状度画像を生成し、前記マルチスケール線状度画像のなかから線状度が予め定められた第1の閾値以上の領域を血管候補領域として抽出し、前記マルチスケール線状度画像のなかから線状度が前記第1の閾値よりも小さな第2の閾値以上の領域でありかつ前記血管候補領域と重複する部分を持つ領域を抽出して前記血管候補領域へ加えて血管候補領域画像を生成し、前記血管候補領域画像から血管領域を抽出して撮像画像の全体の血管特徴量を求め、
前記分類手順において、前記複数のテクスチャ特徴量の組合せ及び前記血管特徴量に基づいて、病理診断に対応した分類を行う、
請求項2に記載の画像処理方法。 - 前記解析手順において、マルチスケール線状度画像を生成するに際し、平滑化に用いるガウシアンフィルタの標準偏差として、複数の値を用いる、
請求項3に記載の画像処理方法。 - 前記解析手順において、前記高階解析画像における複数の方向に対してテクスチャ特徴量の算出を行い、前記複数の方向のテクスチャ特徴量を平均化することで、前記高階解析画像のテクスチャ特徴量の算出を行う、
請求項2から4のいずれかに記載の画像処理方法。 - コンピュータに、請求項2から5のいずれかに記載の各手順を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015200803A JP6580446B2 (ja) | 2015-10-09 | 2015-10-09 | 画像処理装置及び画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015200803A JP6580446B2 (ja) | 2015-10-09 | 2015-10-09 | 画像処理装置及び画像処理方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019155486A Division JP6879520B2 (ja) | 2019-08-28 | 2019-08-28 | 画像処理装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017070609A JP2017070609A (ja) | 2017-04-13 |
JP6580446B2 true JP6580446B2 (ja) | 2019-09-25 |
Family
ID=58539401
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015200803A Active JP6580446B2 (ja) | 2015-10-09 | 2015-10-09 | 画像処理装置及び画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6580446B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6824868B2 (ja) * | 2017-12-22 | 2021-02-03 | サイバネットシステム株式会社 | 画像解析装置及び画像解析方法 |
ES2992946T3 (en) | 2018-07-09 | 2024-12-20 | Fujifilm Corp | Medical image processing device, medical image processing system, medical image processing method, and program |
WO2020084651A1 (ja) * | 2018-10-22 | 2020-04-30 | オリンパス株式会社 | 画像処理装置、画像処理方法、内視鏡システムおよび内視鏡観察方法 |
JP7159025B2 (ja) * | 2018-11-30 | 2022-10-24 | 富士フイルムヘルスケア株式会社 | 診断装置及び診断方法 |
JP6877486B2 (ja) | 2018-12-04 | 2021-05-26 | Hoya株式会社 | 情報処理装置、内視鏡用プロセッサ、情報処理方法およびプログラム |
CN115243597A (zh) * | 2020-03-10 | 2022-10-25 | 奥林巴斯株式会社 | 内窥镜系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4496943B2 (ja) * | 2004-11-30 | 2010-07-07 | 日本電気株式会社 | 病理診断支援装置、病理診断支援プログラム、病理診断支援装置の作動方法、及び病理診断支援システム |
ATE472141T1 (de) * | 2006-08-21 | 2010-07-15 | Sti Medical Systems Llc | Computergestützte analyse mit hilfe von videodaten aus endoskopen |
JP5581237B2 (ja) * | 2011-01-24 | 2014-08-27 | Hoya株式会社 | 画像処理装置、電子内視鏡用プロセッサ装置、画像処理装置の作動方法および画像処理用コンピュータプログラム |
JP5444511B1 (ja) * | 2012-03-21 | 2014-03-19 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
JP6112859B2 (ja) * | 2012-12-26 | 2017-04-12 | オリンパス株式会社 | 医用画像処理装置 |
JP6059271B2 (ja) * | 2015-02-26 | 2017-01-11 | サイバネットシステム株式会社 | 画像処理装置及び画像処理方法 |
-
2015
- 2015-10-09 JP JP2015200803A patent/JP6580446B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017070609A (ja) | 2017-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113573654B (zh) | 用于检测并测定病灶尺寸的ai系统、方法和存储介质 | |
Trajanovski et al. | Tongue tumor detection in hyperspectral images using deep learning semantic segmentation | |
JP6580446B2 (ja) | 画像処理装置及び画像処理方法 | |
JP4409166B2 (ja) | 画像処理装置 | |
Herrera et al. | Development of a Multispectral Gastroendoscope to Improve the Detection of Precancerous Lesions in Digestive Gastroendoscopy | |
Barbalata et al. | Laryngeal tumor detection and classification in endoscopic video | |
EP3646240A1 (en) | System, method, and computer-accessible medium for virtual pancreatography | |
JP6405138B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP2018514844A (ja) | 細胞画像および映像の深層畳み込みネットワークベースの分類のためのシステムおよび方法 | |
CN102376092B (zh) | 图像处理装置以及图像处理方法 | |
WO2015042421A1 (en) | Biopsy-free detection and staging of cancer using a virtual staging score | |
Naeem et al. | DVFNet: A deep feature fusion-based model for the multiclassification of skin cancer utilizing dermoscopy images | |
Domingues et al. | Computer vision in esophageal cancer: a literature review | |
JP6059271B2 (ja) | 画像処理装置及び画像処理方法 | |
Perperidis et al. | Automated detection of uninformative frames in pulmonary optical endomicroscopy | |
AU2021425940A1 (en) | System and method of using right and left eardrum otoscopy images for automated otoscopy image analysis to diagnose ear pathology | |
Sharma et al. | Two Stage Classification with CNN for Colorectal Cancer Detection. | |
Turkmen et al. | Advanced computing solutions for analysis of laryngeal disorders | |
Jiang et al. | Toward real-time quantification of fluorescence molecular probes using target/background ratio for guiding biopsy and endoscopic therapy of esophageal neoplasia | |
Ghatwary et al. | In-vivo Barrett’s esophagus digital pathology stage classification through feature enhancement of confocal laser endomicroscopy | |
JPWO2017086433A1 (ja) | 医用画像処理方法及び装置及びシステム及びプログラム | |
Wu et al. | Artificial intelligence in COPD CT images: identification, staging, and quantitation | |
JP6879520B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2015111308A1 (ja) | 3次元医用画像表示制御装置およびその作動方法並びに3次元医用画像表示制御プログラム | |
Jütte et al. | Integrating generative AI with ABCDE rule analysis for enhanced skin cancer diagnosis, dermatologist training and patient education |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180622 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20180622 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20180822 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20180914 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181002 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190108 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190304 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190508 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190730 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190828 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6580446 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |