JP6879520B2 - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP6879520B2 JP6879520B2 JP2019155486A JP2019155486A JP6879520B2 JP 6879520 B2 JP6879520 B2 JP 6879520B2 JP 2019155486 A JP2019155486 A JP 2019155486A JP 2019155486 A JP2019155486 A JP 2019155486A JP 6879520 B2 JP6879520 B2 JP 6879520B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image processing
- analysis
- blood vessel
- texture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Endoscopes (AREA)
- Image Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Description
病変表面が撮像されている撮像画像の全体の濃淡について、画像フィルタ及びしきい値処理による二値化の少なくともいずれかを用いて複数の解析画像を作成し、作成した解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析機能と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類機能と、
を備える。
画像処理装置が、
病変表面が撮像されている撮像画像の全体の濃淡について、画像フィルタ及びしきい値処理による二値化の少なくともいずれかを用いて複数の解析画像を作成し、作成した解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析手順と、
前記複数のテクスチャ特徴量の組合せに基づいて、病理診断に対応した分類を行う分類手順と、
を行う。
前記解析手順において、さらに血管領域を抽出し、抽出した血管領域を用いて血管特徴量を求め、
前記分類手順において、前記テクスチャ解析の結果及び前記血管特徴量を用いて、病理診断に対応した分類を行ってもよい。
テクスチャ解析手順S102では、CPU11が、撮像画像の全体の濃淡についてテクスチャ解析を行う。
血管特徴量算出手順S103では、CPU11が、血管領域を抽出し、抽出した血管領域を用いて血管特徴量を求める。
分類手順S104では、CPU11が、テクスチャ解析の結果及び血管特徴量を用いて、病理診断に対応した分類を行う。
テクスチャ解析手順S102では、解析部111が、撮像画像について、縮小(S201)、グレースケール化(S202)、ノイズ除去(S203)、局所コントラスト正規化(S204)、濃淡構造解析(S205)、テクスチャ特徴量算出(S206)を行う。
撮像画像がカラー画像である場合、ステップS202を実行する。ステップS202では、カラー画像をグレースケール画像に変換する。図4に、グレースケール化後の画像の一例を示す。
ステップS203では、撮像画像に含まれるノイズを除去する。ノイズの除去方法は任意であり、例えば、メディアンフィルタを用いることができる。図5に、ノイズ除去後の画像の一例を示す。
ステップS204では、光源ムラを除去するため、画像全体のコントラストを均一にする局所コントラスト正規化を行う。図6に、局所コントラスト正規化後の画像の一例を示す。
ステップS312では、画像領域を細線化し芯線画素を抽出する。これにより、図21のような、細線化画像が得られる。
ステップS313では、血管領域画像を距離変換し、距離画像を作成する。距離変換は、例えば、血管領域に含まれる各画素について、最も近い背景画素への距離、すなわち血管領域以外の画素への距離を求め、この距離を値として持つ画像へと変換する。これにより、図22のような、距離画像が得られる。
ステップS315では、最大面積領域抽出画像及び細線化画像を重ね合わせた最大面積領域の芯線画素上に配置されている距離画像の最大距離値と最小距離値を用いて、最大血管の最小最大径比を求める。
ステップS316では、血管領域画像に含まれる血管領域の面積を求め、全体画像中に占める血管領域の割合を求める。
111:解析部
112:分類部
12:記憶部
91:撮像装置
92:画像処理装置
93:表示装置
Claims (13)
- 380倍以上の倍率で病変表面が撮像されている撮像画像の全体の濃淡について、画像全体のコントラストを均一にする局所コントラスト正規化を行い、画像フィルタ及びしきい値処理による二値化の少なくともいずれかを用いて複数の解析画像を作成し、作成した解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析機能と、
前記複数のテクスチャ特徴量の組合せに基づいて、非腫瘍、腺腫及び癌の識別を行う識別機能と、
を備える画像処理装置。 - 前記画像フィルタは、任意の階数の局所濃淡構造解析、一様重みフィルタ、ソーベルフィルタ、プレウィットフィルタ、ラプラシアンフィルタ、ガウシアンフィルタ及びメディアンフィルタの少なくともいずれかを含む、
請求項1に記載の画像処理装置。 - 前記テクスチャ特徴量は、Haralicテクスチャ特徴量を含み、
前記複数のテクスチャ特徴量の組合せは、Haralicの1から13までの少なくともいずれかの特徴量の組合せを含む、
請求項1又は2に記載の画像処理装置。 - 前記テクスチャ特徴量は、事前にパラメータ調整されたニューラルネットワークの出力を含む、
請求項1から3のいずれかに記載の画像処理装置。 - 請求項1から4のいずれかに記載の画像処理装置と、
前記画像処理装置における識別結果及び前記撮像画像を表示する表示装置と、
を備える診断支援システム。 - 前記表示装置は、前記画像処理装置における識別結果及び前記撮像画像を同一画面に表示する、
請求項5に記載の診断支援システム。 - 前記画像処理装置は、前記撮像画像を取得すると、前記識別を撮像画像ごとに自動で行い、識別結果及び前記撮像画像を前記表示装置に表示する、
請求項5又は6に記載の診断支援システム。 - 前記画像処理装置は、前記識別結果の確率を更に求め、
前記表示装置は、前記識別結果の確率を更に表示する、
請求項5から7のいずれかに記載の診断支援システム。 - 前記表示装置は、前記識別結果、前記識別結果の確率及び前記撮像画像を同一画面に表示する、
請求項8に記載の診断支援システム。 - 前記画像処理装置は、前記撮像画像に含まれる血管領域を更に求め、
前記表示装置は、前記血管領域の画像を更に表示し、
前記画像処理装置は、
血管領域を用いて血管特徴量を求め、
前記複数のテクスチャ特徴量の組合せ及び血管特徴量を用いて、非腫瘍、腺腫及び癌の識別を行う
請求項5から9のいずれかに記載の診断支援システム。 - 前記表示装置は、前記識別結果、前記撮像画像及び前記血管領域の画像を同一画面に表示する、
請求項10に記載の診断支援システム。 - 画像処理装置が、
380倍以上の倍率で病変表面が撮像されている撮像画像の全体の濃淡について、画像全体のコントラストを均一にする局所コントラスト正規化を行い、画像フィルタ及びしきい値処理による二値化の少なくともいずれかを用いて複数の解析画像を作成し、作成した解析画像ごとにテクスチャ解析を行うことで複数のテクスチャ特徴量を求める解析手順と、
前記複数のテクスチャ特徴量の組合せに基づいて、非腫瘍、腺腫及び癌の識別を行う識別手順と、
を行う画像処理方法。 - コンピュータを、請求項1から4のいずれかに記載の画像処理装置に備わる各機能部として機能させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019155486A JP6879520B2 (ja) | 2019-08-28 | 2019-08-28 | 画像処理装置及び画像処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019155486A JP6879520B2 (ja) | 2019-08-28 | 2019-08-28 | 画像処理装置及び画像処理方法 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015200803A Division JP6580446B2 (ja) | 2015-10-09 | 2015-10-09 | 画像処理装置及び画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019213929A JP2019213929A (ja) | 2019-12-19 |
| JP6879520B2 true JP6879520B2 (ja) | 2021-06-02 |
Family
ID=68918218
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019155486A Active JP6879520B2 (ja) | 2019-08-28 | 2019-08-28 | 画像処理装置及び画像処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6879520B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102611121B1 (ko) * | 2021-03-22 | 2023-12-07 | 재단법인대구경북과학기술원 | 이미지 분류 모델 생성 방법 및 장치 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5800595B2 (ja) * | 2010-08-27 | 2015-10-28 | キヤノン株式会社 | 医療診断支援装置、医療診断支援システム、医療診断支援の制御方法、及びプログラム |
| WO2013140667A1 (ja) * | 2012-03-21 | 2013-09-26 | オリンパスメディカルシステムズ株式会社 | 画像処理装置 |
| JP6112859B2 (ja) * | 2012-12-26 | 2017-04-12 | オリンパス株式会社 | 医用画像処理装置 |
| JP6247316B2 (ja) * | 2013-01-30 | 2017-12-13 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | ハイパースペクトルカメラガイドプローブを持つイメージングシステム |
| JP6196922B2 (ja) * | 2014-03-17 | 2017-09-13 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
-
2019
- 2019-08-28 JP JP2019155486A patent/JP6879520B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2019213929A (ja) | 2019-12-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6580446B2 (ja) | 画像処理装置及び画像処理方法 | |
| US10957043B2 (en) | AI systems for detecting and sizing lesions | |
| JP4409166B2 (ja) | 画像処理装置 | |
| US10482313B2 (en) | Method and system for classification of endoscopic images using deep decision networks | |
| Naeem et al. | DVFNet: A deep feature fusion-based model for the multiclassification of skin cancer utilizing dermoscopy images | |
| Park et al. | A colon video analysis framework for polyp detection | |
| Liedlgruber et al. | Computer-aided decision support systems for endoscopy in the gastrointestinal tract: a review | |
| Huang et al. | A robust hair segmentation and removal approach for clinical images of skin lesions | |
| Barbalata et al. | Laryngeal tumor detection and classification in endoscopic video | |
| KR20170128454A (ko) | 세포 이미지들 및 비디오들의 디컨볼루셔널 네트워크 기반 분류를 위한 시스템들 및 방법들 | |
| Murugesan et al. | Colon cancer stage detection in colonoscopy images using YOLOv3 MSF deep learning architecture | |
| CN104869884B (zh) | 医用图像处理装置以及医用图像处理方法 | |
| WO2012114600A1 (ja) | 医用画像処理装置及び医用画像処理方法 | |
| Perperidis et al. | Automated detection of uninformative frames in pulmonary optical endomicroscopy | |
| JP6059271B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP6824868B2 (ja) | 画像解析装置及び画像解析方法 | |
| JP6879520B2 (ja) | 画像処理装置及び画像処理方法 | |
| WO2017149310A1 (en) | Frame selection in medical image data | |
| JP6710853B2 (ja) | プローブ型共焦点レーザー顕微内視鏡画像診断支援装置 | |
| Sobhi et al. | Extraction of Laryngeal Cancer Informative Frames from Narrow Band Endoscopic Videos | |
| Vats et al. | SURF-SVM based identification and classification of gastrointestinal diseases in wireless capsule endoscopy | |
| Ciobanu et al. | Steps towards computer-assisted classification of colonoscopy video frames | |
| Xu et al. | Self-supervised approach for a fully assistive esophageal surveillance: Quality, anatomy and neoplasia guidance | |
| Liedlgruber et al. | A summary of research targeted at computer-aided decision support in endoscopy of the gastrointestinal tract | |
| Hébert et al. | Detection of pathological condition in distal lung images |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190926 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190926 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191008 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201020 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201214 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210323 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210421 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6879520 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |