JP6647305B2 - 画像処理装置、画像処理方法、及び画像処理プログラム - Google Patents
画像処理装置、画像処理方法、及び画像処理プログラム Download PDFInfo
- Publication number
- JP6647305B2 JP6647305B2 JP2017535501A JP2017535501A JP6647305B2 JP 6647305 B2 JP6647305 B2 JP 6647305B2 JP 2017535501 A JP2017535501 A JP 2017535501A JP 2017535501 A JP2017535501 A JP 2017535501A JP 6647305 B2 JP6647305 B2 JP 6647305B2
- Authority
- JP
- Japan
- Prior art keywords
- boundary line
- image
- extracted
- image processing
- search range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 46
- 238000003672 processing method Methods 0.000 title claims description 16
- 238000000605 extraction Methods 0.000 claims description 48
- 238000000034 method Methods 0.000 claims description 27
- 239000000284 extract Substances 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 14
- 238000012937 correction Methods 0.000 claims description 11
- 238000011156 evaluation Methods 0.000 description 31
- 238000010586 diagram Methods 0.000 description 16
- 230000002207 retinal effect Effects 0.000 description 14
- 238000003384 imaging method Methods 0.000 description 9
- 239000012528 membrane Substances 0.000 description 8
- 238000012014 optical coherence tomography Methods 0.000 description 8
- 238000003708 edge detection Methods 0.000 description 7
- 210000003583 retinal pigment epithelium Anatomy 0.000 description 6
- 210000001519 tissue Anatomy 0.000 description 6
- 210000004126 nerve fiber Anatomy 0.000 description 5
- 108091008695 photoreceptors Proteins 0.000 description 4
- 208000003098 Ganglion Cysts Diseases 0.000 description 3
- 208000005400 Synovial Cyst Diseases 0.000 description 3
- 210000005013 brain tissue Anatomy 0.000 description 3
- 210000004027 cell Anatomy 0.000 description 3
- 230000004069 differentiation Effects 0.000 description 3
- 206010025421 Macule Diseases 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 210000004884 grey matter Anatomy 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 210000004885 white matter Anatomy 0.000 description 2
- 208000010412 Glaucoma Diseases 0.000 description 1
- 101100069498 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) MGE1 gene Proteins 0.000 description 1
- 206010047642 Vitiligo Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Ophthalmology & Optometry (AREA)
- Biomedical Technology (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Eye Examination Apparatus (AREA)
- Image Analysis (AREA)
Description
すなわち、抽出結果を基に探索範囲を限定して他の境界線抽出を行い、またその抽出結果を基に探索範囲を限定して他の境界線抽出を行い、更にその抽出結果を基に探索範囲を限定して他の境界線抽出を行うなど同様な処理を逐次的に繰り返して境界線を抽出することにより、いずれの抽出も探索範囲が限定されることから抽出処理を高速化でき、範囲変更の都度パラメータ(例えば存在確率、重み付け係数)を適切に設定しなおせるので抽出が容易になる。
また、先に抽出した境界線を用いて入力画像の層構造の湾曲を補正することにより、エッジおよび輝度勾配の方向が揃うので、境界線の抽出精度を向上させることができる。
さらに、本発明では、探索範囲を既に抽出済みの境界線の傾きに合わせて設定することにより、抽出済みの境界線と同様な曲線の境界線を高精度で抽出することが可能となり、また、探索範囲を既に抽出済みの画素から所定の間隔だけ隔てて設定することにより、抽出済みの境界線と交わらないような範囲で探索を行うことができる。従って、抽出した境界線同士が交差することを回避することができる。
このように、抽出済みの境界線を利用して探索範囲を適切に設定することにより、不明瞭な境界線、あるいは一部消失した境界線を、抽出済みの境界線と交わることなく抽出することが可能になる。
図1は、被検眼眼底の断層画像を取得して画像処理するシステム全体を示すブロック図である。断層像撮影装置10は、被検眼の眼底の断層像を撮影する装置(OCT:Optical Coherence Tomography)であり、例えばフーリエドメイン方式で動作する。断層像撮影装置10は公知であるので、その詳細な説明は省略するが、断層像撮影装置10には、低コヒーレンス光源が設けられ、低コヒーレンス光源からの光が参照光と信号光に分割される。信号光は、図2に図示したように、眼底E上で、例えばX、Y方向にラスタースキャンされる。眼底Eで走査され反射された信号光は、参照ミラーで反射した参照光と重畳され干渉光を発生し、該干渉光に基づいて眼底の深度方向(Z方向)の情報を示すOCT信号が発生する。
まず、図4のステップS1に示したように、網膜層の境界線を抽出しようとする断層画像BN(N=1、2、.....t)を記憶部23から読み出して表示部24に表示させ入力画像Bを選択する。この入力画像は、図2に示したt枚の断層画像BNのうち一枚、あるいは数枚、あるいは全部でもよく、または任意の画像処理を加えた後の画像であってもよい。複数枚の断層画像の境界線を抽出する場合には、いずれか一枚の断層画像を入力画像として選択する。ここでは、例えば、図2の眼底の黄斑部Rをスキャンする走査線ykで取得される断層画像Bkを記憶部23から読み出し入力画像Bとする。
CILM=EILM×HILM+WILM×GILM+QILM×B’
図4のステップS9で示したように、入力画像から複数の境界線を抽出する場合には、抽出済みの境界線を利用して他の境界線を効果的に抽出することができる。以下に、その実施形態を図9を参照して説明する。
画像処理部30には、探索範囲設定手段35が設けられており、この探索範囲設定手段35により、抽出済みの境界線を利用して境界線の探索範囲を動的に設定することができる。
上述したような処理を介して抽出された各境界線には、図12、図13に図示したように、その境界線上に制御点を設定することができる。
20 画像処理装置
21 制御部
22 断層画像形成部
23 記憶部
24 表示部
25 操作部
26 存在確率画像格納部
27 重み付け係数格納部
30 画像処理部
31 境界線候補画像作成手段
32 輝度値微分画像作成手段
33 評価得点画像作成手段
34 境界線抽出手段
35 探索範囲設定手段
36 制御点設定手段
Claims (11)
- 複数の層から構成される対象物体を撮影した画像を入力画像とし該入力画像から層の境界線を抽出する境界線抽出手段を備え、
前記境界線抽出手段が、前記対象物体の上端の境界線と下端の境界線とをまず抽出し、抽出した前記上端の境界線及び前記下端の境界線を用いて探索範囲を限定して他の境界線を抽出し、該他の境界線の抽出結果を用いて探索範囲を限定してまた他の境界線を抽出し、以降同様な処理を逐次的に繰り返して境界線を抽出することを特徴とする画像処理装置。 - 先に抽出した境界線の湾曲に合わせて前記入力画像を補正する湾曲補正手段を更に備えたことを特徴とする、請求項1に記載の画像処理装置。
- 複数の層から構成される対象物体を撮影した画像を入力画像とし該入力画像から層の境界線を抽出する境界線抽出手段と、
前記境界線抽出手段によって抽出済みの境界線を利用して他の境界線の探索範囲を動的に設定する探索範囲設定手段と、を備えたことを特徴とする画像処理装置。 - 前記探索範囲設定手段が、前記抽出済みの境界線の傾きに応じて前記他の境界線の探索範囲を動的に設定することを特徴とする、請求項3に記載の画像処理装置。
- 前記探索範囲設定手段が、前記他の境界線の探索範囲を前記抽出済みの境界線から所定の間隔だけ隔てて設定することを特徴とする、請求項3又は4に記載の画像処理装置。
- 複数の層から構成される対象物体を撮影した画像を入力画像とし該入力画像から層の境界線を抽出する画像処理方法であって、
前記対象物体の上端の境界線と下端の境界線とをまず抽出し、
抽出した前記上端の境界線及び前記下端の境界線の抽出結果を用いて探索範囲を限定して他の境界線を抽出し、
該他の境界線の抽出結果を用いて更に探索範囲を限定してまた他の境界線を抽出し、以降同様な処理を逐次的に繰り返して境界線を抽出することを特徴とする画像処理方法。 - 先に抽出した境界線の湾曲に合わせて前記入力画像を補正したのちに他の境界線を抽出することを特徴とする、請求項6に記載の画像処理方法。
- 複数の層から構成される対象物体を撮影した画像を入力画像とし該入力画像から層の境界線を抽出する画像処理方法であって、
抽出済みの境界線を利用して他の境界線の探索範囲を動的に設定することを特徴とする画像処理方法。 - 前記抽出済みの境界線の傾きに応じて前記他の境界線の探索範囲を動的に設定することを特徴とする、請求項8に記載の画像処理方法。
- 前記他の境界線の探索範囲を前記抽出済みの境界線から所定の間隔だけ隔てて設定することを特徴とする、請求項8又は9に記載の画像処理方法。
- コンピュータを請求項1から5のいずれか1項に記載の画像処理装置として機能させるための、あるいはコンピュータに請求項6から10のいずれか1項に記載の画像処理方法を実行させるための画像処理プログラム。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015162125 | 2015-08-19 | ||
JP2015162126 | 2015-08-19 | ||
JP2015162125 | 2015-08-19 | ||
JP2015162126 | 2015-08-19 | ||
PCT/JP2016/073497 WO2017030057A1 (ja) | 2015-08-19 | 2016-08-09 | 画像処理装置、画像処理方法、及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017030057A1 JPWO2017030057A1 (ja) | 2018-06-07 |
JP6647305B2 true JP6647305B2 (ja) | 2020-02-14 |
Family
ID=58051739
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017535501A Active JP6647305B2 (ja) | 2015-08-19 | 2016-08-09 | 画像処理装置、画像処理方法、及び画像処理プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20180240240A1 (ja) |
EP (1) | EP3338620A4 (ja) |
JP (1) | JP6647305B2 (ja) |
WO (1) | WO2017030057A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6996200B2 (ja) * | 2017-09-29 | 2022-01-17 | 富士通株式会社 | 画像処理方法、画像処理装置、および画像処理プログラム |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4909377B2 (ja) * | 2009-06-02 | 2012-04-04 | キヤノン株式会社 | 画像処理装置及びその制御方法、コンピュータプログラム |
JP4909378B2 (ja) * | 2009-06-02 | 2012-04-04 | キヤノン株式会社 | 画像処理装置及びその制御方法、コンピュータプログラム |
US8811745B2 (en) * | 2010-01-20 | 2014-08-19 | Duke University | Segmentation and identification of layered structures in images |
JP5645432B2 (ja) * | 2010-03-19 | 2014-12-24 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法、及び画像処理をコンピュータに実行させるためのプログラム |
JP5631032B2 (ja) * | 2010-03-19 | 2014-11-26 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法、及び画像処理をコンピュータに実行させるためのプログラム |
JP5631339B2 (ja) * | 2012-01-06 | 2014-11-26 | キヤノン株式会社 | 画像処理装置、画像処理方法、眼科装置、眼科システム及びコンピュータプログラム |
JP6099903B2 (ja) * | 2012-08-30 | 2017-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
-
2016
- 2016-08-09 JP JP2017535501A patent/JP6647305B2/ja active Active
- 2016-08-09 WO PCT/JP2016/073497 patent/WO2017030057A1/ja active Application Filing
- 2016-08-09 EP EP16837047.6A patent/EP3338620A4/en not_active Withdrawn
- 2016-08-09 US US15/752,967 patent/US20180240240A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US20180240240A1 (en) | 2018-08-23 |
EP3338620A1 (en) | 2018-06-27 |
EP3338620A4 (en) | 2019-02-13 |
JPWO2017030057A1 (ja) | 2018-06-07 |
WO2017030057A1 (ja) | 2017-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6644075B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
US8699774B2 (en) | Image processing apparatus, control method thereof, and program | |
KR101373935B1 (ko) | 안과 장치, 안과 장치의 제어 방법 및 컴퓨터 판독가능 저장 매체 | |
JP5955163B2 (ja) | 画像処理装置および画像処理方法 | |
US20180025495A1 (en) | Systems and methods of choroidal neovascularization detection using optical coherence tomography angiography | |
JP5952564B2 (ja) | 画像処理装置、画像処理方法 | |
US20150371400A1 (en) | Segmentation and identification of closed-contour features in images using graph theory and quasi-polar transform | |
Manakov et al. | Noise as domain shift: Denoising medical images by unpaired image translation | |
JP2013153882A (ja) | 画像処理システム、処理方法及びプログラム | |
JP2014128367A (ja) | 画像処理装置 | |
WO2017030058A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP6647305B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP7284103B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
CN110033496B (zh) | 时间序列三维视网膜sd-oct图像的运动伪差校正方法 | |
JP2017512627A (ja) | 生物組織の3次元ボリュームを表す画像データを分析する方法 | |
JP5777307B2 (ja) | 画像処理装置、画像処理方法及びプログラム。 | |
CN108269258B (zh) | 从oct角膜图像分割角膜结构的方法和系统 | |
Neetha et al. | A two stage contour evolution approach for the measurement of choroid thickness in EDI-OCT images | |
JP2014014725A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
Gende et al. | A new generative approach for optical coherence tomography data scarcity: unpaired mutual conversion between scanning presets | |
JP7281872B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
WO2015129718A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
Wang | Estimation of papilledema severity using spectral-domain optical coherence tomography | |
JP2021058285A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
WO2022112546A1 (en) | Quality maps for optical coherence tomography angiography |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180223 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190709 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191217 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200114 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6647305 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |