JP6594033B2 - 画像処理装置、画像処理方法及びプログラム - Google Patents
画像処理装置、画像処理方法及びプログラム Download PDFInfo
- Publication number
- JP6594033B2 JP6594033B2 JP2015099470A JP2015099470A JP6594033B2 JP 6594033 B2 JP6594033 B2 JP 6594033B2 JP 2015099470 A JP2015099470 A JP 2015099470A JP 2015099470 A JP2015099470 A JP 2015099470A JP 6594033 B2 JP6594033 B2 JP 6594033B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- finding
- findings
- tomographic
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 206
- 238000003672 processing method Methods 0.000 title claims description 3
- 238000003745 diagnosis Methods 0.000 claims description 122
- 238000000034 method Methods 0.000 claims description 67
- 230000002159 abnormal effect Effects 0.000 claims description 66
- 201000010099 disease Diseases 0.000 claims description 28
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 28
- 238000001514 detection method Methods 0.000 claims description 27
- 210000003583 retinal pigment epithelium Anatomy 0.000 claims description 25
- 238000012937 correction Methods 0.000 claims description 18
- 210000001525 retina Anatomy 0.000 claims description 16
- 238000012916 structural analysis Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 10
- 239000012528 membrane Substances 0.000 claims description 10
- 238000005259 measurement Methods 0.000 claims description 9
- 210000004126 nerve fiber Anatomy 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 7
- 108091008695 photoreceptors Proteins 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 description 36
- 238000012014 optical coherence tomography Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 29
- 239000013598 vector Substances 0.000 description 25
- 238000003384 imaging method Methods 0.000 description 22
- 206010011732 Cyst Diseases 0.000 description 21
- 208000031513 cyst Diseases 0.000 description 21
- 230000002207 retinal effect Effects 0.000 description 21
- 208000000318 vitreous detachment Diseases 0.000 description 21
- 210000003733 optic disk Anatomy 0.000 description 19
- 238000010586 diagram Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 16
- 239000000835 fiber Substances 0.000 description 14
- 238000012986 modification Methods 0.000 description 13
- 230000004048 modification Effects 0.000 description 13
- 238000010079 rubber tapping Methods 0.000 description 13
- 239000003550 marker Substances 0.000 description 11
- 208000002367 Retinal Perforations Diseases 0.000 description 10
- 208000029233 macular holes Diseases 0.000 description 10
- 238000012935 Averaging Methods 0.000 description 8
- 206010025421 Macule Diseases 0.000 description 8
- 210000004127 vitreous body Anatomy 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000003902 lesion Effects 0.000 description 7
- 206010047642 Vitiligo Diseases 0.000 description 6
- 210000004379 membrane Anatomy 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 238000010191 image analysis Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 208000035725 Macular cyst Diseases 0.000 description 3
- 241000270295 Serpentes Species 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 3
- 238000009795 derivation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 239000011148 porous material Substances 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000002405 diagnostic procedure Methods 0.000 description 2
- 210000005081 epithelial layer Anatomy 0.000 description 2
- 238000004299 exfoliation Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 208000038015 macular disease Diseases 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000000790 retinal pigment Substances 0.000 description 2
- 201000007737 Retinal degeneration Diseases 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 210000003888 boundary cell Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 206010012601 diabetes mellitus Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000000981 epithelium Anatomy 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000008722 morphological abnormality Effects 0.000 description 1
- 230000006740 morphological transformation Effects 0.000 description 1
- 210000002445 nipple Anatomy 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000000608 photoreceptor cell Anatomy 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000004268 retinal thickening Effects 0.000 description 1
- 208000004644 retinal vein occlusion Diseases 0.000 description 1
- 210000003786 sclera Anatomy 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000000391 smoking effect Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 230000004382 visual function Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0033—Operational features thereof characterised by user input arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
- A61B3/0058—Operational features thereof characterised by display arrangements for multiple images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
- A61B3/1225—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Ophthalmology & Optometry (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Physiology (AREA)
- Psychiatry (AREA)
- Quality & Reliability (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Eye Examination Apparatus (AREA)
Description
前記取得手段により取得した複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出する検出手段と、
前記検出手段により検出された異常部位の所見を文書或いは単語として前記断層画像および前記眼底画像に重畳して表示手段に表示させる表示制御手段と、を備え、
前記表示制御手段は、前記複数の断層画像のうち異なる断層画像それぞれから前記検出手段により検出された異常部位に対応する所見が同一の所見であり、且つ、前記異なる断層画像から検出された異常部位間の距離が閾値未満の場合、前記同一の所見を1つの所見として前記眼底画像上に表示させる。
実施形態1における診断支援装置(画像処理装置)は、診断の対象となる医用画像を取得し、取得した医用画像の画像処理結果を用いて医用画像上に支援情報を提示することにより当該医用画像に関する診断支援を行う。
実施形態1では、診断の対象となる医用画像を取得し、画像処理結果を用いて医用画像上にCAD所見等の支援情報を提示するとともに、画像処理の解析画像や解析データを提示した。本実施形態では、医用画像上に支援情報を提示するとともに、類似症例(類似画像)の結果を提示する場合について説明をする。
上記の実施形態では、所見を検索キーとして、所見の一致する類似症例を検索していた。しかし、類似症例検索の方法はこれに限らない。例えば、画像特徴量を基に類似症例を検索するようにしてもよい。この処理について、図12のフローチャートを用いて説明をする。図12は図10のフローチャートのステップS10060の処理を詳細化したものである。
この類似度は1に近いほど二つのベクトルが類似していることを示し、0に近ければ類似していないことを示す。
実施形態2では、ステップS3060において、検索部914は、ステップS3040で該当すると判定した所見の候補を検索キーとして、検索キーが完全一致する画像(症例)のみをデータベース300から取得していた。しかし、検索キーが部分一致の画像を取得してもよいし、検索キーの類似度を計算する方法を用いて画像を取得してもよい。
実施形態2では、データベース300に格納された症例の該当する所見と所見の位置は医師が事前に特定することとしていた。しかし、その他の方法で所見等が特定されてもよい。例えば、データベース300に格納された症例に対してステップS3010乃至ステップS3050の処理を行い、該当する所見および所見の位置情報を医用画像
紐づけるようにしてもよい。また、ステップS10070の処理を行った後に、当該症例をデータベースに保存するようにしてもよい。
実施形態2では、検索部914は、データベース300に格納された症例から類似症例を検索していた。しかし、必ずしも外部に接続されたデータベース300から類似症例を検索しなくてもよい。例えば、データベース300と同等の情報を有する症例情報を記憶部104に保存しておき、検索部914は記憶部104に記憶された症例情報から類似症例を検索してもよい。この場合、記憶部104に記憶された症例情報をユーザ、設置場所、時刻などの様々な条件に応じて入れ替えてもよい。同様に、第1のテーブル情報、第2のテーブル情報も条件に応じて入れ替えてもよい。
実施形態2では、診断の対象となる医用画像を取得し、画像処理結果を用いて医用画像上に支援情報を提示するとともに、画像処理の解析画像や類似症例を提示した。本実施形態では、医用画像上にCAD所見等の支援情報を提示するとともに、診断をするにあたりガイドラインとなる情報を提示する場合について説明をする。なお、本実施形態におけるガイドラインとは、診断をするために支援をする情報であり、診断手順をしめす診断のマニュアル、アトラス、読影のポイント、同じモダリティの画像、異なるモダリティの画像(例えば、眼底写真、FA画像、IA画像)等、文章や図などの情報を含む。すなわち、ガイドラインは疾患の診断手順を示す情報である。また、データベース300には複数のガイドラインが格納されている。すなわち、データベース300には複数の疾患の診断手順を示す情報が格納されている。なお、ガイドラインは診断手順を示す電子書籍であってもよい。
別にする例を示したが、ガイドラインモード1433を選択すると同時にガイドライン検索を実行するようにしてもよい。
実施形態3では、所見を検索キーとして、所見の一致でガイドラインを検索していた。しかし、ガイドライン検索の方法はこれに限らない。例えば、複数の所見の中から任意の所見だけを選んでガイドライン検索を行ってもよい。ガイドライン検索を行う際に、医師所見表示743をONとし、CAD所見表示744をOFFにしてガイドライン検索を実行した場合には、医師により確定された所見だけを用いてガイドラインを検索することとしてもよい。また、医師所見表示743をOFFとし、CAD所見表示744をONにしてガイドライン検索を実行した場合には、CAD所見だけを用いてガイドラインを検索することとしてもよい。さらに、断層画像に表示している所見711の中から任意の所見だけを選択して、ガイドライン検索を実行した場合、選択した任意の所見を用いてガイドライン検索を実行してもよい。なおこの変形例は実施形態3のみならず他の実施形態においても適用可能である。
実施形態1〜3では、撮影された1枚の断層画像を用いてCAD所見等の支援情報を提示していた。一方、光干渉断層計を用いた検査では、一検査において複数の方向から断層画像を撮影し、取得することがある。例えば、図15(a)に示すように、視神経乳頭と中心窩を通る断層画像と、中心窩を通り、視神経乳頭と中心窩を通る断層画像に直交する断面との二つの断層画像を取得する場合がある。また、図15(b)に示すように、眼底上をラスタースキャン(3Dスキャン)することで3次元撮影をする場合がある。
実施形態4ではステップS10060において、検索部914が複数の医用画像のうちの一つの医用画像において該当すると判定した所見の候補を検索キーとし、同一方向から撮影された医用画像のみを対象としてデータベース300から類似画像を取得していた。しかし、一つの医用画像において該当すると判定した所見のみを用いなくてもよい。例えば、複数の医用画像うち二つ以上あるいは全ての医用画像夫々において検索キーを作成し、夫々の方向全てで類似する画像を取得するようにしてもよい。例えば、検索元の複数の医用画像がHスキャン像とVスキャン像とである場合を考える。この場合、検索部914は、データベース300に存在する画像のうち、検索元のHスキャン像と類似するHスキャン像を持ち、かつ、検索元のVスキャン像と類似するVスキャン像を持つ医用画像を類似する画像として取得する。
実施形態4では、複数の方向から撮影された複数の医用画像を取得し、取得した医用画像の画像処理結果を用いて医用画像上にCAD所見等の支援情報を提示していた。本実施形態では、取得した医用画像の画像処理結果を用いて医用画像上に支援情報を提示すると共に、病名(診断名)を推定して提示する事により当該医用画像に関する診断支援を行う。図18を用いて実施形態5における診断支援装置1800の機能構成の一例について説明を行う。診断支援装置1800は、図9に示した機能構成に推定部1811が追加されている。CPU1001がプログラムを実行することで実現される推定部1811は、断層画像から検出された異常部位を用いて病名を推定する。また、診断支援装置1800が行う処理の一例を説明するフローチャートを図19に示す。基本的に実施形態1と同じであるが、処理の一部が実施形態1とは異なっている。具体的には、病名候補の推定を行うステップS19060と、情報の表示を行うステップS19070が実施形態1とは異なっている。以下、図19のフローチャート、図20、図21の表示内容の一例を参照して、本実施形態における診断支援装置1800が行う全体の処理について、実施形態1乃至4との相違部分についてのみ説明する。本実施形態では図15(a)に示すようなクロススキャンの場合について説明を行う。なお、他のスキャンパターンに対しても本実施形態は適用可能である。
これらの全ての機能、または、一部の機能はネットワーク上に置かれていてもよい。この場合、表示機能または一部の機能のみをローカル側で動作させる、サーバ・クライアント型の構成となっていてもよい。また、上記に示した各実施形態は独立した実施形態であってもよいし、任意の実施形態を組み合わせることとしてもよい。
102 医用画像取得部
104 解析情報取得部
106 記憶部
108 画像処理部
110 判定部
112 位置取得部
116 表示制御部
118 表示部
300 データベース
914 検索部
Claims (18)
- 被検眼の眼底における位置がそれぞれ異なる複数の断層画像および前記被検眼の眼底画像を取得する取得手段と、
前記取得手段により取得した複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出する検出手段と、
前記検出手段により検出された異常部位の所見を文書或いは単語として前記断層画像および前記眼底画像に重畳して表示手段に表示させる表示制御手段と、を備え、
前記表示制御手段は、前記複数の断層画像のうち異なる断層画像それぞれから前記検出手段により検出された異常部位に対応する所見が同一の所見であり、且つ、前記異なる断層画像から検出された異常部位間の距離が閾値未満の場合、前記同一の所見を1つの所見として前記眼底画像上に表示させることを特徴とする画像処理装置。 - 前記表示制御手段は、前記検出手段により検出された異常部位の位置に対応する前記断層画像上の位置に前記所見を表示させることを特徴とする請求項1記載の画像処理装置。
- 前記表示制御手段は、前記断層画像に含まれる内境界膜および神経線維層境界の一方と網膜色素上皮層境界および視細胞内節外節境界の一方とに挟まれる領域以外の領域に前記所見を表示させることを特徴とする請求項1または請求項2記載の画像処理装置。
- 前記断層画像から層境界を抽出する抽出手段を更に備え、
前記検出手段は、前記抽出手段により抽出された層境界により画定される前記断層画像における第1領域と第2領域とに対して異なるアルゴリズムの構造解析を適用することで、前記第1領域から第1異常部位を検出し、前記第2領域から前記第1異常部位とは異なる第2異常部位を検出し、
前記表示制御手段は、前記第1異常部位の所見と前記第2異常部位の所見を文書或いは単語として前記断層画像に重畳して前記表示手段に表示させることを特徴とする請求項1乃至3の何れか1項に記載の画像処理装置。 - 前記抽出手段は、内境界膜および神経線維層境界の少なくとも一方および網膜色素上皮層境界および視細胞内節外節境界の少なくとも一方を抽出し、
前記検出手段は、前記内境界膜および前記神経線維層境界の一方と前記網膜色素上皮層境界および前記視細胞内節外節境界の一方とにより挟まれる領域を前記第1領域、前記内境界膜および前記神経線維層境界の一方より硝子体側の領域を前記第2領域としてそれぞれの領域に対して異なるアルゴリズムの構造解析を適用することで前記第1異常部位および前記第2異常部位を生成することを特徴とする請求項4記載の画像処理装置。 - 操作者による前記表示手段に表示された前記所見に対する修正を受け付ける受付手段を更に備え、
前記表示制御手段は、修正された所見を修正前と異なる表示形態で前記表示手段に表示させることを特徴とする請求項1乃至5の何れか1項に記載の画像処理装置。 - 前記検出手段により検出された異常部位の所見に基づいて複数の疾患の診断手順を示す情報から少なくとも一つの疾患の診断手順を示す情報を取得する情報取得手段を更に備え、
前記情報取得手段は、前記検出手段により検出された異常部位の所見に対応付けられた前記疾患の診断手順を示す情報を取得し、
前記表示制御手段は、前記情報取得手段によって取得された前記疾患の診断手順を示す情報を前記表示手段に表示させることを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。 - 複数の断層画像それぞれを所見と対応付けて記憶する記憶手段と、
前記検出手段により検出された異常部位の所見と一致する所見に対応付けられた断層画像を前記記憶手段から取得する類似画像取得手段と、を更に備えることを特徴とする請求項1乃至7の何れか1項に記載の画像処理装置。 - 前記類似画像取得手段は、前記検出手段により異常部位が検出された断層画像を得る際の測定光の走査方向と同一の方向に測定光を走査することにより得られた断層画像を前記記憶手段から取得することを特徴とする請求項8記載の画像処理装置。
- 前記記憶手段は、複数の断層画像それぞれを所見および当該所見の断層画像における位置と対応付けて記憶し、
前記類似画像取得手段は、前記検出手段により検出された異常部位の所見および当該所見の位置と一致する所見および当該所見の位置に対応付けられた断層画像を前記記憶手段から取得することを特徴とする請求項8または請求項9記載の画像処理装置。 - 前記取得手段は、前記被検眼に対して異なる方向に測定光を走査することで得られた複数の断層画像を取得し、
前記検出手段は、前記複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出し、
前記表示制御手段は、前記複数の断層画像から得られた複数の異常部位に基づいて、前記複数の断層画像に共通する異常部位の所見を前記表示手段に表示させることを特徴とする請求項1乃至10のいずれか1項に記載の画像処理装置。 - 前記所見に基づいて病名を推定する推定手段を更に備え、
前記取得手段は、前記被検眼に対して異なる方向に測定光を走査することで得られた複数の断層画像を取得し、
前記検出手段は、前記複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出し、
前記推定手段は、前記複数の断層画像それぞれから得られた異常部位の所見に基づいて病名を推定することを特徴とする請求項1乃至10のいずれか1項に記載の画像処理装置。 - 前記異なる方向は直交する方向であることを特徴とする請求項11または請求項12に記載の画像処理装置。
- 前記表示手段はタッチパネルを含み、
前記表示手段に表示された複数の患者情報のうち一の患者情報がタップされた場合に前記一の患者情報を仮選択し、前記タップ後スワイプが行われた場合に前記一の患者情報を選択する選択手段を更に備え、
前記取得手段は、前記選択手段により選択された患者情報に対応する前記断層画像を取得することを特徴とする請求項1乃至13の何れか1項に記載の画像処理装置。 - 前記記憶手段は、複数の断層画像それぞれを所見、断層画像の所定の層の厚さに基づく情報および断層画像に含まれる網膜の輝度に基づく情報と対応付けて記憶し、
前記類似画像取得手段は、前記検出手段により検出された異常部位の所見、前記層の厚さに基づく情報および前記輝度に基づく情報に対応する、異常部位の所見、前記層の厚さに基づく情報および前記輝度に基づく情報に対応付けられた断層画像を前記記憶手段から取得することを特徴とする請求項8または請求項9記載の画像処理装置。 - 被検眼の眼底における位置がそれぞれ異なる複数の断層画像および前記被検眼の眼底画像を取得する取得工程と、
前記取得工程において取得した複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出する検出工程と、
前記検出工程において検出された異常部位の所見を文書或いは単語として前記断層画像および前記眼底画像に重畳して表示手段に表示させる表示制御工程と、を備え、
前記表示制御工程において、前記複数の断層画像のうち異なる断層画像それぞれから前記検出工程において検出された異常部位に対応する所見が同一の所見であり、且つ、前記異なる断層画像から検出された異常部位間の距離が閾値未満の場合、前記同一の所見を1つの所見として前記眼底画像上に表示させることを特徴とする画像処理方法。 - 請求項16記載の画像処理方法の各工程をコンピュータに実行させることを特徴とするプログラム。
- 被検眼の眼底における位置がそれぞれ異なる複数の断層画像および前記被検眼の眼底画像を取得する取得手段と、
前記取得手段により取得した複数の断層画像に対して構造解析を行うことで前記被検眼の異常部位を検出する検出手段と、
前記検出手段により検出された異常部位の所見を文書或いは単語として前記眼底画像に重畳して表示手段に表示させる表示制御手段と、を備え、
前記表示制御手段は、前記複数の断層画像のうち異なる断層画像それぞれから前記検出手段により検出された異常部位に対応する所見が同一の所見であり、且つ、前記異なる断層画像から検出された異常部位間の距離が閾値未満の場合、前記同一の所見を1つの所見として前記眼底画像上に表示させることを特徴とする画像処理装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015099470A JP6594033B2 (ja) | 2015-05-14 | 2015-05-14 | 画像処理装置、画像処理方法及びプログラム |
US15/150,826 US9826896B2 (en) | 2015-05-14 | 2016-05-10 | Image processing apparatus, image processing method, and storage medium |
CN201610307354.XA CN106157297B (zh) | 2015-05-14 | 2016-05-10 | 图像处理装置和图像处理方法 |
KR1020160059508A KR102027276B1 (ko) | 2015-05-14 | 2016-05-16 | 화상처리장치, 화상처리방법 및 프로그램 |
US15/796,384 US10349826B2 (en) | 2015-05-14 | 2017-10-27 | Image processing apparatus, image processing method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015099470A JP6594033B2 (ja) | 2015-05-14 | 2015-05-14 | 画像処理装置、画像処理方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019163443A Division JP6825058B2 (ja) | 2019-09-06 | 2019-09-06 | 画像処理装置、画像処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016214312A JP2016214312A (ja) | 2016-12-22 |
JP6594033B2 true JP6594033B2 (ja) | 2019-10-23 |
Family
ID=57275834
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015099470A Expired - Fee Related JP6594033B2 (ja) | 2015-05-14 | 2015-05-14 | 画像処理装置、画像処理方法及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US9826896B2 (ja) |
JP (1) | JP6594033B2 (ja) |
KR (1) | KR102027276B1 (ja) |
CN (1) | CN106157297B (ja) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6594033B2 (ja) * | 2015-05-14 | 2019-10-23 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
EP3216431B1 (en) * | 2015-10-15 | 2022-06-29 | Sony Group Corporation | Image processing device and surgical microscope |
US9652846B1 (en) * | 2015-10-22 | 2017-05-16 | International Business Machines Corporation | Viewpoint recognition in computer tomography images |
JP6852371B2 (ja) * | 2015-12-02 | 2021-03-31 | 株式会社ニデック | 眼科情報処理装置、および眼科情報処理プログラムに関する。 |
JP6551316B2 (ja) * | 2016-06-10 | 2019-07-31 | 京セラドキュメントソリューションズ株式会社 | 画像読取装置および画像形成装置 |
US9943225B1 (en) * | 2016-09-23 | 2018-04-17 | International Business Machines Corporation | Early prediction of age related macular degeneration by image reconstruction |
EP3599987A4 (en) | 2017-03-23 | 2020-12-16 | Doheny Eye Institute | SYSTEMS, METHODS AND DEVICES FOR OPTICAL COHERENCE TOMOGRAPHY WITH MULTI-ENFACE ANGIOGRAPHY MEANS |
JP7230800B2 (ja) * | 2017-03-31 | 2023-03-01 | 株式会社ニデック | 眼科情報処理システム |
JP6862286B2 (ja) * | 2017-05-31 | 2021-04-21 | キヤノン株式会社 | 情報処理装置、情報処理方法、情報処理システム及びプログラム |
CN110913749B (zh) * | 2017-07-03 | 2022-06-24 | 富士胶片株式会社 | 医疗图像处理装置、内窥镜装置、诊断支持装置、医疗业务支持装置及报告书制作支持装置 |
JP6796725B2 (ja) * | 2017-09-26 | 2020-12-09 | 富士フイルム株式会社 | 医療画像処理システム、内視鏡システム、診断支援装置、及び医療業務支援装置 |
CN107833631A (zh) * | 2017-11-20 | 2018-03-23 | 新乡医学院 | 一种医学影像计算机辅助分析方法 |
JP7185255B2 (ja) * | 2018-05-16 | 2022-12-07 | 株式会社トーメーコーポレーション | 断層画像処理装置、これを備える眼科装置、及び断像画像を処理するためのコンピュータプログラム |
JP7099925B2 (ja) * | 2018-09-27 | 2022-07-12 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
KR102195850B1 (ko) * | 2018-11-27 | 2020-12-28 | 울산대학교 산학협력단 | 딥러닝 기반 혈관 구분 방법 및 시스템 |
KR102333670B1 (ko) * | 2018-12-06 | 2021-12-02 | 주식회사 메디웨일 | 안구 이미지 기반의 진단 보조 이미지 제공 장치 |
US20220012404A1 (en) * | 2018-12-11 | 2022-01-13 | Tasmit, Inc. | Image matching method and arithmetic system for performing image matching process |
US11439301B2 (en) | 2019-01-16 | 2022-09-13 | Topcon Corporation | Ophthalmologic information processing apparatus, ophthalmologic apparatus and ophthalmologic information processing method |
US11134836B2 (en) | 2019-01-16 | 2021-10-05 | Topcon Corporation | Ophthalmologic information processing apparatus, ophthalmologic apparatus and ophthalmologic information processing method |
US11141060B2 (en) | 2019-01-16 | 2021-10-12 | Topcon Corporation | Ophthalmologic apparatus and method of controlling the same |
CN109886955A (zh) * | 2019-03-05 | 2019-06-14 | 百度在线网络技术(北京)有限公司 | 用于处理眼底图像的方法和装置 |
EP3936026B1 (en) * | 2019-03-08 | 2023-10-04 | FUJIFILM Corporation | Medical image processing device, processor device, endoscopic system, medical image processing method, and program |
US11068052B2 (en) * | 2019-03-15 | 2021-07-20 | Microsoft Technology Licensing, Llc | Holographic image generated based on eye position |
EP3719807A1 (en) * | 2019-04-04 | 2020-10-07 | Optos PLC | Predicting a pathological condition from a medical image |
KR102108401B1 (ko) * | 2019-06-27 | 2020-05-28 | 주식회사 딥노이드 | 인공지능 판독서버, 이를 포함하는 pacs 기반 영상 처리 시스템 및 방법 |
CN112115888B (zh) * | 2020-09-22 | 2022-06-03 | 四川大学 | 一种基于病斑相关性的植物病害诊断系统 |
WO2022181729A1 (ja) * | 2021-02-25 | 2022-09-01 | 株式会社ニコン | 画像処理方法、画像処理装置、及び画像処理プログラム |
CN114782337A (zh) * | 2022-04-08 | 2022-07-22 | 平安国际智慧城市科技股份有限公司 | 基于人工智能的oct图像推荐方法、装置、设备及介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3332104B2 (ja) * | 1993-07-19 | 2002-10-07 | 株式会社東芝 | 読影レポート作成支援装置 |
JP2002306415A (ja) * | 2001-04-13 | 2002-10-22 | Japan Science & Technology Corp | 眼科診断支援システム |
JP4638131B2 (ja) * | 2003-03-19 | 2011-02-23 | 株式会社リコー | 画像処理装置管理システムおよび画像処理装置の管理方法 |
JP5153281B2 (ja) * | 2007-09-28 | 2013-02-27 | キヤノン株式会社 | 診断支援装置及びその制御方法 |
JP5486215B2 (ja) * | 2009-05-20 | 2014-05-07 | 株式会社トプコン | 前眼部観察装置 |
US8419186B2 (en) * | 2009-09-30 | 2013-04-16 | Nidek Co., Ltd. | Fundus observation apparatus |
US9797002B2 (en) * | 2010-06-25 | 2017-10-24 | University Of Southern California | Methods and kits for genome-wide methylation of GpC sites and genome-wide determination of chromatin structure |
JP5701024B2 (ja) * | 2010-11-26 | 2015-04-15 | キヤノン株式会社 | 画像処理装置及び方法 |
JP5618787B2 (ja) * | 2010-11-29 | 2014-11-05 | キヤノン株式会社 | レポート作成支援装置及びその作成支援方法、並びにプログラム |
JP5836634B2 (ja) * | 2011-05-10 | 2015-12-24 | キヤノン株式会社 | 画像処理装置及び方法 |
JP6025311B2 (ja) * | 2011-08-01 | 2016-11-16 | キヤノン株式会社 | 眼科診断支援装置および方法 |
JP5988772B2 (ja) * | 2012-01-20 | 2016-09-07 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP6188297B2 (ja) * | 2012-01-25 | 2017-08-30 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP2014083285A (ja) * | 2012-10-25 | 2014-05-12 | Canon Inc | 画像処理装置及び画像処理方法 |
JP2014155694A (ja) * | 2013-01-16 | 2014-08-28 | Canon Inc | 眼科装置及び眼科方法 |
JP6184231B2 (ja) * | 2013-07-31 | 2017-08-23 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP6594033B2 (ja) * | 2015-05-14 | 2019-10-23 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
-
2015
- 2015-05-14 JP JP2015099470A patent/JP6594033B2/ja not_active Expired - Fee Related
-
2016
- 2016-05-10 CN CN201610307354.XA patent/CN106157297B/zh not_active Expired - Fee Related
- 2016-05-10 US US15/150,826 patent/US9826896B2/en active Active
- 2016-05-16 KR KR1020160059508A patent/KR102027276B1/ko active IP Right Grant
-
2017
- 2017-10-27 US US15/796,384 patent/US10349826B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20160331224A1 (en) | 2016-11-17 |
US20180049635A1 (en) | 2018-02-22 |
CN106157297A (zh) | 2016-11-23 |
US10349826B2 (en) | 2019-07-16 |
KR102027276B1 (ko) | 2019-10-01 |
CN106157297B (zh) | 2019-11-15 |
KR20160134585A (ko) | 2016-11-23 |
US9826896B2 (en) | 2017-11-28 |
JP2016214312A (ja) | 2016-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6594033B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US10893797B2 (en) | User interface for efficiently displaying relevant OCT imaging data | |
JP4909377B2 (ja) | 画像処理装置及びその制御方法、コンピュータプログラム | |
JP4850927B2 (ja) | 画像処理装置、画像処理方法及びコンピュータプログラム | |
Abràmoff et al. | Retinal imaging and image analysis | |
US10950204B2 (en) | Diagnosis support apparatus and diagnosis support method | |
WO2018143180A1 (ja) | 画像処理装置、および画像処理プログラム | |
JP5631339B2 (ja) | 画像処理装置、画像処理方法、眼科装置、眼科システム及びコンピュータプログラム | |
JP2018121886A (ja) | 画像処理装置、および画像処理プログラム | |
JP6755192B2 (ja) | 診断支援装置および診断支援装置の作動方法 | |
JP2018121885A (ja) | 画像処理装置、画像処理システム、および画像処理プログラム | |
JP6825058B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018057828A (ja) | 画像処理装置及び画像処理方法 | |
JP5624532B2 (ja) | 画像処理装置、画像処理方法、眼科システム及びコンピュータプログラム | |
JP6033478B2 (ja) | 眼科装置、層厚比較方法およびプログラム | |
JP5871890B2 (ja) | 眼科装置、層厚比較方法およびプログラム | |
Wahab et al. | Bright region and vessel density based robust optic disc segmentation | |
Wu et al. | Automated vessel shadow segmentation of fovea-centered spectral-domain images from multiple OCT devices | |
JP2018020179A (ja) | 眼科装置、層厚比較方法およびプログラム | |
Al-Kanany et al. | General Awareness and Knowledge about Glaucoma Cataracts for Diabetic | |
JP2017012921A (ja) | 眼科装置、層厚比較方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180928 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181009 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190312 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190412 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190827 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190924 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6594033 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |