CN116807381A - 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法 - Google Patents

图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法 Download PDF

Info

Publication number
CN116807381A
CN116807381A CN202310734582.5A CN202310734582A CN116807381A CN 116807381 A CN116807381 A CN 116807381A CN 202310734582 A CN202310734582 A CN 202310734582A CN 116807381 A CN116807381 A CN 116807381A
Authority
CN
China
Prior art keywords
image
image processing
perfusion
region
fundus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310734582.5A
Other languages
English (en)
Inventor
广川真梨子
田边泰士
藤原朋春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to CN202310734582.5A priority Critical patent/CN116807381A/zh
Publication of CN116807381A publication Critical patent/CN116807381A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016—Operational features thereof
    • A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016—Operational features thereof
    • A61B3/0041—Operational features thereof characterised by display arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A61B3/1225—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation
    • A61B3/1233—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation for measuring blood flow, e.g. at the retina
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14—Arrangements specially adapted for eye photography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30041—Eye; Retina; Ophthalmic

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Hematology (AREA)
  • Geometry (AREA)
  • Eye Examination Apparatus (AREA)
  • Image Processing (AREA)

Abstract

推定无灌注区。强调图像处理部对被检眼的眼底图像进行强调血管部分的强调图像处理(304)。推定处理部根据进行了所述强调图像处理的所述眼底图像来推定无灌注区(306～312)。创建部创建无灌注区候选图像(314)。

Description

图像处理方法、图像处理程序、图像处理装置、图像显示装置、 以及图像显示方法
本发明申请是国际申请日为2017年12月28日、国际申请号为PCT/JP2017/047379、进入中国国家阶段的国家申请号为201780098008.8、发明名称为“图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法”的发明申请的分案申请。
技术领域
本发明涉及图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法。
背景技术
专利文献1公开了检测受试者的视网膜血管的梗塞。
现有技术文献
专利文献
专利文献1：日本专利5535905号公报
发明内容
本公开的技术的第1方式的图像处理方法包括根据被检眼的眼底图像推定无灌注区。
本公开的技术的第2方式的图像处理方法包括：对被检眼的眼底图像进行第1图像处理，抽选出第1无灌注区候选；对所述眼底图像进行第2图像处理，抽选出第2无灌注区候选；和抽选出既是所述第1无灌注区候选也是所述第2无灌注区候选的候选作为推定无灌注区。
本公开的技术的第3方式的图像处理程序使计算机执行第1方式或第2方式的图像处理方法。
本公开的技术的第4方式的图像处理装置包括：存储装置，其存储用于使处理器执行图像处理方法的图像处理程序；和处理装置，通过执行存储在所述存储装置中的图像处理程序而执行所述图像处理方法，所述图像处理方法为第1方式或第2方式的图像处理方法。
本公开的技术的第5方式的图像显示装置包括显示部，其显示通过第1方式或第2方式的图像处理方法推定的无灌注区。
本公开的技术的第6方式的图像显示方法包括：接收被检眼的眼底图像的眼底图像数据和对所述眼底图像进行图像处理而得到的无灌注区候选图像的无灌注区候选图像数据；生成基于所述眼底图像数据而在眼底图像显示区域显示所述眼底图像，基于所述无灌注区候选图像数据而在无灌注区候选图像显示区域显示所述无灌注区候选图像的画面。
本公开的技术的第7方式的图像显示装置包括显示部，其在同一画面上显示被检眼的眼底图像和对所述眼底图像进行图像处理而得到的无灌注区候选图像。
附图说明
图1是眼科系统100的框图。
图2是表示眼科装置110的整体构成的一例的概略构成图。
图3是表示眼科装置110所包含的广角光学系统19的概略构成的一例的概念图。
图4是图像阅览器150以及管理服务器140的电气系统的构成的框图。
图5是管理服务器140的功能的框图。
图6是管理服务器140的CPU162执行的图像处理程序的流程图。
图7是表示眼底图像(SLO图像(UWFSLO眼底图像))的图。
图8是表示强调了毛细血管的眼底图像的图。
图9是简化地表现步骤306的处理结果的图，是将UWFSLO图像的一部分放大显示的示意图。
图10是表示从图9的6个初级候选402、404、406、408、410、412中排除候选412的情况的图。
图11是表示从图9的6个初级候选402、404、406、408、410、412中排除候选402、404的情况的图。
图12是表示缩小为沿着血管的末端400E1、400E2、400E3的候选450B的情况的图。
图13是表示从图9的6个初级候选402、404、406、408、410、412中排除候选402、404、412的情况的图。
图14是表示推定无灌注区406NPA、408NPA、410NPA的图。
图15是表示对推定无灌注区406NPA、408NPA、410NPA的周围标注彩色边框的情形的图。
图16是表示对推定无灌注区406NPA、408NPA、410NPA较浅地涂绘颜色的情形的图。
图17是表示对推定无灌注区406NPA、408NPA、410NPA涂绘与现实的颜色相同颜色或不同颜色的情形的图。
图18是表示图像阅览器150的显示器156的画面500的图。
图19是表示点击NPA过程观察按钮524的情况下的画面500的图。
具体实施方式
以下，参照附图对本发明的实施方式进行详细的说明。另外，在下文中，为便于说明，将扫描型激光检眼镜(Scanning Laser Ophthalmoscope)称为“SLO”。此外，在下文中，为便于说明，将光学相干断层扫描仪(Optical Coherence Tomography)称为“OCT”。
参照图1对眼科系统100的构成进行说明。作为一例，如图1所示，眼科系统100包括：眼科装置110；视野检测仪120；激光凝固装置130；管理服务器装置(以下，称为“管理服务器”)140；和图像显示装置(以下，称为“图像阅览器”)150。
眼科装置110获取眼底图像和断层图像。视野检测仪120检测患者的视野。激光凝固装置130为了抑制疾病的发展而通过激光将患者的眼底的病变部凝固。管理服务器140与受试者的ID对应地存储由眼科装置110拍摄多个患者的眼底而得到的多个眼底图像，并根据指定的眼底图像推定无灌注区(NPA(Non Perfusion Area))。图像阅览器150显示由管理服务器140推定的无灌注区(NPA)候选图像。
此处，无灌注区(NPA)是眼底中因视网膜毛细血管床阻塞等而导致血液不流动或几乎不流动的区域，也是眼底中无血管或粗血管区域即无血管区(AVA(avascular area))。
眼科装置110、视野检测仪120、激光凝固装置130、管理服务器140、图像阅览器150经由网络160相互连接。
管理服务器140为本公开的技术的“图像处理装置”的一例。图像阅览器150为本公开的技术的“图像显示装置”的一例。
接下来，参照图2对眼科装置110的构成进行说明。如图2所示，眼科装置110包含拍摄装置14及控制装置16。拍摄装置14拍摄被检眼的眼底。控制装置16由包括CPU(CentralProcessing Unit(中央处理装置))16A、RAM(Random Access Memory，随机存取存储器)16B、ROM(Read-Only memory，只读存储器)16C、及输入输出(I/O)端口16D的计算机来实现。
输入输出(I/O)端口16D与存储装置17连接。另外，存储装置17由例如非易失性存储器(Non-volatile memory(NVM)或硬盘)构成。此外，输入输出(I/O)端口16D经由通信接口(I/F)15与网络160连接。
此外，控制装置16包括经由I/O端口16D与CPU16A连接的输入/显示装置16E。输入/显示装置16E具有图形用户界面，所述图形用户界面显示拍摄得到的图像并受理包括拍摄指示在内的各种指示。作为图形用户界面可列举触摸面板或显示器。另外，在下文中，为便于说明，“拍摄”指用户使用眼科装置110获取表示被摄体的图像。
拍摄装置14在控制装置16的控制下工作。拍摄装置14包含SLO单元18、广角光学系统19、及OCT单元20。
另外，在以下的说明中，将眼科装置110沿水平面设置的情况下的水平方向作为“X方向”，将相对于水平面垂直的方向作为“Y方向”，将连接被检眼12的前眼部的瞳孔的中心27与眼球的中心O的方向作为“Z方向”。因而，X方向、Y方向及Z方向相互垂直。
作为能够由眼科装置110实现的主要功能的一例，本实施方式的眼科装置110具有第1功能和第2功能这两个功能。第1功能是使眼科装置110作为扫描型激光检眼镜(Scanning Laser Ophthalmoscope。以下，称为“SLO”。)工作，进行基于SLO的拍摄的功能(以下，称为SLO拍摄系统功能。)。第2功能是使眼科装置110作为光学相干断层扫描仪(Optical Coherence Tomography。以下，称为“OCT”。)工作，进行基于OCT的拍摄的功能(以下，称为OCT拍摄系统功能。)。另外，在下文中，为便于说明，将进行基于SLO的拍摄的功能称为“SLO拍摄系统功能”。此外，在下文中，为便于说明，将进行基于OCT的拍摄的功能称为“OCT拍摄系统功能”。
SLO拍摄系统功能由眼科装置110的构成中的控制装置16、SLO单元18和广角光学系统19来实现。SLO单元18构成为包含光源18A、检测元件18B及分色镜18C等，拍摄被检眼12的眼底。换句话说，眼科装置110使SLO拍摄系统功能发挥作用，由此，将被检眼12的眼底(例如可拍摄区域12A)作为被摄体进行拍摄。具体而言，来自SLO单元18的光(以下，称为“SLO光”。)利用广角光学系统19通过被检眼12的瞳孔，利用第1光学扫描仪22在X方向(水平方向)上对可拍摄区域12A进行扫描，利用第3光学扫描仪29在Y方向(垂直方向)上进行扫描，并通过SLO单元18获取由其反射光形成的眼底图像(SLO图像(后文所述的UWFSLO眼底图像))。另外，SLO拍摄系统功能为周知的功能，因此省略详细的说明。另外，若换算成自眼球的中心O的内部照射角，则可拍摄区域12A在约200度的范围内。
OCT拍摄系统功能由控制装置16、OCT单元20及广角光学系统19实现。OCT单元20包括光源20A、传感器(分光器)20B、光纤耦合器20C、及包括偏振光调整器21D的参照光学系统21E等，拍摄眼底的膜厚方向上的多个断层区域。换句话说，眼科装置110通过作为OCT拍摄系统功能工作，拍摄眼底(例如，可拍摄区域12A)的膜厚方向的区域即断层区域。具体而言，来自OCT单元20的光源20A的光(以下，称为信号光(LS)。)在光纤耦合器20C处分支，其中一方的信号光利用广角光学系统19通过被检眼12的瞳孔，由第2光学扫描仪24在X方向(水平方向)上对可拍摄区域12A进行扫描，并且由第3光学扫描仪29在Y方向(垂直方向)上进行扫描。其中一方的信号光由断层区域反射，反射光在经由光纤耦合器20C入射到传感器20B的路径上行进。
此处，信号光(LS)的光路长通过从光源20A起至断层区域的距离和从断层区域起至传感器20B的距离来确定。
另外，特别将信号光中从断层区域反射而入射到传感器20B的反射光称为返回光。
此外，在光纤耦合器20C处分支的另一方的信号光在由偏振光调整器21D对其光路长进行调整后，在入射到传感器20B的路径上行进。
另外，将另一方的信号光，即按光源20A、光纤耦合器20C、偏振光调整器21D、及传感器20B行进的信号光称为参照光(LR)。
返回光和参照光受到干涉而成为干涉光，入射到传感器20B。传感器20B检测干涉光的各光谱成分。控制装置16使用由传感器20B得到的检测结果而获取表示断层区域的断层图像(以下，称为“OCT图像”)。
获取的SLO图像和/或OCT图像经由通信接口(I/F)15和网络160与患者ID一同被发送到管理服务器140。
接下来，参照图3对眼科装置110所包括的广角光学系统19的构成进行说明。如图3所示，公共光学系统28除第3光学扫描仪29之外还包括裂隙镜30及椭圆镜32。另外，分色镜26、裂隙镜30、及椭圆镜32用侧视端面图来表示。另外，也可以代替裂隙镜30及椭圆镜32而使用多个透镜组构成公共光学系统28。
裂隙镜30具有椭圆状的第1反射面30A。第1反射面30A具有第1焦点P1及第2焦点P2。椭圆镜32也具有椭圆状的第2反射面32A。第2反射面32A具有第1焦点P3及第2焦点P4。
裂隙镜30、椭圆镜32、及第3光学扫描仪29配置为使得第1焦点P3及第2焦点P2在第3光学扫描仪29位于共同的位置。此外，裂隙镜30、椭圆镜32及第3光学扫描仪29配置为使得第2焦点P4位于被检眼12的瞳孔的中心部。进一步，第1光学扫描仪22、第2光学扫描仪24、及裂隙镜30配置为使得第1焦点P1位于第1光学扫描仪22及第2光学扫描仪24。
换句话说，第1光学扫描仪22、第2光学扫描仪24、及第3光学扫描仪29配置于与被检眼12的瞳孔的中心部共轭的位置。
另外，广角光学系统19不仅可以使用利用椭圆镜的广角光学系统，也可以使用利用广角透镜的光学系统或由多个透镜的组合构成的广角光学系统。
在本实施方式中，能够利用图3所示的广角光学系统19将眼底的视场角(FOV：Field of view)设为能够观察从眼底中心至眼底周边的大范围眼底区域的角度。该大范围眼底区域的大小由内部照射角和外部照射角来定义。
外部照射角是从眼科装置110侧即从被检眼12的外部的光照射角。也就是说，针对被检眼12的眼底，扫描光朝向被检眼12的瞳孔的中心27(即瞳孔的正对视中央点(也参照图2))的角度为外部照射角。该外部照射角还与从眼底反射而从瞳孔的中心27向被检眼12的外部射出并朝向眼科装置110的光的角度相等。
另一方面，内部照射角表示以被检眼12的眼球的中心O为基准位置并由扫描光照射被检眼12的眼底而实质上能够拍摄的光照射角。外部照射角A和内部照射角B处于对应关系，但在以下的说明中，因为是作为眼科装置的说明，所以使用外部照射角作为与眼底的视场角对应的照射角。
眼科装置110拍摄被检眼12的眼底区域即可拍摄区域12A(也参照图2)内。该可拍摄区域12A是由广角光学系统19的扫描光能够扫描的最大区域，外部照射角A为约160度(内部照射角对应于200度左右)。将拍摄可拍摄区域12A而得到的SLO图像称为UWFSLO图像。另外，UWF指Ultra-Widefield(超广角)的简称。
接下来，参照图4对图像阅览器150的电气系统的构成进行说明。如图4所示，图像阅览器150包括计算机主体152。计算机主体152具有CPU162、RAM166、ROM164、输入输出(I/O)端口168。输入输出(I/O)端口168与存储装置154、显示器156、鼠标155M、键盘155K、及通信接口(I/F)158连接。存储装置154例如由非易失性存储器构成。输入输出(I/O)端口168经由通信接口(I/F)158与网络160连接。因而，图像阅览器150能够与眼科装置110及管理服务器140通信。
图像阅览器150的显示器156为本公开的技术的“显示部”的一例。
管理服务器140的电气系统的构成与图像阅览器150的电气系统的构成同样，包括计算机主体152、存储装置154、显示器156、鼠标155M、以及键盘155K，所述计算机主体152具有CPU162、RAM166、ROM164、以及输入输出(I/O)端口168，所述存储装置154与输入输出(I/O)端口168连接。
管理服务器140的CPU162为本公开的技术的“图像处理装置”的一例。
在管理服务器140的存储装置154中存储有受检者的眼底图像数据和/或图像处理程序154P。
此处，对图像处理程序154P存储在存储装置154中的情况进行了说明，但本公开的技术不限定于此，图像处理程序154P也可以存储在ROM164中。
图像处理程序154P是本公开的技术的图像处理程序的一例。
作为管理服务器140的电气系统的构成，也可以省略与图像阅览器150中的显示器156、鼠标155M、键盘155K对应的要素。
接下来，参照图5对管理服务器140的CPU162执行图像处理程序154P从而实现的各种功能进行说明。图像处理程序154P包括受理功能、获取功能、强调图像处理功能、推定处理功能、创建功能、以及发送功能。CPU162执行具有各功能的图像处理程序154P，由此，如图5所示，CPU162作为受理部200、获取部202、强调图像处理部204、推定处理部206、创建部208、以及发送部210发挥作用。
此外，也可以采用将强调图像处理部204、推定处理部206、创建部208作为一体的图像处理芯片(IC，电路等的硬件构成)的构成。
接下来，对图1所示的眼科系统100的整体动作进行说明。
首先，为了进行患者的被检眼12(也参照图2)的诊断，眼科系统100收集患者的被检眼12的基础信息。具体而言，使用未图示的眼轴长度测定器等测定眼轴长度等。然后，患者根据医生的指示去往配置有视野检测仪120的房间。视野检测仪120通过对视网膜施予光刺激并观察患者的反应来测定可视的范围(视野图)。视野检测仪120将测定的视野图与患者ID一同发送到管理服务器140。管理服务器140与患者的ID对应地将视野图存储在存储装置154(也参照图4)中。此外，患者根据医生的指示去往配置有眼科装置110的房间。眼科装置110拍摄患者的被检眼12而获取眼底图像(SLO图像(UWFSLO眼底图像)和/或OCT图像)。眼科装置110将获取的眼底图像与患者ID一同发送到管理服务器140。管理服务器140与患者ID对应地将眼底图像存储在存储装置154中。
在进行患者的被检眼12的诊察的情况下，存在医生使用被检眼12的眼底图像，使用在眼底是否存在无灌注区的信息的情况。首先，在将患者ID输入到图像阅览器150后，图像阅览器150从管理服务器140获取患者的眼底图像，并将获取的眼底图像显示在显示器156上。然后，将针对显示的眼底图像创建无灌注区域候选图像的指示从图像阅览器150发送到管理服务器140。
管理服务器140将基于指定的眼底图像而创建的无灌注区候选图像的图像数据发送到图像阅览器150。
无灌注区候选图像是重叠显示有推定的无灌注区的眼底图像。
管理服务器140从存储装置154读取指定的眼底图像，根据读取的眼底图像推定无灌注区，创建成为无灌注区的候选区域的最终图像(无灌注区候选图像或候选组图像)，并将创建的最终图像的图像数据发送到图像阅览器150，其详情见后文叙述。
图像阅览器150使用通信I/F158接收无灌注区候选图像的图像数据，并使显示器156显示无灌注区候选图像。
此处，眼底图像是由眼科装置110拍摄的UWFSLO眼底图像，能够以眼底的大范围为对象而推定是否存在NPA。当然，不限于使用UWFSLO图像，也能够通过同一患者的眼底图像(过去拍摄的UWFSLO眼底图像或其他仪器拍摄的眼底图像等)来推定NPA。
医生基于显示于显示器156的无灌注区候选图像对患者的被检眼12进行诊断。如果被检眼12没有问题则诊断结束。但是，在医生诊断为被检眼12存在问题而需要OCT图像的情况下，为了使用眼科装置110获取眼底的断层图像，也可以经由图像阅览器150向眼科装置110输出进行基于OCT的拍摄的指示。
在存在进行基于OCT的拍摄的指示的情况下，眼科装置110将由眼科装置110获取的OCT图像与患者ID一同发送到管理服务器140。管理服务器140将与患者ID对应的OCT图像存储在存储装置154中，并发送至图像阅览器150。
如图18所示，图像阅览器150在图像阅览器150的显示器156的画面500上进行各种显示模式的画面显示，详情见后文叙述。
接下来，参照图6对管理服务器140的CPU162所执行的图像处理程序进行说明。管理服务器140的CPU162执行图像处理程序154P，由此实现图6所示的图像处理。
图6所示的图像处理为本公开的技术的“图像处理方法”的一例。
受理部200(也参照图5)在从图像阅览器150接收到指令数据时启动图像处理程序154P。指令数据是从图像阅览器150发出的、根据指定的UWFSLO图像创建无灌注区(NPA)候选图像，并将无灌注区(NPA)候选图像的图像数据发送至图像阅览器150的指令。
图像处理程序154P启动后，在步骤302中，获取部202从与多个患者ID分别对应地存储在存储装置154中的多个UWFSLO图像中获取指定的UWFSLO图像。如图7所示，在UWFSLO图像中含有视网膜的血管结构和视神经乳头等结构体。
接着，在步骤304中，强调图像处理部204对获取的UWFSLO图像进行强调血管部分的强调图像处理。其是使包含毛细血管在内的血管明显的处理，是为了高精度地推定无灌注区(NPA)的处理。
除了使用直方图平均化或自适应直方图均衡化(CLAHE(Contrast LimitedAdaptive Histogram Equalization))那样的图像直方图的强调处理之外，强调图像处理也能够使用基于灰度转换的对比度转换处理、非锐化遮罩处理(unsharp mask)等特定频带的频率强调处理、维纳滤波等反卷积处理、强调血管部的形状的形态学处理等各种方法，但优选直方图平均化或自适应直方图均衡化。通过强调图像处理，血管得到强调，且如图8所示，毛细血管也被强调。
因而，在根据强调了血管的UWFSLO图像时，能够高精度地推定无灌注区(NPA)。于是，在本公开的技术中，通过接下来的步骤306～312，推定处理部206根据强调了血管的UWFSLO图像而推定多个无灌注区(NPA)。
具体而言，在步骤306中，推定处理部206选定无灌注区(NPA)的初级候选。更具体而言，从强调了血管的UWFSLO图像(参照图8)中抽选出第1暗度以下的多个像素，并选定该第1暗度以下的暗像素连续的、具有规定面积以上的面积的一个或多个区域作为无灌注区(NPA)的初级候选。
此处，第1暗度以下的暗像素是指该像素中的像素值为第1规定值以下的像素。
另外，作为像素值，例如可以使用表示明度的辉度值，但也可以代替辉度值或与辉度值一同，使用表示彩度及色相的至少一者的值。
初级候选是本公开的技术的“第1无灌注区候选”的一例。
图9是简化地表现了步骤306的处理结果的图，是放大显示了UWFSLO图像的一部分的示意图。图9中与血管400一同示出了无灌注区(NPA)的6个初级候选402、404、406、408、410、412。
步骤306之后，图像处理进至步骤308、步骤310。
在步骤308中，推定处理部206根据无灌注区(NPA)的一个或多个初级候选，基于各候选的区域内的像素值的平均值，仅从初级候选中选定较暗的候选。具体而言，计算无灌注区(NPA)的一个或多个初级候选各自的区域内的像素值的平均值，并选定计算出的平均值比第2规定值小的一个或多个候选作为暗区域。第2规定值是比第1规定值小规定值的值。换句话说，仅从第1暗度的初级候选中抽选出比第1暗度暗的第2暗度以下的较暗的暗区域即候选(规定平均像素值以下的候选)作为第1次级候选。
第1次级候选为本公开的技术的“第2无灌注区候选”的一例。
在步骤306的处理之后执行步骤308的处理时，如图10所示，从步骤306中抽选出的6个初级候选402、404、406、408、410、412(参照图9)中排除例如初级候选412。因而，缩小为第1次级候选402A、404A、406A、408A、410A的范围。
在步骤310中，推定处理部206从无灌注区(NPA)的多个初级候选缩小为只有沿着血管的区域的范围。具体而言，首先，推定处理部206(1)抽选出血管。血管通过基于像素值的形态学处理或二值化等方法来抽选。另外，将抽选出的区域称为血管区域。接下来，推定处理部206(2)通过距离转换等来计算该血管区域与无灌注区(NPA)的一个或多个初级候选或候选组各自的区域群的周缘相距的距离，选定该距离处于一定范围的区域。
此处，处于一定范围是比第1规定距离大，且比第2规定距离小(该第2规定距离大于第1规定距离)的第1范围(即沿着行进的血管的情况)。
在步骤310中，推定处理部206像这样从初级候选中抽选出与血管的距离为第1距离以下的区域作为第2次级候选。因而，例如，如图11所示，候选402、404因为不是沿着血管的区域所以被排除。因而，缩小为第2次级候选406B、408B、410B、412B的范围作为沿着行进的血管的候选。
另外，作为第2次级候选，也可以如图12所示，将从血管的末端400E1、400E2、400E3起处于一定范围内的区域450B作为第2次级候选。
第2次级候选为本公开的技术的“第2无灌注区候选”的一例。
步骤308和步骤310先执行哪个都可以，也可以同时执行。在步骤308和步骤310的处理结束后，图像处理进至步骤312。
在步骤312中，推定处理部206进行将第1次级候选和第2次级候选统合的统合处理。具体而言，抽选出既是第1次级候选(多个暗区域)也是第2次级候选(沿着血管的多个区域)的区域，确定为推定无灌注区。
在图9所示的例子中，在步骤306中，可得到无灌注区(NPA)的6个初级候选402、404、406、408、410、412。但是，如图13所示，在步骤308中，候选412被排除，在步骤310中，候选402、404被排除。因而，在步骤312中，如图14所示，确定候选406、408、410作为推定无灌注区406NPA、408NPA、410NPA。
在接下来的步骤314中，创建部208在UWFSLO图像中对推定无灌注区的周围标注彩色边框，创建无灌注区候选图像。为了能够易于在UWFSLO图像上识别推定无灌注区的位置，无灌注区候选图像指在UWFSLO图像上重叠地显示有推定无灌注区的眼底图像。为了能够易于在UWFSLO图像上识别推定无灌注区的位置，无灌注区候选图像是用边框将推定无灌注区包围并显示的图像。作为显示例，虽仅示出了UWFSLO图像的一部分，但如图15所示，是对推定无灌注区406NPA、408NPA、410NPA的周围标注彩色边框的显示。
进一步，如图16所示，创建部208也可以对推定无灌注区406NPA、408NPA、410NPA涂绘较浅的颜色(比UWFSLO图像的浓度浓的第1浓度的颜色)，由此创建无灌注区候选图像。另外，在步骤314中，创建部208也可以如图17所示，对推定无灌注区406NPA、408NPA、410NPA涂绘与现实的颜色相同的颜色或不同的颜色。另外，推定无灌注区406NPA、408NPA、410NPA的周围的边框也可以是虚线边框。
该无灌注区候选图像成为医生在进行糖尿病性视网膜症或视网膜静脉阻塞症等的诊断和发展情况的判断时的信息之一。
在接下来的步骤316中，发送部210将在步骤314中创建的无灌注区候选图像的图像数据发送至图像阅览器150。
图像阅览器150接收无灌注区候选的图像数据，使显示器156显示无灌注区候选图像。
以下，参照图18以及图19所示的图像阅览器150的显示器156的画面500对无灌注区候选图像的显示方法进行更详细的说明。
图18以及图19所示的显示方法为本公开的技术的“图像显示方法”的一例。
图18中，图像阅览器150的显示器156的NPA分析模式的显示内容示于画面500中。画面500具有患者信息显示栏502、UWFSLO图像显示栏504、OCT图像显示栏506、无灌注区候选图像显示栏508、以及2个放大图像显示栏510、512。此外，画面500中具有菜单按钮522、NPA过程观察按钮524、NPA分析按钮526、NPA激光凝固按钮528、NPA视野解析按钮530、以及OCT分析按钮540。进一步，画面500中具有工具按钮显示栏540。
图18为NPA分析模式的显示画面，因此，以表示菜单按钮522、NPA过程观察按钮524、NPA分析按钮526、NPA激光凝固按钮528、NPA视野解析按钮530、以及OCT分析按钮540中，NPA分析按钮526为激活状态的第1显示方式、表示其他按钮为非激活状态的第2显示方式来显示。第1显示方式和第2显示方式能够采用颜色不同(第1显示方式为绿色，第2显示方式为红色等)、立体的显示(第1显示方式为带阴影的显示等从画面浮现出那样的显示，第2显示方式为没有阴影的显示等)等各种显示方式。
患者信息显示栏502具有患者ID显示栏502A、患者姓名显示栏502B、性别显示栏502C、年龄显示栏502D、以及接收信息历史记录显示栏502E。图像阅览器150获取存储于管理服务器140的患者ID、患者姓名、性别、年龄、接收信息历史记录。图像阅览器150将获取的患者ID、患者姓名、性别、年龄、接收信息历史记录分别显示于患者ID显示栏502A、患者姓名显示栏502B、性别显示栏502C、年龄显示栏502D、以及接收信息历史记录显示栏502E。
图像阅览器150在画面500的UWFSLO图像显示栏504中显示患者的UWFSLO图像，在无灌注区候选图像显示栏508中显示无灌注区候选图像。
为了易于使医生进行观察/诊断，在无灌注区候选图像显示栏508中以与显示于UWFSLO图像显示栏504的UWFSLO图像不同的倍率显示有无灌注区候选图像。例如，以与显示于UWFSLO图像显示栏504的UWFSLO图像的大小相比放大规定倍率的大小显示无灌注区候选图像。也可以以与显示于UWFSLO图像显示栏504的UWFSLO图像的大小相比缩小规定倍率的大小显示无灌注区候选图像。另外，也可以使各规定倍率能够变更。
也存在医生想将无灌注区候选图像中的一部分放大观察的情况。于是，例如，如图18所示，医生利用鼠标等输入单元对想要放大观察的区域508A、508B进行操作，而指定无灌注区候选图像显示栏508内的想要放大显示的区域。在指定了区域508A、508B时，图像阅览器150将无灌注区候选图像中的指定的区域508A、508B的部分图像508AA、508BB放大显示于放大图像显示栏510、512中。
在医生观察无灌注区候选图像而判断为需要获取OCT图像的情况下，在显示于无灌注区候选图像显示栏508的无灌注区候选图像中指定要获取OCT图像的指定区域508C。指定区域也可以是直线或者矩形。此时，也可以在显示于UWFSLO图像显示栏504的UWFSLO图像上，在与对无灌注区候选图像上指定的508C对应的位置也显示指定区域504A。
在指定了获取OCT图像的区域508C后，经由管理服务器140向眼科装置110的操作者发出获取指定的区域508C的OCT图像的指示。患者再次去往配置有眼科装置110的房间。眼科装置110基于指示获取OCT图像，将OCT图像发送至管理服务器140。然后，OCT图像数据被从管理服务器140发送至图像阅览器150，图像阅览器150使OCT图像显示于OCT图像显示栏506。医生像这样来确认被判断为被检眼12存在问题的部位的OCT图像，诊察被检眼12。
另外，在工具按钮显示栏540显示有唤出用于显示线的图标、用于显示矩形的图标、在图像上输入文字的文字输入图标、在图像上重叠地显示手绘图的笔输入图标等各种输入辅助工具的按钮。
在患者信息显示栏502中设有接收信息历史记录显示栏502E。在图18所示的例子中，在2017年6月20日、2017年9月22日、2017年12月20日显示有接收信息历史记录。判断为想要查看接收信息历史记录的医生点击NPA过程观察按钮524。在点击了NPA过程观察按钮524时，图像阅览器150的显示器156的画面500从图18的NPA分析模式的显示状态变更为图19的NPA过程观察模式的显示状态。
如图19所示，NPA过程观察模式的画面5001除患者信息显示栏502、工具按钮显示栏540之外，还具有UWFSLO过程图像显示栏524A、无灌注区候选图像显示栏524D。另外，患者信息显示栏502、工具按钮显示栏540以及无灌注区候选图像显示栏524D是与图18同样的显示栏。图19为NPA过程观察模式的显示画面，因此，以表示在菜单按钮522、NPA过程观察按钮524、NPA分析按钮526、NPA激光凝固按钮528、NPA视野解析按钮530、以及OCT分析按钮540中，NPA过程观察按钮524为激活状态的第1显示方式、表示其他按钮为非激活状态的第2显示方式来进行显示。
UWFSLO过程图像显示栏524A具有过去的多个(在上述例子中为3个)UWFSLO图像(过程图像)的过程图像显示区域524A1～524A3、和具有滑块524C的滑动条524B。
在患者名下收到过4次以上的记录的情况下，可以考虑同时显示4个以上的所有UWFSLO图像，但在全部显示时，与之相应地需要缩小各图像的显示区域，变得难以观察。于是，如上所述设置3个过程图像显示区域524A1～524A3。关于滑块524C的位置，右端与现在对应，更左侧与过去的时间段对应。图像阅览器150将与滑块524C的位置对应的时间段的3个UWFSLO图像显示于过程图像显示区域524A1～524A3。
医生使用鼠标等输入单元从显示于UWFSLO过程图像显示栏524A的3个UWFSLO图像中选择想要进行NPA分析的图像。例如，在选择了524A3的过程图像的情况下，使524A3的边框颜色以与524A1和524A2的边框颜色不同的颜色进行显示。也可以不使边框的颜色变化而使边框线条的粗细变化，也可以使边框的颜色以及粗细两者改变。
接下来，医生使用鼠标等按下(点击)NPA推定按钮525E，图像阅览器150对管理服务器140发出指令，由此对选择的过程图像524A3创建无灌注区候选图像。管理服务器140读取过程图像524A3的图像并进行图6所说明的图像处理。然后，将与得到的过程图像524A3对应的无灌注区候选图像保存于管理服务器的存储装置154，并且将图像处理后的无灌注区候选图像的图像数据发送到图像阅览器150。
图像阅览器150基于对收到的过程图像524A3进行图像处理而得到的无灌注区候选图像的图像数据，在画面5001的无灌注区候选图像显示栏524D上显示对过程图像524A3进行了图像处理的无灌注区候选图像。图像阅览器150也可以使无灌注区候选图像显示栏524D的显示边框以与选择的过程图像524A3的显示边框相同的颜色、线型或粗细进行显示。
另外，也可以将分别对3个UWFSLO图像(过程图像)进行图像处理而得到的3个无灌注区候选图像显示于无灌注区候选图像显示栏524D。
此外，在医生不从UWFSLO过程图像显示栏524A的3个之中选择过程图像而按下NPA推定按钮525E的情况下，图像阅览器150针对与患者ID对应的(换句话说，存储于患者ID的图像文件夹的524A1、524A2、524A3)所有UWFSLO图像向管理服务器140输出创建无灌注区候选图像的指令。在存储于患者ID的图像文件夹的UWFSLO图像中已存在创建了无灌注区候选图像的UWFSLO图像的情况下，也可以针对尚未创建无灌注区候选图像的UWFSLO图像输出创建无灌注区候选图像的指令。
管理服务器140依次读取过程图像524A1、524A2、524A3的图像并依次进行图6所说明的图像处理。然后，将得到的过程图像524A3保存于管理服务器的存储装置154，并且将图像处理后的无灌注区候选图像的图像数据发送至图像阅览器150。然后，将针对得到的过程图像524A1、524A2、524A3的各个无灌注区候选图像保持于管理服务器的存储装置154，并且将图像处理后的3个新的无灌注区候选图像的图像数据发送至图像阅览器150。
接收到3个新的无灌注区候选图像的图像数据的图像阅览器150基于接收信息历史记录，在画面5001的UWF图像的过程图像显示区域中显示接收到的3个无灌注区候选图像。接下来，在从显示于过程图像显示区域的3个无灌注区候选图像中选择了1个的情况下，将所选择的无灌注区候选图像放大并显示于无灌注区候选图像显示栏524D。例如，在选择了具有最新的接收信息历史记录的无灌注区候选图像524A3的情况下，也可以使无灌注区候选图像显示栏524D的显示边框以与无灌注区候选图像524A3的显示边框相同颜色、线性或粗细显示。
此外，也可以比较就诊日不同的无灌注区候选图像，以使新产生的推定无灌注区的颜色变化地显示的方式实施图像处理，而对显示于过程观察图像显示区域的多个无灌注区候选图像进行显示。例如，用蓝色来显示对显示于图19的524A1的拍摄于2017年6月20日的UWFSLO图像进行处理而得到的推定无灌注区。能够进行如下处理：在对显示于图19的524A2的拍摄于2017年9月22日的UWFSLO图像进行处理而得到的推定无灌注区中，用蓝色显示推定为与2017年6月20日的推定无灌注区相同的推定无灌注区，用红色显示在2017年9月22日的图像处理中首次出现的推定无灌注区等。通过这样的图像处理，能够向医生提供用于诊断患者的症状的发展情况的有用信息，从而辅助诊断。
接下来，对显示于图18的画面500以及图19的画面5001中的菜单按钮522、NPA激光凝固按钮528、以及NPA视野解析按钮530、OCT分析按钮540的功能进行说明。
菜单按钮522是用于返回眼科电子病历的菜单画面的按钮。在菜单画面上显示有用于选择初始设定、用户登录、眼底观察模式、前眼部诊断模式等工具。在选择菜单画面中的“眼底观察模式”时，跳转至图18的画面500。
OCT分析按钮540是用于跳转至进行使用由眼科装置110得到的视网膜的断层图像和/或视神经层的厚度图等、拍摄视网膜而得到的B扫描数据和/或OCT体数据(volumedata)的图像解析的画面的按钮。
NPA激光凝固按钮528是用于跳转至用于进行使用激光凝固装置130的治疗相关分析的画面的按钮。在诊断的结果为医生判断为在患者的眼底存在病变部，需要抑制疾病的发展的情况下，也存在利用激光凝固装置130对眼底照射激光而进行凝固治疗的情况。该情况下，点击NPA激光凝固按钮528。在点击NPA激光凝固按钮528后，为了决定照射激光的位置，跳转至具有模拟功能的画面，以便能够使用无灌注区候选图像来提示适当的激光照射位置。
NPA视野解析按钮是用于跳转至使用由视野检测仪120得到的视野图(表示了可视范围的图)和无灌注区候选图像来进行视野有关分析的画面的按钮。在点击NPA视野解析按钮530后，切换至组合显示由视野检测仪120得到的视野图和无灌注区候选图像的NPA视野解析模式。进行将视野图和强调了无灌注区的图像组合的解析处理，由此，能够调查视网膜上的NPA的位置与视野的相关关系。
(实施方式的效果)
如上所述，在本实施方式中，能够通过对眼底像进行图像处理来推定无灌注区。
此外，在本实施方式中，根据实施了强调血管部分的强调图像处理的眼底图像来推定多个无灌注区，因此，能够高精度地推定多个无灌注区。
进一步，通过使用UWFSLO图像来推定无灌注区，由此能够在早期发现视网膜周边区域的NPA，除糖尿病性视网膜症之外，还能够在早期发现视网膜静脉阻塞症、视网膜静脉分枝阻塞症。
此外，有益于利用激光凝固装置130进行的激光凝固手术的激光照射位置的指定。进一步，通过进行组合视野检测仪120的视野检查数据、视野检查数据、和强调无灌注区的图像的解析处理，能够调查NPA与视野的相关关系。
进一步，通过过程观察，能够通过持续地观察无灌注区而为治疗效果及症状发展的确认提供辅助医生的信息。
(变形例)
＜第1变形例＞
在本公开的技术中，也可以首先执行步骤308和步骤310的某个，将由此推定的无灌注区候选组作为次级候选，接着，在另一个步骤中从次级候选缩小为三级候选的范围。例如，在执行步骤308的处理后，在步骤310中将其候选进一步缩小，或者也可以反过来，在执行步骤310的处理后，在步骤308中将其候选进一步缩小。由此，能够省略步骤312。
此外，也可以将步骤306和步骤308的范围缩小的结果作为推定无灌注区。还可以将步骤306和步骤310的范围缩小的结果作为推定无灌注区。
＜第2变形例＞
在本公开的技术中，关于步骤312的处理，也可以改变上述内容，推定处理部206至少选出暗区域或沿着血管的区域的多个区域作为无灌注区候选组，来作为步骤312的统合。
＜第3变形例＞
在上述实施方式中，在步骤314中，在UWFSLO图像中对推定的多个无灌注区在周围标注了彩色边框并涂绘了较浅的颜色。但是，本公开的技术不限定于此，也可以创建省略血管部分而仅表示出多个无灌注区的图像、或者创建省略血管部分而仅如上述那样强调了多个无灌注区的图像。
＜第4变形例＞
在本公开的技术中，作为显示的信息还可以包括左右眼信息、产生的无灌注区个数的时间变化的图表、无灌注区平均面积的时间变化的图表、无灌注区总面积的时间变化的图表。进一步，也可以在激光凝固手术中，在UWFSLO眼底图像上重叠地显示无灌注区候选图像。
＜第5变形例＞
在上述实施方式中，管理服务器140执行图6的图像处理程序，但本公开的技术不限定于此。例如，第1：可以将图6的图像处理程序预先存储于眼科装置110的存储装置17，眼科装置110在每次获取UWFSLO图像时执行图6的图像处理程序。第2：可以使图像阅览器150执行步骤302～314。另外，在第2的情况下的步骤302中，从管理服务器140获取指定的眼底图像的图像数据，代替步骤316的上述内容，在显示器156上显示强调了多个无灌注区的图像。在第1的情况下，眼科装置110为本公开的技术的图像处理装置的一例。在第2的情况下，图像阅览器150为本公开的技术的图像处理装置的一例。
＜第6变形例＞
在上述实施方式中，利用图像阅览器150将强调了多个无灌注区的图像显示于显示器156，但是本公开的技术不限定于此。例如，也可以显示图7的UWFSLO图像、图8的在UWFSLO图像中强调了血管的图像、图15～图17的强调了多个无灌注区的图像。该情况下，也可以采用将图7、图8、图15～图17的图像以一览的方式进行显示、在每次点击时切换地依次显示、或选择性地进行显示。
＜第7变形例＞
在本公开的技术中，也可以使在步骤306中获取的无灌注区的初级候选和在步骤308、310中从候选中排除的候选的图像以一览的方式进行显示、在每次点击时切换地依次显示、或选择性地进行显示。
＜第8变形例＞
在上述实施方式中，获取眼底整体的图像作为UWFSLO图像，但本公开的技术不限定于此，作为过程观察，也可以获取仅包含已发现的病变部的规定区域的UWFSLO图像。
＜第9变形例＞
以对UWFSLO图像进行图像处理为例进行了说明，但当然也可以是由眼底相机得到的眼底图像，或者也能够适用于由视角较小的(例如，内部照射角为100°以下)的SLO眼科装置或眼底相机等各种眼科装置拍摄的眼底图像。
＜第10变形例＞
在上述实施方式中，以包括眼科装置110、视野检测仪120、激光凝固装置130、管理服务器140、以及图像阅览器150的眼科系统100为例进行了说明，但本公开的技术不限定于此。例如，作为第1例，眼科装置110也可以还具有视野检测仪120以及激光凝固装置130的至少一者的功能。此外，作为第2例，包括上述实施方式中的眼科装置110、视野检测仪120、以及激光凝固装置130。并且，在第1例以及第2例中，眼科装置110也可以还具有管理服务器140以及图像阅览器150的至少一者的功能。由此，能够省略与眼科装置110所具有的功能对应的管理服务器140以及图像阅览器150的至少一个装置。
此外，也可以省略管理服务器140，使图像阅览器150执行管理服务器140的功能。
另外，上述实施方式中说明的图像处理终究仅为一例。因而，当然能够在不脱离宗旨的范围内删除不需要的步骤、追加新的步骤、或调换处理顺序。
另外，在上述实施方式中，示例了由利用计算机的软件构成来实现数据处理的情况，但本公开的技术不限定于此。例如，也可以代替利用计算机的软件构成，仅由FPGA或ASIC等硬件构成来执行数据处理。也可以利用软件构成来执行数据处理中的一部分处理，利用硬件构成来执行剩余的处理。
附图标记说明
12 被检眼
100 眼科系统
110 眼科装置
120 视野检测仪
130 激光凝固装置
140 管理服务器
150 图像阅览器
154 存储装置
154P 图像处理程序。

Claims (10)

1.一种图像处理方法，包括：
根据被检眼的眼底图像推定无灌注区。
2.如权利要求1所述的图像处理方法，其特征在于，还包括：
创建将所推定出的所述无灌注区重叠在所述眼底图像上的无灌注区候选图像。
3.如权利要求1或2所述的图像处理方法，其特征在于，
对所述眼底图像进行强调血管部分的强调图像处理，
使用强调图像处理后的所述眼底图像推定所述无灌注区。
4.如权利要求3所述的图像处理方法，其特征在于，还包括：
创建将所推定出的所述无灌注区重叠于强调图像处理后的所述眼底图像上的无灌注区候选图像。
5.如权利要求1～4中任一项所述的图像处理方法，其特征在于，
根据所述眼底图像推定无灌注区包括：
从所述眼底图像抽选出比第1暗度暗的多个像素，从抽选出的多个像素检测所述第1暗度以下的暗像素连续且面积为规定面积以上的区域。
6.如权利要求5所述的图像处理方法，其特征在于，
根据所述眼底图像推定无灌注区包括：
从面积为所述规定面积以上的多个区域中，基于各区域的像素值的平均值抽选出比所述第1暗度暗的第2暗度以下的较暗的暗区域。
7.一种图像处理程序，使计算机执行权利要求1～6中任一项所述的图像处理方法。
8.一种图像处理装置，包括：
存储装置，其存储用于使处理装置执行图像处理方法的图像处理程序；和
处理装置，其通过执行存储于所述存储装置的图像处理程序而执行所述图像处理方法，
所述图像处理方法为权利要求1～6中任一项所述的图像处理方法。
9.一种图像显示装置，包括显示部，所述显示部显示在权利要求1～6中任一项所述的图像处理方法中推定出的无灌注区。
10.一种图像显示方法，包括：
接收被检眼的眼底图像的眼底图像数据、和对所述眼底图像进行图像处理而得到的无灌注区候选图像的无灌注区候选图像数据；和
生成基于所述眼底图像数据而在眼底图像显示区域显示所述眼底图像、基于所述无灌注区候选图像数据而在无灌注区候选图像显示区域显示所述无灌注区候选图像的画面。
CN202310734582.5A 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法 Pending CN116807381A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310734582.5A CN116807381A (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PCT/JP2017/047379 WO2019130583A1 (ja) 2017-12-28 2017-12-28 画像処理方法、画像処理プログラム、画像処理装置、画像表示装置、及び画像表示方法
CN202310734582.5A CN116807381A (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法
CN201780098008.8A CN111526779B (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201780098008.8A Division CN111526779B (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法

Publications (1)

Publication Number Publication Date
CN116807381A true CN116807381A (zh) 2023-09-29

Family

ID=67066914

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202310734582.5A Pending CN116807381A (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法
CN201780098008.8A Active CN111526779B (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201780098008.8A Active CN111526779B (zh) 2017-12-28 2017-12-28 图像处理方法、图像处理程序、图像处理装置、图像显示装置、以及图像显示方法

Country Status (5)

Country Link
US (2) US11712160B2 (zh)
EP (1) EP3733050A4 (zh)
JP (2) JP6947226B2 (zh)
CN (2) CN116807381A (zh)
WO (1) WO2019130583A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3733050A4 (en) 2017-12-28 2021-08-11 Nikon Corporation Image processing method, image processing program, image processing device, image display device and image display method
CN114599267A (zh) * 2019-08-30 2022-06-07 株式会社尼康 图像处理方法、图像处理装置、以及程序
WO2021074963A1 (ja) * 2019-10-15 2021-04-22 株式会社ニコン 画像処理方法、画像処理装置、プログラム

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5535905B1 (zh) 1971-07-09 1980-09-17
US7404640B2 (en) * 2002-06-14 2008-07-29 Physical Sciences, Inc. Monitoring blood flow in the retina using a line-scanning laser ophthalmoscope
JP4855150B2 (ja) * 2006-06-09 2012-01-18 株式会社トプコン 眼底観察装置、眼科画像処理装置及び眼科画像処理プログラム
JP4940070B2 (ja) * 2007-09-10 2012-05-30 国立大学法人 東京大学 眼底観察装置、眼科画像処理装置及びプログラム
JP5535905B2 (ja) 2008-06-04 2014-07-02 株式会社網膜情報診断研究所 網膜情報診断システム
JP2010233916A (ja) * 2009-03-31 2010-10-21 Chiba Univ 眼底画像処理装置及び眼底画像処理プログラム並びに眼底画像処理方法
MY147093A (en) * 2009-05-13 2012-10-31 Inst Of Technology Petronas Sdn Bhd Apparatus for monitoring and grading diabetic retinopathy
US8672480B2 (en) 2009-09-30 2014-03-18 Nidek Co., Ltd. Ophthalmic photographing apparatus
JP5790002B2 (ja) * 2011-02-04 2015-10-07 株式会社ニデック 眼科撮影装置
US8419186B2 (en) 2009-09-30 2013-04-16 Nidek Co., Ltd. Fundus observation apparatus
JP5698465B2 (ja) * 2010-04-22 2015-04-08 キヤノン株式会社 眼科装置、表示制御方法及びプログラム
JP5702991B2 (ja) * 2010-11-19 2015-04-15 キヤノン株式会社 画像処理装置及び画像処理方法
JP5849470B2 (ja) * 2011-07-04 2016-01-27 株式会社ニコン 培地供給装置、顕微鏡システム
JP5979904B2 (ja) * 2012-02-20 2016-08-31 キヤノン株式会社 画像処理装置、眼科撮影システム、及び画像処理方法
TW201406707A (zh) * 2012-05-04 2014-02-16 Acucela Inc 用以治療糖尿病性視網膜病變及其他眼部疾病之方法
US9357916B2 (en) * 2012-05-10 2016-06-07 Carl Zeiss Meditec, Inc. Analysis and visualization of OCT angiography data
JP6316298B2 (ja) * 2012-09-10 2018-04-25 オレゴン ヘルス アンド サイエンス ユニバーシティ Ｏｃｔ血管造影による局所循環の定量化
US20140276025A1 (en) * 2013-03-14 2014-09-18 Carl Zeiss Meditec, Inc. Multimodal integration of ocular data acquisition and analysis
JP5730375B2 (ja) 2013-10-31 2015-06-10 キヤノン株式会社 画像処理装置及びその制御方法、並びに、プログラム
CN103870687A (zh) * 2014-03-05 2014-06-18 中国人民解放军第四军医大学 激光光凝范围和糖尿病性视网膜病变预后的关系研究方法
US11071452B2 (en) 2014-06-30 2021-07-27 Nidek Co., Ltd. Optical coherence tomography device, optical coherence tomography calculation method, and optical coherence tomography calculation program
JP6535985B2 (ja) * 2014-06-30 2019-07-03 株式会社ニデック 光コヒーレンストモグラフィ装置、光コヒーレンストモグラフィ演算方法及び光コヒーレンストモグラフィ演算プログラム
JP6469387B2 (ja) * 2014-08-26 2019-02-13 株式会社トプコン 眼底解析装置
US10368734B2 (en) * 2015-02-19 2019-08-06 Carl Zeiss Meditec, Inc. Methods and systems for combined morphological and angiographic analyses of retinal features
US11284792B2 (en) * 2015-03-06 2022-03-29 University Of Washington Methods and systems for enhancing microangiography image quality
US20160278983A1 (en) * 2015-03-23 2016-09-29 Novartis Ag Systems, apparatuses, and methods for the optimization of laser photocoagulation
US20160278627A1 (en) * 2015-03-25 2016-09-29 Oregon Health & Science University Optical coherence tomography angiography methods
JP6604743B2 (ja) * 2015-04-30 2019-11-13 キヤノン株式会社 情報処理装置、その作動方法、及びコンピュータプログラム
ES2950507T3 (es) * 2015-08-19 2023-10-10 Univ East Carolina Tratamiento y gestión del aumento del síndrome de piernas inquietas
JP6702764B2 (ja) 2016-03-08 2020-06-03 キヤノン株式会社 光干渉断層データの処理方法、該方法を実行するためのプログラム、及び処理装置
EP3733050A4 (en) 2017-12-28 2021-08-11 Nikon Corporation Image processing method, image processing program, image processing device, image display device and image display method

Also Published As

Publication number Publication date
US20200359888A1 (en) 2020-11-19
US11712160B2 (en) 2023-08-01
EP3733050A4 (en) 2021-08-11
JPWO2019130583A1 (ja) 2020-12-10
JP6947226B2 (ja) 2021-10-13
WO2019130583A1 (ja) 2019-07-04
JP7264195B2 (ja) 2023-04-25
CN111526779B (zh) 2023-07-11
US20230320584A1 (en) 2023-10-12
EP3733050A1 (en) 2020-11-04
CN111526779A (zh) 2020-08-11
JP2022000185A (ja) 2022-01-04

Similar Documents

Publication Publication Date Title
US10098542B2 (en) Fundus observation apparatus
JP7264195B2 (ja) 画像処理方法、画像処理プログラム、画像処理装置、画像表示装置、及び画像表示方法
US11284791B2 (en) Image processing method, program, and image processing device
JP6656063B2 (ja) 画像処理装置及び画像処理方法、プログラム
US11941788B2 (en) Image processing method, program, opthalmic device, and choroidal blood vessel image generation method
US20230154010A1 (en) Image processing method, image processing device, and program
WO2021074960A1 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
US20220230307A1 (en) Image processing method, image processing device, image processing program
CN111989030A (zh) 图像处理方法、程序及图像处理装置
JP7494855B2 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
EP3888529A1 (en) Ophthalmological device
JP2017064547A (ja) 眼底観察装置
EP3888527A1 (en) Ophthalmological device
JP7264177B2 (ja) 画像処理方法、画像表示方法、画像処理装置、画像表示装置、画像処理プログラム、及び画像表示プログラム
CN111954485A (zh) 图像处理方法、程序、图像处理装置及眼科系统
CN114599267A (zh) 图像处理方法、图像处理装置、以及程序
JP2024059709A (ja) 画像処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination