CN103919525A - 拼接图像的方法及摄像系统 - Google Patents
拼接图像的方法及摄像系统 Download PDFInfo
- Publication number
- CN103919525A CN103919525A CN201310012134.0A CN201310012134A CN103919525A CN 103919525 A CN103919525 A CN 103919525A CN 201310012134 A CN201310012134 A CN 201310012134A CN 103919525 A CN103919525 A CN 103919525A
- Authority
- CN
- China
- Prior art keywords
- image
- eye fundus
- grey
- gray scale
- contrast
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Eye Examination Apparatus (AREA)
Abstract
本发明提供一种拼接图像的方法及摄像系统,适于拼接动物的眼睛底部的图像。该拼接图像的方法包括:获取动物的多个眼底图像,其中这些眼底图像部分重叠;将这些眼底图像分别转换为多个灰阶图像;提高这些灰阶图像的对比;比较被提高对比的这些灰阶图像,以得到多个拼接数据;根据这些拼接数据拼接这些眼底图像。
Description
技术领域
本发明是有关于一种图像处理的方法与光学系统,且特别是有关于一种适于拼接动物眼睛底部的拼接图像的方法及摄像系统。
背景技术
眼睛是灵魂之窗,通过眼睛人们得以感受这个世界的光与色彩。而眼睛中感觉颜色与光的锥状细胞与杆状细胞皆位于眼底的视网膜上,是人体中可将光转换成生理电信号的组织。其中,供给眼睛血液与养分的血管也位于眼底。当眼底出现血管增生或是破裂的时候,例如黄斑部病变等症状,极易造成视网膜上的锥状细胞与杆状细胞死亡,而使得病患丧失视力。因此,在眼部疾病诊断及预防保健上,眼底的图像的观察与追踪是极其重要的。
一般而言,由于人眼的瞳孔大小限制之故,因此传统的眼底图像摄影方法在一个角度的单次摄影中,可拍摄到约30到40度视角的眼底图像范围。因此,若要拍摄位于眼底较边缘的图像时,常令病患凝视一个观察参考点,而后再以缓慢、稳定持续的速度将眼睛凝视的点作上下左右的移动,藉此可取得多张眼底的图像。而后,再利用电脑等数据处理装置,通过后续专门的图像合成软件以组合多张眼底的图像。然而,由于这些眼底的图像是由多次拍摄而得来,因此每次拍摄的曝光值与白平衡都不尽相同。此外,需对这些图像先行校正,才能进行拼接,使得其校正的难度增加而影响到拼接后的图像品质。拼接图像品质若受影响,容易导致医护人员难以辨识眼底的微血管图像,而可能造成判断上的困难甚至延误病患的治疗时机。因此,如何快速得到更完整、更清晰的眼底图像是医疗目前当务之急的课题。
发明内容
本发明的实施例提供一种拼接图像的方法,可提升图像拼接的正确性。
本发明的实施例提供一种摄像系统,可达到较正确的图像拼接效果。
本发明的一实施例提供一种拼接图像的方法,适于拼接动物的眼睛底部的图像。拼接图像的方法包括:获取动物的多个眼底图像,其中这些眼底图像部分重叠;将这些眼底图像分别转换为多个灰阶图像;提高这些灰阶图像的对比;比较被提高对比的这些灰阶图像,以得到多个拼接数据;根据这些拼接数据拼接这些眼底图像。
在本发明的一实施例中,上述的获取这些眼底图像的步骤为利用光学镜头获取这些眼底图像,且拼接图像的方法还包括在将这些眼底图像分别转换为这些灰阶图像之前,根据光学镜头的光学参数校正这些眼底图像,其中将这些眼底图像分别转换为这些灰阶图像的步骤为将已校正的这些眼底图像分别转换为这些灰阶图像。
在本发明的一实施例中,上述的校正这些眼底图像的步骤包括降低这些眼底图像的枕形畸变。
在本发明的一实施例中,上述的这些眼底图像为彩色图像。
在本发明的一实施例中,上述的提高每一灰阶图像的对比的方法包括:计算灰阶图像中的像素数量相对于灰阶值的灰阶分布关系;在灰阶分布关系中取其斜率连续变化最大的区间所对应的灰阶范围作为待调整灰阶范围;决定待调整灰阶范围与对比提高灰阶范围的转换关系,其中对比提高灰阶范围的下限小于待调整灰阶范围的下限,且对比提高灰阶范围的上限大于待调整灰阶范围的上限;根据转换关系,将灰阶图像中对应于待调整灰阶范围的多个灰阶值分别转换成对比提高灰阶范围的多个灰阶值。
在本发明的一实施例中,上述的比较被提高对比的这些灰阶图像,以得到多个拼接数据的方法包括利用平面拼接演算法对被提高对比的这些灰阶图像作计算,以计算出这些拼接数据,其中这些拼接数据包括分别对应于这些眼底图像的多个拼接数据。
在本发明的一实施例中,上述的至少部分这些眼底图像包括视神经盘图像、黄斑部图像及血管图像的至少其中之一,且比较被提高对比的这些灰阶图像以得到多个拼接数据的方法包括以被提高对比的这些灰阶图像中对应于视神经盘图像、黄斑部图像及血管图像的至少其中之一的部分作为优先比较基础,以得到这些拼接数据。
在本发明的一实施例中,上述的获取动物的这些眼底图像包括从多个不同的角度获取动物的这些眼底图像。
本发明的一实施例提出一种摄像系统,适于获取动物的眼睛底部的图像,摄像系统包括摄像单元以及处理单元。摄像单元获取动物的多个眼底图像,其中这些眼底图像部分重叠。处理单元与摄像单元电性连接,处理单元将这些眼底图像分别转换为多个灰阶图像,处理单元提高这些灰阶图像的对比,处理单元比较被提高对比的这些灰阶图像,以得到多个拼接数据,且处理单元根据这些拼接数据拼接这些眼底图像。
在本发明的一实施例中,上述的摄像单元包括光学镜头及图像传感器。摄像单元从多个不同的角度对准动物的眼睛底部,以使光学镜头在这些不同的角度将眼睛底部成像于图像传感器上,进而使图像传感器分别获取这些眼底图像。
在本发明的一实施例中,上述的摄像系统还包括致动器,连接至摄像单元,以将摄像单元移动至这些不同的角度。
在本发明的一实施例中,上述的处理单元先根据光学镜头的光学参数校正这些眼底图像,然后再将已校正的些眼底图像分别转换为这些灰阶图像。
在本发明的一实施例中,上述的处理单元根据光学镜头的光学参数来降低这些眼底图像的枕形畸变。
在本发明的一实施例中,上述的这些眼底图像为彩色图像。
在本发明的一实施例中,上述的处理单元计算每一灰阶图像中的像素数量相对于灰阶值的灰阶分布关系,处理单元在灰阶分布关系中取其斜率连续变化最大的区间所对应的灰阶范围作为待调整灰阶范围,处理单元决定待调整灰阶范围与对比提高灰阶范围的转换关系,对比提高灰阶范围的下限小于待调整灰阶范围的下限,且对比提高灰阶范围的上限大于待调整灰阶范围的上限,且处理单元根据转换关系,将灰阶图像中对应于待调整灰阶范围的多个灰阶值分别转换成对比提高灰阶范围的多个灰阶值。
在本发明的一实施例中,上述的至少部分这些眼底图像包括视神经盘图像、黄斑部图像及血管图像的至少其中之一,且处理单元以被提高对比的这些灰阶图像中对应于视神经盘图像、黄斑部图像及血管图像的至少其中之一的部分作为优先比较基础,以得到这些拼接数据。
在本发明的一实施例中,上述的摄像系统,还包括照明光源,提供照明光束至眼睛底部,其中眼睛底部将照明光束反射成多个分别携带这些眼底图像的图像光束,且摄像单元在多个不同时间点分别配置于这些图像光束的光路径上,以获取这些眼底图像。
基于上述,本发明的实施例中的拼接图像的方法与摄像系统将获取到的多个眼底图像转换为灰阶图像,且强化灰阶图像的对比,并根据强化后的灰阶图像计算出拼接数据,以拼接这些眼底图像。藉此,可缩短拼接眼底图像的时间,并增加眼底图像拼接的准确性以及图像品质,而可得到更广视角的眼底图像。
为让本发明的上述特征和优点能更明显易懂,下文特举实施例,并配合附图作详细说明如下。
附图说明
图1A是本发明的一实施例中摄像系统的示意图;
图1B是本发明的一实施例中拼接图像的方法的流程图;
图1C为根据图1B的实施例中的步骤S100从不同角度获取眼底图像的图像图片的示意图;
图2A是根据图1A的实施例中步骤S100到S200间的详细流程图;
图2B是根据图1A的实施例中步骤S300的详细流程图;
图3A是根据图2B的步骤S320中灰阶的眼底图像400G的灰阶函数GL的灰阶直方图;
图3B是根据图2B的步骤S320中灰阶的眼底图像400GE的灰阶函数GE的灰阶直方图;
图3C是根据图3A中灰阶图像400G的图像图片的示意图;
图3D是根据图3B中灰阶图像400GE的图像图片的示意图;
图4A是强化后的灰阶的眼底图像400GE包括黄斑部的图像图片的示意图;
图4B是强化后的灰阶的眼底图像400GE包括视神经盘的图像图片的示意图;
图4C是由图4A与图4B经过计算出拼接数据再拼接而成的灰阶图像400GE的图像图片的示意图;
图4D是将图4C中计算出的拼接数据套用至全彩的眼底图像400所拼接而成的图像图片的示意图;
图5A是本发明的另一实施例的摄像系统的示意图;
图5B是根据图5A中摄像系统的动作方式的示意图;
图6A本发明的又一实施例的摄像系统的示意图;
图6B是根据图6A中摄像系统的动作方式的示意图。
附图标记说明:
S100、S110、S120、S200、S200’、S210、S220、S230、S300、S310、S320、S330、S340、S400、S500:步骤;
400、400S、400M、400G、400GE、400GEA、400GEB:眼底图像;
10、10’、10”:摄像系统;
100:摄像单元;
130:光学镜头;
140:图像传感器;
200:处理单元;
500:控制单元;
700:承靠部件;
BS:底座;
EB:眼睛;
BSP:支持部;
BSV:轨道;
Δd:偏移值;
EB:眼睛;
F、G、GL、GE、Pcummulate:函数;
IB:图像光束;
imax、GL’max:最大灰阶值;
imin、GL’min:最小灰阶值;
L:照明光源;
LB:照明光束;
MA:黄斑部;
MT:致动器;
OD:视神经盘;
PL、PL’:机台;
UR:使用者;
VC:血管;
WD:观景窗;
X1:第一光轴;
X2:第二光轴;
θ:夹角。
具体实施方式
图1A是本发明的一实施例的摄像系统的示意图。请参照图1A,在本实施例中,摄像系统10包括摄像单元100及处理单元200。摄像单元100适于获取动物的多个眼底图像400,其中这些眼底图像400部分重叠。在本实施例中,眼底图像400例如为全彩的图像,然而在其他实施例中,眼底图像400亦可以是利用红外线摄影等方式取得的其他色彩或灰阶的图像,本发明不以此为限。处理单元200与摄像单元100电性连接,处理单元200分别转换这些全彩的眼底图像400为多个灰阶的眼底图像400G(如图3C),并且提高这些灰阶的眼底图像400G而为强化对比的灰阶的眼底图像400GE(如图3D)。其中,处理单元200可为应用型专用集成电路(application-specific integrated circuit,简称ASIC)等处理器。然后,再根据这些被强化的灰阶的眼底图像400GE计算出多个拼接数据,并根据这些拼接数据拼接这些全彩的眼底图像400。
详细而言,在本实施例中的摄像单元100可还包括光学镜头130与图像传感器140。其中,图像传感器140例如为电荷耦合元件(chargecoupled device,简称CCD)、互补式金属氧化物半导体(ComplementaryMetal-Oxide-Semiconductor,简称CMOS)感测元件或其他适于感光的元件。而处理单元200在转换这些眼底图像400为灰阶图像400G之前,可根据光学镜头130的光学参数修正这些眼底图像400。举例而言,这些光学参数可包括畸变(distortion)、像差(aberration)、色像差(chromaticaberration)及其他光学参数的至少其中之一。由于这些光学参数可通过测量光学镜头130得知,且眼底大致上的弯曲程度亦为已知,因此藉此可经由运算以修正图像,而可计算出多个平面的眼底图像400。所以,本实施例的处理单元200可有效地增加后续拼接运算的效率以及准确度,以利临床医护人员的诊断。
此外,摄像系统10可包括照明光源L,照明光源L可提供照明光束LB至眼睛EB底部,眼睛EB底部将照明光束LB反射成多个分别携带这些眼底图像的图像光束IB,且摄像单元100在多个不同时间点分别配置于这些图像光束IB的光路径上,以获取这些眼底图像400。在图1A的实施例中,照明光源L例如为环状光源,配置于眼睛EB与光学镜头130之间,然而在其他实施例中,照明光源亦可配置于其他位置,本发明并不以此为限。
此外,在本实施例中,摄像系统10可还包括控制单元500,与摄像单元100电性连接。其中眼睛EB具第一光轴X1,摄像单元100具有第二光轴X2,而控制单元500改变第二光轴X2与第一光轴X1的夹角θ大小,以获取多个不同角度的眼底图像400,进而可在一次摄影中拼接出较广视角的眼底图像400,并且同时具有相近的曝光值以及白平衡,可提升眼底图像400的视角以及品质,藉此可提升临床上病理诊断的准确性。
图1B是本发明的一实施例中拼接图像的方法的流程图。图1C为根据图1B的实施例中的步骤S 100从不同角度获取眼底图像的图像图片的示意图。请参照图1B及图1C,本实施例的拼接图像的方法可利用图1A的摄像系统10来完成。在本实施例中,拼接图像的方法可包括如下的步骤。首先,先获取动物的多个眼底图像400(步骤S100),例如为图1C中获取人眼中不同角度的全彩眼底图像400,亦即包括由眼睛EB正视角度而获取到的眼底图像400M,由相对于眼睛EB偏移角度而获取到的眼底图像400S。这些眼底图像400部分重叠。然后,将这些眼底图像400分别转换为多个灰阶图像400G(步骤200),例如利用图1A中的处理单元200将这些眼底图像400转换为灰阶图像400G。接着,提高这些灰阶图像400G的对比(步骤300),藉此可增强如微血管的分布或是黄斑部MA(如图3C与图3D所绘示)的组织颜色等具有病理特征之处。并且,比较被提高对比的这些灰阶图像400GE,以得到多个拼接数据(步骤S400)。举例而言,通过图1A中的处理单元200提高这些灰阶图像400G的对比,可强化微血管或是黄斑部MA等图像特征,并可利用这些特征计算出各图像的相对关系以利于后续图像合并。然后,根据这些拼接数据拼接这些眼底图像400(步骤500)。通过灰阶化眼底图像400G并强化其图像特征,合并眼底图像400所需的运算时间以及错误率相较于直接合并全彩眼底图像400而言可有效地被减低。并且,由多个不同的角度获取眼底图像400并合并,相较一般单次眼底拍摄中视角范围仅约30度到40度,能获得更大眼底视角以利诊断。值得注意的是,上述的眼底图像400、400M及400S的数量仅用于举例说明本实施例,在其他实施例中亦可连续地获取这些眼底图像,本发明不以此为限。
图2A是根据图1A的实施例中步骤S100到S200间的详细流程图。请参照图2A,其中获取这些眼底图像400的步骤(步骤S100)可包括利用光学镜头130获取这些眼底图像400(步骤S110)。由于眼底是具有一定屈光度的凹面,通过光学镜头130所量测到的眼底图像400可能有例如为枕形畸变(pincushion distortion)等图像变形(distortion)。因此,在将这些眼底图像400分别转换为这些灰阶图像400G之前,根据光学镜头130的光学参数校正这些眼底图像400(步骤S120)。如此一来,可降低后续拼接演算时所需要处理的图像变形(distortion)问题。然后,将已校正的这些眼底图像400分别转换为这些灰阶图像400G。(步骤S200’)。举例而言,每一眼底图像400可具有多个像点,每一个像点可具有第一色信息CR,第二色信息CG以及第三色信息CB。详细而言,将这些眼底图像400转换为灰阶图像400G的演算法如下。
G=F(CR,CG,CB),F代表一函数。
更详细而言,第一色信息CR,第二色信息CG以及第三色信息CB可经下式来转换成灰阶函数G:
亦即,全彩的眼底图像400中每一个像点的第一色信息CR,第二色信息CG以及第三色信息CB,可利用上述的演算法转换为灰阶图像400G。藉此,在本实施例中,由图1C中所获取人眼中不同角度的全彩眼底图像400可被转换为灰阶的眼底图像400G。此外,原来的全彩眼底图像400在经过光学镜头130的光学参数修正其像差后亦被保留,以待后续的处理。
图2B是根据图1A的实施例中步骤S300的详细流程图。请参照图2B,在强化这些经过转换的灰阶图像400G的步骤(步骤S300)中,先计算灰阶图像400G中的像素数量相对于灰阶值的灰阶分布关系(步骤S310)。并且,在灰阶分布关系中取其斜率连续变化最大的区间所对应的灰阶范围作为待调整灰阶范围(步骤S320)。接着,决定待调整灰阶范围与对比提高灰阶范围的转换关系(步骤S330)。其中,对比提高灰阶范围的下限小于待调整灰阶范围的下限,且对比提高灰阶范围的上限大于待调整灰阶范围的上限。并且,根据转换关系,将灰阶图像400G中对应于待调整灰阶范围的多个灰阶值分别转换成对比提高灰阶范围的多个灰阶值(步骤S340)。亦即,对比提高灰阶的范围在灰阶分布上的范围大于待调整灰阶范围。换言之,此转换关系可将原本在灰阶分布上分布范围较集中待转换的灰阶图像400G,适当地转换为在灰阶分布上分布范围较广的灰阶图像400GE。藉此,可增加灰阶图像的对比度,而可凸显眼底图像的特征如血管VC(如图3C与图3D所绘示)的分布或是黄斑部MA的状态,以利后续图像合并及临床诊断。
图3A是根据图2B的步骤S320中灰阶的眼底图像400G的灰阶函数GL的灰阶直方图。图3B是根据图2B的步骤S320中灰阶的眼底图像400GE的灰阶值GE的灰阶直方图。请参照图3A及图3B,详细而言,在本实施例中,可经由计算灰阶的眼底图像400G中每一个像素点的灰阶值,转换至具有L阶灰阶的眼底图像GL(x,y),其中x与y分别代表眼底图像GL(x,y)的x轴座标值与y轴座标值(即与像素的位置对应)。从每一个灰阶的眼底图像400G的这些像素点的灰阶所产生的灰阶直方图可表示为,亦即从眼底图像GL(x,y)所产生的灰阶直方图可表示为:
其中Pcummulate(GL)代表眼底图像GL(x,y)所包含的像素数量总和,L代表眼底图像GL(x,y)的灰阶直方图的灰阶最大值,i代表灰阶值(即图3A的横轴),P(i)代表具有灰阶值i的像素的数量。藉此,可将眼底图像GL(x,y)转换如图3A中所示出的灰阶直方图。接着再取灰阶直方图的P(i)不为零的区间(例如i=k至i=k+n的范围),并计算:
接着取Psum中计算出最大值的区间,此区间例如是从i=imin至i=imax的区间,再套用线性转换式,展开灰阶值方图的imin至imax区间,以强化图像对比,其线性转换式如下式:
其中INT{}为取整数的函式,GL’max与GL’min分别代表眼底图像GE(x,y)中灰阶值方图的灰阶最大值及最小值。藉此,在决定待调整灰阶范围与对比提高灰阶范围的转换关系(步骤S330)中,每一灰阶图像400G的灰阶图像值GL(x,y)可被转换为函数GE(x,y),藉此可获得被强化的灰阶图像,其中GL’min可为大于或等于0的数值。举例而言,GL’max的数值可等于255(亦即图像处理中常见的8-bit灰阶的最大值),而GL’min的数值可以是0,如此可将待转换的灰阶图像400G的灰阶分布范围拓展为255,进而增加其对比度,然而本发明不在此限,在其他实施例中,可根据实际需求而制定GL’min及GL’max的数值,以得到适于诊断的眼底图像品质。此外,上述公式是将imin至imax的灰阶范围作平均地拓展。然而,在其他实施例中,为了得到更易于协助拼接的灰阶图像(例如使血管与周围组织的对比度更大的图像),亦可对灰阶值进行伽玛校正(gamma correction)或其他校正,例如相当于使imin至imax的各灰阶可以不等间距的方式拓展。而后,可再根据转换关系(例如上述的转换式),将灰阶图像400G中对应于待调整灰阶范围的多个灰阶值分别转换成对比提高灰阶范围的多个灰阶值(步骤S340),亦即通过上述的线性转换式,可将灰阶图像提高对比而为强化的灰阶图像。举例而言,在本实施例中,被转换为灰阶的眼底图像400G可藉此被强化为灰阶图像400GE,进而强化眼底图像的特征如血管VC的分布或是黄斑部MA,以利后续图像合并及临床诊断。
图3C是根据图3A中灰阶图像400G的图像图片的示意图。图3D是根据图3B中灰阶图像400GE的图像图片的示意图。请参照图3A、图3B、图3C及图3D,详细而言,在步骤S300中,强化灰阶图像的方法是从已转换为灰阶的眼底图像400G中获取具有最大灰阶变化的区间(例如图3A中的灰阶范围区间imin至imax),并将灰阶像素与灰阶像素间的灰阶差异放大,进而增加每一个灰阶像素的对比度(如图3A中的灰阶范围区间imin至imax可被放大如图3B中0到255的灰阶范围区间)。藉此,例如为图3C中所示出的灰阶的眼底图像400G的对比度可被有效地强化为图3D中所示出的灰阶的眼底图像400GE。其中,特别是布满血管VC的视神经盘等组织区域,其灰阶图像局部的灰阶差异较周遭的组织大,经过上述的演算法强化后更可突显血管VC等组织区域边缘的对比度,可减少医护人员错误辨识血管VC的情形,使强化后的眼底图像在临床诊断上具有更佳的可靠性以及准确性。
图4A是强化后的灰阶的眼底图像400GE包括黄斑部的图像图片的示意图。图4B是强化后的灰阶的眼底图像400GE包括视神经盘的图像图片的示意图。图4C是由图4A与图4B经过计算出拼接数据再拼接而成的灰阶图像400GE的图像图片的示意图。请参照图3C至图4C。举例而言,在比较这些已被提高对比的灰阶的眼底图像400GE,以得到多个拼接数据(步骤S400)时,可利用平面拼接演算法以及被强化的这些灰阶的眼底图像400GE计算出这些眼底图像400GE间彼此的拼接数据,其中这些拼接数据可包括分别对应于这些眼底图像400GE的多个偏移值Δd。详细而言,请先参照图1C。从眼底获取而来的全彩眼底图像400可能来自于眼底的靠近中央(如眼底图像400M)或远离中央的部分(如眼底图像400S)。在步骤S200前,这些全彩的眼底图像400可根据例如图1A中的光学镜头130的光学参数,通过修正以除去像差而成为平面图像。接着,请再参照图3C及图3D,这些全彩的眼底图像400在步骤S200中被转换为多张平面的灰阶的眼底图像400G。然后,请参照图4A到图4C。在经过步骤S300后被强化的多个灰阶的眼底图像400GE中,例如为图4A中所示出的灰阶眼底图像400GEA及图4B中所示出的灰阶眼底图像400GEB,可利用如应用型专用集成电路(application-specificintegrated circuit,ASIC)所支持的平面演算法判别这两张眼底灰阶图像中心位置(如图4A到图4D图示中的白色虚线十字)的偏移值Δd。其中,图4A与图4B所示出的眼底灰阶图像400GEA及400GEB中分别包括图3C及图3D中的黄斑部MA以及视神经盘OD为举例说明本实施例。更详细而言,在其他实施例中,亦可拼接连续取得的多张眼底灰阶图像400GE,本发明不以此为限。
图4D是将图4C中计算出的拼接数据套用至全彩的眼底图像400所拼接而成的图像图片的示意图。请参照图4D,详细而言,在根据这些拼接数据拼接这些眼底图像(步骤S500)中,在本实施例中,可将此拼接数据中的偏移值Δd套用到相对应的平面全彩眼底图像400以合并两张平面全彩眼底图像400。并且,在其他实施例中,亦可通过相同方法计算出多张眼底图像400彼此的偏移值Δd,而可藉此拼接出更广视角的全彩眼底图像400。一般而言,若是直接计算多张全彩眼底图像400的中心位置以拼接更广视角的眼底图像,在计算偏移值Δd时,易受到颜色的影响而难以判断微血管等组织的相对位置,进而使得全彩眼底图像400的拼接所需要的运算时间增加,且亦易产生拼接上的误差。在本实施例中,先将全彩眼底图像400转换为灰阶图像400G后,经过灰阶强化而增加微血管等组织的对比度以易于辨识,因此可缩短计算偏移值Δd的时间,并增加其拼接的准确率。而后,再将偏移值Δd套用回全彩眼底图像400并将其拼接,藉此可避免颜色影响拼接演算法的准确率与效率。
此外,在本实施例中,由眼底所获取到的眼底图像400中,至少部分这些眼底图像400包括视神经盘图像OD、黄斑部MA图像及血管VC图像的至少其中之一。举例而言,如图4A中包含图3C及图3D中视神经盘OD与血管VC图像的眼底图像400GEA,以及图4B中包含图3C及图3D中黄斑部MA图像的眼底图像400GEB。且比较被提高对比的这些灰阶图像400GE以得到多个拼接数据方法包括以被提高对比的这些灰阶图像400GE中对应于视神经盘图像OD、黄斑部MA图像及血管VC图像的至少其中之一的部分作为优先比较基础,以得到这些拼接数据。由于黄斑部MA因具有密集的感光细胞与叶黄素而呈现黄色,其主要位于眼底的视网膜中心区域,与众多微血管集中的视神经盘OD(亦即所谓的盲点)皆为眼底图像中具有明显图像特征的部位。因此,以包含黄斑部MA图像以及视神经盘OD图像的眼底图像的图像中心的偏移值Δd来辅助拼接眼底图像可提升图像拼接的准确性,并且可包含临床上重要的眼底生理图像信息例如血管VC的分布状态以及黄斑部MA的组织颜色,以利医护人员的观察及诊断。
图5A是本发明的另一实施例的摄像系统的示意图。图5B是根据图5A中摄像系统的动作方式的示意图。请参照图5A及图5B,在本实施例中,摄像系统10’具有底座BS、支持部BSP及机台PL。底座BS具有轨道BSV,支持部B SP可在轨道BSV内滑动。机台PL内可配置有摄像单元100及光学镜头130,且支持部BSP连接并支持机台PL。此外,摄像系统10’亦可包括承靠部件700,配置于机台PL的上方,使用者UR的脸部可承靠在承靠部件700上,藉此以与光学镜头130及摄像单元100维持适当的距离,通过机台PL上的观景窗WD,可利于摄像系统10’快速对焦拍摄使用者UR的眼底图像,并藉此可增加拍摄眼底图像的稳定性以及效率。
详细而言,摄像系统10’可还包括致动器MT,连接至支持部BSP,而可带动摄像单元100与光学镜头130以移动至不同的角度,如图5B所示出,进而可由不同的角度拍摄使用者UR眼底的图像。举例而言,由图5A的角度拍摄的使用者UR眼底图像400可如图1B中的眼底图像400M,而由图5B的偏斜角度拍摄使用者UR眼底的图像400可如图1C中的眼底图像400S。更进一步而言,机台PL可由轨道BSV的其中一端连续地移动至另外一端,并且在此移动过程中连续地拍摄多张眼底图像400。换言之,可通过将机台PL于轨道BSV中滑动,而可便利准确地扫描使用者UR多个角度的眼底图像400并加以合并,因此使用者UR可在单次拍摄中得到更广角的眼底图像400,并且可使多张眼底图像400如白平衡、曝光值等条件相近,便于后续的图像迭合处理,进而可协助医护人员的诊断。同时,亦可避免多次分别拍摄眼底对使用者UR造成负担,甚至由于疲劳而产生对拍摄图像影响更剧的眼睛颤动等情形,进而可提升医疗效率及图像品质。
图6A是本发明的又一实施例的摄像系统的示意图。图6B是根据图6A中摄像系统的动作方式的示意图。请参照图6A及图6B,在本实施例中,图6A与图5A实施例的结构相似,然相异之处为,在图6A的摄像系统10”中,摄像单元100与光学镜头130可配置于机台PL’内,并且机台PL’可具有轨道BSV。使用者UR的脸部可承靠在承靠部件700上,通过轨道BSV而使得机台PL’可相对使用者UR的脸部改变拍摄角度。藉此,可达到与图5A实施例的摄像系统10’相似的功能。然而,上述的摄像系统中的部件所配置的位置、形状、结构及动作方式仅用以说明本发明的实施例,可根据实际设计而有所不同,本发明不以此为限。
综上所述,本发明的实施例中拼接图像的方法将由不同的角度取得动物的眼底图像,且将这些眼底图像转换为灰阶图像,之后再将这些灰阶图像强化并计算出其彼此间的拼接数据。经过将图像转换为灰阶图像后,可降低拼接演算所需的时间并有利于多个眼底图像的拼接效率及准确率。此外,通过将图像强化后的灰阶图像彼此间的拼接数据套用回通过光学镜头的光学参数修正后的彩色眼底图像,可避免图像的颜色影响拼接,进而提升拼接图像的品质(例如可增进视网膜微血管的拼接及图像对比)。并且,本发明的实施例中摄像系统可从不同的角度的光轴对准眼底不同区域高速连续获取图像,藉此可在单次拍摄中获取到更广视角的全彩眼底图像,特别是可包含黄斑部与视神经盘血管的拼接图像,藉此有利于医护人员临床上的诊断。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (18)
1.一种拼接图像的方法,其特征在于,适于拼接动物的眼睛底部的图像,该拼接图像的方法包括:
获取该动物的多个眼底图像,其中该多个眼底图像部分重叠;
将该多个眼底图像分别转换为多个灰阶图像;
提高该多个灰阶图像的对比;
比较被提高对比的该多个灰阶图像,以得到多个拼接数据;以及
根据该多个拼接数据拼接该多个眼底图像。
2.根据权利要求1所述的拼接图像的方法,其特征在于,获取该多个眼底图像的步骤为利用光学镜头获取该多个眼底图像,且该拼接图像的方法还包括:
在将该多个眼底图像分别转换为该多个灰阶图像之前,根据该光学镜头的光学参数校正该多个眼底图像,其中将该多个眼底图像分别转换为该多个灰阶图像的步骤为将已校正的该多个眼底图像分别转换为该多个灰阶图像。
3.根据权利要求2所述的拼接图像的方法,其特征在于,校正该多个眼底图像的步骤包括降低该多个眼底图像的枕形畸变。
4.根据权利要求1所述的拼接图像的方法,其特征在于,该多个眼底图像为彩色图像。
5.根据权利要求1所述的拼接图像的方法,其特征在于,提高每一该灰阶图像的对比的方法包括:
计算该灰阶图像中的像素数量相对于灰阶值的灰阶分布关系;
在该灰阶分布关系中取其斜率连续变化最大的区间所对应的灰阶范围作为待调整灰阶范围;
决定该待调整灰阶范围与对比提高灰阶范围的转换关系,其中该对比提高灰阶范围的下限小于该待调整灰阶范围的下限,且该对比提高灰阶范围的上限大于该待调整灰阶范围的上限;以及
根据该转换关系,将该灰阶图像中对应于该待调整灰阶范围的多个灰阶值分别转换成该对比提高灰阶范围的多个灰阶值。
6.根据权利要求1所述的拼接图像的方法,其特征在于,比较被提高对比的该多个灰阶图像,以得到多个拼接数据的方法包括:
利用平面拼接演算法对被提高对比的该多个灰阶图像作计算,以计算出该多个拼接数据,其中该多个拼接数据包括分别对应于该多个眼底图像的多个拼接数据。
7.根据权利要求1所述的拼接图像的方法,其特征在于,至少部分该多个眼底图像包括视神经盘图像、黄斑部图像及血管图像的至少其中之一,且比较被提高对比的该多个灰阶图像以得到多个拼接数据的方法包括以被提高对比的该多个灰阶图像中对应于该视神经盘图像、该黄斑部图像及该血管图像的至少其中之一的部分作为优先比较基础,以得到该多个拼接数据。
8.根据权利要求1所述的拼接图像的方法,其特征在于,获取该动物的该多个眼底图像包括从多个不同的角度获取该动物的该多个眼底图像。
9.一种摄像系统,其特征在于,适于获取动物的眼睛底部的图像,该摄像系统包括:
摄像单元,获取该动物的多个眼底图像,其中该多个眼底图像部分重叠;以及
处理单元,与该摄像单元电性连接,该处理单元将该多个眼底图像分别转换为多个灰阶图像,该处理单元提高该多个灰阶图像的对比,该处理单元比较被提高对比的该多个灰阶图像,以得到多个拼接数据,且该处理单元根据该多个拼接数据拼接该多个眼底图像。
10.根据权利要求9所述的摄像系统,其特征在于,该摄像单元包括光学镜头及图像传感器,该摄像单元从多个不同的角度对准该动物的眼睛底部,以使该光学镜头在该多个不同的角度将该眼睛底部成像于该图像传感器上,进而使该图像传感器分别获取该多个眼底图像。
11.根据权利要求10所述的摄像系统,其特征在于,还包括致动器,连接至该摄像单元,以将该摄像单元移动至该多个不同的角度。
12.根据权利要求10所述的摄像系统,其特征在于,该处理单元先根据该光学镜头的光学参数校正该多个眼底图像,然后再将已校正的该多个眼底图像分别转换为该多个灰阶图像。
13.根据权利要求12所述的摄像系统,其特征在于,该处理单元根据该光学镜头的光学参数来降低该多个眼底图像的枕形畸变。
14.根据权利要求9所述的摄像系统,其特征在于,该多个眼底图像为彩色图像。
15.根据权利要求9所述的摄像系统,其特征在于,该处理单元计算每一该灰阶图像中的像素数量相对于灰阶值的灰阶分布关系,该处理单元在该灰阶分布关系中取其斜率连续变化最大的区间所对应的灰阶范围作为待调整灰阶范围,该处理单元决定该待调整灰阶范围与对比提高灰阶范围的转换关系,该对比提高灰阶范围的下限小于该待调整灰阶范围的下限,且该对比提高灰阶范围的上限大于该待调整灰阶范围的上限,且该处理单元根据该转换关系,将该灰阶图像中对应于该待调整灰阶范围的多个灰阶值分别转换成该对比提高灰阶范围的多个灰阶值。
16.根据权利要求9所述的摄像系统,其特征在于,该处理单元利用平面拼接演算法对被提高对比的该多个灰阶图像作计算,以计算出该多个拼接数据,其中该多个拼接数据包括分别对应于该多个眼底图像的多个拼接数据。
17.根据权利要求9所述的摄像系统,其特征在于,至少部分该多个眼底图像包括视神经盘图像、黄斑部图像及血管图像的至少其中之一,且该处理单元以被提高对比的该多个灰阶图像中对应于该视神经盘图像、该黄斑部图像及该血管图像的至少其中之一的部分作为优先比较基础,以得到该多个拼接数据。
18.根据权利要求9所述的摄像系统,其特征在于,还包括照明光源,提供照明光束至该眼睛底部,其中该眼睛底部将该照明光束反射成多个分别携带该多个眼底图像的图像光束,且该摄像单元在多个不同时间点分别配置于该多个图像光束的光路径上,以获取该多个眼底图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310012134.0A CN103919525B (zh) | 2013-01-14 | 2013-01-14 | 拼接图像的方法及摄像系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310012134.0A CN103919525B (zh) | 2013-01-14 | 2013-01-14 | 拼接图像的方法及摄像系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103919525A true CN103919525A (zh) | 2014-07-16 |
CN103919525B CN103919525B (zh) | 2016-12-28 |
Family
ID=51138104
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310012134.0A Active CN103919525B (zh) | 2013-01-14 | 2013-01-14 | 拼接图像的方法及摄像系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103919525B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105913446A (zh) * | 2016-05-04 | 2016-08-31 | 深圳市斯尔顿科技有限公司 | 一种多彩线扫描眼底成像装置及多彩眼底图像合成方法 |
CN110251077A (zh) * | 2019-01-30 | 2019-09-20 | 北京大学第三医院(北京大学第三临床医学院) | 一种眼科拍照装置及眼科拍照方法 |
CN110573059A (zh) * | 2017-04-28 | 2019-12-13 | 株式会社尼康 | 眼科拍摄光学系统、眼科拍摄装置、眼科用图像获取方法及眼科用图像系统 |
CN110914773A (zh) * | 2017-05-31 | 2020-03-24 | 株式会社富士金 | 半导体制造装置的管理系统、方法及计算机程序 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5037194A (en) * | 1988-05-31 | 1991-08-06 | Canon Kabushiki Kaisha | Ophthalmologic apparatus and method of compounding the image of an eye to be examined |
US5481653A (en) * | 1989-07-26 | 1996-01-02 | Canon Kabushiki Kaisha | Digital image processing apparatus for synthesizing an image form at least two images |
CN101112315A (zh) * | 2007-08-24 | 2008-01-30 | 珠海友通科技有限公司 | X线透视人体影像自动融合拼接方法 |
CN101732031A (zh) * | 2008-11-25 | 2010-06-16 | 中国大恒(集团)有限公司北京图像视觉技术分公司 | 眼底图像处理方法 |
WO2011069137A1 (en) * | 2009-12-04 | 2011-06-09 | Lumetrics, Inc. | Portable fundus camera |
CN102572227A (zh) * | 2010-12-23 | 2012-07-11 | 华晶科技股份有限公司 | 影像拍摄装置及其影像拼接方法 |
-
2013
- 2013-01-14 CN CN201310012134.0A patent/CN103919525B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5037194A (en) * | 1988-05-31 | 1991-08-06 | Canon Kabushiki Kaisha | Ophthalmologic apparatus and method of compounding the image of an eye to be examined |
US5481653A (en) * | 1989-07-26 | 1996-01-02 | Canon Kabushiki Kaisha | Digital image processing apparatus for synthesizing an image form at least two images |
CN101112315A (zh) * | 2007-08-24 | 2008-01-30 | 珠海友通科技有限公司 | X线透视人体影像自动融合拼接方法 |
CN101732031A (zh) * | 2008-11-25 | 2010-06-16 | 中国大恒(集团)有限公司北京图像视觉技术分公司 | 眼底图像处理方法 |
WO2011069137A1 (en) * | 2009-12-04 | 2011-06-09 | Lumetrics, Inc. | Portable fundus camera |
CN102572227A (zh) * | 2010-12-23 | 2012-07-11 | 华晶科技股份有限公司 | 影像拍摄装置及其影像拼接方法 |
Non-Patent Citations (1)
Title |
---|
20070515: "眼底图像的配准和拼接", 《北京交通大学硕士学位论文》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105913446A (zh) * | 2016-05-04 | 2016-08-31 | 深圳市斯尔顿科技有限公司 | 一种多彩线扫描眼底成像装置及多彩眼底图像合成方法 |
CN110573059A (zh) * | 2017-04-28 | 2019-12-13 | 株式会社尼康 | 眼科拍摄光学系统、眼科拍摄装置、眼科用图像获取方法及眼科用图像系统 |
CN110914773A (zh) * | 2017-05-31 | 2020-03-24 | 株式会社富士金 | 半导体制造装置的管理系统、方法及计算机程序 |
CN110251077A (zh) * | 2019-01-30 | 2019-09-20 | 北京大学第三医院(北京大学第三临床医学院) | 一种眼科拍照装置及眼科拍照方法 |
CN113520302A (zh) * | 2019-01-30 | 2021-10-22 | 北京大学第三医院(北京大学第三临床医学院) | 一种眼科拍照方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103919525B (zh) | 2016-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8837862B2 (en) | Image stitching method and camera system | |
US20210045627A1 (en) | Image processing apparatus and method | |
JP2023071644A (ja) | デジタル治療用矯正眼鏡 | |
Fuhl et al. | Non-intrusive practitioner pupil detection for unmodified microscope oculars | |
US9307903B2 (en) | Image processing apparatus and image processing method | |
CN105310646B (zh) | 基于白睛无影成像的人体健康状况在体分析系统 | |
WO2021135557A1 (zh) | 一种人工智能多模成像分析装置 | |
CN111616800B (zh) | 眼科手术导航系统 | |
US9898816B2 (en) | Diagnosis assisting apparatus and method for assisting diagnosis | |
EP2899584B1 (en) | Spectacle lens design method, spectacle lens manufacturing method, spectacle lens selection method, measuring system and measuring method | |
US10881294B2 (en) | Ophthalmic apparatus | |
US20200085294A1 (en) | Systems and methods for characterizing refraction with ophthalmic imaging systems | |
CN116194033A (zh) | 眼科手术的数字图像优化 | |
CN103919525B (zh) | 拼接图像的方法及摄像系统 | |
US20220198831A1 (en) | System for determining one or more characteristics of a user based on an image of their eye using an ar/vr headset | |
JP2022526867A (ja) | 眼検査 | |
Xin et al. | Optical coherence tomography-based deep learning algorithm for quantification of the location of the intraocular lens | |
JP2022507811A (ja) | 遠隔眼科学における網膜テンプレート合致のためのシステムおよび方法 | |
Fu et al. | A GAN-based deep enhancer for quality enhancement of retinal images photographed by a handheld fundus camera | |
CN116407080A (zh) | 近视患者眼底结构的演变识别及3d可视化系统和方法 | |
JP2017018177A (ja) | 画像処理装置及び画像処理方法 | |
TW201427645A (zh) | 拼接影像的方法及攝像系統 | |
Gabriele et al. | Comparison of parameters from Heidelberg Retina Tomographs 2 and 3 | |
CN113012151A (zh) | 用于ss-oct手术导航系统的oct图像矫正方法及系统 | |
CN103908223A (zh) | 图像获取装置及获取方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C41 | Transfer of patent application or patent right or utility model | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20160119 Address after: Taiwan Taipei City Lake Road Chinese 1 No. 516 9 floor Applicant after: ALTEK BIOTECHNOLOGY CO., LTD. Address before: Chinese Taiwan Hsinchu City Science Park force Road No. 12 Applicant before: Huaping Science & Technology Co., Ltd. |
|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |