CN104224106B - 获取小切口深部手术中高质量图像的方法及装置 - Google Patents

获取小切口深部手术中高质量图像的方法及装置 Download PDF

Info

Publication number
CN104224106B
CN104224106B CN201410534860.3A CN201410534860A CN104224106B CN 104224106 B CN104224106 B CN 104224106B CN 201410534860 A CN201410534860 A CN 201410534860A CN 104224106 B CN104224106 B CN 104224106B
Authority
CN
China
Prior art keywords
light
light source
matrix
optically focused
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410534860.3A
Other languages
English (en)
Other versions
CN104224106A (zh
Inventor
傅强
沈爱宗
葛建军
曾国华
龙萍
马骙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HEFEI DVL ELECTRON CO Ltd
Original Assignee
HEFEI DVL ELECTRON CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HEFEI DVL ELECTRON CO Ltd filed Critical HEFEI DVL ELECTRON CO Ltd
Priority to CN201410534860.3A priority Critical patent/CN104224106B/zh
Publication of CN104224106A publication Critical patent/CN104224106A/zh
Application granted granted Critical
Publication of CN104224106B publication Critical patent/CN104224106B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明涉及一种小切口深部手术图像的获取方法和装置,尤其是涉及一种获取小切口深部手术中高质量图像的方法及装置,包括壳体、LED显示器、键盘、照明系统、摄像系统和图像处理单元,其中所述照明系统包括光源组件,所述光源组件设有一冷光源接口,该冷光源接口上装有多根导光束,每根所述导光束均独立设置于一根可定型蛇形管内;所述摄像系统包括一个由可定型蛇形管固定在所述壳体上的高清CMOS微型摄像头,所述微型摄像头通过导线与所述图像处理单元连接;所述图像处理单元用于对所述摄像系统拍摄到的图像数据进行颜色校正、对比度增强、白平衡、测光模式及轮廓强调处理,最终通过所述LED显示器显示出来。

Description

获取小切口深部手术中高质量图像的方法及装置
技术领域
本发明涉及一种小切口深部手术图像的获取方法和装置,尤其是涉及一种获取小切口深部手术中高质量图像的方法及装置。
背景技术
随着医疗科技的不断发展,在目前的开放性以及小切口、微创手术中技术已经开展普及在腹腔、胸腔等各个科室。以往的设备例如无影灯照明和摄像则无法进行手术照明和摄像,所以在小切口手术时医生只能选用手术头灯和头灯摄像。
近年来,对手术头灯和头灯摄像的研发也在不断更新,方向主要集中在减轻手术头灯的重量,增加手术头灯摄像的清晰度,以此让手术医生更加舒适的进行小切口手术的深部照明和摄像。但是手术大夫头上的装备无论如何轻,手术时间超过一个小时后,大夫的不适感将会逐渐增加,包括手术头灯的光热量对于额头的影响也会随着时间越来越大。
同时,随着微型CCD摄像机的引入,越来越多的医生青睐于此,但微型CCD摄像机的问题也逐渐暴露,一是微型摄像传感器敏感度不够,在很多腔体手术中呈现到显示屏上的图像亮度不足,阴影现象明显。二是在组织和血管上的区别不够细腻,主要是显示色彩和实际色彩存在差异,在很多关键部分的手术上给医生造成很大的压力。
在当前小切口微创技术开展普及的同时,现有手术头灯和头灯摄像存在以下问题:
第一.摄像距离远,从而清晰度成为头灯摄像的硬伤,并且在使用手术头灯进行深部照明时,离得太远会亮度不足,离得太近会造成手术大夫头部不适及无法达到无影的效果;大夫在手术时的头部晃动会造成录制的视频的晃动,需要后期的编辑,录制下来的视频无法同步进行远距离传输及远程会诊。
第二.尽管微型内窥镜系统的图像清晰度、对比度相对常规电子内窥镜系统都得到了长足的进步,可以发现形态或颜色发生明显改变的病灶,但是对于消化道微小的、扁平的早期病变及异型增生则不易诊断,甚至常常导致漏诊,以及血管和表皮的混淆。
第三.高清数字视频技术在微创手术中特别是腔体手术,呈现的图像光线不足,阴影现象明显。这一现象必须通过在腔体范围内提供足够亮度的光源得以解决,然而在GB7906.19-2000中明确规定,冷光源在体内组织上的照射温度不得高于41℃,所以如何在执行国标的同时提高光源的亮度目前的解决方案还不明确。
第四,我国是一个幅员广阔的国家,医疗水平有明显的区域性差别,特别是广大农村和边远地区医疗技术相对较差。优质医疗资源集中在省级及地市级医院,基层群众必须前往省级及地市级医院才能享受专家的优质医疗服务。在十二五计划中,国家重点突出了将物联网应用在医疗领域,实现远程会诊、远程监护等功能,用于加强两极医疗资源的融合。故对于摄像医疗设备来说,远程功能特别是无线远程传输功能将逐渐成为一种重要发展趋势。
综上所述,本领域人员急需一种能获得完全满足于小切口深部手术要求的高质量图像资料的方法及装置,以实现小切口深部手术的创新。
发明内容
为克服现有技术的不足之处,本发明的目的之一是提供一种获得高质量的小切口深部手术视频的方,以解决现有手术头灯和头灯摄像存在的技术问题,以适应当前在医疗领域高速发展的物联网技术法,本发明的另一目的是提供一种专用于该方法的手术照明摄像装置。
本发明所采用的技术方案是:获取小切口深部手术中高质量图像的方法,包括以下步骤:
首先,采用固定式手术照明摄像设备进行近距离拍摄,所述手术照明摄像设备具有高清CMOS微型摄像头和高亮度冷光源,所述高清CMOS微型摄像头及高亮度冷光源均采用可定型蛇形管进行固定,便于深入患者切口内部进行照明和摄像,保证了腔内组织的图像足够清晰;采用固定式摄像设备,图像稳定,不会产生晃动,采用可定型蛇形管,可进行近距离照明和摄像,避免出现因摄像距离过远,造成图像清晰度差,亮度低的问题;
其次,对所述图像进行校正与优化:包括颜色校正、对比度增强、白平衡、测光模式、轮廓强调,所述颜色校正是基于YUV颜色空间的四邻域多项式回归法,步骤如下:①将摄像头采集到的RGB信号数值按照下式转换成YUV的数值,通过排除Y对U、V色差信号进行多项式回归法拟合,参照标准色卡,最后获得校正系数矩阵A:
Y U V = 0.3 0.59 0.11 - 0.15 - 0.29 0.44 0.51 - 0.52 - 0.095 · R G B
②根据多项式回归法,通过对标准色卡电子镜成像的U、V、UV的线性组合,来实现对色卡的标准的U0、V0、U0V0分量进行拟合,具体表达式如下:
U 0 = a 11 U + a 12 V + a 13 U V V 0 = a 21 U + a 22 V + a 23 U V U 0 V 0 = a 31 U + a 32 V + a 33 U V
上式的矩阵形式为:
X=AW
其中X是取标准色卡的各色块的标准U、V、UV分量构成3×24维矩阵:
X = U 01 U 02 ... U 024 V 01 V 02 ... V 024 UV 01 UV 02 ... UV 024 ;
w是标准色卡电子镜实际成像测得的U、V、UV分量构成3x24维矩阵:
W = U I 1 U I 2 ... U I 24 V I 1 V I 2 ... V I 24 UV I 1 UV I 2 ... UV I 24 ;
由最小二乘法原理推导得:
A=X·WT·(W·WT)-1
矩阵A即所求的模型参数,其中,上标T表示矩阵转置,上标-1表示矩阵的逆,A是维数为3x3的转换系数矩阵:
A = a 11 a 11 a 13 a 21 a 22 a 23 a 31 a 32 a 33 ;
由所述矩阵A计算获得校正过的U、V、UV分量;
③对Y亮度信号采用四领域方法处理:设定i为行,j为列,四邻域坐标即(i,j)、(i,j+1)、(i+1,j)、(i+1、j+1),求出这四个像素的平均R、G、B的数值,按照上述RGB与YUV数值的转换公式进行转换,得出Y亮度分量的四个像素的平均值;
④通过所述校正过的U、V、UV分量,再通过反向转换公式求得相应的RGB值,再运用现有的编码算法把8位的R、G、B中的每路基色信号数据,通过最小转换编码为包含行场同步信息、时钟信息、数据DE、纠错信息在内的10位数据,经过DC平衡后,最终通过LED显示屏显示出来。
优选的,所述步骤④中,所述10位数据采用差分传输,一路通过LED显示屏显示,另一路通过数字视频接口输出到通信网络的云端服务器上。
一种用于获取小切口深部手术中高质量图像的装置,包括壳体、LED显示器、键盘、照明系统、摄像系统和图像处理单元,其中所述照明系统包括光源组件,,所述光源组件在所述壳体表面设有一冷光源接口,该冷光源接口连接有多根导光束,每根所述导光束均独立设置于一根可定型蛇形管内;
所述摄像系统包括一个由可定型蛇形管固定在所述壳体上的高清CMOS微型摄像头,所述微型摄像头通过导线与所述图像处理单元连接;
所述图像处理单元用于对所述摄像系统拍摄到的图像数据进行颜色校正、对比度增强、白平衡、测光模式及轮廓强调处理,最终通过所述LED显示器显示出来。所述图像处理单元优选方案为基于多DSP的在线可重构数字图像并行处理系统。
所述照明系统采用大功率LED作为光源,配合恒流源驱动电路和聚光模组,将该光源的光通量提高到1000流明以上,再通过多根导光束将该高亮度光源分流到多个支路上,最后照射到患者腔内组织上;多根导光束的设计一方面是模拟无影灯效果,在腔体内产生接近无影的效果,另一方面通过单根导光束输出的光源照度在腔内组织上的温度远小于41度,以满足GB7906.19-2000的规定。
优选的,所述光源组件包括聚光模组,所述聚光模组包括四块凸透镜片、一块红外滤光镜片、精密隔圈、聚光模组外壳和后盖,所述四块凸透镜片用于将LED的散光聚合成密集的强光束,并通过所述红外滤光镜片滤除其中的红外波长;所述四块凸透镜片之间均设有一精密隔圈;所述聚光模组外壳与后盖采用螺纹连接,将所述精密隔圈和凸透镜片固定在内腔中;在所述后盖的相切面上有直通的螺纹孔,连接紧固后用顶紧螺丝将整个聚光模组加固成一体。
进一步的,所述精密隔圈采用铝合金材料制成,其表面均镀有反光层。
进一步的,所述聚光模组外壳、后盖以及四个精密隔圈均采用4044铝合金材料制成。
优选的,所述装置还包括无线网络通讯模块,该通讯模块与所述图像处理单元输出端连接,用于将所述图像处理单元输出的图像信号通过无线网络向云端服务器传输图像数据。
有益效果:
1、首先在结构上进行优化,避免了医生佩戴头灯和头灯摄像的种种弊端。通过便携式结构设计,所有配件均可以进行快速接插件连接。摄像部分采用微型高清COMS传感器,可轻易深入切口内部;同时根据光学原理设计非标的专用导光束以及附属设备,用来保证光照的均匀性,基本实现了腔内的全方位照明,达到了腔内无影的效果。摄像臂以及光源臂均可自由调整,使用灵活、固定牢靠。
2、摄像处理部分采用高清图像处理加强算法及多种优化技术。通过图像数据的采集,图像的重建(去马赛克),运用典型图像处理算法(颜色校正、白平衡、轮廓强调、测光模式、对比度增强)与Otsu法血管识别算法,动态多光谱技术相结合、增强细微血管与周围组织对比度效果;
3、采用大功率恒流源技术代替以往的恒压源控制,并加入PID闭环反馈实现冷光源LED的输出稳定,同时加载聚光模组,减小散光引起的光热转换,避免组件闭环内的温漂差异,提高整体输出光通量。
4、集成录制、WIFI、3G模块端口,在录制的同时可同步匹配现有的医疗物联网技术,实现远程会诊、远程医疗监视。可以对乡镇村在操作手术的过程中进行同步指导以及保存视频用于术后研讨学习交流使用,使乡镇村卫生院在实践中不断积累正确的经验,实现单独正确操作手术治疗重症患者的目的。
附图说明
下面参照附图结合实施例对本发明作进一步的描述。
图1为本发明的立体视图,
图2为本发明光源组件示意图,
图3为聚光模组结构图,
图4为聚光光路图,
图5为PID闭环反馈系统控制框图,
图6为YUV颜色校正算法流程图,
图7为本发明各单元功能示意图。
图中:1视频输入接口;2摄像组件;3可定型蛇形管;4高清CMOS微型摄像头;5冷光源接口;6导光束;7光源组件;8、10、14、17凸透镜片;9、11、13、16为精密隔圈;12红外滤光镜片;15聚光模组外壳;18顶紧螺丝;19后盖;20导光束接口;21亮度值显示界面;22键盘;23LED显示器;24WIFI模块接口;25DVI接口;26电源接口;27电源开关。
具体实施方式
参见图7,如图所示,一种用于获取小切口深部手术中高质量图像的装置,包括壳体、LED显示器23、键盘22、照明系统、摄像系统和图像处理单元。26为12V电源接口,27为电源开关,24为WIFI模块接口;25为DVI接口,21为亮度值显示界面。壳体右前方接口左侧为视频输入接口1,可匹配摄像组件2进行视频数据采集。
照明系统包括光源组件7,光源组件7在所述壳体上设有一冷光源接口5,该冷光源接口5连接有多根非标专用导光束6,导光束6以树状结构分布,每根导光束6均独立设置于一根可定型蛇形管内;目前图中给出的结构为一分四结构。导光束6采用二重构造,纤芯采用具有高透光性能的特殊光学玻璃,外侧的包层采用的是抗风化性能强的玻璃。
由上可知,本产品的摄像系统和照明系统均可自由活动和固定,与医生、患者均不接触,使医生在诊疗时更加灵活。
摄像系统包括一个由可定型蛇形管固定在壳体上的高清CMOS微型摄像头4(下称微型摄像头4),微型摄像头4通过导线与图像处理单元连接;采用高清CMOS微型摄像头4,比同类CCD摄像传感器的光敏感度要强,在相同光线的情况下亮度要高达2倍以上,同时可定型蛇形管3可将摄像,微型摄像头4在空间范围内定型。
图像处理单元用于对微型摄像头4拍摄到的图像数据进行颜色校正、对比度增强、白平衡、测光模式及轮廓强调处理,最终通过LED显示器23显示出来。图像处理单元优选方案为基于多DSP的在线可重构数字图像并行处理系统。图像处理单元包括单片机系统和多个工业级GPU,由GPU和单片机系统协同工作来处理图像处理的各个工作任务,单片机系统和各GPU均采用现有技术,但对颜色校正算法进行了优化,在后面会详细叙述。
用于获取小切口深部手术中高质量图像的装置,还包括无线网络通讯模块(如蓝牙模块、wifi模块、2G/3G通讯模块),用于将图像处理单元输出的图像信号,本实施例采用wifi模块,通过WIFI模块接口24连接无线网络,向云端服务器传输图像数据。
在光源性能上,光源组件7由内部采用大功率LED,以往的恒压源驱动方案不能保证LED亮度的一致性,并且影响LED的可靠性和寿命,因此我们采用恒流源驱动,为了避免使用纯硬件恒流下的元器件精度偏差造成的亮度偏差,加入基于DSP采用PID算法形成闭环反馈,保证了LED的光照强度和输出精度。同时,加入人机交互界面4和控制按键3,可根据不同腔体环境和对象进行亮度的调整。
参看图5,为本PID反馈控制的系统控制框图,I为给定的电流数值量,i为实际的电流信号,通过DSP芯片AD端口通过采样得到的实际电流数值量IA,EI为设定值和实际值的偏差值,通过PID对反馈控制系统的偏差值进行运算,因为采样周期非常短,用求和代替积分,差商代替微商,使PID算法离散化,从而由微分方程变成差分方程。
PID算法控制子程序为:
在本恒流源驱动电路中,通过采集、A/D转换、PID算法控制,使电流形成闭环系统,从而生成PWM信号,控制开关管的通断,保持电流的恒定。可有效的抑制LED随着发光时间增长带来的温漂影响,保证电流值的恒定输出。
此外,在结构上,光源组件7内部主要是由聚光模组构成,聚光模组的结构如图3所示,是由四块凸透镜片8、10、14、17和1块红外滤光镜片12组成,将LED的散光通过凸透镜片聚合成密集的强光束,并通过红外滤光镜片12滤除其中的红外波长,防止红外线的光热转换。其中9、11、13、16为铝合金材料的精密隔圈,表面附镀有反光层,减小光吸收。聚光模组外壳15与后盖19采用螺纹连接,将精密隔圈9、11、13、16和镜片8、10、14、17固定在内圈中。在后盖19的相切面上有直通的螺纹孔,连接紧固后采用顶紧螺丝18通过螺纹孔将整个聚光模组加固,防止外界振动造成聚光模组外壳15与后盖19之间的相对移动。
聚光模组外壳15、后盖19以及包含其中的四个精密隔圈9、11、13、16均采用4044铝合金材料加工,具有硬度较高、耐磨性以及热膨胀系数小的优点,可以控制内部凸透镜装配的精度以及在温度升高时保证光路的偏移量在允许范围值内。如图4所示,在一定温度范围内,材料膨胀造成的光路偏移不会超过导光束接口20顶端的光纤截面。
以大功率LED为基础,配合恒流源驱动电路和聚光模组,将光通量可以提高到1000流明以上,再通过导光束6(1分多,以一分四为例)将此高亮度光源分流到4个支路上,一方面模拟无影灯效果在腔体内产生接近无影的效果,一方面通过单根输出的光源照度在腔内组织上的温度远小于41度,满足国标GB7906.19-2000中明确规定。
在摄像方面:一是采用基于DSP的双线程的方式来提高图像显示速度,其中线程1用于图像的采集并提取有效的图像数据,线程2进行图像的处理、显示和存储;二是具备了一系列的图像处理算法功能,包括颜色校正、对比度增强、白平衡、测光模式、轮廓强调等,特别针对颜色校正以往实现方式的弊端,提出了基于YUV颜色空间的四邻域多项式回归法的颜色校正算法:
常用颜色校正的方式基本采用基于RGB颜色空间上的最小二乘矩阵拟合法,但此类方法校正后的图像颜色会随着照明亮度条件而改变,降低了图像颜色稳定性,而且产生了很多噪声,降低了图像质量,也会影响电子镜图像的处理及诊断。造成该现象的原因是基于RGB颜色空间上的最小二乘矩阵,
Y U V = 0.3 0.59 0.11 - 0.15 - 0.29 0.44 0.51 - 0.52 - 0.095 · R G B
拟合法在求拟合矩阵的过程中同时考虑了R,G,B三个因素,其中包含了图像的亮度信息,所以校正后的图像颜色会随着亮度不同而变化。
为了避免该缺点,我们选择在YUV空间上对图像进行校正。在算法研究中,首先将摄像头采集到的RGB信号数值按照下式转换成YUV的数值,通过排除Y(亮度)对U、V色差信号进行多项式回归法拟合,参照标准色卡,最后获得校正系数矩阵A。
由于多项式回归模型中自变量之间存在较强的相关关系,我们采用此类回归模型用于算法的回归分析,相对于用普通最小二乘回归法,估算的变量回归系数误差会更小。由于多项式回归法依赖数据拟合的项数,随着多项式的项数增加,回归精度逐渐提高,但并不是阶数越高,校正效果就越好。项数太多反而会引起图像质量下降以至于丢失太多细节。因此,在本算法中,我们采用U,V,UV三项进行多项式拟合,求得校正矩阵,具体实施方法如下:
然后根据多项式回归法通过对标准色卡电子镜成像的U、V、UV的线性组合来实现对色卡的标准的U0、V0、U0V0分量进行拟合,具体表达式如下:
U 0 = a 11 U + a 12 V + a 13 U V V 0 = a 21 U + a 22 V + a 23 U V U 0 V 0 = a 31 U + a 32 V + a 33 U V
上式的矩阵形式为:
X=AW
其中X是取标准色卡的各色块的标准U、V、UV分量构成3×24维矩阵:
X = U 01 U 02 ... U 024 V 01 V 02 ... V 024 UV 01 UV 02 ... UV 024
w是标准色卡电子镜实际成像测得的U、V、UV分量构成3x24维矩阵:
W = U I 1 U I 2 ... U I 24 V I 1 V I 2 ... V I 24 UV I 1 UV I 2 ... UV I 24
由最小二乘法原理推导得:
A=X·WT·(W·WT)-1
矩阵A即所求的模型参数,其中,上标T表示矩阵转置,上标-1表示矩阵的逆,A是维数为3x3的转换系数矩阵:
A = a 11 a 11 a 13 a 21 a 22 a 23 a 31 a 32 a 33
采用上述步骤对x-rite(爱色丽)24色色彩标准测试标板的标准U、V、UV值以及测试U、V、UV值按照下式计算出该系统的颜色校正关系矩阵A:
A = 0.625354 - 0.44687 0.007002 - 0.436 1.210023 0.002679 - 113.069 - 59.0324 2.366034
由矩阵A计算获得校正后的新的U、V分量。
其次对Y亮度信号采用四领域方法处理。假设i为行,j为列,四邻域坐标即(i,j)、(i,j+1)、(i+1,j)、(i+1、j+1),求出这4个像素的平均R、G、B的数值,按照上述RGB与YUV数值的转换公式进行转换,得出Y亮度分量的4个像素的平均值。
至此我们得到YUV的校正数据,再通过反向转换公式求得相应的RGB值,最后在运用现有的编码算法把8位数据(R、G、B中的每路基色信号)通过最小转换编码为10位数据(包含行场同步信息、时钟信息、数据DE、纠错等),经过DC平衡后,采用差分信号传输数据,一路最终通过LED显示屏23显示出来,另一路通过数字视频接口(DVI接口25)进行输出,实现电子镜下的画面色彩的校正。
除图像处理功能外,本设备在基于DSP的多线程基础上还将录制(键盘22)、WIFI(WIFI模块接口24)、3G/4G等模块电路在H.264基础上,采用了先进的H.264++视频压缩算法、流媒体视频数据压缩技术无线传输网络解决方案,整合了WIFI、3G/4G数据通讯功能和数字视频编码功能为一体化。实现视频数据的交互、发送、加解密、加解码,链路的控制维护等功能。根据应用把实时动态图像传到通信网络的云端服务器上,用户可以通过PC、智能通信设备连接云端服务器得到实时图像信息,实现了医疗物联网的远程诊疗、远程教学以及远程监护等一系列功能。
综上,本发明创新点如下:
1、整体设计的结构保护,所有配件均可以进行快速接插件连接。同时摄像臂以及光源臂均采用可定型蛇形管进行封装,在结构上可自由调整,使用灵活、固定牢靠。
2、采用大功率恒流源技术代替以往的恒压源控制,并加入PID闭环反馈实现冷光源LED的输出稳定,同时加载聚光模组,减小散光引起的光热转换,避免组件闭环内的温漂差异,提高整体输出光通量。
3、光源组件7内部主要是由聚光模组构成,聚光模组由四块凸透镜片和一块红外滤光镜片组成,将LED的散光通过凸透镜片聚合成密集的强光束,并通过红外滤光镜片滤除其中的红外波长,防止红外线的光热转换。铝合金材料的精密隔圈,表面附镀有反光层,减小光吸收。采用顶紧螺丝将整个聚光模组加固,防止外界振动造成聚光模组外壳15与后盖19之间的相对移动。
聚光模组外壳15、后盖19以及包含其中的四个精密隔圈均采用4044铝合金材料加工,具有硬度较高、耐磨性以及热膨胀系数小的优点,可以控制内部凸透镜装配的精度以及在温度升高时保证光路的偏移量在允许范围值内。如图4所示,在一定温度范围内,材料膨胀造成的光路偏移不会超过导光束接口20顶端的光纤截面。
4、导光束6(1分多,以一分四为例)内部采用玻璃光纤,通过1分多的方式将此高亮度光源分流到多个支路上,一方面模拟无影灯效果在腔体内产生接近无影的效果,一方面通过单根输出的光源照度在腔内组织上的温度远小于41度,满足国标GB7906.19-2000中明确规定。
5、将RGB色彩数值通过转换为基于YUV颜色空间,提出了四邻域多项式回归法的颜色校正算法,并将算法结果根据实际数值转为最小差分信号进行DVI对外传输。
6、基于DSP的多线程基础上采用了先进的H.264++视频压缩算法、流媒体视频数据压缩技术无线传输网络解决方案,整合了WIFI、3G/4G数据通讯功能和数字视频编码功能为一体化。实现视频数据的交互、发送、加解密、加解码,链路的控制维护等功能。根据应用把实时动态图像传到通信网络的云端服务器上,用户可以通过PC、智能通信设备连接云端服务器得到实时图像信息,实现了医疗物联网的远程诊疗、远程教学以及远程监护等一系列功能。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (5)

1.获取小切口深部手术中高质量图像的方法,其特征在于包括以下步骤:
首先,采用固定式手术照明摄像设备进行近距离拍摄,所述手术照明摄像设备具有高清CMOS微型摄像头和高亮度冷光源,所述高清CMOS微型摄像头及高亮度冷光源均采用可定型蛇形管进行固定,便于深入患者切口内部进行照明和摄像,保证了腔内组织的图像足够清晰;采用固定式摄像设备,图像稳定,不会产生晃动,采用可定型蛇形管,可进行近距离照明和摄像,避免出现因摄像距离过远,造成图像清晰度差,亮度低的问题;
其次,对所述图像进行校正与优化:包括颜色校正、对比度增强、白平衡、测光模式、轮廓强调,所述颜色校正是基于YUV颜色空间的四邻域多项式回归法,步骤如下:①将摄像头采集到的RGB信号数值按照下式转换成YUV的数值,通过排除Y对U、V色差信号进行多项式回归法拟合,参照标准色卡,最后获得校正系数矩阵A:
Y U V = 0.3 0.59 0.11 - 0.15 - 0.29 0.44 0.51 - 0.52 - 0.095 · R G B
②根据多项式回归法,通过对标准色卡电子镜成像的U、V、UV的线性组合,来实现对色卡的标准的U0、V0、U0V0分量进行拟合,具体表达式如下:
U 0 = a 11 U + a 12 V + a 13 U V V 0 = a 21 U + a 22 V + a 23 U V U 0 V 0 = a 31 U + a 32 V + a 33 U V
上式的矩阵形式为:
X=AW
其中X是取标准色卡的各色块的标准U、V、UV分量构成3×24维矩阵:
X = U 01 U 02 ... U 024 V 01 V 02 ... V 024 UV 01 UV 02 ... UV 024 ;
w是标准色卡电子镜实际成像测得的U、V、UV分量构成3x24维矩阵:
W = U I 1 U I 2 ... U I 24 V I 1 V I 2 ... V I 24 UV I 1 UV I 2 ... UV I 24 ;
由最小二乘法原理推导得:
A=X·WT·(W·WT)-1
矩阵A即所求的模型参数,其中,上标T表示矩阵转置,上标-1表示矩阵的逆,A是维数为3x3的转换系数矩阵:
A = a 11 a 11 a 13 a 21 a 22 a 23 a 31 a 32 a 33 ;
由所述矩阵A计算获得校正过的U、V、UV分量;
③对Y亮度信号采用四领域方法处理:设定i为行,j为列,四邻域坐标即(i,j)、(i,j+1)、(i+1,j)、(i+1、j+1),求出这四个像素的平均R、G、B的数值,按照上述RGB与YUV数值的转换公式进行转换,得出Y亮度分量的四个像素的平均值;
④通过所述校正过的U、V、UV分量,再通过反向转换公式求得相应的RGB值,再运用现有的编码算法把8位的R、G、B中的每路基色信号数据,通过最小转换编码为包含行场同步信息、时钟信息、数据DE、纠错信息在内的10位数据,经过DC平衡后,最终通过LED显示屏显示出来。
2.根据权利要求1所述获取小切口深部手术中高质量图像的方法,其特征在于:所述步骤④中,所述10位数据采用差分传输,一路通过LED显示屏显示,另一路通过数字视频接口输出到通信网络的云端服务器上。
3.一种用于获取小切口深部手术中高质量图像的装置,其特征在于:包括壳体、LED显示器、键盘、照明系统、摄像系统和图像处理单元,其中所述照明系统包括光源组件,所述光源组件在所述壳体表面设有一冷光源接口,该冷光源接口连接有多根导光束,每根所述导光束均独立设置于一根可定型蛇形管内;所述光源组件包括聚光模组,所述聚光模组包括四块凸透镜片、一块红外滤光镜片、精密隔圈、聚光模组外壳和后盖,所述四块凸透镜片用于将LED的散光聚合成密集的强光束,并通过所述红外滤光镜片滤除其中的红外波长;所述四块凸透镜片之间均设有一精密隔圈;所述聚光模组外壳与后盖采用螺纹连接,将所述精密隔圈和凸透镜片固定在内腔中;在所述后盖的相切面上有直通的螺纹孔,连接紧固后用顶紧螺丝将整个聚光模组加固成一体;
所述摄像系统包括一个由可定型蛇形管固定在所述壳体上的高清CMOS微型摄像头,所述微型摄像头通过导线与所述图像处理单元连接;
所述图像处理单元用于对所述摄像系统拍摄到的图像数据进行颜色校正、对比度增强、白平衡、测光模式及轮廓强调处理,最终通过所述LED显示器显示出来。
4.根据权利要求3所述一种用于获取小切口深部手术中高质量图像的装置,其特征在于:所述精密隔圈采用铝合金材料制成,其表面均镀有反光层。
5.根据权利要求3或4所述一种用于获取小切口深部手术中高质量图像的装置,其特征在于:所述聚光模组外壳、后盖以及四个精密隔圈均采用4044铝合金材料制成。
CN201410534860.3A 2014-10-12 2014-10-12 获取小切口深部手术中高质量图像的方法及装置 Active CN104224106B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410534860.3A CN104224106B (zh) 2014-10-12 2014-10-12 获取小切口深部手术中高质量图像的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410534860.3A CN104224106B (zh) 2014-10-12 2014-10-12 获取小切口深部手术中高质量图像的方法及装置

Publications (2)

Publication Number Publication Date
CN104224106A CN104224106A (zh) 2014-12-24
CN104224106B true CN104224106B (zh) 2016-04-13

Family

ID=52213666

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410534860.3A Active CN104224106B (zh) 2014-10-12 2014-10-12 获取小切口深部手术中高质量图像的方法及装置

Country Status (1)

Country Link
CN (1) CN104224106B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104545774A (zh) * 2015-01-30 2015-04-29 合肥德铭电子有限公司 一体化移动微创电子内镜系统
JP2016193107A (ja) * 2015-04-01 2016-11-17 Hoya株式会社 画像処理装置
CN105607413B (zh) 2016-03-18 2019-11-01 京东方科技集团股份有限公司 产生掩膜图案的系统和方法以及曝光系统
CN105877709A (zh) * 2016-04-07 2016-08-24 新绎健康科技有限公司 一种健康状态数据的采集装置、采集分析系统及方法
CN107895366B (zh) * 2017-11-07 2022-02-11 国网重庆市电力公司电力科学研究院 面向颜色评价的成像方法、系统及计算机可读存储设备
CN109330566A (zh) * 2018-11-21 2019-02-15 佛山市第人民医院(中山大学附属佛山医院) 一种伤口监测方法及装置
CN113143521B (zh) * 2020-12-07 2022-06-24 深圳云甲科技有限公司 一种三维扫描设备采集图像的颜色矫正方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6050938A (en) * 1997-10-21 2000-04-18 Swellow Vision, Inc. Portable endoscopy system
CN201037877Y (zh) * 2007-06-05 2008-03-19 南京春辉科技实业有限公司 柔性光纤多通路内窥镜
CN101317748A (zh) * 2008-07-10 2008-12-10 上海凌锐信息技术有限公司 内窥记录仪
CN102481091A (zh) * 2009-07-10 2012-05-30 轴外科技术公司 具有集成远端显像装置的手持式尺寸最小化诊断装置
CN103494595A (zh) * 2013-08-02 2014-01-08 南方医科大学南方医院 一种胶囊内镜系统
CN204091941U (zh) * 2014-10-12 2015-01-14 合肥德铭电子有限公司 一种用于获取小切口深部手术中高质量图像的装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060004258A1 (en) * 2004-07-02 2006-01-05 Wei-Zen Sun Image-type intubation-aiding device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6050938A (en) * 1997-10-21 2000-04-18 Swellow Vision, Inc. Portable endoscopy system
CN201037877Y (zh) * 2007-06-05 2008-03-19 南京春辉科技实业有限公司 柔性光纤多通路内窥镜
CN101317748A (zh) * 2008-07-10 2008-12-10 上海凌锐信息技术有限公司 内窥记录仪
CN102481091A (zh) * 2009-07-10 2012-05-30 轴外科技术公司 具有集成远端显像装置的手持式尺寸最小化诊断装置
CN103494595A (zh) * 2013-08-02 2014-01-08 南方医科大学南方医院 一种胶囊内镜系统
CN204091941U (zh) * 2014-10-12 2015-01-14 合肥德铭电子有限公司 一种用于获取小切口深部手术中高质量图像的装置

Also Published As

Publication number Publication date
CN104224106A (zh) 2014-12-24

Similar Documents

Publication Publication Date Title
CN104224106B (zh) 获取小切口深部手术中高质量图像的方法及装置
CN106236006B (zh) 3d光学分子影像腹腔镜成像系统
CN105310633B (zh) 医用图像处理装置及其工作方法、以及内窥镜系统
CN104042179A (zh) 一体式医疗内窥镜系统
CN105212885B (zh) 医用图像处理装置及其工作方法、以及内窥镜系统
CN204091941U (zh) 一种用于获取小切口深部手术中高质量图像的装置
CN105342561B (zh) 无线声控穿戴式分子影像导航系统
CN103750805B (zh) 高清医用内窥镜视频处理装置及方法
CN102641109B (zh) 内窥镜照度的智能调节方法
JP2003275171A (ja) カプセル内視鏡
CN103479324A (zh) 便携式电子膀胱镜
CN104398231B (zh) 立体内窥镜光源亮度调节系统及方法
CN202397436U (zh) 高清便携式内窥镜摄像系统
CN107529957A (zh) 修正数据生成方法以及修正数据生成装置
CN207768343U (zh) 一种内窥镜系统
CN105812774B (zh) 基于插管镜的立体显示系统及方法
CN109068035B (zh) 一种智能微相机阵列内窥成像系统
CN102846301B (zh) 内窥镜照度的智能调节装置
CN204377059U (zh) 基于软镜的立体显示系统
CN203965722U (zh) 便携式显微成像平台
CN204931617U (zh) 一种基于单镜管led照明的硬管镜
CN104873164A (zh) 一种基于led照明的可分离式光学硬管镜
CN203736154U (zh) 一种基于led照明的可分离式光学硬管镜
CN206377555U (zh) 一种带有摄像功能的无影手术灯
CN204377058U (zh) 基于硬镜的立体显示系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Method and device for obtaining high-quality image in small-incision deep operation

Effective date of registration: 20170711

Granted publication date: 20160413

Pledgee: Hefei high tech Company limited by guarantee

Pledgor: HEFEI DVL ELECTRON Co.,Ltd.

Registration number: 2017340000116

PE01 Entry into force of the registration of the contract for pledge of patent right
CB03 Change of inventor or designer information

Inventor after: Zeng Guohua

Inventor after: Fu Qiang

Inventor after: Shen Aizong

Inventor after: Ge Jianjun

Inventor after: Long Ping

Inventor after: Ma Jue

Inventor before: Fu Qiang

Inventor before: Shen Aizong

Inventor before: Ge Jianjun

Inventor before: Zeng Guohua

Inventor before: Long Ping

Inventor before: Ma Jue

CB03 Change of inventor or designer information
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20231213

Granted publication date: 20160413

Pledgee: Hefei high tech Company limited by guarantee

Pledgor: HEFEI DVL ELECTRON Co.,Ltd.

Registration number: 2017340000116

PC01 Cancellation of the registration of the contract for pledge of patent right