CN115115755A - 基于数据处理的荧光三维成像方法及装置 - Google Patents

基于数据处理的荧光三维成像方法及装置 Download PDF

Info

Publication number
CN115115755A
CN115115755A CN202211043998.4A CN202211043998A CN115115755A CN 115115755 A CN115115755 A CN 115115755A CN 202211043998 A CN202211043998 A CN 202211043998A CN 115115755 A CN115115755 A CN 115115755A
Authority
CN
China
Prior art keywords
dimensional
fluorescent
dimensional image
fluorescence
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211043998.4A
Other languages
English (en)
Other versions
CN115115755B (zh
Inventor
蔡惠明
李长流
王子阳
倪轲娜
卢露
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Nuoyuan Medical Devices Co Ltd
Original Assignee
Nanjing Nuoyuan Medical Devices Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Nuoyuan Medical Devices Co Ltd filed Critical Nanjing Nuoyuan Medical Devices Co Ltd
Priority to CN202211043998.4A priority Critical patent/CN115115755B/zh
Publication of CN115115755A publication Critical patent/CN115115755A/zh
Application granted granted Critical
Publication of CN115115755B publication Critical patent/CN115115755B/zh
Priority to PCT/CN2023/076347 priority patent/WO2024045507A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种基于数据处理的荧光三维成像方法及装置,根据荧光二维图像以及白光二维图像生成与病变组织对应的荧光三维融合图像;对荧光三维融合图像进行划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于预设存储空间内;根据第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像;根据第三荧光二维图像的数量生成图像显示框,基于图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。

Description

基于数据处理的荧光三维成像方法及装置
技术领域
本发明涉及数据处理技术,尤其涉及一种基于数据处理的荧光三维成像方法及装置。
背景技术
荧光三维成像是荧光物质被激发后所发射的荧光信号的强度在一定的范围内与荧光素的量成线性关系。
目前,通过荧光三维成像装置进行成像后,仅能得到相应的荧光三维图像,用户只能根据得到的荧光三维图像对病灶区域进行整体进行放大以及缩小观察病变区域,无法在显示屏处,同时观察病灶区域部分组织的放大图像以及部分组织相对应的白光图像以及荧光图像,使得医师的诊断效率较为低下,不便于医师的使用。
发明内容
本发明实施例提供一种基于数据处理的荧光三维成像方法及装置,将荧光图像与白光图像结合,使得病变部分的荧光区域可以直接在白光图像中直接显示,方便医师的观察,可以对医师选中区域进行细节展示并且会将相关区域进行展示,甚至将医师选中部分以及相关区域进行拼接结合自动推送完整的病变部分,较好的方便医生进行观察,使得诊断结果较为准确。
本发明实施例的第一方面,提供一种基于数据处理的荧光三维成像方法,包括:
基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像;
根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内;
对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示;
根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点;
根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
可选地,在第一方面的一种可能实现方式中,基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像,包括:
选取所述荧光二维图像以及白光二维图像中任意一个相同位置的像素点作为第一坐标中心点;
根据所述第一坐标中心点分别在所述荧光二维图像以及白光二维图像处建立坐标系,得到第一荧光集合以及第一白光集合;
提取所述第一荧光集合中处于预设荧光像素值区间内的像素点,得到目标像素点集合;
将目标像素点集合中每个像素点的像素值与第一白光集合中相同坐标值的像素点的像素值进行替换,得到荧光二维融合图像;
将所述荧光二维融合图像发送至服务器处进行拼接组合,得到荧光三维融合图像。
可选地,在第一方面的一种可能实现方式中,所述根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内,包括:
根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸;
根据所述实际划分尺寸依次对荧光三维融合图像进行从上到下的区块划分得到多个子三维图像,直至荧光三维融合图像均被划分为子三维图像,并按照划分顺序进行依次编号;
建立每个编号所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内。
可选地,在第一方面的一种可能实现方式中,所述根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸,包括:
根据所述荧光三维融合图像的实际尺寸与荧光三维融合图像的预设尺寸的比值,得到尺寸系数;
根据所述尺寸系数与预设划分尺寸的乘积,得到实际划分尺寸;
通过以下公式得到实际划分尺寸,
Figure DEST_PATH_IMAGE002AAAA
其中,
Figure DEST_PATH_IMAGE004AAA
为实际划分尺寸,
Figure DEST_PATH_IMAGE006AAA
为预设划分尺寸,
Figure DEST_PATH_IMAGE008AAA
为荧光三维融 合图像的实际尺寸,
Figure DEST_PATH_IMAGE010AAA
为荧光三维融合图像的预设尺寸,
Figure DEST_PATH_IMAGE012AAA
为实际划分尺寸的属性 值。
可选地,在第一方面的一种可能实现方式中,所述根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,包括:
确定与所述第一子三维图像相邻的区域位置,将所述区域位置的图像作为第二子三维图像;
确定第一荧光二维图像中与第二荧光二维图像相邻的像素点作为边界荧光像素点;
统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量;
若所述第一总数量大于预设数量,则将所述第二荧光二维图像作为第三荧光二维图像。
可选地,在第一方面的一种可能实现方式中,所述统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量,包括:
确定第二荧光二维图像中与所述边界荧光像素点相邻的荧光像素点,得到多个第一像素点;
确定与所述第一像素点相邻的荧光像素点,得到多个第二像素点,确定与所述第二像素点相邻的荧光像素点,得到多个第三像素点,将所述第三像素点作为第二像素点,再次确定与第二像素点连接的第三像素点,直至所有第二像素点选取完毕;
所述第一像素点与所述边界荧光像素点直接连接,所述第二像素点与所述边界荧光像素点间接连接;
统计第一像素点和第二像素点的数量,得到第一总数量。
可选地,在第一方面的一种可能实现方式中,所述根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示,包括:
在初始化的图像显示框中确定三维图显示区域以及二维图像显示区域;
根据所述第三荧光二维图的数量对所述二维图像显示区域进行划分,得到第一二维显示子区域和第二二维显示子区域;
在所述第一二维显示子区域和第二二维显示子区域分别建立白光显示区域和荧光显示区域;
将第一荧光二维图像和第一白光二维图像在第一二维显示子区域的白光显示区域和荧光显示区域进行显示,依次将第一荧光序列中的第三荧光二维图像、第三白光二维图像在第二二维显示子区域的白光显示区域和荧光显示区域进行显示。
可选地,在第一方面的一种可能实现方式中,还包括:
若所述第三荧光二维图像的数量大于一,则根据第一总数量对第三荧光二维图像降序排序,得到第一荧光序列。
可选地,在第一方面的一种可能实现方式中,还包括:
选取所述第一荧光二维图像中与非荧光像素点相邻的荧光像素点,得到第一轮廓荧光像素点集合;
选取所述第三荧光二维图像中与非荧光像素点相邻的荧光像素点,得到至少一个第二轮廓荧光像素点集合;
所述第一轮廓荧光像素点集合和所述第二轮廓荧光像素点集合基于第一荧光二维图像和第三荧光二维图像的位置进行拼接,得到目标轮廓荧光二维图像;
在所述二维图像显示区域中建立第三二维显示子区域,所述第三二维显示子区域用于显示目标轮廓荧光二维图像。
本发明实施例的第二方面,提供一种基于数据处理的荧光三维成像装置,包括:
融合模块,用于基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像;
划分模块,用于根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内;
调取模块,用于对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示;
确定模块,用于根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点;
显示模块,用于根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
本发明实施例的第三方面,提供一种电子设备,包括:存储器、处理器以及计算机程序,所述计算机程序存储在所述存储器中,所述处理器运行所述计算机程序执行本发明第一方面及第一方面各种可能涉及的所述方法。
本发明实施例的第四方面,提供一种可读存储介质,所述可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时用于实现本发明第一方面及第一方面各种可能涉及的所述方法。
本发明提供的一种基于数据处理的荧光三维成像方法及装置,会将病变组织分别在荧光和白光照射下的二维图像进行融合拼接,得到的荧光三维融合图像,使得医师可以直接观察到白光图像中的病变区域,方便医师进行观察,并且可以直接通过白光图像中荧光像素值的深浅颜色不同,可以判断细胞病变的程度,方便医师进行后续的手术,本发明会根据医师选中区域的病变部分的图像,自动识别并推送周边与其相关联的病变部分,同时在图像显示框中进行显示,方便医师对病变组织的局部区域进行观察,使得医师可以更好的进行诊断。
本发明提供的技术方案,使得对于不同大小的病变区域生成不同大小的划分区域,使得后续选中以及自动推送的观察区域大小适中,更利于医生进行观察,本发明会确定医师选中的病变区域中边界荧光像素点,根据四周相邻图片与边界荧光像素点直接和间接连接的荧光像素点所处的图像作为与选中病变区域相关的图像进行自动推送,使得医生不仅可以看到选中的部分病变区域的图像,还可以看到自动推送的相关联图像,使得医生的诊断更加准确。
本发明提供的技术方案,会将图像显示框划分为三维显示区域以及二维显示区域,三维显示区域用于显示荧光三维融合图像,二维显示区域分别用于显示医生选中区域的荧光和白光图像,以及与医生选中区域中病变区域相关联区域的荧光和白光图像,并且会按照相关区域的严重程度进行排序显示,并将选中区域与相关区域的轮廓进行拼接形成一个完整的病变部分进行显示,使得医师不仅可以观察到整体的病变部分,还可以对选中的部分病变区域、相关联的区域以及对应的拼接后的部分整体,使得医生可以多角度观察,使得诊断相对客观、准确。
附图说明
图1为本发明所提供的一种基于数据处理的荧光三维成像方法的流程图;
图2为本发明所提供的一种定位第三荧光二维图像方法的流程图;
图3为本发明所提供的一种基于数据处理的荧光三维成像装置的结构示意图;
图4为本发明提供的一种电子设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
应当理解,在本发明的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
应当理解,在本发明中,“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解,在本发明中,“多个”是指两个或两个以上。“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。“包含A、B和C”、“包含A、B、C”是指A、B、C三者都包含,“包含A、B或C”是指包含A、B、C三者之一,“包含A、B和/或C”是指包含A、B、C三者中任1个或任2个或3个。
应当理解,在本发明中,“与A对应的B”、“与A相对应的B”、“A与B相对应”或者“B与A相对应”,表示B与A相关联,根据A可以确定B。根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。A与B的匹配,是A与B的相似度大于或等于预设的阈值。
取决于语境,如在此所使用的“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
本发明提供一种基于数据处理的荧光三维成像方法,如图1所示,包括:
步骤S110、基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述。
本发明提供的技术方案,二维图像提取装置控制入射光在同一入射角和360°不同方向角下进行环状扫描,分别对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,将所有的荧光二维图像以及白光二维图像的发送至服务器进行拼接处理,等到病变组织对应的荧光三维融合图像。
本发明提供的技术方案,在一个可能的实施方式中,步骤S110具体包括:
选取所述荧光二维图像以及白光二维图像中任意一个相同位置的像素点作为第一坐标中心点。
本发明提供的技术方案,系统会选取荧光二维图像以及白光二维图像中任意一个相同位置的像素点作为第一坐标中心点,可以理解的是,每个区域的荧光二维图像和白光二维图像均为同一角度,相同距离拍摄的,仅仅是照射的光源不同,因此荧光二维图像和白光二维图像的图片大小均相同且相互对应,因此,选择荧光二维图像和白光二维图像中任意一个位置相同像素点作为第一坐标中心点,方便后续根据第一坐标中心点建立坐标系得到二维图片的像素点集合。
根据所述第一坐标中心点分别在所述荧光二维图像以及白光二维图像处建立坐标系,得到第一荧光集合以及第一白光集合。
本发明提供的技术方案,根据第一坐标中心点分别在所述荧光二维图像以及白光二维图像处建立坐标系,根据所述坐标系将荧光二维图像以及白光二维图像进行分解得到第一荧光集合以及第一白光集合,方便后续将荧光二维图像中病灶区域的荧光像素点替换至白光二维图像中,便于医生进行直接的观察病灶区域的位置以及相应的严重程度。
提取所述第一荧光集合中处于预设像素区间内的像素点,得到目标像素点集合。
本发明提供的技术方案,系统提取所述第一荧光集合中处于预设像素区间内的像素点,得到对应的目标像素点集合,可以理解的是,预设像素区间是荧光像素点的像素值区间,将荧光二维图像中所有的荧光点提取出来,荧光像素点即为病灶位置,目标像素点集合为病灶区域,方便后续将荧光像素点替换至白光二维图像对应的区域,方便医师的查看。
将目标像素点集合中每个像素点的像素值与第一白光集合中相同坐标值的像素点的像素值进行替换,得到荧光二维融合图像。
本发明提供的技术方案,将目标像素点集合中每个像素点的像素值与第一白光集合中相同坐标值的像素点的像素值进行替换,可以理解的是,目标像素点集合为病灶区域,将病灶区域替换至白光二维图像,使得病灶区域即荧光像素点部分也就是病灶区域直接在白光二维图像中显示,方便医师进行直接观察。
将所述荧光二维融合图像发送至服务器处进行拼接组合,得到荧光三维融合图像。
本发明提供的技术方案,根据所述荧光二维融合图像发送至服务器,按照环状扫描的拍摄顺序进行拼接生成荧光三维融合图像。
步骤S120、根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内。
本发明提供的技术方案,系统会依据区域位置对荧光三维融合图像进行区块划分,对应得到多个子三维图像,建立与每个子三维图像所对应的预设存储空间,在预设存储空间里存储与其相对应区域位置的荧光二维图像和白光二维图像,可以理解的是,系统会以一定的尺寸大小对荧光三维融合图像进行区块划分,将其划分为多个子三维图像,每个子三维图像都有与其对应的存储空间,存储空间内存储着子三维图像对应的荧光二维图像和白光二维图像,方便后续医生对子三维图像进行选中时,则会从存储空间中提取相对应的荧光二维图像和白光二维图像进行展示。
本发明提供的技术方案,在一个可能的实施方式中,步骤S120具体包括:
根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸。
本发明提供的技术方案,根据荧光三维融合图像的实际尺寸的大小得到相对应的实际划分尺寸,方便后续对荧光三维融合图像进行图像的划分,可以理解的是,荧光三维融合图像的实际尺寸越大相对应的实际划分尺寸越大,荧光三维融合图像的实际尺寸越小相对应的实际划分尺寸越小,不同病变组织对应的病变区域不同,因此对应的大小也不同,根据不同大小的病变区域进行不同情况的划分,使得划分后的大小符合实际观察情况,更利于医师进行相应的观察。
本发明提供的技术方案,在一个可能的实施方式中,所述根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸,包括:
根据所述荧光三维融合图像的实际尺寸与荧光三维融合图像的预设尺寸的比值,得到尺寸系数。
本发明提供的技术方案,系统会根据荧光三维融合图像的实际尺寸的大小与荧光三维融合图像的预设尺寸的大小的比值,得到相应的尺寸系数,方便后续生成对应的实际划分尺寸。
根据所述尺寸系数与预设划分尺寸的乘积,得到实际划分尺寸。
本发明提供的技术方案,根据尺寸系数与预设划分尺寸的乘积,得到当下荧光三维融合图像对应的实际划分尺寸。
通过以下公式得到实际划分尺寸,
Figure DEST_PATH_IMAGE002_5A
其中,
Figure DEST_PATH_IMAGE014AAAA
为实际划分尺寸,
Figure DEST_PATH_IMAGE016AA
为预设划分尺寸,
Figure DEST_PATH_IMAGE018AA
为荧光三维融 合图像的实际尺寸,
Figure DEST_PATH_IMAGE020AA
为荧光三维融合图像的预设尺寸,
Figure DEST_PATH_IMAGE022AAA
为实际划分尺寸的属性 值,
Figure DEST_PATH_IMAGE024AA
为尺寸系数,可以理解的是,荧光三维融合图像的实际尺寸与实际划分尺寸
Figure DEST_PATH_IMAGE014_5A
成正比,实际划分尺寸的属性值
Figure DEST_PATH_IMAGE022AAAA
可以是人为预先设置的。
本发明提供的技术方案,会根据荧光三维融合图像的大小不同相应生成不同的大小的实际划分尺寸,使得划分尺寸是动态变化的,依据病灶区的大小相应改变,使得划分区域大小适中,更便于医生进行观察,贴合实际情况。
根据所述实际划分尺寸依次对荧光三维融合图像进行从上到下的区块划分得到多个子三维图像,直至荧光三维融合图像均被划分为子三维图像,并按照划分顺序进行依次编号。
本发明提供的技术方案,根据系统计算得到的实际划分尺寸依次对荧光三维融合图像进行从上到下的区块划分得到多个子三维图像,直到荧光三维融合图像被划分完毕,并按照划分的顺序对子三维图像进行依次编号,使得每个子三维图像都具有对应的编号,方便后续根据编号分配对应的存储空间。
建立每个编号所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内。
本发明提供的技术方案,系统会建立与每个编号相对应的预设存储空间,将每个编号相对应的子三维图像对应荧光二维图像和白光二维图像存储于编号相对应的预设存储空间内,可以理解的是,每个编号对应一个子三维图像对应一个预设存储空间,预设存储空间内存储着子三维图像的荧光二维图像和白光二维图像,方便后续选中相应区域即子三维图像时会自动调取相对应的荧光二维图像和白光二维图像,方便医生进行观察。
步骤S130、对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示。
本发明提供的技术方案,系统会对荧光三维融合图像进行显示,如果判断用户选择了第一子三维图像,可以理解的是,第一子三维图像为被用户选中的子三维图像,则调取用户选中的第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示,医师可以对病变区域的部分区域进行显示,方便医师对局部进行细微的观察,使得后续诊断结果相对客观。
步骤S140、根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点。
本发明提供的技术方案,根据第一子三维图像的区域位置确定多个第二子三维图像,可以理解的是,根据医师主动选择的第一子三维图像可以根据其位置确定与其相邻的其他子三维图像,第二子三维图像即为与第一子三维图像相邻的子三维图像,查看第二子三维图像中的荧光像素点是否与第一子三维图像中边缘的像素点相连接,如果出现相连接的像素点,则将该第二子三维图像作为第三荧光二维图像,可以理解的是,第三荧光二维图像为与第一荧光二维图像中病变区域相关的荧光二维图像,方便后续根据医生选中区域进行自动推送。
本发明提供的技术方案,在一个可能的实施方式中,如图2所示,步骤S140具体包括:
步骤S1401、确定与所述第一子三维图像相邻的区域位置,将所述区域位置的图像作为第二子三维图像。
本发明提供的技术方案,根据医师主动选中的第一子三维图像所在的区域确定与其相邻的其他子三维图像,将相邻的子三维图像作为第二子三维图像,所以第二子三维图像为与第一子三维图像相邻的子三维图像,方便后续根据其周边的子三维图像去确定与第一子三维图像相关联的图像。
步骤S1402、确定第一荧光二维图像中与第二荧光二维图像相邻的像素点作为边界荧光像素点。
本发明提供的技术方案,系统在第一子三维图像对应的第一荧光二维图像中确定其图像四周与第二子三维图像对应的第二荧光二维图像相邻的像素点作为边界荧光像素点,可以理解的是,边界荧光像素点为第一荧光二维图像中四周(边缘)的荧光像素点,该荧光像素点与周边的第二荧光二维图像相邻。
步骤S1403、统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量。
本发明提供的技术方案,系统会统计每个第二荧光二维图像中与其对应的边界荧光像素点直接连接和间接连接的荧光像素点数量,得到对应的第一总数量,可以理解的是,第二荧光二维图像与第一荧光二维图像相邻,边界荧光像素点为第一荧光二维图像中四周的荧光像素点,例如:第一荧光二维图像的最上侧有边界荧光像素点1坐标为(1,1),上侧与第一荧光二维图像连接的第二荧光二维图像中存在与所述边界荧光像素点直接连接的荧光像素点2坐标为(1,2),第二荧光二维图像中又存在荧光像素点3坐标为(1,3),可以理解的是,边界荧光像素点1与荧光像素点2为直接连接,边界荧光像素点1与荧光像素点3为间接连接,统计每个第二荧光二维图像中直接连接和间接连接的荧光像素点数量,得到多个第一总数量,方便后续根据第一总数量进行与医师选中病变区域相关联的其他区域的自动推动。
本发明提供的技术方案,在一个可能的实施方式中,所述统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量,包括:
确定第二荧光二维图像中与所述边界荧光像素点相邻的荧光像素点,得到多个第一像素点。
本发明提供的技术方案,确定第二子三维图像对应的第二荧光二维图像中与边界荧光像素点相邻的荧光像素点,得到多个第一像素点,可以理解的是,第一像素点与边界荧光像素点的关系为直接连接关系。
确定与所述第一像素点相邻的荧光像素点,得到多个第二像素点,确定与所述第二像素点相邻的荧光像素点,得到多个第三像素点,将所述第三像素点作为第二像素点,再次确定与第二像素点连接的第三像素点,直至所有第二像素点选取完毕。
本发明提供的技术方案,确定与所述第一像素点相邻的荧光像素点,得到多个第二像素点,可以理解的是,第二像素点与边界荧光像素点的关系为间接连接关系,再次确定与所述第二像素点相邻的荧光像素点,得到多个第三像素点,第三像素点与边界荧光像素点的关系为间接连接关系,再将第三像素点作为第二像素点寻找与其相邻的像素点,直到第二像素点选取完毕,也就是直到找不到间接连接的像素点为止。
所述第一像素点与所述边界荧光像素点直接连接,所述第二像素点与所述边界荧光像素点间接连接。
本发明提供的技术方案,第一像素点与所述边界荧光像素点直接连接,第二像素点与所述边界荧光像素点间接连接,第一像素点和第二像素点均与医师选中的病变区域相关联,方便后续根据两者的数量进行相关图像的自动推送展示。
统计第一像素点和第二像素点的数量,得到第一总数量。
本发明提供的技术方案,系统会统计第一像素点和第二像素点的数量,得到第一总数量,可以理解的是,第一总数量为第二荧光二维图像中与边界荧光像素点直接和间接连接的荧光像素点的数量。
步骤S1404、若所述第一总数量大于预设数量,则将所述第二荧光二维图像作为第三荧光二维图像。
本发明提供的技术方案,如果第二荧光二维图像所对应的第一总数量大于预设数量,则将该第二子三维图像作为第三荧光二维图像,可以理解的是,预设数量可以是0,当存在直接连接和/或间接连接的像素点时,则确定该第二荧光二维图像与医师选中的病变区域相关,并将该第二子三维图像作为第三荧光二维图像,方便后续进行自动推送。
步骤S150、根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
本发明提供的技术方案,根据第三荧光二维图像的数量对初始化图像显示框进行划分生成图像显示框,可以理解的是,第三荧光二维图像的数量越多相对需要展示的显示区域就越多,图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示,可以理解的是,当医生选中病变区域的时候,系统会自动推送与病变区域相关的区域,相关区域为第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像,图像显示框会同时显示病变区域的整体三维图像即荧光三维融合图像,显示第一荧光二维图像、第一白光二维图像即医师选中区域的白光以及荧光图像,显示第三荧光二维图、第三白光二维图像即与选中区域相连接的病变区域,两者相关为同一病变部分。
本发明提供的技术方案,在一个可能的实施方式中,步骤S150具体包括:
在初始化的图像显示框中确定三维图显示区域以及二维图像显示区域。
本发明提供的技术方案,在初始化的图像显示框中确定三维图显示区域以及二维图像显示区域,其中,初始化的图像显示框为空白显示框,尚未进行显示区域的划分,可以理解的是,图像显示框主要用于显示三维图像以及二维图像,因此根据三维以及二维对图像显示框进行划分,方便医师同时观察三维以及选中的二维图像,方便医师进行诊断。
根据所述第三荧光二维图的数量对所述二维图像显示区域进行划分,得到第一二维显示子区域和第二二维显示子区域。
本发明提供的技术方案,系统会根据第三荧光二维图的数量对所述二维图像显示区域进行划分,可以理解的是,第三荧光二维图的数量为1则对二维图像显示区域进行一次划分,得到第一二维显示子区域和第二二维显示子区域,可以理解的是,第一二维显示子区域用于显示第一子三维图像对应的第一荧光二维图像、第一白光二维图像,第二二维显示子区域用于显示第三子三维图像对应的第三荧光二维图像、第三白光二维图像,医师不仅可以对荧光三维融合图像进行观察,同时可以对选中区域的图像进行观察,系统还会自动推送与选中区域相关的二维图像对医师进行展示,使得医师的诊断更为精准。
在所述第一二维显示子区域和第二二维显示子区域分别建立白光显示区域和荧光显示区域。
本发明提供的技术方案,在第一二维显示子区域和第二二维显示子区域分别建立白光显示区域和荧光显示区域,可以理解的是,第一二维显示子区域用于显示第一子三维图像对应的第一荧光二维图像、第一白光二维图像,第二二维显示子区域用于显示第三子三维图像对应的第三荧光二维图像、第三白光二维图像,因此进行白光以及荧光显示区域的区块划分。
将第一荧光二维图像和第一白光二维图像在第一二维显示子区域的白光显示区域和荧光显示区域进行显示,依次将第一荧光序列中的第三荧光二维图像、第三白光二维图像在第二二维显示子区域的白光显示区域和荧光显示区域进行显示。
本发明提供的技术方案,将第一荧光二维图像和第一白光二维图像在第一二维显示子区域的白光显示区域和荧光显示区域进行显示,并且按照第一荧光序列中的顺序依次将第三荧光二维图像、第三白光二维图像在第二二维显示子区域的白光显示区域和荧光显示区域进行显示,其中,第一荧光序列为通过第一总数量对第三荧光二维图像进行从大到小进行排序,可以理解的是,第一总数量越大对应的关联性越高。
本发明提供的技术方案,在一个可能的实施方式中,还包括:
若所述第三荧光二维图像的数量大于一,则根据第一总数量对第三荧光二维图像降序排序,得到第一荧光序列。
本发明提供的技术方案,如果第三荧光二维图像的数量大于一,则对第三荧光二维图像按照与其对应的第一总数量进行从大到小进行排序,生成第一荧光序列,可以理解的是,第一总数量越大对应的相关程度越高,排列更靠前,进行方便进行优先显示,使得医师可以优先查看最相关的图像区域,更贴合实际诊断过程。
本发明提供的技术方案,在一个可能的实施方式中,还包括:
选取所述第一荧光二维图像中与非荧光像素点相邻的荧光像素点,得到第一轮廓荧光像素点集合。
本发明提供的技术方案,系统会选取与第一荧光二维图像中与非荧光像素点相邻的荧光像素点,可以理解的是,与非荧光像素点相邻的荧光像素点为病变区域的边缘,也就是与健康细胞的交界部分,则可以得到第一轮廓荧光像素点集合,方便后续系统根据图片位置将病变区域进行拼接,生成完整的病变部分。
选取所述第三荧光二维图像中与非荧光像素点相邻的荧光像素点,得到至少一个第二轮廓荧光像素点集合。
本发明提供的技术方案,系统会选取所述第三荧光二维图像中与非荧光像素点相邻的荧光像素点,可以理解的是,第三荧光二维图像为与医师选中部分区域的相关联的区域,同样通过与非荧光像素点相邻的荧光像素点为病变区域的边缘,可以得到与健康细胞的交界部分,得到至少一个第二轮廓荧光像素点集合,方便后续根据图像各自的位置将各自对应的轮廓集合进行拼接得到完整的病变部分,系统会对病变区域进行自动拼接,形成一个完整的目标病变区域方便医师进行观察。
所述第一轮廓荧光像素点集合和所述第二轮廓荧光像素点集合基于第一荧光二维图像和第三荧光二维图像的位置进行拼接,得到目标轮廓荧光二维图像。
本发明提供的技术方案,基于第一荧光二维图像和第三荧光二维图像所在的位置将第一轮廓荧光像素点集合和所述第二轮廓荧光像素点集合进行拼接,得到一个完整的目标轮廓荧光二维图像,可以理解的是,当医师对目标区域进行选择后,系统不仅会自动推送相关联的区域,还会根据相关联区域的位置依据轮廓进行拼接成一个完整的病变区域,例如:医生选中的区域为上侧图像,自动推送的图像为该图像的下侧图像,对应的第一轮廓荧光像素点集合处于上侧,第二轮廓荧光像素点集合处于下侧,两者进行拼接形成一个完整的病变区域,方便医生进行诊断,并且拼接成完整的区域后,可以只对病变部分进行显示,可以减少了对健康区域显示,使得病变部分细节显示更加充分,较为方便医师进行诊断。
在所述二维图像显示区域中建立第三二维显示子区域,所述第三二维显示子区域用于显示目标轮廓荧光二维图像。
本发明提供的技术方案,在二维图像显示区域中再次建立第三二维显示子区域,第三二维显示子区域用于显示目标轮廓荧光二维图像,可以理解的是,最终图像显示框中会显示病变区域整体的三维图像、医生选中的第一荧光二维图像、第一白光二维图像、自动推送的第三荧光二维图像、第三白光二维图像,以及将第一荧光二维图像、第三荧光二维图像进行拼接成为一个整体病灶区域的荧光二维图像,将整体以及医生选中的部分病变区域的所有细节均展示给医师,方便医师较好的进行诊断。
为了更好的实现本发明所提供的一种基于数据处理的荧光三维成像方法,本发明还提供一种基于数据处理的荧光三维成像系统,如图3所示,包括:
融合模块,用于基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像;
划分模块,用于根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内;
调取模块,用于对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示;
确定模块,用于根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点;
显示模块,用于根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
如图4所示,是本发明实施例提供的一种电子设备的硬件结构示意图,该电子设备50包括:处理器51、存储器52和计算机程序;其中
存储器52,用于存储所述计算机程序,该存储器还可以是闪存(flash)。所述计算机程序例如是实现上述方法的应用程序、功能模块等。
处理器51,用于执行所述存储器存储的计算机程序,以实现上述方法中设备执行的各个步骤。具体可以参见前面方法实施例中的相关描述。
可选地,存储器52既可以是独立的,也可以跟处理器51集成在一起。
当所述存储器52是独立于处理器51之外的器件时,所述设备还可以包括:
总线53,用于连接所述存储器52和处理器51。
本发明还提供一种可读存储介质,所述可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时用于实现上述的各种实施方式提供的方法。
其中,可读存储介质可以是计算机存储介质,也可以是通信介质。通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。计算机存储介质可以是通用或专用计算机能够存取的任何可用介质。例如,可读存储介质耦合至处理器,从而使处理器能够从该可读存储介质读取信息,且可向该可读存储介质写入信息。当然,可读存储介质也可以是处理器的组成部分。处理器和可读存储介质可以位于专用集成电路(ApplicationSpecific Integrated Circuits,简称:ASIC)中。另外,该ASIC可以位于用户设备中。当然,处理器和可读存储介质也可以作为分立组件存在于通信设备中。可读存储介质可以是只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本发明还提供一种程序产品,该程序产品包括执行指令,该执行指令存储在可读存储介质中。设备的至少一个处理器可以从可读存储介质读取该执行指令,至少一个处理器执行该执行指令使得设备实施上述的各种实施方式提供的方法。
在上述设备的实施例中,应理解,处理器可以是中央处理单元(英文:CentralProcessing Unit,简称:CPU),还可以是其他通用处理器、数字信号处理器(英文:DigitalSignal Processor,简称:DSP)、专用集成电路(英文:Application Specific IntegratedCircuit,简称:ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于数据处理的荧光三维成像方法,其特征在于,包括:
基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像;
根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内;
对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示;
根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点;
根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
2.根据权利要求1所述的方法,其特征在于,
基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像,包括:
选取所述荧光二维图像以及白光二维图像中任意一个相同位置的像素点作为第一坐标中心点;
根据所述第一坐标中心点分别在所述荧光二维图像以及白光二维图像处建立坐标系,得到第一荧光集合以及第一白光集合;
提取所述第一荧光集合中处于预设荧光像素值区间内的像素点,得到目标像素点集合;
将目标像素点集合中每个像素点的像素值与第一白光集合中相同坐标值的像素点的像素值进行替换,得到荧光二维融合图像;
将所述荧光二维融合图像发送至服务器处进行拼接组合,得到荧光三维融合图像。
3.根据权利要求2所述的方法,其特征在于,
所述根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内,包括:
根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸;
根据所述实际划分尺寸依次对荧光三维融合图像进行从上到下的区块划分得到多个子三维图像,直至荧光三维融合图像均被划分为子三维图像,并按照划分顺序进行依次编号;
建立每个编号所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内。
4.根据权利要求3所述的方法,其特征在于,
所述根据所述荧光三维融合图像的实际尺寸得到相对应的实际划分尺寸,包括:
根据所述荧光三维融合图像的实际尺寸与荧光三维融合图像的预设尺寸的比值,得到尺寸系数;
根据所述尺寸系数与预设划分尺寸的乘积,得到实际划分尺寸;
通过以下公式得到实际划分尺寸,
Figure DEST_PATH_IMAGE002A
其中,
Figure DEST_PATH_IMAGE004A
为实际划分尺寸,
Figure DEST_PATH_IMAGE006A
为预设划分尺寸,
Figure DEST_PATH_IMAGE008A
为荧光三维融合图像 的实际尺寸,
Figure DEST_PATH_IMAGE010A
为荧光三维融合图像的预设尺寸,
Figure DEST_PATH_IMAGE012A
为实际划分尺寸的属性值。
5.根据权利要求4所述的方法,其特征在于,
所述根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,包括:
确定与所述第一子三维图像相邻的区域位置,将所述区域位置的图像作为第二子三维图像;
确定第一荧光二维图像中与第二荧光二维图像相邻的像素点作为边界荧光像素点;
统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量;
若所述第一总数量大于预设数量,则将所述第二荧光二维图像作为第三荧光二维图像。
6.根据权利要求5所述的方法,其特征在于,
所述统计所述第二荧光二维图像中与所述边界荧光像素点直接连接和间接连接的荧光像素点数量,得到第一总数量,包括:
确定第二荧光二维图像中与所述边界荧光像素点相邻的荧光像素点,得到多个第一像素点;
确定与所述第一像素点相邻的荧光像素点,得到多个第二像素点,确定与所述第二像素点相邻的荧光像素点,得到多个第三像素点,将所述第三像素点作为第二像素点,再次确定与第二像素点连接的第三像素点,直至所有第二像素点选取完毕;
所述第一像素点与所述边界荧光像素点直接连接,所述第二像素点与所述边界荧光像素点间接连接;
统计第一像素点和第二像素点的数量,得到第一总数量。
7.根据权利要求6所述的方法,其特征在于,
所述根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示,包括:
在初始化的图像显示框中确定三维图显示区域以及二维图像显示区域;
根据所述第三荧光二维图的数量对所述二维图像显示区域进行划分,得到第一二维显示子区域和第二二维显示子区域;
在所述第一二维显示子区域和第二二维显示子区域分别建立白光显示区域和荧光显示区域;
将第一荧光二维图像和第一白光二维图像在第一二维显示子区域的白光显示区域和荧光显示区域进行显示,依次将第一荧光序列中的第三荧光二维图像、第三白光二维图像在第二二维显示子区域的白光显示区域和荧光显示区域进行显示。
8.根据权利要求7所述的方法,其特征在于,还包括:
若所述第三荧光二维图像的数量大于一,则根据第一总数量对第三荧光二维图像降序排序,得到第一荧光序列。
9.根据权利要求8所述的方法,其特征在于,还包括:
选取所述第一荧光二维图像中与非荧光像素点相邻的荧光像素点,得到第一轮廓荧光像素点集合;
选取所述第三荧光二维图像中与非荧光像素点相邻的荧光像素点,得到至少一个第二轮廓荧光像素点集合;
所述第一轮廓荧光像素点集合和所述第二轮廓荧光像素点集合基于第一荧光二维图像和第三荧光二维图像的位置进行拼接,得到目标轮廓荧光二维图像;
在所述二维图像显示区域中建立第三二维显示子区域,所述第三二维显示子区域用于显示目标轮廓荧光二维图像。
10.一种基于数据处理的荧光三维成像装置,其特征在于,包括:
融合模块,用于基于二维图像提取装置对病变组织在荧光下和白光下进行图像提取,得到病变组织不同区域位置处的荧光二维图像以及白光二维图像,根据所述荧光二维图像以及白光二维图像生成与所述病变组织对应的荧光三维融合图像;
划分模块,用于根据所述区域位置对荧光三维融合图像进行区块划分得到多个子三维图像,建立每个子三维图像所对应的预设存储空间,将相应区域位置的荧光二维图像和白光二维图像存储于所述预设存储空间内;
调取模块,用于对所述荧光三维融合图像进行显示,若判断用户选择第一子三维图像,则调取与所述第一子三维图像对应的第一荧光二维图像和第一白光二维图像进行显示;
确定模块,用于根据所述第一子三维图像的区域位置确定多个第二子三维图像,根据每个第二子三维图像所对应第二荧光二维图像中的荧光像素点的数量确定至少一个第三荧光二维图像,所述荧光像素点为处于预设荧光像素值区间内的像素点;
显示模块,用于根据第三荧光二维图像的数量生成图像显示框,基于所述图像显示框对荧光三维融合图像、第一荧光二维图像、第一白光二维图像、第三荧光二维图像、及第三荧光二维图像对应的第三白光二维图像进行显示。
CN202211043998.4A 2022-08-30 2022-08-30 基于数据处理的荧光三维成像方法及装置 Active CN115115755B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202211043998.4A CN115115755B (zh) 2022-08-30 2022-08-30 基于数据处理的荧光三维成像方法及装置
PCT/CN2023/076347 WO2024045507A1 (zh) 2022-08-30 2023-02-16 基于数据处理的荧光三维成像方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211043998.4A CN115115755B (zh) 2022-08-30 2022-08-30 基于数据处理的荧光三维成像方法及装置

Publications (2)

Publication Number Publication Date
CN115115755A true CN115115755A (zh) 2022-09-27
CN115115755B CN115115755B (zh) 2022-11-08

Family

ID=83335486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211043998.4A Active CN115115755B (zh) 2022-08-30 2022-08-30 基于数据处理的荧光三维成像方法及装置

Country Status (2)

Country Link
CN (1) CN115115755B (zh)
WO (1) WO2024045507A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024045507A1 (zh) * 2022-08-30 2024-03-07 南京诺源医疗器械有限公司 基于数据处理的荧光三维成像方法及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016041155A1 (zh) * 2014-09-16 2016-03-24 中国科学院自动化研究所 三维光学分子影像导航系统和方法
CN108185974A (zh) * 2018-02-08 2018-06-22 北京数字精准医疗科技有限公司 一种内窥式荧光超声融合造影导航系统
US20180228424A1 (en) * 2015-04-02 2018-08-16 Eulji University Industry Academy Cooperation Foundation Triple-fusion imaging device for sentinel lymphadenectomy during laparoscopic surgery
WO2020148721A1 (en) * 2019-01-17 2020-07-23 University Health Network Systems, methods, and devices for three-dimensional imaging, measurement, and display of wounds and tissue specimens
CN111513660A (zh) * 2020-04-28 2020-08-11 深圳开立生物医疗科技股份有限公司 一种应用于内窥镜的图像处理方法、装置及相关设备
CN113962947A (zh) * 2021-10-11 2022-01-21 南京诺源医疗器械有限公司 适用于荧光断层图像和切缘信息的存储方法、装置及存储介质
US20220108461A1 (en) * 2019-01-17 2022-04-07 University Health Network Multi-Modal System for Visualization and Analysis of Surgical Specimens
CN114298980A (zh) * 2021-12-09 2022-04-08 杭州海康慧影科技有限公司 一种图像处理方法、装置及设备
CN114882093A (zh) * 2022-07-12 2022-08-09 广东欧谱曼迪科技有限公司 术中三维点云生成方法、装置和术中局部结构导航方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10357184A1 (de) * 2003-12-08 2005-07-07 Siemens Ag Verfahren zur fusionierten Bilddarstellung
JP6053673B2 (ja) * 2011-04-28 2016-12-27 オリンパス株式会社 蛍光観察装置とその画像表示方法
US20140133721A1 (en) * 2012-03-30 2014-05-15 Bruker Biospin Corporation Comparative image display system and a molecular imaging device containing this system
CN109497955A (zh) * 2018-12-18 2019-03-22 聚品(上海)生物科技有限公司 人体自发荧光照明激发及图像处理系统及方法
CN111528770B (zh) * 2019-06-20 2021-01-12 深圳迈瑞生物医疗电子股份有限公司 内窥镜摄像系统、图像处理方法及可读存储介质
CN114569070A (zh) * 2022-01-29 2022-06-03 上海交通大学 指环式一体化荧光造影手术成像引导系统及应用
CN115115755B (zh) * 2022-08-30 2022-11-08 南京诺源医疗器械有限公司 基于数据处理的荧光三维成像方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016041155A1 (zh) * 2014-09-16 2016-03-24 中国科学院自动化研究所 三维光学分子影像导航系统和方法
US20180228424A1 (en) * 2015-04-02 2018-08-16 Eulji University Industry Academy Cooperation Foundation Triple-fusion imaging device for sentinel lymphadenectomy during laparoscopic surgery
CN108185974A (zh) * 2018-02-08 2018-06-22 北京数字精准医疗科技有限公司 一种内窥式荧光超声融合造影导航系统
WO2020148721A1 (en) * 2019-01-17 2020-07-23 University Health Network Systems, methods, and devices for three-dimensional imaging, measurement, and display of wounds and tissue specimens
US20220108461A1 (en) * 2019-01-17 2022-04-07 University Health Network Multi-Modal System for Visualization and Analysis of Surgical Specimens
CN111513660A (zh) * 2020-04-28 2020-08-11 深圳开立生物医疗科技股份有限公司 一种应用于内窥镜的图像处理方法、装置及相关设备
CN113962947A (zh) * 2021-10-11 2022-01-21 南京诺源医疗器械有限公司 适用于荧光断层图像和切缘信息的存储方法、装置及存储介质
CN114298980A (zh) * 2021-12-09 2022-04-08 杭州海康慧影科技有限公司 一种图像处理方法、装置及设备
CN114882093A (zh) * 2022-07-12 2022-08-09 广东欧谱曼迪科技有限公司 术中三维点云生成方法、装置和术中局部结构导航方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
邱鹏: "电子荧光内窥镜实时图像处理系统", 《中国优秀硕士学位论文全文数据库 (工程科技Ⅱ辑)》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024045507A1 (zh) * 2022-08-30 2024-03-07 南京诺源医疗器械有限公司 基于数据处理的荧光三维成像方法及装置

Also Published As

Publication number Publication date
WO2024045507A1 (zh) 2024-03-07
CN115115755B (zh) 2022-11-08

Similar Documents

Publication Publication Date Title
CN110619318B (zh) 基于人工智能的图像处理方法、显微镜、系统和介质
CN109716445B (zh) 类似病例图像检索程序、类似病例图像检索装置以及类似病例图像检索方法
US7564999B2 (en) Method for identifying markers in radiographic images
US9042611B2 (en) Automated vascular region separation in medical imaging
US11954860B2 (en) Image matching method and device, and storage medium
CN106355479A (zh) 一种虚拟试衣方法、虚拟试衣眼镜及虚拟试衣系统
JP2008220617A (ja) 画像解析システム、及び画像解析プログラム
Tang et al. Splat feature classification: Detection of the presence of large retinal hemorrhages
CN115115755B (zh) 基于数据处理的荧光三维成像方法及装置
CN104395930A (zh) 用于定位脊柱的方法、设备和系统
JP2006208339A (ja) 領域抽出装置、顕微鏡システムおよび領域抽出プログラム
Das et al. Preprocessing for automating early detection of cervical cancer
CN111199159A (zh) 基于增强现实的文字翻译及显示方法、装置和电子设备
CN112614573A (zh) 基于病理图像标注工具的深度学习模型训练方法及装置
CN114549455A (zh) 图像处理方法及相关装置、电子设备和存储介质
CN113033287A (zh) 病理图像的显示方法及装置
CN117064311A (zh) 一种内窥镜图像的处理方法及内窥镜成像系统
CN110503114B (zh) 图像特征提取方法、装置、肿瘤识别系统及存储介质
CN108510446B (zh) 视网膜图像的叠加方法及视网膜图像的叠加装置
CN116630220A (zh) 一种荧光图像景深融合成像方法、装置及存储介质
US10194880B2 (en) Body motion display device and body motion display method
JP6702118B2 (ja) 診断支援装置、及び診断支援装置における画像処理方法、並びにプログラム
CN112651400B (zh) 一种立体内窥镜辅助检测方法、系统、装置及存储介质
CN111223192B (zh) 一种图像处理方法及其应用方法、装置及设备
CN111612776A (zh) 一种基于图像边缘识别的病理大体标本大小自动测量方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant