CN111443475B - 一种物镜自动定位扫描玻片的方法及装置 - Google Patents
一种物镜自动定位扫描玻片的方法及装置 Download PDFInfo
- Publication number
- CN111443475B CN111443475B CN202010432845.3A CN202010432845A CN111443475B CN 111443475 B CN111443475 B CN 111443475B CN 202010432845 A CN202010432845 A CN 202010432845A CN 111443475 B CN111443475 B CN 111443475B
- Authority
- CN
- China
- Prior art keywords
- slide
- objective lens
- scanning
- central point
- circumscribed rectangle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000015654 memory Effects 0.000 claims description 20
- 230000035772 mutation Effects 0.000 claims description 9
- 230000001575 pathological effect Effects 0.000 description 25
- 239000002609 medium Substances 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 239000012120 mounting media Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0036—Scanning details, e.g. scanning stages
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/34—Microscope slides, e.g. mounting specimens on microscope slides
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/361—Optical details, e.g. image relay to the camera or image sensor
Landscapes
- Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Microscoopes, Condenser (AREA)
Abstract
本申请实施例公开了一种物镜自动定位扫描玻片的方法、装置、电子设备及存储介质。本申请实施例提供的技术方案,通过固定设置的预览相机采集玻片图像,识别玻片图像中的组织切片的边缘点,并根据边缘点确定组织切片的外切矩形,进一步确定当前外切矩形的第一中心点坐标以及当前物镜相机定位扫描区域的第二中心点坐标。最终,驱动改变物镜相机和玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。采用上述技术手段,通过精准定位组织切片和物镜相机定位扫描区域的中心点,使得物镜相机能够精准地对玻片上的组织切片进行定位扫描。
Description
技术领域
本申请实施例涉及显微镜技术领域,尤其涉及一种物镜自动定位扫描玻片的方法及装置。
背景技术
目前,在生物技术和医学研究治理等领域,对各种病理的研究和分析需要使用大量医学载玻片进行观察操作。尤其是在医学领域中对一精度要求较高的操作,通常使用显微镜对载玻片进行观察,在观察的时候,使用物镜相机对载玻片进行定位扫描,以获取病理图像数据。由于定位扫描要求精度较高,且载玻片相对较小且易碎,人工操作载玻片进行定位扫描容易损坏玻片,操作精度无法保证,且扫描效率低,无法实现自动化扫描。
发明内容
本申请实施例提供一种物镜自动定位扫描玻片的方法、装置、电子设备及存储介质,能够实现物镜相机对玻片的精准定位及自动化扫描,确保获取到完整和准确的病理图像数据。
在第一方面,本申请实施例提供物镜自动定位扫描玻片的方法,包括:
通过固定设置的预览相机采集玻片图像,识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;
提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;其中,预览相机要求固定设置,其拍摄中心点固定,定义为第一拍摄中心点信息;物镜相机可以移动也可以固定设置,其镜头的拍摄中心点定义为第二拍摄中心点信息;将外切矩形的中心点坐标定义为第一中心点坐标;
驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。其中,通过物镜相机的第二拍摄中心点信息确定定位扫描区域的中心点坐标,定义为第二中心点坐标
进一步的,所述驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,包括:
驱动设于玻片底部的直线电机平台移动,以使对应所述外切矩形的所述第一中心点坐标移动至所述第二中心点坐标处;或者,
驱动所述物镜相机移动,以使对应所述物镜相机定位扫描区域的所述第二中心点坐标移动至所述第一中心点坐标处。
进一步的,所述驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,还包括:
计算所述第一中心点坐标和所述第二中心点坐标之间的X轴移动距离和Y轴移动距离,基于所述X轴移动距离和所述Y轴移动距离驱动所述直线电机平台或所述物镜相机移动,以使所述第一中心点坐标和所述第二中心点坐标重合。
进一步的,所述根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描,包括:
确定所述外切矩形四个角的四个第三坐标点;
驱动改变所述物镜相机和所述玻片的相对位置,按照设定的第一拍摄间隔从所述外切矩形的任一所述第三坐标点朝位于同一条边的另一所述第三坐标点沿X轴或Y轴位移,依序逐行或者逐列进行图像扫描,每一行或每一列所述图像扫描按照设定的第二拍摄间隔从所述外切矩形的一侧边朝向所述外切矩形相对应的另一侧边沿X轴或Y轴位移依序进行扫描。
进一步的,所述玻片还包括对应的二维码标识和/或文字标识信息;
对应的,在根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描之后,还包括:
识别所述玻片图像的二维码标识和/或文字标识信息,将扫描到的图像数据对应所述玻片图像的二维码标识和/或文字标识信息进行存储。
进一步的,所述识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,包括:
基于所述玻片图像确定最上端、最左端、最右端和最下端的图像灰度值突变点,根据所述图像灰度值突变点确定组织切片的边缘点,基于所述边缘点绘制平行于所述玻片图像四条边的四条平行线,所述四条平行线两两相交组成对应的外切矩形。
进一步的,所述基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,包括:
将玻片图像的中心点定义为第三中心点信息,基于所述第一拍摄中心点信息确定所述玻片图像上对应的第三中心点信息;
根据所述第三中心点信息确定所述外切矩形四个角对应所述第一拍摄中心点信息的第三坐标点;
根据所述外切矩形四个角的第三坐标点确定所述第一中心点坐标。
其中,将玻片图像的中心点定义为第三中心点信息,定义外切矩形四个角对应的坐标点为第三坐标点。
在第二方面,本申请实施例提供了一种物镜自动定位扫描玻片的装置,包括:
识别模块,用于通过固定设置的预览相机采集玻片图像,识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;
确定模块,用于提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;
扫描模块,用于驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。
进一步的,还包括:
存储模块,用于将扫描到的图像数据对应所述玻片图像存储,所述玻片图像还包括对应的二维码标识和/或文字标识信息。
在第三方面,本申请实施例提供了一种电子设备,包括:
存储器以及一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面所述的物镜自动定位扫描玻片的方法。
在第四方面,本申请实施例提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的物镜自动定位扫描玻片的方法。
本申请实施例通过固定设置的预览相机采集玻片图像,识别玻片图像中的组织切片的边缘点,并根据边缘点确定组织切片轮廓的外切矩形,进一步确定当前外切矩形的第一中心点坐标以及当前物镜相机定位扫描区域的第二中心点坐标。最终,通过驱动第一中心点坐标和第二中心点坐标重合以使外切矩形落入物镜相机的定位扫描区域,进行对应外切矩形的病理图像扫描。采用上述技术手段,通过精准定位组织切片和物镜相机定位扫描区域的中心点,使得物镜相机能够精准地对玻片上的组织切片进行定位扫描,保证获取到的图像的完整性和准确性。并通过自动定位扫描,实现了自动化扫描病理组织图像,解决了人工操作效率低和损坏玻片的隐患。
附图说明
图1是本申请实施例一提供的一种物镜自动定位扫描玻片的方法的流程图;
图2是本申请实施例一物镜自动定位扫描玻片的扫描场景示意图;
图3是本申请实施例一中的玻片图像示意图;
图4是本申请实施例一中的第一中心点坐标确定流程图;
图5是本申请实施例一中的外切矩形与定位扫描区域移动重合示意图;
图6是本申请实施例一中的图像扫描流程图;
图7是本申请实施例二中提供的一种物镜自动定位扫描玻片的装置的结构示意图;
图8是本申请实施例三提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
本申请提供的物镜自动定位扫描玻片的方法,旨在通过对玻片的组织切片区域和物镜相机定位扫描区域的中心点进行精确定位,以便于通过物镜相机准确地获取到组织切片上的病理图像,为病理研究分析提供准确的图像数据。以病理图像扫描为例,相对于现有的图像扫描定位方式,其在进行组织切片定位时,大都是通过人工观察物镜相机的拍摄画面,并进一步人工操作移动玻片以使玻片上的组织切片区域落入物镜相机的扫描范围。由于玻片相对较小且易碎,人工定位扫描的方式一方面容易损坏玻片,另一方面通过人工观察操作也无法保证精确、完整地扫描到图像。并且,在扫描过程中,通过人工移动逐渐进行图像的扫描,其操作方式也相对较为粗糙,产生的扫描误差会进一步加大,导致定位扫描到的图像数据精度偏低,且会因为扫描范围过大导致图像数据过大影响数据传输和存储。基于此,提供本申请实施例的物镜自动定位扫描玻片的方法,以解决现有玻片定位扫描方式误差大的技术问题。
实施例一:
图1给出了本申请实施例一提供的一种物镜自动定位扫描玻片的方法的流程图,本实施例中提供的物镜自动定位扫描玻片的方法可以由物镜自动定位扫描玻片的设备执行,该物镜自动定位扫描玻片的设备可以通过软件和/或硬件的方式实现,该物镜自动定位扫描玻片的设备可以是两个或多个物理实体构成,也可以是一个物理实体构成。一般而言,该物镜自动定位扫描玻片的设备可以是玻片定位扫描装置的控制设备。
下述以物镜自动定位扫描玻片的设备为执行物镜自动定位扫描玻片的方法的设备为例,进行描述。参照图1,该物镜自动定位扫描玻片的方法具体包括:
S110、通过固定设置的预览相机采集玻片图像,识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行。
示例性的,以病理图像扫描为例,在进行病理图像数据采集时,参照图2,提供自动定位扫描玻片的扫描场景示意图。提供玻片定位扫描装置的各个设备,其中,预览相机1和物镜相机2设置在直线电机平台4上,通过预览相机1和物镜相机分别对放置在直线电机平台4上的玻片3进行相关图像的采集。其中,预览相机1用于采集玻片3的玻片图像,物镜相机2用于采集玻片3中对应病理组织区域的病理图像数据。
进一步的,本申请实施例中,预览相机固定设置,进行对应玻片图像的采集。在定位扫描时,首先通过预览相机对玻片图像进行拍摄,基于拍摄到的玻片图像进行组织切片区域的识别确定。具体的,本申请实施例的玻片为长76.2mm、宽25.9mm的长方形玻片,玻片图像参照图3,其中间区域放置病理组织切片,左右两边区域分别是二维码标识信息或者文字类标识。通过预览相机对整张玻片进行拍照,可以通过二维码标识和文字标识获取病理组织切片中患者的信息,包括病人的姓名、年龄、人体组织部位等。并对应中间放置的组织切片区域进行识别,确定其中的组织切片的外切矩形。
在确定组织切片的外切矩形时,基于所述玻片图像确定最上端、最左端、最右端和最下端的图像灰度值突变点,根据所述图像灰度值突变点确定组织切片的边缘点,基于所述边缘点绘制平行于所述玻片图像四条边的四条平行线,所述四条平行线两两相交组成对应的外切矩形。具体的,通过直接扫描玻片图像,记录最上端、最左端、最右端、最下端的图像灰度值的突变点,从而确定组织切片的上、下、左、右最边缘点。然后分别在上、下、左、右最边缘点上绘制一条平行于玻片图像上、下、左、右4条边的平行线,所述4条平行线两两相交组成的矩形即为组织切片的外切矩形。
在一个实施例中,提供组织切片外切矩形的另一种确定方法。对应预览相机拍摄的玻片图像,通过对中间组织切片区域进行处理识别。其中,通过函数cvtColor将玻片图像从RGB格式的原始彩色图像转化为GRAY格式的灰度图像,完成图像的灰度化处理,灰度化后的图像像素值范围为0-255。具体通过cv::Mat img=cv::cvarrToMat(image)将图片转化为Mat类型,对图片进行灰度转化、阈值化等操作。并基于获取到的灰度图像(二值化图像),采用cvFindContours函数查找该灰度图像中的组织切片区域的轮廓,并通过cvDrawContours函数即可绘制出组织切片轮廓。现有技术对图像轮廓的识别方式有很多,本申请实施例不做固定限制,在此不多赘述。进一步的,基于绘制出的组织切片轮廓,进行该组织切片轮廓外切矩形的确定。其中,外切矩形要求其四条边与玻片图像的四条边相互平行,以此来保证后续可根据预览相机的拍摄中心点确定外切矩形的四个角和中心点坐标。
需要说明的是,本申请实施例的预览相机的位置固定设置,以便于后续根据预览相机的拍摄中心点确定其他位置信息。
S120、提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标。
进一步的,根据上述确定的玻片上组织切片的外切矩形,即可进一步确定外切矩形和物镜相机定位扫描区域的中心点。具体的,本申请实施例预先对预览相机的拍摄中心点和当前物镜相机的拍摄中心点进行存储,其中,预览相机要求固定设置,其拍摄中心点固定,定义为第一拍摄中心点信息。物镜相机可以移动也可以固定设置,其镜头的拍摄中心点定义为第二拍摄中心点信息。设备预先对这两个中心点信息进行存储,以便于后续根据两个中心点信息进行对应中心点坐标的确定。
具体的,将外切矩形的中心点坐标定义为第一中心点坐标,参照图4,第一中心点坐标的确定流程包括:
S1201、基于所述第一拍摄中心点信息确定所述玻片图像上对应的第三中心点信息;其中,将玻片图像的中心点定义为第三中心点信息。
S1202、根据所述第三中心点信息确定所述外切矩形四个角对应所述第一拍摄中心点信息的第三坐标点;其中,第三坐标点对应为四个。
S1203、根据所述外切矩形四个角的第三坐标点确定所述第一中心点坐标。
由于玻片图像通过预览相机拍摄,则预览相机固定拍摄区域的第一拍摄中心点信息,即与玻片图像的中心点相对应。将玻片图像的中心点定义为第三中心点信息,则对应上述步骤S110确定的外切矩形在玻片图像上的位置,即可确定外切矩形四个角对应的坐标点。定义外切矩形四个角对应的四个坐标点为第三坐标点,参照图3,第三坐标点分别为A、B、C和D,则根据外切矩形的几何形状特性,即可确定外切矩形的第一中心点坐标。具体的,图3中,AB线为组织切片最上端顶点所在的玻片边的横向平行线,CD线为组织切片最下端顶点所在的玻片边的横向平行线,AC线为组织切片最左端顶点所在的玻片边的竖向平行线,BD线为组织切片最右端顶点所在的玻片边的竖向平行线。各平行线延长相交组成的矩形就是相对应组织切片轮廓的外切矩形。AD线与BC线的相交点S就是相对应外切矩形的第一中心点坐标。需要说明的是,本申请实施例中,由于预览相机的第一拍摄中心点信息确定,且预览相机固定,则上述坐标位置信息皆为对应第一拍摄中心点信息而确定的相应坐标位置。
另一方面,本申请实施例还通过物镜相机的第二拍摄中心点信息确定定位扫描区域的中心点坐标,定义为第二中心点坐标。可以理解的是,物镜相机对应定位扫描区域的中心点拍摄时,其第二拍摄中心点信息即为该第二中心点坐标。因此,可将当前第二拍摄中心点信息直接作为第二中心点坐标。
S130、驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。
具体的,完成上述第一中心点坐标和第二中心点坐标确定之后,即可进行组织切片区域的定位扫描。可以理解的是,为了保证扫描到的病理图像数据的准确性,要求组织切片区域在定位的时候,能够完整地落入物镜相机的定位扫描范围。其中,参照图5,提供外切矩形与定位扫描区域移动重合示意图。本申请实施例中,预览相机的位置固定,且预先存储预览相机拍摄中心点信息和物镜相机的拍摄中心点信息。则进一步可以通过固定的几何位置进行计算,并通过驱动控制相关设备移动以带动玻片移动,使第一中心点坐标和第二中心点坐标重合,以使外切矩形落入所述物镜相机的定位扫描区域。如图5所示,以预览相机的拍摄中心点信息O为直角坐标轴的原点,进行各个坐标位置的XY坐标显示。对应的,ABCD为预览相机拍摄到的组织切片的外切矩形,S为ABCD的第一中心点坐标,S1为物镜相机定位扫描区域的第二中心点坐标(即第二拍摄中心点信息)。进一步的,S1的坐标为(X2,Y2),则S1到坐标原点的距离OX2与OY2确定。组织切片外切矩形的中心原点为S,S的坐标为(X1,Y1),则可以计算得到S到坐标原点的距离OX1与OY1。则S与S1之间的X、Y轴坐标距离为X1X2=OX2-OX1,Y1Y2=OY2-OY1。根据确定第一中心点坐标、第二中心点坐标,并计算第一中心点坐标和第二中心点坐标之间的X轴移动距离和Y轴移动距离。即可驱动相关设备移动以使该外切矩形落入物镜相机的定位扫描区域。
更具体的,本申请实施例中,通过驱动设于玻片底部的直线电机平台移动,以使对应组织切片外切矩形的第一中心点坐标移动至第二中心点坐标处;或者,通过驱动物镜相机移动,以使对应物镜相机定位扫描区域的第二中心点坐标移动至第一中心点坐标处。并且,在进行驱动控制设备移动时,基于计算得到的两个中心点坐标之间的X轴移动距离和Y轴移动距离,驱动直线电机平台或物镜相机移动对应的距离,以使第一中心点坐标和第二中心点坐标重合。
进一步的,以驱动控制直线电机平台为例,参照图5,通过XY电动直线电机平台,将外切矩形的中心点坐标S沿X轴移动X1X2距离,再沿Y轴移动Y1Y2距离,直到S与S1重合,而此时AB C D四个顶点的位置分别在A1 B1 C1D1处。以此完成玻片组织切片区域的定位。需要说明的是,中心点坐标S的移动顺序本申请实施例不做固定限制,在实际应用中,也可通过直线电机平台,驱动中心点坐标S沿Y轴移动Y1Y2距离后再沿X轴移动X1X2距离。
在第一中心点坐标S移动至第二中心点坐标S1后,进行对应病理图像的扫描,其中,参照图6,病理图像扫描流程包括:
S1301、确定所述外切矩形四个角的第三坐标点;
S1302、驱动改变所述物镜相机和所述玻片的相对位置,按照设定的第一拍摄间隔从所述外切矩形的任一所述第三坐标点朝位于同一条边的另一所述第三坐标点沿X轴或Y轴位移,依序逐行或者逐列进行图像扫描,每一行或每一列所述图像扫描按照设定的第二拍摄间隔从所述外切矩形的一侧边朝向所述外切矩形相对应的另一侧边沿X轴或Y轴位移依序进行扫描。
举例说明,通过确定外切矩形四个角的第三坐标点A、B、C和D,进一步将组织切片外切矩形的顶点A移动到S1,此时物镜相机拍摄第一幅图片,进一步按照设定的拍摄间隔(定义为第二拍摄间隔),将矩形区域的上边缘从顶点A至顶点B沿X轴依序水平位移至S1上,并逐一进行拍摄图片,直到B点位于S1上并拍摄图片,至此完成矩形区域的第一行的扫描拍摄。进一步的,当完成一行图像扫描后,驱动组织切片移动,按照设定的拍摄间隔(定义为第一拍摄间隔),从顶点A至顶点C沿Y轴依序水平位移进行外切矩形区域的逐行图片扫描。可以理解的是,根据预设的第一拍摄间隔,将外切矩形区域从顶部至底部分成若干行,每一行的扫描参照上述第一行的扫描方式,将矩形区域从左边缘至右边缘沿Y轴依次移至S1,并逐一进行拍摄。以此类推,进行外切矩形区域的逐行拍摄,直至完成整个外切矩形区域的图像扫描。需要说明的是,本申请实施例中,采用直线电机驱动物镜相机和玻片相对移动,由于直线电机在同一水平面上沿X轴或者Y轴移动,因此,在图像扫描时,物镜相机和玻片的相对移动也是在同一水平面上的移动。而实际应用中,根据实际需要,在进行图像扫描时,物镜相机和玻片的相对移动也可以不在同一水平面上进行,具体以实际图像扫描位移需求设定,在此不多赘述。此外,在实际图像扫描过程中,可以选取任意一个第三坐标点,按照设定的第一拍摄间隔朝位于同一条边的另一第三坐标点的方向依序逐行或者逐列进行图像扫描。具体的图像扫描次序根据实际扫描需求设置,在此不多赘述。
最终,根据扫描过程中物镜相机拍摄图像的顺序进行拼接得到最终整个外切矩形的图像数据。需要说明的是,本申请实施例中,对应物镜相机定位扫描的图像数据,根据实际需要可以是病理图像等相关图像数据,本申请实施例对扫描到的图像数据不做固定限制,在此不多赘述。
之后,对应物镜相机扫描到的病理图像数据,将扫描到的病理图像数据与对应的玻片图像的二维码标识和/或文字标识信息进行存储。由于玻片图像还包括对应的二维码标识和/或文字标识信息,则通过识别玻片图像的二维码标识和/或文字标识信息,根据二维码标识和/或文字标识信息,即可确定病理图像数据来自哪一个病人,以便于进行病理图像数据的溯源。
需要说明的是,本申请实施例中,由于通过驱动直线电机平台或者物镜相机移动使相应的坐标点重合,以实现物镜相机的定位扫描。在实际应用中,对应物镜相机的移动,需要实时记录物镜相机的拍摄中心点信息,以用于下一次进行玻片图像的定位扫描。也可以直接将预览相机和物镜相机固定设置,记录两者的距离信息和拍摄中心点信息,后续基于已确定的第一、第二拍摄中心点信息进行第一、第二中心点坐标的确定,并进一步驱动控制电机平台移动以实现组织切片的外切矩形落入物镜相机的定位扫描范围。
上述,通过固定设置的预览相机采集玻片图像,识别玻片图像中的组织切片的边缘点,并根据边缘点确定组织切片轮廓的外切矩形,进一步确定当前外切矩形的第一中心点坐标以及当前物镜相机定位扫描区域的第二中心点坐标。最终,通过驱动第一中心点坐标和第二中心点坐标重合以使外切矩形落入物镜相机的定位扫描区域,进行对应外切矩形的病理图像扫描。采用上述技术手段,通过精准定位组织切片和物镜相机定位扫描区域的中心点,使得物镜相机能够精准地对玻片上的组织切片进行定位扫描,保证获取到的图像的准确性。并通过自动定位扫描,避免了人工操作损坏玻片的隐患。
实施例二:
在上述实施例的基础上,图7为本申请实施例二提供的一种物镜自动定位扫描玻片的装置的结构示意图。参考图7,本实施例提供的物镜自动定位扫描玻片的装置具体包括:识别模块21、确定模块22、扫描模块23和存储模块24。
其中,识别模块21用于通过固定设置的预览相机采集玻片图像,识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;
确定模块22用于提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;
扫描模块23用于驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。
上述,通过固定设置的预览相机采集玻片图像,识别玻片图像中的组织切片的边缘点,并根据边缘点确定组织切片轮廓的外切矩形,进一步确定当前外切矩形的第一中心点坐标以及当前物镜相机定位扫描区域的第二中心点坐标。最终,通过驱动第一中心点坐标和第二中心点坐标重合以使外切矩形落入物镜相机的定位扫描区域,进行对应外切矩形的病理图像扫描。采用上述技术手段,通过精准定位组织切片和物镜相机定位扫描区域的中心点,使得物镜相机能够精准地对玻片上的组织切片进行定位扫描,保证获取到的病理图像的完整性和准确性。并通过自动定位扫描,实现对病理玻片的自动化扫描,提高了扫描的效率和避免了人工操作损坏玻片的隐患。
具体的,存储模块24用于识别所述玻片图像的二维码标识和/或文字标识信息,将扫描到的图像数据对应所述玻片图像的二维码标识和/或文字标识信息进行存储。
本申请实施例二提供的物镜自动定位扫描玻片的装置可以用于执行上述实施例一提供的物镜自动定位扫描玻片的方法,具备相应的功能和有益效果。
实施例三:
本申请实施例三提供了一种电子设备,参照图8,该电子设备包括:处理器31、存储器32、通信模块33、输入设备34及输出设备35。该电子设备中处理器的数量可以是一个或者多个,该电子设备中的存储器的数量可以是一个或者多个。该电子设备的处理器、存储器、通信模块、输入设备及输出设备可以通过总线或者其他方式连接。
存储器32作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请任意实施例所述的物镜自动定位扫描玻片的方法对应的程序指令/模块(例如,物镜自动定位扫描玻片的装置中的识别模块、确定模块和扫描模块)。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器可进一步包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
通信模块33用于进行数据传输。
处理器31通过运行存储在存储器中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的物镜自动定位扫描玻片的方法。
输入设备34可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出设备35可包括显示屏等显示设备。
上述提供的电子设备可用于执行上述实施例一提供的物镜自动定位扫描玻片的方法,具备相应的功能和有益效果。
实施例四:
本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种物镜自动定位扫描玻片的方法,该物镜自动定位扫描玻片的方法包括:通过固定设置的预览相机采集玻片图像,识别所述玻片图像中组织切片的上、下、左、右的边缘点,并根据所述边缘点确定所述组织切片的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的物镜自动定位扫描玻片的方法,还可以执行本申请任意实施例所提供的物镜自动定位扫描玻片的方法中的相关操作。
上述实施例中提供的物镜自动定位扫描玻片的装置、存储介质及电子设备可执行本申请任意实施例所提供的物镜自动定位扫描玻片的方法,未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的物镜自动定位扫描玻片的方法。
上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由权利要求的范围决定。
Claims (8)
1.一种物镜自动定位扫描玻片的方法,其特征在于,包括:
通过固定设置的预览相机采集玻片图像,基于所述玻片图像确定最上端、最左端、最右端和最下端的图像灰度值突变点,根据所述图像灰度值突变点确定组织切片的边缘点,基于所述边缘点绘制平行于所述玻片图像四条边的四条平行线,所述四条平行线两两相交组成对应的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;
提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;
驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,确定所述外切矩形四个角的四个第三坐标点,驱动改变所述物镜相机和所述玻片的相对位置,按照设定的第一拍摄间隔从所述外切矩形的任一所述第三坐标点朝位于同一条边的另一所述第三坐标点沿X轴或Y轴位移,依序逐行或者逐列进行图像扫描,每一行或每一列所述图像扫描按照设定的第二拍摄间隔从所述外切矩形的一侧边朝向所述外切矩形相对应的另一侧边沿X轴或Y轴位移依序进行扫描。
2.根据权利要求1所述的物镜自动定位扫描玻片的方法,其特征在于,所述驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,包括:
驱动设于玻片底部的直线电机平台移动,以使对应所述外切矩形的所述第一中心点坐标移动至所述第二中心点坐标处;或者,
驱动所述物镜相机移动,以使对应所述物镜相机定位扫描区域的所述第二中心点坐标移动至所述第一中心点坐标处。
3.根据权利要求2所述的物镜自动定位扫描玻片的方法,其特征在于,所述驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,还包括:
计算所述第一中心点坐标和所述第二中心点坐标之间的X轴移动距离和Y轴移动距离,基于所述X轴移动距离和所述Y轴移动距离驱动所述直线电机平台或所述物镜相机移动,以使所述第一中心点坐标和所述第二中心点坐标重合。
4.根据权利要求1所述的物镜自动定位扫描玻片的方法,其特征在于:所述玻片还包括对应的二维码标识和/或文字标识信息;
对应的,在根据预设的移动轨迹控制所述物镜相机对应所述外切矩形进行图像扫描之后,还包括:
识别所述玻片图像的二维码标识和/或文字标识信息,将扫描到的图像数据对应所述玻片图像的二维码标识和/或文字标识信息进行存储。
5.根据权利要求1所述的物镜自动定位扫描玻片的方法,其特征在于:所述基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,包括:
基于所述第一拍摄中心点信息确定所述玻片图像上对应的第三中心点信息;
根据所述第三中心点信息确定所述外切矩形四个角对应所述第三中心点信息的第三坐标点;
根据所述外切矩形四个角的第三坐标点确定所述第一中心点坐标。
6.一种物镜自动定位扫描玻片的装置,其特征在于,包括:
识别模块,用于通过固定设置的预览相机采集玻片图像,基于所述玻片图像确定最上端、最左端、最右端和最下端的图像灰度值突变点,根据所述图像灰度值突变点确定组织切片的边缘点,基于所述边缘点绘制平行于所述玻片图像四条边的四条平行线,所述四条平行线两两相交组成对应的外切矩形,所述外切矩形的四条边与所述玻片图像的四条边相互平行;
确定模块,用于提取所述预览相机的第一拍摄中心点信息和当前物镜相机的第二拍摄中心点信息,基于所述第一拍摄中心点信息确定当前所述外切矩形的第一中心点坐标,基于当前所述第二拍摄中心点信息确定当前所述物镜相机定位扫描区域的第二中心点坐标;
扫描模块,用于驱动改变所述物镜相机和所述玻片的相对位置,以使所述第一中心点坐标和所述第二中心点坐标重合,确定所述外切矩形四个角的四个第三坐标点,驱动改变所述物镜相机和所述玻片的相对位置,按照设定的第一拍摄间隔从所述外切矩形的任一所述第三坐标点朝位于同一条边的另一所述第三坐标点沿X轴或Y轴位移,依序逐行或者逐列进行图像扫描,每一行或每一列所述图像扫描按照设定的第二拍摄间隔从所述外切矩形的一侧边朝向所述外切矩形相对应的另一侧边沿X轴或Y轴位移依序进行扫描。
7.一种电子设备,其特征在于,包括:
存储器以及一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5任一所述的物镜自动定位扫描玻片的方法。
8.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-5任一所述的物镜自动定位扫描玻片的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010432845.3A CN111443475B (zh) | 2020-05-20 | 2020-05-20 | 一种物镜自动定位扫描玻片的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010432845.3A CN111443475B (zh) | 2020-05-20 | 2020-05-20 | 一种物镜自动定位扫描玻片的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111443475A CN111443475A (zh) | 2020-07-24 |
CN111443475B true CN111443475B (zh) | 2022-10-28 |
Family
ID=71656907
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010432845.3A Active CN111443475B (zh) | 2020-05-20 | 2020-05-20 | 一种物镜自动定位扫描玻片的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111443475B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112363309B (zh) * | 2020-11-13 | 2023-02-17 | 杭州医派智能科技有限公司 | 一种用于显微镜下病理图像的自动寻焦方法和系统 |
CN113837137B (zh) * | 2021-09-30 | 2024-09-27 | 湖南品胜生物技术有限公司 | 一种用于样本显微图像采集的定位捕捉方法、控制系统及可读存储介质 |
CN114494465B (zh) * | 2022-02-28 | 2024-06-04 | 北京毅能博科技有限公司 | 面向自动扫描的组织病理切片检测目标定位方法与装置 |
CN118210138B (zh) * | 2024-05-21 | 2024-09-13 | 江苏汇达医疗器械有限公司 | 一种基于数字化应用的载玻片检测定位系统及方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106291897A (zh) * | 2016-08-23 | 2017-01-04 | 宁波江丰生物信息技术有限公司 | 一种组织切片扫描装置以及组织切片扫描方法 |
CN109087356A (zh) * | 2018-06-29 | 2018-12-25 | 齐鲁工业大学 | 基于机器视觉的医学载玻片的识别定位方法、系统及装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7518652B2 (en) * | 2000-05-03 | 2009-04-14 | Aperio Technologies, Inc. | Method and apparatus for pre-focus in a linear array based slide scanner |
HUP0600177A2 (en) * | 2006-03-03 | 2009-03-02 | 3D Histech Kft | Equipment for and method of digitizing slides by automated digital image recording system |
DE102016110988A1 (de) * | 2016-06-15 | 2017-12-21 | Sensovation Ag | Verfahren zum digitalen Aufnehmen einer Probe durch ein Mikroskop |
-
2020
- 2020-05-20 CN CN202010432845.3A patent/CN111443475B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106291897A (zh) * | 2016-08-23 | 2017-01-04 | 宁波江丰生物信息技术有限公司 | 一种组织切片扫描装置以及组织切片扫描方法 |
CN109087356A (zh) * | 2018-06-29 | 2018-12-25 | 齐鲁工业大学 | 基于机器视觉的医学载玻片的识别定位方法、系统及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111443475A (zh) | 2020-07-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111443475B (zh) | 一种物镜自动定位扫描玻片的方法及装置 | |
US8350905B2 (en) | Microscope system, image generating method, and program for practicing the same | |
CN111815707B (zh) | 点云确定方法、点云筛选方法、装置、计算机设备 | |
EP2273302B1 (en) | Image acquiring apparatus, image acquiring method and image acquiring program | |
CN101946117B (zh) | 光投影装置、照明装置 | |
CN109239900B (zh) | 一种用于显微数字图像大视野采集的全自动快速聚焦方法 | |
US20100265323A1 (en) | System for and method of focusing in automated microscope systems | |
JP4391527B2 (ja) | 関心のある複数の対象物を関心のあるフィールド内で組織化するシステム | |
CN112508952B (zh) | 一种病理切片双物镜自适应扫描控制方法及系统 | |
JP2002277754A (ja) | 顕微鏡写真撮影装置 | |
CN104011531A (zh) | 图像处理装置、图像显示系统、图像处理方法以及图像处理程序 | |
US9979858B2 (en) | Image processing apparatus, image processing method and program | |
CN114445415B (zh) | 可行驶区域的分割方法以及相关装置 | |
CN109001902A (zh) | 基于图像融合的显微镜聚焦方法 | |
JP5259348B2 (ja) | 高さ情報取得装置、高さ情報取得方法、及びプログラム | |
CN113052166A (zh) | 病理图像的显示方法及装置 | |
JP2005164707A (ja) | 細胞計測支援システムおよび細胞観察装置 | |
CN105651699B (zh) | 一种基于面阵相机的动态跟焦方法 | |
CN116728436A (zh) | 一种弹琴机器人的控制方法及控制装置 | |
CN113472984B (zh) | 图像获取方法、装置、系统、存储介质和设备 | |
RU2647645C1 (ru) | Способ устранения швов при создании панорамных изображений из видеопотока кадров в режиме реального времени | |
RU2626551C1 (ru) | Способ формирования панорамных изображений из видеопотока кадров в режиме реального времени | |
CN112839168A (zh) | 一种自动调整aoi检测系统中相机成像分辨率的方法 | |
CN116612007B (zh) | 一种光学元件表面子孔径拼接方法及装置 | |
CN116433769A (zh) | 空间校准方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |