CN110136808B - 一种拍摄装置辅助显示系统 - Google Patents

Abstract

一种拍摄装置辅助显示系统，所述拍摄装置在人体内进行拍摄并生成图像信息，所述拍摄装置辅助显示系统包括：服务端，包括算法分析模块，所述算法分析模块用以实时对图像信息依次进行识别分析并生成疑似病灶信息；客户端，可与所述服务端通讯连接，所述客户端包括显示控制模块，所述显示控制模块用以接收算法分析模块传输的疑似病灶信息、匹配相对应的图像信息和疑似病灶信息并同时进行实时显示。算法分析模块通过分析实时获得疑似病灶信息后，客户端的显示控制模块又实时获得并显示上述疑似病灶信息及相关图像信息。因而，操作人员可根据疑似病灶信息对图像信息进行判断，减少误检，提高检查的效率。

Description

一种拍摄装置辅助显示系统

技术领域

本发明涉及医疗器械，特别涉及一种拍摄装置的辅助显示系统。

背景技术

在目前的医疗环境中，操作人员在使用拍摄装置检查被检查者的身体时，通常需要将被检查者的所有部位都检查完整，并且需要在某些部位例如疑似病灶部位通过多角度拍摄更多的有效图片。

例如，在通过胶囊内窥镜进行检查时，胶囊内窥镜通过吞咽进入消化道后再拍摄照片，照片可以是实时以单张照片进行数据传输，也可以将所有的检查图片一次性传输后再进行数据传输。数据传输之后再进行实时的图像显示以方便操作人员进行检测。

而现有的实时传输和图像显示的检测系统中，只能看到胶囊内窥镜所拍摄的图像，操作人员只能根据经验来判断拍摄的图像中是否有病变，所拍摄的图像的有效性完全取决于操作人员的现场判断，从而，这要求较为熟练的操作人员，如果操作不规范也很容易造成误检。

因此，必须设计一种新的拍摄装置的辅助显示系统，以方便操作人员进行判断。

发明内容

为解决上述问题之一，本发明提供了一种拍摄装置辅助显示系统，所述拍摄装置在人体内进行拍摄并生成图像信息，所述拍摄装置辅助显示系统包括：

服务端，包括算法分析模块，所述算法分析模块用以实时对图像信息依次进行识别分析并生成疑似病灶信息；

客户端，可与所述服务端通讯连接，所述客户端包括显示控制模块，所述显示控制模块用以接收算法分析模块传输的疑似病灶信息、匹配相对应的图像信息和疑似病灶信息并同时进行实时显示。

作为本发明的进一步改进，客户端还与拍摄装置通讯连接以实时获取图像信息且将图像信息发送给算法分析模块。

作为本发明的进一步改进，所述服务端还包括服务端联网探测模块，所述客户端还包括客户端联网探测模块，所述客户端联网探测模块可与所述服务端联网探测模块通讯连接。

作为本发明的进一步改进，所述显示控制模块包括用以实时接收单张图像信息、并将图像信息发送给算法分析模块以进行分析的质量控制模块；所述疑似病灶信息包括当前图像的消化道部位、疑似病灶类型、疑似病灶热力图、体外工作时间、消化道图像数量、疑似病灶轮廓位置坐标。

作为本发明的进一步改进，所述质量控制模块用以分析图像信息、疑似病灶热力图、消化道部位、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述质量控制模块还包括用以显示疑似病灶图像信息的实时质量显示区域。

作为本发明的进一步改进，所述质量控制模块用以分析消化道图像数量并生成消化道区间检查完整信息，所述质量控制模块还包括用以显示消化道检查完整信息的检查完整性显示区域。

作为本发明的进一步改进，所述质量控制模块用以分析体外工作时间和消化道图像数量并生成总检查时间、已检查部位及未检查部位，所述质量控制模块还包括用以显示总检查时间、已检查部位及未检查部位的质量控制统计显示区域。

作为本发明的进一步改进，所述显示控制模块包括用以一次性接收若干张图像信息并将若干张图像信息发送给算法分析模块的辅助阅片模块，所述若干张图像信息均按照时间戳排列；所述疑似病灶信息包括消化道分段索引编号、疑似病灶索引编号、疑似病灶类型以及病灶框。

作为本发明的进一步改进，所述辅助阅片模块用以分析所述消化道分段索引编号并按照索引编号生成进度条，所述消化道分段显示区域还包括用以显示该进度条及对应图像信息的消化道分段显示区域。

作为本发明的进一步改进，所述辅助阅片模块用以分析疑似病灶索引编号并生成疑似病灶索引，所述辅助阅片模块还包括用以将疑似病灶索引显示在进度条上的疑似病灶索引显示区域。

作为本发明的进一步改进，所述辅助阅片模块用以分析图像信息、疑似病灶索引编号、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述辅助阅片模块还包括用以显示疑似病灶图像信息的疑似病灶标记显示区域。

与现有技术相比，在上述方法中，算法分析模块通过分析实时获得疑似病灶信息后，客户端的显示控制模块又实时获得上述疑似病灶信息，并且相对应的疑似病灶信息和图像信息并同时进行显示。在获得图像信息的同时，还可以显示该图像信息的疑似病灶信息，因而，操作人员可根据疑似病灶信息对图像信息进行判断，减少误检，提高检查的效率。

附图说明

图1是本发明中拍摄装置辅助显示系统的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

本发明提供了一种拍摄装置辅助显示系统，所述拍摄装置在人体内进行拍摄并生成图像信息。在本实施方式中，所述拍摄装置指采用胶囊内窥镜，胶囊内窥镜可让被检查者吞咽，并随着消化道的蠕动进行移动。在移动的过程中，对消化道进行拍摄并生成若干图像信息。

具体的，所述拍摄装置辅助显示系统包括：

服务端，包括算法分析模块，所述算法分析模块用以实时对图像信息依次进行识别分析并生成疑似病灶信息；

客户端，可与所述服务端通讯连接，所述客户端包括显示控制模块，所述显示控制模块用以接收算法分析模块传输的疑似病灶信息、匹配相对应的图像信息和疑似病灶信息并同时进行实时显示。

从而，算法分析模块通过分析实时获得疑似病灶信息后，客户端的显示控制模块又实时获得上述疑似病灶信息，并且相对应的疑似病灶信息和图像信息并同时进行显示。在获得图像信息的同时，还可以显示该图像信息的疑似病灶信息，因而，操作人员可根据疑似病灶信息对图像信息进行判断，减少误检，提高检查的效率。

另外，服务端可设置于云端并与客户端通过网络通讯连接，从而可减轻客户端的工作量。并且，在本实施方式中，所述客户端还与所述拍摄装置通讯连接以实时获取图像信息，并且可将图像信息发送给算法分析模块。因此，所述客户端作为算法分析模块和拍摄装置之间的通讯中转。当然，若所述服务端和拍摄装置之间直接通讯连接并接收拍摄装置传输的图像信息，则也可达到本发明的目的。在本实施方式中，通过客户端作为通讯中转，也使客户端预先保存图像信息，防止图像信息的丢失。

所述服务端还包括服务端联网探测模块，所述客户端还包括客户端联网探测模块，所述客户端联网探测模块与所述服务端联网探测模块通讯连接。从而，客户端和服务端之间是通过客户端联网探测模块及服务端联网探测模块之间的连接以通讯连接。

具体的，在客户端开始启动时，客户端联网探测模块即开始寻找服务端联网探测模块并进行联网，若联网成功，则客户端和服务端之间即可进行通讯；若联网失败，则每隔N秒钟就出发客户端联网探测模块发送广播并对服务端联网探测模块进行探测，直至收到服务端联网探测模块发回的单播信号，至此客户端和服务端之间自动联网成功，否则一直循环上述过程。同时，若客户端工作时，服务端还处于关机状态，则客户端可发送远程唤醒广播并进行远程唤醒以启动服务端。本发明中的客户端联网探测模块和服务端联网探测模块的网络通信协议支持UDP/TCP/MAC等不同层次，网络连接方式包括千兆以太网/无线网/4G网等联网方式。

并且，具体的，在本发明中，所述显示控制模块也可具有不同的显示模式，以下进行具体分析。并且，所述显示控制模块可选择不同的显示模式进行分别显示，当然也可以进行同时显示。

首先，在第一种实施方式中，所述显示控制模块包括实时接收单张图像信息、并将图像信息发送给算法分析模块以进行分析的质量控制模块。即，在第一种实施方式中，所述拍摄装置在拍摄过程中将生成的图像信息即时传输至质量控制模块，从而对于质量控制模块来说，也是单次接收一张图像信息。并且，质量控制模块也是一次传输单张图像信息给算法分析模块，算法分析模块依次对每张图像信息进行识别分析后，再依次生成每张图像信息的疑似病灶信息。

其中，所述疑似病灶信息包括当前图像的消化道部位、疑似病灶类型、疑似病灶热力图、体外工作时长、消化道图像数量、疑似病灶轮廓位置坐标。

其中，由于消化道包括若干消化道区间，具体包括食道、胃、小肠、大肠，且每个部位之间的区别较大，距离也较远，因此先对消化道部位进行判断，识别该图像信息所拍摄的是出于消化道的哪个消化道区间。其次，算法分析模块通过对图像信息的分析，识别出该图像信息中的疑似病灶类型，以方便操作人员进一步进行判断。疑似病灶热力图可以以不同的颜色进行区分并显示疑似病灶的区域范围。疑似病灶轮廓位置坐标是通过疑似病灶热力图的外围轮廓并计算获得疑似病灶在图像信息中的位置坐标。上述疑似病灶信息均可直接或间接在质量控制模块上进行显示。

所述质量控制模块用以分析图像信息、疑似病灶热力图、消化道部位、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述质量控制模块还包括用以显示疑似病灶图像信息的实时质量显示区域。

具体的，所述疑似病灶图像信息中显示有图像信息，所述疑似病灶类型和消化道部位均叠加于图像信息上进行显示。并且疑似病灶类型和消化道部位由于是显示的是文字，因此为了使得阅读方便，该疑似病灶类型和消化道部位的显示文字会根据图像信息的底色进行自适应的变化。具体的，先对该图像信息的疑似病灶类型和消化道部位显示区域的颜色进行提取，然后对该颜色进行翻反转形成反色，则疑似病灶类型和消化道部位的显示通过该反色进行显示。从而，操作人员可以清楚的了解到算法分析模块的分析结果，并以此作为参考。

所述质量控制模块进一步分析疑似病灶轮廓位置坐标，并且将疑似病灶轮廓位置坐标进行连线或大致计算生成病灶框，所述病灶框叠加于相对应的图像信息上。

而疑似病灶热力图不和图像信息相重叠，在相邻图像信息的其他区域上进行显示。

因此，通过上述方法，所述实时质量显示区域上可显示上述疑似病灶图像信息，并且，操作人员通过在显示控制模块中观察上述疑似病灶图像信息，从而可以直接实时观察到摄像装置拍摄的图像信息，及相对应的疑似病灶信息，方便操作人员进行实时的检查。

所述质量控制模块用以分析消化道图像数量并生成消化道区间检查完整信息，所述质量控制模块还包括用以显示消化道检查完整信息的检查完整性显示区域。

具体的，所述检查完整性显示区域呈现消化道肠胃模型，该消化道肠胃模型上显示有上述所述的消化道区间，当某一消化道区间的消化道图像数量大于设定阈值时，则该消化道区间则被判定为检查完成，则消化道肠胃模型上的该消化道区间上显示不同颜色以与其他消化道区间相区分。在本实施方式中，若某一消化道区间被判定为检查完成，则检查完整性显示区域的肠胃模型上的该消化道区间则被点亮呈亮色，其他未检查完成的消化道区间则为暗色。当然，该检查完整性显示区域也可直接显示不同消化道区间的消化道图像数量。

所述质量控制模块用以分析体外工作时间和消化道图像数量并生成总检查时间、已检查部位及未检查部位，所述质量控制模块还包括用以显示总检查时间、已检查部位及未检查部位的质量控制统计显示区域，从而所述质量控制统计显示区域显示实时的检查进度，方便操作人员判断下一步的操作。

因此，操作人员可以通过质量控制模块上不同的显示区域，了解在实时质量显示区域上显示的当前的疑似病灶图像信息、检查完整性显示区域上的检查完整信息、质量控制统计显示区域上的已检查部位等信息，从而既可以实时的观察到拍摄装置的拍摄出的图像信息，又可以迅速辨认出该图像信息中的疑似病灶信息，又可以了解到拍摄进度，方便操作人员的使用，进一步节约操作人员的时间，并且最后在质量控制模块上进行显示的信息足以使操作人员对实际的病灶进行判断。

在第二种实施方式中，所述显示控制模块包括用以一次性接收若干张图像信息并将若干张图像信息发送给算法分析模块的辅助阅片模块，所述若干张图像信息均按照时间戳排列；从而，在第二种实施方式中，所述拍摄装置在拍摄完成或部分拍摄完成后，将该个体的所有或部分的图像信息均即时传输至辅助阅片模块，从而对于辅助阅片模块来说，一次性接收若干张图像信息，并且也将若干张图像信息一次性发送给算法分析模块，算法分析模块对若干张图像信息进行整体及分别识别分析后，获得每张图像的疑似病灶信息。

所述疑似病灶信息包括与该图像信息相对应的消化道分段索引编号、疑似病灶索引编号、疑似病灶类型以及病灶框。

所述辅助阅片模块用以分析所述消化道分段索引编号并按照索引编号生成进度条，所述消化道分段显示区域还包括用以显示该进度条及对应图像信息的消化道分段显示区域。

具体的，在本实施方式中，由于上述若干张图像信息均按照时间戳排列，所述消化道分段索引编号也按照时间戳排列，因而进度条即为消化道分段索引编号按照时间戳的排列顺序，并且进度条上的每一分区或者每一点均代表为某一张图像信息。并且，在本实施方式中，该图像信息是采用缩略图的方式显示，并且缩略图和进度条上的对应分区或对应点之间连接有连线以直观的进行显示。

所述辅助阅片模块用以分析疑似病灶索引编号并生成疑似病灶索引，所述辅助阅片模块还包括用以将疑似病灶索引显示在进度条上的疑似病灶索引显示区域。

该疑似病灶索引显示区域仅根据疑似病灶索引的编号在上述进度条上进行标注，以让操作人员方便对具有疑似病灶的图像信息进行选择，从而也可方便操作人员进行观察。并且，在实际使用中，若选择了疑似病灶索引，则接下来进度条跳转的时候也是在其他疑似病灶索引中跳转，提高了操作人员对疑似病灶的查询、检查效率。因此，进度条按照顺序对图像信息和疑似病灶图像信息进行排列，并且可选择的在图像信息或疑似病灶图像信息中进行跳转。

所述辅助阅片模块用以分析图像信息、疑似病灶索引编号、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述辅助阅片模块还包括用以显示疑似病灶图像信息的疑似病灶标记显示区域。所述疑似病灶图像信息也属于图像信息。

该辅助阅片模块通过疑似病灶索引编号从上述若干的图像信息上提取对应的图像信息，并且结合上述疑似病灶类型和疑似病灶轮廓位置坐标生成疑似病灶图像信息并在疑似病灶标记显示区域加以展示，并且，通过进度条的方式，可按照顺序对图像信息或疑似病灶图像信息进行观察。与上述相同的是，该疑似病灶轮廓位置坐标经过辅助阅片模块的计算生成形成病灶框，也同样叠加于图像信息上以形成疑似病灶图像信息，在此不再赘述。

因此，综上所述，所述拍摄装置辅助显示系统包括服务端和客户端，所述服务端和客户端之间相互通讯连接，从而拍摄装置在获得图像信息后，让客户端的显示控制模块进行显示的同时，还能实时显示算法分析模块的识别结果，从而操作人员可以在检查的过程或者检查完成后，实时观察疑似病灶信息，提高操作人员的工作效率。并且，进一步的通过两种实施方式，分别对单张图像信息和一系列的若干图像信息进行识别和计算，从而分别输出相对应的识别结果，以方便操作人员在不同情况下进行检查。

此外，应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施方式中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。

上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施方式的具体说明，并非用以限制本发明的保护范围，凡未脱离本发明技艺精神所作的等效实施方式或变更均应包含在本发明的保护范围之内。

Claims (6)

1.一种拍摄装置辅助显示系统，所述拍摄装置在人体内进行拍摄并生成图像信息，其特征在于，所述拍摄装置辅助显示系统包括：

服务端，包括算法分析模块，所述算法分析模块用以实时对图像信息依次进行识别分析并生成疑似病灶信息；

客户端，可与所述服务端通讯连接，所述客户端包括显示控制模块，所述显示控制模块用以接收算法分析模块传输的疑似病灶信息、匹配相对应的图像信息和疑似病灶信息并同时进行实时显示；

所述显示控制模块包括用以实时接收单张图像信息、并将图像信息发送给算法分析模块以进行分析的质量控制模块；所述疑似病灶信息包括当前图像的消化道部位、疑似病灶类型、疑似病灶热力图、体外工作时间、消化道图像数量、疑似病灶轮廓位置坐标；

所述显示控制模块包括用以一次性接收若干张图像信息并将若干张图像信息发送给算法分析模块的辅助阅片模块，所述若干张图像信息均按照时间戳排列；所述疑似病灶信息包括消化道分段索引编号、疑似病灶索引编号、疑似病灶类型以及病灶框，所述辅助阅片模块用以分析疑似病灶索引编号并生成疑似病灶索引，所述辅助阅片模块还包括用以将疑似病灶索引显示在进度条上的疑似病灶索引显示区域，所述疑似病灶索引显示区域仅根据所述疑似病灶索引编号在所述进度条上进行标注，所述进度条按照顺序对所述图像信息和所述疑似病灶图像信息进行排列，并且可选择的在所述图像信息和所述疑似病灶图像 信息中进行跳转；

所述质量控制模块用以分析消化道图像数量并生成消化道区间检查完整信息，所述质量控制模块还包括用以显示消化道检查完整信息的检查完整性显示区域，当某一消化道区间被判定为检查完成，则消化道肠胃模型上的该消化道区间上显示不同颜色以与其他消化道区间相区分；

所述质量控制模块还用以分析图像信息、疑似病灶热力图、消化道部位、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述质量控制模块还包括用以显示疑似病灶图像信息的实时质量显示区域，所述疑似病灶图像信息中显示有图像信息，所述疑似病灶类型和消化道部位均叠加于图像信息上进行显示，所述疑似病灶类型和消化道部位显示的是文字，该疑似病灶类型和消化道部位的显示文字会根据图像信息的底色进行自适应的变化，包括先对所述图像信息的疑似病灶类型和消化道部位显示区域的颜色进行提取，然后对所述颜色进行翻反转形成反色，所述疑似病灶类型和消化道部位的显示通过该反色进行显示。

2.根据权利要求1的拍摄装置辅助显示系统，其特征在于，客户端还与拍摄装置通讯连接以实时获取图像信息且将图像信息发送给算法分析模块。

3.根据权利要求1的拍摄装置辅助显示系统，其特征在于，所述服务端还包括服务端联网探测模块，所述客户端还包括客户端联网探测模块，所述客户端联网探测模块可与所述服务端联网探测模块通讯连接。

4.根据权利要求1所述的拍摄装置辅助显示系统，其特征在于，所述质量控制模块用以分析体外工作时间和消化道图像数量并生成总检查时间、已检查部位及未检查部位，所述质量控制模块还包括用以显示总检查时间、已检查部位及未检查部位的质量控制统计显示区域。

5.根据权利要求1所述的拍摄装置辅助显示系统，其特征在于，所述辅助阅片模块用以分析所述消化道分段索引编号并按照索引编号生成进度条，所述辅助阅片模块还包括用以显示该进度条及对应图像信息的消化道分段显示区域。

6.根据权利要求5所述的拍摄装置辅助显示系统，其特征在于，所述辅助阅片模块用以分析图像信息、疑似病灶索引编号、疑似病灶类型、疑似病灶轮廓位置坐标并生成疑似病灶图像信息，所述辅助阅片模块还包括用以显示疑似病灶图像信息的疑似病灶标记显示区域。

Images