CN110634564A - 一种病理信息处理方法、装置、系统、电子设备及存储介质 - Google Patents

Abstract

本发明提供了一种病理信息处理方法，包括：获取目标对象的病理信息，其中，病理信息用于表征针对目标对象的相应病灶的病理特征；将所述目标对象的病理信息向目标终端发送；接收目标终端发送的针对所述目标对象的病理信息的分析结果；响应于目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与目标对象的病理信息相匹配的辅助分析信息。本发明还提供了病理信息处理装置、系统、电子设备及存储介质。本发明能够提供可靠的低延迟的视频和消息传输手段实现目标对象病理信息的远距离稳定传输，并且能够根据病理分析结果，及时的获取与目标对象的病理信息相匹配的辅助分析信息，有助于提升医生的诊断效率与精准度。

Description

一种病理信息处理方法、装置、系统、电子设备及存储介质

技术领域

本发明涉及病理信息处理技术，尤其涉及病理信息处理方法、装置、系统、电子设备及存储介质。

背景技术

远程医疗技术中，传统的对于病理信息的远程传输，均是客户端基于Web技术观看相应的病理图片或病理视频，但是无论流媒体端的RTMP推流还是客户端的视频播放都是基于个人电脑实现的，这一过程中，传统技术并不能够提供可靠的低延迟的视频和消息传输，影响了医生的诊断，也不能够根据病理分析的结果方便的获取辅助分析信息。为此，人工智能技术(AI，Artificial Intelligence)提供了训练适当的辅助分析信息形成网络来支持上述应用的方案。其中，人工智能是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法和技术及应用系统人工智能也就是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能，在AI医疗领域中，也就是通过利用数字计算机或者数字计算机控制的机器实现对低延迟的视频和消息的识别，以实现根据病理分析的结果方便的获取辅助分析信息。

发明内容

有鉴于此，本发明实施例提供一种病理信息处理方法、装置、系统、电子设备及存储介质，能够实现通提供可靠的低延迟的视频和消息传输手段实现目标对象病理信息的远距离稳定传输，并且能够根据病理分析结果，及时的获取与目标对象的病理信息相匹配的辅助分析信息，有助于提升医生的诊断效率与精准度。

本发明实施例的技术方案是这样实现的：

本发明实施例提供了一种病理信息处理方法，包括：

获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

将所述目标对象的病理信息向目标终端发送；

接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

本发明实施例还提供了一种病理信息处理方法，应用于病理信息处理系统中，所述方法包括：

病理信息处理装置获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

所述病理信息处理装置将所述目标对象的病理信息向目标终端发送；

所述目标终端响应于所述目标对象的病理信息，确定相应的病理信息的分析结果，并将所述病理信息的分析结果向所述病理信息处理装置发送；

所述病理信息处理装置接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述病理信息处理装置响应于所述目标对象的病理信息的分析结果，向医疗设备发送与所述分析结果对应的控制指令；

所述医疗设备响应于所述控制指令，获取与所述目标对象的病理信息相匹配的辅助分析信息向所述病理信息处理装置发送。

本发明实施例还提供了一种病理信息处理装置，包括：

信息传输模块，用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

信息处理模块，用于将所述目标对象的病理信息向目标终端发送；

所述信息传输模块，用于接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述信息处理模块，用于响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

上述方案中，

所述信息处理模块，用于提取所述目标对象的病理信息中的目标视频帧；

所述信息处理模块，用于对所述目标视频帧进行清晰度提升处理；

所述信息处理模块，用于将所述目标视频帧的格式由当前编码格式转换为灰阶值编码格式，以获得多个目标视频帧；

所述信息处理模块，用于将所述目标视频帧进行编码压缩以形成视频状态的病理信息。

上述方案中，

所述信息处理模块，用于通过与目标格式相匹配的编码方法分别对所述目标视频帧进行编码压缩；

所述信息处理模块，用于写入所述视频帧对应的序列号和生成所述图像数据包对应的时间戳，以生成与所述目标视频帧的格式相匹配的数据包；

所述信息处理模块，用于对所述图像数据包进行拼接处理，以形成多个目标视频帧。

上述方案中，

所述信息处理模块，用于将所述目标对象的病理信息向目标终端发送之前，

在所述目标对象的病理信息的预设位置显示关键帧信息及当前播放视频帧的位置信息；

所述信息处理模块，用于根据所述关键帧信息配置与所述目标对象的病理信息相匹配的辅助分析信息。

上述方案中，

所述信息处理模块，用于侦测与所述目标对象相连接的医疗设备的检测状态；

所述信息处理模块，用于根据所述医疗设备的检测状态，控制通信链路的状态由阻塞状态调整至导通状态；

所述信息处理模块，用于控制所述通信链路的状态由循环读取状态调整至推流状态。

上述方案中，

所述信息处理模块，用于响应于所述目标对象的病理信息的分析结果，发送第一调整指令，其中，所述第一调整指令用于调取与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息；

所述信息传输模块，用于接收与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息，并向目标终端发送。

上述方案中，

所述信息处理模块，用于响应于所述目标对象的病理信息的分析结果，发送第二调整指令，其中，所述第二调整指令用于调整与所述目标对象相连接的医疗设备的检测状态，以获取新的病理信息；

接收与所述第二调整指令相匹配的新的病理信息，并向目标终端发送。

本发明实施例还提供了一种病理信息处理系统，所述系统包括：

病理信息处理装置，用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

所述病理信息处理装置，用于将所述目标对象的病理信息向目标终端发送；

所述目标终端，用于响应于所述目标对象的病理信息，确定相应的病理信息的分析结果，并将所述病理信息的分析结果向所述病理信息处理装置发送；

所述病理信息处理装置，用于接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述病理信息处理装置，用于响应于所述目标对象的病理信息的分析结果，向医疗设备发送与所述分析结果对应的控制指令；

所述显微镜，用于响应于所述控制指令，获取与所述目标对象的病理信息相匹配的辅助分析信息向所述病理信息处理装置发送。

本发明实施例还提供了一种电子设备，所述电子设备包括：

存储器，用于存储可执行指令；

处理器，用于运行所述存储器存储的可执行指令时，实现前序的病理信息处理方法。

本发明实施例还提供了一种计算机可读存储介质，存储有可执行指令，其特征在于，所述可执行指令被处理器执行时实现前序的病理信息处理方法。

本发明实施例具有以下有益效果：

通过获取目标对象的病理信息，将所述目标对象的病理信息向目标终端发送；接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息，由此，实现了实现目标对象病理信息的远距离稳定传输，并且能够根据病理分析结果，及时的获取与目标对象的病理信息相匹配的辅助分析信息，有助于提升医生的诊断效率与精准度。

附图说明

图1为本发明实施例提供的病理信息方法的使用场景示意图；

图2为本发明实施例提供的电子设备结构示意图；

图3为本发明实施例提供的病理信息处理方法一个可选的流程示意图；

图4为本发明实施例提供的病理信息处理方法一个可选的流程示意图；

图5A为本发明实施例提供的病理信息处理方法一个可选的流程示意图；

图5B为本发明实施例提供的病理信息处理方法一个可选的流程示意图；

图6为本发明实施例中病理信息处理方法一个可选的使用环境示意图；

图7为本发明实施例中病理信息处理方法一个可选的使用过程示意图；

图8为本发明实施例中病理信息处理方法一个可选的使用过程示意图；

图9为本发明实施例中病理信息处理方法一个可选的线程处理示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，所描述的实施例不应视为对本发明的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。

对本发明实施例进行进一步详细说明之前，对本发明实施例中涉及的名词和术语进行说明，本发明实施例中涉及的名词和术语适用于如下的解释。

1)响应于，用于表示所执行的操作所依赖的条件或者状态，当满足所依赖的条件或状态时，所执行的一个或多个操作可以是实时的，也可以具有设定的延迟；在没有特别说明的情况下，所执行的多个操作不存在执行先后顺序的限制。

2)中文名称计算机辅助诊断(AD Computer Aided Diagnosis)其中，CAD用于通过影像学、医学图像处理技术以及其他可能的生理、生化手段，结合计算机的分析计算，辅助发现病灶，提高诊断的准确率。

3)目标视频：用于通过图像采集设备(例如显微镜)对机体部位(人体的不同目标器官或者体内病灶)进行图像采集所形成视频状态的病理信息。

4)病灶：病灶通常指代机体上发生病变的部分。换一种表达方式，一个局限的、具有病原微生物的病变组织，即可称为病灶。

5)YUV，灰阶值编码方法，是一种颜色编码方法，其中“Y”表示亮度(Luminance或Luma)，也就是灰阶值，“U”和“V”表示的色度(Chrominance或Chroma)，作用是描述影像色彩及饱和度，用于指定像素的颜色。

6)RGB，三原色编码方法，又可以称作RGB色彩模式，是工业界的一种颜色标准，是通过对红(R)、绿(G)、蓝(B)三个颜色通道的变化以及它们相互之间的叠加来得到各式各样的颜色的，RGB即是代表红、绿、蓝三个通道的颜色，这个标准几乎包括了人类视力所能感知的所有颜色，是目前运用最广的颜色系统之一。

图1为本发明实施例提供的病理信息处理方法的使用场景示意图，参见图1，终端(包括终端10-1和终端10-2)上设置有能够执行不同功能相应客户端其中，所属客户端为终端(包括终端10-1和终端10-2)通过网络300从相应的服务器200中获取不同的病理信息进行浏览，终端通过网络300连接服务器200，网络300可以是广域网或者局域网，又或者是二者的组合，使用无线链路实现数据传输，其中，终端(包括终端10-1和终端10-2)通过网络300从相应的服务器200中所获取的病理信息类型既可以相同也可以不相同，例如：终端(包括终端10-1和终端10-2)既可以通过网络300从相应的服务器200中获取与目标对象相匹配的病理图像或者病理视频，也可以通过网络300从相应的服务器200中获取仅与相匹配的病理切片进行浏览。服务器200中可以保存有不同目标对象各自对应的病理信息，也可以保存与所述目标对象的病理信息相匹配的辅助分析信息。在本发明的一些实施例中，服务器200中所保存的不同类型的病理信息可以是传统的显微镜视野下医学影像图片在固定视野中的单张病理图片。本实施例的医学影像视频流中不少于两张基于病理切片的视频帧，是医生在观察切片的过程中，通过移动摄像头、切换放大倍率等操作反复观察疑似的病灶区域得到的多视野的病理图片的集合，融合了显微镜下多个视野的信息。由于医学影像视频流中记录了医生在观察病理切片的过程中，显微镜视野中所有的信息，如此，将医生观察单个病理切片显微镜的视野中的信息，作为连续的视频流加以利用，避免医生在快速移动病理切片的过程中，忽略微小的病变区域，从而提供比单帧图片更多的信息来辅助医生诊断并发现微小病变区域。

需要说明的是，在显微镜(与所述目标对象相连接的医疗设备)下查看的病理切片可以包括多种不同的应用场景，如肺部组织切片、心脏组织切片等。基于本实施例的医学影像分析方法可以部署到多种应用场景，从而便于医生的远程查阅与使用。

服务器200通过网络300向终端(终端10-1和/或终端10-2)发送同一目标对象的病理信息以实现终端(终端10-1和/或终端10-2)的用户对目标对象的病理信息进行分析，，因此。作为一个事例，服务器400用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；将所述目标对象的病理信息向目标终端发送；接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

下面对本发明实施例的电子设备的结构做详细说明，电子设备可以各种形式来实施，如带有病理信息处理功能的专用终端，也可以为带有病理信息处理功能的电子设备或者云服务器，例如前述图1中的服务器200。图2为本发明实施例提供的电子设备的组成结构示意图，可以理解，图2仅仅示出了电子设备的示例性结构而非全部结构，根据需要可以实施图2示出的部分结构或全部结构。

本发明实施例提供的电子设备包括：至少一个处理器201、存储器202、用户接口203和至少一个网络接口204。电子设备20中的各个组件通过总线系统205耦合在一起。可以理解，总线系统205用于实现这些组件之间的连接通信。总线系统205除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图2中将各种总线都标为总线系统205。

其中，用户接口203可以包括显示器、键盘、鼠标、轨迹球、点击轮、按键、按钮、触感板或者触摸屏等。

可以理解，存储器202可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。本发明实施例中的存储器202能够存储数据以支持终端(如10-1)的操作。这些数据的示例包括：用于在终端(如10-1)上操作的任何计算机程序，如操作系统和应用程序。其中，操作系统包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序。

在一些实施例中，本发明实施例提供的病理信息处理装置可以采用软硬件结合的方式实现，作为示例，本发明实施例提供的病理信息处理装置可以是采用硬件译码处理器形式的处理器，其被编程以执行本发明实施例提供的病理信息处理方法。例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC，Application SpecificIntegrated Circuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)或其他电子元件。

作为本发明实施例提供的病理信息处理装置采用软硬件结合实施的示例，本发明实施例所提供的病理信息处理装置可以直接体现为由处理器201执行的软件模块组合，软件模块可以位于存储介质中，存储介质位于存储器202，处理器201读取存储器202中软件模块包括的可执行指令，结合必要的硬件(例如，包括处理器201以及连接到总线205的其他组件)完成本发明实施例提供的病理信息处理方法。

作为示例，处理器201可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。

作为本发明实施例提供的病理信息处理装置采用硬件实施的示例，本发明实施例所提供的装置可以直接采用硬件译码处理器形式的处理器201来执行完成，例如，被一个或多个应用专用集成电路(ASIC，Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD，Programmable Logic Device)、复杂可编程逻辑器件(CPLD，ComplexProgrammable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable GateArray)或其他电子元件执行实现本发明实施例提供的病理信息处理方法。

本发明实施例中的存储器202用于存储各种类型的数据以支持电子设备20的操作。这些数据的示例包括：用于在电子设备20上操作的任何可执行指令，如可执行指令，实现本发明实施例的从病理信息处理方法的程序可以包含在可执行指令中。

在另一些实施例中，本发明实施例提供的病理信息处理装置可以采用软件方式实现，图2示出了存储在存储器202中的病理信息处理装置2020，其可以是程序和插件等形式的软件，并包括一系列的模块，作为存储器202中存储的程序的示例，可以包括病理信息处理装置2020，病理信息处理装置2020中包括以下的软件模块：

信息传输模块2081，用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

信息处理模块2082，用于将所述目标对象的病理信息向目标终端发送；

所述信息传输模块2081，用于接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述信息处理模块2082，用于响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

结合图2示出的服务器20说明本发明实施例提供的病理信息处理方法，参见图3，图3为本发明实施例提供的病理信息处理方法一个可选的流程示意图，可以理解地，图3所示的步骤可以由运行病理信息处理装置的各种服务器执行，例如可以是如带有病理信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图3示出的步骤进行说明。

步骤301：获取目标对象的病理信息。

其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征，具体的，其中本发明中的病理信息包括但不限于：病理图像、病理切片、病理视频。

步骤302：将所述目标对象的病理信息向目标终端发送。

在本发明的一些实施例中，将所述目标对象的病理信息向目标终端发送，可以通过以下方式实现：

提取所述目标对象的病理信息中的目标视频帧；对所述目标视频帧进行清晰度提升处理；将所述目标视频帧的格式由当前编码格式转换为灰阶值编码格式，以获得多个目标视频帧；将所述目标视频帧进行编码压缩以形成视频状态的病理信息。其中，通过将目标视频帧的格式由当前编码格式转换为灰阶值编码格式，以获得多个目标视频帧；将所获取的所有目标视频帧进行编码压缩以形成视频状态的病理信息，能够减少数据传输量，减少卡顿；另一方面能够改善动态模糊，提高画面质量，进一步提高了用户体验，同时便于远程终端的用户(医生)更加准确的对目标对象的病理信息做出准确判断。

在本发明的一些实施例中，将所述目标视频帧的格式由当前编码格式转换为灰阶值编码格式，可以通过以下方式实现：

通过与目标格式相匹配的编码方法分别对所述目标视频帧进行编码压缩；写入所述视频帧对应的序列号和生成所述图像数据包对应的时间戳，以生成与所述目标视频帧的格式相匹配的数据包；对所述图像数据包进行拼接处理，以形成多个目标视频帧。其中，当前编码格式可以为三原色编码(RGB)格式，在将各图像帧进行编码压缩形成视频流时，可以采用预设的视频编码软件，例如可以采用ffmpeg编解码软件，ffmpeg编解码软件是一个自由软件，可以运行音频和视频多种格式的录影、转换、流功能，包含了音频和视频的解码/压码库。具体地，可以通过视频编码软件中的视频压缩算法，如H264、X264等视频压缩算法，对图像帧进行编码压缩以形成视频流，其中H264、X264是数字视频压缩格式，也是一种视频编解码标准。这一过程中，。YUV格式是指亮度参量和色度参量分开表示的像素格式，而将亮度参量和色度参量分开的好处就是不但可以避免相互干扰，还可以降低色度的采样率而不会对图像质量影响太大。由于YUV不像RGB那样要求三个独立的视频信号同时传输，所以用将图像帧转换为YUV格式进行传送可以占用极少的频宽，节省大量资源。YUV格式分为planar和packed两大类，对于planar的YUV格式，先连续存储所有像素点的明亮度，紧接着存储所有像素点的色彩，随后是所有像素点的饱和度；对于packed的YUV格式，每个像素点的明亮度、色彩和饱和度是连续交叉存储的。对于YUV格式的图像帧，可以采用YUV422P、YUV420、YUV420sp等存储格式进行存储，以节省终端设备的存储资源，同时提高病理信息的传输效率。

进一步地，将视频流按照预设的传输协议传送到终端设备的过程中，该传输协议可以是UDP协议等实时数据传输协议，其中UDP协议(用户数据包协议)是一种用于处理数据包的无连接的协议，在本发明中，对数据传输协议的类型不做具体限定。作为本发明的一些可选的实施例，可以通过UDP协议将视频流传送到终端设备中。

步骤303：接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

步骤304：响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令。

由此可以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

由此，完成了获取目标对象的病理信息，并将所获取的目标对象的病理信息向相应的终端发送，便于终端的用户(远程的医生)对所接收的病理信息做出及时且准确的判断。

结合图2示出的服务器20说明本发明实施例提供的病理信息处理方法，继续参考图4，图4为本发明实施例提供的病理信息处理方法一个可选的流程示意图，结合前序图3所示的步骤，可以理解地，图4所示的步骤可以由运行病理信息处理装置的各种服务器执行，例如可以是如带有病理信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图4示出的步骤进行说明。

步骤305：在目标对象的病理信息的预设位置显示关键帧信息及当前播放视频帧的位置信息。

其中，将所述目标对象的病理信息向目标终端发送之前，可以提通过在目标对象的病理信息的预设位置显示关键帧信息及当前播放视频帧的位置信息，提示终端的用户在所接收的目标对象的病理信息中及时查看哪些关键帧信息，以及断点续传目标用户的病理信息时，帮助终端的用户及时的获知病理信息的观看起点。

步骤306：根据所述关键帧信息配置与所述目标对象的病理信息相匹配的辅助分析信息。

其中，目标对象的病理信息相匹配的辅助分析信息包括但不限于：目标对象同一病灶的核磁共振成像信息、目标对象同一病灶的已有诊断信息以及目标对象同一病灶的新的病理信息。

在本发明的一些实施例中，为了进一步提高诊断分类结果的准确性，还可以提取医学影像视频流的视频帧，具体可以通过以下方式实现：

提取医学影像视频流的待定视频帧；对待定视频帧进行清晰化处理，得到视频帧。由于在提取医学影像视频流得到待定视频帧的过程中，可能得到的待定视频帧并不清晰，这将影响对该不清晰的待定视频帧进行图像特征提取、映射分类等操作，最终得到的目标诊断分类结果的准确性。因此，在本实施例中，先对从医学影像视频流中提取得到的待定视频帧进行清晰化处理，再将清晰化处理后得到的视频帧进行图像特征提取、映射分类，从而进一步提高诊断分类结果的准确性。

步骤307：侦测与所述目标对象相连接的医疗设备的检测状态。

步骤308：根据所述医疗设备的检测状态，控制通信链路的状态由阻塞状态调整至导通状态。

步骤309：控制通信链路的状态由循环读取状态调整至推流状态。

其中，当控制通信链路的状态为循环读取状态时，服务器可以循环读取当前医疗设备所获取的目标对象的病理信息，以保证向终端传病理信息的稳定性。

结合图2示出的服务器20说明本发明实施例提供的病理信息处理方法，继续参考图5A，图5A为本发明实施例提供的病理信息处理方法一个可选的流程示意图，结合前序图5A所示的步骤，可以理解地，图5A所示的步骤可以由运行病理信息处理装置的各种服务器执行，例如可以是如带有病理信息处理功能的专用终端、服务器、云服务器或者服务器集群。下面针对图5A示出的步骤进行说明。

步骤310：响应于所述目标对象的病理信息的分析结果，发送第一调整指令。其中，所述第一调整指令用于调取与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息；

步骤311：接收与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息，并向目标终端发送。

步骤312：响应于所述目标对象的病理信息的分析结果，发送第二调整指令。其中，所述第二调整指令用于调整与所述目标对象相连接的医疗设备的检测状态，以获取新的病理信息；

步骤313：接收与所述第二调整指令相匹配的新的病理信息，并向目标终端发送。

至此，当远程终端接收目标对象的病理信息后，可以对目标对象的病理信息做出判断，这一过程中，需要调取同一病灶的图像信息和/或诊断信息，以实现更显准确地判断，进一步的，当与所述目标对象相连接的医疗设备(例如显微镜或其他成像检测装置)所产生的病理信息不准确时，通过第二调整指令可以实现对与所述目标对象相连接的医疗设备的调整，以获取新的病理信息，提升诊断的准确性。其中，显微镜可以根据第二调整指令进行调整，第二调整指令所包括的操作信息可以为：物镜运动的方向(可以用Dir表示)和距离(可以用X表示)，以及在一视频帧上停留的时间(可以用deltaT表示)。物镜运动的方向包括可以三维方向。如，相对物镜镜头水平平面上的上下左右，又如，相对物镜镜头延伸方向的向前和向后。其中，向前和向后可以使得显微镜视野中的对象放大和缩小，上下左右可以使得显微镜视野范围上下左右地移动。

结合图2示出的服务器20说明本发明实施例提供的病理信息处理方法，应用于病理信息处理系统中，继续参考图5B，图5B为本发明实施例提供的病理信息处理方法一个可选的流程示意图，结合前序图5B所示的步骤，可以理解地，图5B所示的步骤可以由运行病理信息处理系统的各种服务器执行、终端以及。下面针对图5B示出的步骤进行说明。

步骤501：病理信息处理装置获取目标对象的病理信息。

其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征，其表现形式可以是：病理图像、病理切片、病理视频，同时病理信息处理系统中的医疗设备能够针对患者的疾病类型获取与患者的一一对应的病理图像、病理切片、病理视频。

步骤502：病理信息处理装置将所述目标对象的病理信息向目标终端发送。

在本发明的一些实施例中，在远程会诊的使用场景中，不同的远程医生均持有相应的终端，病理信息处理装置能够根据患者的疾病类型或者患者的归属信息，确定相应的目标终端。

步骤503：目标终端响应于所述目标对象的病理信息，确定相应的病理信息的分析结果，并将所述病理信息的分析结果向所述病理信息处理装置发送。

在本发明的一些实施例中，在远程会诊的使用场景中，不同的远程医生可以根据目标终端所接收的目标对象的病理信息，对目标对象(患者)的病理信息作出及时的诊断，病理信息处理装置确定相应的病理信息的分析结果，终端可以将病理信息的分析结果向所述病理信息处理装置发送。

步骤504：病理信息处理装置接收所述目标终端发送的针对所述目标对象的病理信息的分析结果。

步骤505：病理信息处理装置响应于所述目标对象的病理信息的分析结果，向医疗设备发送与所述分析结果对应的控制指令。

在本发明的一些实施例中，向医疗设备发送与所述分析结果对应的控制指令，可以包括用于实现用于调取与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息的第一调整指令。其中，目标终端的远程医生可以通过第一调整指令，获取同一病灶的图像信息和/或诊断信息，为远程诊断提供图像参考。

在本发明的一些实施例中，向医疗设备发送与所述分析结果对应的控制指令可以包括用于实现对与所述目标对象相连接的医疗设备的调整的第二调整指令。其中，第二调整指令可以实现对与所述目标对象相连接的医疗设备(例如显微镜或者床边CT仪)的调整，以获取新的病理信息，提升诊断的准确性。其中，医疗设备可以根据第二调整指令进行调整。

步骤506：医疗设备响应于所述控制指令，获取与所述目标对象的病理信息相匹配的辅助分析信息向所述病理信息处理装置发送。

通过本实施例所示的技术方案，医疗设备响应于所述控制指令，获取与所述目标对象的相匹配的同一病灶的图像信息和/或诊断信息，或者获取与所述目标对象的相匹配的新的病理信息向病理信息处理装置发送，实现了及时的获取与所述目标对象的病理信息相匹配的辅助分析信息，提升了远程诊断的速度与准确性。

下面以与所述目标对象相连接的医疗设备为显微镜作为事例，说明本发明所提供的病理信息处理方法。其中，参考图6，图6为本发明实施例中病理信息处理方法一个可选的使用环境示意图，其中，该系统采用B/S架构，利用Internet对远程全自动显微镜进行操作，并观察远端病人的病理切片图像实现远程病理诊断。该方案包括显微镜服务器和web浏览器。显微镜服务器由显微镜、电荷耦合器件(CCD charge coupled device)相机、服务器、运动控制服务器和流媒体服务器组成。流媒体服务器将CCD相机采集视频按RTMP协议压缩，并传输视频图像至客户端。客户端通过浏览器来观看视频，并发送控制命令到运动控制服务器来驱动显微镜进行相应动作。但是这一过程中，并不能够提供可靠的低延迟的视频和消息传输，影响了医生的诊断，也不能够根据病理分析的结果方便的获取辅助分析信息。

下面继续对本发明所提供的病理信息处理方法的使用环境进行说明，其中，参考图7，图7为本发明实施例中病理信息处理方法一个可选的使用过程示意图，其中，显微镜控制主机通过USB连接方式和显微镜内置的CCD相机相连，用于获取相机采集的视频。通过高清多媒体端口(HDMI High Definition Multimedia Interface)与显微镜内置Microdisplay相连，用于显示AI检测结果。平板电脑终端通过WIFI或网线跟主机相连，用于获取处理后的视频及发送控制命令。平板电脑终端通过云与远程手机用户相连，用于传输病理信息(视频直播)和传输会诊信息，其中本发明中的病理信息包括但不限于：病理图像、病理切片、病理视频，当然也可以是同一病例的病例图像、病例切片、病例视频。

下面对本发明所提供的病理信息处理方法的使用过程进行说明，其中，参考图8，图8为本发明实施例中病理信息处理方法一个可选的使用过程示意图，其中，AR+AI显微镜基于个人电脑(PC机)实现，能够用于运行多种AI检测算法，并将结果以AR方式展示。该PC机上运行两个服务器通讯线程，一个是基于HTTP的用于响应来自平板电脑终端的算法命令，另一个是基于Socket的用于传输视频至平板电脑终端。平板电脑终端用于发送超文本(HTTP)控制命令到主机、从主机接收病理切片操作视频、压缩至RTMP格式并推送至云服务器。平板电脑终端端的开发基于云服务器移动直播软件开发工具包(SDK)。借助套接字(Socket)通讯连接显微镜服务器，借助云服务器连接远程客户端。具体包括以下步骤：

步骤801：平板电脑终端向显微镜发出调整指令。

步骤802：显微镜通过通信链路向平板电脑终端发送目标对象的病理信息。

步骤803：平板电脑终端向云服务器发送目标对象的病理信息。

步骤804：云服务器向终端A发送目标对象的病理信息，并进行即时通信。

步骤805：云服务器向终端B发送目标对象的病理信息，并进行即时通信。

步骤806：云服务器向终端C发送目标对象的病理信息，并进行即时通信。

其中，继续参考图9，平板电脑终端端的运行线程如图9所示，图9为本发明实施例中病理信息处理方法一个可选的线程处理示意图；平板电脑终端端同时有四个线程运行，包括一个主线程，该主线程用于显示接收到的视频，另一个工作线程用于接收视频流并解码成三原色编码格式帧。该工作线程是一个阻塞线程，这是由于显微镜服务器并不是持续不断的通过Socket向平板电脑终端发送视频数据。只有切片发生移动或者执行相应的AI算法对病理图像进行处理，服务器才发送视频到平板电脑终端端。平板电脑终端在没有数据接收时将一直处于阻塞状态。这种方法减少了服务器和平板电脑终端之间不必要的数据传输，但是在向云服务器推流时却会造成连接中断。出于安全性考虑，云服务器如果在几分钟内没有收到视频数据，会自动终止连接。为了避免用户端反复重连，可以增加另一个工作线程，该线程在缓冲区没有更新的时候重复读取现有视频帧，并执行必要的格式转换操作(传统技术中，移动推流SDK目前仅支持的可订制视频格式是灰阶值编码格式)，然后将结果存储在YUV视频缓冲区，用于推流，从而避免连接中断。播放端使用与与服务器类型相匹配的播放介质(例如：TXLivePlayer)来对视频解码并播放，使用即时通讯(IM InstantMessaging)来发送信息。其中播放端支持多种播放协议，比如FLV协议或RTMP协议。

本发明具有以下有益技术效果：

1)、能够实现通提供可靠的低延迟的视频和消息传输手段实现目标对象病理信息的远距离稳定传输，使得远程终端及时获取目标对象的病理信息。

2)、能够根据病理分析结果，及时的获取与目标对象的病理信息相匹配的辅助分析信息，有助于提升医生的诊断效率与精准度。

以上所述，仅为本发明的实施例而已，并非用于限定本发明的保护范围，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (12)

1.一种病理信息处理方法，其特征在于，所述方法包括：

获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

将所述目标对象的病理信息向目标终端发送；

接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

2.根据权利要求1所述的方法，其特征在于，所述将所述目标对象的病理信息向目标终端发送，包括：

提取所述目标对象的病理信息中的目标视频帧；

对所述目标视频帧进行清晰度提升处理；

将所述目标视频帧的格式由当前编码格式转换为灰阶值编码格式，以获得多个目标视频帧；

将所述目标视频帧进行编码压缩以形成视频状态的病理信息。

3.根据权利要求2所述的方法，其特征在于，所述将所述目标视频帧的格式由当前编码格式转换为灰阶值编码格式，包括：

通过与目标格式相匹配的编码方法分别对所述目标视频帧进行编码压缩；

写入所述视频帧对应的序列号和生成所述图像数据包对应的时间戳，以生成与所述目标视频帧的格式相匹配的数据包；

对所述图像数据包进行拼接处理，以形成多个目标视频帧。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

将所述目标对象的病理信息向目标终端发送之前，

在所述目标对象的病理信息的预设位置显示关键帧信息及当前播放视频帧的位置信息；

根据所述关键帧信息配置与所述目标对象的病理信息相匹配的辅助分析信息。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

侦测与所述目标对象相连接的医疗设备的检测状态；

根据所述医疗设备的检测状态，控制通信链路的状态由阻塞状态调整至导通状态；或者，

控制所述通信链路的状态由循环读取状态调整至推流状态。

6.根据权利要求1所述的方法，其特征在于，所述响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息，包括：

响应于所述目标对象的病理信息的分析结果，发送第一调整指令，其中，所述第一调整指令用于调取与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息；

接收与所述目标对象的病理信息相匹配的同一病灶的图像信息和/或诊断信息，并向目标终端发送。

7.根据权利要求1所述的方法，其特征在于，所述响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息，包括：

响应于所述目标对象的病理信息的分析结果，发送第二调整指令，其中，所述第二调整指令用于调整与所述目标对象相连接的医疗设备的检测状态，以获取新的病理信息；

接收与所述第二调整指令相匹配的新的病理信息，并向目标终端发送。

8.一种病理信息处理方法，应用于病理信息处理系统中，其特征在于，所述方法包括：

病理信息处理装置获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

所述病理信息处理装置将所述目标对象的病理信息向目标终端发送；

所述目标终端响应于所述目标对象的病理信息，确定相应的病理信息的分析结果，并将所述病理信息的分析结果向所述病理信息处理装置发送；

所述病理信息处理装置接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述病理信息处理装置响应于所述目标对象的病理信息的分析结果，向医疗设备发送与所述分析结果对应的控制指令；

所述医疗设备响应于所述控制指令，获取与所述目标对象的病理信息相匹配的辅助分析信息向所述病理信息处理装置发送。

9.一种病理信息处理装置，其特征在于，所述装置包括：

信息传输模块，用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

信息处理模块，用于将所述目标对象的病理信息向目标终端发送；

所述信息传输模块，用于接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述信息处理模块，用于响应于所述目标对象的病理信息的分析结果，发送与所述分析结果对应的控制指令，以实现获取与所述目标对象的病理信息相匹配的辅助分析信息。

10.一种病理信息处理系统，其特征在于，所述系统包括：

病理信息处理装置，用于获取目标对象的病理信息，其中，所述病理信息用于表征针对目标对象的相应病灶的病理特征；

所述病理信息处理装置，用于将所述目标对象的病理信息向目标终端发送；

所述目标终端，用于响应于所述目标对象的病理信息，确定相应的病理信息的分析结果，并将所述病理信息的分析结果向所述病理信息处理装置发送；

所述病理信息处理装置，用于接收所述目标终端发送的针对所述目标对象的病理信息的分析结果；

所述病理信息处理装置，用于响应于所述目标对象的病理信息的分析结果，向医疗设备发送与所述分析结果对应的控制指令；

所述显微镜，用于响应于所述控制指令，获取与所述目标对象的病理信息相匹配的辅助分析信息向所述病理信息处理装置发送。

11.一种电子设备，其特征在于，所述电子设备包括：

存储器，用于存储可执行指令；

处理器，用于运行所述存储器存储的可执行指令时，实现权利要求1至7任一项所述的病理信息处理方法，或者实现权利要求8所述的病理信息处理方法。

12.一种计算机可读存储介质，存储有可执行指令，其特征在于，所述可执行指令被处理器执行时实现权利要求1至7任一项所述的病理信息处理方法，或者实现权利要求8所述的病理信息处理方法。

Images