CN103488904A - 医学影像远程交流系统、服务器端、终端 - Google Patents

医学影像远程交流系统、服务器端、终端 Download PDF

Info

Publication number
CN103488904A
CN103488904A CN201310449170.3A CN201310449170A CN103488904A CN 103488904 A CN103488904 A CN 103488904A CN 201310449170 A CN201310449170 A CN 201310449170A CN 103488904 A CN103488904 A CN 103488904A
Authority
CN
China
Prior art keywords
image
data
remote
remote server
remote terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310449170.3A
Other languages
English (en)
Inventor
乔梁
陈欣
邱明国
郑伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Third Military Medical University TMMU
Original Assignee
Third Military Medical University TMMU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Third Military Medical University TMMU filed Critical Third Military Medical University TMMU
Priority to CN201310449170.3A priority Critical patent/CN103488904A/zh
Publication of CN103488904A publication Critical patent/CN103488904A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本发明公开了一种基于B/S结构的连续断层医学影像远程交流系统,及用于医学影像远程交流的远程服务器端和远程终端。本发明中的3D影像的合成是由远程服务器端来完成,以便于共享,从而在不需要网页客户端预先安装任何软件或插件,以不需特定硬件配置下,也能够对连续断层影像的伪三维浏览和处理;另一方面基于Web的在线影像交流模式,使得参与的用户不受地域的限制,即能够同时实现多方在线“手对手”交流。

Description

医学影像远程交流系统、服务器端、终端
技术领域
本发明涉及网络通信技术,尤其涉及一种基于B/S结构的医学影像远程交流系统,及用于该基于B/S结构的医学影像交流的远程服务器端及远程终端。
背景技术
当今,远程医学图像在医学会诊、教学、病人知情权等方面扮演着重要的角色。目前,远程医疗已开始在部分大医院与区县医疗机构建立起来,并在危重病人抢救、汶川地震抢险等方面取得了很好的效果。
现有远程医疗是建立在专用的网络环境、高昂的配套设备、以及特定的用户群体之间的,其高昂的成本却不是所有医疗机构和社区医疗服务单位能够承受的。现有远程医疗的原理主要是利用视频进行交流,或者将医学影像数据打包传输后医生各自进行诊断最后将结果进行反馈。这种方式不支持直观地在影像上进行实时细节交流,并且,由于主要采用点对点的会诊方式,因此也限制了更多医生、专家在各自地理位置便捷地参与。另一方面,由于向患者提供的材料一般都是胶片或者纸质打印材料,使得患者无法得到直观的病灶可视图解读,因此,当患者藉此到其他医疗机构咨询或就诊时,往往需要重新进行影像检查,从而增加病人开销,同时也浪费医疗资源。
发明内容
有鉴于此,本发明提供了一种基于B/S结构的医学影像远程交流系统,及用于该基于B/S结构的医学影像交流的远程服务器端及远程终端,使得多客户端可以加入讨论,并且可以互动的在线同步勾画,并不损伤原始图像、不受网络安全限制、不要求在客户端安装任何软件或插件、不局限于单一操作系统、客户端不需要特别硬件支持、3D数据不需在客户端重建、参与交流的客户端之间不依赖专用网络,具备良好的实时性和稳定性、确保网页无刷新实时同步效果。
本发明通过以下技术手段解决上述技术问题:
本发明提供了用于医学影像远程交流的远程服务器端,包括
存储模块,用于存储远程终端预先上传来的连续横断层影像集;
B/S交流模块,用于接收任一在线远程终端发送来的浏览请求或交流数据,该交流数据包括浏览跟踪数据和/或标注数据;
影像处理模块,用于根据VTK技术将所存储的连续横断层影像集进行3D影像合成,以及根据所述浏览请求或所述浏览跟踪数据,结合VTK技术进行2D影像映射,并控制所述B/S交流模块将映射得到的2D影像发送给在线的各个远程终端。
进一步地,所述交流数据以XML文件格式存储的。
进一步地,所述影像处理模块包括:
VTK影像处理子模块,用于根据VTK技术将所存储的连续横断层影像集进行3D影像合成,并根据所述浏览请求或所述浏览跟踪数据,结合VTK技术进行2D影像映射;
处理器,用于控制所述B/S交流模块分别发送映射得到的所述影像数据和所述交流数据,其中,该影像数据表示为栅格图像,该交流数据表示为矢量图像。远程服务器端,其特征在于,还包括:
更进一步地,所述远程服务器端还包括瓦片化模块,用于采用GIS瓦片式切图算法对映射得到的2D影像进行预处理,并将处理结果以“金字塔”结构存储。
本发明还提供了一种用于医学影像远程交流的远程终端,包括控制模块,用于生成浏览请求;B/S交互模块,用于将所述控制模块生成的浏览请求,以及接收所述远程服务器端发送来的,根据该浏览请求结合VTK技术进行2D影像映射得到的2D影像;显示模块,用于根据所述控制模块的控制命令,显示所述B/S结构交流模块所接收的2D影像。
进一步地,所述用于医学影像远程交流的远程终端,还包括:
记录模块,用于记录用户对当前显示的2D影像进行的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据;则
所述B/S交互模块还用于将所述记录模块所得到的交流数据发送给所述远程服务器端,或者接收所述远程服务器端转发来的,由其它远程终端发送的交流数据,以及当所述交流数据包括浏览跟踪数据时,接收所述远程服务器端发送来的,根据所述浏览跟踪数据结合VTK技术重新进行2D影像映射得到的2D影像;
影像处理模块,用于根据所述B/S交互模块所接收的重新映射得到的2D影像对当前显示的2D影像进行更新,和/或当所述交流数据包括标注数据时,根据所述标注数据进行影像重绘。
进一步地,所述交流数据以XML文件格式存储。
更进一步地,所述影像处理模块具体包括:
更新子模块,用于根据所述重新映射得到的2D影像对当前显示的2D影像进行更新;
解读子模块,用于对XML文件格式的交流数据进行解读;
影像重绘子模块,用于结合VML画板思路以层的形式,根据解读得到的信息进行影像重绘。
相应地,本发明还提供了一种基于B/S结构的医学影像远程交流系统,包括上述的远程服务器端,以及与该远程服务器端相连的至少一个上述的远程终端,其中,
所述远程终端用于当其在线时,向所述远程服务器端发送浏览请求,以及接收并显示所述远程服务器发送来的,根据所述浏览请求结合VTK技术进行2D影像映射得到的2D影像;
所述远程服务器端用于根据预先存储的连续横断层医学影像集进行3D影像合成,且当接收到所述远程终端发送来的浏览请求时,根据所述浏览请求结合TVK技术进行2D影像映射,并向在线的各个远程终端发送映射得到的2D影像。
进一步地,所述远程终端还用于记录用户的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据,并将该交流数据发送给所述远程服务器端,或接收所述远程服务器端转发来的,由其它远程终端发送的交流数据,以及接收并显示所述远程服务器发送来的,根据所述浏览跟踪数据结合VTK技术进行2D影像映射得到的2D影像,且当所述交流数据中包括标注数据时,根据所述标注数据进行影像重绘;所述交流数据以XML文件格式存储;
所述远程服务器端还用于接收任一在线远程终端发送来的交流数据,并将该交流数据转发给其它各个在线远程终端,且当该交流数据包括浏览跟踪数据时,根据所述浏览跟踪数据,并结合VTK技术重新2D影像映射,并将重新映射得到的2D影像发送给各个在线的远程终端。
实施本发明的有益效果:
实施本发明的基于B/S结构的医学影像远程交流系统,及远程服务器端和远程终端,使得多客户端同时参与,并且多客户端可以互动的在线同步勾画,并不损伤原始图像、不受网络安全限制、不要求在客户端安装任何软件或插件、不局限于单一操作系统、客户端不需要特别硬件支持、3D数据不需在客户端重建、参与交流的客户端之间不依赖专用网络,具备良好的实时性和稳定性、确保网页无刷新实时同步效果。
附图说明
下面结合附图和实施例对本发明作进一步描述。
图1为本发明的一种基于B/S结构的医学影像远程交流方法的一实施例的流程图;
图2为本发明的一种基于B/S结构的医学影像远程交流方法的又一实施例的流程图;
图3为本发明的一种用于医学影像远程交流的远程服务器端的一实施例的功能模块图;
图4为本发明的一种用于医学影像远程交流的远程终端的一实施例的功能模块图;
图5为本发明的一种医学影像远程交流系统的一实施例的功能模块图;
图6为反应本发明的一种基于B/S结构的医学影像远程交流系统中多个远程终端通过远程服务器端进行交互的流程示意图;
图7为反应本发明的一种基于B/S结构的医学影像远程交流系统的多个远程终端通过远程服务器端进行信息交互的一实施例的流程图。
具体实施方式
以下将结合附图对本发明进行详细说明。
实施例一
参见图1,为本发明的一种基于B/S结构的医学影像远程交流方法的一实施例的流程图。本实施例的远程交流方法是基于一种基于B/S结构的医学影像在线交流系统实现的,该系统包括远程服务器端,以及连接至该远程服务器端的至少一个远程终端,本实施例中该基于B/S结构的医学影像远程交流方法具体包括步骤:
S11,远程服务器端结合VTK技术将预先存储的连续横断层医学影像进行3D影像合成。具体实施时,该连续横断层医学影像集是由通过网络与远程服务器端相连的一个或者多个远程终端预先上传的,或者通过移动硬盘等方式将医学影像集预先拷贝至该远程服务器端。由于VTK(Visualization Toolkit,可视化工具包)是一个面向对象、功能全面的可视化和图形图像处理开发包。因此,本实施例中将结合VTK技术来实现三维可视化。本实施例中,远程服务器端接收到连续横断层影像集后,则进行影像集管理,即根据B/S结构三维影像成像原理,构建连续横断层影像3D空间离散存储与2D映射模块,并结合VTK技术进行3D影像合成。在一具体实施例中,该远程服务器端通过采用VTK工具包,对三维重建的实现采用经典的移动立方体法(Marching Cubes,MC算法)[6]——一种用于面绘制的算法。在VTK中,图像绘制是流水线操作模式(Pipeline):首先用vtkBmpReader类将BMP序列图像(即经过步骤S11切割得到的横断层医学影像切片集)读入为数据源(针对DICOM图像,可选用vtkDICOMImageReader类处理,其他图像格式以此类推);vtkContourFilter类依据等值面值域实现等值面的提取;用vtkPolyDataMapper类将数据映射为几何图像,最终交由vtkActor类生成实体,并由vtkRenderer对实体绘制最终显示。
本实施例中该远程服务器端合成3D影像后,将建立针对该3D影像建立一个“讨论主题”,并向连接至该远程服务器端的各个远程终端发送短信邀请,若需要加入讨论,则用户直接通过其远程终端反馈一个加入的信号即可加入,从而形成系统门户列表(包括所有加入的用户信息及其对应的远程终端)并显示,且整个系统进入实时讨论进程。
S12,该远程服务器端接收任一在线远程终端发送来的浏览请求。
S13,该远程服务器端根据步骤S12中接收的浏览请求,并结合VTK技术进行2D影像映射。具体实施时,该远程服务器端根据建立的2D映射模块将合成的3D影像进行2D影像映射,即根据浏览请求,转化为3D效果的2D影像。
S14,该远程服务器端向在线的各个远程终端发送映射得到的2D影像。具体实施时,该远程服务器端将预先建立的系统门户列表将映射得到的2D影像发送给各个在线的远程终端。
进一步地,为便于进行实时细节讨论,本实施例的该基于B/S结构的医学影像远程交流方法还包括步骤:
S15,该远程服务器端接收任一在线远程终端发送来的交流数据。本实施例中该交流数据是指由远程终端记录用户对当前显示的2D影像进行的一系列浏览操作和/或标注操作等,而得到的数据,其包括标注数据和/或浏览跟踪数据。其中标注数据是指记录对当前显示的2D影像的勾画数据、文字注释等操作而得到的数据,浏览追踪数据是指记录对当前显示的2D影像的旋转、翻转、放大或缩小等浏览操作,而得到的数据。由于用户可能只对当前显示的2D影像进行旋转、放大或缩小等浏览操作,也可能只对当前显示的2D影像进行勾画、添加文字标注等标注操作,还可能同时对当前显示的2D影像进行翻转等浏览操作,也进行勾画等标注操作,因此,该交流数据因用户的不同操作而包含不同的数据,即可只包括浏览跟踪数据,也可能只包含标注数据,还可能同时包括浏览跟踪数据和标注数据。在一具体实施例中,该交流数据既包括浏览跟踪数据,也包括标注数据,后续实施例中也以此为例进行说明。
本实施例中该服务器端接收到远程终端发送来的交流数据后,将其存储,若后续继续接收到新的交流数据,则根据接收的新交流数据进行更新。
为实现符合影像诊断实际需求为目的,快速、有效、准确地实现三维影像的浏览、标注及操作回放功能,进一步地,本实施例中结合XML技术,记录用户对三维影像的每次旋转、缩放、移动等浏览操作,以及在三维模型某个视角进行文字、线条的标注操作,并以XML文档方式存档为交流信息,即通过建立起XML操作事件层次关系模型,对操作事件、书签事件进行有效存储管理,即本实施例中该远程终端发送来的该交流数据是以XML文件格式存储和发送的。
S16,该远程服务器端将上述的交流数据转发给其它各个在线的远程终端。
在一具体实施例中,该交流数据是以XML文件格式传输的,且该交流数据即包括了浏览跟踪数据,也包括了标注数据。当然,在另一具体实施例中,该交流数据也可只包括浏览跟踪数据和标注数据中的一种。
S17,该远程服务器端根据上述的交流数据中的浏览跟踪数据,并结合VTK技术重新进行2D影像映射,执行步骤S14。在一具体实施例中,由于该交流数据中包括了浏览跟踪数据,即用户对当前的影像进行了翻转、放大或者缩小等操作,因此,该服务器需要根据该浏览跟踪数据重新进行2D影像映射,并发送给各个远程终端,以实时更新。
为实现在低带宽情况下影像与交流信息的实时收发提供支持,本实施例的医学影像远程交流方法结合了GIS(地理信息系统)的工作模式和设计思想,即将影像数据与交流数据进行分离,即分别发送映射得到的2D影像,如步骤S17,和交流数据,如步骤S16,并且根据各自的特点,将2D影像表示为栅格图像,将交流数据表示矢量图像。
当面对高分辨率的断层影像时,如单帧即是高分辨的数字化虚拟人切片等,为了进一步减少网络传输量,本实施例中在执行步骤S14之前,即将映射得到2D影像发送给远程终端之前,还包括步骤:
S18,该远程服务器端结合GIS瓦片切图算法对映射得到的2D影像进行预处理,并将预处理结果存储为“金字塔”结构。
为满足人眼观察以及图片快速传输的要求,本实施例中采用瓦片技术思想,即将高分辨率医学影像数据预先划分层级切割成若干瓦片存储,以便观察者按需提取瓦片,从而服务于“按需传输”原则以提高传输效率。因此,本实施例中,远程服务器端向在线的各个远程终端发送分离得到的影像数据之前,采用GIS瓦片式切图算法对分离得到的影像数据(即栅格图像)进行预处理,得到“金字塔”结构的瓦片式断层影像切片集。即根据医学影像的观察特点,采取固定瓦片格分辨率和固定层数的方式对分离得到的栅格图像进行规格化处理,以切割成“金字塔”存储结构,而当远程服务器端收到访问请求时,瓦片影像以链接图片的方式快速定位并进行传输
在一具体实施例中,为便于公式化处理和降低逻辑复杂度,对图像分辨率可调整为纵横等像素设计模式,得到符合医学影像传输需求的公式,其推导过程如下所示:
假设原始图像分辨率为mpx×mpx(纵横等像素,不足处可用0值填充,下同),瓦片格分辨率为tpx×tpx,客户端显示窗口像素分辨率为Screenpx×Screenpx,图层编号为n,原始图像中每个像素点灰度值占用grey个字节(区分8位、16位、24位等图像)。其公式推导如下:
客户端屏幕窗口显示每次所需瓦片数ScreenTileNum=(Screenpx/tpx)2
第n层图像所含瓦片格数tileNum(n)=22(n-1)
第n层图像完整文件大小(单位KB)imgLen(n)=tileNum(n)·mpx 2·grey/1024
第n层图像需要网络传输的有效瓦片格数(可见瓦片格数)
tileVisNum ( n ) = ScreenTileNum tileNum ( n ) 其中, ScreenTileNum < tileNum ( n ) ScreenTileNum &GreaterEqual; tileNum ( n )
若显示端所需瓦片数<此层瓦片数,只传输显示所需瓦片数;
若显示端所需瓦片数≥此层瓦片数,传输此层瓦片数。
最终,推算出用户在每次浏览影像时所需的实际网络传输量,即第n层下可见瓦片数据大小(单位KB)。
本实施例借鉴了网络地理信息系统(webGIS)对于卫星地图的浏览模式与多层次分级下载/切割传输理论,依据医学影像特征建立大图像数据分割模型,实现大图像数据的在线传输与浏览,即2D影像仿照web卫星电子地图“按需传输”和“预下载”的做法,按客户端浏览需求进行分割发送,而3D影像则按客户端浏览角度的需求映射成2D平面图,再以2D浏览思路进行发送。
本实施例中,该步骤S16和S17不分先后顺序,即既可先转发交流数据,再进行2D影像映射,也可先进行2D影像映射,再转发交流数据。
本实施例中参考GIS(地理信息系统)的工作模式和设计思想,将影像数据与交流数据进行分离,根据各自的特点表示为栅格图像和矢量图像。进一步地,结合webGIS(网络地理信息系统)关于“栅格地图图层/图面分割传输”的思想。对栅格数据进行客户端按需接收(若对图像进行缩小处理,则相应按窗口大小对原始图像像素点进行“压缩”后再发送到客户端),对记录的勾画、注释、浏览追踪数据等矢量数据,即交流数据采用XML存储模式收发,并最终建立动态事件层次关系模型。从而以“终端-服务器-终端”形式,实现在低带宽情况下影像与交流信息的实时收发提供支持。
实施例二
参见图2,为本发明的基于B/S结构的医学影像远程交流方法的又一实施例的流程图。具体实施时,本实施例的该基于B/S结构的医学影像远程交流方法是基于一种基于B/S结构的医学影像在线交流系统包括远程服务器端,以及与该远程服务器端相连的至少一个远程终端,本实施例的该医学影像远程交流方法具体包括步骤:
S21,任一在线的远程终端向远程服务器端发送浏览请求。具体实施时,在远程终端发送浏览请求之前,远程服务器端合成3D影像后,将建立针对该3D影像建立一个“讨论主题”,并向连接至该远程服务器端的各个远程终端发送短信邀请,若需要加入讨论,则用户直接通过其远程终端反馈一个加入的信号即可加入,从而形成系统门户列表(包括所有加入的用户信息及其对应的远程终端)并显示,且整个系统进入实时讨论进程。即进入实时讨论进程后,该远程终端才发送浏览请求。
S22,各个在线的远程终端接收远程服务器端发送来的,根据步骤S21中的浏览请求,结合VTK技术进行2D影像映射得到的2D影像。具体实施时,在远程服务器端进行2D影像映射之前,需要结合VTK技术对预先存储的连续横断层影像集进行2D影像合成。而该预先存储的连续横断层影像集,则是由任一远程终端或者多个远程终端通过互联网预先上传至该远程服务器端的,或者通过移动硬盘拷贝至该远程服务器端的。而该远程服务器端在进行3D影像合成和2D影像映射之前,需要先结合VTK技术建立连续断层影像3D离散空间存储和2D映射模块。
为了减少数据流量,本实施例中该远程服务器端发送来的2D影像是经过预处理的,即由远程服务器端结合GIS瓦片切图算法对映射得到的2D影像进行预处理,并将预处理结果存储为“金字塔”结构。本实施例中该预处理方式与实施例一的预处理方式相同,这里不再赘述。
S23,各个远程终端显示接收到的远程服务器端发送来的2D影像。
进一步地,为了实现实时细节交流,本实施例中,该基于B/S结构的医学影像远程交流方法还包括步骤:
S24,当前远程终端记录当前用户对2D影像的浏览操作和/或标注操作,得到交流数据,并存储。具体实施时,由于用户可能只对2D影像进行旋转、放大或缩小等浏览操作,也可能只对2D影像进行勾画、添加文字标注等标注操作,还可能同时对2D影像进行翻转等浏览操作,也进行勾画等标注操作,因此,该交流数据因用户的不同操作而包含不同的数据,即可只包括浏览跟踪数据,也可能只包含标注数据,还可能同时包括浏览跟踪数据和标注数据。本实施例中,该交流数据既包括浏览跟踪数据,也包括标注数据,后续的实施例中也相同。
本实施例中,针对交流数据中的非标注操作,如缩放、翻转等浏览跟踪数据时,则以命令参数形式控制其运动,只需记录角度变换参数便可应用于后期回放。命令方式可利用VTK封装的vtkCamera类的方法,如:“左右旋转Roll(角度参数)”、“左右翻转Azimuth(角度参数)”和“上下翻转Elevation(角度参数)”。
针对交流数据中的标注数据,为确保实用、低运算量及易推广为目的,本实施例中将三维模型的标注演变为二维图像的标注,即在某一个位点、角度将三维影像映射为二维图像,利用GDI+(Graphics Device Interface Plus,图形设备接口)对其进行水印等操作,以一种三维观感的二维处理方式,简化模型结构,即伪三维可视化标注。因此,设计在VTK窗体操作时,将VTK投影生成的二维影像与程序开发平台的PixtureBox图像显示控件联动,即以PixureBox作为中间件连接用户与三维模型。当用户在进行三维可视化浏览时发出的鼠标运动等操作事件,由PictureBox控件获取并以VTK命令方式要求三维可视化对象做相应动作,完成后以二维映像方式回填至PictureBox,从而达到以二维标注的方式完成伪三维显示的目的。另一方面,由于以PictureBox作为显示伪三维影像的载体,当需要对当前画面进行标注时,只需考虑普通的二维图像处理,运算复杂度相比直接在VTK窗体操作大为降低。
为实现符合影像诊断实际需求为目的,快速、有效、准确地实现三维影像的浏览、标注及操作回放功能,进一步地,本实施例中结合XML技术,记录用户对三维影像的每次旋转、缩放、移动等浏览操作,以及在三维模型某个视角进行文字、线条的标注操作,并以XML文档方式存档为交流信息,即通过建立起XML操作事件层次关系模型,对操作事件、书签事件进行有效存储管理,即本实施例中该远程终端发送来的该交流数据是以XML文件格式存储和发送的。
S25,该远程终端将步骤S23中得到的交流数据发送给远程服务器端。在一具体实施例中,该交流数据包括浏览跟踪数据和标注数据。
S26,其他各个远程终端接收远程服务器端转发来的交流数据。在一具体实施例中,该交流数据包括浏览跟踪数据和标注数据,且该交流数据以XML文件格式传输的。
本实施例中,当该远程终端后续继续接收到远程服务器端发送来的新交流数据,或者重新记录用户的浏览操作和/或标注操作得到新的交流数据时,对其存储的交流数据进行更新。
为实现在低带宽情况下影像与交流信息的实时收发提供支持,本实施例的医学影像远程交流方法结合了GIS(地理信息系统)的工作模式和设计思想,即将影像数据与交流数据进行分离,即分别发送映射得到的2D影像,如步骤S26,和交流数据,如步骤S25,并且根据各自的特点,将2D影像表示为栅格图像,将交流数据表示矢量图像。
S27,各个在线的远程终端接收远程服务器端发送来的,根据浏览跟踪数据结合VTK技术重新得到的2D影像,并更新为当前2D影像。具体实施时,执行该步骤S27的前提是,交流数据中包括了浏览跟踪数据,即用户对所显示的影像进行了旋转、放大或者缩小等浏览操作。
为了进一步减少数据流量,进一步地,本实施例中各个远程终端接收的该2D影像是由远程服务器端结合GIS瓦片切图算法对重新映射得到的2D影像进行预处理得到的,且预处理结果存储为“金字塔”结构。
S28,各个在线的远程终端根据交流数据中的标注数据,结合AJAX技术,进行影像重绘。具体实施时,结合AJAK技术,并参考VML画板思路以层(DIV)的形式对解读信息进行重绘进行图像重绘,即将勾画数据、注释数据覆盖在2D影像即可,即不再更新影像,而是以当前显示的影像为背景,在其上进行覆盖。本实施例利用VTK程序设计方面比较熟悉的有利条件,将其开发工作融入到.NET平台之下,并参照DICOM影像格式在网页上的传输与浏览方式,利用AJAX+Javascript技术相结合,构建起基于B/S结构的非对称浏览方式,以实现以服务器端处理为中心,客户端网页免安装特定软件或插件、无安全性限制、不需要特别硬件配置需求的三维浏览效果。
实施例三
对应于实施例一的基于B/S结构的医学影像远程交流方法,本发明提供了一种用于医学影像交流的远程服务器端。下面结合具体实施例和附图对本发明的该远程服务器端进行详细的说明。
参见图3,为本发明的一种用于医学影像交流的远程服务器端的一实施例的功能模块图,具体实施时,本实施例的该远程服务器端1具体包括:
存储模块11,用于存储远程终端预先上传来的连续横断层影像集;具体实施时,该连续横断层影像集可由一通过网络连接至该远程服务器端的远程终端预先上传的,也可通过移动硬盘的方式拷贝至该远程服务器端的;
B/S交流模块12,用于接收任一在线远程终端发送来的浏览请求或交流数据,该交流数据包括浏览跟踪数据和/或标注数据;在一具体实施例中,该交流数据以XML文件格式存储的;本实施例中,该浏览跟踪数据是指,当用户对影像进行翻转、放大或缩小等浏览操作时,远程终端记录该浏览操作得到的浏览跟踪数据,和/或当用户进行勾画、文字标注等操作时,远程终端记录该标注操作,得到的标注数据;
影像处理模块13,用于利用VTK技术将所存储的连续横断层影像集进行3D影像合成,且当接收到浏览请求或交流数据时,根据该浏览请求和/或交流数据,并结合VTK技术进行2D影像映射,再控制上述的B/S交流模块12将映射得到的2D影像发送给在线的各个远程终端,和/或控制上述的B/S交流模块12将该交流数据转发给在线的其它远程终端;具体实施时,该影像处理模块13具体包括:
VTK影像处理子模块,用于根据VTK技术将所存储的连续横断层影像集进行3D影像合成,并根据所述浏览请求或浏览跟踪数据结合VTK技术进行2D影像映射,以及;在一具体实施例中,该映射得到的2D影像表示为栅格图像,而交流数据表示为矢量图像;
处理器,用于控制B/S交流模块12分别发送映射得到的2D影像和接收到的交流数据。具体实施时,该处理器将预先根据连接至该远程服务器端的所有在线的远程终端,建立一系统门户列表,当VTK影像处理子模块映射得到2D影像后,该处理器则根据该系统门户列表,控制B/S结构交流模块向各个在线的远程终端发送映射得到的2D影像。
在另一具体实施例中,该远程服务器端还包括瓦片化模块,用于采用GIS瓦片式切图算法对映射得到的2D影像进行预处理,并将处理结果以“金字塔”结构存储。
本实施例中该,在进入实时讨论流程之前,该处理器预先建立针对根据连续横断层影像集合成的3D影像建立一个“讨论主题”,并通过B/S交流模块向连接至该远程服务器端的各个远程终端发送短信邀请,若需要加入讨论,则用户直接通过其远程终端反馈一个加入的信号即可加入,从而处理器根据反馈的信号形成系统门户列表(包括所有加入的用户信息及其对应的远程终端)并显示,且显示该系统进入实时讨论进程。
实施例四
基于上述实施例二的基于B/S结构的医学影像远程交流方法,本发明还提供了一种用于医学影像远程交流的远程终端。下面结合具体实施例和附图对其进行详细说明。
参见图4,为本发明的用于医学影像数据远程交流的远程终端的一实施例的结构示意图,具体实施时,本实施例中该远程终端具体包括:
控制模块21,用于产生浏览请求;
B/S交互模块23,用于将控制模块21产生的浏览请求,以及接收该远程服务器端发送来的,根据该浏览请求并结合VTK技术进行2D影像映射得到的2D影像;本实施例中,该远程服务器端进行2D影像映射之前,还需要结合VTK技术对预先存储的连续横断层影像集进行3D影像合成;
显示模块24,用于根据控制模块21的控制命令,显示该B/S交互模块23所接收的2D影像;
进一步地,本实施例中该远程终端还包括:
记录模块22,用于记录用户的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据;具体实施时,针对非标注操作,如缩放、翻转等浏览操作,以命令参数形式控制其运动,只需记录角度变换参数便可;在一具体实施例中,该记录模块将得到的该交流数据以XML文件格式进行存储;
上述B/S交互模块23还用于将记录模块22得到的交流数据发送给远程服务器端,或者接收远程服务器端发送来的,由其它远程终端发送的交流数据,以及接收该远程服务器端发送来的,根据该交流数据并结合VTK技术重新进行2D影像映射得到的2D影像;
影像处理模块25,用于当交流数据中包括浏览跟踪数据时,根据远程服务器端发送来的根据浏览跟踪数据重新映射的2D影像,对当前2D影像进行更新,和/或当该交流数据包括标注数据时,根据该标注数据,并结合AJAK技术,进行影像重绘。具体实施时,该影像处理模块25包括:
更新子模块,用于根据接收到远程服务器端发送来的,根据浏览跟踪数据重新映射得到的2D影像,对当前2D影像进行更新;
解读子模块,用于对XML文件格式的交流数据进行解读;
影像重绘子模块,用于根据解读到的标注数据进行影像重绘。
实施例五
基于上述的医学影像远程交流方法及远程服务器端、远程终端,本发明还提供了一种基于B/S结构的医学影像远程交流系统,下面结合具体实施例和附图对本发明的该系统进行详细的说明。
请参见图5和图6,其中,图5为本发明的一种基于B/S结构的医学影像远程交流系统的一实施例的功能模块图,图6为本发明的该远程交流系统的数据交互过程示意图,图7为本发明的该远程交流系统的多个远程终端进行信息交互的一实施例的流程图。具体实施时,本实施例的该基于B/S结构的医学影像远程交流系统具体包括如上述实施例三中的远程服务器端1和至少一个如上述实施例四中的远程终端2,其中,
该远程终端2用于在线时,向该远程服务器端发送浏览请求,以及接收并显示该远程服务器发送来的2D影像;具体实施时,远程终端2可预先通过互联网向远程服务器端1上传待交流的连续横断层影像集,也可通过移动硬盘进行上传;
该远程服务器端1用于根据预先存储的横断层医学影像集进行3D影像合成,且当接收到在线的远程终端2发送的浏览请求,根据该浏览请求或交流信息进行2D影像映射,且将映射后的2D影像发送给各个远程终端;
进一步地,为实现细节实时交流,本实施例中该远程终端2还可用于记录用户的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据,并将该交流数据发送给该远程服务器端,或接收该远程服务器端转发来的,由其它远程终端发送的交流数据,以及接收并显示该远程服务器发送来的,根据所述浏览跟踪数据结合VTK技术进行2D影像映射得到的2D影像,且当上述的交流数据中包括标注数据时,根据该标注数据进行影像重绘;本实施例中该交流数据以XML文件格式存储;
相应地,本实施例中该远程服务器端还用于接收任一在线远程终端发送来的交流数据,并将该交流数据转发给其它各个在线远程终端,且当该交流数据包括浏览跟踪数据时,根据所述浏览跟踪数据,并结合VTK技术重新2D影像映射,并将重新映射得到的2D影像发送给各个在线的远程终端。
最后说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的宗旨和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (10)

1.一种用于医学影像远程交流的远程服务器端,其特征在于,包括
存储模块,用于存储远程终端预先上传来的连续横断层影像集;
B/S交流模块,用于接收任一在线远程终端发送来的浏览请求或交流数据,该交流数据包括浏览跟踪数据和/或标注数据;
影像处理模块,用于根据VTK技术将所存储的连续横断层影像集进行3D影像合成,以及根据所述浏览请求或所述浏览跟踪数据,结合VTK技术进行2D影像映射,并控制所述B/S交流模块将映射得到的2D影像发送给在线的各个远程终端。
2.如权利要求1所述的用于医学影像远程交流的远程服务器端,其特征在于,所述交流数据以XML文件格式存储的。
3.如权利要求2所述的用于医学影像远程交流的远程服务器端,其特征在于,所述影像处理模块包括:
VTK影像处理子模块,用于根据VTK技术将所存储的连续横断层影像集进行3D影像合成,并根据所述浏览请求或所述浏览跟踪数据,结合VTK技术进行2D影像映射;
处理器,用于控制所述B/S交流模块分别发送映射得到的所述影像数据和所述交流数据,其中,该影像数据表示为栅格图像,该交流数据表示为矢量图像。
4.如权利要求3所述的用于医学影像远程交流的远程服务器端,其特征在于,还包括:
瓦片化模块,用于采用GIS瓦片式切图算法对映射得到的2D影像进行预处理,并将处理结果以“金字塔”结构存储。
5.一种用于医学影像远程交流的远程终端,其特征在于,该远程终端通过网络连接至远程服务器端,包括:
控制模块,用于生成浏览请求;
B/S交互模块,用于将所述控制模块生成的浏览请求,以及接收所述远程服务器端发送来的,根据该浏览请求结合VTK技术进行2D影像映射得到的2D影像;
显示模块,用于根据所述控制模块的控制命令,显示所述B/S结构交流模块所接收的2D影像。
6.如权利要求5所述的用于医学影像远程交流的远程终端,其特征在于,还包括:
记录模块,用于记录用户对当前显示的2D影像进行的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据;则
所述B/S交互模块还用于将所述记录模块所得到的交流数据发送给所述远程服务器端,或者接收所述远程服务器端转发来的,由其它远程终端发送的交流数据,以及当所述交流数据包括浏览跟踪数据时,接收所述远程服务器端发送来的,根据所述浏览跟踪数据结合VTK技术重新进行2D影像映射得到的2D影像;
影像处理模块,用于根据所述B/S交互模块所接收的重新映射得到的2D影像对当前显示的2D影像进行更新,和/或当所述交流数据包括标注数据时,根据所述标注数据进行影像重绘。
7.如权利要求6所述的用于医学影像交流的远程终端,其特征在于,所述交流数据以XML文件格式存储。
8.如权利要求6所述的用于医学影像远程交流的远程终端,其特征在于,所述影像处理模块具体包括:
更新子模块,用于根据所述重新映射得到的2D影像对当前显示的2D影像进行更新;
解读子模块,用于对XML文件格式的交流数据进行解读;
影像重绘子模块,用于结合VML画板思路以层的形式,根据解读得到的信息进行影像重绘。
9.一种基于B/S结构的医学影像远程交流系统,其特征在于,包括如权利要求1至4中任意一项所述的远程服务器端,以及与该远程服务器端相连的至少一个如权利要求5至8中任意一项所述的远程终端,其中,
所述远程终端用于当其在线时,向所述远程服务器端发送浏览请求,以及接收并显示所述远程服务器发送来的,根据所述浏览请求结合VTK技术进行2D影像映射得到的2D影像;
所述远程服务器端用于根据预先存储的连续横断层医学影像集进行3D影像合成,且当接收到所述远程终端发送来的浏览请求时,根据所述浏览请求结合TVK技术进行2D影像映射,并向在线的各个远程终端发送映射得到的2D影像。
10.如权利要求9所述的基于B/S结构的医学影像远程交流系统,其特征在于,
所述远程终端还用于记录用户的浏览操作和/或标注操作,得到交流数据,该交流数据包括浏览跟踪数据和/或标注数据,并将该交流数据发送给所述远程服务器端,或接收所述远程服务器端转发来的,由其它远程终端发送的交流数据,以及接收并显示所述远程服务器发送来的,根据所述浏览跟踪数据结合VTK技术进行2D影像映射得到的2D影像,且当所述交流数据中包括标注数据时,根据所述标注数据进行影像重绘;所述交流数据以XML文件格式存储;
所述远程服务器端还用于接收任一在线远程终端发送来的交流数据,并将该交流数据转发给其它各个在线远程终端,且当该交流数据包括浏览跟踪数据时,根据所述浏览跟踪数据,并结合VTK技术重新2D影像映射,并将重新映射得到的2D影像发送给各个在线的远程终端。
CN201310449170.3A 2013-09-27 2013-09-27 医学影像远程交流系统、服务器端、终端 Pending CN103488904A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310449170.3A CN103488904A (zh) 2013-09-27 2013-09-27 医学影像远程交流系统、服务器端、终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310449170.3A CN103488904A (zh) 2013-09-27 2013-09-27 医学影像远程交流系统、服务器端、终端

Publications (1)

Publication Number Publication Date
CN103488904A true CN103488904A (zh) 2014-01-01

Family

ID=49829120

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310449170.3A Pending CN103488904A (zh) 2013-09-27 2013-09-27 医学影像远程交流系统、服务器端、终端

Country Status (1)

Country Link
CN (1) CN103488904A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105139443A (zh) * 2015-07-30 2015-12-09 芜湖卫健康物联网医疗科技有限公司 诊断结果的三维成像系统及方法
CN105321137A (zh) * 2014-08-01 2016-02-10 佳能株式会社 解读请求管理系统、解读请求管理设备及其控制方法
CN105699383A (zh) * 2015-12-16 2016-06-22 南京铁道职业技术学院 增强消息传送能力的轨道扣件的检测方法
CN106326675A (zh) * 2016-09-05 2017-01-11 深圳市六联科技有限公司 一种基于三维模型的远程会诊系统
CN107708571A (zh) * 2015-07-29 2018-02-16 深圳迈瑞生物医疗电子股份有限公司 一种超声成像系统及方法
CN107887018A (zh) * 2016-09-30 2018-04-06 上海微创医疗器械(集团)有限公司 术前评估系统以及术前评估方法
CN108093066A (zh) * 2017-12-26 2018-05-29 中国人民解放军海军总医院 海上及岸上医学影像数据的同步共享方法及系统
CN108989597A (zh) * 2018-08-30 2018-12-11 中国科学院上海技术物理研究所 医学影像传输方法、传输中心和终端
CN111298305A (zh) * 2020-02-18 2020-06-19 上海联影医疗科技有限公司 一种数据同步方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1644160A (zh) * 2005-02-03 2005-07-27 四川大学 分布式心脏图像多维重建与交互可视化方法
CN101271574A (zh) * 2008-03-20 2008-09-24 华南师范大学 三维可视化的方法、装置
CN201780586U (zh) * 2010-09-26 2011-03-30 中国人民解放军第三军医大学 远程医疗在线画板系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1644160A (zh) * 2005-02-03 2005-07-27 四川大学 分布式心脏图像多维重建与交互可视化方法
CN101271574A (zh) * 2008-03-20 2008-09-24 华南师范大学 三维可视化的方法、装置
CN201780586U (zh) * 2010-09-26 2011-03-30 中国人民解放军第三军医大学 远程医疗在线画板系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
杜振伟等: "瓦片式算法在家庭网络环境实现高分辨率医学影像实时浏览与传输的研究", 《中国数字医学》 *
杨磊鑫等: "基于XML和VTK的医学影像三维书签系统设计", 《医疗卫生装备》 *
高鹏等: "基于Web的医学影像三维可视化实现方式", 《中国数字医学》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105321137A (zh) * 2014-08-01 2016-02-10 佳能株式会社 解读请求管理系统、解读请求管理设备及其控制方法
CN105321137B (zh) * 2014-08-01 2019-10-25 佳能株式会社 解读请求管理系统、解读请求管理设备及其控制方法
CN107708571A (zh) * 2015-07-29 2018-02-16 深圳迈瑞生物医疗电子股份有限公司 一种超声成像系统及方法
CN105139443A (zh) * 2015-07-30 2015-12-09 芜湖卫健康物联网医疗科技有限公司 诊断结果的三维成像系统及方法
CN105699383B (zh) * 2015-12-16 2018-10-16 南京铁道职业技术学院 增强消息传送能力的轨道扣件的检测方法
CN105699383A (zh) * 2015-12-16 2016-06-22 南京铁道职业技术学院 增强消息传送能力的轨道扣件的检测方法
CN106326675A (zh) * 2016-09-05 2017-01-11 深圳市六联科技有限公司 一种基于三维模型的远程会诊系统
CN107887018A (zh) * 2016-09-30 2018-04-06 上海微创医疗器械(集团)有限公司 术前评估系统以及术前评估方法
CN107887018B (zh) * 2016-09-30 2021-09-10 上海微创医疗器械(集团)有限公司 术前评估系统以及术前评估方法
CN108093066A (zh) * 2017-12-26 2018-05-29 中国人民解放军海军总医院 海上及岸上医学影像数据的同步共享方法及系统
CN108093066B (zh) * 2017-12-26 2021-12-28 中国人民解放军海军总医院 海上及岸上医学影像数据的同步共享方法及系统
CN108989597A (zh) * 2018-08-30 2018-12-11 中国科学院上海技术物理研究所 医学影像传输方法、传输中心和终端
CN111298305A (zh) * 2020-02-18 2020-06-19 上海联影医疗科技有限公司 一种数据同步方法和系统

Similar Documents

Publication Publication Date Title
CN103488904A (zh) 医学影像远程交流系统、服务器端、终端
US10996915B2 (en) Surrogate visitor mixed-reality live environment sharing system with remote visitors
US11087553B2 (en) Interactive mixed reality platform utilizing geotagged social media
US20190379856A1 (en) Method for processing overlay in 360-degree video system and apparatus for the same
US7774430B2 (en) Media fusion remote access system
US20120050300A1 (en) Architecture For Rendering Graphics On Output Devices Over Diverse Connections
CN107491174A (zh) 用于远程协助的方法、装置、系统及电子设备
CN102834849A (zh) 进行立体视图像的描绘的图像描绘装置、图像描绘方法、图像描绘程序
CN106575158B (zh) 环境映射虚拟化机构
CN110138831A (zh) 一种进行远程协助的方法与设备
CN107566793A (zh) 用于远程协助的方法、装置、系统及电子设备
CN110751735B (zh) 一种基于增强现实的远程指导的方法与设备
CA3028863C (en) Projection image construction method and device
CN107045460A (zh) 跨平台注释同步
US20110242271A1 (en) Synthesizing Panoramic Three-Dimensional Images
Li et al. Animation of virtual medical system under the background of virtual reality technology
CN103500274A (zh) 基于b/s结构的医学影像远程交流方法
CN115830199A (zh) 基于xr技术的泛在实训校园构建方法、系统及存储介质
KR100521728B1 (ko) 비디오 지리 정보 시스템
Tachi Telecommunication, Teleimmersion, and Telexistence
Zhang et al. Web-based terrain and vector maps visualization for Wenchuan earthquake
Shahabi et al. Geodec: Enabling geospatial decision making
Mancini et al. Remote touch interaction with high quality models using an autostereoscopic 3D display
RU2523980C2 (ru) Способ и система для визуализации набора мультимедиа объектов на 3d дисплее
Boorboor et al. Submerse: Visualizing Storm Surge Flooding Simulations in Immersive Display Ecologies

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140101