CN106569673B

CN106569673B - 多媒体病历报告的显示方法及多媒体病历报告的显示设备

Info

Publication number: CN106569673B
Application number: CN201610994550.9A
Authority: CN
Inventors: 陈浩; 曹坤琳; 特铮; 李宁; 张红昌; 尹游兵
Original assignee: Keya Medical Technology Co Ltd
Current assignee: Keya Medical Technology Co Ltd
Priority date: 2016-11-11
Filing date: 2016-11-11
Publication date: 2021-05-28
Anticipated expiration: 2036-11-11
Also published as: CN106569673A

Abstract

本发明提供一种多媒体病历报告的显示方法和多媒体病历报告的显示设备，所述方法包括：获取用户发出的交互操作指令；以及根据所述交互操作指令，对所述多媒体病历报告的显示内容进行调整；其中，所述多媒体病历报告包括：文本区，用于显示病人的信息；DICOM图像区，用于显示所获取的病人目标部位的DICOM医学图像；以及三维模型区，用于显示通过对所述DICOM医学图像重建所得的三维模型以及相关的模型信息。本发明的多媒体病历报告的显示方法能够接收用户的交互操作并相应调整多媒体病历报告的显示内容。

Description

多媒体病历报告的显示方法及多媒体病历报告的显示设备

技术领域

本发明涉及图像显示领域，更具体地，涉及一种多媒体病历报告的显示方法及多媒体病历报告的显示设备。

背景技术

医生对病人进行医学诊断后，会给出相应的病历报告。报告一般包含病人基本信息，检查所见信息，病情影像等诊断信息。医学影像均以DICOM(Digital Imaging andCommunications in Medicine,数字影像和通信标准)格式进行存储和传输。

CT(Computed Tomography，电子计算机断层扫描)、MRI(Magnetic ResonanceImaging，磁共振成像)等是当前疾病检查中广泛使用的技术。CT和MRI的图像是层面图像，常用的是横断面。为了显示整个器官，需要多个连续的层面图像。

当前检查报告中嵌入的医学影像是医生在一系列图片列表中选取相对能够说明病情原因的一张或多张二维影像。传统的纸质报告需要医院中设置大容量的资料库，调取过程繁琐耗时，此外，医生在查看纸质报告时受限于纸张对影像呈现的分辨率，也不能按需求与之交互。

随着医疗技术的发展，引入了电子病历，甚至也在电子病历报告中嵌入了能够说明病情原因的一张或多张二维影像。但人体是三维空间的存在，二维图片难以看到病症部位的全貌。此外，有的医学检查需要一个按时间演变的图片序列才能描述完整(例如心脏造影)，静态的二维图片有可能造成一些重要信息的丢失。为疾病的检查带来较多不便。因此，需要能够提供显示三维甚至时间序列数据的多媒体病历，其能够更周全地呈现诊断所需的重要信息，也能够帮助医生更直观地把握病症部位的全貌

此外，现有的电子病历通常只在pc端上显示，医生只能对电子病历的边框进行windows系统固有的那些拖动、缩放，并不能对电子病历的显示内容进行交互，例如调取影像中的靶区、调整影像在视图中的位置、调整显示影像的窗口，查看数据等，而这些与显示内容的实质交互，能够协助医生更专注更方便地观察病症。此外，目前的电子病历通常仅供医生使用，不能灵活显示在移动终端比如智能手机或IPAD上，因此也不利于病人保留电子病历和医生间对病例的会诊和交流。

发明内容

为了解决现有技术中的上述问题，本发明提供一种能够接收用户的交互操作并相应调整多媒体病历报告的显示内容的多媒体病历报告的显示方法以及用于显示该多媒体病历报告的多媒体病理报告的显示设备。

本发明的实施例提供一种多媒体病历报告的显示方法，所述方法包括：

获取用户发出的交互操作指令；以及

根据所述交互操作指令，对所述多媒体病历报告的显示内容进行调整，

其中，所述多媒体病历报告包括：

文本区，用于显示病人的信息；

DICOM图像区，用于显示所获取的病人目标部位的DICOM医学图像；以及

三维模型区，用于显示通过对所述DICOM医学图像重建所得的三维模型以及相关的模型信息。

作为优选，所述显示方法通过如下方式的至少一种来得到所述多媒体病历报告供显示：

从多媒体病历报告源处，接收所述多媒体病历报告；以及

本地生成所述多媒体病历报告。

作为优选，所述生成所述多媒体病历报告的步骤包括：

设置所述多媒体病历报告的框架，使之包括所述文本区、所述DICOM图像区和所述三维模型区；

获取病人的信息，设置其用于显示在所述文本区中；

获取病人目标部位的DICOM医学图像，设置其用于显示在所述DICOM图像区中；

根据所述DICOM医学图像生成所述目标部位的三维模型，并设置其用于显示在所述三维模型区中。

作为优选，所述交互操作指令包括以下中的至少一种：切换正常模式指令、切换最大化模式指令、图像调取位置调整指令、图像位置调整指令、图像大小调整指令、旋转指令、影像十字准线开启指令，根据所述交互操作指令对所述多媒体病历报告的显示内容进行调整的过程包括以下中的相应至少一种：将DICOM医学图像或三维图形切换为正常显示模式、将DICOM医学图像或三维图形切换为最大化显示模式、调节DICOM医学图像或三维图形的尺寸、任意角度旋转三维模型、调节DICOM医学图像或三维图形的显示位置、对调目标DICOM医学图像与三维模型的显示位置以及显示影像十字准线，其中，所述影像十字准线的三个方位的截面分别对应显示预设的目标DICOM医学影像。

作为优选，在移动设备上显示时，所述交互操作指令包括切换立体显示模式指令；根据所述切换立体显示模式指令对所述多媒体病历报告的显示进行调整的过程为将三维模型调整为能够与虚拟现实显示设备配合使用以形成立体图像的形式。

作为优选，所述交互操作指令在显示设备为普通计算机时通过鼠标实现，在所述显示设备为触控移动设备时通过手势实现，而在所述显示设备为配备触摸屏的计算机时根据用户的选择通过鼠标或手势来实现。

作为优选，在所述交互操作指令通过手势来实现时定义：

单指在DICOM医学图像上左右拖动时系统调整当前显示图像的窗宽；

单指在DICOM医学图像上上下拖动时系统调整当前显示图像的窗位；

双指在DICOM医学图像上或所述三维模型上捏放操作时系统调整目标DICOM医学图像或三维模型的大小；

双指DICOM医学图像上拖动时系统调整图像位置；

单指拖动DICOM图像区的滑竿时系统调整图像位置以调取不同位置的DICOM医学图像；

单指在三维视图区上滑动时三维模型绕其中心旋转。

作为优选，所述多媒体病历报告源包括以下中的至少一种：本地生成所述多媒体病历报告的设备；存储有所述多媒体病历报告的医院数据库。

本发明的实施例同时提供一种多媒体病历报告的显示设备，所述显示设备包括：

交互操作获取模块，用于获取用户发出的交互操作指令；

交互操作执行模块，用于根据所述交互操作指令，对所述多媒体病历报告的显示内容进行调整；以及

显示模块，用于显示调整好的多媒体病历报告；

其中，所述多媒体病历报告包括：

文本区，用于显示病人的信息；

三维模型区，用于显示通过对所述DICOM医学图像重建所得的三维模型。

作为优选，所述显示设备包括如下模块中的至少一种：

接收模块，用于从多媒体病历报告源处，接收所述多媒体病历报告；以及

生成模块，用于本地生成所述多媒体病历报告。

作为优选，所述生成模块包括：

获取模块，用于获取病人的信息和病人目标部位的DICOM医学图像；

重建模块，用于从所述获取模块接收病人目标部位的DICOM医学图像，据此重建生成所述目标部位的三维模型；

设置模块，用于设置所述多媒体病历报告的框架，使之包括所述文本区、所述DICOM图像区和所述三维模型区，从所述获取模块和所述重建模块分别接收病人的基本信息、病人目标部位的DICOM医学图像和所述三维模型，设置其使之分别用于显示在所述文本区、所述DICOM图像区和所述三维模型区中。

作为优选，所述交互操作指令包括以下中的至少一种：切换正常模式指令、切换最大化模式指令、图像调取位置调整指令、图像位置调整指令、图像大小调整指令、旋转指令、影像十字准线开启指令，根据所述交互操作指令对所述多媒体病历报告的显示进行调整的过程包括以下中的相应至少一种：将DICOM医学图像或三维图形切换为正常显示模式、将DICOM医学图像或三维图形切换为最大化显示模式、调节DICOM医学图像或三维图形的尺寸、任意角度旋转三维模型、调节DICOM医学图像或三维图形的显示位置、对调目标DICOM医学图像与三维模型的显示位置以及显示影像十字准线，其中,所述影像十字准线的三个方位的截面分别对应显示预设置的目标DICOM医学影像。

作为优选，所述显示设备为移动设备时，所述交互操作指令包括切换立体显示模式指令，根据所述切换立体显示模式指令对所述多媒体病历报告的显示进行调整的过程为将三维模型调整为能够与虚拟现实显示设备配合使用以形成立体图像的形式。

作为优选，在所述显示设备为普通计算机时，所述交互操作获取模块为鼠标；在所述设备为触控移动设备时，所述交互操作获取模块为触摸屏；而在所述设备为配备触摸屏的计算机时，所述交互操作获取模块根据用户的选择采用鼠标或触摸屏。

作为优选，在所述交互操作获取模块为鼠标时，所述交互操作至少包括以下一种：滚动所述鼠标中键、点击所述鼠标的左、右键并左右拖动所述鼠标、点击所述鼠标的左、右键并上下拖动所述鼠标，交互操作执行模块根据所述交互操作对所述多媒体病历报告的显示内容进行调整的过程包括以下中的相应至少一种：选择调取目标DICOM医学图像、调整当前显示的目标DICOM医学图像的窗宽、调整当前显示的目标DICOM医学图像的窗位、调整所述三维模型的尺寸、调整所述三维模型在所述三维模型区中的显示位置。

本发明的多媒体病历报告的显示方法及多媒体病历报告的显示设备的有益效果在于：

1、通过病历报告显示装置显示的病历报告扩展了当前普通文本电子报告不具备的信息，医生只需要查看一份报告，就可以完整的了解整个检查的数据，对于病人病情的诊断能够更加有效。

2、病历报告处理装置及显示装置可以完整的记录一个病例的情况，更有利于医院整理归档病人的数据,不会出现病人基本信息和对应的影像不匹配或缺失的情况。

3、本发明的病历报告显示装置可以为PC或任何移动设备，便于医生间对病例的会诊和交流，以及在学术会议上的学习与研讨。

4、本发明的病历报告显示装置可提供立体显示模式，外科医生戴上立体眼镜之后可以更好的观察病症。

附图说明

图1为本发明的多媒体病历报告的显示方法的流程图。

图2为本发明中的多媒体病历报告的结构示意图。

图3为本发明中的多媒体病历报告的一种显示界面。

图4为本发明中的多媒体病历报告的另一种显示界面中的三维模型区，其中打开了影像十字准线，显示了二维影像。

图5为本发明中的多媒体病历报告的又一种显示界面。

图6为本发明的多媒体病历报告的显示设备的结构示意图。

附图标记：

1-交互操作获取模块；2-交互操作执行模块；3-接收模块；4-生成模块；5-获取模块；6-重建模块；7-设置模块；8-显示模块。

具体实施方式

以下结合附图对本发明进行详细描述。

图1为本发明的多媒体病历报告的显示方法的流程图。如图1所示，本发明的实施例公开一种多媒体病历报告的显示方法。该方法包括：

获取用户发出的交互操作指令(步骤110)；以及

根据获取的交互操作指令，对多媒体病历报告的显示内容进行调整(步骤120)。也就是，医生在使用多媒体病历报告时可以根据实际需要对多媒体病历报告的显示内容进行相应调整，以利于医生对病情信息的获取。

图2为本发明中的多媒体病历报告的结构示意图示例，如图2所示，该多媒体病历报告包括：

文本区，用于显示病人信息，例如姓名、年龄、病情描述、医生的诊断信息等；具体可自医院的PACS(Picture Archiving and Communication System,图像存档与通信系统)或HIS系统获取，也可人工录入。该文本区可包括多个独立区域，以用于分别显示多类信息，如仅用于显示病人的姓名等信息的基本信息区(如图2上方所示的“文本区(基本信息)”)、仅用于显示病情信息或仅用于显示医生诊断信息的历史记录区(如图2最下方所示的“历史记录区”)等；以及

DICOM图像区，用于显示所获取的病人目标部位的DICOM医学图像。具体可自医院的PACS或HIS系统获取该医学图像。优选地，本实施例中采用可与PACS无缝衔接的DICOM3.0接口获取DICOM医学图像以及病人信息。DICOM图像区可以包括常用的方向的视图，例如横断面视图、矢状面视图、冠状面视图等。

优选地，本发明的多媒体病历报告还包括三维模型区，用于显示通过对DICOM医学图像重建所得的三维模型以及三维模型的相关数据信息。该三维模型可以是体渲染模型，也可以是面渲染模型。本实施例中为了使三维模型的立体效果更佳，具有较好的真实感，还对体渲染模型和面渲染模型进行了光照计算。通过设置三维模型区，并在其内显示病人目标部位的三维模型，使得医生能够更为直观、准确的察看病灶点。本实施例的多媒体病历报告的显示方法扩展了当前普通文本电子报告不具备的功能及信息，其可以完整的记录一个病例的情况，医生只需要查看一份报告，就可以完整的了解病人整个检查的数据，对于病人病情的诊断能够更加有效。且更有利于医院整理归档病人的数据,不会出现病人基本信息和对应的影像不匹配或缺失的情况。另外，本实施例中的多媒体病历报告的显示方法能够提供普通电子报告或传统的纸质报告不能提供的交互方式，为进一步地VR手术设计、VR手术模拟提供基础支持。

进一步地，在用于显示多媒体病历报告时，可采用以下方式中的至少一种获取多媒体病历报告：

a、从多媒体病历报告源处，接收多媒体病历报告，例如自本地生成多媒体病历报告的设备中获取，或是自医院的多媒体病历报告数据库(如医院的PACS)中获取后再在显示设备上进行显示；

b、本地生成多媒体病历报告，即在PC上生成后直接进行显示。当然，PC也可仅用于显示该报告，即，PC自PACS或多媒体病历报告数据库中获取该报告。

其中生成多媒体病历报告的步骤具体包括：

设置多媒体病历报告的框架，使之包括文本区、DICOM图像区和三维模型区；具体可采用HTML5实现报告的框架，用Javascript实现界面及交互操作；

获取病人信息，设置其用于显示在文本区中；当文本区包括多个不同区域时，对病人信息进行划分，并将同种类信息集中显示在同一区域内；

获取病人目标部位的DICOM医学图像，设置其用于显示在DICOM图像区中，优选地，可以选取一些DICOM医学图像以供显示在DICOM图像区中；

根据DICOM医学图像生成目标部位的三维模型，并设置其用于显示在三维模型区中，并同时显示三维模型的相关数据信息，例如坐标、图像亮度等参数。

图3为本发明中的多媒体病历报告的一种显示界面。结合图3所示，DICOM医学图像为系列图像，包括多张，每张图像均具有影像序列号。本实施例中的多张DICOM图像直线型罗列设置，为了方便获取当前显示的DICOM医学图像的信息，DICOM图像区还同时对应显示每张图像的影像序列号以及所显示的影像的三维坐标，方便医生在三维模型中查找与该影像对应处。另外，在显示DICOM医学图像时，显示系统应该根据不同目标部位，如器官/组织的CT值范围，调取不同的窗位/窗宽预设值，使显示的影像达到最佳显示效果。

进一步地，在进行人机交互时，医生采用输入交互操作的方式根据显示设备的种类而不同，如交互操作指令的输入方式在显示设备为普通计算机时通过鼠标实现，在显示设备为触控移动设备时通过手势实现；而在显示设备为配备触摸屏的计算机时可采用鼠标或手势中的任一种来实现。

具体地，输入的交互操作指令不唯一，可包括多种。现以以下指令为例进行说明：

选择输入切换正常模式指令，对应的多媒体病历报告的显示内容调整的过程为将DICOM医学图像或三维图形切换为正常显示模式(DICOM医学图像有两种显示方式，正常模式和最大化模式)。

选择输入切换最大化模式指令，对应的多媒体病历报告的显示内容调整的过程为将选取的DICOM医学图像显示在三维视图区，使其实现影像最大化显示。也就是最大化模式下为当前DICOM医学图像最大化，DICOM医学图像显示在三维视图区，三维视图区的三维模型显示到对应的医学图像原来的位置。具体应用时，正常模式与最大化模式之间的切换可以通过在DICOM医学图像上设置一个切换按钮实现。

选择输入图像位置调取指令，对应的多媒体病历报告的显示内容调整的过程为调取DICOM图像区不同位置的医学图像。

选择输入图像位置调整指令，对应的多媒体病历报告的显示内容调整的过程为将目标DICOM医学图像(即,所选取的DICOM医学图像)放置在视图中的指定位置处。

选择输入图像大小调整指令，对应的多媒体病历报告的显示内容调整的过程为调节DICOM医学图像或三维图形的尺寸，如放大或缩小模型、调节当前显示的DICOM医学图像的窗宽或窗位。

选择输入旋转指令时，对应的多媒体病历报告的显示内容调整的过程为任意角度旋转三维模型，从而可以从任意角度查看三维模型。

选择输入影像十字准线开启指令，对应的多媒体病历报告的显示内容调整的过程为建立影像十字准线，并使影像十字准线的横截面、矢状面、冠状面三个方位截面分别对应显示选取的目标DICOM医学图像。图4为本发明中的多媒体病历报告的另一种显示界面中的三维模型区，其中打开了影像十字准线，显示了二维影像。结合图4所示，图中的影像十字准线与三维模型的坐标系对应，其三个截面分别显示三维模型中与该各截面对应部分的DICOM医学图像。

由于受到显示屏幕的限制，为了医生能够较好的观察DICOM医学图像，本实施例定义当显示设备为触控移动设备时，在显示目标DICOM医学图像时自动进入最大化模式。即，切换正常模式指令和切换最大化模式指令仅在显示设备为计算机时执行。

进一步地，当交互操作指令通过手势来实现时，输入的手势所被赋予的定义不唯一，例如当显示设备为触控移动设备或具有触摸屏的计算机时，本实施例定义：

单指在DICOM图像区显示的影像(以下简称影像)上左右拖动时系统调整当前显示影像的窗宽；

单指在影像上上下拖动时系统调整当前显示影像的窗位；

双指捏放操作时为缩放目标影像或三维模型在视图中的大小(即，双指距离缩小，影像或模型缩小；双指距离变大，影像或模型变大)；

双指拖动影像调整影像在视图中的位置；

单指拖动DICOM图像区的滑竿时为调整影像位置以调取不同位置的影像；

单指在三维视图区上滑动时为拖动模型并绕模型中心旋转。

当交互操作指令通过鼠标来实现时，即显示设备为计算机时，本实施例定义：

在DICOM图像区滚动鼠标中键，多媒体病历报告的显示内容进行调整的过程为选择调取目标DICOM医学图像；

在DICOM医学图像上滚动鼠标中键，多媒体病历报告的显示内容进行调整的过程为放大或缩小图像；

在三维模型上滚动鼠标中键，多媒体病历报告的显示内容进行调整的过程为放大或缩小三维模型。

在DICOM医学图像边缘点击鼠标的左键或右键并左右拖动鼠标，多媒体病历报告的显示内容进行调整的过程为调整当前显示的目标DICOM医学图像的窗宽。

在DICOM医学图像边缘点击鼠标的左或右键并上下拖动鼠标，多媒体病历报告的显示内容进行调整的过程为调整当前显示的目标DICOM医学图像的窗位。

在DICOM医学图像上点击鼠标的左键或右键并拖动鼠标，多媒体病历报告的显示内容进行调整的过程为调整DICOM医学图像的显示位置。

在三维模型上点击鼠标的左或右键并拖动鼠标，多媒体病历报告的显示内容进行调整的过程为将三维模型绕中心旋转。

当欲打开影像十字准线时，只需将鼠标对准开启按钮单击鼠标左键即可开启影像十字准线功能。

优选地，当在移动设备上显示多媒体病历报告时，交互操作指令还包括切换立体显示模式指令。对应该指令，多媒体病历报告的显示内容被调整的过程为调整三维模型的显示形式，使其与虚拟现实显示设备能够配合联用，形成3D立体图像。本实施例中该虚拟现实显示设备为VR眼镜，不同的VR眼镜的工作方式不同，因此与其适配的三维模型的调整形式也不唯一，具体视实际情况而定。为适配本实施例中的VR眼镜，对多媒体病历报告及三维模型的调整为将三维模型区分为左右两个图区，调整分别显示在该两个图区内的三维模型，使两个图区内的三维模型分别对应符合左眼与右眼的视觉特点。这样，医生便可通过VR眼镜观察三维模型，使三维模型的立体效果更佳。当医生根据立体显示的三维模型进行手术时，可通过手柄进行操作，不同手柄的操作定义方式不同。为了能够完整观察模型，选用的手柄优选至少需要支持两种不同的操作定义，如在旋转模型以及缩放模型。其中，由于受到移动设备的屏幕尺寸的限制，为了清楚显示三维模型，该模式下仅显示三维模型区。

以下以两个具体实施例为例进行说明：

实施例一：显示设备为计算机：

1、DICOM医学图像区

1.1 DICOM显示方式

DICOM医学图像有两种显示方式，正常模式和最大化显示模式。最大化显示模式下目标DICOM医学图像以最大化形式显示在三维模型区，而三维模型区的三维模型显示到目标DICOM医学图像原来的位置。该两种显示模式之间可以通过在DICOM医学图像上设置切换按钮进行切换，即,每一个DICOM医学图像都设置一个切换按钮。

2.鼠标交互方式

2.1正常模式

在DICOM医学图像边缘点击鼠标的左键或右键并左右拖动鼠标，调整的过程为调整当前显示的目标DICOM医学图像的窗宽。

在DICOM图像区的滑竿上点击鼠标的左键或右键并拖动鼠标，多媒体病历报告的显示内容进行调整的过程为调取不同位置的目标DICOM医学图像以显示。

2.2最大化显示模式

在DICOM医学图像上点击鼠标的左或右键并拖动鼠标，多媒体病历报告的显示内容进行调整的过程为调整DICOM医学图像在视图中的显示位置。

3三维模型

在三维模型上点击鼠标的左键或右键并拖动鼠标滑动,多媒体病历报告的显示内容进行调整的过程为三维模型绕其中心旋转。通过鼠标的拖动可以从任意角度查看三维模型。

4影像十字准线

鼠标左键单击影像十字准线的开启按钮，影像十字准线功能开启。其中，三维模型区的影像十字准线的坐标系应该与显示的三维模型的坐标系一致。当通过2.1中的方式调整显示的DICOM图像的位置时，影像十字准线位置也应该进行相应的调整。当通过2.2中的方式调整三维模型的角度时，影像十字准线的角度也应该随模型进行相应调整。

实施例二：显示设备为移动设备

图5为本发明中的多媒体病历报告的又一种显示界面。如图5所示，根据移动设备的屏幕特点，为了能够更好的查看影像，因此当欲查看目标DICOM医学图像或三维模型时，DICOM图像区和三维模型区在屏幕上以最大化显示模式显示。根据移动设备的特点，交互方式不同，定义如下。

1.DICOM医学图像

单指在影像上上下拖动时系统调整当前显示影像的窗位；

双指捏放操作缩放影像在视图中的大小。即，双指距离缩小，影像图片尺寸缩小；双指距离变大，影像图片尺寸变大。

双指拖动影像调整影像在视图中的位置；

单指拖动DICOM图像区的滑竿时为调整影像位置以调取不同位置的影像。

2.三维模型

双指捏放操作控释三维模型在视图中的大小。即，双指距离缩小，模型尺寸缩小；双指距离变大，模型尺寸变大；

单指在三维视图区上滑动时为拖动模型并绕模型中心旋转。

3.影像十字准线

鼠标左键单击影像十字准线的开启按钮，影像十字准线功能开启。其中，三维模型区的影像十字准线的坐标系应该与显示的三维模型的坐标系一致。当通过1中的方式调整显示的DICOM图像的位置时，影像十字准线位置也应该进行相应的调整。当通过2中的方式调整三维模型的角度时，影像十字准线的角度也应该随模型进行相应调整。

4.立体显示模式

手指点击切换按钮进入多媒体病历报告的立体模式。立体模式下仅显示三维视图区。外科医生戴上VR眼镜可以更好的观察模型，进行手术设计。当医生根据立体显示的三维模型进行手术时，可通过手柄进行操作，不同手柄的操作定义方式不同。为了能够完整观察模型，选用的手柄优选至少需要支持两种不同的操作定义，如在旋转模型以及缩放模型。

本发明的实施例同时提供一种多媒体病历报告的显示设备。该多媒体病历报告即为上述的多媒体病历报告，其同样包括文本区、DICOM图像区和三维模型区。

图6为本发明的多媒体病历报告的显示设备的结构示意图。如图6所示，根据一种本发明的实施例的多媒体病历报告的显示设备包括：

交互操作获取模块1，用于获取用户发出的交互操作指令；

交互操作执行模块2，用于根据交互操作指令，对多媒体病历报告的显示内容进行相应调整，也就是执行交互操作指令；

显示模块8，其用于显示调整后的多媒体病历报告；以及

如下模块中的至少一种：

接收模块3，用于从多媒体病历报告源处，接收多媒体病历报告；以及

生成模块4，用于本地生成多媒体病历报告。即，接收模块3和生成模块4均用于得到多媒体病历报告以供显示。其中，多媒体病历报告源包括以下中的至少一种：本地生成多媒体病历报告的设备；存储有多媒体病历报告的医院数据库。

进一步地，生成模块4包括：

获取模块5，用于获取病人的病例信息和病人目标部位的DICOM医学图像；

重建模块6，用于从获取模块5接收病人目标部位的DICOM医学图像，据此重建生成目标部位的三维模型；

设置模块7，用于设置多媒体病历报告的框架，使之包括文本区、DICOM图像区和三维模型区，从获取模块5和重建模块6分别接收病人的相关信息、病人目标部位的DICOM医学图像和三维模型，并设置其使之分别用于对应显示在文本区、DICOM图像区和三维模型区中。

进一步地，在进行人机交互时，医生采用输入交互操作的方式根据显示设备的种类而不同，如交互操作指令的输入方式在显示设备为普通计算机时通过鼠标实现，在显示设备为触控移动设备时通过手势实现；而在显示设备为配备触摸屏的计算机时可采用鼠标或手势中的任一种来实现。具体获取的交互操作指令不唯一，本实施例中的交互操作指令与前述的交互操作指令相同，且同样在显示设备为移动设备时还包括切换立体模式指令，具体不再赘述。

同样地，由于受到显示屏幕的限制，本实施例定义当显示设备为移动设备时，在显示目标DICOM医学图像时自动进入最大化模式。

以上实施例仅为本发明的示例性实施例，不用于限制本发明，本发明的保护范围由权利要求书限定。本领域技术人员可以在本发明的实质和保护范围内，对本发明做出各种修改或等同替换，这种修改或等同替换也应视为落在本发明的保护范围内。

Claims

1.一种多媒体病历报告的显示方法，其特征在于，所述方法包括：

获取用户发出的交互操作指令；以及

其中，所述多媒体病历报告包括：

文本区，用于显示病人的信息；

DICOM图像区，用于显示所获取的病人目标部位的DICOM医学图像及所显示的DICOM医学图像的三维坐标，DICOM医学图像可选取以供显示在DICOM图像区中；以及

三维模型区，用于显示通过对所述DICOM医学图像重建所得的三维模型以及相关的模型信息，

其中，所述交互操作指令包括影像十字准线开启指令，所述调整包括：

在所述三维模型区中开启影像十字准线，并使其横截面、矢状面、冠状面三个方位截面分别对应显示所选取的DICOM医学图像，所述影像十字准线的三维坐标系与所述三维模型的三维坐标系对应，且其三个截面分别显示所述三维模型中与该各截面对应部分的DICOM医学图像。

2.根据权利要求1所述的显示方法，其特征在于，所述显示方法通过如下方式的至少一种来得到所述多媒体病历报告供显示：

从多媒体病历报告源处，接收所述多媒体病历报告；以及

本地生成所述多媒体病历报告。

3.根据权利要求2所述的显示方法，其特征在于，所述生成所述多媒体病历报告的步骤包括：

获取病人的信息，设置其用于显示在所述文本区中；

4.根据权利要求1-3中的任何一项所述的显示方法，其特征在于，所述交互操作指令包括以下中的至少一种：切换正常模式指令、切换最大化模式指令、图像调取位置调整指令、图像位置调整指令、图像大小调整指令、旋转指令、影像十字准线开启指令，根据所述交互操作指令对所述多媒体病历报告的显示内容进行调整的过程包括以下中的相应至少一种：将DICOM医学图像或三维图形切换为正常显示模式、将DICOM医学图像或三维图形切换为最大化显示模式、调节DICOM医学图像或三维图形的尺寸、任意角度旋转三维模型、调节DICOM医学图像或三维图形的显示位置、对调目标DICOM医学图像与三维模型的显示位置以及显示影像十字准线，其中，所述影像十字准线的三个方位的截面分别对应显示预设的目标DICOM医学影像。

5.根据权利要求2所述的显示方法，其特征在于，在移动设备上显示时，所述交互操作指令包括切换立体显示模式指令；根据所述切换立体显示模式指令对所述多媒体病历报告的显示进行调整的过程为将三维模型调整为能够与虚拟现实显示设备配合使用以形成立体图像的形式。

6.根据权利要求4所述的显示方法，其特征在于，所述交互操作指令在显示设备为普通计算机时通过鼠标实现，在所述显示设备为触控移动设备时通过手势实现，而在所述显示设备为配备触摸屏的计算机时根据用户的选择通过鼠标或手势来实现。

7.根据权利要求6所述的显示方法，其特征在于，在所述交互操作指令通过手势来实现时定义：

双指DICOM医学图像上拖动时系统调整图像位置；

单指在三维视图区上滑动时三维模型绕其中心旋转。

8.根据权利要求2所述的显示方法，其特征在于，所述多媒体病历报告源包括以下中的至少一种：本地生成所述多媒体病历报告的设备；存储有所述多媒体病历报告的医院数据库。

9.一种多媒体病历报告的显示设备，其特征在于，所述显示设备包括：

交互操作获取模块，用于获取用户发出的交互操作指令；

显示模块，用于显示调整好的多媒体病历报告；

其中，所述多媒体病历报告包括：

文本区，用于显示病人的信息；

三维模型区，用于显示通过对所述DICOM医学图像重建所得的三维模型，

10.根据权利要求9所述的多媒体病历报告的显示设备，其特征在于，所述显示设备包括如下模块中的至少一种：

生成模块，用于本地生成所述多媒体病历报告。

11.根据权利要求10所述的多媒体病历报告的显示设备，其特征在于，所述生成模块包括：

12.根据权利要求9至11中的任何一项所述的多媒体病历报告的显示设备，其特征在于，所述交互操作指令包括以下中的至少一种：切换正常模式指令、切换最大化模式指令、图像调取位置调整指令、图像位置调整指令、图像大小调整指令、旋转指令、影像十字准线开启指令，根据所述交互操作指令对所述多媒体病历报告的显示进行调整的过程包括以下中的相应至少一种：将DICOM医学图像或三维图形切换为正常显示模式、将DICOM医学图像或三维图形切换为最大化显示模式、调节DICOM医学图像或三维图形的尺寸、任意角度旋转三维模型、调节DICOM医学图像或三维图形的显示位置、对调目标DICOM医学图像与三维模型的显示位置以及显示影像十字准线，其中,所述影像十字准线的三个方位的截面分别对应显示预设置的目标DICOM医学影像。

13.根据权利要求10所述的多媒体病历报告的显示设备，其特征在于，所述显示设备为移动设备时，所述交互操作指令包括切换立体显示模式指令，根据所述切换立体显示模式指令对所述多媒体病历报告的显示进行调整的过程为将三维模型调整为能够与虚拟现实显示设备配合使用以形成立体图像的形式。

14.根据权利要求12所述的多媒体病历报告的显示设备，其特征在于，在所述显示设备为普通计算机时，所述交互操作获取模块为鼠标；在所述设备为触控移动设备时，所述交互操作获取模块为触摸屏；而在所述设备为配备触摸屏的计算机时，所述交互操作获取模块根据用户的选择采用鼠标或触摸屏。

15.根据权利要求14所述的多媒体病历报告的显示设备，其特征在于，在所述交互操作获取模块为鼠标时，所述交互操作至少包括以下一种：滚动所述鼠标中键、点击所述鼠标的左、右键并左右拖动所述鼠标、点击所述鼠标的左、右键并上下拖动所述鼠标，交互操作执行模块根据所述交互操作对所述多媒体病历报告的显示内容进行调整的过程包括以下中的相应至少一种：选择调取目标DICOM医学图像、调整当前显示的目标DICOM医学图像的窗宽、调整当前显示的目标DICOM医学图像的窗位、调整所述三维模型的尺寸、调整所述三维模型在所述三维模型区中的显示位置。

16.根据权利要求10所述的多媒体病历报告的显示设备，其特征在于，所述多媒体病历报告源包括以下中的至少一种：本地生成所述多媒体病历报告的设备；存储有所述多媒体病历报告的医院数据库。