CN103839285B - 用于显示医学图像的方法和设备 - Google Patents
用于显示医学图像的方法和设备 Download PDFInfo
- Publication number
- CN103839285B CN103839285B CN201310590549.6A CN201310590549A CN103839285B CN 103839285 B CN103839285 B CN 103839285B CN 201310590549 A CN201310590549 A CN 201310590549A CN 103839285 B CN103839285 B CN 103839285B
- Authority
- CN
- China
- Prior art keywords
- stereo
- pictures
- image
- picture
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000009877 rendering Methods 0.000 claims description 7
- 238000002059 diagnostic imaging Methods 0.000 claims description 3
- 210000003754 fetus Anatomy 0.000 description 13
- 230000008447 perception Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000002604 ultrasonography Methods 0.000 description 4
- 238000003860 storage Methods 0.000 description 3
- 241000406668 Loxodonta cyclotis Species 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 1
- 210000000038 chest Anatomy 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 210000002216 heart Anatomy 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000005610 quantum mechanics Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 210000004291 uterus Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/022—Stereoscopic imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/523—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/06—Ray-tracing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/037—Emission tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
- A61B6/469—Arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0866—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving foetal diagnosis; pre-natal or peri-natal diagnosis of the baby
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- High Energy & Nuclear Physics (AREA)
- Optics & Photonics (AREA)
- Computer Graphics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Pulmonology (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Image Generation (AREA)
Abstract
提供一种用于显示医学图像的方法和设备。所述设备包括:数据获得单元,用于获得对象的体数据;图像产生单元,用于从对象的体数据中产生医学图像,所述医学图像包括至少一个三维(3D)立体图像和基于在3D立体图像中示出的对象的方向、梯度和深度中的至少一个产生的至少一个2D立体图像;显示单元,用于显示产生的医学图像。
Description
本申请要求于2012年11月20日提交到韩国知识产权局的第10-2012-0131954号韩国专利申请的利益,其公开通过引用全部合并于此。
技术领域
本发明涉及一种用于显示医学图像的方法和设备,更具体地讲,涉及一种用于通过按照立体图像的形式提供医学诊断图像来显示立体医学图像使得用户具有深度感知的方法和设备。
背景技术
由于无创和无损诊断特征,使用超声波的超声诊断设备在用于获得关于目标对象的内部的信息的医学领域中被广泛使用。由于在没有侵入人体组织的观察技术(诸如外科手术)的情况下,超声诊断设备可实时地向医师提供人体的内部组织的图像,因此超声诊断设备在医学领域中是非常重要的。超声诊断设备被用来产生目标对象的内部的形状的二维(2D)或3D诊断图像。
超声诊断设备一般使用由压电材料构成的转换元件来发送和接收超声信号。超声诊断设备通过电激发转换元件来产生将被发送到人体的超声信号并将超声信号发送到人体。被发送到人体的超声信号从人体组织的边缘反射,将从人体组织的边缘反射到转换元件的超声回波信号转换成高频信号。超声诊断设备通过放大并处理转换后的高频信号来产生组织的超声图像。
然而,仅显示指示目标对象的截面的2D超声图像的超声诊断设备无法向用户提供逼真的超声图像。
发明内容
本发明提供一种允许用户具有深度感知的立体图像。
根据本发明的一方面,提供一种显示医学图像的方法,所述方法包括:从对象的体数据中产生医学图像,所述医学图像包括至少一个三维(3D)立体图像和基于在3D立体图像中示出的对象的方向、梯度和深度中的至少一个的至少一个2D立体图像;显示产生的医学图像。产生医学图像的步骤可包括:基于与3D立体图像中的截面相应的平面的方向、梯度和深度中的至少一个来产生2D立体图像,其中,2D立体图像指示对象的至少一个截面。
所述方法还可包括:接收用户的输入,其中,产生医学图像的步骤包括:产生与3D立体图像和2D立体图像中的至少一个相应的非立体图像;显示产生的医学图像的步骤包括:基于用户的输入,显示立体图像来取代正被显示的非立体图像,或者显示非立体图像来取代正被显示的立体图像。
产生医学图像的步骤可包括:通过在对象所在的虚拟空间中设置虚拟相机并改变从虚拟相机到对象的光线投射的方向来渲染多个3D立体图像。
产生医学图像的步骤可包括:产生包括对象的非立体图像的医学图像。显示产生的医学图像的步骤可包括:根据用户的输入来确定将被显示的图像的类型和数量。产生医学图像的步骤可包括:产生多个3D立体图像,其中,在所述多个3D立体图像中示出的对象的方向、梯度和深度中的至少一个在所述多个3D立体图像中是不同的;显示产生的医学图像的步骤可包括:基于用户的输入显示多个3D立体图像中的至少一个。
2D立体图像可包括基于用户的输入从3D立体图像中选择的对象的截面的立体图像。2D立体图像可包括对象的彼此正交的三个截面的立体图像或对象的曲线形的截面的立体图像。
根据本发明的另一方面,提供一种用于显示医学图像的设备,所述设备包括:数据获得单元,用于获得对象的体数据;图像产生单元,用于从对象的体数据中产生医学图像,所述医学图像包括至少一个三维(3D)立体图像和基于在3D立体图像中示出的对象的方向、梯度和深度中的至少一个产生的至少一个2D立体图像;显示单元,用于显示产生的医学图像。图像产生单元可基于与3D立体图像中的截面相应的平面的方向、梯度和深度中的至少一个来产生2D立体图像,其中,2D立体图像指示对象的至少一个截面。
图像产生单元可基于与3D立体图像中的截面相应的平面的方向、梯度和深度中的至少一个来产生2D立体图像,其中,2D立体图像指示对象的至少一个截面。
所述设备还可包括:接收单元,用于接收用户的输入,其中,图像产生单元还产生与3D立体图像和2D立体图像中的至少一个相应的非立体图像;显示单元可基于用户的输入,显示立体图像来取代正被显示的非立体图像,或者显示非立体图像来取代正被显示的立体图像。
图像产生单元可通过在对象所在的虚拟空间中设置虚拟相机并改变从虚拟相机到对象的光线投射的方向来渲染多个3D立体图像。
图像产生单元可产生还包括对象的非立体图像的医学图像。
所述设备还可包括:接收单元,用于接收用户的输入,其中,显示单元根据用户的输入确定将被显示的图像的类型和数量。
图像产生单元可产生多个3D立体图像,其中,在所述多个3D立体图像中示出的对象的方向、梯度和深度中的至少一个在所述多个3D立体图像中是不同的,并且显示单元可基于用户的输入显示所述多个3D立体图像中的至少一个。
所述设备还可包括:接收单元,用于接收用户的输入,其中,图像产生单元产生2D立体图像,其中,所述2D立体图像包括基于用户的输入从3D立体图像中选择的对象的截面的立体图像。
图像产生单元可产生包括对象的彼此正交的三个截面的立体图像的2D立体图像。
图像产生单元可产生包括对象的曲线形的截面的立体图像的2D立体图像。
根据本发明的另一方面,提供一种存储有程序指令的非暂时性计算机可读存储介质,其中,当所述程序指令被计算机执行时,执行所述方法。
附图说明
通过参照附图详细描述本发明的示例性实施例,本发明的以上和其它特征及优点将变得更清楚,其中:
图1是根据本发明的实施例的用于显示医学图像的设备的框图;
图2是示出根据本发明的实施例的显示医学图像的方法的流程图;
图3A至图3C示出根据本发明的实施例而显示的医学图像;
图4示出根据本发明的实施例而显示的医学图像;
图5示出根据本发明的实施例而显示的医学图像;
图6示出根据本发明的实施例的基于用户的输入而改变的显示图像;以及
图7A和图7B是根据本发明的实施例的用于描述显示医学图像的方法的概念图。
具体实施方式
虽然在考虑在本发明中的功能的情况下将当前尽可能广泛使用的一般术语选择作为在本发明中使用的术语,但是,所述术语可根据本领域普通技术人员的意图、判例或新技术的出现而变化。另外,在特定情况下,可使用由申请人特意选择的术语,并且在这种情况下,将在本发明的相应描述中公开所述术语的含义。因此,不应该通过在本发明中使用的术语的简单名称而应该通过所述术语的含义和在本发明中的内容来限定所述术语。
在说明书中,当特定部件“包括”特定组件时,这表明所述部件还可包括另一组件而不是排除另一组件,除非存在不同的公开。另外,在说明书中公开的术语(诸如“…单元”等)指示用于处理至少一个功能或操作的单元,并且这可由硬件、软件或硬件和软件的组合来实现。
如在这里所使用的,当诸如“…中的至少一个”的表达位于一列元件之后时,所述表达修饰整列元件而不修饰所述列中的单个元件。
在说明书中,术语“对象”可指示人体的一部分。例如,对象可包括器官(诸如肝脏、心脏、子宫、胸部、腹部等)、胎儿等,或者可包括人体的任何一个截面。在说明书中,术语“用户”可以是作为医学专家的医师、护士、医疗病理学家、医学图像专家等,但不限于此。另外,在本发明中的术语“立体图像”指示通过使用两眼之间的视差允许观察人员具有深度感知的立方体图像并且包括静止图像和视频图像。用于实现立体图像的技术包括所有商业化的立体图像技术并且可包括将在未来实现的任何其它立体图像技术。
根据本发明的实施例的用于显示医学图像的设备不仅可被广泛应用于超声图像,而且也可被应用于用来通过从投射到人体组织的信号恢复人体组织的截面和体数据来显示用于疾病诊断的医学图像的磁共振成像(MRI)装置、计算机断层扫描(CT)装置、正电子发射断层扫描(PET)装置等。
图1是根据本发明的实施例的用于显示医学图像的设备100的框图。
参照图1,根据本发明的实施例的设备100可包括数据获得单元110、图像产生单元120和显示单元130。现在将逐一描述示出的组件。
数据获得单元110可获得对象的体数据。术语“体数据”可指示包括空间信息和临床信息的数据,诸如对象的解剖形态等。例如,超声系统向对象发送超声信号发送,接收由对象反射的超声信号(即,超声回波信号)并通过使用接收到的超声回波信号产生体数据。数据获得单元110可包括用于发送和接收超声信号的探测器(未示出)以及用于执行超声信号的发送波束形成和接收波束形成的波束形成器(未示出)。另外,数据获得单元110可从存储器(未示出)获得在存储器中存储的对象的体数据。
图像产生单元120可从由数据获得单元110获得的体数据产生包括至少一个三维(3D)立体图像和至少一个2D立体图像的医学图像。可基于在3D立体图像中示出的对象的方向、梯度和深度中的至少一个来产生2D立体图像。
显示单元130可显示由图像产生单元120产生的医学图像。因此,用户可从包括对象的至少一个3D立体图像和至少一个2D立体图像的医学图像中容易察觉在对象的组成部分之间的弯曲度、相对位置差、相对方向等。
根据本发明的实施例的设备100还可包括控制单元140。控制单元140一般控制设备100的整体操作。例如,控制单元140可通过执行在存储器中存储的程序来整体控制数据获得单元110、图像产生单元120和显示单元130。
现在将参照图2详细描述通过使用在设备100中的组件来显示医学图像的方法。
图2是示出根据本发明的实施例的显示医学图像的方法的流程图。
参照图2,根据本发明的实施例的方法可包括由图1中示出的设备100处理的操作。因此,虽然在下文中被省略,但是在图1中示出的设备100的以上描述应用于图2的方法。
在操作S210,设备100从对象的体数据产生3D立体图像。例如,设备100可通过渲染体数据来产生立体图像。术语“渲染”指示用于显示3D离散采样数据集(诸如体数据)的2D投影图像的技术。渲染体数据的方法包括通过在对象上照射虚拟光束来检测反射光的对象的一部分的光线投射法。为了渲染3D离散采样数据集的2D投影图像,应该限定在对象所在的虚拟空间中的虚拟相机,并且应该限定每个体素的不透明度和色彩。可由图像产生单元120执行操作S210。以下将参照图7A和图7B详细描述产生3D立体图像的方法。
在操作S220,设备100基于在产生的3D立体图像中示出的对象的方向、梯度和深度中的至少一个来产生2D立体图像。可由图像产生单元120执行操作S220。术语“2D立体图像”指示作为对象的2D图像但通过按照立体方法显示而允许用户具有深度感知的图像。例如,产生的2D立体图像可显示对象的至少一个截面。也就是说,2D立体图像可以是按照立体方法显示对象的一个截面使得用户具有深度感知的截面立体图像。另外,图像产生单元120可基于在产生的3D立体图像中示出的对象中的预定截面所在的平面的方向、梯度和深度中的至少一个来产生2D立体图像。在与对象关联的球面坐标系中,术语“方向”、“梯度”和“深度”可分别指示相对z轴的正方向形成的角度、基于z轴相对x轴的正方向形成的角度和距中心点的距离r。
另外,可同时或按照逆序来执行操作S210和操作S220。另外,根据本发明的实施例的方法可产生医学图像,所述医学图像不仅包括对象的立体图像而且包括对象的非立体图像。也就是说,在根据本发明的实施例的方法中显示的医学图像可包括立体图像和非立体图像两者。
在操作S230,设备100显示包括在操作S210和操作S220中产生的3D立体图像和2D立体图像的医学图像。可由显示单元130来执行操作S230。设备100可根据用户的输入来确定将被显示的图像的类型和数量。
现在将参照图3A至图5来描述可在根据本发明的实施例的方法中产生并显示的医学图像。
图3A至图3C示出根据本发明的实施例而显示的医学图像。
如图3A至图3C所示,根据本发明的实施例的由设备100显示的医学图像可包括对象315的3D立体图像310。另外,根据本发明的实施例的由设备100显示的医学图像可包括指示对象315的截面的2D立体图像320、330和340。
作为参考,立体成像方法是通过利用左眼与右眼之间的视差来分别向用户的左眼和右眼提供两个不同的图像的方法,在图3A至图3C中示出的立体图像310、320、330和340将用于描述具有由用户的双眼识别的深度的图像。因此,在图3A至图3C中示出的立体图像310、320、330和340可不同于根据立体成像方法而实际显示的针对左眼的图像和针对右眼的图像的合成图像。
2D立体图像320指示在3D立体图像310中示出的对象315的第一截面312的图像。可基于第一截面312的方向、梯度和深度中的至少一个来产生2D立体图像320。例如,设备100可产生2D立体图像320,使得用户识别2D立体图像320平行于3D立体图像310的第一截面312或者与3D立体图像310的第一截面312具有相同深度感知。
2D立体图像330指示在3D立体图像310中示出的对象315的第二截面313的图像。可基于第二截面313的方向、梯度和深度中的至少一个来产生2D立体图像330。例如,设备100可产生2D立体图像330,使得用户识别2D立体图像330平行于3D立体图像310的第二截面313或者与3D立体图像310的第二截面313具有相同深度感知。
2D立体图像340指示在3D立体图像310中示出的对象315的第三截面314的图像。可基于第三截面314的方向、梯度和深度中的至少一个来产生2D立体图像340。例如,设备100可产生2D立体图像340,使得用户识别2D立体图像340平行于3D立体图像310的第三截面314或者与3D立体图像310的第三截面314具有相同深度感知。
由于基于3D立体图像310产生并显示2D立体图像320、330和340,因此2D立体图像320、330和340可根据3D立体图像310的旋转而按照相同角度旋转。因此,根据本发明,甚至当3D立体图像310旋转时,用户也可容易且直观地感知在2D立体图像320、330和340中示出的截面与在3D立体图像310中示出的对象315之间的相关性(例如,在对象315中的截面的相对位置)。
如图3A至图3C所示,设备100可产生并显示包括对象315的截面的立体图像的2D立体图像320、330和340。
根据本发明的另一实施例,设备100可产生并显示对象315的曲线形的截面的立体图像。当将对象315的曲线形的截面显示为非立体图像时,由于在平面屏幕上显示曲线形的截面,因此用户难以直观地感知截面具有曲面的事实。因此,根据本发明的另一实施例的设备100可基于3D立体图像310的方向、梯度和深度按照曲面的形式显示对象315的曲线形的截面的立体图像,使得用户容易地感知在2D立体图像中示出的对象315的曲线形截面与在3D立体图像中示出的对象315之间的位置关系。
图4示出根据本发明的实施例而显示的医学图像。
图4示出根据本发明的实施例而显示的胎儿的3D立体图像410以及指示关于胎儿的冠状面、横断面和矢状面的三个截面的2D立体图像420、430和440。
根据本发明的实施例,设备100可通过考虑在3D立体图像410中的胎儿来产生2D立体图像420、430和440。
2D立体图像420指示胎儿的冠状面。产生与在3D立体图像410中示出的胎儿的位置或方向相应的2D立体图像420,使得用户识别仿佛用虚线标记的部分位于屏幕内并且用实线标记的部分位于屏幕外。
2D立体图像430指示胎儿的横断面。产生与在3D立体图像410中示出的胎儿的位置或方向相应的2D立体图像430,使得用户识别仿佛用虚线标记的部分位于屏幕内并且用实线标记的部分位于屏幕外。
2D立体图像440指示胎儿的矢状面。用户识别与在3D立体图像410中示出的胎儿的位置或方向相应的2D立体图像440,仿佛2D立体图像440与屏幕位于同一深度。
因此,根据本发明的实施例,用户可容易地感知2D立体图像420、430和440指示胎儿的哪一个截面。另外,当通过基于用户的输入旋转胎儿的3D立体图像410而按照不同角度被查看的胎儿的立方体图像被显示时,2D立体图像420、430和440也可相应于3D立体图像410而旋转,从而允许用户容易地感知在2D立体图像420、430和440与3D立体图像410之间的相关性。
在图4中,已经通过示出胎儿的3D立体图像410以及指示彼此正交的三个截面的2D立体图像420、430和440来描述本发明。然而,本发明的2D立体图像不限于此。在本发明中显示的医学图像可包括一个2D立体图像或多个2D立体图像。另外,当在本发明中显示的医学图像包括多个2D立体图像时,多个2D立体图像可彼此独立并且可指示对象的任意截面或由用户选择的截面。
根据本发明的实施例的设备100可根据用户的输入来确定将被显示的图像的类型和数量。
如图5所示,设备100可产生并显示通过按照多个角度查看对象而获得的3D立体图像501、502和503。可预先在存储器(未示出)中存储或者可由用户新近输入将被显示的图像的类型和数量。例如,设备100可基于由用户输入的在对象的3D立体图像中的3D空间坐标来产生并显示与所述3D空间坐标相应的截面立体图像。因此,根据用户的输入而显示的截面立体图像可以是斜截面图像。
根据本发明的实施例的显示医学图像的方法可包括接收用于改变显示图像的用户的输入并基于用户的输入来改变显示图像。
图6示出根据本发明的实施例的基于用户的输入而改变的显示图像。
参照图6,当设备100正在显示立体图像602时,如果接收到用于命令显示“非立体图像”而不是立体图像602的外部输入,则设备100可显示与立体图像602相应的非立体图像601。当设备100正在显示非立体图像601时,如果接收到用于命令显示“立体图像”而不是非立体图像601的外部输入,则设备100可显示与非立体图像601相应的立体图像602。
根据本发明的实施例,设备100可基于用户的输入显示非立体图像以代替在正被显示的医学图像中包括的3D立体图像和2D立体图像中的至少一个图像。反之,设备100可显示立体图像以代替在正被显示的医学图像中包括的3D非立体图像和2D非立体图像中的至少一个图像。
为了设备100从对象的体数据中显示3D立体图像,产生多个图像并将其组合的处理是必需的。
图7A和图7B是根据本发明的实施例的用于描述显示医学图像的方法的概念图。
如图7A所示,为了产生一个3D立体图像,一般通过在两个或多个虚拟相机的视点(point of view)执行渲染来产生两个图像,即左图像和右图像。因此,为了医学成像设备产生按照多个角度查看的对象的图像,应该重复执行渲染操作,并且在这种情况下,由于在完成一个图像获得操作之后直到获得下一个图像之前所耗费的中断时间而导致计算所需的时间增加。
然而,如图7B所示,根据本发明的实施例的设备100可通过划分经由在一个虚拟相机的视点执行渲染而产生的结果来获得多个图像以产生在多个角度查看的对象的图像。也就是说,设备100可通过在对象所在的虚拟空间中设置一个虚拟相机并将光线投射的方向划分为朝向灭点(vanishing point)的前-后方向和背离灭点的后-前方向经由一个光线投射来产生两个图像。
因此,根据本发明的实施例的设备100可减少在完成一个图像获得操作之后到获得下一个图像之前所耗费的中断时间,并且通过限定一个相机模型并获得多个图像来增加在图形处理单元(GPU)计算处理中的计算速度。也就是说,根据本发明的实施例的设备100可通过将在中央处理单元(CPU)中存储的对象的体数据复制到CPU来减少到执行渲染操作之前所耗费的数据复制、初始化和同步时间。
根据本发明的实施例,用于显示医学图像的设备提供允许用户具有深度感知的立体图像,使得用户直观地感知在对象的组成部分之间的弯曲度、相对位置差、相对方向等。
虽然已经参照本发明的示例性实施例具体示出并描述了本发明,但是,本领域的普通技术人员将理解:在不脱离由权利要求限定的本发明的精神和范围的情况下,可在所述示例性实施例中做出在形式和细节上的各种改变。应该仅在描述性意义上考虑所述示例性实施例而不是为了限制的目的。因此,不由本发明的详细描述而是由权利要求来限定本发明的范围,并且在所述范围内的所有差异将被理解为被包括在本发明中。
Claims (13)
1.一种由医学成像设备执行的方法,所述方法包括:
从对象的体数据产生至少一个3D立体图像;
从所述对象的体数据基于在所述至少一个3D立体图像中示出的所述对象的方向、梯度和深度中的至少一个产生至少一个2D立体图像;以及
显示产生的所述至少一个3D立体图像和所述至少一个2D立体图像,
其中,产生所述至少一个3D立体图像的步骤包括:
在所述医学成像设备的一个虚拟相机的视点处对所述对象的体数据执行渲染;
通过对渲染的所述对象的体数据进行划分来产生多个图像;
通过在所述对象所处的虚拟空间中设置所述虚拟相机并改变从所述虚拟相机到所述对象的光线投射的方向来渲染所述多个图像。
2.如权利要求1所述的方法,其中,产生所述至少一个2D立体图像的步骤包括:基于与所述至少一个3D立体图像中的截面相应的平面的方向、梯度和深度中的至少一个来产生所述至少一个2D立体图像,其中,所述至少一个2D立体图像指示所述对象的至少一个截面。
3.如权利要求1所述的方法,还包括:
接收用户的输入;
产生与所述3D立体图像和所述2D立体图像中的至少一个相应的非立体图像,以及
显示产生的所述至少一个3D立体图像和所述至少一个2D立体图像的步骤包括:基于用户的输入,显示立体图像来取代正被显示的非立体图像,或者显示非立体图像来取代正被显示的立体图像。
4.如权利要求1所述的方法,还包括:产生包括对象的非立体图像的医学图像。
5.如权利要求1所述的方法,其中,显示产生的所述至少一个3D立体图像和所述至少一个2D立体图像的步骤包括:根据用户的输入来确定将被显示的图像的类型和数量。
6.如权利要求5所述的方法,其中,产生所述至少一个3D立体图像的步骤包括:产生多个3D立体图像,其中,在所述多个3D立体图像中示出的对象的方向、梯度和深度中的至少一个在所述多个3D立体图像中是不同的,以及
显示产生的所述至少一个3D立体图像的步骤包括:基于用户的输入来显示所述多个3D立体图像。
7.如权利要求1所述的方法,其中,所述至少一个2D立体图像包括基于用户的输入从所述至少一个3D立体图像中选择的对象的截面的立体图像。
8.如权利要求1所述的方法,其中,所述至少一个2D立体图像包括对象的彼此正交的三个截面的立体图像。
9.如权利要求1所述的方法,其中,所述至少一个2D立体图像包括对象的曲线形的截面的立体图像。
10.一种用于显示医学图像的设备,所述设备包括:
数据获得单元,用于获得对象的体数据;
图像产生单元,用于从对象的体数据产生至少一个3D立体图像,并且从所述对象的体数据基于在所述至少一个3D立体图像中示出的所述对象的方向、梯度和深度中的至少一个产生至少一个2D立体图像;以及
显示单元,用于显示产生的所述至少一个3D立体图像和所述至少一个2D立体图像,
其中,所述图像产生单元通过以下步骤对所述至少一个3D立体图像执行渲染:
在所述设备的一个虚拟相机的视点处对所述对象的体数据执行渲染;
通过对渲染的所述对象的体数据进行划分来产生多个图像;
通过在所述对象所处的虚拟空间中设置所述虚拟相机并改变从所述虚拟相机到所述对象的光线投射的方向来渲染多个3D立体图像。
11.如权利要求10所述的设备,其中,图像产生单元基于与所述至少一个3D立体图像中的截面相应的平面的方向、梯度和深度中的至少一个来产生所述至少一个2D立体图像,其中,所述至少一个2D立体图像指示对象的至少一个截面。
12.如权利要求10所述的设备,还包括:接收单元,用于接收用户的输入,
其中,图像产生单元还产生与3D立体图像和2D立体图像中的至少一个相应的非立体图像,以及
显示单元基于用户的输入,显示立体图像来取代正被显示的非立体图像,或者显示非立体图像来取代正被显示的立体图像。
13.如权利要求10所述的设备,还包括:接收单元,用于接收用户的输入,
其中,图像产生单元产生所述至少一个2D立体图像,其中,所述至少一个2D图像包括基于用户的输入从所述至少一个3D立体图像中选择的对象的截面的立体图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120131954A KR101538658B1 (ko) | 2012-11-20 | 2012-11-20 | 의료 영상 표시 방법 및 장치 |
KR10-2012-0131954 | 2012-11-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103839285A CN103839285A (zh) | 2014-06-04 |
CN103839285B true CN103839285B (zh) | 2018-02-16 |
Family
ID=49382206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310590549.6A Active CN103839285B (zh) | 2012-11-20 | 2013-11-20 | 用于显示医学图像的方法和设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9460548B2 (zh) |
EP (1) | EP2732769B1 (zh) |
KR (1) | KR101538658B1 (zh) |
CN (1) | CN103839285B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101852666B1 (ko) * | 2014-10-31 | 2018-06-07 | 한국 한의학 연구원 | 인체 전신의 근육 및 골격 구조 측정 장치 |
KR102002279B1 (ko) * | 2017-04-06 | 2019-07-23 | 한국한의학연구원 | 3차원 안면 진단 장치 |
WO2019045144A1 (ko) * | 2017-08-31 | 2019-03-07 | (주)레벨소프트 | 의료용 항법 장치를 위한 의료 영상 처리 장치 및 의료 영상 처리 방법 |
CN108133512B (zh) * | 2017-12-20 | 2021-08-06 | 肖连祥 | 基于磁共振扫描的胎儿体表结构可视化三维成像方法 |
CN110464379B (zh) * | 2018-05-11 | 2022-10-11 | 深圳市理邦精密仪器股份有限公司 | 一种胎儿头围测量方法、装置及终端设备 |
US11126330B2 (en) | 2018-10-29 | 2021-09-21 | Autodesk, Inc. | Shaped-based techniques for exploring design spaces |
US11741662B2 (en) | 2018-10-29 | 2023-08-29 | Autodesk, Inc. | Shaped-based techniques for exploring design spaces |
US11380045B2 (en) | 2018-10-29 | 2022-07-05 | Autodesk, Inc. | Shaped-based techniques for exploring design spaces |
WO2021024827A1 (ja) * | 2019-08-08 | 2021-02-11 | ソニー株式会社 | 手術画像表示システム、画像処理装置、及び画像処理方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1810212A (zh) * | 2005-01-24 | 2006-08-02 | 美国西门子医疗解决公司 | 立体三维或四维超声成像 |
CN102208115A (zh) * | 2010-03-29 | 2011-10-05 | 富士胶片株式会社 | 基于三维医学图像而生成立体视图的技术 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100439756B1 (ko) * | 2002-01-09 | 2004-07-12 | 주식회사 인피니트테크놀로지 | 3차원 가상내시경 화면 표시장치 및 그 방법 |
JP3905419B2 (ja) * | 2002-05-10 | 2007-04-18 | オリンパス株式会社 | 超音波画像処理装置 |
GB2395880B (en) * | 2002-11-27 | 2005-02-02 | Voxar Ltd | Curved multi-planar reformatting of three-dimensional volume data sets |
JP3802508B2 (ja) * | 2003-04-21 | 2006-07-26 | アロカ株式会社 | 超音波診断装置 |
US7349563B2 (en) * | 2003-06-25 | 2008-03-25 | Siemens Medical Solutions Usa, Inc. | System and method for polyp visualization |
EP1523939B1 (en) * | 2003-10-14 | 2012-03-07 | Olympus Corporation | Ultrasonic diagnostic apparatus |
KR100751852B1 (ko) * | 2003-12-31 | 2007-08-27 | 주식회사 메디슨 | 대상체의 3차원 초음파 데이터를 이용하여 그 단면을디스플레이하는 장치 및 방법 |
US7376903B2 (en) * | 2004-06-29 | 2008-05-20 | Ge Medical Systems Information Technologies | 3D display system and method |
US20060034513A1 (en) * | 2004-07-23 | 2006-02-16 | Siemens Medical Solutions Usa, Inc. | View assistance in three-dimensional ultrasound imaging |
JP4470187B2 (ja) * | 2004-12-03 | 2010-06-02 | 株式会社日立メディコ | 超音波装置、超音波撮像プログラム及び超音波撮像方法 |
JP4297869B2 (ja) * | 2004-12-07 | 2009-07-15 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | 放射線撮影装置 |
WO2008038068A1 (en) * | 2006-09-25 | 2008-04-03 | Nokia Corporation | Supporting a 3d presentation |
KR20080093581A (ko) * | 2007-04-17 | 2008-10-22 | 주식회사 메디슨 | 초음파 영상을 형성하는 초음파 시스템 및 방법 |
US20090147073A1 (en) * | 2007-12-11 | 2009-06-11 | David Getty | Methods and Systems for Stereoscopic Three Dimensional Viewing |
DE102009024571A1 (de) * | 2008-06-11 | 2009-12-24 | Siemens Medical Solutions Usa, Inc. | Verfahren zur Anzeige von vorgerenderten Ergebnissen einer computerunterstützten Diagnose |
US20090310846A1 (en) * | 2008-06-17 | 2009-12-17 | Marc Lemchen | Apparatus and Method for Selectively Generating Graphic Medical Records from Continuous Multiplanar Viewing |
JP5637653B2 (ja) * | 2008-08-18 | 2014-12-10 | 株式会社東芝 | 医用画像処理装置、超音波診断装置、及び医用画像処理プログラム |
US8659597B2 (en) * | 2010-09-27 | 2014-02-25 | Intel Corporation | Multi-view ray tracing using edge detection and shader reuse |
JP5666967B2 (ja) * | 2011-04-08 | 2015-02-12 | 株式会社東芝 | 医用画像処理システム、医用画像処理装置、医用画像診断装置、医用画像処理方法および医用画像処理プログラム |
JP5226887B2 (ja) * | 2011-06-09 | 2013-07-03 | 株式会社東芝 | 画像処理システム及び方法 |
-
2012
- 2012-11-20 KR KR1020120131954A patent/KR101538658B1/ko active IP Right Grant
-
2013
- 2013-10-07 EP EP13187529.6A patent/EP2732769B1/en active Active
- 2013-11-06 US US14/073,312 patent/US9460548B2/en active Active
- 2013-11-20 CN CN201310590549.6A patent/CN103839285B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1810212A (zh) * | 2005-01-24 | 2006-08-02 | 美国西门子医疗解决公司 | 立体三维或四维超声成像 |
CN102208115A (zh) * | 2010-03-29 | 2011-10-05 | 富士胶片株式会社 | 基于三维医学图像而生成立体视图的技术 |
Also Published As
Publication number | Publication date |
---|---|
KR20140064533A (ko) | 2014-05-28 |
US20140139518A1 (en) | 2014-05-22 |
CN103839285A (zh) | 2014-06-04 |
EP2732769A1 (en) | 2014-05-21 |
US9460548B2 (en) | 2016-10-04 |
EP2732769B1 (en) | 2019-06-26 |
KR101538658B1 (ko) | 2015-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103839285B (zh) | 用于显示医学图像的方法和设备 | |
US11961193B2 (en) | Method for controlling a display, computer program and mixed reality display device | |
JP5815513B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2000048168A (ja) | 画像表示方法および画像表示装置 | |
WO2013012042A1 (ja) | 画像処理システム、装置、方法及び医用画像診断装置 | |
JP4257218B2 (ja) | 三次元医療画像の立体的な観察のための方法、システム及びコンピュータプログラム | |
JP2015159945A (ja) | 画像表示装置、方法およびプログラム | |
US9224240B2 (en) | Depth-based information layering in medical diagnostic ultrasound | |
US9093013B2 (en) | System, apparatus, and method for image processing and medical image diagnosis apparatus | |
JP6145870B2 (ja) | 画像表示装置および方法、並びにプログラム | |
JP2005521960A5 (zh) | ||
JP2001276066A (ja) | 三次元画像処理装置 | |
US9210397B2 (en) | Image processing system, apparatus, and method | |
JP5498185B2 (ja) | 超音波診断装置及び超音波画像表示プログラム | |
KR20120061843A (ko) | 재구성된 3d 이미지의 인쇄물을 디스플레이하는 방법 및 시스템 | |
JP5808004B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP7022554B2 (ja) | 画像処理装置およびその制御方法、プログラム | |
JP2008067915A (ja) | 医用画像表示装置 | |
JP4010034B2 (ja) | 画像作成装置 | |
JP2023004884A (ja) | 拡張現実のグラフィック表現を表示するための表現装置 | |
KR101635188B1 (ko) | 태아 조형물 프린팅 서비스 시스템 및 방법 | |
JPH10234664A (ja) | 画像処理装置 | |
JP2012231893A (ja) | 医用画像処理装置及びその制御プログラム | |
Bouma et al. | Streaming video-based 3D reconstruction method compatible with existing monoscopic and stereoscopic endoscopy systems | |
CN110660470A (zh) | 后处理和显示三维血管造影图像数据集的方法和呈现装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |