CN103493103A - 图像处理系统和方法 - Google Patents

图像处理系统和方法 Download PDF

Info

Publication number
CN103493103A
CN103493103A CN201280017220.4A CN201280017220A CN103493103A CN 103493103 A CN103493103 A CN 103493103A CN 201280017220 A CN201280017220 A CN 201280017220A CN 103493103 A CN103493103 A CN 103493103A
Authority
CN
China
Prior art keywords
view
data
rotation
processing system
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280017220.4A
Other languages
English (en)
Inventor
F·文策尔
R·特鲁伊
J-P·F·A·M·埃尔梅斯
J·M·登哈德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Priority to CN201910021814.6A priority Critical patent/CN110084876A/zh
Publication of CN103493103A publication Critical patent/CN103493103A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof

Abstract

一种通过显示具有至少三个空间维度的图像数据的视图155以使得用户能够在所述图像数据中进行导航图像处理系统100,所述图像处理系统包括:图像设备110,其包括显示器130和取向传感器120,显示器130用于显示所述图像数据的所述视图,取向传感器120用于测量所述图像设备相对于参考取向的取向以提供旋转数据125,旋转数据125指示所述图像设备的设备旋转;用于在所述图像数据中建立旋转中心的器件140;以及图像处理器150,其用于通过(i)从所述取向传感器接收所述旋转数据、(ii)建立与所述设备旋转相关的视图旋转以及(iii)相对于参考视图根据围绕所述旋转中心的所述视图旋转来建立当前视图,来建立与所述设备旋转相关的所述图像数据的所述视图,以建立所述当前视图。

Description

图像处理系统和方法
技术领域
本发明涉及一种通过在具有至少三个空间维度的图像设备的显示器上显示图像数据的视图以使得用户能够在图像数据中进行导航的处理系统和方法。
本发明还涉及一种包括所述图像处理系统的手持设备、工作站和成像装置,以及一种包括用于令处理器系统执行所述方法的指令的计算机程序产品。
在图像观察和图像显示的领域中,存在使得用户能够在具有至少三个空间维度的图像数据中进行导航的多种图像处理系统和方法。例如,工作站可以使放射科医师能够在三维人体结构中进行导航。出于该目的,放射科医师可以使用,例如鼠标、键盘或触摸屏输入,向工作站提供导航命令,并且,作为响应,工作站可以根据导航命令在显示器上示出人体结构的视图。
背景技术
从US2010/0174421中已知,移动计算设备可以装配了显示器和取向传感器,以使得移动计算设备的取向能够用于在显示器上的图像数据中进行导航。
更具体地,US2010/0174421描述了适用于移动计算设备的移动用户接口,并且其使用实空间中的设备位置/取向,以选择显示的内容的部分。所述内容可以是三维图像文件。假定所述内容固定在虚拟空间中,同时移动用户接口如同通过照相机观察地显示所述内容的部分。使用来自运动、距离或位置传感器的数据来确定设备相对于所述内容的相对位置/取向,以选择用于显示的内容的部分。
发明内容
上述移动用户接口的问题在于,它不允许用户以足够方便的方式获得图像数据的期望视图。
如果有一种用于使得用户能够更方便地获得图像数据的期望视图的图像处理系统或方法,将是有利的。
为了更好地解决这个问题,本发明的第一方面提供一种用于通过显示具有至少三个空间维度的图像数据的视图以使得用户能够在图像数据中进行导航的图像处理系统,所述图像处理系统包括:图像设备,其包括显示器和取向传感器,所述显示器用于显示图像数据的视图,所述取向传感器用于测量图像设备相对于参考取向的取向以提供旋转数据,所述旋转数据指示图像设备的设备旋转;用于在图像数据中建立旋转中心的器件;以及图像处理器,其用于通过(i)从取向传感器接收旋转数据、(ii)建立与设备旋转相关的视图旋转以及(iii)根据围绕旋转中心的视图旋转建立相对于参考视图的当前视图,来建立与设备旋转相关的图像数据的视图,以建立当前视图。
在本发明的另一方面中,提供一种包括前述图像处理系统的手持设备。在本发明的又一方面中,提供一种包括前述图像处理系统工作站或成像装置。
在本发明的另一方面中,提供一种通过在图像设备的显示器上显示具有至少三个空间维度的图像数据的视图以使得用户能够在图像数据中进行导航的方法。所述方法包括:测量图像设备相对于参考取向的取向以提供旋转数据,所述旋转数据指示图像设备的设备旋转;在图像数据中建立旋转中心;以及通过(i)从取向传感器接收旋转数据、(ii)建立与设备旋转相关的视图旋转以及(iii)根据围绕旋转中心的视图旋转建立相对于参考视图的当前视图,来建立与设备旋转相关的图像数据的视图,以建立当前视图。
在本发明的另一方面,提供一种包括用于使处理器系统执行前述方法的指令的计算机程序产品。
上述措施使得用户能够在具有至少三个空间维度的图像数据中进行导航。出于该目的,提供一种图像设备,其包括显示图像数据的视图的显示器。视图是图像数据的至少部分的表示。通过示出与图像数据的不同部分相对应的视图,用户可以在图像数据中进行导航。所述图像设备包括显示器,即,显示器是图像设备的部分。图像设备还包括取向传感器,例如,加速度计、指南针等。取向传感器用于测量图像设备相对于参考取向(例如先前的取向)的取向。由于显示器是图像设备的部分,因而图像设备的取向固有地耦合到显示器的取向。通过将图像设备的取向与参考取向进行比较,取向传感器能够确定图像设备的旋转并且因而确定显示器的旋转,即,设备旋转。取向传感器被布置为以旋转数据的形式提供设备旋转。
图像处理系统还包括用于在图像数据中建立旋转中心的器件。旋转中心在图像数据的至少三个空间维度上定义。因此,所述器件在所述至少三个空间维度中建立旋转中心,例如,在旋转中心为点时,以三维向量或坐标的形式建立旋转中心,或者在旋转中心由旋转轴构成时,以二维向量或坐标的形式建立旋转中心。
图像处理系统还包括图像处理器,所述图像处理器用于建立与设备旋转相关的图像数据的视图。出于该目的,图像处理器从取向传感器接收旋转数据。这允许图像处理器建立依赖于设备旋转的视图旋转。之后,所述视图旋转用于建立相对于参考视图围绕旋转中心旋转的视图,由视图旋转规定旋转量。因此,设备旋转用于建立视图旋转,并且视图旋转用于在图像数据中建立围绕旋转中心旋转的新的视图。
本发明部分基于利用图像处理系统获得图像数据的期望视图可能是不方便的这一认识。这一现象的原因是,用户可能需要组合多种导航命令,例如旋转、平移或缩放,以便获得例如图像数据中的点或区域的期望视图。特别地,用户会围绕区域旋转,以获得区域的一个或多个期望视图,即,从不同侧面示出区域。为了获得这样的围绕区域的旋转,用户可能需要顺序地执行多种导航命令,例如,顺序地旋转视图、平移视图、旋转视图、平移视图等。不利地,对于用户来说,这样的旋转不方便并且复杂。
上述措施具有如下的效果,提供了一种用于在图像数据中建立旋转中心的手段,并且图像处理器被配置为通过围绕旋转中心旋转来建立当前视图。此外,用户能够影响旋转的量,即,视图旋转,因为视图旋转是由图像处理器与设备旋转相关建立的。因此,图像处理系统使得用户能够通过旋转图像设备在图像数据中围绕感兴趣区域进行旋转,并且因此不需要例如平移或者以其他方式向图像处理系统提供导航命令。有利地,不需要顺序地旋转视图、平移视图、旋转视图等,以从不同侧面示出所述区域。
任选地,用于建立旋转中心的器件被布置为在图像数据中检测感兴趣区域,并且根据感兴趣区域建立旋转中心。
用于建立旋转中心的器件包括通过自动地在图像数据中检测感兴趣区域的感兴趣区域检测器的功能。通过根据感兴趣区域建立旋转中心,使用感兴趣区域来确定旋转中心。有利地,可以自动地检测感兴趣区域,并且将其用作旋转中心,而不需要用户在图像数据中手动地选择感兴趣区域作为旋转中心。
任选地,图像处理系统还包括用于从用户接收选择数据的用户输入部,并且用于建立旋转中心的器件被布置为根据所述选择数据来建立旋转中心。
通过从用户接收选择数据并且根据选择数据建立旋转中心,来自用户的输入用于确定旋转中心。有利地,用户可以在图像数据中手动地选择感兴趣区域作为旋转中心。有利地,用户可以影响旋转中心的自动选择,所述旋转中心例如从感兴趣区域检测器获得。
任选地,用户输入部被布置为从用户接收导航数据,并且图像处理器被布置为根据导航数据建立图像数据的视图。
通过从用户接收导航数据并且根据导航数据建立图像数据的视图,使用来自用户的输入来建立图像数据的视图。有利地,用户除了通过旋转图像设备之外,还可以通过提供导航数据来在图像数据中导航。
任选地,导航数据包括平移和/或缩放导航命令。因此,用户可以使用旋转、平移和/或缩放在图像数据中进行导航,所述旋转通过用户旋转图像设备来建立,并且所述平移和/或缩放导航命令由用户以导航数据的形式来提供。有利地,用户可以使用例如鼠标、键盘或触摸屏来提供平移和/或缩放导航命令,用于将用户建立平移和/或缩放的方式与旋转分开,因此避免在图像数据中进行导航时用户的困惑或不准确性。
任选地,图像数据包括体积图像数据,并且图像处理器被布置为通过使用包括以下内容的组中的至少一个来所述建立当前视图以生成当前视图组:多平面重组、体积绘制和表面绘制。
通过使用任何上述技术在体积图像数据内建立视图,图像处理系统被配置为使得用户能够在体积图像数据中进行导航。因此,用户可以使用所述图像设备利用通过使用任何上述技术生成的视图围绕体积图像数据中的旋转中心(例如感兴趣区域)进行旋转。
任选地,图像数据包括三维图形数据,并且图像处理器被布置为通过使用图形绘制所述建立当前视图,以生成当前视图。
任选地,所述建立当前视图包括(i)根据视图旋转和旋转中心建立4×4变换矩阵,以及(ii)使用4×4变换矩阵生成当前视图。
4×4变换矩阵是使得能够相对于参考视图根据围绕旋转中心的视图旋转所述建立当前视图的特别有效的方式。
任选地,图像处理器被布置为通过提供设备旋转作为视图旋转来建立与设备旋转相关的视图旋转。
因此,视图旋转等于设备旋转。有利地,将图像设备的旋转转化为当前视图的相同旋转,从而为用户提供围绕旋转中心旋转的直观体验。
任选地,图像处理器被布置为通过将包括以下内容的组中的至少一个应用于设备旋转以获得视图旋转来建立与设备旋转相关的视图旋转:直接映射、增益、偏移、阈值和非线性函数。
通过将函数应用于设备旋转来获得视图旋转。有利地,可以将增益应用于设备旋转,使得小的设备旋转导致相对较大的视图旋转,从而使得用户能够仅利用例如90°的设备旋转获得例如360°的视图旋转。有利地,可以使用非线性函数,其优化旋转图像设备以在图像数据中围绕旋转中心旋转当前视图的用户的体验。
任选地,图像处理系统被布置为从用户接收重置命令,用于重置参考取向和/或参考视图。
用户可以重置参考取向,使得相对于新的参考取向测量设备的取向。另外,用户可以重置参考视图,使得任何后续的视图旋转被应用于新的参考视图。有利地,用户可以将参考取向重置为方便的图像设备取向,例如,当前取向。有利地,用户可以将参考视图重置为所需的图像数据视图,例如,默认视图。
任选地,图像处理系统被布置为从用户接收暂停命令,用于暂停所述建立与设备旋转相关的图像数据的视图。
通过提供暂停命令,用户可以指示图像处理器临时中止所述建立与设备旋转相关的图像数据的视图。有利地,在用户出于另一原因需要临时旋转图像设备而不是在图像数据中进行导航时,他可以使用暂停命令来暂停所述建立与设备旋转相关的图像数据的视图。
任选地,图像设备包括图像处理器和用于建立旋转中心的器件。有利地,可以将图像处理系统的功能全部集成到图像设备中。
本领域技术人员应当意识到,本发明的上述实施例、实现方式和/或方面的两个或更多可以通过任何认为有用的方式进行组合。
本领域技术人员在本发明的基础上可以对图像处理系统、图像设备、手持设备、工作站、成像装置、方法和/或计算机程序产品进行修改或变型,其对应于所描述的图像处理系统的修改或变型。
本领域技术人员应当意识到,可以将所述方法应用于由不同采集模态,例如但不限于,标准X-射线成像、计算机断层摄影(CT)、磁共振成像(MRI)、超声(US)、正电子发射断层摄影(PET)、单光子发射计算机断层摄影(SPECT)以及核医学(NM)采集的多维图像数据,例如,三维(3-D)或四维(4-D)图像。多维图像数据的维度可以涉及时间。例如,三维图像数据可以包括二维图像数据的时域序列。
在独立权利要求中定义了本发明。在从属权利要求中定义了有利的实施例。
附图说明
通过参考下面描述的实施例,本发明的这些和其他方面将是显而易见的并且将得到说明。在附图中,
图1示出了根据本发明的图像处理系统;
图2示出了图像设备的取向、参考取向和图像设备的设备旋转;
图3示出了三维图像数据中的感兴趣区域;
图4示出了相对于参考视图围绕感兴趣区域旋转的当前视图;
图5示出了显示感兴趣区域的参考视图;
图6示出了显示感兴趣区域的当前视图;
图7示出了相对于参考视图围绕感兴趣区域旋转的当前视图的另一范例;
图8示出了从设备旋转到视图旋转的不同映射;
图9示出了包括用户输入的图像处理系统;
图10示出了根据本发明的方法;
图11示出了包括计算机程序产品的计算机可读介质。
具体实施方式
图1示出了用于通过显示具有至少三个空间维度的图像的视图155来使得用户能够在图像数据中进行导航的图像处理系统100。图像处理系统100包括:图像设备110,其包括显示器130和取向传感器120,显示器130用于显示图像数据的视图155,取向传感器130用于测量图像设备110相对于参考取向的取向。作为测量的结果,取向传感器120提供旋转数据125,旋转数据125指示图像设备110的设备旋转。图像处理系统100还包括用于在图像数据中建立旋转中心的器件140。另外,图像处理系统100包括用于建立与设备旋转相关的视图155的图像处理器150。图像处理器150从取向传感器120接收旋转数据125,并且以旋转数据145的中心的形式从用于建立旋转中心的器件140接收旋转中心。之后,图像处理器150通过建立与设备旋转相关的视图旋转并且通过相对于参考视图根据围绕旋转中心的视图旋转建立当前视图,来建立当前视图。
应当意识到,通过生成时间上的当前时刻的当前视图以及随后生成时间上的未来时刻的未来视图,图像处理器建立视图,使得用户能够在图像数据中进行导航。
图2-7图示了图像处理系统100的操作。在图2中,靠近参考取向320示出图像设备110的取向310。由取向传感器120测量相对于参考取向320的取向310。两个取向之间的差异提供设备旋转330。
为了便于解释,图3将图像数据300示为包括感兴趣区域380的三维透明体积。以下假定图像数据300为体积图像数据,即,由体积像素或体素组成。然而,应当意识到,图像数据300可以等同于任何其他已知类型的图像数据,例如包括所谓的多边形和顶点的图形数据。图3还示出穿过图像数据300的交叉平面335。交叉平面335指示图4中描绘的图像数据300的交叉。然而,应当注意,使用交叉平面335仅为了便于解释,并不涉及图像处理系统100的功能或使用。
图4示出了图像数据300的上述交叉355,所述交叉355包括感兴趣区域380。还示出了参考视图360。在该范例中,将参考视图360理解为图像数据300向感兴趣区域380的体积绘制。这里,从参考视图360朝向感兴趣区域380向外倾斜的最外面虚线指示参考视图的视场,即,指示绘制参考视图中使用的图像数据300的部分。更具体而言,最外面虚线对应于在射线从虚拟照相机(在图4中未示出,但位于两条线交叉的点上)行进穿过参考视图360并且进一步进入图像数据300时在体积绘制期间使用的射线的路径。应当意识到,从体积图像可视化的技术领域已知体积绘制的技术,例如,从出版物“Open
Figure BDA0000392226330000081
Volumizer Programmer’s Guide”,可以从因特网地址“http://techpubs.sgi.com/library/manuals/3000/007-3720-002/pdf/007-3720-002.pdf”获得。
图5示出了体积绘制的结果,即,从第一侧面示出感兴趣区域380的参考视图360。图像处理系统100可以被配置为在图像设备110的取向310与参考取向320一致时显示参考视图360。参考视图360可以是图像数据内的默认视图,例如,在图像处理系统100的操作开始时示出的默认视图。类似地,参考取向320可以与所述操作开始时图像设备110的取向一致。
在用户旋转图像设备110,即,改变其相对于参考取向320的取向310时,取向传感器可以测量取向上的改变,即,设备旋转330,并且以旋转数据125的形式向图像处理器150提供设备旋转330。用于建立旋转中心的器件140可能已经建立感兴趣区域380作为旋转中心340,例如,用于使得用户能够方便地获得从不同侧面示出感兴趣区域380的视图。应当意识到,通常,建立感兴趣区域作为旋转中心可以包括在感兴趣区域是图像数据300中的二维或三维形状时建立感兴趣区域中心作为旋转中心。当感兴趣区域是点时,即,有时被称为感兴趣点,旋转中心可以直接与感兴趣点一致。
图像处理器150可以通过首先建立与设备旋转相关330的视图旋转370并且之后相对于参考视图360根据围绕旋转中心340的视图旋转370建立当前视图350,来在图像数据300中建立当前视图350。建立与设备旋转相关330的视图旋转370可以包括将增益应用于设备旋转330,以获得视图旋转370。例如,设备旋转330可以是30°,并且图像处理器150可以通过将设备旋转330乘以因数2以获得60°的旋转作为视图旋转,来建立视图旋转370。然而,视图旋转370也可以等于设备旋转330。
在图4中示出了相对于参考视图360根据围绕旋转中心340的视图旋转370来建立当前视图350的结果,其中,当前视图350被示为围绕旋转中心340旋转由相对于参考视图360的视图旋转370指示的量。图6示出了体积绘制的结果,即,从第二侧面示出感兴趣区域380的当前视图350。在将来自图5的参考视图360与来自图6的当前视图350进行比较时,很明显,作为旋转图像设备110的结果,在显示器130上示出的当前视图350示出感兴趣区域380的第二侧面,所述第二侧面通过相对于在图5中参考视图360中所示的第一侧面围绕感兴趣区域380的旋转来获得。
应当意识到,给定视图旋转370、旋转中心340和参考视图360,存在用于所述建立当前视图350的很多选择。通常,可以定义坐标系,通过所述坐标系可以表示图像设备110的取向310,即,设备坐标系。设备坐标系可以包括原点,例如,图像设备110的一个角,以及三个坐标轴,例如,沿图像设备110的宽度定义的x轴、沿图像设备110的深度定义的y轴和沿图像设备110的高度定义的z轴。应当意识到,还可以使用任何其他适当的坐标系,即,原点和旋转轴的选择不限于以上提出的这一选择。可以例如以毫米为单位来表示设备坐标系。
参考取向320,例如,图像设备110的初始取向或先前取向,在设备坐标系中可以被表示为参考设备向量。可以由取向传感器120测量参考取向。例如,加速度计或陀螺仪可以测量重力的方向,用于提供参考设备向量,所述参考设备向量表示图像设备相对于重力的方向或取向的参考取向320。取向传感器120还可以在设备坐标系中提供参考设备向量的原点。参考设备向量的原点可以对应于图像设备110相对于设备坐标系的参考位置。然而,应当注意,可以不需要参考设备向量的原点用于建立所述参考取向。
取向传感器120可以提供图像设备110的取向310作为设备坐标系内的当前设备向量。取向传感器120还可以提供当前设备向量在设备坐标系中的原点,其对应于图像设备110的当前位置。之后,取向传感器120可以将当前设备向量与参考设备向量进行比较,用于确定图像设备110的取向上的改变,例如,设备旋转330。为了达到该目的,取向传感器120可以确定当前设备向量与参考设备向量之间的差异。取向传感器120可以忽视当前设备向量和参考设备向量在原点上的差异,因为当前设备向量和参考设备向量在原点上的差异可以对应位置上的改变并且可以不需要原点上的差异用于建立取向的改变。然而,除设备旋转330之外,取向传感器120还可以确定位置上的改变,用于提供设备平移。
除设备坐标系之外,可以定义可以表示图像数据330中的视图取向的坐标系,即,图像坐标系。图像坐标系可以定义原点作为如在图3中所示的图像数据300的一个角,即,对应于图像数据300的轮廓的顶点。图像坐标系还可以定义三个坐标轴,例如,沿在所述顶点相遇的轮廓的边缘延伸。可以(例如)以毫米为单位表示图像坐标系。图像坐标系可以与图像数据300的内容相关。例如,当图像数据300为医学图像数据时,图像坐标系可以由用于医学图像数据的标准来定义,即,可以是标准图像坐标系。
在图像坐标系中,参考视图360的取向可以被表示为参考视图向量。参考视图向量可以与设备坐标系中的参考取向320,即,参考设备向量,相联系。两个取向之间的联系可以包括旋转变换。然而,设备坐标系的原点和图像坐标系的原点可以是不一致的。另外,设备坐标系内的参考设备向量的原点和图像坐标系中的参考视图向量的原点可以是不一致的。为了补偿这种不一致,可以需要其他平移变化,用于使参考视图向量与参考设备向量相联系。在开始操作图像处理系统100或图像设备110时,可以建立旋转变换和可能的其他平移变换。
建立当前视图可以包括以下步骤。在第一步骤中,使用上述旋转变换和可能的其他平移变换,将参考设备向量映射到参考视图向量。在第二步骤中,在图像坐标系内移动图像数据300,使得旋转中心340位于图像坐标系的原点。在第三步骤中,之后,关于设备旋转围绕图像坐标系的原点旋转参考视图向量,例如,当前设备向量与参考设备向量之间的差异,从而产生当前视图向量。因此,当前视图向量在原点上和方向上不同于参考视图向量。在第四步骤中,通过在图像坐标系内返回移动图像数据300来逆转第二步骤。之后,当前视图向量可以用于导出参数,以建立当前视图。例如,在使用多平面重组,即体积数据的切片,建立当前视图时,可以通过生成穿过当前视图向量的原点的图像切片来生成当前视图,沿图像切片延伸的平面正交于当前视图向量。
然而,应当意识到,代替或附加于上述步骤,可以使用多种其他技术来建立当前视图,例如,从欧几里德几何和计算机图像和绘制的一般领域的领域中已知的。
图7和图5的相似之处在于其示出了根据参考视图360、旋转中心340和视图旋转370建立的当前视图350的结果。然而,在该范例中,通过图像数据300的多平面重组来生成参考视图360,产生穿过图像数据300的切片作为参考视图360。此外,感兴趣区域380定位于参考视图360中,即,感兴趣区域380是可视的。再次将感兴趣区域380建立为旋转中心。作为相对于参考视图360根据围绕旋转中心340的视图旋转370建立当前视图350的结果,当前视图350被示为围绕旋转中心340旋转由视图旋转370指示的量。这样,获得了穿过感兴趣区域380并且环绕图像数据300的不同切片。
图8示出的图形包括函数的范例,由图像处理器150使用所述函数用于建立与设备旋转320相关的视图旋转370。水平轴对应于设备旋转320,并且垂直轴对应于视图旋转370。水平轴和垂直轴均可以示出相同或相似的范围,例如,从0°到90°。函数372、374、376和378图示了从设备旋转320(即,函数的输入)到视图旋转370(即,函数的输出)的不同映射。第一函数372对应于直接映射,其中,某个量的设备旋转320导致相同量的视图旋转370,例如,45°的设备旋转320导致45°的视图旋转370。为了达到更高的灵敏度,可以使用对应于增益374的第二函数374。因此,某个量的设备旋转320导致增加的或放大的量的视图旋转370,例如,22.5°的设备旋转320导致45°的视图旋转370。为了降低对微小的可能意想不到的设备旋转320的灵敏度,可以使用对应于阈值376的第三函数376。因此,设备旋转320需要超过阈值376,以便完成视图旋转,即,不为零的视图旋转370。最后,第四函数378对应于非线性函数378,并且可以用于获得例如对于微小的可能意想不到的设备旋转320的灵敏度的降低,以及对较大的设备旋转320的灵敏度的提高。应当意识到,还可以使用任何其他适当函数用于例如通过组合上述函数的方面来建立与设备旋转相关320的视图旋转370。
图9示出的图像处理系统200包括之前在图1中示出的图像设备110。图像处理系统200还包括用于接收来自用户的选择数据265的用户输入部260,并且用于建立旋转中心340的器件240被布置为根据选择数据建立旋转中心。用户可以使用任何适当方式,例如,使用键盘275或鼠标280,向图像处理系统200的用户输入部260提供选择数据265。另外,尽管在图9中未示出,但是图像设备110的显示器130可以包括用于使得用户能够通过触摸显示器130向用户输入部260提供选择数据265的触敏表面。用户可以提供选择数据265,用于手动地选择旋转中心340,或者用于修改或影响感兴趣区域检测器建立旋转中心340的方式。
用户输入部260可以被布置为从用户接收导航数据270,并且图像处理器250可以被布置为根据导航数据建立图像数据300的视图155。用户可以使用任何适当的方式,例如,使用上述键盘270、鼠标280或装配了触敏表面的显示器130,向用户输入部260提供导航数据270。因此,用户可以使用与提供选择数据265相同的方式提供导航数据270。然而,用户还可以使用不同的方式用于所述提供。导航数据270可以包括平移和/或缩放导航命令,例如,通过用户移动鼠标280来提供平移导航命令,并且通过用户转动鼠标280的滑轮来提供缩放导航命令。
图像处理系统200可以被布置为从用户接收重置命令,用于重置参考取向320和/或参考视图360。图像处理系统200可以以任何适当的方式接收重置命令,例如,使用上述键盘270、鼠标280或装配了触敏表面的显示器130。图像处理系统200还可以被布置为接收暂停命令,用于指示图像处理系统200临时中止根据设备旋转建立视图。因此,图像处理器240可以在接收暂停命令之后临时忽略设备旋转,并且可以在接收来自用户的恢复命令后恢复考虑设备旋转,所述恢复命令指示图像处理器250恢复根据设备旋转建立视图。
用于建立旋转中心340的器件240可以被布置为在图像数据300中检测感兴趣区域380。因此,所述器件240可以包括、充当或作为感兴趣区域检测器。所述器件240还可以被布置为根据感兴趣区域380来建立旋转中心340。感兴趣区域检测可以采用用于检测感兴趣区域的任何适当的技术。例如,当图像处理系统200用作医学图像处理系统时,感兴趣区域检测可以采用用于检测医学异常现象(例如,病变)的医学图像分析领域中已知的任何适当技术。
通常,图像数据可以包括体积图像数据,并且图像处理器可以被布置为通过使用包括以下内容的组中的至少一个来所述建立当前视图以生成当前视图:多平面重组、体积绘制和表面绘制。从体积绘制和图像显示的领域已知这些技术。图像数据还可以包括三维图形数据,并且图像处理器可以被布置为通过使用图形绘制建立当前视图来生成当前视图。从三维计算机图形领域中已知图形绘制。图像数据可以包括体积图像数据和图形数据的组合。因此,除了使用图形绘制之外,可以使用包括以下内容的组中的至少一个来建立当前视图以生成当前视图:多平面重组、体积绘制和表面绘制。
建立当前视图可以包括(i)根据视图旋转和旋转中心建立4×4变换矩阵,以及(ii)使用4×4变换矩阵生成当前视图。这样的4×4变换矩阵广泛地用于三维计算机图形领域,用于表示投影变换,包括平移、旋转、缩放、剪切和透视变形。特别地,4×4变换矩阵可以表示平移和旋转的组合,从而允许图像处理器考虑与图像坐标系的原点不一致的旋转中心。
取向传感器可以是所谓的加速度计,其通过相对于参考的自由下落坐标比较试验质量的加速度来测量取向。应当意识到,取向传感器可以是从加速度计领域已知的任何适当类型的加速度计。取向传感器还可以是通过与地球磁场比较来测量取向的指南针。类似地,取向传感器可以是通过测量陀螺仪的旋转轴取向上的改变来测量取向的陀螺仪。取向传感器还可以是视频照相机,用于通过使用由视频照相机采集的视频信息来估计图像设备的自我运动,即,视频照相机的运动和图像设备相对于其周围的运动。使用视频照相机用于估计自我运动的技术从计算机视觉领域已知,并且更具体而言,从自我运动估计领域已知。应当意识到,这种图像设备的自我运动能够确定图像设备在取向上的改变。取向传感器还可以包括例如加速度计和视频照相机的组合,用于改进测量图像设备的取向的准确性。
图像处理系统可以被布置为仅考虑围绕单个旋转轴的设备旋转。因此,可以仅考虑相对于所述旋转轴的任何设备旋转。这样做的原因是有意地限制用户围绕感兴趣区域旋转,或者由于取向传感器的限制。还可以考虑围绕多于一个旋转轴的设备旋转,例如,x轴、y轴和z轴,并且这样一来,可以将设备旋转分解为多个所谓的基本旋转,例如,所谓的横摆、俯仰和滚转。因此,用户可以任意地在图像数据中围绕感兴趣区域旋转。
图像处理系统可以是手持设备,即,并入了显示器、取向传感器、用于建立旋转中心的器件和图像处理器。手持设备可以是平板设备。图像处理系统还可以是包括显示器的工作站,所述显示器的外壳包括取向传感器。显示器的外壳,即,图像设备,可以通过(例如)相对于桌子或墙壁适当地安装,在物理上是可旋转。
图10示出了通过在图像设备的显示器上显示具有至少三个空间维度的图像数据的视图以使得用户能够在图像数据中进行导航的方法400。所述方法包括:测量410图像设备相对于参考取向的取向,用于提供指示图像设备的设备旋转的旋转数据;在图像数据中建立420旋转中心;以及通过(i)从所述取向传感器接收440旋转数据、(ii)建立450与设备旋转相关的视图旋转和(iii)相对于参考视图根据围绕旋转中心的视图旋转来建立460当前视图,来建立430与设备旋转相关的图像数据的视图,用于建立当前视图。
图11示出了包括计算机程序520的计算机可读介质500,所述计算机程序520包括用于令处理器系统执行如图10中所示的方法400的指令。计算机程序520可以作为物理标记或通过计算机可读介质500的磁化在计算机可读介质500上具体实现。然而,还可以设想任何其他适当的实施例。另外,应当意识到,尽管在图1中计算机可读介质500被示为光盘,但是计算机可读介质500可以是任何适当的计算机可读介质,例如,硬盘、固态存储器、闪存等,并且可以是不可记录或可记录的。
应当意识到,本发明还应用于计算机程序,特别是在适于将本发明付诸实践的载体上或载体内的计算机程序。程序可以是源代码、目标代码、源代码和目标代码中间的代码(例如以部分编译形式)的形式,或者是适用于在根据本发明的方法的实现方式中使用的任何其他形式。还应当意识到,这样的程序可以具有很多不同的架构设计。例如,实现根据本发明的方法或系统的功能的程序代码可以分为一个或多个子程序。对于本领域技术人员而言,在这些子程序间分配功能的多种不同方式将是显而易见的。子程序可以共同存储在一个可执行文件中,以形成自含的程序。这样的可执行文件可以包括计算机可执行指令,例如,处理器指令和/或解释器指令(例如,Java解释器指令)。备选地,子程序中的一个或多个或者所有可以存储在至少一个外部库文件并且静态或动态地(例如,在运行中)与主程序链接。主程序包含对至少一个子程序的至少一个调用。子程序还可以包括对彼此的功能调用。涉及计算机程序产品的实施例包括对应于在本文中提出的至少一个方法的每个处理步骤的计算机可执行指令。这些指令可以分为子程序和/或存储在可以静态或动态地链接的一个或多个文件中。涉及计算机程序产品的另一实施例包括对应于在本文中提出至少一个系统和/或产品的每个器件的计算机可读介质。这些指令可以分为子程序和/或存储在可以静态或动态地链接的一个或多个文件中。
计算机程序的载体可以是能够承载程序的任何实体或设备。例如,载体可以包括存储介质,例如,ROM,如CD ROM或半导体ROM;或者磁记录介质,如硬盘。另外,载体可以是可传送载体,例如电信号或光信号,其可以经由电缆或光缆或者通过无线电或其他手段进行传播。当程序实施于这样的信号中时,载体可以由这样的线缆或其他设备或器件组成。备选地,载体可以是嵌入了程序的集成电路,所述集成电路适用于执行相关方法或用于相关方法的执行。
应当注意的是,上述实施例用来说明、而非限制本发明,并且,本领域普通技术人员能够在不脱离权利要求的保护范围的前提下设计出很多可替换的实施例。在权利要求书中,置于括号之间的任何附图标记不应被解释为限制权利要求。动词“包括”及它的引伸的使用并不排除权利要求中所列的部件或步骤之外还存在其他部件或步骤。部件前面的冠词“一”并不排除存在多个这样的部件。本发明可通过包括多个不同部件的硬件来实现,也可以通过适当地编程的计算机来实现。在枚举了多个器件的装置型权利要求中,这些器件中的一些可以具体实现为同一硬件产品。在互不相同的从属权利要求中记载了特定措施这一仅有事实并不表示不能有利地组合这些措施。

Claims (15)

1.一种通过显示具有至少三个空间维度的图像数据(300)的视图(155)以使得用户能够在所述图像数据(300)中进行导航的图像处理系统(100、200),所述图像处理系统包括:
-图像设备(110),其包括显示器(130)和取向传感器(120),所述显示器(130)用于显示所述图像数据的所述视图,所述取向传感器(120)用于测量所述图像设备相对于参考取向(320)的取向(310)以提供旋转数据(125),所述旋转数据(125)指示所述图像设备的设备旋转(330);
-用于在所述图像数据中建立旋转中心(340)的器件(140、240);以及
-图像处理器(150、250),其用于通过(i)从所述取向传感器接收所述旋转数据、(ii)建立与所述设备旋转相关的视图旋转(370)以及(iii)相对于参考视图(360)根据围绕所述旋转中心的所述视图旋转来建立当前视图,来建立与所述设备旋转相关的所述图像数据的所述视图,以建立所述当前视图(350)。
2.如权利要求1所述的图像处理系统(100、200),其中,用于建立所述旋转中心(340)的所述器件(140、240)被布置为:
-在所述图像数据(300)中检测感兴趣区域(380);以及
-根据所述感兴趣区域建立所述旋转中心。
3.如权利要求1所述的图像处理系统(200),其中,所述图像处理系统还包括用于接收来自所述用户的选择数据(265)的用户输入部(260),并且用于建立所述旋转中心的所述器件(240)被布置为根据所述选择数据来建立所述旋转中心(340)。
4.如权利要求3所述的图像处理系统(200),其中,所述用户输入部(260)被布置为接收来自所述用户的导航数据(270),并且所述图像处理器(250)被布置为根据所述导航数据建立所述图像数据(300)的所述视图(155)。
5.如权利要求4所述的图像处理系统(200),其中,所述导航数据(270)包括平移和/或缩放导航命令。
6.如权利要求1所述的图像处理系统(100、200),其中,所述图像数据(300)包括体积图像数据,并且所述图像处理器(150、250)被布置为通过使用包括以下内容的组中的至少一个来所述建立所述当前视图(350)以生成所述当前视图:多平面重组、体积绘制和表面绘制。
7.如权利要求1所述的图像处理系统(100、200),其中,所述图像数据(300)包括三维图形数据,并且所述图像处理器(150、250)被布置为通过使用图形绘制来所述建立所述当前视图(350),以生成所述当前视图。
8.如权利要求1所述的图像处理系统(100、200),其中,所述建立所述当前视图(350)包括(i)根据所述视图旋转(370)和所述旋转中心(340)来建立4×4变换矩阵,并且(ii)使用所述4×4变换矩阵来生成所述当前视图。
9.如权利要求1所述的图像处理系统(100、200),其中,所述图像处理器(150、250)被布置为通过将包括以下内容的组中的至少一个应用于所述设备旋转来建立与所述设备旋转(330)相关的所述视图旋转(370)以获得所述视图旋转:直接映射(372)、增益(374)、偏移、阈值(376)和非线性函数(378)。
10.如权利要求1所述的图像处理系统(200),其中,所述图像处理系统被布置为接收来自所述用户的重置命令,用于重置所述参考取向(320)和/或所述参考视图(360)。
11.如权利要求1所述的图像处理系统(200),其中,所述图像处理系统被布置为接收来自所述用户的暂停命令,用于暂停所述建立与所述设备旋转(330)相关的所述图像数据的所述视图。
12.一种包括如权利要求1所述的图像处理系统的手持设备。
13.一种包括如权利要求1所述的图像处理系统的工作站或成像装置。
14.一种通过在图像设备的显示器上显示具有至少三个空间维度的图像数据的视图以使得用户能够在所述图像数据中进行导航的方法(400),所述方法包括:
-测量(410)所述图像设备相对于参考取向的取向以提供旋转数据,所述旋转数据指示所述图像设备的设备旋转;
-在所述图像数据中建立(420)旋转中心;以及
-通过(i)从所述取向传感器接收(440)所述旋转数据、(ii)建立(450)与所述设备旋转相关的视图旋转以及(iii)相对于参考视图根据围绕所述旋转中心的所述视图旋转来建立(460)当前视图,来建立(430)与所述设备旋转相关的所述图像数据的所述视图,以建立所述当前视图。
15.一种计算机程序产品(520),其包括用于令处理器系统执行如权利要求14所述的方法的指令。
CN201280017220.4A 2011-04-08 2012-03-30 图像处理系统和方法 Pending CN103493103A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910021814.6A CN110084876A (zh) 2011-04-08 2012-03-30 图像处理系统和方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP11161606.6 2011-04-08
EP11161606 2011-04-08
PCT/IB2012/051536 WO2012137113A1 (en) 2011-04-08 2012-03-30 Image processing system and method.

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910021814.6A Division CN110084876A (zh) 2011-04-08 2012-03-30 图像处理系统和方法

Publications (1)

Publication Number Publication Date
CN103493103A true CN103493103A (zh) 2014-01-01

Family

ID=45976457

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201280017220.4A Pending CN103493103A (zh) 2011-04-08 2012-03-30 图像处理系统和方法
CN201910021814.6A Pending CN110084876A (zh) 2011-04-08 2012-03-30 图像处理系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201910021814.6A Pending CN110084876A (zh) 2011-04-08 2012-03-30 图像处理系统和方法

Country Status (8)

Country Link
US (2) US10373375B2 (zh)
EP (1) EP2695142B1 (zh)
JP (1) JP6211510B2 (zh)
CN (2) CN103493103A (zh)
BR (1) BR112013025601A2 (zh)
MX (1) MX2013011451A (zh)
RU (1) RU2612572C2 (zh)
WO (1) WO2012137113A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106104305A (zh) * 2014-01-29 2016-11-09 埃尔梅斯公司 在放射性环境操作以显示光子射线的装置及使用它的相机

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150199105A1 (en) * 2014-01-10 2015-07-16 Silicon Graphics International, Corp. Automatic selection of center of rotation for graphical scenes
US9189839B1 (en) * 2014-04-24 2015-11-17 Google Inc. Automatically generating panorama tours
US9002647B1 (en) 2014-06-27 2015-04-07 Google Inc. Generating turn-by-turn direction previews
CN107920859B (zh) * 2015-08-17 2020-12-08 皇家飞利浦有限公司 模拟乳房变形
KR102632270B1 (ko) * 2015-11-27 2024-02-02 삼성전자주식회사 전자 장치 및 파노라마 영상 표시와 생성 방법
WO2017091019A1 (en) 2015-11-27 2017-06-01 Samsung Electronics Co., Ltd. Electronic device and method for displaying and generating panoramic image
RU2736878C2 (ru) * 2016-03-03 2020-11-23 Конинклейке Филипс Н.В. Система навигации для медицинских изображений
US11454511B2 (en) * 2019-12-17 2022-09-27 Chian Chiu Li Systems and methods for presenting map and changing direction based on pointing direction

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050119550A1 (en) * 2003-11-03 2005-06-02 Bracco Imaging, S.P.A. System and methods for screening a luminal organ ("lumen viewer")
US7113186B2 (en) * 2000-11-25 2006-09-26 Infinitt Co., Ltd. 3 Dimensional slab rendering system method and computer-readable medium
US20070103464A1 (en) * 1999-06-29 2007-05-10 Kaufman Arie E System and method for performing a three-dimensional virtual examination of objects, such as internal organs
CN101035470A (zh) * 2004-10-08 2007-09-12 皇家飞利浦电子股份有限公司 具有图像反向和颠倒的三维诊断超声成像系统
CN101196795A (zh) * 2006-08-02 2008-06-11 捷讯研究有限公司 调整设备上的文本、图像和运动图像的呈现的系统和方法
US20100125816A1 (en) * 2008-11-20 2010-05-20 Bezos Jeffrey P Movement recognition as input mechanism
US20110041098A1 (en) * 2009-08-14 2011-02-17 James Thomas Kajiya Manipulation of 3-dimensional graphical objects or view in a multi-touch display
US20110248987A1 (en) * 2010-04-08 2011-10-13 Disney Enterprises, Inc. Interactive three dimensional displays on handheld devices

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5557714A (en) * 1993-01-29 1996-09-17 Microsoft Corporation Method and system for rotating a three-dimensional model about two orthogonal axes
JP3704652B2 (ja) 1995-09-08 2005-10-12 株式会社日立メディコ 3次元画像処理方法
US6697067B1 (en) * 1999-09-28 2004-02-24 Cedera Software Corp. Method and system for storing information regarding a selected view of a three dimensional image generated from a multi-frame object
GB2370738B (en) * 2000-10-27 2005-02-16 Canon Kk Image processing apparatus
US6421413B1 (en) * 2000-11-27 2002-07-16 Ge Medical Systems Global Technology Company, Llc Methods and apparatus for interactively displaying curved reformation images
JP2002351309A (ja) 2001-05-30 2002-12-06 Cad Center:Kk 都市vr地図連動情報表示装置
WO2003046811A1 (en) * 2001-11-21 2003-06-05 Viatronix Incorporated Registration of scanning data acquired from different patient positions
JP2003319157A (ja) 2002-04-18 2003-11-07 Canon Inc 画像処理装置、画像回転方法、プログラムおよび記憶媒体
JP4001600B2 (ja) * 2002-06-28 2007-10-31 富士通株式会社 3次元イメージ比較プログラム、3次元イメージ比較方法、および3次元イメージ比較装置
JP2005107972A (ja) 2003-09-30 2005-04-21 Canon Inc 複合現実感提示方法、複合現実感提示装置
JP2006019950A (ja) * 2004-06-30 2006-01-19 Toshiba Corp 映像信号処理装置及び映像信号処理方法
JP4644449B2 (ja) * 2004-07-12 2011-03-02 富士通株式会社 画像表示装置および画像表示プログラム
JP2006146440A (ja) 2004-11-17 2006-06-08 Sony Corp 電子機器及び情報表示選択方法
US8744146B2 (en) * 2004-12-06 2014-06-03 Siemens Aktiengellschaft Vascular reformatting using curved planar reformation
KR100677569B1 (ko) * 2004-12-13 2007-02-02 삼성전자주식회사 입체영상장치
DE102005036998B4 (de) 2005-08-05 2014-11-20 Siemens Aktiengesellschaft Vorrichtung zur automatischen Detektion von Auffälligkeiten in medizinischen Bilddaten
US20070206030A1 (en) * 2006-03-06 2007-09-06 The Protomold Company, Inc. Graphical user interface for three-dimensional manipulation of a part
US20100012581A1 (en) * 2006-06-01 2010-01-21 Ben-Gurion University Of The Negev Research And Development Authority Denitrification treatment system and method
US20070279435A1 (en) 2006-06-02 2007-12-06 Hern Ng Method and system for selective visualization and interaction with 3D image data
EP2090975A1 (en) 2006-08-02 2009-08-19 Research In Motion Limited System and method for adjusting presentation of moving images on an electronic device according to an orientationof the device
US8248413B2 (en) * 2006-09-18 2012-08-21 Stryker Corporation Visual navigation system for endoscopic surgery
US8994644B2 (en) * 2007-01-26 2015-03-31 Apple Inc. Viewing images with tilt control on a hand-held device
US8155479B2 (en) * 2008-03-28 2012-04-10 Intuitive Surgical Operations Inc. Automated panning and digital zooming for robotic surgical systems
RU2372844C1 (ru) * 2008-06-16 2009-11-20 Общество с ограниченной ответственностью (ООО) "Кардиовид" Способ автоматического определения размеров и положения сердца пациента по флюорографическим снимкам
JP2010026064A (ja) * 2008-07-16 2010-02-04 Sony Computer Entertainment Inc 携帯型画像表示装置、その制御方法、プログラム及び情報記憶媒体
US20100053151A1 (en) 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
WO2010060211A1 (en) * 2008-11-28 2010-06-03 Nortel Networks Limited Method and apparatus for controling a camera view into a three dimensional computer-generated virtual environment
US8441441B2 (en) 2009-01-06 2013-05-14 Qualcomm Incorporated User interface for mobile devices
US8294766B2 (en) * 2009-01-28 2012-10-23 Apple Inc. Generating a three-dimensional model using a portable electronic device recording
US20110024898A1 (en) * 2009-07-31 2011-02-03 Ati Technologies Ulc Method of manufacturing substrates having asymmetric buildup layers
WO2011058516A1 (en) * 2009-11-11 2011-05-19 Activiews Ltd. Systems & methods for planning and performing percutaneous needle procedures
US8543917B2 (en) * 2009-12-11 2013-09-24 Nokia Corporation Method and apparatus for presenting a first-person world view of content

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070103464A1 (en) * 1999-06-29 2007-05-10 Kaufman Arie E System and method for performing a three-dimensional virtual examination of objects, such as internal organs
US7113186B2 (en) * 2000-11-25 2006-09-26 Infinitt Co., Ltd. 3 Dimensional slab rendering system method and computer-readable medium
US20050119550A1 (en) * 2003-11-03 2005-06-02 Bracco Imaging, S.P.A. System and methods for screening a luminal organ ("lumen viewer")
CN101035470A (zh) * 2004-10-08 2007-09-12 皇家飞利浦电子股份有限公司 具有图像反向和颠倒的三维诊断超声成像系统
CN101196795A (zh) * 2006-08-02 2008-06-11 捷讯研究有限公司 调整设备上的文本、图像和运动图像的呈现的系统和方法
US20100125816A1 (en) * 2008-11-20 2010-05-20 Bezos Jeffrey P Movement recognition as input mechanism
US20110041098A1 (en) * 2009-08-14 2011-02-17 James Thomas Kajiya Manipulation of 3-dimensional graphical objects or view in a multi-touch display
US20110248987A1 (en) * 2010-04-08 2011-10-13 Disney Enterprises, Inc. Interactive three dimensional displays on handheld devices

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106104305A (zh) * 2014-01-29 2016-11-09 埃尔梅斯公司 在放射性环境操作以显示光子射线的装置及使用它的相机

Also Published As

Publication number Publication date
US10629002B2 (en) 2020-04-21
JP2014512607A (ja) 2014-05-22
BR112013025601A2 (pt) 2016-12-27
CN110084876A (zh) 2019-08-02
US10373375B2 (en) 2019-08-06
EP2695142B1 (en) 2023-03-01
US20190371063A1 (en) 2019-12-05
WO2012137113A1 (en) 2012-10-11
RU2612572C2 (ru) 2017-03-09
US20140022242A1 (en) 2014-01-23
MX2013011451A (es) 2013-10-17
RU2013149804A (ru) 2015-05-20
JP6211510B2 (ja) 2017-10-11
EP2695142A1 (en) 2014-02-12

Similar Documents

Publication Publication Date Title
CN103493103A (zh) 图像处理系统和方法
RU2599277C1 (ru) Система кт для досмотра и соответствующий способ
CN104995666B (zh) 用于在真实环境中表示虚拟信息的方法
CN103765475B (zh) 具有对最优断层摄影切片的自动选择的交互式实况分割
TWI509221B (zh) 用於視覺同時區域化及映射(slam)之處理器實施方法、電腦可讀穩定式儲存媒體、資料處理器件及裝置
US9965838B2 (en) Caliper for measuring objects in an image
EP2074499B1 (en) 3d connected shadow mouse pointer
US9576393B1 (en) Dynamic rendering of soft shadows for interface elements
CN105144283A (zh) 基于设备旋转查看角图像操纵
US11087471B2 (en) 2D obstacle boundary detection
CN103279975A (zh) 指示体绘制图像的光方向的方法和系统
CN106716496B (zh) 对解剖结构的体积图像进行可视化
CN106062753A (zh) 使得用户能够研究图像数据
US20210366199A1 (en) Method and device for providing augmented reality, and computer program
Marton et al. Natural exploration of 3D massive models on large-scale light field displays using the FOX proximal navigation technique
Trapp et al. Strategies for visualising 3D points-of-interest on mobile devices
US9082223B2 (en) Smooth manipulation of three-dimensional objects
CN103339660A (zh) 用于可视化信息的方法、装置和配置
Durisetti et al. Evaluation of Tools Used for 3D Reconstruction of 2D Medical Images
CN100543778C (zh) 子体积的虚拟网格对准

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140101

RJ01 Rejection of invention patent application after publication