CN103177471B - 三维图像处理装置 - Google Patents

三维图像处理装置 Download PDF

Info

Publication number
CN103177471B
CN103177471B CN201210387093.9A CN201210387093A CN103177471B CN 103177471 B CN103177471 B CN 103177471B CN 201210387093 A CN201210387093 A CN 201210387093A CN 103177471 B CN103177471 B CN 103177471B
Authority
CN
China
Prior art keywords
image
pointer
processing apparatus
depth direction
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210387093.9A
Other languages
English (en)
Other versions
CN103177471A (zh
Inventor
篠田健辅
佐藤恭子
若井智司
福永智久
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Publication of CN103177471A publication Critical patent/CN103177471A/zh
Application granted granted Critical
Publication of CN103177471B publication Critical patent/CN103177471B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Geometry (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Processing Or Creating Images (AREA)
  • Image Generation (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Image Processing (AREA)

Abstract

本发明的实施方式涉及一种三维图像处理装置。提供一种能够在重叠显示于纵深方向的多个图像之间容易地移动指针的三维图像处理装置。与本发明的一个实施方式有关的医用图像处理装置具备图像生成部以及指针控制部。图像生成部生成通过对体数据进行绘制处理而生成的绘制图像和指针的图像考虑纵深信息地重叠得到的重叠图像。指针控制部是求出指针的三维位置信息的单元,在指针位于绘制图像上的情况下沿着体数据中的对象物的三维的表面来移动指针。

Description

三维图像处理装置
相关申请的交叉引用
本申请以日本专利申请2011-225499(申请日:2011年10月13日)为基础,根据该申请享受优先的利益。本申请通过参照该申请而包含该申请的全部内容。
技术领域
本发明的实施方式涉及三维图像处理装置。
背景技术
在X射线CT(ComputedTomography:计算机断层扫描)装置、MRI(MagneticResonanceImaging:磁共振成像)装置、超声波诊断装置、X射线诊断装置等医用图像诊断装置(影像设备,modality)中,存在能够根据通过被检体(患者)的摄像而获得的投影数据来生成体数据(三维图像数据)的装置。
体数据能够用于通过进行体绘制来生成二维图像(下面,称为VR图像)。该VR图像显示在显示装置上来提示给用户。
发明内容
另外,最近,能够使用户识别立体像的3D显示器开始在市场上出现。这种3D显示器使多个视差成分图像分别向不同的方向射出。用户能够作为视差成分图像的集合来识别立体图像。
因而,通过生成以不同的绘制视点对体数据进行体绘制得到的VR图像并将该多个视点的VR图像作为视差成分图像而提供给3D显示器,能够将与体数据相对应的立体像显示在3D显示器上。对这种立体像进行视觉辨认的用户能够识别立体像的纵深方向。另外,即使只有1张VR图像,也能够通过明暗处理(shading)、纹理映射(texturemapping)来使用户识别纵深方向。
但是,难以在画面内向纵深方向移动鼠标光标等指针。这是因为:以往的指针被设计成在画面的表面上移动,当初没有对向纵深方向移动指针的情况进行考虑。因此,当例如在纵深方向重叠显示有多个图像时,难以在这些图像之间移动指针。
本发明要解决的课题在于提供一种能够在重叠显示于纵深方向的多个图像之间容易地移动指针的三维图像处理装置。
为了解决上述的课题,与本发明的一个实施方式有关的三维图像处理装置具备图像生成部以及指针控制部。图像生成部生成通过对体数据进行绘制处理而生成的绘制图像和指针的图像考虑纵深信息地重叠得到的重叠图像。指针控制部是求出指针的三维位置信息的单元,在指针位于绘制图像上的情况下沿着体数据中的对象物的三维的表面来移动指针。
根据上述结构的三维图像处理装置,能够在重叠显示于纵深方向的多个图像之间容易地移动指针。
附图说明
图1是表示与本发明的一个实施方式有关的医用图像处理装置的一个结构例的框图。
图2是表示在提示给用户的一个画面内多个图像在纵深方向上重叠的样子的一个例子的说明图。
图3是表示控制部的CPU的功能实现部的结构例的概要框图。
图4是表示构成辅助图像的辅助图像要素的例子的说明图。
图5是表示裸眼3D显示器的内部结构的一个例子的框图。
图6是表示在重叠显示于纵深方向的多个图像之间移动指针的样子的第1例的说明图。
图7是表示在重叠显示于纵深方向的多个图像之间移动指针的样子的第2例的说明图。
图8是表示在指针的图像大小越到纵深方向上的跟前而越大的情况下的例子的说明图。
图9是表示在指针的图像大小越到纵深方向上的跟前而越大的情况下生成从多个视点看到的视点指针图像的样子的一个例子的说明图。
图10是表示以指针作为点光源来实施明暗处理的视点图像的一个例子的说明图。
图11是表示在视点图像上重叠以指针为起点的标尺图像的情况下的例子的说明图。
具体实施方式
参照附图说明与本发明有关的三维图像处理装置的实施方式。
图1是表示与本发明的一个实施方式有关的医用图像处理装置10的一个结构例的框图。
如图1所示,作为三维图像处理装置的医用图像处理装置10具有输入部11、存储部12、网络连接部13以及控制部14。
输入部11至少包含指示设备,例如由鼠标、轨迹球、键盘、触摸面板、数字小键盘等一般的输入装置构成,将与用户的操作相对应的操作输入信号输出给控制部14。
存储部12存储从影像设备20输出的医疗用的体数据(三维图像数据)。影像设备20是例如X射线CT(ComputedTomography:计算机断层扫描)装置、MRI(MagneticResonanceImaging:磁共振成像)装置、超声波诊断装置、X射线诊断装置等的医用图像诊断装置,能够由能够根据通过被检体(患者)的摄像而获得的投影数据来生成体数据(三维图像数据)的装置构成。
另外,存储部12存储将体数据的三维坐标和VR图像的二维坐标关联起来的坐标对应信息。当例如通过控制部14根据体数据来生成VR图像时,该坐标对应信息被写入到存储部12中。
另外,存储部12存储有在提示给用户的一个画面内在纵深方向上重叠的多个图像的各自的优先级的信息(下面,称为优先级信息)。该优先级信息既可以预先在工厂出库时等进行设定,也可以通过用户经由输入部11进行设定。
此外,在一个画面内在纵深方向上重叠的多个图像也可以包含多个VR图像。作为多个VR图像,举出根据例如从一个被检体获得的体数据对例如肌肉、骨头、血管、脏器等的每个类别进行分段(分类)的VR图像等。在重叠了这些被分段的多个VR图像的情况下,可以进行重叠使得不是单纯地将层在纵深方向前后重叠而是重现相互的空间的位置关系。
网络连接部13安装与网络21的方式相应的各种的信息通信用协议。网络连接部13按照该各种协议来连接医用图像处理装置10和影像设备20等其它的装置。这里网络21意味着利用了电气通信技术的全部的信息通信网,除了医院基础LAN(LocalAreaNetwork:局域网)等无线/有线LAN、因特网之外,还包含电话通信线路网、光纤通信网络、电缆通信网络以及卫星通信网络等。
医用图像处理装置10也可以从经由网络21连接的影像设备20中接受体数据。经由网络21接收的体数据还保存在存储部12中。另外,存储在存储部12中的坐标对应信息、优先级信息等信息也还可以经由网络21来接收。
控制部14由CPU、RAM以及ROM为代表的存储介质等构成,按照存储在该存储介质中的程序来控制医用图像处理装置10的处理动作。
图2是表示在提示给用户的一个画面内多个图像在纵深方向上重叠的样子的一个例子的说明图。此外,在下面的说明中,将画面的正面左下设为坐标原点,从原点起将水平方向右侧设为X轴正方向,将垂直方向上侧设为Y轴正方向,将跟前侧设为Z轴正方向,来定义XYZ轴。此时,Z轴方向成为纵深方向。
此外,图2中示出了重叠了一个VR图像16的样子的一个例子,但是也可以重叠多个VR图像16(被分段的VR图像16)。在本实施方式中,说明如图2所示那样重叠一个VR图像16的情况下的例子。
如图2所示,VR图像16有时以与辅助图像17在纵深方向上成为前后的方式重叠而进行画面显示。但是,指针18有时根据用户经由输入部11的操作能够将XY坐标移动到用户的期望的位置,而另一方面关于纵深方向(Z轴方向)在经由输入部11的操作中无法自由地移动。在这种情况下,难以对在画面内在纵深方向上重叠的多个图像中的任意的图像对准指针18。另外,例如在输入部11由带滚轮的鼠标构成、并根据滚轮的旋转来移动指针18的纵深方向的位置的情况下,也难以掌握指针18的纵深方向的位置,仍然难以对在画面内在纵深方向上重叠的多个图像中的任意的图像对准指针18。
因此,控制部14的CPU将存储在以ROM为代表的存储介质中的三维图像处理程序以及执行该程序所需的数据加载到RAM中,并按照该程序执行在重叠显示于纵深方向的多个图像之间移动指针18的处理。
控制部14的RAM提供暂时地保存CPU所执行的程序以及数据的工作区。另外,以控制部14的ROM为代表的存储介质存储医用图像处理装置10的起动程序、三维图像处理程序、以及执行这些程序所需的各种数据。
此外,以ROM为代表的存储介质具有包含磁或者光学的记录介质或者半导体存储器等能够通过CPU进行读取的记录介质的结构,也可以构成为经由网络21来下载这些存储介质内的程序以及数据的一部分或者全部。
控制部14生成从多个视点看到的VR图像16和辅助图像17在纵深方向上重叠的图像(多个视点图像、多视点图像)并输出给裸眼3D显示器22。
图3是表示控制部14的CPU的功能实现部的结构例的概要框图。此外,该功能实现部也可以不使用CPU而由电路等硬件逻辑来构成。
如图3所示,控制部14的CPU通过三维图像处理程序作为图像生成部31、指针控制部32以及多视点图像输出部33而发挥功能。该各部31~33将RAM的所需的工作区作为数据的临时的保存场所而使用。
图像生成部31具有多视点绘制图像生成部41、辅助图像生成部42、以及多视点图像生成部43。
多视点绘制图像生成部41通过根据存储在存储部12中的体数据以多个视点进行体绘制,生成各视点的VR图像(视点绘制图像,下面称为视点VR图像)16。
图4是表示构成辅助图像17的辅助图像要素的例子的说明图。
辅助图像17通过由分配了各种功能的多个软键构成的工具栏51、由多个缩略图像52a构成的缩略图像群52、附带信息显示图像53、简易操作面板54、操作面板55、患者、系列(series)以及图像的列表56、与视点VR图像不同的图像57等的辅助图像要素构成。作为与视点VR图像不同的图像57,例如能够举出以与视点VR图像不同的绘制模式进行体绘制的VR图像、体数据与视点VR图像不同的图像等。图2表示辅助图像17只由简易操作面板54构成的情况下的例子。
辅助图像生成部42生成由这些辅助图像要素的一个或者多个构成的辅助图像17。
多视点图像生成部43生成将通过多视点绘制图像生成部41生成的VR图像(视点VR图像)16和通过辅助图像生成部42生成的辅助图像17在纵深方向上重叠的多个视点图像(多视点重叠图像)。此外,称为各辅助图像要素的基础的图像文件既可以预先存储在存储部12中,也可以经由网络21来适当获取。
此外,在重叠视点VR图像16和辅助图像17而生成视点重叠图像时,多视点图像生成部43设为通过设定辅助图像17的透明度来设为半透明显示从而能够跨过辅助图像17对隐藏在辅助图像17的背侧的视点VR图像16进行视觉辨认即可。该透明度既可以使用预先设定并存储在存储部12中的设定值,也可以通过用户U经由输入部11进行设定。
另一方面,指针控制部32具有指针位置决定部46以及多视点指针图像生成部47。
当指针位置决定部46受到用户经由输入部11进行的指示使得在XY面内移动指针18时,在指针18位于视点VR图像16的附近的情况下,根据存储在存储部12中的坐标对应信息来获取视点VR图像16的表面的三维坐标,决定指针18的位置使得沿着视点VR图像16的表面来移动指针18。另外,在指针18位于辅助图像17的附近的情况下,指针位置决定部46决定指针18的位置使得沿着辅助图像17的表面来移动指针18。
多视点指针图像生成部47生成从多个视点看到的指针18的图像(多视点指针图像),与由指针位置决定部46决定的指针18的位置信息一起提供给多视点图像输出部33。
多视点图像输出部33重叠通过图像生成部31生成的视点重叠图像以及通过指针控制部32生成的视点指针图像来生成多个视点图像,对将该多个视点图像的各个作为视差成分图像向不同的方向射出的裸眼3D显示器22进行输出。
这里,简单地说明裸眼3D显示器22的结构以及作用。
图5是表示裸眼3D显示器22的内部结构的一个例子的框图。
裸眼3D显示器22具有多视点图像获取部61、要素图像生成部62、图像显示部63以及光线控制元件64。
多视点图像获取部61从多视点图像输出部33中获取多个视点图像。要素图像生成部62将该多个视点图像变换为要素图像。例如,在多视点图像输出部33输出9个视点的视点图像的情况下,以表示与9个撮影编号相当的9视差方向的视差编号(-4、-3、···、0、···3、4)来确定视差成分图像。即,要素图像生成部62通过将多视点图像的各视点图像和视差编号关联起来将各视点图像作为视差成分图像进行处理,并收集视差成分图像来生成要素图像。
图像显示部63例如由液晶显示器、OLED(OrganicLightEmittingDiode:有机发光二极管)显示器等显示输出装置构成。例如在处理9种视差成分图像的情况下,图像显示部63的各像素由9个像元构成,针对每个像素显示要素图像。另外,像素所输出的光线中与具有相同的视差编号的视差成分图像相对应的光线从多个像素相互平行地射出。
光线控制元件64由多个出射光瞳构成。作为光线控制元件64,能够使用在二维II(积分成像)方式中作为出射光瞳的分段透镜排列为矩阵状的透镜阵列、作为出射光瞳的针孔排列为阵列状的针孔阵列。另外,光线控制元件64在一维II方式中由向垂直方向延伸且排列在水平方向的圆柱透镜构成的双凸透镜片、具有向垂直方向延伸且排列在水平方向的狭缝的有狭缝板构成。作为光线控制元件64而使用透镜阵列、双凸透镜片以及狭缝板的某一个,各透镜或者狭缝光学上都作为在光学的开口部的出射光瞳而发挥功能。
通过要素图像生成部62生成的要素图像显示于图像显示部63的各像素,要素图像经由出射光瞳被投影到视域,从而在视域的内部用户观察到立体图像。
此外,在本实施方式中示出作为显示装置而使用能够以裸眼进行立体像观测的裸眼3D显示器22的情况下的例子,但是也可以使用以专用的眼镜来进行立体像观测的3D显示器。使用专用的眼镜来进行立体像观测的3D显示器一般在观察者的观察时的左眼以及右眼的位置设置聚光点,在设置于与该两眼相当的位置的聚光点分别聚光成为左眼视差成分图像以及右眼视差成分图像。在这种情况下,医用图像处理装置10只要生成与左眼视差成分图像以及右眼视差成分图像相对应的左眼视点图像以及右眼视点图像来输出到3D显示器即可。
另外,如果能够使用户识别纵深方向,则视点VR图像16也可以使用一般的二维显示用的液晶显示器等显示输出装置。在这种情况下,上述说明中的多视点只要替换为规定的一个视点即可。
另外,多视点图像获取部61以及要素图像生成部62既可以是通过CPU执行规定的程序来实现的功能实现部,也可以不使用CPU而通过电路等的硬件逻辑来构成。另外,也可以适当组合软件和硬件来实现各功能。
另外,在图1中示出裸眼3D显示器22设置在医用图像处理装置10的结构外的情况下的例子,但是也可以将裸眼3D显示器22设为医用图像处理装置10的一个结构要素。另外,医用图像处理装置10也可以安装在影像设备20中。
图6是表示在重叠显示于纵深方向的多个图像之间移动指针18的样子的第1例的说明图。图6中示出用户经由输入部11进行指示使得沿着X轴方向移动指针18的情况下的例子。
在图6所示的例子中,指针位置决定部46将指针18的Z坐标设为位于当前的指针18所在的XY坐标上的图像中位于最靠跟前的图像上。例如,在位于指针18的XY坐标的图像只是视点VR图像16的情况下,指针18进行移动使得在VR图像16的表面上描绘(参照图6右侧)。另一方面,在指针18的XY坐标有多个图像(例如视点VR图像16和辅助图像17)、辅助图像17是位于最靠跟前的图像的情况下,指针18进行移动使得在辅助图像17的表面上描绘(参照图6左侧)。
在这种情况下,用户能够通过经由输入部11进行指示使得沿着X轴方向移动指针18,从而将指针18移动到最靠跟前的图像上。
图7是表示在重叠显示于纵深方向的多个图像之间移动指针18的样子的第2例的说明图。
在图7所示的例子中,当在当前的XY坐标中多个图像在纵深方向上重叠时,指针位置决定部46以如下的方式决定指针18的位置:在维持指针18的当前的XY坐标的同时,使指针在多个图像之间自动地巡回,以使得指针18的纵深方向的位置在多个图像的各个图像上均滞留规定时间。此时,指针位置决定部46既可以从存储部12读出优先级信息并按照该优先级高的顺序在图像之间巡回,也可以根据该优先级来改变各图像上的滞留时间。
例如,当没有用户经由输入部11对指针18进行的移动指示、且在当前的XY坐标中多个图像在纵深方向上重叠时,指针18每隔规定时间在图像之间自动地巡回。
在这种情况下,自动地变更指针18所在的图像,因此用户不进行例如经由输入部11的指示也能够在期望的图像上有指针18时进行期望的操作。
另外,指针位置决定部46也可以在每当用户经由输入部11进行规定的操作(例如鼠标的点击等)时在图像之间移动。该移动顺序也可以根据存储在存储部12中的优先级信息来决定。
在这种情况下,用户能够通过简单的操作来将指针18移动到期望的图像上。
另外,当没有用户的操作时,指针位置决定部46也可以从存储部12读出优先级信息并在该优先级最高的图像上继续滞留指针18。此时,当接受规定的操作时,也可以在图像之间移动。
接着,说明用户能够容易地掌握指针18的纵深方向的位置的技术。
如图6以及图7所示的例子那样,在纵深方向上重叠的多个图像之间移动指针18的情况下,当能够从显示图像通过视觉来容易地掌握指针18的纵深方向的位置时,能够进一步提高用户的便利性。
另外,能够从显示图像通过视觉来容易地掌握指针18的纵深方向的位置,这在用户能够经由输入部11的操作(例如鼠标的滚轮旋转操作等)来进行指针18的Z轴方向的移动指示的情况下也有用。在这种情况下,指针18位于任意的Z位置,因此如果能够视觉掌握位于纵深方向的哪个位置,则能够提高用户的便利性。
图8是表示在越到纵深方向上的跟前则指针18的图像大小越大的情况下的例子的说明图。图8中示出多视点指针图像生成部47生成从规定的一个视点看到的视点指针图像的情况下的例子。
如图8所示,多视点指针图像生成部47根据指针18的Z坐标来以使得指针18越到跟前则指针18的图像大小越大的方式生成指针18的图像。用户能够容易地掌握指针18的纵深方向的位置。
图9是表示在越到纵深方向上的跟前则指针18的图像大小越大的情况下生成多个视点指针图像的样子的一个例子的说明图。
如图9所示,多视点指针图像生成部47也可以根据指针18的Z坐标以使得指针18越到跟前则指针18的图像大小越大的方式生成从多个视点看到的多个视点指针图像。在这种情况下,用户能够对越到跟前则显示为越大的指针18进行立体像观测。
图10是表示以指针18为点光源来实施明暗处理的视点图像的一个例子的说明图。
多视点图像生成部43也可以从指针控制部32接受指针18的位置信息,并在与指针18的位置相应的位置配置光源来对视点重叠图像实施明暗处理。在这种情况下,光源的位置根据指针18的移动而移动。此外,作为光源,能够使用点光源、线光源、面光源等,也可以使用如小灯泡那样看起来连续地分布了点光源的光源。图10中示出了在指针的位置配置点光源的情况下的例子。在与指针18的位置相应的位置设置点光源来实施明暗处理的情况下,在点光源的位置(在图10所示的例子中指针18的位置)的里面位于最近的位置的图像最亮地显示,另一方面位于点光源的跟前的图像隐藏。并且,该明暗根据指针18的位置而变化。因此,用户能够根据基于视点图像的显示图像的明暗来容易地掌握指针18的纵深方向的位置。
图11是表示在视点图像上重叠以指针18为起点的标尺图像71的情况下的例子的说明图。
多视点图像生成部43也可以从指针控制部32接受指针18的位置信息并进一步重叠了以指针18为起点的标尺图像71而生成视点重叠图像。此时,标尺图像71的终点能够设为离指针附近的对象物的表面、芯线上的点、预先设定的点等。例如,在重叠了被分段的多个VR图像16的情况下,也能够将空间距离离指针18最近的VR图像16的表面上的点设为标尺图像71的终点。另外,此时,也可以如图11所示那样以使得越到跟前则越大方式透视投影地生成标尺图像71。
另外,如图11所示,多视点图像生成部43也可以将表示从指针18至标尺图像71的终点为止的距离的距离值图像72重叠在标尺图像71的附近。
在显示标尺图像71、距离值图像72的情况下,用户还能够根据标尺图像71、距离值图像72来容易地掌握指针18的纵深方向的位置。
以上,虽然说明了本发明的几个实施方式,但是这些实施方式只是作为例子来示出的,并非限定发明的范围。这些新的实施方式能够以其它的各种方式来实施,能够在不脱离发明的精神的范围内进行各种省略、替换、变更。这些实施方式及其变形包含在发明的范围、精神中,并且包含在权利要求书所记载的发明及其均等的范围中。

Claims (19)

1.一种三维图像处理装置,其特征在于,具备:
存储单元,存储对象物的体数据;
输入部,进行用于移动指针的输入操作;
图像生成部,生成将通过以多个视点对所述体数据进行绘制处理而分别作为视差图像生成的多个绘制图像和从多个视点观看所述指针的图像得到的多个指针的图像考虑纵深信息地重叠得到的多个视点的重叠图像;以及
指针控制部,是求出所述指针的三维位置信息的单元,在所述指针位于所述绘制图像上的情况下沿着所述体数据中的对象物的三维的表面移动所述指针。
2.根据权利要求1所述的三维图像处理装置,其特征在于,
所述图像生成部生成将所述绘制图像、用于接受用户的操作的辅助图像、以及所述指针的图像考虑纵深信息地重叠得到的重叠图像,
所述指针控制部是求出所述指针的三维位置信息的单元,在所述指针位于所述绘制图像上的情况下沿着所述体数据中的对象物的三维的表面移动所述指针,在所述指针位于所述辅助图像上的情况下在所述辅助图像的上面移动所述指针。
3.根据权利要求2所述的三维图像处理装置,其特征在于,
当所述用户经由所述输入部进行指示使得在与纵深方向正交的XY面内移动显示在所述重叠图像上的所述指针时,所述指针控制部对于显示所述指针的位置,将XY坐标设为由所述用户指示的XY坐标,并且将所述纵深方向的位置设为在所述重叠图像中的在所述纵深方向上位于最靠跟前的图像上的位置。
4.根据权利要求2所述的三维图像处理装置,其特征在于,
当在所述指针的当前的与纵深方向正交的XY方向的XY坐标中多个图像在所述纵深方向上重叠时,所述指针控制部在维持所述指针的当前的XY坐标的同时,使所述指针在所述多个图像之间自动地巡回,以使得所述指针的所述纵深方向的位置在所述多个图像的各个图像上均滞留规定时间。
5.根据权利要求4所述的三维图像处理装置,其特征在于,
在使所述指针在所述多个图像之间自动地巡回时,所述指针控制部对所述多个图像的各个设置优先级,根据该优先级来对各图像决定滞留的时间以及所述巡回的顺序。
6.根据权利要求2所述的三维图像处理装置,其特征在于,
当没有所述用户经由所述输入部对所述指针发出的移动指示、且在所述指针的当前的与纵深方向正交的XY方向的XY坐标中多个图像在所述纵深方向上重叠时,所述指针控制部根据对所述多个图像的各个附加的优先级,在附加了最高优先级的图像上继续显示所述指针。
7.根据权利要求6所述的三维图像处理装置,其特征在于,
每当有所述用户经由所述输入部的指示时,所述指针控制部将显示所述指针的图像按照所述优先级依次进行变更。
8.根据权利要求2所述的三维图像处理装置,其特征在于,
所述图像生成部将在所述重叠图像中位于纵深方向上靠跟前的图像的透明度设定为半透明而生成所述重叠图像。
9.根据权利要求8所述的三维图像处理装置,其特征在于,
所述图像生成部在从所述指针控制部接受所述指针位于除了在所述纵深方向上位于最靠跟前的图像之外的图像上的意思的信息时,将与显示该指针的图像相比更位于所述纵深方向上靠跟前的图像的透明度设定为半透明而生成所述重叠图像。
10.根据权利要求2所述的三维图像处理装置,其特征在于,
所述图像生成部以使得所述指针的纵深方向的位置越到跟前则所述指针越大的方式生成所述指针的图像并重叠于所述重叠图像。
11.根据权利要求2所述的三维图像处理装置,其特征在于,
所述图像生成部从所述指针控制部接受所述指针的与纵深方向正交的XY方向的XY坐标以及所述纵深方向的位置信息,并对所述重叠图像实施以所述指针为点光源的明暗处理。
12.根据权利要求2所述的三维图像处理装置,其特征在于,
所述图像生成部从所述指针控制部接受所述指针的与纵深方向正交的XY方向的XY坐标以及所述纵深方向的位置信息,并对所述重叠图像进一步重叠以所述指针为起点的标尺图像而生成所述重叠图像。
13.根据权利要求12所述的三维图像处理装置,其特征在于,
所述图像生成部将所述标尺图像的终点设为离所述指针空间距离最近的所述绘制图像上的点,并且将从所述起点至所述终点为止的距离显示在所述标尺图像附近。
14.一种三维图像处理装置,其特征在于,具备:
存储单元,存储对象物的体数据;
输入部,进行用于移动指针的输入操作;
图像生成部,生成将通过对所述体数据进行绘制处理而生成的绘制图像和所述指针的图像考虑纵深信息地重叠得到的重叠图像,并且在与所述指针的三维位置相应的位置配置光源来对所述重叠图像实施明暗处理;以及
指针控制部,是求出所述指针在所述重叠图像上的三维位置信息的单元,该指针控制部三维地移动所述指针。
15.根据权利要求14所述的三维图像处理装置,其特征在于,
所述图像生成部以使得所述指针的纵深方向的位置越到跟前则所述指针越大的方式生成所述指针的图像并重叠于所述重叠图像。
16.根据权利要求14所述的三维图像处理装置,其特征在于,
所述图像生成部从所述指针控制部接受所述指针的与纵深方向正交的XY方向的XY坐标以及所述纵深方向的位置信息,并对所述重叠图像进一步重叠以所述指针为起点的标尺图像而生成所述重叠图像。
17.根据权利要求16所述的三维图像处理装置,其特征在于,
所述图像生成部将所述标尺图像的终点设为离所述指针空间距离最近的所述绘制图像上的点,并且将从所述起点至所述终点为止的距离显示在所述标尺图像附近。
18.根据权利要求1或者14所述的三维图像处理装置,其特征在于,
所述图像生成部生成从多个视点看到所述重叠图像的多个视点的重叠图像,对将该多个视点的重叠图像的各个作为视差成分图像向不同的方向射出的3D显示器输出所述多个视点的重叠图像。
19.根据权利要求1或者14所述的三维图像处理装置,其特征在于,
所述指针控制部生成从多个视点看到所述指针的图像的多个视点的指针的图像,对将该多个视点的指针的图像的各个作为视差成分图像向不同的方向射出的3D显示器输出所述多个视点的指针的图像。
CN201210387093.9A 2011-10-13 2012-10-12 三维图像处理装置 Active CN103177471B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011225499 2011-10-13
JP2011-225499 2011-10-13

Publications (2)

Publication Number Publication Date
CN103177471A CN103177471A (zh) 2013-06-26
CN103177471B true CN103177471B (zh) 2016-03-23

Family

ID=48085690

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210387093.9A Active CN103177471B (zh) 2011-10-13 2012-10-12 三维图像处理装置

Country Status (3)

Country Link
US (1) US9746989B2 (zh)
JP (1) JP6038583B2 (zh)
CN (1) CN103177471B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013179905A1 (ja) 2012-05-30 2013-12-05 オリンパスメディカルシステムズ株式会社 医療用3次元観察装置
JP6548360B2 (ja) * 2014-05-20 2019-07-24 キヤノンメディカルシステムズ株式会社 X線診断装置
JP6381979B2 (ja) * 2014-06-11 2018-08-29 キヤノンメディカルシステムズ株式会社 超音波診断装置及び制御プログラム
EP3195272B1 (en) * 2014-09-02 2018-11-21 Koninklijke Philips N.V. Device for visualizing a 3d object
EP3469554B1 (en) * 2016-06-10 2020-09-09 Koninklijke Philips N.V. Systems and methods for lighting in rendered images
JP7132916B2 (ja) * 2016-11-07 2022-09-07 コーニンクレッカ フィリップス エヌ ヴェ レンダリング画像におけるシミュレーション光源の位置決めのためのシステム及び方法
EP3742880A4 (en) * 2018-01-17 2021-01-13 Fuji Corporation SYSTEM FOR GENERATING COMPONENT SHAPE DATA FOR IMAGE PROCESSING AND METHOD FOR GENERATING COMPONENT SHAPE DATA FOR IMAGE PROCESSING
JP7134656B2 (ja) * 2018-03-15 2022-09-12 ソニー・オリンパスメディカルソリューションズ株式会社 医療用表示制御装置、および表示制御方法
CN109523623B (zh) * 2018-11-26 2023-01-31 广东精鹰传媒集团股份有限公司 一种真实投射的逆光光照效果的实现方法
CN114840112B (zh) * 2022-05-16 2023-03-24 北京轻网科技股份有限公司 Pop资源管理方法、装置、设备和计算机可读存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6243096B1 (en) * 1997-10-17 2001-06-05 Nec Corporation Instruction input system with changeable cursor
US20020163543A1 (en) * 2001-05-02 2002-11-07 Minoru Oshikiri Menu item selection method for small-sized information terminal apparatus
US6515277B1 (en) * 1994-07-28 2003-02-04 General Nanotechnology L.L.C. Scanning probe microscope assembly and method for making confocal, spectrophotometric, near-field, and scanning probe measurements and associated images
US7043701B2 (en) * 2002-01-07 2006-05-09 Xerox Corporation Opacity desktop with depth perception
CN1885233A (zh) * 2006-06-27 2006-12-27 刘金刚 三维桌面系统的显示与操作方法
CN101587386A (zh) * 2008-05-21 2009-11-25 深圳华为通信技术有限公司 光标处理方法、装置及系统
CN101627349A (zh) * 2005-06-10 2010-01-13 T-移动美国有限公司 首选联系人组中心接口
US20100201683A1 (en) * 2007-07-31 2010-08-12 Takashi Shirahata Medical image display apparatus and medical image display method
US20110107270A1 (en) * 2009-10-30 2011-05-05 Bai Wang Treatment planning in a virtual environment
CN102056002A (zh) * 2009-11-05 2011-05-11 Lg电子株式会社 图像显示装置及其控制方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06149957A (ja) * 1992-11-09 1994-05-31 Toshiba Medical Eng Co Ltd 画像表示装置
JP3325635B2 (ja) * 1993-03-19 2002-09-17 株式会社日立メディコ 画像処理方法及び装置
US5880733A (en) * 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
JPH1139135A (ja) * 1997-07-22 1999-02-12 Sanyo Electric Co Ltd カーソル表示装置
JP2001149366A (ja) 1999-11-25 2001-06-05 Toshiba Corp 三次元画像処理装置
AU2002223331A1 (en) * 2000-11-16 2002-05-27 Prodijeux Inc. A word game and apparatus for playing same
US9421074B2 (en) * 2001-04-13 2016-08-23 Orametrix, Inc. Unified three dimensional virtual craniofacial and dentition model and uses thereof
WO2004107763A1 (ja) * 2003-05-28 2004-12-09 Sanyo Electric Co., Ltd. 立体映像表示装置及びプログラム
JP4533791B2 (ja) * 2005-04-19 2010-09-01 株式会社日立製作所 情報閲覧装置
JP2006309459A (ja) 2005-04-27 2006-11-09 Canon Inc 画像処理方法、画像処理装置
US7586481B1 (en) * 2005-05-10 2009-09-08 Apple Inc. Display-pointer visibility
JP2007275558A (ja) 2006-03-15 2007-10-25 Toshiba Corp 医用画像読影装置、及びカーソル移動プログラム
EP2074499B1 (en) * 2006-09-29 2015-01-07 Koninklijke Philips N.V. 3d connected shadow mouse pointer
JP4519898B2 (ja) * 2007-11-06 2010-08-04 ザイオソフト株式会社 医療画像処理装置および医療画像処理プログラム
US8687053B2 (en) * 2009-06-26 2014-04-01 Panasonic Corporation Stereoscopic image display device
JP5562595B2 (ja) 2009-08-13 2014-07-30 株式会社東芝 医用画像診断装置、及び医用画像診断装置の画像処理方法
JP4876182B2 (ja) * 2009-11-26 2012-02-15 キヤノン株式会社 立体映像表示装置およびカーソル表示方法、プログラム、記憶媒体
US8643569B2 (en) * 2010-07-14 2014-02-04 Zspace, Inc. Tools for use within a three dimensional scene
KR20120009564A (ko) * 2010-07-19 2012-02-02 삼성전자주식회사 3차원 마우스 포인터 생성방법 및 생성장치
KR101691034B1 (ko) * 2010-08-03 2016-12-29 삼성전자주식회사 3차원 그래픽 기반 단말기에서 객체 렌더링 시 부가정보 합성 장치 및 방법

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6515277B1 (en) * 1994-07-28 2003-02-04 General Nanotechnology L.L.C. Scanning probe microscope assembly and method for making confocal, spectrophotometric, near-field, and scanning probe measurements and associated images
US6243096B1 (en) * 1997-10-17 2001-06-05 Nec Corporation Instruction input system with changeable cursor
US20020163543A1 (en) * 2001-05-02 2002-11-07 Minoru Oshikiri Menu item selection method for small-sized information terminal apparatus
US7043701B2 (en) * 2002-01-07 2006-05-09 Xerox Corporation Opacity desktop with depth perception
CN101627349A (zh) * 2005-06-10 2010-01-13 T-移动美国有限公司 首选联系人组中心接口
CN1885233A (zh) * 2006-06-27 2006-12-27 刘金刚 三维桌面系统的显示与操作方法
US20100201683A1 (en) * 2007-07-31 2010-08-12 Takashi Shirahata Medical image display apparatus and medical image display method
CN101587386A (zh) * 2008-05-21 2009-11-25 深圳华为通信技术有限公司 光标处理方法、装置及系统
US20110107270A1 (en) * 2009-10-30 2011-05-05 Bai Wang Treatment planning in a virtual environment
CN102056002A (zh) * 2009-11-05 2011-05-11 Lg电子株式会社 图像显示装置及其控制方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
三维立体显示技术研究新进展;郑华东 等;《光学技术》;20080531;第34卷(第3期);第427页第1.1节 *
面向数字地球的三维景观构造关键技术研究;于文洋;《万方学位论文库》;20070429;第19-20页第2.1.2.1节-2.1.2.2节,图2-10 *

Also Published As

Publication number Publication date
US9746989B2 (en) 2017-08-29
JP6038583B2 (ja) 2016-12-07
US20130093763A1 (en) 2013-04-18
CN103177471A (zh) 2013-06-26
JP2013101599A (ja) 2013-05-23

Similar Documents

Publication Publication Date Title
CN103177471B (zh) 三维图像处理装置
CN102892018B (zh) 图像处理系统、装置、方法以及医用图像诊断装置
CN102893308B (zh) 图像处理系统、装置以及方法
CN102984532B (zh) 图像处理系统、图像处理装置以及图像处理方法
CN102892016B (zh) 图像显示系统、装置、方法以及医用图像诊断装置
CN102860837B (zh) 图像处理系统、装置、方法以及医用图像诊断装置
CN102915557B (zh) 图像处理系统、终端装置以及方法
US11995847B2 (en) Glasses-free determination of absolute motion
CN102843564A (zh) 图像处理系统、装置以及方法
JP5802767B2 (ja) 画像処理装置、立体画像表示装置、および、画像処理方法
US9202305B2 (en) Image processing device, three-dimensional image display device, image processing method and computer program product
CN102833570B (zh) 图像处理系统、装置以及方法
CN102892022A (zh) 图像处理系统、图像处理装置以及图像处理方法
CN102188256A (zh) 医疗图像生成设备、医疗图像显示设备、医疗图像生成方法和程序
CN104887316A (zh) 基于主动立体显示技术的虚拟立体内窥镜显示方法
CN103718211A (zh) 三维成像数据察看器和/或察看
JP2013009864A (ja) 3次元画像処理装置
CN102860836A (zh) 图像处理装置、图像处理方法以及医用图像诊断装置
CN102890748B (zh) 图像处理系统、装置、 方法以及医用图像诊断装置
JP6017124B2 (ja) 画像処理システム、画像処理装置、医用画像診断装置、画像処理方法及び画像処理プログラム
CN102846377A (zh) 医用图像处理装置
JP2002101428A (ja) 画像立体視表示装置
CN102769769A (zh) 医用图像处理装置
US11514655B1 (en) Method and apparatus of presenting 2D images on a double curved, non-planar display
JP2012238289A (ja) 3次元画像処理装置および3次元画像処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160812

Address after: Japan Tochigi

Patentee after: Toshiba Medical System Co., Ltd.

Address before: Tokyo, Japan, Japan

Patentee before: Toshiba Corp

Patentee before: Toshiba Medical System Co., Ltd.