CN102883661A - 图像处理装置以及图像处理方法 - Google Patents

图像处理装置以及图像处理方法 Download PDF

Info

Publication number
CN102883661A
CN102883661A CN2011800218171A CN201180021817A CN102883661A CN 102883661 A CN102883661 A CN 102883661A CN 2011800218171 A CN2011800218171 A CN 2011800218171A CN 201180021817 A CN201180021817 A CN 201180021817A CN 102883661 A CN102883661 A CN 102883661A
Authority
CN
China
Prior art keywords
internal organs
tube chamber
coordinate conversion
turnover
chamber internal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800218171A
Other languages
English (en)
Other versions
CN102883661B (zh
Inventor
后藤良洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Medical Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Medical Corp filed Critical Hitachi Medical Corp
Publication of CN102883661A publication Critical patent/CN102883661A/zh
Application granted granted Critical
Publication of CN102883661B publication Critical patent/CN102883661B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5205Devices using data or image processing specially adapted for radiation diagnosis involving processing of raw data to produce diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • A61B6/032Transmission computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/466Displaying means of special interest adapted to display 3D data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/504Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of blood vessels, e.g. by angiography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • A61B8/14Echo-tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/08Volume rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/66Analysis of geometric attributes of image moments or centre of gravity
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/42Detecting, measuring or recording for evaluating the gastrointestinal, the endocrine or the exocrine systems
    • A61B5/4222Evaluating particular parts, e.g. particular organs
    • A61B5/4255Intestines, colon or appendix
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30028Colon; Small intestine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30172Centreline of tubular or elongated structure
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/008Cut plane or projection plane definition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2021Shape modification

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Veterinary Medicine (AREA)
  • Radiology & Medical Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Pulmonology (AREA)
  • Vascular Medicine (AREA)
  • Human Computer Interaction (AREA)
  • Geometry (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

本发明提供一种图像处理装置,能够使管腔脏器的形状变形为翻折衣服的袖口那样的形状,生成使管腔脏器的一部分的内表面露出在外侧的翻折三维图像,并进行显示。图像处理装置(100)的CPU(101),利用包含任意视线矢量(23)在内的多个平面(20)或者沿着管腔脏器(50)的中心线的多个平面对从体图像(40)中提取的管腔脏器(50)进行分割,在各平面(20)上,沿着在管腔脏器(50)的外侧设定的规定的凸面(例如圆30)对管腔脏器(50)内部的点进行坐标转换,对坐标转换后的对应点赋予原始位置的像素值。接着,以与对各平面(20)进行分割的步骤相反的步骤进行合成来生成翻折体图像,从任意的视点方向将该翻折体图像投影在投影面上,生成附加了阴影的翻折三维图像(90)并显示于显示装置(107)。

Description

图像处理装置以及图像处理方法
技术领域
本发明涉及一种由多个断层像生成三维图像的图像处理装置以及图像处理方法。
背景技术
一直以来,一种采用通过例如X射线CT(computed tomography,计算机断层摄影)装置或MRI(magnetic resonance imaging,磁共振成像)装置、超声波诊断装置等拍摄的一连串的断层像组,生成对象物体的三维图像的方法被公知。例如,专利文献1中,记录了如下这样的图像显示装置:该图像显示装置从拍摄管腔脏器而得到的医用图像中提取管腔脏器的轮廓,从在管腔脏器的内侧设定的放射中心向管腔的轮廓设定放射状线,通过将管腔脏器内部的点的像素值复制到比轮廓点更外侧的放射状线上,从而生成将脏器内侧表面翻至外侧表面这样的翻面图像并进行显示。
另外,在专利文献2中记载了如下这样的三维图像构成方法,该三维图像构成方法将对被检测体的断层像进行叠加而成的体图像(volumeimage)在任意视点面的坐标系上进行透视转换来生成二维图像,并求出在被检测体内部设定的虚拟的线光源的位置与被检测体的内侧轮廓点之间的距离,通过使该距离反映成二维图像的阴影标记,从而能够从外侧确认被检测体内部的凹凸。另外,在专利文献3中记载了如下这样的医用图像处理装置,该医用图像处理装置在管腔脏器内部设定视点,将投影方向设定在投影面的中心部和周边部中不同的方向,从而例如使图像的中心部显示与由内窥镜观察的图像等同的虚拟内窥镜图像,使图像的周边部显示将管腔脏器内部展开了的图像。
专利文献
专利文献1:日本特开2010-17490号公报
专利文献2:日本特开平9-237352号公报
专利文献3:日本特开2009-22411号公报
发明内容
发明要解决的技术课题
如上所述,生成将被检测体内部显示于外侧的图像的技术林林总总。但是,为了容易看见隐藏在内表面的凹凸或褶皱处的部分,如果能够如用手指从脏器的里面侧进行按压来对表面进行扩展那样,即使在图像上也能够使脏器的表面形状变形,则更容易观察。另外,在对想要观察的部位进行变形的情况下,若变成与原始的形状或位置相差甚远的图像,则反而会妨碍理解,所以优选容易直观理解原始的位置和形状地进行显示。
本发明鉴于以上问题而作,其目的在于提供一种能够使管腔脏器的形状变形为比如将衣服的袖口翻折那样的形状,生成使管腔脏器的一部分的内表面向外侧露出的翻折图像,并进行显示的图像处理装置以及图像处理方法。
用于解决课题的技术手段
为了实现上述目的,本发明的图像处理装置,其特征在于,具备:坐标转换单元,其按照沿着在从对多个断层像进行叠加而成的体图像中提取的管腔脏器的外侧设定的规定的凸面,对所述管腔脏器内部的各点进行翻折的方式进行坐标转换,对坐标转换后的对应点赋予原始位置的像素值;和生成单元,其采用基于所述坐标转换单元进行坐标转换后的图像信息,生成翻折体图像。
另外,本发明的图像处理方法,其特征在于,包括:坐标转换工序,按照沿着在从对多个断层像进行叠加而成的体图像中提取的管腔脏器的外侧设定的规定的凸面,对所述管腔脏器内部的各点进行翻折的方式进行坐标转换,对坐标转换后的对应点赋予原始位置的像素值;和生成工序,采用基于所述坐标转换工序进行坐标转换后的图像信息,生成翻折体图像。
发明效果
根据本发明的图像处理装置以及图像处理方法,能够使管腔脏器的形状变形为对衣服的袖口进行翻折那样的形状,生成将管腔脏器的一部分的内表面向外侧露出的翻折图像并进行显示。
附图说明
图1是表示图像处理装置100的整体构成的图。
图2是说明本发明所涉及的图像处理装置100执行的翻折图像生成处理的流程的流程图。
图3是说明由平面20对体图像40内的管腔脏器50进行分割的例子的图。
图4是表示在沿着凸面(圆30)对管腔脏器50进行翻折(坐标转换)的情况下建立坐标对应的图。
图5是表示平面20中的管腔脏器50的翻折图像80的一例。
图6是如内窥镜图像那样进行三维显示的翻折三维图像90的一例。
图7是对翻折三维图像90附加标度来进行显示的一例。
符号说明
1图像处理系统、100图像处理装置、101CPU、102主存储器、103存储装置、104通信I/F、105显示存储器、106I/F、107显示装置、108鼠标、109输入装置、20含视线矢量的平面或者沿着管腔脏器的中心线的平面、30圆、40体图像、41,42,…断层像、50管腔脏器、80在平面20上对管腔脏器50内侧的点进行翻折后的图像、82翻折部分、90虚拟内窥镜显示的翻折三维图像、92翻折三维图像90的中心部、94翻折三维图像90的周边部、95静止按钮、96旋转按钮、97移动按钮、98表面变形按钮、99结束按钮、P管腔脏器内部的点、Q坐标转换后的对应点、R  圆30与管腔脏器50之间的切点
具体实施方式
以下,基于附图,对本发明的实施方式进行详细说明。
首先,参照图1,对应用了本发明的图像处理装置100的图像处理系统1的构成进行说明。
如图1所示,图像处理系统1具备:具有显示装置107和输入装置109的图像处理装置100;经由互联网110与图像处理装置100连接的图像数据库111、和医用图像撮影装置112。
图像处理装置100是进行图像生成、图像解析等处理的计算机。包含例如在医院等所设置的医用图像处理装置。
图像处理装置100,如图1所示,具备:CPU(Central Processing Unit,中央处理器)101、主存储器102、存储装置103、通信接口(通信I/F)104、显示存储器105、以及与鼠标108等外部设备之间的接口(I/F)106,各部经由总线113而连接。
CPU101将在主存储器102或者存储装置103等中保存的程序调出至主存储器102的RAM上的工作存储器区域来进行执行,对经由总线113而被连接的各部进行驱动控制,实现图像处理装置100执行的各种处理。
并且,CPU101执行后述的翻折图像生成处理(参照图2),生成翻折三维图像90后显示于显示装置107中。关于翻折三维图像90以及翻折图像生成处理后述。
主存储器102由ROM(Read Only Memory,只读存储器)、RAM(RandomAccess Memory,随机存取存储器)等构成。ROM对计算机的引导程序或BIOS等程序、数据等进行永久保存。另外,RAM对从ROM、存储装置103等载入的程序、数据等进行临时保存,并且具备用于CPU101进行各种处理而使用的工作区域。
存储装置103是向HDD(硬盘驱动器)或其他记录介质进行数据读写的存储装置,保存有CPU101执行的程序、程序执行所需要的数据、OS(操作系统)等。关于程序,保存有相当于OS的控制程序、和应用程序。这些各程序代码,根据需要通过CPU101被读出并转移至主存储器102的RAM,作为各种手段而被执行。
通信I/F104具有通信控制装置、通信端口等,对图像处理装置100与网络110之间的通信进行传递。另外,通信I/F104经由网络110进行与图像数据库111、或与其他计算机或X射线CT装置、MRI装置等医用图像撮影装置112之间的通信控制。
I/F106是用于连接周边设备的端口,进行与周边设备之间的数据的收发。例如,也可以经由I/F106对鼠标108或记录笔(stylus pen)等指向设备进行连接。
显示存储器105是对从CPU101输入的显示数据进行临时储存的缓冲器。所储存的显示数据以规定的定时被输出至显示装置107。
显示装置107由液晶面板、CRT监视器等显示器装置、和用于与显示器装置协作执行显示处理的逻辑电路构成,经由显示存储器105与CPU101连接。显示装置107通过CPU101的控制对在显示存储器105中储存的显示数据进行显示。
输入装置109是例如键盘等输入装置,将由操作者输入的各种指示或信息输出至CPU101。操作者使用显示装置107、输入装置109、以及鼠标108等外部设备对图像处理装置100进行对话式操作。
网络110包含:LAN(LocalArea Network,局域网)、WAN(Wide AreaNetwork,广域网)、内部网、互联网等各种通信网络,对图像数据库111或服务器、其他信息设备等与图像处理装置100之间的通信连接进行传递。
图像数据库111对通过医用图像撮影装置112拍摄的图像数据进行储存后进行保存。在如图1所示的图像处理系统1中,图像数据库111的构成为经由网络110与图像处理装置100连接,但也可以是在图像处理装置100内的例如存储装置103中设置图像数据库111。
接着,参照图2~图6,针对图像处理装置100的动作进行说明。
图像处理装置100的CPU101从主存储器102中读出与图2所示的翻折图像生成处理相关的程序以及数据,基于该程序以及数据执行处理。
另外,在开始执行以下的处理时,作为运算对象的体图像40的数据,从图像数据库111等经由网络110以及通信I/F104而被取入,并储存在图像处理装置100的存储装置103中。所谓体图像40,如图3所示,是将多个断层像41、42、43、…叠加而成的图像数据。体图像40的各像素(体素:voxel)分别具有像素值。
在图2的翻折图像生成处理中,首先,图像处理装置100的CPU101将对拍摄对象区域所得的一连串的断层像41、42、…进行叠加而成的体图像40作为输入图像数据而读入。在此所读入的体图像40设为例如包括大肠等管腔脏器50在内的区域的一连串的断层像组。作为输入图像数据的适当的例子,可列举超声波图像、CT图像、或者MR图像等。另外,对象区域不限于大肠,也设为其他管腔状脏器、例如血管或支气管等。
首先,CPU101在从体图像40提取出的管腔脏器50的内部设定任意的视点21,利用包含设定在管腔脏器50的内部的任意视线矢量23在内的多个平面、或者沿着管腔脏器50的中心线的多个平面,对管腔脏器50进行分割(步骤S1)。以下说明中,将对管腔脏器50进行分割的平面称作平面20。
上述视点21,在如本实施方式那样想要最终生成虚拟内窥镜图像的情况下,只要将其作为该虚拟内窥镜图像的视点即可。视线矢量23被设定为从视点21向管腔脏器50的进深方向的任意方向。
所谓管腔脏器50的中心线是指将管腔脏器50的各剖面的重心坐标沿着管腔脏器50串接而成的线。重心坐标能够采用管腔脏器的壁(脏器区域与其他他区域之间的边界)的坐标而计算出。
图3是表示基于包含管腔脏器50的视线矢量23在内的平面20进行的分割的一例的图。
如图3所示,在体图像40内的管腔脏器50内部设定任意的视点21,另外,在管腔脏器50的进深方向设定视线矢量23。通过包含该视线矢量23在内的多个平面20对管腔脏器50进行分割。管腔脏器50通过多个平面20以视点21为中心被分割成放射状。
如图4所示,对管腔脏器50进行了分割的各平面20,具有管腔脏器50的壁、内侧区域、以及外侧区域的图像信息。
另外,图4是平面20的X轴与视线矢量23一致的例子。在平面20为图3的虚线所示的区域的情况下,图4的X轴的下侧部分不包含在平面20内。
但是,图4的X轴的下侧部分包含在对管腔脏器50进行分割的其他平面内。另外,如图4所示,也可以按照X轴的上侧部分与下侧部分包含在同一平面内的方式对管腔脏器50进行分割。
接着,CPU101按照在所分割的各平面20将管腔脏器50内部的点向外侧翻折的方式进行坐标转换(步骤S2)。即,CPU101计算出在所分割的各平面20上,沿着在管腔脏器50的外侧设定的规定的凸面对管腔脏器50内部的各点进行了翻折的情况下的对应点,对所计算出的对应点赋予原始位置的像素值。
参照图4,针对步骤S2的坐标转换处理进行说明。
如图4所示,在包含视线矢量23的平面20中,将视线矢量23的方向设为X方向,将与视线矢量23垂直的方向设为Y方向。另外,在管腔脏器50的外侧设定规定的凸面。在图4的例子中,将凸面设为半径为r0的圆30,该圆30按照与管腔脏器50的外侧表面相切的方式被设定。
CPU101沿着凸面(圆30)对管腔脏器50的内部各点P(X1,Y1)进行坐标转换。
例如,在将从管腔脏器50的表面的点P’(X1,Y1’)距离为r的处于内部的点P(X1,Y1)沿着圆30进行翻折的情况下,沿着圆30的圆周使之移动距离L,将从该点在圆30的法线方向离开距离r的点Q作为坐标转换后的对应点。上述距离L是圆30与管腔脏器50之间的切点R与点P’之间的距离。
管腔脏器50的内部的点P(X1,Y1)的对应点Q(X,Y)的坐标,由下式计算出。
X1=X0-L=X0-Ψ·r0=X0-(2π-θ-π/2)·r0
Y1=Y0-r0-r
X=X0+(r+r0)·cosθ
Y=Y0+(r+r0)·sinθ
其中,(X0,Y0)是圆30的中心O的坐标,θ是从圆30的中心O向X轴正方向延伸的直线OW与直线OQ之间所形成的角度(翻折角度),r0是圆30的半径,r是从点P至管腔脏器50的表面为止的距离。
对对应点Q(X,Y)的像素值分配原始的点P(X1,Y1)的像素值,得到坐标转换后的图像(翻折图像80)。
如图5所示,关于在平面20上形成的翻折图像80的翻折部分82,由于管腔脏器50内部的各点P沿着凸面(圆30)而被进行坐标转换,故而离圆30越远的像素,越粗略地计算对应点Q。因此,CPU101通过对周边的对应点Q的像素值进行插补,从而求出对应点Q以外的像素值。
另外,在后述的步骤S4中对翻折的管腔脏器50进行虚拟内窥镜显示的情况下,也可以将进行坐标转换的范围(计算对应点Q的点P的范围)限定为处于图4的点P’与点R之间的距离为L=0(管腔脏器50与圆30之间的切点)至L=π·r0(圆30的半圆周长)为止的范围内的点P。这是因为,在后述的步骤S4中,在进行虚拟内窥镜显示时,比L=π·r0远的范围不显示在绕至圆30的里侧的虚拟内窥镜图像上。
另外,在计算处于L>π·r0的范围内的点P的对应点Q的情况下,关于不超过L=π·r0的范围,可以沿着圆30计算对应点Q;关于超过L=π·r0的范围,按照沿着与X轴平行的直线U V的方式,计算对应点Q。
若如步骤S2那样进行坐标转换,则得到例如图5所示那样的翻折图像80。
如图5所示,在将管腔脏器50变形为如同将衣服的袖口卷起那样的形状的翻折部分82,管腔脏器50的内部向外侧露出。由于翻折部分82变形为沿着凸面(圆30)的形状,因此翻折部分82中褶皱展开,容易观察隐藏在褶皱处的部位。
接着,CPU101进行步骤S1的相反处理。即,按与步骤S1相反的步骤对具有翻折图像80的图像信息的各平面20进行合成,得到翻折体图像(步骤S3)。
CPU101根据翻折体图像制作翻折三维图像90(步骤S4)。在此,所制作的翻折三维图像90,可以是带阴影的三维图像或立体视觉图像等中的任一种。
所谓带阴影的三维图像是指设定任意视点以及视线矢量,对在投影面投影体图像所得的二维图像的各像素,附加规定的阴影使之以三维方式可见的图像。附加阴影的方法可以是体绘制(volume rendering)法、光线投射算法(Ray-casting)、面绘制(surface)法、宽度绘制(depth)法等中的任一种。并且,所投影的图像可以是平行投影、中心投影中的任一种。在管腔脏器50的内部设定视点并且在管腔的进深方向设定视线矢量来进行中心投影的情况下,能够得到如同用内窥镜管对管腔脏器50进行观察那样的虚拟内窥镜图像(图6参照)。所谓立体视觉图像是指故意使双眼产生视差,在观察者的大脑内实现立体视觉映像,公知有利用双凸透镜(lenticular lens)或视差屏障(parallax barrier)(日本特开2004-78086号公报等)。
图6是被虚拟内窥镜显示的翻折三维图像90的一例。若对将管腔脏器50的一部分翻折而成的翻折体图像进行虚拟内窥镜显示,则如图6所示,在图像90的中心部92显示通常的虚拟内窥镜图像,在图像90的周边部94显示翻折部分82。在图像90的中心部92,管腔脏器50的内侧褶皱未被翻折而显示,在周边部94按照管腔脏器50的内侧褶皱向外侧露出的方式被显示。
按照这样,管腔脏器50如同卷起衣服的袖口那样被翻折,内部的褶皱展开,显示为图像的一部分(虚拟内窥镜图像的情况下为图像的周边部94)。因此,关于翻折部分82,能够容易观察管腔脏器50的内部。另外,翻折部分82由于是沿着凸面(圆30)而被进行坐标转换,故而由于是按照好像用手指从里侧(管腔脏器50的外侧)进行按压来将内侧表面张开那样进行变形,因此隐藏在褶皱处的部位展开变得容易观察。另外,翻折部分82以外的部位由于是与通常的三维图像同样地被显示(在虚拟内窥镜图像的情况下,图像的中心部成为通常的内窥镜图像),能够以与医生等通常进行的图像诊断相同的感觉进行观察,容易直观掌握观察场所的原始位置或原始形状。
另外,也可以根据规定的顺序或者操作者的操作,对翻折三维图像90的显示状态进行变更。
例如,如图6所示,设置由用户操作的静止按钮95、旋转按钮96、移动按钮97、表面变形按钮98、结束按钮99,CPU101根据对各按钮的点击操作,对翻折三维图像90的显示状态进行变更。
作为显示状态,除了例如步骤S4所示那样的静止显示模式之外,还包含旋转显示模式、移动显示模式、表面变形模式等。
在旋转显示模式下,对虚拟内窥镜显示的视线矢量23的方向进行变更。视线矢量23的方向根据设定操作而被变更。CPU101基于被变更后的视线矢量23执行上述翻折图像生成处理,生成翻折三维图像90以进行显示。
在移动显示模式下,CPU101一边使圆30(凸面)沿着管腔脏器50依次移动,一边计算处于规定范围内的点P的对应点Q(进行步骤S2的坐标转换),从而生成多个翻折三维图像90,使之如运动画面那样依次显示。
这样,由于能够一边使管腔脏器50的翻折位置向进深方向前进,一边使翻折三维图像90依次显示,因此容易观察整个管腔脏器。
在表面变形模式下,CPU101通过使翻折中所使用的凸面形状改变来计算对应点Q(进行步骤S2的坐标转换),从而生成翻折位置的表面形状不同的多个翻折三维图像90,并依次显示。例如,或者对圆30的半径值进行变更来生成翻折三维图像90,或者代替圆30,生成沿着楕圆、抛物线、双曲线等任意曲线、或三角形、四角形、其他多角形的翻折三维图像90。这样,能够显示褶皱的展开方式或视觉角度不同的多个各种翻折三维图像90。
另外,也可以使静止显示模式、旋转显示模式、移动显示模式、以及表面变形模式的各显示状态适当组合来进行显示。
若结束按钮99被操作,结束指示被输入,则结束一连串的翻折图像生成处理。
另外,也可以对翻折三维图像90附加圆周方向的标度来使之显示。
例如,如图7所示,将表示管腔脏器内部在圆周方向的间隔的刻度附加在楕圆的圆周上所形成的标度71叠加显示在翻折三维图像90的翻折部分上。在图7的例子中,虽然在半径方向上并列显示两个标度71,但标度71的显示数不限于两个。
标度71的楕圆的椭圆率(ellipticity)可以根据视线方向或视点的位置而被改变。即,在视线方向与管腔脏器的进深方向平行的情况下,或在视点的位置在管腔脏器的中心线上的情况下,也可以使楕圆接近于圆。另一方面,也可以使视线方向与管腔脏器的进深方向之间的倾斜度越大,并且视点的位置越从管腔脏器的中心线偏离,楕圆的椭圆率越大。
由于在翻折部分管腔脏器50的内部向外侧展开,因此楕圆圆周上的刻度间隔变大外侧的标度左右。另外,也可以根据翻折部分的形状来改变刻度的间隔。例如,可以在张开更多的翻折部分使刻度的间隔变大。
关于标度71的刻度位置,可以使之与在步骤S1中对管腔脏器50进行了分割的平面的位置、或者相邻的平面的中间一致。按照这样,操作者便能够知道通过插补所求出的像素值的位置。
关于标度71的显示与不显示之间的切换,通过由操作者对在显示装置107中显示的标度按钮70进行点击操作来进行。
通过在翻折三维图像90上叠加显示标度71,从而操作者与其他部分进行比较便能够得知变形显示的翻折部分的大小。
如以上所说明,本发明的图像处理装置100通过利用包含在管腔脏器的进深方向设定的任意视线矢量23在内的多个平面20、或者沿着管腔脏器的中心线的多个平面,对从叠加多个断层像而成的体图像40中提取出的管腔脏器50进行分割,在各平面20上,沿着在管腔脏器50的外侧设定的规定的凸面(例如,圆30)使之变形。即,CPU101计算沿着凸面(圆30)对处于管腔脏器50内部的规定范围中的各点P进行翻折的情况下的对应点Q,对所计算出的对应点Q赋予原始位置的像素值。这样,按照与进行分割的步骤相反的步骤对放置被坐标转换后的图像的各平面20进行合成,生成翻折体图像。并且,将翻折体图像从任意视点方向投影在投影面上,生成附加了阴影的翻折三维图像90,并显示于显示装置107。
因此,由于如翻折衣服的袖口那样对管腔脏器50进行翻折,将内部的褶皱显示在外侧,因此容易观察管腔脏器50的内部。并且,由于沿着凸面进行翻折,因此隐藏在褶皱处的部位也被展开显示,变得容易观察。进而,被翻折的内侧褶皱,由于显示于通常的管腔脏器50的图像近傍,故而容易直观掌握翻折前的位置或形状,对医生等的诊断是有効的。
另外,上述凸面也可以是包含与管腔脏器50的外侧表面相切的圆或者楕圆在内的任意曲面或者任意多角形中的一种。如果根据内表面的褶皱的状态选择适当的凸面,则能够生成容易观察的翻折三维图像。
另外,不仅如上述例示那样进行虚拟内窥镜显示,还可以以各种显示形式对翻折三维图像90进行显示。例如如下这样的移动显示模式也很适合,该移动显示模式通过一边使上述凸面沿着上述管腔脏器的外侧表面依次移动,一边沿着凸面对管腔脏器50内部的各点进行坐标转换,从而生成多个翻折三维图像90,如运动画面那样依次进行显示。采用移动显示模式,按照对管腔脏器50进行依次翻折的同时向进深方向前进的方式,使翻折图像进行显示,因此容易观察管腔脏器整体。
另外,如下这样的表面变形模式也很适合,该表面变形模式通过使上述凸面的形状依次或者根据操作者的操作进行变化,并沿着凸面对管腔脏器50内部的各点进行坐标转换,从而生成翻折位置的表面形状不同的多个翻折三维图像90,并依次进行显示。
在表面变形模式下,由于使翻折的形状改变为各种形状,因此能够显示褶皱的展开方式或视觉角度不同的多个翻折三维图像90。
另外,也可以通过向喇叭形状的曲面投影管腔脏器的像素值,从而制作翻折体图像。
以上,参照附图对本发明所涉及的图像处理装置的适当的实施方式进行了说明,但本发明并非限定于该例。显然本领域技术人员在本申请公开的技术思想范围内,还能够想到各种变更例或者修正例,应了解这些变更例或者修正例当然也属于本发明的技术范围内。

Claims (14)

1.一种图像处理装置,其特征在于,具备:
坐标转换单元,其按照沿着在从对多个断层像进行叠加而成的体图像中提取的管腔脏器的外侧设定的规定的凸面,对所述管腔脏器内部的各点进行翻折的方式进行坐标转换,对坐标转换后的对应点赋予原始位置的像素值;和
生成单元,其采用基于所述坐标转换单元进行坐标转换后的图像信息,生成翻折体图像。
2.根据权利要求1所述的图像处理装置,其特征在于,
还具备分割单元,该分割单元利用包含在所述管腔脏器的进深方向上设定的任意的视线矢量在内的多个平面、或者沿着管腔脏器的中心线的多个平面,对所述管腔脏器的区域进行分割,
所述坐标转换单元在通过所述分割单元所分割的各平面上进行坐标转换,
所述生成单元通过对具有坐标转换后的图像信息的所述各平面进行合成,从而生成所述翻折体图像。
3.根据权利要求1所述的图像处理装置,其特征在于,
还具备显示单元,该显示单元从任意的视点方向对通过所述生成单元所生成的所述翻折体图像进行投影,生成翻折三维图像并进行显示。
4.根据权利要求3所述的图像处理装置,其特征在于,
根据由所述显示单元显示的所述翻折三维图像,来限定通过所述坐标转换单元进行坐标转换的范围。
5.根据权利要求1所述的图像处理装置,其特征在于,
所述凸面包括与所述管腔脏器的外侧表面相切的圆、楕圆、任意曲面、以及任意多角形中的至少任意一种。
6.根据权利要求3所述的图像处理装置,其特征在于,
还具备三维运动画面显示单元,该三维运动画面显示单元通过一边使所述凸面沿着所述管腔脏器的外侧表面依次移动,一边进行基于所述坐标转换单元的坐标转换,从而生成多个所述翻折三维图像,并进行依次显示。
7.根据权利要求3所述的图像处理装置,其特征在于,
还具备表面变形显示单元,该表面变形显示单元通过依次或者根据操作者的操作使所述凸面的形状发生变化来进行基于所述坐标转换单元的坐标转换,从而生成翻折位置中表面形状不同的多个所述翻折三维图像,并进行依次显示。
8.一种图像处理方法,其特征在于,包括:
坐标转换工序,按照沿着在从对多个断层像进行叠加而成的体图像中提取的管腔脏器的外侧设定的规定的凸面,对所述管腔脏器内部的各点进行翻折的方式进行坐标转换,对坐标转换后的对应点赋予原始位置的像素值;和
生成工序,采用基于所述坐标转换工序进行坐标转换后的图像信息,生成翻折体图像。
9.根据权利要求8所述的图像处理方法,其特征在于,
进一步包括分割工序,在该分割工序中,利用包含在所述管腔脏器的进深方向上设定的任意视线矢量在内的多个平面、或者沿着管腔脏器的中心线的多个平面,对所述管腔脏器的区域进行分割,
所述坐标转换工序在通过所述分割工序进行分割的各平面上进行坐标转换,
所述生成工序通过对具有坐标转换后的图像信息的所述各平面进行合成,从而生成所述翻折体图像。
10.根据权利要求8所述的图像处理方法,其特征在于,
进一步包括显示工序,在该显示工序中,从任意的视点方向对通过所述生成工序所生成的所述翻折体图像进行投影,生成翻折三维图像并进行显示。
11.根据权利要求10所述的图像处理方法,其特征在于,
根据在所述显示工序中所显示的所述翻折三维图像,来限定通过所述坐标转换工序进行坐标转换的范围。
12.根据权利要求8所述的图像处理方法,其特征在于,
所述凸面包括与所述管腔脏器的外侧表面相切的圆、楕圆、任意曲面、以及任意多角形中的至少任意一种。
13.根据权利要求10所述的图像处理方法,其特征在于,
进一步包括三维运动画面显示工序,在该三维运动画面显示工序中,通过一边使所述凸面沿着所述管腔脏器的外侧表面依次移动,一边进行基于所述坐标转换工序的坐标转换,从而生成多个所述翻折三维图像,并进行依次显示。
14.根据权利要求10所述的图像处理方法,其特征在于,
进一步包括表面变形显示工序,在该表面变形显示工序中,通过依次或者根据操作者的操作使所述凸面的形状发生变化来进行基于所述坐标转换工序的坐标转换,从而生成翻折位置的表面形状不同的多个所述翻折三维图像,并进行依次显示。
CN201180021817.1A 2010-05-10 2011-04-20 图像处理装置以及图像处理方法 Expired - Fee Related CN102883661B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-108109 2010-05-10
JP2010108109 2010-05-10
PCT/JP2011/059673 WO2011142222A1 (ja) 2010-05-10 2011-04-20 画像処理装置及び画像処理方法

Publications (2)

Publication Number Publication Date
CN102883661A true CN102883661A (zh) 2013-01-16
CN102883661B CN102883661B (zh) 2015-06-03

Family

ID=44914278

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180021817.1A Expired - Fee Related CN102883661B (zh) 2010-05-10 2011-04-20 图像处理装置以及图像处理方法

Country Status (4)

Country Link
US (1) US8977020B2 (zh)
JP (1) JP5815513B2 (zh)
CN (1) CN102883661B (zh)
WO (1) WO2011142222A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109863536A (zh) * 2017-03-24 2019-06-07 株式会社斯库林集团 图像处理方法及图像处理装置
CN112013784A (zh) * 2019-05-28 2020-12-01 深圳中科飞测科技有限公司 一种检测方法和检测系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8791957B2 (en) * 2008-12-05 2014-07-29 Hitachi Medical Corporation Medical image display device and method of medical image display
JP5988088B2 (ja) * 2012-06-08 2016-09-07 富士通株式会社 描画プログラム、描画方法、および、描画装置
JP6134978B2 (ja) * 2013-05-28 2017-05-31 富士フイルム株式会社 投影画像生成装置、方法およびプログラム
US10510171B2 (en) * 2016-11-29 2019-12-17 Biosense Webster (Israel) Ltd. Visualization of anatomical cavities
US11823376B2 (en) 2018-05-16 2023-11-21 Benevis Informatics, Llc Systems and methods for review of computer-aided detection of pathology in images
JP7366712B2 (ja) 2019-11-27 2023-10-23 新晃工業株式会社 室内空気の温度拡散システム
CN113643226B (zh) * 2020-04-27 2024-01-19 成都术通科技有限公司 标注方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002150313A (ja) * 2000-11-08 2002-05-24 Hitachi Medical Corp 三次元画像表示装置
CN101069655A (zh) * 2006-01-23 2007-11-14 西门子公司 用于腔体器官的虚拟内窥镜检查的方法和装置
WO2008111316A1 (ja) * 2007-03-14 2008-09-18 Fujifilm Corporation 心機能表示装置およびそのプログラム
WO2009016927A1 (ja) * 2007-07-31 2009-02-05 Hitachi Medical Corporation 医用画像表示装置、医用画像表示方法
JP2010017490A (ja) * 2008-06-13 2010-01-28 Hitachi Medical Corp 画像表示装置、方法、及びプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6226418B1 (en) * 1997-11-07 2001-05-01 Washington University Rapid convolution based large deformation image matching via landmark and volume imagery
US20020090119A1 (en) * 2001-01-08 2002-07-11 Motoaki Saito Displaying multiple slice images
DE60306511T2 (de) * 2002-04-16 2007-07-05 Koninklijke Philips Electronics N.V. Medizinisches darstellungssystem und bildverarbeitungsverfahren zur visualisierung von gefalteten anatomischen bereichen von objektoberflächen
DE10254908B4 (de) * 2002-11-25 2006-11-30 Siemens Ag Verfahren zum Herstellen eines Bildes
US20050113680A1 (en) * 2003-10-29 2005-05-26 Yoshihiro Ikeda Cerebral ischemia diagnosis assisting apparatus, X-ray computer tomography apparatus, and apparatus for aiding diagnosis and treatment of acute cerebral infarct
US8175352B2 (en) * 2007-09-21 2012-05-08 Siemens Aktiengesellschaft System and method for automated magnetic resonance scan prescription for optic nerves
US8340378B2 (en) * 2008-10-16 2012-12-25 Riverain Medical Group, Llc Ribcage segmentation
US20130104086A1 (en) * 2011-10-21 2013-04-25 Digital Artforms, Inc. Systems and methods for human-computer interaction using a two handed interface

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002150313A (ja) * 2000-11-08 2002-05-24 Hitachi Medical Corp 三次元画像表示装置
CN101069655A (zh) * 2006-01-23 2007-11-14 西门子公司 用于腔体器官的虚拟内窥镜检查的方法和装置
WO2008111316A1 (ja) * 2007-03-14 2008-09-18 Fujifilm Corporation 心機能表示装置およびそのプログラム
WO2009016927A1 (ja) * 2007-07-31 2009-02-05 Hitachi Medical Corporation 医用画像表示装置、医用画像表示方法
JP2010017490A (ja) * 2008-06-13 2010-01-28 Hitachi Medical Corp 画像表示装置、方法、及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109863536A (zh) * 2017-03-24 2019-06-07 株式会社斯库林集团 图像处理方法及图像处理装置
CN112013784A (zh) * 2019-05-28 2020-12-01 深圳中科飞测科技有限公司 一种检测方法和检测系统

Also Published As

Publication number Publication date
JP5815513B2 (ja) 2015-11-17
WO2011142222A1 (ja) 2011-11-17
US8977020B2 (en) 2015-03-10
CN102883661B (zh) 2015-06-03
US20130039560A1 (en) 2013-02-14
JPWO2011142222A1 (ja) 2013-07-22

Similar Documents

Publication Publication Date Title
CN102883661B (zh) 图像处理装置以及图像处理方法
US9956054B2 (en) Dynamic minimally invasive surgical-aware assistant
US9036882B2 (en) Diagnosis assisting apparatus, diagnosis assisting method, and recording medium having a diagnosis assisting program stored therein
US9848186B2 (en) Graphical system with enhanced stereopsis
US9830700B2 (en) Enhanced computed-tomography colonography
US6049622A (en) Graphic navigational guides for accurate image orientation and navigation
King et al. An immersive virtual reality environment for diagnostic imaging
US11574446B2 (en) Digital image reality aligning kit and method applied to mixed reality system for surgical navigation
US20180310907A1 (en) Simulated Fluoroscopy Images with 3D Context
US11461907B2 (en) Glasses-free determination of absolute motion
EP3497600B1 (en) Distributed interactive medical visualization system with user interface features
CN102915557A (zh) 图像处理系统、终端装置以及方法
MX2014000639A (es) Metodo y sistema para llevar a cabo una representacion.
US20200261157A1 (en) Aortic-Valve Replacement Annotation Using 3D Images
US9585569B2 (en) Virtual endoscopic projection image generating device, method and program
Jayarathne et al. Real-time 3D ultrasound reconstruction and visualization in the context of laparoscopy
Rahman et al. A framework to visualize 3d breast tumor using x-ray vision technique in mobile augmented reality
US20220175473A1 (en) Using model data to generate an enhanced depth map in a computer-assisted surgical system
JP6702751B2 (ja) 医用画像表示装置、医用画像表示システム及びプログラム
Kirmizibayrak Interactive volume visualization and editing methods for surgical applications
Gallo et al. User-friendly inspection of medical image data volumes in virtual environments
JP2023004884A (ja) 拡張現実のグラフィック表現を表示するための表現装置
Shukla et al. A Movable Tomographic Display for 3D Medical Images
Shimamura et al. Virtual Slicer: Visualizer for Tomographic Medical Images Corresponding Handheld Device to Patient
Shimamura et al. Virtual slicer: Interactive visualizer for tomographic medical images based on position and orientation of handheld device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20170330

Address after: Tokyo, Japan, Japan

Patentee after: Hitachi Ltd.

Address before: Tokyo, Japan, Japan

Patentee before: Hitachi Medical Corporation

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150603

Termination date: 20210420

CF01 Termination of patent right due to non-payment of annual fee