CN109106392A - 图像显示装置、显示控制装置及显示控制方法 - Google Patents

图像显示装置、显示控制装置及显示控制方法 Download PDF

Info

Publication number
CN109106392A
CN109106392A CN201811106055.5A CN201811106055A CN109106392A CN 109106392 A CN109106392 A CN 109106392A CN 201811106055 A CN201811106055 A CN 201811106055A CN 109106392 A CN109106392 A CN 109106392A
Authority
CN
China
Prior art keywords
image
thumbnail
unit
display
display area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811106055.5A
Other languages
English (en)
Inventor
青山岳人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2014120582A external-priority patent/JP6440386B2/ja
Priority claimed from JP2014120844A external-priority patent/JP6327966B2/ja
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN109106392A publication Critical patent/CN109106392A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Databases & Information Systems (AREA)
  • Surgery (AREA)
  • Multimedia (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供图像显示装置、显示控制装置及显示控制方法。该显示控制装置使用从医用图像数据获得的缩减图像,生成用于选择医用图像数据的缩略图。在缩略图中,根据从医用图像数据获得的解剖学区域,设置部分区域。响应于选择显示的缩略图的指令,该显示控制装置显示与缩略图相对应的医用图像。显示控制单元基于指令在缩略图中的指定位置,确定要显示在显示单元上的医用图像的显示内容。

Description

图像显示装置、显示控制装置及显示控制方法
本申请是申请日为2015年6月11日、申请号为201510319870.X、发明名称为“图像显示装置、显示控制装置及显示控制方法”的发明专利申请的分案申请。
技术领域
本发明涉及医用图像的显示控制装置和显示控制方法、以及使用该显示控制装置的图像显示装置。
背景技术
在医疗领域,使用诸如X射线计算机断层摄影(CT,computed tomography)装置、磁共振成像(MRI,magnetic resonance imaging)装置和正电子发射断层摄影(PET,positronemission tomography)装置的医用图像捕获装置来捕获医用图像。通过捕获图像而获得的医用图像数据经过各种类型的图像处理,并被存储在医院的数据服务器中一定时间段。当利用图像进行诊断时,医生使用医用图像显示装置(有时称为浏览器)来搜索目标医用图像数据并将其显示在监视器上,同时使用医用图像显示装置的各种功能。
这种医用图像显示装置显示与医用图像相对应的缩略图像(下文中称为缩略图),并且当接受到用户对缩略图的选择时,显示与所选缩略图相对应的医用图像,使得能够根据医用图像进行诊断。能够对所显示的作为诊断对象的医用图像实施医用图像显示装置的各种功能,例如对整个图像的放大缩小功能、浓度值转换功能、显示位置平行移动功能、图形描绘功能以及浓度值测量功能。
同时,医用图像数据依据按解剖学分类的区域(解剖学区域)而具有不同的最优显示条件(即使这些区域显示在同一图像中),因此,按照用户根据要观察的区域而改变的图像的显示条件来显示图像,并且用户对图像进行解读。例如,用户能够使用医用图像显示装置中的已知的浓度值转换功能,来改变显示条件。浓度值转换功能是根据预定规则转换灰度的各像素值的功能。一般地,以每个像素12位色阶(4096色阶)的亨氏单位(HU,Hounsfield unit)值来表达CT图像,并且将该HU值存储为像素值。当医生观察CT图像时,使用由如DICOM标准中定义的窗位(WL,window level)和窗宽(WW,window width)构成的两个浓度转换参数,来将12位色阶像素值(HU值)转化为8位色阶值,并将图像显示在显示屏上。因此,能够容易地看到特定器官或组织中的HU值的差(浓度差)。而且,在CT图像之外的图像(MRI图像、PET图像、超声图像等)中,为了能够容易地看到像素值的差(浓度差),也进行上述浓度转换。更具体地说,当在示出胸部区域的CT图像中详细观察肺野区域时,将WL设置为-600,并将WW设置为1500。当在示出胸部区域的CT图像中详细观察纵隔区域时,将WL设置为60,并将WW设置为400。当在示出胸部区域的CT图像中详细观察骨骼区域时,将WL设置为500,并将WW设置为2500。
日本特开2011-217947号公报(下文中称为文献1)描述了如下技术:通过在三维数据中指定任选区域,来改变图像显示条件。利用该技术,能够以与指定区域相对应的显示条件高效地显示CT图像,并且因此,能够减少用户工作。
然而,一般地,缩略图仅用于指定相应的医用图像,因此,在显示与所选缩略图相对应的医用图像之后,使用文献1中示出的技术必然改变显示条件。因此,存在进行解读时花费劳力的问题。
发明内容
本发明的实施例提供了能够利用简单操作、以适于要观察的区域的显示条件来显示任选医用图像数据的图像显示装置、显示控制装置、显示控制方法及程序。
根据本发明的一方面,提供了一种用于显示医用图像数据的显示控制装置,该显示控制装置包括:生成单元,其被构造为使用从医用图像数据获得的缩减图像,生成用于选择该医用图像数据的缩略图;以及显示控制单元,其被构造为响应于选择显示的所述缩略图的指令,将与所述缩略图相对应的医用图像显示在显示单元上,其中,所述显示控制单元基于所述指令在所述缩略图中的指定位置,确定要显示在所述显示单元上的所述医用图像的显示内容。
根据本发明的另一方面,提供了一种图像显示装置,其包括:上述显示控制装置;以及显示单元,其被构造为显示所述缩略图和所述医用图像数据。
根据本发明的另一方面,提供了一种显示控制装置,其包括:显示处理单元,其被构造为将代表包括多个医用图像的数据集的主图像的缩减图像,显示在显示单元上;接受单元,其被构造为接受对在所述缩减图像中设置的部分区域的选择指令;以及指定单元,其被构造为指定与对应于所述选择指令的所述部分区域相对应的所述医用图像,其中,所述显示处理单元还显示由所述指定单元指定的所述医用图像。
根据本发明的另一方面,提供了一种显示控制装置,其包括:主图像选择单元,其被构造为从包括多个医用图像的数据集中选择主图像;部分区域提取单元,其被构造为提取所述各医用图像的部分区域;生成单元,其被构造为生成可识别所述主图像中的部分区域的缩减图像;以及显示处理单元,其被构造为显示由所述生成单元生成的所述缩减图像。
根据本发明的另一方面,提供了一种显示控制装置的显示控制方法,该显示控制方法包括:生成步骤,使用从医用图像数据获得的缩减图像,生成用于选择该医用图像数据的缩略图;以及显示控制步骤,响应于选择显示的所述缩略图的指令,将与所述缩略图相对应的医用图像显示在显示单元上,其中,在所述显示控制步骤中,基于所述指令在所述缩略图中的指定位置,确定要显示在所述显示单元上的所述医用图像的显示内容。
根据本发明的另一方面,提供了一种显示控制装置的显示控制方法,该显示控制方法包括:第一显示处理步骤,将代表包括多个医用图像的数据集的主图像的缩减图像,显示在显示单元上;接受步骤,接受对在所述缩减图像中设置的部分区域的选择指令;指定步骤,指定与对应于所述选择指令的所述部分区域相对应的所述医用图像;以及第二显示处理步骤,显示在所述指定步骤中指定的所述医用图像。
根据本发明的另一方面,提供了一种显示控制装置的显示控制方法,该显示控制方法包括:主图像选择步骤,从包括多个医用图像的数据集中选择主图像;部分区域提取步骤,提取所述各医用图像的部分区域;生成步骤,生成可识别所述主图像中的部分区域的缩减图像;以及显示处理步骤,显示在所述生成步骤中生成的所述缩减图像。
通过以下参照附图对示例性实施例的描述,本发明的其他特征将变得清楚。
附图说明
图1是根据第一实施例的医用图像显示系统的框图。
图2是例示第一实施例的整体处理的流程图。
图3A和图3B是示出根据第一实施例的画面结构示例的图。
图3C是例示部分区域与解剖学区域之间的关联的管理的图。
图4A至图4C是示出当选择缩略图中的分割区域时的画面结构示例的图。
图5是示出根据第一实施例的变型例1的画面结构示例的图。
图6是根据第二实施例的医用图像显示系统的框图。
图7是例示第二实施例中的整体处理的流程图。
图8A和图8B是示出根据第二实施例的画面结构示例的图。
图9是根据第三实施例的医用图像显示系统的框图。
图10是例示第三实施例的整体处理的流程图。
图11是例示用于对缩略图输入方向信息的方法的图。
图12A和图12B是例示方向信息的输入范围与选择的部分显示区域之间的关系的图。
图13是示出医用图像显示系统的图。
图14是例示医用图像显示处理的流程图。
图15是步骤S1406和S1407中的处理的说明图。
图16A和图16B是第一变型例的说明图。
图17是示出根据第二变型例的缩略图的图。
图18是示出根据第二变型例的显示画面的图。
图19是示出根据第三变型例的显示画面的图。
图20是示出根据第五变型例的示例性缩略图的图。
图21A和图21B是第六变型例的说明图。
图22是示出根据第七变型例的示例性缩略图的图。
图23A和图23B是示出差分图像的显示示例的图。
图24是示出图像处理选择窗口的显示示例的图。
图25是例示根据第十变型例的图像显示处理的流程图。
具体实施方式
下文中将参照附图描述本发明的各实施例。请注意,本发明的范围不限于这些示例。
第一实施例
图1是示出根据第一实施例的医用图像显示系统的整体结构的图。医用图像显示系统包括用于显示医用图像数据的图像显示装置10和用于存储医用图像数据的数据库22,这些装置以可通信的方式相互连接。在本实施例中,图像显示装置10和数据库22使用局域网(LAN)21相互通信。数据库22管理诸如医用图像数据的检查信息,并且,图像显示装置10经由LAN 21获得数据库22中管理的医用图像数据并显示该医用图像数据。
图像显示装置10具有通信接口(IF)31、只读存储器(ROM)32、随机存取存储器(RAM)33、存储单元34、操作单元35、显示单元36以及控制单元37。通信IF 31由LAN卡等实现,并用于外部装置(例如数据库22)经由LAN 21与图像显示装置10之间的通信。ROM 32由非易失性存储器等实现,并存储各种程序等。RAM 33由易失性存储器等实现,并临时存储各种类型的信息。存储单元34由硬盘驱动器(HDD)等实现,并存储各种类型的信息。操作单元35由键盘、鼠标等实现,并用于从用户向装置输入指令。显示单元36由显示屏等实现,并向用户(例如医生)显示各种类型的信息。
作为用于控制医用图像数据的显示的示例性显示控制装置的控制单元37,由中央处理单元(CPU)等实现,并进行图像显示装置10中的处理的综合控制。控制单元37具有包括医用图像获得单元41、图像区域获得单元42、缩略图生成单元43、选择区域获得单元44以及显示处理单元45的功能结构。
医用图像获得单元41经由通信IF 31和LAN 21从数据库22获得医用图像数据,并将其输出给图像区域获得单元42、缩略图生成单元43以及显示处理单元45。图像区域获得单元42对从医用图像获得单元41获得的医用图像数据进行图像处理(稍后描述),确定该医用图像数据中的按解剖学分类的区域(下文中称为解剖学区域),获得解剖学区域的区域信息,并将该信息输出给缩略图生成单元43。
缩略图生成单元43使用由医用图像获得单元41获得的示出病情的医用图像数据的缩减图像、以及由图像区域获得单元42获得的医用图像数据中的解剖学区域的信息,生成缩略图,并将该缩略图输出给显示处理单元45。选择区域获得单元44获得用户经由操作单元35在显示单元36上显示的缩略图中选择的区域的选择区域信息,并将该信息输出给显示处理单元45。显示处理单元45将缩略图生成单元43生成的缩略图显示在显示单元36上。显示处理单元45还根据选择区域获得单元44获得的选择区域信息,将从医用图像获得单元41获得的示出病情的医用图像数据显示在显示单元36的主显示区域(例如图3A中的主显示区域102)。
请注意,控制单元37中包括的至少一部分单元可以由独立装置实现。此外,各单元可以由用于实现功能的软件来实现。在本实施例中,假设各单元由软件实现。
接下来,将参照图2、图3A至图3C和图4A至图4C,来描述本实施例中的控制单元37的整体处理。图2是例示控制单元37进行的处理的流程图。图3A和图4A示出了通过处理(稍后描述)而显示在显示单元36上的示例性画面。图3B、图4B和图4C示出了在图3A和图4A中示出的缩略图103和104的放大图。
在图3A和图4A中,显示画面100上的缩略图显示区域101例如显示先前或当前从一个患者捕获的至少一个医用图像的缩略图。缩略图103至107示出了缩略图生成单元43根据医用图像生成的缩略图的显示示例。主显示区域102是用于显示与所选择的缩略图相对应的医用图像数据(即被选择为要由用户进行解读的数据的医用图像)的区域。可以对主显示区域102中显示的医用图像实施图像显示装置的各种功能,例如对整个图像的放大缩小功能、浓度值转换功能、显示位置平行移动功能、图形描绘功能以及浓度值测量功能。主显示区域102被分割为多个部分显示区域以显示医用图像数据。在本实施例中,主显示区域102被分割为4个部分显示区域108至111。如果将期望的缩略图拖放到期望的部分显示区域,则将与该缩略图相对应的医用图像数据显示在放置该缩略图的部分显示区域中。下文中,将以医用图像数据(胸部区域的X射线CT图像)为例进行描述,但是应当理解,本发明所适用的医用图像数据不限于此。
在图2所示的流程图中,在步骤S200中,医用图像获得单元41经由通信IF 31和LAN21从数据库22中读取医用图像数据。在步骤S201中,图像区域获得单元42从在步骤S200中读取的医用图像数据中提取解剖学区域,并获得该解剖学区域的区域信息。例如,以如下方式提取解剖学区域。
首先,图像区域获得单元42使用平滑滤波器对医用图像数据进行噪声去除。接下来,使用预定阈值(例如HU值:-200)对图像像素值进行二值化处理,使得体内区域和体外区域相互分离。此外,使用其他阈值(例如HU值:300)将体内区域分离为骨骼区域和其他区域。此外,使用其他阈值(例如HU值:-500)将其他区域分离为肺野区域和软组织区域。请注意,用于提取解剖学区域的处理可以是任意处理,只要能够从读取的医用图像数据中提取预定区域即可,而不限于该方法。例如,可以使用诸如图割(graph cut)处理的已知的器官分割处理,来提取解剖学区域。关于要提取的区域,例如预先设置从医学数字成像和通信(DICOM)头等获得的图像信息与要提取的区域之间的对应关系(如表1所示),并且提取与医用图像数据中包含的图像信息相对应的提取区域。如表1所示,基于用于捕获医用图像数据的形式(modality)以及图像捕获部位,来确定要从医用图像数据中提取的解剖学区域。如表1所示的表被存储在存储单元34等中。
表1
在步骤S202中,缩略图生成单元43通过以下处理生成缩略图。首先,缩略图生成单元43生成与在步骤S200中读取的医用图像数据相对应的图像数据(下文中称为相应图像数据)。如果读取的医用图像数据是二维医用图像数据(一个切片图像),则相应图像数据是该切片图像、或通过提取部分切片图像而获得的图像。另一方面,如果读取的医用图像数据是三维医用图像数据(多个切片图像),则相应图像数据是代表该三维医用图像数据的切片图像、或预定位置的切片图像(例如第一切片图像)。另选地,相应图像数据可以是通过提取部分切片图像而获得的图像。代表三维医用图像数据的切片图像可以是包含根据表1所示的医用图像数据的图像信息而预先确定的所有提取区域的切片图像,或者可以是包含最多种类的提取区域的切片图像。随后,缩略图生成单元43根据相应图像数据生成缩减图像,并使用生成的缩减图像生成缩略图。
接下来,缩略图生成单元43根据在步骤S201中提取的解剖学区域从缩略图中提取部分区域。例如,如果在步骤S201中获得体外区域、肺野区域、软组织区域和骨骼区域,并且相应图像数据中包含这些区域,则缩略图生成单元43从缩减图像中提取与这些区域相对应的部分区域。然后,生成示出这些部分区域之间的边界的分割线(图3B中的虚线),使得能够看到提取出的部分区域。因此,生成在缩减图像上描绘或覆盖有分割线的缩略图。在图3B中,分割线112示出了体内区域与体外区域之间的边界,分割线113示出了肺野区域与软组织区域之间的边界,分割线114示出了骨骼区域与软组织区域之间的边界。以此方式,在缩略图103中,设置了沿分割线112至114分割的部分区域122至124。缩略图生成单元43设置部分区域122至124(例如,如图3B所示),并管理各部分区域与解剖学区域之间的对应关系(如图3C所示)。部分区域122、123和124还分别被称为软组织区域122、肺野区域123和骨骼区域124。
如果在步骤S200中读取了多个医用图像数据,则缩略图生成单元43对所有的医用图像数据进行该处理,并针对所有医用图像数据生成缩略图。显示处理单元45将缩略图生成单元43生成的缩略图并排显示在缩略图显示区域101中。在图3A的示例中,在缩略图显示区域101中显示了缩略图103至107。
在步骤S203中,选择区域获得单元44获得指示由用户使用操作单元35而选择的缩略图中的部分区域的信息。例如,如果使用未示出的指示设备(例如鼠标)点击缩略图103中的部分区域123,则选择区域获得单元44获得指示被点击的部分区域123的信息。图4A至图4C示出了在该操作时的显示单元36上的画面示例。指针115是由指示设备操作的指针(例如,鼠标指针),并且指示利用操作单元35进行输入的当前位置。
在步骤S204中,显示处理单元45以适于与在步骤S203中选择缩略图时指定的部分区域相对应的解剖学区域的显示条件,在主显示区域102中显示与所选择的缩略图相对应的医用图像数据。在图4B的示例中,利用指针115选择缩略图103中的部分区域123(肺野区域),并且例如以适于观察图4A所示的肺野区域的显示条件,在部分显示区域108中显示与缩略图103相对应的医用图像数据。图4C示出了如下状态:指针115选择缩略图104并指定与软组织区域相对应的部分区域131。在这种情况下,以适于观察软组织区域的显示条件,在主显示区域102的部分显示区域110中显示与缩略图104相对应的医用图像数据。
请注意,根据预定规则来确定:使用多个部分显示区域(例如,部分显示区域108至111)中的哪个部分显示区域,来显示与所选择的缩略图相对应的医用图像数据。例如,获得各部分显示区域的状态(是否当前正在显示图像),如果存在未显示图像的部分显示区域,则优选将医用图像数据显示在该部分显示区域中。如果在所有部分显示区域中都已经显示图像,则可以总是将医用图像数据显示在确定的部分显示区域(例如左上角位置的部分显示区域)中。另选地,可以将医用图像数据显示在当前显示在最早时间点显示的图像的部分显示区域中。例如,可以以如下方式确定用于显示新的医用图像数据的部分显示区域:使得按照部分显示区域108->部分显示区域109->部分显示区域110->部分显示区域111的顺序重复。另选地,可以将新的医用图像数据显示在当前显示在最早时间点进行用户操作的记录的图像的部分显示区域中。如果在要显示与所选择的缩略图相对应的医用图像数据的部分显示区域中已经显示了其他医用图像数据,则删除该其他医用图像数据,之后显示该相应的医用图像数据。
在步骤S205中,控制单元37判断是否经由操作单元35从用户接收到结束解读的指令。例如通过用户点击未示出的解读结束按钮,来给出结束解读的指令。如果接收到结束解读的指令,则结束图2中的处理。如果未接收到结束解读的指令,则处理返回到步骤S203。
如上所述,利用根据第一实施例的图像显示装置,能够获得以下效果。也就是说,如果选择了任选缩略图中的任选部分区域,则能够以与所选择的部分区域相对应的显示条件,将与该缩略图相对应的医用图像数据显示在主显示区域中。因此,能够提供需要更少用户工作的图像显示装置和图像显示方法,这是因为,能够利用选择任意医用图像数据的操作,以适于进行解读的显示条件将医用图像数据显示在主显示区域中。
变型例1
在本实施例中,描述了如下示例:根据在步骤S204中选择的缩略图中的部分区域,改变图像浓度值(HU值)(色阶转换)。然而,被改变的显示条件不限于浓度值。例如,可以使用针对整个图像的放大缩小功能、显示位置平行移动功能、图形描绘功能、浓度值测量功能等作为显示条件,将医用图像数据显示在部分显示区域中。图5示出了在选择缩略图103的左肺野区域的情况下的显示示例。首先,使用适于肺野区域的浓度值(例如WL:-600,WW:1500)对与缩略图103相对应的医用图像数据进行色阶转换,使得色阶被调整为能够显示在显示单元36上。此外,平行移动医用图像数据的显示位置,使得左肺野区域显示在部分显示区域108的中心位置。然后,将通过放大整个图像以具有能够容易地观察左肺野区域的大小而获得的医用图像数据,显示在部分显示区域108中。此外,将使用已知浓度值测量功能计算出的左肺野区域中的浓度值的直方图,显示在部分显示区域110中。
例如,如表2所示,根据从DICOM头等获得的图像信息以及所选择的缩略图分割区域,预先设置与选择区域相对应的显示条件。如表2所示,根据用于捕获医用图像数据的形式以及图像捕获部位,来确定显示条件。以与医用图像数据的图像信息和所选择的部分区域相对应的显示条件,将与所选择的缩略图相对应的医用图像数据显示在主显示区域中。表2中的放大率“Fit”是指将大小设置为能够以最大视野看到相应区域的放大率,表2中的平行移动的“中心”是指平行移动整个图像使得相应的区域显示在部分显示区域的中心的条件。如表2所示的表被存储在例如存储单元34等中。
表2
变型例2
在本实施例中,在步骤S204中,根据预定规则选择要显示与所选择的缩略图相对应的医用图像数据的部分显示区域,但不限于此。例如,可以使用如下结构:用户能够通过将缩略图拖放到主显示区域中的任选部分显示区域上,来指定要显示医用图像数据的部分显示区域。更具体地说,将指针115移动到任选缩略图中的任选部分区域,开始拖动,并将指针移动到任选的部分显示区域上,之后释放(放置)指针。根据变型例2,能够以合适的显示条件(适于与当开始拖动时利用指针指定的部分区域相对应的解剖学区域的显示条件),将与任选缩略图相对应的医用图像数据显示在任选部分显示区域中。
如上所述,根据第一实施例,能够同时进行要在主显示区域中显示的医用图像数据的指定、以及要对其应用的显示条件的指定,因此能够减少显示医用图像数据所需的工作。此外,根据变型例2,除了医用图像数据的指定和显示条件的指定之外,还能够利用简单的操作进行要显示医用图像数据的部分显示区域的选择,因此进一步提高了可操作性。
在上述实施例中,示出了如下示例:主显示区域102被分割为4个相等的部分显示区域,但是通过分割而获得的区域数量不限于此,例如,如图12A和图12B所示,部分显示区域可以不具有相同的大小。此外,可以不对主显示区域进行分割。在这种情况下,在主显示区域102中,以与当选择缩略图时指定的部分区域相对应的显示条件,显示在最近的时间点选择的医用图像数据(一个医用图像)。在上述实施例中,使用分割线112至114来清楚地定义缩略图中的部分区域,但是可以不描绘或覆盖分割线。请注意,如果在缩略图上显示分割线112至114,则用户能够更加清楚地识别出缩略图中的分割区域。请注意,上述图像信息和显示条件仅仅是示例,本发明不限于这些示例。
第二实施例
在第一实施例中,在缩略图中设置与医用图像数据的解剖学区域相对应的部分区域。根据第二实施例的图像显示装置10还根据主显示区域102到部分显示区域的分割条件,将缩略图分割为多个分割区域。根据当选择缩略图时指定的部分区域和分割区域,图像显示装置10以与所选择的部分区域相对应的显示条件,将与所选择的缩略图相对应的医用图像数据,显示在与所选择的分割区域相关联的部分显示区域中。
图6示出了根据第二实施例的图像显示装置10的结构示例。与根据第一实施例的图像显示装置10的结构示例(图1)相比,添加了分割条件获得单元46。图中所示的除了分割条件获得单元46之外的构成元件与图1中类似。分割条件获得单元46获得在显示单元36上显示的主显示区域到多个部分显示区域的分割条件,并将其输出给显示处理单元45。假设与第一实施例相同,各功能单元由软件来实现。
接下来,将参照图7、图8A和图8B,来描述第二实施例中的控制单元37的处理过程。图7是例示由控制单元37进行的处理的流程图。图8A是通过处理(稍后描述)而显示在显示单元36上的示例性画面。图8B示出了图8A所示的缩略图103的图像的放大图。
步骤S700中的处理类似于第一实施例的步骤S200中的处理。在步骤S701中,分割条件获得单元46获得显示在显示单元36上的主显示区域102的分割条件。例如,如果在主显示区域102中通过分割而获得的区域数量为l,行数为n,列数为m,则在图8A所示的主显示区域102的分割状态的情况下得出(l,m,n)=(4,2,2)。请注意,上述用于获得分割条件的方法仅仅是示例,本发明不限于该示例。
步骤S702中的处理类似于第一实施例的步骤S201中的处理。在步骤S703的处理中,除了第一实施例的步骤S202中的处理之外,还进行以下处理。缩略图生成单元43根据在步骤S701中获得的分割条件来分割缩略图。例如,如果在步骤S701中得出(l,m,n)=(4,2,2),则缩略图生成单元43根据条件(l,m,n)=(4,2,2)以类似的方式分割缩略图。也就是说,根据主显示区域102中的多个部分显示区域的配置,将形成缩略图的缩减图像分割为多个分割区域,并且多个分割区域与主显示区域102中的多个部分显示区域各自相互关联。例如,如果如图8A所示分割主显示区域102,则如图8B所示获得分割区域116至119,并且分割区域116至119分别与部分显示区域108至111相关联。随后,生成分割线(图8B中的L10),使得能够看到分割区域,并且生成在缩减图像上描绘或覆盖分割线的缩略图。
在图8B中的缩略图103中,根据在步骤S702中获得的解剖学区域,从形成缩略图的缩减图像中提取部分区域,因此获得部分区域122至124。此外,根据主显示区域102的分割条件分割形成缩略图103的缩减图像,因此获得分割区域116至119。以此方式,如图8B所示,生成在缩减图像上描绘或覆盖分割线L10的缩略图103。
在步骤S704中,控制单元37获得主显示区域的分割条件,并判断分割条件是否已经改变。请注意,能够响应于经由操作单元35而从用户接收的指令,来改变主显示区域102的分割条件。可以通过由传统的医用图像浏览器使用的已知技术,来实现用于改变通过分割而获得的区域数量的方法,因此省略了其描述。在步骤S704中,如果判断为尚未改变分割条件,则处理进行到步骤S705,而如果判断为改变了分割条件,则处理返回步骤S701。
步骤S705中的处理类似于第一实施例的步骤S203中的处理。然而,获得的所选区域信息是下述两种类型的区域信息。也就是说,区域信息是指:
已根据解剖学区域信息分割的区域的第一区域信息(即,图8A和图8B的示例中的部分区域122至124中的一个);以及
已根据主显示区域的分割条件分割的区域的第二区域信息(即,图8A和图8B的示例中的分割区域116至119中的一个)。
在步骤S706中,显示处理单元45以与在步骤S705中选择的第一区域信息相对应的显示条件,将与在步骤S705中选择的缩略图相对应的医用图像数据,显示在与第二区域信息相对应的部分显示区域中。在图8B的示例中,指针115在作为肺野区域的部分区域123中指定属于分割区域119的部分。因此,选择缩略图103中的部分区域123(肺野区域)作为第一区域信息,获得分割区域119(右下区域)作为第二区域信息。结果,如图8A所示,以适于观察肺野区域的显示条件(例如,WL:-600,WW:1500),将与缩略图103相对应的医用图像数据显示在部分显示区域111中。如果在部分显示区域111中已显示其他图像数据,则显示处理单元45从部分显示区域111中删除已经显示的图像数据,并且然后显示与缩略图103相对应的医用图像数据。请注意,当删除正在显示的医用图像时,可以询问用户是否可以删除该图像。
步骤S707中的处理类似于第一实施例的步骤S205中的处理,并且判断是否接收到结束解读的指令。如果接收到结束解读的指令,则结束图7中的处理,而如果没有接收到结束解读的指令,则处理返回到步骤S704。
如上所述,利用根据第二实施例的图像显示装置,能够获得以下效果。也就是说,如果选择了任选缩略图中的任意部分区域和任意分割区域,则能够以与所选择的部分区域相对应的显示条件,将与缩略图相对应的医用图像数据显示在与所选择的分割区域相关联的部分显示区域中。因此,利用简单的选择操作,能够以适于进行解读的显示条件,将任选医用图像数据显示在任选部分显示区域中,因此能够减少用户工作。
请注意,可以省略指示主显示区域的分割的分割线(例如图8B中的L10)。这是因为,例如,如果主显示区域102的分割状态不像图8A所示的那样复杂,则即使省略了分割线L10,用户也能够看到四个部分显示区域108至111与形成缩略图的缩减图像上的位置之间的对应关系。
第三实施例
利用根据第三实施例的图像显示装置10,当选择缩略图时,用户能够选择形成缩略图的缩减图像中的任意部分区域,并且能够给出指定部分显示区域的方向信息。图像显示装置10以适于与所选择的部分区域相对应的解剖学区域的显示条件,将与所选择的缩略图相对应的医用图像数据,显示在主显示区域的多个部分显示区域中的、由方向信息指定的部分显示区域中。
图9示出了根据本实施例的图像显示装置的结构示例。与根据第二实施例的结构示例(图6)相比,添加了方向获得单元47。除了方向获得单元47之外的构成元件与图6中类似。方向获得单元47获得用户经由操作单元35对在显示单元36上显示的缩略图输入的方向信息,并将其输出给显示处理单元45。例如,方向获得单元47基于拖动或轻击缩略图的方向获得方向信息。此外,如稍后所描述,分割条件获得单元46获得主显示区域中的各部分显示区域的中心位置。假设与第二实施例相同,各功能单元由软件来实现。
接下来,将参照图10和图11描述第三实施例的控制单元37的整体处理。图10是由控制单元37进行的处理的流程图。图11是例示用户对图3B所示的缩略图103输入方向信息的方法的图。指针115例如是鼠标指针,并指示由操作单元35控制的位置信息。R10表示以指针115指示的位置为中心O的圆。当指针115的右向为0°时,从中心O延伸的直线在0°、90°、180°和270°的方向上与圆R10相交的点,可以被分别取为A、B、C、D。
步骤S1000至S1002中的处理类似于第一实施例的步骤S200至S202中的处理。步骤S1003中的处理类似于第二实施例的步骤S701中的处理。步骤S1004中的处理类似于第一实施例的步骤S203中的处理。
在步骤S1005中,用户经由操作单元35对在步骤S1004中选择的缩略图分割区域输入方向信息。例如,通过使用未示出的指示设备在任选方向上拖动在图3B中示出的缩略图103的部分区域,来输入方向信息。另选地,如果显示单元36是触摸屏式监视器,则可以使用一般被称为轻击的操作方法,对缩略图103中的部分区域123输入方向信息。例如,在图11中,如果利用手指在A方向弹击(轻击)缩略图103,则输入方向信息0°。此外,例如,如果利用手指在沿着精确地在线段OC和线段OD的中间示出的线段L20的方向弹击(轻击)缩略图,则输入方向信息225°。
在步骤S1006中,显示处理单元45根据在步骤S1003中获得的主显示区域的分割条件以及在步骤S1005中获得的方向信息,选择主显示区域中的多个部分显示区域中的一个。显示处理单元45将与所选择的缩略图相对应的医用图像数据,显示在所选择的部分显示区域中。此时,以与在步骤S1004中选择的部分区域相对应的显示条件显示医用图像数据。所选择的部分区域例如是通过开始拖动或轻击的位置指定的缩略图中的部分区域。根据第一实施例中的步骤S204或第一实施例的变型例1中示出的方法确定显示条件。
在下文中,将描述如下情况:在步骤S1005中对图3B所示的缩略图103中的部分区域123输入的方向信息,在图11所示的0°至90°的范围内。在这种情况下,取右上方向为方向信息,并且以与部分区域123相对应的显示条件,在布置在图3A的主显示区域102的右上方的部分显示区域110中,显示与缩略图103相对应的医用图像数据。如果输入的方向信息在90°至180°的范围内,则以与部分区域123相对应的显示条件,在主显示区域102的部分显示区域108中显示医用图像数据。如果输入的方向信息在180°至270°的范围内,则以与部分区域123(肺野区域)相对应的显示条件,在主显示区域102的部分显示区域109中显示医用图像数据。如果输入的方向信息270°至0°的范围内,则以与部分区域123相对应的显示条件,在主显示区域102的部分显示区域111中显示医用图像数据。
在下文中,将参照图12A和图12B更加详细地描述输入的方向信息的范围与根据该范围选择的部分显示区域之间的关系。在图12A中,主显示区域102被分割为四个部分显示区域(部分显示区域108至111)。请注意,部分显示区域108至111不具有相同的大小,并且其配置与图3A中不同。在附图中,Oa表示主显示区域102的中心,Ob表示部分显示区域108的中心,Oc表示部分显示区域109的中心,Od表示部分显示区域110的中心,Oe表示部分显示区域111的中心。在图12B中,R20表示以Oa为中心的圆。L21表示将Ob->Oa->Oe形成的角分割为两个相等的角的线段,L22表示将Ob->Oa->Oc形成的角分割为两个相等的角的线段,L23表示将Oc->Oa->Od形成的角分割为两个相等的角的线段,L24表示将Od->Oa->Oe形成的角分割为两个相等的角的线段。E表示线段L21与R20之间的交点,F表示线段L22与R20之间的交点,G表示线段L23与R20之间的交点,H表示线段L24与R20之间的交点。如果输入的方向信息在由E->oa->F形成的角的范围内,则选择在该范围内具有中心Ob的部分显示区域108。以类似的方式,如果输入的方向信息在由F->oa->G形成的角的范围内,则选择部分显示区域109。以类似的方式,如果输入的方向信息在由G->oa->H形成的角的范围内,则选择部分显示区域110。以类似的方式,如果输入的方向信息在由H->oa->E形成的角的范围内,则选择部分显示区域111。
以此方式,如果根据由部分显示区域的中心和主显示区域的中心形成的角来确定方向信息的范围,则能够确定与方向信息的范围相对应的部分显示区域。请注意,如果主显示区域的分割条件例如是(l,m,n)=(9,3,3),则根据上述方法无法选择中心的部分显示区域。在这种情况下,可以通过与对缩略图输入方向信息不同的操作来进行选择。该不同的操作是诸如触摸屏上的捏紧(pinch-in)、捏松(pinch-out)或双击的操作。请注意,这些操作仅仅是示例,还可以进行其他操作。
步骤S1007中的处理类似于第一实施例的步骤S205中的处理,并且判断是否接收到结束解读的指令。如果接收到结束解读的指令,则结束图10中的处理,而如果尚未接收到结束解读的指令,则处理返回到步骤S1003。
如上所述,利用根据第三实施例的图像显示装置,获得如下效果。也就是说,如果对任选缩略图中的任选部分区域给出方向信息,则能够以与被给出方向信息的部分区域相对应的显示条件,在根据输入的方向信息而确定的部分显示区域中,显示与缩略图相对应的医用图像数据。因此,能够提供需要更少工作来以用户期望的显示条件在用户期望的部分显示区域中显示图像的图像显示装置和图像显示方法。
如上所述,根据上述实施例,在缩略图中显示的缩减图像中设置与解剖学区域相对应的部分区域,并且根据解剖学区域的显示条件与部分区域相关联。用户能够利用选择缩略图的操作,从设置的部分区域中指定任意部分区域,因此,用户能够利用选择缩略图的操作,指定要显示的医用图像数据和要应用的显示条件。因此,上述实施例的有效性在于,能够利用简单的用户操作,以任选的显示条件在主显示区域中显示与所选择的缩略图相对应的数据。
在上述实施例中,缩略图显示区域和主显示区域显示在相同的显示画面中,但是缩略图显示区域和主显示区域可以显示在不同的显示单元上。此外,当获得与缩略图中的部分区域相对应的显示条件时,对图3C所示的部分区域与解剖学区域之间的关联进行管理,并且基于解剖学区域获得与部分区域相对应的显示条件,但是不限于此。例如,可以进行管理,使得显示条件直接与各部分区域相关联,并且可以获得特定部分区域的显示条件。在这种情况下,图3C中的解剖学区域的栏指示显示条件。
如上所述,根据第一至第三实施例,能够利用简单的操作,以适于要观察的区域的显示条件来显示任选的医用图像数据。
第四实施例
在上述第一至第三实施例中,响应于缩略图的选择,以与利用指针115在所选择的缩略图中的指定位置相对应的不同显示条件,在主显示区域102中显示由所选择的缩略图指定的医用图像。在第四实施例中,将描述如下结构:利用不同显示条件生成的医用图像存储在数据库22中,从存储的医用图像中选择以与利用指针115在缩略图中的指定位置相对应的显示条件而生成的医用图像,并在主显示区域102中显示该医用图像。
一般地,对通过医用图像捕获装置获得的捕获的图像数据进行各种类型的图像处理。在将通过对相同的捕获的图像数据进行不同的图像处理而生成的不同的医用图像、作为不同的医用图像而存储在医院的数据服务器中的情况下,如果对相同的捕获的图像数据进行的图像处理的类型数量增加,则存储的医用图像的数量也增加。
作为管理这种大量医用图像的技术,日本特开2012-81180号公报(文献2)公开了对与医用图像相对应的缩略图进行分类和显示的技术。因此,能够通过搜索目标缩略图,来搜索并显示作为用户目标的医用图像。
然而,随着医用图像的数量增加,缩略图的数量也显著增加,并且需要较长的时间来进行搜索。此外,用户需要较长的时间来找到期望的缩略图。因此,在第四实施例中,将描述如下结构:即使医用图像的数量增加,也能够显示用户期望的医用图像,而无需复杂的用户操作。
图13是示出根据第四实施例的医用图像显示系统的图。在附图中,通过相同的附图标记表示与第一实施例(图1)相同的构成元件。控制单元37具有包括医用图像获得单元41、数据集设置单元51、主图像选择单元52、特定区域提取单元53、缩略图生成单元54、指令接受单元55以及显示处理单元45的功能结构。通过CPU读出并执行存储在ROM 32等中的程序来实现这些功能。
医用图像获得单元41根据通过操作单元35输入的用户操作,经由通信IF 31和LAN21从数据库22获得患者的部分或全部医用图像。医用图像例如是诸如CT图像数据的图像数据。医用图像获得单元41将获得的医用图像输出给数据集设置单元51、特定区域提取单元53、缩略图生成单元54以及显示处理单元45。
数据集设置单元51根据规则(稍后描述),从医用图像获得单元41获得的医用图像中,选择要生成公共缩略图的医用图像组,并且将该组设置为数据集。数据集设置单元51将设置的数据集输出给主图像选择单元52和缩略图生成单元54。如果设置了多个数据集,则数据集设置单元51对各数据集给出标识信息。数据集设置单元51将各数据集与标识信息相互关联地输出。
主图像选择单元52根据规则(稍后描述),从由数据集设置单元51设置的数据集中包括的医用图像中,选择主要用于生成缩略图的医用图像(下文中称为主图像)。主图像选择单元52将选择的主图像输出给特定区域提取单元53和缩略图生成单元54。如果由数据集设置单元51设置了多个数据集,则主图像选择单元52选择针对各数据集的主图像。主图像选择单元52将主图像与各数据集的标识信息相互关联地输出。
特定区域提取单元53从医用图像获得单元41中获得主图像选择单元52选择的主图像,并对主图像进行图像处理(稍后描述)。此外,特定区域提取单元53根据规则(稍后描述),提取主图像中的特定区域。特定区域是医用图像的区域的一部分,并且是部分区域的示例。特定区域提取单元53将指示特定区域的特定区域信息输出给缩略图生成单元54。如果由数据集设置单元51设置了多个数据集,则针对各数据集的主图像设置特定区域,并输出各特定区域的特定区域信息。
缩略图生成单元54基于在数据集中包括的医用图像、由主图像选择单元52选择的主图像以及由特定区域提取单元53设置的特定区域,生成缩略图。缩略图是缩减图像的示例。此时,缩略图生成单元54生成针对由数据集设置单元51设置的各数据集的公共缩略图。缩略图生成单元54将缩略图输出给显示处理单元45。
指令接受单元55接受用户经由操作单元35输入的各种指令。例如,当用户使用操作单元35选择在显示单元36上显示的缩略图中包括的特定区域时,指令接受单元55将选择指令输出给显示处理单元45。
显示处理单元45将各种类型的信息显示在显示单元36上。显示处理单元45例如显示由缩略图生成单元54生成的缩略图。显示处理单元45从医用图像获得单元41获得与指令接受单元55获得的选择指令相对应的医用图像,并显示该医用图像。
请注意,控制单元37中包括的至少一部分单元可以由独立装置实现。此外,各单元可以由用于实现功能的软件来实现。在这种情况下,用于实现功能的软件可以经由诸如云的网络运行在服务器上。在本实施例中,假设各构成元件由本地环境中的软件实现。
图14是例示由图像显示装置10进行的图像显示处理的流程图。在下文中,将描述当通过X射线CT装置捕获胸部区域的图像时生成的医用图像作为示例,但是医用图像的类型不限于本实施例中的这些类型。在步骤S1400中,医用图像获得单元41根据通过操作单元35输入的用户操作,经由通信IF 31和LAN 21从数据库22读取医用图像。
接下来,在步骤S1401中,数据集设置单元51设置数据集(数据集设置处理)。具体地说,数据集设置单元51根据数据集设置条件,从在步骤S1400中读取的医用图像中选择要生成公共缩略图的医用图像。数据集设置单元51将选择的医用图像设置为数据集。数据集设置条件基于医用图像中的附带信息,并且例如被预先设置在存储单元34等中。
设置条件的示例包括“图像捕获日期在预定时间段内”、“图像捕获形式相同”、“投影数据相同”等。请注意,数据集设置条件不限于实施例中的这些条件。此外,设置条件可以由用户指定。数据集设置单元51从作为医用图像标准的DICOM的头信息获得这种附带信息。
例如,假设设置了数据集设置条件“投影数据相同”。在这种情况下,数据集设置单元51基于DICOM头,从在步骤S1400中读取的医用图像中搜索并获得通过对相同投影数据进行不同类型的图像处理而生成的医用图像。将获得的医用图像设置为数据集。
下文中,将描述由相同投影数据生成的不同医用图像。一般地,通过捕获被摄体的图像获得的投影数据与预定重建函数的卷积,来获得由X射线CT装置生成的CT图像。可以酌情指定重建函数,并根据临床目的使用合适的重建函数。
因此,可以对相同的投影数据使用多个重建函数来生成多个CT图像。例如,在胸部区域的CT图像的情况下,一般地,可以生成肺野窗口设置图像和纵隔窗口设置图像。此外,可以生成骨骼窗口设置图像。肺野窗口设置图像是使用适于观察肺野区域的重建函数生成的医用图像。纵隔窗口设置图像是使用适于观察纵隔区域的重建函数生成的医用图像。以类似方式,骨骼窗口设置图像是使用适于观察骨骼区域的重建函数生成的医用图像。
假设根据相同投影数据生成肺野窗口设置图像和纵隔窗口设置图像,并将这些图像存储在数据库22中。在这种情况下,选择根据相同投影数据生成肺野窗口设置图像和纵隔窗口设置图像,并将这些图像设置为与公共缩略图相对应的数据集。
返回到图14的流程图,在步骤S1402中,主图像选择单元52根据主图像选择条件,从由数据集设置单元51设置的数据集中包括的医用图像中选择主图像(主图像选择处理)。主图像选择条件基于医用图像中的附带信息,并且例如被预先设置在存储单元34等中。主图像选择条件的示例包括“在最早时间点生成的医用图像”、“具有最大窗宽的医用图像”、“具有最大数据量的医用图像”等。请注意,主图像选择条件不限于实施例中的这些条件。
例如,假设设置了选择条件“具有最大窗宽的医用图像”。在这种情况下,主图像选择单元52从数据集中包括的医用图像的DICOM头信息中获得窗宽,并选择具有最大窗宽的医用图像作为主图像。
此外,假设数据集中包括的医用图像是肺野窗口设置图像和纵隔窗口设置图像。一般地,肺野窗口设置图像具有大约1500的窗宽,纵隔窗口设置图像具有大约1400的窗宽。因此,在这种情况下,设置肺野窗口设置图像作为主图像。请注意,主图像选择条件不限于实施例中的这些条件。
接下来,在步骤S1403中,特定区域提取单元53根据特定区域提取条件,从在步骤S1402中选择的主图像中提取特定区域(部分区域)(部分区域提取处理)。特定区域提取条件基于医用图像中的附带信息,并且例如被预先设置在存储单元34等中。根据本实施例的提取条件是提取预定解剖学区域的条件。在提取特定区域之后,特定区域提取单元53参照附带信息并将特定区域和示出特定区域的医用图像相互关联地存储在存储单元34等中。
下文中,将描述提取条件。例如,假设数据集中包括的医用图像是作为胸部区域的CT图像的肺野窗口设置图像和纵隔窗口设置图像。针对这种数据集,例如,确定如下提取条件:如果主图像是肺野窗口设置图像,则从主图像中提取与肺野窗口设置图像相对应的肺野区域以及与纵隔窗口设置图像相对应的软组织区域。
根据该提取条件,特定区域提取单元53首先对主图像使用平滑滤波器来进行噪声去除。接下来,特定区域提取单元53针对图像像素值使用预定阈值(例如,HU值:-200)来进行二值化处理,由此将体内区域与体外区域相分离。特定区域提取单元53还使用其他阈值(例如,HU值:-500)来将体内区域分离为肺野区域和软组织区域,并提取各区域的数据。
根据另一示例,假设数据集中包括的医用图像是肺野窗口设置图像、纵隔窗口设置图像和骨骼窗口设置图像,并且主图像是肺野窗口设置图像。针对这种数据集,例如,确定如下提取条件:提取与肺野窗口设置图像相对应的肺野区域、与纵隔窗口设置图像相对应的软组织区域、以及与骨骼窗口设置图像相对应的骨骼区域,作为特定区域。
根据该提取条件,特定区域提取单元53进行噪声去除并从主图像中获得体内区域,然后,还使用其他阈值(例如,HU值:300)将体内区域分离为骨骼区域和其他区域,并提取各区域的数据。特定区域提取单元53还使用其他阈值(例如,HU值:-500)将其他区域分离为肺野区域和软组织区域,并提取各区域的数据。
请注意,特定区域提取单元53进行的处理不限于实施例中的这些处理。根据另一示例,特定区域提取单元53可以使用诸如图割处理的已知的器官分割处理,来提取按解剖学确定的特定区域。
在图像显示装置10中,特定区域表存储在存储单元34等中,并且,特定区域提取单元53参照特定区域表,并基于数据集中包括的医用图像中的附带信息从主图像中提取特定区域。表3示出了特定区域表的示例。如表中所示,特定区域表将附带信息与特定区域相互关联地存储。根据另一示例,特定区域提取单元53可以从主图像中提取预定区域作为特定区域而不管附带信息,然后可以将数据集中包括的各医用图像与各区域相关联。
表3
接下来,在步骤S1404中,缩略图生成单元54生成缩略图(生成处理)。也就是说,首先,缩略图生成单元54选择与在步骤S1402中选择的主图像相对应的代表性图像。例如,如果主图像是二维医用图像(一个切片图像),则缩略图生成单元54设置该主图像或通过提取部分主图像而获得的图像,作为代表性图像。
另一方面,如果主图像是三维医用图像(多个切片图像),则缩略图生成单元54选择代表主图像的切片图像作为代表性图像。请注意,被选择为代表性图像的切片图像不限于代表主图像的切片图像。根据另一示例,代表性图像可以是预定位置的切片图像(第一切片图像)。根据另一示例,代表性图像可以是包含与主图像所属的数据集中包括的所有医用图像相对应的所有特定区域的切片图像,或者可以是包含最多种类的特定区域的切片图像。另选地,代表性图像可以是通过提取部分切片图像而获得的图像。
接下来,缩略图生成单元54根据在步骤S1403中提取的特定区域,将代表性图像分割为多个区域。例如,假设在步骤S1403中,提取肺野区域、软组织区域和骨骼区域作为特定区域。在这种情况下,缩略图生成单元54生成在代表性图像中包含的特定区域之间的边界位置覆盖有分割线的缩略图。
例如,缩略图生成单元54生成的缩略图如图3B所示。图3B中示出的缩略图103包括部分区域122至124(下文中,是指肺野区域123、软组织区域122和骨骼区域124)。此外,与第一实施例中相同,缩略图生成单元54在肺野区域123与软组织区域122之间的边界位置描绘分割线113,并在软组织区域122与骨骼区域124之间的边界位置描绘分割线114。以此方式,缩略图是特定区域可识别的图像。分割线112表示体外区域与体内区域之间的边界位置。
在图3B中,分割线112、113和114被示出为虚线,但是分割线112、113和114的线型和颜色不限于实施例中的这些。也就是说,分割线可以显示为任何线,只要用户能够看到边界位置即可。
如果在步骤S1401中设置了多个数据集,则缩略图生成单元54针对多个数据集中的各个生成缩略图。
接下来,在步骤S1405中,显示处理单元45将缩略图显示在显示单元36上(显示处理)。在步骤S1406中,指令接受单元55接受特定区域的选择指令(接受处理)。接下来,在步骤S1407中,显示处理单元45根据选择指令指定与特定区域相关联存储的医用图像,并将指定的医用图像显示在显示单元36上(显示处理)。
图15是例示步骤S1406和S1407中的处理的图。如图15所示,用户操作操作单元35,同时查看指针115的当前输入位置,由此选择缩略图中的特定区域。用户例如在与要进行解读或要进行参照的医用图像相对应的缩略图中,选择特定区域。指令接受单元55接受指示用户选择的特定区域的选择指令的输入。如果用户选择的区域是不与医用图像相对应的区域(例如体外区域),则指令接受单元55不接受选择指令。
例如,假设如图15所示,通过用户操作选择了缩略图103中的肺野区域123(见图16A)。在这种情况下,显示处理单元45将与肺野区域123相对应的医用图像显示在主显示区域102中。随后,如图15所示,当通过用户操作选择了缩略图600的软组织区域601时,显示处理单元45将与软组织区域601相对应的医用图像显示在主显示区域102中。
如上所述,当医用图像显示在主显示区域102中时,用户能够给出对显示的医用图像指令各种功能的指令。图像显示装置10能够根据从用户接受的指令执行各种功能。功能的示例包括对整个图像的放大缩小、浓度值转换、显示位置平行移动、图形描绘以及浓度值测量。
在本实施例中,假设显示处理单元45按照与选择缩略图的特定区域相同的顺序,依次在不显示医用图像的部分显示区域108至111中(例如按照部分显示区域108->110->109->111的顺序),显示相应的医用图像。在这种情况下,在上述示例中,与缩略图103的肺野区域123相对应的医用图像布置在部分显示区域108中,与缩略图600的软组织区域601相对应的医用图像布置在部分显示区域110中。
如果在主显示区域102的所有部分显示区域108至111中都已经显示了其他医用图像,则显示处理单元45从显示画面中删除正在预定部分显示区域(例如部分显示区域108等)中显示的医用图像。然后,显示处理单元45根据选择指令将医用图像显示在已成为空白区的部分显示区域中。
根据另一示例,显示处理单元45可以删除在最早的时间点开始显示的医用图像。根据另一示例,显示单元36可以删除在最早的时间点经历与用户操作相对应的处理的医用图像。
返回到图14,在步骤S1407之后,进行步骤S1408中的处理,其中,控制单元37判断是否已经从用户接受结束解读的指令。如果接受到结束解读的指令(步骤S1408中的“是”),则控制单元37结束显示处理。另一方面,如果尚未接受到结束解读的指令(步骤S1408中的“否”),则控制单元37使处理前进到步骤S1406。
如上所述,利用根据第四实施例的图像显示装置,针对包括多个医用图像的数据集生成一个缩略图。因此,能够减少显示的缩略图的数量,并降低用户在选择缩略图时的负担。此外,由于能够针对一个缩略图设置多个特定区域,因此图像显示装置10能够响应于对一个缩略图中的不同位置的输入而显示不同的医用图像。以此方式,图像显示装置10使得能够利用简单的用户操作搜索医用图像,同时减少缩略图的数量。
因此,利用根据第四实施例的图像显示装置,能够获得以下效果。也就是说,针对包括多个医用图像的数据集生成公共缩略图,使得能够减少缩略图的数量。即使利用公共缩略图,也能够根据选择的特定区域来显示不同的医用图像。因此,能够显示任选图像而不增加用户工作,同时减少缩略图的数量。
第一变型例
接下来,将描述根据第四实施例的图像显示装置10的第一变型例。在第一变型例中,如图16A和图16B所示,如果用户输入当前位于缩略图中的特定区域,则显示处理单元45可以显示指示特定区域的信息。在图16A所示的示例中,指针115位于骨骼区域124。在这种情况下,与骨骼区域124相对应地显示字符串701“骨骼窗口设置图像”。此外,在图16B所示的示例中,指针115位于肺野区域123。在这种情况下,与肺野区域123相对应地显示字符串711“肺野窗口设置图像”。请注意,指示特定区域的信息不限于本实施例中的这些信息,并且例如可以是指示特定区域的图标。
根据另一示例,在包括扬声器的情况下,图像显示装置10可以输出指示特定区域的语音(输出处理)。
第二变型例
请注意,数据集设置条件不限于上述实施例中的条件。根据另一示例,设置条件可以是(同一患者的)“同一检查日期”。假设在同一天对一个患者进行胸部CT图像检查、骨骼矿物质密度检查和灌注闪烁造影检查,并且在胸部CT图像检查中,根据一个投影数据生成肺野窗口设置图像和纵隔窗口设置图像。
在这种情况下,在步骤S1401中,数据集设置单元51选择CT图像的肺野窗口设置图像和纵隔窗口设置图像、骨骼矿物质密度检查数据和心肌灌注闪烁造影检查数据,并设置这些数据作为数据集。假设如该示例中所示,数据集包括通过不同的数据捕获形式捕获的医用图像,则在存储单元34等中预先设置各形式之间的优先级顺序。
在步骤S1402中,主图像选择单元52根据预先设置的优先级顺序选择主图像。在该示例中,选择四个医学图像中具有最详细解剖学信息的CT图像数据的肺野窗口设置图像,作为主图像。
接下来,在步骤S1403中,特定区域提取单元53提取特定区域。在使用表3中所示的特定区域表的情况下,提取与肺野窗口设置图像相对应的“肺野”、与纵隔窗口设置图像相对应的“软组织”、与骨骼矿物质密度检查数据相对应的“骨骼”以及与心肌灌注闪烁造影检查相对应的“心脏”,作为特定区域。
例如,如图17所示,缩略图800包括肺野区域801、软组织区域802、骨骼区域803和心脏区域804,并在各区域之间的边界位置描绘分割线811至813。
在步骤S1406中,如果选择缩略图800的心脏区域804,则在图18所示的部分显示区域108中显示心肌闪烁造影检查数据。如果选择骨骼区域803,则在部分显示区域110中显示骨骼矿物质密度检查数据。
根据另一示例,在图像捕获装置的工作站中,放射线技师等可以对特定医用图像进行图像处理,由此生成其他医用图像。这种其他医用图像的示例包括根据肺CT图像数据生成的血管数据的体绘制图像数据等。而且在这种情况下,特定区域提取单元53将肺野窗口设置图像设置为主图像,并提取肺野区域和血管区域作为特定区域,由此生成取肺野窗口设置图像和体绘制图像作为数据集的缩略图。
第三变型例
特定区域提取单元53可以将多个医用图像与一个特定区域相关联。例如,假设数据集包括肺野窗口设置图像、纵隔窗口设置图像和骨骼窗口设置图像,并且上述各图像具有轴向断层图像、冠状断层图像和矢状断层图像。在这种情况下,数据集包括九个医用图像。使用如下公知方法生成各断层图像数据:重建以三维方式收集的图像数据作为任选方向上的断层图像并显示该图像数据(MPR:多平面重建)。
图19是示出根据该示例的显示画面100的显示示例的图。假设肺野窗口设置图像的轴向断层图像被选为主图像。在这种情况下生成的缩略图类似于图3B中示出的缩略图103。也就是说,缩略图103包括肺野区域123、软组织区域122和骨骼区域124。
在该示例中,特定区域提取单元53将肺野窗口设置图像的轴向断层图像、冠状断层图像和矢状断层图像与肺野区域123相关联地存储。此外,特定区域提取单元53将纵隔窗口设置图像的轴向断层图像、冠状断层图像和矢状断层图像与软组织区域122相关联地存储。此外,特定区域提取单元53将骨骼窗口设置图像的轴向断层图像、冠状断层图像和矢状断层图像与骨骼区域124相关联地存储。
如果选择缩略图103中的肺野区域123,则将与肺野区域123相对应的肺野窗口设置图像的轴向断层图像,显示在如图19所示的主显示区域102的部分显示区域108中。此外,将肺野窗口设置图像的冠状断层图像显示在部分显示区域110中,并将肺野窗口设置图像的矢状断层图像显示在部分显示区域109中。如果选择缩略图103的骨骼区域124,则将与骨骼区域124相对应的骨骼窗口设置图像的轴向断层图像、冠状断层图像和矢状断层图像,显示在主显示区域102的部分显示区域中。
根据另一示例,假设一个数据集包括通过不同形式捕获的医用图像。在这种情况下,特定区域提取单元53将通过不同形式捕获的多个医用图像与一个特定区域相关联。
例如,假设数据集包括通过胸部区域X射线CT装置捕获的肺野窗口设置图像、通过骨骼闪烁造影检查捕获的骨骼闪烁造影检查数据、以及通过骨骼矿物质密度检查捕获的骨骼矿物质密度检查数据。在这种情况下,选择肺野窗口设置图像作为主图像,并且缩略图包括肺野区域和骨骼区域。假设将肺野窗口设置图像与肺野区域相关联地存储,并将骨骼闪烁造影检查数据和骨骼矿物质密度检查数据与骨骼区域相关联地存储。在这种情况下,如果用户选择骨骼区域,则显示处理单元45将骨骼闪烁造影检查数据和骨骼矿物质密度检查数据显示在主显示区域102的不同部分显示区域中。
该变型例还适用于在一定时间段内进行相同检查的情况、或进行造影CT检查和非造影CT检查的情况。例如,假设数据集在由时间A和时间B构成的两个时间点的各个处,包括肺野窗口设置图像、纵隔窗口设置图像和骨骼窗口设置图像。在这种情况下,缩略图包括肺野区域、软组织区域和骨骼区域。分别处于时间A和时间B的肺野窗口设置图像与肺野区域相关联,分别处于时间A和时间B的纵隔窗口设置图像与软组织区域相关联,分别处于时间A和时间B的骨骼窗口设置图像与骨骼区域相关联。
如果用户选择肺野区域,则显示处理单元45将时间A处的肺野窗口设置图像和时间B处的肺野窗口设置图像,显示在主显示区域102的不同部分显示区域中。
第四变型例
在如第三变型例中多个医用图像与一个特定区域相对应的情况下,控制单元37可以根据该特定区域的不同用户操作,对与该特定区域相对应的多个医用图像进行不同类型的图像处理。例如,控制单元37可以进行已知的减法处理作为与一个用户操作相对应的图像处理,由此生成多个医用图像之间的差分图像数据。在这种情况下,将该差分图像显示在主显示区域102中。
作为与其他用户操作相对应的图像处理的示例,控制单元37可以对与一个特定区域相对应的多个医用图像进行已知的对准处理和重叠处理,由此生成并显示多个医用图像的重叠图像。
请注意,不同用户操作的示例包括诸如使用鼠标等双击和右击的输入方法。此外,在对触摸屏的操作的情况下,其示例包括诸如捏紧、捏松和双击等的输入方法。
第五变型例
缩略图生成单元54可以融合多个主图像,由此生成缩略图。例如,假设在同一天进行造影CT检查和非造影CT检查(单纯CT检查),并且从各检查中生成肺野窗口设置图像、纵隔窗口设置图像和骨骼窗口设置图像。在这种情况下,主图像选择单元52选择由造影CT检查中的肺野窗口设置图像和非造影CT检查中的肺野窗口设置图像构成的两个医用图像,作为主图像。
缩略图生成单元54基于通过造影检查获得的肺野窗口设置图像来生成代表性图像的左半区域,并基于从非造影检查数据获得的肺野窗口设置图像来生成代表性图像的右半区域。此时,缩略图生成单元54能够通过组合两个肺野窗口设置图像使得它们的切片位置匹配,来生成自然的相应图像数据。
图20是示出根据第五变型例的示例性缩略图的图。图20中的缩略图1100具有第一区域1101和第二区域1102。第一区域1101是基于从造影检查数据获得的肺野窗口设置图像而生成的区域,第二区域是基于从非造影检查数据获得的肺野窗口设置图像而生成的区域。在第一区域1101与第二区域1102之间示出分割线1120。请注意,可以不在缩略图1100中描绘分割线1120。
假设在缩略图1100中选择特定区域1111。在这种情况下,显示处理单元45与特定区域1111相对应地选择从造影检查数据获得的肺野窗口设置图像,并将其显示在主显示区域102中。此外,假设选择特定区域1112。在这种情况下,与特定区域1112相对应地选择从非造影检查数据获得的肺野窗口设置图像,并将其显示在主显示区域102中。
根据另一示例,假设生成由时间A和时间B构成的两个时间点处的肺野窗口设置图像、纵隔窗口设置图像和骨骼窗口设置图像。在这种情况下,主图像显示单元52选择各时间点处的肺野窗口设置图像作为主图像。缩略图生成单元54从通过时间A处的检查获得的肺野窗口设置图像,获得左半缩略图,并从通过时间B处的检查获得的肺野窗口设置图像,获得右半缩略图。
在该变型例中,缩略图生成单元54仅在分别与多个主图像相对应的图像数据的边界面的中心,融合这些边界面,使得主图像的切片位置匹配。请注意,用于融合这些边界面的方法不限于本实施例中的方法。例如,缩略图生成单元54可以使用已知的变形和定位方法(例如自由变形方法)来融合边界面。
缩略图生成单元54可以基于多个主图像生成新的融合图像,并从该融合图像生成缩略图。例如,缩略图生成单元54可以对多个主图像进行已知的减法处理,由此生成差分图像,并将该差分图像设置为缩略图。
根据另一示例,缩略图生成单元54可以对多个主图像进行已知的对准处理和重叠处理,并将获得的图像设置为缩略图。
如果以此方式生成新的融合图像(例如差分图像或通过重叠处理获得的图像),则特定区域提取单元53从新的融合图像中提取特定区域(部分区域)。
第六变型例
用户可以在步骤S1405中显示的缩略图中,替代步骤S1406中的特定区域而选择特定区域之间的分割线。在这种情况下,指令接受单元55接受对与分割线接触的多个特定区域中的各个的选择指令。显示处理单元45指定分别与对应于选择指令的多个特定区域相对应的医用图像,并将指定的医用图像显示在主显示区域102中。
例如,假设如图21A所示,在图3B所示的缩略图103中选择分割线113。在这种情况下,指令接受单元55接受对与分割线113接触的区域(即,肺野区域123和软组织区域122)的选择指令。
显示处理单元45指定分别与肺野区域123和软组织区域122相对应的医用图像,即肺野窗口设置图像和纵隔窗口设置图像,并将这些医用图像显示在主显示区域102中。图21B是示出医用图像的显示示例的图。以此方式,将肺野窗口设置图像显示在部分显示区域108中,将纵隔窗口设置图像显示在部分显示区域110中。
请注意,用于显示医用图像的用户操作不限于本实施例中的这些用户操作。根据另一示例,用户可以跨越多个特定区域进行输入,即进行遍布分割线的输入。在这种情况下,也显示分别与对应于输入的多个特定区域相对应的医用图像。
第七变型例
如果如第六变型例中所述,用户选择了分割线,则显示处理单元45可以对分别与分割线接触的多个特定区域相对应的医用图像,进行图像处理。例如,显示处理单元45可以对由分割线指定的多个医用图像进行已知的减法处理,由此生成多个医用图像的差分图像。在这种情况下,显示处理单元45将差分图像显示在主显示区域102中。
根据另一示例,显示处理单元45可以进行已知的对准处理和重叠处理,由此生成与分割线接触的多个特定区域相对应的多个医用图像的重叠图像。在这种情况下,显示处理单元45将重叠图像显示在主显示区域102中。
以上,使用与分割解剖学区域的分割线接触的医用图像,作为要进行图像处理的多个医用图像,但是并不限于此。例如,可以使用通过融合如变型例5中所示的主图像而获得的缩略图中的多个主图像之间的边界线。图22是示出通过融合如变型例5中所示的多个主图像而获得的示例性缩略图的图。图22中示出的缩略图1300具有基于在时间A处获得的医用图像而生成的区域、以及基于在时间B处获得的医用图像而生成的区域。假设用户在查看指针115在缩略图1300中的位置的同时,选择分割线1310。
在这种情况下,显示处理单元45对时间A处的肺野窗口设置图像、以及时间B处的肺野窗口设置图像进行已知的减法处理,由此生成差分图像。显示处理单元45将差分图像显示在主显示区域102中。图23A是示出差分图像的显示示例的图。在图23A中,差分图像显示在部分显示区域108中。
根据另一示例,显示处理单元45将主显示区域102分割为如图23B所示的具有不同大小的部分区域,并将差分图像显示在最大的部分显示区域1411中。显示处理单元45可以将生成了差分图像的医用图像(即分别在时间A和B处的医用图像),显示在最小的部分显示区域1412和1413中。请注意,要对与分割线接触的医用图像进行的处理不限于本实施例中的这些处理。
第八变型例
如果如第六和第七变型例中所述选择的分割线,则显示处理单元45可以显示能够对通过分割线指定的医用图像进行的图像处理的类型。因此,用户能够从显示的图像处理的类型中选择期望的图像处理。
图24是示出指示图像处理的类型的图像处理选择窗口的显示示例的图。假设用户在查看指针115在缩略图103中的位置的同时,选择分割线113。在这种情况下,显示处理单元45指定能够对分别与分割线113接触的肺野区域123和软组织区域122相对应的医用图像进行的图像处理的类型。显示处理单元45显示指示图像处理的指定类型的图像处理选择窗口1510。假设根据医用图像的类型,在存储单元34等中预先设置能够对沿分割线分割的医用图像进行的图像处理的类型。
如果用户选择了期望的图像处理,则指令接受单元55接受图像处理的选择指令。控制单元37根据选择指令进行图像处理,并显示处理结果。
根据另一示例,控制单元37可以在图像处理选择窗口中显示预定类型的图像处理,而无需判断是否能够对沿着分割线分割的医用图像进行图像处理。
请注意,用于指定图像处理的类型的方法不限于上述使用图像处理选择窗口1510的方法。例如,存储单元34等可以存储图像处理表,以将分割线上的输入操作的类型与图像处理的类型相关联。控制单元37参照图像处理表,并根据分割线上的输入操作的类型来指定图像处理的类型。例如,如果在分割线上输入右击,则控制单元37进行同时显示,而如果输入双击,则控制单元37生成差分图像数据。请注意,处理内容的选择方法和窗口中显示的处理方法不限于本实施例中的这些方法。
第九变型例
可以采用如下配置:图像显示装置10能够接受对特定区域的选择指令以及指定如下区域的布置指令,在该区域中,要在部分显示区域108至111中布置与选择的特定区域相对应的医用图像。布置指令是指定对如下位置的布置的信息,该位置用于在主显示区域102中,即从医用图像的部分显示区域中显示要显示的医用图像。在根据本示例的布置指令中,用于显示要显示的医用图像的部分显示区域108至111被指定为用于显示医用图像的位置。
例如,假设用户进行从特定区域到部分区域的拖放操作。更具体地说,用户将鼠标移动到特定区域,在选择特定区域的状态下,进一步将鼠标移动(拖动)到布置目标部分区域,并释放(放置)鼠标。在这种情况下,指令接受单元55接受对与用户操作相对应的特定区域的选择指令、以及对用户操作相对应的部分区域(进行了释放(放置)的部分显示区域)的布置指令。显示处理单元45将要显示的医用图像显示并布置在与布置指令相对应的部分显示区域中。
第十变型例
图像显示装置10根据用户操作,接受对特定区域的选择指令以及对部分区域的布置指令。此外,在根据该示例的图像显示装置10中,主显示区域102中的分割区域的数量变化,并每当选择特定区域时,图像显示装置10指定分割区域的数量及位置,并指定与布置指令相对应的分割区域。
图25是例示根据第十变型例的图像显示处理的流程图。在下文中,将仅描述与上述实施例中描述的图像显示处理中的步骤不同的步骤。请注意,通过相同的附图标记表示与上述实施例中描述的图像显示处理中的步骤相同的步骤。
在步骤S1405中显示缩略图之后,控制单元37将处理进行到步骤S2501。在步骤S2501中,控制单元37指定主显示区域102的分割状态,然后将处理进行到步骤S1406。由通过分割获得的区域数量、以及部分区域的布置规则,来表达分割状态。例如,如果通过主显示区域102中的分割而获得的区域数量为l、行数为n、列数为m,则图23A中所示的主显示区域102的分割状态为(l,m,n)=(4,2,2)。分割状态可以是任意信息,只要该信息指示医用图像区域要被分割的区域即可,并且其特定内容不限于该示例中的这些内容。
在步骤S1406中,控制单元37接受选择指令。如果进行在一定方向上拖动特定区域的用户操作,则在步骤S2502中,控制单元37响应于该操作接受布置指令的输入。请注意,与布置指令相对应的用户操作不限于该示例中的这些操作。
根据另一示例,假设图像显示装置10具有与操作单元35和显示单元36一体配设的触摸屏监视器。在这种情况下,如果用户在一定方向上进行通常被称为轻击的操作方法,则控制单元37响应于该操作接受布置指令的输入。
用于从通过拖动或轻击指定的方向来指定要布置医用图像的部分显示区域的方法如参照图11所描述的那样。也就是说,如图11所示,控制单元37将部分显示区域108、109、110和111分别与90°至180°、180°至270°、0°至90°和270°至0°的角度范围相关联。当接受到在90°至180°的角度范围内的方向上的用户操作时,控制单元37接受在部分显示区域108中的布置指令的输入。
以类似的方式,当接受到在0°至90°的角度范围内的方向上的用户操作时,控制单元37接受在部分显示区域110中的布置指令的输入。此外,当接受到在180°至270°和270°至0°的角度范围内的方向上的用户操作时,控制单元37接受分别在部分显示区域109和111中的布置指令的输入。
如上所述,在该示例中,图像显示装置10能够将用户目标医用图像显示在用户目标部分区域中。也就是说,能够利用较少的用户工作来将期望的医用图像显示在目标部分区域中。
第十一变型例
图像显示装置10可以不包括显示单元36。在这种情况下,图像显示装置10用作具有在上述实施例中描述的控制单元37的功能的显示控制装置,并且可以向外部显示装置输出要在显示单元36上显示的图像。
其他实施例
可以经由诸如云的网络,通过多个装置来实现根据上述实施例的图像显示装置10的部分处理或全部处理。
如上所述,根据上述实施例,能够显示用户期望的医用图像,而无需复杂的用户操作。
另外,可以通过读出并执行记录在存储介质(也可更完整地称为“非临时性计算机可读存储介质”)上的计算机可执行指令(例如,一个或更多个程序)以执行上述实施例中的一个或更多个的功能、并且/或者包括用于执行上述实施例中的一个或更多个的功能的一个或更个多电路(例如,专用集成电路(ASIC))的系统或装置的计算机,来实现本发明的实施例,并且,可以利用通过由所述系统或装置的所述计算机例如读出并执行来自所述存储介质的所述计算机可执行指令以执行上述实施例中的一个或更多个的功能、并且/或者控制所述一个或更个多电路执行上述实施例中的一个或更多个的功能的方法,来实现本发明的实施例。所述计算机可以包括一个或更多个处理器(例如,中央处理单元(CPU),微处理单元(MPU)),并且可以包括分开的计算机或分开的处理器的网络,以读出并执行所述计算机可执行指令。所述计算机可执行指令可以例如从网络或所述存储介质被提供给计算机。所述存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)TM)、闪存设备以及存储卡等中的一个或更多个。
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例对本发明进行了描述,但是应当理解,本发明并不限于所公开的示例性实施例。应当对所附权利要求的范围给予最宽的解释,以使其涵盖所有这些变型例以及等同的结构和功能。

Claims (10)

1.一种信息处理装置,所述信息处理装置包括:
显示控制单元,其被构造为使显示单元显示医用图像显示区域和缩略图显示区域;
第一获取单元,其被构造为获取通过使用多个医用图像来进行图像处理而生成的处理后的图像;
第二获取单元,其被构造为获取用于所述图像处理的多个医用图像;以及
接受单元,其被构造为基于用户的操作输入接受对在缩略图显示区域中显示的缩略图的选择,
其中,在接受了对缩略图的选择的情况下,显示控制单元使所述处理后的图像和所述多个医用图像显示在医用图像显示区域中。
2.根据权利要求1所述的信息处理装置,其中,所述显示控制单元将医用图像显示区域分割为多个部分区域,并且使所述处理后的图像和所述多个医用图像显示在所述多个部分区域中的各个中。
3.根据权利要求1或2所述的信息处理装置,其中,基于所述多个医用图像来生成所述缩略图。
4.根据权利要求1或2所述的信息处理装置,其中所述显示控制单元使所述多个医用图像并排显示。
5.根据权利要求1或2所述的信息处理装置,其中,所述图像处理包括减法处理,并且
所述处理后的图像是差分图像。
6.根据权利要求1或2所述的信息处理装置,所述信息处理装置还包括:生成单元,其被构造为在接受了对缩略图的选择的情况下进行所述图像处理以生成所述处理后的图像,
其中,所述第一获取单元获取由所述生成单元生成的处理后的图像。
7.根据权利要求6所述的信息处理装置,其中,在选择了对缩略图设置的分割线的情况下,所述生成单元使用分别与同所述分割线接触的多个区域相对应的多个医用图像进行图像处理。
8.根据权利要求1或2所述的信息处理装置,其中所述多个医用图像是通过在不同的时间点拍摄同一被摄体而获得的医用图像。
9.一种图像处理方法,所述图像处理方法包括:
显示控制步骤,使显示单元显示医用图像显示区域和缩略图显示区域;
第一获取步骤,获取通过使用多个医用图像来进行图像处理而生成的处理后的图像;
第二获取步骤,获取用于所述图像处理的多个医用图像;以及
接受步骤,基于用户的操作输入接受对在缩略图显示区域中显示的缩略图的选择,
其中,在接受了对缩略图的选择的情况下,显示控制步骤使所述处理后的图像和所述多个医用图像显示在医用图像显示区域中。
10.一种信息处理系统,所述信息处理系统包括:
显示控制单元,其被构造为使显示单元显示医用图像显示区域和缩略图显示区域;
第一获取单元,其被构造为获取通过使用多个医用图像来进行图像处理而生成的处理后的图像;
第二获取单元,其被构造为获取用于所述图像处理的多个医用图像;以及
接受单元,其被构造为基于用户的操作输入接受对在缩略图显示区域中显示的缩略图的选择,
其中,在接受了对缩略图的选择的情况下,显示控制单元使所述处理后的图像和所述多个医用图像显示在医用图像显示区域中。
CN201811106055.5A 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法 Pending CN109106392A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2014120582A JP6440386B2 (ja) 2014-06-11 2014-06-11 情報処理装置及びプログラム
JP2014120844A JP6327966B2 (ja) 2014-06-11 2014-06-11 医用画像表示装置、表示制御装置および表示制御方法、プログラム
JP2014-120844 2014-06-11
JP2014-120582 2014-06-11
CN201510319870.XA CN105167793B (zh) 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201510319870.XA Division CN105167793B (zh) 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法

Publications (1)

Publication Number Publication Date
CN109106392A true CN109106392A (zh) 2019-01-01

Family

ID=54836150

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201811106055.5A Pending CN109106392A (zh) 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法
CN201510319870.XA Active CN105167793B (zh) 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510319870.XA Active CN105167793B (zh) 2014-06-11 2015-06-11 图像显示装置、显示控制装置及显示控制方法

Country Status (2)

Country Link
US (1) US10222954B2 (zh)
CN (2) CN109106392A (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101599890B1 (ko) * 2014-07-22 2016-03-04 삼성전자주식회사 의료 영상 처리 장치 및 방법
US11504191B2 (en) * 2016-01-19 2022-11-22 Titan Medical Inc. Graphical user interface for a robotic surgical system
JP6699197B2 (ja) * 2016-01-25 2020-05-27 コニカミノルタ株式会社 医用画像表示装置、医用画像調整方法及びプログラム
CN106407687A (zh) * 2016-09-22 2017-02-15 沈阳东软医疗系统有限公司 一种dicom图像组合的方法及装置
JP7062360B2 (ja) * 2016-12-28 2022-05-06 キヤノン株式会社 情報処理装置、情報処理装置の作動方法およびプログラム
JP6885896B2 (ja) * 2017-04-10 2021-06-16 富士フイルム株式会社 自動レイアウト装置および自動レイアウト方法並びに自動レイアウトプログラム
USD831677S1 (en) * 2017-08-31 2018-10-23 General Electric Company Display screen or portion thereof with graphical user interface
CN107766475A (zh) * 2017-10-09 2018-03-06 李亚强 一种网页信息主图的选择方法及装置
US10600511B2 (en) * 2018-02-20 2020-03-24 International Business Machine Corporation Accelerating human understanding of medical images by dynamic image alteration
JP7192321B2 (ja) * 2018-09-05 2022-12-20 富士フイルムビジネスイノベーション株式会社 情報処理装置及び情報処理プログラム
CN109725796A (zh) * 2018-12-28 2019-05-07 上海联影医疗科技有限公司 一种医学图像显示方法及其装置
JP2020173614A (ja) * 2019-04-10 2020-10-22 キヤノンメディカルシステムズ株式会社 医用情報処理装置及び医用情報処理プログラム
CN110413827A (zh) * 2019-07-25 2019-11-05 上海掌门科技有限公司 一种用于提供目标图像信息的方法与设备
JP2021078824A (ja) * 2019-11-20 2021-05-27 キヤノンメディカルシステムズ株式会社 X線診断装置
CN111209422A (zh) * 2019-12-31 2020-05-29 广州华多网络科技有限公司 图像显示方法、装置、电子设备及存储介质
CN111784630A (zh) * 2020-05-18 2020-10-16 广州信瑞医疗技术有限公司 一种病理图像的成分分割方法、装置
US20230056923A1 (en) * 2021-08-20 2023-02-23 GE Precision Healthcare LLC Automatically detecting characteristics of a medical image series
JP2023115823A (ja) * 2022-02-08 2023-08-21 富士フイルムビジネスイノベーション株式会社 情報処理システムおよびプログラム
JP2023115824A (ja) * 2022-02-08 2023-08-21 富士フイルムビジネスイノベーション株式会社 情報処理システムおよびプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101053521A (zh) * 2006-04-12 2007-10-17 株式会社东芝 医用图像显示装置
CN101662584A (zh) * 2008-08-28 2010-03-03 索尼株式会社 信息处理设备和方法以及计算机程序
EP2484275A1 (en) * 2009-09-30 2012-08-08 FUJIFILM Corporation Medical image display device and method, and program
US20120299818A1 (en) * 2011-05-26 2012-11-29 Fujifilm Corporation Medical information display apparatus, operation method of the same and medical information display program
CN103198499A (zh) * 2012-01-04 2013-07-10 西门子公司 用于显示数字医学图像的方法和系统

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6785410B2 (en) 1999-08-09 2004-08-31 Wake Forest University Health Sciences Image reporting method and system
DE10149634B4 (de) * 2001-10-09 2006-09-07 Mevis Breastcare Gmbh & Co. Kg Verfahren zur Anzeige von Bildern
US7058901B1 (en) * 2002-10-29 2006-06-06 Koninklijke Philips Electronics N.V. Methods and apparatus for controlling the display of medical images
EP1617344A1 (en) * 2004-07-07 2006-01-18 Canon Kabushiki Kaisha Image management device and method for managing a plurality of images
JP2007029248A (ja) 2005-07-25 2007-02-08 Hitachi Medical Corp 比較読影支援装置及び画像処理プログラム
KR100679049B1 (ko) * 2005-09-21 2007-02-05 삼성전자주식회사 인물 및 장소정보를 제공하는 썸네일에 의한 사진탐색 방법및 그 장치
JP4821529B2 (ja) 2006-09-19 2011-11-24 富士ゼロックス株式会社 画像表示装置およびプログラム
JP4218772B2 (ja) * 2007-02-16 2009-02-04 国立大学法人名古屋大学 画像診断支援装置
US20080294974A1 (en) * 2007-05-24 2008-11-27 Nokia Corporation Webpage history view
JP5523681B2 (ja) 2007-07-05 2014-06-18 株式会社東芝 医用画像処理装置
JP2009070074A (ja) 2007-09-12 2009-04-02 Konica Minolta Medical & Graphic Inc 画像処理装置および画像処理プログラム
KR20100096224A (ko) 2007-12-03 2010-09-01 데이타피직스 리서치 인코포레이티드 효과적인 영상을 위한 시스템 및 방법
JP2010057902A (ja) 2008-08-06 2010-03-18 Toshiba Corp レポート作成支援装置、レポート作成支援システム、及び医用画像参照装置
CN101398742B (zh) * 2008-10-07 2010-06-23 深圳市蓝韵实业有限公司 一种基于缩略图的医学图像系统导航器实现方法
US8601385B2 (en) * 2008-11-25 2013-12-03 General Electric Company Zero pixel travel systems and methods of use
KR20100071595A (ko) 2008-12-19 2010-06-29 임창우 뇌 단층촬영 영상의 병변부위 자동 검출방법
JP5572440B2 (ja) * 2009-09-15 2014-08-13 富士フイルム株式会社 診断支援システム、診断支援プログラムおよび診断支援方法
WO2011043458A1 (ja) 2009-10-09 2011-04-14 株式会社 日立メディコ 医用画像処理装置、x線撮影装置、医用画像処理プログラム、及び医用画像処理方法
KR101576560B1 (ko) * 2009-12-21 2015-12-11 삼성전자주식회사 데이터 버스를 통해 메모리로부터 압축 데이터를 판독하는 이미지 프로세싱 장치 및 이미지 프로세싱 방법
JP5705452B2 (ja) 2010-04-09 2015-04-22 株式会社モリタ製作所 医科歯科用画像表示装置、および医科歯科用プログラム
JP5765913B2 (ja) 2010-10-14 2015-08-19 株式会社東芝 医用画像診断装置及び医用画像処理方法
US9262444B2 (en) * 2010-11-24 2016-02-16 General Electric Company Systems and methods for applying series level operations and comparing images using a thumbnail navigator
JP5701685B2 (ja) 2011-05-26 2015-04-15 富士フイルム株式会社 医用情報表示装置およびその動作方法、並びに医用情報表示プログラム
JP5226887B2 (ja) 2011-06-09 2013-07-03 株式会社東芝 画像処理システム及び方法
JP5398791B2 (ja) 2011-07-19 2014-01-29 株式会社東芝 医用画像表示装置
WO2013046940A1 (ja) 2011-09-29 2013-04-04 株式会社日立メディコ 画像表示制御装置、画像表示制御方法およびプログラム
US9342654B2 (en) * 2011-11-18 2016-05-17 Koninklijke Philips N.V. Encoding high quality (medical) images using standard lower quality (web) image formats
JP2013152534A (ja) 2012-01-24 2013-08-08 Sharp Corp 電子書籍装置、その制御プログラム、および、その制御方法
JP2014012040A (ja) 2012-07-03 2014-01-23 Sony Corp 入力装置および情報処理システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101053521A (zh) * 2006-04-12 2007-10-17 株式会社东芝 医用图像显示装置
CN101662584A (zh) * 2008-08-28 2010-03-03 索尼株式会社 信息处理设备和方法以及计算机程序
EP2484275A1 (en) * 2009-09-30 2012-08-08 FUJIFILM Corporation Medical image display device and method, and program
US20120299818A1 (en) * 2011-05-26 2012-11-29 Fujifilm Corporation Medical information display apparatus, operation method of the same and medical information display program
CN103198499A (zh) * 2012-01-04 2013-07-10 西门子公司 用于显示数字医学图像的方法和系统

Also Published As

Publication number Publication date
US10222954B2 (en) 2019-03-05
CN105167793A (zh) 2015-12-23
CN105167793B (zh) 2018-10-09
US20150363053A1 (en) 2015-12-17

Similar Documents

Publication Publication Date Title
CN105167793B (zh) 图像显示装置、显示控制装置及显示控制方法
KR101943011B1 (ko) 피검체의 의료 영상 판독을 지원하는 방법 및 이를 이용한 장치
EP2546802B1 (en) Generating artificial hyperspectral images using correlated analysis of co-registered images
US7130457B2 (en) Systems and graphical user interface for analyzing body images
US10726295B2 (en) Control method and recording medium
JP5128154B2 (ja) レポート作成支援装置、レポート作成支援方法およびそのプログラム
US10997466B2 (en) Method and system for image segmentation and identification
US6901277B2 (en) Methods for generating a lung report
JP5222082B2 (ja) 情報処理装置およびその制御方法、データ処理システム
JP6827706B2 (ja) 情報処理装置及びその方法、情報処理システム、コンピュータプログラム
EP2710958A2 (en) Method and system for intelligent qualitative and quantitative analysis of digital radiography softcopy reading
US20130093781A1 (en) Examination information display device and method
CN102207992A (zh) 医学图像诊断辅助技术
CN112529834A (zh) 病理图像模式在3d图像数据中的空间分布
US20170069084A1 (en) Information processing apparatus, method therof, information processing system, and computer-readable storage medium
Shi et al. Automatic nodule segmentation method for CT images using aggregation-U-Net generative adversarial networks
JP5539478B2 (ja) 情報処理装置および情報処理方法
CN105302433B (zh) 医疗图像显示装置及其控制方法
JP6440386B2 (ja) 情報処理装置及びプログラム
JP6327966B2 (ja) 医用画像表示装置、表示制御装置および表示制御方法、プログラム
AU2019204365B1 (en) Method and System for Image Segmentation and Identification
JP6797858B2 (ja) 医用画像表示装置、表示制御装置および表示制御方法、プログラム
KR101634334B1 (ko) 의료 영상으로부터 대표 영상을 추출하는 방법
JP6572370B2 (ja) 医用画像表示装置およびその制御方法、プログラム
Xue Auto-ROI System: Automatic Localization of ROI in Gigapixel Whole-slide Images

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190101

RJ01 Rejection of invention patent application after publication