JP6735080B2 - Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method - Google Patents

Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method Download PDF

Info

Publication number
JP6735080B2
JP6735080B2 JP2015213477A JP2015213477A JP6735080B2 JP 6735080 B2 JP6735080 B2 JP 6735080B2 JP 2015213477 A JP2015213477 A JP 2015213477A JP 2015213477 A JP2015213477 A JP 2015213477A JP 6735080 B2 JP6735080 B2 JP 6735080B2
Authority
JP
Japan
Prior art keywords
surface shape
medical image
shape data
image processing
electronic document
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015213477A
Other languages
Japanese (ja)
Other versions
JP2017080192A (en
Inventor
祐介 今杉
祐介 今杉
阪本 剛
剛 阪本
徳朗 三宅
徳朗 三宅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to JP2015213477A priority Critical patent/JP6735080B2/en
Priority to PCT/JP2016/081979 priority patent/WO2017073702A1/en
Priority to CN202211193854.7A priority patent/CN115376642A/en
Priority to CN201680062747.7A priority patent/CN108352184B/en
Publication of JP2017080192A publication Critical patent/JP2017080192A/en
Priority to US15/965,159 priority patent/US10984906B2/en
Application granted granted Critical
Publication of JP6735080B2 publication Critical patent/JP6735080B2/en
Priority to US17/227,083 priority patent/US11810659B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明は、医用画像処理装置、医用画像処理方法、及び医用画像処理装置に搭載可能なプログラムに関する。 The present invention relates to a medical image processing apparatus, a medical image processing method, and a program that can be installed in the medical image processing apparatus.

近年医療現場では、MRI(Magnetic Resonance Imaging)装置やX線CT(Computed Tomography )装置などの医用装置で撮影された医用画像から人体の三次元画像を生成し、この三次元画像を治療や診断の場で活用するということが広く行われている。特許文献1には、視認不可能な腫瘍であっても医用画像から生成された三次元画像をもとに腫瘍範囲を特定し、切除範囲の決定を支援することができる医用画像診断装置が開示されている。
このように医用画像から生成された三次元画像は、高性能なコンピュータを用いることで画像の回転を行ったり、レンダリング処理を行ったりすることで所望の表示条件とさせることができるが、高性能なコンピュータが設置されていない例えば手術室などでも、三次元画像を閲覧することができる仕組みが求められている。そして、このような三次元画像を汎用コンピュータで表示する仕組みとしては、例えばPDF形式の電子文書として三次元臓器モデルを出力する方法を用いることができる。
In recent years, in a medical field, a three-dimensional image of a human body is generated from a medical image captured by a medical device such as an MRI (Magnetic Resonance Imaging) device or an X-ray CT (Computed Tomography) device, and the three-dimensional image is used for treatment or diagnosis. It is widely used in the field. Patent Document 1 discloses a medical image diagnostic apparatus capable of identifying a tumor range based on a three-dimensional image generated from a medical image and assisting in determining a resection range even if the tumor is invisible. Has been done.
A three-dimensional image generated from a medical image in this way can be made into a desired display condition by rotating the image using a high-performance computer or performing a rendering process. There is a demand for a mechanism capable of browsing a three-dimensional image even in an operating room or the like where no such computer is installed. As a mechanism for displaying such a three-dimensional image on a general-purpose computer, for example, a method of outputting a three-dimensional organ model as an electronic document in PDF format can be used.

特開2009−611035号公報JP, 2009-611035, A

しかしながら、これまでの医用画像処理装置においては、このような三次元臓器モデルを表示可能な電子文書を生成するには、MRI(Magnetic Resonance Imaging)装置やX線CT(Computed Tomography )装置などの医用装置で撮影された医用画像から表面形状データをユーザが作成させた後に電子文書で読み込み可能なファイル形式として出力し、電子文書で読み込ませるという作業が必要となり、かなり煩雑であった。 However, in a conventional medical image processing apparatus, in order to generate an electronic document capable of displaying such a three-dimensional organ model, a medical image processing apparatus such as an MRI (Magnetic Resonance Imaging) apparatus or an X-ray CT (Computed Tomography) apparatus is used. It is necessary for the user to create the surface shape data from the medical image taken by the apparatus, and then output it as a file format that can be read by an electronic document, and then read it as an electronic document, which is quite complicated.

そこで、本発明では、医用画像から三次元臓器モデルを表示できる電子文書を簡便に生成することができる仕組みを提供することを目的としており、特に電子文書が作成される際にかかる時間を極力減らすことのできる仕組みを提供することを目的としている。 Therefore, an object of the present invention is to provide a mechanism that can easily generate an electronic document capable of displaying a three-dimensional organ model from a medical image, and particularly, to reduce the time taken when the electronic document is created as much as possible. The purpose is to provide a mechanism that can.

上記課題を解決するために、三次元臓器モデルを表示する電子文書を生成することが可能な医用画像処理装置であって、電子文書の生成指示を受け付ける受付手段と、医用画像データから表面形状データを生成し、記憶手段に記憶させる表面形状生成手段と、前記受付手段で受け付けた生成指示に応じて、前記表面形状生成手段で生成された前記表面形状データを用いて三次元臓器モデルの電子文書が生成されるように制御する制御手段と、を備え、前記制御手段は、前記生成指示を受け付けた際に、対応する三次元臓器モデルの表面形状データが前記記憶手段に記憶されていた場合には、前記表面形状生成手段で再度、前記表面形状データを生成することなく、前記記憶手段に記憶された表面形状データを用いて前記電子文書が生成されるように制御し、対応する三次元臓器モデルの表面形状データが前記記憶手段に記憶されていない場合には、前記表面形状生成手段で前記表面形状データを生成させたのちに、当該表面形状データを用いて三次元臓器モデルの電子文書を生成されるように制御することを特徴とする。 In order to solve the above problems, a medical image processing apparatus capable of generating an electronic document displaying a three-dimensional organ model, the receiving means receiving an instruction to generate the electronic document, and the surface shape data from the medical image data. And a surface shape generation means for storing the generated shape in a storage means, and an electronic document of a three-dimensional organ model using the surface shape data generated by the surface shape generation means in response to a generation instruction received by the reception means. And a control unit that controls so that the surface shape data of the corresponding three-dimensional organ model is stored in the storage unit when the generation instruction is received. Controls so that the electronic document is generated using the surface shape data stored in the storage means without generating the surface shape data again by the surface shape generation means, and the corresponding three-dimensional organ When the surface shape data of the model is not stored in the storage means, the surface shape generation means generates the surface shape data, and then the surface shape data is used to generate an electronic document of the three-dimensional organ model. It is characterized in that it is controlled to be generated.

このように表面形状データが既に記憶されている場合には当該表面形状データを用いて電子文書が作成されるように制御することで、電子文書を作成するのにかかる時間を削減しつつ、簡便に電子文書を作成することができる。 As described above, when the surface shape data is already stored, by controlling the surface shape data to be used to create the electronic document, the time taken to create the electronic document can be reduced, You can create electronic documents in

医用画像処理装置101のハードウェア構成及び機能構成の一例を示す図である。3 is a diagram showing an example of a hardware configuration and a functional configuration of the medical image processing apparatus 101. FIG. 本発明に係る医用画像処理の流れを説明するフローチャートである。It is a flow chart explaining the flow of medical image processing concerning the present invention. 本発明に係る医用画像処理の流れを説明するフローチャートである。It is a flow chart explaining the flow of medical image processing concerning the present invention. 本発明に係る医用画像処理の流れを説明するフローチャートである。It is a flow chart explaining the flow of medical image processing concerning the present invention. 電子文書を出力する際の医用画像処理装置の画面の一例である。It is an example of a screen of the medical image processing apparatus when outputting an electronic document. (a)臓器モデルの名称を設定する画面の一例である。(b)臓器モデルの表示色を設定する画面の一例である。(c)設定されたレイヤー情報を管理するテーブルの一例である。(A) An example of a screen for setting the name of an organ model. (B) An example of a screen for setting the display color of the organ model. (C) An example of a table for managing the set layer information. 電子文書を出力する際の医用画像処理装置の画面の一例である。It is an example of a screen of the medical image processing apparatus when outputting an electronic document. 電子文書を出力する際の医用画像処理装置の画面の一例である。It is an example of a screen of the medical image processing apparatus when outputting an electronic document. 電子文書を出力する際の医用画像処理装置の画面の一例である。It is an example of a screen of the medical image processing apparatus when outputting an electronic document. 電子文書を出力する際の医用画像処理装置の画面の一例である。It is an example of a screen of the medical image processing apparatus when outputting an electronic document.

以下、図面を参照して、医用画像診断装置(モダリティ装置)で撮影されたボリュームデータ(複数のスライス画像データ)から生成される医用三次元画像データを用いて、三次元臓器モデルを表示可能な電子文書を出力する方法について詳細に説明する。
本実施形態で用いることができる医用画像を撮像可能なモダリティ装置は、例えば、MRI(Magnetic Resonance Imaging)装置やX線CT(Computed Tomography )装置やPET(Positron Emission Tomography)装置、あるいは、超音波診断装置などが挙げられるが。このようなモダリティ装置で撮影された医用画像データは、DICOM(Digital Imaging and Communication in Medicine)規格という、医用画像の通信プロトコルおよびデータ形式を標準化する規格に準拠して保存されている。このDICOM規格に準拠したデータは、スライス画像データ等の画像データを格納する領域とその画像データに関する付帯情報を格納する領域とで構成されている。そして、このDICOM付帯情報には、画像データの撮像対象である患者の患者情報である、患者名、患者ID、検査日、生年月日、年齢、体形情報のみならず、画像データの撮像条件に関する情報も含まれている。このような医用画像データは一般的に院内においてPACS(Picture Archiving and Communication System)と呼ばれる画像サーバに保存されており、院内の様々な部門において利用することが可能に設けられている。また、近年ではPACSをクラウド化することも行われている。
Hereinafter, referring to the drawings, a 3D organ model can be displayed using medical 3D image data generated from volume data (plural slice image data) captured by a medical image diagnostic device (modality device). A method of outputting an electronic document will be described in detail.
The modality device capable of capturing a medical image that can be used in the present embodiment is, for example, an MRI (Magnetic Resonance Imaging) device, an X-ray CT (Computed Tomography) device, a PET (Positron Emission Tomography) device, or an ultrasonic diagnostic device. Equipment, etc. Medical image data photographed by such a modality device is stored in conformity with a standard for standardizing a communication protocol and a data format of medical images, which is a DICOM (Digital Imaging and Communication in Medicine) standard. The data complying with the DICOM standard is composed of an area for storing image data such as slice image data and an area for storing incidental information about the image data. The DICOM incidental information is not only the patient information of the patient whose image data is to be imaged, such as the patient name, patient ID, examination date, date of birth, age, and body shape information, but also the image data imaging conditions. Information is also included. Such medical image data is generally stored in an image server called PACS (Picture Archiving and Communication System) in the hospital, and is provided so that it can be used in various departments in the hospital. In recent years, PACS has also been converted to a cloud.

本実施形態では、このような医用画像データを用いて生成される電子文書のデータフォーマットがPDF形式である場合を例に説明するが、三次元臓器モデルを表示可能なデータフォーマットであればこれに限られない。 In the present embodiment, the case where the data format of the electronic document generated using such medical image data is the PDF format will be described as an example. However, if the data format that can display the three-dimensional organ model is Not limited.

図1(a)は、本実施形態の医用画像処理装置101(情報処理装置とも称する)のハードウェア構成の一例を示す図である。本実施形態における医用画像処理装置101は、医用画像診断装置で撮影された画像データをもとに生成されたボリュームデータを取得して(読み込んで)医用三次元画像の画像処理を行うものである。医用3次元画像データを生成する処理は、当該医用画像処理装置101で行ってもよいし、予め他の処理装置で処理してもよい。 FIG. 1A is a diagram showing an example of a hardware configuration of a medical image processing apparatus 101 (also referred to as an information processing apparatus) of this embodiment. The medical image processing apparatus 101 according to the present embodiment acquires (reads) volume data generated based on image data taken by a medical image diagnostic apparatus and performs image processing of a medical three-dimensional image. .. The process of generating the medical three-dimensional image data may be performed by the medical image processing apparatus 101 or may be performed by another processing apparatus in advance.

CPU201は、システムバス204に接続される各デバイスやコントローラを統括的に制御する。 The CPU 201 centrally controls each device and controller connected to the system bus 204.

また、ROM202あるいは外部メモリ211(記憶手段)には、CPU201の制御プログラムであるBIOS(Basic Input/OutputSystem)やオペレーティングシステムプログラム(以下、OS)や、医用画像処理装置101の実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。RAM203は、CPU201の主メモリ、ワークエリア等として機能する。 Further, the ROM 202 or the external memory 211 (storage unit) realizes a control program of the CPU 201, such as BIOS (Basic Input/Output System), an operating system program (hereinafter, OS), and a function executed by the medical image processing apparatus 101. Various programs, which will be described later, necessary for that are stored. The RAM 203 functions as a main memory, a work area, etc. of the CPU 201.

CPU201は、処理の実行に際して必要なプログラム等をRAM203にロードして、プログラムを実行することで各種動作を実現するものである。 The CPU 201 implements various operations by loading a program or the like required for executing the processing into the RAM 203 and executing the program.

また、入力コントローラ(入力C)205は、キーボードや不図示のマウス等のポインティングデバイス等の入力デバイス209からの入力を制御する。 An input controller (input C) 205 controls input from an input device 209 such as a keyboard or a pointing device such as a mouse (not shown).

ビデオコントローラ(VC)206は、ディスプレイ210等の表示器への表示を制御する。表示器の種類はCRTや、液晶ディスプレイを想定するが、これに限らない。 The video controller (VC) 206 controls display on a display such as the display 210. The type of display device is assumed to be CRT or liquid crystal display, but is not limited to this.

メモリコントローラ(MC)207は、ブートプログラム、ブラウザソフトウエア、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ等を記憶するハードディスク(HD)やフレキシブルディスク(FD)或いはPCMCIAカードスロットにアダプタを介して接続されるカード型メモリ等の外部メモリ211へのアクセスを制御する。 The memory controller (MC) 207 is an adapter for a hard disk (HD) or flexible disk (FD) or a PCMCIA card slot that stores a boot program, browser software, various applications, font data, user files, edit files, various data, and the like. It controls access to the external memory 211 such as a card type memory connected via the.

通信I/Fコントローラ(通信I/FC)208は、ネットワークを介して、CT装置等の医用画像診断装置で取得された画像を記憶する記憶装置等の外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いたインターネット通信等が可能である。 The communication I/F controller (communication I/FC) 208 connects and communicates with an external device such as a storage device that stores an image acquired by a medical image diagnostic apparatus such as a CT apparatus via a network. Executes communication control processing in the network. For example, internet communication using TCP/IP is possible.

尚、CPU201は、例えばRAM203内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、ディスプレイ210上での表示を可能としている。 Note that the CPU 201 enables display on the display 210, for example, by executing outline font rasterization processing in the display information area in the RAM 203.

また、CPU201は、ディスプレイ210上の不図示のマウスカーソル等でのユーザ指示を可能とする。 Further, the CPU 201 enables a user instruction using a mouse cursor or the like (not shown) on the display 210.

本発明の医用画像処理装置101が後述する各種処理を実行するために用いられる各種プログラム等は外部メモリ211に記録されており、必要に応じてRAM203にロードされることによりCPU201によって実行されるものである。 Various programs and the like used by the medical image processing apparatus 101 of the present invention to execute various processes described later are recorded in the external memory 211, and are executed by the CPU 201 by being loaded into the RAM 203 as necessary. Is.

さらに、本発明に係わるプログラムが用いる定義ファイルや各種情報テーブルは外部メモリ211に格納されている。 Furthermore, definition files and various information tables used by the program according to the present invention are stored in the external memory 211.

図1(b)は、医用画像処理装置101の機能構成を示す図である。医用画像処理装置101のCPUは、レイヤー管理部250、サーフェスデータ作成部251、レイヤー表示条件設定部252、患者情報取得部253、3DPDF出力制御部254として機能する。 FIG. 1B is a diagram showing a functional configuration of the medical image processing apparatus 101. The CPU of the medical image processing apparatus 101 functions as a layer management unit 250, a surface data creation unit 251, a layer display condition setting unit 252, a patient information acquisition unit 253, and a DPDF output control unit 254.

レイヤー管理部250は、医用画像診断装置で撮影された医用画像データから特定された領域ごとにレイヤーとして管理する。ここでは、解析ソフトに対応づけて予め設定され管理されていた自動抽出条件をもとに抽出される領域を各レイヤーとして管理することもできるし、ユーザが医用画像データから特定した領域を三次元臓器モデルのレイヤーとして管理する機能部である。 The layer management unit 250 manages each area specified by the medical image data captured by the medical image diagnostic apparatus as a layer. Here, it is also possible to manage the regions extracted based on the automatic extraction conditions that have been preset and managed in association with the analysis software as each layer, or the region specified by the user from the medical image data can be three-dimensionally It is a functional unit that manages as a layer of an organ model.

サーフェスデータ作成部251(表面形状作成部)は、医用三次元画像データを表面形状データに変換することができる機能部であり、電子文書に出力したい臓器が複数のレイヤーに区分けされている場合には、各レイヤーに対応する領域ごとに区分けされた表面形状データに変換することができる。表面形状データに変換する方法としては、既知の技術であるマーチグキューブ法等を用いることができる。 The surface data creation unit 251 (surface shape creation unit) is a functional unit capable of converting medical three-dimensional image data into surface shape data, and is used when an organ to be output to an electronic document is divided into a plurality of layers. Can be converted into surface shape data divided into regions corresponding to the respective layers. As a method for converting the surface shape data, a known technique such as the Marching cube method can be used.

レイヤー表示条件設定部252は、電子文書上で三次元臓器モデルをどのように表示させるかの表示条件を設定する機能部であり、三次元臓器モデルを構成する各レイヤーのレイヤー表示色やレイヤー名称(表示名称)といった表示条件を設定することができる。このような表示条件は、解析ソフトに対応して予め設定されていたレイヤー表示色やレイヤー名称を取得して設定してもよいし、ユーザが設定したレイヤー表示色やレイヤー名称を取得して設定してもよい。 The layer display condition setting unit 252 is a functional unit that sets a display condition of how to display a three-dimensional organ model on an electronic document, and includes a layer display color and a layer name of each layer forming the three-dimensional organ model. Display conditions such as (display name) can be set. Such display conditions may be set by acquiring the layer display color or layer name that is set in advance according to the analysis software, or by acquiring the layer display color or layer name set by the user. You may.

患者情報取得部253は、電子文書の出力する医用三次元画像データのDICOM付帯情報から、患者名、患者ID,検査日、生年月日、年齢、性別といった患者情報を取得する機能部である。 The patient information acquisition unit 253 is a functional unit that acquires patient information such as a patient name, a patient ID, an examination date, a date of birth, an age, and a gender from DICOM incidental information of medical three-dimensional image data output from an electronic document.

3DPDF出力制御部254(電子文書生成制御部)は、サーフェスデータ作成部251で作成された表面形状データを用いて三次元臓器モデルを表示可能なPDF形式の電子文書に出力するように制御する機能部である。電子文書には、複数のレイヤーに区分けされた三次元臓器モデルをまとめて出力させることが可能である。また、レイヤー表示条件取得部で取得された表示条件や患者情報取得部で取得された患者情報も表示されるように電子文書を出力するように制御することができる。 The 3DPDF output control unit 254 (electronic document generation control unit) uses the surface shape data created by the surface data creation unit 251 to control to output a three-dimensional organ model to a displayable PDF electronic document. It is a department. It is possible to collectively output three-dimensional organ models divided into a plurality of layers in the electronic document. Further, it is possible to perform control so as to output the electronic document so that the display condition acquired by the layer display condition acquisition unit and the patient information acquired by the patient information acquisition unit are also displayed.

図5は、ユーザが電子文書の生成指示を行うことができる本発明の医用画像処理装置の画面の一例である。本実施形態では心臓を含む領域の医用三次元画像データを電子文書として出力する例を用いて説明する。 FIG. 5 is an example of a screen of the medical image processing apparatus of the present invention in which the user can give an instruction to generate an electronic document. In this embodiment, an example in which medical three-dimensional image data of a region including the heart is output as an electronic document will be described.

医用画像処理装置101は、例えば心臓を含む領域(以下心臓領域と称す)の場合には、右冠動脈、左冠動脈、心臓、大動脈といった複数のレイヤーに区分けして管理し、レイヤーごとにディスプレイ上の表示ボタン501を選択することで表示非表示を切り替えることができるように設けられている。また3DPDF出力の際には、この表示ボタン501により表示とされているレイヤーが三次元臓器モデルとして出力され、非表示とされているレイヤーは三次元臓器モデルとしては出力されないようにすることができる。このようなレイヤーは、ユーザが医用画像三次元データから抽出した領域を設定してもよいが、医用画像三次元データを表示させる際に起動した解析ソフトで予め所定の領域が抽出されるように管理されている場合(抽出条件管理手段)には、当該抽出条件をもとに抽出される領域が設定されるようにしてもよい。 For example, in the case of a region including the heart (hereinafter referred to as a heart region), the medical image processing apparatus 101 divides and manages into a plurality of layers such as the right coronary artery, the left coronary artery, the heart, and the aorta, and displays each layer on the display. It is provided so that display/non-display can be switched by selecting the display button 501. When outputting 3DPDF, the layer displayed by the display button 501 can be output as a three-dimensional organ model, and the hidden layer can be prevented from being output as a three-dimensional organ model. .. For such a layer, the user may set an area extracted from the medical image three-dimensional data, but a predetermined area may be extracted in advance by the analysis software started when displaying the medical image three-dimensional data. When managed (extraction condition management means), an area to be extracted may be set based on the extraction condition.

サムネイル画像表示部502は、レイヤーとして設定された領域のサムネイル画像を表示することができる表示部であり、レイヤー名称を設定する際にも用いることができる。具体的には、サムネイル画像表示部502を選択すると図6(a)に示すようなレイヤーの名称設定画面601が表示され、所望のレイヤーの名称を入力欄602に入力し、OKボタン604を押下するとレイヤー名称を設定することができる。また、過去に入力したことのある名称は履歴欄603に表示されるため、ここから選択してレイヤーの名称を設定することもできる。このようなレイヤー名称はレイヤーごとに設定することができる。なお、このような名称は、ユーザが上述の名称設定画面601を用いて設定した名称のみならず、医用画像三次元データを表示させる際に起動した解析ソフトで予め領域に対応する名称が設定されている場合には、当該設定された名称が設定されるようにしてもよい。 The thumbnail image display unit 502 is a display unit that can display a thumbnail image of a region set as a layer, and can also be used when setting a layer name. Specifically, when the thumbnail image display area 502 is selected, a layer name setting screen 601 as shown in FIG. 6A is displayed, a desired layer name is input in the input field 602, and the OK button 604 is pressed. Then you can set the layer name. Further, since the name that has been input in the past is displayed in the history field 603, it is possible to select from here and set the name of the layer. Such a layer name can be set for each layer. Note that such a name is not limited to a name set by the user using the name setting screen 601, but a name corresponding to the area is set in advance in the analysis software started when displaying the medical image three-dimensional data. In this case, the set name may be set.

レイヤー表示色設定部504は、サーフェス表示させる際のレイヤーの表示色を設定することができる設定部であり、選択すると図6(b)に示すような色調整パレット611が表示され、ここで所望の色を選択してAcceptボタン612を押下することで設定することができる。このようなレイヤー表示色はレイヤーごとに設定することができる。なお、このような表示色は、ユーザが設定した表示色のみならず、医用画像三次元データを表示させる際に起動した解析ソフトで予め領域に対応する表示色が設定されている場合には、当該設定された表示色が設定されるようにしてもよい。
このようにして設定されたレイヤー名称やレイヤー表示色といったレイヤー情報をレイヤーごとに管理するテーブルの一例を図6(c)に示す。ここで示すように、レイヤーごとに、表示/非表示を切り替える項目621と、名称が設定された項目622、表示色が設定された項目623が記憶されている。
The layer display color setting unit 504 is a setting unit that can set the display color of the layer when the surface is displayed, and when selected, a color adjustment palette 611 as shown in FIG. 6B is displayed. The color can be set by selecting the color and pressing the Accept button 612. Such a layer display color can be set for each layer. In addition, such a display color is not limited to the display color set by the user, and when the display color corresponding to the area is set in advance by the analysis software started when displaying the medical image three-dimensional data, The set display color may be set.
FIG. 6C shows an example of a table for managing the layer information such as the layer name and the layer display color set in this way for each layer. As shown here, an item 621 for switching display/non-display, an item 622 for which a name is set, and an item 623 for which a display color is set are stored for each layer.

図7は、レイヤー名称とレイヤー表示色がそれぞれ設定された後の様子を示す医用画像処理装置の画面の一例である。レイヤー名称が設定されているサムネイル画像表示部502にマウスポインタ701等がマウスオーバされると、設定されたレイヤー名称702が表示される。 FIG. 7 is an example of a screen of the medical image processing apparatus showing a state after the layer name and the layer display color are respectively set. When the mouse pointer 701 or the like is moused over the thumbnail image display area 502 in which the layer name is set, the set layer name 702 is displayed.

透過設定ボタン503は、表示領域500に表示されるボリュームレンダリング画像をレイヤーごとに透過状態とするか、非透過状態とするかを切り替えることができるボタンである。 The transparency setting button 503 is a button that can be switched between a transparent state and a non-transparent state for each layer of the volume rendering image displayed in the display area 500.

ボリューム表示ボタン505とサーフェス表示ボタン506は、医用三次元画像データの表示領域500に、医用三次元画像データのボリュームレンダリングされた画像を表示させるか、医用三次元画像データを表面形状データに変換した画像を表示させるかを切り替えることができるボタンである。なお、サーフェス表示ボタン506は未だ表面形状データが作成されていない場合には選択できないように設けられている。 The volume display button 505 and the surface display button 506 display the volume-rendered image of the medical three-dimensional image data in the display area 500 of the medical three-dimensional image data, or convert the medical three-dimensional image data into surface shape data. It is a button that can switch whether to display an image. The surface display button 506 is provided so that it cannot be selected if the surface shape data has not been created yet.

サーフェス作成ボタン507は、医用三次元画像データを表面形状データに変換する処理を指示するボタンであり、当該処理が行われ表面形状データが作成されると、生成された表面形状データは外部メモリ211等の記憶手段に記憶される。このように記憶手段に記憶させておくことで、同じ医用三次元画像データに対して何度もサーフェス作成処理が行われることを防止することができる。 The surface creation button 507 is a button for instructing a process of converting medical three-dimensional image data into surface shape data, and when the processing is performed and surface shape data is created, the created surface shape data is stored in the external memory 211. It is stored in a storage means such as. By storing the same in the storage means in this way, it is possible to prevent the surface creation process from being performed repeatedly for the same medical three-dimensional image data.

図8は、サーフェス作成処理がされた後にサーフェス表示ボタン506が選択された際に表示される画面の一例であり、表示領域500には医用三次元画像データから作成された表面形状データの三次元臓器モデルが表示される。ここで表示される三次元臓器モデルの各領域の表示色は、レイヤー表示色設定部504で設定された表示色である。 FIG. 8 is an example of a screen displayed when the surface display button 506 is selected after the surface creation processing is performed. In the display area 500, three-dimensional surface shape data created from medical three-dimensional image data is displayed. The organ model is displayed. The display color of each area of the three-dimensional organ model displayed here is the display color set by the layer display color setting unit 504.

出力ボタン508は、サーフェス作成処理で作成された表面形状データをファイル出力することができるボタンであり、例えばSTL形式、IDTF形式、VRML形式のデータとして出力することができる。このような出力されたデータは、ユーザが手動で電子文書を作成するために用いたり、三次元プリンタで造形処理を行う際に用いたりすることができる。設定ボタン509は、サーフェス作成処理を行う際の条件や保存先を設定することができるボタンである。 The output button 508 is a button that can output the surface shape data created by the surface creation processing to a file, and can output the data in the STL format, the IDTF format, and the VRML format, for example. Such output data can be used by a user to manually create an electronic document or used when performing a modeling process with a three-dimensional printer. The setting button 509 is a button for setting conditions and a storage destination when performing the surface creation processing.

所見入力欄510は、電子文書に出力する際に追記したいコメント等をユーザが入力することができる入力欄である(入力手段)。レイアウト選択ボタン511は、電子文書の出力を縦長にするか横長にするかを選択することができる。3DPDF出力ボタン512は、PDF形式で表示領域500に表示される画像に対応する三次元臓器モデルを含む電子文書の出力指示を行うことができるボタンである。3DPDF出力ボタン512が押下されるとその際に表示領域500に表示されている医用三次元画像データに対応する電子文書が出力される。電子文書は、電子文書上で表示される三次元臓器モデルの各レイヤーの名称及び表示色が、サムネイル画像表示部502で設定された名称、レイヤー表示色設定部504で設定された色となるように出力される。 The finding input field 510 is an input field in which the user can input a comment or the like to be additionally written when outputting to the electronic document (input means). The layout selection button 511 can select whether to output the electronic document vertically or horizontally. The 3D PDF output button 512 is a button that can issue an output instruction of an electronic document including a three-dimensional organ model corresponding to an image displayed in the display area 500 in PDF format. When the 3D PDF output button 512 is pressed, an electronic document corresponding to the medical 3D image data displayed in the display area 500 at that time is output. In the electronic document, the names and display colors of the layers of the three-dimensional organ model displayed on the electronic document are the names set in the thumbnail image display unit 502 and the colors set in the layer display color setting unit 504. Is output to.

次に図2のフローチャートを用いて、医用画像データから特定される各領域のレイヤー名とレイヤー表示色が設定されるまでの処理の流れを説明する。図2のフローチャートに示す処理は、医用画像処理装置101のCPU201が記憶されている制御プログラムを読み出して実行することにより実現される。 Next, the flow of processing until the layer name and layer display color of each area specified from the medical image data are set will be described using the flowchart of FIG. The processing shown in the flowchart of FIG. 2 is realized by the CPU 201 of the medical image processing apparatus 101 reading and executing the stored control program.

S201では、医用画像処理装置101のCPU201は、ユーザの指定された解析ソフトを起動する。具体的には、「心臓解析ソフト」「肝臓解析ソフト」といった臓器の抽出条件やレイヤー表示条件がそれぞれ設定された解析ソフトや、自由解析ソフトといったいずれの条件も設定されていない解析ソフトを起動することができる。 In S201, the CPU 201 of the medical image processing apparatus 101 activates the analysis software designated by the user. Specifically, it launches analysis software such as "heart analysis software" and "liver analysis software" in which organ extraction conditions and layer display conditions are set, and free analysis software in which no conditions are set. be able to.

S202では、医用画像処理装置101のCPU201は、ユーザから表示させたい医用画像データの指定を受け付ける。上述のように医用画像データは、PACS(画像サーバ)上に保存されていることが一般的であるため、医用画像処理装置101は、医用画像処理装置内に記憶されているデータのみならず、外部のPACS(画像サーバ)などに記憶されているデータも指定することができる。なお、ここでは、解析ソフトを起動した後に医用画像データを指定する例を示したが、これに限られず、医用画像データを指定した状態で解析ソフトを起動させるようにしてもよい。 In step S202, the CPU 201 of the medical image processing apparatus 101 receives a designation of medical image data to be displayed from the user. Since the medical image data is generally stored on the PACS (image server) as described above, the medical image processing apparatus 101 is not limited to the data stored in the medical image processing apparatus. Data stored in an external PACS (image server) or the like can also be designated. Here, an example in which the medical image data is designated after the analysis software is activated has been shown, but the invention is not limited to this, and the analysis software may be activated with the medical image data designated.

S203では、医用画像処理装置101のCPU201は、S202で指定された医用画像データを、当該医用画像データが保存された記憶手段から取得する。
S204では、S201で起動された解析ソフトに臓器の抽出条件や表示条件等のレイヤー条件が設定されているかを判断する。設定されている場合には、S205乃至S207に進み、設定された抽出条件に従って領域を抽出しレイヤーとして設定し(S205)、設定された表示条件に従ってレイヤー名称を設定し(S206)、設定された表示条件に従ってレイヤー表示色を設定する。
In S203, the CPU 201 of the medical image processing apparatus 101 acquires the medical image data specified in S202 from the storage unit in which the medical image data is stored.
In S204, it is determined whether layer conditions such as organ extraction conditions and display conditions are set in the analysis software started in S201. If it is set, the process proceeds from S205 to S207, the region is extracted according to the set extraction condition and set as a layer (S205), the layer name is set according to the set display condition (S206), and the setting is performed. Set the layer display color according to the display conditions.

一方、設定されていない場合には、S208乃至S210に進み、ユーザからレイヤーとする領域の設定を受付(S208)、ユーザからレイヤー名称の設定を受け付け(S209)、ユーザからレイヤー表示色の設定を受け付ける(S210)。 On the other hand, if it has not been set, the process proceeds from S208 to S210 to receive the setting of the layer area from the user (S208), the setting of the layer name from the user (S209), and the setting of the layer display color from the user. Accept (S210).

なお、レイヤーの抽出は自動で行い、レイヤーの名称および/またはレイヤーの表示色をユーザが行うようにしてもよい。また、レイヤー名称の設定やレイヤー表示色の設定作業は必須ではなく、設定されていない場合には出力される電子文書に情報が反映されないだけである。 The layers may be extracted automatically, and the user may specify the layer names and/or the display colors of the layers. Further, the setting work of the layer name and the setting of the layer display color are not indispensable. If they are not set, the information is not reflected in the output electronic document.

次に、図3のフローチャートを用いてサーフェス作成ボタン507が押下された際に行われる表面形状生成処理の流れを説明する。図3のフローチャートに示す処理は、医用画像処理装置101のCPU201が記憶されている制御プログラムを読み出して実行することにより実現される。 Next, the flow of the surface shape generation processing performed when the surface creation button 507 is pressed will be described using the flowchart of FIG. The process illustrated in the flowchart of FIG. 3 is realized by the CPU 201 of the medical image processing apparatus 101 reading and executing the stored control program.

S301では、医用画像処理装置101のCPU201は、サーフェス作成ボタン507が押下されたかを判断する。押下されたと判断された場合には、S302に進み、医用画像処理装置101のCPU201は、S205で設定されたレイヤー若しくはS208で設定されたレイヤーごとに表面形状データを作成する。具体的には、例えば既知の技術であるマーチングキューブ法を用いることで各レイヤーを表面形状データに変換することができる。 In S301, the CPU 201 of the medical image processing apparatus 101 determines whether the surface creation button 507 has been pressed. If it is determined that the button has been pressed, the process advances to step S302, and the CPU 201 of the medical image processing apparatus 101 creates surface shape data for each of the layer set in step S205 and the layer set in step S208. Specifically, for example, each layer can be converted into surface shape data by using a known technique such as a marching cube method.

S303では、医用画像処理装置101のCPU201は、S302で作成された表面形状データを、予め設定された記憶手段の場所に保存する。具体的にはマーチングキューブ法等により得られた頂点座標を表面形状データとして記憶する。
以上のような処理がなされると、サーフェス表示ボタン506が押下された際に表示領域500に表面形状データを基に作成された三次元臓器モデルを表示させたり、出力ボタン508が押下された際に、ファイル出力を行うことが可能となる。
In step S303, the CPU 201 of the medical image processing apparatus 101 saves the surface shape data created in step S302 in a preset storage unit location. Specifically, the vertex coordinates obtained by the marching cube method or the like are stored as surface shape data.
When the above-described processing is performed, when the surface display button 506 is pressed, a three-dimensional organ model created based on the surface shape data is displayed in the display area 500, or when the output button 508 is pressed. In addition, it becomes possible to output a file.

次に、図4のフローチャートを用いて3DPDF出力ボタン512が押下された際に行われる処理の流れを説明する。図4のフローチャートに示す処理は、医用画像処理装置101のCPU201が記憶されている制御プログラムを読み出して実行することにより実現される。 Next, the flow of processing performed when the 3DPDF output button 512 is pressed will be described using the flowchart of FIG. The processing illustrated in the flowchart of FIG. 4 is realized by the CPU 201 of the medical image processing apparatus 101 reading and executing the stored control program.

S401では、医用画像処理装置101のCPU201は、3DPDF出力ボタン512が押下されたかを判断する。押下されたと判断された場合には、S402に進み、医用画像処理装置101のCPU201は、過去にサーフェス作成ボタン507が押下され、表面形状データ(サーフェス処理データ)が生成されたかどうかを判断する。具体的には、予め設定された記憶手段の場所に表面形状データが保存されているか否かで判断することができる。 In S401, the CPU 201 of the medical image processing apparatus 101 determines whether the 3D PDF output button 512 has been pressed. If it is determined that the button has been pressed, the process advances to step S402, and the CPU 201 of the medical image processing apparatus 101 determines whether the surface creation button 507 has been pressed in the past and surface shape data (surface processing data) has been generated. Specifically, it can be determined whether or not the surface shape data is stored in a preset storage location.

S402で過去に表面形状データが作成されていると判断された場合には、再度の作成処理は行わずにS404に進み、S402で過去に表面形状データが作成されていないと判断された場合には、医用画像処理装置101のCPU201は、S302と同様に、S205で設定されたレイヤー若しくはS208で設定されたレイヤーごとに表面形状データを作成し、予め設定された記憶手段の場所に保存する。このようにすることで、過去に表面形状処理がなされている場合には、3DPDF作成時に表面形状処理を省略することができ、電子文書を作成する際にかかる時間を短縮することができる。 If it is determined in S402 that the surface shape data has been created in the past, the process proceeds to S404 without performing the creation process again, and if it is determined in S402 that the surface shape data has not been created in the past. As with S302, the CPU 201 of the medical image processing apparatus 101 creates the surface shape data for each layer set in S205 or each layer set in S208, and saves the surface shape data in a preset storage location. By doing so, if the surface shape processing has been performed in the past, the surface shape processing can be omitted when creating the 3DPDF, and the time required when creating the electronic document can be shortened.

S404では、医用画像処理装置101のCPU201は、表示ボタン501により表示とされているレイヤーのS403若しくはS302で作成された表面形状データを記憶手段から取得する。S405では、医用画像処理装置101のCPU201は、表示ボタン501により表示とされているレイヤーのS206若しくはS209で設定されたレイヤー名を取得する。S406では、医用画像処理装置101のCPU201は、表示ボタン501により表示とされているレイヤーのS207若しくはS210で設定されたレイヤー表示色を取得する。このような設定は、例えば図6(c)に示すようなテーブルから取得することができる。 In S404, the CPU 201 of the medical image processing apparatus 101 acquires from the storage means the surface shape data created in S403 or S302 of the layer displayed by the display button 501. In S405, the CPU 201 of the medical image processing apparatus 101 acquires the layer name set in S206 or S209 of the layer displayed by the display button 501. In S406, the CPU 201 of the medical image processing apparatus 101 acquires the layer display color set in S207 or S210 of the layer displayed by the display button 501. Such settings can be acquired from the table as shown in FIG. 6C, for example.

S407では、医用画像処理装置101のCPU201は、S202で指定された医用画像データのDICOM付帯情報から、患者名、患者ID,検査日、生年月日、年齢、性別といった患者情報を取得する。
S408では、医用画像処理装置101のCPU201は、S404で取得された表面形状データとS405で取得されたレイヤー名とS406で取得されたレイヤー表示色とS407で取得された患者情報とを用いて、三次元臓器モデルを表示可能なPDF形式の電子文書が出力されるように制御する。
なお、ここでは表面形状データとレイヤー名とレイヤー表示色とを別々に取得する例を示したが、予めこれらをひとまとまりにしたファイルとして出力し、当該ファイルとDICOM付帯情報とから電子文書が生成される際に用いられるようにしてもよい。このようなひとまとまりで出力されるファイルの形式としては、例えばIDTF形式やVRML形式を用いることができる。
In step S407, the CPU 201 of the medical image processing apparatus 101 acquires patient information such as the patient name, patient ID, examination date, date of birth, age, and sex from the DICOM accompanying information of the medical image data designated in step S202.
In S408, the CPU 201 of the medical image processing apparatus 101 uses the surface shape data acquired in S404, the layer name acquired in S405, the layer display color acquired in S406, and the patient information acquired in S407, Control is performed so that a PDF-format electronic document that can display a three-dimensional organ model is output.
Although the example in which the surface shape data, the layer name, and the layer display color are acquired separately has been shown here, they are output as a file in advance and a digital document is generated from the file and the DICOM incidental information. You may make it used when it is performed. For example, the IDTF format or the VRML format can be used as the format of the file output as a unit.

以上のような操作により、ユーザは所望の医用画像データに対応する電子文書を作成することができる。これによりユーザは、高性能なコンピュータが設置されていない例えば手術室などでも、臓器の三次元的な状態を確認することができ、治療や診断の助けとすることができる。 By the above operation, the user can create an electronic document corresponding to desired medical image data. As a result, the user can confirm the three-dimensional state of the organ even in a case where a high-performance computer is not installed, for example, an operating room, which can be useful for treatment and diagnosis.

図9及び図10は、図4の処理により出力された電子文書902が電子文書ビューワ901で表示されている状態の一例である。 9 and 10 are examples of a state in which the electronic document 902 output by the processing of FIG. 4 is displayed on the electronic document viewer 901.

さらに電子文書ビューワ901には、電子文書902を表示する領域と、表示されている電子文書の表示モデルを選択する選択領域906が設けられている。電子文書902には、三次元臓器モデル905と患者情報欄903と所見欄904が設けられている。 Further, the electronic document viewer 901 is provided with an area for displaying the electronic document 902 and a selection area 906 for selecting a display model of the displayed electronic document. The electronic document 902 is provided with a three-dimensional organ model 905, a patient information column 903, and a finding column 904.

選択領域906には、レイヤーごとに表示/非表示を選択することができる(切り替えることができる)チェックボックスが設けられている。さらに選択領域906にはレイヤーに対応する名称が表示されている。ここでチェックされたレイヤーに対応する臓器領域が三次元臓器モデル905として電子文書902に表示され、チェックが外されているレイヤーに対応する臓器は三次元臓器モデル905として電子文書902に表示されない。図10は、選択領域906の「心臓」のレイヤーのチェックが外されている場合の電子文書902の様子を示す図である。図10の電子文書902の三次元臓器モデル905は、心臓の領域が非表示となっている。また、三次元臓器モデル905は、レイヤーに対応する臓器領域ごとに、設定された表示色となるように生成されている。このように、レイヤーごとに表示/非表示を切り替えられるように設けることで、ユーザは電子文書上で所望の臓器モデルのみを特定して表示させたり非表示にさせたりすることができる。 The selection area 906 is provided with a check box capable of selecting (switching) display/non-display for each layer. Further, in the selection area 906, the name corresponding to the layer is displayed. The organ area corresponding to the checked layer is displayed as the three-dimensional organ model 905 in the electronic document 902, and the organ corresponding to the unchecked layer is not displayed as the three-dimensional organ model 905 in the electronic document 902. FIG. 10 is a diagram showing a state of the electronic document 902 when the “heart” layer in the selection area 906 is unchecked. In the three-dimensional organ model 905 of the electronic document 902 shown in FIG. 10, the heart region is hidden. Further, the three-dimensional organ model 905 is generated so that the display color is set for each organ region corresponding to the layer. In this way, by providing display/non-display for each layer, the user can specify and display only a desired organ model on the electronic document and display it.

患者情報欄903には、S407で取得された患者情報が表示される。このように三次元臓器モデル905に対応する患者情報を表示させることにより、どの患者の電子文書かを容易に判別することができる。また、所見欄904には、3DPDF出力ボタン512が押下された際に図5の所見入力欄510に入力されたコメントが反映される。 The patient information column 903 displays the patient information acquired in S407. By displaying the patient information corresponding to the three-dimensional organ model 905 in this manner, it is possible to easily determine which patient's electronic document. In the finding column 904, the comment input in the finding input column 510 of FIG. 5 when the 3DPDF output button 512 is pressed is reflected.

本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、1つの機器からなる装置に適用してもよい。 The present invention can be embodied as, for example, a system, an apparatus, a method, a program, a storage medium, or the like. Specifically, the present invention may be applied to a system including a plurality of devices. It may be applied to a device consisting of one device.

なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接、或いは遠隔から供給するものを含む。そして、そのシステム或いは装置の情報処理装置が前記供給されたプログラムコードを読み出して実行することによっても達成される場合も本発明に含まれる。 It should be noted that the present invention includes a software program that realizes the functions of the above-described embodiment, which directly or remotely supplies the system or device. The present invention also includes a case where the information processing apparatus of the system or the apparatus is achieved by reading and executing the supplied program code.

したがって、本発明の機能処理を情報処理装置で実現するために、前記情報処理装置にインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。 Therefore, the program code itself installed in the information processing device to implement the functional processing of the present invention in the information processing device also implements the present invention. That is, the present invention includes the computer program itself for realizing the functional processing of the present invention.

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等の形態であってもよい。 In that case, the program may take any form such as an object code, a program executed by an interpreter, or script data supplied to an OS as long as it has the function of the program.

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、MO、CD−ROM、CD−R、CD−RWなどがある。また、磁気テープ、不揮発性のメモリカード、ROM、DVD(DVD−ROM,DVD−R)などもある。 A recording medium for supplying the program includes, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, MO, a CD-ROM, a CD-R, a CD-RW, and the like. There are also magnetic tapes, non-volatile memory cards, ROMs, DVDs (DVD-ROMs, DVD-Rs), and the like.

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、前記ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。 In addition, as a method of supplying the program, a browser of a client computer is used to connect to a home page on the Internet. Then, the computer program itself of the present invention or the compressed file including the automatic installation function can be supplied from the homepage by downloading to a recording medium such as a hard disk.

また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理を情報処理装置で実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるWWWサーバも、本発明に含まれるものである。 It can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from different homepages. That is, a WWW server that allows a plurality of users to download a program file for implementing the functional processing of the present invention on an information processing apparatus is also included in the present invention.

また、本発明のプログラムを暗号化してCD−ROM等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、ダウンロードした鍵情報を使用することにより暗号化されたプログラムを実行して情報処理装置にインストールさせて実現することも可能である。 In addition, the program of the present invention is encrypted and stored in a storage medium such as a CD-ROM and distributed to users, and the key information for decrypting the encryption is downloaded from the homepage via the Internet to users who have satisfied predetermined conditions. Let Then, it is also possible to execute the encrypted program by using the downloaded key information and install the program in the information processing device to realize it.

また、情報処理装置が、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。その他、そのプログラムの指示に基づき、情報処理装置上で稼動しているOSなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。 Further, the functions of the above-described embodiments are realized by the information processing device executing the read program. In addition, the OS or the like running on the information processing device performs a part or all of the actual processing based on the instructions of the program, and the functions of the above-described embodiments can be realized also by the processing.

さらに、記録媒体から読み出されたプログラムが、情報処理装置に挿入された機能拡張ボードや情報処理装置に接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現される。 Further, the program read from the recording medium is written in a memory provided in a function expansion board inserted in the information processing device or a function expansion unit connected to the information processing device. After that, based on the instructions of the program, the CPU or the like included in the function expansion board or the function expansion unit performs some or all of the actual processing, and the processing also realizes the functions of the above-described embodiments.

なお、前述した実施形態は、本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。 It should be noted that the above-described embodiments are merely examples of specific embodiments for carrying out the present invention, and the technical scope of the present invention should not be limitedly interpreted by these. That is, the present invention can be implemented in various forms without departing from its technical idea or its main features.

101情報処理装置、レイヤー管理部250、サーフェスデータ作成部251、レイヤー表示条件設定部252、患者情報取得部253、3DPDF出力制御部254 101 information processing device, layer management unit 250, surface data creation unit 251, layer display condition setting unit 252, patient information acquisition unit 253, 3DPDF output control unit 254

Claims (20)

三次元臓器モデルを表示する電子文書を生成することができる医用画像処理装置であって、
電子文書の生成指示を受け付ける受付手段と、
医用画像データから表面形状データを生成し、記憶手段に記憶させる表面形状生成手段と、
前記受付手段で受け付けた生成指示に応じて、前記表面形状生成手段で生成された前記表面形状データを用いて三次元臓器モデルの電子文書が生成されるように制御する制御手段と、を備え、
前記制御手段は、前記生成指示を受け付けた際に、対応する三次元臓器モデルの表面形状データが前記記憶手段に記憶されているか否かを判定し、当該表面形状データが前記記憶手段に記憶されていると判定した場合には、前記表面形状生成手段で再度、当該表面形状データを生成することなく、前記記憶手段に記憶された当該表面形状データを用いて前記電子文書が生成されるように制御し、当該表面形状データが前記記憶手段に記憶されていないと判定した場合には、前記表面形状生成手段で当該表面形状データを生成させたのちに、当該表面形状データを用いて三次元臓器モデルの電子文書が生成されるように制御することを特徴とする医用画像処理装置。
A medical image processing apparatus capable of generating an electronic document displaying a three-dimensional organ model,
Receiving means for receiving an instruction to generate an electronic document,
Surface shape generation means for generating surface shape data from medical image data and storing the surface shape data in a storage means;
A control unit that controls the electronic document of the three-dimensional organ model to be generated using the surface shape data generated by the surface shape generation unit according to the generation instruction received by the reception unit;
The control means, when receiving the generation instruction, determines whether or not the surface shape data of the corresponding three-dimensional organ model is stored in the storage means, and the surface shape data is stored in the storage means. If it is determined that Tei Ru is again in the surface shape forming unit, so without generating the surface shape data, wherein the electronic document using the surface shape data stored in the storage means is generated controls in the case where the surface shape data is determined not to be stored in the storage unit, the mixture was allowed to generate the surface shape data by the surface shape forming unit, a three-dimensional using the surface shape data A medical image processing apparatus, which controls to generate an electronic document of an organ model.
三次元臓器モデルは、レイヤーに区分けされて管理されており、
前記制御手段は、複数の前記レイヤーとして管理された三次元臓器モデルを1つの電子文書として生成されるように制御することを特徴とする請求項1に記載の医用画像処理装置。
The 3D organ model is divided into layers and managed.
The medical image processing apparatus according to claim 1, wherein the control unit controls the three-dimensional organ model managed as the plurality of layers to be generated as one electronic document.
前記受付手段は、前記レイヤーが複数ある場合にいずれのレイヤーを用いて前記電子文書を生成するかを受け付け可能であることを特徴とする請求項2に記載の医用画像処理装置。 The medical image processing apparatus according to claim 2, wherein the reception unit can receive which layer is used to generate the electronic document when there are a plurality of layers. 前記制御手段は、前記レイヤーごとに設定された表示条件であって、前記医用画像処理装置が備える解析ソフトに対応して予め設定された表示条件に基づいて、前記電子文書の三次元臓器モデルを生成するように制御することを特徴とする請求項1乃至3のいずれか1項に記載の医用画像処理装置。The control means displays the three-dimensional organ model of the electronic document on the basis of display conditions set for each of the layers and preset display conditions corresponding to analysis software included in the medical image processing apparatus. The medical image processing apparatus according to claim 1, wherein the medical image processing apparatus is controlled so as to generate the medical image. 前記表示条件は、前記解析ソフトに対応して予め設定された表示色であることを特徴とする請求項4に記載の医用画像処理装置。The medical image processing apparatus according to claim 4, wherein the display condition is a display color preset corresponding to the analysis software. 前記表示条件として、前記レイヤーごとに前記表示色を設定する色設定手段を更に有し、
前記制御手段は、前記電子文書の三次元臓器モデルのレイヤーに対応する領域ごとに、当該領域の表示色が前記色設定手段で設定された表示色となるように制御することを特徴とする請求項に記載の医用画像処理装置。
As the display condition, further comprising a color setting means for setting the display color for each of the layers,
The control means controls, for each area corresponding to the layer of the three-dimensional organ model of the electronic document, the display color of the area to be the display color set by the color setting means. Item 6. The medical image processing apparatus according to Item 5 .
前記表示条件は、前記解析ソフトに対応して予め設定された前記レイヤーの名称であることを特徴とする請求項4に記載の医用画像処理装置。The medical image processing apparatus according to claim 4, wherein the display condition is a name of the layer set in advance corresponding to the analysis software. 前記表示条件として、前記レイヤーの名称を設定する名称設定手段を更に有し、
前記制御手段は、前記電子文書の三次元臓器モデルに対応するレイヤーの名称として、前記名称設定手段で設定された名称が表示されるように制御することを特徴とする請求項に記載の医用画像処理装置。
As the display condition, further has a name setting means for setting the name of the layer,
Wherein, medical according to claim 7, characterized in that as the name of the layer corresponding to the three-dimensional organ models of the electronic document, set the name in the name setting means controls the so that appear Image processing device.
前記表面形状生成手段は、マーチングキューブ法を用いて前記表面形状データを生成することを特徴とする請求項1乃至のいずれか1項に記載の医用画像処理装置。 The surface shape generating means, the medical image processing apparatus according to any one of claims 1 to 8, characterized in that generating the surface shape data by using the marching cubes. 前記電子文書はPDF形式であることを特徴とする請求項1乃至のいずれか1項に記載の医用画像処理装置。 The electronic document is a medical image processing apparatus according to any one of claims 1 to 9, characterized in that it is a PDF format. 三次元臓器モデルを表示する電子文書を生成することができる医用画像処理装置の制御方法である医用画像処理方法であって、
前記医用画像処理装置は
電子文書の生成指示を受け付ける受付工程と、
医用画像データから表面形状データを生成し、記憶手段に記憶させる表面形状生成工程と、
前記受付工程で受け付けた生成指示に応じて、前記表面形状生成工程で生成された前記表面形状データを用いて三次元臓器モデルの電子文書が生成されるように制御する制御工程と、を備え、
前記制御工程は、前記生成指示を受け付けた際に、対応する三次元臓器モデルの表面形状データが前記記憶手段に記憶されているか否かを判定し、当該表面形状データが前記記憶手段に記憶されていると判定した場合には、前記表面形状生成工程で再度、当該表面形状データを生成することなく、前記記憶手段に記憶された当該表面形状データを用いて前記電子文書が生成されるように制御し、当該表面形状データが前記記憶手段に記憶されていないと判定した場合には、前記表面形状生成工程で当該表面形状データを生成させたのちに、当該表面形状データを用いて三次元臓器モデルの電子文書生成されるように制御することを特徴とする医用画像処理方法。
A medical image processing method which is a control method of a medical image processing apparatus capable of generating an electronic document displaying a three-dimensional organ model,
The medical image processing apparatus includes a reception step of receiving an instruction to generate an electronic document,
A surface shape generating step of generating surface shape data from medical image data and storing the surface shape data in a storage means;
A control step of controlling an electronic document of a three-dimensional organ model to be generated using the surface shape data generated in the surface shape generation step in accordance with the generation instruction received in the reception step;
The control step, when receiving the generation instruction, determines whether or not the surface shape data of the corresponding three-dimensional organ model is stored in the storage unit, and the surface shape data is stored in the storage unit. If it is determined that Tei Ru is again in the surface shape generating step, so without generating the surface shape data, wherein the electronic document using the surface shape data stored in the storage means is generated controls in the case where the surface shape data is determined not to be stored in the storage unit, the mixture was allowed to generate the surface shape data by the surface shape generating step, three-dimensional with the surface shape data the medical image processing method characterized by controlling so that electronic documents organ model is generated.
三次元臓器モデルを表示する電子文書を生成することができる医用画像処理装置に搭載可能なプログラムであって、
前記医用画像処理装置を、
電子文書の生成指示を受け付ける受付手段、
医用画像データから表面形状データを生成し、記憶手段に記憶させる表面形状生成手段、
前記受付手段で受け付けた生成指示に応じて、前記表面形状生成手段で生成された前記表面形状データを用いて三次元臓器モデルの電子文書が生成されるように制御する制御手段、として機能させ
前記制御手段とて、前記生成指示を受け付けた際に、対応する三次元臓器モデルの表面形状データが前記記憶手段に記憶されているか否かを判定し、当該表面形状データが前記記憶手段に記憶されていると判定した場合には、前記表面形状生成手段で再度、当該表面形状データを生成することなく、前記記憶手段に記憶された当該表面形状データを用いて前記電子文書が生成されるように制御し、当該表面形状データが前記記憶手段に記憶されていないと判定した場合には、前記表面形状生成手段で当該表面形状データを生成させたのちに、当該表面形状データを用いて三次元臓器モデルの電子文書生成されるように制御するように機能させることを特徴とするプログラム
A program that can be installed in a medical image processing apparatus capable of generating an electronic document displaying a three-dimensional organ model,
The medical image processing device,
Receiving means for receiving an instruction to generate an electronic document,
Surface shape generation means for generating surface shape data from medical image data and storing it in the storage means,
In response to the generation instruction received by the receiving unit, the control unit controls to generate an electronic document of a three-dimensional organ model using the surface shape data generated by the surface shape generating unit. and a control hand stage, upon receiving the generation instruction, to determine whether the surface shape data of the corresponding three-dimensional organ models are stored in the storage means, to the surface shape data is the memory means when it is determined that that have been stored, the re-surface shape forming unit, without generating the surface shape data, the electronic document is generated by using the surface shape data stored in said storage means controls on so that, when the surface shape data is determined not to be stored in the storage unit, the mixture was allowed to generate the surface shape data by the surface shape forming unit, by using the surface shape data A program characterized by causing it to control so that an electronic document of a three-dimensional organ model is generated.
前記表面形状生成手段は、臓器を含む前記医用画像データに基づいて、前記臓器の部位ごとの表面形状データを作成し、The surface shape generation means creates surface shape data for each part of the organ based on the medical image data including the organ,
前記制御手段は、前記表面形状生成手段で作成された前記表面形状データを含む電子文書であって、前記部位に対応づけられたレイヤーごとに前記表面形状データの表示/非表示を切り替え可能な電子文書を、前記受付手段で受け付けた前記生成指示に応じて生成するように制御する、請求項1乃至10のいずれか1項に記載の医用画像処理装置。The control means is an electronic document including the surface shape data created by the surface shape generation means, and is an electronic document capable of switching display/non-display of the surface shape data for each layer associated with the region. The medical image processing apparatus according to claim 1, wherein the medical image processing apparatus controls to generate a document in accordance with the generation instruction received by the reception unit.
前記表面形状生成手段で作成された前記表面形状データを、前記レイヤーごとに対応付けて管理する管理手段Management means for managing the surface shape data created by the surface shape generation means in association with each layer
を更に備えることを特徴とする請求項13に記載の医用画像処理装置。The medical image processing apparatus according to claim 13, further comprising:
前記受付手段は、前記レイヤーのいずれを用いて前記電子文書を生成するかを受け付け可能であり、The receiving unit can receive which of the layers is used to generate the electronic document,
前記制御手段は前記受付手段で生成するとして受け付けたレイヤーに対応する前記表面形状データを含めた前記電子文書を生成するように制御することを特徴とする請求項13または14に記載の医用画像処理装置。15. The medical image processing according to claim 13 or 14, wherein the control unit controls to generate the electronic document including the surface shape data corresponding to the layer received by the receiving unit. apparatus.
前記レイヤーごとに前記表面形状データの表示条件を設定する設定手段を更に有し、Further comprising setting means for setting the display condition of the surface shape data for each layer,
前記制御手段は、前記設定手段で設定された前記表示条件で、前記電子文書上において前記表面形状データが表示されるように制御することを特徴とする請求項13乃至15のいずれか1項に記載の医用画像処理装置。16. The control unit controls the surface shape data to be displayed on the electronic document under the display condition set by the setting unit. The medical image processing apparatus described.
前記設定手段は、前記レイヤーの表示名称を設定でき、The setting means can set the display name of the layer,
前記制御手段は、前記設定手段で設定された前記表示名称を用いて、前記表面形状データの表示がされるように前記電子文書を生成するように制御することを特徴とする請求項16に記載の医用画像処理装置。17. The control unit controls to generate the electronic document using the display name set by the setting unit so that the surface shape data is displayed. Medical image processing device.
前記制御手段は、前記電子文書を、前記電子文書上に表示される前記表示名称を選択することで、当該表示名称に対応する表面形状データの表示/非表示を切り替えられるように生成するように制御することを特徴とする請求項17に記載の医用画像処理装置。The control means generates the electronic document such that the display shape displayed on the electronic document can be selected to switch display/non-display of the surface shape data corresponding to the display name. The medical image processing apparatus according to claim 17, which is controlled. 医用画像処理装置が備える解析ソフトに対応づけて臓器における部位の抽出条件を管理する抽出条件管理手段を更に有し、The medical image processing apparatus further comprises extraction condition management means for managing extraction conditions of parts of organs in association with analysis software.
前記受付手段が前記生成指示を受け付けた際に起動されている解析ソフトに対応する抽出条件が、前記抽出条件管理手段で管理されている場合には、前記制御手段は前記抽出条件をもとに抽出された前記部位の前記表面形状データを含み、当該表面形状データがレイヤーごとに対応付けられた電子文書を生成するように制御することを特徴とする請求項13乃至18のいずれか1項に記載の医用画像処理装置。When the extraction condition corresponding to the analysis software activated when the reception unit receives the generation instruction is managed by the extraction condition management unit, the control unit is based on the extraction condition. 19. The control method according to claim 13, wherein the surface shape data of the extracted portion is included, and the surface shape data is controlled so as to generate an electronic document associated with each layer. The described medical image processing apparatus.
前記受付手段が前記生成指示を受け付けた際に起動されている解析ソフトに対応する抽出条件が、前記抽出条件管理手段で管理されていない場合には、前記制御手段はユーザによる操作により設定された部位の前記表面形状データを含み、当該表面形状データがレイヤーごとに対応付けられた電子文書を生成するように制御することを特徴とする請求項19に記載の医用画像処理装置。When the extraction condition corresponding to the analysis software activated when the reception unit receives the generation instruction is not managed by the extraction condition management unit, the control unit is set by an operation by the user. 20. The medical image processing apparatus according to claim 19, wherein the surface shape data of the part is controlled so that the surface shape data is controlled to generate an electronic document associated with each layer.
JP2015213477A 2015-10-29 2015-10-29 Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method Active JP6735080B2 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2015213477A JP6735080B2 (en) 2015-10-29 2015-10-29 Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method
PCT/JP2016/081979 WO2017073702A1 (en) 2015-10-29 2016-10-28 Medical image processing device, program installable on medical image processing device, and medical image processing method
CN202211193854.7A CN115376642A (en) 2015-10-29 2016-10-28 Medical image processing apparatus, control method therefor, and computer-readable medium
CN201680062747.7A CN108352184B (en) 2015-10-29 2016-10-28 Medical image processing apparatus, program to be installed in medical image processing apparatus, and medical image processing method
US15/965,159 US10984906B2 (en) 2015-10-29 2018-04-27 Medical image processing apparatus, program installable into medical image processing apparatus, and medical image processing method
US17/227,083 US11810659B2 (en) 2015-10-29 2021-04-09 Medical image processing apparatus, program installable into medical image processing apparatus, and medical image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015213477A JP6735080B2 (en) 2015-10-29 2015-10-29 Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method

Publications (2)

Publication Number Publication Date
JP2017080192A JP2017080192A (en) 2017-05-18
JP6735080B2 true JP6735080B2 (en) 2020-08-05

Family

ID=58713306

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015213477A Active JP6735080B2 (en) 2015-10-29 2015-10-29 Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method

Country Status (1)

Country Link
JP (1) JP6735080B2 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005278991A (en) * 2004-03-30 2005-10-13 National Institute Of Advanced Industrial & Technology Remote image diagnostic reading service system
WO2008090676A1 (en) * 2007-01-25 2008-07-31 Konica Minolta Medical & Graphic, Inc. Medical image system, electronic medical record terminal, and program
JP5308973B2 (en) * 2009-09-16 2013-10-09 富士フイルム株式会社 MEDICAL IMAGE INFORMATION DISPLAY DEVICE AND METHOD, AND PROGRAM
CN104271066B (en) * 2012-05-25 2017-10-24 外科手术室公司 Mixed image with the control without hand/scene reproduction device
JP6009598B2 (en) * 2015-03-13 2016-10-19 三菱プレシジョン株式会社 Biological data model creation method and apparatus

Also Published As

Publication number Publication date
JP2017080192A (en) 2017-05-18

Similar Documents

Publication Publication Date Title
JP6689919B2 (en) Evolving contextual clinical data engine for medical information
Boedecker et al. Using virtual 3D-models in surgical planning: workflow of an immersive virtual reality application in liver surgery
JP5274180B2 (en) Image processing apparatus, image processing method, computer program, and storage medium
US11810659B2 (en) Medical image processing apparatus, program installable into medical image processing apparatus, and medical image processing method
EP2989575B1 (en) Image visualization
US20160239615A1 (en) Method and system for managing and editing data of a medical device
Phelps et al. Embedding 3D radiology models in portable document format
JP6489709B2 (en) Image visualization
JP2005110974A (en) System and method for aggregating medical image
JP2017118913A (en) Information processing device, control method and program thereof, server, control method and program thereof, information processing system, and control method and program thereof
JP6797525B2 (en) Medical image processing equipment, programs that can be installed in medical image processing equipment, and medical image processing methods
JP6735080B2 (en) Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method
JP6337868B2 (en) Medical image processing apparatus, program mountable in medical image processing apparatus, and medical image processing method
JP2018158116A (en) Medical image processing apparatus, program mountable on medical image processing apparatus, and medical image processing method
US10846907B2 (en) Medical image processing system, medical image processing apparatus, control method thereof, and recording medium
JP6213516B2 (en) MEDICAL IMAGE MANAGEMENT SYSTEM, ITS CONTROL METHOD, AND PROGRAM, AND INFORMATION PROCESSING DEVICE, ITS CONTROL METHOD, AND PROGRAM
US9454547B2 (en) Computer system and method for image processing
US20070165919A1 (en) Multi-planar reformating using a three-point tool
JP7182363B2 (en) MEDICAL IMAGE DISPLAY APPARATUS AND MEDICAL IMAGE DISPLAY METHOD
JP2010061489A (en) Method and apparatus for displaying medical image, and medical image display program
JP2016206758A (en) Medical image management system, control method of medical image management system, and program
JP2014013590A (en) Diagnostic support apparatus and diagnostic support method
Rosset et al. OSIRIX: open source multimodality image navigation software
JP2010069041A (en) Portable storage medium, program, and information processor

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161101

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161101

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20180719

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20180730

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191226

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20200130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200616

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200713

R150 Certificate of patent or registration of utility model

Ref document number: 6735080

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150