JP2011177241A - Medical image display controller and program - Google Patents

Medical image display controller and program Download PDF

Info

Publication number
JP2011177241A
JP2011177241A JP2010042591A JP2010042591A JP2011177241A JP 2011177241 A JP2011177241 A JP 2011177241A JP 2010042591 A JP2010042591 A JP 2010042591A JP 2010042591 A JP2010042591 A JP 2010042591A JP 2011177241 A JP2011177241 A JP 2011177241A
Authority
JP
Japan
Prior art keywords
image
types
compressed
pattern
compressed tomographic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010042591A
Other languages
Japanese (ja)
Other versions
JP5618129B2 (en
Inventor
Hidehiro Kishimoto
英博 岸本
Naoyuki Aikawa
直幸 相川
Kohei Soga
公平 曽我
Toshiyuki Watanabe
敏之 渡邊
Takahiko Sotoyama
貴彦 外山
Hiroshi Fujii
博史 藤井
Izumi Umeda
泉 梅田
Masayuki Yamaguchi
雅之 山口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Doho Group Of Educational Institutions Nagoya Zokei Univ Of Art & Design
NAT CANCER CT
NATIONAL CANCER CENTER
Tokyo University of Science
Original Assignee
Doho Group Of Educational Institutions Nagoya Zokei Univ Of Art & Design
NAT CANCER CT
NATIONAL CANCER CENTER
Tokyo University of Science
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Doho Group Of Educational Institutions Nagoya Zokei Univ Of Art & Design, NAT CANCER CT, NATIONAL CANCER CENTER, Tokyo University of Science filed Critical Doho Group Of Educational Institutions Nagoya Zokei Univ Of Art & Design
Priority to JP2010042591A priority Critical patent/JP5618129B2/en
Publication of JP2011177241A publication Critical patent/JP2011177241A/en
Application granted granted Critical
Publication of JP5618129B2 publication Critical patent/JP5618129B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Processing Or Creating Images (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Biophysics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Image Processing (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To support the efficient finding of an abnormal part in medical image diagnosing by a doctor. <P>SOLUTION: By an image compression processing part 22, compressed tomographic images subjected to compression processing are generated for a plurality of kinds of tomographic images. By a feature extraction part 26, the features of division areas wherein the compressed tomographic image is divided are extracted. Whether each division area of each fault is an abnormal part is determined by an abnormality determination part 28, and the pattern of the abnormal part is generated for each fault by a pattern generation part 30. Images wherein the generated pattern is superposed on the compressed tomographic image are continuously displayed on a touch panel 14 for each fault, by an animation generating unit 36, and input from a user is received by an input reception part 37. By a 3D diagram generation part 38, a 3D diagram indicating the compressed tomographic image corresponding to the fault when receiving the input and a determination result by the abnormality determination part 28 is displayed on the touch panel 14. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、医療画像表示制御装置及びプログラムに係り、特に、診断対象の臓器等の身体の部位を表わす断層画像を表示装置に表示させる医療画像表示制御装置及びプログラムに関する。   The present invention relates to a medical image display control device and program, and more particularly, to a medical image display control device and program for displaying a tomographic image representing a body part such as an organ to be diagnosed on a display device.

日本人の最も大きな死亡原因「がん」は、国民生活の安全・安心を脅かす重要な社会問題であることは言及するに及ばない。医学、薬学、理学、工学、それぞれの観点から早期がん診断への取り組みは、国内外で盛んに行われてきた。これらを受けて、我が国が得意とする産業としての「ものづくり」が医学との連携体制を強くすることにより、様々な診断薬、デバイス、診断機器の研究開発が目覚しく進んでいる。一方、がん診療・治療に現場で携わる医師からの生の声として、多様化した種々の薬物と高度に発達した診断機器により得られる情報が氾濫しており、医師から見たときの情報量が膨大になり、その処理がきわめて複雑になりつつあるといわれている(非特許文献1)。   It is not necessary to mention that the biggest cause of death for Japanese people, "cancer", is an important social problem that threatens the safety and security of people's lives. Efforts for early diagnosis of cancer from the viewpoints of medicine, pharmacy, science, and engineering have been actively conducted both in Japan and overseas. In response to this, “Manufacturing” as an industry that Japan excels at, has strengthened the cooperation system with medicine, and research and development of various diagnostic agents, devices, and diagnostic equipment has advanced remarkably. On the other hand, the information obtained from various diversified drugs and highly developed diagnostic equipment is overflowing as a raw voice from doctors engaged in cancer treatment and treatment in the field, and the amount of information seen by doctors Is enormous, and it is said that the process is becoming extremely complicated (Non-patent Document 1).

今村惠子、小林和子、中島康雄、「CT、MRI設置施設における画像診断医の充足度」、日本放射線科専門医会News、No.170、2009年Atsuko Imamura, Kazuko Kobayashi, Yasuo Nakajima, “Degree of Satisfaction of Diagnostic Imaging Doctors at CT and MRI Installation Facilities”, Japanese Radiology Specialist Society, Nos. 170, 2009

上記のような状況下を鑑みて、医師による医療画像診断において、異常部位を効率的に発見できるように支援する医療画像表示制御装置及びプログラムを提供することを目的とする。   In view of the circumstances as described above, an object of the present invention is to provide a medical image display control device and a program for assisting in efficiently finding an abnormal site in medical image diagnosis by a doctor.

上記の目的を達成するために本発明に係る医療画像表示制御装置は、診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する複数種類の医療用撮像装置によって撮像された複数種類の前記断層画像の各々に対して、データ圧縮処理を行った圧縮断層画像を複数種類生成する画像処理手段と、前記複数種類の圧縮断層画像について、前記圧縮断層画像が表わす臓器等の身体の部位の位置が対応するように、前記圧縮断層画像上の位置の対応付けを行う位置対応付け手段と、前記複数種類の圧縮断層画像の各々について、前記圧縮断層画像を分割した複数の分割領域の各々の特徴を抽出する特徴抽出手段と、各断層の前記分割領域の各々について、位置が対応する前記複数種類の圧縮断層画像間で該分割領域と位置が対応する各分割領域について抽出された前記特徴に基づいて、前記臓器等の身体の部位の該分割領域が表わす部分が、異常箇所であるか否かを各々判定する異常判定手段と、前記異常箇所であると判定された前記分割領域から知覚される視覚的なパターンを各断層について生成するパターン生成手段と、前記パターン生成手段によって生成された各断層の前記パターンを各断層の前記圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させる連続表示制御手段と、前記連続表示制御手段によって前記重畳画像が連続して表示されているときに、ユーザからの入力を受け付ける入力受付手段と、前記入力受付手段によって入力を受け付けたときに表示されていた前記重畳画像が表わす断層に対応する前記圧縮断層画像と、前記異常判定手段によって該圧縮断層画像の各分割領域について判定された判定結果とを表わす3次元画像を、前記表示装置に表示させる3次元表示制御手段と、を含んで構成されている。   In order to achieve the above object, a medical image display control device according to the present invention is captured by a plurality of types of medical imaging devices that capture tomographic images representing a plurality of tomograms in a body part such as an organ to be diagnosed. Image processing means for generating a plurality of types of compressed tomographic images obtained by performing data compression processing on each of the plurality of types of tomographic images, and a body such as an organ represented by the compressed tomographic images for the plurality of types of compressed tomographic images And a plurality of divided regions obtained by dividing the compressed tomographic image with respect to each of the plurality of types of compressed tomographic images. The feature extraction means for extracting each feature of each of the tomograms, and for each of the divided regions of each tomography, the divided regions correspond to the positions among the plurality of types of compressed tomographic images corresponding to the positions. An abnormality determining means for determining whether or not a portion represented by the divided region of a body part such as the organ is an abnormal portion based on the feature extracted for each divided region; A pattern generating means for generating a visual pattern perceived from the divided area determined to be present for each tomography, and the pattern of each tomogram generated by the pattern generating means on the compressed tomographic image of each tomography Continuous display control means for continuously displaying superimposed images on the display device for each slice, and input from the user when the superimposed images are continuously displayed by the continuous display control means An input receiving unit, and the compressed tomographic image corresponding to the tomogram represented by the superimposed image displayed when the input is received by the input receiving unit Is configured three-dimensional image representing the result of the determination for each of the divided regions of the compressed tomographic image, a three-dimensional display control means for displaying on said display device, including by the abnormality determining means.

本発明に係るプログラムは、コンピュータを、診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する複数種類の医療用撮像装置によって撮像された複数種類の前記断層画像の各々に対して、データ圧縮処理を行った圧縮断層画像を複数種類生成する画像処理手段、前記複数種類の圧縮断層画像について、前記圧縮断層画像が表わす臓器等の身体の部位の位置が対応するように、前記圧縮断層画像上の位置の対応付けを行う位置対応付け手段、前記複数種類の圧縮断層画像の各々について、前記圧縮断層画像を分割した複数の分割領域の各々の特徴を抽出する特徴抽出手段、各断層の前記分割領域の各々について、位置が対応する前記複数種類の圧縮断層画像間で該分割領域と位置が対応する各分割領域について抽出された前記特徴に基づいて、前記臓器等の身体の部位の該分割領域が表わす部分が、異常箇所であるか否かを各々判定する異常判定手段、前記異常箇所であると判定された前記分割領域から知覚される視覚的なパターンを各断層について生成するパターン生成手段、前記パターン生成手段によって生成された各断層の前記パターンを各断層の前記圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させる連続表示制御手段、前記連続表示制御手段によって前記重畳画像が連続して表示されているときに、ユーザからの入力を受け付ける入力受付手段、及び前記入力受付手段によって入力を受け付けたときに表示されていた前記重畳画像が表わす断層に対応する前記圧縮断層画像と、前記異常判定手段によって該圧縮断層画像の各分割領域について判定された判定結果とを表わす3次元画像を、前記表示装置に表示させる3次元表示制御手段として機能させるためのプログラムである。   The program according to the present invention causes a computer to each of a plurality of types of tomographic images captured by a plurality of types of medical imaging devices that capture a plurality of tomographic images representing a plurality of tomograms in a body part such as an organ to be diagnosed. On the other hand, image processing means for generating a plurality of types of compressed tomographic images subjected to data compression processing, so that the positions of body parts such as organs represented by the compressed tomographic images correspond to the plurality of types of compressed tomographic images, Position associating means for associating positions on the compressed tomographic image; and feature extracting means for extracting each feature of a plurality of divided regions obtained by dividing the compressed tomographic image for each of the plurality of types of compressed tomographic images; For each of the divided areas of each slice, extraction is performed for each divided area whose position corresponds to the divided area between the plurality of types of compressed tomographic images corresponding to the position. On the basis of the characteristic, abnormality determination means for determining whether or not the part represented by the divided region of the body part such as the organ is an abnormal part, and the division determined to be the abnormal part A pattern generating unit that generates a visual pattern perceived from the region for each tomographic image, and a superimposed image obtained by superimposing the pattern of each tomographic image generated by the pattern generating unit on the compressed tomographic image of each tomographic image, Continuous display control means for continuously displaying a slice on a display device, input receiving means for receiving an input from a user when the superimposed image is continuously displayed by the continuous display control means, and the input receiving means The compressed tomographic image corresponding to the tom represented by the superimposed image that was displayed when the input was received, and the abnormality determining means A three-dimensional image representing the result of the determination for each of the divided regions of the reduced tomographic image, a program for functioning as a 3-dimensional display control means for displaying on said display device.

本発明によれば、画像処理手段によって、診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する複数種類の医療用撮像装置によって撮像された複数種類の前記断層画像の各々に対して、データ圧縮処理を行った圧縮断層画像を複数種類生成する。   According to the present invention, each of a plurality of types of tomographic images captured by a plurality of types of medical imaging devices that capture a tomographic image representing a plurality of tomograms in a body part such as an organ to be diagnosed by an image processing means. In contrast, a plurality of types of compressed tomographic images subjected to data compression processing are generated.

そして、位置対応付け手段によって、複数種類の圧縮断層画像について、圧縮断層画像が表わす臓器等の身体の部位の位置が対応するように、圧縮断層画像上の位置の対応付けを行い、特徴抽出手段によって、複数種類の圧縮断層画像の各々について、圧縮断層画像を分割した複数の分割領域の各々の特徴を抽出する。   Then, the position correlating means associates positions on the compressed tomographic image such that the positions of the body parts such as the organ represented by the compressed tomographic image correspond to the plurality of types of compressed tomographic images, and the feature extracting means Thus, for each of a plurality of types of compressed tomographic images, the characteristics of each of the plurality of divided regions obtained by dividing the compressed tomographic image are extracted.

異常判定手段によって、各断層の前記分割領域の各々について、位置が対応する前記複数種類の圧縮断層画像間で該分割領域と位置が対応する各分割領域について抽出された前記特徴に基づいて、前記臓器等の身体の部位の該分割領域が表わす部分が、異常箇所であるか否かを各々判定する。パターン生成手段によって、異常箇所であると判定された分割領域から知覚される視覚的なパターンを各断層について生成する。   Based on the feature extracted by the abnormality determination means for each of the divided regions of each tomographic region, the divided regions corresponding to the divided regions and the positions among the plurality of types of compressed tomographic images corresponding to the positions. It is determined whether or not the part represented by the divided region of the body part such as an organ is an abnormal part. A visual pattern perceived from the divided area determined to be an abnormal part is generated for each slice by the pattern generation means.

そして、連続表示制御手段によって、パターン生成手段によって生成された各断層のパターンを各断層の圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させ、入力受付手段によって、連続表示制御手段によって重畳画像が連続して表示されているときに、ユーザからの入力を受け付ける。3次元表示制御手段によって、入力受付手段によって入力を受け付けたときに表示されていた重畳画像が表わす断層に対応する圧縮断層画像と、異常判定手段によって該圧縮断層画像の各分割領域について判定された判定結果とを表わす3次元画像を、表示装置に表示させる。   Then, the continuous display control means continuously displays a superimposed image obtained by superimposing each tomographic pattern generated by the pattern generating means on the compressed tomographic image of each tomographic image on the display device for each tomogram, and the input receiving means. Thus, when the superimposed image is continuously displayed by the continuous display control means, an input from the user is accepted. The compressed tomographic image corresponding to the tom represented by the superimposed image displayed when the input is accepted by the input accepting unit is determined by the three-dimensional display control unit, and each divided region of the compressed tomographic image is determined by the abnormality determining unit. A three-dimensional image representing the determination result is displayed on the display device.

このように、複数種類の断層画像から判定される異常箇所を表わすパターンを、各断層の圧縮断層画像と重畳させて表示させ、表示に対するユーザからの入力に対応する断層の圧縮断層画像と異常箇所の判定結果とを表わした3次元画像を表示させることにより、医師による医療画像診断において、異常部位を効率的に発見できるように支援することができる。   In this way, a pattern representing an abnormal location determined from a plurality of types of tomographic images is displayed superimposed on the compressed tomographic image of each tomographic image, and the tomographic compressed tomographic image and the abnormal location corresponding to the input from the user for the display are displayed. By displaying a three-dimensional image representing the determination result, it is possible to assist in efficiently finding an abnormal site in medical image diagnosis by a doctor.

本発明に係る医療画像表示制御装置は、パターン生成手段によって生成されたパターンに所定の色彩を付与する色彩付与手段を更に含み、連続表示制御手段は、色彩付与手段によって所定の色彩が付与されたパターンを圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させるようにすることができる。これによって、異常部位をより効率的に発見できるように支援することができる。   The medical image display control apparatus according to the present invention further includes a color imparting unit that imparts a predetermined color to the pattern generated by the pattern generation unit, and the continuous display control unit is provided with the predetermined color by the color imparting unit. The superimposed image obtained by superimposing the pattern on the compressed tomographic image can be continuously displayed on the display device for each tomographic image. Thereby, it can assist so that an abnormal site | part can be discovered more efficiently.

本発明に係る医療画像表示制御装置は、入力受付手段によって入力を受け付けたときに表示されていた重畳画像が表わす断層に対応する、圧縮前の断層画像を記憶手段に記憶させる記憶制御手段を更に含むことができる。   The medical image display control apparatus according to the present invention further includes a storage control unit that stores in the storage unit a tomographic image before compression corresponding to a tomogram represented by the superimposed image displayed when the input is received by the input receiving unit. Can be included.

本発明のプログラムは、記録媒体に格納して提供することができる。   The program of the present invention can be provided by being stored in a recording medium.

以上説明したように、本発明の医療画像表示制御装置及びプログラムによれば、複数種類の圧縮断層画像から判定される異常箇所を表わすパターンを、各断層の断層画像と重畳させて表示させると共に、表示に対するユーザからの入力に対応する断層の圧縮断層画像と異常箇所の判定結果とを表わした3次元画像を表示させることにより、医師による医療画像診断において、異常部位を効率的に発見できるように支援することができる、という効果が得られる。   As described above, according to the medical image display control apparatus and program of the present invention, while displaying a pattern representing an abnormal location determined from a plurality of types of compressed tomographic images superimposed on a tomographic image of each tomographic image, By displaying a compressed tomographic image of a tomogram corresponding to an input from the user for display and a determination result of an abnormal part, an abnormal part can be efficiently found in medical image diagnosis by a doctor. The effect that it can support is acquired.

本発明の実施の形態に係る医療画像表示システムの構成を示す概略図である。It is the schematic which shows the structure of the medical image display system which concerns on embodiment of this invention. 空間周波数画像の周波数分割を示すイメージ図である。It is an image figure which shows the frequency division of a spatial frequency image. ニューラルネットワークの例を示す図である。It is a figure which shows the example of a neural network. プレグナンツの法則における近接の要因を説明するための図である。It is a figure for demonstrating the factor of the proximity in the law of Pregnants. プレグナンツの法則における類同の要因を説明するための図である。It is a figure for demonstrating the similar factor in the law of Pregnants. プレグナンツの法則における閉合の要因を説明するための図である。It is a figure for demonstrating the factor of the closure in a Pregnant's law. 3Dダイヤグラムの例を示すイメージ図である。It is an image figure which shows the example of 3D diagram. 本発明の実施の形態に係るコンピュータの医療画像表示処理ルーチンの内容を示すフローチャートである。It is a flowchart which shows the content of the medical image display process routine of the computer which concerns on embodiment of this invention. 断層画像の空間分割を示すイメージ図である。It is an image figure which shows the space division of a tomographic image.

以下、図面を参照して本発明の実施の形態を詳細に説明する。なお、本実施の形態では、医師であるユーザによる医療画像診断を支援するための医療画像表示システムに、本発明を適用した場合を例に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the present embodiment, a case where the present invention is applied to a medical image display system for supporting medical image diagnosis by a user who is a doctor will be described as an example.

図1に示すように、本発明の実施の形態に係る医療画像表示システム10は、MRI、CT、PETなどの複数種類の医療用撮像装置から得られる複数種類の断層画像を入力として、医療画像診断のための画像を生成してタッチパネル14に表示させるコンピュータ12と、タッチパネル14とを備えている。   As shown in FIG. 1, a medical image display system 10 according to an embodiment of the present invention receives a plurality of types of tomographic images obtained from a plurality of types of medical imaging devices such as MRI, CT, and PET as medical images. The computer 12 which produces | generates the image for a diagnosis and displays it on the touch panel 14 and the touch panel 14 are provided.

タッチパネル14は、コンピュータ12から出力された表示データを表示させると共に、ユーザによる操作入力をコンピュータ12へ出力する。   The touch panel 14 displays the display data output from the computer 12 and outputs an operation input by the user to the computer 12.

コンピュータ12は、CPU、ROM、RAM、及びHDDを備え、HDDには、後述する医療画像表示処理ルーチンに対するプログラムが記憶されている。   The computer 12 includes a CPU, a ROM, a RAM, and an HDD, and a program for a medical image display processing routine to be described later is stored in the HDD.

コンピュータ12は、機能的には次に示すように構成されている。図1に示すように、コンピュータ12は、画像取得部20、画像圧縮処理部22、位置合わせ処理部24、特徴抽出部26、異常判定部28、パターン生成部30、正常パターン取得部32、色付け処理部34、アニメーション生成部36、入力受付部37、3Dダイヤグラム生成部38、及びデータ保存部40を備えている。なお、画像圧縮処理部22は、画像処理手段の一例であり、アニメーション生成部36は、連続表示制御手段の一例である。また、色付け処理部34が、色彩付与手段の一例であり、3Dダイヤグラム生成部38が、3次元表示制御手段の一例である。また、データ保存部40が、記憶制御手段の一例であり、コンピュータ12が、医療画像表示制御装置の一例である。   The computer 12 is functionally configured as follows. As shown in FIG. 1, the computer 12 includes an image acquisition unit 20, an image compression processing unit 22, a registration processing unit 24, a feature extraction unit 26, an abnormality determination unit 28, a pattern generation unit 30, a normal pattern acquisition unit 32, and coloring. A processing unit 34, an animation generation unit 36, an input reception unit 37, a 3D diagram generation unit 38, and a data storage unit 40 are provided. The image compression processing unit 22 is an example of an image processing unit, and the animation generation unit 36 is an example of a continuous display control unit. Further, the coloring processing unit 34 is an example of a color providing unit, and the 3D diagram generation unit 38 is an example of a three-dimensional display control unit. The data storage unit 40 is an example of a storage control unit, and the computer 12 is an example of a medical image display control device.

診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する、CT、MRI、PETなどの複数種類の医療用撮像装置によって撮像された、DICOM(Digital Imaging and COmmunications in Medicine)データである複数種類の断層画像が、オペレータによってコンピュータ12に入力され、画像取得部20は、これらの複数種類の断層画像(オリジナルデータ)を取得して、メモリに一次的に保存する。   DICOM (Digital Imaging and Communication in Medicine) data captured by multiple types of medical imaging devices such as CT, MRI, and PET that captures tomographic images representing multiple tomographic images of a body part such as an organ to be diagnosed Are input to the computer 12 by the operator, and the image acquisition unit 20 acquires the multiple types of tomographic images (original data) and temporarily stores them in the memory.

画像圧縮処理部22は、各断層画像について、診断対象の臓器等の身体の部位を表わす部分を切り出すと共に、切り出された部分の画像について、Wavelet変換又はDCT変換を行って、得られた空間周波数画像に対して、図2に示すように周波数分割を行う。また、画像圧縮処理部22は、例えば、周波数分割された結果から高周波成分を除去すると共にWavelet逆変換又はDCT逆変換を行う、データ圧縮処理を行うことにより、画像データをデータ圧縮した圧縮断層画像を生成する。なお、このときに、例えばリフティング構造を用いることによって可逆変換で画像データをデータ圧縮した圧縮断層画像を生成するようにしてもよいし、不可逆変換で画像データをデータ圧縮した圧縮断層画像を生成するようにしてもよい。また、画像圧縮処理部22は、Wavelet変換又はDCT変換、及び圧縮処理を行う際に、よりよく圧縮するためにノイズ除去処理を行うようにしてもよい。   The image compression processing unit 22 cuts out a portion representing a body part such as an organ to be diagnosed from each tomographic image, and performs wavelet transform or DCT transform on the cut out image to obtain the obtained spatial frequency Frequency division is performed on the image as shown in FIG. In addition, the image compression processing unit 22, for example, compresses tomographic images obtained by compressing image data by performing data compression processing that removes high-frequency components from the result of frequency division and performs Wavelet inverse transform or DCT inverse transform. Is generated. At this time, for example, by using a lifting structure, a compressed tomographic image in which image data is compressed by reversible conversion may be generated, or a compressed tomographic image in which image data is compressed by irreversible conversion is generated. You may do it. Further, the image compression processing unit 22 may perform noise removal processing for better compression when performing Wavelet conversion or DCT conversion and compression processing.

位置合わせ処理部24は、複数種類の圧縮断層画像に対して、エッジ抽出などの特徴点抽出を行い、抽出された特徴点を、複数種類の圧縮断層画像間で対応付けることにより、複数種類の圧縮断層画像が表わす臓器等の身体の部位の位置を対応付ける位置合わせ処理を行う。位置合わせ処理部24は、位置合わせ処理の結果に基づいて、各圧縮断層画像を分割した分割領域に対して、複数種類の圧縮断層画像間で、位置が対応する分割領域を対応付け、複数種類の圧縮断層画像間で対応付けられた分割領域の対応関係を示すデータを生成する。なお、上記の位置合わせは、断層の位置合わせも含めた3次元的な位置の位置合わせであり、複数種類の圧縮断層画像間で、同じ断層を表わし、かつ、同じ断層上(2次元上)の位置を表わす分割領域の対応付けを行う。   The alignment processing unit 24 performs feature point extraction such as edge extraction on a plurality of types of compressed tomographic images, and associates the extracted feature points between the plurality of types of compressed tomographic images, thereby compressing a plurality of types of compression. Alignment processing for associating the position of a body part such as an organ represented by the tomographic image is performed. Based on the result of the alignment process, the alignment processing unit 24 associates the divided areas corresponding to the positions among the plurality of types of compressed tomographic images with respect to the divided areas obtained by dividing the compressed tomographic images. The data which shows the correspondence of the division area matched between the said compression tomographic images is produced | generated. Note that the above-described alignment is a three-dimensional position alignment including a tomographic alignment, and represents the same tomography among a plurality of types of compressed tomographic images and is on the same tomography (two-dimensionally). The divided areas representing the positions of the areas are associated.

以下、ある断層について行われる処理について説明するが、各処理は、各断層について行われる。   Hereinafter, although the process performed about a certain fault is demonstrated, each process is performed about each fault.

特徴抽出部26は、複数種類の圧縮断層画像の各々について、複数の分割領域の各々の特徴を抽出する。抽出する特徴は、例えば、形状が整っているか否か、信号の強弱、信号が均一であるか否か、分布が単発であるか多発しているか、などである。これらの特徴抽出方法は、個別の抽出方式によって行われる。また、脳・肝臓・腎臓などの実質臓器と、消化管や血管などの管腔構造をもつ組織とでも、別々の抽出方式を用いて処理する。   The feature extraction unit 26 extracts each feature of the plurality of divided regions for each of the plurality of types of compressed tomographic images. The features to be extracted are, for example, whether or not the shape is prepared, whether the signal is strong, whether the signal is uniform, whether the distribution is single or frequent. These feature extraction methods are performed by an individual extraction method. In addition, processing is performed using a separate extraction method for a real organ such as a brain, liver, or kidney and a tissue having a luminal structure such as a digestive tract or a blood vessel.

異常判定部28は、複数の分割領域の各々について、複数種類の圧縮断層画像間で位置が対応する各分割領域に対して抽出された特徴に基づいて、当該分割領域が表わす臓器等の身体の部位の部分が、異常箇所であるか否かを判定する。例えば、図3に示すようなニューラルネットワークや、ファジーベクトル量子化法、GAやParticle Swam Optimizationのような最適化問題で解く方法により、異常箇所であるか否かを判定する。   The abnormality determination unit 28, for each of the plurality of divided regions, based on the features extracted for each divided region corresponding to the position among the plurality of types of compressed tomographic images, It is determined whether or not the part is an abnormal part. For example, it is determined whether or not it is an abnormal location by a neural network as shown in FIG. 3, a fuzzy vector quantization method, a method solved by an optimization problem such as GA or Particle Swam Optimization.

パターン生成部30は、複数の分割領域に対する異常箇所の判定結果を表わした画像から、ゲシュタルトを知覚する法則であるプレグナンツの法則(近接(図4参照)、類同(図5参照)、閉合(図6参照)の要因)によって、知覚される視覚的な異常箇所のパターンを生成する。   The pattern generation unit 30 uses a Pregnant's law (proximity (see FIG. 4), similarity (see FIG. 5), closure (see FIG. 5), which is a law for perceiving gestalt from an image representing the determination results of abnormal locations for a plurality of divided regions. According to the factor (see FIG. 6), a pattern of perceived visual abnormal points is generated.

正常パターン取得部32は、HDDに予め記憶された正常時のパターン画像を取得する。正常時のパターン画像は、正常な臓器等の身体の部位を撮像した複数種類の断層画像に対して、上記の各処理を同様に行った場合に得られる異常箇所のパターンを表わす画像であり、予め生成してHDDに記憶される。   The normal pattern acquisition unit 32 acquires a normal pattern image stored in advance in the HDD. The pattern image at the normal time is an image representing a pattern of abnormal portions obtained when the above-described processes are similarly performed on a plurality of types of tomographic images obtained by imaging a body part such as a normal organ. It is generated in advance and stored in the HDD.

色付け処理部34は、パターン生成部30によって生成された異常箇所のパターンに半透明に色彩を付与すると共に、正常パターン取得部32によって取得された正常時のパターン画像に対しても同様に、異常箇所のパターンに半透明に色彩を付与する。   The coloring processing unit 34 applies a semi-transparent color to the abnormal part pattern generated by the pattern generation unit 30, and also applies an abnormality to the normal pattern image acquired by the normal pattern acquisition unit 32. A semi-transparent color is given to the pattern of the location.

ここで、付与される色彩は、アクセシビリティーを向上させるために、彩度、明度、色相、の効率良いバランスを考慮して決定される。例えば、眼に飛び込む色彩や、完全な補色関係からずらした色彩を用いて隣り合う色のバランスを考える事で、見落としや幻惑を軽減するように、色彩を決定する。   Here, the assigned color is determined in consideration of an efficient balance of saturation, brightness, and hue in order to improve accessibility. For example, the colors are determined so as to reduce oversight and illusion by considering the balance of adjacent colors using colors that jump into the eyes or colors that are shifted from a perfect complementary relationship.

また、病状、正常、異常、など表示するべき内容に合わせた色設定を行う事で、知りたい情報を整理して表現するようにしてもよい。   In addition, information to be known may be arranged and expressed by performing color settings in accordance with contents to be displayed such as a medical condition, normality, and abnormality.

また、パターンに使用する色彩と、タッチパネル14に表示される表示画面に利用する色彩のバランスを明確にしておく事で、視るべき事と操作するべき事を効率よく分けるようにしてもよい。   Further, by clarifying the balance between the colors used for the pattern and the colors used for the display screen displayed on the touch panel 14, the things to be viewed and the operations to be performed may be efficiently separated.

アニメーション生成部36は、色付けされたパターンをいずれか1種類の圧縮断層画像の上に重畳させた重畳画像、及び色付けされた正常時のパターンを同じ種類の正常時の圧縮断層画像の上に重畳させた重畳画像を、各断層について連続して表示させるためのアニメーションデータを生成して、タッチパネル14に出力し、アニメーション化した重畳画像を、タッチパネル14に表示させる。   The animation generating unit 36 superimposes a colored pattern on any one type of compressed tomographic image and superimposes the colored normal pattern on the same type of normal compressed tomographic image. Animation data for continuously displaying the superposed image for each slice is generated and output to the touch panel 14, and the animated superposed image is displayed on the touch panel 14.

アニメーション生成部36は、異常箇所のパターンが存在する断層の重畳画像を表示するときに、スピーカ(図示省略)から警告音を出力するようにしてもよい。音声によるアナウンスによって、視覚のみでは見落としがちな変化やコンピュータが判断する異常などを自動的に知らせ、医師の診断の軽減に役立てることができる。   The animation generation unit 36 may output a warning sound from a speaker (not shown) when displaying a superimposed image of a tomography in which an abnormal part pattern exists. By voice announcements, changes that are often overlooked by vision or abnormalities judged by the computer are automatically notified, which can be used to reduce the diagnosis of the doctor.

医師は、タッチパネル14に表示されたアニメーション化した重畳画像を見て、注意深く診断したい断層があれば、タッチパネル14を入力操作することによって、診断したい箇所(断層)を指示することができ、入力受付部37は、タッチパネル14の上記の操作入力を受け付ける。   The doctor sees the animated superimposed image displayed on the touch panel 14 and, if there is a tomographic section to be carefully diagnosed, can input a position (tomographic section) to be diagnosed by performing an input operation on the touch panel 14 and accepting the input. The unit 37 receives the operation input of the touch panel 14.

また、入力受付部37は、アニメーション速度の変更等や、注意深く判定をしなければならない箇所の一時停止、ピンチによる拡大指示などの入力操作を受け付ける。   Further, the input receiving unit 37 receives input operations such as a change in animation speed or the like, a pause at a place that must be carefully determined, and an enlargement instruction by pinch.

なお、認知科学の領域である(アフォーダンス)の理論を利用する事によって、タッチパネル14の表示画面において、感覚的に扱えるインターフェースを構築するようにしてもよい。また、CTなどの断層画像とは別に、操作を促すためのアイコンなどにも、色彩やアニメーションなどを付加する事で、操作の行いやすさ、操作ミスの軽減、病原の発見の為の効率の良い手順などをサポートしてもよい。また、異常部位にコメントをつける機能を設けたり、圧縮断層画像のサムネイル表示を行うようにしてもよい。また、タッチパネル14上の表示画面として、入力用の液晶画面とビューワ液晶画面との2つを用意し、ミラーリング表示するようにしてもよい。   Note that an interface that can be treated sensibly on the display screen of the touch panel 14 may be constructed by using the theory of (Affordance), which is the field of cognitive science. In addition to CT and other tomographic images, colors and animations are added to the icons for prompting the operation, making it easier to operate, reducing operational errors, and discovering pathogens. Good procedures may be supported. In addition, a function of adding a comment to the abnormal part may be provided, or a thumbnail display of the compressed tomographic image may be performed. In addition, two display screens, an input liquid crystal screen and a viewer liquid crystal screen, may be prepared as the display screen on the touch panel 14 and displayed in a mirroring manner.

3Dダイヤグラム生成部38は、タッチパネル14によって入力を受け付けたときに表示されていた重畳画像が表わす断層に対応する圧縮断層画像と、異常判定部28によって該圧縮断層画像の各分割領域について判定された判定結果を表わす3次元記号化画像とを重ねて表示した、図7に示すような3次元画像(3Dダイヤグラム)を生成し、タッチパネル14に表示させる。これによって、医師は、特異箇所を多元的に視認することが可能となる。   The 3D diagram generation unit 38 determines the compressed tomographic image corresponding to the tom represented by the superimposed image displayed when the input is received by the touch panel 14, and the abnormal determination unit 28 determines each divided region of the compressed tomographic image. A three-dimensional image (3D diagram) as shown in FIG. 7 is generated by superimposing the three-dimensional symbolized image representing the determination result and displayed on the touch panel 14. As a result, the doctor can visually recognize the peculiar part in a plural manner.

データ保存部40は、タッチパネル14によって入力を受け付けたときに表示されていた重畳画像が表わす断層に対応する、圧縮前の複数種類の断層画像(オリジナルデータ)を、一時的に記憶されたメモリから取得して、HDDに記憶させる。   The data storage unit 40 stores a plurality of types of tomographic images (original data) before compression corresponding to the tomographic image represented by the superimposed image displayed when the input is received by the touch panel 14 from a temporarily stored memory. Acquire it and store it in the HDD.

次に、本実施の形態に係る医療画像表示システム10の作用について説明する。   Next, the operation of the medical image display system 10 according to the present embodiment will be described.

まず、オペレータが、CT、MRI、PETなどの複数種類の医療用撮像装置を用いて、診断対象の臓器等の身体の部位を表わした複数種類の断層画像を、複数の断層の各々について撮像し、撮像された各断層の複数種類の断層画像を、コンピュータ12に入力する。   First, an operator uses a plurality of types of medical imaging devices such as CT, MRI, and PET to capture a plurality of types of tomographic images representing a body part such as an organ to be diagnosed for each of a plurality of tomographic images. A plurality of types of tomographic images of each tomographic image are input to the computer 12.

コンピュータ12は、医療画像診断を行う医師から、医療画像を表示するように指示がタッチパネル14を介して操作入力されると、図8に示す医療画像表示処理ルーチンが実行される。   When an instruction is input through the touch panel 14 to display a medical image from a doctor who performs a medical image diagnosis, the computer 12 executes a medical image display processing routine shown in FIG.

まず、ステップ100で、入力された複数種類の断層画像を、各断層について取得して、メモリに一時的に格納する。そして、ステップ102において、各断層画像から、診断対象の臓器等の身体の部位を表わす画像を切り出す。次のステップ104では、上記ステップ102で得られた切り出し画像の各々に対して、空間周波数変換、データ圧縮処理、空間周波数逆変換、及びノイズ除去処理を行って、複数種類の圧縮断層画像を、各断層について生成する。   First, in step 100, a plurality of inputted tomographic images are acquired for each tomographic image and temporarily stored in a memory. In step 102, an image representing a body part such as an organ to be diagnosed is cut out from each tomographic image. In the next step 104, a plurality of types of compressed tomographic images are obtained by performing spatial frequency transformation, data compression processing, spatial frequency inverse transformation, and noise removal processing on each of the cutout images obtained in step 102. Generate for each fault.

そして、ステップ106では、各圧縮断層画像を複数の分割領域に分割し、複数種類の圧縮断層画像間で、分割領域を対応付けて、位置合わせを行う。次のステップ108では、各圧縮断層画像の各分割領域について、特徴抽出を行い、ステップ110で、複数の分割領域の各々について、当該分割領域と対応付けられた複数種類の圧縮断層画像の分割領域の各々について抽出された特徴に基づいて、当該分割領域が表わす臓器等の身体の部位の部分が、異常箇所であるか否かを判定する。上記ステップ110の異常箇所の判定は、各断層について行われる。   In step 106, each compressed tomographic image is divided into a plurality of divided areas, and the divided areas are associated with each other between a plurality of types of compressed tomographic images to perform alignment. In the next step 108, feature extraction is performed for each divided region of each compressed tomographic image, and in step 110, for each of the plurality of divided regions, divided regions of a plurality of types of compressed tomographic images associated with the divided region. Based on the feature extracted for each of the above, it is determined whether or not the body part such as the organ represented by the divided region is an abnormal part. The determination of the abnormal location in step 110 is performed for each fault.

そして、ステップ112において、上記ステップ110で判定された、複数の分割領域の各々に対する判定結果に基づいて、異常部分の分割領域のパターンを各断層について生成する。ステップ114では、予め用意された、正常時の臓器等の身体の部位を表わす断層画像から得られる異常部分のパターンを、各断層について取得する。   In step 112, a pattern of the divided region of the abnormal part is generated for each slice based on the determination result for each of the plurality of divided regions determined in step 110. In step 114, an abnormal portion pattern obtained from a tomographic image representing a body part such as a normal organ prepared in advance is acquired for each tomography.

次のステップ116では、上記ステップ114で生成された各断層のパターン、及び上記ステップ114で得られた各断層のパターンに対して、色付け処理を行う。ステップ118において、上記ステップ116で色付け処理が施された各断層のパターンを、対応する各断層の圧縮断層画像に重畳させた、各断層の重畳画像を、診断対象の画像と正常時の画像とについて並べ、各断層について連続表示されるようにアニメーション化したアニメーションデータを生成し、表示させるためにタッチパネル14へ出力する。   In the next step 116, the coloring process is performed on each tomographic pattern generated in step 114 and each tomographic pattern obtained in step 114. In step 118, the tomographic images obtained by superimposing the tomographic patterns to which the coloring process has been applied in step 116 on the corresponding tomographic compressed tomographic images are converted into diagnostic images and normal images. Animation data that is animated so that each slice is continuously displayed is generated and output to the touch panel 14 for display.

これによって、タッチパネル14には、各断層の重畳画像が、診断対象の画像と正常時の画像とについて並べられ、かつ、連続して表示される。   As a result, on the touch panel 14, the superimposed images of the respective slices are arranged for the diagnosis target image and the normal image and displayed continuously.

ステップ120では、医師から、タッチパネル14の入力操作があったか否かを判定し、診断した断層を指示するための入力操作があった場合には、アニメーションの表示を中止して、ステップ122へ進み、タッチパネル14の入力操作によって指示された断層に対応し、かつ、上記ステップ110の各分割領域に対する異常箇所の判定結果を示すデータを取得する。また、ステップ124において、タッチパネル14の入力操作によって指示された断層に対応する何れかの種類の圧縮断層画像を、メモリから取得する。   In step 120, it is determined whether or not an input operation on the touch panel 14 has been performed by the doctor. If there is an input operation for instructing the diagnosed tomography, the animation display is stopped, and the process proceeds to step 122. Data corresponding to the tomogram instructed by the input operation on the touch panel 14 and indicating the determination result of the abnormal part for each divided region in step 110 is acquired. In step 124, any type of compressed tomographic image corresponding to the tomographic image instructed by the input operation on the touch panel 14 is acquired from the memory.

そして、ステップ126において、上記ステップ122で取得した異常箇所の判定結果を示すデータを表わす3次元記号化画像を生成すると共に、上記ステップ124で取得した圧縮断層画像を重畳させた3Dダイヤグラムを生成して、タッチパネル14に表示させる。また、ステップ128において、タッチパネル14の入力操作によって指示された断層に対応し、かつ、上記ステップ100で取得した複数種類の断層画像を、メモリから取得して、HDDに記憶させ、医療画像表示処理ルーチンを終了する。   In step 126, a three-dimensional symbolized image representing data indicating the determination result of the abnormal part acquired in step 122 is generated, and a 3D diagram in which the compressed tomographic image acquired in step 124 is superimposed is generated. Display on the touch panel 14. In step 128, a plurality of types of tomographic images corresponding to the tomogram instructed by the input operation of the touch panel 14 and acquired in step 100 are acquired from the memory, stored in the HDD, and medical image display processing is performed. End the routine.

なお、他の断層についても引き続き診断したい場合には、上記ステップ118でアニメーションの表示を再開させて、上記ステップ120〜ステップ128の処理を同様に行えばよい。   If it is desired to continue diagnosis for other faults, the display of animation is resumed in step 118, and the processing in steps 120 to 128 may be performed in the same manner.

以上説明したように、本発明の実施の形態に係る医療画像表示システムによれば、CT、MRI、PETなどの複数種類の圧縮断層画像に基づいて判定された異常箇所を表わすパターンを、各断層の圧縮断層画像と重畳させて表示させると共に、この表示に対する医師からの入力操作に対応する断層の圧縮断層画像と異常箇所の判定結果とを表わした3Dダイヤグラムを表示させることにより、多元的な三次元情報を医師が効率よく認識することができるため、医師による医療画像診断において、異常部位を効率的に発見できるように支援することができる。また、異常箇所を表わすパターンに色彩を付与することにより、異常部位をより効率的に発見できるように支援することができる。   As described above, according to the medical image display system according to the embodiment of the present invention, a pattern representing an abnormal location determined based on a plurality of types of compressed tomographic images such as CT, MRI, and PET is displayed for each tomographic image. By displaying a 3D diagram representing the compressed tomographic image of the tomography corresponding to the input operation from the doctor for the display and the determination result of the abnormal part, the multidimensional tertiary is displayed. Since the doctor can efficiently recognize the original information, the medical image diagnosis by the doctor can be supported so that the abnormal site can be found efficiently. Moreover, it can assist so that an abnormal site | part can be discovered more efficiently by giving a color to the pattern showing an abnormal location.

また、医療情報を医師に対して分かりやすく提示することにより、医師の負担を軽減させながらも、病変の早期発見を可能とする。   In addition, by presenting medical information to a doctor in an easy-to-understand manner, it is possible to detect a lesion early while reducing the burden on the doctor.

また、各断層の圧縮断層画像と異常箇所とを重畳させた画像を連続的に表示させるアニメーションデータを生成することによって、見えにくかった異常箇所の変化を見やすくすることができる。   In addition, by generating animation data that continuously displays an image obtained by superimposing the compressed tomographic image of each tomography and the abnormal part, it is possible to make the change of the abnormal part difficult to see easy to see.

また、具体的な断層画像と合わせて、異常箇所判定に関する情報を分かりやすく表示した3Dダイヤグラムを表示することによって、問題点がどこにあるのかを分かりやすく表現する事ができる。   In addition, by displaying a 3D diagram in which information related to abnormal point determination is displayed in an easy-to-understand manner together with a specific tomographic image, it is possible to express where the problem is.

また、タッチパネル等の感覚的な操作が行えるデバイスを入力機器にして、直感的な操作感覚(スライド、ピンチ、タップ、ダブルタップ)などを適度に利用することにより、短時間で医師が問題(病原等)にたどり着く事を支援することができる。   In addition, by using devices that can perform sensory operations such as touch panels as input devices and using appropriate intuitive operation feelings (slides, pinches, taps, double taps), etc., doctors can quickly become a problem (pathogenic Etc.) can be reached.

なお、上記の実施の形態では、タッチパネル式のハードウェア入力方式を用いた場合を例に説明したが、これに限定されるものではなく、マウスやキーボードなどの入力操作端末を用いて、深く診断したい断層を指示するようにしてもよい。   In the above embodiment, the case where the touch panel type hardware input method is used has been described as an example. However, the present invention is not limited to this, and deep diagnosis is performed using an input operation terminal such as a mouse or a keyboard. The fault to be performed may be indicated.

また、断層画像に対して周波数分割を行ってデータ圧縮処理を行う場合を例に説明したが、これに限定されるものではなく、図9に示すように、断層画像に対して空間分割を行って、データ圧縮処理を行うようにしてもよい。   In addition, although the case where the frequency compression is performed on the tomographic image and the data compression process is performed has been described as an example, the present invention is not limited to this, and as shown in FIG. Thus, data compression processing may be performed.

また、アニメーション化した画像又は3Dダイヤグラムの表示では、1種類の圧縮断層画像を用いて表示した場合を例に説明したが、これに限定されるものではなく、2種類以上の圧縮断層画像を合成した合成画像を用いて、アニメーション化した画像又は3Dダイヤグラムの表示を行ってもよい。   In addition, in the case of displaying an animated image or a 3D diagram, the case of displaying using one type of compressed tomographic image has been described as an example. However, the present invention is not limited to this, and two or more types of compressed tomographic images are synthesized. The synthesized image may be used to display an animated image or 3D diagram.

10 医療画像表示システム
12 コンピュータ
14 タッチパネル
20 画像取得部
22 画像圧縮処理部
24 位置合わせ処理部
26 特徴抽出部
28 異常判定部
30 パターン生成部
32 正常パターン取得部
34 色付け処理部
36 アニメーション生成部
37 入力受付部
38 3Dダイヤグラム生成部
40 データ保存部
DESCRIPTION OF SYMBOLS 10 Medical image display system 12 Computer 14 Touch panel 20 Image acquisition part 22 Image compression process part 24 Position adjustment process part 26 Feature extraction part 28 Abnormality determination part 30 Pattern generation part 32 Normal pattern acquisition part 34 Coloring process part 36 Animation generation part 37 Input Reception unit 38 3D diagram generation unit 40 Data storage unit

Claims (4)

診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する複数種類の医療用撮像装置によって撮像された複数種類の前記断層画像の各々に対して、データ圧縮処理を行った圧縮断層画像を複数種類生成する画像処理手段と、
前記複数種類の圧縮断層画像について、前記圧縮断層画像が表わす臓器等の身体の部位の位置が対応するように、前記圧縮断層画像上の位置の対応付けを行う位置対応付け手段と、
前記複数種類の圧縮断層画像の各々について、前記圧縮断層画像を分割した複数の分割領域の各々の特徴を抽出する特徴抽出手段と、
各断層の前記分割領域の各々について、位置が対応する前記複数種類の圧縮断層画像間で該分割領域と位置が対応する各分割領域について抽出された前記特徴に基づいて、前記臓器等の身体の部位の該分割領域が表わす部分が、異常箇所であるか否かを各々判定する異常判定手段と、
前記異常箇所であると判定された前記分割領域から知覚される視覚的なパターンを各断層について生成するパターン生成手段と、
前記パターン生成手段によって生成された各断層の前記パターンを各断層の前記圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させる連続表示制御手段と、
前記連続表示制御手段によって前記重畳画像が連続して表示されているときに、ユーザからの入力を受け付ける入力受付手段と、
前記入力受付手段によって入力を受け付けたときに表示されていた前記重畳画像が表わす断層に対応する前記圧縮断層画像と、前記異常判定手段によって該圧縮断層画像の各分割領域について判定された判定結果とを表わす3次元画像を、前記表示装置に表示させる3次元表示制御手段と、
を含む医療画像表示制御装置。
Compression obtained by performing data compression processing on each of a plurality of types of tomographic images captured by a plurality of types of medical imaging devices that capture a plurality of types of tomographic images representing a plurality of tomograms in a body part such as an organ to be diagnosed Image processing means for generating a plurality of types of tomographic images;
Position association means for associating positions on the compressed tomographic image such that positions of body parts such as organs represented by the compressed tomographic image correspond to the plurality of types of compressed tomographic images;
For each of the plurality of types of compressed tomographic images, feature extraction means for extracting the characteristics of each of the plurality of divided regions obtained by dividing the compressed tomographic image;
For each of the divided regions of each tomography, based on the features extracted for each of the divided regions whose positions correspond to the divided regions between the plurality of types of compressed tomographic images corresponding to the positions, An abnormality determining means for determining whether or not the part represented by the divided region of the part is an abnormal part;
Pattern generating means for generating a visual pattern perceived from the divided area determined to be the abnormal part for each tomography;
Continuous display control means for continuously displaying a superimposed image obtained by superimposing the pattern of each tomogram generated by the pattern generation means on the compressed tomographic image of each tomography on a display device;
An input receiving unit that receives an input from a user when the superimposed image is continuously displayed by the continuous display control unit;
The compressed tomographic image corresponding to the tom represented by the superimposed image displayed when the input is accepted by the input accepting unit, and the determination result determined for each divided region of the compressed tomographic image by the abnormality determining unit; 3D display control means for displaying a 3D image representing the above on the display device;
A medical image display control device.
前記パターン生成手段によって生成された前記パターンに所定の色彩を付与する色彩付与手段を更に含み、
前記連続表示制御手段は、前記色彩付与手段によって前記所定の色彩が付与された前記パターンを前記圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させる請求項1記載の医療画像表示制御装置。
Further comprising color imparting means for imparting a predetermined color to the pattern generated by the pattern generating means;
The continuous display control means causes a display device to continuously display a superimposed image obtained by superimposing the pattern, to which the predetermined color is given by the color giving means, on the compressed tomographic image. The medical image display control device described.
前記入力受付手段によって入力を受け付けたときに表示されていた前記重畳画像が表わす断層に対応する、圧縮前の前記断層画像を記憶手段に記憶させる記憶制御手段を更に含む請求項1又は2記載の医療画像表示制御装置。   3. The storage control unit according to claim 1, further comprising: a storage control unit that stores the tomographic image before compression corresponding to the tom represented by the superimposed image displayed when the input is received by the input receiving unit. Medical image display control device. コンピュータを、
診断対象の臓器等の身体の部位における複数の断層を表わす断層画像を撮像する複数種類の医療用撮像装置によって撮像された複数種類の前記断層画像の各々に対して、データ圧縮処理を行った圧縮断層画像を複数種類生成する画像処理手段、
前記複数種類の圧縮断層画像について、前記圧縮断層画像が表わす臓器等の身体の部位の位置が対応するように、前記圧縮断層画像上の位置の対応付けを行う位置対応付け手段、
前記複数種類の圧縮断層画像の各々について、前記圧縮断層画像を分割した複数の分割領域の各々の特徴を抽出する特徴抽出手段、
各断層の前記分割領域の各々について、位置が対応する前記複数種類の圧縮断層画像間で該分割領域と位置が対応する各分割領域について抽出された前記特徴に基づいて、前記臓器等の身体の部位の該分割領域が表わす部分が、異常箇所であるか否かを各々判定する異常判定手段、
前記異常箇所であると判定された前記分割領域から知覚される視覚的なパターンを各断層について生成するパターン生成手段、
前記パターン生成手段によって生成された各断層の前記パターンを各断層の前記圧縮断層画像上に重畳させた重畳画像を、各断層について表示装置に連続して表示させる連続表示制御手段、
前記連続表示制御手段によって前記重畳画像が連続して表示されているときに、ユーザからの入力を受け付ける入力受付手段、及び
前記入力受付手段によって入力を受け付けたときに表示されていた前記重畳画像が表わす断層に対応する前記圧縮断層画像と、前記異常判定手段によって該圧縮断層画像の各分割領域について判定された判定結果とを表わす3次元画像を、前記表示装置に表示させる3次元表示制御手段
として機能させるためのプログラム。
Computer
Compression obtained by performing data compression processing on each of a plurality of types of tomographic images captured by a plurality of types of medical imaging devices that capture a plurality of types of tomographic images representing a plurality of tomograms in a body part such as an organ to be diagnosed Image processing means for generating a plurality of types of tomographic images;
Position association means for associating positions on the compressed tomographic image such that positions of body parts such as organs represented by the compressed tomographic image correspond to the plurality of types of compressed tomographic images;
For each of the plurality of types of compressed tomographic images, feature extraction means for extracting the characteristics of each of a plurality of divided regions obtained by dividing the compressed tomographic image;
For each of the divided regions of each tomography, based on the features extracted for each of the divided regions whose positions correspond to the divided regions between the plurality of types of compressed tomographic images corresponding to the positions, Abnormality determination means for determining whether or not the portion represented by the divided region of the part is an abnormal part,
Pattern generating means for generating a visual pattern perceived from the divided region determined to be the abnormal part for each tomography;
Continuous display control means for continuously displaying a superimposed image obtained by superimposing the pattern of each tomogram generated by the pattern generation means on the compressed tomographic image of each tomography on a display device;
When the superimposed image is continuously displayed by the continuous display control unit, an input receiving unit that receives an input from a user, and the superimposed image that is displayed when an input is received by the input receiving unit is 3D display control means for causing the display device to display a 3D image representing the compressed tomographic image corresponding to the tomogram to be represented and a determination result determined for each divided region of the compressed tomographic image by the abnormality determination means. A program to make it work.
JP2010042591A 2010-02-26 2010-02-26 Medical image display control device and program Expired - Fee Related JP5618129B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010042591A JP5618129B2 (en) 2010-02-26 2010-02-26 Medical image display control device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010042591A JP5618129B2 (en) 2010-02-26 2010-02-26 Medical image display control device and program

Publications (2)

Publication Number Publication Date
JP2011177241A true JP2011177241A (en) 2011-09-15
JP5618129B2 JP5618129B2 (en) 2014-11-05

Family

ID=44689476

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010042591A Expired - Fee Related JP5618129B2 (en) 2010-02-26 2010-02-26 Medical image display control device and program

Country Status (1)

Country Link
JP (1) JP5618129B2 (en)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001070298A (en) * 1999-09-03 2001-03-21 Hitachi Medical Corp Image display device and imge display method
JP2002500544A (en) * 1998-03-30 2002-01-08 ゼネラル・エレクトリック・カンパニイ System and method for diagnosing and validating a machine using waveform data
JP2002330951A (en) * 2001-05-11 2002-11-19 Canon Inc Image encoding/decoding device and method, computer program and storage medium
JP2004041490A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Diagnostic imaging support system
JP2004046594A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Device for supporting video diagnosis
JP2004173910A (en) * 2002-11-27 2004-06-24 Fuji Photo Film Co Ltd Image display device
JP2004180932A (en) * 2002-12-03 2004-07-02 Toshiba Corp Computer aided diagnostic apparatus
JP2007152104A (en) * 2005-11-30 2007-06-21 General Electric Co <Ge> Method and apparatus for automatically evaluating feature of malignant tumor
JP2007528746A (en) * 2003-06-27 2007-10-18 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド CAD support for medical diagnostic imaging that uses machine learning to adapt the CAD (computer aided decision) process to the knowledge gained from routine CAD system usage
JP2008012291A (en) * 2006-06-08 2008-01-24 Kobe Univ Medical image diagnosis assisting device, and medical image diagnosis assisting program
JP2009165615A (en) * 2008-01-16 2009-07-30 Fujifilm Corp Tumor region size measurement method, apparatus, and program

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002500544A (en) * 1998-03-30 2002-01-08 ゼネラル・エレクトリック・カンパニイ System and method for diagnosing and validating a machine using waveform data
JP2001070298A (en) * 1999-09-03 2001-03-21 Hitachi Medical Corp Image display device and imge display method
JP2002330951A (en) * 2001-05-11 2002-11-19 Canon Inc Image encoding/decoding device and method, computer program and storage medium
JP2004041490A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Diagnostic imaging support system
JP2004046594A (en) * 2002-07-12 2004-02-12 Konica Minolta Holdings Inc Device for supporting video diagnosis
JP2004173910A (en) * 2002-11-27 2004-06-24 Fuji Photo Film Co Ltd Image display device
JP2004180932A (en) * 2002-12-03 2004-07-02 Toshiba Corp Computer aided diagnostic apparatus
JP2007528746A (en) * 2003-06-27 2007-10-18 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド CAD support for medical diagnostic imaging that uses machine learning to adapt the CAD (computer aided decision) process to the knowledge gained from routine CAD system usage
JP2007152104A (en) * 2005-11-30 2007-06-21 General Electric Co <Ge> Method and apparatus for automatically evaluating feature of malignant tumor
JP2008012291A (en) * 2006-06-08 2008-01-24 Kobe Univ Medical image diagnosis assisting device, and medical image diagnosis assisting program
JP2009165615A (en) * 2008-01-16 2009-07-30 Fujifilm Corp Tumor region size measurement method, apparatus, and program

Also Published As

Publication number Publication date
JP5618129B2 (en) 2014-11-05

Similar Documents

Publication Publication Date Title
US7801346B2 (en) Medical image display device, method, and program
KR102307530B1 (en) Method and system for displaying to a user a transition between a first rendered projection and a second rendered projection
JP6318739B2 (en) Image processing apparatus and program
EP3049974A1 (en) Advanced medical image processing wizard
CN112740285A (en) Overlay and manipulation of medical images in a virtual environment
US10283088B2 (en) Method and apparatus for providing medical information
JP2019103848A (en) Medical image processing method, medical image processing device, medical image processing system, and medical image processing program
WO2007122896A1 (en) Medical image display system and medical image display program
WO2014132829A1 (en) Image processing device and region extraction method
US20100188398A1 (en) X-ray tool for 3d ultrasound
JP2014204810A (en) Medical image processing system and medical image processing program
WO2016035312A1 (en) Assistance apparatus for assisting interpretation report creation and method for controlling the same
JP5380231B2 (en) Medical image display apparatus and method, and program
WO2009122724A1 (en) Image processing device and method, and program
JP5618129B2 (en) Medical image display control device and program
JP2020171480A (en) Medical image processing device and medical image processing system
US10796433B2 (en) Interpretation support apparatus, operation method thereof, and non-transitory computer readable medium
JP2016521148A (en) Enhancement of hearing functions for medical systems
JP7323989B2 (en) Computer program, recording medium, display device and display method
Kagawa et al. A supporting method of medical imaging diagnosis with sonification
JP2008511368A (en) Image forming system for displaying structure of structure with time change
JP7391348B2 (en) Medical image processing system, medical image processing method, and medical image processing program
JP6393538B2 (en) Medical image processing apparatus, medical image processing system, medical image processing method, and medical image processing program
Kagawa et al. A medical imaging diagnosis supporting method with sound effects
JP2014160368A (en) Medical information display system, medical information display program and image diagnostic device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100514

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20100507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100908

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20100908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100908

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140310

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140805

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140903

R150 Certificate of patent or registration of utility model

Ref document number: 5618129

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees