JP5479138B2 - MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF - Google Patents

MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF Download PDF

Info

Publication number
JP5479138B2
JP5479138B2 JP2010026612A JP2010026612A JP5479138B2 JP 5479138 B2 JP5479138 B2 JP 5479138B2 JP 2010026612 A JP2010026612 A JP 2010026612A JP 2010026612 A JP2010026612 A JP 2010026612A JP 5479138 B2 JP5479138 B2 JP 5479138B2
Authority
JP
Japan
Prior art keywords
cross
section
apex
image
aortic valve
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010026612A
Other languages
Japanese (ja)
Other versions
JP2011160962A (en
Inventor
佳児 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2010026612A priority Critical patent/JP5479138B2/en
Publication of JP2011160962A publication Critical patent/JP2011160962A/en
Application granted granted Critical
Publication of JP5479138B2 publication Critical patent/JP5479138B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Generation (AREA)
  • Image Analysis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本発明は、医用画像の断面画像を表示する医用画像表示装置、医用画像表示方法、及びそのプログラムに関する。   The present invention relates to a medical image display device that displays a cross-sectional image of a medical image, a medical image display method, and a program thereof.

従来から、医用画像の分野においては、X線撮影装置のほか、X線CT装置、超音波診断装置、MRI装置等の様々な技術を用いたモダリティが利用されている。これらの装置によって得られた医用画像を観察する際に、医師等は、医学書等で示されているような、解剖学的に定義されている所定断面の画像を観察したいことがしばしば発生する。   Conventionally, in the field of medical images, modalities using various techniques such as an X-ray CT apparatus, an ultrasonic diagnostic apparatus, and an MRI apparatus are used in addition to an X-ray imaging apparatus. When observing medical images obtained by these devices, doctors often want to observe images of predetermined cross sections defined anatomically as shown in medical books and the like. .

しかし、疾患や検査目的、患者の画像撮影時の状態などに応じて種々の条件で医用画像が撮影されるので、画像毎の体軸方向の撮影範囲及びFOV(Field Of View)の違いや、患者の体位の違いや個人差による、画像に写る患者の臓器の位置関係及び向きの違いにより、医師等は、所定の断面画像を探すのに手間を生じていた。   However, since medical images are taken under various conditions depending on the disease, the purpose of the examination, the patient's state at the time of taking an image, etc., the difference in the shooting range and FOV (Field Of View) in the body axis direction for each image, Due to differences in the positional relationship and orientation of the patient's organs in the image due to differences in the patient's body position and individual differences, doctors and others have taken time to search for a predetermined cross-sectional image.

そのため、前記所定断面の画像を観察したい場合、医師等は、まず、アキシャル断面、コロナル断面、及びサジタル断面などを利用して、その断面が医用画像に含まれているかどうかを確認しながら、所定断面のおおよその位置を画像中から探し出し、その後、角度及び位置を微調整することで、前記所定断面の画像を得ていた。   Therefore, when it is desired to observe the image of the predetermined cross section, doctors and the like first use the axial cross section, the coronal cross section, the sagittal cross section, and the like to check whether the cross section is included in the medical image. The approximate position of the cross section is searched from the image, and then the angle and the position are finely adjusted to obtain the image of the predetermined cross section.

特許文献1には、表示された画像をポインティングデバイス等の入力装置を用いて操作することにより、ユーザが観察を希望している画像を探すことができる画像表示装置が記載されている。   Patent Document 1 describes an image display device that allows a user to search for an image that the user wants to observe by operating the displayed image using an input device such as a pointing device.

特開2009−022476号公報JP 2009-022476 A

従来では医師等が医用画像の中から手動で前記所定断面の画像を探すため、手間及び時間がかかり、医師等に負担を強いていた。また、広範囲に撮影された画像を扱う場合や、類似症例の画像や過去の画像を参照している場合では、特に、検査の主目的以外の臓器で、所定断面の画像が含まれているかわからない場合があった。   Conventionally, a doctor or the like manually searches for an image of the predetermined cross-section from medical images, which takes time and effort, and places a burden on the doctor or the like. Also, when dealing with images taken over a wide range, or when referring to images of similar cases or past images, it is not clear whether an image of a predetermined cross section is included in an organ other than the main purpose of the examination. There was a case.

そこで本発明は、かかる従来の問題点に鑑みてなされたものであり、医用画像に含まれる所望の断面を自動的に特定し、該特定した断面の画像を表示することができる医用画像表示装置、医用画像表示方法、及びそのプログラムを提供することを目的とする。   Therefore, the present invention has been made in view of such conventional problems, and a medical image display device capable of automatically specifying a desired cross section included in a medical image and displaying the image of the specified cross section. It is an object of the present invention to provide a medical image display method and a program thereof.

上記目的を達成するために、本発明は、医用画像表示装置であって、医用画像の3次元画像を取得する画像取得部と、前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定部と、前記3次元画像から、前記断面特定部が特定した前記断面の断面像を生成する画像生成部と、前記断面特定部により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択部と、前記画像生成部が生成し、且つ、前記選択部によって選択された前記断面の断面像を表示部に表示させる表示制御部と、を備え、前記断面特定部が特定することができなかった前記断面の前記選択部による選択を禁止し、前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、前記断面特定部は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とする。 To achieve the above object, the present invention provides a medical image display apparatus, an image acquiring unit for acquiring 3-dimensional image image of the medical image, by analyzing the 3-dimensional image image, one or more pre among a defined reference plane, the cross section specifying unit configured to specify a cross section corresponding to the reference cross-section included in the medical image, the three-dimensional image image or al, the cross section of the prior Kidan surface on which the cross-section identifying unit has identified an image generator for generating the images, from among the cross section specified by the section specifying unit, a selection unit for selecting the cross-section indicated by the user, the image generation unit generates, and the selection and a display control unit for displaying on the display unit sectional image image of the cross-section selected by section prohibits the selection by the selection unit of the cross section the section specifying unit could not be identified, the The reference cross section is the apex left ventricular long axis , The apex four-chamber cross section, the apex two-chamber cross section, and the left ventricular short-axis cross section, wherein the cross-section specifying unit analyzes the three-dimensional image of the medical image to define the reference cross section The apex, the base, the lower part of the aortic valve, and the upper part of the aortic valve are detected, and the plane defined by the apex, the base and the lower part of the aortic valve corresponds to the left ventricular long-axis cross section of the apex The plane specified by the cross-section and centered on the long axis connecting the apex and the base is centered on the plane defined by the apex, the base and the lower part of the aortic valve 100 to 140 clockwise A plane that is rotated at a predetermined angle is specified as the cross section corresponding to the four-chamber section of the apex, and the plane is defined by the apex, the base, and the lower part of the aortic valve around the major axis. Was rotated 30 to 70 degrees counterclockwise Is defined as the cross-section corresponding to the two-chamber section of the apex, perpendicular to the plane defined by the apex, the base and the lower part of the aortic valve, and the lower part of the aortic valve and the aorta A plane passing through two points on the upper part of the valve portion is specified as the cross section corresponding to the left ventricular short axis cross section .

本発明は、前記医用画像表示装置であって、前記断面特定部は、教師データを用いてマシンラーニング手法を利用することで、前記特徴点を検出してもよい。 The present invention provides the a medical image display apparatus, the cross-section specifying unit, by using the machine learning techniques using training data, may detect the pre-Symbol feature points.

本発明は、前記医用画像表示装置であって、前記医用画像の3次元画像を用いて、該医用画像に含まれる観察したい部位を特定する部位特定部をさらに備えてもよく、前記断面特定部は、前記医用画像の前記3次元画像うち、特定された前記部位の3次元画像を解析することで、予め定められた1以上の前記部位の基準断面のうち、該医用画像に含まれる前記部位の前記基準断面に相当する前記断面を特定してもよい。 The present invention provides the a medical image display apparatus, wherein using a three-dimensional image image of the medical image, may further comprise a part identification unit that identifies a portion to be observed is included in said medical image, said cross-section a particular parts, of the 3-dimensional image of the medical image, by analyzing the 3D image image of the site are identified, among the reference cross section of one or more of the sites predetermined included in said medical image The cross section corresponding to the reference cross section of the portion to be detected may be specified.

上記目的を達成するために、本発明は、コンピュータが、医用画像を表示させる医用画像表示方法であって、医用画像の3次元画像を取得する画像取得工程と、前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定工程と、前記3次元画像から、特定された前記断面の断面像を生成する画像生成工程と、前記断面特定工程により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択工程と、前記画像生成工程によって生成され、且つ、選択工程で選択された前記断面の断面像を表示部に表示させる表示制御工程と、を備え、前記断面特定工程が特定することができなかった前記断面の選択を禁止し、前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、前記断面特定工程は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とする。 To achieve the above object, the present invention is a computer, analyzes a medical image display method for displaying a medical image, an image obtaining step of obtaining a three-dimensional image image of the medical image, the three-dimensional image image doing, among one or more predetermined reference section, a section specifying step of specifying a cross section corresponding to the reference cross-section included in the medical image, the three-dimensional image image or al, SL before identified an image generating step of generating a cross sectional image image of the cross-sectional plane, from among the cross section specified by the section specifying step, a selection step of selecting the section indicated by the user, is generated by the image generation step, and, selecting a display control step of displaying on the display unit sectional image image of the selected the cross-section step comprises prohibits the selection of the cross-section that could not be said section specifying step for specifying the reference Refusal Includes the apex left ventricular long-axis cross-section, apex four-chamber cross-section, apex two-chamber cross-section, and left ventricular short-axis cross-section, the cross-section specifying step is to analyze the three-dimensional image of the medical image, The apex, the base, the lower part of the aortic valve, and the upper part of the aortic valve are detected as characteristic points that define the reference cross section, and the plane defined by the apex, the base and the lower part of the aortic valve is defined as the apex. Specified as the cross-section corresponding to the left ventricular long-axis cross-section, and defined by the apex, the base, and the lower part of the aortic valve centering on the long axis connecting the apex and the base A plane when the plane is rotated clockwise by 100 to 140 degrees is specified as the cross section corresponding to the cross section of the apex portion, and the apex portion, the base portion, and the aortic valve are centered on the long axis. Counterclockwise around the plane defined by the lower part A plane when rotated by 30 to 70 degrees is specified as the cross section corresponding to the apical portion two-chamber cross section, orthogonal to the plane defined by the apex portion, the base portion, and the lower part of the aortic valve portion, and A plane passing through two points of the lower part of the aortic valve part and the upper part of the aortic valve part is specified as the cross section corresponding to the left ventricular short-axis cross section .

上記目的を達成するために、本発明は、プログラムであって、コンピュータを、医用画像の3次元画像を取得する画像取得手段、前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定手段、前記3次元画像から、前記断面特定手段が特定した前記断面の断面像を生成する画像生成手段、前記断面特定手段により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択手段と、前記画像生成手段が生成し、且つ、前記選択手段によって選択された前記断面の断面像を表示部に表示させる表示制御手段、として機能させ、前記断面特定手段が特定することができなかった前記断面の前記選択手段による選択を禁止し、前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、前記断面特定手段は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とする。 To achieve the above object, the present invention is a program, set the computer, image acquisition means for acquiring a 3-dimensional image image of the medical image, by analyzing the 3-dimensional image image, one or more pre of the reference cross section is the cross section specifying means for specifying a cross section corresponding to the reference cross-section included in the medical image, the three-dimensional image image or al, sectional picture image of Kidan surface before said cross-section identifying unit has identified An image generation means for generating the image, a selection means for selecting the cross section instructed by the user from the cross sections specified by the cross section specifying means, and the image generation means for generating and selecting by the selection means by display control means for displaying on the display unit sectional image image of the cross section, to function as, prohibits the selection by said selecting means of said cross-section that could not be said section identifying unit identifies, The reference cross section includes the apex left ventricle long-axis cross section, apex four-chamber cross section, apex two-chamber cross section, and left ventricular short-axis cross section, and the cross-section specifying means analyzes the three-dimensional image of the medical image. Thus, the apex, base, lower part of the aortic valve, and upper part of the aortic valve are detected as characteristic points that define the reference cross section, and are defined at the apex, the base of the heart, and the lower part of the aortic valve. A plane is specified as the cross-section corresponding to the left ventricular long-axis cross section of the apex, and is defined by the apex, the base, and the lower part of the aortic valve centering on the long axis connecting the apex and the base The plane when the plane is rotated 100 to 140 degrees clockwise is specified as the cross section corresponding to the four-chamber section of the apex, and the apex, the base, and The plane defined by the lower part of the aortic valve A plane when rotated clockwise by 30 to 70 degrees is specified as the cross section corresponding to the two-chamber section of the apex and orthogonal to the plane defined by the apex, the base of the heart, and the lower part of the aortic valve In addition, a plane passing through two points of the lower part of the aortic valve part and the upper part of the aortic valve part is specified as the cross section corresponding to the left ventricular short-axis cross section .

本発明によれば、3次元画像データを解析することで、1以上の予め定められた基準断面のうち、医用画像に含まれる基準断面を特定して、3次元画像データから、断面特定部が特定した基準断面の画像データを生成し、該生成した画像データを用いて、基準断面の画像を表示部に表示させるので、ユーザは簡単に基準断面の画像を見ることができる。   According to the present invention, by analyzing the three-dimensional image data, a reference cross-section included in the medical image is specified from one or more predetermined reference cross-sections, and the cross-section specifying unit is determined from the three-dimensional image data. Since the image data of the identified reference section is generated and the image of the reference section is displayed on the display unit using the generated image data, the user can easily view the image of the reference section.

また、特定された基準断面の中から、ユーザによって指示された基準断面を選択し、該選択された基準断面の画像を表示部に表示させるので、ユーザは、見たい基準断面を簡単に見ることができる。   In addition, since the reference section designated by the user is selected from the specified reference sections and the image of the selected reference section is displayed on the display unit, the user can easily see the reference section to be viewed. Can do.

実施の形態に係る医用画像表示装置の電気的な概略ブロック図である。1 is an electrical schematic block diagram of a medical image display apparatus according to an embodiment. 観察したい部位が心臓の場合に、予め定められた基準断面の画像を示す図である。It is a figure which shows the image of a predetermined reference | standard cross section, when the site | part to observe is a heart. 医用画像表示装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a medical image display apparatus. 心尖部左室長軸断面上にある3点の特徴点を示している。Three feature points on the apex-left ventricular long-axis cross section are shown. 正の教師データの一例を示す図である。It is a figure which shows an example of positive teacher data. 心尖部左室長軸断面の画像上にある大動脈弁部上部である特徴点を示す図である。It is a figure which shows the feature point which is the aortic valve part upper part on the image of the apex left ventricle long-axis cross section. ステップS8の動作で表示部に表示された画面の一例を示す図である。It is a figure which shows an example of the screen displayed on the display part by operation | movement of step S8. ステップS8の動作で表示部に表示された画面の他の例を示す図である。It is a figure which shows the other example of the screen displayed on the display part by operation | movement of step S8.

本発明に係る医用画像表示方法について、それを実施する医用画像表示装置及びプログラムとの関係で好適な実施の形態を掲げ、添付の図面を参照しながら以下、詳細に説明する。   The medical image display method according to the present invention will be described in detail below with reference to the accompanying drawings, showing preferred embodiments in relation to a medical image display apparatus and a program for executing the medical image display method.

図1は、実施の形態に係る医用画像表示装置10の電気的な概略ブロック図である。医用画像表示装置10は、画像取得部12、部位特定部14、断面特定部16、画像生成部18、表示制御部20、表示部22、及び選択部24を備える。情報処理装置(コンピュータ)に所定のプログラムを読み込ませることによって、情報処理装置が画像取得部12、部位特定部14、断面特定部16、画像生成部18、表示制御部20、及び選択部24として機能する。   FIG. 1 is an electrical schematic block diagram of a medical image display apparatus 10 according to an embodiment. The medical image display device 10 includes an image acquisition unit 12, a region specifying unit 14, a cross-section specifying unit 16, an image generating unit 18, a display control unit 20, a display unit 22, and a selection unit 24. By causing the information processing apparatus (computer) to read a predetermined program, the information processing apparatus serves as the image acquisition unit 12, the region specifying unit 14, the cross-section specifying unit 16, the image generating unit 18, the display control unit 20, and the selecting unit 24. Function.

画像取得部12は、医用画像の3次元画像データを取得する。医用画像は、X線撮影装置、X線CT装置、超音波診断装置、MRI装置等の医用画像を撮影する撮影機器によって撮影された画像である。画像取得部12は、取得した医用画像の3次元画像データを部位特定部14に出力する。   The image acquisition unit 12 acquires 3D image data of a medical image. The medical image is an image captured by an imaging device that captures a medical image such as an X-ray imaging apparatus, an X-ray CT apparatus, an ultrasonic diagnostic apparatus, or an MRI apparatus. The image acquisition unit 12 outputs the acquired three-dimensional image data of the medical image to the part specifying unit 14.

部位特定部14は、取得した医用画像に含まれる観察したい部位を特定(例えば、心臓、肺、胃等)する。部位特定部14は、観察したい部位を直接特定することが難しい場合等には、医療画像に含まれる観察したい部位とは異なる部位(参照部位)を検出し、該検出した参照部位の位置に基づいて観察したい部位の領域を間接的に特定してもよい。例えば、観察したい部位が心臓の場合には、部位特定部14は、大動脈を検出し、該検出した大動脈の位置に基づいて心臓の領域を特定してもよい。また、部位特定部14は、観察したい部位を直接認識して特定しても良い。   The site specifying unit 14 specifies a site to be observed included in the acquired medical image (for example, heart, lung, stomach, etc.). When it is difficult to directly specify a site to be observed, the site specifying unit 14 detects a site (reference site) different from the site to be observed included in the medical image, and based on the position of the detected reference site. It is also possible to indirectly specify the region of the part to be observed. For example, when the part to be observed is the heart, the part specifying unit 14 may detect the aorta and specify the heart region based on the detected position of the aorta. Further, the part specifying unit 14 may directly recognize and specify a part to be observed.

断面特定部16は、医用画像の3次元画像データのうち、部位特定部14が特定した部位の3次元画像データを解析することで、1以上の予め定められた前記部位の基準断面のうち、取得した医用画像に含まれる前記部位の基準断面を特定する。具体的には、断面特定部16は、医用画像の3次元画像データを解析することで、観察したい部位の基準断面を規定する2つ以上の特徴点を検出することで、該医用画像に含まれる前記部位の基準断面を特定する。基準断面は、例えば、解剖学的に定義されている断面等の医師等が所望する断面である。   The cross-section specifying unit 16 analyzes the three-dimensional image data of the part specified by the part specifying unit 14 out of the three-dimensional image data of the medical image, so that among the reference cross sections of the one or more predetermined parts, A reference cross section of the part included in the acquired medical image is specified. Specifically, the cross-section specifying unit 16 analyzes the three-dimensional image data of the medical image, and detects two or more feature points that define the reference cross-section of the site to be observed, thereby including the medical image in the medical image. A reference cross section of the portion to be identified is specified. The reference cross section is, for example, a cross section desired by a doctor such as a cross section defined anatomically.

断面特定部16は、医用画像の3次元画像データ及び特定した基準断面の位置を示す情報を画像生成部18に出力する。基準断面の位置を示す情報とは、医用画像のどこに特定した基準断面があるかを特定するための情報である。また、断面特定部16は、特定した基準断面を示す情報を表示制御部20に出力してよい。さらに、断面特定部16は、部位特定部14から取得した、特定した部位の領域を示す情報を画像生成部18に出力してもよい。   The cross section specifying unit 16 outputs three-dimensional image data of the medical image and information indicating the position of the specified reference cross section to the image generating unit 18. The information indicating the position of the reference cross section is information for specifying where the specified reference cross section exists in the medical image. Further, the cross-section specifying unit 16 may output information indicating the specified reference cross-section to the display control unit 20. Further, the cross-section specifying unit 16 may output information indicating the region of the specified part acquired from the part specifying unit 14 to the image generating unit 18.

画像生成部18は、医用画像の3次元画像データから、断面特定部16が特定した基準断面の画像データを生成する。この基準断面の画像データの生成は、基準断面の位置を示す情報を用いて行う。画像生成部18は、生成した基準断面の画像データ及び生成した基準断面を示す情報を表示制御部20に出力する。画像生成部18は、医用画像の3次元画像データのうち、特定した部位の3次元画像データから、基準断面の画像データを生成してもよい。   The image generation unit 18 generates image data of the reference cross section specified by the cross section specifying unit 16 from the three-dimensional image data of the medical image. The generation of the image data of the reference cross section is performed using information indicating the position of the reference cross section. The image generation unit 18 outputs the generated image data of the reference cross section and information indicating the generated reference cross section to the display control unit 20. The image generation unit 18 may generate image data of the reference cross section from the three-dimensional image data of the specified part among the three-dimensional image data of the medical image.

表示制御部20は、画像生成部18が生成した基準断面の画像データを用いて、該基準断面の画像を表示部22に表示させる。表示部22は、ブラウン管、液晶ディスプレイ、プラズマディスプレイ、ビデオプロジェクタ等の画像を表示することができる機器である。   The display control unit 20 causes the display unit 22 to display an image of the reference cross section using the image data of the reference cross section generated by the image generation unit 18. The display unit 22 is a device that can display an image, such as a cathode ray tube, a liquid crystal display, a plasma display, or a video projector.

選択部24は、断面特定部16によって特定された基準断面の中から、ユーザによって指示された基準断面を選択する。ユーザは、マウス、タッチパネル、キーボード等の入力装置(図示略)を操作することによっていずれかの基準断面を指示することができる。選択部24は、選択した基準断面を示す情報を画像生成部18又は表示制御部20に出力する。   The selection unit 24 selects a reference cross section designated by the user from the reference cross sections specified by the cross section specifying unit 16. The user can instruct any reference cross section by operating an input device (not shown) such as a mouse, a touch panel, or a keyboard. The selection unit 24 outputs information indicating the selected reference cross section to the image generation unit 18 or the display control unit 20.

図2は、観察したい部位が心臓の場合に、予め定められた基準断面の画像を示す図である。画像50は、心尖部左室長軸断面の画像を示しており、画像52は、心尖部四腔断面の画像を示している。また、画像54は、心尖部二腔断面の画像を示しており、画像56は、左室短軸断面の画像を示している。なお、観察する部位が心臓以外の臓器(例えば、胃、肺等)である場合は、予め定められる基準断面は、心臓以外の前記臓器に関する基準断面である。   FIG. 2 is a diagram showing an image of a predetermined reference cross section when the site to be observed is the heart. An image 50 shows an image of the apex left ventricular long-axis cross section, and an image 52 shows an image of the apex four-chamber cross section. Moreover, the image 54 has shown the image of the cardiac apex part two-chamber cross section, and the image 56 has shown the image of the left ventricular short-axis cross section. When the site to be observed is an organ other than the heart (for example, stomach, lung, etc.), the predetermined reference cross section is a reference cross section relating to the organ other than the heart.

次に、医用画像表示装置10の動作を図3のフローチャートにしたがって説明する。ここでは、観察したい部位として心臓を例にして説明する。画像取得部12は、医用画像の3次元画像データを取得する(ステップS1)。画像取得部12は、外部機器から医用画像の3次元画像データを取得する。外部機器は、医用画像を撮影する撮影機器であってもよく、医用画像を記録した機器であってもよい。   Next, the operation of the medical image display apparatus 10 will be described with reference to the flowchart of FIG. Here, the heart is taken as an example of the site to be observed. The image acquisition unit 12 acquires three-dimensional image data of a medical image (Step S1). The image acquisition unit 12 acquires 3D image data of a medical image from an external device. The external device may be a photographing device that captures a medical image, or may be a device that records a medical image.

次いで、部位特定部14は、心臓を特定するために、医用画像に含まれる大動脈を検出する(ステップS2)。部位特定部14は、取得した医用画像の3次元画像データを用いて、大動脈を検出する。部位特定部14は、マシンラーニング手法の1つであるAdaBoostを利用して算出された判別機を用いることにより、医用画像に大動脈が含まれているかどうかを判別する。正の教師データとしては、大動脈を表すデータを利用し、負の教師データとしては、大動脈以外の組織をランダムに用意する。特徴量は、ランダムに選択されたn組の画素ペアの値の組み合わせを用いる。入力された3次元医用画像データの各アキシャル断面画像に対して、大動脈が存在するか否かを判別し、存在する場合は、スコアの重心位置を検出位置として記憶する。部位特定部14は、大動脈が検出されなかった場合は、取得した医用画像には心臓が含まれていないと判断する。なお、部位特定部14は、テンプレートマッチング手法や、画定手法等の他の方法によって大動脈を検出してもよい。   Next, the part specifying unit 14 detects the aorta included in the medical image in order to specify the heart (step S2). The part specifying unit 14 detects the aorta using the acquired three-dimensional image data of the medical image. The part specifying unit 14 determines whether or not an aorta is included in a medical image by using a classifier calculated using AdaBoost, which is one of machine learning methods. Data representing the aorta is used as positive teacher data, and tissues other than the aorta are randomly prepared as negative teacher data. The feature amount uses a combination of values of n pixel pairs selected at random. For each axial cross-sectional image of the input 3D medical image data, it is determined whether or not an aorta exists, and if it exists, the position of the center of gravity of the score is stored as a detection position. When the aorta is not detected, the part specifying unit 14 determines that the acquired medical image does not include the heart. The site specifying unit 14 may detect the aorta by other methods such as a template matching method and a demarcation method.

次いで、部位特定部14は、検出した大動脈の位置に基づいて、医用画像における心臓領域を特定する(ステップS3)。大動脈と心臓とは所定の位置関係にあるので、大動脈が検出することができれば、心臓領域を特定することができる。   Next, the part specifying unit 14 specifies a heart region in the medical image based on the detected position of the aorta (step S3). Since the aorta and the heart are in a predetermined positional relationship, if the aorta can be detected, the heart region can be specified.

次いで、断面特定部16は、心臓の中にある予め定められた特徴点を検出する(ステップS4)。断面特定部16は、基準断面を特定する2点以上の特徴点を検出する。図4は、心尖部左室長軸断面上にある3点の特徴点を示している。特徴点60は心尖部を示しており、特徴点62は心基部を示しており、特徴点64は大動脈弁部下部を示している。断面特定部16は、これらの3点の特徴点60、62、64を検出する。   Next, the cross-section specifying unit 16 detects a predetermined feature point in the heart (step S4). The cross-section specifying unit 16 detects two or more feature points that specify the reference cross-section. FIG. 4 shows three feature points on the apical left ventricular long-axis cross section. The feature point 60 indicates the apex of the heart, the feature point 62 indicates the base of the heart, and the feature point 64 indicates the lower part of the aortic valve. The cross-section specifying unit 16 detects these three feature points 60, 62, and 64.

断面特定部16は、マシンラーニング手法の1つであるAdaBoostを利用して算出された判別機を用いることにより、医用画像に特徴点60、62、64が含まれているかどうかを判別する。図5は、正の教師データの一例を示す図である。図5に示す画像70、72、74は、心臓のコロナル断面画像である。画像70の枠80内の画像は、心基部の正の教師データを示しており、画像72の枠82内の画像は、心尖部の正の教師データを示しており、画像74の枠84内の画像は、大動脈弁部下部の正の教師データを示している。   The cross-section specifying unit 16 determines whether or not the feature points 60, 62, and 64 are included in the medical image by using a discriminator calculated using AdaBoost, which is one of machine learning methods. FIG. 5 is a diagram illustrating an example of positive teacher data. Images 70, 72, and 74 shown in FIG. 5 are coronal cross-sectional images of the heart. The image in the frame 80 of the image 70 shows the positive teacher data of the base of the heart, the image in the frame 82 of the image 72 shows the positive teacher data of the apex of the heart, and is in the frame 84 of the image 74. These images show positive teacher data at the lower part of the aortic valve.

断面特定部16は、AdaBoostを利用して算出された判別機を用いることにより、心臓のコロナル断面画像をスキャンしていき、その結果得られるスコアの重心位置を特徴点60、62、64の位置とする。スコアの重心位置を求める際に、一度ラベリング処理を行い、最も体積の大きいラベルの重心位置を利用してもよい。   The cross-section specifying unit 16 scans the coronal cross-sectional image of the heart by using a discriminator calculated using AdaBoost, and the center of gravity of the score obtained as a result is the position of the feature points 60, 62, and 64. And When obtaining the centroid position of the score, the labeling process may be performed once and the centroid position of the label with the largest volume may be used.

次いで、断面特定部16は、検出された特徴点に基づいて、基準断面を特定する(ステップS5)。断面特定部16は、3点の特徴点60、62、64で規定される平面を心尖部左室長軸断面として特定する。断面特定部16は、心尖部の特徴点60及び心基部の特徴点62を結ぶ線を心臓の長軸として規定し、該心臓の長軸を中心にして、3点の特徴点60、62、64で規定される平面を時計周りに100〜140度回転させたときの平面を心尖部四腔断面として特定する。ここで、本実施の形態における時計回りとは、心尖部から心基部に向かって見たときた時の時計回りの方向である。   Next, the cross-section specifying unit 16 specifies a reference cross-section based on the detected feature points (step S5). The cross-section specifying unit 16 specifies the plane defined by the three feature points 60, 62, and 64 as the apex left ventricular long-axis cross section. The cross-section specifying unit 16 defines a line connecting the feature point 60 of the apex and the feature point 62 of the heart as the major axis of the heart, and the three feature points 60, 62, The plane when the plane defined by 64 is rotated 100 to 140 degrees clockwise is specified as the apex four-chamber cross section. Here, the clockwise direction in the present embodiment is the clockwise direction when viewed from the apex to the base.

また、断面特定部16は、心臓の長軸を中心にして、3点の特徴点60、62、64で規定される平面を反時計回りに30〜70度に回転させたときの平面を心尖部二腔断面として特定する。断面特定部16は、大動脈弁部下部と大動脈弁部上部の2点を通る平面のうち、3点の特徴点60、62、64で規定される平面に垂直な平面を左室短軸断面として特定する。大動脈弁部下部は特徴点64であり、特徴点64を検出するときに大動脈弁部上部を一緒に検出することができる。   In addition, the cross-section specifying unit 16 sets the plane when the plane defined by the three feature points 60, 62, and 64 is rotated 30 to 70 degrees counterclockwise around the long axis of the heart. Identified as a cross-chamber section. The cross-section specifying unit 16 uses a plane perpendicular to the plane defined by the three feature points 60, 62, and 64 as a left ventricular short-axis cross section among two planes passing through the lower part of the aortic valve part and the upper part of the aortic valve part. Identify. The lower part of the aortic valve part is a feature point 64, and when the feature point 64 is detected, the upper part of the aortic valve part can be detected together.

図6は、心尖部左室長軸断面上にある大動脈弁部上部である特徴点を示す図である。特徴点66は、大動脈弁部上部を示している。大動脈弁部下部を求める正の教師データの作成の際に、大動脈弁部上部と大動脈弁部下部の2点で教師データのサイズ及び角度を正規化しておく。つまり、2点をランドマークとして用いる。これにより、特徴点64、66を検出することができる。   FIG. 6 is a diagram showing a feature point that is an upper part of the aortic valve portion on the cross section of the long axis of the left ventricle of the apex. A feature point 66 indicates the upper part of the aortic valve. When generating positive teacher data for determining the lower part of the aortic valve, the size and angle of the teacher data are normalized at two points, the upper part of the aortic valve part and the lower part of the aortic valve part. That is, two points are used as landmarks. Thereby, the feature points 64 and 66 can be detected.

次いで、画像生成部18は、医用画像の3次元画像データから、観察可能な基準断面の画像データを生成する(ステップS6)。観察可能な基準断面とは、断面特定部16によって特定された基準断面のことをいう。ステップS5で、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面が特定されたので、画像生成部18は、心尖部左室長軸断面の画像データ、心尖部四腔断面の画像データ、心尖部二腔断面の画像データ、及び左室短軸断面の画像データを生成する。なお、画像生成部18は、医用画像の3次元画像のうち、ステップS3で特定された心臓の3次元画像データから、前記断面特定部16が特定した基準断面の画像データを生成してもよい。   Next, the image generation unit 18 generates observable reference cross-section image data from the three-dimensional image data of the medical image (step S6). The observable reference cross section refers to a reference cross section specified by the cross section specifying unit 16. In step S5, since the apex left ventricular long-axis cross section, apex four-chamber cross section, apex two-chamber cross section, and left ventricular short-axis cross section are specified, the image generation unit 18 performs image data of the apex left ventricular long-axis cross section. Then, image data of the apex four-chamber section, image data of the apex two-chamber section, and image data of the left ventricular short-axis section are generated. The image generation unit 18 may generate image data of the reference cross section specified by the cross section specifying unit 16 from the three-dimensional image data of the heart specified in step S3 among the three-dimensional images of the medical image. .

次いで、表示制御部20は、観察可能な基準断面をユーザに選択させるための情報を表示部22に表示する(ステップS7)。ユーザは、ステップS7の動作で表示部22に表示された画面を見ることで、入力装置を操作して表示させたい基準断面を指示することができる。選択部24は、ユーザによって指示された基準画像を選択する。   Next, the display control unit 20 displays information for allowing the user to select an observable reference cross section on the display unit 22 (step S7). The user can instruct a reference cross section to be displayed by operating the input device by looking at the screen displayed on the display unit 22 in the operation of step S7. The selection unit 24 selects a reference image instructed by the user.

次いで、表示制御部20は、ユーザの操作に応じて選択された基準断面の画像を表示部22に表示させる(ステップS8)。図7は、ステップS8の動作で表示部22に表示された画面の一例を示す図である。画面の右側には、予め定められた基準断面の名称が表示されており、その名称の左隣にチェックボックスが表示されている。黒く塗りつぶされているチェックボックスは、現在選択されている基準断面を表している。そして、画面の右には、現在選択されている基準断面の画像が表示されている。   Next, the display control unit 20 causes the display unit 22 to display an image of the reference cross section selected according to the user's operation (step S8). FIG. 7 is a diagram illustrating an example of a screen displayed on the display unit 22 in the operation of step S8. A predetermined reference section name is displayed on the right side of the screen, and a check box is displayed on the left side of the name. A black check box represents the currently selected reference section. On the right side of the screen, an image of the currently selected reference cross section is displayed.

また、図7に示すような画面が表示されている状態で、ユーザが、前記入力装置を操作して、次に見たいと思う基準断面のチェックボックスを指示すると、選択部24は該指示された基準断面を選択する。その後、表示制御部20は、選択されていた基準断面のチェックボックスを白く塗りつぶし、新たに選択された基準断面のチャックボックスを黒く塗りつぶすとともに、新たに選択された基準断面の画像を表示させる。   Further, when the user operates the input device and designates a check box of a reference section to be viewed next in a state where the screen as shown in FIG. 7 is displayed, the selection unit 24 is instructed. Select the reference cross section. After that, the display control unit 20 paints the check box of the selected reference section in white, paints the chuck box of the newly selected reference section in black, and displays an image of the newly selected reference section.

図8は、ステップS8の動作で表示部22に表示された画面の他の例を示す図である。図8では、予め定められた基準断面のうち、観察できない基準断面(断面特定部16によって特定されなかった基準断面)がある場合、該基準断面を選択不可能にして表示させる。例えば、左室短軸断面を特定できなかった場合を例にしており、かかる場合は、左室短軸断面のチェックボックスに×印を入れて、該左室短軸断面を選択不可能にしている。これにより、ユーザは、ステップS1で取得した医用画像の中に、選択不可能な基準断面が含まれていないと認識することができる。   FIG. 8 is a diagram illustrating another example of the screen displayed on the display unit 22 in the operation of step S8. In FIG. 8, when there is a reference cross section that is not observable (a reference cross section that is not specified by the cross section specifying unit 16) among predetermined reference cross sections, the reference cross section cannot be selected and displayed. For example, the case where the left ventricular minor axis cross section could not be specified is taken as an example. In such a case, an X mark is put in the check box of the left ventricular minor axis section so that the left ventricular minor axis section cannot be selected. Yes. Thereby, the user can recognize that the reference cross section which cannot be selected is not included in the medical image acquired in step S1.

このように、医用画像の3次元画像データを用いて、観察したい部位を特定し、医用画像の3次元画像データを解析することで、観察したい部位の基準断面のうち、医用画像に含まれる部位の基準断面を特定し、3次元画像データから、特定された前記基準断面の画像データを生成して、基準断面の画像を表示部に表示させるようにしたので、ユーザは簡単に基準断面の画像を見ることができる。   In this way, by specifying the part to be observed using the three-dimensional image data of the medical image and analyzing the three-dimensional image data of the medical image, the part included in the medical image in the reference cross section of the part to be observed Since the reference cross section is specified, the specified reference cross section image data is generated from the three-dimensional image data, and the reference cross section image is displayed on the display unit, the user can easily display the reference cross section image. Can see.

また、特定された基準断面のうち、ユーザによって指示された基準断面を選択し、該選択した基準断面の画像を表示させるので、ユーザは、見たい基準断面を見ることができる。   Moreover, since the reference cross section designated by the user is selected from the specified reference cross sections and an image of the selected reference cross section is displayed, the user can see the reference cross section to be viewed.

上記実施の形態を、以下のような態様に変形してもよい。   You may deform | transform the said embodiment into the following aspects.

(1)上記実施の形態では、心尖部四腔断面、及び心尖部二腔断面は、心尖部左室長軸断面を長軸方向に回転させることで特定するようにしたが、心尖部四腔断面、及び心尖部二腔断面をそれぞれ規定する複数の特徴点を検出し、該検出した特徴点に基づいて心尖部四腔断面、及び心尖部二腔断面を直接特定してもよい。   (1) In the above embodiment, the apex four-chamber cross section and the apex two-chamber cross section are specified by rotating the apex left ventricular long-axis cross section in the long axis direction. And a plurality of feature points that respectively define the apex two-chamber cross section, and the apex four-chamber cross section and the apex two-chamber cross section may be directly specified based on the detected feature points.

(2)上記実施の形態では、医用画像に含まれる観察したい部位を特定するようにしたが、部位を特定しなくてもよい。この場合は、ステップ1の動作を経るとそのままステップS4に進み、特徴点を検出するようにしてもよい。この場合、ステップS4では、観察したい部位以外の部位に対しても特徴点の検出処理を行う。   (2) In the above embodiment, the part to be observed included in the medical image is specified, but the part need not be specified. In this case, when the operation of step 1 is performed, the process proceeds to step S4 as it is, and the feature point may be detected. In this case, in step S4, a feature point detection process is performed for a part other than the part to be observed.

(3)上記実施の形態では、観察したい部位として心臓を例にして説明したが他の部位であってもよいことは勿論である。また、部位が変わると、検出する特徴点が変わることは言うまでもない。また、モダリティの種類に応じて、観察したい部位が変わってもよい。また、モダリティの種類に応じて、基準断面が異なってもよい。   (3) In the above embodiment, the heart is taken as an example of the site to be observed, but other sites may be used. Needless to say, the feature points to be detected change as the site changes. Further, the site to be observed may be changed according to the type of modality. Further, the reference cross section may be different depending on the type of modality.

(4)医用画像表示装置10は、図2に示すような基準断面のサンプル画像を記録した記録部を備えるようにしてもよい。この場合、表示制御部20は、ステップS8で、選択された基準断面の画像を表示させるとともに、選択された基準断面のサンプル画像も同時に表示させてもよい。これにより、サンプル画像と撮影された患者の基準断面の画像とを比較することができる。   (4) The medical image display apparatus 10 may include a recording unit that records a sample image of a reference cross section as shown in FIG. In this case, in step S8, the display control unit 20 may display the selected reference cross-section image and simultaneously display the selected reference cross-section sample image. Thereby, a sample image and the image | photographed image of the reference | standard cross section of the patient can be compared.

(5)医用画像表示装置10は、画像生成部18が生成した画像データを記録部に記録する記録制御部を備えるようにしてもよい。この場合は、記録制御部は、画像データを記録するとともに、該画像データがどの基準断面であるかを示す情報も一緒に記録してもよい。これにより、後で、簡単に見たい基準断面の画像を表示させることできる。   (5) The medical image display apparatus 10 may include a recording control unit that records the image data generated by the image generation unit 18 in the recording unit. In this case, the recording control unit may record the image data and also record information indicating which reference cross section the image data is. Thereby, it is possible to display an image of a reference cross section to be easily viewed later.

(6)ステップS2で、大動脈が検出できなかった場合、つまり、観察部位が特定できなかった場合は、そのまま処理を終了してもよい。このとき、表示制御部20は、観察したい部位を特定することができなかった旨、又は、観察不可能であることを示す旨を表示させてもよい。これにより、ユーザは、医用画像の中に観察したい部位がないことを認識することができる。また、医用画像の3次元画像の中に心臓が含まれる部位(例えば、胸部、胸腹部)が含まれていなければ観察したい部位を特定できない、又は、観察不可能と判断するようにしてもよい。この心臓が含まれる部位の部位認識は、特開2008−259682号公報に記載された部位認識によって行うことができる。特開2008−259682には、3次元画像を構成する複数の断層画像に対して正規化処理を行い、正規化された複数の断層画像から多数の特徴量を算出し、算出された特徴量をAdaboost手法によって得られた判別器に入力して、部位らしさを表す部位毎のスコアscnp(P=頭部、頭頸部、頸部、胸部、胸腹部、腹部、骨盤部、脚部)を算出し、算出されたスコアscnpを入力として動的計画法を用いて、体部の並び順が保たれるように断層画像に表された部位Pnを決定する。 (6) If the aorta cannot be detected in step S2, that is, if the observation site cannot be specified, the processing may be terminated as it is. At this time, the display control unit 20 may display a message indicating that the site desired to be observed could not be specified or that the site cannot be observed. Thereby, the user can recognize that there is no part to be observed in the medical image. Further, if a 3D image of the medical image does not include a part including the heart (for example, the chest and the abdomen), it may be determined that the part to be observed cannot be specified or cannot be observed. . The site recognition of the site including the heart can be performed by site recognition described in Japanese Patent Laid-Open No. 2008-259682. Japanese Patent Application Laid-Open No. 2008-259682 performs normalization processing on a plurality of tomographic images constituting a three-dimensional image, calculates a large number of feature amounts from the normalized tomographic images, and calculates the calculated feature amounts. A score sc np (P = head, head and neck, neck, chest, chest abdomen, abdomen, pelvis, leg) for each part representing the likelihood of the part is calculated by inputting to the discriminator obtained by the Adaboost method Then, using the calculated score sc np as an input, the part Pn represented in the tomographic image is determined so that the arrangement order of the body parts is maintained using dynamic programming.

正規化処理とは、断層画像から人体領域を抽出して人体領域の情報からランドマーク(基準点)を算出し、算出されたランドマークを基準としてアフィン変換を行って、断層画像の拡大、縮小、平行移動、回転をさせて正規化画像を生成する処理のことをいう。この正規化処理により、個体差や撮影条件等による画像中の人体領域の大きさや傾きのバラツキを排除し、人体領域中の構造物(例えば、骨領域や空気領域)の位置合わせを行うことで、部位認識の精度が向上する。   Normalization processing refers to extracting a human body region from a tomographic image, calculating a landmark (reference point) from the information of the human body region, performing affine transformation with the calculated landmark as a reference, and enlarging or reducing the tomographic image. , A process of generating a normalized image by translation and rotation. This normalization process eliminates variations in the size and inclination of the human body region in the image due to individual differences, imaging conditions, etc., and aligns structures (eg, bone regions and air regions) in the human body region. The accuracy of part recognition is improved.

特徴量の算出は、正規化画像中に設定されたブロック(例えば、3×3画素等)内の画素値や画素値の平均値、最大値、最小値、中間値、CT値に基づく閾値処理によって抽出された人体領域中の空気領域や骨領域の人体領域に対する割合である。   The feature amount is calculated by threshold processing based on pixel values in the block (for example, 3 × 3 pixels) set in the normalized image, average values of pixel values, maximum values, minimum values, intermediate values, and CT values. The ratio of the air region and the bone region to the human body region in the human body region extracted by.

部分スコアの算出は、特徴量をAdaboost手法に基づく学習によって得られた部位毎の判別器群に入力して、断層画像毎に、各部位らしさを表す部位スコアscnpを算出する。1つの部位を判別する判別器群には1以上の判別器が含まれるが、2以上の判別器が含まれる場合、各判別器は、判別能力について相補的な関係を有したものとなっている。 In calculating the partial score, the feature amount is input to the classifier group for each part obtained by learning based on the Adaboost method, and a part score sc np representing the likelihood of each part is calculated for each tomographic image. The classifier group that discriminates one part includes one or more classifiers. When two or more classifiers are included, each classifier has a complementary relationship with respect to the discrimination ability. Yes.

部位の決定は、予め作成された人体の体部の配置順、すなわち、頭部、頭頸部、頸部、胸部、胸腹部、腹部、骨盤部、脚部の順で配置された参照部位と、各断層画像における部位スコアscnpの最大値との間に不一致が生じないように、各断面層に表された部位Pnを最終的に決定する。ここで、参照部位と各断層画像とにおける部位スコアscnpの最大値との間に不一致がある場合にコストがかかるようにして、コストが最小且つ最短となる経路を求めることによって、部位Pnを最終決定する。 The determination of the site is a reference site arranged in the order of the arrangement of the body part of the human body prepared in advance, that is, the head, head and neck, neck, chest, chest abdomen, abdomen, pelvis, and leg. The site Pn represented in each cross-sectional layer is finally determined so that there is no discrepancy between the maximum value of the site score sc np in each tomographic image. Here, when there is a discrepancy between the reference part and the maximum value of the part score sc np in each tomographic image, the part Pn is determined by obtaining a path with the minimum cost and the shortest cost so as to be costly. Final decision.

(7)また、上記実施の形態では、観察可能な基準断面の画像データを全て生成するようにしたが、選択部24がユーザの操作によって基準断面を選択した後に、画像生成部18が該選択された該基準断面の画像データを生成して、表示制御部20が基準断面の画像を表示させるようにしてもよい。   (7) In the above embodiment, all the image data of the observable reference cross section is generated. However, after the selection unit 24 selects the reference cross section by the user operation, the image generation unit 18 selects the reference cross section. The generated image data of the reference cross section may be generated, and the display control unit 20 may display the image of the reference cross section.

(8)また、上記実施の形態では、画像取得部12は、医用画像を撮影する撮影機器によって撮影された医用画像の3次元画像データを取得したが、ボリュームレンダリング、MIP、minIP等の手法によって生成された3次元画像を取得するようにしてもよい。この場合は、ボリュームレンダリング等によって生成された3次元画像の基準断面の画像が表示されることになる。   (8) In the above-described embodiment, the image acquisition unit 12 acquires the three-dimensional image data of the medical image captured by the imaging device that captures the medical image. However, the image acquisition unit 12 may perform volume rendering, MIP, minIP, or the like. You may make it acquire the produced | generated three-dimensional image. In this case, an image of the reference cross section of the three-dimensional image generated by volume rendering or the like is displayed.

(9)上記変形例(1)〜(8)を任意に組み合わせた態様であってもよい。   (9) The aspect which combined the said modification (1)-(8) arbitrarily may be sufficient.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

10…医用画像表示装置 12…画像取得部
14…部位特定部 16…断面特定部
18…画像生成部 20…画像表示制御部
22…表示部 24…選択部
DESCRIPTION OF SYMBOLS 10 ... Medical image display apparatus 12 ... Image acquisition part 14 ... Region | part specific part 16 ... Section identification part 18 ... Image generation part 20 ... Image display control part 22 ... Display part 24 ... Selection part

Claims (5)

医用画像の3次元画像を取得する画像取得部と、
前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定部と、
前記3次元画像から、前記断面特定部が特定した前記断面の断面画像を生成する画像生成部と、
前記断面特定部により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択部と、
前記画像生成部が生成し、且つ、前記選択部によって選択された前記断面の断面画像を表示部に表示させる表示制御部と、
を備え、
前記断面特定部が特定することができなかった前記断面の前記選択部による選択を禁止し、
前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、
前記断面特定部は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とする医用画像表示装置。
An image acquisition unit for acquiring a three-dimensional image of a medical image;
By analyzing the three-dimensional image, among one or more predetermined reference sections, a section specifying unit that specifies a section corresponding to the reference section included in the medical image;
An image generation unit that generates a cross-sectional image of the cross section specified by the cross-section specifying unit from the three-dimensional image;
A selection unit that selects the cross-section instructed by a user from the cross-sections specified by the cross-section specifying unit;
A display control unit that displays the cross-sectional image of the cross-section generated by the image generation unit and selected by the selection unit;
With
Prohibiting selection by the selection unit of the cross section that the cross-section specifying unit could not be specified ,
The reference cross section includes the apex left ventricular long-axis cross section, apex four-chamber cross section, apex two-chamber cross section, and left ventricular short-axis cross section,
The cross-section specifying unit detects the apex, base, aortic valve lower part, and aortic valve upper part as characteristic points that define the reference cross-section by analyzing the three-dimensional image of the medical image, A plane defined by the apex, the base of the heart, and the lower part of the aortic valve is specified as the cross section corresponding to the left ventricular long axis cross section of the apex and centered on the long axis connecting the apex and the base of the heart A plane when the plane defined by the apex, the base and the lower part of the aortic valve is rotated 100 to 140 degrees clockwise is specified as the cross section corresponding to the apical four-chamber cross section, The plane when the plane defined by the apex, the base, and the lower part of the aortic valve is rotated 30 to 70 degrees counterclockwise around the major axis is a cross section of the apex at the two chambers. Identified as the corresponding cross-section The plane perpendicular to the plane defined by the apex, the base, and the lower part of the aortic valve and passing through two points of the lower part of the aortic valve and the upper part of the aortic valve corresponds to the left ventricular short-axis cross section. A medical image display device characterized by being specified as a cross section .
請求項に記載の医用画像表示装置であって、
前記断面特定部は、教師データを用いてマシンラーニング手法を利用することで、前記特徴点を検出することを特徴とする医用画像表示装置。
The medical image display device according to claim 1 ,
The sectional identification unit, by using the machine learning techniques using training data, medical image display apparatus characterized by detecting the pre-Symbol feature points.
請求項1又は2に記載の医用画像表示装置であって、
前記医用画像の3次元画像を用いて、該医用画像に含まれる観察したい部位を特定する部位特定部をさらに備え、
前記断面特定部は、前記医用画像の前記3次元画像のうち、特定された前記部位の3次元画像を解析することで、予め定められた1以上の前記部位の基準断面のうち、該医用画像に含まれる前記部位の前記基準断面に相当する前記断面を特定することを特徴とする医用画像表示装置。
The medical image display device according to claim 1 or 2 ,
Using a three-dimensional image of the medical image, further comprising a part specifying unit for specifying a part to be observed included in the medical image;
The cross-section specifying unit analyzes the three-dimensional image of the specified part of the three-dimensional image of the medical image, so that the medical image of one or more predetermined reference cross-sections of the part is analyzed. A medical image display device that identifies the cross-section corresponding to the reference cross-section of the part included in the medical image display device.
コンピュータが、医用画像を表示させる医用画像表示方法であって、
医用画像の3次元画像を取得する画像取得工程と、
前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定工程と、
前記3次元画像から、特定された前記断面の断面画像を生成する画像生成工程と、
前記断面特定工程により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択工程と、
前記画像生成工程によって生成され、且つ、選択工程で選択された前記断面の断面画像を表示部に表示させる表示制御工程と、
を備え、
前記断面特定工程が特定することができなかった前記断面の選択を禁止し、
前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、
前記断面特定工程は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とする医用画像表示方法。
A medical image display method in which a computer displays a medical image,
An image acquisition step of acquiring a three-dimensional image of the medical image;
By analyzing the three-dimensional image, among one or more predetermined reference sections, a section specifying step for specifying a section corresponding to the reference section included in the medical image;
An image generation step of generating a cross-sectional image of the specified cross-section from the three-dimensional image;
A selection step of selecting the cross-section instructed by a user from the cross-sections specified by the cross-section specifying step;
A display control step of displaying a cross-sectional image of the cross-section generated in the image generation step and selected in the selection step on a display unit;
With
Prohibiting selection of the cross-section that could not be identified by the cross-section identification step ,
The reference cross section includes the apex left ventricular long-axis cross section, apex four-chamber cross section, apex two-chamber cross section, and left ventricular short-axis cross section,
The cross-section specifying step detects the apex, base, aortic valve lower part, and aortic valve upper part as feature points that define the reference cross-section by analyzing the three-dimensional image of the medical image, A plane defined by the apex, the base of the heart, and the lower part of the aortic valve is specified as the cross section corresponding to the left ventricular long axis cross section of the apex and centered on the long axis connecting the apex and the base of the heart A plane when the plane defined by the apex, the base and the lower part of the aortic valve is rotated 100 to 140 degrees clockwise is specified as the cross section corresponding to the apical four-chamber cross section, The plane when the plane defined by the apex, the base, and the lower part of the aortic valve is rotated 30 to 70 degrees counterclockwise around the major axis is a cross section of the apex at the two chambers. Identified as the corresponding cross-section, A plane perpendicular to the plane defined by the apex of the heart, the base of the heart, and the lower part of the aortic valve and passing through two points of the lower part of the aortic valve and the upper part of the aortic valve corresponds to the left ventricular short-axis cross section. A medical image display method characterized by specifying the cross section .
コンピュータを、
医用画像の3次元画像を取得する画像取得手段、
前記3次元画像を解析することで、1以上の予め定められた基準断面のうち、前記医用画像に含まれる前記基準断面に相当する断面を特定する断面特定手段、
前記3次元画像から、前記断面特定手段が特定した前記断面の断面画像を生成する画像生成手段、
前記断面特定手段により特定された前記断面の中から、ユーザによって指示された前記断面を選択する選択手段と、
前記画像生成手段が生成し、且つ、前記選択手段によって選択された前記断面の断面画像を表示部に表示させる表示制御手段、
として機能させ、
前記断面特定手段が特定することができなかった前記断面の前記選択手段による選択を禁止し、
前記基準断面は、心尖部左室長軸断面、心尖部四腔断面、心尖部二腔断面、及び左室短軸断面を含み、
前記断面特定手段は、前記医用画像の前記3次元画像を解析することで、前記基準断面を規定する特徴点として心尖部、心基部、大動脈弁部下部、及び大動脈弁部上部を検出し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される平面を心尖部左室長軸断面に相当する前記断面として特定し、前記心尖部と前記心基部とを結ぶ長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を時計回りに100〜140度回転させたときの平面を心尖部四腔断面に相当する前記断面として特定し、前記長軸を中心にして、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面を反時計周りに30〜70度回転させたときの平面を心尖部二腔断面に相当する前記断面として特定し、前記心尖部、前記心基部、及び前記大動脈弁部下部で規定される前記平面に直交し、且つ、大動脈弁部下部と大動脈弁部上部の2点を通る平面を左室短軸断面に相当する前記断面として特定することを特徴とするプログラム。
Computer
Image obtaining means for obtaining three-dimensional images image of the medical image,
By analyzing the three-dimensional image, a cross-section specifying means for specifying a cross-section corresponding to the reference cross-section included in the medical image among one or more predetermined reference cross-sections,
Image generating means for generating a cross-sectional image of the cross section specified by the cross-section specifying means from the three-dimensional image;
Selecting means for selecting the cross-section instructed by the user from the cross-sections specified by the cross-section specifying means;
Display control means for causing the display section to display a cross-sectional image of the cross-section generated by the image generation means and selected by the selection means;
Function as
Prohibiting selection by the selection means of the cross section that could not be specified by the cross section specifying means ;
The reference cross section includes the apex left ventricular long-axis cross section, apex four-chamber cross section, apex two-chamber cross section, and left ventricular short-axis cross section,
The cross-section specifying means detects the apex, base, aortic valve lower part, and aortic valve upper part as characteristic points defining the reference cross-section by analyzing the three-dimensional image of the medical image, A plane defined by the apex, the base of the heart, and the lower part of the aortic valve is specified as the cross section corresponding to the left ventricular long axis cross section of the apex and centered on the long axis connecting the apex and the base of the heart A plane when the plane defined by the apex, the base and the lower part of the aortic valve is rotated 100 to 140 degrees clockwise is specified as the cross section corresponding to the apical four-chamber cross section, The plane when the plane defined by the apex, the base, and the lower part of the aortic valve is rotated 30 to 70 degrees counterclockwise around the major axis is a cross section of the apex at the two chambers. Identified as the corresponding cross-section, A plane perpendicular to the plane defined by the apex of the heart, the base of the heart, and the lower part of the aortic valve and passing through two points of the lower part of the aortic valve and the upper part of the aortic valve corresponds to the left ventricular short-axis cross section. A program characterized by being specified as the cross section .
JP2010026612A 2010-02-09 2010-02-09 MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF Active JP5479138B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010026612A JP5479138B2 (en) 2010-02-09 2010-02-09 MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010026612A JP5479138B2 (en) 2010-02-09 2010-02-09 MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF

Publications (2)

Publication Number Publication Date
JP2011160962A JP2011160962A (en) 2011-08-25
JP5479138B2 true JP5479138B2 (en) 2014-04-23

Family

ID=44592351

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010026612A Active JP5479138B2 (en) 2010-02-09 2010-02-09 MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF

Country Status (1)

Country Link
JP (1) JP5479138B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018079344A1 (en) * 2016-10-26 2018-05-03 株式会社日立製作所 Ultrasound image processing device and program

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6184244B2 (en) * 2013-05-30 2017-08-23 東芝メディカルシステムズ株式会社 Medical image processing device
JP6566675B2 (en) * 2014-04-25 2019-08-28 キヤノンメディカルシステムズ株式会社 Ultrasonic diagnostic apparatus, image processing apparatus, and image processing method
JP6234426B2 (en) * 2015-12-25 2017-11-22 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー Image processing apparatus, medical apparatus, and program
EP3668408A1 (en) * 2017-08-17 2020-06-24 Koninklijke Philips N.V. Ultrasound system with extraction of image planes from volume data using touch interaction with an image
KR102656563B1 (en) 2018-02-06 2024-04-12 삼성메디슨 주식회사 Ultrasound imaging aparatus and method for controlling ultrasound imaging apparatus
KR102044237B1 (en) * 2018-10-23 2019-11-13 연세대학교 산학협력단 Shadowed 2D image-based machine learning, and automatic 3D landmark detection method and apparatus using thereof
EP4174760A4 (en) * 2020-06-29 2024-07-10 Suzhou Rainmed Medical Tech Co Ltd Aorta obtaining method based on deep learning, and storage medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4528247B2 (en) * 2005-10-27 2010-08-18 アロカ株式会社 Ultrasonic diagnostic apparatus and ultrasonic image processing method
JP5148094B2 (en) * 2006-09-27 2013-02-20 株式会社東芝 Ultrasonic diagnostic apparatus, medical image processing apparatus, and program
JP5159195B2 (en) * 2007-07-12 2013-03-06 株式会社東芝 Medical image processing device
JP5138431B2 (en) * 2008-03-17 2013-02-06 富士フイルム株式会社 Image analysis apparatus and method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018079344A1 (en) * 2016-10-26 2018-05-03 株式会社日立製作所 Ultrasound image processing device and program

Also Published As

Publication number Publication date
JP2011160962A (en) 2011-08-25

Similar Documents

Publication Publication Date Title
JP5479138B2 (en) MEDICAL IMAGE DISPLAY DEVICE, MEDICAL IMAGE DISPLAY METHOD, AND PROGRAM THEREOF
US8611988B2 (en) Projection image generation apparatus and method, and computer readable recording medium on which is recorded program for the same
US10692198B2 (en) Image processing apparatus, image processing method, image processing system, and non-transitory computer-readable storage medium for presenting three-dimensional images
US10424067B2 (en) Image processing apparatus, image processing method and storage medium
WO2010119690A1 (en) Diagnosis support apparatus, diagnosis support method, and storage medium storing diagnosis support program
JP2018515197A (en) Method and system for semantic segmentation in 2D / 2.5D image data by laparoscope and endoscope
CN101336844A (en) Medical image processing apparatus and medical image diagnosis apparatus
JP6445784B2 (en) Image diagnosis support apparatus, processing method thereof, and program
JP5934071B2 (en) Apparatus, method and program for searching for shortest path of tubular structure
JP2016101502A (en) Medical image processing apparatus
JP2013153883A (en) Image processing apparatus, imaging system, and image processing method
TWI684994B (en) Spline image registration method
US8086013B2 (en) Image processing apparatus and image processing method
JP5415245B2 (en) MEDICAL IMAGE DISPLAY DEVICE, METHOD, AND PROGRAM
JP2017046814A (en) Information processing device, image processing device, information processing system, information processing method, and program
US10078906B2 (en) Device and method for image registration, and non-transitory recording medium
WO2013125276A1 (en) X-ray ct device, image display device, and image display method
CN107633478B (en) Image processing apparatus, image processing method, and computer readable medium
JP2002140689A (en) Medical image processor and its method
US9585569B2 (en) Virtual endoscopic projection image generating device, method and program
US10102638B2 (en) Device and method for image registration, and a nontransitory recording medium
JP6476125B2 (en) Image processing apparatus and surgical microscope system
JP2013040829A (en) Volume data processor and method
JP6263248B2 (en) Information processing apparatus, information processing method, and program
JP2018061844A (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130826

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131001

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140212

R150 Certificate of patent or registration of utility model

Ref document number: 5479138

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250