JP6645810B2 - Medical image processing apparatus, medical image processing method, medical image processing system, and medical image processing program - Google Patents

Medical image processing apparatus, medical image processing method, medical image processing system, and medical image processing program Download PDF

Info

Publication number
JP6645810B2
JP6645810B2 JP2015224265A JP2015224265A JP6645810B2 JP 6645810 B2 JP6645810 B2 JP 6645810B2 JP 2015224265 A JP2015224265 A JP 2015224265A JP 2015224265 A JP2015224265 A JP 2015224265A JP 6645810 B2 JP6645810 B2 JP 6645810B2
Authority
JP
Japan
Prior art keywords
interest
image
region
medical image
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015224265A
Other languages
Japanese (ja)
Other versions
JP2016147046A (en
Inventor
チー ジュウ
チー ジュウ
チチ シュ
チチ シュ
シャオジン ワン
シャオジン ワン
ファンジエ モン
ファンジエ モン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to US15/014,130 priority Critical patent/US9905006B2/en
Publication of JP2016147046A publication Critical patent/JP2016147046A/en
Application granted granted Critical
Publication of JP6645810B2 publication Critical patent/JP6645810B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明の実施形態は、一般的に、医用画像処理分野に関し、より具体的には、医用画像処理装置、医用画像処理方法、医用画像処理システム、及び医用画像処理プログラムに関する。   Embodiments of the present invention generally relate to the field of medical image processing, and more specifically, to a medical image processing apparatus, a medical image processing method, a medical image processing system, and a medical image processing program.

医用画像に基づく識別診断において、診断結果が特定された過去の画像(参照画像)を参照することで現在の医用画像に対する診断精度を向上させる。通常、参照画像のラベルに基づいて、或いは現在の医用画像と参照画像の画像特徴を全体的に比較して、参照画像のデータベースから参照したい従来の医用画像を検索する。   In the identification diagnosis based on the medical image, the diagnosis accuracy for the current medical image is improved by referring to the past image (reference image) in which the diagnosis result is specified. Usually, a conventional medical image to be referred to is searched from a reference image database based on the label of the reference image or by comparing the image characteristics of the current medical image and the image characteristics of the reference image as a whole.

特開2007−209583号公報JP 2007-209583 A 特開2011−067253号公報JP 2011-067253 A

本発明が解決しようとする課題は、診断に有用な参照画像を特定することができる医用画像処理装置、医用画像処理方法、医用画像処理システム、及び医用画像処理プログラムを提供することである。   An object of the present invention is to provide a medical image processing apparatus, a medical image processing method, a medical image processing system, and a medical image processing program that can specify a reference image useful for diagnosis.

実施形態の医用画像処理装置は、位置決め部と、変形部と、第1設定部と、第2設定部と、検索部とを備える。位置決め部は、医用画像と、複数の参照画像の各々とを位置決めする。変形部は、前記位置決め部による位置決め結果に基づいて、前記医用画像を変形する。第1設定部は、変形された前記医用画像に第1関心領域を設定する。第2設定部は、前記第1関心領域に対応する第2関心領域を、前記複数の参照画像の少なくとも2つに設定する。検索部は、前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する。   The medical image processing device according to the embodiment includes a positioning unit, a deformation unit, a first setting unit, a second setting unit, and a search unit. The positioning unit positions the medical image and each of the plurality of reference images. The deforming unit deforms the medical image based on a positioning result by the positioning unit. The first setting unit sets a first region of interest in the deformed medical image. The second setting unit sets a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images. The search unit searches for a reference image similar to the image in the first region of interest from the reference image in which the second region of interest is set.

図1は、本発明の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 1 is a block diagram illustrating an example of the arrangement of an image processing apparatus according to an embodiment of the present invention. 図2は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 2 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図3Aは、関心領域を設定するための所定テンプレートの一例を示す図である。FIG. 3A is a diagram illustrating an example of a predetermined template for setting a region of interest. 図3Bは、関心領域を設定するための所定テンプレートの一例を示す図である。FIG. 3B is a diagram illustrating an example of a predetermined template for setting a region of interest. 図4は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 4 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図5は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 5 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図6は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 6 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図7は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 7 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図8は、他の一実施形態による画像処理装置の配置例を示すブロック図である。FIG. 8 is a block diagram illustrating an arrangement example of an image processing apparatus according to another embodiment. 図9は、本発明の一実施形態による画像処理方法の過程例を示すフローチャートである。FIG. 9 is a flowchart illustrating an example of a process of an image processing method according to an embodiment of the present invention. 図10は、本発明の一実施形態による医用イメージングシステムの配置例を示すブロック図である。FIG. 10 is a block diagram illustrating an arrangement example of the medical imaging system according to the embodiment of the present invention. 図11は、本発明の方法と装置を実現するためのコンピュータの構成例を示すブロック図である。FIG. 11 is a block diagram showing a configuration example of a computer for realizing the method and apparatus of the present invention.

以下において、本発明の基本的理解のために、本発明の幾つかの実施形態についての概要を紹介する。この概要は本発明のキーになる領域あるいは重要な領域を確定するものではなく、また本発明の範囲を限定するものでもない。その目的は、ただ簡略的に説明することによって、その後に説明する更に詳細な記述のために説明するものである。   In the following, an overview of some embodiments of the present invention will be introduced for a basic understanding of the present invention. This summary does not define key or important areas of the invention and does not limit the scope of the invention. Its purpose is merely to provide a simplified description and for a more detailed description to be given later.

本発明の一実施形態によれば、医用画像処理装置を提供する。医用画像処理装置は、マッチング部と特定部を備える。マッチング部は、処理対象となる医用画像である対象画像と、参照画像セットにおける参照画像とのマッチング結果を特定する。ただし、対象画像の関心領域と参照画像の対応サブ領域とのマッチングによってマッチング結果を特定する。特定部は、マッチング結果に基づいて対象画像との類似度の高い1つまたは複数の参照画像を特定する。   According to one embodiment of the present invention, a medical image processing apparatus is provided. The medical image processing device includes a matching unit and a specifying unit. The matching unit specifies a matching result between the target image, which is a medical image to be processed, and a reference image in the reference image set. However, the matching result is specified by matching the region of interest of the target image with the corresponding sub-region of the reference image. The specifying unit specifies one or more reference images having a high degree of similarity with the target image based on the matching result.

本発明の他の一実施形態によれば、医用画像処理方法を提供する。該方法は、対象画像と参照画像セットにおける参照画像とのマッチング結果を特定するステップを含む。ただし、対象画像の関心領域と参照画像の対応サブ領域とのマッチングによってマッチング結果を特定する。該方法は、マッチング結果に基づいて対象画像との類似度が高い1つまたは複数の参照画像を特定するステップも含む。   According to another embodiment of the present invention, there is provided a medical image processing method. The method includes identifying a matching result between the target image and a reference image in the reference image set. However, the matching result is specified by matching the region of interest of the target image with the corresponding sub-region of the reference image. The method also includes the step of identifying one or more reference images having a high degree of similarity to the target image based on the matching result.

本発明の他の一実施形態によれば、前記医用画像処理装置を備える医用イメージングシステムを提供する。   According to another embodiment of the present invention, there is provided a medical imaging system including the medical image processing device.

本発明の他の一実施形態によれば、コンピュータ読み取り可能な指示コードのプログラム製品を提供し、コンピュータによって該指示コードを読取り、且つ実行するとき、コンピュータによって本発明の実施形態による医用画像処理方法を実現することができる。   According to another embodiment of the present invention, there is provided a program product of a computer-readable instruction code, and when reading and executing the instruction code by a computer, the computer-aided medical image processing method according to the embodiment of the present invention. Can be realized.

本発明の他の一実施形態によれば、コンピュータ読み取り可能な指示コードを記憶したプログラム製品をロードする記憶媒体を提供する。   According to another embodiment of the present invention, there is provided a storage medium for loading a program product storing a computer-readable instruction code.

本発明の実施形態によれば、特定関心領域について参照画像を特定するのは、識別診断のための参照画像をより正確かつ有効的に特定(検索)することができる。   According to the embodiment of the present invention, specifying a reference image for a specific region of interest can specify (search) a reference image for identification diagnosis more accurately and effectively.

以下、図面を参照しながら本実施形態の説明することにより、さらに本実施形態の目的、特徴、メリットを理解し易くすることができる。図面中の構成は、本実施形態の原理を例示するためのものである。図面において、同一若しくは類似の技術的特徴、若しくは構成は、同一若しくは類似の図面表記を用いて表すこととする。   Hereinafter, by describing the present embodiment with reference to the drawings, the objects, features, and merits of the present embodiment can be further easily understood. The configuration in the drawings is for illustrating the principle of the present embodiment. In the drawings, the same or similar technical features or configurations will be represented using the same or similar drawing notations.

以下、図面を参照しながら本実施形態について説明する。なお、以下の説明において、一つの図面あるいは一つの実施形態において記載した構成や特徴は、一つあるいは複数の他の図面あるいは実施形態において示した構成や特徴を組み合わせることができる。さらに、明瞭にするため、図面や説明において本実施形態と無関係な内容や、当業者にとって周知の構成や処理については、表示や記載を省略する。   Hereinafter, the present embodiment will be described with reference to the drawings. Note that in the following description, structures and features described in one drawing or one embodiment can be combined with structures or features described in one or more other drawings or embodiments. Further, for the sake of clarity, in the drawings and description, descriptions and descriptions of contents unrelated to the present embodiment, and configurations and processes well known to those skilled in the art are omitted.

図1に示すように、本発明の一実施形態による医用画像処理装置100は、マッチング部110と特定部120を備える。   As shown in FIG. 1, the medical image processing apparatus 100 according to one embodiment of the present invention includes a matching unit 110 and a specifying unit 120.

マッチング部110は、対象画像と参照画像セットにおける参照画像とのマッチング結果を特定する。マッチング部110は、対象画像の関心領域と参照画像の対応サブ領域とのマッチングによって該マッチング結果を特定する。   The matching unit 110 specifies a matching result between the target image and the reference image in the reference image set. The matching unit 110 specifies the matching result by matching the region of interest of the target image with the corresponding sub-region of the reference image.

関心領域は、画像のうちの1つまたは複数の所定位置のサブ領域を含むことができ、該サブ領域は、所定の形状を有することができる。後に説明するように、例えば、ユーザによって関心領域を定義してもよく、所定の位置テンプレートに基づいて関心領域を指定してもよい。   The region of interest may include one or more predetermined sub-regions of the image, and the sub-regions may have a predetermined shape. As will be described later, for example, the region of interest may be defined by the user, or the region of interest may be specified based on a predetermined position template.

特定部120は、マッチング部110のマッチング結果に基づいて、対象画像との類似度が高い1つまたは複数の参照画像を特定する。例えば、類似度が最も高い所定数の参照画像を提供してもよく、類似度が所定閾値より高い参照画像を提供してもよい。   The specifying unit 120 specifies one or more reference images having a high degree of similarity with the target image based on the matching result of the matching unit 110. For example, a predetermined number of reference images having the highest similarity may be provided, or a reference image having a similarity higher than a predetermined threshold may be provided.

参照画像は、種別、例えば、疾患類型を標識した従来の医用画像であってもよく、特定部120が特定した参照画像がユーザ(操作者)、例えば、医師に提供されて、識別診断を行うことができる。したがって、ユーザ、例えば、医師は、大量の従来の画像を閲覧する必要がなく、特定した参照画像だけを参照して判断するので、操作効率を向上させることができる。例えば、参照画像は、アトラス画像である。   The reference image may be a conventional medical image in which a type, for example, a disease type is marked, and the reference image specified by the specifying unit 120 is provided to a user (operator), for example, a doctor to perform identification diagnosis. be able to. Therefore, the user, for example, a doctor does not need to browse a large number of conventional images, and makes a determination by referring to only the specified reference image, so that the operation efficiency can be improved. For example, the reference image is an atlas image.

ある疾患は、特定の解剖学的領域内にある典型分布を有する。例えば、約75%の小脳橋角(cerebellopontine angle)腫瘍は、聴神経腫(acoustic neuromas)である。また、例えば、脊索腫の2つの好発部位は、頭蓋の斜台(clivus)および脊椎底部の仙骨である。対象画像と参照画像とを全体にマッチングすることで、対象画像と類似する参照画像を特定する既存の方式と比べて、本発明の実施形態は、所定の関心領域に基づいて画像マッチングを行うことで類似した参照画像を特定し、有効な情報を提供する可能性が大きい参照画像をより正確かつ有効に特定することができる。   Certain diseases have a typical distribution that is within a particular anatomical region. For example, about 75% of cerebellopontine angle tumors are acoustic neuromas. Also, for example, two common sites for chordomas are the skull clivus and the sacrum at the base of the spine. Compared with the existing method of identifying a reference image similar to the target image by matching the entirety of the target image and the reference image, the embodiment of the present invention performs image matching based on a predetermined region of interest. , A similar reference image can be specified, and a reference image having a high possibility of providing valid information can be specified more accurately and effectively.

ここで、正確度とは、識別診断の正確度ではない。最終的な診断は、医用画像処理装置のユーザ、例えば、医師によって行われ、医用画像処理装置によって行われない。ここでの正確度は、対象画像に基づいて相応の参照画像を特定する正確度であり、より具体的には、正確度が高い場合、特定した参照画像と対象画像とはより高い類似度(位置分布の実施形態を含む)を有し、それにより、ユーザ、例えば、医師に識別診断のための参考情報を提供することができる。   Here, the accuracy is not the accuracy of the identification diagnosis. The final diagnosis is performed by a user of the medical image processing apparatus, for example, a doctor, and is not performed by the medical image processing apparatus. The accuracy here is the accuracy of specifying a corresponding reference image based on the target image. More specifically, when the accuracy is high, the specified reference image and the target image have higher similarity ( (Including embodiments of location distribution), thereby providing a user, eg, a physician, with reference information for identification and diagnosis.

次に、図2を参照しながら一実施形態による医用画像処理装置200の構成例を説明する。医用画像処理装置200は、マッチング部210、特定部220、および設定部230を備える。マッチング部210及び特定部220は、上述したマッチング部110及び特定部120とそれぞれ同様である。設定部230は、対象画像において少なくとも1つの関心領域を設定する。   Next, a configuration example of the medical image processing apparatus 200 according to the embodiment will be described with reference to FIG. The medical image processing device 200 includes a matching unit 210, a specifying unit 220, and a setting unit 230. The matching unit 210 and the specifying unit 220 are the same as the matching unit 110 and the specifying unit 120, respectively. The setting unit 230 sets at least one region of interest in the target image.

設定部230は、ユーザの指示に基づいて、関心領域を設定することができる。例えば、ユーザは、対象画像に含まれる画像特徴に基づいて、手動で、1つまたは複数の領域(例えば、特定特徴の領域、およびその対称領域などを含む)を関心領域として選択することができる。設定部230は、設定した関心領域の情報をマッチング部210に提供してマッチングを行うことができる。   The setting unit 230 can set a region of interest based on a user's instruction. For example, the user can manually select one or more regions (including, for example, a region of a particular feature and its symmetric region) as a region of interest based on image features included in the target image. . The setting unit 230 may provide information on the set region of interest to the matching unit 210 to perform matching.

或いは、設定部230は、所定の位置テンプレートに基づいて関心領域を設定することができる。位置テンプレートは、予め記憶することができる。例えば、以前、使用した位置テンプレートをテンプレートの記憶部に記憶してユーザに選択される。また、一実施形態によれば、画像処理装置200は、作成部240を含むことができ、作成部240は、ユーザの入力に基づいて新たな位置テンプレートを作成する。すなわち、設定部230は、複数の関心領域の各々が所定の位置関係で配置された位置テンプレートに基づいて、複数の関心領域のうち少なくとも一つを設定する。   Alternatively, the setting unit 230 can set a region of interest based on a predetermined position template. The position template can be stored in advance. For example, the position template used before is stored in the storage unit of the template and is selected by the user. Further, according to an embodiment, the image processing apparatus 200 may include a creating unit 240, and the creating unit 240 creates a new position template based on a user input. That is, the setting unit 230 sets at least one of the plurality of regions of interest based on the position template in which each of the plurality of regions of interest is arranged in a predetermined positional relationship.

図3A及び図3Bの模式図は、脳の断面画像を対象とする位置テンプレートの2つの例である。   The schematic diagrams of FIGS. 3A and 3B are two examples of a position template for a cross-sectional image of the brain.

図3Aに例示のテンプレートにおいて、領域312A〜312Hは、脳の辺縁位置の6つの関心領域を示し、領域314A〜314Fは、脳のより中間領域の6つの関心領域を示す。   In the template illustrated in FIG. 3A, regions 312A-312H show six regions of interest at the periphery of the brain, and regions 314A-314F show six regions of interest in a more intermediate region of the brain.

図3Bに示すテンプレートにおいて、領域322A〜322Hは、脳の辺縁位置の6つの関心領域を示し、領域324は、脳の中間領域の関心領域を示す。   In the template shown in FIG. 3B, regions 322A to 322H indicate six regions of interest at the periphery of the brain, and region 324 indicates a region of interest in the middle region of the brain.

特定疾患について、上記のテンプレートのうちの1つまたは複数の領域を関心領域として選択することができる。例えば、多重白質損傷に対して、それが多重硬化か血管疾患かに起因することを区別し、多重硬化と血管疾患とが脳における発生位置がそれぞれ一定の特徴を有する。例えば、多重硬化は、通常、脳室周囲(periventricular)、小脳テント下(infratentorial)、脊髄(spinal cord)の位置に発生するが、血管疾患は、通常、これらの位置には発生しない。他の一実施形態において、血管疾患は、通常、基底核(basal nuclei)の位置に発生するが、多重硬化は、通常、基底核の位置には発生しない。   For a particular disease, one or more of the above templates can be selected as a region of interest. For example, it is distinguished that multiple white matter damage is caused by multiple sclerosis or vascular disease, and the positions where multiple sclerosis and vascular disease occur in the brain have certain characteristics. For example, multiple sclerosis usually occurs at periventricular, infratentorial, and spinal cord locations, whereas vascular disease does not usually occur at these locations. In another embodiment, the vascular disease usually occurs at the location of the basal nuclei, but multiple sclerosis does not usually occur at the location of the basal nucleus.

白質損傷について識別診断を行う例に対して、本発明の実施形態による医用画像処理装置は、対象画像における白質損傷の発生位置に基づいて関心領域を指定し、該関心領域について参照画像のデータベースから対象画像と類似した参照画像を特定することができる。   For an example in which identification diagnosis is performed for white matter damage, the medical image processing apparatus according to the embodiment of the present invention specifies a region of interest based on the position of occurrence of white matter damage in the target image, and specifies the region of interest from a reference image database. A reference image similar to the target image can be specified.

例えば、対象画像において図3Aに示す領域314Dに対応した領域において病変があると、領域314Dを関心領域として選択することができ、また、領域314Dの対称の位置にある領域314Cも関心領域として選択することができる。特定部は、関心領域314C、314Dと、参照画像のデータベースにおける参照画像の対応するサブ領域とのマッチングに基づいて、参照画像としてユーザに提供する参照画像を特定することができる。   For example, if there is a lesion in the region corresponding to the region 314D shown in FIG. 3A in the target image, the region 314D can be selected as the region of interest, and the region 314C at a position symmetrical to the region 314D is also selected as the region of interest. can do. The specifying unit can specify the reference image to be provided to the user as the reference image based on matching between the regions of interest 314C and 314D and the corresponding sub-region of the reference image in the reference image database.

他の一応用例において、識別診断によって頭蓋底腫瘍が脊索腫(chordoma)か軟骨肉腫(chondrosarcoma)かを特定することが行われる。脊索腫の病変部分は、通常、中心領域に位置するが、軟骨肉腫は、通常、中心領域から外れている。該応用例は、図3Bに示す位置テンプレートの例を採用することができる。より具体的には、対象画像における病変部分の分布情況に基づいて、例えば、図3Bに示す領域324を関心領域として類似した参照画像を特定することができる。   In another application, the identification diagnosis identifies whether the skull base tumor is a chordoma or a chondrosarcoma. Chordoma lesions are usually located in the central region, while chondrosarcoma is usually off the central region. The application example can adopt the example of the position template shown in FIG. 3B. More specifically, a similar reference image can be specified, for example, using the region 324 shown in FIG. 3B as the region of interest based on the distribution situation of the lesion portion in the target image.

画像の全体マッチングによって参照画像を特定する既存の形態において、例えば、対象画像における多重白質損傷が多重硬化によって引き起こすが、画像の全体マッチングによって得られた類似した参照画像が血管疾患と対応した医用画像であることがある。この場合、ユーザの識別診断の精度を影響する可能性があり、或いは、ユーザがより多くの参照画像を要求され、処理負荷の増加を引き起こす。   In the existing form of identifying a reference image by global matching of images, for example, multiple white matter damage in a target image is caused by multiple hardening, but a similar reference image obtained by global matching of images is a medical image corresponding to a vascular disease. It may be. In this case, the accuracy of the user's identification diagnosis may be affected, or the user is required to have more reference images, which causes an increase in processing load.

特定の関心領域について参照画像とのマッチングを行うことで、対象画像の病変発生位置により接近した参照画像を、ユーザ、例えば、医師に提供することができるので、診断識別のための参照画像をより正確かつ有効的に特定(検索)することができる。   By performing matching with the reference image for a specific region of interest, a reference image closer to the lesion occurrence position of the target image can be provided to the user, for example, a physician. It can be specified (searched) accurately and effectively.

以上、具体的応用例によって、位置テンプレートに基づいて類似の参照画像を特定する実施形態を説明したが、実施形態は、上記の具体例に限定されていない。特定の応用例について、ユーザは、例えば、テンプレートのデータベースから適当な位置テンプレートを選択し、該テンプレートは、例えば、特定疾患の多重位置について設定した関心領域を含む。或いは、以上、図2を参照して説明し、ユーザは、作成部240によって位置テンプレートを定義することができる。   As described above, the embodiment in which the similar reference image is specified based on the position template has been described by the specific application example, but the embodiment is not limited to the above specific example. For a particular application, the user selects, for example, an appropriate location template from a database of templates, which includes, for example, regions of interest set for multiple locations of a particular disease. Alternatively, as described above with reference to FIG. 2, the user can define the position template by the creation unit 240.

また、対象画像の関心領域と参照画像の相応サブ領域とのマッチングについて、本分野に既知の多種の画像マッチング方式を採用することができる。一実施形態によれば、参照画像のサブ領域の画像特徴を予め記憶し、記憶した画像特徴に基づいて対象画像の関心領域と参照画像の相応サブ領域とのマッチングを行うことができる。   Also, for matching between the region of interest of the target image and the corresponding sub-region of the reference image, various image matching methods known in the art can be adopted. According to one embodiment, image features of a sub-region of a reference image are stored in advance, and matching between a region of interest of a target image and a corresponding sub-region of a reference image can be performed based on the stored image features.

図4に示すように、一実施形態による医用画像処理装置400は、マッチング部410、特定部420、抽出部430および記憶部440を備える。特定部420は、上述した特定部と同様である。   As shown in FIG. 4, the medical image processing device 400 according to one embodiment includes a matching unit 410, a specifying unit 420, an extracting unit 430, and a storage unit 440. The specifying unit 420 is similar to the specifying unit described above.

抽出部430は、対象画像の関心領域の画像特徴を抽出する。すなわち、抽出部430は、医用画像に設定された第1関心領域に含まれる画像の特徴である第1画像特徴を抽出する。   The extracting unit 430 extracts the image feature of the region of interest of the target image. That is, the extraction unit 430 extracts a first image feature that is a feature of the image included in the first region of interest set in the medical image.

記憶部440は、参照画像セットにおける参照画像の対象画像における関心領域に対応するサブ領域の画像特徴を記憶する。すなわち、記憶部440は、参照画像に設定された第2関心領域に含まれる画像の特徴である第2画像特徴を記憶する。   The storage unit 440 stores the image characteristics of the sub-region corresponding to the region of interest in the target image of the reference image in the reference image set. That is, the storage unit 440 stores the second image feature that is the feature of the image included in the second region of interest set in the reference image.

マッチング部410は、抽出部430が抽出した処理対象の関心領域の画像特徴と、記憶部440が記憶した参照画像の相応サブ領域の画像特徴との類似度に基づいて、対象画像と参照画像とのマッチングを行う。   The matching unit 410 compares the target image and the reference image based on the similarity between the image feature of the region of interest to be processed extracted by the extraction unit 430 and the image feature of the corresponding sub-region of the reference image stored in the storage unit 440. Is performed.

具体的には、対象画像の関心領域は、所定の位置テンプレートに基づいて特定したものであってもよく。例えば、記憶部440には複数の所定テンプレートに基づいて参照画像のうちの相応サブ領域から抽出した画像特徴を記憶することができる。   Specifically, the region of interest of the target image may be specified based on a predetermined position template. For example, the storage unit 440 can store image features extracted from corresponding sub-regions of the reference image based on a plurality of predetermined templates.

例えば、Hu不変モーメント、辺縁直方図などに基づくベクトルによって画像特徴を示すことができる。相応的に、記憶部440には各参照画像の各領域の画像特徴ベクトルを記憶することができる。抽出部430は、位置テンプレートに基づいて対象画像における関心領域の、例えば、ベクトルによって示す画像特徴を抽出することができる。マッチング部410は、対象画像の関心領域の画像特徴のベクトルと参照画像の相応サブ領域の画像特徴のベクトルとの間の距離を特定することでマッチングを行うことができる。例えば、距離が所定閾値の以下である場合、関心領域とマッチングした参照画像サブ領域が存在すると特定することができる。   For example, an image feature can be indicated by a vector based on a Hu invariant moment, an outline rectangular view, or the like. Accordingly, the storage unit 440 can store the image feature vector of each area of each reference image. The extracting unit 430 can extract, for example, an image feature of the region of interest in the target image indicated by a vector based on the position template. The matching unit 410 can perform matching by specifying a distance between the image feature vector of the region of interest of the target image and the image feature vector of the corresponding sub-region of the reference image. For example, when the distance is equal to or less than the predetermined threshold, it can be specified that there is a reference image sub-region that matches the region of interest.

また、イメージング対象、イメージングパラメータなどの実施形態の差別なので、対象画像と参照画像との間に位置合わせずれが存在する可能性があり、言い換えれば、対象画像と参照画像とは一致しない座標系を有する可能性がある。このような不一致による画像マッチングの誤差を回避するために、図5に示すように、一実施形態による医用画像処理装置500は、マッチング部510、特定部520、位置決め部530および変形部540を備える。特定部520は、上述した特定部と同様である。   In addition, since the imaging target, the discrimination of the imaging parameters and the like embodiments, there is a possibility that there is a misalignment between the target image and the reference image, in other words, a coordinate system that does not match the target image and the reference image May have. As shown in FIG. 5, a medical image processing apparatus 500 according to an embodiment includes a matching unit 510, a specifying unit 520, a positioning unit 530, and a deforming unit 540, as illustrated in FIG. . The specifying unit 520 is similar to the specifying unit described above.

位置決め部530は、対象画像と参照画像とを位置合わせする。以上のように、参照画像セットにおける参照画像は、位置合わせと変形によって同一座標系を有する画像セットであってもよい。位置決め部530は、対象画像と参照画像セットのうちの1つまたは複数の参照画像(例えば、予め設定した代表参照画像、または対象画像との類似度に基づいて選定した位置合わせするための参照画像)とを位置合わせする。具体的には、本分野に既知の画像位置合わせ方法、例えば、相互情報に基づく方法を採用し、対象画像と参照画像との位置合わせを行うことができる。位置決め部530は、位置合わせ結果、例えば、伝達関数を変形部540に提供する。すなわち、位置決め部530は、医用画像と、複数の参照画像の各々とを位置決めする。   The positioning unit 530 positions the target image and the reference image. As described above, the reference image in the reference image set may be an image set having the same coordinate system by alignment and deformation. The positioning unit 530 is configured to perform one or more reference images of the target image and the reference image set (for example, a representative reference image set in advance, or a reference image for positioning selected based on the similarity with the target image). ) And position. Specifically, an image alignment method known in the art, for example, a method based on mutual information can be employed to align the target image with the reference image. The positioning unit 530 provides the alignment result, for example, a transfer function to the deformation unit 540. That is, the positioning unit 530 positions the medical image and each of the plurality of reference images.

変形部540は、位置決め部530の位置合わせ結果に基づいて対象画像に対して変形処理を行う。例えば、変形部540は、位置決め部530が特定した伝達関数に基づいて対象画像に対して再サンプリングを行い、参照画像と同一座標系を有する画像が得られる。すなわち、変形部540は、位置決め部530による位置決め結果に基づいて、医用画像を変形する。   The deformation unit 540 performs a deformation process on the target image based on the alignment result of the positioning unit 530. For example, the deforming unit 540 resamples the target image based on the transfer function specified by the positioning unit 530, and obtains an image having the same coordinate system as the reference image. That is, the deforming unit 540 deforms the medical image based on the positioning result by the positioning unit 530.

マッチング部510は、変形部540によって変形された対象画像に基づいて、例えば、所定の位置テンプレートに基づいて対象画像の関心領域と参照画像の相応サブ領域とのマッチングを行い、マッチング結果を特定部520に提供して対象画像と類似した参照画像を特定する。   The matching unit 510 performs matching between the region of interest of the target image and the corresponding sub-region of the reference image based on the target image deformed by the deforming unit 540, for example, based on a predetermined position template, and specifies a matching result. A reference image similar to the target image provided to 520 is identified.

図6に示すように、一実施形態による医用画像処理装置600は、マッチング部610、特定部620および選択部630を備える。特定部620は、上述した特定部と同様である。   As shown in FIG. 6, the medical image processing device 600 according to one embodiment includes a matching unit 610, a specifying unit 620, and a selecting unit 630. The specifying unit 620 is the same as the specifying unit described above.

選択部630は、ユーザ指示または所定モードに基づいて関心領域のうちの少なくとも1つを選択する。マッチング部610は、選択の関心領域について対象画像と参照画像とのマッチングを行う。   The selection unit 630 selects at least one of the regions of interest based on a user instruction or a predetermined mode. The matching unit 610 performs matching between the target image and the reference image for the selected region of interest.

例えば、多重白質損傷について多重硬化および血管疾患の識別診断を行う応用例において、選択部630は、ユーザ指示に基づいて、例えば、図3Aに示す領域314Cと314Dを関心領域として選択することができる。また、例えば、脊索腫と軟骨肉腫についての識別診断の上記の応用例において、選択部630は、例えば、ユーザの指示に基づいて図3Bに示す領域324を関心領域として選択することができる。   For example, in an application example of performing multiple diagnosis of multiple sclerosis and vascular disease for multiple white matter injuries, the selection unit 630 can select, for example, the regions 314C and 314D illustrated in FIG. 3A as regions of interest based on a user instruction. . Further, for example, in the above-described application example of the identification diagnosis of chordoma and chondrosarcoma, the selection unit 630 can select the region 324 illustrated in FIG. 3B as a region of interest based on, for example, a user's instruction.

また、所定モードにおいて、例えば、特定疾患類型について対象画像に基づいて参照画像を自動的に検索するモードで、選択部630は、予め設定した方案に基づいて位置テンプレートから相応した関心領域を選択することができる。   In a predetermined mode, for example, in a mode in which a reference image is automatically searched for a specific disease type based on a target image, the selection unit 630 selects a corresponding region of interest from a position template based on a preset scheme. be able to.

上記実施形態において、特定部は、マッチング部のマッチング結果に基づいて参照画像セットから対象画像との類似度が高い1つまたは複数の参照画像を特定する。特定部が特定した参照画像は、ユーザ、例えば、医師に提示される。そのため、一実施形態による医用画像処理装置700は、マッチング部710と特定部720だけでなく、表示部730も含むことができる。表示部730は、特定部720によって特定した参照画像を表示する。   In the above embodiment, the specifying unit specifies one or more reference images having a high degree of similarity to the target image from the reference image set based on the matching result of the matching unit. The reference image specified by the specifying unit is presented to a user, for example, a doctor. Therefore, the medical image processing apparatus 700 according to an embodiment may include the display unit 730 as well as the matching unit 710 and the specifying unit 720. The display unit 730 displays the reference image specified by the specifying unit 720.

他の実施形態において、画像処理装置は、例えば、出力部によって特定した参照画像を外部ディスプレイに提供してユーザに特定した参照画像を提示する。   In another embodiment, for example, the image processing apparatus provides the reference image specified by the output unit to the external display, and presents the specified reference image to the user.

特定した参照画像に基づいて、ユーザは、対象画像の種別を特定することができる。例えば、医師は、参照画像に基づいて対象画像に対して識別診断を行い、例えば、対象画像において反映した疾患類型等を特定する。   The user can specify the type of the target image based on the specified reference image. For example, a doctor performs identification diagnosis on a target image based on a reference image, and specifies, for example, a disease type or the like reflected in the target image.

図8に示すように、一実施形態による医用画像処理装置800は、マッチング部810と特定部820だけでなく、受付部830を備える。受付部830は、ユーザの入力に基づいて対象画像の種別を指定する。類型を指定した対象画像は、相応のデータベースに記憶することができる。   As shown in FIG. 8, the medical image processing apparatus 800 according to one embodiment includes a receiving unit 830 in addition to the matching unit 810 and the specifying unit 820. The receiving unit 830 specifies the type of the target image based on the user's input. The target image for which the type is specified can be stored in a corresponding database.

また、一実施形態によれば、医用画像処理装置800は、さらに更新部840を備え、種別を指定した対象画像を参照画像として参照画像セットに添加する。したがって、対象画像は、続く対象画像の参照画像とすることができる。   According to one embodiment, the medical image processing apparatus 800 further includes an updating unit 840, and adds a target image whose type is specified as a reference image to a reference image set. Therefore, the target image can be a reference image of a subsequent target image.

上記実施形態において、脳部医用画像を対象画像と参照画像との例としているが、しかしながら、ここに限定されていない。例えば、本発明の実施形態は、胸、腹腔などの部位を含む医用画像に適用できる。   In the above embodiment, the brain medical image is an example of the target image and the reference image, but is not limited thereto. For example, embodiments of the present invention can be applied to medical images including sites such as the chest and abdominal cavity.

また、上記の実施形態では、参照画像のサブ領域が予め設定される場合を説明したが、実施形態はこれに限定されるものではない。例えば、実施形態は、マッチングを行う度に、参照画像にサブ領域を設定し、設定したサブ領域を対象画像の関心領域とマッチングを行ってもよい。以下、この場合の医用画像処理装置について説明する。   Further, in the above embodiment, the case where the sub-region of the reference image is set in advance has been described, but the embodiment is not limited to this. For example, in the embodiment, each time the matching is performed, a sub-region may be set in the reference image, and the set sub-region may be matched with the region of interest of the target image. Hereinafter, the medical image processing apparatus in this case will be described.

例えば、医用画像処理装置は、位置決め部と、変形部と、第1設定部と、第2設定部と、検索部とを備える。位置決め部及び変形部は、位置決め部530及び変形部540とそれぞれ同様である。   For example, the medical image processing apparatus includes a positioning unit, a transformation unit, a first setting unit, a second setting unit, and a search unit. The positioning part and the deformation part are the same as the positioning part 530 and the deformation part 540, respectively.

第1設定部は、変形部によって変形された医用画像に第1関心領域を設定する。例えば、第1設定部は、変形された対象画像に、所定の位置テンプレートに基づいて、少なくとも一つの関心領域を設定する。なお、この処理は、上述した設定部230の処理と同様である。   The first setting unit sets a first region of interest in the medical image deformed by the deforming unit. For example, the first setting unit sets at least one region of interest on the deformed target image based on a predetermined position template. This processing is the same as the processing of the setting unit 230 described above.

第2設定部は、第1関心領域に対応する第2関心領域を、複数の参照画像の少なくとも2つに設定する。例えば、第2設定部は、関心領域に対応するサブ領域を、複数の参照画像の少なくとも1つに設定する。また、例えば、第2設定部は、位置テンプレートに含まれる関心領域に対応するサブ領域を、複数の参照画像の少なくとも1つに設定する。具体的には、対象画像は、変形部による変形によって参照画像と同一の座標系を有する画像に変形済みである。このため、例えば、第2設定部は、対象画像に設定された関心領域の座標を参照し、参照画像の同じ座標にサブ領域を設定する。   The second setting unit sets a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images. For example, the second setting unit sets a sub-region corresponding to the region of interest to at least one of the plurality of reference images. Further, for example, the second setting unit sets a sub-region corresponding to the region of interest included in the position template to at least one of the plurality of reference images. Specifically, the target image has already been transformed into an image having the same coordinate system as the reference image by the transformation performed by the transformation unit. Therefore, for example, the second setting unit refers to the coordinates of the region of interest set in the target image, and sets the sub-region at the same coordinates in the reference image.

検索部は、第2関心領域が設定された複数の参照画像から、第1関心領域内の画像に類似する参照画像を検索する。例えば、検索部は、第1関心領域内の画像に最も類似する参照画像を検索する。また、例えば、検索部は、第1関心領域の画像特徴と第2関心領域(サブ領域)の画像特徴との類似度に基づいて検索する。   The search unit searches for a reference image similar to the image in the first region of interest from the plurality of reference images in which the second region of interest is set. For example, the search unit searches for a reference image most similar to the image in the first region of interest. Further, for example, the search unit performs the search based on the similarity between the image feature of the first region of interest and the image feature of the second region of interest (sub-region).

このように、医用画像処理装置は、参照画像にサブ領域を設定し、設定したサブ領域を対象画像の関心領域とマッチングを行うこともできる。   As described above, the medical image processing apparatus can set the sub-region in the reference image and match the set sub-region with the region of interest of the target image.

なお、上記の例では、変形部が医用画像を変形する場合を説明したが、実施形態はこれに限定されるものではない。例えば、変形部は、参照画像を変形しても良い。この場合、医用画像処理装置において、位置決め部は、医用画像と、複数の参照画像の各々とを位置決めする。変形部は、位置決め部による位置決め結果に基づいて、複数の参照画像の少なくとも1つを変形する。第1設定部は、医用画像に第1関心領域を設定する。第2設定部は、第1関心領域に対応する第2関心領域を変形した複数の参照画像に設定する。検索部は、第2関心領域が設定された複数の参照画像から、第1関心領域内の画像に類似する参照画像を検索する。   In the above example, the case where the deforming unit deforms the medical image is described, but the embodiment is not limited to this. For example, the deformation unit may deform the reference image. In this case, in the medical image processing apparatus, the positioning unit positions the medical image and each of the plurality of reference images. The deformation unit deforms at least one of the plurality of reference images based on a positioning result by the positioning unit. The first setting unit sets a first region of interest in a medical image. The second setting unit sets the second region of interest corresponding to the first region of interest to a plurality of deformed reference images. The search unit searches for a reference image similar to the image in the first region of interest from the plurality of reference images in which the second region of interest is set.

また、本発明の実施形態は、多種の類型の医用画像に適用できる。磁気共鳴イメージング画像、コンピュータ断層イメージング画像、超音波イメージング画像、X線イメージング画像、陽電子断層イメージング画像などを含む。   Further, the embodiments of the present invention can be applied to various types of medical images. Includes magnetic resonance imaging images, computed tomography imaging images, ultrasound imaging images, X-ray imaging images, positron emission tomography images, and the like.

以上において、実施形態における医用画像処理装置に対する説明過程において、いくつかの処理または方法について記述した。以下、上記実施形態と重複しない場合、それらの方法について詳細な説明を行うこととする。なお、医用画像処理装置の説明過程において記述された方法は必ずしも上述した処理部を採用しなくても良く、または、上述した処理部により実行しなくても良い。例えば、ハードウエアおよび/またはファームウエアを一部として、または完全に使用して医用画像処理装置の実施形態を実現しても良く、以下に記述する医用画像処理方法もまた、完全にコンピュータ実行可能なプログラムにより実現しても良いし、医用画像処理装置のハードウエアおよび/またはファームウエアを採用する形態でも良い。   In the above, some processes or methods have been described in the description of the medical image processing apparatus according to the embodiment. Hereinafter, in the case where there is no overlap with the above embodiment, those methods will be described in detail. Note that the method described in the description process of the medical image processing apparatus does not necessarily need to employ the above-described processing unit, or may not be executed by the above-described processing unit. For example, embodiments of the medical image processing apparatus may be implemented using hardware and / or firmware as a part or completely, and the medical image processing method described below is also completely computer-executable. It may be realized by a simple program, or may be a mode that employs hardware and / or firmware of a medical image processing apparatus.

次に、図9を参照しながら本発明の実施形態による医用画像処理方法の過程例を説明する。   Next, an example of a process of the medical image processing method according to the embodiment of the present invention will be described with reference to FIG.

図9に示すように、本実施形態による医用画像処理方法は、対象画像と参照画像セットにおける参照画像とのマッチング結果を特定するステップS910を含む。ただし、対象画像の関心領域と参照画像の対応サブ領域とのマッチングによってマッチング結果を特定する。   As shown in FIG. 9, the medical image processing method according to the present embodiment includes step S910 of specifying a matching result between a target image and a reference image in a reference image set. However, the matching result is specified by matching the region of interest of the target image with the corresponding sub-region of the reference image.

ステップS920において、S910におけるマッチング結果に基づいて、対象画像との類似度が高い1つまたは複数の参照画像を特定する。   In step S920, one or more reference images having a high degree of similarity to the target image are specified based on the matching result in S910.

図示しないが、一実施形態による医用画像処理方法は、対象画像において少なくとも1つの関心領域を設定するステップをさらに含むことができる。   Although not shown, the medical image processing method according to an embodiment may further include setting at least one region of interest in the target image.

ただし、所定の位置テンプレートに基づいて関心領域を設定することができる。また、一実施形態による医用画像処理方法は、ユーザの入力に基づいて位置テンプレートを作成するステップをさらに含む。   However, the region of interest can be set based on a predetermined position template. In addition, the medical image processing method according to an embodiment further includes creating a position template based on a user input.

また、一実施形態による医用画像処理方法は、対象画像の関心領域の画像特徴を抽出するステップおよび参照画像セットにおける参照画像の対応サブ領域の画像特徴を記憶するステップを含む。相応的に、画像特徴の類似度に基づいて対象画像と参照画像とのマッチングを行うことができる。   Further, the medical image processing method according to one embodiment includes a step of extracting an image feature of a region of interest of the target image and a step of storing an image feature of a corresponding sub-region of the reference image in the reference image set. Accordingly, matching between the target image and the reference image can be performed based on the similarity of the image features.

また、一実施形態による医用画像処理方法は、対象画像と参照画像との位置合わせステップおよび位置合わせ結果に基づいて対象画像に対して変形処理を行うステップを含む。   Further, the medical image processing method according to one embodiment includes a step of aligning the target image with the reference image and a step of performing a deformation process on the target image based on the alignment result.

また、一実施形態による医用画像処理方法は、ユーザ指示または所定モードに基づいて関心領域のうちの少なくとも1つを選択するステップをさらに含むことができる。そして、選択した関心領域について対象画像と参照画像とのマッチングを行うことができる。   In addition, the medical image processing method according to an embodiment may further include selecting at least one of the regions of interest based on a user instruction or a predetermined mode. Then, matching between the target image and the reference image can be performed for the selected region of interest.

また、一実施形態による医用画像処理方法は、特定した参照画像を表示するステップをさらに含むことができる。   In addition, the medical image processing method according to an embodiment may further include displaying the specified reference image.

また、一実施形態による医用画像処理方法は、ユーザの入力に基づいて対象画像の種別を指定するステップを含むことができる。さらに、種別を指定した対象画像を参照画像として参照画像セットに添加するステップを含むことができる。   In addition, the medical image processing method according to an embodiment may include a step of specifying a type of the target image based on a user input. Further, the method can include a step of adding the target image whose type is specified to the reference image set as a reference image.

図10は、本発明の他の一実施形態による医用イメージングシステムの配置例を示すブロック図である。   FIG. 10 is a block diagram illustrating an arrangement example of a medical imaging system according to another embodiment of the present invention.

本発明の一実施形態による医用イメージングシステム1000は、医用画像処理装置1010を含む。医用画像処理装置1010は、上記実施形態に記述した医用画像処理装置の配置を備えることができる。例えば、医用イメージングシステム1000は、位置決め部と、変形部と、第1設定部と、第2設定部と、検索部とを備える。位置決め部は、医用画像と、複数の参照画像の各々とを位置決めする。変形部は、位置決め部による位置決め結果に基づいて、医用画像を変形する。第1設定部は、変形された医用画像に第1関心領域を設定する。第2設定部は、第1関心領域に対応する第2関心領域を、複数の参照画像の少なくとも1つに設定する。検索部は、第2関心領域が設定された参照画像から、第1関心領域内の画像に類似する参照画像を検索する。なお、医用イメージングシステム1000において、位置決め部、変形部、第1設定部、第2設定部、及び検索部は、全てが単一の装置に設置されてもよいし、各々が複数の装置に分散して設置されてもよい。なお、医用イメージングシステム1000は、医用画像処理システムの一例である。   The medical imaging system 1000 according to one embodiment of the present invention includes a medical image processing device 1010. The medical image processing device 1010 can include the arrangement of the medical image processing device described in the above embodiment. For example, the medical imaging system 1000 includes a positioning unit, a deforming unit, a first setting unit, a second setting unit, and a search unit. The positioning unit positions the medical image and each of the plurality of reference images. The deforming unit deforms the medical image based on the positioning result by the positioning unit. The first setting unit sets a first region of interest in the transformed medical image. The second setting unit sets a second region of interest corresponding to the first region of interest to at least one of the plurality of reference images. The search unit searches for a reference image similar to the image in the first region of interest from the reference image in which the second region of interest is set. In the medical imaging system 1000, all of the positioning unit, the deforming unit, the first setting unit, the second setting unit, and the search unit may be installed in a single device, or each may be distributed to a plurality of devices. It may be installed. Note that the medical imaging system 1000 is an example of a medical image processing system.

一例として、上述した医用画像処理方法の各ステップおよび上述した医用画像処理装置の各構成および/または部分はソフトウエア、ファームウエア、ハードウエアあるいはそれらの組み合わせとして実施しても良い。ソフトウエアあるいはファームウエアを介して実現した場合、上述した方法のソフトウエアプログラム(医用画像処理プログラム)を実施するため、メモリ媒体からあるいはネットワークを介して専用のハードウエア構造のコンピュータ(例えば、図11に示す汎用コンピュータ1100)へダウンロードして構成することができ、該コンピュータに各種プログラムがダウンロードされた状態で、各種機能等を実施することができる。   As an example, each step of the medical image processing method described above and each configuration and / or part of the medical image processing apparatus described above may be implemented as software, firmware, hardware, or a combination thereof. When realized via software or firmware, a computer having a dedicated hardware structure (for example, FIG. 11) from a memory medium or via a network to execute a software program (medical image processing program) of the above-described method. To a general-purpose computer 1100), and various functions can be performed in a state where various programs are downloaded to the computer.

図11において、演算処理部(即ち、CPU)1101は、読み取り専用メモリ(ROM)1102の中に記憶されているプログラム、あるいは、メモリ部1108から読み書き兼用メモリ(RAM)1103へ書き込まれたプログラムに基づいて、各種処理を実施する。RAM1103では、必要に応じて、CPU1101が各種処理等を実施するときに必要なデータも記憶しておく。CPU1101、ROM1102およびRAM1103は、綜合ライン1104を経由してそれぞれ接続されている。入力/出力インターフェース1105も、綜合ライン1104につながっている。   In FIG. 11, an arithmetic processing unit (that is, CPU) 1101 executes a program stored in a read-only memory (ROM) 1102 or a program written from a memory unit 1108 to a read / write memory (RAM) 1103. Various processes are performed based on the above. The RAM 1103 also stores data necessary for the CPU 1101 to perform various processes, if necessary. The CPU 1101, the ROM 1102, and the RAM 1103 are connected via an integrated line 1104, respectively. An input / output interface 1105 is also connected to the integrated line 1104.

下記の各部は、入力/出力インターフェース1105に接続されている:入力部1106(キーボード、マウス等を含む)、出力部1107(モニタ、例えば、ブラウン管(CRT)、液晶モニタ(LCD)等や、スピーカ等を含む)、メモリ部1108(ハードディスクを含む)、通信部1109(ネットワークインターフェースカード、例えば、LANカード、モデム等)。通信部1109は、ネットワーク(例えば、インターネット)を介して通信処理を実施する。必要に応じて、ドライバ1110も入力/出力インターフェース1105に接続可能である。取り外し可能な媒体1111は、例えば、磁気ディスク、光ディスク、MO、半導体メモリ等であって、必要に応じてドライバ1110に装着され、必要に応じてコンピュータプログラムを読み出して、メモリ部1108へダウンロードされる。   The following units are connected to an input / output interface 1105: an input unit 1106 (including a keyboard, a mouse, and the like), an output unit 1107 (a monitor, for example, a cathode ray tube (CRT), a liquid crystal monitor (LCD), a speaker, and the like). Etc.), a memory unit 1108 (including a hard disk), a communication unit 1109 (a network interface card, for example, a LAN card, a modem, etc.). The communication unit 1109 performs communication processing via a network (for example, the Internet). If necessary, a driver 1110 can also be connected to the input / output interface 1105. The removable medium 1111 is, for example, a magnetic disk, an optical disk, an MO, a semiconductor memory, or the like. The removable medium 1111 is mounted on the driver 1110 as needed, reads out a computer program as needed, and is downloaded to the memory unit 1108. .

ソフトウエアを介して上述したシステム処理を実施する場合、ネットワーク(例えば、インターネット)あるいは記憶媒体(例えば、取り外し可能な媒体1111)からソフトウエアを構成するプログラムをダウンロードしても良い。   When performing the above-described system processing via software, a program constituting software may be downloaded from a network (for example, the Internet) or a storage medium (for example, a removable medium 1111).

当業者においては、このような記憶媒体は図11に示すようなプログラムを記憶した記憶媒体は、装置とは離れたところからユーザにプログラムを提供する取り外し可能な媒体1111に限らない。取り外し可能な媒体1111の例としては、磁気ディスク(フロッピー(登録商標)ディスク、光ディスク(CD−ROMやDVDを含む)、磁気光ディスク(MiniDisc(MD、登録商標)を含む)、半導体記憶器を含む。また、記憶媒体はROM1102であっても良く、メモリ部1108に含まれるハードディスク等、その中にプログラムが記憶され、それらを含む装置からユーザへプログラムが送られる形態でも良い。   For those skilled in the art, such a storage medium storing a program as shown in FIG. 11 is not limited to a removable medium 1111 which provides a user with a program from a place away from the apparatus. Examples of the removable medium 1111 include a magnetic disk (floppy (registered trademark) disk, an optical disk (including CD-ROM and DVD), a magnetic optical disk (including MiniDisc (MD, registered trademark)), and a semiconductor storage device. Further, the storage medium may be the ROM 1102, or a form in which the program is stored in a hard disk or the like included in the memory unit 1108, and the program is sent from a device including the program to the user.

本発明では、更に、メモリとして、機器読み取り可能なコマンドコードを記憶しているプログラム製品でも応用でき、前記コマンドコードが機器を介して読み取られると、本発明の実施形態の方法が実施される。   According to the present invention, a program product storing a device-readable command code as a memory can be applied. When the command code is read via a device, the method according to the embodiment of the present invention is performed.

前記機器読み取り可能なコマンドコードを記憶しているプログラム製品を受け入れるための記憶媒体も本発明に適用できる。その記憶媒体は、ハードディスク、光ディスク、磁気光ディスク、メモリカード、メモリスティックには限定されない。   A storage medium for receiving a program product storing the device-readable command code is also applicable to the present invention. The storage medium is not limited to a hard disk, an optical disk, a magnetic optical disk, a memory card, and a memory stick.

上記の具体的実施形態においては、一つの実施形態に示す特徴について、同様の方法を一つあるいは複数の他の実施方法の中で適用したり、その他の実施方法と組み合わせたり、あるいはその他の実施方法における特徴に替えるといったことも可能である。   In the specific embodiments described above, features similar to those of one embodiment may be applied in one or more other implementations, combined with other implementations, or implemented in other implementations. It is also possible to substitute features in the method.

さらに、“包含する/含む”といった用語を使用したときは、特徴・構成・ステップあるいは構造の存在を指し示す。ただし、その他の特徴・構成・ステップあるいは構造の存在や付加の排除を意味するものではない。   Further, the use of the term "include / include" indicates the presence of a feature, configuration, step or structure. However, this does not mean that other features, configurations, steps, or structures are present or excluded.

上記実施形態においては、数字構成の図番記号を用いて各ステップや構成を表記している。ただし、これらの図番記号は単なる説明や画図の都合への考慮によるものであって、その順序やいかなる他の限定を表すものではない、と当業者は理解すべきである。   In the above embodiment, each step or configuration is described using a figure symbol of a numeric configuration. However, those skilled in the art should understand that these figure symbols are merely for the sake of explanation and illustration, and do not represent the order or any other limitation.

このほか、本実施形態の方法は、詳細な説明の欄において説明された時間順序に沿って実施されるものに限らず、その他の時間順序に沿って、同時に、あるいは独立して実施されても良い。それゆえ、本願の詳細な説明において説明された方法の実施順序は、本実施形態の技術範囲に対する構成を制限するものではない。   In addition, the method of the present embodiment is not limited to being performed in the time sequence described in the detailed description section, and may be performed simultaneously or independently in other time sequences. good. Therefore, the order of performing the methods described in the detailed description of the present application does not limit the configuration of the embodiment in the technical scope.

上記では、既に、本実施形態の具体的実施形態の説明をもって、本実施形態の説明を行っているものの、前記のすべての実施形態はすべて単なる例示に過ぎず、限定するものではない。当業者は、特許請求の主旨や範囲において、本実施形態の各種手直し・改良あるいは同等物の設計を行うことが可能である。これらの手直し・改良あるいは同等物は、本実施形態の保護範囲内に含まれるものである。   In the above, the present embodiment has already been described with the description of the specific embodiment of the present embodiment. However, all the above-described embodiments are merely examples and do not limit the present invention. Those skilled in the art can make various modifications and improvements of the present embodiment or design equivalents within the spirit and scope of the claims. These modifications, improvements or equivalents are included in the protection scope of the present embodiment.

100 医用画像処理装置
110 マッチング部
120 特定部
Reference Signs List 100 medical image processing device 110 matching unit 120 specifying unit

Claims (16)

医用画像と、複数の参照画像の各々とを位置決めする位置決め部と、
前記位置決め部による位置決め結果に基づいて、前記医用画像を変形する変形部と、
変形された前記医用画像に第1関心領域を設定する第1設定部と、
前記第1関心領域に対応する第2関心領域を、前記複数の参照画像の少なくとも2つに設定する第2設定部と、
前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する検索部と、
を備える、医用画像処理装置。
A medical image, a positioning unit that positions each of the plurality of reference images,
Based on a positioning result by the positioning unit, a deforming unit that deforms the medical image,
A first setting unit that sets a first region of interest in the deformed medical image;
A second setting unit that sets a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images;
A search unit that searches a reference image in which the second region of interest is set, for a reference image similar to an image in the first region of interest;
A medical image processing apparatus comprising:
医用画像と、複数の参照画像の各々とを位置決めする位置決め部と、
前記位置決め部による位置決め結果に基づいて、前記複数の参照画像の少なくとも1つを変形する変形部と、
前記医用画像に第1関心領域を設定する第1設定部と、
前記第1関心領域に対応する第2関心領域を、変形された参照画像に設定する第2設定部と、
前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する検索部と、
を備える、医用画像処理装置。
A medical image, a positioning unit that positions each of the plurality of reference images,
A deforming unit that deforms at least one of the plurality of reference images based on a positioning result by the positioning unit;
A first setting unit that sets a first region of interest in the medical image;
A second setting unit that sets a second region of interest corresponding to the first region of interest to a deformed reference image;
A search unit that searches a reference image in which the second region of interest is set, for a reference image similar to an image in the first region of interest;
A medical image processing apparatus comprising:
前記検索部は、前記第1関心領域内の画像に最も類似する参照画像を検索する、
請求項1又は2に記載の医用画像処理装置。
The search unit searches for a reference image most similar to an image in the first region of interest,
The medical image processing device according to claim 1.
前記第1設定部は、前記第1関心領域を複数設定し、
前記第2設定部は、前記第1設定部によって設定された複数の前記第1関心領域の各々に対応する複数の前記第2関心領域を設定する、
請求項1又は2に記載の医用画像処理装置。
The first setting unit sets a plurality of the first regions of interest,
The second setting unit sets a plurality of second regions of interest corresponding to each of the plurality of first regions of interest set by the first setting unit.
The medical image processing device according to claim 1.
前記複数の第1関心領域のうち少なくとも1つを選択する選択部を更に備え、
前記検索部は、前記選択部によって選択された第1関心領域内の画像の各々に最も類似する参照画像をそれぞれ検索する、
請求項4に記載の医用画像処理装置。
A selecting unit that selects at least one of the plurality of first regions of interest;
The search unit searches for a reference image most similar to each of the images in the first region of interest selected by the selection unit.
The medical image processing device according to claim 4.
前記医用画像と、前記検索部によって検索された参照画像とを表示部に同時に表示させる表示制御部を更に備える、
請求項1〜5のいずれか一つに記載の医用画像処理装置。
The medical image, further comprising a display control unit that simultaneously displays the reference image searched by the search unit on a display unit,
The medical image processing apparatus according to claim 1.
前記参照画像は、アトラス画像である、
請求項1〜6のいずれか一つに記載の医用画像処理装置。
The reference image is an atlas image,
The medical image processing apparatus according to claim 1.
前記第1設定部は、複数の前記第1関心領域の各々が所定の位置関係で配置された位置テンプレートに基づいて、当該複数の第1関心領域のうち少なくとも一つを設定する、
請求項1〜7のいずれか一つに記載の医用画像処理装置。
The first setting unit sets at least one of the plurality of first regions of interest based on a position template in which each of the plurality of first regions of interest is arranged in a predetermined positional relationship.
The medical image processing apparatus according to claim 1.
操作者の入力に基づいて、前記位置テンプレートを作成する作成部を更に備える、
請求項8に記載の医用画像処理装置。
The apparatus further includes a creating unit that creates the position template based on an input of an operator,
The medical image processing apparatus according to claim 8.
前記医用画像に設定された第1関心領域に含まれる画像の特徴である第1画像特徴を抽出する抽出部と、
前記参照画像に設定された第2関心領域に含まれる画像の特徴である第2画像特徴を記憶する記憶部と
を更に備え、
前記検索部は、前記第1画像特徴と前記第2画像特徴との類似度に基づいて検索する、
請求項1〜9のいずれか一つに記載の医用画像処理装置。
An extraction unit configured to extract a first image feature that is a feature of an image included in a first region of interest set in the medical image;
A storage unit that stores a second image feature that is a feature of the image included in the second region of interest set in the reference image,
The search unit searches based on a similarity between the first image feature and the second image feature.
The medical image processing apparatus according to claim 1.
操作者の入力に基づいて、前記医用画像の種別の指定を受け付ける受付部と、
前記種別が指定された医用画像を、前記参照画像として追加する更新部とを更に備える、
請求項1〜10のいずれか一つに記載の医用画像処理装置。
A receiving unit that receives designation of a type of the medical image based on an input of an operator,
An update unit that adds the medical image whose type is specified as the reference image,
The medical image processing apparatus according to claim 1.
前記医用画像及び前記複数の参照画像は、脳が撮影された画像を含む、
請求項1〜11のいずれか一つに記載の医用画像処理装置。
The medical image and the plurality of reference images include an image of a brain,
A medical image processing apparatus according to claim 1.
前記医用画像及び前記複数の参照画像は、磁気共鳴イメージング画像、コンピュータ断層イメージング画像、超音波イメージング画像、又はX線イメージング画像を含む、
請求項1〜12のいずれか一つに記載の医用画像処理装置。
The medical image and the plurality of reference images include a magnetic resonance imaging image, a computed tomography imaging image, an ultrasound imaging image, or an X-ray imaging image,
The medical image processing apparatus according to claim 1.
医用画像と、複数の参照画像の各々とを位置決めし、
位置決め結果に基づいて、前記医用画像を変形し、
変形された前記医用画像における第1関心領域設定を操作者の入力に基づいて受け付け
前記第1関心領域に対応する第2関心領域を、前記複数の参照画像の少なくとも2つに設定し、
前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する
ことを含む、医用画像処理方法。
Positioning the medical image and each of the plurality of reference images,
Based on the positioning result, deform the medical image,
Acceptance based setting of the first region of interest definitive to modified the medical image to an input of the operator,
Setting a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images;
A medical image processing method, comprising: searching a reference image in which the second region of interest is set, for a reference image similar to an image in the first region of interest.
医用画像と、複数の参照画像の各々とを位置決めする位置決め部と、
前記位置決め部による位置決め結果に基づいて、前記医用画像を変形する変形部と、
変形された前記医用画像に第1関心領域を設定する第1設定部と、
前記第1関心領域に対応する第2関心領域を、前記複数の参照画像の少なくとも2つに設定する第2設定部と、
前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する検索部と、
を備える、医用画像処理システム。
A medical image, a positioning unit that positions each of the plurality of reference images,
Based on a positioning result by the positioning unit, a deforming unit that deforms the medical image,
A first setting unit that sets a first region of interest in the deformed medical image;
A second setting unit that sets a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images;
A search unit that searches a reference image in which the second region of interest is set, for a reference image similar to an image in the first region of interest;
A medical image processing system comprising:
医用画像と、複数の参照画像の各々とを位置決めし、
位置決め結果に基づいて、前記医用画像を変形し、
変形された前記医用画像に第1関心領域を設定し、
前記第1関心領域に対応する第2関心領域を、前記複数の参照画像の少なくとも2つに設定し、
前記第2関心領域が設定された参照画像から、前記第1関心領域内の画像に類似する参照画像を検索する
各処理をコンピュータに実行させる、医用画像処理プログラム。
Positioning the medical image and each of the plurality of reference images,
Based on the positioning result, deform the medical image,
Setting a first region of interest in the transformed medical image,
Setting a second region of interest corresponding to the first region of interest to at least two of the plurality of reference images;
A medical image processing program that causes a computer to execute each process of searching for a reference image similar to an image in the first region of interest from a reference image in which the second region of interest is set.
JP2015224265A 2015-02-12 2015-11-16 Medical image processing apparatus, medical image processing method, medical image processing system, and medical image processing program Active JP6645810B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/014,130 US9905006B2 (en) 2015-02-12 2016-02-03 Medical image processing apparatus, medical image processing method, and medical imaging system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201510075956.2 2015-02-12
CN201510075956.2A CN105989092A (en) 2015-02-12 2015-02-12 Medical image processing equipment, medical image processing method and medical imaging system

Publications (2)

Publication Number Publication Date
JP2016147046A JP2016147046A (en) 2016-08-18
JP6645810B2 true JP6645810B2 (en) 2020-02-14

Family

ID=56691477

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015224265A Active JP6645810B2 (en) 2015-02-12 2015-11-16 Medical image processing apparatus, medical image processing method, medical image processing system, and medical image processing program

Country Status (2)

Country Link
JP (1) JP6645810B2 (en)
CN (1) CN105989092A (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108171712B (en) * 2016-12-07 2022-02-11 富士通株式会社 Method and device for determining image similarity
JP2019017867A (en) * 2017-07-20 2019-02-07 株式会社東芝 Information processing apparatus, information processing system, and program
JP7098288B2 (en) * 2017-08-07 2022-07-11 キヤノン株式会社 Radiation imaging system
CN107495978B (en) * 2017-09-20 2021-01-12 上海联影医疗科技股份有限公司 X-ray photography system and image acquisition method
CN110772280B (en) * 2018-07-31 2023-05-23 佳能医疗系统株式会社 Ultrasonic diagnostic apparatus and method, and image processing apparatus and method
CN111223103B (en) * 2018-11-23 2023-11-21 佳能医疗系统株式会社 Medical image diagnosis device and medical imaging device
CN110598696B (en) * 2019-08-20 2023-06-30 上海联影医疗科技股份有限公司 Medical image scanning and positioning method, medical image scanning method and computer equipment
CN110647886A (en) 2019-09-19 2020-01-03 北京百度网讯科技有限公司 Interest point marking method and device, computer equipment and storage medium
CN112465755B (en) * 2020-11-18 2021-09-10 熵智科技(深圳)有限公司 Initial sub-area subdivision method and device, computer equipment and storage medium
CN113409312B (en) * 2021-08-03 2021-11-02 广东博创佳禾科技有限公司 Image processing method and device for biomedical images

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000185036A (en) * 1998-12-24 2000-07-04 Toshiba Corp Medical image display device
JP2000342558A (en) * 1999-06-04 2000-12-12 Konica Corp Image positioning processor and inter-picture arithmetic processor
JP4021179B2 (en) * 2000-11-29 2007-12-12 富士通株式会社 Diagnosis support program, computer-readable recording medium storing diagnosis support program, diagnosis support apparatus, and diagnosis support method
JP5366356B2 (en) * 2005-04-15 2013-12-11 株式会社東芝 Medical image processing apparatus and medical image processing method
JP4912015B2 (en) * 2006-04-05 2012-04-04 富士フイルム株式会社 Similar image retrieval apparatus and method, and program
US20080004519A1 (en) * 2006-06-15 2008-01-03 Theriault Richard H System for and method of performing a medical evaluation
JP4026158B1 (en) * 2006-09-27 2007-12-26 国立大学法人岐阜大学 Interpretation support device, interpretation support method and program
CN101053531A (en) * 2007-05-17 2007-10-17 上海交通大学 Early tumor positioning and tracking method based on multi-mold sensitivity intensifying and imaging fusion
JP5835680B2 (en) * 2007-11-05 2015-12-24 株式会社東芝 Image alignment device
JP5558793B2 (en) * 2009-11-30 2014-07-23 株式会社日立メディコ Image processing method, image processing apparatus, and program
JP2011118543A (en) * 2009-12-01 2011-06-16 Shizuoka Prefecture Case image retrieval device, method and program
CN103607947B (en) * 2010-08-13 2017-07-18 史密夫和内修有限公司 The detection of anatomic landmark
US20120253170A1 (en) * 2011-03-29 2012-10-04 Samsung Electronics Co., Ltd. Method and apparatus for generating medical image of body organ by using 3-d model
JP5706389B2 (en) * 2011-12-20 2015-04-22 富士フイルム株式会社 Image processing apparatus, image processing method, and image processing program
JP6023091B2 (en) * 2012-02-02 2016-11-09 株式会社日立製作所 Medical image diagnostic apparatus and region of interest setting method thereof
CN103353879B (en) * 2013-06-18 2020-06-02 北京智谷睿拓技术服务有限公司 Image processing method and apparatus

Also Published As

Publication number Publication date
CN105989092A (en) 2016-10-05
JP2016147046A (en) 2016-08-18

Similar Documents

Publication Publication Date Title
JP6645810B2 (en) Medical image processing apparatus, medical image processing method, medical image processing system, and medical image processing program
US9905006B2 (en) Medical image processing apparatus, medical image processing method, and medical imaging system
US10366785B2 (en) Control method, information terminal, recording medium, and determination method
CN106170799B (en) Extracting information from images and including information in clinical reports
US9842270B2 (en) Apparatus and method for providing additional information for each region of interest
US9336457B2 (en) Adaptive anatomical region prediction
WO2014196069A1 (en) Image processing device and image processing method
US20160335394A1 (en) Diagnosis support apparatus and diagnosis support method
US10653378B2 (en) Image retrieval apparatus and image retrieval method
US10748282B2 (en) Image processing system, apparatus, method and storage medium
JP2014171889A (en) Image segmentation apparatus, medical image diagnostic apparatus and image segmentation method
CN101019152A (en) System and method for loading timepoints for analysis of disease progression or response to therapy
US20180064409A1 (en) Simultaneously displaying medical images
US11682115B2 (en) Atlas-based location determination of an anatomical region of interest
US20180005378A1 (en) Atlas-Based Determination of Tumor Growth Direction
EP3262605A1 (en) Adaptation of image data sets to an updated atlas-based reference system
US9361701B2 (en) Method and system for binary and quasi-binary atlas-based auto-contouring of volume sets in medical images
EP3954277A1 (en) Medical document generation device, method, and program
US9147098B2 (en) Image processing apparatus, image processing method, and computer program storage medium
US10978190B2 (en) System and method for viewing medical image
US20230032941A1 (en) Image processing apparatus, image processing method, and non-transitory storage medium
US9367893B2 (en) Diagnosis assistance apparatus, method and program
US9292762B2 (en) Region extraction system
JP2016224793A (en) Medical diagnosis support system, medical information display device, medical information management device and medical image processing program
US20210256741A1 (en) Region correction apparatus, region correction method, and region correction program

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160513

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20160929

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161021

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190820

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191017

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200109

R150 Certificate of patent or registration of utility model

Ref document number: 6645810

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150