JP6547612B2 - 画像処理装置、画像処理方法、および、画像処理装置を備える超音波診断装置 - Google Patents

Description

本発明は、画像処理装置、画像処理方法、および、当該画像処理装置を備える超音波診断装置に関し、特に、画像診断における血流の評価に関する。

近年、関節リウマチをはじめとする関節疾患の評価に画像診断を行うことが一般的になりつつある。関節疾患の評価を行うための画像診断として、血流の存在する領域を特定し、疾患に起因する新生血管の有無を判定することが行われている。
血流の存在する領域を特定する方法としては、例えば、超音波診断装置による超音波ドプラ画像を取得する方法がある。また、例えば、血管造影剤を被検者に投与して断層画像を取得する方法がある（以下、このような血流の位置と形状を示す画像を「血流画像」と呼ぶ）。

しかしながら、血流画像に示された血流は血管の存在を示しているに過ぎない。そのため、画像診断として、血流が新生血管を示すものであるか、疾患に無関係な血管、例えば、正常な組織の中にある血管や疾患の発生前から存在していた血管（以下、これらをまとめて「既存血管」と呼ぶ）を示すものであるかを評価することが重要である。
血流が新生血管を示すか否かを評価する方法としては、例えば、特許文献１に開示されているように、血流画像に画像処理を行うことにより、定量的に評価指標を示す方法がある。特許文献１に開示の技術では、超音波ドプラ画像にノイズ低減処理などのフィルタ処理を行い、フィルタ特性とフィルタ処理による超音波ドプラ画像の変化率との関係から、超音波ドプラ画像に撮像された血流の定量的な評価を図っている。この方法は、新生血管が既存血管より微細な構造であることが多いという解剖学的な知見に基づくものであり、かつ、微細構造が多い画像ほど弱いノイズ低減フィルタでも変化する、すなわち、変化率のフィルタ特性に対する依存性が高いことを利用している。そのため、変化率のフィルタ特性に対する依存性が高い超音波ドプラ画像を、微細構造が多いという理由から、新生血管を撮像したものであると評価している。

特開２０１３−１４４０４９号公報

しかしながら、特許文献１に開示の技術では、解剖学的な知見のうち、新生血管が既存血管より微細な構造であることが多いことしか用いておらず、かつ、微細構造を有する血流を新生血管であると画一的に判断している。そのため、特許文献１に開示の技術では、微細構造が少ない新生血管や、微細構造が多い既存血管などを正しく評価できず、解剖学的な他の知見を用いるためには、評価結果が適切であるか検査者が再評価する必要がある。さらに、超音波ドプラ画像に撮像されたすべての血流を評価の対象としているため、１つの超音波ドプラ画像に複数の血管が撮像されている場合に、それぞれを個別に評価することができない。

本開示は、上記課題に鑑みてなされたものであり、血流画像中の血流のそれぞれを、その形状以外の要素についても評価することで、新生血管であるか否かの評価を、より確度の高い方法で行う画像処理装置、画像処理方法、および、画像処理装置を備えた超音波診断装置を提供することを目的とする。

本開示の一態様に係る画像処理装置は、被検体内の血流を表す血流領域をマッピングした血流画像を取得する血流画像取得部と、前記被検体内の組織を撮像した断層画像を取得する断層画像取得部と、前記血流画像にマッピングされた血流領域のそれぞれについて、血流領域固有の特性を示す第１の特徴量と、前記断層画像中の組織の像と当該血流領域との関係から導き出される第２の特徴量とを、前記血流画像と前記断層画像とから抽出する特徴量抽出部と、前記第１の特徴量と前記第２の特徴量との双方から、前記血流領域のそれぞれが新生血管を示すものであるか否かを評価する血流評価部とを備えることを特徴とする。

本開示によれば、上記構成により、血流画像内の各血流領域について、その特性を示す第１の特徴量と、組織との関係を示す第２の特徴量との双方を用いて、新生血管か否かの評価を行うことができる。そのため、各血流領域に示される血管が新生血管であるか否かの評価を、より確度の高い方法で評価することができる。

実施の形態１に係る画像処理装置１０のブロック図である。 実施の形態１に係る画像処理装置１０の動作を示すフローチャートである。 実施の形態１に係る組織の特定動作を示すフローチャートである。 （ａ）は、実施の形態１に係る断層画像の例である。（ｂ）は、実施の形態１に係る断層画像から抽出された組織の例である。 （ａ）は、実施の形態１に係る血流画像としてのパワードプラ画像の例である。（ｂ）は、実施の形態１に係る血流画像としてのカラードプラ画像の例である。 （ａ）は、実施の形態１に係る血流領域の例である。（ｂ）および（ｃ）は、実施の形態１に係る血流領域の相対特徴量を示す模式図である。 （ａ）は、実施の形態１に係る血流領域の自己特徴量の例である。（ｂ）は、実施の形態１に係る血流領域の相対特徴量の例である。 実施の形態１に係る相対特徴量の抽出動作を示すフローチャートである。 実施の形態１に係る血流領域の評価動作を示すフローチャートである。 実施の形態１に係る血流領域の評価に用いる機械学習の概念を示した模式図である。 変形例に係る血流評価部５４のブロック図である。 変形例に係る血流領域の評価動作を示すフローチャートである。 実施の形態２に係る超音波診断装置５００のブロック図である。 実施の形態２に係る超音波診断装置５００の動作を示すフローチャートである。 （ａ）、（ｂ）、および、（ｃ）は、実施の形態２に係る評価画像の例である。

以下、実施の形態に係る画像処理装置、および、画像処理装置を備えた超音波診断装置について図面を用いて詳細に説明する。
≪実施の形態１≫
実施の形態１に係る画像処理装置１０のブロック図を図１に示す。画像処理装置１０は、画像取得部２０、特徴量抽出部３０、基準情報格納部４０、血流評価部５０を備える回路である。

画像取得部２０は、血流画像と、断層画像との入力を受け付ける。断層画像は、被検体の内部に設定された平面状の対象領域を撮像した画像であり、例えば、超音波Ｂモード画像、ＣＴ（コンピュータ断層撮影）などのＸ線断層画像、ＭＲＩ（核磁気共鳴）を用いて撮像した画像である。断層画像には、皮膚表面、骨表面等の組織を特定できる情報が少なくとも含まれる。一方、血流画像は、断層画像と同一の対象領域における被検体内の血流を示す画像であり、例えば、超音波ドプラ画像、ＭＲＩで撮像した画像などの被検体内の動き（血流）をとらえた画像、または、被検者に造影剤を投与した上で撮像した断層画像（以下、「造影断層画像」という）である。血流画像には、被検体内で動きのある領域、または、血管造影剤の像など、対象領域に対する血管の断面を特定できる情報が少なくとも含まれる。なお、血流画像と断層画像は同一の座標系を用いる。すなわち、血流画像内のある座標と、断層画像内の同一の座標とは、被検体内の同一の点に対応する。そのため、断層画像と血流画像とは、取得時間が同時または近接していることが好ましい。なお、血流画像の対象領域と断層画像の対象領域は同一の平面上であればよく、血流画像と断層画像とで座標系が一致していなくてもよいが、座標系を対応付けるための情報が既知である必要がある。このとき、画像取得部２０は対応関係を用いて、血流画像または断層画像のいずれか又は両方の座標変換を行って血流画像と断層画像との座標系を一致させる。なお、血流画像と断層画像とは同一の画像であってもよく、例えば、１つの造影Ｂモード画像や造影ＣＴ画像を血流画像と断層画像との両方に用いてもよい。また、血流画像と断層画像とのいずれか一方、または両方が動画であってもよく、この場合、血流画像と断層画像とで対象領域が同一となるように各動画から１フレームを抜き出し、当該フレームを血流画像ないし断層画像として使用する。画像取得部２０は、血流画像と断層画像とを特徴量抽出部３０に出力する。

特徴量抽出部３０は、血流画像と断層画像から、血流領域の特性を示す特徴量と、組織の像と血流領域との関係を示す特徴量とを抽出する。特徴量抽出部３０は、組織特定部３１、血流領域特定部３２、自己特徴量抽出部３３、相対特徴量抽出部３４を備える。
組織特定部３１は、断層画像から皮膚表面、骨表面等の組織の像を特定する。具体的には、組織特定部３１は、エッジの強調処理を行った後、エッジの検出処理を行い、検出したエッジのそれぞれがどの組織の像であるかを特定する。エッジの強調処理としては、機械的に抽出したエッジを断層画像に合成する方法を用いることができる。機械的にエッジを抽出する方法は、例えば、Ｓｏｂｅｌフィルタ、二次微分法、二値化処理、または、Ｓｏｂｅｌオペレータもしくはラプラシアンフィルタを用いる方法、Ｃａｎｎｙ法などを用いる方法がある。また、エッジの検出処理としては、例えば、動的計画法を用いることができる。組織特定部３１は、解剖学的見地に基づき、深さ方向における各エッジの位置関係に基づいて各エッジがどの組織に対応するものであるかを特定する。特定された組織の情報は、相対特徴量抽出部３４に出力される。

血流領域特定部３２は、血流画像から血流領域を特定する。例えば、血流画像がパワードプラ画像やカラードプラ画像などの超音波ドプラ画像である場合、血流の流速や向き、パワーを無視し、血流の存在する領域を血流領域として特定する。パワードプラ画像は、血流のパワーを色で示した画像であり、血流の存在する領域が、そのパワーに応じた色で彩色されている。また、カラードプラ画像は、血流の向きが超音波探触子に近づく向きか遠ざかる向きかを色相で、速さを色の鮮やかさで示した画像であり、血流の存在する領域が、その向きと速度に応じた色で彩色されている。したがって、パワードプラ画像においてもカラードプラ画像においても、彩色されている場所には血流が存在し、彩色されていない場所には血流が存在しない。そのため、パワードプラ画像やカラードプラ画像から、色を無視して彩色部分だけを抽出し、抽出した個々の塊を１つの血流領域として特定する。また、例えば、血流画像が造影断層画像である場合、濃く描画された造影剤の像を抽出し、抽出した個々の塊を１つの血流領域として特定する。なお、超音波を用いて撮像した造影断層画像である場合、造影剤の像は高調波成分に基づくため、高調波成分を抽出することで造影剤の像を抽出するとしてもよい。特定された血流領域それぞれの情報は、自己特徴量抽出部３３と相対特徴量抽出部３４とに出力される。

自己特徴量抽出部３３は、血流領域特定部３２が特定した血流領域のそれぞれについて、その形状や面積等の特性に基づく特徴量（以下、「自己特徴量」と呼ぶ）を抽出する。抽出する自己特徴量は、例えば、血流領域の面積や血流領域の幅である。抽出された自己特徴量は、血流評価部５０に出力される。
相対特徴量抽出部３４は、血流領域特定部３２が特定した血流領域のそれぞれについて、組織特定部３１が特定した皮膚表面、骨表面等の組織との関係、すなわち、１以上の組織を基準とした相対的な位置や向きなど配置に基づく特徴量（以下、「相対特徴量」と呼ぶ）を抽出する。抽出する相対特徴量は、例えば、関節中心部からの水平距離や、血流領域と骨表面または皮膚表面との形状一致度である。基準となる組織は、後述する基準情報格納部４０に格納されている、新生血管か否かが既知である血流領域（以下、「参照血流領域」と呼ぶ）の特徴量と同じ基準を使用する。したがって、参照血流領域の相対特徴量が皮膚表面を基準としている場合、皮膚表面を基準とした相対特徴量を抽出し、参照血流領域の相対特徴量が最近接の骨表面を基準としている場合、最近接の骨表面を基準とした相対特徴量を抽出する。抽出された相対特徴量は血流評価部５０に出力される。

基準情報格納部４０は、１以上の参照血流領域について、短軸断面画像か長軸断面画像かの情報、自己特徴量、相対特徴量、新生血管を示すものであるか否かの情報、の４つを組み合わせたデータを格納している。なお、短軸断面画像とは、血管の伸びる向きに対して交差する面で描画した画像であり、長軸断面画像とは、血管の伸びる向きを含む面で描画した画像である。基準情報格納部４０は、例えば、ＲＡＭ、フラッシュメモリ、ハードディスク、光学ディスクなどの記憶媒体で実現される。なお、基準情報格納部４０は、画像処理装置１０の他の要素の内部に実現されてもよく、例えば、血流評価部５０の一部であってもよい。また、基準情報格納部４０は、画像処理装置１０の外部に構成され、ＵＳＢ、ｅＳＡＴＡ、ＳＤＩＯなどのインターフェースを介して画像処理装置１０と接続されてもよいし、画像処理装置１０からネットワークを介してアクセス可能に構成された資源、例えば、ファイルサーバやＮＡＳ（Ｎｅｔｗｏｒｋ Ａｔｔａｃｈｅｄ Ｓｔｏｒａｇｅ）であってもよい。

血流評価部５０は、特徴量抽出部３０が抽出した各血流領域について、特徴量抽出部３０が抽出した当該血流領域の自己特徴量と相対特徴量とを用いて、当該血流領域が新生血管を示すものであるか否かを評価する。血流評価部５０は、特徴量抽出部３０が抽出した血流領域の特徴量と、基準情報格納部４０に格納されている参照血流領域の特徴量とを比較することで、特徴量抽出部３０が抽出した血流領域が、新生血管を示す参照血流領域と共通の特徴を有しているか、既存血管を示す参照血流領域と共通の特徴を有しているかを評価する。血流評価部５０は、短軸評価部５１と長軸評価部５２、総合評価部５３を備える。短軸評価部５１は、血流領域を短軸断面画像であるとみなし、基準情報格納部４０から短軸断面画像である参照血流領域に関するデータを読み出して、評価を行う。一方、長軸評価部５２は、血流領域を長軸断面画像であるとみなし、基準情報格納部４０から長軸断面画像である参照血流領域に関するデータを読み出して、評価を行う。総合評価部５３は、短軸評価部５１による評価と長軸評価部５２による評価のうち、信頼度の高い評価を選択して出力する。

画像取得部２０、特徴量抽出部３０、血流評価部５０のそれぞれは、例えば、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｇｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）などのハードウェアにより実現される。なお、これらのうち２以上を単一の要素として構成してもよい。なお、これらの一部または全部は、単一のＦＰＧＡ、または、ＡＳＩＣで実現されてもよく、例えば、組織特定部３１、血流領域特定部３２を、それぞれ単一のＦＰＧＡで構成してもよい。また、これらは、それぞれ個別に、または、２以上を１まとめとして、メモリと、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＧＰＵ（Ｇｅｎｅｒａｌ Ｐｕｒｐｏｓｅ Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプログラマブルデバイスとソフトウェアで実現されてもよい。

＜動作＞
実施の形態１に係る画像処理装置１０の動作について説明する。図２は、画像処理装置１０の動作を示すフローチャートである。
まず、画像取得部２０は、血流画像と断層画像との入力を受け付ける（ステップＳ１０）。画像取得部２０は、受け付けた血流画像が動画であればその１フレームを取り出し、同様に受け付けた断層画像が動画であればその１フレームを取り出す。また、画像取得部２０は、血流画像と断層画像との間で座標系が一致していなければ、座標系が一致するように少なくとも一方に対して座標変換を行う。画像取得部２０は、共通の座標系を有する血流画像と断層画像とを、特徴量抽出部３０に出力する。

次に、特徴量抽出部３０の組織特定部３１は、断層画像から組織の像を特定する（ステップＳ２０）。以下、ステップＳ２０の詳細を図３の組織特定の動作を示すフローチャートに基づいて説明する。
まず、組織特定部３１は、断層画像のエッジの強調処理を行う（ステップＳ２０１）。組織特定部３１は、例えば、深さ方向と垂直な方向（水平方向）のエッジを抽出するＳｏｂｅｌオペレータを用いてエッジを抽出し、抽出したエッジを断層画像に合成することで、水平方向のエッジを強調する。

次に、エッジの検出処理を行う（ステップＳ２０２）。エッジの検出方法としては、例えば、動的計画法が挙げられる。具体的には、断層画像の深さ方向をｙ方向、水平方向をｘ方向とした場合、ｘ座標が１の全ての画素について、輝度が極値（ピーク）となる座標を抽出する。次に、抽出した座標を探索開始点として、ｘ座標が２の全ての座標から対応点の探索を行う。対応点は、（１）輝度が大きいこと、（２）探索開始点とのｙ座標差（深さの差）が小さいこと、の２点を満たすように探索が行われる。本実施の形態では、探索開始点と対応点とのｙ座標差の絶対値をｙｄ、対応点の輝度をＬとしたとき、係数ｐ、ｑ（ｐ＞０＞ｑ）を用いて、Ｖ＝ｐ・ｙｄ＋ｑ・Ｌで算出されるＶが最小となるように探索を行う。このとき、ｙｄが所定の値以上である場合には、対応点から除外する。このようにして見つけた対応点を次の探索開始点とし、さらに、ｘ座標が２の座標のうち輝度が極値（ピーク）となる座標を新たな探索開始点とする。次に、ｘ座標が２である対応開始点に対して、ｘ座標が３の全ての座標から対応点の探索を行う。このような処理を繰り返し行い、探索開始点と対応点とを結び付けていくことにより、水平方向のエッジを検出することができる。

次に、各エッジを解剖学的見地に基づいて分類する（ステップＳ２０３）ことで、組織の像を特定する（ステップＳ２０４）。以下、関節部位を撮像した断層画像内のエッジを用いて説明する。図４（ａ）は、関節部位を撮像した断層画像から検出されたエッジを示す模式図である。まず、深さの浅いエッジ（ｙ座標の小さいエッジ、図４（ａ）において上方に存在するエッジ）から順に、断層画像の左端から右端に至っているか否かを判定していき、最初に肯定的に判定されたエッジを皮膚表面の像であると特定する。これにより、エッジ１０１が皮膚表面の像であると特定される。次に、深さの深いエッジから順に、２つのエッジからなり、向かい合う箇所が下向きとなっているか否か、および、エッジの下の輝度が低いか否かを判定し、いずれも肯定的であれば、骨表面であると特定する。これにより、エッジ１３１とエッジ１３２との組み合わせが骨表面であると特定される。図４（ｂ）に、特定された皮膚表面および骨表面を示すエッジを示す。なお、図４（ａ）におけるエッジ１２０は関節包の像であり、エッジ群１１０は腱や筋肉の像である。

図２に戻って説明を続ける。次に、特徴量抽出部３０の血流領域特定部３２が、血流画像から血流領域を特定する（ステップＳ３０）。図５（ａ）は、血流画像としてのパワードプラ画像の模式図である。なお、図５（ａ）では、組織を重畳して示している。パワードプラ画像には、血流のエネルギー、すなわち流量が色で示されている。例えば、流量の多い場所は鮮やかな黄色で、流量の少ない領域は暗い橙色で示されている。血流領域特定部３２は、色を無視して彩色部分だけを抽出し、抽出した個々の塊を１つの血流領域として特定する。これにより、血流領域２０１、２０２、２０３が特定される。なお、血流画像が造影ＣＴ画像である場合にも同様に、濃く描画された造影剤の像を抽出し、抽出した個々の塊を１つの血流領域として特定する。一方、図５（ｂ）は、血流画像としてのカラードプラ画像の模式図である。なお、図５（ｂ）においても、組織を重畳して示している。カラードプラ画像には、血流の向き、すなわち超音波探触子に近づく向きか遠ざかる向きかが色相で、速度が彩度で示されている。例えば、超音波探触子に近づく向きを赤色、遠ざかる向きを青色で示し、速度が大きいほど鮮やかな色で、小さいほど暗い色で示している。この場合も同様に、色を無視して彩色部分だけを抽出し、抽出した個々の塊を１つの血流領域として特定する。これにより、血流領域２１１、２１２、２１３、２１４が特定される。

次に、特徴量抽出部３０の自己特徴量抽出部３３は、血流領域について、その形状を示す自己特徴量を抽出する（ステップＳ４１０）。具体的には、図６（ａ）に示すような血流領域２０１、２０２、２０３のそれぞれについて、その面積、幅や円形度を抽出する。具体的には、例えば、血流領域２０１から、ｘ方向の幅３０１、ｙ方向の幅３０６を取得し、同様に血流領域２０２から、ｘ方向の幅３０２、ｙ方向の幅３０７を取得し、血流領域２０３から、ｘ方向の幅３０３、ｙ方向の幅３０８を取得する。円形度は、例えば、血流領域の面積に４πを乗算して外周長の２乗で割ることで算出できる値であり、値が大きいほど円に近くなり、真円では１となる。または、ｙ方向の幅をｘ方向の幅で割って扁平率を求めてもよい。また、幅としては、例えば、ｙ方向の幅を使用してもよいし、血流領域を長軸断面画像とみなして血管の走行方向を検出し、走行方向に直交する幅を使用してもよく、例えば、幅３０９を血流領域２０３の幅としてもよい。図７（ａ）に、検出した血流領域の自己特徴量の例を示す。なお、特徴量３３１は短軸評価部５１で、特徴量３３２は長軸評価部５２で、それぞれ使用される。

次に、特徴量抽出部３０の相対特徴量抽出部３４は、血流領域について、組織を基準とした配置を示す相対特徴量を抽出する（ステップＳ４２０）。具体的には、関節の中心との水平距離や、皮膚表面または骨表面との形状一致度を抽出する。以下、ステップＳ４２０の詳細を、図８の相対特徴量抽出の動作を示すフローチャートを用いて説明する。
まず、関節の中心位置を特定する（ステップＳ４２０１）。関節の中心位置は、図６（ｂ）に示すように、組織特定部３１が特定した骨表面１３１、１３２を用いて検出する。具体的には、まず、骨表面１３１、１３２をそれぞれ平坦化して曲率を算出する。次に、骨表面の曲率が正となり、かつ凸形状をしている点を骨端１４１、１４２として検出する。最後に、骨端同士を結ぶ線分の垂直二等分線１４３を関節の中心線として検出する。

次に、血流領域と関節の中心線との距離を、関節の中心との水平距離として抽出する（ステップＳ４２０２）。例えば、血流領域２０１と関節の中心線との距離は距離３１１、血流領域２０２と関節の中心線との距離は距離３１２、血流領域２０５と関節の中心線との距離は距離３１５となる。なお、関節の中心線は、骨端１４１、１４２の中点を通り、ｙ軸と平行な直線としてもよく、このとき、血流領域内の代表座標と関節の中心線とのｘ座標差の絶対値を、関節の中心との水平距離としてもよい。代表座標は、例えば、血流領域の中心点である。

次に、図６（ｃ）を用いて皮膚表面との形状一致度を説明する。相対特徴量抽出部３４は、血流領域２０３から、血流領域の中心線２１３を抽出する（ステップＳ４２０３）。血流領域の中心線２１３は、例えば、細線化処理を行うことで抽出することができる。
次に、血流領域の中心線２１３と、皮膚表面１０１との距離３２１の変化率を正規化した値を、皮膚表面との形状一致度として抽出する（ステップＳ４２０４）。具体的な算出手段としては、例えば、以下のような方法がある。皮膚表面をｘに対するｙの関数として、ｙ＝ｓｋｉｎ（ｘ）で表記する。同様に、血流領域の中心線をｘに対するｙの関数として、ｙ＝ｖａｓｃｕｌａｒ（ｘ）で表記する。ｓｋｉｎ（ｘ）、ｖａｓｃｕｌａｒ（ｘ）の変化率をそれぞれｓＤｉｆｆ＝ｓｋｉｎ（ｘ＋δｘ）−ｓｋｉｎ（ｘ）、ｖＤｉｆｆ＝ｖａｓｃｕｌａｒ（ｘ＋δｘ）−ｖａｓｃｕｌａｒ（ｘ）としたとき、ｓＤｉｆｆとｖＤｉｆｆとの差の絶対値を、血流領域のｘの範囲で積算し、血流領域のｘの範囲の幅ｗｉｄｔｈで正規化する。すなわち、次式で与えられる。

したがって、形状一致度は、皮膚表面と血流領域との距離が一定、すなわち形状が一致しているほど値が小さくなり、皮膚表面を深さ方向（ｙ方向）に移動させると血流領域の中心線に一致する場合には０となる。なお、皮膚表面と血流領域との形状一致度に替えて、骨表面と血流領域との形状一致度を用いてもよい。この場合、ｘ座標について血流領域が存在するが骨表面が存在しない範囲が存在する場合は、当該ｘの範囲を形状一致度の算出から除外すればよい。例えば、血流領域のｘの範囲が３０〜１００、骨表面のｘの範囲が０〜４０、６０〜１００の場合には、ｘの範囲が３０〜４０、６０〜１００の範囲についてｓＤｉｆｆとｖＤｉｆｆとの差の絶対値で積算し、ｗｉｄｔｈを５０として形状一致度を算出する。図７（ｂ）に、検出した血流領域の特徴量の例を示す。なお、特徴量３４１は短軸評価部５１で、特徴量３４２は長軸評価部５２で、それぞれ使用される。

図２に戻って説明を続ける。次に、血流評価部５０が血流領域を評価する（ステップＳ４３０）。血流領域の評価は、基準情報格納部４０に格納されている既知の血流領域と特徴量を比較することで行われる。具体的には機械学習によって行われ、例えば、サポートベクタマシンを用いる。以下、図９の血流領域の評価の動作を示すフローチャートを用いて説明する。

まず、短軸評価部５１は、基準情報格納部４０に格納されている参照血流領域の特徴量のうち、短軸断面画像である参照血流領域の特徴量を取得する（ステップＳ４３０１）。
次に、参照血流領域の特徴量の種類をｎ種類としたとき、ｎ次元空間上にプロットを行う（ステップＳ４３０２）。ここで、参照血流領域の特徴量は、自己特徴量を１種類以上、相対特徴量を１種類以上含むので、ｎは必ず２以上となる。以下、説明を簡略化するため、ｎ＝２について説明する。図１０は、機械学習による評価の概念を示した模式図である。例えば、自己特徴量として面積、相対特徴量として関節中心からの距離を用いる場合、面積を横軸、関節中心からの距離を縦軸として、参照血流領域の特徴量をプロットする。この参照血流領域の特徴量が、機械学習の訓練データとなる。図１０には、新生血管である参照血管領域の特徴量を黒丸（「・」）で、既存血管である参照血管領域の特徴量を白丸（「○」）で、それぞれプロットした状態が示されている。

次に、新生血管か否かの評価基準を算出する（ステップＳ４３０３）。新生血管と既存血管とでは、自己特徴量の傾向、相対特徴量の傾向、自己特徴量と相対特徴量との関係、が異なるので、新生血管がプロットされる領域と既存血管がプロットされる領域とは、それぞれ異なった傾向を有する。具体的には、新生血管は領域２６１内に、既存血管は領域２６２内に、というように、新生血管と既存血管とが、それぞれ特定の領域に集まって配置されることになる。したがって、評価を行いたい血管領域のプロットされる位置が、新生血管がプロットされた領域であるのか、既存血管がプロットされた領域であるのかにより、新生血管か否かを評価できる。サポートベクタマシンでは、新生血管と既存血管との境界を直線２５０で定める。直線２５０は、自己特徴量をｘ、相対特徴量をｙとしたときに以下の識別関数ｙ＝ｇ（ｘ）で表される。
ｇ（ｘ）＝ｗ・ｘ＋ｂ
ここで、ｗとｂは、｜ｗ・ｘ＋ｂ｜の最小値が１となるように定められる。すなわち、ｙ＝ｇ（ｘ）−１で示される破線２５２上には、新生血管と既存血管のうちの一方、ここでは新生血管の１つ以上が存在する。また、ｙ＝ｇ（ｘ）＋１で示される破線２５１上には、新生血管と既存血管のうちのもう一方、ここでは既存血管の１つ以上が存在する。さらに、破線２５２と破線２５１とで挟まれた領域には、いずれの参照血流領域も存在せず、ｙ≦ｇ（ｘ）−１で示される領域（破線２５２の下側）には新生血管のみが、ｙ≧ｇ（ｘ）＋１で示される領域（破線２５１の上側）には既存血管のみが存在する。なお、ｎ≧３である場合には、同様に新生血管と既存血管との境界を（ｎ−１）次元のもので定め、ｎ＝３であれば、境界面となる。

最後に、短軸評価部５１は、判断対象となる血管領域がどの領域にプロットされるかで、血管領域の評価を行う（ステップＳ４３０４）。具体的には、プロットされる位置２７１がｙ≦ｇ（ｘ）−１で示される領域内であれば新生血管と判断し、プロットされる位置２７２がｙ≧ｇ（ｘ）＋１で示される領域内であれば既存血管と評価し、プロットされる位置２７３がいずれでもない場合、すなわち破線２５１と破線２５２とにはさまれた領域内であれば評価不能であると評価する。なお、評価は、既知の既存血管と同様の特徴量を有している血管領域を既存領域として評価し、既知の新生血管と同様の特徴量を有している血管領域を新生血管と評価していればよく、サポートベクタマシンに限られない。すなわち、少なくとも、プロットされる位置が領域２６１の内部であれば新生血管、領域２６２の内部であれば既存血管と評価するものであれば、他の機械学習方法であってもよい。

同様に、長軸評価部５２は、基準情報格納部４０に格納されている参照血流領域の特徴量のうち、長軸断面画像である参照血流領域の特徴量を取得する（ステップＳ４３０５）。
次に、参照血流領域の特徴量の種類をｍ種類としたとき、ｍ次元空間上にプロットを行う（ステップＳ４３０６）。ここで、参照血流領域の特徴量は、自己特徴量を１種類以上、相対特徴量を１種類以上含むので、ｍは必ず２以上となる。以下、説明を簡略化するため、ｍ＝２について説明する。例えば、自己特徴量として幅、相対特徴量として皮膚表面との形状一致度を用いる場合、幅を横軸、形状一致度を縦軸として、参照血流領域の特徴量をプロットする。この参照血流領域の特徴量が、機械学習の訓練データとなる。

次に、新生血管か否かの評価基準を算出し（ステップＳ４３０７）、判断対象となる血管領域がどの領域にプロットされるかで、血管領域の評価を行う（ステップＳ４３０８）。詳細はそれぞれ上述のステップＳ４３０３、ステップＳ４３０４と同様であるので、ここでは説明を省略する。
最後に、総合評価部５３は、短軸評価部５１による評価と長軸評価部５２による評価を取りまとめる（ステップＳ４３０９）。ここでは、以下のように評価を行う。すなわち、短軸評価部５１と長軸評価部５２とのいずれかで既存血管として評価された血管領域を既存血管として評価し（ステップＳ４３１１）、そうでないものは新生血管として評価する（ステップＳ４３１０）。これは、（１）既存血管の短軸断面を長軸評価部５２で評価したとき、または、既存血管の長軸断面を短軸評価部５１で評価したとき、偶発的に新生血管として評価される可能性があること、（２）新生血管の短軸断面を長軸評価部５２で評価したとき、または、新生血管の長軸断面を短軸評価部５１で評価したとき、既存血管と評価される可能性は極めて小さいこと、（３）新生血管の見落としを防ぐために評価不能な血流領域は新生血管として評価した方が安全であること、との理由による。

血流領域の評価が終わると、ほかに評価すべき血流領域がある場合には未評価の血流領域について、ステップＳ４１０〜Ｓ４３０を実行し、全ての血流領域の評価が完了している場合は、処理を終了する（ステップＳ４４０）。
＜まとめ＞
上記構成により、血流領域のそれぞれについて、形状や面積等の血流領域の特性としての自己特徴量と、関節中心との位置関係や皮膚表面との形状一致度などの組織との関係に基づく相対特徴量との両方を用いて、新生血管か否かの評価を行う。これにより、血流領域を個別に評価することができ、かつ、それぞれについて、自己特徴量と相対特徴量との双方を用いることで、より正確に評価を行うことが可能となる。

≪変形例≫
実施の形態１では、血流領域の評価において、血流領域を短軸断面である場合についての評価と長軸断面である場合の評価とを行い、両方の評価結果を総合して再評価する場合について説明した。
これに対し、本実施の形態では、血流領域の評価の再評価を行わない場合について説明する。

＜構成＞
図１０に、本変形例に係る血流評価部５４のブロック図を示す。なお、図１と同様の構成については同じ符号を付し、説明を省略する。血流評価部５４は、短軸長軸判定部５５、短軸評価部５１、長軸評価部５２を備える。
短軸長軸判定部５５は、血流領域の特徴量から、その血流領域が短軸断面画像であるか長軸断面画像であるかを判定する。短軸長軸判定部５５は、血流領域を短軸断面画像と判定した場合には短軸評価部５１に、血流領域を長軸断面画像と判定した場合には長軸評価部５２に、それぞれ判定させる。

＜動作＞
変形例に係る血流評価の動作について説明する。なお、血流評価以外の動作については実施の形態１と同様であるから説明を省略する。
図１１は変形例に係る血流評価の動作を示すフローチャートである。なお、図９と同様の動作については同じステップ番号を付し、説明を省略する。

まず、短軸長軸判定部５５が、血流領域の特徴量から、その血流領域が短軸断面画像であるか長軸断面画像であるかを判定する（ステップＳ４３１２）。具体的には、例えば、図７（ａ）に示したようなｘ方向幅とｙ方向幅から比を算出し、ｘ方向幅がｙ方向幅の３倍以上であれば長軸断面画像であると判定する。なお、長軸断面画像と短軸断面画像との判定はこの場合に限らず、円形度や血流領域の面積など、任意の特徴量を用いてよい。

短軸長軸判定部５５が血流領域を短軸断面画像であると判定した場合、短軸評価部５１は、基準情報格納部４０に格納されている参照血流領域の特徴量のうち、短軸断面画像である参照血流領域の特徴量を取得する（ステップＳ４３０１）。そして、ｎ次元空間上にプロットを行い（ステップＳ４３０２）、新生血管か否かの評価基準を算出する（ステップＳ４３０３）。最後に、短軸評価部５１は、判断対象となる血管領域がどの領域にプロットされるかで、血管領域の評価を行う（ステップＳ４３０４）。

一方、短軸長軸判定部５５が血流領域を長軸断面画像であると判定した場合、長軸評価部５２は、基準情報格納部４０に格納されている参照血流領域の特徴量のうち、長軸断面画像である参照血流領域の特徴量を取得する（ステップＳ４３０５）。そして、ｍ次元空間上にプロットを行い（ステップＳ４３０６）、新生血管か否かの評価基準を算出する（ステップＳ４３０７）。最後に、長軸評価部５２は、判断対象となる血管領域がどの領域にプロットされるかで、血管領域の評価を行う（ステップＳ４３０８）。

最後に、血流評価部５４は、評価の結果を出力する（ステップＳ４３１３）。１つの血流領域に対してステップＳ４３０４またはステップＳ４３０８のうちいずれか一方しか実行されていないため、実行された評価の結果をそのまま出力する。
＜まとめ＞
上記構成により、血流領域のそれぞれについて、短軸断面画像である場合と長軸断面画像である場合とで評価に用いる特徴量および訓練データを使い分けることができる。そのため、最適ではない特徴量や訓練データを用いた評価の如何に影響されず、より正確に評価を行うことが可能となる。

≪実施の形態２≫
実施の形態１および変形例では、別途取得された血流画像と断層画像とを基に、血流領域が新生血管であるか否かを評価する画像処理装置について説明した。
これに対し、本実施の形態では、超音波を送受信して血流画像と断層画像とを生成し、生成した血流画像と断層画像とを基に、血流領域が新生血管であるか否かを評価し、その結果を画像として出力する超音波診断装置について説明する。

＜構成＞
実施の形態２に係る超音波診断装置５００のブロック図を図１２に示す。超音波診断装置５００は実施の形態１に係る画像処理装置１０を備え、さらに、送受信部４００、Ｂモード画像生成部４３０、ドプラ画像生成部４４０、画像記憶部４５０、表示制御部４６０を備える。送受信部４００はマルチプレクサ部４０１、超音波送信部４１０、超音波受信部４２０を備え、超音波受信部４２０はＲＦ信号生成部４２１、整相加算部４２２、周波数解析部４２３を備える回路である。また、送受信部４００には超音波探触子１が、表示制御部４６０には表示部２が、それぞれ接続可能に構成されている。図１２には、超音波探触子１と表示部２とが超音波診断装置５００に接続された状態を示している。

超音波探触子１は、例えば、一次元方向に配列された複数の振動子（不図示）を有する。各振動子は、例えば、ＰＺＴ（チタン酸ジルコン酸鉛）により構成される。超音波探触子１は、マルチプレクサ部４０１を介して超音波送信部４１０と超音波受信部４２０とに接続されている。超音波探触子１は、超音波送信部４１０で生成された電気信号（以下、「送信駆動信号」と呼ぶ）を受け取り、超音波に変換する。超音波探触子１は、超音波探触子１の振動子側外表面を被検体の皮膚表面など表面に接触させた状態で、送信駆動信号から変換され、複数の振動子から発せられる複数の超音波からなる超音波ビームを被検体内の測定対象に向けて送信する。そして、超音波探触子１は、送信駆動信号に基づく送信検出波に対する、測定対象からの複数の反射検出波を受信し、複数の振動子によりこれら反射検出波をそれぞれ電気信号（以下、「素子受信信号」と呼ぶ）に変換し、素子受信信号を超音波受信部４２０に供給する。

マルチプレクサ部４０１は、素子駆動信号で駆動させる超音波探触子１の振動子を選択し、選択した振動子と超音波送信部４１０とを接続する。また、マルチプレクサ部４０１は、素子受信信号を生成させる超音波探触子１の振動子を選択し、選択した振動子と超音波受信部４２０とを接続する。
超音波送信部４１０は、送信検出波を超音波探触子１に送出させるための電気信号である送信駆動信号を生成する。送信駆動信号は、例えば、超音波探触子１を構成する各振動素子から送出される送信検出波が送信フォーカス点に同時に届く焦点波となるように生成される、振動素子ごとにタイミングの異なるパルス状の電気信号である。このとき、着目領域全体の音響線信号を得るため、送信フォーカス点を素子列方向に移動させながら、送信検出波の送信と反射検出波の受信が繰り返し行われる。なお、送信検出波の送信を着目領域全体に対して行うための一連の送信動作を、以下「送信イベント」と呼ぶ。または、送信駆動信号は、Ｂモード断層画像を生成する場合には、例えば、超音波探触子１を構成する各振動素子から送出される送信検出波が特定の向きに進行する平面波となるように生成される、振動素子ごとにタイミングを揃えた、または、振動子列の一方の端から他方の端まで固定ピッチで段階的に動作タイミングをずらした、パルス状の電気信号であってもよい。この場合、１回の送信により１回の送信イベントがなされることとなる。

ＲＦ信号生成部４２１は、素子受信信号に対して増幅、Ａ／Ｄ変換を行って、ＲＦ信号に変換を行う。
整相加算部４２２は、送信イベントに同期し、着目領域内の各観測点について、観測点からの反射超音波に基づくＲＦ信号を同定し、ＲＦ信号ごとに遅延処理を行って加算することで、観測点からの信号を強調した音響線信号を生成する。音響線信号は、送信検出波が通過した領域の一部である、送信フォーカス点およびその近傍を含む、着目領域を素子列方向に分割した領域に対して生成される。なお、送信検出波が平面波である場合、音響線信号は着目領域全体に対して生成される。

周波数解析部４２３は、複数の送信イベントで取得したＲＦ信号に対して、周波数解析を行い、観測点ごとに血流の平均速度、分散、パワーを算出する。具体的には、例えば、位相検波によって複素位相検波信号を生成した後、周波数解析を行う。位相検波は、送信検出波と同一の周波数をもつ参照信号と、参照信号の位相を９０°シフトさせた第２参照信号とをそれぞれＲＦ信号に乗算した後にＬＰＦで高周波成分を除去することにより行われ、互いに複素共役の関係にある複素位相検波信号が生成される。次に、周波数解析部４２３は、複素位相検波信号に対してＭＴＦフィルタ処理を行い、所定の速度以下の動き、例えば、偶発的な揺動などを取り除くことで、血流以外の動きを取り除く。さらに、周波数解析部４２３は、例えば、異なる送信イベントで取得した、送信フォーカス点を同一とする複数の複素位相検波信号に対して相関処理を行うことで、血流のパワースペクトルを算出し、平均周波数、周波数の分散、スペクトル全体の強度から、それぞれ、平均速度、分散、パワーを算出する。なお、周波数解析部４２３は、例えば、高速フーリエ変換により複素位相検波信号を生成してもよい。また、ここではＲＦ信号を基に複素位相検波信号を生成したが、アナログ信号である素子受信信号に対して位相検波を行う途上または行った後にＡ／Ｄ変換を行ってもよいし、整相加算後の音響線信号を基に複素位相検波信号を生成してもよい。

Ｂモード画像生成部４３０は、整相加算部４２２が生成した１回の送信イベントに係る複数の音響線信号に対し、包絡線検波、対数圧縮を行い、１フレーム分のＢモード画像データを生成する。生成されたＢモード画像データは、画像記憶部４５０に格納される。
ドプラ画像生成部４４０は、周波数解析部４２３が算出した観測点ごとの血流の平均速度、分散、パワーを用いて、ドプラ画像データを生成する。ここでは、血流のパワーを用いるパワードプラ画像を生成する。ドプラ画像生成部４４０は、血流のパワーを色に変換し、パワードプラ画像を生成する。なお、使用する色の色相は単一または類似していることが好ましい。例えば、血流のパワーが所定の値以上である点は鮮やかな黄色、パワーが所定の値未満である点は暗いオレンジ色、パワーがゼロとみなせる点は無色（透明）で示す。なお、ドプラ画像生成部４４０はカラードプラ画像を生成してもよく、この場合、血流の向きを色相に、平均速度の大きさを彩度値に変換し、カラードプラ画像を作成する。例えば、超音波探触子１に向かう方向に高速の血流が検出された点は明るい赤、超音波探触子１に向かう方向に低速の血流が検出された点は暗い赤、超音波探触子１から遠ざかる方向に高速の血流が検出された点は明るい青、超音波探触子１から遠ざかる方向に低速の血流が検出された点は暗い青、血流が検出されない点は無色（透明）、とする。生成されたドプラ画像データは、画像記憶部４５０に格納される。

画像記憶部４５０は、Ｂモード画像生成部４３０が生成したＢモード画像データ、ドプラ画像生成部４４０が生成したドプラ画像データを保持する。画像処理装置１０の画像取得部２０は、Ｂモード画像データ、ドプラ画像データをそれぞれ断層画像、血流画像として読み出す。画像記憶部４５０は、例えば、ＲＡＭ、フラッシュメモリ、ハードディスク、光学ディスクなどの記憶媒体で実現される。なお、画像記憶部４５０と、画像処理装置１０の基準情報格納部４０とを１つの記憶媒体で実現してもよい。

表示制御部４６０は、画像記憶部４５０からＢモード画像データ、ドプラ画像データを読み出し、直交座標系への座標変換を行って、表示部２にＢモード画像データの表示、ドプラ画像データの表示、または、ドプラ画像データのＢモード画像データへの重畳表示を行わせる。また、表示制御部４６０は、画像処理装置１０の評価結果に基づき、ドプラ画像データの表示態様を変更する。具体的には、ドプラ画像データ中の各血流領域について、画像処理装置１０が新生血管と既存血管とのいずれに評価したかに基づいて、表示色を変える、点滅や○又は□で囲むなどの強調表示を行う、一方のみを表示する、などの表示態様を変更する。

マルチプレクサ部４０１、超音波送信部４１０、ＲＦ信号生成部４２１、整相加算部４２２、周波数解析部４２３、Ｂモード画像生成部４３０、ドプラ画像生成部４４０、表示制御部４６０のそれぞれは、例えば、ＦＰＧＡ、ＡＳＩＣなどのハードウェアにより実現される。なお、これらのうち２以上を単体の要素として構成してもよく、超音波受信部４２０を１構成として実現してもよい。なお、これらの一部または全部は、単一のＦＰＧＡ、または、ＡＳＩＣで実現されてもよい。また、これらは、それぞれ個別に、または、２以上を１まとめとして、メモリと、ＣＰＵ、ＧＰＧＰＵなどのプログラマブルデバイスとソフトウェアで実現されてもよい。

＜動作＞
実施の形態２に係る超音波診断装置５００の動作について説明する。図１３は、超音波診断装置５００の動作を示すフローチャートである。
まず、被検体内に着目領域を設定する（ステップＳ１１０）。着目領域を設定する方法は、例えば、表示部２に事前に取得した断層画像を表示し、タッチパネル、マウス、トラックボールなどの入力部（図示しない）を通して検査者に着目領域を指定させる。なお、着目領域の設定方法はこの場合に限られず、例えば、断層画像の全域を着目領域としてもよいし、あるいは、断層画像の中央部分を含む一定範囲を着目領域としてもよい。また、着目領域を設定する際に、後述する断層画像の取得動作を行ってもよい。

次に、着目領域に超音波を送受信し、取得した受信信号を取得する（ステップＳ１２０）。具体的には、Ｂモード画像を生成するための１回の送信イベントと、ドプラ画像を生成するための複数の送信イベントを行う。ドプラ画像を生成するための送信イベントは、例えば、連続する１０回の送信イベントである。送受信部４００は、Ｂモード画像を生成するための１回の送信イベントと、ドプラ画像を生成するための１０回の送信イベントを連続して行い、最初の１回に係るＲＦ信号を整相加算部４２２に、その後の１０回に係るＲＦ信号を周波数解析部４２３に、それぞれ出力する。

次に、Ｂモード画像を生成する（ステップＳ１３０）。具体的には、整相加算部４２２がＲＦ信号に整相加算を行って音響線信号を生成し、Ｂモード画像生成部４３０が音響線信号に対して包絡線検波、対数圧縮を行い、Ｂモード画像データを生成する。生成されたＢモード画像データは画像記憶部４５０に格納される。
次に、ドプラ画像を生成する（ステップＳ１４０）。具体的には、周波数解析部４２３が１０回の送信イベント分のＲＦ信号に対して位相検波、周波数解析を行い、ドプラ画像データを生成する。生成されたドプラ画像データは画像記憶部４５０に格納される。

次に、血流領域の評価を行う（ステップＳ１５０）。具体的には、画像処理装置１０が、画像記憶部４５０からＢモード画像データとドプラ画像データとを取得し、それぞれを断層画像、血流画像として血流領域の評価を行う。評価の詳細については実施の形態１で説明した動作と同様であるので省略する。
最後に、血流領域の評価結果を表示する（ステップＳ１６０）。具体的には、表示制御部４６０は、画像記憶部４５０からＢモード画像データとドプラ画像データとを取得する。さらに、表示制御部４６０は、画像処理装置１０の血流領域特定部３２から血流領域の位置情報を、血流評価部５０から評価結果を取得し、ドプラ画像データ内の血流画像について、評価結果に応じて表示態様を変更する。例えば、図１４（ａ）では、全ての血流領域が既存血管であると判定されたので、既存血管を示す色（例えば、黄色）で血流領域２３１〜２３５を表示する。また、図１４（ｂ）では、全ての血流領域が既存血管であると判定されたので、既存血管を示す色で血流領域２３６、２３７を表示する。一方、図１４（ｃ）では、全ての血流領域が新生血管であると判定されたので、新生血管を示す色（例えば、橙色）で血流領域２４１〜２４７を表示する。

＜まとめ＞
上記構成により、被検体から着目領域を同一とするＢモード画像と超音波ドプラ画像とを取得し、着目領域内の血管について、新生血管か否かの評価を行うことができる。
≪実施の形態に係るその他の変形例≫
（１）実施の形態１、２では、血流領域を短軸断面画像としての評価と長軸断面画像としての評価とを並行で行って総合評価する、変形例では、自己特徴量を基に血流画像を短軸／長軸判定をしてから評価を行うとしたが、血流領域の評価方法は上記の例に限られない。例えば、短軸評価部５１を長軸評価部の後ろに直列に接続し、長軸評価部は、短軸評価部５１が既存血管と評価した血流領域についてはその評価をそのまま出力し、短軸評価部５１が新生血管と評価した血流領域については、長軸断面画像として評価を行ってその結果を出力するとしてもよい。なお、長軸評価部５２の後ろに短軸評価部を直列に接続し、同様に、短軸評価部は長軸評価部５２が新生血管と評価した血流領域のみを評価するとしてもよい。

また、例えば、短軸長軸判定部を血流領域特定部に備えてもよく、自己特徴量抽出部と相対特徴量抽出部は、短軸断面画像に対しては短軸評価部５１が用いる特徴量のみを短軸評価部５１に出力し、長軸断面画像に対しては長軸評価部５２が用いる特徴量のみを長軸評価部５２に出力するとしてもよい。この構成により、短軸断面画像に対して長軸断面画像に用いる特徴量の抽出や評価、またはその逆を行う必要がなくなり、処理量の削減に奏功する。

（２）実施の形態１、２および変形例では、血流領域の自己特徴量の抽出（ステップＳ４１０）、相対特徴量の抽出（ステップＳ４２０）、評価（ステップＳ４３０）を血流量領域ごとに行うものとしたが、ステップＳ３０で特定された全ての血流領域に対して、一度に自己特徴量の抽出（ステップＳ４１０）と相対特徴量の抽出（ステップＳ４２０）とを行い、評価（ステップＳ４３０）を行うとしてもよい。

（３）実施の形態１、２および変形例では、基準情報格納部４０には、新生血管を示すものであるか否かが既知である血流領域について、短軸断面画像か長軸断面画像かの情報、自己特徴量、相対特徴量、新生血管を示すものであるか否かの情報、の４つを組み合わせたデータを格納しているものとしたが、例えば、血流評価部５０が評価した評価結果を、新たな訓練データとして基準情報格納部４０に追加するとしてもよい。このようにすることで、機械学習の精度を向上させることができる。また、血流評価部５０が評価した評価結果について、医師の診察等により適正とされた評価結果のみを新たな訓練データとして基準情報格納部４０に追加するとしてもよい。このようにすることで、評価が適正でない訓練データが追加されることがなくなり、機械学習の精度を向上させることができる。

（４）実施の形態１、２および変形例では、短軸断面画像である場合の自己特徴量として円形度と面積、相対特徴量として関節中心からの距離、長軸断面画像である場合の自己特徴量として面積と短軸幅、相対特徴量として皮膚表面との形状一致度を用いる場合について説明したが、自己特徴量を１以上、相対特徴量を１以上使用するものであれば、任意の特徴量を使用してもよい。例えば、組織特定部３１において、さらに関節包を特定し、血流領域と関節包との位置関係を示す特徴量を相対特徴量として使用してもよい。

また、評価を行う血流画像と断層画像とは、関節を撮像した画像に限られず、血流が撮像されている部位であれば任意の箇所でよい。この場合、基準情報格納部４０には同一部位の血流領域を格納し、相対特徴量抽出部３４は新生血管か否かを判定するための指標となる組織を基準とした相対特徴量を算出し、組織特定部３１は当該指標となる組織を抽出する、とすればよい。

（５）実施の形態２では、Ｂモード画像と超音波ドプラ画像を１つずつ生成する場合について説明したが、例えば、送受信部４００は、Ｂモード画像を生成するための１回の送信イベントと、超音波ドプラ画像を生成するための数回の送信イベントを交互に行い、Ｂモード画像生成部４３０とドプラ画像生成部４４０とが交互にＢモード画像と超音波ドプラ画像を１つずつ繰り返し生成し、画像記憶部４５０に格納するとしてもよい。

また、超音波送信部４１０は、Ｂモード画像を生成するための１回の送信イベントと、超音波ドプラ画像を生成するための数回の送信イベントを交互に行うとしたが、例えば、超音波送信部４１０は数回の送信イベントを行い、ＲＦ信号生成部４２１は、全ての送信イベントに係るＲＦ信号をドプラ画像生成部４４０に、最後の送信イベントに係るＲＦ信号をＢモード画像生成部４３０に、それぞれ出力するとしてもよい。このようにすることで、送信イベントの回数を削減することが可能となり、Ｂモード画像と超音波ドプラ画像とのそれぞれのフレームレートを向上させることができる。または、送受信部４００は、例えば、ＲＦ信号記憶部または音響線信号記憶部をさらに備え、Ｂモード画像生成部４３０とドプラ画像生成部４４０とがＲＦ信号記憶部または音響線信号記憶部からＲＦ信号または音響線信号を読み出すとしてもよい。

（６）実施の形態２では、超音波ドプラ画像を血流画像として用いる場合について説明したが、例えば、血管造影剤を被検体に投与し、造影Ｂモード画像を取得して血流画像として用いてもよい。
また、超音波診断装置５００の画像処理装置１０は、画像記憶部４５０に格納された任意のＢモード画像と超音波ドプラ画像とから、血流領域の評価を行ってもよい。さらに、超音波診断装置５００の画像処理装置１０は、外部から血流画像や断層画像を取得し、Ｂモード画像と外部から取得した血流画像、超音波ドプラ画像と外部から取得した断層画像、または、外部から取得した血流画像と断層画像、のような組み合わせから、血流領域の評価を行うとしてもよい。

（７）実施の形態１および変形例では、画像取得部２０は対象領域を同一または同一の平面上とする血流画像と断層画像とを取得するとしたが、例えば、断層画像に替えて、ＣＴやＭＲＩの３次元データと、血流画像の対象領域を示す情報とを取得し、３次元データから断層画像を切り出すとしてもよい。また、同様に、血流画像に替えて、ＣＴやＭＲＩの３次元データと、断層画像の対象領域を示す情報とを取得してもよい。さらに、例えば、断層画像と血流情報のいずれも３次元データとして取得してもよく、この場合、同一の平面で３次元データから断層画像と血流画像を切り出してもよいし、血流領域の特定、組織の特定、自己特徴量の抽出、相対特徴量の抽出、血流領域の評価を、３次元データを直接用いて行うとしてもよい。

（８）実施の形態および各変形例に係る画像処理装置および超音波診断装置は、その構成要素の全部又は一部を、１チップ又は複数チップの集積回路で実現してもよいし、コンピュータのプログラムで実現してもよいし、その他どのような形態で実施してもよい。例えば、自己特徴量抽出部と相対特徴量抽出部とを１チップで実現してもよいし、血流評価部のみを１チップで実現し、特徴量抽出部等を別のチップで実現してもよい。

集積回路で実現する場合、典型的には、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）として実現される。ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
また、集積回路化の手法はＬＳＩに限るものではなく、専用回路、又は汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。

さらには、半導体技術の進歩、又は派生する別技術により、ＬＳＩに置き換わる集積回路化の技術が登場すれば、当然その技術を用いて機能ブロックの集積化を行ってもよい。
また、各実施の形態および各変形例に係る超音波診断装置は、記憶媒体に書き込まれたプログラムと、プログラムを読み込んで実行するコンピュータとで実現されてもよい。記憶媒体は、メモリカード、ＣＤ−ＲＯＭなどいかなる記録媒体であってもよい。また、本発明に係る超音波診断装置は、ネットワークを経由してダウンロードされるプログラムと、プログラムをネットワークからダウンロードして実行するコンピュータとで実現されてもよい。

（９）以上で説明した実施の形態は、いずれも本発明の好ましい一具体例を示すものである。実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、工程、工程の順序などは一例であり、本発明を限定する主旨ではない。また、実施の形態における構成要素のうち、本発明の最上位概念を示す独立請求項に記載されていない工程については、より好ましい形態を構成する任意の構成要素として説明される。

また、発明の理解の容易のため、上記各実施の形態で挙げた各図の構成要素の縮尺は実際のものと異なる場合がある。また本発明は上記各実施の形態の記載によって限定されるものではなく、本発明の要旨を逸脱しない範囲において適宜変更可能である。
さらに、超音波診断装置においては基板上に回路部品、リード線等の部材も存在するが、電気的配線、電気回路について当該技術分野における通常の知識に基づいて様々な態様を実施可能であり、本発明の説明として直接的には無関係のため、説明を省略している。尚、上記示した各図は模式図であり、必ずしも厳密に図示したものではない。

≪補足≫
（１）実施の形態に係る画像処理装置は、被検体内の血流を表す血流領域をマッピングした血流画像を取得する血流画像取得部と、前記被検体内の組織を撮像した断層画像を取得する断層画像取得部と、前記血流画像にマッピングされた血流領域のそれぞれについて、血流領域固有の特性を示す第１の特徴量と、前記断層画像中の組織の像と当該血流領域との関係から導き出される第２の特徴量とを、前記血流画像と前記断層画像とから抽出する特徴量抽出部と、前記第１の特徴量と前記第２の特徴量との双方から、前記血流領域のそれぞれが新生血管を示すものであるか否かを評価する血流評価部とを備えることを特徴とする。

また、実施の形態に係る画像処理方法は、被検体内の血流を表す血流領域をマッピングした血流画像を取得し、前記被検体内の組織を撮像した断層画像を取得し、前記血流画像にマッピングされた血流領域のそれぞれについて、血流領域固有の特性を示す第１の特徴量と、前記断層画像中の組織の像と当該血流領域との関係から導き出される第２の特徴量とを、前記血流画像と前記断層画像とから抽出し、前記第１の特徴量と前記第２の特徴量との双方から、前記血流領域のそれぞれが新生血管を示すものであるか否かを評価することを特徴とする。

本開示によれば、上記構成により、血流画像内の各血流領域について、その特性を示す第１の特徴量と、組織との関係を示す第２の特徴量との双方を用いて、新生血管か否かの評価を行うことができる。そのため、各血流領域に示される血管が新生血管であるか否かの評価を、より確度の高い方法で評価することができる。
（２）また、上記（１）の画像処理装置または画像処理方法は、前記断層画像は、関節部位を撮像した断層画像であり、前記断層画像で撮像された組織は、骨表面、皮膚表面のうち１以上を含む、としてもよい。

これにより、関節部位における血流領域が示す血管を、骨や皮膚を基準とした配置を示す第２の特徴量を用いて評価を行うことが可能となる。
（３）また、上記（２）の画像処理装置または画像処理方法は、前記第１の特徴量は、血流領域の円形度、血流領域の面積のうち１以上を含み、前記第２の特徴量は、骨表面から特定される関節の中心位置と、血流領域が示す血流との水平距離を少なくとも含む、としてもよい。

これにより、短軸断面画像として取得された血流領域について、その形状と関節位置を基準とした配置との双方を用いて、より正確に評価を行うことができる。
（４）また、上記（２）の画像処理装置または画像処理方法は、前記第１の特徴量は、血流領域の幅、血流領域の面積のうち１以上を含み、前記第２の特徴量は、皮膚表面または骨表面の像と血流領域との形状一致度を少なくとも含む、としてもよい。

これにより、長軸断面画像として取得された血流領域について、その形状と皮膚または骨を基準とした配置との双方を用いて、より正確に評価を行うことができる。
（５）また、上記（４）の画像処理装置または画像処理方法は、前記皮膚表面または骨表面の像と血流領域との形状一致度は、皮膚表面または骨表面の像と血流領域との間の、深さ方向における位置の差の水平方向における変化度合いである、としてもよい。

これにより、解剖学的な知見に基づき、より正確に評価を行うことができる。
（６）また、上記（１）〜（５）の画像処理装置または画像処理方法は、新生血管であるか否かが既知である参照血流領域に関する第１の特徴量と第２の特徴量との組み合わせが格納されている基準情報格納部をさらに備え、前記血流評価部は、前記特徴量抽出部が前記血流領域について抽出した前記第１の特徴量と前記第２の特徴量との組み合わせと、前記参照血流領域に関する第１の特徴量と第２の特徴量との組み合わせとを比較し、前記血流領域が新生血管であるか否かを評価する、としてもよい。

これにより、血流領域が新生血管であるか否かの評価を、評価結果が既知である血流領域と比較することで容易かつ正確に実施することができる。
（７）また、上記（６）の画像処理装置または画像処理方法は、前記血流評価部は、前記基準情報格納部が格納している前記参照血流領域の第１の特徴量と第２の特徴量とを訓練データとする機械学習により、血流領域が新生血管であるか否かを評価する、としてもよい。

これにより、血流領域が新生血管であるか否かの評価を、第１の特徴量と第２の特徴量を用いた単純演算では行えないような場合であっても、確度の高い方法で行うことができる。
（８）また、上記（１）〜（７）の画像処理装置または画像処理方法は、前記断層画像は、超音波断層画像、Ｘ線断層画像、核磁気共鳴画像のいずれかであり、前記血流画像は、超音波ドプラ画像、核磁気共鳴画像、被検体に造影剤を投与して撮像した超音波断層画像またはＸ線断層画像のいずれかである、としてもよい。

これにより、任意の手段で撮像した断層画像および血流画像に基づいて、血流領域の評価を行うことができる。
（９）また、実施の形態に係る超音波診断装置は、上記（１）〜（７）の画像処理装置と、超音波探触子を介して被検体内に超音波を送信し反射超音波を受信する送受信部と、前記反射超音波に基づきＢモード画像を生成し、前記断層画像として前記断層画像取得部に出力するＢモード画像生成部と、前記反射超音波の周波数偏移に基づき超音波ドプラ画像を生成し、前記血流画像として前記血流画像取得部に出力するドプラ画像生成部とを備えることを特徴とする。

これにより、Ｂモード画像と超音波ドプラ画像とを生成し、超音波ドプラ画像内の血流領域について、その形状を示す第１の特徴量と、組織を基準とした配置を示す第２の特徴量との双方を用いて、新生血管か否かの評価を行うことができる。
（１０）また、上記（９）の超音波診断装置は、前記超音波ドプラ画像は、血流のエネルギー量を示すパワードプラ画像である、としてもよい。

（１１）また、上記（９）の超音波診断装置は、前記超音波ドプラ画像は、血流の速度と向きとを示すカラードプラ画像である、としてもよい。
これらの構成により、被検体内の血流の状態を視覚的に確認することができる。
（１２）また、上記（９）〜（１１）の超音波診断装置は、前記超音波ドプラ画像に示された血流領域のそれぞれについて新生血管であるか否かの評価結果を示した評価画像を表示部に出力する表示制御部をさらに備える、としてもよい。

これにより、被検体内の血流のそれぞれについて、評価結果を含めて状態を視覚的に確認することができる。
（１３）また、上記（１２）の超音波診断装置は、前記評価画像は、前記超音波ドプラ画像に示された血流領域のそれぞれを新生血管であるか否かを示す色で彩色した画像である、としてもよい。

これにより、評価画像から視覚的に新生血管と既存血管とを確認することができる。
（１４）また、上記（１２）〜（１３）の超音波診断装置は、前記表示制御部は、前記Ｂモード画像に前記評価画像を重畳表示する、としてもよい。
これにより、新生血管と既存血管とを組織と対比させながら確認することができる。

本開示に係る画像処理装置、画像処理方法、および、超音波診断装置は、血管の画像診断に有用である。特に、新生血管の有無がマーカーとなるような疾患に対する画像診断を高精度に行うことが可能となり、医療診断機器等において高い利用可能性を持つ。

１ 超音波探触子
２ 表示部
１０ 画像処理装置
２０ 画像取得部
３０ 特徴量抽出部
３１ 組織特定部
３２ 血流領域特定部
３３ 自己特徴量抽出部
３４ 相対特徴量抽出部
４０ 基準情報格納部
５０、５４ 血流評価部
５１ 短軸評価部
５２ 長軸評価部
５３ 総合評価部
５５ 短軸長軸判定部
４００ 送受信部
４０１ マルチプレクサ部
４１０ 超音波送信部
４２０ 超音波受信部
４２１ ＲＦ信号生成部
４２２ 整相加算部
４２３ 周波数解析部
４３０ Ｂモード画像生成部
４４０ ドプラ画像生成部
４５０ 画像記憶部
４６０ 表示制御部
５００ 超音波診断装置

Claims (18)

1. 被検体内の血流を表す血流領域をマッピングした血流画像を取得する血流画像取得部と、
   前記被検体内の組織を撮像した断層画像を取得する断層画像取得部と、
   前記血流画像にマッピングされた血流領域のそれぞれについて、血流領域固有の特性を示す第１の特徴量と、前記断層画像中の組織の像と当該血流領域との関係から導き出される第２の特徴量とを、前記血流画像と前記断層画像とから抽出する特徴量抽出部と、
   前記第１の特徴量と前記第２の特徴量との双方から、前記血流領域のそれぞれが新生血管を示すものであるか否かを評価する血流評価部と
   を備えることを特徴とする画像処理装置。
2. 前記断層画像は、関節部位を撮像した断層画像であり、
   前記断層画像で撮像された組織は、骨表面、皮膚表面のうち１以上を含む
   ことを特徴とする請求項１に記載の画像処理装置。
3. 前記第１の特徴量は、血流領域の円形度、血流領域の面積のうち１以上を含み、
   前記第２の特徴量は、骨表面から特定される関節の中心位置と、血流領域が示す血流との水平距離を少なくとも含む
   ことを特徴とする請求項２に記載の画像処理装置。
4. 前記第１の特徴量は、血流領域の幅、血流領域の面積のうち１以上を含み、
   前記第２の特徴量は、皮膚表面または骨表面の像と血流領域との形状一致度を少なくとも含む
   ことを特徴とする請求項２に記載の画像処理装置。
5. 前記皮膚表面または骨表面の像と血流領域との形状一致度は、皮膚表面または骨表面の像と血流領域との間の、深さ方向における位置の差の水平方向における変化度合いである
   ことを特徴とする請求項４に記載の画像処理装置。
6. 新生血管であるか否かが既知である参照血流領域に関する第１の特徴量と第２の特徴量との組み合わせが格納されている基準情報格納部をさらに備え、
   前記血流評価部は、前記特徴量抽出部が前記血流領域について抽出した前記第１の特徴量と前記第２の特徴量との組み合わせと、前記参照血流領域に関する第１の特徴量と第２の特徴量との組み合わせとを比較し、前記血流領域が新生血管であるか否かを評価する
   ことを特徴とする請求項１乃至５のいずれか１項に記載の画像処理装置。
7. 前記血流評価部は、前記基準情報格納部が格納している前記参照血流領域の第１の特徴量と第２の特徴量とを訓練データとする機械学習により、血流領域が新生血管であるか否かを評価する
   ことを特徴とする請求項６に記載の画像処理装置。
8. 前記断層画像は、超音波断層画像、Ｘ線断層画像、核磁気共鳴画像のいずれかであり、
   前記血流画像は、超音波ドプラ画像、核磁気共鳴画像、被検体に造影剤を投与して撮像した超音波断層画像またはＸ線断層画像のいずれかである
   ことを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
9. 請求項１乃至８のいずれか１項に記載の画像処理装置と、
   超音波探触子を介して被検体内に超音波を送信し反射超音波を受信する送受信部と、
   前記反射超音波に基づきＢモード画像を生成し、前記断層画像として前記断層画像取得部に出力するＢモード画像生成部と、
   前記反射超音波の周波数偏移に基づき超音波ドプラ画像を生成し、前記血流画像として前記血流画像取得部に出力するドプラ画像生成部と
   を備えることを特徴とする超音波診断装置。
10. 前記超音波ドプラ画像は、血流のエネルギー量を示すパワードプラ画像である
    ことを特徴とする請求項９に記載の超音波診断装置。
11. 前記超音波ドプラ画像は、血流の速度と向きとを示すカラードプラ画像である
    ことを特徴とする請求項９に記載の超音波診断装置。
12. 前記超音波ドプラ画像に示された血流領域のそれぞれについて新生血管であるか否かの評価結果を示した評価画像を表示部に出力する表示制御部をさらに備える
    ことを特徴とする請求項９乃至１１のいずれか１項に記載の超音波診断装置。
13. 前記評価画像は、前記超音波ドプラ画像に示された血流領域のそれぞれを新生血管であるか否かを示す色で彩色した画像である
    ことを特徴とする請求項１２に記載の超音波診断装置。
14. 前記表示制御部は、前記Ｂモード画像に前記評価画像を重畳表示する
    ことを特徴とする請求項１２または１３に記載の超音波診断装置。
15. 被検体内の血流を表す血流領域をマッピングした血流画像を取得し、
    前記被検体内の組織を撮像した断層画像を取得し、
    前記血流画像にマッピングされた血流領域のそれぞれについて、血流領域固有の特性を示す第１の特徴量と、前記断層画像中の組織の像と当該血流領域との関係から導き出される第２の特徴量とを、前記血流画像と前記断層画像とから抽出し、
    前記第１の特徴量と前記第２の特徴量との双方から、前記血流領域のそれぞれが新生血管を示すものであるか否かを評価する
    ことを特徴とする画像処理方法。
16. 前記断層画像は、関節部位を撮像した断層画像であり、
    前記断層画像で撮像された組織は、骨表面、皮膚表面のうち１以上を含む
    ことを特徴とする請求項１５に記載の画像処理方法。
17. 前記第１の特徴量は、血流領域の円形度、血流領域の面積のうち１以上を含み、
    前記第２の特徴量は、骨表面から特定される関節の中心位置と、血流領域が示す血流との水平距離を少なくとも含む
    ことを特徴とする請求項１６に記載の画像処理方法。
18. 前記第１の特徴量は、血流領域の幅、血流領域の面積のうち１以上を含み、
    前記第２の特徴量は、皮膚表面または骨表面の像と血流領域との形状一致度を少なくとも含む
    ことを特徴とする請求項１６に記載の画像処理方法。

Images