JP2008259682A - 部位認識結果修正装置、方法、およびプログラム - Google Patents

部位認識結果修正装置、方法、およびプログラム Download PDF

Info

Publication number
JP2008259682A
JP2008259682A JP2007104846A JP2007104846A JP2008259682A JP 2008259682 A JP2008259682 A JP 2008259682A JP 2007104846 A JP2007104846 A JP 2007104846A JP 2007104846 A JP2007104846 A JP 2007104846A JP 2008259682 A JP2008259682 A JP 2008259682A
Authority
JP
Japan
Prior art keywords
tomographic image
correction
recognition
result
tomographic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2007104846A
Other languages
English (en)
Inventor
Yoshiji Nakamura
佳児 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2007104846A priority Critical patent/JP2008259682A/ja
Priority to US12/100,948 priority patent/US8194960B2/en
Publication of JP2008259682A publication Critical patent/JP2008259682A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/987—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns with the intervention of an operator
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

【課題】各断層画像における部位の認識結果をより簡便に修正する。
【解決手段】認識結果表示制御部２２が、複数の部位を表す複数の断層画像またはそれら断層画像に基づいて再構成された画像と、それらの断層画像の各々に表された部位の認識処理の結果であって、各断層画像において認識された部位の断層画像間での位置関係が複数の部位の解剖学的位置関係に整合するものとを画面表示させ、修正情報入力受付部２３が、異なる部位間の境界となるべき修正位置を特定可能な修正情報の入力を受け付け、部位修正部２４が、各部位の解剖学的位置関係と前記修正位置の近傍の断層画像に対する認識処理の結果の少なくとも一方、および、入力された修正情報に基づいて、認識処理の結果が誤っている誤認識断層画像、および、誤認識断層画像における正しい部位を表す正解認識結果を決定し、誤認識断層画像に対する前記の認識処理の結果を正解認識結果に修正する。
【選択図】図２

Description

本発明は、複数の医用断層画像に対する画像認識処理による撮影部位の認識結果の修正を行う装置、方法、および、この方法をコンピュータに実行させるプログラムに関するものである。
ＣＴやＭＲＩ等の撮影モダリティの高速化やマルチスライス対応といった高性能化に伴い、１つの撮影シリーズで被検者の複数の部位の撮影を行い、数百から数千の断層画像を取得することが可能になってきている。これにより、被検者は部位毎に何度も撮影を受ける必要がなくなるとともに、撮影時間も全体としては短縮されるため、被検者の負担が軽減される。一方、取得された画像の読影を行う画像診断医等の読影者は読影・診断対象の部位によって異なっていることがあり、各部位の読影を担当する読影者は、複数の部位が含まれる多数の画像から読影に必要な画像のみを探し出して読影・診断を行う必要があり、これに要する時間や労力が増大することになる。
そこで、複数の部位に対する個別の撮影オーダ（ワークリスト）を１つに統合し、撮影モダリティ（マルチスライスＣＴ装置）では、統合されたワークリストにしたがった１シリーズの撮影によって複数の部位を含む複数の断層画像を取得し、複数の断層画像の各々に対して所定の画像解析処理を行って断層画像に表された部位を認識し、認識された部位にしたがって複数の断層画像を撮影オーダ毎に分割し、複数の断層画像を部位毎に画像データベース（ＰＡＣＳアーカイブ）に格納するシステムが提案されており、これにより、被検者と読影者の両方の負担の軽減が期待されている（例えば非特許文献１参照）。
また、各断層画像に表された部位を認識する方法としては、テンプレートマッチングによる方法（例えば特許文献１参照）や、各部位の固有画像を用いた方法（例えば特許文献２参照）等が知られている。
特開２００２−２５３５３９号公報 特開２００３−１０１６６号公報 Wayne DeJarnette、外２名、″CT Workflow in a PACS Environment″、［online］、2005年1月7日、DeJarnette Research Systems Inc.、［2007年3月27日検索］、インターネット〈URL：http://www.dejarnette.com/TempFiles/%5CCT%20Workflow%20in%20a%20PACS%20Environment.pdf〉
しかしながら、上記の画像解析による部位の認識処理の結果には認識の誤りが含まれることがあるので、撮影技師や画像診断医等が各断層画像とその画像に対する部位の認識結果をチェックし、誤りを個別に修正する必要があり、この作業は非常に大きな負担となってしまう。
本発明は上記事情に鑑みてなされたものであり、各断層画像における部位の認識結果に対するより簡便な修正を可能にする装置、方法およびプログラムを提供することを目的とするものである。
本発明の部位認識結果修正装置は、被検体中の複数の部位を表す複数の断層画像またはそれら複数の断層画像に基づいて再構成された画像と、それらの断層画像の各々に表された被検体中の部位の認識処理の結果であって、各断層画像において認識された部位の断層画像間での位置関係が被検体中の複数の部位の解剖学的位置関係に整合するものとを画面表示させる認識結果表示制御手段と、異なる部位間の境界となるべき修正位置を特定可能な、前記の認識処理の結果を修正するための修正情報の入力を受け付ける修正情報入力受付手段と、被検体中の各部位の解剖学的位置関係と前記の修正位置の近傍の断層画像に対する前記認識処理の結果の少なくとも一方、および、入力された修正情報に基づいて、前記の認識処理の結果が誤っている誤認識断層画像、および、誤認識断層画像における正しい部位を表す正解認識結果を決定し、誤認識断層画像に対する前記の認識処理の結果を正解認識結果に修正する部位修正手段とを設けたことを特徴とする。
本発明のコンピュータによる部位認識結果修正方法は、コンピュータが、被検体中の複数の部位を表す複数の断層画像またはそれら複数の断層画像に基づいて再構成された画像と、それらの断層画像の各々に表された被検体中の部位の認識処理の結果であって、各断層画像において認識された部位の断層画像間での位置関係が被検体中の複数の部位の解剖学的位置関係に整合するものとを画面表示させ、異なる部位間の境界となるべき修正位置を特定可能な、前記の認識処理の結果を修正するための修正情報の入力を受け付け、被検体中の各部位の解剖学的位置関係と前記の修正位置の近傍の断層画像に対する前記認識処理の結果の少なくとも一方、および、入力された修正情報に基づいて、前記の認識処理の結果が誤っている誤認識断層画像、および、誤認識断層画像における正しい部位を表す正解認識結果を決定し、誤認識断層画像に対する前記の認識処理の結果を正解認識結果に修正することを特徴とする。
本発明の部位認識結果修正プログラムは、コンピュータに上記方法を実行させるためのものである。
以下、本発明の詳細について説明する。
「被検体」の具体例としては、人体が挙げられるが、他の動物等であってもよい。
「部位」とは、被検体が人体の場合、人体の体部を識別するものであり、具体例としては、頭部、頸部、胸部、腹部、骨盤部、脚部の他、前記各部のうち隣接する２つの部位の両方を含む複合部位、例えば頭頸部や胸腹部等が挙げられる。
「断層画像」には、ＣＴやＭＲＩで得られた画像の場合、体軸に垂直な断面（軸位断；axial）を表す軸位断画像が一般的に用いられる。
「複数の断層画像に基づいて再構成された画像」の具体例としては、複数の断層画像に対して公知のＭＰＲ（Multi-Planar Reconstruction；多断面再構成）処理等を行うことによって再構成された、断層画像とは異なる方向（例えば、冠状断（coronal）、矢状断方向（sagittal））から見た画像が挙げられる。
「断層画像の各々に表された被検体中の部位の認識処理の結果」は、「各断層画像において認識された部位の断層画像間での位置関係が被検体中の複数の部位の解剖学的位置関係に整合するもの」であることが前提となっている。上記の認識処理としては、複数の断層画像の各々の内容的特徴に基づいてそれら各断層画像に表された被検体中の部位を仮認識し、各断層画像の前後の少なくとも一方の１以上の断層画像の前記仮認識の結果と、前記被検体中の各部位の解剖学的位置関係とに基づいて、前記１以上の断層画像との間での解剖学的位置関係の整合性が保たれるように、各断層画像に表された被検体中の部位を決定する処理が考えられる。ここで、「内容的特徴」の具体例としては、断層画像中に設定された小領域の画素値、画素値の平均値等の統計量、体部領域中の空気領域や骨領域の割合、体部領域の形状等が挙げられる。「仮認識」処理の具体例としては、AdaBoost、サポートベクターマシン（SVM）、適合ベクターマシン（Relevance Vector Machine; RVM）、人工ニューラルネットワーク（ANN）等を用いた機械学習によって得られる判別器を用いた方法や、上記の特許文献１記載のテンプレートマッチング、上記の特許文献２記載の固有画像との比較処理等が挙げられる。「解剖学的位置関係」とは、例えば人体の場合、体部の上から下に向かって、頭部、頸部、胸部、腹部、骨盤部、脚部となる体部の並び順を意味する。「解剖学的位置関係の整合性が保たれるように、各断層画像に表された被検体中の部位を決定する処理」の具体例としては、動的計画法を用いた方法が挙げられる。
「誤認識断層画像に対する前記の認識処理の結果を正解認識結果に修正する」方法の具体例としては、入力された修正位置の近傍の断層画像に対する認識処理の結果に基づき、認識処理によって得られた異なる部位間の境界の位置を前記修正位置の両側で検出し、検出された境界の位置のうち前記修正位置からの距離が近い方の境界の位置と前記修正位置との間にある断層画像を誤認識断層画像とし、その近い方の境界の位置に隣接する断層画像のうち誤認識断層画像ではない方の断層画像における部位の認識処理の結果を正解認識結果として修正を行うことが考えられる。なお、この場合、前記修正位置の入力は、その境界の位置自体を入力するようにしてもよいし、境界に隣接する断層画像の少なくとも一方を指定するように入力するようにしてもよい。後者の場合には、その断層画像の前後のどちらに前記の境界があるかについても入力するようにするか、あるいは、その断層画像の前後のうちの予め決められた方を境界とするようにしてもよい。また、その境界に隣接する、前記認識処理の結果が誤っている断層画像を指定するように入力してもよい。この場合、指定された断層画像を誤認識断層画像に含めて前記の修正を行えばよい。逆に、その境界に隣接する、前記認識処理の結果が正しい断層画像を指定するように入力してもよい。この場合、指定された断層画像を誤認識断層画像に含めないで前記の修正を行えばよい。
また、前記修正位置に隣接する断層画像のうち前記認識処理の結果が誤っている方の断層画像、およびその断層画像における正しい部位を含む修正情報の入力を受け付けるようにし、入力された断層画像の近傍の断層画像のうち、前記認識処理によって得られた部位が、入力された正しい部位と一致する正解断層画像を検出し、正解断層画像と入力された前記認識処理の結果が誤っている方の断層画像との間に含まれる断層画像およびその入力された断層画像を誤認識断層画像とし、入力された正しい部位を正解認識結果として修正を行うようにしてもよい。なお、この場合、入力された断層画像と、その入力された断層画像に対して上記正解断層画像と反対側で隣接する断層画像との境界が、異なる部位間の境界となるべき修正位置となるので、入力された修正情報は前記の修正位置を特定可能な情報の一例となりうる。
また、上記と同様の入力を受け付け、入力された断層画像の近傍の断層画像のうち、その近傍の断層画像に対する前記認識処理によって得られた部位と前記入力された正しい部位との位置関係がその被検体の解剖学的位置関係に整合しない断層画像を誤認識断層画像とし、入力された正しい部位を正解認識結果として、修正を行うようにしてもよい。なお、この方法の場合、入力された断層画像に隣接する２つの断層画像のうち、その隣接する断層画像に対する前記認識処理によって得られた部位と前記入力された断層画像における正しい部位との位置関係がその被検体の解剖学的位置関係に整合する方の断層画像と、入力された断層画像との境界が、異なる部位間の境界となるべき修正位置となるので、入力された修正情報は前記の修正位置を特定可能な情報の一例となりうるといえる。
また、所定の順序に従って指定された、前記修正位置から前記認識処理の結果が誤っている断層画像を経て前記認識処理の結果が正しい断層画像に至る複数の断層画像を含む範囲を表す修正情報の入力を受け付けるようにし、前記所定の順序に基づいて、前記認識処理の結果が正しい断層画像を特定し、その認識処理の結果が正しい断層画像において認識された部位を正解認識結果とし、入力された前記範囲において、前記認識処理の結果が正解認識結果と異なる断層画像を誤認識断層画像として修正を行うようにしてもよい。なお、この場合、前記認識処理の結果が正しい断層画像から最も離れたところにある前記認識処理の結果が誤っている断層画像とその断層画像と隣接する前記範囲外の断層画像と境界が、異なる部位間の境界となるべき修正位置となるので、入力された修正情報は前記の修正位置を特定可能な情報の一例となりうる。
また、前記認識処理の結果が誤っている誤認識断層画像のすべてを指定する入力を受け付けるようにし、指定された複数の誤認識断層画像の両側に隣接する２つの断層画像のうち、誤認識断層画像における認識処理の結果と異なる方の認識結果を正解認識結果として、誤認識断層画像の認識結果を修正するようにしてもよい。なお、この場合、指定された誤認識断層画像に隣接する２つの断層画像のうち、誤認識断層画像における認識処理の結果と一致する方の断層画像とその断層画像に隣接する誤認識断層画像との境界が、異なる部位間の境界となるべき修正位置となるので、入力された修正情報は前記の修正位置を特定可能な情報の一例となりうる。
さらに、修正が行われた断層画像の修正前または修正後の少なくとも一方の部位の断層画像の断層面に垂直な方向の長さが所定の基準を満たさない場合には、その基準を満たすように、少なくとも一部の断層画像における部位を再修正するようにしてもよい。ここで、所定の基準の具体例としては、その被検体におけるその部位の解剖学的にあり得る長さの範囲かどうかという基準が挙げられ、各部位の解剖学的にありうる長さの範囲については、予め参照テーブルや関数等として設けておくことが考えられる。
本発明によれば、複数の断層画像の各々に表された被検体中の部位を、各断層画像において認識された部位の断層画像間での位置関係が被検体中の複数の部位の解剖学的位置関係に整合するように認識した結果に対して、異なる部位間の境界となるべき修正位置を特定可能な修正情報を入力するだけで、前記解剖学的位置関係と前記修正位置の近傍の断層画像に対する認識処理の結果の少なくとも一方、および、入力された修正情報に基づいて、前記の認識結果が誤っている誤認識断層画像、および、誤認識断層画像における正しい部位を表す正解認識結果を決定し、誤認識断層画像に対する前記の認識処結果を正解認識結果に修正するので、認識結果の誤りが含まれる断層画像を個別的に修正する必要がなくなり、より簡便な入力操作だけで部位認識結果の修正が可能になり、部位認識結果の修正を行う撮影技師や画像診断医等の時間的・作業的負担が軽減される。
以下、図面を参照しつつ、本発明の実施の形態について説明する。
図１に、本発明の実施形態となる部位認識結果修正装置が導入された医療情報システムの概略構成を示す。図に示すように、このシステムは、医用画像の撮影装置（モダリティ）１、読影ワークステーション２（２ａ，２ｂ）、画像情報管理サーバ３、画像情報データベース４、部位認識結果修正用端末５が、ネットワーク１９を介して互いに通信可能な状態で接続されて構成されている。各種データベースを除く各機器は、ＣＤ−ＲＯＭ等の記録媒体からインストールされたプログラムによって制御される。また、プログラムは、インターネット等のネットワーク経由で接続されたサーバからダウンロードされた後にインストールされたものであってもよい。
モダリティ１には、被検体の検査対象部位を撮影することにより、その部位を表した画像の画像データを生成し、その画像データにＤＩＣＯＭ規格で規定された付帯情報を付加して、画像情報として出力する装置が含まれる。付帯情報は、そのモダリティ等のメーカー独自の規格のものであってもよい。具体例としては、ＣＴ（Computed Tomography）、ＭＲＩ（Magnetic Resonance Imaging）、ＰＥＴ（Positron Emission Tomography）、超音波撮影装置などが挙げられる。なお、以下では、被写体を表す画像データと画像データの付帯情報の組を「画像情報」と称することとする。すなわち「画像情報」の中には画像に係るテキスト情報も含まれる。
読影ワークステーション２は、画像診断医が画像の読影や読影レポートの作成に利用する装置であり、処理装置と１台または２台の高精細ディスプレイとキーボード・マウスなどの入力機器により構成される。この装置では、画像情報管理サーバ３に対する画像の閲覧要求や、画像情報管理サーバ３から受信した画像に対する各種画像処理、画像の表示、画像中の病変らしき部分の自動検出・強調表示、読影レポートの作成の支援、読影レポートサーバ（図示なし）に対する読影レポートの登録要求や閲覧要求、読影レポートサーバから受信した読影レポートの表示等が行われる。なお、各種画像処理や病変候補の自動検出・強調処理等の画質・視認性改善処理や画像解析処理を読影ワークステーション２で行わず、別途画像処理サーバをネットワーク１９に接続しておき、読影ワークステーション２からの当該処理の要求に応じて、画像処理サーバが行うようにしてもよい。
画像情報管理サーバ３は、汎用の比較的処理能力の高いコンピュータにデータベース管理システム（DataBase Management System: DBMS）の機能を提供するソフトウェアプログラムを組み込んだものであり、本実施形態では、さらに、モダリティ１から送信されてきた断層画像に表された被検体の撮影部位を認識する部位認識機能および認識された撮影部位を修正する部位認識結果修正機能（後に詳述）を提供するソフトウェアプログラムも組み込まれている。また、画像情報管理サーバ３は画像情報データベース４が構成される大容量ストレージを備えている。このストレージは、画像情報管理サーバ３とデータバスによって接続された大容量のハードディスク装置であってもよいし、ネットワーク１９に接続されているＮＡＳ（Network Attached Storage）やＳＡＮ（Storage Area Network）に接続されたディスク装置であってもよい。
画像情報管理サーバ３は、モダリティ１からの画像情報の登録要求を受け付けると、その画像情報をデータベース用のフォーマットに整えて画像情報データベース４に登録する。
画像情報データベース４には、被写体画像を表す画像データと付帯情報とが登録される。付帯情報には、例えば、個々の画像を識別するための画像ＩＤ、被写体を識別するための患者ＩＤ、検査を識別するための検査ＩＤ、画像情報ごとに割り振られるユニークなＩＤ（ＵＩＤ）、その画像情報が生成された検査日、検査時刻、その画像情報を取得するための検査で使用されたモダリティの種類、患者氏名、年齢、性別などの患者情報、検査部位（撮影部位）、撮影情報（撮影プロトコル、撮影シーケンス、撮像手法、撮影条件、造影剤の使用など）、１回の検査で複数の画像を取得したときのシリーズ番号あるいは採取番号などの情報が含まれうる。画像情報は、例えばＸＭＬやＳＧＭＬデータとして管理されうる。
また、画像情報管理サーバ３は、読影ワークステーション２からの閲覧要求をネットワーク１９経由で受信すると、上記画像情報データベース４に登録されている画像情報を検索し、抽出された画像情報を要求元の読影ワークステーション２に送信する。
読影ワークステーション２は、画像診断医等のユーザによって読影対象画像の閲覧を要求する操作が行われると、画像情報管理サーバ３に対して閲覧要求を送信し、読影に必要な画像情報を取得する。そして、その画像情報をモニタ画面に表示し、画像診断医からの要求に応じて病変の自動検出処理などを実行する。
部位認識結果修正用端末５は、ＣＴやＭＲＩ等のモダリティ１で得られた被検体の複数の部位を含む複数の断層画像の画像情報データベース４への登録に先立って、あるいは登録後に、各断層画像の撮影部位の認識結果を修正するための装置であり、処理装置と１台または２台の高精細ディスプレイとキーボード・マウスなどの入力機器を備えたパソコンやワークステーション等のコンピュータである。なお、ここでの処理内容の詳細については後述する。
ネットワーク１９は病院内の各種装置を接続するローカルエリアネットワークである。但し、読影ワークステーション２が他の病院あるいは診療所にも設置されている場合には、ネットワーク１９は、各病院のローカルエリアネットワーク同士をインターネットもしくは専用回線で接続した構成としてもよい。いずれの場合にも、ネットワーク９は光ネットワークなど画像情報の高速転送を実現できるものとすることが望ましい。
以下、本発明の第１の実施形態となる部位認識結果修正装置の部位認識機能および部位認識結果修正機能、ならびにこれらの機能の周辺機能の詳細について説明する。図２は、これらの機能を実現する構成とデータの流れを模式的に示したブロック図である。図に示したように、この装置は、部位認識部２１、認識結果表示制御部２２、修正情報入力受付部２３、部位修正部２４、表示部３１、データベース登録部３２から構成され、部位認識部２１が、入力された断層画像SLn（n=1,2,・・・）の各々に表された体部の部位Ｐnを認識し、認識結果表示制御部２２が、入力された断層画像と各画像に対する認識結果（SLn，Ｐn）を表示部３１に表示させ、修正情報入力受付部２３が、認識結果を修正するための情報Ｍの入力を受け付け、部位修正部２４が、修正情報MIに基づいて認識結果の修正を行い、認識結果表示制御部２２が、修正後の認識結果（SLn，Ｐn´）を表示部３１に表示させ、修正が完了したら、データベース登録部３２が、入力された断層画像と各画像に対する最終的な認識結果（SLn，Ｐn´）を画像情報データベース４に登録する。以下、各処理部の詳細について説明する。
部位認識部２１は、画像情報管理サーバ３に実装される処理部であり、入力された被検体である人体の体部の複数の部位を表すＣＴによる複数の断層画像に対して部位認識処理を行い、各断層画像に表された部位を決定し、決定された部位を表す情報（例えば、部位名のテキストまたは各部位を識別するコード）を、対応する断層画像にＤＩＣＯＭ規格に基づく付帯情報として付加して出力する。この部位認識処理では、各断層画像を人体の体部の上から下に向かって並べた場合に、頭部、頭頸部、頸部、胸部、胸腹部、腹部、骨盤部、脚部という体部の並び順が保たれるように、各断層画像に表された部位が決定される。
図３は、部位認識部２１の処理の詳細を表すブロック図である。図に示すように、入力された断層画像SLn（n=1,2,・・・）の正規化を行う正規化処理部４１と、正規化された断層画像SNnから多数の特徴量ｃnm（m=1,2,・・・）を算出する特徴量算出部４２と、正規化断層画像SNn毎に算出された特徴量ｃnmを、AdaBoost手法によって得られた判別器に入力して、部位らしさを表す部位毎のスコアscnp（ｐ＝頭部、頭頸部、頸部、胸部、胸腹部、腹部、骨盤部、脚部）を算出する部位スコア算出部４３と、算出された部位スコアscnpを入力として、動的計画法を用いて、上記体部の並び順が保たれるように各入力断層画像SLnに表された部位Ｐnを決定する部位決定部４４とから構成される。
正規化処理部４１は、入力画像SLnから人体領域を抽出し、抽出された人体領域の情報からランドマーク（基準点）を算出し、算出されたランドマークを基準としてアフィン変換を行って入力画像を拡大・縮小、平行移動、回転させて正規化画像SNnを生成する処理を行う。この正規化処理の目的は、入力される断層画像SLnにおける、個体差や撮影条件等による画像中の人体領域の大きさや傾きのばらつきを排除し、人体領域中の構造物（例えば骨領域や空気領域）の位置を合わせておくことにより、後続の部位認識処理の効率や精度を上げることにある。
ここで、入力画像SLnから人体領域を抽出する方法は本発明の実施時点における公知の方法でよく、例えば、入力画像SLnに対して２値化処理とノイズ除去処理を行った後、輪郭抽出処理により人体領域候補となる輪郭を抽出し、抽出された各輪郭の内部の面積が所定の閾値未満の輪郭を除去し、残った輪郭の内部を人体領域と判定する方法（特開平9−187444号公報参照）等が挙げられる。
また、ランドマークは、例えば、輪郭線と正中面との交点となる２点とすることができる。具体的には、抽出された人体領域に対するラベリング処理によって得られるラベリング数に応じて、図４のようにランドマークを求めることができる。図４（ａ）（ｂ）のようにラベリング数が１の場合には、ラベリング領域（人体領域）RLの重心Gを求め、その重心Gを通る長軸ALおよび短軸AS、ならびに、その重心Gを通る、断層画像SLnの上下方向の直線LVを設定し、長軸ALと短軸ASのうち直線LVとなす角が小さい方の軸と人体領域RLの輪郭線との交点をランドマークLM1、LM2とする。図４（ａ）は、短軸ASと直線LVのなす角の方が長軸ALと直線LVのなす角よりも小さい場合を模式的に表したものであり、胸部、胸腹部、腹部、骨盤部が表された画像に相当する。図４（ａ）は、長軸ALと直線LVのなす角の方が短軸ASと直線LVのなす角よりも小さい場合を模式的に表したものであり、頭部、頭頸部、頸部が表された画像に相当する。また、図４（ｃ）はラベリング数が２の場合であり、脚部が表された画像に相当する。この場合には、各ラベリング領域RL1、RL2について、重心G1、G2を求め、各重心G1、G2を通る長軸AL1、AL2および短軸AS1、AS2、ならびに、その各重心G1、G2を通る、断層画像SLnの上下方向の直線LV1、LV2を設定し、各ラベリング領域について、長軸AL1、AL2と短軸AS1、AS2のうち直線LV1、LV2となす角が小さい方の軸と人体領域RL1、RL2の輪郭線との交点をIS11、IS12、IS21、IS22とし、互いに交差しない線分IS11 IS21、線分IS12 IS22の中点を各々ランドマークLM1、LM2とする。なお、２つのラベリング領域の面積比が所定の範囲にない場合、すわなち、２つのラベリング領域の面積の差が所定の閾値よりも大きい場合には、面積の小さい方のラベリング領域は医療器具等であると判断し、面積が大きい方のラベリング領域について上記のラベリング数が１の場合と同様の処理を行う。図４（ｄ）はラベリング数が３の場合であり、頸部と両腕が表された画像に相当する。この場合には、各ラベリング領域RL1、RL2、RL3のうち面積が最大の領域（ここではRL2）に対して上記のラベリング数が１の場合と同様にしてランドマーク
LM1、LM2を求める。なお、図４（ａ）（ｂ）（ｄ）において、ランドマークLM1、LM2の直線LVからの距離が所定の閾値よりも大きい場合、ランドマークLM1、LM2の位置を直線LVに近づくようにラベリング領域RLの輪郭に沿って移動させる補正処理を行うようにしてもよい。同様に、図４（ｃ）において、ランドマークLM1、LM2の、線分LM1LM2の中点G3を通る、断層画像SLnの上下方向の直線LV3からの距離が所定の閾値よりも大きい場合には、ランドマークLM1、LM2の位置を直線LV3に近づくように線分IS11IS21、線分IS12IS22に沿って移動させる補正処理を行うようにしてもよい。移動量の具体例としては、ランドマークLM1、LM2と直線LVまたはLV3との距離が20％短くなるように移動させることが考えられる。
このようにして求めたランドマークLM1、LM2を基準に、２つのランドマークLM1、LM2が断層画像SLnの水平方向における中心に位置し、かつ、２つのランドマーク間の距離が所定の値になるように、アフィン変換等を行って画像を正規化する。
特徴量算出部４２は、正規化画像SNnの各々から、多数の種類の特徴量ｃnmを算出する処理を行う。特徴量ｃnmの具体例としては、正規化画像SNn中に設定されたブロック（例えば３×３画素等）内の画素値や画素値の平均値、最大値、最小値、中間値、ＣＴ値に基づく閾値処理によって抽出された人体領域中の空気領域や骨領域の人体領域に対する割合、その人体領域の周長と同じ周長を有する円の面積に対する人体領域の面積の割合（円形度）等が挙げられる。なお、特徴量ｃnmは、算出された値そのものであってもよいし、算出された値を多値化したものであってもよい。
部位スコア算出部４３は、特徴量ｃnmを、AdaBoost手法に基づく学習によって得られた部位毎の判別器群に入力して、断層画像SLn毎に、各部位らしさを表す部位スコアscnpを算出する処理を行う。ここで、部位毎の判別器群は、学習用サンプルとなるその部位が表されていることがわかっている複数の画像とその部位が表されていないことがわかっている複数の画像の各々について上記と同様にして算出された多数の種類の特徴量を用いてAdaBoost手法に基づく学習を行うことによって得られたものである。１つの部位を判別する判別器群には１以上の判別器が含まれるが、２以上の判別器が含まれる場合、各判別器は判別能力について相補的な関係を有したものとなっている。また、判別器群は判別すべき部位の種類と同数生成され、判別器群毎に使用される特徴量の種類が決定される。なお、この学習および部位スコア算出方法の詳細については特開2005-108195号公報等に開示されている。部位スコアの算出は、上記の方法の他、人工ニューラルネットワーク（ANN）、サポートベクターマシン（SVM）、適合ベクターマシン（Relevance Vector Machine; RVM）等の他の学習手法によって生成された判別器を用いた方法や、１つの特徴量または複数の特徴量の組合せに対して部位スコアを決定する参照テーブルを用いた方法等であってもよい。また、特徴量算出部４２と部位スコア算出部４３の処理を、特許文献１記載の部位毎のテンプレートマッチングや特許文献２記載の部位毎の固有画像との比較処理によって得られる類似度を部位スコアとする処理に置換してもよい。
上記の処理により、断層画像SLn毎に、部位毎のスコアscnpが算出される。図５（ａ）は、断層画像（スライス）SLn毎に算出された部位毎のスコアscnpの一例を示した表であり、部位スコアscnpの値が大きいほどその部位である確率が高いことを表している。この表において、スライスSLn毎に部位スコアscnpが最大となる部位を辿ると、スライス１−頭頸部、スライス２−頭頸部、スライス３−頸部、スライス４−胸部、スライス５−頸部、スライス６−胸部となり、スライス４から６の間で、人体の体部の並び順との不整合がある。そこで、次の部位決定部４４の処理でその修正が行われる。
部位決定部４４は、予め作成された、人体の体部の配置順、すなわち、頭部、頭頸部、頸部、胸部、胸腹部、腹部、骨盤部、脚部の順で配置された参照部位と、各断層画像SLnにおける部位スコアscnpの最大値との間の不一致が生じないように、各断層画像SLnに表された部位Ｐnを最終的に決定する処理を行う。ここでは、参照部位と各断層画像SLnにおける部位スコアscnpの最大値との間に不一致がある場合にコストがかかるようにして、コストが最小かつ最短となる経路を求めることによって、部位Ｐnを最終決定する。具体的には、最適化問題を解くための手法を用いればよく、本実施形態では、その具体例として、動的計画法（DPマッチング；Dynamic Programming）を用いた手法を説明する。
まず、図５（ａ）の部位スコアscnpについて、各スライスにおける部位スコアscnpの最大値から各スコア値を減算する。これにより、図５（ｂ）に示したように、各部位スコアscnpの大小関係が逆転した、すなわち、各部位スコアscnpが0以上の値に変換され、部位スコアscnpが最も高かった部位のスコア値が0に変換された重みマップが生成される。ここで、重みマップの生成の際には、上記の減算ではなく、参照テーブルを用いた変換を行うようにしてもよい。
次に、図５（ｂ）の重みマップを入力として、DPマッチングによりコストが最小となる経路を算出する。以下、本出願人が特願2006-140041号にて提案している手法についての記載を引用する。まず、図５（ｂ）の重みマップを入力として、図５（ｃ）に示すようなコストマップを生成する。図５（ｃ）において、各セル（ｎ，ｐ）のコストは次のように設定される。ここで、ｎはスライスの番号を示しており、ｐは部位を表す番号（１：頭頸部、２：頸部、３：胸部）となっている。
（１，１）：重みマップにおける（１，１）の値（図５（ｂ）参照）
（ｎ，１）：重みマップにおける（ｎ−１，１）の値＋所定の値（ここでは0）
（１，ｍ）：重みマップにおける（１，ｍ−１）の値＋所定の値（ここでは0）
（ｎ，ｍ）：次の（ｉ）〜（iii）の内の最小値
（ｉ）コストマップにおける（ｎ−１，ｍ−１）の値
＋重みマップにおける（ｎ，ｍ）の値
（ii）コストマップにおける（ｎ，ｍ−１）の値
＋重みマップにおける（ｎ，ｍ）の値＋所定の値（ここでは1.0）
（iii）コストマップにおける（ｎ−１，ｍ）の値
＋重みマップにおける（ｎ，ｍ）の値＋（ここでは1.0）
次に、コストマップを、右側から左側に向かって、周辺の最小値を順次辿って行く。それにより、スライス番号と部位との対応マップが作成される。
これにより、図６に示した、人体の体部の並び順（参照部位）を縦軸とし、各スライスSLnにおける部位スコアscnpの最大値による仮認識結果を横軸とするマッチングカーブに基づいて、仮認識結果を、対応する参照部位に置き換えることにより、各スライスSLnの部位を最終決定する処理が行われたことになる。
認識結果表示制御部２２は、部位認識結果修正用端末５に実装される処理部であり、断層画像と各画像に対する認識結果（SLn，Ｐn）を表示部３１に表示させる処理や、後述の認識結果の修正処理後の結果（SLn，Ｐn´）を表示部３１に表示させる処理を行う。ここで、表示部３１は、部位認識結果修正用端末５のディスプレイである。図７は、認識結果（SLn，Ｐn）を表示する画面の一例である。図に示したように、部位認識結果画面５０には、各断層画像SLnが表示される領域５１、その画像に表された部位の認識結果Ｐnが表示される領域５２、断層画像SLnの表示を切り替えるスライス切替ボタン５３（前スライス切替ボタン５３ａ、次スライス切替ボタン５３ｂ）、複数の断層画像SLnをＭＰＲの手法を用いて再構成することによって得られる冠状断による断面画像CPが表示される領域５５、断面画像CPの鉛直方向における各位置、すなわち、断層画像SLnの各スライス位置での部位認識結果Ｐnを色分け表示するカラーバー５６、カラーバー５６における各領域の部位を説明する凡例５７が含まれている。ユーザは、この画面において、各断層画像SLn（領域５１）と、その画像に表された部位の認識結果Ｐn（領域５２）を個別的に確認することができるとともに、冠状断による断面画像CP（領域５５）とカラーバー５６とによって、その複数の断層画像SLnの鉛直方向の各位置における部位の認識結果Ｐnを全体的に確認することができる。なお、ユーザが、部位認識結果修正用端末５のマウス等を用いてスライス切替ボタン５３を押下する操作（クリック）を行うことによって、各断層画像SLnを切り替えて表示させることができる。表示される断層画像SLnの切替えは、所定の時間間隔で自動的に行うようにすることもできる。また、領域５５に表示される再構成画像は、矢状断による断面画像であってもよい。
修正情報受付部２３は、部位認識結果修正用端末５に実装される処理部であり、部位認識結果を修正するための修正情報MIの入力を受け付けるユーザインターフェースとして機能する。本実施形態では、修正情報MIとして、異なる部位間の境界となるべき位置を受け付ける。図７の部位認識結果表示画面５０の部位修正ボタン５４はこのユーザインターフェースの一例である。例えば、ユーザは、スライス切替ボタン５３を押下して、各断層画像SLn（領域５１）およびその画像の部位認識結果Ｐn（領域５２）を切り替えながら表示内容を確認し、異なる部位間の境界となるべき位置を特定し、その位置を越えた後の最初の断層画像が表示されているタイミングで、部位認識結果修正用端末５のマウス等を用いて部位修正ボタン５４を押下する操作を行う。修正情報受付部２３は、部位修正ボタン５４に対する押下イベントを検出し、検出時点で表示されている断層画像（SLIとする）とその前に表示されていた断層画像SLI-1との間の位置を、異なる部位間の境界となるべき位置を表す修正情報MIとして受け付ける。なお、ユーザによる上記境界の位置の指定は、部位修正ボタン５４の押下によって行わずに、領域５１に表示されている断層画像SLnをダブルクリック等することによって行うようにしてもよい。
図８は、上記修正情報MIの入力受付の具体例を表したものであり、１５枚の断層画像（スライス）SL1からSL15毎の、正解となる部位（ユーザが判断した部位）および部位認識部２１による認識結果を表している。図８（ａ）の例では、ユーザが、異なる部位間の境界と認識されているスライス６，７付近のスライス、例えばスライス５から順に部位認識部２１による認識結果を確認していったところ、図７の画面例のように、スライス７が胸部と認識されているが、画像中に肺の領域（６１）が見られるものの、全体としては腹部の各器官が見られるので、この認識結果は胸腹部の誤りであり、スライス６と７の間が胸部と胸腹部の境界であると判断し、スライス７が表示されているタイミングで部位修正ボタン５４の押下を行う。これにより、修正情報受付部２３は、スライス７とその前のスライス６の間の位置を異なる部位の境界となるべき位置、すなわち修正情報MIとして受け付ける。一方、図８（ｂ）の例では、ユーザが、上記と同様に、例えばスライス５から順に部位認識部２１による認識結果を確認していったところ、スライス７において胸腹部という認識結果は胸部の誤りであると判断するが、その前のスライス６の認識結果も胸部であるから、胸部と胸腹部の境界はさらに先にあると判断し、次のスライスの認識結果を順次確認し、正しく胸腹部と認識されているスライス１０を確認したところで、スライス９と１０の間が胸部と胸腹部の境界であると判断し、スライス１０が表示されているタイミングで部位修正ボタン５４の押下を行う。これにより、修正情報受付部２３は、スライス１０とその前のスライス９の間の位置を異なる部位の境界となるべき位置、すなわち修正情報MIとして受け付ける。なお、この時点では、修正情報受付部２３は、修正情報MIに含まれる境界の位置がどの部位間の境界の位置であるかは認識することができない。
なお、上記の例では、修正情報入力受付部２３が、部位修正ボタン５４の押下時に表示されているスライスとその前のスライスの間に異なる部位の境界があると判断しているが、部位修正ボタン５４の押下時に表示されているスライスとその後のスライスの間に異なる部位の境界があると判断するようにし、ユーザは、図８（ａ）ではスライス６、図８（ｂ）ではスライス９が表示されているタイミングで部位修正ボタン５４を押下するようにしてもよい。さらに、部位修正ボタン５４を押下すると、その時点で領域５１に表示されているスライスとそのスライスの前後のいずれのスライスとの間を異なる部位の境界とするか選択するユーザインターフェースを設け、修正情報受付部２３がその選択に応じて境界の位置を特定するようにしてもよい。
また、図７の部位認識結果表示画面５０の領域５５に表示されている断面画像CPの各位置と、対応する断面画像SLnとを関連づけて記憶させておき、ユーザが、断面画像CPにおける異なる部位間の境界となるべき位置をマウスによるダブルクリック等の操作によって指定し、その指定された境界の位置を修正情報MIとして受け付けるようにしてもよい。
部位修正部２４は、部位認識結果修正用端末５に実装される処理部であり、本実施形態では、修正情報MIとして受け付けられた異なる部位間の境界となるべき位置およびその位置の近傍の断層画像に対する部位認識結果に基づき、認識結果の修正処理を行う。以下、この処理の流れを表した図９のフローチャートを用いて詳細を説明する。
まず、部位修正部２４は、修正情報MIを取得する(#21)。次に、断層画像を識別するカウンタｉに、前記境界となるべき位置の前の断層画像を表す値Ｍをセットし(#22)、断層画像SLiおよびSLi-1における部位認識結果ＰiおよびＰi-1を取得する(#23)。ここで、部位認識結果ＰiとＰi-1を比較し(#24)、両者が一致する場合には(#24; YES)、カウンタｉを１減算し(#25)、カウンタｉの値が１に達していなければ(#26; NO)、断層画像SLiおよびSLi-1における部位認識結果ＰiおよびＰi-1の取得(#23)、部位認識結果ＰiとＰi-1の比較(#24)を行う。このステップ#23から#26までの処理を、部位認識結果ＰiとＰi-1が異なるか(#24; NO)、カウンタｉの値が１（先頭の断層画像）に達するまで(#26; YES)、繰り返し行う。その後、断層画像SLiとSLMの間の長さｄ1を求める(#27)。この長さｄ1は、断層画像SLiとSLMの間に含まれる断層画像の数をそのまま用いてもよいし、断層画像SLiとSLMの間に含まれる断層画像の各々の付帯情報に記録されているスライス厚とスライス間隔の総和を用いてもよい。
部位修正部２４は、上記ステップ#22から#27までの処理と並行して、または、上記ステップ#22から#27までの処理と前後して、断層画像を識別する別のカウンタｊに、前記境界となるべき位置の後の断層画像を表す値Ｍ＋１をセットし(#28)、断層画像SLjおよびSLj+1における部位認識結果ＰjおよびＰj+1を取得し(#29)、部位認識結果ＰjとＰj+1を比較し(#30)、両者が一致する場合には(#30; YES)、カウンタjを１加算し(#31)、カウンタjの値が断層画像の合計数JMAX（最後の断層画像を表す）に達していなければ(#32; NO)、断層画像SLjおよびSLj+1における部位認識結果ＰjおよびＰj+1の取得(#29)、部位認識結果ＰjとＰj+1の比較(#30)を行う。このステップ#29から#32までの処理を、部位認識結果ＰjとＰi+1が異なるか(#30; NO)、カウンタjの値がJMAXになるまで(#32; YES)、繰り返し行う。その後、断層画像SLjとSLM+1の間の長さｄ2を求める(#33)。
以上の処理により、部位修正部２４は、部位認識結果における異なる部位間の境界の位置を、修正情報MIとして取得された異なる部位間の境界となるべき位置（修正位置）の両側で検出し、検出された境界の位置の各々と前記修正位置の間の長さｄ1、ｄ2を求めたことになる。
部位修正部２４は、さらに、断層画像SLiとSLMの間の長さｄ1と断層画像SLjとSLM+1の間の長さｄ2を比較し(#34)、長さｄ1の方が長い場合には(#34;">")、断層画像SLM+1からSLjまでの部位認識結果ＰM+1からＰjを、断層画像SLj+1の部位認識結果Ｐj+1に修正する(#35)。一方、長さｄ2の方が長い場合には(#34;"<")、断層画像SLiからSLMまでの部位認識結果ＰiからＰMを、断層画像SLi-1の部位認識結果Ｐi-1に修正する(#36)。この処理により、検出された境界の位置のうち、それらの位置の各々と前記修正位置の間の長さが短い方の境界の位置とその修正位置との間にある断層画像を誤認識断層画像とし、その短い方の境界の位置に隣接する断層画像のうち誤認識断層画像ではない方の断層画像における部位の認識処理の結果を正解認識結果として、認識結果の修正を行ったことになる。なお、長さｄ1とｄ2が等しい場合には(#34;"=")、この方法による部位の修正ができない旨のエラーメッセージを表示部３１に出力させる(#37)。
図８（ａ）の例は、上記説明において、Ｍ＝６で、ｉ＝２、ｊ＝９の時に部位認識結果における異なる部位間の境界の位置の各々が検出され、ｄ1＞ｄ2の場合に相当し、スライス７から９を誤認識断層画像とし、スライス１０の部位認識結果を正解認識結果として、ユーザの意向どおりに修正が行われている。一方、図８（ｂ）の例は、上記説明において、Ｍ＝９で、ｉ＝７、ｊ＝１４の時に部位認識結果における異なる部位間の境界の位置の各々が検出され、ｄ1＜ｄ2の場合に相当し、スライス７から９を誤認識断層画像とし、スライス６の部位認識結果を正解認識結果として、ユーザの意向どおりに修正が行われている。
データベース登録部３２は、画像情報管理サーバ３に実装される処理部であり、複数の断層画像の各々に、対応する最終的な部位認識結果を付帯させて画像情報データベース４に登録する処理を行う。登録の際、部位毎に断層画像を分割して登録してもよい。
次に、図１０のフローチャート、図２のブロック図等を用いて、本発明の部位認識結果修正処理のワークフローについて説明する。
まず、モダリティ１が設置された撮影室において、複数の撮影部位を含む撮影オーダーを受信し(#1)、モダリティ１でその撮影オーダーに基づいて被検体の撮影を行い、複数の断層画像SLn（n=1,2,・・・）を取得し(#2)、複数の断層画像SLnの画像データを画像情報管理サーバ３に送信する(#3)。なお、撮影オーダーは、単一の部位に対する撮影オーダーを統合したものであってもよい。
次に、画像情報管理サーバ３は、モダリティ１から送信されてきた複数の断層画像SLnの画像データを受信し(#4)、部位認識部２１は、複数の断層画像SLnの各々に表された部位を認識する前述の処理を行い、認識結果Ｐnを、対応する各断層画像SLnの付帯情報として記録する(#5)。画像情報管理サーバ３は、認識結果Ｐnが記録された複数の断層画像SLnのデータ（SLn，Ｐn）を部位認識結果修正用端末５に送信する(#6)。
部位認識結果修正用端末５は、画像情報管理サーバ３からデータ（SLn，Ｐn）を受信し(#7)、認識結果表示制御部２２が、図７の部位認識結果画面５０のように、ユーザによるスライス切替ボタン５３の押下に応じて、あるいは、所定の時間間隔で、複数の断層画像SLnと認識結果Ｐnを関連づけて表示部３１に順次切り替えながら表示させるとともに、複数の断層画像SLnから再構成された矢状断による断面画像CPや、認識結果Ｐnを断面画像CPと対応づけたカラーバー５６を表示させる(#8)。
ユーザが、特に異なる部位間の境界と認識されている位置付近の断層画像SLnにおける認識結果Ｐnを確認し、異なる部位間の境界となるべき修正位置の次の断層画像が表示されているタイミングで部位修正ボタン５４を押下すると、修正情報受付部２３は、その修正位置を修正情報MIの入力として受け付ける(#9; YES)。部位修正部２４は、前述のように、修正情報MIとして受け付けられた修正位置およびその修正位置の近傍の断層画像に対する部位認識結果に基づき、認識結果が誤っている誤認識断層画像とその正解となる認識結果を決定し、誤認識断層画像に対する認識結果をその正解に修正し(#10)、認識結果表示制御部２２は、修正内容が反映された部位認識結果画面５０を表示部３１に表示させる(#8)。さらに、ユーザによる必要に応じた上記修正指示(#9; YES)、部位修正部２４による上記修正処理(#10)を行い、ユーザが最後の断層画像の認識結果まで確認し、これ以上修正がないと判断し(#9; YES)、図７の認識結果確定ボタン５８を押下すると、部位認識結果修正用端末５は、修正後の認識結果Ｐn´を、対応する各断層画像SLnの付帯情報として記録し(#11)、修正後の認識結果Ｐn´が記録された複数の断層画像SLnのデータ（SLn，Ｐn´）を画像情報管理サーバ３に送信する(#12)。なお、修正がまったく不要な場合には(#9; NO)、ステップ#9(YES)から#10、#8への処理は行われない。
画像情報管理サーバ３は、部位認識結果修正用端末５からデータ（SLn，Ｐn´）を受信し、データベース登録部３２が、画像情報データベース４への登録処理を行う(#14)。
このように、本発明の第１の実施形態となる部位認識結果修正装置を含む医療情報システムでは、認識結果表示制御部２２が、複数の断層画像SLnおよびそれらから再構成された矢状断による断面画像CPと、複数の断層画像SLnの各々に表された被検体中の部位の認識処理の結果Ｐnであって、各断層画像SLnにおいて認識された部位の断層画像間での位置関係が被検体中の複数の部位の解剖学的位置関係に整合するものとを表示部３１に表示させ、修正情報入力受付部２３が、異なる部位間の境界となるべき修正位置を表す修正情報MIの入力を受け付け、部位修正部２４が、修正情報MI、および、修正情報MIに含まれる前記修正位置の近傍の断層画像に対する前記認識処理結果に基づいて、前記認識処理結果が誤っている誤認識断層画像、および、誤認識断層画像における正しい部位を表す正解認識結果を決定し、誤認識断層画像に対する前記の認識処理の結果を正解認識結果に修正する。したがって、部位認識結果の修正を行う撮影技師や画像診断医等のユーザは、前記修正位置を指定する操作を行えばよいだけで、認識結果の誤りが含まれる断層画像を個別的に修正する必要がなくなるので、より簡便な最小限の入力操作だけで部位認識結果の修正が可能になり、撮影技師や画像診断医等の時間的・作業的負担が軽減される。
ここで、部位修正部２４は、認識処理によって得られた異なる部位間の境界の位置を前記修正位置の両側で検出し、検出された境界の位置のうち前記修正位置からの距離が近い方の境界の位置と前記修正位置との間にある断層画像を誤認識断層画像とし、その近い方の境界の位置に隣接する断層画像のうち誤認識断層画像ではない方の断層画像における部位の認識処理の結果を正解認識結果としている。この処理は、前記の距離が近い方の境界の位置が誤っていることを前提としており、前記の距離が遠い方の境界の位置が誤りの場合には、上記の修正処理は誤ったものとなってしまうが、実際の部位認識処理の結果では、各部位について、正しく認識された断層画像の方が誤って認識された断層画像よりも多く、異なる部位間の境界付近の数枚程度の断層画像で誤認識となることがほとんどであるから、上記前提による修正処理で実用上の問題が生じる可能性はきわめて低い。
上記の実施形態では、修正情報入力受付部２３は、異なる部位の境界の位置を修正情報MIとして受け付けているが、例えば、ユーザが、異なる部位間の境界となるべき位置に隣接する、部位認識結果Ｐnが誤っている断層画像Ｐnが表示されているタイミングで部位修正ボタン５４を押下し、その表示されている断層画像SLnを表す情報を修正情報MIとして受け付けるようにしてもよい。図８（ａ）の例ではスライス７、図８（ｂ）の例ではスライス９を表す情報が修正情報MIとなる。この場合、その断層画像の前後のいずれの側に前記境界の位置があるのかを部位認識結果修正用端末５では認識することができないが、図９のフローチャートにおいて、ステップ#28のM+1をMに、ステップ#35のＰM+1をＰMに読み替えれば、上記と同様の修正処理により認識結果の修正が可能である。また、ユーザが、異なる部位間の境界となるべき位置に隣接する、部位認識結果Ｐnが正しい断層画像Ｐn（図８（ａ）の例ではスライス６、図８（ｂ）の例ではスライス１０）が表示されているタイミングで部位修正ボタン５４を押下し、その表示されている断層画像SLnを表す情報を修正情報MIとして受け付けるようにしてもよい。この場合も、その断層画像の前後のいずれの側に前記境界の位置があるのかを部位認識結果修正用端末５では認識することができないが、図９のフローチャートにおいて、ステップ#22のMをM-1に、ステップ#36のＰMをＰM-1に読み替えれば、上記と同様の修正処理により認識結果の修正が可能である。
次に、本発明の部位認識結果修正処理の第２、第３の実施形態について第１の実施形態との相違点を中心に説明する。これらの実施形態では、修正情報入力受付部２３および部位修正部２４の内容が第１の実施形態と異なるが、その他については第１の実施形態と同様である。
本発明の第２の実施形態となる部位認識結果修正装置は、異なる部位間の境界となるべき修正位置に隣接する断層画像、および、その断層画像における正しい部位を修正情報として受け付け、前記修正位置の近傍の断層画像に対する認識処理の結果に基づいて認識結果の修正を行うものである。
図１１は、本実施形態における修正情報入力受付部２３のユーザインターフェースの一例である。図に示したように、図７の部位認識結果Ｐnの表示領域５２がリストボックス５９に置換されたものとなっている。例えば、ユーザは、スライス切替ボタン５３の押下によって領域５１に表示される断層画像SLnを切り替えながら、リストボックス５９のボックス部分５９ａに表示される部位認識結果を確認し、異なる部位間の境界となるべき修正位置に隣接する、部位認識結果が誤っている断層画像を表示させ、リストボックス５９のボックス部５９ａの矢印を押下する。これにより、リストボックス５９のリスト部５９ｂが表示され、ユーザは、リスト部５９ｂに表示されている部位名から、その表示されている断層画像の正しい部位名を選択（クリック）する。さらに、ユーザが部位修正ボタン５４を押下すると、修正情報入力受付部２３は、その時点で表示されている断層画像を特定する情報と、ユーザによって選択された部位名を修正情報MIとして受け付ける。なお、上記のユーザインターフェースは例示であり、例えば、各部位名を表すボタンを画面に表示させ、ユーザがそのボタンを押下することによって正しい部位名が得られるようにするといった、他のユーザインターフェースであってもよい。
図１２は、本実施形態における部位修正部２４の処理の流れを表すフローチャートである。まず、部位修正部２４は、修正情報MIを取得する(#41)。次に、断層画像を識別するカウンタｉに、修正情報MIとして受け付けられた断層画像（SLMとする）の前の断層画像SLM-1を表す値M-1をセットし(#42)、断層画像SLiにおける部位認識結果Ｐiを取得する(#43)。ここで、部位認識結果Ｐiが修正情報MIとして受け付けられた正解部位（ＰMIとする）と一致しなければ(#44; NO)、カウンタｉを１減算し(#45)、カウンタｉの値が１（先頭の断層画像）に達していなければ(#46; NO)、部位認識結果Ｐiの取得(#43)、部位認識結果Ｐiと正解部位ＰMIの比較(#44)を行う。このステップ#43から#46までの処理を、部位認識結果Ｐiが正解部位ＰMIと一致するか(#44; YES)、カウンタｉの値が１に達するまで(#46; YES)、繰り返し行う。部位認識結果Ｐiが正解部位ＰMIと一致した場合(#44; YES)、部位修正部２４は、断層画像SLi+1から断層画像SLMまでを誤認識断層画像と判断し、各断層画像を表す情報をメモリに格納する(#47)。
部位修正部２４は、上記ステップ#42から#47までの処理と並行して、または、上記ステップ#42から#47までの処理と前後して、断層画像を識別する別のカウンタｊに、修正情報MIとして受け付けられた断層画像SLMの後の断層画像SLM+1を表す値M+1をセットし(#48)、断層画像SLjにおける部位認識結果Ｐjを取得する(#49)。ここで、部位認識結果Ｐjが修正情報MIとして受け付けられた正解部位ＰMIと一致しなければ(#50; NO)、カウンタｊを１加算し(#51)、カウンタｊの値が断層画像の合計数JMAX（最後の断層画像を表す）に達していなければ(#52; NO)、部位認識結果Ｐjの取得(#49)、部位認識結果Ｐjと正解部位ＰMIの比較(#50)を行う。このステップ#49から#52までの処理を、部位認識結果Ｐjが正解部位ＰMIと一致するか(#50; YES)、カウンタｊの値がJMAXに達するまで(#52; YES)、繰り返し行う。部位認識結果Ｐjが正解部位ＰMIと一致した場合(#50; YES)、部位修正部２４は、断層画像SLMから断層画像SLj-1までを誤認識断層画像と判断し、各断層画像を表す情報をメモリに格納する(#53)。
以上の処理により、部位修正部２４は、修正情報MIとして入力された断層画像SLMの近傍の断層画像の部位認識結果を、断層画像SLMから離れる向きに、断層画像SLMの両側で検査し、前記認識処理によって得られた部位が前記入力された正しい部位と一致する正解断層画像を検出し、その正解断層画像と断層画像SLMとの間に含まれる断層画像および断層画像SLMを誤認識断層画像と判断したことになる。
最後に、部位修正部２４は、ステップ#47または#53で判断された誤認識画像の部位認識結果を正解部位ＰMIに修正する(#54)。
例えば図１３に示した断層画像に対する認識結果の場合、図１３（ａ）では、ユーザがスライス７の正しい部位認識結果が胸腹部である旨の入力を行い、部位修正部２４は、スライス１０の部位認識結果が、入力された正しい部位（胸腹部）と一致すると判断し、スライス７から９を誤認識スライスとして、認識結果を正しい部位（胸腹部）に修正する。一方、図１３（ｂ）では、ユーザがスライス９の正しい部位認識結果が胸部である旨の入力を行い、部位修正部２４は、スライス６の部位認識結果が、入力された正しい部位（胸部）と一致すると判断し、スライス７から９を誤認識スライスとして、認識結果を正しい部位（胸部）に修正する。
このように本発明の第２の実施形態となる部位認識結果修正装置では、修正情報入力受付部２３が、異なる部位間の境界となるべき修正位置に隣接する断層画像のうち前記認識処理の結果が誤っている方の断層画像SLM、およびその断層画像における正しい部位ＰMIを含む修正情報MIの入力を受け付け、部位修正部２４が、入力された断層画像SLMの近傍の断層画像のうち、前記認識処理によって得られた部位が正しい部位ＰMIと一致する正解断層画像を検出し、正解断層画像と断層画像SLMとの間に含まれる断層画像および断層画像SLMを誤認識断層画像とし、正しい部位ＰMIを正解認識結果として修正を行う。したがって、ユーザは、前記の断層画像SLM、およびその断層画像における正しい部位ＰMIを指定する操作を行えばよいだけで、認識結果の誤りが含まれる断層画像を個別的に修正する必要がなくなるので、より簡便な最小限の入力操作だけで部位認識結果の修正が可能になり、ユーザの時間的・作業的負担が軽減される。
なお、部位修正部２４は、上記の処理を行う代わりに、入力された断層画像SLMの前後の断層画像SLM-1、SLM+1における部位認識結果ＰM-1、ＰM+1の各々と、入力された正しい部位ＰMIの解剖学的位置関係の整合性を判定し、不整合と判定された方の側に誤認識断層画像が存在すると判断し、前記認識処理の結果が正しい部位ＰMIと一致する断層画像が見つかるまで、前記不整合と判定された側において、断層画像SLMから離れる向きに、各断層画像の認識結果を正しい部位ＰMIに修正するようにしてもよい。なお、上記の解剖学的位置関係の整合性の判定には、例えば、各部位の並び順を定義した参照テーブルを参照し、入力された正しい部位ＰMIの前後に存在しうる部位を取得し、部位認識結果ＰM-1が正しい部位ＰMIの前に存在しうる部位と一致するか、および、部位認識結果ＰM+1が正しい部位ＰMIの後に存在しうる部位と一致するかを判定すればよい。
例えば図１３（ａ）の場合、部位修正部２４は、入力されたスライス７の前後のスライス６と８における部位認識結果は胸部であり、入力されたスライス７の正しい部位は胸腹部であることから、スライス６が胸部でその後のスライス７が胸腹部であることは解剖学的位置関係に整合するが、スライス７が胸腹部であるのにその後のスライス８が胸部であることは解剖学的位置関係に整合しないと判断し、スライス８以降、認識結果が胸腹部であるスライス１０の前のスライス９までの認識結果を胸腹部に修正する。
本発明の第３の実施形態となる部位認識結果修正装置は、前記修正位置に隣接する前記認識処理の結果が誤っている断層画像から前記認識処理の結果が正しい断層画像までの複数の断層画像を含む範囲を表す修正情報の入力を受け付けるようにし、最後に指定された断層画像における認識処理の結果を正解認識結果として、指定された範囲に含まれる誤認識断層画像の認識結果の修正を行うものである。
本実施形態における修正情報入力受付部２３のユーザインターフェースは、図１４のように、図７に示した部位認識結果画面と同様の画面で提供される。ユーザは、部位認識結果画面５０の矢状断による断面画像CPとカラーバー５６に表された部位認識結果を確認しながら、断面画像CPにおける、異なる部位の境界となるべき修正位置から、部位認識結果が誤っている誤認識断層画像のスライス位置を含むようにして、部位認識結果が正しい位置、すなわち、誤認識断層画像を修正するための正解部位認識結果が得られている断層画像のスライス位置までを含む範囲（図１４の領域６２）を、部位認識結果修正用端末５のマウスのドラッグ操作等によって指定する。修正情報入力受付部２３は、この指定された範囲に含まれる断層画像を表す情報を、指定された順序を保持しながら順次受け付け、修正情報MIを取得する。
あるいは、ユーザは、スライス切替ボタン５３の押下によって領域５１に表示される断層画像SLnを切り替えながら、表示領域５２に表示される部位認識結果を確認し、異なる部位間の境界となるべき修正位置に隣接する、部位認識結果が誤っている断層画像（SLxとする）が表示されているタイミングで、部位修正ボタン５４を押下する。さらに、断層画像SLxに隣接する部位認識結果が誤っている断層画像が順次表示されるようにスライス切替ボタン５３を適宜押下して、断層画像SLxの近傍の部位認識結果が誤っている断層画像を順に表示させ、各断層画像が表示されているタイミングで部位修正ボタン５４を押下していく。さらに、スライス切替ボタン５３を押下し、部位認識結果が正しい断層画像、すなわち、上記の部位認識結果が誤っている断層画像に対する正解となる部位が表された断層画像が表示されたタイミングで部位修正ボタン５４を押下する。このとき、部位認識結果が正しい複数の断層画像に対して部位修正ボタン５４を押下してもよいが、部位認識結果が正しい複数の断層画像に複数種類の部位が含まれないようにする。修正情報入力受付部２３は、部位修正ボタン５４の押下によって指定された断層画像を表す情報を、部位修正ボタン５４が押下された順序を保持しながら順次受け付け、修正情報MIを取得する。
図１５は、本実施形態における部位修正部２４の処理の流れを表すフローチャートである。まず、部位修正部２４は、修正情報MIを取得し(#61)、修正情報入力受付部２３によって最後に受け付けられた断層画像（SLMIとする）を取得し、その断層画像ＩMIにおける認識結果（ＰMIとする）を正解部位とする(#62)。次に、修正情報MIのｋ番目の断層画像SLkを識別するカウンタｋに１をセットし(#63)、断層画像SLkにおける部位認識結果Ｐkを取得する(#64)。ここで、部位認識結果Ｐkが正解部位ＰMIと一致しなければ(#65; NO)、部位認識結果Ｐkを正解部位ＰMIに修正する(#66)。部位認識結果Ｐkが正解部位ＰMIと一致する場合(#65; YES)には何も処理を行わない。そして、カウンタｋを１加算し(#67)、カウンタｋの値がＫMAX（最後から２番目に受け付けられた断層画像に相当する）に達していなければ(#68; NO)、部位認識結果Ｐkの取得(#64)、部位認識結果Ｐkと正解部位ＰMIの比較(#65)、不一致の場合の部位認識結果Ｐkの修正(#66)を行う。このステップ#64から#68までの処理を、カウンタｋの値がＫMAXに達するまで(#68; YES)、繰り返し行う。以上の処理により、修正情報MIから前記認識処理の結果が正しい断層画像SLMIを特定し、その断層画像SLMIにおいて認識された部位を正解認識結果ＰMIとし、修正情報MIに含まれる前記認識処理の結果が正解認識結果ＰMIと異なる断層画像を誤認識断層画像として修正を行う処理が実現される。
例えば図１６に示した断層画像の認識結果の場合、図１６（ａ）では、ユーザが例えばスライス７から１１（最後に指定するスライスはスライス１０から１４までのいずれであってもよい）までを順に指定する入力を行い、部位修正部２４は、最後に指定されたスライス１１の部位認識結果が正解部位（胸腹部）であると判断し、スライス７から１０のうち、認識結果が正解部位と異なるスライス７から９に対して、認識結果を正解部位（胸腹部）に修正する。一方、図１６（ｂ）では、ユーザが例えばスライス９から５（最後に指定するスライスはスライス２から６までのいずれであってもよい）までを順に指定する入力を行い、部位修正部２４は、最後に指定されたスライス５の部位認識結果が正解部位（胸部）であると判断し、スライス９から６のうち、認識結果が正解部位と異なるスライス９から７に対して、認識結果を正解部位（胸部）に修正する。
このように本発明の第３の実施形態となる部位認識結果修正装置では、修正情報入力受付部２３が、異なる部位間の境界となるべき修正位置に隣接する前記認識処理の結果が誤っている断層画像から前記認識処理の結果が正しい断層画像SLMIまでの複数の断層画像を含む範囲を表す修正情報MIの入力を受け付け、部位修正部２４が、修正情報MIから前記認識処理の結果が正しい断層画像SLMIを特定し、その断層画像SLMIにおいて認識された部位を正解認識結果ＰMIとし、修正情報MIに含まれる前記認識処理の結果が正解認識結果ＰMIと異なる断層画像を誤認識断層画像として修正を行う。したがって、ユーザは、誤認識断層画像と正解となる断層画像とを含む範囲を所定の順序で指定する操作を行えばよいだけで、認識結果の誤りが含まれる断層画像を個別的に修正する必要がなくなるので、より簡便な最小限の入力操作だけで部位認識結果の修正が可能になり、ユーザの時間的・作業的負担が軽減される。
上記の実施形態では、ステップ#65において、修正情報MIに含まれる各断層画像の認識結果が正解部位ＰMIと一致するかどうかを判定し、不一致の場合のみステップ#66で修正を行っているが、このような判定を行わずに、修正情報MIに含まれるすべての断層画像の認識結果を正解部位ＰMIに修正するようにしても同様の修正結果が得られる。この場合、修正情報MIはスタック型のデータ構造とし、ユーザによって指定された順序が後の断層画像を表す情報ほど、先に取り出せるようにしておくことが考えられる。このようにすれば、部位修正部２４は、スタックの先頭の断層画像（SLMI）の部位認識結果を正解部位ＰMIとし、以下、スタックの残りの断層画像を表す情報を順次読み出し、その断層画像の部位認識結果を順次正解部位ＰMIに修正するように実装することが可能になる。
以上で説明した部位認識結果修正方法以外にも、様々な方法が考えられる。例えば、図１７に示したように、修正情報入力受付部２３が、ユーザによって選択された部位認識結果が誤っているすべてのスライス７から９を修正情報MIとして受け付け、部位修正部２４が、指定された誤認識スライス７から９に隣接する２つのスライス６と１０のうち、誤認識スライスにおける認識処理の結果（図１７（ａ）では胸部、（ｂ）では胸腹部）と異なる方の認識結果（図１７（ａ）では胸腹部、（ｂ）では胸部）を正解認識結果として、誤認識スライス７から９の認識結果を修正するようにしてもよい。
本発明の第４の実施形態となる部位認識結果修正装置は、上記の各実施形態の部位修正部２４による修正後の部位認識結果を、解剖学的な妥当性の判定に基づいて再修正する機能が付加されたものである。図１８は、この機能を実現する構成とデータの流れを模式的に示したブロック図である。図に示したように、図２の構成に部位再修正部２５が付加された構成となっており、部位再修正部２５以外の処理部については、上記のいずれかの実施形態と同じでよい。
部位再修正部２５は、部位認識結果修正用端末５に実装される処理部であり、本実施形態では、入力された部位認識結果に対して、各部位の断層画像の断層面に垂直な方向の長さが、解剖学的にあり得る長さの範囲かどうかを判定し、解剖学的にありえない長さの部位がある場合には、その部位の認識結果を再修正する処理を行う。
例えば、図８（ａ）の場合、ユーザによって指定されスライス７から離れる向き（スライス７からスライス１に向かう向き、スライス７からスライス１０に向かう向き）に、修正後の認識結果に基づいて部位長をチェックしていき、部位長がありえない長さとなっている場合には部位を再修正する。例えば、部位修正部２５による修正によって、胸腹部の部位長が上記のありうる範囲よりも長くなっている場合には、上記のありうる部位長を超えたスライス以降の部位を腹部に修正する。
なお、解剖学的にあり得る長さの範囲は参照テーブル等の参照によって取得すればよい。また、部位長の計算は、スライス数×スライス厚、あるいは、異なる部位間の境界に隣接するスライスのスライス位置を用いた距離計算により求めることができる。
この部位再修正処理を含む本発明の部位認識結果修正処理のワークフローとしては、図１０のフローチャートのステップ#11に上記の部位再修正処理を挿入することができる。すなわち、ユーザが最後の断層画像の認識結果まで確認し、これ以上修正がないと判断し(#9; YES)、図７の認識結果確定ボタン５８を押下した際に、部位再修正部２５が上記の再修正処理を行い、実際に再修正が行われた場合には、認識結果表示制御部２２が、再修正後の認識結果（SLn，Ｐn″）を表示部３１に表示させるようにし、実際に再修正が行われなかった場合には、修正後の認識結果Ｐn´を、対応する各断層画像SLnの付帯情報として記録するようにすればよい。
あるいは、ステップ#10に上記の部位再修正処理を挿入し、部位修正部２４が誤認識断層画像に対する認識結果を修正した後、部位再修正部２５が上記の再修正処理を行うようにし、認識結果表示制御部２２が修正・再修正内容が反映された部位認識結果画面５０を表示部３１に表示させる(#8)ようにしてもよい。
このように、本発明の第４の実施形態となる部位認識結果修正装置では、部位再修正部２５が、部位認識部２１または部位修正部２３による部位認識結果に対して、各部位の断層画像の断層面に垂直な方向の長さが、解剖学的にあり得る長さの範囲かどうかを判定し、解剖学的にありえない長さの部位がある場合には、その部位の認識結果を再修正するので、部位認識結果の精度がさらに向上する。
特に、本発明の第１の実施形態では、部位修正部２４が、修正位置の両側で検出された、認識処理によって得られた異なる部位間の境界の位置のうち前記修正位置からの距離が近い方の境界の位置が誤りであることを前提として処理を行っているので、万一、この前提に合わない断層画像の場合に、誤った修正処理が行われてしまうが、この第１の実施形態に部位再修正部２５を付加することにより、部位修正部２４の処理の誤りを再修正することが可能になり、有用である。
なお、上記の実施形態におけるシステム構成、処理フロー、ユーザインターフェース等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。また、上記の実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。
特に、修正情報入力受付部２３および部位修正部２４の処理については、修正情報MIを異なる部位間の境界となるべき修正位置を特定しうる情報を含むものとし、被検体の解剖学的位置関係と前記修正位置の近傍の断層画像に対する認識処理の結果の少なくとも一方と、この修正情報MIとに基づいて、誤認識断層画像とその正解となる部位とを決定して修正する方法であれば、上記の実施形態に例示された方法以外のものであってもよい。
また、システム構成としては、上記の部位認識部２１を画像情報管理サーバ３に実装せずに、部位認識結果修正用端末５に実装してもよいし、部位認識結果修正用端末５の代わりに、モダリティ１から受信した画像に対する規格化処理（ＥＤＲ処理）や画像の品質を調整するための処理、および検査技師による画像の品質確認等を行う品質管理ワークステーション（ＱＡ−ＷＳ）をネットワーク１９に接続し、この品質管理ワークステーションに本発明の部位認識結果修正装置を実装し、部位認識結果が確定した後の画像情報を画像情報管理サーバ３に転送し、画像情報管理サーバ３が画像情報データベース４に画像情報を登録するようにしてもよい。
本発明の実施形態における部位認識結果修正装置が導入された医療情報システムの概略構成図 本発明の第１から第３の実施形態における部位認識結果修正装置とその周辺の構成を模式的に示したブロック図 部位認識部の構成を模式的に表したブロック図 断層画像の正規化のためのランドマークの設定方法を模式的に表した図 部位認識処理で用いるスライス毎・部位毎のスコアを表した図（（ａ）部位スコア （ｂ）重みマップ （ｃ）コストマップ） 部位認識処理で用いるマッチングカーブの一例を示した図 本発明の第１の実施形態における部位認識結果画面の一例を示した図 本発明の第１の実施形態における部位認識結果修正処理の一例を示した図 本発明の第１の実施形態における部位認識結果修正処理の流れを表したフローチャート 本発明の第１から第３の実施形態における部位認識結果修正処理を含むワークフローの一例を示したフローチャート 本発明の第２の実施形態における部位認識結果画面の一例を示した図 本発明の第２の実施形態における部位認識結果修正処理の流れを表したフローチャート 本発明の第２の実施形態における部位認識結果修正処理の一例を示した図 本発明の第３の実施形態における部位認識結果画面の一例を示した図 本発明の第３の実施形態における部位認識結果修正処理の流れを表したフローチャート 本発明の第３の実施形態における部位認識結果修正処理の一例を示した図 本発明の第３の実施形態の変形例における部位認識結果修正処理の一例を示した図 本発明の第４の実施形態における部位認識結果修正装置とその周辺の構成を模式的に示したブロック図
符号の説明
１ モダリティ
２，２ａ，２ｂ 読影ワークステーション
３ 画像情報管理サーバ
４ 画像情報データベース
５ 部位認識結果修正用端末
１９ ネットワーク
２１ 部位認識部
２２ 認識結果表示制御部
２３ 修正情報入力受付部
２４ 部位修正部
２５ 部位再修正部
３１ 表示部
３２ データベース登録部

Claims (9)

  1. 被検体中の複数の部位を表す複数の断層画像または該複数の断層画像に基づいて再構成された画像と、該断層画像の各々に表された前記被検体中の部位の認識処理の結果であって、前記各断層画像において認識された部位の該断層画像間での位置関係が前記被検体中の複数の部位の解剖学的位置関係に整合するものとを画面表示させる認識結果表示制御手段と、
    異なる部位間の境界となるべき修正位置を特定可能な、前記認識処理の結果を修正するための修正情報の入力を受け付ける修正情報入力受付手段と、
    前記解剖学的位置関係と前記修正位置の近傍の前記断層画像に対する前記認識処理の結果の少なくとも一方、および、前記修正情報に基づいて、前記認識処理の結果が誤っている誤認識断層画像、および、該誤認識断層画像における正しい部位を表す正解認識結果を決定し、該誤認識断層画像に対する前記認識処理の結果を該正解認識結果に修正する部位修正手段とを備えたことを特徴とする部位認識結果修正装置。
  2. 前記部位修正手段が、前記修正位置の近傍の前記断層画像に対する前記認識処理の結果に基づき、前記認識処理によって得られた異なる部位間の境界の位置を前記修正位置の両側で検出し、検出された前記境界の位置のうち前記修正位置からの距離が近い方の境界の位置と該修正位置との間にある断層画像を前記誤認識断層画像とし、該近い方の境界の位置に隣接する断層画像のうち前記誤認識断層画像ではない方の断層画像における前記部位の認識処理の結果を前記正解認識結果として、前記修正を行うものであることを特徴とする請求項１記載の部位認識結果修正装置。
  3. 前記修正情報入力受付手段が、前記修正位置に隣接する断層画像のうち前記認識処理の結果が誤っている方の断層画像、および該断層画像における正しい部位を含む前記修正情報の入力を受け付けるものであり、
    前記部位修正手段が、前記入力された断層画像の近傍の断層画像のうち、前記認識処理によって得られた部位が前記入力された正しい部位と一致する正解断層画像を検出し、該正解断層画像と前記入力された前記認識処理の結果が誤っている方の断層画像との間に含まれる断層画像および該入力された断層画像を前記誤認識断層画像とし、前記入力された正しい部位を前記正解認識結果として、前記修正を行うものであることを特徴とする請求項１記載の部位認識結果修正装置。
  4. 前記修正情報入力受付手段が、所定の順序に従って指定された、前記修正位置から前記認識処理の結果が誤っている断層画像を経て前記認識処理の結果が正しい断層画像に至る複数の断層画像を含む範囲を表す修正情報の入力を受け付けるものであり、
    前記部位修正手段が、前記所定の順序に基づいて、前記認識処理の結果が正しい断層画像を特定し、該断層画像において認識された部位を前記正解認識結果とし、入力された前記範囲において、前記認識処理の結果が前記正解認識結果と異なる断層画像を前記誤認識断層画像として、前記修正を行うものであることを特徴とする請求項１記載の部位認識結果修正装置。
  5. 前記部位修正手段による修正が行われた断層画像の修正前または修正後の少なくとも一方の部位の前記断層画像の断層面に垂直な方向の長さが所定の基準を満たさない場合には、該基準を満たすように、前記複数の断層画像の少なくとも一部における部位を再修正する部位再修正手段をさらに備えたことを特徴とする請求項１から４のいずれか１項に記載の部位認識結果修正装置。
  6. 前記複数の断層画像の各々の内容的特徴に基づいて該各断層画像に表された前記被検体中の部位を仮認識し、各断層画像の前後の少なくとも一方の１以上の断層画像の前記仮認識の結果と、前記被検体中の各部位の解剖学的位置関係とに基づいて、前記１以上の断層画像との間での前記解剖学的位置関係の整合性が保たれるように、各断層画像に表された前記被検体中の部位を決定する部位認識手段をさらに備えたことを特徴とする請求項１から５のいずれか１項に記載の部位認識結果修正装置。
  7. 前記被検体が人体であり、
    前記複数の断層画像が軸位断画像であり、かつ、該複数の断層画像には、頭部、頸部、胸部、腹部、骨盤部、脚部、および、該各部のうち隣接する２つの部位の両方を含む複合部位のうちの２以上の部位が含まれるものであることを特徴とする請求項１から６のいずれか１項に記載の部位認識結果修正装置。
  8. コンピュータが、
    被検体中の複数の部位を表す複数の断層画像または該複数の断層画像に基づいて再構成された画像と、該断層画像の各々に表された前記被検体中の部位の認識処理の結果であって、前記各断層画像において認識された部位の該断層画像間での位置関係が前記被検体中の複数の部位の解剖学的位置関係に整合するものとを画面表示させ、
    異なる部位間の境界となるべき修正位置を特定可能な、前記認識処理の結果を修正するための修正情報の入力を受け付け、
    前記解剖学的位置関係と前記修正位置の近傍の前記断層画像に対する前記認識処理の結果の少なくとも一方、および、前記修正情報に基づいて、前記認識処理の結果が誤っている誤認識断層画像、および、該誤認識断層画像における正しい部位を表す正解認識結果を決定し、該誤認識断層画像に対する前記認識処理の結果を該正解認識結果に修正することを特徴とするコンピュータによる部位認識結果修正方法。
  9. コンピュータに
    被検体中の複数の部位を表す複数の断層画像または該複数の断層画像に基づいて再構成された画像と、該断層画像の各々に表された前記被検体中の部位の認識処理の結果であって、前記各断層画像において認識された部位の該断層画像間での位置関係が前記被検体中の複数の部位の解剖学的位置関係に整合するものとを画面表示させる処理と、
    異なる部位間の境界となるべき修正位置を特定可能な、前記認識処理の結果を修正するための修正情報の入力を受け付ける処理と、
    前記解剖学的位置関係と前記修正位置の近傍の前記断層画像に対する前記認識処理の結果の少なくとも一方、および、前記修正情報に基づいて、前記認識処理の結果が誤っている誤認識断層画像、および、該誤認識断層画像における正しい部位を表す正解認識結果を決定し、該誤認識断層画像に対する前記認識処理の結果を該正解認識結果に修正する処理とを実行させることを特徴とする部位認識結果修正プログラム。
JP2007104846A 2007-04-12 2007-04-12 部位認識結果修正装置、方法、およびプログラム Withdrawn JP2008259682A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2007104846A JP2008259682A (ja) 2007-04-12 2007-04-12 部位認識結果修正装置、方法、およびプログラム
US12/100,948 US8194960B2 (en) 2007-04-12 2008-04-10 Method and apparatus for correcting results of region recognition, and recording medium having a program for correcting results of region recognition recorded therein

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007104846A JP2008259682A (ja) 2007-04-12 2007-04-12 部位認識結果修正装置、方法、およびプログラム

Publications (1)

Publication Number Publication Date
JP2008259682A true JP2008259682A (ja) 2008-10-30

Family

ID=39887032

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007104846A Withdrawn JP2008259682A (ja) 2007-04-12 2007-04-12 部位認識結果修正装置、方法、およびプログラム

Country Status (2)

Country Link
US (1) US8194960B2 (ja)
JP (1) JP2008259682A (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010113479A1 (ja) 2009-03-31 2010-10-07 富士フイルム株式会社 画像処理装置および方法並びにプログラム
WO2011065414A1 (ja) * 2009-11-30 2011-06-03 株式会社日立メディコ 画像処理方法、画像処理装置及びプログラム
JP2011206239A (ja) * 2010-03-30 2011-10-20 Fujifilm Corp 医用画像処理装置および方法並びにプログラム
WO2012029265A1 (ja) 2010-08-31 2012-03-08 富士フイルム株式会社 医療情報表示装置および方法、並びにプログラム
WO2012029255A1 (ja) 2010-08-30 2012-03-08 富士フイルム株式会社 医療情報表示装置および方法、並びにプログラム
US9122773B2 (en) 2011-05-26 2015-09-01 Fujifilm Corporation Medical information display apparatus and operation method and program
US9922268B2 (en) 2014-03-11 2018-03-20 Toshiba Medical Systems Corporation Image interpretation report creating apparatus and image interpretation report creating system
CN108351396A (zh) * 2015-11-02 2018-07-31 皇家飞利浦有限公司 用于组织分类的方法、计算机程序产品和磁共振成像系统
US10275883B2 (en) 2016-04-01 2019-04-30 Fujifilm Corporation Data sorting apparatus, data sorting method, and data sorting program
JP2019208835A (ja) * 2018-06-04 2019-12-12 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置
JP2019208839A (ja) * 2018-06-04 2019-12-12 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置
CN114494263A (zh) * 2022-04-19 2022-05-13 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) 融合临床信息的医学影像病变检测方法、系统及设备

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5301197B2 (ja) * 2008-04-11 2013-09-25 富士フイルム株式会社 断面画像表示装置および方法ならびにプログラム
JP2010158452A (ja) * 2009-01-09 2010-07-22 Fujifilm Corp 画像処理装置および方法並びにプログラム
JP5346859B2 (ja) 2009-04-15 2013-11-20 富士フイルム株式会社 医用画像管理装置および方法並びにプログラム
JP5337091B2 (ja) * 2009-04-16 2013-11-06 富士フイルム株式会社 医療情報の利用促進システムおよび方法
JP5455470B2 (ja) * 2009-07-02 2014-03-26 株式会社東芝 医用画像読影システム
JP2011092681A (ja) 2009-09-30 2011-05-12 Fujifilm Corp 医用画像処理装置および方法並びにプログラム
US8437558B1 (en) * 2009-10-08 2013-05-07 Hrl Laboratories, Llc Vision-based method for rapid directed area search
WO2011116004A2 (en) * 2010-03-15 2011-09-22 Georgia Tech Research Corporation Cranial suture snake algorithm
US8792728B2 (en) * 2010-09-27 2014-07-29 Hewlett-Packard Development Company, L.P. Near-duplicate image detection
JP5487157B2 (ja) * 2011-05-26 2014-05-07 富士フイルム株式会社 画像処理装置および画像処理装置の作動方法並びに画像処理プログラム
WO2013051045A1 (ja) * 2011-10-03 2013-04-11 株式会社日立製作所 画像処理装置および画像処理方法
JP5934071B2 (ja) 2012-09-27 2016-06-15 富士フイルム株式会社 管状構造の最短経路探索装置および方法並びにプログラム
US8977024B1 (en) * 2014-01-31 2015-03-10 Afraxis, Inc. Distributed anatomical image analysis
EP3224802A1 (en) 2014-09-28 2017-10-04 Koninklijke Philips N.V. Image processing apparatus and method
US10339690B2 (en) * 2015-12-18 2019-07-02 Ricoh Co., Ltd. Image recognition scoring visualization
JP7083427B2 (ja) * 2019-06-04 2022-06-10 富士フイルム株式会社 修正指示領域表示装置、方法およびプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69224679T2 (de) * 1991-05-27 1998-11-12 Hitachi Ltd Verfahren und Vorrichtung zur Verarbeitung von multidimensionalen Daten
JP3599868B2 (ja) 1996-01-05 2004-12-08 ジーイー横河メディカルシステム株式会社 人体部分抽出方法および医用装置
JPH10192A (ja) * 1996-04-15 1998-01-06 Olympus Optical Co Ltd 超音波画像診断装置
EP1111909A1 (de) * 1999-12-23 2001-06-27 Philips Patentverwaltung GmbH Vorrichtung und Verfahren zur Darstellung eines aus mehreren Teilbereichen zusammengesetzten Bildes
US6836558B2 (en) * 2000-03-28 2004-12-28 Arch Development Corporation Method, system and computer readable medium for identifying chest radiographs using image mapping and template matching techniques
JP4545971B2 (ja) 2001-03-05 2010-09-15 日本電信電話株式会社 医用画像識別システム，医用画像識別処理方法，医用画像識別用プログラムおよびその記録媒体
JP3766033B2 (ja) * 2001-04-25 2006-04-12 富士写真フイルム株式会社 画像処理方法および装置並びにプログラム
JP4510556B2 (ja) 2003-09-09 2010-07-28 富士フイルム株式会社 対象物識別装置および方法並びにプログラム
JP4612796B2 (ja) * 2004-01-30 2011-01-12 キヤノン株式会社 Ｘ線撮影画像表示制御装置及び方法並びにｘ線撮影システム
JP4497951B2 (ja) * 2004-02-16 2010-07-07 株式会社日立メディコ 医用画像診断装置
JP4479474B2 (ja) * 2004-11-12 2010-06-09 住友電装株式会社 コネクタ
CN101061491B (zh) * 2004-11-19 2010-06-16 皇家飞利浦电子股份有限公司 用于在计算机辅助肺结核假阳性降低中克服不平衡事例数目的层化方法

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010113479A1 (ja) 2009-03-31 2010-10-07 富士フイルム株式会社 画像処理装置および方法並びにプログラム
US9144407B2 (en) 2009-03-31 2015-09-29 Fujifilm Corporation Image processing device and method, and program
WO2011065414A1 (ja) * 2009-11-30 2011-06-03 株式会社日立メディコ 画像処理方法、画像処理装置及びプログラム
JP2011110357A (ja) * 2009-11-30 2011-06-09 Hitachi Medical Corp 画像処理方法、画像処理装置及びプログラム
US8774483B2 (en) 2009-11-30 2014-07-08 Hitachi Medical Corporation Image processing method, image processing apparatus and program
JP2011206239A (ja) * 2010-03-30 2011-10-20 Fujifilm Corp 医用画像処理装置および方法並びにプログラム
WO2012029255A1 (ja) 2010-08-30 2012-03-08 富士フイルム株式会社 医療情報表示装置および方法、並びにプログラム
WO2012029265A1 (ja) 2010-08-31 2012-03-08 富士フイルム株式会社 医療情報表示装置および方法、並びにプログラム
US9158382B2 (en) 2010-08-31 2015-10-13 Fujifilm Corporation Medical information display apparatus, method, and program
US9122773B2 (en) 2011-05-26 2015-09-01 Fujifilm Corporation Medical information display apparatus and operation method and program
US9922268B2 (en) 2014-03-11 2018-03-20 Toshiba Medical Systems Corporation Image interpretation report creating apparatus and image interpretation report creating system
CN108351396A (zh) * 2015-11-02 2018-07-31 皇家飞利浦有限公司 用于组织分类的方法、计算机程序产品和磁共振成像系统
CN108351396B (zh) * 2015-11-02 2021-09-14 皇家飞利浦有限公司 用于组织分类的方法、计算机程序产品和磁共振成像系统
US10275883B2 (en) 2016-04-01 2019-04-30 Fujifilm Corporation Data sorting apparatus, data sorting method, and data sorting program
JP2019208835A (ja) * 2018-06-04 2019-12-12 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置
JP2019208839A (ja) * 2018-06-04 2019-12-12 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置
JP7179497B2 (ja) 2018-06-04 2022-11-29 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置及び画像生成方法
JP7199839B2 (ja) 2018-06-04 2023-01-06 キヤノンメディカルシステムズ株式会社 Ｘ線ｃｔ装置及び医用画像処理方法
CN114494263A (zh) * 2022-04-19 2022-05-13 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) 融合临床信息的医学影像病变检测方法、系统及设备
CN114494263B (zh) * 2022-04-19 2022-06-17 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) 融合临床信息的医学影像病变检测方法、系统及设备

Also Published As

Publication number Publication date
US8194960B2 (en) 2012-06-05
US20080267481A1 (en) 2008-10-30

Similar Documents

Publication Publication Date Title
JP2008259682A (ja) 部位認識結果修正装置、方法、およびプログラム
JP5186269B2 (ja) 画像認識結果判定装置、方法、およびプログラム
US20210158531A1 (en) Patient Management Based On Anatomic Measurements
US20190220978A1 (en) Method for integrating image analysis, longitudinal tracking of a region of interest and updating of a knowledge representation
JP5138431B2 (ja) 画像解析装置および方法並びにプログラム
JP4855141B2 (ja) 医用画像部位認識装置、及び、医用画像部位認識プログラム
EP2888686B1 (en) Automatic detection and retrieval of prior annotations relevant for an imaging study for efficient viewing and reporting
US7529394B2 (en) CAD (computer-aided decision) support for medical imaging using machine learning to adapt CAD process with knowledge collected during routine use of CAD system
JP6687352B2 (ja) 医用画像データ処理装置及び医用画像データ処理方法
JP4542591B2 (ja) 画像処理システム、画像保管装置、および、画像処理装置、並びに、画像処理方法、プログラム
US20080058611A1 (en) Medical image processing apparatus
US20110194744A1 (en) Medical image display apparatus, medical image display method and program
JP2008259622A (ja) レポート作成支援装置およびそのプログラム
US20200151871A1 (en) Application of deep learning for medical imaging evaluation
JP6885896B2 (ja) 自動レイアウト装置および自動レイアウト方法並びに自動レイアウトプログラム
WO2008001928A1 (fr) Appareil d&#39;affichage d&#39;image médicale et programme d&#39;affichage d&#39;image médicale
JP7101809B2 (ja) 画像処理装置、画像処理方法、及びプログラム
WO2019176407A1 (ja) 学習支援装置、学習支援方法、学習支援プログラム、関心領域判別装置、関心領域判別方法、関心領域判別プログラム及び学習済みモデル
WO2020209382A1 (ja) 医療文書作成装置、方法およびプログラム
CN113656706A (zh) 基于多模态深度学习模型的信息推送方法及装置
JP5283411B2 (ja) 画像表示装置および画像表示装置の作動方法並びに画像表示プログラム
US8515213B2 (en) System, method and computer instructions for aiding image analysis
JP2008006187A (ja) 医用画像表示処理装置、及び、医用画像表示処理プログラム
JP6869086B2 (ja) 位置合せ装置および位置合せ方法並びに位置合せプログラム
US11749398B2 (en) Medical image recognition system and medical image recognition method

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20100706