JP5818520B2

JP5818520B2 - 医用画像処理システム

Info

Publication number: JP5818520B2
Application number: JP2011126288A
Authority: JP
Inventors: 紗佳高橋
Original assignee: Toshiba Corp; Toshiba Medical Systems Corp
Current assignee: Toshiba Corp; Canon Medical Systems Corp
Priority date: 2011-06-06
Filing date: 2011-06-06
Publication date: 2015-11-18
Anticipated expiration: 2031-06-06
Also published as: JP2012249936A

Description

本発明の実施形態は、カプセル内視鏡により取得された医用画像の画像データを処理する医用画像処理システムの技術に関する。

医療用内視鏡として、その形状をカプセル形状にして挿入部を不要とした、カプセル内視鏡なるものがある。このカプセル内視鏡は、撮像機能と無線通信機能とを有している。カプセル内視鏡は、観察（検査）のために患者の口から飲込まれた後、人体から自然排出されるまでの観察期間中に、胃、小腸等の臓器を順次撮像する。撮像により得られた画像情報（画像を表現する電子データ）は、順次外部に無線送信される。

このようにして無線送信された画像情報は、患者の体外に設けられた受信機により受信され所定のメモリに蓄積されるようになっている。この画像情報を、必要に応じて読み出し、読み出された画像情報を表示装置に表示等することにより、医師の診断等に利用することができるようになっている。

また、上記のようにして、カプセル内視鏡から送信された画像に対し画像処理を施し、病変の疑いのある画像を自動的に抽出する医用画像処理システムがある。

特開２００６−３０４９９５号公報特開２００６−２９５４９０号公報

一方で、カプセル内視鏡により一度の検査で取得される画像は数万枚にわたり、その量は膨大である。そのため、このような膨大な画像の中から病変の疑いの部分を特定するために、操作者は多大な労力を必要とする。これにより、診断に係る時間が増大し、病変部を見落とす可能性も増える。さらに、このような診断を、複数の検査に亘って行う場合には、操作者に係る負担はさらに増大する。

そこで、この発明の実施形態は、カプセル内視鏡により取得された複数の画像の中から、病変の疑いのある部分が取得された画像を容易に抽出可能とすることを目的とする。

上記目的を達成するために、この実施形態は、カプセル内視鏡による撮像経路が通過する各部位を模したマップであって、前記撮像経路における各部位を部位単位別にもしくは所定の範囲単位別にまたはそれらを組合わせた単位別に、複数の領域に分割されたマップをあらかじめ記憶し、前記カプセル内視鏡による一の検査により撮影された撮像経路における各部位についての一連の画像データを受けて、前記一連の画像データのそれぞれをその撮像位置に基づき前記複数の領域のいずれかに関連付けるマップ出力部と、前記複数の領域毎に、各領域に関連づけられた画像データを基に、前記各領域における異常候補を検出する検出部と、検出された前記異常候補に基いて、前記各領域毎に前記異常候補の検出割合を算出する解析部と、前記各領域における前記異常候補の検出割合の大きさが識別可能な形態で前記各領域を表した前記マップを、前記検出割合の大きさの順に並べて表示可能に出力する表示制御部と、を備えた。

本実施形態に係る医用画像処理システムのブロック図である。体内マップを示した図である。検査選択画面の一例である。画像表示画面の一例である。体内マップの生成に係る一連の動作を示したフローチャートである。画像の表示に係る一連の動作を示したフローチャートである。

本実施形態に係る医用画像処理システムについて図１を参照しながら説明する。本実施形態に係る医用画像処理システムは、撮像部５００と、第１の記憶部１１と、マップ出力部１２と、異常候補検出部１３と、解析部１４と、第２の記憶部１５と、リスト生成部１６と、入力部１７と、表示制御部１８と、表示部１９とを含んで構成される。

撮像部５００は、カプセル内視鏡に相当する。撮像部５００は、観察又は検査のために被検査者の口から飲み込まれた後、身体から排出されるまでの期間中に、食道、胃、十二指腸、小腸、大腸などの消化管内の画像を順次経時的に撮像し取得する。この画像データには、画像自体を示すデータと、その画像に関する付帯情報を示すデータとで構成される。これらの画像データは、検査ごとに一連の画像データとして、付帯情報を基に関連付けられる。以降では、検査ごとの一連の画像データを「一連の検査画像データ」と呼ぶ場合がある。また、順次送信される各画像データには、その画像データが取得された時刻を示す情報（以降では、「撮像時刻」と呼ぶ場合がある）が付帯されている。即ち、この撮像時刻を基に、各画像データを時系列に沿って並べることが可能となる。

撮像部５００は、取得された画像データを、無線通信により第１の記憶部１１に送信し記憶させる。第１の記憶部１１は、画像データを記憶する記憶領域である。

マップ出力部１２は、部位特定部１２１と、関連付け処理部１２２と、雛型記憶部１２３とを含んで構成される。マップ出力部１２は、第１の記憶部１１に記憶された画像データを検査ごとに読み出し、読み出された画像データを体内マップと関連付ける。以降では、まず、体内マップについて説明し、その後に、部位特定部１２１、関連付け処理部１２２、及び雛型記憶部１２３について説明する。

体内マップについて、図２を参照しながら説明する。図２は、体内マップを示した図である。図２に示すように、体内マップＰ１は、カプセル内視鏡の撮像経路、即ち、食道、胃、十二指腸、小腸、大腸などの消化管を模した図である。体内マップＰ１は、領域Ｐ１１〜Ｐ１５を含んで構成されている。領域Ｐ１１〜Ｐ１５は、消化管を構成する部位にそれぞれ関連付けられている。具体的には、領域Ｐ１１は、食道に関連付けられ、領域Ｐ１２は、胃に関連付けられている。また、領域Ｐ１３は、十二指腸に関連付けられている。また、領域Ｐ１４は、小腸に関連付けられており、入口から出口に向けて、さらに領域Ｐ１４１〜Ｐ１４ｍに分割されている。また、領域Ｐ１５は、大腸に関連付けられており、入口から出口に向けて、さらに領域Ｐ１５１〜Ｐ１５ｎに分割されている。このように、体内マップＰ１は、消化管の進行方向に沿って複数の領域に分割されている。これらの各領域は、危険度などにより重みづけされ、その重み付けを、例えば色やマークなどにより識別可能に表示される。各領域の重み付けと、それに応じた体内マップの表示制御とに関する具体的な内容については後述する。雛型記憶部１２３には、体内マップの雛型があらかじめ記憶されている。なお、領域を分割する単位は、上記で示した消化管を構成する部位の単位に限らず、その単位は適宜変更してもよい。

ここで、図１を参照する。部位特定部１２１は、一連の検査画像データを第１の記憶部１１から読み出す。部位特定部１２１は、読み出された一連の検査画像データに含まれる各画像データに対し、その画像データがどの部位を撮像したものかを特定する。例えば、部位特定部１２１は、画像を構成するピクセルの色の情報を基に、どの部位を撮像した画像データかを特定する。その他の方法として、部位特定部１２１は、例えば、画像からの輪郭抽出により、どの部位を撮像した画像データかを特定してもよい。また、色の情報による特定方法と、輪郭抽出による特定方法とを、適宜組み合わせてもよい。

部位特定部１２１は、各画像データに対して、特定された部位を示す部位情報を付帯させる。この部位情報に基づき、その画像データが、消化管中のどの部位を撮像した画像データかを判別することが可能となる。部位特定部１２１は、各画像データに対して部位情報が付帯された一連の検査画像データを、関連付け処理部１２２に出力する。

関連付け処理部１２２は、一連の検査画像データを部位特定部１２１から受ける。また、関連付け処理部１２２は、雛型記憶部１２３から体内マップＰ１の雛型を読み出す。次に、関連付け処理部１２２は、一連の検査画像データから各画像データを読み出す。関連付け処理部１２２は、読み出された画像データに付帯された部位情報を参照し、その画像データが取得された消化管中の部位（即ち、食道、胃、十二指腸、小腸、及び大腸のいずれか）を特定する。関連付け処理部１２２は、体内マップＰ１中の特定された部位を示す領域に、その画像データを関連付ける。具体的には、関連付け処理部１２２は、食道に相当する画像データを領域Ｐ１１に関連付ける。同様にして、関連付け処理部１２２は、胃に相当する画像データを領域Ｐ１２に関連付け、十二指腸に相当する画像データを領域Ｐ１３に関連付ける。

また、小腸に相当する画像データについては、関連付け処理部１２２は、領域Ｐ１４１〜Ｐ１４ｍそれぞれに対応する画像データを特定し、特定された画像データを各領域に関連付ける。その関連付けの方法について、以下に具体的に説明する。関連付け処理部１２２は、まず、部位情報を基に小腸に相当する画像データを一連の検査画像データの中から抽出する。次に、関連付け処理部１２２は、各画像データに付帯された撮像時刻を参照し、小腸の撮像開始時刻（最も早い撮像時刻）と撮像終了時刻（最も遅い撮像時刻）とを特定する。関連付け処理部１２２は、特定された撮像開始時刻から撮像終了時刻までの時間帯を、時系列に沿って領域Ｐ１４１〜１４ｍの数（即ち、ｍ個）の時間帯ｔ１４１〜ｔ１４ｍに分割する。関連付け処理部１２２は、時間帯ｔ１４１に相当する画像データを領域Ｐ１４１に関連付け、時間帯ｔ１４２に相当する画像データを領域Ｐ１４２に関連付ける。このように、関連付け処理部１２２は、時間帯ｔ１４１〜ｔ１４ｍに相当する各画像データを、領域Ｐ１４１〜Ｐ１４ｍに関連付ける。また、関連付け処理部１２２は、小腸と同様にして大腸に相当する各画像データを、領域Ｐ１５１〜Ｐ１５ｎに関連付ける。

関連付け処理部１２２は、一連の検査画像データが関連付けられた体内マップ（以降では、「検査ごとの体内マップ」と呼ぶ）を、その一連の検査画像データとあわせて異常候補検出部１３に出力する。

異常候補検出部１３は、検査ごとの体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて関連付け処理部１２２から受ける。異常候補検出部１３は、受けた画像データに画像処理を施すことで、その取得された画像を解析し、病変の疑いがある領域を異常候補として抽出する。この抽出方法の一例としては、画像を構成するピクセルの色を示す情報を用いる方法が挙げられる。例えば、出血している部分は、正常な部分と色が異なる。そのため、異常候補検出部１３は、まず、画像を構成するピクセルが示す色の情報を基に、ピクセル間の色の平均値を算出する。異常候補検出部１３は、各ピクセルが示す色の情報と、算出された平均値とを比較し、値間で所定値以上の乖離があるピクセルを含む領域を異常候補として抽出する。また、上記した方法に限らず、例えば、異常候補検出部１３は、輪郭抽出等により異常候補を抽出してもよい。異常候補検出部１３は、抽出された異常候補に相当する領域を、他の領域と区別して識別するための識別情報（例えば、アノテーション）を、当該異常候補が抽出された画像データに付帯させる。異常候補検出部１３は、各画像データに対して画像処理が施された体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて解析部１４に出力する。

解析部１４は、検査ごとの体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて異常候補検出部１３から受ける。解析部１４は、体内マップを構成する領域ごとに、その領域に関連付けられた画像データに対する、それらの画像データに含まれた異常候補の検出割合を算出する。この算出方法について、以下に具体的に説明する。

解析部１４は、体内マップを構成する領域ごとに、その領域に関連付けられた画像データの数（画像の枚数）と、異常候補が抽出された画像データの数（画像の枚数）とを特定する。解析部１４は、異常候補が抽出された画像データの数を領域に含まれる画像データの数で除算することで、領域に含まれる画像データの数に対して、異常候補が抽出された画像データの数が占める割合を検出割合として算出する。解析部１４は、算出された検出割合を示す情報（以降では、「分布情報」と呼ぶ）を、その領域に関連付ける。

なお、解析部１４は、画像の総面積に対する異常候補の総面積を基に検出割合を算出してもよい。この場合には、解析部１４は、体内マップを構成する領域ごとに、その領域に関連付けられた画像データの総面積を算出する。この総面積は、その領域に含まれる画像１枚あたりの面積をまず算出し、算出された面積を、その領域に含まれる画像の枚数分加算することで算出すればよい。次に、解析部１４は、その領域に関連付けられた画像データから抽出された異常候補の総面積を算出する。異常候補の面積は、例えば、ピクセル数を基に算出する。解析部１４は、算出された異常候補の総面積を画像の総面積で除算することで、画像の総面積に対して、異常候補の総面積が占める割合を検出割合として算出する。解析部１４は、算出された検出割合を示す分布情報を、その領域に関連付ける。

これにより、後述する表示制御部１８は、この分布情報を基に、上述した割合を体内マップ上に識別可能に表示させることが可能となる。例えば、図２では、分布情報に応じて、危険度０〜危険度２までの３段階に分けて、各領域を色分けして表示させている。

また、解析部１４は、検査ごとに取得された一連の検査画像全てに対する、それらの画像に含まれる異常候補の占める割合を算出する。この割合は、領域ごとの割合と同様に、枚数を基に算出してもよいし、面積を基に算出してもよい。解析部１４は、全体に対する分布情報として体内マップに関連付ける。

領域ごとの分布情報、及び全体に対する分布情報を体内マップに関連付けたら、解析部１４は、体内マップと、その体内マップに関連付けられた画像データとを第２の記憶部１５に記憶させる。第２の記憶部１５は、第２の記憶部１５は、一連の検査画像データを、それらの画像データが関連付けられた体内マップとあわせて、検査ごとに記憶する記憶部である。

次に、第２の記憶部に記憶された体内マップと、その体内マップに関連付けられた画像データを基に生成された画像とを表示させる構成について説明する。

入力部１７は、操作者が、画像の表示に係る条件を入力するための入力Ｉ／Ｆである。

リスト生成部１６は、第２の記憶部１５に記憶された体内マップを、あらかじめ決められた条件に基づき複数検査分読み出す。リスト生成部１６は、この条件として、例えば撮像時刻を基に、直近１週間に撮像された検査の体内マップを読み出す。また、リスト生成部１６は、操作者が指定した条件を、入力部１７を介して受け付け、この条件に基づき第２の記憶部１５から読み出す体内マップを決定してもよい。リスト生成部１６は、読み出された体内マップの一覧を表示制御部１８に出力する。

表示制御部１８は、体内マップの一覧をリスト生成部１６から受ける。表示制御部１８は、受けた体内マップの一覧を基に検査選択画面Ｖ１０を生成する。図３は、検査選択画面Ｖ１０の一例である。図３に示すように、検査選択画面Ｖ１０は、マップ一覧表示部Ｖ１１と、条件指定部Ｖ１２と、指示手段Ｖ１３とを含んで構成される。

マップ一覧表示部Ｖ１１は、複数検査分の体内マップを表示させるための領域である。マップ一覧表示部Ｖ１１は、検査ごとに設けられた検査表示領域Ｖ１１１を複数検査分含んで構成されている。表示制御部１８は、受けた各体内マップに対応する検査を、検査表示領域Ｖ１１１と関連付ける。

検査表示領域Ｖ１１１は、体内マップ表示領域Ｖ１１２と、検査情報表示部Ｖ１１３を含んで構成されている。体内マップ表示領域Ｖ１１２は、検査表示領域Ｖ１１１に関連付けられた検査の体内マップを表示させるための領域である。また、検査情報表示部Ｖ１１３は、例えば、患者名や撮像時刻等のような検査の情報を表示させるための領域である。表示制御部１８は、体内マップ表示領域Ｖ１１２に、検査表示領域Ｖ１１１に関連付けられた検査の体内マップを表示させ、検査情報表示部Ｖ１１３にその検査の情報を表示させる。このとき、表示制御部１８は、体内マップの各領域に関連付けられた分布情報を基に、体内マップ上の各領域を色分けして、分布情報を識別可能に表示させる。

例えば、図３の例では、分布情報に応じて、危険度０〜危険度２までの３段階に分けて、各領域を色分けして表示させている。この場合、表示制御部１８は、分布情報の閾値を複数設け、この閾値を基準として各領域に危険度を設定する。例えば、表示制御部１８は、分布情報が２割未満の場合には危険度０を、分布情報が２割以上５割未満の場合には危険度１を、分布情報が５割以上の場合には危険度２を設定する。なお、危険度の段階数や閾値は適宜変更してもよい。

表示制御部１８は、検査ごとに関連付けられた検査表示領域Ｖ１１１を、あらかじめ決められた条件に基づき並び替える。この並び替えの条件としては、例えば、患者名の順、撮像時刻の順、または、分布情報を基にした並び替えが挙げられる。また、検査選択画面Ｖ１０は、この並び替えの条件を指定可能に構成されている。条件指定部Ｖ１２には、この並び替えの条件を指定するための指定部（例えば、ボタン）が設けられている。例えば、条件指定部Ｖ１２は、図３に示すように、日付指定部Ｖ１２１、患者名指定部Ｖ１２２、全体危険度指定部Ｖ１２３、及び部位危険度指定部Ｖ１２４を含んで構成されている。

日付指定部Ｖ１２１は、撮像時刻を基にした検査表示領域Ｖ１１１の並べ替えを指定するための指定部である。日付指定部Ｖ１２１が、指示手段Ｖ１３により押下された場合には、表示制御部１８は、撮像時刻の早い順または遅い順に、検査表示領域Ｖ１１１を並べ替えて、検査選択画面Ｖ１０に表示させる。

患者名指定部Ｖ１２２は、患者名を基にした検査表示領域Ｖ１１１の並べ替えを指定するための指定部である。患者名指定部Ｖ１２２が、指示手段Ｖ１３により押下された場合には、表示制御部１８は、患者名の昇順または降順に、検査表示領域Ｖ１１１を並べ替えて、検査選択画面Ｖ１０に表示させる。

全体危険度指定部Ｖ１２３は、各体内マップに関連付けられた「全体に対する分布情報」を基にした、検査表示領域Ｖ１１１の並べ替えを指定するための指定部である。全体危険度指定部Ｖ１２３が、指示手段Ｖ１３により押下された場合には、表示制御部１８は、まず、体内マップに関連付けられた全体に対する分布情報を複数検査分比較する。表示制御部１８は、この比較結果を基に、割合の大きい順（または、小さい順）に検査表示領域Ｖ１１１を並べ替えて、検査選択画面Ｖ１０に表示させる。

部位危険度指定部Ｖ１２４は、部位ごとに分布情報を比較し、その比較結果を基にした、検査表示領域Ｖ１１１の並べ替え指定するための指定部である。部位危険度指定部Ｖ１２４が、指示手段Ｖ１３により押下された場合には、表示制御部１８は、まず、消化管の部位を指定するための部位一覧を表示させる。操作者は、入力部１７を介して指示手段Ｖ１３を操作し、この部位一覧上から部位を指定する。表示制御部１８は、入力部１７から部位の指定を受けて、その部位に対応する領域に関連付けられた分布情報を複数検査分比較する。なお、小腸や大腸のように、その部位が複数の領域を含む場合には、その部位を構成する領域の分布情報の和を基に複数検査分比較する。表示制御部１８は、この比較結果を基に、割合の大きい順（または、小さい順）に検査表示領域Ｖ１１１を並べ替えて、検査選択画面Ｖ１０に表示させる。

以上のように、全体に対する分布情報、または部位ごとの分布情報に基づき検査表示領域Ｖ１１１を並び替えて表示させることで、操作者は、病変の疑いのある部分の多い（即ち、危険度の高い）患者を容易に特定することが可能となる。

また、表示制御部１８は、各検査表示領域Ｖ１１１を指示手段Ｖ１３により指定可能に表示させる。表示制御部１８は、生成された検査選択画面Ｖ１０を表示部１９に表示させる。

この表示を受けて、操作者は、入力部１７を介して指示手段Ｖ１３を操作し、検査表示領域Ｖ１１１を指定する。

この指定を受けると、表示制御部１８は、指定された検査表示領域Ｖ１１１に関連付けられた検査で撮像された一連の検査画像データを第２の記憶部１５から読み出す。表示制御部１８は、指定された検査表示領域Ｖ１１１に関連付けられた体内マップと、読み出された一連の検査画像データを基に、画像表示画面Ｖ２０を生成し表示部１９に表示させる。図４は、画像表示画面Ｖ２０の一例である。図４に示すように、画像表示画面Ｖ２０は、検査情報表示部Ｖ２１と、体内マップ表示部Ｖ２２と、表示切替手段Ｖ２３と、画像表示部Ｖ２４と、サブパネルＶ２５と、指示手段Ｖ２６とを含んで構成されている。

検査情報表示部Ｖ２１と、選択された検査の情報を表示させるための領域である。検査の情報としては、例えば、患者名、ＩＤ、検査日時等が挙げられる。表示制御部１８は、一連の検査画像に付帯された付帯情報から、これらの情報を読み出して検査情報表示部Ｖ２１に表示させる。

体内マップ表示部Ｖ２２には、選択された検査の体内マップが表示される。体内マップ表示部Ｖ２２に表示された体内マップは、その体内マップを構成する各領域を個々に選択可能に構成されている。操作者は、入力部１７を介して指示手段Ｖ２６を操作し、これらの領域を指定する。体内マップ中の所望の領域が指定されると、表示制御部１８は、その指定された領域に対応付けられた画像データを、一連の検査画像データの中から特定し、特定された画像データを基に画像を生成する。表示制御部１８は、生成された画像を画像表示部Ｖ２４に表示させる。

画像表示部Ｖ２４は、体内マップ上で指定された領域に対応する画像を表示させるための領域である。画像表示部Ｖ２４には、選択された領域に対応する画像データを基に生成された静止画像や動画が表示される。また、画像表示部Ｖ２４には、その領域に対応する画像データに所見を入力するための入力画面を表示させてもよい。画像表示部Ｖ２４の表示態様は、表示切替手段Ｖ２３により切り替え可能に構成されている。

サブパネルＶ２５は、画像表示部Ｖ２４の表示態様にあわせて、操作系統を表示させるための領域である。サブパネルＶ２５は、画像表示部Ｖ２４の表示態様にあわせて、その表示が切り替わる。各態様に応じたサブパネルＶ２５の具体的な構成については、表示切替手段Ｖ２３の説明とあわせて後述する。

表示切替手段Ｖ２３は、画像表示部Ｖ２４の表示態様を切り替えるための切替手段である。この表示態様としては、例えば、静止画像を表示させる態様、動画を表示させる態様、または、選択された領域に対応する画像データに所見を入力するための入力画面を表示させる態様が挙げられる。表示切替手段Ｖ２３は、これらの態様を指定するための指定部として、静止画像指定部Ｖ２３１と、動画指定部Ｖ２３２と、所見指定部Ｖ２３３とを含んで構成されている。

静止画像指定部Ｖ２３１は、画像表示部Ｖ２４に静止画像を表示させる表示態様を指定するための指定部である。静止画像指定部Ｖ２３１が指示手段Ｖ２６により押下された場合には、表示制御部１８は、体内マップ上で選択された領域に関連付けられた所定の画像データ（例えば、先頭の画像データ）を基に画像を生成し、画像表示部Ｖ２４に表示させる。また、表示制御部１８は、その領域に関連付けられた各画像データを基に画像を生成し、これらの画像を指示手段Ｖ２６により選択可能に構成されたサムネイルをサブパネルＶ２５に表示させる。表示制御部１８は、このサムネイル上の画像が選択されると、選択された画像を画像表示部Ｖ２４に表示させる。

動画指定部Ｖ２３２は、画像表示部Ｖ２４に動画を表示させる表示態様を指定するための指定部である。動画指定部Ｖ２３２が指示手段Ｖ２６により押下された場合には、表示制御部１８は、体内マップ上で選択された領域に関連付けられた画像データを基に動画を生成し、画像表示部Ｖ２４で再生可能に表示させる。また、表示制御部１８は、画像表示部Ｖ２４に表示された動画に対し、再生、停止、巻き戻し、早送り等の操作を行うためのインタフェースをサブパネルＶ２５に表示させる。サブパネルＶ２５に表示されたインタフェースが操作された場合には、表示制御部１８は、その操作内容に応じて、画像表示部Ｖ２４に表示された動画の、再生、停止、巻き戻し、または早送りを行う。

所見指定部Ｖ２３３は、選択された領域に対応する画像データに所見を入力するための入力画面を、画像表示部Ｖ２４に表示させるための指定部である。所見指定部Ｖ２３３が指示手段Ｖ２６により押下された場合には、表示制御部１８は、画像表示部Ｖ２４に、選択された領域に関連付けられた各画像データが選択可能に構成された一覧を表示させる。また、表示制御部１８は、画像表示部Ｖ２４上で選択された画像データに対する所見を入力するための入力領域をサブパネルＶ２５に表示させる。画像表示部Ｖ２４の一覧で画像データが選択され、サブパネルＶ２５に所見が入力されると、表示制御部１８は、一覧上で選択された画像データに、入力領域に入力された所見を付帯する。

以上のように、画像表示画面Ｖ２０に体内マップを表示させることで、操作者は、カプセル内視鏡により検査ごとに撮像された複数の画像の中から、病変の疑いのある部分が撮像された画像を容易に抽出することが可能となる。

（動作）
次に、本実施形態に係る医用画像処理システムの一連の動作について、図５及び図６を参照しながら説明する。まず、図５に示したフローチャートを参照しながら、体内マップの生成に係る一連の動作について説明する。

（ステップＳ１１）
撮像部５００は、観察又は検査のために被検査者の口から飲み込まれた後、身体から排出されるまでの期間中に、食道、胃、十二指腸、小腸、大腸などの消化管内の画像を順次経時的に撮像し取得する。撮像部５００は、取得された画像データを、無線通信により第１の記憶部１１に送信し記憶させる。

部位特定部１２１は、一連の検査画像データを第１の記憶部１１から検査ごとに読み出す。部位特定部１２１は、読み出された一連の検査画像データに含まれる各画像データに対し、その画像データがどの部位を撮像したものかを特定する。例えば、部位特定部１２１は、画像を構成するピクセルの色の情報を基に、どの部位を撮像した画像データかを特定する。

（ステップＳ１２）
関連付け処理部１２２は、一連の検査画像データを部位特定部１２１から受ける。この一連の検査画像データを、関連付け処理部１２２は、雛型記憶部１２３から体内マップＰ１の雛型を読み出す。関連付け処理部１２２は、一連の検査画像データから各画像データを読み出す。関連付け処理部１２２は、読み出された画像データに付帯された部位情報を参照し、その画像データが取得された消化管中の部位（即ち、食道、胃、十二指腸、小腸、及び大腸のいずれか）を特定する。関連付け処理部１２２は、体内マップＰ１中の特定された部位を示す領域に、その画像データを関連付ける。

また、小腸に相当する画像データについては、関連付け処理部１２２は、領域Ｐ１４１〜Ｐ１４ｍそれぞれに対応する画像データを特定し、特定された画像データを各領域に関連付ける。また、関連付け処理部１２２は、小腸と同様にして大腸に相当する各画像データを、領域Ｐ１５１〜Ｐ１５ｎに関連付ける。

関連付け処理部１２２は、一連の検査画像データが関連付けられた体内マップを、その一連の検査画像データとあわせて異常候補検出部１３に出力する。

（ステップＳ１３）
異常候補検出部１３は、検査ごとの体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて関連付け処理部１２２から受ける。異常候補検出部１３は、受けた画像データに画像処理を施すことで、その取得された画像を解析し、病変の疑いがある領域を異常候補として抽出する。この抽出方法の一例としては、画像を構成するピクセルの色を示す情報を用いる方法が挙げられる。異常候補検出部１３は、抽出された異常候補に相当する領域を、他の領域と区別して識別するための識別情報（例えば、アノテーション）を、当該異常候補が抽出された画像データに付帯させる。異常候補検出部１３は、各画像データに対して画像処理が施された体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて解析部１４に出力する。

（ステップＳ１４）
解析部１４は、検査ごとの体内マップを、その体内マップに関連付けられた一連の検査画像データとあわせて異常候補検出部１３から受ける。解析部１４は、体内マップを構成する領域ごとに、その領域に関連付けられた画像データに対する、それらの画像データに含まれた異常候補の割合を算出する。

（ステップＳ１５）
解析部１４は、算出された画像の総面積に対して、異常候補の総面積が占める割合を算出する。解析部１４は、算出された割合を示す分布情報を、その領域に関連付ける。また、解析部１４は、取得された一連の検査画像全てに対する、それらの画像に含まれる異常候補の占める割合を算出する。この割合は、領域ごとの割合と同様に、枚数を基に算出してもよいし、面積を基に算出してもよい。解析部１４は、全体に対する分布情報として体内マップに関連付ける。

（ステップＳ１６）
領域ごとの分布情報、及び全体に対する分布情報を体内マップに関連付けたら、解析部１４は、体内マップと、その体内マップに関連付けられた画像データとを第２の記憶部１５に記憶させる。

次に、図６に示したフローチャートを参照しながら、画像の表示に係る一連の動作について説明する。

（ステップＳ２１）
リスト生成部１６は、第２の記憶部１５に記憶された体内マップを、あらかじめ決められた条件に基づき複数検査分読み出す。リスト生成部１６は、この条件として、例えば撮像時刻を基に、直近１週間に撮像された検査の体内マップを読み出す。また、リスト生成部１６は、操作者が指定した条件を、入力部１７を介して受け付け、この条件に基づき第２の記憶部１５から読み出す体内マップを決定してもよい。リスト生成部１６は、読み出された体内マップの一覧を表示制御部１８に出力する。

（ステップＳ２２）
表示制御部１８は、体内マップの一覧をリスト生成部１６から受ける。表示制御部１８は、受けた体内マップの一覧を基に検査選択画面Ｖ１０を生成する。

表示制御部１８は、検査ごとに関連付けられた検査表示領域Ｖ１１１を、あらかじめ決められた条件に基づき並び替える。この並び替えの条件としては、例えば、患者名の順、撮像時刻の順、または、分布情報を基にした並び替えが挙げられる。また、表示制御部１８は、入力部１７からの指定（日付指定部Ｖ１２１、患者名指定部Ｖ１２２、全体危険度指定部Ｖ１２３、または部位危険度指定部Ｖ１２４）を受けて、指定された条件に基づき検査表示領域Ｖ１１１を並べ替えてもよい。

（ステップＳ２３）
この表示を受けて、操作者は、入力部１７を介して指示手段Ｖ１３を操作し、検査表示領域Ｖ１１１を指定する。この指定を受けると、表示制御部１８は、指定された検査表示領域Ｖ１１１に関連付けられた検査で撮像された一連の検査画像データを第２の記憶部１５から読み出す。

（ステップＳ２４）
表示制御部１８は、指定された検査表示領域Ｖ１１１に関連付けられた体内マップと、読み出された一連の検査画像データを基に、画像表示画面Ｖ２０を生成し表示部１９に表示させる。

操作者は、入力部１７を介して指示手段Ｖ２６を操作し、体内マップ表示部Ｖ２２に表示された体内マップ中の領域を指定する。この指定を受けて、表示制御部１８は、その指定された領域に対応付けられた画像データを、一連の検査画像データの中から特定し、特定された画像データを基に画像を生成する。表示制御部１８は、生成された画像を画像表示部Ｖ２４に表示させる。

以上のように、本実施形態に係る医用画像処理システムは、検査ごとに撮像された一連の検査画像データを、体内マップ上の各領域に関連付けるとともに、領域ごとの分布情報と全体に対する分布情報とを算出する。そのうえで、医用画像処理システムは、全体に対する分布情報、または部位ごとの分布情報に基づき、複数検査分の体内マップを並べ替えて検査選択画面Ｖ１０に表示させる。これにより、操作者は、病変の疑いのある部分の多い（即ち、危険度の高い）患者を容易に特定することが可能となる。

また、本実施形態に係る医用画像処理システムでは、体内マップを構成する各領域を、それらの領域に関連付けられた分布情報を識別可能に表示させる。これにより、操作者は、カプセル内視鏡により検査ごとに撮像された複数の画像の中から、病変の疑いのある部分が撮像された画像を容易に抽出することが可能となる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載されたその均等の範囲に含まれる。

１１第１の記憶部
１２マップ出力部
１２１部位特定部
１２２関連付け処理部
１２３雛型記憶部
１３異常候補検出部
１４解析部
１５第２の記憶部
１６リスト生成部
１７入力部
１８表示制御部
１９表示部
５００撮像部

Claims

カプセル内視鏡による撮像経路が通過する各部位を模したマップであって、前記撮像経路における各部位を部位単位別にもしくは所定の範囲単位別にまたはそれらを組合わせた単位別に、複数の領域に分割されたマップをあらかじめ記憶し、前記カプセル内視鏡による一の検査により撮影された撮像経路における各部位についての一連の画像データを受けて、前記一連の画像データのそれぞれをその撮像位置に基づき前記複数の領域のいずれかに関連付けるマップ出力部と、
前記複数の領域毎に、各領域に関連づけられた画像データを基に、前記各領域における異常候補を検出する検出部と、
検出された前記異常候補に基いて、前記各領域毎に前記異常候補の検出割合を算出する解析部と、
前記各領域における前記異常候補の検出割合の大きさが識別可能な形態で前記各領域を表した前記マップを、前記検出割合の大きさの順に並べて表示可能に出力する表示制御部と、
を備えた医用画像処理システム。
前記解析部は、前記複数の領域それぞれについて、当該領域に関連付けられた前記画像データの総数で、前記異常候補を含む画像データの個数を除算することにより、前記検出割合の算出を行うことを特徴とする請求項１に記載の医用画像処理システム。
前記解析部は、前記複数の領域それぞれについて、当該領域に関連付けられた前記画像データに基づく画像の合計面積で、前記異常候補に相当する画像領域の合計面積を除算することにより、前記検出割合の算出を行うことを特徴とする請求項１に記載の医用画像処理システム。
前記表示制御部は、前記カプセル内視鏡による検査毎に、前記各領域における異常候補の検出割合の大きさが識別可能な形態で前記各領域を表した前記マップを記憶しておき、前記撮像経路が通過する各部位の中から指定された部位に含まれる前記領域における前記検出割合を基に、前記指定された部位における各検査における前記検出割合の大きさを比較し、検出割合の大きさの順に前記検査毎の複数のマップを並べて、該複数のマップを一覧表示可能に出力することを特徴とする請求項１〜請求項３のいずれか一つに記載の医用画像処理システム。