JP4139319B2 - カプセル型内視鏡撮像画像ファイリング装置 - Google Patents

Description

本発明は、例えばカプセル型内視鏡のような自然移動型撮影装置により取得される連続撮影画像データをファイリングするファイリング装置、ファイリング処理方法、及びファイリング処理プログラムに関する。

食道や胃腸等の身体管腔の病変には、例えば、出血、組織障害、血管形成異常、クローン病、ポリープなどがあるが、これら病変の大多数は、発症すると管内の色と表面構造に変化を引き起こす。
このことから、病変の有無や病変の原因を探るために身体管腔内に撮像機能付き発信器を送り込み、この撮像機能付き発信器から送信される撮像画像データを受信して、この受信した画像と少なくとも１つの基準値とを比較して比色定量的な異常性があるか否かを分析し、病変が存在する確率の指標を生成する処理装置が提案されている。（例えば、特許文献１参照。）
ＵＳ２００２／０１７７７７９Ａ１（要約、段落［０００２］、［０００７］、［００１８］、［００２０］、［００２１］）

ところで、上記特許文献１の技術は、比色定量的な異常性を分析して、病変が存在する確率の指標を生成することに主眼が置かれており、画像及びカプセル（撮像機能付き発信器、カプセル型内視鏡）の位置を単一のモニタ上に表示することが可能としているが、画像とカプセルの位置をどのように表示するのかの記載がなく、また、そのように画像及びカプセルの位置を単一のモニタ上に表示するための上記処理装置の操作上の記載もない。従って、特許文献１に記載された装置・方法のみでは、具体的に画像及びカプセルの位置を単一のモニタ上に表示することの実現は困難である。

また、通常、処理の進行状況の表示はプログレスバーで行うのが一般的であり、このようなプログレスバーでは、処理の進行に応じて横型バー内の進行マークが左から右へ（縦型バーであれば下から上へ）順次増加して行き、バーの終端まで増加したところで処理が終了となる。しかし、このようなプログレスバーでの表示は時間的な経過、あるいは全体の中の何パーセントまで処理が終了しているかを知ることはできるが処理対象における現在の処理位置を知ることは出来ない。

特許文献１の技術も同様で、多数の撮像画像の中から特定画像を抽出する等の画像処理を行う場合、その処理の進行状況が身体管腔内のどの位置まで進行しているのかを把握するための配慮は何らなされていない。
本発明の課題は、上記従来の実情に鑑み、自然移動型撮影装置により取得される連続撮影画像データを自然移動型撮影装置の注目位置情報に関連付けて記録し、その記録された連続撮影画像データを一定の基準に従って抽出する画像処理の過程において、その画像処理の進捗状況を容易に視認できる連続画像ファイリング装置、連続画像データ処理方法、及び連続画像データ処理プログラムを提供することである。

本発明において、第１の発明のカプセル型内視鏡用画像ファイリング装置は、所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取得した連続画像データを処理するカプセル型内視鏡用画像ファイリング装置であって、上記連続画像データを取得した上記被検体内の位置に関する１つ以上の位置情報から任意の１つの位置を注目位置情報として取得する注目位置情報取得手段と、上記注目位置情報として指示された位置に対応する画像情報を上記連続画像データから取得する画像情報取得手段と、上記被検体内における１つ以上の位置情報を少なくとも１次元以上の図式として表示する位置表示手段と、上記画像情報取得手段によって取得された上記画像情報に対して所定の処理を施す画像情報処理手段と、上記位置表示手段によって表示された上記図式上に注目位置情報取得手段によって取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表示変化によって上記画像情報処理手段による処理の進行度を告知する進捗情報表示手段と、を有して構成される。

上記位置表示手段は、例えば体内の身体管腔におけるカプセル型内視鏡の通過経路を表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示するように構成される。
また、上記進捗情報表示手段は、例えば上記進行度を告知する表示を上記画像情報処理手段による処理結果と共に上記位置表示手段による表示上に重畳表示するように構成される。

このカプセル型内視鏡用画像ファイリング装置は、例えば上記画像情報処理手段の処理の進行と共に該画像情報処理手段の処理に対応する画像情報を表示する画像情報表示手段を有して構成される。
この場合、上記画像情報表示手段は、例えば上記画像情報処理手段による処理結果を、上記画像情報の表示に重畳した形で表示するように構成され、上記画像情報表示手段は、例えば上記画像情報を所定の時間間隔で更新表示するように構成される。

また、このカプセル型内視鏡用画像ファイリング装置は、例えば装置操作者からの指示を受け付ける指示入力手段を有し、上記画像情報処理手段は、上記指示入力手段による入力結果に基づいて画像情報処理の制御を行うように構成される。
この場合、上記指示入カ手段からの入力結果に基づく上記画像情報処理手段における画像情報処理の制御は、例えば処理の終了であり、また、例えば処理の一時停止であり、また、例えば処理の再開であり、また、例えば処理対象とする画像情報の変更であるように構成される。

上記第１の発明のカプセル型内視鏡用画像ファイリング装置における処理内容は、本発明の第２の発明としてのカプセル型内視鏡用画像ファイリング処理方法となるものであり、また、上記の処理を実行するプログラムは、本発明の第３の発明としてのカプセル型内視鏡用画像ファイリング処理プログラムとなるものである。

身体管腔の位置情報を１次元以上の次元で図式化して表示し、その図式上の位置情報の表示上に画像処理の進行度を重畳表示するので、通常のプログレスバーによる表示とは異なり、身体のどの部分まで画像処理が進行したか直感的に把握できるので便利である。
また、特定画像の処理結果を示す特定表示を位置情報の表示上に重畳表示すると共にその特定画像を同一画面上の画像表示領域に表示するので、身体のどの部分に特定の状態が発生しているのか容易に把握できて便利である。

また、位置情報の表示に対して直接マウスによる操作によって画像処理の制御を行うので、身体管腔の位置との関係で直感的な操作を行うことができ、操作し易くて便利である。

以下、本発明の実施の形態を図面を参照しながら説明する。
尚、本発明の実施の形態における以下の説明において、上述した第１の発明のカプセル型内視鏡用画像ファイリング装置における被検体は例えば被検査者４等から成り、連続画像データは例えばカプセル型内視鏡３による撮像画像データ等から成り、位置情報は撮像画像データの撮像位置データから成る。１次元以上の図式としてカプセル型内視鏡３の通過路３７として表示される。また、注目位置情報は、撮像画像データの撮像位置データである位置情報の１つである。注目位置情報取得手段は例えばアンテナ１１、受信機６等から成り、画像情報は例えば撮像画像データ等から成り、画像情報取得手段は例えばアンテナ１１、受信機６、ワークステーション７等から成り、１次元以上の図式は例えば身体管腔モデル２６等から成り、位置表示手段は例えばモニタ装置２１の表示画面３８等から成り、画像情報処理手段は例えばワークステーション７の本体装置１９等から成り、注目位置情報の位置は例えば位置マーク３９等から成り、処理の進行度を告知する表示は例えば位置マーク３９、通過路３７等から成り、進捗情報表示手段は例えばモニタ装置２１の表示画面３８等から成り、画像情報表示手段は例えばモニタ装置２１の表示画面３８の画像表示領域４１等から成り、処理結果は例えば特殊画像４２´等から成り、処理に対応する画像情報は例えば特徴検出対象位置４５等から成り、装置操作者は例えば医師、看護師等から成り、指示入力手段は例えばワークステーション７におけるモニタ装置２１の表示画面３８、キーボード２２、マウス２３等から成る。また、画像情報処理の制御は例えば図３、図５、図６、図７のフローチャート等で示される処理である。

図１は、本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの概略の構成を示す図である。同図に示すように、本例のカプセル型内視鏡撮像画像ファイリングシステム１は、パッケージ２に収容されたカプセル型内視鏡３、パッケージ２から取り出したカプセル型内視鏡３を服用する患者すなわち被検査者４、この被検査者４に着用させるジャケット５、ジャケット５に着脱自在の受信機６、受信機６が受信した画像データを処理するワークステーション７、このワークステーション７にネットワーク８を介して接続されているデータベース９とで構成される。

上記のカプセル型内視鏡３は、例えば近年になって実用化されつつある飲み込み型のカプセル型内視鏡であり、その内部には、撮像部と無線部と電源が設けられている。このカプセル型内視鏡３は、観察（検査）のために被検査者４の口から飲み込まれた後、身体から自然排出されるまでの観察期間中に、撮像部により食道、胃、小腸、大腸などの身体管腔内の状態を順次振像して、その撮像画像データを無線部から外部に発信する。

この被検査者４に着用させるジャケット５には、カプセル型内視鏡３の無線部から発信される撮像画像データの発信電波を捕捉する複数（図の例では５個）のアンテナ１１（１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ）が設けられている。これらのアンテナ１１は、受信機６との間で無線又は有線による通信ができるようになっている。

なお、アンテナ１１の数はとくに５個に限定されるものではなく、適宜の数があればよい。要は、カプセル型内視鏡３の移動に伴う位置に応じた発信電波を良好に受信することができる配置数であれば良い。
受信機６には、外部には、上記のジャケット５からアンテナ１１を介して電波で撮像画像データを受信する場合に用いられるアンテナ１２、観察（検査）に必要な情報を表示する表示部１３、及び観察（検査）に必要な情報を入力する入力部１４が設けられている。また、背部には、図では陰になって見えないが、各アンテナ１１から有線で撮像画像データを受信する場合に用いられる信号ケ￣ブル接続用のコネクタを備えている。

そして、受信機６の下部には、携帯時にも電源を供給できるように電源部１５が設けられている。この電源部１５は、たとえば乾電池、Ｌｉイオン電池、Ｎｉ水素電池等で構成され（勿論他の形式の電池であっても良い）、また、充電式であってもよい。
更に受信機６の内部には、観察（検査）に必要な処理を行う信号処理・制御部１６が設けられ、更に受信された撮像画像データを記憶するためのＣＦ（コンパクトフラッシュ（登録商標））メモリ１７を図の両方向矢印ａで示すように着脱可能に装着する装着部１８が設けられている。

ワークステーション７は、本体装置１９と、この本体装置１９に接続されたモニタ装置２１及びキーボード２２、このキーボード２２に接続されたマウス２３等で構成されており、更に本体装置１９には、特には図示しないが、上述したネットワーク８に接続するためのインタフェースの他に各種のインタフェースを備えており、これらのインタフェースを介して上述した受信機６のほかに、プリンタ２４、ＣＦメモリリーダ／ライタ２５が接続されている。

このワークステーション７は医師又は看護師がカプセル型内視鏡３により撮像された被検査者４の身体管腔内の画像に基づいて診断等を行うための画像処理機能を有している。
医師又は看護師は、ワークステーション７のモニタ装置２１に表示されるマン・マシンインタフェースに対し、キーボード２２又はマウス２３を用いて入力操作を行いながら、カプセル型内視鏡３から発信され受信機６によって受信された被検査者４の身体管腔内の撮像画像データを受信機６から取り込む指示を行うことができる。

この撮像画像データの受信機６からの取り込みでは、受信機６から有線で直接取り込むこともでき、また、ＣＦメモリ１７を図の矢印ｂで示すようにＣＦメモリリーダ／ライタ２５に装着して、このＣＦメモリ１７から撮像画像データを取り込むようにすることもできる。

更に、医師又は看護師は、上記のように受信機６から取り込んだ撮像画面データをデータベース９へ格納する指示、データベース９に格納された撮像画像データを呼び出してモニタ装置２１の表示画面上で後述する撮像画像データに係わる画像表示を行う指示、撮像画像の観察に基づく診察結果などをデータベース９へ記録する指示、プリンタ２４でカルテ等を印刷する指示などを行うことができる。
＜第１の実施の形態＞
図２は、第１の実施の形態において本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムにおけるワークステーション７のモニタ装置２１の同一表示画面３８上に表示される被検査者４の身体管腔モデル２６と撮像画像４２の例を示す図であり、同図(a) は、モニタ装置２１の表示画面に表示される被検査者４の身体管腔モデルを示す図、同図(b),(c) は、その身体管腔モデルと共にモニタ装置２１の同一表示画面上に表示される撮像画像の例を示す図である。尚、同図(b),(c) には、同図(a) に示す身体管腔モデルを説明の便宜上簡略に示している。

同図(a) に示すように、被検査者４の身体管腔モデル２６は、被検査者４の身体の輪郭２７と身体管腔の輪郭２８が２次元の図式として表示されている。身体管腔の輪郭２８は、食道３１、胃３２、十二指腸３３、小腸３４、大腸３５、直腸３６等の輪郭が表示されている。そして、その身体管腔の輪郭２８内に、カプセル型内視鏡３の通過路３７が表示されている。

また、同図(b) に示すように、モニタ装置２１の表示画面３８には、その同一画面上において、左側に上述した身体管腔モデル２６が表示され、そのカプセル型内視鏡３の通過路３７上に、撮像位置を示す位置情報の中の１つである注目位置情報としての位置マーク３９が重畳表示されている。そして、身体管腔モデル２６が表示されている右側の画像表示領域４１には、位置マーク３９に対応する通過路３７上で撮像された撮像画像４２が表示されている。

同図(c) は、位置マーク３９をポインティングしているマウス２３の操作によるポインティング矢印４３が表示されている例を示している。

続いて上記のカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理についての第１の実施形態における処理を説明する。
図３は、第１の実施形態における画像処理の動作を説明するフローチャートである。尚、この画像処理は、医師又は看護師による図１に示したワークステーション７のキーボード２２又はマウス２３からの指示入力に基づいて、本体装置１９に内蔵されている制御装置（以下、単にＣＰＵという）によって行われる処理である。

また、この処理に先立って次のような作業が行われている。すなわち、被検査者４によりカプセル型内視鏡３がパッケージ２から取り出され、カプセル型内視鏡３に内蔵の電源のスイッチがオンになり、このカプセル型内視鏡３が被検査者４に飲み込まれてから自動移動を行って体外に排出されるまでの間に、カプセル型内視鏡３の撮像部により被検査者４の身体管腔内の状態が連続的に撮像される。

この撮像された映像（画像）データが電波信号（映像信号）としてカプセル型内視鏡３の無線部から発信され、このデータがジャケット５のアンテナ１１（１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ）により受信される。この受信信号は受信機６に転送される。 受信機６では、各アンテナ１１からの受信を順次巡回して切り替えながら、映像信号の電波強度と映像信号の信号内容（撮像画像データ）とを１組として１フレームの信号を順次生成する。つまり１枚の撮像画像データに対して５フレームの信号が生成される。この生成された５フレームの信号は順次ＣＦメモリ１７に格納される。この受信機６側での処理は、カプセル型内視鏡３による連続的撮像の期間中、１回の撮像ごとに繰り返される。

図３において、ＣＰＵは、先ず、画像データと位置データを読み込んで、その読み込んだ撮像画像データと位置データとを関連付けて保存する（Ｓ１）。
この処理では、ＣＰＵは、受信機６から有線で直接に、又は受信機６から取り出されてＣＦメモリリーダ／ライタ２５に装着されたＣＦメモリ１７から、ＣＦメモリ１７に記録されている受信データを５フレーム毎に読み出す。

そして、これら５フレームの受信データから例えば最も強い電波を受信した（カプセル型内視鏡３に最も近接した）アンテナ１１の受信データから撮像画像データを読み出し、更に各アンテナに対応する５種類の電波強度から上記撮像画像データに対応する映像信号の発信位置を算出して、この算出した発信位置（映像撮像位置）データを注目位置情報として取得する。

そして、この取得した相互に関連する撮像画像データと注目位置情報とを１組としたレコードを生成し、このレコードをデータベース９に登録する。
次に、ＣＰＵは、図式化した位置情報を表示する（Ｓ２）。
この処理は、ワークステーション７のモニタ装置２１の表示画面上に、図２(a) 〜(c) に示したような身体管腔モデル２６を表示する処理である。尚、上記の図式化した位置情報は、身体管腔モデル２６におけるカプセル型内視鏡３の通過路３７のことを指している。

上記に続いて、ＣＰＵは、特定の色を持つ画像を検出する（Ｓ３）。
この処理は、上記データベース９を順次検索していく過程で、予め医師又は看護師によって指定されている特定の色を持つ画像データを検出したときは、その検出した画像データの注目位置情報を記憶する処理である。これにより、本アプリケーションの終了後に、必要に応じて、上記特定画像に対する各種の一括処理を行うことができる。

上記特定の色とは、身体管腔内における例えば出血の色である。また、出血は疾患部に発生する現象であり、一般に出血中または出血直後の血の色は、極めて鮮明な赤色である。従って、予め医師又は看護師から血の色に対応する色情報を指定されることによって、ＣＰＵは、その指定された色情報と対比することによって容易に出血部（疾患部）を有する撮像画像を検出することができる。

続いてＣＰＵは、上記画像処理（特定画像の検出処理）の進行度のモデル（身体管腔モデル２６）への重畳表示を行う（Ｓ４）。
この処理は、上記モニタ装置２１の表示画面上の位置情報上に、つまり通過路３７の表示の上に重畳させて位置マーク３９（図２(b),(c) 参照）を表示する処理である。この位置マーク３９は、上記疾患部を有する撮像画像を検出するために現在処理中の撮像画像が撮影された身体管腔モデル２６の位置を示している。

次に、ＣＰＵは、マウス２３の左ボタンがクリックされたか否かを判別する（Ｓ５）。 この処理では、マウス２３の左ボタンがクリックされていれば（Ｓ５がＹｅｓ）、これは本例では処理の一時停止を指示されていることを表しているので、ＣＰＵは、上記の処理を一時停止して、マウス２３の左ボタンが再度クリックされるまで待機する（Ｓ６、判別がＮｏ）。

そして、マウス２３の左ボタンが再度クリックされたならば（Ｓ６がＹｅｓ）、続いて全ての画像処理が終了したか否かを判別する（Ｓ７）。
また、ＣＰＵは、上記処理Ｓ５の判別処理で、マウス２３の左ボタンがクリックされていないときは（Ｓ５がＮｏ）、直ちに上記の処理Ｓ７の処理に移行する。

上記の処理Ｓ７の処理は、カプセル型内視鏡３が被検査者４に飲み込まれてから自動移動を行って体外に排出されるまでの間に、カプセル型内視鏡３の撮像部により連続的に撮像され、データベース９に格納されている被検査者４の身体管腔の全ての撮像画像についての上記の検索処理が終了したか否かを判別する処理である。

そして、未だ全て終了していなければ（Ｓ７がＮｏ）、処理Ｓ３に戻って処理Ｓ３〜Ｓ７を繰り返す。これにより、上記の処理が進行するにつれて、処理Ｓ４において現在処理位置を示す位置マーク３９が身体管腔の通過路３７の表示の上を順次移動しながら通過路３７の表示上に重畳表示されていく。

そして、全ての撮像画像についての上記の検索処理が終了したときは（Ｓ７がＹｅｓ）、アプリケーション終了の指示を待機し（Ｓ８、判別がＮｏ）、アプリケーション終了の指示を確認して（Ｓ８がＹｅｓ）、当該アプリケーションを終了する。
尚、上記の当該アプリケーションの終了を判別する処理は、例えば、表示画面３８に、アプリケーションの終了を指示して実行させるための図示しない終了ボタンを用意し、医師又は看護師等がマウス２３でこの終了ボタンを左クリックで指示をすることによって行われるようになっている。
＜第２〜第４の実施の形態＞
図４(a),(b) は、第２〜第４の実施の形態において本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムにおけるワークステーション７のモニタ装置２１の同一表示画面３８上に表示される被検査者４の身体管腔モデル２６と撮像画像４２の例を示す図である。

モニタ装置２１の同図(a) に示す同一表示画面３８の右側の画像表示領域４１は、医師又は看護師により予め指定された或る症状を示す所定の特徴（例えば出血症状つまり特定色）を有する特殊画像等があればその特殊画像を表示するように指示入力されたことによって、その指示に基づいてデータベース９上が検索され、上記所定の特徴を有する特殊画像を含む撮像画像データが検出されたとき、その検出された撮像画像データの特殊画像４２´が表示された状態を示している。

また、同図(a) に示す同一表示画面３８の左側の身体管腔モデル２６は、同じく医師又は看護師により予め指定された或る症状を示す所定の特徴（例えば出血症状）を有する特殊画像等があればその特殊画像が撮影された位置を示すように指示入力されたことによって、処理の進行状況を示す位置マーク３９の他に、検出された特殊画像の撮影された位置を示す画像処理結果４４が通過路３７上に重畳表示されている例を示している。

また、この画像処理結果４４の表示は、図４(a) では１箇所にしか表示していないが、実際の表示では、上記検索によって検出された全ての特殊画像データについて、その特殊画像が撮像された通過路３７上の位置に画像処理結果４４が表示される。
次に、同図(b) は、上記通過路３７上に表示されている全ての特殊画像の撮影位置を示す画像処理結果４４の中から（同図(b) も画像処理結果４４の表示を１箇所のみに表示しているが実際の表示では全ての画像処理結果４４が表示されている）、或る位置の画像処理結果４４がポインティング矢印４３によって指定され、その指定された画像処理結果４４が表示されている位置（通過路３７上の位置、以下同様）に対応する撮像画像データに基づく特殊画像４２´が、右側の画像表示領域４１に表示されている例を示している。

更に、図４(b) に示す例は、この特殊画像の表示の際に画像処理結果４４に対応して右側の画像表示領域４１に表示された特殊画像４２´に重畳して、この特殊画像４２´がデータベース９から検出された要因となった特徴検出対象位置４５（例えば出血位置）が表示されている例を示している。

続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理についての第２の実施形態における処理動作を説明する。
図５は、第２の実施形態における画像処理の動作を説明するフローチャートである。尚、この画像処理も、医師又は看護師による図１に示したワークステーション７のキーボード２２又はマウス２３からの指示入力に基づいて、本体装置１９のＣＰＵによって行われる処理である。また、この場合も、この処理に先立って第１の実施形態において述べたような作業が行われている。

図５において、処理Ｓ１〜Ｓ３、Ｓ４〜Ｓ８の処理は、第１の実施形態において図３のフローチャートで説明した処理Ｓ１〜Ｓ８の処理とそれぞれ同一である。本例では、処理Ｓ３と処理Ｓ４の処理の間で、処理Ｓ２１が行われる。
すなわち、ＣＰＵは、処理Ｓ３における特定の色を持つ特殊画像を検出した後、その検出した特殊画像を、例えば図４(a) に示した特殊画像４２´のように表示する。この表示期間は、例えば１枚の特殊画像４２´に対して２秒よりも長い間表示する。そして、これと平行して次の特殊画像の検索を進めながら、その現在検索位置を、例えば図４(a) に示した位置マーク３９にように、通過路３７上に順次重畳表示する。

尚、位置マーク３９の表示は、現在検索位置のみに表示する（つまり現在検索位置の移動に伴って位置マーク３９の表示が移動する）ようにしてもよく、また、一度表示された位置マーク３９の表示をそのまま残して現在検索位置の移動に応じて位置マーク３９の表示が増えていくようにしてもよい。

いずれにしても、医師又は看護師にとっては、現在検索位置の位置マーク表示により、画像検索処理の進捗状態が一目で判ると共に、身体管腔モデル２６内の異常発生状態を通過路３７に沿って順次視認することができ、これにより、次に続く処置への判断を迅速に行うことができる。

続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理についての第３の実施形態における処理動作を説明する。
図６は、第３の実施形態における画像処理の動作を説明するフローチャートである。尚、この画像処理も、医師又は看護師による図１に示したワークステーション７のキーボード２２又はマウス２３からの指示入力に基づいて、本体装置１９のＣＰＵによって行われる処理である。また、この場合も、この処理に先立って第１の実施形態において述べたような作業が行われている。

図６において、処理Ｓ１、Ｓ２、Ｓ４〜Ｓ８の処理は、第１の実施形態において図３のフローチャートで説明した処理Ｓ１、Ｓ２、Ｓ４〜Ｓ８の処理とそれぞれ同一である。本例では、図３のフローチャートの処理Ｓ３の処理に代って、処理Ｓ３１〜Ｓ３３の処理が行われる。

すなわち、処理Ｓ２の処理における図式化した位置情報の表示（モニタ装置２１の同一表示画面３８の左側領域に表示される被検査者４の身体管腔モデル２６の表示）に続いて、ＣＰＵは、現在検索位置の画像データの処理において、予め医師又は看護師により指定された特定の色（例えば出血色）を有する特殊画像データが検出されたか否か判別する（Ｓ３１）。

そして、特定の色を有する特殊画像データが検出されていなければ（Ｓ３１がＮｏ）、処理Ｓ４の処理に進むが、特定の色を有する特殊画像データが検出されていれば（Ｓ３１がＹｅｓ）、先ず、「疾患部」を示すマークを生成する（Ｓ３２）。
この「疾患部」を示すマークは、図４(a),(b) に示した画像処理結果４４と同一のものである。すなわち、図４(a),(b) に示した画像処理結果４４は、疾患部マークを示したものである。

上記に続いて、ＣＰＵは、上記生成した疾患部マーク（画像処理結果４４）をモデルに重畳表示する（Ｓ３３）。
これにより、例えば図４(a),(b) に示した画像処理結果４４にように、疾患部を示すマークが、身体管腔モデル２６のカプセル型内視鏡３の通過路３７上の疾患位置に重畳表示され、医師又は看護師は、疾患部がどのような範囲に広がっているかを一目で判別することができる。

続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理についての第４の実施形態における処理動作を説明する。
図７は、第４の実施形態における画像処理の動作を説明するフローチャートである。尚、この画像処理も、医師又は看護師による図１に示したワークステーション７のキーボード２２又はマウス２３からの指示入力に基づいて、本体装置１９のＣＰＵによって行われる処理である。また、この場合も、この処理に先立って第１の実施形態において述べたような作業が行われている。

図７において、処理Ｓ１〜Ｓ３、Ｓ４〜Ｓ８の処理は、第１の実施形態において図３のフローチャートで説明した処理Ｓ１〜Ｓ３、Ｓ４〜Ｓ８の処理とそれぞれ同一である。本例では、図３のフローチャートの処理Ｓ３と処理Ｓ４の間で、処理Ｓ４１、Ｓ４２の処理が行われる。

すなわち、処理Ｓ３の処理における特定の色を有する特殊画像データを検出した後、ＣＰＵは、画像表示を行う（Ｓ４１）。
この画像表示処理では、上記検出された特殊画像データによる特殊画像が、例えば図４(b) に示した特殊画像４２´のように、モニタ装置２１の表示画面３８の画像表示領域４１に表示される。

そして、更に、ＣＰＵは、その処理結果を画像に重畳表示する（Ｓ４２）。
この処理は、上記の画像処理結果として特殊画像４２´がデータベース９から検出された要因となった疾患位置を、例えば図４(b) に示した特徴検出対象位置４５のように、特殊画像の表示に重畳して表示する処理である。

これにより、医師又は看護師は、表示された特殊画像から疾患部を色によって自分で探すという手数を煩わすことなく、特徴検出対象位置４５の表示によって直ちに疾患部を知ることができ、疾患部の精査に直ちに取り掛かることができる。
尚、これらの処理では、医師又は看護師は、いつでもマウス２３を操作して身体管腔モデル２６の通過路３７の表示上に沿ってポインティング矢印４３を移動させ、所望の位置で左クリックすることにより、処理をジャンプさせて、左クリックした位置から処理を再開させることができる。さらに、このとき位置マーク３９は指定位置に移動するようになっている。

尚、上述した例では、カプセル型内視鏡３の通過路３７を、実際の身体管腔の形状に合わせて表示しているが、これに限ることなく、位置情報として例えば１次元つまり直線で表現してもよく、その直線上に、図２１(a) に示した食道３１、胃３２、十二指腸３３、小腸３４、大腸３５、直腸３６等に対応する区間を設けて、位置の表示を行えば良い。

本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの概略の構成を示す図である。 (a) はカプセル型内視鏡撮像画像ファイリングシステムの表示画面に表示される被検査者の身体管腔モデルを示す図、(b),(c) はその身体管腔モデルと共にモニタ装置の同一表示画面上に表示される撮像画像の例を示す図である。 第１の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの画像処理の動作を説明するフローチャートである。 (a),(b) は第２〜第５の実施の形態において本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムにおけるワークステーションのモニタ装置の同一表示画面上に表示される被検査者の身体管腔モデルと撮像画像の例を示す図である。 第２の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの画像処理の動作を説明するフローチャートである。 第３の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの画像処理の動作を説明するフローチャートである。 第４の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリングシステムの画像処理の動作を説明するフローチャートである。

符号の説明

１ カプセル型内視鏡撮像画像ファイリングシステム
２ パッケージ
３ カプセル型内視鏡
４ 被検査者
５ ジャケット
６ 受信機
７ ワークステーション
８ ネットワーク
９ データベース
１１（１１ａ、１１ｂ、１１ｃ、１１ｄ） アンテナ
１２ アンテナ
１３ 表示部
１４ 入力部
１５ 電源部
１６ 信号処理・制御部
１７ ＣＦ（コンパクトフラッシュ（登録商標））メモリ
１８ 装着部
１９ 本体装置
２１ モニタ装置
２２ キーボード
２３ マウス
２４ プリンタ
２５ ＣＦメモリリーダ／ライタ
２６ 身体管腔モデル
２７ 身体の輪郭
２８ 身体管腔の輪郭
３１ 食道
３２ 胃
３３ 十二指腸
３４ 小腸
３５ 大腸
３６ 直腸
３７ 通過路（カプセル型内視鏡の）
３８ 表示画面
３９ 位置マーク
４１ 画像表示領域
４２ 撮像画像
４２´ 特殊画像
４３ ポインティング矢印
４４ 画像処理結果（疾患部マーク）
４５ 特徴検出対象位置

Claims (33)

1. 所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取得した連続画像データを処理するカプセル型内視鏡用画像ファイリング装置であって、
   前記連続画像データを取得した前記被検体内の位置に関する１つ以上の位置情報から任意の１つの位置を注目位置情報として取得する注目位置情報取得手段と、
   前記注目位置情報として指示された位置に対応する画像情報を前記連続画像データから取得する画像情報取得手段と、
   前記被検体内における１つ以上の位置情報を少なくとも１次元以上の図式として表示する位置表示手段と、
   前記画像情報取得手段によって取得された前記画像情報から特定の画像を抽出する画像情報処理手段と、
   前記位置表示手段によって表示された前記図式上に注目位置情報取得手段によって取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表示変化によって前記画像情報処理手段による処理の進行度を告知する進捗情報表示手段と、
   を有することを特徴とするカプセル型内視鏡用画像ファイリング装置。
2. 前記位置表示手段は、体内の身体管腔におけるカプセル型内視鏡の通過経路を表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示することを特徴とする請求項１記載のカプセル型内視鏡用画像ファイリング装置。
3. 前記進捗情報表示手段は、前記進行度を告知する表示を前記画像情報処理手段による処理結果と共に前記位置表示手段による表示上に重畳表示することを特徴とする請求項１又は２記載のカプセル型内視鏡用画像ファイリング装置。
4. 前記画像情報処理手段の処理の進行と共に該画像情報処理手段の処理に対応する画像情報を表示する画像情報表示手段を有することを特徴とする請求項１、２又は３記載のカプセル型内視鏡用画像ファイリング装置。
5. 前記画像情報表示手段は、前記画像情報処理手段による処理結果を、前記画像情報の表示に重畳した形で表示することを特徴とする請求項４記載のカプセル型内視鏡用画像ファイリング装置。
6. 前記画像情報表示手段は、前記画像情報を所定の時間間隔で更新表示することを特徴とする請求項４又は５記載のカプセル型内視鏡用画像ファイリング装置。
7. 装置操作者からの指示を受け付ける指示入力手段を有し、
   前記画像情報処理手段は、前記指示入力手段による入力結果に基づいて画像情報処理の制御を行うことを特徴とする請求項１、２、３、４、５又は６記載のカプセル型内視鏡用画像ファイリング装置。
8. 前記指示入カ手段からの入力結果に基づく前記画像情報処理手段における画像情報処理の制御は、処理の終了であることを特徴とする請求項７記載のカプセル型内視鏡用画像ファイリング装置。
9. 前記指示入カ手段からの入力結果に基づく前記画像情報処理手段における画像情報処理の制御は、処理の一時停止であることを特徴とする請求項７記載のカプセル型内視鏡用画像ファイリング装置。
10. 前記指示入カ手段からの入力結果に基づく前記画像情報処理手段における画像情報処理の制御は、処理の再開であることを特徴とする請求項７記載のカプセル型内視鏡用画像ファイリング装置。
11. 前記指示入カ手段からの入力結果に基づく前記画像情報処理手段における画像情報処理の制御は、処理対象とする画像情報の変更であることを特徴とする請求項７記載のカプセル型内視鏡用画像ファイリング装置。
12. 所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取得した連続画像データを処理するカプセル型内視鏡用画像ファイリング方法であって、
    前記連続画像データを取得した前記被検体内の位置に関する１つ以上の位置情報から任意の１つの位置を注目位置情報として取得する注目位置情報取得工程と、
    前記注目位置情報として指示された位置に対応する画像情報を前記連続画像データから取得する画像情報取得工程と、
    前記被検体内における１つ以上の位置情報を少なくとも１次元以上の図式として表示する位置表示工程と、
    前記画像情報取得工程によって取得された前記画像情報から特定の画像を抽出する画像情報処理工程と、
    前記位置表示工程によって表示された前記図式上に注目位置情報取得工程によって取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表示変化によって前記画像情報処理工程による処理の進行度を告知する進捗情報表示工程と、
    を含むことを特徴とするカプセル型内視鏡用画像ファイリング方法。
13. 前記位置表示工程は、体内の身体管腔におけるカプセル型内視鏡の通過経路を表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示することを特徴とする請求項１２記載のカプセル型内視鏡用画像ファイリング方法。
14. 前記進捗情報表示工程は、前記進行度を告知する表示を前記画像情報処理工程による処理結果と共に前記位置表示工程による表示上に重畳表示することを特徴とする請求項１２又は１３記載のカプセル型内視鏡用画像ファイリング方法。
15. 前記画像情報処理工程の処理の進行と共に該画像情報処理工程の処理に対応する画像情報を表示する画像情報表示工程を含むことを特徴とする請求項１２、１３又は１４記載のカプセル型内視鏡用画像ファイリング方法。
16. 前記画像情報表示工程は、前記画像情報処理工程による処理結果を、前記画像情報の表示に重畳した形で表示することを特徴とする請求項１５記載のカプセル型内視鏡用画像ファイリング方法。
17. 前記画像情報表示工程は、前記画像情報を所定の時間間隔で更新表示することを特徴とする請求項１５又は１６記載のカプセル型内視鏡用画像ファイリング方法。
18. 方法操作者からの指示を受け付ける指示入力工程を含み、
    前記画像情報処理工程は、前記指示入力工程による入力結果に基づいて画像情報処理の制御を行うことを特徴とする請求項１２、１３、１４、１５、１６又は１７記載のカプセル型内視鏡用画像ファイリング方法。
19. 前記指示入カ工程からの入力結果に基づく前記画像情報処理工程における画像情報処理の制御は、処理の終了であることを特徴とする請求項１８記載のカプセル型内視鏡用画像ファイリング方法。
20. 前記指示入カ工程からの入力結果に基づく前記画像情報処理工程における画像情報処理の制御は、処理の一時停止であることを特徴とする請求項１８記載のカプセル型内視鏡用画像ファイリング方法。
21. 前記指示入カ工程からの入力結果に基づく前記画像情報処理工程における画像情報処理の制御は、処理の再開であることを特徴とする請求項１８記載のカプセル型内視鏡用画像ファイリング方法。
22. 前記指示入カ工程からの入力結果に基づく前記画像情報処理工程における画像情報処理の制御は、処理対象とする画像情報の変更であることを特徴とする請求項１８記載のカプセル型内視鏡用画像ファイリング方法。
23. コンピュータに、所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取得した連続画像データの処理を実行させるカプセル型内視鏡用画像ファイリング処理プログラムであって、
    前記連続画像データを取得した前記被検体内の位置に関する１つ以上の位置情報から任意の１つの位置を注目位置情報として取得する注目位置情報取得処理と、
    前記注目位置情報として指示された位置に対応する画像情報を前記連続画像データから取得する画像情報取得処理と、
    前記被検体内における１つ以上の位置情報を少なくとも１次元以上の図式として表示する位置表示処理と、
    前記画像情報取得処理によって取得された前記画像情報から特定の画像を抽出する画像情報処理手順と、
    前記位置表示処理によって表示された前記図式上に注目位置情報取得処理によって取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表示変化によって前記画像情報処理手順による処理の進行度を告知する進捗情報表示処理と、
    を前記コンピュータに実行させることを特徴とするプセル内視鏡用画像ファイリング処理プログラム。
24. 前記位置表示処理は、体内の身体管腔におけるカプセル型内視鏡の通過経路を表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示する処理であることを特徴とする請求項２３記載のカプセル型内視鏡用画像ファイリング処理プログラム。
25. 前記進捗情報表示処理は、前記進行度を告知する表示を前記画像情報処理手順による処理結果と共に前記位置表示処理による表示上に重畳表示する処理であることを特徴とする請求項２３又は２４記載のカプセル型内視鏡用画像ファイリング処理プログラム。
26. 前記画像情報処理手順の処理の進行と共に該画像情報処理手順の処理に対応する画像情報を表示する画像情報表示処理を含むことを特徴とする請求項２３、２４又は２５記載のカプセル型内視鏡用画像ファイリング処理プログラム。
27. 前記画像情報表示処理は、前記画像情報処理手順による処理結果を、前記画像情報の表示に重畳した形で表示する処理であることを特徴とする請求項２６記載のカプセル型内視鏡用画像ファイリング処理プログラム。
28. 前記画像情報表示処理は、前記画像情報を所定の時間間隔で更新表示する処理であることを特徴とする請求項２６又は２７記載のカプセル型内視鏡用画像ファイリング処理プログラム。
29. 処理プログラム操作者からの指示を受け付ける指示入力処理を有し、
    前記画像情報処理手順は、前記指示入力処理による入力結果に基づいて画像情報処理の制御を行うことを特徴とする請求項２３、２４、２５、２６、２７又は２８記載のカプセル型内視鏡用画像ファイリング処理プログラム。
30. 前記指示入カ処理からの入力結果に基づく前記画像情報処理手順における画像情報処理の制御は、処理の終了であることを特徴とする請求項２９記載のカプセル型内視鏡用画像ファイリング処理プログラム。
31. 前記指示入カ処理からの入力結果に基づく前記画像情報処理手順における画像情報処理の制御は、処理の一時停止であることを特徴とする請求項２９記載のカプセル型内視鏡用画像ファイリング処理プログラム。
32. 前記指示入カ処理からの入力結果に基づく前記画像情報処理手順における画像情報処理の制御は、処理の再開であることを特徴とする請求項２９記載のカプセル型内視鏡用画像ファイリング処理プログラム。
33. 前記指示入カ処理からの入力結果に基づく前記画像情報処理手順における画像情報処理の制御は、処理対象とする画像情報の変更であることを特徴とする請求項２９記載のカプセル型内視鏡用画像ファイリング処理プログラム。

Images