WO2005053518A1 - 表示処理装置 - Google Patents

Abstract

　カプセル型内視鏡により経時的に連続撮影して取得される画像を撮影位置に関連付けてデータベース化する。モニタ装置の表示画面（３８）の左方に被検体内モデル（２６）とカプセル型内視鏡の通過軌跡（３７）と撮影位置を示す位置マーク（３９）を表示し、位置マーク（３９）の位置に対応する画像（４２）を右方の画像表示領域（４１）に表示する。マウスによって通過軌跡（３７）上の位置マーク（３９）を指定すると対応する画像（４２）が表示される。区間指定してその区間内だけについて位置マーク（３９）と対応する画像（４２）を表示させることもでき、特殊画像が撮影された位置マーク（３９）を特定することもできる。

Description

明 細 書

表示処理装置

技術分野

[0001] 本発明は、例えばカプセル型内視鏡のように、自律的若しくは他律的に被検体内 を移動し、経時的に撮像して得た複数の画像情報を表示処理する技術、及び、この ような自然移動型撮影装置により取得された連続撮影画像データの管理技術に関 する。

背景技術

[0002] 食道や胃腸等の身体管腔の病変には、例えば、出血、組織障害、血管形成異常、 クローン病、ポリープなどがあるが、これら病変の大多数は、発症すると管内の色と表 面構造に変化を引き起こす。

[0003] このことから、病変の有無や病変の原因を探るために身体管腔内に撮像機能付き 発信器を送り込み、この撮像機能付き発信器から送信される撮像画像データを受信 して、この受信した画像と少なくとも 1つの基準値とを比較して比色定量的な異常性 があるか否かを分析し、病変が存在する確率の指標を生成する処理装置が提案され ている。（例えば、特許文献 1参照。）この装置は、飲込みタイプの内視鏡である、所 謂カプセル型内視鏡と 、うものである。

[0004] カプセル型内視鏡は、撮像機能と無線通信機能とを有しており、観察又は検査の ために患者の口から飲込まれた後、人体力 自然排出されるまでの観察期間、胃、 小腸等の臓器を順次撮像し、撮像による画像情報 (画像を表現する電子データ)を 順次無線送信するものである。

[0005] このようにして無線送信された画像情報は、患者の体外に設けられた受信機により 受信され所定のメモリに蓄積されるようになっており、その後、必要に応じて読み出し てディスプレイに表示等することにより、医師の診断等に利用することができるように なっている。

[0006] し力しながら、このようなカプセル型内視鏡においては、通常の内視鏡と異なり、患 者の口から飲み込まれてから自然排出されるまでの期間が観察や検査期間となるこ とから、観察や検査期間が例えば 10時間以上といった具合に長時間に及ぶこともあ り、この間の撮像により得られた画像情報の数は膨大である。

[0007] このことから、診断等の段階にお!、て、このような膨大な数の画像情報を短時間で 把握することは容易ではなぐまた、膨大な数の画像情報の中から注目すべき所望 の部位の画像情報、より具体的には診断を所望する臓器の画像情報のみや疾患部 位等が撮影された画像に係る画像情報のみを探し出すのは容易な作業ではない。

[0008] 本発明が達成しょうとする第一の目的は、上記従来の実情に鑑み、多数の画像情 報を容易に把握することができると共に、多数の画像情報の中力 注目すべき所望 の位置や疾患部位等が撮影された画像情報を容易に探し出すことのできる、画像情 報の表示処理装置、表示処理方法、及び表示処理プログラムを提供することを目的 とする。

[0009] ところで、前掲した特許文献 1に開示されて 、る技術は、比色定量的な異常性を分 祈して、病変が存在する確率の指標を生成することに主眼が置かれており、画像及 びカプセル (撮像機能付き発信器、カプセル型内視鏡)の位置を単一のモニタ上に 表示することが可能としている力 画像とカプセルの位置をどのように表示するのかの 記載がなぐまた、そのように画像及びカプセルの位置を単一のモニタ上に表示する ための上記処理装置の操作上の記載もない。従って、この文献に記載された装置' 方法のみでは、具体的に画像及びカプセルの位置を単一のモニタ上に表示すること の実現は困難である。

[0010] また、通常、処理の進行状況の表示はプログレスバーで行うのが一般的であり、こ のようなプログレスバーでは、処理の進行に応じて横型バー内の進行マークが左から 右へ (縦型バーであれば下力も上へ)順次増加して行き、バーの終端まで増加したと ころで処理が終了となる。しかし、このようなプログレスバーでの表示は時間的な経過 、あるいは全体の中の何パーセントまで処理が終了しているかを知ることはできるが 処理対象における現在の処理位置を知ることは出来ない。

[0011] 前掲した特許文献 1に開示されている技術も同様で、多数の撮像画像の中から特 定画像を抽出する等の画像処理を行う場合、その処理の進行状況が身体管腔内の どの位置まで進行して 、るのかを把握するための配慮は何らなされて 、な！/、。 [0012] 本発明が達成しょうとする第二の目的は、上記従来の実情に鑑み、自然移動型撮 影装置により取得される連続撮影画像データを自然移動型撮影装置の注目位置情 報に関連付けて記録し、その記録された連続撮影画像データを一定の基準に従つ て抽出する画像処理の過程にお!、て、その画像処理の進拔状況を容易に視認でき る連続画像フアイリング装置、連続画像データ処理方法、及び連続画像データ処理 プログラムを提供することである。

特許文献 1 :米国特許出願公開第 2002Z0177779A1号明細書

発明の開示

[0013] 本発明の態様のひとつである表示処理装置は、先ず、第 1の発明の被検体内に導 入された撮像装置によって該被検体内の複数の位置で経時的に撮像して得た複数 の画像情報を表示部に表示させるための表示処理装置であって、上記複数の画像 情報を取得する画像情報取得部と、上記複数の画像情報のそれぞれに関連づけら れ、上記撮像装置が経時的に撮像した上記被検体内でのそれぞれの位置に関する 複数の位置情報を取得する位置情報取得部と、上記複数の位置情報に基づ!、て、 上記撮像装置が経時的に撮像した上記被検体内での位置を少なくとも 1次元の図式 として上記表示部に表示させる位置情報表示部と、上記複数の位置情報のうちの少 なくとも 1つを注目位置情報として指示する注目位置情報指示部と、上記図式として 表示された上記複数の位置情報のうちで、上記注目位置情報として指示された位置 情報に関連づけられた画像情報を上記表示部に表示させる画像表示部と、を有して 構成される。

[0014] この画像情報の表示処理装置は、例えば上記位置情報表示部により上記図式とし て表示された上記複数の位置情報のうちで、該図式中の上記注目位置情報に対応 する位置に所定のマークを表示させる位置マーク表示部をさらに有して構成される。

[0015] また、この画像情報の表示処理装置は、例えば上記複数の画像情報と上記複数の 位置情報とを保存する保存部をさらに有し、上記画像表示部は、上記注目位置情報 として指示された位置情報に関連づけられた画像情報を上記保存部力 読み出して 上記表示部に表示させるように構成される。

[0016] 上記注目位置情報指示部は、例えば上記位置情報表示部によって上記図式とし て表示された上記複数の位置情報の中から、該図式上で任意の位置情報を上記注 目位置情報として指定する指定位置入力部を更に有して構成される。

[0017] また、この画像情報の表示処理装置は、例えば上記複数の画像特報の中から所定 の特徴部分を有する画像情報を抽出する特徴画像検出部を更に有し、上記注目位 置情報指示部は、上記特徴画像検出部で抽出された上記所定の特徴を有する画像 情報に関連づ 、て 、る位置情報を上記注目位置情報として指示するように構成され る。

[0018] 本発明の別の態様のひとつである画像情報の表示処理方法は、被検体内の複数 の位置で経時的に撮像して得た複数の画像情報をモニタ装置の表示画面上に表示 させるための表示処理方法であって、上記複数の画像情報を取得する画像情報取 得工程と、上記複数の画像情報のそれぞれに関連づけられ、上記被検体内で経時 的に撮像されたそれぞれの位置に関する複数の位置情報を取得する位置情報取得 工程と、上記複数の位置情報に基づいて、上記被検体内で経時的に撮像された位 置を少なくとも 1次元の図式として表示させる位置情報表示工程と、上記複数の位置 情報のうちの少なくとも 1つを注目位置情報として指示する注目位置情報指示工程と

、上記図式として表示された上記複数の位置情報のうちで、上記注目位置情報とし て指示された位置情報に関連づけられた画像情報を表示させる画像表示工程と、を 含んで構成される。

[0019] この画像情報の表示処理方法は、例えば上記位置情報表示工程により上記図式と して表示された上記複数の位置情報のうちで、該図式中の上記注目位置情報に対 応する位置に所定のマークを表示させる位置マーク表示工程をさらに有して構成さ れる。

[0020] また、この画像情報の表示処理方法は、例えば上記複数の画像情報と上記複数の 位置情報とを保存する保存工程をさらに有し、上記画像表示工程は、上記注目位置 情報として指示された位置情報に関連づけられた画像情報を上記保存工程力ゝら読 み出して上記表示工程に表示させるように構成される。

[0021] 上記注目位置情報指示工程は、例えば上記位置情報表示工程によって上記図式 として表示された上記複数の位置情報の中から、該図式上で任意の位置情報を上 記注目位置情報として指定する指定位置入力工程を更に有して構成される。

[0022] また、この画像情報の表示処理方法は、例えば上記複数の画像特報の中から所定 の特徴部分を有する画像情報を抽出する特徴画像検出工程を更に有し、上記注目 位置情報指示工程は、上記特徴画像検出工程で抽出された上記所定の特徴を有 する画像情報に関連づ 、て 、る位置情報を上記注目位置情報として指示するように 構成される。

[0023] 本発明の更なる別の態様のひとつである記録媒体は、被検体内の複数の位置で 経時的に撮像して得た複数の画像情報をコンピュータによってモニタ装置の表示画 面上に表示させるための表示処理プログラムが記録されている記録媒体であって、 該表示処理プログラムは、上記複数の画像情報を取得する画像情報取得処理と、上 記複数の画像情報のそれぞれに関連づけられ、上記被検体内で経時的に撮像され たそれぞれの位置に関する複数の位置情報を取得する位置情報取得処理と、上記 複数の位置情報に基づいて、上記被検体内で経時的に撮像された位置を少なくとも 1次元の図式として表示させる位置情報表示処理と、上記複数の位置情報のうちの 少なくとも 1つを注目位置情報として指示する注目位置情報指示処理と、上記図式と して表示された上記複数の位置情報のうちで、上記注目位置情報として指示された 位置情報に関連づけられた画像情報を表示させる画像表示処理と、を上記コンビュ ータに実行させるように構成される。

[0024] この画像情報の表示処理プログラムは、例えば上記位置情報表示処理により上記 図式として表示された上記複数の位置情報のうちで、該図式中の上記注目位置情 報に対応する位置に所定のマークを表示させる位置マーク表示処理をさらに上記コ ンピュータに実行させるように構成される。

[0025] また、この画像情報の表示処理プログラムは、例えば上記複数の画像情報と上記 複数の位置情報とを保存する保存処理をさらに有し、上記画像表示処理は、上記注 目位置情報として指示された位置情報に関連づけられた画像情報を上記保存処理 力 読み出して上記表示処理に表示させることを上記コンピュータに実行させるよう に構成される。

[0026] 上記注目位置情報指示処理は、例えば上記位置情報表示処理によって上記図式 として表示された上記複数の位置情報の中から、該図式上で任意の位置情報を上 記注目位置情報として指定する指定位置入力処理を更に含んで構成される。

[0027] また、この画像情報の表示処理プログラムは、例えば上記複数の画像特報の中か ら所定の特徴部分を有する画像情報を抽出する特徴画像検出処理を更に有し、上 記注目位置情報指示処理は、上記特徴画像検出処理で抽出された上記所定の特 徴を有する画像情報に関連づ 、て 、る位置情報を上記注目位置情報として指示す ることを上記コンピュータに実行させるように構成される。

[0028] 本発明の更なる別の態様のひとつであるカプセル型内視鏡用画像フアイリング装 置は、所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像し て取得した連続画像データを処理するカプセル型内視鏡用画像フアイリング装置で あって、上記連続画像データを取得した上記被検体内の位置に関する 1つ以上の位 置情報から任意の 1つの位置を注目位置情報として取得する注目位置情報取得部 と、上記注目位置情報として指示された位置に対応する画像情報を上記連続画像 データから取得する画像情報取得部と、上記被検体内における 1つ以上の位置情報 を少なくとも 1次元以上の図式として表示する位置表示部と、上記画像情報取得部に よって取得された上記画像情報に対して所定の処理を施す画像情報処理部と、上 記位置表示部によって表示された上記図式上に注目位置情報取得部によって取得 された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表示変 化によって上記画像情報処理部による処理の進行度を告知する進拔情報表示部と 、を有して構成される _Q

[0029] 上記位置表示部は、例えば体内の身体管腔におけるカプセル型内視鏡の通過経 路を表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示する ように構成される。

[0030] また、上記進拔情報表示部は、例えば上記進行度を告知する表示を上記画像情 報処理部による処理結果と共に上記位置表示部による表示上に重畳表示するように 構成される。

このカプセル型内視鏡用画像ファイリング装置は、例えば上記画像情報処理部の 処理の進行と共に該画像情報処理部の処理に対応する画像情報を表示する画像情 報表示部を有して構成される。

[0031] この場合、上記画像情報表示部は、例えば上記画像情報処理部による処理結果を 、上記画像情報の表示に重畳した形で表示するように構成され、上記画像情報表示 部は、例えば上記画像情報を所定の時間間隔で更新表示するように構成される。

[0032] また、このカプセル型内視鏡用画像フアイリング装置は、例えば装置操作者からの 指示を受け付ける指示入力部を有し、上記画像情報処理部は、上記指示入力部に よる入力結果に基づ ヽて画像情報処理の制御を行うように構成される。

[0033] この場合、上記指示入力部からの入力結果に基づく上記画像情報処理部における 画像情報処理の制御は、例えば処理の終了であり、また、例えば処理の一時停止で あり、また、例えば処理の再開であり、また、例えば処理対象とする画像情報の変更 であるように構成される。

[0034] 上記のカプセル型内視鏡用画像フアイリング装置における処理内容は、本発明の 更なる別の態様のひとつであるカプセル型内視鏡用画像フアイリング処理方法となる ものであり、また、上記の処理を実行するプログラムが記録されている記録媒体は、 本発明の更なる別の態様のひとつである記録媒体となるものである。

図面の簡単な説明

[0035] [図 1]本発明に係わるカプセル型内視鏡画像ファイリングシステムの概略の構成を示 す図である。

[図 2A]カプセル型内視鏡撮像画像ファイリングシステムの表示画面に表示される被 検査者の身体管腔モデルの第一の例を示す図である。

[図 2B]本発明のカプセル型内視鏡画像ファイリングシステムにおけるワークステーシ ヨンのモニタ装置の同一表示画面上に表示される被検査者の被検体内モデルと画 像の第一の例を示す図である。

[図 2C]本発明のカプセル型内視鏡画像ファイリングシステムにおけるワークステーシ ヨンのモニタ装置の同一表示画面上に表示される被検査者の被検体内モデルと画 像の第二の例を示す図である。

[図 2D]本発明のカプセル型内視鏡画像ファイリングシステムにおけるワークステーシ ヨンのモニタ装置の同一表示画面上に表示される被検査者の被検体内モデルと画 像の第三の例を示す図である。

[図 3]第 1の実施形態における本発明に係わるカプセル型内視鏡画像フアイリングシ ステムの画像処理の動作を説明するフローチャートである。

[図 4A]第 2—第 5の実施の形態において本発明に係わるカプセル型内視鏡画像ファ ィリングシステムにおけるワークステーションのモニタ装置の同一表示画面上に表示 される被検査者の消化管内モデルと画像の第一の例を示す図である。

[図 4B]第 2—第 5の実施の形態において本発明に係わるカプセル型内視鏡画像ファ ィリングシステムにおけるワークステーションのモニタ装置の同一表示画面上に表示 される被検査者の消化管内モデルと画像の第二の例を示す図である。

[図 4C]第 2—第 5の実施の形態において本発明に係わるカプセル型内視鏡画像ファ ィリングシステムにおけるワークステーションのモニタ装置の同一表示画面上に表示 される被検査者の消化管内モデルと画像の第三の例を示す図である。

[図 4D]第 2—第 5の実施の形態において本発明に係わるカプセル型内視鏡画像ファ ィリングシステムにおけるワークステーションのモニタ装置の同一表示画面上に表示 される被検査者の消化管内モデルと画像の第四の例を示す図である。

[図 5]第 2の実施形態における本発明に係わるカプセル型内視鏡画像：

ステムの画像処理の動作を説明するフローチャートである。

[図 6]第 3の実施形態における本発明に係わるカプセル型内視鏡画像：

ステムの画像処理の動作を説明するフローチャートである。

[図 7]第 3の実施形態における画像処理の動作の他の例を説明するフローチャートで める。

[図 8]第 4の実施形態における本発明に係わるカプセル型内視鏡画像：

ステムの画像処理の動作を説明するフローチャートである。

[図 9]第 5の実施形態における本発明に係わるカプセル型内視鏡画像：

ステムの画像処理の動作を説明するフローチャートである。

[図 10A]カプセル型内視鏡撮像画像ファイリングシステムの表示画面に表示される被 検査者の身体管腔モデルの第二の例を示す図である。

[図 10B]本発明のカプセル型内視鏡画像ファイリングシステムにおけるワークステー シヨンのモニタ装置の同一表示画面上に表示される被検査者の被検体内モデルと画 像の第四の例を示す図である。

[図 10C]本発明のカプセル型内視鏡画像ファイリングシステムにおけるワークステー シヨンのモニタ装置の同一表示画面上に表示される被検査者の被検体内モデルと画 像の第五の例を示す図である。

[図 11]第 6の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリ ングシステムの画像処理の動作を説明するフローチャートである。

[図 12A]第 7—第 10の実施の形態において本発明に係わるカプセル型内視鏡撮像 画像ファイリングシステムにおけるワークステーションのモニタ装置の同一表示画面 上に表示される被検査者の身体管腔モデルと撮像画像の第一の例を示す図である

[図 12B]第 7—第 9の実施の形態において本発明に係わるカプセル型内視鏡撮像画 像ファイリングシステムにおけるワークステーションのモニタ装置の同一表示画面上 に表示される被検査者の身体管腔モデルと撮像画像の第二の例を示す図である。

[図 13]第 7の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリ ングシステムの画像処理の動作を説明するフローチャートである。

[図 14]第 8の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリ ングシステムの画像処理の動作を説明するフローチャートである。

[図 15]第 9の実施形態における本発明に係わるカプセル型内視鏡撮像画像ファイリ ングシステムの画像処理の動作を説明するフローチャートである。

発明を実施するための最良の形態

以下、本発明の実施の形態を、図面を参照しながら説明する。

なお、以下の説明で上記の被検体は例えば被検査者 4であり、上記の撮像装置は 例えばカプセル型内視鏡 3であり、上記の表示部は例えばモニタ装置 21であり、上 記の表示処理装置は例えばワークステーション 7であり、上記の画像情報は例えば 画像データであり、上記の画像情報取得部は例えばアンテナ 11であり、上記の位置 情報は例えば、通過軌跡 37や位置データであり、上記の位置情報取得部は例えば 通過軌跡 37を構築するための位置データを取得するアンテナ 11であり、上記の位 置情報表示部は例えばモニタ装置 21及びそれに表示される被検体モデル 27、通過 軌跡 37、位置マーク 39、第 2の位置マーク 44等であり、上記の注目位置情報は例え ば上記の位置情報の中の特定の位置情報であり、上記の注目位置情報指示部は例 えば位置マーク 39であり、上記の画像表示部、上記の位置マーク表示部は、例えば モニタ装置 21であり、上記の保存部は例えばデータベース 9であり、上記の図式は 例えば被検体内モデル 26であり、上記の指定位置入力部は例えば、キーボード 22 、マウス 23であり、そして、上記の特徴画像検出部は例えばワークステーション 7であ る。

[0037] また、本発明の実施の形態における以下の説明において、上記のカプセル型内視 鏡用画像フアイリング装置における被検体は例えば被検査者 4等カゝら成り、連続画像 データは例えばカプセル型内視鏡 3による撮像画像データ等力も成り、位置情報は 撮像画像データの撮像位置データから成る。 1次元以上の図式としてカプセル型内 視鏡 3の通過路 37として表示される。また、注目位置情報は、撮像画像データの撮 像位置データである位置情報の 1つである。注目位置情報取得部は例えばアンテナ 11、受信機 6等から成り、画像情報は例えば撮像画像データ等カゝら成り、画像情報 取得部は例えばアンテナ 11、受信機 6、ワークステーション 7等から成り、 1次元以上 の図式は例えば身体管腔モデル 26等力も成り、位置表示部は例えばモニタ装置 21 の表示画面 38等力 成り、画像情報処理部は例えばワークステーション 7の本体装 置 19等から成り、注目位置情報の位置は例えば位置マーク 39等から成り、処理の進 行度を告知する表示は例えば位置マーク 39、通過路 37等から成り、進拔情報表示 部は例えばモニタ装置 21の表示画面 38等力も成り、画像情報表示部は例えばモ- タ装置 21の表示画面 38の画像表示領域 41等から成り、処理結果は例えば特殊画 像 42,等から成り、処理に対応する画像情報は例えば特徴検出対象位置 45等から 成り、装置操作者は例えば医師、看護師等から成り、指示入力部は例えばワークス テーシヨン 7におけるモニタ装置 21の表示画面 38、キーボード 22、マウス 23等から 成る。また、画像情報処理の制御は例えば図 3、図 5— 9、図 11、図 13—図 15のフロ 一チャート等で示される処理である。

[0038] 図 1は、本発明に係わるカプセル型内視鏡システムとそれに含まれるカプセル型内 視鏡画像ファイリングシステムの概略の構成を示す図である。同図に示すように、本 例のカプセル型内視鏡システム 1は、パッケージ 2に収容されたカプセル型内視鏡 3 、パッケージ 2から取り出したカプセル型内視鏡 3を服用する患者すなわち被検査者 4、この被検査者 4に着用させるジャケット 5、ジャケット 5に着脱自在の受信機 6から 成る。

[0039] また、カプセル型内視鏡画像ファイリングシステム 20は、上記の受信機 6が受信し た画像データを保存、編集等の処理をするワークステーション 7、このワークステーシ ヨン 7にネットワーク 8を介して接続されているデータベース 9とで構成される。尚、デ ータベース 9はワークステーション 7に内蔵されるようにしても良い。

[0040] 上記のカプセル型内視鏡 3の内部には、撮像部と無線部と電源が設けられている。

このカプセル型内視鏡 3は、観察又は検査のために被検査者 4の口から飲み込まれ た後、身体から排出されるまでの期間中に、撮像部により食道、胃、小腸、大腸など の消化管内を順次経時的に撮像して得た画像データを無線部から外部に電波とし て無線発信する。

[0041] この被検査者 4に着用させるジャケット 5には、カプセル型内視鏡 3の無線部力も発 信される画像データの発信電波を捕捉する複数（図の例では 4個）のアンテナ 11 (11 a、 l lb、 l lc、 l id)が設けられている。これらのアンテナ 11は、受信機 6との間で無 線又は有線による通信ができるようになつている。なお、アンテナ 11の数は特に 4個 に限定されるものではなぐ適宜の数があればよい。要は、カプセル型内視鏡 3の移 動に伴う位置に応じた発信電波を良好に受信することができる配置数であれば良い

[0042] 受信機 6には、外部には、上記のジャケット 5からアンテナ 11を介して電波で画像 データを受信する場合に用いられるアンテナ 12、観察又は検査に必要な情報を表 示する表示部 13、及び観察又は検査に必要な情報を入力する入力部 14が設けら れている。

[0043] そして、受信機 6の下部には、携帯時にも電源を供給できるように電源部 15が設け られている。この電源部 15は、たとえば乾電池、 Li (リチウム)イオン二次電池、 Ni (二 ッケル)水素電池等で構成される（勿論他の形式の電池であっても良 ヽ)。 [0044] 更に受信機 6の内部には、観察又は検査に必要な処理を行う信号処理 ·制御部 16 が設けられ、更に受信された画像データを記憶するための CF (コンパクトフラッシュ（ 登録商標)）メモリ 17を図の両方向矢印 aで示すように着脱可能に装着する装着部 1 8が設けられている。

[0045] ワークステーション 7は、本体装置 19と、この本体装置 19に接続されたモニタ装置 2 1、キーボード 22、及びマウス 23等で構成されており、更に本体装置 19には、特に は図示しないが、上述したネットワーク 8に接続するためのインタフェースの他に各種 のインタフェースを備えており、これらのインタフェースを介して上述した受信機 6のほ 力に、プリンタ 24、 CFメモリリーダ/ライタ 25が接続されている。このワークステーショ ン 7は医師又は看護士力 Sカプセル型内視鏡 3により撮像された被検査者 4の消化管 内の画像をモニタ装置 21に表示させて診断等を行うための画像処理機能を有して いる。

[0046] 医師又は看護士は、ワークステーション 7のモニタ装置 21に表示されるマン'マシン インタフェースに対し、キーボード 22又はマウス 23を用いて入力操作を行いながら、 カプセル型内視鏡 3から発信され受信機 6によって受信された被検査者 4の身体管 腔内の画像データを受信機 6から取り込む指示を行うことができる。

[0047] この画像データの受信機 6からの取り込みでは、受信機 6から有線で直接取り込む こともでき、また、 CFメモリ 17を図の矢印 bで示すように CFメモリリーダ/ライタ 25に 装着して、この CFメモリ 17から画像データを取り込むようにすることもできる。

[0048] 更に、医師又は看護士は、上記のように受信機 6から取り込んだ撮像画面データを データベース 9へ格納する指示、データベース 9に格納された画像データを呼び出し てモニタ装置 21の表示画面上で後述する画像データに係わる画像表示を行う指示 、画像の観察に基づく診察結果などをデータベース 9へ記録する指示、プリンタ 24で カルテ等を印刷する指示などを行うことができる。

[0049] なお、ワークステーション 7は、ごく標準的な構成のコンピュータ、すなわち、制御プ ログラムを実行することで各構成要素を制御する中央演算装置 (CPU)と、 ROMや R AM及び磁気記憶装置など力 なり、 CPUに各構成要素を制御させる制御プロダラ ムの記憶や CPUが制御プログラムを実行する際のワークエリアあるいは各種データ の記憶領域として使用される記憶部と、ユーザによる操作に対応する各種のデータ が取得される入力部と、ディスプレイなどに各種のデータを提示してユーザに通知す る出力部と、他の機器とのデータ授受のためのインタフェース機能を提供する IZF部 とを備えるコンピュータでよい。後述する図 3、図 5— 9、図 11、図 13—図 15のフロー チャート等で示される処理をこのような標準的な構成のコンピュータに行わせるため には、各図にフローチャートで示した手順の処理をこのコンピュータに行わせる制御 プログラムを作成してコンピュータで読み取り可能な記録媒体 100に記録させ、その 制御プログラムを記録媒体 100からコンピュータの CPUに読み出させて実行させれ ばよい。

[0050] 記録させた制御プログラムをコンピュータで読み取ることの可能な記録媒体 100とし ては、例えば、コンピュータに内蔵若しくは外付けの付属装置として備えられる RAM 若しくは ROM又はハードディスク装置などのメモリ、あるいは FD (フレキシブルデイス ク）、 MO (光磁気ディスク）、 CD— ROM、 DVD— ROMなどといった可搬型記録媒体 等が利用できる。

[0051] また、記録媒体 100は、回線を介してコンピュータと接続される、プログラムサーバと して機能するコンピュータが備えている記憶装置であってもよい。この場合には、制 御プログラムを表現するデータ信号で搬送波を変調して得られる伝送信号を、プログ ラムサーバから伝送媒体である通信回線を通じて伝送するようにし、コンピュータで は受信した伝送信号を復調して制御プログラムを再生することで当該制御プログラム を実行できるようになる。

[0052] なお、本発明の実施の形態では、カプセル型内視鏡システム及びカプセル型内視 鏡画像ファイリングシステムに特ィ匕して説明する力 必ずしもこれに限るものではな!/ヽ ことは言うまでもない。

<第 1の実施の形態 >

図 2A、図 2B、図 2C、及び図 2Dは、第 1の実施の形態において本発明に係わる力 プセル型内視鏡画像ファイリングシステムにおけるワークステーション 7のモニタ装置 21の同一表示画面 38上に表示される被検査者 4の被検体内モデル 26と画像 42の 例を示す図であり、図 2Aは、モニタ装置 21の表示画面に表示される被検査者 4の被 検体内モデルを示す図、図 2B、図 2C、及び図 2Dは、その被検体内モデルと共にモ ユタ装置 21の同一表示画面上に表示される画像の例を示す図である。尚、図 2B、 図 2C、及び図 2Dには、図 2Aに示す被検体内モデルを説明の便宜上簡略に示して いる。

[0053] 図 2Aに示すように、被検査者 4の被検体内モデル 26として、被検査者 4の被検体 モデル 27と消化管モデル 28とが模式的な 2次元の図式として表示されている。消化 管モデル 28は、食道 31、胃 32、十二指腸 33、小腸 34、大腸 35、直腸 36等の消化 管が模式図に表示されている。そして、その消化管モデル 28内に、カプセル型内視 鏡 3が通過、撮像した位置に関する位置情報として通過軌跡 37が表示されている。 ここで、上記の図式は 2次元に限るものではない。

[0054] また、図 2B、図 2C、及び図 2Dに示すように、モニタ装置 21の表示画面 38には、 その同一画面上において、左側に上述した被検体内モデル 26が表示され、その力 プセル型内視鏡 3の通過軌跡 37上に、披検体内における撮像位置に相当する位置 を示すための所定のマークとして位置マーク 39が重畳表示されている。そして、被検 体内モデル 26が表示されている右側の画像表示領域 41には、位置マーク 39に対 応する又は詳しくは後述する処理に対応する通過軌跡 37上の位置に相当する被検 体内の位置で撮像された画像 42が表示されている。

[0055] 図 2Cは、位置マーク 39をポインティングしている指定位置入力部としてのマウス 23 の操作によるポインティング矢印 43が表示されている例を示し、図 2Dは、同じくマウ ス 23の操作による区間を指定する最初と次の 2つのポインティング矢印 43 (43-1、 4 3-2)が表示されて!、る例を示して!/、る。

[0056] 続、て上記のカプセル型内視鏡画像ファイリングシステムにおける画像処理につ いての第 1の実施形態における処理動作を説明する。

図 3は、第 1の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理は、医師又は看護士による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づ!/、て、本体装置 19に内蔵されて!ヽ る制御装置（以下、単に CPUという）によって行われる処理である。

[0057] また、この処理に先立って次のような作業が行われている。すなわち、被検査者 4に よりカプセル型内視鏡 3がパッケージ 2から取り出され、カプセル型内視鏡 3に内蔵の 電源のスィッチがオンになる。そして、このカプセル型内視鏡 3が被検査者 4に飲み 込まれてから消化管の蠕動運動によって移動し、体外に排出されるまでの間に、カブ セル型内視鏡 3の撮像部により被検査者 4の消化管内が連続的に撮像され、経時的 に連続した複数の画像データが得られる。

[0058] この撮像された画像データが電波信号に載せてカプセル型内視鏡 3の無線部から 発信され、この信号がジャケット 5のアンテナ 11 (1 la、 l ib, l lc、 l id)により受信さ れる。この受信信号は受信機 6に転送される。

[0059] 受信機 6では、各アンテナ 11からの受信を所定時間間隔で順次巡回して切り替え ながら、各アンテナ 11での受信信号の信号強度と信号内容 (画像データ)とを 1組と して 1フレーム分の信号を順次生成する。つまり 1枚の画像データに対してアンテナ 力 つの場合 4フレーム分の信号が生成される。この生成された 4フレーム分の信号 は、順次 CFメモリ 17に格納される。この受信機 6側での処理は、カプセル型内視鏡 3 による撮像期間の間、 1回の撮像ごとに繰り返される。

[0060] 図 3において、 CPUは、先ず、画像データと位置データを読み込む（Sl)。

この処理では、 CPUは、受信機 6から有線で直接に、又は受信機 6から取り出され て CFメモリリーダ/ライタ 25に装着された CFメモリ 17から、 CFメモリ 17に記録され ている信号を 4フレーム分毎に読み出す。そして、これら 4フレーム分の受信信号から 画像データを読み出し、更に各アンテナにおける信号強度から上記画像データを含 む電波の発信位置を算出して、この算出した撮像位置に関する位置データを取得す る。ここで、発信位置を算出せずに、最も受信信号の信号強度が高かったアンテナを 位置データとみなしてもよ!/、。

[0061] 続、て、 CPUは、上記のように取得した画像データと位置データとを関連付けて保 存する（S2)。

この処理は、相互に関連する画像データと位置データを 1組としたレコードとして、 データベース 9に登録する処理である。

[0062] 次に、 CPUは、位置情報を表示する（S3)。

この処理は、ワークステーション 7のモニタ装置 21の表示画面上に、図 2A、図 2B、 図 2C、及び図 2Dに示したような被検体内モデル 26の消化管モデル 28上に、処理 S 1で得た位置データから、被検体内にお!ヽてカプセル型内視鏡 3が通過した被検 体内の位置に対応する位置情報、即ち通過軌跡 37を表示する処理である。つまり、 位置情報の経時的変化力 被検体内モデル 26におけるカプセル型内視鏡 3の通過 軌跡 37を指している。

[0063] 上記に続!、て、 CPUは、注目位置情報を表示する（S4)。

この処理は、上記モニタ装置 21の表示画面上の位置情報上に、つまり通過軌跡 3 7の表示の上に重畳させて医師又は看護士による診断時に注目すべき部位である 旨、即ち注目位置情報である旨を表す位置マーク 39 (図 2B、図 2C、及び図 2D参照 )を表示する処理である。なお、この処理の初期設定では、この位置マーク 39はカプ セル型内視鏡 3が撮像を開始して以降最初に撮像した時点の位置情報を示す通過 軌跡 37の表示上の位置に位置マーク 39が表示されるようになって!/、る。

[0064] 続 、て CPUは、注目位置情報に対応する画像を表示する（S5)。

この処理では、 CPUは、上記の注目位置情報として指定された通過軌跡 37上の 位置での位置情報に対応する位置データと一組となって 、る画像データも 1レコード 内のデータとしてデータベース 9から読み出しており、この 1レコードのデータに基づ いて、例えば図 2Bに示したように、位置マーク 39を表示させた通過軌跡 37上の位 置に対応した画像データから得た画像 42を表示画面 38の右側の画像表示領域 41 に表示する。

[0065] 続 、て CPUは、新たな注目位置が指定されて 、る力否かを判別する（S6)。

この処理は、表示中の被検体内モデル 26上に表示された通過軌跡 37上において 、医師又は看護士によりワークステーション 7のマウス 23が操作されて、図 2Cに示し たように、ポインティング矢印 43によって、診断等に際して注目すべき所望の位置の 指定がなされているか否かを判別する処理である。

[0066] そして、ポインティング矢印 43による位置の指定がなされていれば（S6が Yes)、処 理 S4に戻って、処理 S4の処理を実行する。すなわち、ポインティング矢印 43によつ て注目すべき位置の指定がなされて!/、る通過軌跡 37上の位置に、注目位置情報と して指示されたことを示す位置マーク 39を重畳表示する。 [0067] この処理では、 CPUは、データベース 9を検索し、ポインティング矢印 43によって 注目位置の指定がなされて!/、る通過軌跡 37上の位置に対応する位置データを有す るレコードをデータベース 9から読み出して、その注目位置情報が示す通過軌跡 37 上の位置つまりポインティング矢印 43によって指定されている通過軌跡 37上の位置 に、図 2Cに示したように位置マーク 39を重畳表示する。

[0068] そして、その後に続く処理 S5及び S6の処理を繰り返す。

また、上記の処理 S6で、ポインティング矢印 43による位置の指定がなされていない ときは（S6が No)、続いて当該アプリケーションが終了しているか否かを判別し（S7) 、当該アプリケーションが終了していれば（S7が Yes)、処理を終了する力 当該ァプ リケーシヨンが終了していないときは（S7が No)、処理 S6に戻って処理 S6の判別処 理を繰り返す。

[0069] 尚、上記の医師又は看護士による位置を指定する処理では、例えば医師又は看護 士がポインティング矢印 43で通過軌跡 37上の任意の位置を指示してマウス 23を左 クリックすることで位置マーク 39が通過軌跡 37上に表示される。

[0070] この通過軌跡 37上に表示さ; ^立置マーク 39に対して、対応する画像を直ちに自 動的に表示する力、又は再度マウス 23を左クリックすることによって表示するようにす るかは、いずれの方法で行うかを、処理開始前に予め処理モードを設定しておけば よい。

[0071] また、上記の当該アプリケーションの終了をする処理は、例えば、表示画面 38上に 図示しないメニュー項目を用意し、このメニュー項目中の「終了」項目をマウス 23によ り選択することにより実行される。

[0072] これにより、ワークステーション 7のモニタ装置 21に向かって表示画面をみながら医 師又は看護士力 マウス 23の操作によってポインティング矢印 43を動力しながら被 検体内モデル 26の通過軌跡 37上の所望する任意の位置を指定すると、その指定さ れた位置に位置マーク 39が重畳表示されるとともに、その位置に対応する画像が同 一表示画面上の左側領域に表示される。

<第 2—第 5の実施の形態 >

図 4A、図 4B、図 4C、及び図 4Dは、第 2—第 5の実施の形態において本発明に係 わるカプセル型内視鏡画像ファイリングシステムにおけるワークステーション 7のモ- タ装置 21の同一表示画面 38上に表示される被検査者 4の被検体内モデル 26と画 像 42の例を示す図である。

[0073] 図 4Aは、医師又は看護士によって指定された或る症状を示す所定の特徴部分 (例 えば出血部位やポリープ等を示す部分)を有する画像である特殊画像があれば、そ の特殊画像を表示するように指示入力されたことによって、その所定の特徴部分を有 する特殊画像をなす画像データがデータベース 9上で検索されて抽出され、その抽 出された画像データが撮像された被検体内の位置に対応する通過軌跡 37の表示上 の位置に、所定の特徴部分を有する画像データに関連付けられた位置データを示 す旨の画像処理結果として第 2の位置マーク 44が表示されている例を示している。

[0074] 尚、右側の画像表示領域 41に表示されて ヽる画像 42は、最初の画像がそのまま 表示されて!ヽるものである。

また、この第 2の位置マーク 44の表示は、図 4Aでは 1箇所にしか表示していないが 、実際の表示では、上記検索によって抽出された全ての画像データについて、その 画像が撮像された通過軌跡 37上の位置に第 2の位置マーク 44が表示される。

[0075] 次に、図 4Bは、上記通過軌跡 37上に表示されている指定された特殊画像を含む 全ての画像データの第 2の位置マーク 44の中力 或る位置の第 2の位置マーク 44が ポインティング矢印 43によって指定され、その指定された第 2の位置マーク 44が表示 されている位置 (通過軌跡 37の表示上の位置、以下同様）に対応する画像データに 基づく画像 42が、右側の画像表示領域 41に表示されて 、る例を示して 、る。

[0076] なお、図 4Bも第 2の位置マーク 44の表示を 1箇所のみに表示している力 必ずしも 1箇所のみに限られるものでないことは言うまでもない。

また、図 4Cは、上記指定された第 2の位置マーク 44に対応して右側の画像表示領 域 41に表示された画像 42に重畳して、この画像 42がデータベース 9から抽出された 要因となった特徴部分 45が表示されて 、る例を示して 、る。

[0077] そして、図 4Dは、上記全ての第 2の位置マーク 44が表示されて!、る中から、任意 の区間を指定する最初と次の 2つのポインティング矢印 43 (43-1、 43-2)が表示さ れている例（区間モードと呼ぶ）を示している。ここで区間とは、通過軌跡 37の表示上 の異なる 2つの位置それぞれに対応した位置情報間を指すものである。

[0078] この場合も、図 4A、図 4B、図 4C、及び図 4Dのモニタ装置 21の表示画面 38の表 示には、特には図示しないが、タスクバーに表示されているメニューボタンからブルダ ゥン表示されるメニューの中に、「次へ」、「戻る」、「区間指定」、「終了」などのタスクメ ニューが表示されている。勿論、メニュー表示に限ることなぐ表示画面内の適宜に 表示領域に常に表示される「次へ」、「戻る」、「区間指定」、「終了」ボタンとしてもよい

[0079] 続いて、このカプセル型内視鏡画像ファイリングシステムにおける画像処理につい ての第 2の実施形態における処理動作を説明する。

図 5は、第 2の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理も、医師又は看護士による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 1の実施形態におい て述べたような作業が行われて 、る。

[0080] 図 5において、処理 S1— S3、 S4、 S5の処理は、第 1の実施形態において図 3のフ ローチャートで説明した処理 S1— S3、 S4、 S5の処理とそれぞれ同一である。本例 では、処理 S3と処理 S4の間で、処理 S31の処理が行われる。

[0081] すなわち、位置情報の表示（S3)の処理に続いて、この処理に先立って予め医師 又は看護士が特殊画像をなす画像データの抽出の指定を行う。この指定の入力に 基づいて、例えば図 4Aに示したような第 2の位置マーク 44が通過軌跡 37上に順次 表示される（S31)。

[0082] 続、て、注目位置情報の表示（S4)と注目位置情報に対応する画像表示（S5)に 続いて、本例では、区間モードが指示されているか否かが判別される（S21)。

この区間モードが指示されている力否かの判別処理では、例えば、医師又は看護 士が各モデルを表示するための表示領域 46上の通過軌跡 37の表示以外の位置を ポインティング矢印 43で指示してマウス 23を左クリックすることで区間モードの設定を 指示することができる。上記の判別処理は、このような所定の位置でのマウス 23の左 クリック操作が行われている力否かを判別する処理である。ここで区間モードとは、任 意の区間に含まれる位置情報の全てを注目位置情報であるとみなすモードである。

[0083] そして、区間モードの設定の指示が入力されていれば（S21が YES)、続いて、 CP Uは、被検体内モデル 26の第 1の位置が指定されるまで待機する（S22、及び判別 が NO)。

[0084] この処理は、例えば図 4Dに示した区間を指定する最初のポインティング矢印 43— 1のように、被検体内モデル 26の通過軌跡 37の表示上において区間を指定する最 初の位置がポインティング矢印 43によって指定されているか否かを判別し、指定され ていなければ指定されるまで判別を繰り返す処理である。

[0085] そして、最初の位置が指定されたときは（S22が YES)、 CPUは、指定された被検 体内モデル 26の第 1の位置の情報を内蔵のメモリの所定の記憶領域に記憶して、次 に、被検体内モデル 26上の第 2の位置が指定されるまで待機する（S23、及び判別 が NO)。

[0086] この処理は、例えば図 2Dに示した区間を指定する 2つ目のポインティング矢印 43 —2のように、被検体内モデル 26の通過軌跡 37の表示上において区間を指定する 2 つ目の位置として被検体内モデル 26上の第 2の位置がポインティング矢印 43によつ て指定されて ヽるカゝ否かを判別、指定されて ヽなければ指定されるまで判別を繰り返 す処理である。

[0087] そして、被検体内モデル 26上の第 2の位置が 2つ目の位置が指定されたときは（S 23力 SYES)、 CPUは、指定された被検体内モデル 26上の第 2の位置の情報を内蔵 のメモリの他の所定の記憶領域に記憶した後、上述した処理 31に続く処理 S4及び S 5と同一の処理 S4及び S5を行って、次に、指定区間が終了しているか否かを判別す る（S24)。

[0088] この処理は、上記内蔵のメモリの他の所定の記憶領域に記憶した指定された被検 体内モデル 26上の第 2の位置の情報に対応する位置まで、上記の処理 S4及び S5 の処理が行われた力否かを判別する処理である。

[0089] そして、指定区間が終了していないときは（S24が NO)、更に続いて処理中断が指 示されて!/ヽる力否かを判別する（S25)。

この処理は、例えば医師又は看護士がモデル表示領域 46上の通過軌跡 37の表 示以外の位置をポインティング矢印 43で指示してマウス 23を右クリックすることで処 理の中断が指示される。上記の判別処理は、このような位置でのマウス 23の右クリツ ク操作が行われているカゝ否かを判別する処理である。

[0090] そして、処理の中断が指示されていなければ（S25が NO)、処理 S4に戻って、処 理 S4、 S5、 S24、 S25を繰り返す。

他方、処理の中断が指示されていれば（S25が YES)、区間モードをぬける処理を 行って（S26)、処理 S7の処理に移行する。

[0091] 上記の処理 S26の処理は、上記内蔵のメモリの所定の記憶領域及び他の所定の 記憶領域に記憶した指定された被検体内モデル 26上の第 1の位置及び第 2の位置 の情報を消去して区間モードの設定を解除する処理である。

[0092] また、上記の処理 S24の判別処理で指定区間が終了しているときは（S24が YES)

、直ちに上記の処理 S26の処理に移行する。

また、処理 S21の区間モード判別処理で、区間モードの設定が指示されていないと きは（S21が NO)、 CPUは、続いて図 3に示した処理 S6と同様の処理 S6の判別処 理を行う。そして、この場合も、位置の指定がなされていれば（S6が YES)、処理 S4 に戻って、処理 S4以降の処理を実行する。

[0093] 他方、処理 S6の判別処理で位置の指定がなされていないときは（S6が NO)、図 3 に示した処理 S7と同様の処理 S7の当該アプリケーションの終了判別処理に移る。そ して、アプリケーションの終了が指示されていなときは処理 S21に戻って、処理 S21 以降の処理を行い、アプリケーションの終了が指示されているときは、当該アプリケー シヨンを終了する。

[0094] これにより、ワークステーション 7のモニタ装置 21に向かって表示画面をみながら医 師又は看護士力 マウス 23の操作によってポインティング矢印 43を動力しながら被 検体内モデル 26の通過軌跡 37上の任意の 2つの位置を指定すると、処理の中断を 指示しない限り、その指定された 2つの位置で示される区間の最初力 最終まで、画 像が撮像された位置に順次位置マーク 39が重畳表示され、その位置に対応する画 像が同一表示画面上の左側領域に表示される。

[0095] また、このとき、画像表示領域 41には、画像 42として特徴部分 45を伴った特殊画 像を確認することができる。

図 6は、第 3の実施形態における本発明に係わるカプセル型内視鏡画像フアイリン グシステムの画像処理の動作を説明するフローチャートである。尚、この画像処理も、 医師又は看護士による図 1に示したワークステーション 7のキーボード 22又はマウス 2 3からの指示入力に基づいて、本体装置 19の CPUによって行われる処理である。ま た、この場合もこの処理に先立って第 1の実施形態において述べたような作業が行わ れている。

[0096] 図 6において、処理 S1— S3及び処理 S4— S7までの処理は、第 1の実施形態にお いて図 3のフローチャートで説明した処理 S1— S7の処理とそれぞれ同一である。本 例では、図 3のフローチャートの処理 S3と処理 S4の処理の間で、図 5に示したと同様 の処理 S31の処理が行われる。

[0097] すなわち、位置情報の表示（S3)の処理に続いて、この処理に先立って予め医師 又は看護士によって、特徴部分を有する画像である特殊画像をなす画像データの抽 出が指定されたことに基づいて、例えば図 4A、図 4B、図 4C、及び図 4Dに示したよ うな第 2の位置マーク 44が通過軌跡 37上に順次表示される（S31)。

[0098] これにより、表示画面を操作中の医師又は看護士は、位置マーク 39を順次指定し て画像表示領域 41に表示される画像 42を変化させながら、第 2の位置マーク 44の 前後の位置マーク 39を指定して、第 2の位置マーク 44の前後の位置の画像 42を観 察することができる。

[0099] 図 7は、第 3の実施形態における画像処理の動作の他の例を説明するフローチヤ ートである。この処理では、図 6に示す処理 S6の処理に代わって処理 S32、 S33の 処理が行われる。

[0100] すなわち、初回の注目位置情報の表示 (S4)と注目位置情報に対応する画像表示

(S5)に続いて、注目位置情報の第 1の位置の指定が行われているか否かが判別さ れる（S32)。

[0101] この処理は、医師又は看護士によるマウス 23の操作で事前に「区間指定」メニュー 又は「区間指定」ボタンが入力操作されたことに対応して、続くマウス 23の操作で、被 検体内モデル 26の通過軌跡 37の表示上のいずれかの位置が上記の区間指定にお ける最初に注目すべき位置、即ち第 1の位置として指定されている力否かを判別する 処理である。

[0102] そして、区間の最初に注目すべき位置である第 1の位置が指定されていなときは（S 32力 、処理 S7の半 IJ另 IJで処理 S4に戻って処理 S4、 S5、 S32の処理を繰り返す

[0103] そして、区間の最初に注目すべき位置である第 1の位置が指定されたときは（S32 が YES)、次に、 CPUは、注目位置情報の第 2の位置が指定されているか否かを判 別する（S33)。

[0104] この処理も、例えば図 2Dに示した区間を指定する 2つ目のポインティング矢印 43— 2のように、被検体内モデル 26の通過軌跡 37の表示上において区間の最後を指定 する 2つ目の位置がポインティング矢印 43によって指定されている力否かを判別する 処理である。

[0105] そして、区間の最終位置である注目位置情報の第 2の位置が指定されて 、な 、とき は（S33が NO)、指定されるまで待機して、注目位置情報の第 2の位置が指定された ときは（S33が YES)、処理 S4に戻って、第 1の位置として指定されている最初の位 置に位置マーク 39の表示（注目位置情報表示）を行って、更に処理 S5で、上記通過 軌跡 37の表示上の指定区間の最初の位置に対応した画像データによる画像 42の 表示を行ったのち、処理 S32、 S33の判別によって指定された区間内であるかを判 断し、区間内であれば順次処理 S4に戻って、処理 S4及び処理 S5によって、位置マ ーク 39の表示と画像 42の表示を行う。

[0106] 尚、最初に処理 S4に戻ったとき、指定区間内の全ての位置マーク 39を表示し、処 理 S5では、それら全ての位置マーク 39に対応する画像 42を一定時間間隔で順次 表示する又はポインティング矢印 43による指定に応じて、その指定された位置マーク 39に対応する位置の画像 42を表示するようにしても良 、。

[0107] これ〖こより、医師又は看護士は、被検体内モデル 26の通過軌跡 37の表示上の所 望の任意の区間内の目的とする特徴部分を有する特殊画像の存在位置を知ること ができ、その特殊画像も含めてその前後の画像を任意の区間内で観察することがで きる。 [0108] 続いて、このカプセル型内視鏡画像ファイリングシステムにおける画像処理につい ての第 4の実施形態における処理動作を説明する。

図 8は、第 4の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理も、医師又は看護士による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 1の実施形態におい て述べたような作業が行われて 、る。

[0109] 図 8【こお!ヽて、処理 S1一 S3、 S31、 S4、 S5、 S6、 S7の処理 ίま、第 3の実施形態【こ おいて図 6のフローチャートで説明した処理 S1— S3、 S31、 S4— S7の処理とそれ ぞれ同一である。本例では、図 6のフローチャートの処理 S5と処理 S6の処理の間で 、処理 S41、 S42の処理力行われる。

[0110] すなわち、初回の注目位置情報の表示 (S4)の段階で、処理 S31で表示された第 2の位置マーク 44の全ての表示と、処理 S4における位置マーク 39の表示と力 被検 体内モデル 26の通過軌跡 37の表示上に重畳して表示されており、処理 S5で、上記 の位置マーク 39に対応する画像 42が右側の画像表示領域 41に表示される。

[0111] ここで、 CPUは、位置マーク 39の表示位置が被検体内モデル 26上の第 2のマーク の表示位置と一致するか否かを判別する（S41)。

この処理は、上記の位置マーク 39を表示すべき表示位置が、処理 S31においてモ デル上に表示されている第 2の位置マーク 44 (図 4A及び図 4Bで説明したように第 2 の位置マーク 44の表示は図のように 1箇所のみでなく通常は複数の場合が予想され 実際の表示ではそれら複数の全ての第 2の位置マーク 44が通過軌跡 37の表示上に 表示されている）の中のいずれかの表示位置に重畳するか否かを判別する処理であ る。

[0112] そして、第 2の位置マーク 44の表示位置と重畳していなければ（S41が NO)、処理 S6の処理に移る力 V、ずれかの第 2の位置マーク 44の表示位置に重畳して!/、れば（ S41が YES)、特徴部分を有する画像 42の表示を行ってから（S42)、処理 S6の処 理に移る。

[0113] 上記の処理 42では、位置マーク 39の表示位置と重畳する第 2の位置マーク 44が 示す位置の画像 42が、例えば図 4Bに示したように、画像表示領域 41に表示される 。そして、更に図 4Cに示したように、上記表示された画像 42に重畳して、この画像 4 2がデータベース 9から抽出された要因となった特徴部分 45が表示される。

[0114] 続く、処理 S6及び S7の処理は、図 3、図 5、及び図 6の場合と同様である。

これ〖こより、医師又は看護士は、通過軌跡 37の表示上に全て表示されている特殊 画像の撮像位置を示す第 2の位置マーク 44の中力 任意の位置の第 2の位置マー ク 44を指定して、特殊画像全体（図 4Bの画像 42)及び特殊状態となって!/ヽる位置（ 図 4Cの特徴部分 45)を迅速に知って観察することができる。

[0115] 続いて、このカプセル型内視鏡画像ファイリングシステムにおける画像処理につい ての第 5の実施形態における処理動作を説明する。

図 9は、第 5の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理も、医師又は看護士による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 1の実施形態におい て述べたような作業が行われて 、る。

[0116] 図 9【こお!ヽて、処理 S1一 S3、 S31、 S4、 S5、 S41、 S42、 S6, S7の処理 ίま、第 4 の実施形態において図 8のフローチャートで説明した処理 SI— S3、 S31、 S4、 S5、 S41, S42、 S6、 S7の処理とそれぞれ同一である。本 f列では、図 8の場合と異なり、 処理 S6の直前に、処理 S21— S26 (途中に処理 S4、 S5、 S41、 S42力 S含まれる）ま での処理が行われる。

[0117] そして、この処理 S21— S26の処理おいて、処理の順に説明すれば、処理 S21— S23、 S4、 S5の処理は、図 5に示した処理 S21— S23、 S4、 S5の処理と同一であり 、続く処理 S41、 S42の処理は図 8に示した処理 S41、 S42の処理と同一であり、更 に続く処理 S24、 S25, S26の処理は、図 5に示した処理 S24、 S25, S26の処理と 同一である。

[0118] これにより、医師又は看護士は、症状に応じて知られている病変の状態 (例えば出 血部位の状態やポリープの状態など）を指定し、且つ被検体内モデル 26の通過軌 跡 37の表示上の所望の任意の区間を指定して、その区間内における第 2の位置マ ーク 44の位置に対応する画像である特殊画像をなす画像 42を表示させ、その画像 上の特殊状態となって ヽる特徴部分 45を観察し、症状の広がり具合や症状の軽重 の度合 、等を迅速に判断することができる。

[0119] このように、本発明のカプセル型内視鏡画像ファイリングシステムによる画像処理装 置及び画像処理方法によれば、画像とその撮像位置とを関連付けながら同一表示 画面上で画像と撮像位置の両方を観察でき、更に、マウスによる簡単な操作で所望 の任意の位置の画像を迅速に観察することができる。

[0120] 更に、気掛力りな症状については、予め知られているその症状に特有の消化管内 の観察上の色の状態を予め用意してある色情報等で指定して、その色の状態に同 一又は近似の状態となって ヽる画像のみを検出して、その画像と撮像位置とを観察 できるので、正確かつ迅速な判断を下すことができるようになる。

[0121] 尚、上述した例では、位置情報としてのカプセル型内視鏡 3の通過軌跡 37の表示 を、実際の消化管の形状に合わせて 3次元的に表示しているが（図では 2次元に見 えるが実際の表示画面上では消化管の形状に合わせて 3次元表示となっている）、こ れに限ることなぐ位置情報としては、平面的に 2次元で表示しても良ぐまた例えば 1 次元つまり直線で表現してもよい。 1次元の場合はその直線上に、図 2Aに示した食 道 31、胃 32、十二指腸 33、小腸 34、大腸 35、直腸 36等に対応する区間を設けて、 位置の表示を行えば良い。

<第 6の実施の形態 >

図 10A、図 10B、及び図 IOCは、は、第 6の実施の形態において本発明に係わる カプセル型内視鏡撮像画像ファイリングシステムにおけるワークステーション 7のモ- タ装置 21の同一表示画面 38上に表示される被検査者 4の身体管腔モデル 26と撮 像画像 42の例を示す図であり、図 10Aは、図 2Aと同様の、モニタ装置 21の表示画 面に表示される被検査者 4の身体管腔モデルを示す図、図 10B及び図 10Cは、その 身体管腔モデルと共にモニタ装置 21の同一表示画面上に表示される撮像画像の例 を示す図である。尚、図 10B及び図 10Cには、図 10Aに示す身体管腔モデルを説 明の便宜上簡略に示している。

[0122] なお、図 10A、図 10B、及び図 IOCにおいては、図 2A、図 2B、図 2C、及び図 2D に付したものと同一の符号を用いて 、る。

図 10Aに示すように、被検査者 4の身体管腔モデル 26は、被検査者 4の身体の輪 β27と身体管腔の輪郭 28が 2次元の図式として表示されている。身体管腔の輪郭 2

8は、食道 31、胃 32、十二指腸 33、小腸 34、大腸 35、直腸 36等の輪郭が表示され ている。そして、その身体管腔の輪郭 28内に、カプセル型内視鏡 3の通過路 37が表 示されている。

[0123] また、図 10Bに示すように、モニタ装置 21の表示画面 38には、その同一画面上に おいて、左側に上述した身体管腔モデル 26が表示され、そのカプセル型内視鏡 3の 通過路 37上に、撮像位置を示す位置情報の中の 1つである注目位置情報としての 位置マーク 39が重畳表示されている。そして、身体管腔モデル 26が表示されている 右側の画像表示領域 41には、位置マーク 39に対応する通過路 37上で撮像された 撮像画像 42が表示されて 、る。

[0124] 図 10Cは、位置マーク 39をポインティングしているマウス 23の操作によるポインティ ング矢印 43が表示されて 、る例を示して 、る。

、て上記のカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理 についての第 6の実施形態における処理を説明する。

[0125] 図 11は、第 6の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理は、医師又は看護師による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づ!/、て、本体装置 19に内蔵されて!ヽ る制御装置（以下、単に CPUという）によって行われる処理である。

[0126] また、この処理に先立って次のような作業が行われている。すなわち、被検査者 4に よりカプセル型内視鏡 3がパッケージ 2から取り出され、カプセル型内視鏡 3に内蔵の 電源のスィッチがオンになり、このカプセル型内視鏡 3が被検査者 4に飲み込まれて から自動移動を行って体外に排出されるまでの間に、カプセル型内視鏡 3の撮像部 により被検査者 4の身体管腔内の状態が連続的に撮像される。

[0127] この撮像された映像 (画像)データが電波信号 (映像信号)としてカプセル型内視鏡 3の無線咅^ ^ら発信され、この発信力 Sジャゲッ卜 5のアンテナ 11 (1 la、 l ib, l lc、 11 d、 l ie)により受信される。この受信信号は受信機 6に転送される。 [0128] 受信機 6では、各アンテナ 11からの受信を順次巡回して切り替えながら、映像信号 の電波強度と映像信号の信号内容 (撮像画像データ）とを 1組として 1フレームの信 号を順次生成する。つまり 1枚の撮像画像データに対して 5フレームの信号が生成さ れる。この生成された 5フレームの信号は順次 CFメモリ 17に格納される。この受信機 6側での処理は、カプセル型内視鏡 3による連続的撮像の期間中、 1回の撮像ごとに 繰り返される。

[0129] 図 11において、 CPUは、先ず、画像データと位置データを読み込んで、その読み 込んだ撮像画像データと位置データとを関連付けて保存する (S101)。

この処理では、 CPUは、受信機 6から有線で直接に、又は受信機 6から取り出され て CFメモリリーダ/ライタ 25に装着された CFメモリ 17から、 CFメモリ 17に記録され て 、る受信データを 5フレーム毎に読み出す。

[0130] そして、これら 5フレームの受信データ力 例えば最も強い電波を受信した (力プセ ル型内視鏡 3に最も近接した)アンテナ 11の受信データから撮像画像データを読み 出し、更に各アンテナに対応する 5種類の電波強度から上記撮像画像データに対応 する映像信号の発信位置を算出して、この算出した発信位置 (映像撮像位置)デー タを注目位置情報として取得する。

[0131] そして、この取得した相互に関連する撮像画像データと注目位置情報とを 1組とし たレコードを生成し、このレコードをデータベース 9に登録する。

次に、 CPUは、図式化した位置情報を表示する（S 102)。

[0132] この処理は、ワークステーション 7のモニタ装置 21の表示画面上に、図 10A、図 10 B、及び図 IOCに示したような身体管腔モデル 26を表示する処理である。尚、上記 の図式ィ匕した位置情報は、身体管腔モデル 26におけるカプセル型内視鏡 3の通過 路 37のことを指している。

[0133] 上記に続いて、 CPUは、特定の色を持つ画像を検出する（S 103)。

この処理は、上記データベース 9を順次検索していく過程で、予め医師又は看護師 によって指定されている特定の色を持つ画像データを検出したときは、その検出した 画像データの注目位置情報を記憶する処理である。これにより、本アプリケーション の終了後に、必要に応じて、上記特定画像に対する各種の一括処理を行うことがで きる。

[0134] 上記特定の色とは、身体管腔内における例えば出血の色である。また、出血は疾 患部に発生する現象であり、一般に出血中または出血直後の血の色は、極めて鮮明 な赤色である。従って、予め医師又は看護師から血の色に対応する色情報を指定さ れることによって、 CPUは、その指定された色情報と対比することによって容易に出 血部 (疾患部）を有する撮像画像を検出することができる。

[0135] 続、て CPUは、上記画像処理 (特定画像の検出処理)の進行度のモデル (身体管 腔モデル 26)への重畳表示を行う（S104)。

この処理は、上記モニタ装置 21の表示画面上の位置情報上に、つまり通過路 37 の表示の上に重畳させて位置マーク 39 (図 10B及び図 10C参照）を表示する処理 である。この位置マーク 39は、上記疾患部を有する撮像画像を検出するために現在 処理中の撮像画像が撮影された身体管腔モデル 26の位置を示している。

[0136] 次に、 CPUは、マウス 23の左ボタンがクリックされたか否かを判別する（S105)。こ の処理では、マウス 23の左ボタンがクリックされていれば（S 105が Yes)、これは本例 では処理の一時停止を指示されていることを表しているので、 CPUは、上記の処理 を一時停止して、マウス 23の左ボタンが再度クリックされるまで待機する（S106、判 別が No)。

[0137] そして、マウス 23の左ボタンが再度クリックされたならば（S 106が Yes)、続いて全 ての画像処理が終了した力否かを判別する（S107)。

また、 CPUは、上記処理 S 105の判別処理で、マウス 23の左ボタンがクリックされて いないときは（S105が No)、直ちに上記の処理 S107の処理に移行する。

[0138] 上記の処理 S107の処理は、カプセル型内視鏡 3が被検査者 4に飲み込まれてか ら自動移動を行って体外に排出されるまでの間に、カプセル型内視鏡 3の撮像部に より連続的に撮像され、データベース 9に格納されている被検査者 4の身体管腔の全 ての撮像画像についての上記の検索処理が終了した力否かを判別する処理である

[0139] そして、未だ全て終了していなければ（S107が No)、処理 S103に戻って処理 S1 03— S107を繰り返す。これにより、上記の処理が進行するにつれて、処理 S104〖こ おいて現在処理位置を示す位置マーク 39が身体管腔の通過路 37の表示の上を順 次移動しながら通過路 37の表示上に重畳表示されて 、く。

[0140] そして、全ての撮像画像についての上記の検索処理が終了したときは（S107が Ye s)、アプリケーション終了の指示を待機し（S108、判別が No)、アプリケーション終了 の指示を確認して（S 108が Yes)、当該アプリケーションを終了する。

[0141] 尚、上記の当該アプリケーションの終了を判別する処理は、例えば、表示画面 38に

、アプリケーションの終了を指示して実行させるための図示しない終了ボタンを用意 し、医師又は看護師等がマウス 23でこの終了ボタンを左クリックで指示をすることによ つて行われるようになって!/、る。

<第 7—第 9の実施の形態 >

図 12A及び図 12Bは、第 7—第 9の実施の形態において本発明に係わるカプセル 型内視鏡撮像画像ファイリングシステムにおけるワークステーション 7のモニタ装置 21 の同一表示画面 38上に表示される被検査者 4の身体管腔モデル 26と撮像画像 42 の例を示す図である。

[0142] モニタ装置 21の図 12Aに示す同一表示画面 38の右側の画像表示領域 41は、医 師又は看護師により予め指定された或る症状を示す所定の特徴 (例えば出血症状つ まり特定色)を有する特殊画像等があればその特殊画像を表示するように指示入力 されたことによって、その指示に基づいてデータベース 9上が検索され、上記所定の 特徴を有する特殊画像を含む撮像画像データが検出されたとき、その検出された撮 像画像データの特殊画像 42,が表示された状態を示して!/ヽる。

[0143] また、図 12Aに示す同一表示画面 38の左側の身体管腔モデル 26は、同じく医師 又は看護師により予め指定された或る症状を示す所定の特徴 (例えば出血症状)を 有する特殊画像等があればその特殊画像が撮影された位置を示すように指示入力 されたことによって、処理の進行状況を示す位置マーク 39の他に、検出された特殊 画像の撮影された位置を示す画像処理結果 44が通過路 37上に重畳表示されてい る例を示している。

[0144] また、この画像処理結果 44の表示は、図 12Aでは 1箇所にしか表示していないが、 実際の表示では、上記検索によって検出された全ての特殊画像データについて、そ の特殊画像が撮像された通過路 37上の位置に画像処理結果 44が表示される。

[0145] 次に、図 12Bは、上記通過路 37上に表示されている全ての特殊画像の撮影位置 を示す画像処理結果 44の中から（図 12Bも画像処理結果 44の表示を 1箇所のみに 表示しているが実際の表示では全ての画像処理結果 44が表示されている）、或る位 置の画像処理結果 44がポインティング矢印 43によって指定され、その指定された画 像処理結果 44が表示されている位置 (通過路 37上の位置、以下同様）に対応する 撮像画像データに基づく特殊画像 42,が、右側の画像表示領域 41に表示されて 、 る例を示している。

[0146] 更に、図 12Bに示す例は、この特殊画像の表示の際に画像処理結果 44に対応し て右側の画像表示領域 41に表示された特殊画像 42,に重畳して、この特殊画像 42 'がデータベース 9から検出された要因となった特徴検出対象位置 45 (例えば出血 位置）が表示されて 、る例を示して 、る。

[0147] 続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理に ついての第 7の実施形態における処理動作を説明する。

図 13は、第 7の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理も、医師又は看護師による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 6の実施形態におい て述べたような作業が行われて 、る。

[0148] 図 13において、処理 S101— S103、 S104— S108の処理は、第 1の実施形態に おいて図 11のフローチャートで説明した処理 S101— S108の処理とそれぞれ同一 である。本例では、処理 S103と処理 S104の処理の間で、処理 S121が行われる。

[0149] すなわち、 CPUは、処理 S103における特定の色を持つ特殊画像を検出した後、 その検出した特殊画像を、例えば図 12Aに示した特殊画像 42'のように表示する。こ の表示期間は、例えば 1枚の特殊画像 42Ίこ対して 2秒よりも長い間表示する。そし て、これと平行して次の特殊画像の検索を進めながら、その現在検索位置を、例えば 図 12Aに示した位置マーク 39にょうに、通過路 37上に順次重畳表示する。

[0150] 尚、位置マーク 39の表示は、現在検索位置のみに表示する（つまり現在検索位置 の移動に伴って位置マーク 39の表示が移動する）ようにしてもよぐまた、一度表示さ れた位置マーク 39の表示をそのまま残して現在検索位置の移動に応じて位置マー ク 39の表示が増えて!/、くようにしてもよ!、。

[0151] いずれにしても、医師又は看護師にとっては、現在検索位置の位置マーク表示に より、画像検索処理の進拔状態が一目で判ると共に、身体管腔モデル 26内の異常 発生状態を通過路 37に沿って順次視認することができ、これにより、次に続く処置へ の判断を迅速に行うことができる。

[0152] 続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理に ついての第 8の実施形態における処理動作を説明する。

図 14は、第 8の実施形態における画像処理の動作を説明するフローチャートである 。尚、この画像処理も、医師又は看護師による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 6の実施形態におい て述べたような作業が行われて 、る。

[0153] 図 14において、処理 S101、 S102、 S104— S108の処理は、第 6の実施形態に おいて図 11のフローチャートで説明した処理 S101、 S102、 S104— S108の処理と それぞれ同一である。本例では、図 11のフローチャートの処理 S 103の処理に代わ つて、処理 S131— S133の処理が行われる。

[0154] すなわち、処理 S102の処理における図式化した位置情報の表示（モニタ装置 21 の同一表示画面 38の左側領域に表示される被検査者 4の身体管腔モデル 26の表 示）に続いて、 CPUは、現在検索位置の画像データの処理において、予め医師又 は看護師により指定された特定の色 (例えば出血色)を有する特殊画像データが検 出されたカゝ否カゝ判別する（S131)。

[0155] そして、特定の色を有する特殊画像データが検出されていなければ (S131が No) 、処理 S104の処理に進むが、特定の色を有する特殊画像データが検出されていれ ば (S 131が Yes)、先ず、「疾患部」を示すマークを生成する（S 132)。

[0156] この「疾患部」を示すマークは、図 12A及び図 12Bに示した画像処理結果 44と同 一のものである。すなわち、図 12A及び図 12Bに示した画像処理結果 44は、疾患部 マークを示したものである。

[0157] 上記に続!ヽて、 CPUは、上記生成した疾患部マーク（画像処理結果 44)をモデル に重畳表示する（S133)。

これにより、例えば図 12A及び図 12Bに示した画像処理結果 44に表わされている ように、疾患部を示すマーク力 身体管腔モデル 26のカプセル型内視鏡 3の通過路

37上の疾患位置に重畳表示され、医師又は看護師は、疾患部がどのような範囲に 広がっているかを一目で判別することができる。

[0158] 続いて、このカプセル型内視鏡撮像画像ファイリングシステムにおける画像処理に ついての第 9の実施形態における処理動作を説明する。

図 15は、第 9の実施形態における画像処理の動作を説明するフローチャートである

。尚、この画像処理も、医師又は看護師による図 1に示したワークステーション 7のキ 一ボード 22又はマウス 23からの指示入力に基づいて、本体装置 19の CPUによって 行われる処理である。また、この場合も、この処理に先立って第 6の実施形態におい て述べたような作業が行われて 、る。

[0159] 図 15において、処理 S101— S103、 S104— S108の処理は、第 6の実施形態に おいて図 11のフローチャートで説明した処理 S101— S103、 S104— S108の処理 とそれぞれ同一である。本例では、図 11のフローチャートの処理 S103と処理 S104 の間で、処理 S 141、 S 142の処理が行われる。

[0160] すなわち、処理 S103の処理における特定の色を有する特殊画像データを検出し た後、 CPUは、画像表示を行う（S141)。

この画像表示処理では、上記検出された特殊画像データによる特殊画像が、例え ば図 12Bに示した特殊画像 42'のように、モニタ装置 21の表示画面 38の画像表示 領域 41に表示される。

[0161] そして、更に、 CPUは、その処理結果を画像に重畳表示する（S 142)。

この処理は、上記の画像処理結果として特殊画像 42'がデータベース 9から検出さ れた要因となった疾患位置を、例えば図 12Bに示した特徴検出対象位置 45のように

、特殊画像の表示に重畳して表示する処理である。

[0162] これにより、医師又は看護師は、表示された特殊画像力 疾患部を色によって自分 で探すという手数を煩わすことなぐ特徴検出対象位置 45の表示によって直ちに疾 患部を知ることができ、疾患部の精査に直ちに取り掛カることができる。

[0163] 尚、これらの処理では、医師又は看護師は、いつでもマウス 23を操作して身体管腔 モデル 26の通過路 37の表示上に沿ってポインティング矢印 43を移動させ、所望の 位置で左クリックすることにより、処理をジャンプさせて、左クリックした位置力 処理を 再開させることができる。さらに、このとき位置マーク 39は指定位置に移動するように なっている。

[0164] 尚、上述した例では、カプセル型内視鏡 3の通過路 37を、実際の身体管腔の形状 に合わせて表示している力 これに限ることなぐ位置情報として例えば 1次元つまり 直線で表現してもよぐその直線上に、図 10Aに示した食道 31、胃 32、十二指腸 33 、小腸 34、大腸 35、直腸 36等に対応する区間を設けて、位置の表示を行えば良い

[0165] 以上のように、上述した本発明の実施例によれば、多数の画像情報を容易に把握 することができると共に、多数の画像情報の中から注目すべき所望の位置や疾患部 位等が撮影された画像情報を容易に探し出すことが可能になる。

[0166] また、身体管腔の位置情報を 1次元以上の次元で図式化して表示し、その図式上 の位置情報の表示上に画像処理の進行度を重畳表示するので、通常のプログレス バーによる表示とは異なり、身体のどの部分まで画像処理が進行したか直感的に把 握できるので便禾 ljである。

[0167] 更に、特定画像の処理結果を示す特定表示を位置情報の表示上に重畳表示する と共にその特定画像を同一画面上の画像表示領域に表示するので、身体のどの部 分に特定の状態が発生して 、るの力容易に把握できて便利である。

[0168] 更に、位置情報の表示に対して直接マウスによる操作によって画像処理の制御を 行うので、身体管腔の位置との関係で直感的な操作を行うことができ、操作し易くて 便利である。

Claims

請求の範囲

[1] 被検体内に導入された撮像装置によって該被検体内の複数の位置で経時的に撮 像して得た複数の画像情報を表示部に表示させるための表示処理装置であって、 前記複数の画像情報を取得する画像情報取得部と、

前記複数の画像情報のそれぞれに関連づけられ、前記撮像装置が経時的に撮像 した前記被検体内でのそれぞれの位置に関する複数の位置情報を取得する位置情 報取得部と、

前記複数の位置情報に基づいて、前記撮像装置が経時的に撮像した前記被検体 内での位置を少なくとも 1次元の図式として前記表示部に表示させる位置情報表示 部と、

前記複数の位置情報のうちの少なくとも 1つを注目位置情報として指示する注目位 置情報指示部と、

前記図式として表示された前記複数の位置情報のうちで、前記注目位置情報とし て指示された位置情報に関連づけられた画像情報を前記表示部に表示させる画像 表示部と、

を有することを特徴とする画像情報の表示処理装置。

[2] 前記位置情報表示部により前記図式として表示された前記複数の位置情報のうち で、該図式中の前記注目位置情報に対応する位置に所定のマークを表示させる位 置マーク表示部をさらに有することを特徴とする請求項 1に記載の画像情報の表示

[3] 前記複数の画像情報と前記複数の位置情報とを保存する保存部をさらに有し、 前記画像表示部は、前記注目位置情報として指示された位置情報に関連づけられ た画像情報を前記保存部から読み出して前記表示部に表示させる

ことを特徴とする請求項 1に記載の画像情報の表示処理装置。

[4] 前記注目位置情報指示部は、前記位置情報表示部によって前記図式として表示さ れた前記複数の位置情報の中から、該図式上で任意の位置情報を前記注目位置情 報として指定する指定位置入力部を更に有することを特徴とする請求項 1に記載の 画像情報の表示処理装置。

[5] 前記複数の画像特報の中から所定の特徴部分を有する画像情報を抽出する特徴 画像検出部を更に有し、

前記注目位置情報指示部は、前記特徴画像検出部で抽出された前記所定の特徴 を有する画像情報に関連づ 、て 、る位置情報を前記注目位置情報として指示する ことを特徴とする請求項 1に記載の画像情報の表示処理装置。

[6] 被検体内の複数の位置で経時的に撮像して得た複数の画像情報をモニタ装置の 表示画面上に表示させるための表示処理方法であって、

前記複数の画像情報を取得する画像情報取得工程と、

前記複数の画像情報のそれぞれに関連づけられ、前記被検体内で経時的に撮像 されたそれぞれの位置に関する複数の位置情報を取得する位置情報取得工程と、 前記複数の位置情報に基づ 、て、前記被検体内で経時的に撮像された位置を少 なくとも 1次元の図式として表示させる位置情報表示工程と、

前記複数の位置情報のうちの少なくとも 1つを注目位置情報として指示する注目位 置情報指示工程と、

前記図式として表示された前記複数の位置情報のうちで、前記注目位置情報とし て指示された位置情報に関連づけられた画像情報を表示させる画像表示工程と、 を含むことを特徴とする画像情報の表示処理方法。

[7] 前記位置情報表示工程により前記図式として表示された前記複数の位置情報のう ちで、該図式中の前記注目位置情報に対応する位置に所定のマークを表示させる 位置マーク表示工程をさらに有することを特徴とする請求項 6に記載の画像情報の 表示処理方法。

[8] 前記複数の画像情報と前記複数の位置情報とを保存する保存工程をさらに有し、 前記画像表示工程は、前記注目位置情報として指示された位置情報に関連づけら れた画像情報を前記保存工程から読み出して前記表示工程に表示させる ことを特徴とする請求項 6に記載の画像情報の表示処理方法。

[9] 前記注目位置情報指示工程は、前記位置情報表示工程によって前記図式として 表示された前記複数の位置情報の中から、該図式上で任意の位置情報を前記注目 位置情報として指定する指定位置入力工程を更に有することを特徴とする請求項 6 に記載の画像情報の表示処理方法。

[10] 前記複数の画像特報の中から所定の特徴部分を有する画像情報を抽出する特徴 画像検出工程を更に有し、

前記注目位置情報指示工程は、前記特徴画像検出工程で抽出された前記所定の 特徴を有する画像情報に関連づ 、て 、る位置情報を前記注目位置情報として指示 する

ことを特徴とする請求項 6に記載の画像情報の表示処理方法。

[11] 被検体内の複数の位置で経時的に撮像して得た複数の画像情報をコンピュータに よってモニタ装置の表示画面上に表示させるための表示処理プログラムが記録され ている記録媒体であって、

該表示処理プログラムは、該コンピュータで実行されることにより、

前記複数の画像情報を取得する画像情報取得処理と、

前記複数の画像情報のそれぞれに関連づけられ、前記被検体内で経時的に撮像 されたそれぞれの位置に関する複数の位置情報を取得する位置情報取得処理と、 前記複数の位置情報に基づ 、て、前記被検体内で経時的に撮像された位置を少 なくとも 1次元の図式として表示させる位置情報表示処理と、

前記複数の位置情報のうちの少なくとも 1つを注目位置情報として指示する注目位 置情報指示処理と、

前記図式として表示された前記複数の位置情報のうちで、前記注目位置情報とし て指示された位置情報に関連づけられた画像情報を表示させる画像表示処理と、 を前記コンピュータに行わせることを特徴とする記録媒体。

[12] 前記表示処理プログラムは、前記コンピュータで実行されることにより、前記位置情 報表示処理により前記図式として表示された前記複数の位置情報のうちで、該図式 中の前記注目位置情報に対応する位置に所定のマークを表示させる位置マーク表 示処理を更に該コンピュータに行わせることを特徴とする請求項 11に記載の記録媒 体。

[13] 前記表示処理プログラムは、前記コンピュータで実行されることにより、前記複数の 画像情報と前記複数の位置情報とを保存する保存処理を更に該コンピュータに行わ せ、

前記画像表示処理は、前記保存処理の実行によって保存されている、前記注目位 置情報として指示された位置情報に関連づけられた画像情報を読み出して表示させ る処理を前記コンピュータに行わせる

ことを特徴とする請求項 11に記載の記録媒体。

[14] 前記注目位置情報指示処理は、前記位置情報表示処理によって前記図式として 表示された前記複数の位置情報の中から、該図式上で任意の位置情報を前記注目 位置情報として指定する指定位置入力処理を更に前記コンピュータに行わせること を特徴とする請求項 11に記載の記録媒体。

[15] 前記表示処理プログラムは、前記コンピュータで実行されることにより、前記複数の 画像特報の中から所定の特徴部分を有する画像情報を抽出する特徴画像検出処理 を更に該コンピュータに行わせ、

前記注目位置情報指示処理は、前記特徴画像検出処理で抽出された前記所定の 特徴を有する画像情報に関連づ 、て 、る位置情報を前記注目位置情報として指示 する処理を前記コンピュータに行わせる

ことを特徴とする請求項 11に記載の記録媒体。

[16] 所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取 得した連続画像データを処理するカプセル型内視鏡用画像フアイリング装置であつ て、

前記連続画像データを取得した前記被検体内の位置に関する 1つ以上の位置情 報から任意の 1つの位置を注目位置情報として取得する注目位置情報取得部と、 前記注目位置情報として指示された位置に対応する画像情報を前記連続画像デ ータから取得する画像情報取得部と、

前記被検体内における 1つ以上の位置情報を少なくとも 1次元以上の図式として表 示する位置表示部と、

前記画像情報取得部によって取得された前記画像情報に対して所定の処理を施 す画像情報処理部と、

前記位置表示部によって表示された前記図式上に注目位置情報取得部によって 取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上の表 示変化によって前記画像情報処理部による処理の進行度を告知する進拔情報表示 部と、

を有することを特徴とするカプセル型内視鏡用画像フアイリング装置。

[17] 前記位置表示部は、体内の身体管腔におけるカプセル型内視鏡の通過経路を表 示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示することを 特徴とする請求項 16に記載のカプセル型内視鏡用画像フアイリング装置。

[18] 前記進拔情報表示部は、前記進行度を告知する表示を前記画像情報処理部によ る処理結果と共に前記位置表示部による表示上に重畳表示することを特徴とする請 求項 16に記載のカプセル型内視鏡用画像フアイリング装置。

[19] 前記画像情報処理部の処理の進行と共に該画像情報処理部の処理に対応する画 像情報を表示する画像情報表示部を有することを特徴とする請求項 16に記載の力 プセル型内視鏡用画像フアイリング装置。

[20] 前記画像情報表示部は、前記画像情報処理部による処理結果を、前記画像情報 の表示に重畳した形で表示することを特徴とする請求項 19に記載のカプセル型内 視鏡用画像フアイリング装置。

[21] 前記画像情報表示部は、前記画像情報を所定の時間間隔で更新表示することを 特徴とする請求項 19に記載のカプセル型内視鏡用画像フアイリング装置。

[22] 装置操作者からの指示を受け付ける指示入力部を有し、

前記画像情報処理部は、前記指示入力部による入力結果に基づいて画像情報処 理の制御を行う

ことを特徴とする請求項 16に記載のカプセル型内視鏡用画像フアイリング装置。

[23] 前記指示入力部からの入力結果に基づく前記画像情報処理部における画像情報 処理の制御は、処理の終了であることを特徴とする請求項 22に記載のカプセル型内 視鏡用画像フアイリング装置。

[24] 前記指示入力部からの入力結果に基づく前記画像情報処理部における画像情報 処理の制御は、処理の一時停止であることを特徴とする請求項 22に記載のカプセル 型内視鏡用画像フアイリング装置。

[25] 前記指示入力部からの入力結果に基づく前記画像情報処理部における画像情報 処理の制御は、処理の再開であることを特徴とする請求項 22に記載のカプセル型内 視鏡用画像フアイリング装置。

[26] 前記指示入力部からの入力結果に基づく前記画像情報処理部における画像情報 処理の制御は、処理対象とする画像情報の変更であることを特徴とする請求項 22に 記載のカプセル型内視鏡用画像ファイリング装置。

[27] 所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続して撮像して取 得した連続画像データを処理するカプセル型内視鏡用画像フアイリング方法であつ て、

前記連続画像データを取得した前記被検体内の位置に関する 1つ以上の位置情 報から任意の 1つの位置を注目位置情報として取得する注目位置情報取得工程と、 前記注目位置情報として指示された位置に対応する画像情報を前記連続画像デ ータから取得する画像情報取得工程と、

前記被検体内における 1つ以上の位置情報を少なくとも 1次元以上の図式として表 示する位置表示工程と、

前記画像情報取得工程によって取得された前記画像情報に対して所定の処理を 施す画像情報処理工程と、

前記位置表示工程によって表示された前記図式上に注目位置情報取得工程によ つて取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上 の表示変化によって前記画像情報処理工程による処理の進行度を告知する進拔情 報表示工程と、

を含むことを特徴とするカプセル型内視鏡用画像フアイリング方法。

[28] 前記位置表示工程は、体内の身体管腔におけるカプセル型内視鏡の通過経路を 表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示すること を特徴とする請求項 27に記載のカプセル型内視鏡用画像フアイリング方法。

[29] 前記進拔情報表示工程は、前記進行度を告知する表示を前記画像情報処理工程 による処理結果と共に前記位置表示工程による表示上に重畳表示することを特徴と する請求項 27に記載のカプセル型内視鏡用画像ファイリング方法。

[30] 前記画像情報処理工程の処理の進行と共に該画像情報処理工程の処理に対応 する画像情報を表示する画像情報表示工程を含むことを特徴とする請求項 27に記 載に記載のカプセル型内視鏡用画像フアイリング方法。

[31] 前記画像情報表示工程は、前記画像情報処理工程による処理結果を、前記画像 情報の表示に重畳した形で表示することを特徴とする請求項 30に記載のカプセル 型内視鏡用画像フアイリング方法。

[32] 前記画像情報表示工程は、前記画像情報を所定の時間間隔で更新表示すること を特徴とする請求項 30に記載のカプセル型内視鏡用画像ファイリング方法。

[33] 方法操作者力ゝらの指示を受け付ける指示入力工程を含み、

前記画像情報処理工程は、前記指示入力工程による入力結果に基づいて画像情 報処理の制御を行う

ことを特徴とする請求項 27に記載のカプセル型内視鏡用画像フアイリング方法。

[34] 前記指示入力工程力 の入力結果に基づく前記画像情報処理工程における画像 情報処理の制御は、処理の終了であることを特徴とする請求項 33に記載のカプセル 型内視鏡用画像フアイリング方法。

[35] 前記指示入力工程からの入力結果に基づく前記画像情報処理工程における画像 情報処理の制御は、処理の一時停止であることを特徴とする請求項 33に記載のカブ セル型内視鏡用画像フアイリング方法。

[36] 前記指示入力工程からの入力結果に基づく前記画像情報処理工程における画像 情報処理の制御は、処理の再開であることを特徴とする請求項 33に記載のカプセル 型内視鏡用画像フアイリング方法。

[37] 前記指示入力工程からの入力結果に基づく前記画像情報処理工程における画像 情報処理の制御は、処理対象とする画像情報の変更であることを特徴とする請求項

33に記載のカプセル型内視鏡用画像フアイリング方法。

[38] コンピュータに、所定の時間間隔で被検体内を移動するカプセル型内視鏡が連続 して撮像して取得した連続画像データの処理を実行させるカプセル型内視鏡用画像 フアイリング処理プログラムが記録されている記録媒体であって、

該カプセル型内視鏡用画像フアイリング処理プログラムは、該コンピュータで実行さ れることにより、

前記連続画像データを取得した前記被検体内の位置に関する 1つ以上の位置情 報から任意の 1つの位置を注目位置情報として取得する注目位置情報取得処理と、 前記注目位置情報として指示された位置に対応する画像情報を前記連続画像デ 一タカ 取得する画像情報取得処理と、

前記被検体内における 1つ以上の位置情報を少なくとも 1次元以上の図式として表 示する位置表示処理と、

前記画像情報取得処理によって取得された前記画像情報に対して所定の処理を 施す画像情報処理処理と、

前記位置表示処理によって表示された前記図式上に注目位置情報取得処理によ つて取得された注目位置情報の位置を重畳表示し、この注目位置情報の該図式上 の表示変化によって前記画像情報処理処理による処理の進行度を告知する進拔情 報表示処理と、

を前記コンピュータに行わせることを特徴とする記録媒体。

[39] 前記位置表示処理は、体内の身体管腔におけるカプセル型内視鏡の通過経路を 表示すると共に、該通過経路の背景として平均的な体内臓器の位置を表示する処理 を前記コンピュータに行わせることを特徴とする請求項 38に記載の記録媒体。

[40] 前記進拔情報表示処理は、前記進行度を告知する表示を前記画像情報処理処理 による処理結果と共に前記位置表示処理による表示上に重畳表示する処理を前記 コンピュータに行わせることを特徴とする請求項 38に記載の記録媒体。

[41] 前記カプセル型内視鏡用画像フアイリング処理プログラムは、前記コンピュータで 実行されることにより、前記画像情報処理処理の処理の進行と共に該画像情報処理 処理の処理に対応する画像情報を表示する画像情報表示処理を更に該コンピュー タに行わせることを特徴とする請求項 38に記載の記録媒体。

[42] 前記画像情報表示処理は、前記画像情報処理処理による処理結果を、前記画像 情報の表示に重畳した形で表示する処理を前記コンピュータに行わせることを特徴と する請求項 41に記載の記録媒体。

[43] 前記画像情報表示処理は、前記画像情報を所定の時間間隔で更新表示する処理 を前記コンピュータに行わせることを特徴とする請求項 41に記載の記録媒体。

[44] 前記カプセル型内視鏡用画像フアイリング処理プログラムは、前記コンピュータで 実行されることにより、前記コンピュータの外部力 の指示を受け付ける指示入力処 理を更に該コンピュータに行わせ、

前記画像情報処理処理は、前記指示入力処理による入力結果に基づ 、て画像情 報処理の制御を前記コンピュータに行わせる

ことを特徴とする請求項 38に記載の記録媒体。

[45] 前記指示入力処理によって受け付けた入力結果に基づく前記画像情報処理処理 における画像情報処理の制御は、処理の終了であることを特徴とする請求項 44に記 載の記録媒体。

[46] 前記指示入力処理によって受け付けた入力結果に基づく前記画像情報処理処理 における画像情報処理の制御は、処理の一時停止であることを特徴とする請求項 44 に記載の記録媒体。

[47] 前記指示入力処理によって受け付けた入力結果に基づく前記画像情報処理処理 における画像情報処理の制御は、処理の再開であることを特徴とする請求項 44に記 載の記録媒体。

[48] 前記指示入力処理によって受け付けた入力結果に基づく前記画像情報処理処理 における画像情報処理の制御は、処理対象とする画像情報の変更であることを特徴 とする請求項 44に記載の記録媒体。