JP4604057B2 - データストリームを表示するためのシステム及び方法 - Google Patents

Description

本発明は、データストリームの表示に関し、更に、インビボデータを表示するためのシステム及び方法に関する。

既知のインビボ画像化装置は、胃腸（ＧＩ）管内部からの画像を取り込むことができる経口摂取可能なカプセルを含む。取り込まれた画像は、例えば医療専門家によって病理について検査をするために外部ソースに送信することができる。幾つかの実施形態では、インビボ装置は、モニタリング及び診断のために外部ソースにデータを送信することができる種々の他のセンサを含むことができる。

インビボ装置は、例えばＧＩ管の内腔などの体腔に沿った異なる点からデータを収集して、これらを解析及び診断のために外部に送信することができる。ＧＩ管は、非常に長く曲がった経路をしているので、各伝送されたデータがこの管に沿ったどこから取得されたかを適切に示すことは困難な場合がある。

画像ストリームに沿って進んだ距離を医療専門家に表示するために、データを評価する際に時間バーを使用することが知られている。しかしながら、インビボ装置は、例えばＧＩ管などの体腔の種々の区域を通って止まり、又は異なる速度で進む場合があるので、例えば画像などの特定のデータがＧＩ管に沿ったどこで又はどの距離で取り込まれたかを明確に判断することができない場合がある。更に時間バー上には、例えば十二指腸、盲腸、又はＧＩ管の他の場所のような特定の解剖学的マイルストンに装置が到達した時点に関して表示がない場合がある。

これまではローカリゼーション法が適用されてきた。ローカリゼーション法の中には、いずれかの所与の時間における空間中の装置の空間位置を示すものもある。この情報は、装置が進む速度を時間ログと共により適切に医療従事者に示すことができるが、例えばＧＩ管などの特定の解剖学的構造に対して空間中の装置の空間位置を関連付けることは依然として困難な場合がある。

インビボ装置は、非常に長く曲がった経路に沿った１つより多いセンサからデータを収集することができ、結果として、インビボセンサによって取り込まれる複数のデータストリームが得られる。複数の長いデータストリームを評価することは、時間がかかり困難な可能性がある。更に、医療従事者にとって取り込まれた全データ内容を全て観察することは困難な場合がある。

米国特許第５，６０４，５３１号公報 公開番号ＷＯ ０１／６５９９５公報 公開米国特許出願ＵＳ−２００２−０１７１６６９−Ａ１公報 公開国際特許出願ＷＯ ０２／２６１０３公報 公開国際特許出願ＷＯ０２１０２２２３公報

本発明の実施形態は、取り込まれたインビボ・データストリームの固定グラフィカル表示を生成して表示するためのシステム及び方法を提供することができる。本発明の１つの実施形態では、固定されたグラフィカル表示は、インビボ・データストリームに取り込まれた量又は次元の変化する視覚表現である。一例として、グラフィカル表示は、カラーバーの形態である。本発明の別の実施形態では、固定されたグラフィカル表示は、データストリームのストリーミング表示と並べて表示することができる。

本発明として見なされる対象は、本明細書の結論となる部分において具体的に指摘され且つ明確に請求される。しかしながら、本発明は、本発明の目的、機能、及び利点と共に構成及び実施方法の両方に関して、以下の詳細な説明を参照し添付図面と共に読むことによって最も良く理解することができる。

図を簡略且つ明確にするために、図中に示される要素は必ずしも縮尺通りに描かれていないことは理解されるであろう。例えば、一部の要素の寸法は、明確にするために他の要素に対して強調されている場合がある。更に、適切と見なされる場合には、対応する要素又は同等の要素を示すために参照符号を図中で繰り返す場合がある。

以下の説明は、特定の用途及びその要件の関連で与えられる本発明を当業者が実施し利用可能にするために呈示される。記載された実施形態に対して種々の修正を行えることは当業者には明らかであり、本明細書で定められた一般原理を別の実施形態に適用することができる。従って、本発明は、図示され記載された特定の実施形態に限定されるものではなく、本明細書で開示される原理及び新規の特徴に一致する最も広い範囲を認めるべきである。以下の詳細な説明において、多くの特定の詳細は、本発明の完全な理解を与えるために説明される。しかしながら、本発明は、これら特定の詳細がなくとも実施できることは当業者には理解されるであろう。換言すれば、周知の方法、手順、及び構成要素は、本発明をあいまいにしないために詳細には説明されていない。

本発明の実施形態は、例えば、画像ストリーム、他の非画像データ、又は例えばＧＩ管に沿ってインビボで収集することができる、色分けされ画像化される場合もあるデータ（例えばｐＨデータ、温度データなど）などの他のデータといった、取り込まれたデータストリームの固定グラフィカル表示を生成するための装置、システム、及び方法を提供する。集計されたグラフィカル表示は、例えば変化する視覚表現を含むことができ、これは、例えば収集された量及び／又はデータを少なくとも部分的に表すことができる一連の色、例を挙げるとバー上に表示された各色がパラメータの値を表すことができる一連の色である。他の適切な表現を使用してもよく、更に、輝度、サイズ、幅、パターンなどの他の視覚的次元又は性質を使用してもよい。本発明の幾つかの実施形態では、集計されたグラフィカル表示は、データストリームのストリーミング表示と並行した固定ディスプレイとすることができる。

本発明の１つの実施形態では、表示は、変化する量（例えば取り込まれたデータストリーム）をマッピングすることができ、例えば、取り込まれたデータストリームと取り込まれたデータストリームの始点に対する解剖学的起始又は位置（例えば、取り込まれた種々のデータの起始とすることができる、例えばＧＩ管内のおおよその部位又は正確な部位）との間の関係を示すことができる。本発明の別の実施形態では、マッピングは、取り込まれ、測定され、又は他の方法で取得されたある事象（例えば生理学的事象）を示すことができる。本発明の更に別の実施形態では、マッピングは、例えば経時的に測定された１つ又はそれ以上のパラメータの変化、例えば病理によって起こる変化、局部環境での自然な変化、又は他の関連する変化に起因するものを示すことができる。場所は、他の情報、例えばＧＩ管に沿った例えば解剖学的な属性に相関することができる。場所は、幾つかの実施形態では、一連の画像などの画像フレームに基づいたインビボ情報取り込み装置の時間又は位置に基づく場所などの絶対的場所とすることができる。

図１を参照すると、本発明の１つの実施形態によるインビボ感知システムの概略図を示している。通常、例えば画像感知システムであるインビボ感知システムは、例えば、画像を取り込むための撮像装置４６と、体腔を照明するための照明光源４２と、装置４０に電力を供給するための電源４５と、画像及び場合によっては他のデータを外部受信装置１２に送信するためのアンテナ４７を備えた送信機４１とを有する、画像化装置であるインビボ感知装置４０を含むことができる。本発明の幾つかの実施形態では、インビボ装置４０は、イメージセンサ４６以外、及び／又はこれに追加する１つ又はそれ以上のセンサ３０、例えば温度センサ、ｐＨセンサ、圧力センサ、血液センサなどを含むことができる。本発明の幾つかの実施形態では、装置４０は、自律型の装置、カプセル、又は燕下可能なカプセルとすることができる。本発明の別の実施形態では、装置４０は自律型でなくともよく、例えば装置４０は、内視鏡又は他のインビボ画像化感知装置とすることができる。

インビボ画像化装置４０は通常、本発明の実施形態によれば、場合によっては被検体に近接又は着用される外部データ受信器及び／又は記録装置１２に情報（例えば画像又は他のデータ）を送信することができる。通常は、データ受信器１２は、アンテナ又はアンテナアレイ１５とデータ受信器格納ユニット１６を含むことができる。データ受信器及び／又は記録装置１２は、勿論別の適切な構成を取ることができ、アンテナ又はアンテナアレイを含まなくともよい。本発明の幾つかの実施形態では、受信器は、例えば画像データを表示するための処理能力及び／又はＬＣＤディスプレイを含むことができる。

データ受信器及び／又は記録装置１２は、例えばワークステーション又はパーソナルコンピュータなどのより大きなコンピュータデバイス１４に受信データを転送することができ、ここでデータを更に解析して保存し、及び／又はユーザに表示することができる。通常コンピュータデバイス１４は、処理ユニット１３、データ処理格納ユニット１９、及びモニタ１８を含むことができる。コンピュータデバイス１４は通常、パーソナルコンピュータ又はワークステーションとすることができ、処理ユニット１３、例えば記憶装置又はメモリ１９であるメモリ、ディスクドライブ、モニタ１８、及び入出力装置などの標準的な構成要素を含むが、別の構成も可能である。処理ユニット１３は通常、その機能の一部として、例えば画像データ又は他のデータであるデータの表示を制御するコントローラとして機能する。モニタ１８は通常、従来型のビデオディスプレイであるが、追加として、画像又は他のデータを提供可能な他のどのような装置であってもよい。本発明の実施形態による方法を実行する命令又はソフトウエアは、例えばメモリ１９内に記憶され、コンピュータデバイス１４の一部として含めることができる。

別の実施形態では、種々の構成要素の各々は必要としなくともよく、例えば、インビボ装置４０は、データをビューイング又はコンピュータデバイス１４に直接伝送或いは転送（例えば有線で）することができる。

本発明の実施形態で使用するのに好適なインビボ画像化システムは、引用により本明細書に組み込まれる、本出願の同一の譲受人に譲受された米国特許第５，６０４，５３１号、及び／又は、同様に引用により本明細書に組み込まれる、本出願の同一の譲受人に譲受された公開番号ＷＯ ０１／６５９９５において記載された種々の実施形態と同様とすることができる。別の構成を有する他のインビボシステムを使用してもよい。勿論、本明細書に記載された装置、システム、構造、機能、及び方法は、別の構成、構成要素のセット、プロセスなどを有することもできる。

本発明の実施形態は、感知装置が存在し、及び／又は移動することができるＧＩ管又は他のいずれかの管などの体腔を通って、或いは体腔内で経時的に感知されるパラメータの一般的に簡潔な及び／又は集計されたグラフィカル表示を生成するための装置、システム、及び方法を含む。インビボ装置によって取り込まれたデータストリームの観察、例えば燕下可能な画像化カプセルによって送信された画像ストリームの観察は、長時間にわたる手技である。取り込まれたデータの集計された表示は、例えば取り込まれたデータの視覚的表現及び／又はマップを提供することができ、医療従事者の注意を関心領域に集めるのに役立つことができ、観察されているデータの起始及び内容についての医療従事者の理解を深めることができる。

上記感知装置から取得されたデータの１つ又はそれ以上のストリームを処理して、１つ又はそれ以上の集計された表示を作成し、該表現を、例えば解析ソフトウエアのグラフィカルユーザインターフェースなどのグラフィカルユーザインターフェースにおいて表示することができる。

１つの実施形態によれば、データストリームの表示（例えば、画像のストリーム又はセット、一連のｐＨデータなど）は、場合によってはグラフィカルユーザインターフェースを介して例えばモニタ１８上に、或いはデータストリームが取り込まれているときには、例えば受信器１２上のＬＣＤディスプレイ上にリアルタイムで表示することができるカラーバーなどのバーを用いたものとすることができる。この表示は、例えばインビボ・データストリーム（例えば画像フレーム）の一部において取り込まれた変化量を表す物理量又は次元が変化する視覚表現を含むことができる。一例では、この次元は色とすることができる。この表示は通常、例えばディスプレイの別の部分でストリーミングしているような、表示されている画像又は他のデータの抽出又は集計された形態とすることができる。この表示は通常、各々が画像フレームに対応する複数のストリップを含むバーなどの連続してアセンブルされた、バー、ストライプ、ピクセル、又は他の要素などの複数の画像要素又はデータ要素を含むことができる。例えば、表示の一部は、全体の色スキーム、輝度、ｐＨレベル、温度、圧力、或いは表示されたフレームもしくはデータ要素上の他の量の集計を表すことができる。

ここで図２を参照すると、データが取り込まれたインビボデータを表示するためのディスプレイ及び／又はグラフィカルユーザインターフェース２００が示されている。ディスプレイ２００は、例えばカラーバーである、インビボ・データストリームの集計されたグラフィカル表示２２０を含むことができる。通常、グラフィカル表示２２０は、例えば本発明の幾つかの実施形態による画像ストリームである、データストリーム２１０のストリーミングディスプレイと並べて表示される固定表示とすることができる。本発明の別の実施形態では、グラフィカル表示２２０は別個に表示することができる。グラフィカル表示２２０は、一連の色、一連の色づけされた領域、或いは一連のパターン、画像要素、画像又はピクセルのグループ（例えば、より大きなバー又は矩形領域を形成するように配列された色の一連のストライプ２２２又は領域）を含むことができ、ここでは、例えば一連の色２２２の各々は、原データストリームでの要素又は要素グループと関連付け及び／又は対応付けることができる。例えば、各色づけされたストライプ２２２は、データストリーム２１０による画像又は画像グループと対応付けることができる。ストライプ以外の画像ユニット（例えばピクセル、ブロックなど）を使用することができ、画像ユニットは、色以外の異なる次元（例えばパターン、サイズ、幅、輝度、アニメーションなど）であってもよい。１つの画像ユニット（例えばストライプ２２２）は、原データストリームの１つ又はそれ以上のユニット（例えば画像フレーム）を表すことができる。通常、例えばバーの一連の色は、例えば画像又は画像グループのデータストリームを通常表示することができる、同じ並び又は順序で配列することができる。本発明の１つの実施形態では、グラフィカル表示２２０のストライプを指すことによって、当該ストライプに対応するフレームまで画像ストリームを進めることができる。

カラーバーは、例えばデータストリームの各要素（例えば画像フレーム）又は要素のサブグループに色を割り当て、次いで、例えば表示される特性内の変化を強調できるように一連の色を処理することによって生成することができる。本発明の１つの実施形態では、一連の色は、例えば関心点を示すための補助ツールとして使用できるように、添付するビデオのキューポイントを強調するように処理することができる。本発明の１つの実施形態では、データ２１０のストリームを本明細書で記載されている１つ又はそれ以上のバー及び／又はグラフィカル表示（２２０及び２３０）と共に表示することができる。データストリーム２１０は、例えばグラフィカル表示２２０（例えば取り込まれたインビボ画像ストリーム）で表されたデータ、又はグラフィカル表示２２０で表されたデータと同時もしくは実質的に同時に取得され及び／又はサンプリングされた別のデータとすることができる。一例として、グラフィカル表示２２０とデータストリーム２１０との対応関係を示すために、データストリーム２１０（例えばビデオ）内の実質的に対応するデータを同時に表示することができるときに、マーカ又はインジケータ２５０は、グラフィカル表示２２０全体又はこれに沿って進行させることができる。本発明の別の実施形態では、この表示は、例えば円、楕円、正方形などのバー以外の形状とすることができる。別の実施形態によれば、この表示は、音声トラクト（ｔｒａｃｔ）、グラフ、及び他のグラフィカル表示の形態とすることができる。

カーソルなどのインジケータ２５０は、画像ストリーム２１０がディスプレイ２００上でスクロールされるときに時間バー２３０及びグラフィカル表示２２０に沿って進むことができる。一例として、ユーザが、例えば早送り、巻き戻し、再生停止、又は例えば画像ストリーム２１０の始まりもしくは終わりに到達することを可能にする制御ボタン２４０をディスプレイ上に含めることができる。本発明の別の実施形態では、ユーザは、例えばマウス又は他のポインティング・デバイスを用いてインジケータ２５０の位置を動かすことによって、例えば関心領域にスキップするなどストリーミング表示の開始位置を変更することによってデータストリーム２１０の表示を制御することができる。本発明の別の実施形態では、ユーザ及び／又は医療従事者は、画像ストリームに沿った場所をマークして、将来こうした場所に簡単にアクセスできるようにサムネイルなどのインジケータ又はマーカを挿入することができる。例えば、医療従事者は、グラフィカル表示２２０上に（例えばマウス、キーボードなどのポインティング・デバイスを使用して）これらのマイルストンをマークすることができる。引用により全体が本明細書に組み込まれる、本発明の譲受人に譲渡され２００２年１１月２１日に公開された、名称「移動画像上に注釈を付けるためのシステム及び方法（Ｓｙｓｔｅｍ ａｎｄ ｍｅｔｈｏｄ ｆｏｒ ａｎｎｏｔａｔｉｏｎ ｏｎ ａ ｍｏｖｉｎｇ ｉｍａｇｅ）」の公開米国特許出願ＵＳ−２００２−０１７１６６９−Ａ１に記載された幾つかの実施形態は、画像ストリームの一部にマーキング又は注釈を入れる方法及び装置を含み、該方法は、本発明の実施形態と共に使用することができる。データのストリームにマーキング又は注釈を入れるための他の適切な方法を使用してもよい。次いで、ユーザは、サムネイルを「クリック」して、関心のあるデータの場所（例えば画像フレーム）まで進め、或いは、グラフィカル表示２２０上をクリックして関心のある画像フレームを進め又は後退させ、次いで、例えば、所望の関心の点からのデータストリームのストリーミング及び／又は観察を継続又は開始することができる。

サムネイル又は他のマーカは、データストリーム２１０からの関心画像に基づいて、又はグラフィカル表示２２０上で識別された場所に基づいて、又は時間バー２３０上に記録された時間に基づいて定義することができる。サムネイル、又は他のマーカ又は注釈を定義する他の適切な方法を使用してもよい。例えば、コンピュータアルゴリズムを使用して、例えば医療従事者にとって関心のある可能性があるサムネイルを識別することができる。アルゴリズムベースのサムネイルはまた、例えばデータストリーム２１０からの関心画像に基づくことができ、又はグラフィカル表示２２０上で識別される場所に基づくことができ、或いは時間バー２３０上に記録された時間に基づくことができ、もしくは他の方法に基づくこともできる。別の実施形態では、グラフィカル表示２２０は、それ自体が一連の色のサムネイルであってもよく、その結果、ユーザは、カラーバーの色を指し又は「クリック」して、ストリーム内の異なる点からのデータストリームの表示を再開させることができる。

図３は、本発明の実施形態による組織カラーバーの概略図である。組織のグラフィカル表示２２０は、例えばＧＩ管の組織を画像化する撮像装置４６から取り込まれた画像のストリームを画像化処理することにより取得することができる。他の内腔を感知することができ、他のモダリティ（例えば温度）を感知することができる。組織のグラフィカル表示２２０は、例えば取り込まれた画像ストリームが圧縮され、場合によっては平滑化された形態を表し、これにより、バー上の色の頂部水平ストリップが取り込まれた第１の画像、第１の代表的画像、又は画像の第１のグループを表すことができ、色の底部水平ストリップが、最後の画像、最後の代表的画像、又は取り込まれた画像の最終のセットを表すことができるようになり、別の実施形態では、画像ストリーム及び／又は他のデータストリームの一部だけを表示してもよい。

本発明の１つの実施形態では、経時的に組織から取得された画像フレームの配色は、例えばインビボ画像化装置４０がＧＩ管に沿って移動するときに変化することができる。画像の配色の変化を用いて、例えば、特定の解剖学的部位（例えば十二指腸、盲腸、又は他の部位）を通る通路を識別することができ、及び／又は病理（例えば出血又は他の病理）を示すことができる。集計された簡潔なカラーバーで組織の画像ストリームを表示するので、色ストリームの変化は容易に識別することができる。例えば盲腸への通路は、大腸として典型的とすることができる色、例えば大腸で見出される内容物を示すことができる色又は組織の典型的な色によって識別することができる。十二指腸への入口は、小腸の組織の典型的とすることができる別の色によって識別することができる。別の解剖学的部位は、カラーバー（例えば組織カラーバー）上の色及び／又は変化する色のストリームを観測することによって識別することができる。別の実施形態では、例えばポリープの存在、出血、その他などの病理学的条件は、例えば組織のグラフィカル表示２２０を観察することによって識別することができる。血液によって示される病理などの特定の関心領域は、組織により直接識別することができる。従って、医療従事者は、最初に組織のグラフィカル表示２２０を調べて、その後、画像のどのブロックを検査するかを決定することができる。本発明の幾つかの実施形態では、このようなカラーバーからのデータを使用して解剖学的部位、病理、又は関心領域を識別し、これらに対して、例えば表示されたカラーバーに沿って関心領域をマーキングすることによって医療従事者の注意を向けさせるようにアルゴリズムを使用することができる。医療従事者は、組織のカラーバーに沿ってサムネイル又はマーキング、例えばマーキング及び／又は第１の胃画像３２０、第１の十二指腸の画像３３０、及び第１の盲腸の画像３４０のマーキングを使用して、データ２１０（同時に表示されている）が発生した可能性のあるＧＩ管に沿った場所を特定することができる。画像が取り込まれた領域を認識することは、観察される画像が健康な組織か又は病理組織を示すかどうかを医療従事者が判定するのに役立つことができ、更に、医療従事者が他の条件を決定するのに役立つことができる。

幾つかの実施形態によれば、異なる色又は他の視覚指標、陰影、色相、サイズ又は幅などは、例えばデータストリームに沿った変化を強調するために、処理されたデータストリームに意図的に追加することができる。他の処理方法を用いて、ユーザに呈示される情報を強調することができる。本発明の１つの実施形態では、選択されたピクセルに対して決定則に基づいて平滑化を行う場合もあれば、行わない場合もある。例えば、本発明の１つの実施形態では、腸内の内容物を示す可能性のある、暗いピクセル又は緑色ピクセルに対して平滑化を行うことができない場合がある。

ここで図４Ａ及び４Ｂを参照すると、組織カラーバー以外のバーの形態のグラフィカル表示の実施例が示されている。例えば図４Ａは、例えば経時的又は体腔の経路に沿って取得されたｐＨ測定値をマッピングすることができるｐＨカラーバー２２５の概略的な実施例を示す。他の測定値を用いてもよく、例えば温度、血液センサ、及び圧力の測定値を使用することができる。インビボｐＨセンサから取得されたデータは、経時的及び／又は経路（例えば、異なる色が例えば異なるｐＨレベル表示することができるＧＩ管など）にわたってｐＨをマッピングするために、色、輝度、及び／又はパターンで表示することができる。他の実施例では、異なる色がｐＨレベルにおける異なるレベルの変化を表示することができる。他の適切な表示を示してもよい。経路に沿ったｐＨの変化は、病理、解剖学的位置への入口又は出口などに起因することができる。経時的に観測されたｐＨの変化は、例えば、経時的な生理学的事象、例えば治癒のプロセス、病状の進行などを分類することができる。図４Ｂは、血液検出カラーバー２２６の概略図である。一例として、バーに沿った色ストリップ２２２は、血液が検出された部位を示すことができる。

本発明の１つの実施形態では、カラーバー２２６は、ある期間にわたって血液が存在することを示すことができる。引用により全体が本明細書に組み込まれる、本発明の譲受人に譲渡された名称「固定可能なインビボ感知装置（Ａｎ ｉｍｍｏｂｉｌｉｚａｂｌｅ ｉｎ ｖｉｖｏ ｓｅｎｓｉｎｇ ｄｅｖｉｃｅ）」の公開国際特許出願ＷＯ ０２／２６１０３では、とりわけ、術後部位に固定することができるカプセルなどの装置の実施形態の記載を含んでいる。国際特許出願ＷＯ ０２／２６１０３に記載された実施形態を本明細書に記載されたシステム及び方法と共に使用して、経時的にインビボ部位についてデータを取り込んで伝送することができる。取り込んだデータの表示（例えばカラーバー）は、現在の静的状況から経時的に発生するどのような変化をも示すことができ、全体のストリームを画像毎に検査する必要もなく、経時的に組織がどのように治癒又は変化したかについての概観を示すことができる。

ここで図５を参照すると、インビボデータ２１０のストリーミング表示を観察するためのグラフィカルユーザインターフェースが、データストリームの複数の固定集計グラフィカル表示２２０、２２５、及び２２６と共に概略的に示されている。単一のスクロールインジケータ２５０を時間バー２３０と共に使用して、現在表示されているデータ２１０がバーに沿ってどこで発生したかを示すように、データストリーム（２２０、２２５、及び２２６）の固定表示に沿った位置を指すことができる。個々のカラーバーは、例えば組織のグラフィカル表示２２０、ｐＨカラーバー２２５、及び血液検出カラーバー２２６を含むことができる。他の数のグラフィカル表示、他のデータを集計する他の適切な形式のバー、及び他の適切な形式の表示を使用することができる。複数のグラフィカル表示は、病状の診断並びにデータストリーム内、すなわち関心部位の位置特定に役に立つことができる。複数のグラフィカル表示は、例えば画像ストリームを評価するときに医療従事者が利用可能なパラメータを増加させることができ、観測点に存在する可能性のある環境条件をより良好に示すことができる。例えば、１つの実施形態では、ｐＨ、温度、及び組織のグラフィカル表示或いは他の表示を場合によっては並べて表示することができる。別の実施形態では、２つ又はそれ以上の情報ストリームを同時に表示して、例えば統一アルゴリズムを使用して単一のグラフィカル表示に組み合わせることができる。例えば、ｐＨと温度を単一のカラーバーに組み合わせることができ、この場合、例えば赤色が温度値を保持し、青色がｐＨ値を保持する（他の適切な値を使用してもよい）。医師は、マップ又は集計として観察する際にどのパラメータに関心があるかを選択することができる。同時に利用可能なパラメータの１つより多いセットを有すると、より多くの解剖学的部位の発見、及び、例えば病理を含む可能性のある領域の識別をより容易にすることができる。ケーススタディ又は他の適切なデータに基づいて多数のアルゴリズムを適用し、１つ又はそれ以上のカラーバー、或いは１つ又はそれ以上のカラーバーの組み合わせから取得された注意すべき部位又は他の情報を医師に示唆することができる。他の好適な表示マップ、情報集計、又はカラーバーを使用することもできる。

様々な形式のグラフィカル表示（例えばカラーバー、一連の輝度レベル、その他）の非限定的な実施例は、以下のものを含むことができる。
・組織のグラフィカル表示：組織の画像ストリームの輝度、パターン、又は他の視覚表現。
・温度のグラフィカル表示：経時的及び／又は体腔に沿って感知されたインビボの温度データの色、輝度、パターン又は他の視覚表現。
・ｐＨのグラフィカル表示：経時的及び／又は体腔に沿って感知されたインビボの温度データの色の輝度、パターン又は他の視覚表現。
・酸素飽和のグラフィカル表示：経時的及び／又は体腔に沿って感知された酸素飽和の色、輝度、パターン又は他の視覚表現。
・圧力のグラフィカル表示：経時的及び／又は体腔に沿って感知されたインビボ圧力の色、輝度、パターン又は他の視覚表現。
・血液検出のグラフィカル表示：経時的及び／又は体腔に沿って存在が感知された出血の色、輝度、パターン又は他の視覚表現。
・バイオセンサのグラフィカル表示：１つ又はそれ以上のバイオセンサから取得された結果の色、輝度、パターン又は他の視覚表現。
・速度のグラフィカル表示：動いているインビボ装置の速度の色、輝度、パターン又は他の視覚表現。
・空間位置のグラフィカル表示：経時的なインビボ装置の空間位置及び／又は向きの色、輝度、パターン又は他の視覚表現。
・超音波のグラフィカル表示：インビボ超音波プローブから感知されたデータの色、輝度、パターン又は他の視覚表現。
・運動性のグラフィカル表示：移動中のインビボ装置の感知された運動性の色、輝度、パターン又は他の視覚表現。

引用により全体が本明細書に組み込まれ、本発明の譲受人に譲渡された、名称「胃腸管内の運動性の解析（ＭＯＴＩＬＩＴＹ ＡＮＡＬＹＳＩＳ ＷＩＴＨＩＮ ＡＧＡＳＴＲＯＩＮＴＥＳＴＩＮＡＬ ＴＲＡＣＴ）」の公開国際特許出願ＷＯ０２１０２２２３は、とりわけ、本明細書に記載された装置、システム、及び方法と共に使用することができるインビボの運動性を判断するための装置、システム、及び方法を含む。本明細書に記載された装置、システム、及び方法を使用して、バー以外の適切な他の好適な表示及び他の適切な形式のデータを実施することができる。

ここで図６を参照すると、本発明の実施形態によるインビボ装置のデータストリームを表示するための方法のフローチャートが示されている。ブロック６１０で、例えば画像ストリーム、ｐＨデータストリーム、温度データストリーム、その他などを集計する、例えばカラーバー、変化する幅又は輝度の一連のストリップなどといったデータストリームの固定表示を表示することができる。ユーザは、例えば識別された解剖学的部位及び／又は生理学的事象など、固定表示の部分に注釈を入れることができる（ブロック６８０）。１つより多い固定表示を表示することもできる。ブロック６２０で、表示されたデータストリームからのデータをサンプリング及び／又は取り込むことができた時間を示す時間バーを表示することができる。時間バーを使用しなくともよい。表示されるべきデータストリームを開始することができ（ブロック６３０）、その結果、例えばストリーミング表示が開始されるようになる。ブロック６４０で、データストリームのストリーミングを開始することができる。表示されたデータストリームは、固定表示で表現されるデータストリーム以外のものとすることができる。例えばインビボ装置は、体腔を通って進むときに、例えば温度値をサンプリングするだけでなく画像を取り込むことができる。一例として、温度の値の固定表示は、実質的に同時に取り込まれた画像フレームのストリーミング表示と並べて表示することができる。他の実施例では、固定表示並びにストリーミング表示は、取り込まれた画像フレームのものとすることができる。ブロック６５０で、データストリームが進むときに、カーソル又は別のインジケータが、表示データストリームで表示されたデータ（例えば画像フレーム、ｐＨ値）に対応することができる固定表示上の位置（並びに時間バー）を指すことができる。ブロック６６０で、データストリームの異なるポイントから表示をストリーミングするようにコマンドを受け取ることができる。一例として、ユーザは、固定表示に沿ってカーソルをドラッグして、ストリーミングが始まるべきポイントを示すことができる。別の実施例ではユーザは、固定表示の部分に注釈を入れて（ブロック６８０）、ある点で注釈をクリックし、表示されストリーミングされたデータストリームの対応する点でデータストリームのストリーミングを開始することができる。ユーザの入力を受け取る他の適切な方法を実施してもよく、ユーザ入力による注釈を除く、他の好適な注釈方法を例えば本明細書で記載されたように実施することができる。ブロック６７０で、ストリーミング表示の開始点は、ユーザ入力で定義することができ、該情報を用いて、定義された点からストリーミングを開始するコマンドを実行することができる。他の動作又は一連の動作を使用してもよい。

種々の適切な方法を使用して、ソースデータストリーム（例えば画像ストリーム、一連の温度データ）から固定表示にデータを抽出することができる。ここで図７を参照すると、データ表示の固定集計（例えば本発明の実施形態による組織のカラーバー）を生成する方法が記載されている。例示的な実施形態において、ブロック５１０で、１セット（ここでセットは１つの要素を含むことができる）又は一連のデータ要素（例えば画像ストリームからのフレーム）を抽出することができる。例えば、画像ストリームから１０番目毎のフレームを抽出及び／又は選択して、固定表示に画像ストリームを表すことができる。別の実施形態では、全てのデータ要素又はフレームを含むことができ、或いは、５番目、２０番目、又は他のどのような適切なフレームの数でも使用することができる。本発明の更に別の実施形態では、２つ又はそれ以上のフレーム毎の平均を表す画像を使用してもよい。一例として、当該ブロックを代表するフレームのブロック（例えば２つ又はそれ以上のフレーム）から１つのフレームを定める基準を定義することができる。ブロック５２０で、色又は他の値（例えば輝度値）の平均のベクトルを計算することができる。本発明の１つの実施形態では、平均の色は、カラーが各フレームの定義された領域（例えば画像フレームの領域よりも小さな定義領域）で計算される。例えば、選択された一連のフレームでの各フレームの定義さられた領域における平均の赤色、青色、緑色の値を計算して、３つのベクトルを形成することができる。一例として、定義された領域は、例えば２５６×２５６ピクセルを含む画像フレームから取られた、例えば半径が１０２ピクセルの中心円とすることができる。別の実施例では、カラーバーを生成するために１つ又は２つだけの色を使用することができる。ブロック５３０で、平均の色値のベクトル（例えば赤、緑、青の３色ベクトル）に対して、例えばメジアンフィルタなどのフィルタを適用することができる。例示的なフィルタは、例えば、次の等式によって定義された長さを有することができる。
１＋２（ａｌｐｈａ＊Ｎ／Ｎｐ）；ａｌｐｈａ＝２．２
式中、Ｎは元のピクセルサイズ、Ｎｐは結果として得られた組織カラーバー表示の所望のピクセルサイズである。別の等式又は式を使用してもよい。

ブロック５４０で、結果として得られた組織カラーバー表示のピクセルサイズは、色のベクトルを所望のサイズにデシメートすることにより、例えば補間によって各色のベクトルを所望のサイズにデシメートすることによって設定することができる。

組織カラーバー又は他のデータ集計を生成する他の方法を実施することができる。１つの実施形態では、一連のデータ要素（例えば１つ又はそれ以上の個々の画像など）は、カラーバーなどのより大きな表示領域内のカラー領域又はカラーストリップといったデータポイントに変換することができる。各イメージ又はイメージのセットの平均の輝度値を求めることができ、更に、平均値に対応する幅、パターン、色、又は輝度のストリップのバー又は集成体を生成することができる。画像又は画像のセットの各々（に対応するｐＨ、圧力、又は温度などの値例えば画像及び他のデータの両方を収集する装置での）を求めることができ、平均値に対応する幅、色、又は輝度のストリップ又は他の画像ユニットのバー又は集成体を生成することができる。１つ又はそれ以上の画像は、対応する色のストリップに変換又は処理することができる。種々のデータ要素は、例えば平均化又は平滑化、その他などを使用して個々のデータポイントに共に結合することができる。１つの実施形態では、画像のルミネンスを正規化することができ、例えば組織色のデータの正規化された色度情報だけを表示して、例えば光源の寄与を排除することができる。画像化されたデータ以外にインビボで取得されたデータの他のカラーバー又は他の表示を生成してもよい。

データのカラーバー及び他の表示は、画像ストリームを評価するのに必要な観察時間を低減する一助とすることができる。本発明の１つの実施形態では、医療従事者は、関心のあるものである可能性のあるカラーバーに沿った領域を指すためにポインタ（例えばマウス）を使用することができる。グラフィカルユーザインターフェースは、データストリーム上の対応する場所までスキップさせることができ、その結果、医療従事者が、画像ストリーム全体を評価する必要もなく、関心領域に注目することができる。医療従事者は、組織のカラーバーによって定められた別の部分を観察するために、例えば速度を変えることができる。血液により示される病理などの特定の関心領域は、組織を通じて直接識別することができる。従って、医療従事者は、最初に組織のカラーバーを調べて、その後で初めて評価において画像のどのブロックに関心があるかを決定することができる。患者をスクリーニングするときには、組織カラーバーなどの１つ又はそれ以上のデータ表示の評価だけを使用可能としてもよい。別の実施例では、データストリームの集計されたグラフィカル表示は、例えば記録装置１２においてリアルタイムで生成し、記録装置１２に組み込まれたディスプレイ上にリアルタイムで表示することができる。

本発明の別の実施形態では、グラフィカル表示（例えばカラーバー）は、インビボデータの表示以外の他の目的でも使用することができる。例えばカラーバーは、例えばビデオなどのフレームの何らかのストリームを集計する表示として使用することができる。ビデオの集計されたグラフィカル表示（例えば本明細書で記載されたカラーバー）は、視聴者がビデオ内の別のシーンの位置を特定し、場合によっては当該シーンまで早送り、巻き戻し、又はスキップをするのに役立つことができる。例えば、屋外で撮影された可能性のある映画のシーンは、例えば、屋内で撮影されたその前後のシーンとは異なる配色を有することができる。カラーバーは、色のコンテンツテーブルに相似したものとすることができる。

本発明の実施形態の上記説明は、図示及び説明の目的で呈示されたものである。本発明は、開示された厳密な形態に対し網羅され又は限定されるものではない。上述の教示に照らして多くの修正、変形、代替、変更、及び均等物が可能であることは当業者には理解されるはずである。従って、添付の請求項は、本発明の真の精神の範囲内にあるこのような修正及び変更を全て保護されるものである点は理解されるべきである。

本発明の実施形態によるインビボ画像化システムの概略図である。 本発明の実施形態によるインビボで取り込まれた他のデータ及びカラーバーの表示の概略図である。 本発明の実施形態による識別された解剖学的部位に関するカラーバーの概略図である。 本発明の実施形態による例示的なｐＨ用カラーバーの概略図である。 本発明の実施形態による例示的な血液検出用カラーバーの概略図である。 本発明の実施形態による実質的に同時に観察することができる１つより多いカラーバーを備えたディスプレイである。 本発明の実施形態によるインビボデータを表示する方法を記載するフローチャートである。 本発明の実施形態による画像のストリームからカラーバーを構成するための方法を記載するフローチャートである。

符号の説明

２００ ディスプレイ
２１０ データストリーム
２２０、２３０ グラフィカル表示
２２２ ストライプ
２３０ 時間バー
２４０ 制御ボタン
２５０ インジケータ

Claims (16)

1. インビボデータを表示する方法であって、
   該方法がインビボ画像のストリームをディスプレイ上に表示する段階と、
   複数の個別のグラフィカルバーをディスプレイ上に表示する段階と、
   を含み、少なくとも第１のバーが前記画像のカラー表示の集計を含み、少なくとも第２のバーが、ある期間にわたる出血を含む、画像の視覚表現を含む
   ことを特徴とする、インビボデータを表示する方法。
2. 少なくとも１つの前記バーに沿った位置において記述マーカを表示する段階を含む請求項１に記載の方法。
3. 前記画像が嚥下可能インビボ装置によって撮られることを特徴とする請求項１に記載の方法。
4. 前記画像が胃腸管のものであることを特徴とする請求項１に記載の方法。
5. 少なくとも１つの前記バーに沿う点においてユーザ注釈を表示する段階を含む請求項１に記載の方法。
6. 少なくとも１つの前記バーに沿う点においてユーザ指示を受け取り、該指示に応答して、インビボ画像の前記ストリームが前記指示に対応する点から開始されるようにする段階を含む請求項１に記載の方法。
7. 前記複数の個別のグラフィカルバーが時間バーを含むことを特徴とする請求項１に記載の方法。
8. 少なくとも１つの前記複数のバーが一連の画像の平均カラー値を含むことを特徴とする請求項１に記載の方法。
9. インビボデータを表示するためのシステムであって、
   インビボ画像を撮るための嚥下可能撮像カプセルと、
   前記インビボ画像を受けとる計算装置とを備え、
   該計算装置はディスプレイを備え、
   該ディスプレイは、
   インビボ画像のストリームと、
   複数の個別のグラフィカルバーとを有しており、
   少なくとも第１のバーが前記画像のカラー表示の集計を含み、少なくとも第２のバーが、ある期間にわたる出血を含む、画像の視覚表現を含む
   ことを特徴とする、システム。
10. 前記撮像カプセルからの画像を受け取り、該画像を前記計算装置に伝送する受信ユニットを含むことを特徴とする請求項９に記載のシステム。
11. 前記ディスプレイが少なくとも１つの前記バーに沿う位置において記述マーカを表示するようになっていることを特徴とする請求項９に記載のシステム。
12. 前記画像が胃腸管のものであることを特徴とする請求項９に記載のシステム。
13. 前記ディスプレイが少なくとも１つの前記バーに沿う点においてユーザ注釈を表示することを特徴とする請求項９に記載のシステム。
14. 前記計算装置が少なくとも１つの前記バーに沿う点においてユーザ指示を受け取り、該ユーザ指示に応答して、インビボ画像の前記ストリームが前記指示に対応する点から開始されにようにすることを特徴とする、請求項９に記載のシステム。
15. 前記複数の個別のグラフィカルバーが時間バーを含むことを特徴とする請求項９に記載のシステム。
16. 少なくとも１つの前記複数のバーが一連の画像の平均カラー値を含むことを特徴とする請求項９に記載のシステム。

Images