JP5087544B2 - データストリームを表示するシステムおよび方法 - Google Patents

Description

本発明は、データストリームの表示に関し、特に、生体内（インビボ）データを表示するシステムおよび方法に関する。

周知の生体内画像装置には、胃腸管内部から画像を撮影する経口摂取可能カプセルがある。撮影した画像は、例えば、病理目的で医療従事者によって調べられるべく、外部ソースに送信されることがある。いくつかの実施形態では、生体内装置には、モニタリングや診断のための外部ソースにデータを送信する種々のセンサが含まれることがある。

生体内装置は、例えば胃腸管の管腔といった体腔に沿う様々な箇所からデータを収集し、そのデータを解析や診断のために外部へ送信することがある。胃腸管は非常に長く曲がりくねった経路であるため、送信された各データを得た位置が胃腸管のどこであるのかを示す適切な指標を得ることは困難なことがある。

時間バーは、データを精査する際に、画像ストリームに沿って進んだ距離を医療従事者に示すために使用されることが知られている。しかしながら、生体内装置は、例えば胃腸管などの体腔における様々な部位を異なる速度で進んだり止まったりするので、画像などの特定のデータを胃腸管のどこでまたはどれくらいの距離で取得したのかを明確に判断できない場合がある。さらに、生体内装置が例えば十二指腸、盲腸、胃腸管内の他の解剖学的部位といった特定の解剖学的マイルストーンに達した時間が、時間バー上に示されないこともある。

位置特定方法が適用されつつある。位置特定方法の中には、所与の時間における生体内装置の空間位置を示すものがある。その情報は時間推移記録を伴って、生体内装置の進行速度を医療従事者にさらに適切に示すことがあるものの、空間内における生体内装置の空間位置と、例えば胃腸管などの特定の解剖学的構造とを関連付けることはやはり困難である。

生体内装置は、非常に長い曲がりくねった経路に沿って、２つ以上のセンサからデータを収集し、その結果、生体内センサが取得した複数のデータストリームが得られる。複数の長いデータストリームを精査することは多大な時間を必要とし困難でもある。さらに、医療従事者にとって、取得した全データの内容の全体像をつかむことは難しい場合がある。

本発明の実施形態は、撮影した生体内データストリームの固定グラフィカル表示を生成して表示するためのシステムおよび方法を提供する。

本発明の一実施形態では、固定グラフィカル表示には、生体内データストリームのうち、取得された量または特徴に係る可変視覚的表現が含まれる。一例では、グラフィカル表示は、カラーバーや、データ項目バーまたは列の形であり、このデータ項目は、色、形状、大きさなどで識別される。カラーバーの各色または各濃度は、ビデオおよび／または画像ストリームにおける活動や活動の変化度合いを表す。本発明の一実施形態では、画像ストリームにおける活動の変化度合いは、体腔内の生体内装置の運動性レベルを示す。本発明の他の実施形態では、画像ストリームの活動は、病理診断などの他の情報を表す。本発明の別の実施形態では、固定グラフィカル表示はデータストリームのストリーミング表示と並べて表示される。

特許請求の範囲には、本発明であるとみなす主題が特に具体的に指摘され、明確に請求される。しかしながら、本発明の目的、特徴、および利点と共に、本発明の構成および操作方法は、以下の詳細な説明を添付図面と照合して読めば最も理解できるであろう。

図を簡略かつ明確にするために、図中の要素は必ずしも一定の縮尺で描かれていないことは理解されるであろう。例えば、一部の要素は他の要素に対して寸法を誇張して明確にしている。さらに、適切だと思われる場合には、参照符号を図中で繰り返し、同一要素または類似要素を示す。

特定の用途およびその要件に照らして供する本発明を、当業者が実施、利用できるように以下説明する。記載する実施形態に対する種々の変更は当業者には明らかであり、本明細書に定める一般原理は他の実施形態に適用され得る。従って、本発明は、開示する特定の実施形態に限定されるものではなく、本明細書に開示する原理および新規の特徴に合致する最も広い範囲が与えられるものとする。本発明を十分に理解できるよう以下に具体的な詳細を多数説明する。しかしながら、当業者は、これらの具体的な詳細がなくとも本発明を実施できることがわかるであろう。場合によっては、周知の方法、手順、ならびに構成部品は、本発明を理解しやすくするために詳細に説明しない。

本発明の実施形態は、例えば、画像ストリーム、他の非画像データ、胃腸管に沿って生体内で収集した、色分けした画像データなどの他のデータ（例えばｐＨデータ、温度データ等）といった、取得したデータストリームに係る固定グラフィカル表示を生成する装置、システム、および方法を提供する。要約グラフィカル表示には、例えば変化する視覚的表現が含まれる。その例としては、色分けした表示や、収集した量および／またはデータを少なくとも部分的に示す一連の色（例えば、バー上に表示された各々がパラメータの値を表す一連の色）などがある。しかしながら、他の適切な表現を使用してもよく、さらに、輝度、サイズ、幅、パターンなどの他の視覚的特徴または特性を使用してもよい。本発明のいくつかの実施形態では、要約グラフィカル表示はデータストリームのストリーミング表示と並行した固定表示である。

本発明の一実施形態では、表示は、変化する量（例えば取得したデータストリーム）をマップ化し、取得したデータストリームと取得したデータストリームの先頭に対する解剖学的始点または解剖学的位置（例えば、取得した種々データの起源となる胃腸管などにおける、対応する位置、近似位置、完全に一致する位置など）との関係を示す。本発明の他の実施形態では、マップ化によって、例えば、取得した事象、測定した事象、取得した事象（例えば生理的事象）を示す。本発明のさらに別の実施形態では、マップ化によって、例えば経時的に測定した１つ以上のパラメータの変化を示す。その変化は、例えば、病態に起因する変化、局部環境の自然な変化、その他の関連する変化に起因するものなどである。位置は、例えば胃腸管に係る解剖学的属性といった、他の情報と相関関係があり、いくつかの実施形態では、時間に基づく位置、生体内情報取得装置の位置に基づく位置、連続した画像の画像フレームに基づく位置といった、絶対位置である。

ここで、図１を参照する。図１には、本発明の一実施形態に係る生体内センシングシステムの概略図が示されている。画像センシングシステムなどの生体内センシングシステムは一般的に生体内センシング装置４０を備えている。この生体内センシング装置４０は、画像を撮影するための撮像装置４６と、体腔を照明するための照明源４２と、生体内センシング装置４０に電力供給するための電源４５と、画像データおよび場合によっては他のデータを外部受信器１２に送信するための、アンテナ４７を有する送信器４１とを含む画像装置であり得る。撮像装置４６は、ＣＣＤ撮像装置、ＣＭＯＳ撮像装置、他の固体撮像装置、またはその他の適切な撮像装置である。本発明のいくつかの実施形態では、生体内装置４０は、撮像装置４６の他に、温度センサ、ｐＨセンサ、圧力センサ、血液センサなどの１つ以上のセンサ３０を備えてもよい。また、本発明のいくつかの実施形態では、生体内装置４０は、自律型装置、カプセル、または嚥下可能なカプセルであってもよい。本発明の別の実施形態では、生体内装置４０は自律型でなくともよく、例えば、内視鏡またはその他の生体内画像センシング装置であってもよい。

本発明の実施形態によれば、生体内画像装置４０は、一般に、被検対象に近接または装着可能な外部データ受信器および／または記録器１２に、情報（例えば、画像や他のデータ）を送信する。概して、データ受信器１２は、アンテナまたはアンテナアレイ１５と、データ受信器記憶装置１６とを備える。もちろん、データ受信器および／または記録器１２は別の適切な構成を採用してもよく、アンテナまたはアンテナアレイを備えていなくともよい。本発明のいくつかの実施形態では、受信器は、例えば画像データを表示するためのＬＣＤディスプレイおよび処理能力を有する。

データ受信器および／または記録器１２は、受信したデータをワークステーションやパーソナルコンピュータなどのさらに大きなコンピュータ装置１４に転送し、コンピュータ装置１４でデータを解析したり、保存したり、ユーザに表示したりする。一般に、コンピュータ装置１４は、処理装置１３とデータ処理記録装置１９とモニタ１８とを備えている。また、コンピュータ装置１４は一般的には、パーソナルコンピュータやワークステーションであり、処理装置１３、記憶装置や記憶容量などのメモリ１９、ディスクドライブ、モニタ１８、入出力装置などの標準的な構成部品を備えているが、他の構成も可能である。通常、処理装置１３は、その機能の一部として、データ（例えば、画像データや他のデータなど）の表示を制御するコントローラとして機能する。モニタ１８は、一般的には、従来のビデオディスプレイであるが、画像データや他のデータを提供できれば、どのような装置であってもよい。本発明の実施形態に係る方法を実施するためのソフトウェアや指示は、例えばメモリ１９に記憶し、コンピュータ装置１４の一部として備えてもよい。

他の実施形態では、各構成部品は必ずしも必要ではなく、例えば、生体内装置４０がデータを表示装置またはコンピュータ装置１４に有線などで直接送信するか転送する。
本発明の実施形態での使用に適した生体内画像システムは、米国特許出願公開第２００３／００７７２２３号、米国特許第５，６０４，５３１号、または米国特許出願公開第２００１／００３５９０２号に記載の各種実施形態と同様である。米国特許出願公開第２００３／００７７２２３号は、名称「胃腸管内の運動性解析（Ｍｏｔｉｌｉｔｙ Ａｎａｌｙｓｉｓ ｗｉｔｈｉｎ ａ Ｇａｓｔｒｏｉｎｔｅｓｔｉｎａｌ Ｔｒａｃｔ）」で、２００３年４月２４日に公開され、本出願の譲受人に譲渡されたものであり、参照により全体が本明細書に組み込まれる。米国特許第５，６０４，５３１号は、名称「生体内ビデオカメラシステム（Ｉｎ−Ｖｉｖｏ Ｖｉｄｅｏ Ｃａｍｅｒａ Ｓｙｓｔｅｍ）」で、本出願の譲受人に譲渡されたものであり、参照により全体が本明細書に組み込まれる。米国特許出願公開第２００１／００３５９０２号は、名称「生体内画像装置およびシステム（Ｄｅｖｉｃｅ ａｎｄ Ｓｙｓｔｅｍ ｆｏｒ Ｉｎ−Ｖｉｖｏ Ｉｍａｇｉｎｇ）」で、２００１年１１月１日に公開され、本出願の譲受人に譲渡されたものであり、参照により全体が本明細書に組み込まれる。

他の構成を有する他の生体内システムを使用してもよい。もちろん、本明細書に記載するような装置、システム、構造、機能、および方法は、他の構成、構成部品一式、プロセスなどを有していてもよい。

本発明の実施形態は、センシング装置が胃腸管や他の管などの体腔の内部にあるときに、および／または移動しているときに経時的に検出したパラメータを、典型的には簡潔にしたおよび／または要約したグラフィカル表示を生成するための装置、システム、および方法を含む。生体内装置が取得したデータストリームを見ること、例えば摂取可能な画像カプセルから送信された画像ストリームを見ることは、長時間を要する作業である。取得したデータを要約表示することは、例えば取得したデータの視覚的表現および／またはマップを提供し、また、そのデータストリームを精査している医療従事者の注意を関心領域に集中させるのに役立ち、また、見ているデータの起源と内容についての医療従事者の理解を深めることができる。

上記センシング装置から取得したデータの１つ以上のストリームを処理し、１つ以上の要約表示を作成する。この要約表示は、例えば、グラフィカルユーザインターフェース（解析ソフトウェアのグラフィカルユーザインターフェースなど）に表示される。

一実施形態によれば、データストリーム（画像のストリーム、一連の画像、一連のｐＨデータなど）は、場合によってはグラフィカルユーザインターフェースを介してモニタ１８上に、或いはデータストリームを取得するのと同時に受信器１２のＬＣＤディスプレイ上に表示されるカラーバーなどのバーを用いて表示される。表示には、生体内データストリームの一部（例えば画像フレーム）において取得した変化量などを表す、量や特性等の可変視覚的表現が含まれる。一例では、この特性は色である。また、表示は一般に、ディスプレイの他の部分に例えばストリーム表示されている画像データや他のデータを要約したものである。さらに、表示は、バー、ストライプ、ピクセル、他の要素といった、複数の画像項目或いはデータ項目を連続して組み立ててなり、例えば、各々が画像フレームに対応する複数のストリップを含むバーが挙げられる。表示の一部は、例えば、表示されたフレーム或いはデータ項目の全体的な配色、輝度、ｐＨレベル、温度、圧力、または他の量に係る要約を表している。その他の機構を使用して、データ要素の濃度、形状、長さ、他の特性といったデータをバー或いはディスプレイ内に、または他の機構内に表示してもよい。

図２を参照すれば、生体内で取得したデータを表示するためのディスプレイおよび／またはグラフィカルユーザインターフェース２００が示されている。ディスプレイ２００には、例えばカラーバーなどの、生体内データストリームの要約グラフィカル表示２２０が含まれる。一般に、要約グラフィカル表示２２０は、データストリームのストリーミング表示２１０と並べて表示される固定表示にすることができる。データストリームは、例えば、本発明のいくつかの実施形態では、画像ストリームである。本発明の別の実施形態では、要約グラフィカル表示２２０は別々に表示することができる。要約グラフィカル表示２２０には、一連の色、一連のカラー領域、或いは一連のパターン、画像項目、画像またはピクセル群（例えば、さらに大きなバーまたは矩形領域を形成するために配列した一連のカラー領域またはストライプ２２２）が含まれてもよい。一連のストライプ２２２における各色は、例えば、元のデータストリームの要素または要素群と、関連付けおよび／または対応付けがなされている。例えば、各カラーストライプ２２２は、表示されているデータストリーム２１０の１つの画像または１つの画像群に対応づけられてもよい。ストライプ以外の画像単位（例えば、ピクセル、ブロックなど）を使用してもよく、また、色以外の特性（例えば、パターン、サイズ、幅、輝度、動画など）が変化してもよい。１つの画像単位（例えば１本のストライプ２２２）は、元のデータストリームにおける１つ以上の単位（例えば画像フレーム）を示す。例えば、バー上の一連の色は、一般に、画像または画像群といったデータストリームが通常表示されるのと同じ順序で配列される。本発明の一実施形態では、グラフィカル表示２２０のストライプを指すことによって、そのストライプに対応するフレームに画像ストリームを進めることができる。

カラーバーは、例えばデータストリームの各要素（画像フレームなど）または要素の各サブグループに色を割り当て、表示される特性の変化を強調できるように一連の色を処理することによって生成されてもよい。本発明の一実施形態では、一連の色は、例えば付随ビデオのキューポイントを強調するために処理され、それにより、例えば関心部分を示すための補助ツールとして使用できる。本発明の一実施形態では、データストリーム表示２１０は、本明細書に記載の１つ以上のバーおよび／またはグラフィカル表示（２２０および２３０）と並べて表示されてもよい。データストリーム表示２１０は、例えばグラフィカル表示２２０に示されたデータ（取得した生体内画像ストリームなど）に係る表示、もしくはグラフィカル表示２２０に示されたデータと同時に或いは実質的に同時に取得および／またはサンプル抽出した他のデータに係る表示である。一例では、データストリーム表示２１０（例えばビデオ表示）のうち、実質的に対応するデータが表示されて、グラフィカル表示２２０とデータストリーム表示２１０との対応関係が示されると、マーカー、スライダー、カーソル、またはインジケータ２５０がグラフィカル表示２２０を横断して、またはそれに沿って動く。本発明の別の実施形態では、表示はバー以外の形状で、例えば、円、楕円、正方形などであってもよい。別の実施形態では、表示は、オーディオトラック、グラフ、他の適切なグラフィカル表示の形態であってもよい。

カーソルやアイコンなどのインジケータ２５０は、画像ストリーム表示２１０がディスプレイ２００上でストリーミング再生（streamed）されたりスクロールされると、時間バー２３０および／またはグラフィカル表示２２０に沿って移動する。一例では、例えば画像ストリームの早送り、巻き戻し、再生停止、或いは最初や最後の頭出しをユーザが実行できる制御ボタン２４０をディスプレイ上に備えてもよい。本発明の他の実施形態では、ユーザは、例えば、マウスや他の位置決め装置を用いてカーソル２５０の位置を動かして、関心領域へスキップするなどし、ストリーミング表示の開始位置を変更することで、データストリーム表示２１０を制御できる。本発明の別の実施形態では、ユーザおよび／または医療従事者が、サムネイルなどのしるしや目印を挿入して画像ストリームに沿った位置にしるしをつけ、後でその位置に簡単にアクセスできる。例えば、医療従事者はマウスやキーボードなどの位置決め装置を使用して、グラフィカル表示２２０上に、これらのマイルストーンをしるしてもよい。本発明の譲受人に譲渡され、２００２年１１月２１日に公開された、名称「動画の付注システムおよび方法（Ｓｙｓｔｅｍ ａｎｄ Ｍｅｔｈｏｄ ｆｏｒ Ａｎｎｏｔａｔｉｏｎ ｏｎ ａ Ｍｏｖｉｎｇ Ｉｍａｇｅ）」であって、参照により全体が本明細書に組み込まれる米国特許出願公開第２００２／０１７１６６９号に記載のいくつかの実施形態には、画像ストリームの一部に目印または注釈を入れる方法および装置が含まれている。このような方法を、本発明の実施形態と組み合わせて使用してもよい。また、他の適切な方法を用いて、データストリームに目印や注釈をつけてもよい。ユーザはサムネイルを「クリック」して、関心のあるデータの位置（例えば画像フレーム）まで送るか、グラフィカル表示２２０をクリックして関心のある画像フレームまで送ったり、巻き戻したりする。そして、例えば、所望の関心地点からデータストリームを流したり見たりすることを続ける、あるいは開始することができる。

サムネイルまたは他の目印は、データストリーム表示２１０に示された関心のある画像フレームや、グラフィカル表示２２０上で識別された位置や、時間バー２３０上におよび／または直接グラフィカル表示２２０上に記録された時間を基にして定めることができる。他の適切な方法を使用して、サムネイルや、他の目印や、注釈を定めてもよい。例えば、コンピュータアルゴリズムを使用して、医療従事者などにとって関心があるであろうサムネイルを識別してもよい。アルゴリズムを用いたサムネイルもまた、例えばデータストリーム表示２１０のうちの関心のある画像や、グラフィカル表示２２０上で識別された位置や、時間バー２３０上に記録された時間を基にしていてもよく、もしくは他の方法に基づいていてもよい。別の実施形態では、グラフィカル表示２２０自身が一連のカラーサムネイルであり、その結果、ユーザはカラーバーの色を指すか「クリック」して、データストリーム内の異なる地点からストリームの表示を再開させることができる。

図３は、本発明の実施形態に係る組織カラーバーなどのグラフィカル要約を示す概略図である。組織のグラフィカル表示２２０は、例えば胃腸管の組織を画像にする撮像装置４６から取得した画像ストリームの画像処理を通して取得される。また、他の管腔や、他の特徴的属性（例えば温度）を検出できる。組織のグラフィカル表示２２０は、例えば取得した画像ストリームを圧縮、短縮し、場合によっては平滑化したものを表し、これにより、バー上の水平カラーストリップの頂部が取得した最初の画像、または最初の代表的画像、または最初の画像群を表すことができる。また、水平カラーストリップの底部は、取得した最後の画像、または最後の代表的画像、または画像の最後の一組を表すことができる。他の実施形態では、画像ストリームおよび／または他のデータストリームの一部のみを表示してもよい。さらに別の実施形態では、グラフィカル表示２２０は水平方向であって、バー上の左側の垂直カラーストリップが取得した最初の画像、または最初の代表的画像、または最初の画像群を示し、右側の垂直カラーストリップが取得した最後の画像、または最後の代表的画像、または画像の最後の一組を示していてもよい。さらに別の実施形態では、グラフィカル表示２２０は、体腔内を移動する生体内装置の２次元的または３次元的経路を記録する曲線形状であってもよい。

本発明の一実施形態では、経時的に組織から取得した画像フレームの配色は、例えば生体内画像装置４０が胃腸管に沿って移動するときに変化する。画像の配色の変化を用いて、例えば、特定の解剖学的部位（十二指腸、盲腸、他の部位など）の通過を識別し、出血などの病態を示すことができる。また、要約した簡潔なカラーバーに組織の画像ストリームを表示する際、カラーストリームの変化を容易に識別することができる。例えば、盲腸への移動は、大腸に典型の色（例えば、大腸で発見される組織に特有の色または内容物を示す色）によって識別することができる。十二指腸への進入は、小腸の組織に特有の別の色によって識別できる。別の解剖学的部位は、カラーバー（例えば、組織のカラーバー）上のカラーストリームおよび／または変化するカラーストリームをよく見ることで識別が可能である。別の実施形態では、例えばポリープの有無や出血などの病態を、組織のグラフィカル表示２２０を見ることで識別する。特定の関心領域（血液によって示される病態など）は、組織を介して直接識別され得る。従って、医療従事者は、最初に組織のグラフィカル表示２２０を調べ、その後、画像のどの部分を精査するかについて決定できる。本発明のいくつかの実施形態では、アルゴリズムを使用して、このようなカラーバーのデータによって解剖学的部位や病理や関心領域を識別し、例えば表示されたカラーバーに沿って関心領域にしるしをつけることで、それらに対して医療従事者の注意を促してもよい。医療従事者は、組織のカラーバーに沿ったサムネイルや目印（例えば、胃の最初の画像３２０に係る目印、十二指腸の最初の画像３３０に係る目印、盲腸の最初の画像３４０に係る目印）を使用して、データストリーム表示２１０に表示中のデータが胃腸管のどこから生じたのか、位置を特定することができる。画像を取得した領域を識別することにより、見ている画像が健常な組織を示しているのか病的な組織を示しているのかを医療従事者が判断する手助けとなり、また、医療従事者が他の関心のある状態を判定する手助けとなり得る。

いくつかの実施形態によれば、例えばデータストリームの変化を強調するために、種々の色や他の視覚的表示、陰影、色調、サイズや幅などを、処理したデータストリームに意図的に追加してもよい。他の処理方法を用いて、ユーザに呈示する情報を誇張してもよい。本発明の一実施形態では、決定規則に基づいて選択したピクセルに平滑化を行ってもよいし、行わなくともよい。例えば、本発明の一実施形態では、腸内の内容物を示す暗いピクセルまたは緑のピクセルに平滑化を施さない。

ここで、図４Ａおよび４Ｂを参照する。両図には、組織カラーバー以外の、バー形状、或いは一連のデータ要約または抽出形状のグラフィカル表示の一例が示されている。例えば、図４Ａは、経時的または体腔の経路などに沿って取得したｐＨ測定値をマップ化するｐＨカラーバー２２５を概略的に示す例である。また、温度、血液センサ、圧力の測定値などの他の測定値を用いてもよく、生体内ｐＨセンサから取得したデータは、色、輝度、および／またはパターンを用いて表示され、経時的におよび／または胃腸管などの経路にわたって、ｐＨがマップ化され、それぞれの色が例えばそれぞれのｐＨレベルを示してもよい。他の例では、それぞれの色がｐＨレベルの変化レベルをそれぞれ表している。また、他の適切な表示を示してもよい。経路に沿ったｐＨの変化は、病態や、解剖学的部位への進入出などに起因する。認められた経時的ｐＨの変化によって、例えば、経時的な生理的事象（治癒プロセス、病状の進行、病理など）が分類され得る。図４Ｂは、血液検出用カラーバー２２６の概略図を示す。一例では、バーに沿ったカラーストライプ２２２は、血液が検出された部位を示す。本発明の他の実施形態では、グラフィカル表示を使用して、生体内装置以外のソースから取得した情報（例えば、生体内装置を装着している患者から取得した情報や、受信器１２やワークステーション１４から取得した情報）のストリームをマップ化および／または表示してもよい。例えば、患者は、受信器１２の入力装置を介して、覚えた感覚や他の事象に対応する標識を入力する。情報は他の適切な形で示されてもよい。グラフィカル表示２２０はパラメータの色表現であってもよく、また、画像ストリームを関連付けたパラメータの色分けした表示であってもよい。

本発明の一実施形態では、表現、すなわちカラーバー２２６は、ある期間にわたって出血があることを示す。本発明の譲受人に譲渡され、名称が「固定可能な生体内センシング装置（Ａｎ Ｉｍｍｏｂｉｌｉｚａｂｌｅ Ｉｎ Ｖｉｖｏ Ｓｅｎｓｉｎｇ Ｄｅｖｉｃｅ）」であって、参照により全体が本明細書に組み込まれる米国特許出願公開第２００２／００４２５６２号は、特に、術後部位に固定する装置（カプセルなど）に係る実施形態を記載している。米国特許出願公開第２００２／００４２５６２号に記載された実施形態を、本明細書に記載のシステムおよび方法と組み合わせて使用し、生体内部位のデータを経時的に取得し、送信してもよい。取得したデータの表示（例えばカラーバー）は、その時の静止状態から経時的に生じる、いかなる変化をも示し、画像毎にストリーム全体を精査することなしに、組織の経時的治癒状態や変化状態に係る全体像を示すことができる。

ここで、図５を参照する。図５は、生体内データのストリーミング表示２１０を見るためのグラフィカルユーザインターフェースを、データストリームの複数の固定要約グラフィカル表示（例えば、表示２２０、２２５、２２６）と共に概略的に示している。単一のスクロール用カーソル２５０を時間バー２３０と共に使用して、表示中のデータ表示２１０がバーに沿った位置のうち、どこで発生したのかを示すために、データストリームの固定表示（例えば２２０、２２５、および２２６）に沿った位置を指し示す。個々の要約（カラーバーなど）には、例えば、組織のグラフィカル表示２２０、ｐＨカラーバー２２５、血液検出用カラーバー２２６などが含まれる。しかしながら、その他多数のグラフィカル表示や、他のデータを要約する別の適切な種類のバーや、他の適切な種類の表示を使用してもよい。

複数のグラフィカル表示は、データストリームにおける関心部位の位置を特定するのに有用であるだけでなく、病状の診断にも役立つ。複数のグラフィカル表示によって、例えば画像ストリームを精査する際に、医療従事者が利用できるパラメータが増加し、測定の時点で存在したであろう環境状態をさらに良好に示すことができる。例えば、一実施形態では、ｐＨ、温度、および組織のグラフィカル表示、または他の表示は、場合によっては並べて表示されてもよい。別の実施形態では、２つ以上の情報ストリームを同時に表示して、例えば一元化アルゴリズムを用いて、１つのグラフィカル表示に結合する。一例では、ｐＨと温度を１つのカラーバーにまとめて、例えば赤色が温度値を示し、青色がｐＨ値を示してもよい（他の適切な色を使用してもよい）。

医師は、図または要約として見たいパラメータを選択する。２組以上のパラメータを同時に利用できるようにすることで、さらに多くの解剖学的部位を見つけ、例えば病態を含む可能性がある領域を識別することがいっそう容易になる。ケーススタディや他の適切なデータに基づく多数のアルゴリズムを応用し、１つ以上のカラーバーから、或いは１つ以上のカラーバーから成る組み合わせから取得した警戒部位や他の情報を医師に提示することができる。別の例では、１つのパラメータ（例えば、シーンの変化レベル（level of change in scenery）、運動性、または他のパラメータ）を表すグラフを、同一のパラメータまたは他のパラメータを示すカラーバー上に重ね合わせるか構築する。例えば、シーン変化レベルを示すグラフを組織のカラーバーに重ね合わせる。また、他の好適な表示図や、情報要約や、カラーバーを使用してもよい。

各種のグラフィカル表示（例えばカラーバー、一連の輝度レベルなど）の非限定的な例として、以下のものがある。
・組織のグラフィカル表示：組織の画像ストリームに係る、輝度、パターン、または他の視覚的表現
・温度のグラフィカル表示：経時的におよび／または体腔に沿って検知した生体内の温度データに係る、色、輝度、パターン、または他の視覚的表現
・ｐＨのグラフィカル表示：経時的におよび／または体腔に沿って検知した生体内の温度データに係る、色、輝度、パターン、または他の視覚的表現
・酸素飽和度のグラフィカル表示：経時的におよび／または体腔に沿って検知した酸素飽和度に係る、色、輝度、パターン、または他の視覚的表現
・圧力のグラフィカル表示：経時的におよび／または体腔に沿って検知した生体内の圧力に係る、色、輝度、パターン、または他の視覚的表現
・血液検出のグラフィカル表示：経時的におよび／または体腔に沿って検知した出血の有無に係る、色、輝度、パターン、または他の視覚的表現
・バイオセンサのグラフィカル表示：１つ以上のバイオセンサから取得した結果に係る、色、輝度、パターン、または他の視覚的表現
・速度のグラフィカル表示：移動中の生体内装置の速度に係る、色、輝度、パターン、または他の視覚的表現
・空間位置のグラフィカル表示：生体内装置の経時的な空間位置および／または向きに係る、色、輝度、パターン、または他の視覚的表現
・超音波のグラフィカル表示：生体内超音波プローブから検出したデータに係る、色、輝度、パターン、または他の視覚的表現
・運動性のグラフィカル表示：検出した、可動生体内装置の運動性に係る、色、輝度、パターン、または他の視覚的表現
・シーン変化レベル：可動生体内装置が取得した画像ストリームの連続フレームにおける、検出したシーンの変化レベルや、検出した画像内容および／またはグラフィカル内容の変化レベルに係る、色、輝度、パターン、または他の視覚的表現
名称「胃腸管内の運動性解析（Ｍｏｔｉｌｉｔｙ Ａｎａｌｙｓｉｓ ｗｉｔｈｉｎ ａ Ｇａｓｔｒｏｉｎｔｅｓｔｉｎａｌ Ｔｒａｃｔ）」の米国特許出願公開第２００３／００７７２２３号には、生体内の運動性を決定する各種装置、システム、および装置が記載されているが、これらを本発明書に記載の装置、システム、および方法と組み合わせて使用してもよい。本発明の実施形態では、米国特許出願公開第２００３／００７７２２３号に記載の装置、システム、および方法は、連続した画像フレーム間を比較し、それに基づいて運動性を決定する。一例では、１つ以上の連続した画像フレームまたはフレーム群の間の、濃度、色、または他の適切なパラメータの変化は、生体内装置が移動したか、移動させられたことを示す。本発明の一実施形態では、変化は、例えば米国特許出願公開第２００３／００７７２２３号に記載されるように、連続した群または１つ以上の連続した画像フレーム間の、濃度、色、または他の適切なパラメータの平均変化であって、シーン変化の程度、画像内容、画像詳細、および／またはグラフィカル内容の変化程度として使用してもよい。他の方法を用いてシーン変化を示してもよい。連続した画像間のシーン変化は、例えば取得した画像ストリームにおけるシーン変化レベルまたは変化度合いによって数量化する。連続した画像間または連続した画像群間のシーン変化レベルの例として、緩やかな変化、中程度の変化、著しい変化、劇的な変化が挙げられる。このようなレベルは、連続した画像フレーム間の１つ以上のパラメータにおける変化や、他の数量化手段に基づいている。シーン変化を数量化する別の方法や別のレベル数を使用してもよい。また、米国特許出願公開第２００３／００７７２２３号に記載された装置、システム、および方法を、画像ストリームにおけるシーン変化レベルを広義に決定するために実施してもよい。

米国特許出願公開第２００３／００７７２２３号に記載されているように、本発明のいくつかの実施形態では、経時的にまたは画像のストリーム中に測定したシーン変化レベルは、体腔内を移動可能なおよび／または進行する生体内装置の運動性を示している。本発明の別の実施形態では、シーン変化レベルまたは変化程度は、それ以外のものを示してもよい。一例では、２つ以上の連続した画像間の重複度合いまたは重複量、或いは類似性は、当業界に周知の画像処理方法（例えば、運動追跡方法）に従って決定される。運動追跡方法の例として、特に、フレーム間の画像レジストレーション方法、運動ベクトル方法、オプティカルフロー計算方法、または他の周知の方法が挙げられる。一例では、運動追跡エラーは、シーン変化レベルが高い或いは最も高いことを示す。一実施形態では、連続した画像間に見られる重複度合い、重複量、または重複比率、或いは、重複領域を共有している連続した画像の数は、シーン変化レベルを示す。多数の連続した画像または連続した画像群が重複領域を共有する場合、連続した画像群が取得した時間に対応する期間のシーン変化レベルは低いと考えられる。他の例では、連続した画像間で重複領域が認められない場合または、２つの連続した画像間でわずかな比率の重複しか認められない場合、シーン変化レベルは高いと考えられる。本明細書に記載の装置、システム、および方法を使用して、バー以外の適切な表現や、他の適切な種類のデータを実現してもよい。

ここで、図６を参照する。図６は、本発明の実施形態に係る生体内データストリームの表示方法を示すフローチャートである。ブロック６１０では、例えば画像のストリーム、ｐＨのデータストリーム、温度のデータストリームなどを要約して、カラーバーや、変化する幅または輝度の一連のストリップといった、データストリームの固定表示が示される。ユーザは、固定表示の部分（例えば、識別された解剖学的部位および／または生理的事象）に注釈を入れる（ブロック６８０）。本発明の別の実施形態では、ユーザは、固定表示における、色、特徴、または他の表現の１つ以上の発生を検索することができる。また、２つ以上の固定表示を同時に表示してもよい。ブロック６２０では、表示されたデータストリームからデータのサンプル抽出および／または取得した時間を示す時間バーが表示される。しかし、時間バーを使用しなくともよい。表示するデータストリームを開始させ（ブロック６３０）、例えばストリーミング表示を始める。一例では、この開始は、制御バー２４０（図２）を介するユーザ入力によって実現される。ブロック６４０で、データストリームのストリーミングが始まる。表示されるデータストリームは、固定表示で表現するデータストリーム以外のものであってもよい。例えば、生体内装置は、体腔を進みながら、画像を取得するだけでなく、温度値などをサンプル抽出する。一例では、温度値の固定表示は、実質的に同時に取得した画像フレームのストリーミング表示と並べて表示される。他の例では、ストリーミング表示だけでなく固定表示も取得した画像フレームのものであってもよい。ブロック６５０では、データストリームの進行につれて、カーソル、アイコン、或いは別のインジケータが、表示されたデータストリームにおいて表示されたデータ（例えば、画像フレーム、ｐＨ値）に対応する固定表示（ならびに時間バー）上の位置を指したり、画面上でラベルをつけることができる。ブロック６６０では、データストリームの別の地点から表示を流す指令を受け取る。一例では、ユーザは、固定表示に沿ってカーソルをドラッグし、ストリーミングを開始すべき地点を示す。別の例では、ユーザは、固定表示の部分に注釈を入れて（ブロック６８０）、ある時点でその注釈をクリックし、ストリーム表示されたデータストリーム中の対応する地点でデータストリームを流し始める。しかしながら、ユーザ入力を受け付ける他の適切な方法や、例えば本明細書に記載するようなユーザ入力による注釈以外の他の好適な付注方法を実施してもよい。ブロック６７０で、ストリーミング表示の開始位置がユーザ入力によって定められ、その情報をもって、定められた地点からストリーミングを開始する指令を遂行してもよい。また、他の操作または一連の操作を使用してもよい。

種々の適切な方法を利用して、データを原始データストリーム（例えば、画像ストリーム、一連の温度データ項目）から固定表示に要約することが可能である。ここで、図７を参照する。図７には、本発明の実施形態に係る、組織カラーバーなどの固定要約データ表示を生成する方法が記載されている。例示的な実施形態では、ブロック５１０において、一組のデータ項目（一組は１つの項目でもよい）または一連のデータ項目を抽出する。データ項目とは、例えば、画像ストリームのフレームである。例えば、画像ストリームの１０コマ毎に画像フレームを抽出および／または選択して、固定表示に画像ストリームを表す。別の実施形態では、全てのデータ項目またはフレームであってもよい。または、５コマ毎、２０コマ毎、または他の適切なフレーム数毎にしてもよい。本発明のさらに別の実施形態では、フレーム群を表す画像（例えば、２コマ以上のフレーム毎の平均）を使用する。一例では、ひとかたまりのフレーム（例えば、２コマ以上のフレーム）から１コマのフレームを定め、そのかたまりの代表とすることで基準を定義する。ブロック５２０では、色平均値や他の平均値（例えば輝度平均値）のベクトルおよび／またはストリームを計算する。本発明の一実施形態では、平均色は、各フレームの定義された領域で計算される。定義された領域とは、例えば画像フレーム領域より小さな領域である。例えば、選択した一連のフレームにおける各フレームの定義領域に係る、赤色平均値、青色平均値、緑色平均値を計算し、３色ベクトルおよび／またはストリームを形成する。一例では、定義領域は、例えば２５６×２５６ピクセルを含む画像フレームから取得した、例えば半径が１０２ピクセルの、中心に位置する円である。別の例では、１色または２色のみを使用してカラーバーを生成する。ブロック５３０では、例えば中間値フィルタなどのフィルタを色平均値のベクトル（例えば、赤、緑、青の３色ベクトル）に施す。例示的なフィルタは、例えば、次の数式によって定義される長さを有する。

１＋２（ａｌｐｈａ＊Ｎ／Ｎｐ）；ａｌｐｈａ＝２．２
式中、Ｎは結果として得られる組織カラーバー表示の元のピクセルサイズを、Ｎｐは結果として得られる組織カラーバー表示の所望のピクセルサイズを示す。しかしながら、他の数式または式を使用してもよい。

ブロック５４０において、色ベクトルを所望のサイズに縮小処理する（decimate）ことで、結果として得られる組織カラーバー表示のピクセルサイズを設定する。例えば、補間によって各色のベクトルを所望のサイズに縮小処理する。

組織カラーバーまたは他のデータ要約を生成する別の方法を実施してもよい。一実施形態では、一連のデータ項目（例えば１つ以上の個別の画像など）は、カラーバーなどの表示領域内に、それより小さなカラー領域またはカラーストリップといったデータポイントに変換される。各画像または画像の各組の輝度平均値を求め、その平均値に対応する幅、パターン、色、または輝度のストリップから成るバーまたは集合体を生成する。例えば、画像と他のデータとを収集する装置においては、各画像または画像の各組に対応する、ｐＨ、圧力、温度などの値を求め、その平均値に対応する幅、色、または輝度のストリップまたは他の画像単位から成るバー或いは集合体を生成してもよい。１つ以上の画像を、対応するカラーストライプに変換または処理してもよい。種々のデータ項目を、例えば平均化や平滑化などを用いて、個別のデータポイントに結合してもよい。一実施形態では、画像の輝度を標準化して、組織の色などのデータに係る標準化した色彩情報のみを表示し、例えば光源の寄与を排除することができる。画像データ以外の生体内で取得したデータに関する他のカラーバーまたは他の表示を生成してもよい。

要約または一連の要約データ（例えば、データのカラーバーや他の表現など）は、画像ストリームの精査に必要な考察時間を低減するのに役立つ。本発明の一実施形態では、医療従事者がポインタや、マウスなどの位置決め装置を使用して、カラーバーに沿った関心領域を指すと、グラフィカルユーザインターフェースが、データストリーム上の対応する位置にスキップする。その結果、ユーザおよび／または医療従事者は、画像ストリーム全体を精査する必要もなく、関心領域に注目することができる。また、医療従事者は、組織のカラーバーによって特定された種々の部分を見るために、速度を変更することができる。ある特定の関心領域（例えば、血液により示される病態）は、組織を介して直接識別できる。従って、医療従事者は、まず、組織のカラーバーを調べ、その後、精査したい画像のかたまりを決定することができる。患者をスクリーニングする場合、組織カラーバーなどの１つ以上のデータ表示の精査だけを行うことが可能である。別の例では、データストリームの要約グラフィカル表示を、例えば記録器１２内にリアルタイムで生成し、記録器１２に備えられたディスプレイ上にリアルタイムで表示することができる。

本発明の別の実施形態では、カラーバーなどのグラフィカル表示は、生体内データの表示以外に、他の用途にも使用され得る。例えば、カラーバーをフレームのストリーム（例えばビデオ）の要約表示として使用することができる。ビデオの要約グラフィカル表示（例えば本明細書に記載するようなカラーバー）は、視聴者がビデオ内の様々な場面の位置を特定し、場合によっては、その場面まで早送り、巻き戻し、またはスキップするのに役立つ。例えば、屋外で撮影した映画の１場面は、屋内で撮影したその前後の場面とは異なる配色を有する。従って、カラーバーはカラー目次に類似している。

生体内装置が取得した画像ストリームにおける実質的に連続した画像フレーム間の像変化または差異は、例えば、生体内装置が、体腔の他の部位や臓器に進んだり、体腔内の異なる面を見るために向きを変えたり、蠕動運動などの様々な段階で画像フレームを取得することに起因する。一例では、蠕動の収縮中に取得した画像フレームの像は、収縮がない間に同位置で取得した画像フレームの像とは異なる。シーン変化は、他の要素（例えば、ポリープの発生、出血や他の病態の出現）にも起因する。また、別の要素もシーン変化に寄与する。

本発明の一実施形態では、シーン変化レベルの表示は、関心のある特定の画像フレームや、画像ストリームのうち動き（例えばシーン変化）や新たな情報が存在する部分に、医療従事者の注意を向けさせるのに役立つ。他の例では、シーン変化レベルの表示は、生体内装置の運動パターンや体腔の蠕動パターンを示す手助けとなる。さらに別の例では、シーン変化レベルの表示は、胃腸管内などの様々な臓器を識別するために使用される。例えば、シーン変化は、臓器（十二指腸、盲腸など）間の遷移点や、食道と胃との間の遷移や、その他の遷移点に現れる。シーン変化レベル表示は、病態を示す画像フレームの位置を特定するためなど、他の目的に使用してもよい。

ここで、図８Ａおよび８Ｂを参照する。両図は、画像シーンの変化のレベルまたは変化程度に係るグラフィカル表現およびカラーバー表現の一例をそれぞれ示している。この画像シーン変化レベルまたは変化程度は、一例では、体腔内を移動可能な生体内センシング装置の運動性を示す。画像ストリームにおける画像シーン変化や活動の変化、および／または画像ストリームにおける活動レベルや活動度合いは、米国特許出願公開第２００３／００７７２２３号に開示されるような方法およびシステムによって決定することができる。この米国特許出願公開第２００３／００７７２２３号の一実施形態によれば、処理装置が１対の画像、連続した画像、および／または画像群のパラメータ（例えば、濃度、色など）を比較し、比較した画像の平均差分を生成し、その平均差分などから生体内画像装置の運動性を計算する。濃度に加えて、他の適切なパラメータ（例えば、画像間の色比較）を使用してもよい。米国特許出願公開第２００３／００７７２２３号に記載されるような、運動性を決定するための実施形態は、シーン変化（例えば、連続した画像フレーム間または連続した画像フレーム群の間における画像内容の変化）を示すことを基礎とする。従って、本発明において、同一のまたは同様の方法を用いて画像ストリームにおけるシーン変化レベルや変化程度を決定してもよい。しかしながら、本発明はこの点で限定されず、他の方法を用いて、生体内装置が取得した画像ストリームの活動レベルおよび／またはシーン変化レベルを測定してもよい。例えば、周知の運動追跡方法または他の方法を採用して、画像間の対応関係に係る量、比率、または度合いを決定してもよい。例えば、連続した画像間、或いは実質的に連続した画像間、または実質的に連続した画像群の間の重複量を当業界の周知の方法で決定してもよい。運動追跡方法の例としては、特に、フレーム間の画像レジストレーション方法、運動ベクトル方法、オプティカルフロー計算方法などが挙げられる。一例では、運動追跡エラーは、シーン変化レベルが高い或いは最も高いことを示す。一実施形態において、連続画像間に見られる重複度合いや重複量や重複比率、または重複領域を共有する連続画像の数は、シーン変化レベルを示す。例えば、多数の連続画像、または連続画像群が重複領域を共有する場合、その連続画像群が取得されている時間に対応する期間のシーン変化レベルは低いと考えられる。他の例では、連続画像間で重複領域が認められないか、２つの連続した画像間でわずかな比率の重複しか認められない場合、シーン変化レベルは高いと考えられる。

図８Ａは、本発明の実施形態に係る生体内センシング装置が取得した画像ストリームのシーン変化をＹ軸に、時間をＸ軸に相対的な大きさで示している。Ｘ軸は、絶対時間および／または生体内センシング装置が取得したフレーム数を示してもよい。図８Ｂは、図８Ａに示す変化グラフから変換、導出、またはマップ化したカラーバーを示している。色以外の視覚的なキューを使用して、そのようなバーまたは他の表現においてデータを示したり識別してもよい。例えば、データポイントまたはデータフレームは、濃度、色、形状、サイズ、長さなどを変えることで表現される。Ｘ軸はフレーム識別子または時間を示してもよい。変換、導出、またはマップ化は、特定のカラーマップまたはカラーキーに対して行ってもよい。

本発明の例示的実施形態によれば、図８Ａの、シーン変化の特定のレベルまたは画像ストリーム活動における変化レベルは、図８Ｂのカラースケールおよび／またはグレースケールに対応する。例えば、黒は、変化しない安定しているシーン、または緩やかに変化するか、ほとんど変化しないシーンを示す。他方、白は、シーンが画像ストリームにおいて劇的におよび／または実質的に変化していることを示す。そして、グレーの陰影は中間レベルを示す。他の実施形態では、変化度合いはそれぞれ異なる色で示される。例えば、相対的に、青は、シーン変化がないか、穏やかであるか、ほとんどないことを示し、藍色は、生体内装置が静止状態にあることを示す。他方、赤はシーン変化が速いことを示す。緑や黄色などの他の色は、青と赤とで示されるレベルの中間の活動レベルを示す。画像ストリームにおける活動をカラーバー表現にすることで、例えば医師、病理医、医療従事者は、人体内の生体内センシング装置の移動を認識して患者の診断を支援するための視覚ツールが得られる。シーン変化と色との対応付けは他の形態であってもよい。本発明のいくつかの実施形態では、シーン変化は体腔内を移動可能なおよび／または通過する生体内装置の運動性を示す。シーン変化は、輝度や濃度などの他の視覚的キューに対応付けられてもよい。画像ストリームにおける、シーン変化以外の視覚的パラメータの変化を監視して、カラー表現および／またはグラフィカル表現として呈示してもよい。本発明のいくつかの実施形態では、画像ストリームの活動レベルまたは活動レベルのパターンは、胃腸管などの体腔における特定の病態、状態、または発生を示している。

本発明の他の実施形態では、活動レベル、または画像ストリームの視覚的パラメータに係る特定のパターンは、食道、胃、小腸などの体腔における特定の位置に対応し、および／またはその位置を示す。その特定の位置では、画像ストリーム内の特定の画像が取得される。ここで、図９を参照する。図９には、本発明の例示的実施形態に係る生体内装置のシーン変化グラフに関するカラーバー表現２２７およびグラフィカルユーザインターフェースを用いたディスプレイが示されている。変化グラフは生体内装置の運動性を示している。グラフィカルユーザインターフェースには、例えば、生体内装置が取得した画像などのデータを制御して表示するための、ボタン一式、または、スライダー、押しボタン、矢印ボタン、ラジオボタンのような他のコントロール一式を有する制御バー２４０が備えられている。一実施形態では、スライダー２４１を有する表示速度制御バーを設け、画像ストリームの全体表示速度を制御する。ディスプレイは、時間バー２３０と、人体内の生体内装置におけるシーン変化レベルについての要約組織カラーバー２２０と要約カラーバー２２７または他の表現とを備えていてもよい。カーソル２５０は、１つ以上のバー２３０、２２０、２２７をスクロールして、例えばストリーミング表示２１０に示されたデータストリームの画像フレームに対応する、バー上の地点や領域にしるしをつける。

図８Ｂについて上述したように、取得した画像ストリームのシーン変化レベルを示すために、それぞれ異なる色を使用してもよい。例えば、赤色は装置の移動に多くの変化があることを示し、青色はほとんど変化しない、または全く変化しないことを表す。緑色と黄色は赤色と青色との中間にあるシーン変化レベルを表す。しかしながら、本発明がこの点で限定されないことは当業者に理解されるであろう。例えば、別のカラーマップを異なるシーン変化レベルを表すために定義してもよい。上記で定めた配色の代わりに、大幅なシーン変化を表すために紫色を指定し、穏やかな変化を表すために赤色を使用してもよい。同様に、画像ストリームのシーン変化がほとんど或いは全くないことを表すために黒色を使用し、赤色より低く黒色より高い、ある特定のシーン変化レベルを表すために青色を使用してもよい。本発明の他の実施形態では、黒はシーン変化がわずかである、および／または全くないことを表し、白はシーン変化が著しいことを表すグレースケールバーを使用する。

本発明のいくつかの実施形態によれば、シーン変化レベルは、時間スケール２３０に沿った個々のマーク（例えば、目盛り、点、または他のマーク）９５０として表され、目盛り９５０の間隔はシーン変化レベルを示している。例えば、時間スケール２３０の全長に沿った目盛り９５０であって、高頻度で顕れる目盛り９５０ａは、互いに近接し、時間スケール２３０の一部に集中する。これは、画像ストリームの対応部分が、低いシーン変化レベルを有していることを示している。時間スケールに沿った他の領域では、目盛り９５０ｂは分散し、および／または互いに間隔があいている。これは、画像ストリームの対応部分において、シーン変化レベルが高いことを示している。本発明の一実施形態によれば、目盛り９５０の間隔はシーン変化レベルに一致する。本発明の他の実施形態では、目盛り９５０の位置を決定する際、位置データおよび／または位置特定データも使用できる。また、本発明のさらに別の実施形態では、目盛り９５０の各々が移動した距離（例えば１メートル）を表す。従って、目盛り９５０が互いに近接している目盛り９５０ｂの一部は、生体内装置が低速度で移動していることを示す。他方、目盛り９５０が離間している目盛り９５０ａの一部は、生体内装置が高速度でまたは前者の場合より高速度で移動していることを示す。他の実施形態では、バー２３０は表示されず、目盛り９５０は他のバー（例えば、バー２２０または２２７）に配置されている。

本発明の他の実施形態によれば、ストリーミング表示２１０に示す画像ストリームのストリーミング速度は変更でき、シーン変化レベルに関係および／または対応している。例えば、シーン変化レベルが低く示されているとき、画像ストリームのストリーミング速度を上げてもよい。他の例では、シーン変化レベルがさらに大きいと判断されれば、ストリーミング速度を下げてもよい。それにより、画像ストリームのシーン変化を強調しながら、画像ストリームの停滞部分は例えば強調を小さくすることができる。本発明の一実施形態によれば、シーン変化レベルに基づいて画像ストリームの速度を制御することにより、画像ストリームの精査に要する全体的な考察時間を低減する方法が得られ、その結果、画像ストリームのうち、活動がほとんど或いは全くない部分は速く再生され、活動が大きい部分はゆっくり再生される。それにより、見る人は、一定で変化のない像を見ることに無駄な時間を費やさず、画像ストリームに生じる活動および詳細を全て調べることができる。一実施形態によれば、画像のストリーミング速度を変更することは、生体内装置の体腔内の円滑な前進を模擬できるように、時間の流れを変える役割を果たす。他の実施形態では、可変ストリーミング速度を利用して、画像ストリームの最も活発な部分がユーザの目に止まるように、画像ストリームをプレビューしてもよい。また、画像ストリームのストリーミング速度を変更する用途は他のものでもよい。

一例では、個々の目盛り９５０の間隔は、表示中の速度に対応し、例えば、ゆがんだ時間のバースケールを示す。その際、バースケールの目盛りは等間隔で分布していない。例えば、近接した目盛り９５０ｂは、ストリーミング表示２１０に表示された画像ストリームの一部分が速く再生されることを表している。これは、例えば、シーン変化レベルが低いことに起因する。他の例では、まばらに間隔があいた目盛り９５０ａは、ストリーミング表示２１０に表示された画像ストリームの一部分が速く再生されることを表し、これは、シーン変化レベルが高いことに起因する。一実施形態によれば、カーソル２５０の移動速度を一定に保ち、ビデオの表示速度を変化させてもよい。ここで、図１０を参照する。図１０は本発明の別の実施形態に係る生体内装置のシーン変化グラフに関するカラーバー表現およびグラフィカルユーザインターフェースを用いたディスプレイを示す。グラフィカルユーザインターフェースには、例えば生体内装置が取得した画像などのデータを制御して表示するための、スライダー、押しボタン、矢印ボタン、ラジオボタンなどのボタン一式を有する制御バー２４０が備えられている。一実施形態では、スライダー２４１を有する表示速度制御バーを設け、画像ストリームの全体的な表示速度を制御する。ディスプレイには、時間バー２３０と、要約組織カラーバー２２０と、他の情報や制御オプションとが備えられていてもよい。本発明の一実施形態では、シーン変化レベルを示すためにバーを使用しなくともよく、シーン変化はグラフ２２８（例えばグラフィカルユーザインターフェースに表示されるグラフ）の色を変えることによって示してもよい。グラフの例として、位置グラフ、位置特定グラフ、追跡曲線グラフや他のグラフ、曲線グラフなどが挙げられる。例えば、カプセルの位置を描く曲線は、シーン変化レベルおよび／または画像内容の変化に応じて色を変更することができる。また、画像シーンの変化を示す他の方法を使用してもよい。カーソル２５０は１つ以上のバー２３０、２２０、２２８に沿ってスクロールし、例えばストリーミング表示２１０に示されたデータストリームの画像フレームに対応する、バー上の地点または領域にしるしを付けることが可能である。

本発明の実施形態に係る上記説明は、例示と説明のために呈示したものであり、網羅的に示すことを意図したものではない。また、本発明は、開示した形態と全く同一の形態に限られるものではない。上述の教示に鑑み、種々の修正、変形、代替、変更、及び均等物が可能であることは当業者に理解されるだろう。従って、特許請求の範囲は、本発明の真の精神の範囲に含まれる、そのような修正および変更を全て含むことを理解すべきである。

本発明の実施形態に係る生体内画像装置システムを示す概要図である。 本発明の一実施形態に係るカラーバー表示を生体内で取得した他のデータと共に示す概略図である。 本発明の一実施形態に係る識別した解剖学的部位と共にカラーバーを示す概略図である。 本発明の実施形態に係る例示的なｐＨ用カラーバーを示す概略図である。 本発明の実施形態に係る例示的な血液検出用カラーバーを示す概略図である。 本発明の一実施形態に係る実質的に同時に見ることができる２つ以上のカラーバーを備えたディスプレイである。 本発明の一実施形態に係る生体内データの表示方法を説明するフローチャートである。 本発明の一実施形態に係る画像のストリームからカラーバーを構築する方法を説明するフローチャートである。 本発明の一実施形態に係るシーン変化度合いを示す変化グラフの概略図である。 本発明の一実施形態に係る前記変化グラフのカラーバー表現を示す概略図である。 本発明の一例示的実施形態に係るシーン変化レベルを表示するカラーバーを備えたグラフィカルユーザインターフェース画面である。 本発明の他の例示的実施形態に係るシーン変化レベルを表示するカラーバーを備えたグラフィカルユーザインターフェース画面である。

Claims (11)

1. 自律型装置、経口摂取可能カプセル、または嚥下可能なカプセルである生体内装置によって撮影された画像ストリームを表示する方法であって、
   複数の生体内画像フレームの画像ストリーム中の連続した画像フレーム間の重複度合いについてのデータであって、前記画像ストリーム中のシーンの変化レベルを示すデータを処理装置が生成し、
   連続した画像フレーム間の重複度合いについてのデータを表す要約表示を処理装置が生成し、
   前記画像ストリームのストリーミング表示を表示し、
   前記画像ストリームの前記シーンの変化レベルについての前記要約表示を含む複数のグラフィカル表示であって、病態を含む解剖学的部位又は領域を示す複数のグラフィカル表示と、前記画像ストリームに示された関心のある領域に対応する撮影時間を示す時間バーと、組織カラーバーとを、前記ストリーミング表示と並べて表示することを含む方法。
2. 前記ストリーミング表示に表示中の画像に対応する、前記シーンの変化レベルについての前記要約表示及び前記組織カラーバーの一部を示すインジケータを表示することをさらに含む、請求項１に記載の方法。
3. 前記ストリーミング表示は、前記シーンの変化レベルに対応する可変速度で表示される、請求項１又は２に記載の方法。
4. 前記シーンの変化レベルを示す前記要約表示は、２以上の色を含み、異なる色が異なるシーンの変化レベルに対応する、請求項１乃至３のいずれか一項に記載の方法。
5. 前記画像ストリームの実質的に連続した画像を比較し、前記実質的に連続した画像間の重複度合いを処理装置が決定することをさらに含む、請求項１乃至４のいずれか一項に記載の方法。
6. 処理装置が前記実質的に連続した画像間で運動追跡を実行することをさらに含む、請求項５に記載の方法。
7. 生体内画像ストリームの表示システムであって、
   複数の生体内画像フレームの画像ストリーム中の連続した画像フレーム間の重複度合いについてのデータであって、前記画像ストリーム中のシーンの変化レベルを示すデータを生成し、連続した画像フレーム間の重複度合いについてのデータを表す要約表示を生成するための処理装置と、
   前記画像ストリームの前記シーンの変化レベルについての前記要約表示を含む複数のグラフィカル表示であって、病態を含む解剖学的部位又は領域を示す複数のグラフィカル表示と、前記画像ストリームに示された関心のある領域に対応する撮影時間を示す時間バーと、組織カラーバーとを、前記画像ストリームと共に表示するためのディスプレイとを備えるシステム。
8. 前記ディスプレイは、前記画像ストリームの表示中の画像に対応する、前記要約表示に沿った位置を示すインジケータを含む、請求項７に記載のシステム。
9. 前記画像ストリームは、前記シーンの変化レベルに対応する可変速度で表示される、請求項７または８に記載のシステム。
10. 前記処理装置は、前記画像ストリームのうち実質的に連続した２以上の画像を比較し、前記実質的に連続した画像間の重複度合いを決定する、請求項７乃至９のいずれか一項に記載のシステム。
11. 前記処理装置は、前記画像ストリームのうち実質的に連続した画像間で運動追跡を実行する、請求項７乃至１０のいずれか一項に記載のシステム。

Images