JPWO2009008125A1

JPWO2009008125A1 - 画像処理装置、該動作方法及び該プログラム

Info

Publication number: JPWO2009008125A1
Application number: JP2009522508A
Authority: JP
Inventors: 勝義谷口; 敏明重盛; 淳小栗; 武志西山
Original assignee: Olympus Medical Systems Corp
Current assignee: Olympus Medical Systems Corp
Priority date: 2007-07-12
Filing date: 2008-06-16
Publication date: 2010-09-02
Anticipated expiration: 2028-06-16
Also published as: JP5385138B2; EP2174578A4; WO2009008125A1; US20100182412A1; CN101686799B; CN101686799A; EP2174578A1

Abstract

本発明に係る画像処理装置は、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得手段と、前記取得した時系列画像データから前記所定の画像データを検出する画像検出手段と、前記取得された画像データのうち所定の画像データを一覧形式で表示させる表示制御手段と、を備える。

Description

本発明は、カプセル型内視鏡で撮像された観察画像の表示に関する。

近年、カプセル型内視鏡システムが注目されている。カプセル型内視鏡システムとは、撮像装置と無線装置とを備えたカプセル形状の内視鏡を患者の口から飲み込んだ後、そのカプセル型内視鏡が人体から自然排出されるまでの観察期間に、胃、小腸などの臓器を順次撮像し、その撮像画像を外部の受信機へ送信して記録し、その記録した画像をワークステーション等のコンピュータのディスプレイに表示して再生することができるシステムである（例えば、特許文献１）。

上述したように、カプセル型内視鏡は、通常の内視鏡と異なり被験者が飲み込んで自然に排出されるまでの期間、各臓器を撮像させるので、観察（検査）時間が約８時間となるように長時間に及ぶ。よって、診察などの段階において、長時間撮像された膨大な画像すべてを確認したり、所望の画像を検出したりするにも多大な時間や労力がかかっていた。そこで、小腸用カプセル型内視鏡の約８時間の検査データを約１〜２分のダイジェストにまとめ、動画で表示する機能を有するカプセル型内視鏡システムが開示されている。

しかしながら、そのダイジェストを動画で表示することが最善の方法であるとは限らない。なぜなら、動画での表示とは、静止画を１枚ずつ順次表示させるものであるが、例えば病変部分が最終画像にある場合には、再生終了直前になるまで見ることはできず、また、その動画の再生速度がユーザに合わない場合もあるからである。

ところで、カプセル型内視鏡の観察装置には、最大８時間分、約６００００枚の画像の中から出血等の病変を検出する赤色検出機能がある。検出された赤色の位置は赤色検出バーに表示される。従来、医師が検出された画像を観察するには、赤色検出バーに表示された検出位置に画像の再生位置を合わせながら、画像を一枚ずつ確認する必要があった。例えば、赤色検出で検出された画像を全てレポートに載せる画像として選択するには、コマ送りボタンを押しながら１枚ずつ選択する必要があり、時間がかかっていた。

上記課題に鑑み、本発明では、カプセル型内視鏡で撮像された一連の画像群のダイジェストまたは所定の画像処理で検出された画像を表示させる場合に、一覧表示させることを目的とする。
特開２００７−７５１５８号公報

本発明にかかる画像処理装置は、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得手段と、前記取得した時系列画像データから所定の画像データを検出する画像検出手段と、前記検出された画像データである検出画像データを一覧表示させる表示制御手段と、を備える。

本発明にかかる画像処理装置は、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得手段と、前記取得した時系列画像データから所定の画像データを検出する画像検出手段と、画像を表示させる主表示領域と、該主表示領域より小さくかつ画像を表示させる２つの副表示領域とを有する表示手段と、前記時系列画像データから前記画像検出手段により検出された検出画像データを前記主表示領域で再生させると共に前記各副表示領域に該検出画像データの前後の検出画像データを再生表示させ、該再生が停止されたら、該主表示領域に該停止時の検出画像データを表示させると共に、該副表示領域に該検出画像データの前後のフレーム画像に相当する該時系列画像データを表示させる表示制御手段と、を備えることを特徴とする。

本発明にかかる画像処理装置の動作方法は、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得し、前記取得した時系列画像データから所定の画像データを検出し、前記検出された画像データである検出画像データを一覧表示させる、ことを特徴とする。

また本発明にかかる画像処理装置の動作方法は、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得し、前記取得した時系列画像データから所定の画像データを検出し、画像を表示させる主表示領域と、該主表示領域より小さくかつ画像を表示させる２つの副表示領域とを有する表示画面を表示し、前記時系列画像データから前記検出された検出画像データを前記主表示領域で再生させると共に前記各副表示領域に該検出画像データの前後の検出画像データを再生表示させ、該再生が停止されたら、該主表示領域に該停止時の検出画像データを表示させると共に、該副表示領域に該検出画像データの前後のフレーム画像に相当する該時系列画像データを表示させることを特徴とする。

本発明にかかる画像を表示させる処理をコンピュータに実行させる画像表示プログラムは、カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得処理と、前記取得した時系列画像データから所定の画像データを検出する画像検出処理と、前記検出された画像データである検出画像データを一覧形式で表示させる表示制御処理と、をコンピュータに実行させることを特徴とする。

第１の実施形態における体腔内検査で利用されるカプセル型内視鏡及びその周辺機器を示す。第１の実施形態におけるカプセル型内視鏡１で撮影した画像データの画像処理を行うワークステーション７の内部構成の概要を示す。第１の実施形態における内視鏡システムの観察画面を示す。第１の実施形態におけるダイジェスト表示の表示方法が一覧表示の場合の表示画面を示す。第１の実施形態におけるコマンド「このフレーム周辺を再生」５４ｆを選択した場合の一例（その１）を説明するための図である。第１の実施形態におけるコマンド「このフレーム周辺を再生」５４ｆを選択した場合の一例（その２）を説明するための図である。第１の実施形態におけるダイジェスト表示の表示方法が動画表示の場合の表示画面を示す。第２の実施形態における一覧表示を説明するための図である。第２の実施形態における一覧表示された各画像についてコメントを付与することを説明するための図である。第２の実施形態における一覧表示された画像を一括してレポートに出力するためのボタンについて説明するための図である。第３の実施形態（実施例１）における一覧表示とカラーバー／タイムバーを同時に表示し、一覧表示上で選択された画像の位置関係を明示した表示画面を示す。第３の実施形態（実施例２）における一覧表示とカラーバー／タイムバーを別画面にて同時に表示し、一覧表示上で選択された画像の位置関係を明示した、一覧表示ウィンドウ及び要約情報表示ウィンドウを示す。第４の実施形態（実施例１）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。第４の実施形態（実施例２）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。第４の実施形態（実施例３）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。第４の実施形態（実施例４）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。第５の実施形態における一覧表示上のスクロールを任意の単位で実施する一覧表示画面を示す。第６の実施形態（実施例１）における動画表示画面から一覧表示画面に移行する様子を示す。第６の実施形態（実施例２）における動画表示画面から一覧表示画面に移行する様子を示す。第６の実施形態（実施例３）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。第６の実施形態（実施例４）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。第６の実施形態（実施例５）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。第７の実施形態（実施例１）における一覧表示画面から動画表示画面に移行する様子を示す。第７の実施形態（実施例２）における一覧表示画面から動画表示画面に移行する様子を示す。第７の実施形態（実施例３）における一覧表示画面から動画表示画面に移行する様子を示す。第８の実施形態におけるカラーバー／タイムバー上に一覧表示のページ区間を表示する一覧表示画面を示す。第９の実施形態（実施例１）における一覧表示上の注目画像にチェックをつけることができる一覧表示画面を示す。第９の実施形態（実施例２）における一覧表示上の注目画像にチェックをつけることができる一覧表示画面を示す。第１０の実施形態（実施例１）における一覧表示用副表示領域の注目画像の表示状態が変化する様子を示す。第１０の実施形態（実施例２）における一覧表示用副表示領域の注目画像の表示状態が変化する様子を示す。第１１の実施形態における動画表示画面でピックアップした画像が一覧表示画面に追加される様子を示す。第１２の実施形態におけるカラーバー／タイムバー上に一覧表示用に抽出された画像のマーキングを行った一覧表示画面を示す。第１２の実施形態（変形例１）における、一覧表示用に抽出された画像に対応する位置がマーキングされているカラーバー／タイムバーのうち所望の範囲を表示する一覧表示画面の一例を示す。第１２の実施形態（変形例２）における一覧表示画面を示す。第１３の実施形態における一覧表示画面１００を示す。第１４の実施形態における一覧表示領域１０１に表示された画像にマウスカーソル１６１を移動させた際の画像の拡大表示について示す。第１５の実施形態におけるダイジェスト画像を検出するための検出条件を設定する検出条件設定画面を示す。第１６の実施形態における時系列画像群から特定区間にある画像群を指定し、その指定した範囲内の時系列画像を一覧表示する一覧表示画面１００を示す。第１７の実施形態における臓器（部位）毎または特定区間毎に、ダイジェスト画像を検出するための検出条件設定画面を示す。第１８の実施形態における、一覧表示が複数ページに渡る場合、操作者が設定した時間経過後、一覧表示のページを順次、ページ送りする様子を示す。第１９の実施形態における観察時間を設定するための検出条件設定画面２００を示す。第２０の実施形態における内視鏡システムの観察画面を示す。

＜第１の実施形態＞
本実施形態では、カプセル型内視鏡で撮像された一連の画像群のダイジェストを表示させる場合に一覧形式で表示させることについて説明する。本実施形態を用いることにより、カプセル型内視鏡で撮像された一連の画像群のダイジェストまたは所定の画像処理で検出された画像を表示させる場合に一覧表示させることができ、必要な画像を効率良く同定できる。

図１は、本実施形態における体腔内検査で利用されるカプセル型内視鏡及びその周辺機器を示す。図１（Ａ）に示すように、カプセル型内視鏡１を用いた検査システムは、カプセル型内視鏡１、アンテナパッド４、外部装置５から構成される。

カプセル型内視鏡１は、これを患者２が口から飲み込むことにより体腔内を検査する。外部装置５は、この患者２の体外に配置され、カプセル型内視鏡１で撮像した画像データを無線で受信する複数のアンテナパッド４に接続される受信機である。

体腔内検査時には外部装置５に、コンパクトフラッシュ（登録商標）メモリ等の可搬型記憶媒体が装着されて、カプセル型内視鏡１から送信され外部装置５で受信した画像情報が記録される。

そして、この可搬型記憶媒体を介して、パーソナルコンピュータ、ワークステーション等の端末装置７（本実施形態では、ワークステーション７を用いる）に前述の画像情報を取り込むようになっている。

または、図１（Ｂ）に示すように、この外部装置５はクレードル６に装着して、若しくは図示しないＵＳＢケーブル等によってワークステーション７に電気的に接続でき、情報の受け渡しができる。これにより、この外部装置５に挿入された可搬型記憶媒体に記憶された画像データをワークステーション７へ取り込むことができる。また、可搬型記憶媒体の読取装置をワークステーション７へ接続し、その読み取り装置に可搬型記憶を挿入して、可搬型記憶に記憶された画像データを読み出してワークステーション７へ取り込むようにしてもよい。

上記の画像の取り込みは、キーボード９やマウス１０等の入力・操作デバイスの操作により実行される。この際、ＵＳＢ等の電気的接続を検出し、それを誘因として画像の取込を行ってもかまわない。ワークステーション７へ取り込まれた画像は、ディスプレイ８に表示したり、プリンタに出力したりすることができる。

図１（Ａ）に示すように、カプセル型内視鏡１を飲み込んで内視鏡検査を行う場合、患者２が着るジャケット３には複数のアンテナパッド４が取り付けられている。この際、アンテナパッド４を直接患者に付けてもかまわない。カプセル型内視鏡１により撮像された画像データは無線によりアンテナパッド４へ送信され、その画像データをアンテナパッド４で受信するようになっている。そして、その画像データは、アンテナパッド４に接続された外部装置５に保存される。この外部装置５は、例えば患者２のベルトに着脱自在のフックにより取り付けられる。

図２は、本実施形態におけるカプセル型内視鏡１で撮影した画像データの画像処理を行うワークステーション７の内部構成の概要を示す。ワークステーション７は、メモリ２０、大容量記憶装置２１、制御部２２、入力Ｉ／Ｆ２３、出力Ｉ／Ｆ２４、画像処理部２５、及びこれらを接続するバス２６から構成される。

メモリ２０は、各種の処理で利用するＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）やＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）等のメモリである。大容量記憶装置２１は、大容量のデータを格納するハードディスクドライブ（ＨＤＤ）である。

入力Ｉ／Ｆ２３は、外部装置５（または、コンパクトフラッシュ（登録商標）メモリ等の可搬型記憶媒体）からの画像データを取り込んだり、キーボード９やマウス１０等の操作部からデータや指示を入力したりする入力インターフェースである。出力Ｉ／Ｆ２４は、カプセル型内視鏡で撮影された画像などをディスプレイ８に出力したり、プリンタ等にデータを出力したりするための出力インターフェースである。

制御部２２は、大容量記憶装置２１に記憶された各種処理プログラムを実行するＣＰＵ等によって実現される。また、上述する本発明の実施形態における一覧表示や動画表示をするための画面の制御や各種制御を行う。

画像処理部２５は、制御部２２による制御に基づいて、外部装置５または大容量記憶装置２１から画像データを取得し、この取得した画像データに対して、濃度変換（ガンマ変換等）、平滑化（ノイズ除去等）、鮮鋭化（エッジ強調等）、画像認識（特徴画像領域の検出、平均色の演算等）等の各種画像処理を行う。

カプセル型内視鏡１により撮影された画像データは、逐一外部装置５に送信され、外部装置５内の可搬型記憶媒体に記憶される。この記憶された画像データは、上述の通り、外部装置５をクレードル６に装着したり、可搬型記憶媒体を読み取り装置にセットしたりすることによってワークステーション７に電気的に接続し、ワークステーション７内の大容量記憶装置２１に格納される。このようにして、カプセル型内視鏡１で撮影した画像は、ワークステーション７に取り込まれる。

図３は、本実施形態における内視鏡システムの観察画面を示す。図３に示すように、ディスプレイ８には、ＧＵＩ画面としてのウィンドウ３１（「診察・診断」ウィンドウ）が表示される。ウィンドウ３１内には、主表示画像等を表示する主表示領域３２と、アイコンとして示された各種画像操作ボタンを表示する画像操作領域３９と、一連の被検体内画像の撮像期間を示す時間スケールとしてのカラーバー３６およびタイムバー３７と、サムネイル画像等を表示する副表示領域３８とが、表示画面上でこの順に上方から下方へ並列表示される。

主表示領域３２内には、キーボード９やマウス１０等の操作部から入力された指示情報をもとに一連の被検体内画像の中から選択された画像である主表示画像３３と、患者２上のアンテナ１１の配置を模式的に示すアンテナ配置図３４と、患者情報表示欄３５と、ダイジェスト表示操作領域４０が表示される。

患者情報表示欄３５には、主表示画像３３として選択された被検体内画像に対応付けられている患者２の名前、ＩＤ番号、性別、年齢、生年月日、撮像年月日、撮像時刻等が文字情報として表示される。なお、主表示領域３２には、所定操作に応じて２以上の所定数の主表示画像が表示可能である。

アンテナ配置図３４には、アンテナ４の配置が患者２の一部輪郭とともに模式的に表示される。また、アンテナ配置図３４には、アンテナ１１の近傍に、この各アンテナの識別番号としてのアンテナ番号が文字表示される。

ダイジェスト表示操作領域４０には、ダイジェスト表示アルゴリズム選択スイッチ４１（４１ａ，４１ｂ，４１ｃ，４１ｄ，４１ｅ）と、ダイジェスト表示方法選択スイッチ４２（「一覧」スイッチ４２ａ、「動画」スイッチ４２ｂ）と、動画コントロールキー４３とが表示される。

ダイジェスト表示アルゴリズム選択スイッチ４１は、カプセル型内視鏡で撮像された膨大な時系列画像（症例データ）から例えば数百枚〜数千枚の画像を抽出してダイジェストとして表示される場合に、そのダイジェストとして表示される対象となる画像（以下、ダイジェスト画像という）を選択するアルゴリズムを指定するスイッチである。

スイッチ１（４１ａ）を押下すると、例えば、２０枚目、４０枚目、６０枚目・・・というように、カプセル型内視鏡で撮像された膨大な画像から一定間隔置きに画像が抽出されてダイジェストとして表示される。

スイッチ２（４１ｂ）を押下すると、例えば、ｎ枚目の画像とｎ＋１枚目の画像とが類似する場合、ｎ枚目の画像を削除し、これを全画像に対して行い、その結果得られる画像は、画像間に大きな変化（動き）がある画像のみとなるので、その画像をダイジェストとして表示する。画像間の類似の判定は、例えば、２つの画像間における画素値の差分をとり、その差分が閾値を超えているか否かで行うことができる。

なお、比較する画像は、ｎ枚目の画像とｎ＋１枚目に限定されず、ｎ枚目とｎ±ｍ枚目（ｍ：任意の整数）であってもよい。また、ｎ枚目とｎ枚目の前後ｐ枚（ｎ，ｐ：任意の整数）の画像平均値との画像データ間の差分に基づいて画像データを抽出してもよい。

スイッチ３（４１ｃ）を押下すると、出血や病変と思われる特徴部位が撮像された画像のみを抽出し、ダイジェストとして表示される。出血部位が撮像された画像を抽出する手法としては、例えば、局所的な画像領域において所定の閾値を超えた赤成分を有する画像を抽出してもよい。また、病変部位が撮像された画像を抽出する手法としては、例えば、予め病変形状や病変の色などのパターンを登録しておき、そのパターンと一致もしくは所定の誤差範囲内で一致するパターンを有している画像を抽出してもよい。

スイッチ４（４１ｄ）を押下すると、例えば観察対象とする器官部分以外の器官(例えば管腔部分)や残渣しか映していないような診断に不要な画像は抽出せず、それ以外の画像を抽出してダイジェストとして表示させる。観察対象とする器官部分以外の器官が撮像された画像を抽出する手法としては、例えば、画像全体の色成分の平均等から器官を特定することができるので、目的とする器官の画像の特徴（色成分等）の類似度に基づいて抽出するようにしてもよい。

スイッチ５（４１ｅ）を押下すると、スイッチ２（４１ｂ）、スイッチ３（４１ｃ）、及びスイッチ４（４１ｄ）の機能を組み合わせて得られるダイジェスト画像を表示することができる。すなわち、動きがあり、更に、病変、赤色が存在する画像のみを抽出し、ダイジェストを表示させることができる。

スイッチ６（４１ｆ）を押下すると、約８時間の症例データのうち、ユーザが予め選択した器官部分（例えば小腸部分）のみに対して、スイッチ１（４１ａ）〜５（４１ｅ）のうちのいずれかの機能を適用することができる。

「一覧」スイッチ４２ａを押下すると、ダイジェスト画像を一覧で表示させる。このとき、動画コントロールキー４３が非表示状態か使用不可状態となる。このダイジェスト画像の一覧表示については、図４で詳述する。

「動画」スイッチ４２ｂを押下すると、ダイジェスト画像を１枚ずつ順に動画として表示させる。このとき、動画コントロールキー４３が非表示状態または使用不可状態の場合には、「動画」コントロールキー４３が表示されて使用可能となる。このダイジェスト画像の動画表示については、図７で詳述する。

「動画」コントロールキー４３は、ダイジェスト画像を動画表示させた場合の、動画の再生、逆再生、一時停止を制御するスイッチである。
カラーバー３６には、全体として、一連の被検体内画像に含まれる各画像の平均色が時系列に表示される。すなわち、カラーバー３６上の各時点の表示領域には、この時点に撮像された被検体内画像の平均色が表示される。一連の被検体内画像は、撮像した臓器に応じて特有の平均色を有するため、観察者等は、カラーバー３６上の時間軸（図３では横軸）に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器を容易に判別することができる。

タイムバー３７には、このタイムバー３７上で時間軸方向に移動可能なスライダ３７ａが表示される。スライダ３７ａは、主表示画像３３として表示された被検体内画像の撮像時点をタイムバー３７上で指示するとともに、主表示画像３３の表示切替に連動してタイムバー３７上を移動する。

副表示領域３８には、一連の被検体内画像の中から選択抽出された画像がサムネイル画像として表示される。具体的には、例えば、所定のボタン操作またはマウス操作等に応じて、この操作時点に主表示画像３３として表示されている被検体内画像がサムネイル画像として副表示領域３８に追加表示される。

図４は、本実施形態におけるダイジェスト表示の表示方法が一覧表示の場合の表示画面を示す。上述の通り、当該ダイジェスト一覧表示画面５１は、「一覧」スイッチ４２ａを押下すると、表示させることができる。一覧表示される各画像は、サムネイル画像である。一覧に表示させるサムネイル画像の枚数は、例えば、縦７枚×横７枚、縦１０枚×横１０枚等、ユーザが任意に選択できる。また、サムネイル画像の大きさもユーザが任意に選択できる。なお、サムネイル画像の大きさを指定すれば、それに応じた枚数が自動的に表示されるようにしてもよい。

ダイジェスト画像が一覧表示されると、符号５２で示すフレームのように、出血や病変と思われる特徴部位が撮像されているフレーム画像は自動的にハイライト等で強調表示されたり、または所定の識別情報が付与されて表示される。これにより、ユーザの目に留まりやすくなる。

一覧表示されたダイジェスト画像のうち任意の画像を選択すると、複数のコマンドが表示されたポップアップメニュー５４が表示される。ポップアップメニュー５４に表示されるコマンドには、「コメント追加」５４ａ、「サムネイル追加」５４ｂ、「レポート追加」５４ｃ、「ランドマーク付与」５４ｄ、「このフレームから再生」５４ｅ、「このフレーム周辺を再生」５４ｆがある。

「コメント追加」５４ａを選択すると、コメント入力画面５３が表示され、その選択されたフレーム画像に一覧表示上でそのフレーム画像に対する所見等をコメントとして追加できる。なお、コメントが追加されたフレーム画像は自動的にレポートに追加してもよい。

「サムネイル追加」５４ｂを選択すると、その選択されたフレーム画像のサムネイル画像を副表示領域３８に登録（サムネイル登録）することができる。なお、サムネイル追加は、その選択されたフレーム画像をダブルクリックや右クリックをしても行うことができるようにしてもよい。

「レポート追加」５４ｃを選択すると、その選択されたフレーム画像を、症例に対する所見や診断等を記載するレポートに直接貼付することができる。
「ランドマーク付与」５４ｄを選択すると、その選択されたフレーム画像にランドマークを付与することができる。ランドマークを付与すると、タイムバー３７においてそのランドマークが付与された画像に相当する時間の位置に所定の標識が表示される。

「このフレームから再生」５４ｅを選択すると、ウィンドウ３１に遷移して主表示領域３２にその選択されたフレーム画像以降の通常の動画画像が再生される。
「このフレーム周辺を再生」５４ｆを選択すると、ウィンドウ３１に遷移して主表示領域３２にその選択されたフレーム画像を中心とする前後ｘ（ｘ：任意の整数）枚が一枚ずつ順次表示させて再生表示される。ｘ枚の設定方法は、メニューバーの「設定」で予め設定してもよいし、右クリックで表示されたポップアップメニューから「このフレーム周辺を再生」５４ｆを選択後、さらにポップアップメニューを表示させて、そのポップアップメニュー内に設定コマンドを設けてもよい。また、「このフレーム周辺を再生」５４ｆを選択すると、図５及び図６に示すように、その選択されたフレーム画像と１つ前の抽出画像までの間にあるすべての画像、および、選択されたフレーム画像と１つ後の抽出画像までの間にあるすべての画像をウィンドウ３１に遷移して主表示領域３２に一枚ずつ順次表示させて再生表示される。

図７は、本実施形態におけるダイジェスト表示の表示方法が動画表示の場合の表示画面を示す。「動画」スイッチ４２ｂを押下すると、ダイジェスト画像を１枚ずつ順に動画として主表示領域３２内に表示させることができる。

画面左側には「フレームレート」設定欄６１、「枚数」設定欄６２、「時間」表示欄６３が表示される。「フレームレート」設定欄６１には、ダイジェスト表示アルゴリズム選択スイッチ４１で抽出された画像を１枚ずつ順に動画として表示する場合のフレームレートを設定できる。「枚数」設定欄６２には、ダイジェスト表示アルゴリズム選択スイッチ４１で抽出された画像を１枚ずつ順に動画として表示する場合の表示枚数を設定できる。「時間」表示欄６３には、「フレームレート」設定欄６１及び「枚数」設定欄６２で設定されたフレームレートと枚数より、動画の再生時間が表示される。

ダイジェスト画像が動画表示されると、出血や病変と思われる特徴部位が撮像されているフレーム画像は自動的にハイライト等で強調表示されたり、または所定の識別情報が付与されて表示される。これにより、ユーザの目に留まりやすくなる。

動画表示中に「動画」コントロールキー４３の一時停止キーを押下して、任意のフレーム画像を表示させたままで、その動画再生を停止する。この停止させた画面に対して、右クリックやダブルクリックをすると、複数のコマンドが表示されたポップアップメニュー６４が表示される。ポップアップメニュー５４に表示されるコマンドには、「コメント追加」６４ａ、「サムネイル追加」６４ｂ、「レポート追加」６４ｃ、「ランドマーク付与」６４ｄ、「このフレームから再生」６４ｅ、「このフレーム周辺を再生」６４ｆがある。

「コメント追加」６４ａを選択すると、コメント入力画面６３が表示され、その選択されたフレーム画像に一覧表示上でコメントを追加できる。なお、コメントが追加されたフレーム画像は自動的にレポートに追加してもよい。

「サムネイル追加」６４ｂを選択すると、その選択されたフレーム画像のサムネイル画像を副表示領域３８に登録（サムネイル登録）することができる。なお、サムネイル追加は、その選択されたフレーム画像をダブルクリックや右クリックをしても行うことができるようにしてもよい。

「レポート追加」６４ｃを選択すると、その選択されたフレーム画像をレポートに直接貼付することができる。
「ランドマーク付与」６４ｄを選択すると、その選択されたフレーム画像にランドマークを付与することができる。ランドマークを付与すると、タイムバー３７においてそのランドマークが付与された画像に相当する時間の位置に所定の標識が表示される。

「このフレームから再生」６４ｅを選択すると、その選択されたフレーム画像以降の通常の動画画像が再生される。
「このフレーム周辺を再生」６４ｆを選択すると、その選択されたフレーム画像を中心とする前後ｘ（ｘ：任意の整数）枚が一枚ずつ順次表示させて再生表示される。ｘ枚の設定方法は、メニューバーの「設定」で予め設定してもよいし、右クリックで表示されたポップアップメニューから「このフレーム周辺を再生」６４ｆを選択後、さらにポップアップメニューを表示させて、そのポップアップメニュー内に設定コマンドを設けてもよい。

なお、本実施形態ではコマンド群をポップアップメニューに表示させたがこれに限定されず、例えば、予め表示されているボタン、プルダウンメニューなどに表示させてもよい。

また、本実施形態では、ダイジェスト表示アルゴリズムにより抽出された画像を一覧表示させたが、これに限定されず、ダイジェスト表示アルゴリズムにより抽出された画像以外の画像を一覧表示させてもよい。

本実施形態によれば、ユーザの目的に合わせて、ダイジェスト表示のアルゴリズムを選択することができる。また、ダイジェスト表示の表示方法を複数にし、ユーザに選択させることができる。また、ダイジェスト表示を中心とした観察形態を提供し、観察時間の短縮が見込まれる。

＜第２の実施形態＞
第１の実施形態では、ダイジェスト画像を対象に一覧表示させたが、本実施形態では、カプセル型内視鏡で撮像された症例データに対して１つ以上の画像ルーチンを行い、それぞれの画像処理で検出された画像にその画像処理ルーチン名をラベルとして付与して一覧表示される。なお、本実施形態でも、第１の実施形態で用いたワークステーション７を用いるため、その説明を省略する。

図８は、本実施形態における一覧表示を説明するための図である。まず、ワークステーション７にカプセル型内視鏡で撮像された約６００００枚の画像からなる症例データ７１が外部装置５より転送される。画像処理部２５は、その症例データ７１に対して、例えば、所定の色成分に基づく輝度値が所定の閾値より高い画像を検出する色検出（赤色検出、白色検出等）、予め登録されているポリープの形状や色等パターンに基づいてポリープを検出するポリープ検出などの１つ以上の画像処理ルーチンを行う。

次に、制御部２２は、その症例データ７１のうち画像処理によって検出された画像のみのリストデータ７２を作成する。リストデータ７２は、上記画像処理で検出された画像と、ラベル名とが対応付けられている。ラベル名とは、上記画像処理で検出された画像の画像検出ルーチン名（例えば、赤色検出、白色検出等）である。

次に、制御部２２は、そのリストデータ７２に基づいて、ディスプレイ８に症例データの画像を検出結果一覧表示７３として一覧表示させる。このとき、一覧表示された各画像の近傍にラベル名が表示される。なお、ラベル名として表示させる内容は、テキストに限定されず、識別用図形等によるマーキングでもよい。

これにより、所定の画像処理ルーチンにより検出された画像を一覧表示でみることができるため、それらの検出結果を観察するときに費やす時間を短縮することができる。
次に、一覧表示された各画像についてコメントを付与することについて説明する。

図９は、本実施形態における一覧表示された各画像についてコメントを付与することを説明するための図である。検出結果一覧表示７３に表示された画像のうち、マウスやキーボード等の入力装置を用いて、いずれかの画像を選択し、その選択した画像にコメントを入力する。

そうすると、その入力されたコメントデータ７２ｃは、リストデータ７２内のそのコメントデータに対応する画像データに付与される。
さらに、マウス等の入力装置を用いてレポートに載せる画像を選択すると、コメントがつけられた画像が選択された場合は、そのコメントがレポート７４に自動的に挿入される。

これにより、赤色検出機能や白色検出機能等により検出された画像に簡単にコメントを付けることができるため、診断を効率よく行うことができる。また、検出された画像の中から簡単にレポートに載せる画像を選択することができるため、レポートの作成を効率的に行うことができる。

なお、図１０に示すように、検出結果一覧表示７３の画面上に設けられた所定のボタン７５を押下することにより、リストデータ７２の画像を一括でレポートに記載してもよい。これにより、検出された画像が全て掲載されたレポートを簡単に作成することができるため、レポートの作成を効率よく行うことができる。

本実施形態によれば、検出結果を素早く閲覧するために、検出された画像を全て含むリストデータを作成し、そのリストデータに基づいて画像の一覧を画面上に表示させることができる。また、検出結果の一覧として表示された画像に対してレポート等で使用できるコメントをキーボード等の入力装置を用いて入力することができる。また、画面上に設けられた所定のボタンを押下することで、検出された全ての画像を自動的にレポートに出力することができる。

＜第３の実施形態＞
本実施形態では、サムネイル画像による一覧表示と全画像の要約情報表示（カラーバーやタイムバーなど）を同一画面上で実施し、一覧表示にて選択／表示されているサムネイル画像と全画像の要約情報とをリンクする情報を表示することについて説明する。

図１１は、第３の実施形態（実施例１）における一覧表示とカラーバー／タイムバーを同時に表示し一覧表示上で選択された画像の位置関係を明示した表示画面を示す。一覧表示画面１００には、サムネイル画像による一覧が表示される一覧表示領域１０１と、カラーバー／タイムバー１０３など全画像の要約情報とが表示される要約情報表示領域１０５がある。

カラーバー／タイムバー１０３上に、一覧表示上にフォーカスがある画像１０２の位置情報をカーソル１０４などのマークや線、色変化などで表示することができる。
また、一覧表示上のフォーカス（以下、一覧表示上のフォーカスで選択されている画像をフォーカス画像１０２という。）を動かすと、カーソル１０４などの位置表示も連動してそのフォーカス画像の位置に移動する。逆にカラーバー／タイムバー１０３上のカーソル１０４を移動させると、連動して一覧表示上のフォーカスも移動し、フォーカス画像１０２が変更される。このとき、一覧表示されていないエリアにカーソル１０４が移動させられた場合は、一覧表示がスクロールして、カーソル１０４の移動位置に対応する画像に一覧上のフォーカスが当てられる。

図１２は、第３の実施形態（実施例２）における一覧表示とカラーバー／タイムバーを別画面にて同時に表示し、一覧表示上で選択された画像の位置関係を明示した、一覧表示ウィンドウ１１１及び要約情報表示ウィンドウ１１２を示す。

本実施例では、上述の実施例１と異なり、サムネイル画像による一覧表示領域とカラーバー／タイムバー１０３など全画像の要約情報を表示する要約情報表示領域とが分離して、それぞれ覧表示ウィンドウ１１１、要約情報表示ウィンドウ１１２というように、別々のウィンドウとなっている。

画面上の動作としては、実施例１と同様であり、一覧表示ウィンドウ上のフォーカスの移動と、要約情報表示ウィンドウ１１２上のカーソル１０４の位置とは連動している。したがって、お互いの画面を操作すると、その操作によって、他方の画面の表示も連動して変化する。なお、画面の数はいくつでも構わず、表示するデータ項目の数だけ存在しても構わない。

＜第４の実施形態＞
本実施形態では、一覧表示されている画像の区間が全画像の要約情報のどの部分に当たるかを表示することについて説明する。どの部分かを示す方法としては、線を引いたり、色をつけたりと様々な方法がある。

図１３は、第４の実施形態（実施例１）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。同図に示すように、カラーバー／タイムバー１０３上に線１１５を引くことで、一覧表示領域１０１に一覧表示されている画像の区間を明確化することができる。

図１４は、第４の実施形態（実施例２）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。同図に示すように、一覧表示されている画像に対応する区間に対応するカラーバー／タイムバー１０３上の区間部分１１６を、色を変えて表示させる。これにより、一覧表示されている区間を明確化することができる。

図１５は、第４の実施形態（実施例３）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。同図に示すように、一覧表示されている画像に対応する区間に対応するカラーバー／タイムバー１０３上の区間部分１１６をマーキング１１７で表示する。これにより、一覧表示されている区間を明確化することができる。

図１６は、第４の実施形態（実施例４）におけるカラーバー／タイムバー上に一覧表示区間を表示する一覧表示画面を示す。本実施例では、一覧表示させた画像の区間を特定するために、位置を表示するカーソル１０４の形状を変化させる。同図では、カーソル１０４の幅に対応する区間の画像が一覧表示されている。これにより、一覧表示されている区間を明確化することができる。

＜第５の実施形態＞
本実施形態では、一覧表示画面はスクロールすることが可能であり、このスクロールは１行ずつだけでなく、複数行ずつ、１画面ずつ、１画像ずつが選択することについて説明する。

図１７は、第５の実施形態における一覧表示上のスクロールを任意の単位で実施する一覧表示画面を示す。図１７（Ａ）は、一行単位で一覧をスクロールする場合を示す。図１７（Ｂ）は、複数行単位で一覧をスクロールする場合を示す。図１７（Ｃ）は、画面（ページ）単位で一覧をスクロールする場合を示す。図１７（Ｄ）は、一画像単位で一覧をスクロールする場合を示す。

このような、スクロール作業を実施した場合のスクロール量は、予め設定することができる。したがって、設定値により、スクロール作業時の画像のスクロール量が異なる。
＜第６の実施形態＞
本実施形態では、動画表示を行う画面から一覧表示画面に移行する際、（１）連続画像の先頭から特徴画像を選択／表示する、（２）動画表示画面にて表示中の画面を中心に特徴画像を選択／表示する、（３）動画表示画面にて表示中の画面を含む範囲の特徴画像を選択／表示する、ことについて説明する。

図１８は、第６の実施形態（実施例１）における動画表示画面から一覧表示画面に移行する様子を示す。同図の左側の動画表示画面は、図３の画面３１に相当する画面である。また、カーソル１２０は、図３の画面３１のカラーバー３６／タイムバー３７上における現在の動作再生位置を示すカーソルである。

本実施例では、動画表示画面３１から一覧表示画面１００に移行する際、現在の動画の再生に関わらず、連続画像の先頭から特徴画像を一覧表示させる。
これにより、動画表示画面３１から一覧表示画面１００に移行する際、どのような状況であっても連続画像の先頭から特徴画像を選択／表示することができる。また、どのような作業の途中であっても、連続動画の先頭から画像を確認することができる。

図１９は、第６の実施形態（実施例２）における動画表示画面から一覧表示画面に移行する様子を示す。本実施例では、動画表示画面３１から一覧表示画面１００に移行する際、動画表示画面３１にて現在の再生している画像位置を中心に、所定の枚数が一覧表示される。これにより、動画表示画面３１にて観察中の画像の前後にある特徴画像が観察できる。

図２０は、第６の実施形態（実施例３）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。本実施例では、動画表示画面３１から一覧表示画面１００に移行する際、現在の画像位置を含むページの画像が一覧表示される。これにより、どのような作業のからでも、所定の区間内にカーソルがある場合、同じ画像群が選択／表示される。

図２１は、第６の実施形態（実施例４）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。本実施例では、動画表示画面３１から一覧表示画面１００に移行する際、現在再生している画像をページ先頭から一覧表示させる。

図２２は、第６の実施形態（実施例５）における動画表示画面３１から一覧表示画面１００に移行する様子を示す。本実施例では、動画表示画面３１から一覧表示画面１００に移行する際、現在再生している画像がページの末尾になるように一覧表示させる。

また、図１８に示した第６の実施形態（実施例１）、図１９に示した第６の実施形態（実施例２）、図２０に示した第６の実施形態（実施例３）、図２１に示した第６の実施形態（実施例４）、図２２に示した第６の実施形態（実施例５）のうち、どれを選択するかを設定することができる。

＜第７の実施形態＞
本実施形態では、一覧表示画面１００から動画表示画面３１に移行する際、（１）連続画像の先頭画像を表示する、（２）一覧表示画面に表示する前の画面を表示する、（３）一覧表示画面にて選択した画面を表示する、ことについて説明する。

図２３は、第７の実施形態（実施例１）における一覧表示画面から動画表示画面に移行する様子を示す。同図では、一覧表示画面１００から動画表示画面３１に移行する際、連続画像の先頭画像が選択／表示される。これにより、どのような作業の途中であっても、連続動画の先頭から画像を確認することができる。

図２４は、第７の実施形態（実施例２）における一覧表示画面から動画表示画面に移行する様子を示す。同図では、一覧表示画面１００から動画表示画面３１に移行する際、一覧表示に移行前の画像が選択／表示される。これにより、どのような作業の途中であっても、一覧表示画面表示前の作業に戻ることができる。

図２５は、第７の実施形態（実施例３）における一覧表示画面から動画表示画面に移行する様子を示す。同図では、一覧表示画面１００から動画表示画面３１に移行する際、現在一覧上でフォーカスされている画像が選択／表示される。これにより、一覧表示画像で注目している画像を開始点として、画像を確認することができる。

＜第８の実施形態＞
本実施形態では、一覧表示画面にて選択／表示する画面が複数ページにわたる場合、そのページ区切りが分かるような表示線を、全画像の要約情報（カラーバー／タイムバー）上に表示することについて説明する。表示方法は、線を引いたり、色をつけたりと様々な方法がある。

図２６は、第８の実施形態におけるカラーバー／タイムバー上に一覧表示のページ区間を表示する一覧表示画面を示す。同図に示すように、カラーバー／タイムバー１０３上に引かれた線１３０間は、一覧表示される画像の表示区間に対応している。

これにより、一覧表示におけるページ区間を明確化することができる。なお、ページの区切りは、線だけではなく、例えば第４の実施形態にて示した様々なマーキング方法でも構わない。

＜第９の実施形態＞
本実施形態では、一覧表示画面上で、気になった画像にチェックをつけることができる一覧表示画面について説明する。

図２７は、第９の実施形態（実施例１）における一覧表示上の注目画像にチェックをつけることができる一覧表示画面を示す。本実施例では、一覧表示画面１００上で、注目する画像を選択しチェック１３１をつけることができる。

同図に示すように、チェックされた画像はマークなどの表示や、枠の色を変えるなど、画像の近傍への表示にて判別できる。なお、チェックした画像を識別するマークは識別記号であれば、色、形状は自由である。テキストでも構わない。

図２８は、第９の実施形態（実施例２）における一覧表示上の注目画像にチェックをつけることができる一覧表示画面を示す。本実施例では、図２７と同様に、一覧表示画面１００上で、注目する画像を選択しチェックをつけることができる。

同図に示すように、一覧表示領域１０１でチェックされた画像は、副表示領域１３５にサムネイル画像１３６として登録される。なお、一覧表示と関連付けるマークは識別記号であれば、色、形状は自由である。テキストでも構わない。

このように、一覧表示された任意の画像にチェックをつけられた場合、その画像に対してマークが付与されたり、その画像の枠の色が変更される（強調表示）などの一覧表示用サムネイル画像の近傍への識別情報の付与の他に、当該チェックされた画像を表示するための副表示領域を用意し、そこに追加することができる。

＜第１０の実施形態＞
本実施形態では、一覧表示画像上で気になる画像としてチェックされて副表示領域に表示された画像が、一覧表示領域をスクロールすると、同時にスクロールされることについて説明する。その際、一覧表示されている画像区間内にない場合も表示する方法と、表示しないが選択できる。

図２９は、第１０の実施形態（実施例１）における一覧表示用副表示領域の注目画像の表示状態が変化する様子を示す。同図に示すように、一覧表示領域１０１上でチェックされた注目画像が、サムネイル画像として副表示領域１３５に表示される。

現在一覧表示領域１０１に表示されている画像の区間にある注目画像のみが、副表示領域１３５に表示される。よって、一覧表示領域１０１をスクロールし、全画像が入れ替わると、それに応じて副表示領域１３５のサムネイル画像も入れ替わる。なお、一覧表示領域１０１で画像が入れ替わると、副表示領域１３５も入れ替わるかどうかは設定にて切り替えることができる。

図３０は、第１０の実施形態（実施例２）における一覧表示用副表示領域の注目画像の表示状態が変化する様子を示す。同図に示すように、一覧表示領域１０１上でチェックされた注目画像が、サムネイル画像として副表示領域１３５に表示される。

本実施例では、一覧表示領域１０１上で表示されていない区間の注目画像も、全て副表示領域１３５に表示される。よって、一覧表示領域１０１をスクロールし、全画像が入れ替わっても、副表示領域のサムネイル画像に変化はない。

ただし、副表示領域１３５に入りきらない数のサムネイル画像がある場合、画像の表示位置に一番近いサムネイル画像が中央に表示される。なお、一覧表示領域１０１で画像が入れ替わると、副表示領域１３５も入れ替わるかどうかは設定にて切り替えることができる。

＜第１１の実施形態＞
本実施形態では、動画表示を行う画像にて、既に特徴画像としてピックアップされた画像がある場合、一覧表示用に選択されたアルゴリズムで選択されない画像であっても、一覧表示されるように設定ができる。またこれらの画像には、別のアルゴリズムにて選択されたことを示すマーク表示や枠の色変更などによるマーキングをすることについて説明する。

図３１は、第１１の実施形態における動画表示画面でピックアップした画像が一覧表示画面に追加される様子を示す。同図に示すように、動画表示画面３１にてピックアップした画像が、選択した一覧表示用アルゴリズム（病変部検出など）では選択されない画像であっても、一覧表示画面上のサムネイル画像として表示する設定ができる。このピックアップ画像は、選択した一覧表示用アルゴリズムで選択された画像ではないことを示すマーキング表示して区別できるようにしてもよい。

＜第１２の実施形態＞
本実施形態では、一覧表示画面に表示する画像の一枚ずつの位置を、全画像の要約情報上に重ねて表示することについて説明する。これにより、選択したアルゴリズムにて抽出される画像が、全体画像のどの部分あるのかが判断できる。

図３２は、第１２の実施形態におけるカラーバー／タイムバー上に一覧表示用に抽出された画像のマーキングを行った一覧表示画面を示す。同図に示すように、一覧表示用に抽出された画像それぞれに対応するカラーバー／タイムバー１０３上の位置に線１４０によりマーキングされている。これにより、カラーバー／タイムバー１０３上における一覧表示用に抽出された画像の位置を明確化することができる。なお、画像の位置は、線だけではなく第４の実施形態にて示した様々なマーキング方法でも構わない。

図３３は、第１２の実施形態（変形例１）における、一覧表示用に抽出された画像に対応する位置がマーキングされているカラーバー／タイムバーのうち所望の範囲を表示する一覧表示画面の一例を示す。図３２では、全時系列画像を表すカラーバー／タイムバー１０３上について、一覧表示用に抽出された画像それぞれに対応する位置にマーキングした。一方、本変形例では、図３２で示す全時系列画像を表すカラーバー／タイムバー１０３のうち、所望の範囲を選択して、その選択した範囲に該当するカラーバー／タイムバーを拡大表示させる（カラーバー／タイムバー１０３ａ）。一覧表示領域１０１には、そのカラーバー／タイムバー１０３ａ上のマーキングに対応する画像のみが表示される。

図３４は、第１２の実施形態（変形例２）における一覧表示画面を示す。所望の範囲に絞り込んでいない一覧表示画面（図３２）から、図３４の符号１４１に示すように行単位で範囲を指定してもよいし、またはページ単位で指定してもよい。

＜第１３の実施形態＞
本実施形態では、上述の実施形態で説明したように所定の検出アルゴリズムで検出されたダイジェスト画像と、そのダイジェスト画像の前後の時系列画像（検出アルゴリズムを実行しなかった場合の画像）を一覧表示領域１０１に表示する表示例を示す。

図３５は、本実施形態における一覧表示画面１００を示す。一覧表示領域１０１には、中央の列１５１に、上から順に時系列にダイジェスト画像Ｔ₁，Ｔ₂，Ｔ₃，・・・Ｔ_nが表示されている。各ダイジェスト画像Ｔ₁，Ｔ₂，Ｔ₃，・・・Ｔ_nを挟んで左右には、各ダイジェスト画像Ｔ₁，Ｔ₂，Ｔ₃，・・・Ｔ_nの前後の時系列画像が表示されている。具体的には、画像領域１５３にはダイジェスト画像より時系列的に前の画像が連続して1つ以上表示されている。また、画像領域１５２には、ダイジェスト画像より時系列的に後の画像が連続して０個以上表示されている。画像領域１５１は、ダイジェスト画像であることを判りやすくするため、拡大して表示したり、マークを付けてもかまわない。

本実施形態によれば、所定の検出アルゴリズムで検出されたダイジェスト画像の前後の時系列画像を確認することができる。これにより、一覧表示時点で、特徴のある画像の前後の画像を表示させることにより、観察する効率を向上させることができる。

＜第１４の実施形態＞
本実施形態では、一覧表示領域１０１に表示された各画像にマウスカーソル１６１を移動させた際の画像の拡大表示について説明する。

図３６は、本実施形態における一覧表示領域１０１に表示された画像にマウスカーソル１６１を移動させた際の画像の拡大表示について示す。マウスカーソル１６１に最も近い画像が、符号１６０で示すように拡大表示される。符号１６０で示す拡大表示を表示している際、併せて属性表示をしてもかまわない。

本実施形態によれば、一覧表示された画像のうち着目したい画像にカーソルを当てると、その画像を拡大表示させることができる。これにより、他の画面に遷移しなくてもその着目したい画像を拡大表示させることができ、観察効率が向上する。
＜第１５の実施形態＞
本実施形態では、ダイジェスト画像を検出するための閾値を設定することについて説明する。

図３７は、本実施形態におけるダイジェスト画像を検出するための検出条件を設定する検出条件設定画面を示す。第１の実施形態で説明したように、スイッチ２（４１ｂ）を押下すると、時系列画像から類似度に基づいてダイジェスト画像を検出するが、検出条件設定画面１７０ではこの類似度を設定することができる。

図３７において「特徴レベル」１７１は、上記の類似度に相当する。「特徴レベル」１７１には、例えば、カーソル１７２により特徴レベルを５段階から選択して設定することができる。上述の通り、画像間の類似の判定は、例えば、２つの画像間における画素値の差分をとり、その差分が閾値を超えているか否かで行う。したがって、特徴レベルを大きく設定するほど、その差分が大きくなる。

上記の検出条件を設定してその設定内容を更新する場合には、「ＯＫ」ボタン１７４を押下する。当該画面を閉じる場合には、「閉じる」ボタン１７５を押下する。
本実施形態によれば、検出を行う際に、検出条件をユーザが設定することができるので、よりユーザにあった検出を行うことができる。

＜第１６の実施形態＞
本実施形態では、時系列画像群から特定区間にある画像群を指定し、その指定した範囲内の時系列画像を一覧表示することについて説明する。

図３８は、本実施形態における時系列画像群から特定区間にある画像群を指定し、その指定した範囲内の時系列画像を一覧表示する一覧表示画面１００を示す。
カラーバー／タイムバー１０３において、特定区間開始カーソル１８１により区間の開始を指定し、特定区間終了カーソル１８２により区間の終了を指定する。すると、その指定された区間内の時系列画像が検出され、符号１８３で示すように一覧に表示される。この際、指定した区間外の時系列画像を一覧表示画像に含めてもかまわない。

本実施形態によれば、特定の区間のみの時系列画像を表示させることができる。よって、その特定の区間として任意の臓器が撮影された画像の撮影区間を設定することにより、その臓器の時系列画像のみを表示させることができる。

さらに、第１５の実施形態と組み合わせることにより、その設定した特定区間内について特徴検出の閾値を設定してもよい。これにより、その特定区間内のダイジェスト画像の一覧を表示させることができる。

＜第１７の実施形態＞
本実施形態では、時系列画像の特定区間を複数指定し、その指定した区間毎にダイジェスト画像を検出するための閾値を設定することについて説明する。

図３９は、本実施形態における臓器（部位）毎または特定区間毎に、ダイジェスト画像を検出するための検出条件設定画面を示す。同図の画面は、区間の開始を指定する特定区間開始カーソル１９１と、区間の終了を指定する特定区間終了カーソル１９２と、各区間を指定する指定カーソル１９３−１，・・・，１９３−ｎと、指定した区間内の特徴のある画像を検出するための特徴レベル（閾値）を設定する設定画面１９６と、各区間の閾値を設定する設定フィールド１９５−１，・・・１９５−ｎによって構成されている。

まず、特定区間開始カーソル１９１、特定区間終了カーソル１９２、指定カーソル１９３−１，・・・，１９３−ｎにより、各区間を指定する。次に、設定画面１９６の設定フィールド１９５−１，・・・１９５−ｎに、対応する指定した区間の特徴レベル（閾値）を設定する。

上記設定内容に基づいて、ダイジェスト画像を検出すると、各区間内のダイジェスト画像が検出され、一覧表示画面に表示される。この際、指定した区間外の時系列画像を一覧表示画像に含めてもかまわない。

本実施形態によれば、臓器（部位）毎または特定区間毎に、検出閾値を設定することができる。これにより、臓器（部位）毎にカプセル内視鏡の進む速さが異なるので、部位毎に特徴検出の閾値が異なるという問題に対して対応することができる。

＜第１８の実施形態＞
本実施形態では、操作者が設定した時間経過後、一覧表示のページを順次、ページ送りすることについて説明する。

図４０は、本実施形態における、一覧表示が複数ページに渡る場合、操作者が設定した時間経過後、一覧表示のページを順次、ページ送りする様子を示す。符号１９９はスクロールバーを示す。一覧表示がページ送りされるに伴い、スクロールバーも移動していく。

本実施形態によれば、一覧表示させても複数ページに渡る場合、自動でページ送りをすることができるので、ユーザのスクロールする手間を省くことができる。
＜第１９の実施形態＞
本実施形態では、検出条件として観察時間を指定することによりダイジェスト画像を検出する閾値を決定することについて説明する。

図４１は、本実施形態における観察時間を設定するための検出条件設定画面２００を示す。検出条件設定画面２００は、「観察時間」入力欄２０１、「ＯＫ」ボタン１７４、「閉じる」ボタン１７５からなる。「閉じる」ボタン１７５を押下すると、検出条件設定画面２００を閉じる。

「観察時間」入力欄２０１に時間（分）を設定して「ＯＫ」ボタン１７４を押下すると、その設定した観察時間内でダイジェスト画像を再生することができる。具体的には、操作者の設定した時間内で観察できるように、その設定された時間情報を基づいて、フレームレートから観察対象となる画像枚数を算出する。その算出した画像枚数分のダイジェスト画像が得られるように、時系列画像から検出する際に用いる類似度の閾値（特徴レベル）を決定する。

本実施形態によれば、多忙な観察者が限られた時間内で、特徴レベルの大きいものを抽出し、観察することができる。
＜第２０の実施形態＞
本実施形態では、図３で説明した主表示領域３２に、主表示画像３３としてダイジェスト画像を表示させ、主表示画像３３の左右（または上下）に、そのダイジェスト画像の前後の時系列画像を表示することについて説明する。

図４２は、本実施形態における内視鏡システムの観察画面を示す。ウィンドウ３１内には、主表示画像等を表示する主表示領域３２と、カラーバー／タイムバー１０３とが表示される。

主表示領域３２内には、中央に主表示画像３３、主表示画像３３を挟んで左右に副表示画像２１１，２１２が表示される。ダイジェスト画像の再生中は、例えば、主表示画像３３としてダイジェスト画像Ｔ₂が再生されると、副表示画像２１１，２１２には、そのダイジェスト画像Ｔ₂の前後のダイジェスト画像Ｔ₁，Ｔ₃が再生される。

ダイジェスト画像の再生を停止すると、主表示画像３３には停止指示時のダイジェスト画像Ｔ₂が表示される。このとき、副表示画像２１１，２１２にはそれぞれ、ダイジェスト画像Ｔ₂の前後の時系列画像Ｔ₂−１，Ｔ₂＋１が表示される。

本実施形態によれば、ダイジェスト画像を表示するとともに、同時にその前後の時系列画像を表示させることができるので、観察効率を向上させることができる。
本発明の実施形態によれば、一覧画像表示にて症例データを確認する際、全体の位置関係と合わせて見ることで、画像の時系列的な情報を把握しやすくすることができる。また、既存の機能と一覧画像と動画表示の連携性を高めることで、連続画像からの特徴部位の検出を高速化することができる。

なお、本発明において説明したいずれの実施形態においても、その趣旨を逸脱しない限り種々の変形が可能である。また、上記実施形態は、実施可能な限度において、任意に２つ以上を組み合わせることもできる。

Claims

カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得手段と、
前記取得した時系列画像データから所定の画像データを検出する画像検出手段と、
前記検出された画像データである検出画像データを一覧表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
前記画像処理装置は、さらに、
前記表示制御手段に対する指示が入力される表示指示入力手段を備え、
表示指示入力手段は、前記画像検出手段に基づいて検出が行われる際に使用する検出方法を選択する検出方法選択手段と、
前記表示制御手段により前記画像データを一覧表示させるための一覧表示選択手段と、
前記時系列で撮像された画像データを動画再生させる動画再生選択手段と、
を備えることを特徴とする請求項１に記載の画像処理装置。
前記検出方法選択手段により選択可能な検出方法は、前記時系列で撮像された画像データを一定間隔置きに抽出する方法、時系列に並んだｎ枚目とｎ±ｍ枚目（ｎ，ｍ：任意の整数）の画像データ間の差分に基づいて画像データを抽出する方法、病変箇所の特徴に基づいて前記画像データを抽出する方法、及び前記画像データの色成分に基づいて画像データを抽出する方法、時系列に並んだｎ枚目とｎ枚目の前後ｐ枚（ｎ，ｐ：任意の整数）の画像平均値との画像データ間の差分に基づいて画像データを抽出する方法、のうち少なくともいずれか１つまたは２つ以上の組み合わせである
ことを特徴とする請求項２に記載の画像処理装置。
前記表示制御手段は、前記検出方法により抽出されなかった画像を表示することができる
ことを特徴とする請求項３に記載の画像処理装置。
前記表示制御手段は、前記画像データのサムネイル画像を縦ｊ（ｊ：任意の整数）枚×横ｋ（ｋ：任意の整数）枚で一覧表示させる
ことを特徴とする請求項１に記載の画像処理装置。
前記ｊ×ｋの設定は、ユーザにより任意に設定されるか、または前記サムネイル画像の大きさに基づいて設定される
ことを特徴とする請求項５に記載の画像処理装置。
前記表示制御手段は、さらに、前記一覧表示させたサムネイル画像のうち病変部位が撮像されているサムネイル画像を強調表示させる、または該サムネイル画像に対して所定の識別情報を付与する
ことを特徴とする請求項５に記載の画像処理装置。
前記表示制御手段は、さらに、前記一覧表示させたサムネイル画像のうち所定のサムネイル画像が選択された場合、該選択されたサムネイル画像に対応する画像データに対して所見情報を付与するコマンド、該選択されたサムネイル画像を所定の画像表示領域に追加するコマンド、症例に関するレポートに該選択されたサムネイル画像に対応する画像データを添付するコマンド、前記時系列で撮像された一連の画像データの撮像期間を示す時間スケールとして表示される時間表示軸上において該選択されたサムネイル画像に対応する画像データがどの位置にあるかを標識するコマンド、該選択されたサムネイル画像に対応する画像データ以降の画像データを動画再生する動画表示画面に遷移して該画像データを動画再生するコマンド、該選択されたサムネイル画像に対応する画像データの前後ｘ（ｘ：任意の整数）枚を表示させるコマンド、該選択されたサムネイル画像と該選択されたサムネイル画像から時系列で一つ前の前記一覧表示されたサムネイル画像との間にあるすべての画像を表示させるコマンド、及び該選択されたサムネイル画像と該選択されたサムネイル画像から時系列で一つ後の前記一覧表示されたサムネイル画像との間にあるすべての画像を表示させるコマンドのうち少なくとも１つのコマンドを表示させる
ことを特徴とする請求項５に記載の画像処理装置。
前記画像検出手段は、時系列で撮像された画像データから、一定時間毎の画像を検出する画像検出ルーチン、隣接する画像間で類似度の低い画像を検出する画像検出ルーチン、病変部位が撮影された画像を検出する画像検出ルーチン、診断に不要な画像以外の画像を検出する画像検出ルーチン、及び所定の色成分の画素の割合が多い画像もしくは領域を含む画像を検出する画像検出ルーチンのうち少なくとも１つの画像検出ルーチンを用いて前記所定の画像を前記検出画像データとして検出する
ことを特徴とする請求項１に記載の画像処理装置。
前記表示制御手段は、前記画像検出ルーチンにより抽出されなかった画像を表示することができる
ことを特徴とする請求項９に記載の画像処理装置。
前記画像処理装置は、さらに、
前記画像検出ルーチンを選択させるための画像検出ルーチン選択手段
を備えることを特徴とする請求項９に記載の画像処理装置。
前記画像処理装置は、さらに、
前記画像検出手段により検出された前記検出画像データと、該検出に用いられた画像検出ルーチン名とを関係付ける関係付け手段を備え、
前記表示制御手段は、前記一覧表示させる画像と共に、前記画像検出ルーチン名をラベル名として表示させる
ことを特徴とする請求項１１に記載の画像処理装置。
前記画像処理装置は、さらに、
前記一覧表示された画像のうち選択された画像に対して所見情報を付与する所見情報付与手段
を備えることを特徴とする請求項９に記載の画像処理装置。
前記画像処理装置は、さらに、
前記一覧表示された画像のうち選択された画像についての症例に関するレポートを作成するレポート作成手段と、
前記選択画像に前記所見情報が付与されている場合、前記レポートに該選択画像と共に該所見情報を挿入する所見情報挿入手段
を備えることを特徴とする請求項１３に記載の画像処理装置。
前記画像処理装置は、さらに、
前記画像検出手段により検出された全ての検出画像データを一括で前記レポートに出力する一括出力手段
を備えることを特徴とする請求項１４に記載の画像処理装置。
前記表示制御手段は、前記検出された画像データである検出画像データを一覧表示させると共に、時系列で撮像された全画像の要約情報を表示させ、さらに、該一覧表示させた検出画像から任意の画像を選択する動作に連動して、前記要約情報における該選択された画像の位置を示す標識情報が該前記要約情報に付与して表示させる
ことを特徴とする請求項１に記載の画像処理装置。
前記表示制御手段は、前記要約情報に含まれる画像群のうち前記一覧表示されている画像群の区間を示す標識情報を該要約情報に付与して表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記検出画像を一覧表示させた場合、行単位、ページ単位、または画像単位でスクロールさせること
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記時系列で撮像された画像を動画表示させる動画表示画面から前記検出画像を一覧表示させる一覧表示画面に移行する際、前記検出された時系列の検出画像群の先頭から一覧表示させ、または該動画表示画面にて表示中の画面を中心に前記検出画像を一覧表示させ、あるいは該動画表示画面にて表示中の画面を含む範囲の前記検出画像を一覧表示させ、あるいは該動画表示画面にて表示中の画像を前記検出画像の一覧のページの先頭に表示させ、あるいは該動画表示画面にて表示中の画像を前記検出画像の一覧のページの末尾に表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記時系列で撮像された画像を動画表示させる動画表示画面から前記検出画像を一覧表示させる一覧表示画面に移行する際、該画像を一覧表示画面に表示する位置を設定できる
ことを特徴とする請求項１９に記載の画像処理装置。
前記表示制御手段は、前記検出画像を一覧表示させる一覧表示画面から前記時系列で撮像された画像を動画表示させる動画表示画面に移行する際、前記時系列で撮像された先頭画像を表示させ、または前記一覧表示画面に遷移する前の前回の前記動画表示画面に表示されていた画像を再び表示させ、あるいは前記一覧表示画面にて選択された画面を表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、一度に一覧表示させる画像群の単位であるページ区間を示す標識情報を前記要約情報に付与して表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記一覧表示された画像のうち選択された画像に対して選択されたことを示す識別情報を付与し、該識別情報をマーキング表示または強調表示させるか、あるいは該選択された画像のみを表示する副表示領域に前記選択された画像を追加して表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記副表示領域に表示された画像を、一覧表示画面のスクロール動作に連動してスクロールさせ、かつ該副表示領域に前記一覧表示されている区間の画像のみを表示させる
ことを特徴とする請求項２３に記載の画像処理装置。
前記表示制御手段は、さらに、前記時系列で撮像された画像を動画表示させる動画表示画面にて任意に選択された画像を前記検出画像を一覧表示させる一覧表示画面に追加して表示させると共に、前記検出されて一覧表示された画像から該任意に選択された画像を強調表示させる、または該選択された画像を識別するための識別情報を付与して表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記要約情報における前記検出された全画像データの位置を示す識別情報を前記要約情報に付与して表示させる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、さらに、
前記要約情報のうち所望の範囲に含まれる該識別情報に対応する画像のみを一覧表示させ、該所望の範囲の要約情報を拡大して表示させる
ことを特徴とする請求項２６に記載の画像処理装置。
前記一覧表示させた検出画像は、行単位またはページ単位で指定できる
ことを特徴とする請求項１６に記載の画像処理装置。
前記表示制御手段は、前記時系列画像データから前記画像検出手段により検出された検出画像データを第1の方向に表示させ、該各検出画像データの前後のフレーム画像に相当する０以上の前記時系列画像データを該検出画像データから第２の方向に表示させる
ことを特徴とする請求項１に記載の画像処理装置。
前記表示制御手段は、前記一覧表示された各画像にカーソルが当てられた場合、該画像を拡大して表示させる
ことを特徴とする請求項１に記載の画像処理装置。
前記画像処理装置は、さらに、
前記画像データ間の類似度についての閾値を設定することにより、検出する画像の類似度のレベルを調整することができる類似度閾値設定手段
を備えることを特徴とする請求項３に記載の画像処理装置。
前記画像処理装置は、さらに、
前記時系列画像データから任意の区間にある時系列画像を指定する区間設定手段
を備え、
前記表示制御手段は、前記指定した区間内の時系列画像群を一覧表示させる
ことを特徴とする請求項１に記載の画像処理装置。
前記画像処理装置は、さらに、
前記時系列画像データから任意の区間にある時系列画像を指定する区間設定手段
を備え、
前記表示制御手段は、前記閾値に基づいて、前記指定した区間内の時系列画像から検出画像データを一覧表示させる
ことを特徴とする請求項３１に記載の画像処理装置。
前記画像処理装置は、さらに、
前記時系列画像データから任意の区間を複数指定し、該指定した区間毎に前記画像検出手段により検出するための閾値を設定する設定手段
を備えることを特徴とする請求項１に記載の画像処理装置。
前記表示制御手段は、前記画像を複数ページで一覧表示させた場合、所定時間経過毎に、ページ送りする
ことを特徴とする請求項１に記載の画像処理装置。
前記画像表示手段は、さらに、
前記検出画像を再生する時間を設定できる再生時間設定手段
を備え、
前記表示制御手段は、前記設定された時間に基づいてフレームレートから再生する画像枚数を算出し、該算出した画像枚数分の前記検出画像データが得られるように、前記画像データ間の差分についての閾値を決定する
ことを特徴とする請求項３に記載の画像処理装置。
カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得手段と、
前記取得した時系列画像データから所定の画像データを検出する画像検出手段と、
画像を表示させる主表示領域と、該主表示領域より小さくかつ画像を表示させる２つの副表示領域とを有する表示手段と、
前記時系列画像データから前記画像検出手段により検出された検出画像データを前記主表示領域で再生させると共に前記各副表示領域に該検出画像データの前後の検出画像データを再生表示させ、該再生が停止されたら、該主表示領域に該停止時の検出画像データを表示させると共に、該副表示領域に該検出画像データの前後のフレーム画像に相当する該時系列画像データを表示させる表示制御手段と、
を備えることを特徴とする画像処理装置。
カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得し、
前記取得した時系列画像データから所定の画像データを検出し、
前記検出された画像データである検出画像データを一覧表示させる、
ことを特徴とする画像処理装置の動作方法。
表示に関する指示が入力される表示指示入力画面に入力された指示に基づいて、前記検出が行われる際に使用する検出方法の選択、前記一覧表示させるための一覧表示の選択、または前記時系列で撮像された画像データの動画再生をする
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記表示指示入力画面により選択可能な検出方法は、前記時系列で撮像された画像データを一定間隔置きに抽出する方法、時系列に並んだｎ枚目とｎ±ｍ枚目（ｎ，ｍ：任意の整数）の画像データ間の差分に基づいて画像データを抽出する方法、病変箇所の特徴に基づいて前記画像データを抽出する方法、及び前記画像データの色成分に基づいて画像データを抽出する方法、時系列に並んだｎ枚目とｎ枚目の前後ｐ枚（ｎ，ｐ：任意の整数）の画像平均値との画像データ間の差分に基づいて画像データを抽出する方法、のうち少なくともいずれか１つまたは２つ以上の組み合わせである
ことを特徴とする請求項３９に記載の画像処理装置の動作方法。
さらに、前記検出方法により抽出されなかった画像を表示させる
ことを特徴とする請求項４０に記載の画像処理装置の動作方法。
前記画像データのサムネイル画像を縦ｊ（ｊ：任意の整数）枚×横ｋ（ｋ：任意の整数）枚で一覧表示させる
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記ｊ×ｋの設定は、ユーザにより任意に設定されるか、または前記サムネイル画像の大きさに基づいて設定される
ことを特徴とする請求項４２に記載の画像処理装置の動作方法。
さらに、前記一覧表示させたサムネイル画像のうち病変部位が撮像されているサムネイル画像を強調表示させる、または該サムネイル画像に対して所定の識別情報を付与する
ことを特徴とする請求項４２に記載の画像処理装置の動作方法。
さらに、前記一覧表示させたサムネイル画像のうち所定のサムネイル画像が選択された場合、該選択されたサムネイル画像に対応する画像データに対して所見情報を付与するコマンド、該選択されたサムネイル画像を所定の画像表示領域に追加するコマンド、症例に関するレポートに該選択されたサムネイル画像に対応する画像データを添付するコマンド、前記時系列で撮像された一連の画像データの撮像期間を示す時間スケールとして表示される時間表示軸上において該選択されたサムネイル画像に対応する画像データがどの位置にあるかを標識するコマンド、該選択されたサムネイル画像に対応する画像データ以降の画像データを動画再生する動画表示画面に遷移して該画像データを動画再生するコマンド、及び該選択されたサムネイル画像に対応する画像データの前後ｘ（ｘ：任意の整数）枚を表示させるコマンド、該選択されたサムネイル画像と該選択されたサムネイル画像から時系列で一つ前の前記一覧表示されたサムネイル画像との間にあるすべての画像を表示させるコマンド、及び該選択されたサムネイル画像と該選択されたサムネイル画像から時系列で一つ後の前記一覧表示されたサムネイル画像との間にあるすべての画像を表示させるコマンドのうち少なくとも１つのコマンドを表示させる
ことを特徴とする請求項４２に記載の画像処理装置の動作方法。
前記画像データを検出する場合、時系列で撮像された画像データから、一定時間毎の画像を検出する画像検出ルーチン、隣接する画像間で類似度の低い画像を検出する画像検出ルーチン、病変部位が撮影された画像を検出する画像検出ルーチン、診断に不要な画像以外の画像を検出する画像検出ルーチン、及び所定の色成分の画素の割合が多い画像もしくは領域を含む画像を検出する画像検出ルーチンのうち少なくとも１つの画像検出ルーチンを用いて前記所定の画像を前記検出画像データとして検出する
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記画像検出ルーチンにより抽出されなかった画像を表示させる
ことを特徴とする請求項４６に記載の画像処理装置の動作方法。
さらに、前記画像検出ルーチンの選択を可能にする
ことを特徴とする請求項４６に記載の画像処理装置の動作方法。
さらに、前記検出された画像データである検出画像データと、該検出に用いられた画像検出ルーチン名とを関係付け、前記一覧表示させる画像と共に、該画像検出ルーチン名をラベル名として表示させる
ことを特徴とする請求項４６に記載の画像処理装置の動作方法。
さらに、前記一覧表示された画像のうち選択された画像に対して所見情報を付与する
ことを特徴とする請求項４６に記載の画像処理装置の動作方法。
さらに、前記一覧表示された画像のうち選択された画像についての症例に関するレポートを作成し、
前記選択画像に前記所見情報が付与されている場合、前記レポートに該選択画像と共に該所見情報を挿入する
ことを特徴とする請求項５０に記載の画像処理装置の動作方法。
さらに、前記検出された全ての検出画像データを一括で前記レポートに出力する
ことを特徴とする請求項５１に記載の画像処理装置の動作方法。
前記検出された画像データである検出画像データを一覧表示させると共に、時系列で撮像された全画像の要約情報を表示させ、さらに、該一覧表示させた検出画像から任意の画像を選択する動作に連動して、前記要約情報における該選択された画像の位置を示す標識情報が該前記要約情報に付与して表示させる
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記要約情報に含まれる画像群のうち前記一覧表示されている画像群の区間を示す標識情報を該要約情報に付与して表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記検出画像を一覧表示させた場合、行単位、ページ単位、または画像単位でスクロールさせること
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記時系列で撮像された画像を動画表示させる動画表示画面から前記検出画像を一覧表示させる一覧表示画面に移行する際、前記検出された時系列の検出画像群の先頭から一覧表示させ、または該動画表示画面にて表示中の画面を中心に前記検出画像を一覧表示させ、あるいは該動画表示画面にて表示中の画面を含む範囲の前記検出画像を一覧表示させ、あるいは該動画表示画面にて表示中の画像を前記検出画像の一覧のページの先頭に表示させ、あるいは該動画表示画面にて表示中の画像を前記検出画像の一覧のページの末尾に表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記時系列で撮像された画像を動画表示させる動画表示画面から前記検出画像を一覧表示させる一覧表示画面に移行する際、該画像を一覧表示画面に表示する位置を設定できる
ことを特徴とする請求項１３に記載の画像処理装置の動作方法。
前記検出画像を一覧表示させる一覧表示画面から前記時系列で撮像された画像を動画表示させる動画表示画面に移行する際、前記時系列で撮像された先頭画像を表示させ、または前記一覧表示画面に遷移する前の前回の前記動画表示画面に表示されていた画像を再び表示させ、あるいは前記一覧表示画面にて選択された画面を表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
一度に一覧表示させる画像群の単位であるページ区間を示す標識情報を前記要約情報に付与して表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記一覧表示された画像のうち選択された画像に対して選択されたことを示す識別情報を付与し、該識別情報をマーキング表示または強調表示させるか、あるいは該選択された画像のみを表示する副表示領域に前記選択された画像を追加して表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記副表示領域に表示された画像を、一覧表示画面のスクロール動作に連動してスクロールさせ、かつ該副表示領域に前記一覧表示されている区間の画像のみを表示させる
ことを特徴とする請求項６０に記載の画像処理装置の動作方法。
さらに、前記時系列で撮像された画像を動画表示させる動画表示画面にて任意に選択された画像を前記検出画像を一覧表示させる一覧表示画面に追加して表示させると共に、前記検出されて一覧表示された画像から該任意に選択された画像を強調表示させる、または該選択された画像を識別するための識別情報を付与して表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記要約情報における前記検出された全画像データの位置を示す識別情報を前記要約情報に付与して表示させる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
さらに、
前記要約情報のうち所望の範囲に含まれる該識別情報に対応する画像のみを一覧表示させ、該所望の範囲の要約情報を拡大して表示させる
ことを特徴とする請求項６３に記載の画像処理装置の動作方法。
前記一覧表示させた検出画像は、行単位またはページ単位で指定できる
ことを特徴とする請求項５３に記載の画像処理装置の動作方法。
前記時系列画像データから前記検出された検出画像データを第1の方向に表示させ、該各検出画像データの前後のフレーム画像に相当する０以上の前記時系列画像データを該検出画像データから第２の方向に表示させる
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記一覧表示された各画像にカーソルが当てられた場合、該画像を拡大して表示させる
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
さらに、前記画像データ間の類似度についての閾値を設定することにより、検出する画像の類似度のレベルを調整する
ことを特徴とする請求項４０に記載の画像処理装置の動作方法。
さらに、前記時系列画像データから任意の区間にある時系列画像を指定し、該指定した区間内の時系列画像群を一覧表示させる
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記時系列画像データから任意の区間にある時系列画像を指定し、
前記閾値に基づいて、前記指定した区間内の時系列画像から検出画像データを一覧表示させる
ことを特徴とする請求項６８に記載の画像処理装置の動作方法。
さらに、前記時系列画像データから任意の区間を複数指定し、該指定した区間毎に前記所定の画像を検出するための閾値を設定する
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記画像を複数ページで一覧表示させた場合、所定時間経過毎に、ページ送りする
ことを特徴とする請求項３８に記載の画像処理装置の動作方法。
前記検出画像を再生する時間を設定し、
前記設定された時間に基づいてフレームレートから再生する画像枚数を算出し、該算出した画像枚数分の前記検出画像データが得られるように、前記画像データ間の差分についての閾値を決定する
ことを特徴とする請求項４０に記載の画像処理装置の動作方法。
カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得し、
前記取得した時系列画像データから所定の画像データを検出し、
画像を表示させる主表示領域と、該主表示領域より小さくかつ画像を表示させる２つの副表示領域とを有する表示画面を表示し、
前記時系列画像データから前記検出された検出画像データを前記主表示領域で再生させると共に前記各副表示領域に該検出画像データの前後の検出画像データを再生表示させ、該再生が停止されたら、該主表示領域に該停止時の検出画像データを表示させると共に、該副表示領域に該検出画像データの前後のフレーム画像に相当する該時系列画像データを表示させる
ことを特徴とする画像処理装置の動作方法。
画像を表示させる処理をコンピュータに実行させる画像表示プログラムであって、
カプセル型内視鏡によって時系列で撮像された画像データである時系列画像データを取得する取得処理と、
前記取得した時系列画像データから所定の画像データを検出する画像検出処理と、
前記検出された画像データである検出画像データを一覧形式で表示させる表示制御処理と、
をコンピュータに実行させることを特徴とする画像表示プログラム。