WO2007029569A1

WO2007029569A1 - 画像表示装置

Info

Publication number: WO2007029569A1
Application number: PCT/JP2006/317005
Authority: WO
Inventors: Katsumi Hirakawa
Original assignee: Olympus Medical Systems Corp.
Priority date: 2005-09-09
Filing date: 2006-08-29
Publication date: 2007-03-15
Also published as: EP1922979A4; CN101257835A; CN101257835B; EP1922979B1; JP2007075157A; JP4464894B2; EP1922979A1

Abstract

　各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にするため、画像表示装置４は、画像表示制御部１５ａおよび画像処理制御部１５ｂを有した制御部１５を備える。画像表示制御部１５ａは、一連の被検体内画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の平均色を表示する制御を行う。画像処理制御部１５ｂは、携帯型記録媒体５または記憶部１４に記憶された画像データを取得して画像処理部１３に出力するとともに、この出力した画像に対する各種画像処理の制御を行う。

Description

明細書

画像表示装置

技術分野

[0001] 本発明は、複数の時点で撮像された一連の画像を表示する画像表示装置に関し、特に被検体内に導入されたカプセル型内視鏡を用いて撮像された一連の被検体内画像の表示に適用して好適な画像表示装置に関するものである。

背景技術

[0002] 近年、内視鏡の分野にお!、て、飲込み式のカプセル型内視鏡が開発されて、る。

このカプセル型内視鏡は、撮像機能と無線通信機能とを備え、各種臓器内の観察のために被験者の口から飲み込まれたのち自然排出されるまでの間、例えば胃、小腸、大腸などの臓器の内部を、その蠕動運動にしたがって移動しながら順次撮像する。

[0003] 臓器内を移動する間、カプセル型内視鏡によって被検体内で撮像された画像データは、順次無線信号を用いて被検体外に送信され、被検体外の受信機内に設けられたメモリに蓄積されるか、受信機に設けられたディスプレイに表示される。医師、看護師等は、メモリに蓄積された画像データをもとにディスプレイに表示させた画像、あるいは受信とともに受信機が備えるディスプレイに表示させた画像に基づいて診断を行うことができる。

[0004] 通常、カプセル型内視鏡によって撮像される一連の画像数は膨大であり、医師、看護師等は、この膨大な画像を観察して診断を行うために多大な時間と労力を要する。これに対応して、画像の検索性を向上させるとともに、表示画像がどの臓器の画像であるかを容易に認識することが可能な画像表示装置が提案されている（例えば、特許文献 1参照。）。

[0005] この画像表示装置では、一連の画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上に各画像の平均色を時系列に表示するようにしている。各画像の平均色は撮像した臓器に特有の色であるため、医師、看護師等は、この時間スケール上に表示された平均色を観察することによって、各撮像時刻の画像がどの臓器を撮像した画像であるかを容易に判別することができる。 [0006] 特許文献 1：特開 2004— 337596号公報

発明の開示

発明が解決しょうとする課題

[0007] ところが、上述した画像表示装置では、画像ごとに画像領域全体の平均色を求めるようにして!/、るため、例えば出血部位等が画像領域の一部に撮像されて、る場合など、画像領域内の一部に注目すべき領域が存在する場合であっても、この注目すベき領域の存在を平均色力も認識することは困難であるという問題があった。また、このため、平均色の観察によって画像の検索および判別等を行う場合に、注目すべき領域を含んだ画像を見逃す恐れがあるという問題があった。

[0008] 本発明は、上記に鑑みてなされたものであって、複数の時点で撮像された一連の画像の特徴を複数の画像領域ごとに全撮像期間にわたって表示することができ、各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる画像表示装置を提供することを目的とする。

課題を解決するための手段

[0009] 上述した課題を解決し、目的を達成するために、請求項 1にかかる画像表示装置は、複数の時点で撮像された一連の画像とともに該一連の画像の撮像期間を示す時間スケールを表示する画像表示装置にぉ、て、前記一連の画像内の各画像を所定の画像領域に分割した各分割画像領域の領域平均色を算出する平均色演算手段と、前記時間スケール上の各時点の表示領域を前記各分割画像領域に対応付けて分割した各分割スケール領域に、該各分割スケール領域が対応づけられた分割画像領域の前記領域平均色を表示する制御を行う表示制御手段と、を備えたことを特徴とする。

[0010] また、請求項 2にかかる画像表示装置は、上記の発明において、前記領域平均色は、所定の部分撮像期間ごとに複数画像の前記領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする。

[0011] また、請求項 3にかかる画像表示装置は、上記の発明において、前記各分割画像領域は、前記各画像を所定の分割方向に分割して形成され、前記表示制御手段は、前記時間スケール上の各時点の表示領域を表示画面上で前記分割方向と同じ方向に分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする。

[0012] また、請求項 4に力かる画像表示装置は、上記の発明にお、て、前記各分割画像領域は、前記各画像を前記表示画面上で上下方向また左右方向に 4分割して形成され、前記表示制御手段は、前記時間スケール上の各時点の表示領域を前記表示画面上で上下方向また左右方向に 4分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする。

[0013] また、請求項 5にかかる画像表示装置は、上記の発明において、前記各画像の各分割画像領域の中から所定の特徴を有する特徴画像領域を検出する特徴領域検出手段を備え、前記平均色演算手段は、前記領域平均色として、前記特徴画像領域内の色情報と該特徴画像領域を除いた前記分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出することを特徴とする。

[0014] また、請求項 6にかかる画像表示装置は、上記の発明にお、て、前記加重領域平均色は、所定の前記部分撮像期間ごとに複数画像の前記加重領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする。

[0015] また、請求項 7にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記期間領域平均色として、前記特徴画像領域を含む特徴画像の前記カロ重領域平均色と、該特徴画像を除いた前記部分撮像期間における複数画像の前記領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することを特徴とする。

[0016] また、請求項 8にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記部分撮像期間における所定サンプリング期間の一連の画像を用いて前記期間領域平均色を算出することを特徴とする。

[0017] また、請求項 9にかかる画像表示装置は、上記の発明において、前記平均色演算手段は、前記分割画像領域における所定サンプリング間隔の各画素の色情報を用いて前記領域平均色を算出することを特徴とする。

[0018] また、請求項 10にかかる画像表示装置は、上記の発明において、前記一連の画像は、被検体内に導入されたカプセル型内視鏡を用いて撮像された被検体内画像であることを特徴とする。

発明の効果

[0019] 本発明にかかる画像表示装置によれば、複数の時点で撮像された一連の画像の特徴を複数の画像領域ごとに全撮像期間にわたって表示することができ、各撮像時点における画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる

図面の簡単な説明

[0020] [図 1]図 1は、本発明の実施の形態 1にかかる無線型被検体内情報取得システムの構成を示す模式図である。

[図 2]図 2は、本発明の実施の形態 1にかかる画像表示装置の構成を示すブロック図である。

[図 3]図 3は、図 1に示した画像表示装置が表示する表示画面を示す図である。

[図 4]図 4は、図 3に示したカラーバーの描画処理を説明する図である。

[図 5]図 5は、図 1に示した画像表示装置が行うカラーバー描画処理手順を示すフロ一チャートである。

[図 6]図 6は、図 5に示した平均色演算処理手順を示すフローチャートである。

[図 7]図 7は、本発明の実施の形態 2にかかる画像表示装置の構成を示すブロック図である。

[図 8]図 8は、図 7に示した画像表示装置が行うカラーバー描画処理手順を示すフロ一チャートである。

[図 9]図 9は、図 8に示した平均色演算処理手順を示すフローチャートである。

符号の説明

[0021] 1 被検体

2 カプセル型内視鏡

3 受信装置 4 画像表示装置

5 携帯型記録媒体

6 受信アンアナ

6aへ ^6h アンテナ

11 入力部

12 表示部

13 画像処理部

13a 平均色演算部

14

15 制御部

15a 画像表示制御部

15b 画像処理制御部

21 ウィンドウ

22 主表示領域

23 主表示画像

24 アンテナ配置図

25 画像操作領域

26 カラーバー

26a 〜26d 分割カラーバ

27 タイムノー

27a スライダ

28 副表示領域

発明を実施するための最良の形態

[0022] 以下、添付図面を参照して、本発明に力かる画像表示装置の好適な実施の形態である無線形被検体内情報取得システムについて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。また、図面の記載において、同一部分には同一の符号を付している。

[0023] (実施の形態 1) まず、本実施の形態 1にかかる画像表示装置を備えた無線型被検体内情報取得システムについて説明する。図 1は、無線型被検体内情報取得システムの全体構成を示す模式図である。この無線型被検体内情報取得システムは、被検体内導入装置の一例としてカプセル型内視鏡を用いて、る。

[0024] 図 1に示すように、無線型被検体内情報取得システムは、被検体 1の体内に導入され、撮像した被検体内画像の画像データを受信装置 3に対して無線送信するカプセル型内視鏡 2と、カプセル型内視鏡 2から無線送信された画像データを受信する受信装置 3と、受信装置 3が受信した画像信号に基づヽて被検体内画像を表示する画像表示装置 4と、受信装置 3と画像表示装置 4との間で画像データ等の受け渡しを行う携帯型記録媒体 5と、を備える。

[0025] 受信装置 3は、被検体 1の体外表面に貼付等される複数のアンテナ 6a〜6hを有した受信アンテナ 6を備える。受信装置 3は、カプセル型内視鏡 2から無線送信された画像データ等を、受信アンテナ 6を介して受信するとともに、受信した各画像データに、画像データを受信した際の各アンテナ 6a〜6hの受信強度情報を対応付けて記録する。

[0026] アンテナ 6a〜6hは、例えばループアンテナを用いて実現され、被検体 1の体外表面上の所定位置、すなわちカプセル型内視鏡 2の通過経路である被検体 1内の各臓器に対応した位置に配置される。なお、アンテナ 6a〜6hは、被検体 1に着用させるジャケット等の所定位置に配設されるようにしてもよい。この場合、アンテナ 6a〜6hは、このジャケット等を介して被検体 1の体外表面上の所定位置に配設される。また、ァンテナ 6a〜6hの配置は、被検体 1内の観察や診断等の目的に応じて任意に変更できる。なお、受信アンテナ 6が備えるアンテナ数は、アンテナ 6a〜6hとして示す 8個に限定して解釈する必要はなぐ 8個より少なくても多くても構わない。

[0027] 画像表示装置 4は、例えば CRT、液晶ディスプレイ等を備えたワークステーションによって実現され、携帯型記録媒体 5等を介して取得した画像データをもとに画像表示を行う。また、画像表示装置 4は、プリンタ等の出力装置に画像データを出力して表示させることもできる。なお、画像表示装置 4は、外部装置との通信機能を備え、有線または無線通信によって画像データを取得または出力するようにしてもよい。 [0028] 携帯型記録媒体 5は、コンパクトフラッシュ（登録商標)メモリ、 CD、 DVD等によって実現され、受信装置 3および画像表示装置 4に対して着脱可能であり、これらに挿着された場合に画像データ等の各種情報の出力または記録を行うことができる。携帯型記録媒体 5は、例えばカプセル型内視鏡 2が被検体 1内に導入されてヽる間に受信装置 3に挿着され、受信装置 3がカプセル型内視鏡 2から受信した画像データ等を記録する。また、カプセル型内視鏡 2が被検体 1から排出された後には、受信装置 3 から取り出されて画像表示装置 4に挿着され、記録した画像データ等を画像表示装置 4に出力する。このように受信装置 3と画像表示装置 4との間で携帯型記録媒体 5 によって画像データの受け渡しを行うようにすることで、被検体 1は、カプセル型内視鏡 2を導入中にも自由に行動することができる。なお、受信装置 3と画像表示装置 4との間のデータの受け渡しは、有線または無線通信によって行うようにしてもよい。

[0029] つぎに、本実施の形態 1にかかる画像表示装置 4の構成について説明する。図 2は、画像表示装置 4の構成を示すブロック図である。図 2に示すように、画像表示装置 4 は、各種情報の入力を行う入力部 11と、各種情報を表示する表示部 12と、入力された画像を処理する画像処理部 13と、各種情報を記憶する記憶部 14と、画像表示装置 4の各部の処理および動作を制御する制御部 15と、を備える。入力部 11、表示部 12、画像処理部 13および記憶部 14は、制御部 15に電気的に接続されている。また、画像表示装置 4は、携帯型記録媒体 5に対応するインターフースを備え、携帯型記録媒体 5を着脱可能に装備する。挿着時の携帯型記録媒体 5は、制御部 15に電気的に接続される。

[0030] 入力部 11は、各種スィッチ、入力キー、マウス、タツチパネル等を有し、表示画像の選択情報等、各種処理情報の入力を行う。画像表示装置 4のオペレータとしての表示画像の観察者等は、この入力部 11を介して、表示画像の読み込み、選択、記録等の各種操作を行うことができる。なお、入力部 11は、 USB、 IEEE1394等、有線または無線の通信用インターフェースを備え、外部装置から画像の入力を行うようにしてもよい。

[0031] 表示部 12は、液晶ディスプレイ等を備え、画像データ等の各種情報を表示する。

表示部 12は、特に、携帯型記録媒体 5または記憶部 14に記憶された画像データ等の各種データの表示と、画像表示装置 4の観察者等に対して各種処理情報の入力依頼等を行う GUI (Graphical User Interface)画面の表示と、を行う。

[0032] 記憶部 14は、各種処理プログラム等があら力じめ記憶された ROMと、各処理の処理パラメータ、処理データ等を記憶する RAMとによって実現される。記憶部 14は、携帯型記録媒体 5等を介して入力された画像データ、画像処理部 13によって処理された画像データ、画像表示制御部 15aによって処理された表示制御データ等を記憶することができる。

[0033] 画像処理部 13は、画像処理制御部 15bによる制御に基づいて、携帯型記録媒体 5または記憶部 14から画像データを取得し、この取得した画像データに対して、濃度変換 (ガンマ変換等)、平滑ィ匕 (ノイズ除去等)、鮮鋭ィ匕 (エッジ強調等)、画像認識 ( 特徴画像領域の検出、平均色の演算等)等の各種画像処理を行う。

[0034] また、画像処理部 13は、特に、入力された一連の画像における平均色の演算を行う平均色演算部 13aを備える。すなわち、平均色演算部 13aは、一連の画像内の各画像を所定の複数の画像領域に分割し、分割した結果の各分割画像領域内の各画素が有する色情報を平均化した平均色としての領域平均色を算出する。また、平均色演算部 13aは、所定の期間である部分撮像期間ごとに、一連の画像における複数画像の領域平均色を分割画像領域ごとに平均化した期間領域平均色を算出する。

[0035] 制御部 15は、記憶部 14に記憶された各種処理プログラムを実行する CPU等によつて実現される。制御部 15は、特に、画像表示制御部 15aおよび画像処理制御部 1 5bを備える。画像表示制御部 15aは、携帯型記録媒体 5または記憶部 14に記憶された画像データとしての複数時点で撮像された一連の画像を表示部 12に表示させる制御を行う。本実施の形態 1では特に、この一連の画像として、被検体 1の各種臓器内を複数の時点で撮像した一連の被検体内画像が表示される。

[0036] また、画像表示制御部 15aは、特に、一連の被検体内画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の領域平均色、または期間領域平均色を表示する制御を行う。 [0037] より具体的には、平均色演算部 13aが各画像を所定の分割方向に分割した場合、画像表示制御部 15aは、時間スケール上の各時点の表示領域を、表示画面上で各画像の分割方向と同じ方向に分割し、分割した各分割スケール領域を、この分割順に各分割画像領域に対応付ける。そして、各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の領域平均色、または期間領域平均色表示する制御を行う。

[0038] この場合、画像表示制御部 15aは、例えば平均色演算部 13aが各画像を表示画面上で左右方向（または上下方向）に 4分割した場合、時間スケール上の各時点の表示領域を、同様に表示画面上で左右方向（または上下方向）に 4分割し、各分割スケール領域を分割順に各分割画像領域に対応付ける。すなわち、左端同士、右端同士等 (または最上段同士、最下段同士等)の分割スケール領域と分割画像領域とを対応付ける。なお、時間スケールを左右方向（または上下方向）に分割する場合には、時間スケールの時間軸は上下方向（または左右方向）とすることが好ましい。また、分割画像領域および分割スケール領域の分割数は、 4分割程度が好ましいが、 4分割に限定して解釈する必要はない。

[0039] 画像処理制御部 15bは、携帯型記録媒体 5または記憶部 14に記憶された画像データを取得して画像処理部 13に出力するとともに、この出力した画像に対する各種画像処理の制御を行う。また、画像処理制御部 15bは、画像処理部 13における処理結果の画像データを記憶部 14または携帯型記録媒体 5に出力して記憶させる。

[0040] つぎに、画像表示装置 4が表示部 12に表示する表示画面（GUI画面）について説明する。図 3は、画像表示装置 4が画像表示制御部 15aによる制御に基づいて表示する GUI画面の一例を示す図である。図 3に示すように、表示部 12には、 GUI画面としてのウィンドウ 21 (「診察 ·診断」ウィンドウ）が表示される。ウィンドウ 21内には、主表示画像等を表示する主表示領域 22と、アイコンとして示された各種画像操作ボタンを表示する画像操作領域 25と、一連の被検体内画像の撮像期間を示す時間スケールとしてのカラーバー 26およびタイムバー 27と、サムネイル画像等を表示する副表示領域 28とが、表示画面上でこの順に上方から下方へ並列表示される。

[0041] 主表示領域 22内には、入力部 3から入力された指示情報をもとに一連の被検体内画像の中から選択された画像である主表示画像 23と、被検体 1上のアンテナ 6a〜6 hの配置を模式的に示すアンテナ配置図 24とが表示される。また、主表示領域 22内には、主表示画像 23として選択された被検体内画像に対応付けられてヽる被検体 1 の名前、 ID番号、性別、年齢、生年月日、撮像年月日、撮像時刻等が文字情報として表示される。なお、主表示領域 22には、所定操作に応じて 2以上の所定数の主表示画像が表示可能である。

[0042] アンテナ配置図 24には、アンテナ 6a〜6hの配置が被検体 1の一部輪郭とともに模式的に表示される。また、アンテナ配置図 24には、アンテナ 6a〜6hの近傍に、この各アンテナの識別番号としてのアンテナ番号が文字表示される。例えば図 3では、ァンテナ番号として「1」〜「8」が示されている。力かるアンテナ配置図 24では、主表示画像 23として表示された被検体内画像の撮像時に、アンテナ 6a〜6hのうち最も受信強度が大き力つた最大強度アンテナが、他のアンテナと識別可能に表示される。例えば図 3では、最大強度アンテナとして、アンテナ番号「4」のアンテナ力他のアンテナと識別可能に表示された状態が示されている。なお、識別可能な表示として、画像表示制御部 15aは、例えば最大強度アンテナの表示輝度、表示色相および表示彩度等のうち少なくとも 1つを、他のアンテナと異ならせて表示させることができる。

[0043] カラーバー 26には、全体として、一連の被検体内画像に含まれる各画像の平均色が時系列に表示される。すなわち、カラーバー 26上の各時点の表示領域には、この時点に撮像された被検体内画像の平均色が表示される。一連の被検体内画像は、撮像した臓器に応じて特有の平均色を有するため、観察者等は、カラーバー 26上の時間軸（図 3では横軸）に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器を容易に判別することができる。

[0044] また、カラーバー 26は、特に、表示領域全体を表示画面上で上下方向に 4分割して構成されており、分割された各段の分割カラーバー 26a〜26dには、一連の被検体内画像の分割画像領域における対応する各段の領域平均色または期間領域平均色が時系列に表示される。すなわち、各被検体内画像の平均色は、上下方向に全画像領域を 4分割した分割画像領域ごとに算出され、カラーバー 26には、各時点の表示領域を上下方向に 4分割した分割スケール領域ごとに、この分割順に対応付けられた各分割画像領域の領域平均色または期間領域平均色が表示される。

[0045] 力かるカラーバー 26によると、観察者等は、分割された各段の分割カラーバー 26a 〜26dの時間軸に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器が推定できるだけでなぐ撮像された臓器内部の状態を分割画像領域に応じて詳細に容易に認識することができる。これによつて、観察者等は、例えばある期間の最上段の分割カラーバー 26aに赤色系の平均色が視認された場合、この期間に撮像された臓器内部に出血部位が存在したこと、この期間の被検体内画像における最上段の分割画像領域に対応する撮像範囲に出血部位が存在したこと等が認識することができる。また、例えば管腔部を含む画像領域の黒色系の平均色と、他の画像領域の平均色とが異なる段の分割カラーバーに表示されることによって、管腔部を除いた撮像範囲の臓器内部の状態を認識することができる。

[0046] タイムバー 27には、このタイムバー 27上で時間軸方向に移動可能なスライダ 27a が表示される。スライダ 27aは、主表示画像 23として表示された被検体内画像の撮像時点をタイムバー 27上で指示するとともに、主表示画像 23の表示切替に連動してタイムバー 27上を移動する。例えば、画像操作領域 25内のいずれかの画像操作ボタンが図示しな!、マウス等によって操作された場合、主表示画像 23が切替表示されるとともに、スライダ 27aは、この切替表示後に主表示画像 23として表示された被検体内画像の撮像時点を指示する位置に移動する。

[0047] また、これとは逆に、スライダ 27aが図示しないマウス等によって移動操作された場合には、移動操作後にスライダ 27aが指示する撮像時点に対応した被検体内画像が主表示画像 23として表示される。なお、スライダ 27aが連続的に移動操作された場合、この移動操作に追随して、主表示画像 23は連続的に切替表示される。かかるスライダ 27aによると、観察者等は、例えばカラーバー 26を参照して見出した所望の臓器の被検体内画像に対応する撮像時点にスライダ 27aを移動操作することによって、この被検体内画像を即座に主表示画像 23として表示させることができる。

[0048] なお、時間スケールとしてのカラーバー 26およびタイムバー 27の左端は、一連の被検体内画像における時系列で先頭の画像の撮像時点を示し、同右端は、時系列で末尾の画像の撮像時点を示す。通常、この左端の撮像時点は、受信装置 3による画像データの受信開始時点に相当し、右端の撮像時点は、画像データの受信終了時点に相当する。

[0049] 副表示領域 28には、一連の被検体内画像の中から選択抽出された画像がサムネィル画像として表示される。具体的には、例えば、所定のボタン操作またはマウス操作等に応じて、この操作時点に主表示画像 23として表示されてヽる被検体内画像がサムネイル画像として副表示領域 28に追加表示される。

[0050] また、副表示領域 28には、各サムネイル画像の近傍に撮像時点等の付加情報が文字情報として表示される。この文字情報として表示される付加情報は、所定操作に応じて切替可能であるとともに非表示可能である。さらに、副表示領域 28には、各サムネイル画像と、タイムバー 27上に示される各サムネイル画像の撮像時点と、を対応付ける線分が表示される。

[0051] なお、副表示領域 28には表示領域の大きさに制約があるため、所定数までのサムネイル画像が一括表示可能とされている。例えば図 3には、最大 5枚のサムネイル画像が一括表示可能な場合が示されてヽる。抽出されたサムネイル画像が一括表示可能な所定数より多い場合、この所定数を超えたサムネイル画像は、副表示領域 28内に表示されるスクロールバーの操作に応じて切替表示される。また、副表示領域 28 に表示されたサムネイル画像は、所定のボタン操作またはマウス操作等に応じて主表示画像 23として表示される。

[0052] ここで、本実施の形態 1にかかる画像表示装置 4におけるカラーバー 26の描画処理について説明する。図 4は、カラーバー 26の Tm時点の分割スケール領域 26am に期間領域平均色を描画する手順の概要を示す概念図である。

[0053] 図 4に示すように、カラーバー 26に期間領域平均色を描画するにあたって、まず、画像処理制御部 15bは、一連の被検体内画像の中から、時点 Tmに対応する所定の部分撮像期間内の所定数の被検体内画像 Pl〜Pnを取得する。ここでは、被検体内画像 Pl〜Pnとして、時系列で連続する画像、もしくは所定サンプリング期間で抽出される一連の画像が選択的に取得される。これらのいずれによって選択されるかは、所定操作に応じて任意に切替可能とされている。なお、ここで選択される画像は、 1 時点の画像であってもよ、。 [0054] つづいて、画像処理制御部 15bは、画像処理部 13によって、各被検体内画像 P1 〜Pnを複数の分割画像領域に分割する。例えば図 4では、被検体内画像 P1が上下方向に 4つの分割画像領域 El 1〜E 14に分割され、被検体内画像 Pnが分割領域 E nl〜En4に分割され、同様に、この間の各時点の被検体内画像力つの分割画像領域に分割された状態を示して！/ヽる。

[0055] つぎに、画像処理制御部 15bは、平均色演算部 13aによって、各被検体内画像 P1 〜Pnの各分割画像領域の領域平均色を算出する。このとき、平均色演算部 13aは、分割画像領域ごとに全ての画素、あるいは所定サンプリング間隔で抽出される複数画素の色情報を用いて領域平均色を算出する。これらのいずれによって演算を行うかは、所定操作に応じて任意に切替可能とされている。

[0056] つづいて、画像処理制御部 15bは、各被検体内画像 Pl〜Pnの対応する分割画像領域の領域平均色を平均化して期間領域平均色を算出する。すなわち、 4分割した各段の分割画像領域について領域平均色を平均化した期間領域平均色を算出する。具体的には、画像処理制御部 15bは、例えば図 4において斜線で示す最上段の分割画像領域 El l, E21, E31〜E (n— 1) 1, Enlについて、この各分割画像領域の領域平均色を平均化した期間領域平均色 Eavelを算出する。また、各段の分割画像領域群 E12〜En2, E13〜En3, E14〜En4についても同様に、各領域平均色を平均化した期間領域平均色 Eave2, Eave3, Eave4を算出する。

[0057] そして、画像処理制御部 15bは、これらの期間領域平均色 Eavel〜Eave4を、被検体内画像 Pl〜Pnにおける各段の分割画像領域と時点 Tmとに対応付け、カラーバー 26の時点 Tmにおける表示領域に対応する平均色群 Pavemとして記憶部 14に記録する。画像処理制御部 15bは、カゝかる一連の処理を、全撮像期間におけるすべての時点に対して繰り返す。

[0058] 画像処理制御部 15bによって、カラーバー 26に描画する各時点のすべての平均色が算出された後、画像表示制御部 15aは、記憶部 14から各時点の平均色群を取得して、各時点の分割スケール領域に、この各分割スケール領域に対応付けられた分割画像領域の期間領域平均色を描画する。具体的には、例えば図 4では、最上段の分割カラーバー 26a内の時点 Tmにおける分割スケール領域 26amに、最上段の分割画像領域を用いて時点 Tmについて算出された期間領域平均色 Eavelが描画されている。

[0059] 同様にして、画像表示制御部 15aは、カラーバー 26における各時点の各分割スケール領域に、それぞれ画像処理制御部 15bによって対応付けられた分割画像領域の期間領域平均色を描画する。なお、力かる描画処理において描画される期間領域平均色は、所定数の被検体内画像 Pl〜Pnとして選択された画像が 1時点の画像である場合には、この 1時点の画像における領域平均色となる。

[0060] ここで、本実施の形態 1にかかる画像表示装置 4が行うカラーバー 26の描画処理の処理手順について説明する。図 5は、カラーバー 26の描画処理手順を示すフローチヤートである。図 5に示すように、まず、画像処理制御部 15bは、携帯型記録媒体 5あるいは記憶部 14に記憶された一連の被検体内画像の中から、時系列で先頭の時点に対応する所定の部分撮像期間内の所定数の被検体画像を読み込んで、画像処理制御部 13に出力する (ステップ S101)。

[0061] つづいて、画像処理制御部 15bは、画像処理制御部 13によって、ステップ S101で読み込んだ各被検体内画像を、所定の複数の分割画像領域に分割する (ステップ S 102)。このステップ S102では、各被検体内画像は、例えば 4つの分割画像領域に分割される。つぎに、画像処理制御部 15bは、平均色演算部 13aによって、ステップ S 102で分割された各分割画像領域の領域平均色を演算するとともに、ステップ S 10 1で読み込んだすべての被検体内画像にわたって領域平均色を平均化して期間領域平均色を算出する平均色演算処理を行う (ステップ S103)。

[0062] その後、画像処理制御部 15bは、ステップ S 103において算出された領域平均色および期間領域平均色を、処理対象の撮像時点と、被検体内画像における各段の分割画像とに対応付けて、記憶部 14に記録する (ステップ S104)。そして、画像処理制御部 15bは、全撮像期間にわたって平均色演算処理を行ったカゝ否かを判断する（ステップ S 105)。

[0063] 全撮像期間で平均色を算出して!/ヽな、場合 (ステップ S 105： No)、画像処理制御部 15bは、平均色を算出していない時点についてステップ S101からの処理を繰り返す。一方、全撮像期間で平均色を算出している場合には (ステップ S 105 : Yes)、画像処理制御部 15bは、各時点の分割した表示領域である分割スケール領域ごとに力ラーバー 26を、この各分割スケール領域に対応付けられた期間領域平均色で描画して（ステップ S106)、この一連のカラーバー描画処理を終了する。

[0064] つぎに、ステップ S 103の平均色演算手段について説明する。図 6は、平均色演算処理の処理手順を示すフローチャートである。図 6に示すように、平均色演算部 13a は、まず、処理対象の各被検体内画像に対してデガンマ処理を行う（ステップ S111) 。つぎに、各被検体内画像の各分割画像領域の領域平均色を算出し (ステップ S11 2)、処理対象のすべての被検体内画像にわたって領域平均色を平均化した期間領域平均色を算出する (ステップ S113)。その後、処理対象の各被検体内画像に対してガンマ処理を行ヽ（ステップ S 114)、ステップ S 103にリターンする。

[0065] なお、ステップ S 101で画像処理制御部 15bが読み込んだ画像が 1時点の被検体内画像である場合には、ステップ S113は省略される。また、この場合、ステップ S10 6で画像表示制御部 15aが描画する平均色は、期間領域平均色の代わりに領域平均色となる。

[0066] 以上説明したように、本実施の形態 1にかかる画像表示装置 4では、画像表示制御部 15aが、時間スケールとしてのカラーバー 26を表示するとともに、カラーバー 26上の各時点の表示領域を分割画像領域に対応付けて分割し、分割した結果の各分割スケール領域に、この各分割スケール領域が対応付けられた分割画像領域の期間領域平均色もしくは領域平均色を表示する制御を行うようにしているため、複数の時点で撮像された一連の被検体内画像の特徴を、カラーバー 26上で各分割画像領域に対応させた分割スケール領域ごとに全撮像期間にわたって表示することができ、観察者等に対して、各撮像時点における分割画像領域ごとの撮像対象の状態等を容易に認識可能にすることができる。

[0067] (実施の形態 2)

つぎに、本発明の実施の形態 2について説明する。上述した実施の形態 1では、被検体内画像を一律に処理して平均色を算出するようにしていたが、本実施の形態 2 では、被検体内画像に含まれる出血部位等の特徴領域に重み付けを行って平均色を算出するようにしている。 [0068] 図 7は、本実施の形態 2にかかる画像表示装置 104の構成を示すブロック図である。図 7に示すように、画像表示装置 104は、画像表示装置 4をもとに、画像処理部 13 と制御部 15とのそれぞれに替えて、画像処理部 113と制御部 115とを備える。また、画像処理部 113は、平均色演算部 113aと特徴領域検出部 113bとを備え、制御部 1 15は、制御部 15をもとに画像処理演算部 15bに替えて画像処理演算部 115bを備える。その他の構成は実施の形態 1と同じであり、同一構成部には同一符号を付している。

[0069] 特徴領域検出部 113bは、入力された各被検体内画像の各分割画像領域の中から所定の特徴を有する特徴画像領域としての特徴領域を検出する。すなわち、特徴領域検出部 113bは、例えば被検体内画像を構成する各画素の色情報をもとに、出血部位等の所定の特徴を識別して特徴領域を検出する。なお、特徴領域検出部 11

3bは、出血部位に限らず、たとえば、臓器内部の褪色部位、形状異常部位等、病変の疑いのある種々の部位を特徴領域として検出するようにしてもよい。また、特徴領域検出部 113bは、色情報に限らず、輪郭形状、テクスチャ、濃度勾配等の各種特徴量をもとに特徴領域を検出するようにしてもよい。

[0070] 平均色演算部 113aは、平均色演算部 13aと同様に、入力された一連の画像における平均色の演算を行う。ただし、平均色演算部 113aは、領域平均色として、特徴領域検出部 113bによって検出された特徴領域内の色情報と、特徴領域を除いた分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出する。また、この加重領域平均色を用いて期間領域平均色を算出する。さらに、平均色演算部 113aは、期間領域平均色として、特徴領域を含む特徴画像の領域平均色および加重領域平均色と、特徴画像を除いた部分撮像期間における複数画像の領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することちでさる。

[0071] ここで、画像表示装置 104が行うカラーバー 26の描画処理の処理手順について説明する。図 8は、カラーバー 26の描画処理手順を示すフローチャートである。図 8に示すように、まず、画像処理制御部 115bは、携帯型記録媒体 5あるいは記憶部 14 に記憶された一連の被検体内画像の中から、時系列で先頭の時点に対応する所定の部分撮像期間内の所定数の被検体画像を読み込みんで、画像処理制御部 113 に出力する (ステップ S201)。

[0072] つづいて、画像処理制御部 115bは、画像処理制御部 113によって、ステップ S20 1で読み込んだ各被検体内画像を、所定の複数の分割画像領域に分割する (ステツプ S202)。このステップ S202では、各被検体内画像は、例えば 4つの分割画像領域に分割される。つぎに、画像処理制御部 115bは、特徴領域検出部 113bによって、ステップ S202で分割された各分割画像領域から出血部位等の所定の特徴を有した特徴領域を検出する (ステップ S 203)。つづいて、画像処理制御部 115bは、平均色演算部 113aによって、平均色を算出する平均色演算処理を行う（ステップ S204)

[0073] その後、画像処理制御部 115bは、ステップ S204において算出された平均色を、処理対象の撮像時点と、被検体内画像における各段の分割画像とに対応付けて、記憶部 14に記録する (ステップ S205)。そして、画像処理制御部 115bは、全撮像期間にわたって平均色演算処理を行った力否かを判断する (ステップ S206)。

[0074] 全撮像期間で平均色を算出して!/、な、場合 (ステップ S206： No)、画像処理制御部 115bは、平均色を算出して、な、時点にっ、てステップ S 201からの処理を繰り返す。一方、全撮像期間で平均色を算出している場合には (ステップ S206 : Yes)、画像処理制御部 115bは、各時点の分割した表示領域である分割スケール領域ごとにカラーバー 26を、この各分割スケール領域に対応付けられた平均色で描画して（ステップ S207)、この一連のカラーバー描画処理を終了する。

[0075] つぎに、ステップ S 204の平均色演算手段について説明する。図 9は、平均色演算処理の処理手順を示すフローチャートである。図 9に示す平均色演算処理は、ステツプ S203によって特量領域として出血部位が検出された場合の処理手順を例示している。

[0076] 図 9に示すように、平均色演算部 113aは、処理対象の各被検体内画像に対してデガンマ処理を行い (ステップ S211)、ステップ S203における特徴領域の検出結果に基づいて、各被検体内画像の各分割画像領域の中に出血部位があるカゝ否かを判断する (ステップ S 212)。出血部位がない場合 (ステップ S212 : No)、平均色演算部 1 13aは、図 6に示したステップ SI 12と同様に、各被検体内画像の各分割画像領域の領域平均色を算出する (ステップ S213)。

[0077] 一方、出血部位がある場合 (ステップ S214 : Yes)、平均色演算部 113aは、各出血部位を示す特徴領域内の色情報に、特徴領域以外の分割画像領域の色情報に比ベて大きな重み付けをして、分割画像領域ごとに色情報を平均化した加重領域平均色を算出する (ステップ S214)。なお、このステップ S214では、特徴領域以外の分割画像領域の色情報にかける重みをゼロとし、特徴領域内の色情報のみを用いてカロ重領域平均色を算出することもできる。

[0078] ステップ 213またはステップ S214の後、平均色演算部 113aは、処理対象の所定数の被検体内画像の中に、出血部位を含んだ出血画像があるカゝ否かを判断し (ステップ S215)、出血画像がない場合 (ステップ S215 :No)、図 6に示したステップ SI 13 と同様に、処理対象のすべての被検体内画像にわたって領域平均色を平均化した期間領域平均色を算出する (ステップ S 216)。

[0079] 一方、出血画像がある場合 (ステップ S215 :Yes)、平均色演算部 113aは、各出血画像の領域平均色および加重領域平均色に、出血画像以外の被検体内画像の領域平均色に比べて大きな重み付けをして平均化した加重期間領域平均色を算出する (ステップ S217)。なお、このステップ S217では、出血画像以外の被検体内画像にかける重みをゼロとして、出血画像の領域平均色および加重領域平均色のみを用いて加重期間領域平均色を算出することもできる。

[0080] ステップ 216またはステップ S217の後、平均色演算部 113aは、処理対象の各被検体内画像に対してガンマ処理を行い (ステップ S218)、ステップ S 204にリターンする。

[0081] なお、ステップ S201で画像処理制御部 115bが読み込んだ画像が 1時点の被検体内画像である場合には、ステップ S215〜S217は省略される。また、この場合、ステップ S207で画像表示制御部 115aが描画する平均色は、領域平均色もしくは加重領域平均色となる。

[0082] 以上説明したように、本実施の形態 2にかかる画像表示装置 104では、特徴領域検出部 113bが、各被検体内画像の各分割画像領域の中から出血部位等の所定の特徴を有する特徴領域を検出し、平均色演算部 113aが、特徴領域と、この特徴領域を含む特徴画像と、の少なくとも一方に重み付けをし、領域平均色としての加重領域平均色と、期間領域平均色としての加重期間領域平均色と、を算出するようにしているため、画像表示制御部 15aは、カラーバー 26上の各分割スケール領域に、特徴領域の存在を強く反映した平均色を表示させ、各撮像時点における分割画像領域ごとに特徴領域の存在を強調した表示をさせることができ、観察者等に対して、撮像対象の特徴的な状態等を一層容易に認識可能にすることができる。また、これによつて、観察者等は、出血部位等の特徴領域、すなわち注目すべき領域を含む被検体画像の見逃しを一層削減することができる。

[0083] なお、上述した実施の形態 1および 2では、本発明に力かる画像表示装置 4, 104 が表示する一連の画像を、被検体 1内に導入されたカプセル型内視鏡 2を用いて撮像された一連の被検体内画像として説明したが、かかる被検体内画像に限定して解釈する必要はなぐ複数の時点に撮像された一連の画像であれば任意の画像でよく、撮像装置や撮像対象も任意でよい。

産業上の利用可能性

[0084] 以上のように、本発明に力かる画像表示装置は、複数の時点で撮像された一連の画像を表示する画像表示装置に有用であり、特に被検体内に導入されたカプセル型内視鏡を用いて撮像された一連の被検体内画像を表示する画像表示装置に適している。

Claims

請求の範囲

[1] 複数の時点で撮像された一連の画像とともに該一連の画像の撮像期間を示す時間スケールを表示する画像表示装置にぉ、て、

前記一連の画像内の各画像を所定の画像領域に分割した各分割画像領域の領域平均色を算出する平均色演算手段と、

前記時間スケール上の各時点の表示領域を前記各分割画像領域に対応付けて分割した各分割スケール領域に、該各分割スケール領域が対応づけられた分割画像領域の前記領域平均色を表示する制御を行う表示制御手段と、

を備えたことを特徴とする画像表示装置。

[2] 前記領域平均色は、所定の部分撮像期間ごとに複数画像の前記領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする請求項 1 に記載の画像表示装置。

[3] 前記各分割画像領域は、前記各画像を所定の分割方向に分割して形成され、前記表示制御手段は、前記時間スケール上の各時点の表示領域を表示画面上で前記分割方向と同じ方向に分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする請求項 1または 2に記載の画像表示装置。

[4] 前記各分割画像領域は、前記各画像を前記表示画面上で上下方向また左右方向に 4分割して形成され、

前記表示制御手段は、前記時間スケール上の各時点の表示領域を前記表示画面上で上下方向また左右方向に 4分割し、この分割順に前記各分割画像領域に対応付けた各分割スケール領域に、該各分割スケール領域が対応付けられた分割画像領域の前記領域平均色または前記期間領域平均色を表示する制御を行うことを特徴とする請求項 3に記載の画像表示装置。

[5] 前記各画像の各分割画像領域の中から所定の特徴を有する特徴画像領域を検出する特徴領域検出手段を備え、

前記平均色演算手段は、前記領域平均色として、前記特徴画像領域内の色情報と該特徴画像領域を除いた前記分割画像領域内の色情報とに異なる重み付けをして平均化した加重領域平均色を算出することを特徴とする請求項 1〜4のいずれか一つに記載の画像表示装置。

[6] 前記加重領域平均色は、所定の前記部分撮像期間ごとに複数画像の前記加重領域平均色を前記分割画像領域ごとに平均化した期間領域平均色であることを特徴とする請求項 5に記載の画像表示装置。

[7] 前記平均色演算手段は、前記期間領域平均色として、前記特徴画像領域を含む特徴画像の前記加重領域平均色と、該特徴画像を除いた前記部分撮像期間における複数画像の前記領域平均色とに異なる重み付けをして平均化した加重期間領域平均色を算出することを特徴とする請求項 6に記載の画像表示装置。

[8] 前記平均色演算手段は、前記部分撮像期間における所定サンプリング期間の一連の画像を用いて前記期間領域平均色を算出することを特徴とする請求項 1〜7のいずれか一つに記載の画像表示装置。

[9] 前記平均色演算手段は、前記分割画像領域における所定サンプリング間隔の各画素の色情報を用いて前記領域平均色を算出することを特徴とする請求項 1〜8のいずれか一つに記載の画像表示装置。

[10] 前記一連の画像は、被検体内に導入されたカプセル型内視鏡を用いて撮像された被検体内画像であることを特徴とする請求項 1〜9のいずれか一つに記載の画像表示装置。