JP4472602B2 - Image display device - Google Patents
Image display device Download PDFInfo
- Publication number
- JP4472602B2 JP4472602B2 JP2005263090A JP2005263090A JP4472602B2 JP 4472602 B2 JP4472602 B2 JP 4472602B2 JP 2005263090 A JP2005263090 A JP 2005263090A JP 2005263090 A JP2005263090 A JP 2005263090A JP 4472602 B2 JP4472602 B2 JP 4472602B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- time
- images
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、複数の時点で撮像された一連の画像を表示する画像表示装置に関し、特に被検体内に導入されたカプセル型内視鏡を用いて撮像された一連の被検体内画像の表示に適用して好適な画像表示装置に関するものである。 The present invention relates to an image display device that displays a series of images taken at a plurality of points in time, and more particularly, to display a series of in-subject images taken using a capsule endoscope introduced into a subject. The present invention relates to an image display device suitable for application.
近年、内視鏡の分野において、飲込み式のカプセル型内視鏡が開発されている。このカプセル型内視鏡は、撮像機能と無線通信機能とを備え、各種臓器内の観察のために被験者の口から飲み込まれたのち自然排出されるまでの間、例えば胃、小腸、大腸などの臓器の内部を、その蠕動運動にしたがって移動しながら順次撮像する。 In recent years, swallowable capsule endoscopes have been developed in the field of endoscopes. This capsule endoscope has an imaging function and a wireless communication function, and is swallowed from the subject's mouth for observation in various organs until it is naturally discharged, for example, stomach, small intestine, large intestine, etc. The inside of the organ is sequentially imaged while moving according to the peristaltic motion.
臓器内を移動する間、カプセル型内視鏡によって被検体内で撮像された画像データは、順次無線信号を用いて被検体外に送信され、被検体外の受信機内に設けられたメモリに蓄積されるか、受信機に設けられたディスプレイに表示される。医師、看護師等は、メモリに蓄積された画像データをもとにディスプレイに表示させた画像、あるいは受信とともに受信機が備えるディスプレイに表示させた画像に基づいて診断を行うことができる。 While moving inside the organ, the image data captured inside the subject by the capsule endoscope is sequentially transmitted to the outside of the subject using a wireless signal and stored in a memory provided in a receiver outside the subject. Or displayed on a display provided in the receiver. A doctor, nurse, or the like can make a diagnosis based on the image displayed on the display based on the image data stored in the memory or the image displayed on the display included in the receiver along with the reception.
通常、カプセル型内視鏡によって撮像される一連の画像数は膨大であり、医師、看護師等は、この膨大な画像を観察して診断を行うために多大な時間と労力を要する。これに対応して、画像の検索性を向上させるとともに、表示画像がどの臓器の画像であるかを容易に認識することが可能な画像表示装置が提案されている(例えば、特許文献1参照。)。 Usually, the number of a series of images captured by a capsule endoscope is enormous, and doctors, nurses, and the like require a great deal of time and labor to observe and diagnose this enormous image. Corresponding to this, an image display device has been proposed that can improve the searchability of an image and can easily recognize which organ the display image is (for example, see Patent Document 1). ).
この画像表示装置では、一連の画像の撮像期間を示す時間スケールを表示するとともに、この時間スケール上に各画像の平均色を時系列に表示するようにしている。各画像の平均色は撮像した臓器に特有の色であるため、医師、看護師等は、この時間スケール上に表示された平均色を観察することによって、各撮像時刻の画像がどの臓器を撮像した画像でるかを容易に判別することができる。 In this image display device, a time scale indicating the imaging period of a series of images is displayed, and an average color of each image is displayed in time series on the time scale. Since the average color of each image is unique to the imaged organ, doctors, nurses, etc. can pick which organ is the image at each imaging time by observing the average color displayed on this time scale. It is possible to easily discriminate whether the image is an image.
しかしながら、上述した画像表示装置では、時間スケール上に各画像の平均色を時系列に表示することによって、撮像時刻に応じて撮像された臓器を判別することができるものの、観察者等が所望する注目画像に対応させた時間スケール上の識別表示を行うことはできなかった。 However, in the image display device described above, the average color of each image is displayed on the time scale in time series, so that the imaged organ can be discriminated according to the imaging time, but an observer or the like desires. The identification display on the time scale corresponding to the attention image could not be performed.
本発明は、上記に鑑みてなされたものであって、任意の注目画像に対応させた時間スケール上の識別表示を行うことができ、注目画像が存在する撮像期間を容易に認識可能とすることができる画像表示装置を提供することを目的とする。 The present invention has been made in view of the above, and can perform identification display on a time scale corresponding to an arbitrary image of interest, so that an imaging period in which the image of interest exists can be easily recognized. An object of the present invention is to provide an image display device capable of performing the above.
上述した課題を解決し、目的を達成するために、本発明にかかる画像表示装置は、複数の時点で撮像された一連の画像とともに該一連の画像の撮像期間を示す時間スケールを表示する画像表示装置において、前記一連の画像のうち複数の画像に注目画像であることを示す標識情報を付加する付加手段と、前記標識情報が付加された注目画像の撮像時点以前または撮像時点以降の前記時間スケール上の表示領域を、該時間スケール上の他の表示領域と識別可能に表示する制御を行うと共に、前記標識情報が付加された各注目画像をサムネイル画像として表示し、この表示した各サムネイル画像の近傍に該各サムネイル画像の撮像時刻に対応した相対時間を表示する制御を行う表示制御手段と、前記各サムネイル画像の中から前記基準サムネイル画像を選択する選択情報を取得する選択情報取得手段と、を備え、前記表示制御手段は、前記選択情報取得手段が選択情報を取得するごとに、前記基準サムネイル画像の撮像時点を基準として前記相対時間を更新して、該相対時間を表示する制御を行うことを特徴とする。 In order to solve the above-described problems and achieve the object, an image display device according to the present invention displays an image display that displays a series of images taken at a plurality of points in time and a time scale indicating an imaging period of the series of images. In the apparatus, an adding means for adding sign information indicating a noticed image to a plurality of images in the series of images, and the time scale before or after the imaging time of the noticed image to which the sign information is added The upper display area is controlled so as to be distinguishable from other display areas on the time scale, and each attention image to which the marker information is added is displayed as a thumbnail image, and each of the displayed thumbnail images is displayed. Display control means for performing control to display a relative time corresponding to the imaging time of each thumbnail image in the vicinity, and the reference thumbnail from among the thumbnail images Comprising a selection information acquiring means for acquiring a selection information for selecting an image, wherein the display control means, each time the selection information acquiring means acquires the selection information, the relative imaging time point of the reference thumbnail image as a reference Control is performed to update the time and display the relative time.
また、本発明に係る画像表示装置は、上記の発明において、前記表示制御手段は、前記標識情報が付加された注目画像が複数ある場合、前記標識情報を有する各注目画像の撮像時点に挟まれた前記時間スケール上の表示領域を、該時間スケール上の他の表示領域と識別可能に表示する制御を行うことを特徴とする。 Further, in the image display device according to the present invention , in the above invention, when there are a plurality of attention images to which the marker information is added, the display control unit is sandwiched between the time points at which the respective attention images having the marker information are captured. The display area on the time scale is controlled so as to be distinguishable from other display areas on the time scale.
また、本発明に係る画像表示装置は、上記の発明において、前記表示制御手段は、前記時間スケール上の表示領域の表示色相、表示彩度、表示輝度、表示模様、形状および大きさのうち少なくとも1つを、前記注目画像の撮像時点の前後で異ならせて表示する制御を行うことを特徴とする。 In the image display device according to the present invention as set forth in the invention described above, the display control means includes at least one of display hue, display saturation, display luminance, display pattern, shape and size of the display area on the time scale. One of them is controlled to be displayed differently before and after the time of capturing the target image.
また、本発明に係る画像表示装置は、上記の発明において、前記一連の画像は、被検体内に導入されたカプセル型内視鏡を用いて撮像された被検体内画像であることを特徴とする。 The image display device according to the present invention is characterized in that, in the above invention, the series of images are in-subject images captured using a capsule endoscope introduced into the subject. To do.
本発明にかかる画像表示装置によれば、任意の注目画像に対応させた時間スケール上の識別表示を行うことができ、注目画像が存在する撮像期間を容易に認識可能とすることができる。 According to the image display device of the present invention, identification display on a time scale corresponding to an arbitrary image of interest can be performed, and an imaging period in which the image of interest exists can be easily recognized.
以下、添付図面を参照して、本発明にかかる画像表示装置の好適な実施の形態である無線形被検体内情報取得システムについて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。また、図面の記載において、同一部分には同一の符号を付している。 Hereinafter, a wireless in-vivo information acquiring system as a preferred embodiment of an image display device according to the present invention will be described in detail with reference to the accompanying drawings. Note that the present invention is not limited to the embodiments. In the description of the drawings, the same parts are denoted by the same reference numerals.
(実施の形態)
まず、本実施の形態にかかる画像表示装置を備えた無線型被検体内情報取得システムについて説明する。図1は、無線型被検体内情報取得システムの全体構成を示す模式図である。この無線型被検体内情報取得システムは、被検体内導入装置の一例としてカプセル型内視鏡を用いている。
(Embodiment)
First, a wireless in-vivo information acquiring system including an image display device according to the present embodiment will be described. FIG. 1 is a schematic diagram showing an overall configuration of a wireless in-vivo information acquiring system. This wireless intra-subject information acquisition system uses a capsule endoscope as an example of the intra-subject introduction apparatus.
図1に示すように、無線型被検体内情報取得システムは、被検体1の体内に導入され、撮像した被検体内画像の画像データを受信装置3に対して無線送信するカプセル型内視鏡2と、カプセル型内視鏡2から無線送信された画像データを受信する受信装置3と、受信装置3が受信した画像信号に基づいて被検体内画像を表示する画像表示装置4と、受信装置3と画像表示装置4との間で画像データ等の受け渡しを行う携帯型記録媒体5と、を備える。
As shown in FIG. 1, the wireless intra-subject information acquisition system is a capsule endoscope that is introduced into the body of the
受信装置3は、被検体1の体外表面に貼付等される複数のアンテナ6a〜6hを有した受信アンテナ6を備える。受信装置3は、カプセル型内視鏡2から無線送信された画像データ等を、受信アンテナ6を介して受信するとともに、受信した各画像データに、画像データを受信した際の各アンテナ6a〜6hの受信強度情報を対応付けて記録する。
The receiving device 3 includes a receiving antenna 6 having a plurality of
アンテナ6a〜6hは、例えばループアンテナを用いて実現され、被検体1の体外表面上の所定位置、すなわちカプセル型内視鏡2の通過経路である被検体1内の各臓器に対応した位置に配置される。なお、アンテナ6a〜6hは、被検体1に着用させるジャケット等の所定位置に配設されるようにしてもよい。この場合、アンテナ6a〜6hは、このジャケット等を介して被検体1の体外表面上の所定位置に配設される。また、アンテナ6a〜6hの配置は、被検体1内の観察や診断等の目的に応じて任意に変更できる。なお、受信アンテナ6が備えるアンテナ数は、アンテナ6a〜6hとして示す8個に限定して解釈する必要はなく、8個より少なくても多くても構わない。
The
画像表示装置4は、例えばCRT、液晶ディスプレイ等を備えたワークステーションによって実現され、携帯型記録媒体5等を介して取得した画像データをもとに画像表示を行う。また、画像表示装置4は、プリンタ等の出力装置に画像データを出力して表示させることもできる。なお、画像表示装置4は、外部装置との通信機能を備え、有線または無線通信によって画像データを取得または出力するようにしてもよい。
The
携帯型記録媒体5は、コンパクトフラッシュ(登録商標)メモリ、CD、DVD等によって実現され、受信装置3および画像表示装置4に対して着脱可能であり、これらに挿着された場合に画像データ等の各種情報の出力または記録を行うことができる。携帯型記録媒体5は、例えばカプセル型内視鏡2が被検体1内に導入されている間に受信装置3に挿着され、受信装置3がカプセル型内視鏡2から受信した画像データ等を記録する。また、カプセル型内視鏡2が被検体1から排出された後には、受信装置3から取り出されて画像表示装置4に挿着され、記録した画像データ等を画像表示装置4に出力する。このように受信装置3と画像表示装置4との間で携帯型記録媒体5によって画像データの受け渡しを行うようにすることで、被検体1は、カプセル型内視鏡2を導入中にも自由に行動することができる。なお、受信装置3と画像表示装置4との間のデータの受け渡しは、有線または無線通信によって行うようにしてもよい。
The
つぎに、本実施の形態にかかる画像表示装置4の構成について説明する。図2は、画像表示装置4の構成を示すブロック図である。図2に示すように、画像表示装置4は、各種情報の入力を行う入力部11と、各種情報を表示する表示部12と、入力された画像を処理する画像処理部13と、各種情報を記憶する記憶部14と、画像表示装置4の各部の処理および動作を制御する制御部15と、を備える。入力部11、表示部12、画像処理部13および記憶部14は、制御部15に電気的に接続されている。また、画像表示装置4は、携帯型記録媒体5に対応するインターフェースを備え、携帯型記録媒体5を着脱可能に装備する。挿着時の携帯型記録媒体5は、制御部15に電気的に接続される。
Next, the configuration of the
入力部11は、各種スイッチ、入力キー、マウス、タッチパネル等を有し、表示画像の選択情報等、各種処理情報の入力を行う。画像表示装置4のオペレータとしての表示画像の観察者等は、この入力部11を介して、表示画像の読み込み、選択、記録等の各種操作を行うことができる。なお、入力部11は、USB、IEEE1394等、有線または無線の通信用インターフェースを備え、外部装置から画像の入力を行うようにしてもよい。
The input unit 11 includes various switches, input keys, a mouse, a touch panel, and the like, and inputs various processing information such as display image selection information. An observer of the display image as an operator of the
表示部12は、液晶ディスプレイ等を備え、画像データ等の各種情報を表示する。表示部12は、特に、携帯型記録媒体5または記憶部14に記憶された画像データ等の各種データの表示と、画像表示装置4の観察者等に対して各種処理情報の入力依頼等を行うGUI(Graphical User Interface)画面の表示と、を行う。
The
記憶部14は、各種処理プログラム等があらかじめ記憶されたROMと、各処理の処理パラメータ、処理データ等を記憶するRAMとによって実現される。記憶部14は、携帯型記録媒体5等を介して入力された画像データ、画像処理部13によって処理された画像データ、画像表示制御部15aによって処理された表示制御データ等を記憶することができる。
The
画像処理部13は、画像処理制御部15bによる制御に基づいて、携帯型記録媒体5または記憶部14から画像データを取得し、この取得した画像データに対して、濃度変換(ガンマ変換等)、平滑化(ノイズ除去等)、鮮鋭化(エッジ強調等)、画像認識(特徴画像領域の検出、平均色の演算等)等の各種画像処理を行う。
The
制御部15は、記憶部14に記憶された各種処理プログラムを実行するCPU等によって実現される。制御部15は、特に、画像表示制御部15aおよび画像処理制御部15bを備える。画像表示制御部15aは、携帯型記録媒体5または記憶部14に記憶された画像データとしての複数時点で撮像された一連の画像を表示部12に表示させる制御を行う。本実施の形態では特に、この一連の画像として、被検体1の各種臓器内を複数の時点で撮像した一連の被検体内画像が表示される。
The
また、画像表示制御部15aは、特に、一連の被検体内画像の撮像期間を示す時間スケールを表示するとともに、一連の被検体内画像のうち所定の主表示領域に表示された主表示画像に注目画像であることを示す標識情報を付加する付加手段としての操作アイコンを表示する制御を行う。この操作アイコンは、例えばGUI画面上の操作ボタンとして表示される。
In addition, the image
さらに、画像表示制御部15aは、標識情報が付加された注目画像の撮像時点に基づいて、時間スケール上でこの撮像時点以前またはこの撮像時点以降の表示領域を、時間スケール上の他の表示領域と識別可能に表示する制御を行う。ここで、撮像時点以前とするか撮像時点以降とするかは、注目画像に付加された指標情報の種別に応じて判断される。また、画像表示制御部15aは、標識情報が付加された注目画像が複数ある場合には、時間スケール上で各注目画像の撮像時点に挟まれた表示領域を、時間スケール上の他の表示領域と識別可能に表示するように制御を行う。
Further, the image
なお、識別可能な表示として、画像表示制御部15aは、時間スケール上の所望の識別領域の表示色相、表示彩度、表示輝度、表示模様(表示パターン)、形状および大きさ等のうち少なくとも1つを、他の表示領域と異ならせた表示を行うようにする。ここで、時間スケール上の所望の識別領域とは、時間スケール上で注目画像の撮像時点によって区切られた一方の領域である。すなわち、画像表示制御部15aは、時間スケール上の表示領域の表示色相、表示彩度、表示輝度、表示模様(表示パターン)、形状および大きさ等のうち少なくとも1つを、注目画像の撮像時点の前後で異ならせて表示する制御を行うこととなる。
As an identifiable display, the image
また、画像表示制御部15aは、標識情報が付加された各注目画像を主表示領域と異なる副表示領域にサムネイル画像として表示する制御を行うとともに、この表示した各サムネイル画像の近傍に、各サムネイル画像の撮像時刻に対応した相対時間を表示する制御を行うこともできる。この場合、画像表示制御部15aは、副表示領域に表示させたサムネイル画像の中から任意に選択された基準サムネイル画像の撮像時点を基準とした相対時間を表示するように制御を行うことができる。
In addition, the image
なお、画像表示制御部15aは、基準サムネイル画像を選択する選択情報を取得する選択情報取得手段としての操作アイコン等を表示する制御を行う。この操作アイコンは、例えばGUI画面上の専用の操作ボタン、あるいはサムネイル画像に重畳された不可視の操作ボタンとして表示される。これらの操作アイコンでは、例えば入力部11が備えるマウスを用いた操作アイコン上でのクリック操作によって、所定の選択情報の入力が実行される。また、画像表示制御部15aは、このような操作アイコン等の操作の実行に応じて選択情報を取得するごと、すなわち選択情報が更新されるごとに、上記の基準を更新し、新たな基準時点による相対時間の表示をするように制御を行うことができる。
The image
画像処理制御部15bは、携帯型記録媒体5または記憶部14に記憶された画像データを取得して画像処理部13に出力するとともに、この出力した画像に対する各種画像処理の制御を行う。また、画像処理制御部15bは、画像処理部13における処理結果の画像データを記憶部14または携帯型記録媒体5に出力して記憶させる。
The image
つぎに、画像表示装置4が表示部12に表示する表示画面(GUI画面)について説明する。図3は、画像表示装置4が画像表示制御部15aによる制御に基づいて表示するGUI画面の一例を示す図である。図3に示すように、表示部12には、GUI画面としてのウインドウ21(「診察・診断」ウインドウ)が表示される。ウインドウ21内には、主表示画像等を表示する主表示領域22と、アイコンとして示された各種画像操作ボタンを表示する画像操作領域25と、一連の被検体内画像の撮像期間を示す時間スケールとしてのカラーバー26およびタイムバー27と、サムネイル画像等を表示する副表示領域28とが、表示画面上でこの順に上方から下方へ並列表示される。
Next, a display screen (GUI screen) displayed on the
主表示領域22内には、入力部3から入力された指示情報をもとに一連の被検体内画像の中から選択された画像である主表示画像23と、被検体1上のアンテナ6a〜6hの配置を模式的に示すアンテナ配置図24とが表示される。また、主表示領域22内には、主表示画像23として選択された被検体内画像に対応付けられている被検体1の名前、ID番号、性別、年齢、生年月日、撮像年月日、撮像時刻等が文字情報として表示される。なお、主表示領域22には、所定操作に応じて2以上の所定数の主表示画像が表示可能である。
In the
アンテナ配置図24には、アンテナ6a〜6hの配置が被検体1の一部輪郭とともに模式的に表示される。また、アンテナ配置図24には、アンテナ6a〜6hの近傍に、この各アンテナの識別番号としてのアンテナ番号が文字表示される。例えば図3では、アンテナ番号として「1」〜「8」が示されている。かかるアンテナ配置図24では、主表示画像23として表示された被検体内画像の撮像時に、アンテナ6a〜6hのうち最も受信強度が大きかった最大強度アンテナが、他のアンテナと識別可能に表示される。例えば図3では、最大強度アンテナとして、アンテナ番号「4」のアンテナが、他のアンテナと識別可能に表示された状態が示されている。なお、識別可能な表示として、画像表示制御部15aは、例えば最大強度アンテナの表示輝度、表示色相および表示彩度等のうち少なくとも1つを、他のアンテナと異ならせて表示させることができる。
Antenna arrangement FIG. 24 schematically shows the arrangement of the
カラーバー26には、全体として、一連の被検体内画像に含まれる各画像の平均色が時系列に表示される。すなわち、カラーバー26上の各時点の表示領域には、この時点に撮像された被検体内画像の平均色が表示される。一連の被検体内画像は、撮像した臓器に応じて特有の平均色を有するため、観察者等は、カラーバー26上の時間軸(図3では横軸)に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器を容易に判別することができる。
The
また、カラーバー26は、特に、表示領域全体を表示画面上で上下方向に4分割して構成されており、分割された各段の分割カラーバーには、一連の被検体内画像の分割画像領域における対応する各段の領域平均色または期間領域平均色が時系列に表示される。すなわち、各被検体内画像の平均色は、上下方向に全画像領域を4分割した分割画像領域ごとに算出され、カラーバー26には、各時点の表示領域を上下方向に4分割した分割スケール領域ごとに、この分割順に対応付けられた各分割画像領域の領域平均色または期間領域平均色が表示される。
In addition, the
かかるカラーバー26によると、観察者等は、分割された各段の分割カラーバーの時間軸に沿った平均色の推移から、各時点の被検体内画像に撮像された臓器が判別できるだけでなく、撮像された臓器内部の状態を分割画像領域に応じて詳細に容易に推定することができる。これによって、観察者等は、例えばある期間の最上段の分割カラーバー26aに赤色系の平均色が視認された場合、この期間に撮像された臓器内部に出血部位が存在したこと、この期間の被検体内画像における最上段の分割画像領域に対応する撮像範囲に出血部位が存在したこと等が認識することができる。また、例えば管腔部を含む画像領域の黒色系の平均色と、他の画像領域の平均色とが異なる段の分割カラーバーに表示されることによって、管腔部を除いた撮像範囲の臓器内部の状態を認識することができる。
According to the
タイムバー27には、このタイムバー27上で時間軸方向に移動可能なスライダ27aが表示される。スライダ27aは、主表示画像23として表示された被検体内画像の撮像時点をタイムバー27上で指示するとともに、主表示画像23の表示切替に連動してタイムバー27上を移動する。例えば、画像操作領域25内のいずれかの画像操作ボタンが図示しないマウス等によって操作された場合、主表示画像23が切替表示されるとともに、スライダ27aは、この切替表示後に主表示画像23として表示された被検体内画像の撮像時点を指示する位置に移動する。
The
また、これとは逆に、スライダ27aが図示しないマウス等によって移動操作された場合には、移動操作後にスライダ27aが指示する撮像時点に対応した被検体内画像が主表示画像23として表示される。なお、スライダ27aが連続的に移動操作された場合、この移動操作に追随して、主表示画像23は連続的に切替表示される。かかるスライダ27aによると、観察者等は、例えばカラーバー26を参照して見出した所望の臓器の被検体内画像に対応する撮像時点にスライダ27aを移動操作することによって、この被検体内画像を即座に主表示画像23として表示させることができる。
On the other hand, when the
さらに、タイムバー27には、一連の被検体内画像の中から注目画像として認識された画像群の撮像期間を示すマーカー27bが、タイムバー27上の他の表示領域と識別可能に表示される。例えば図3では、マーカー27bは、他の表示領域と異なる色で表示され、観察者等に容易に視認可能とされている。
Further, on the
マーカー27bで示される撮像期間の開始時点(マーカー27b左端の時点)と終了時点(マーカー27bの右端の時点)とは、被検体内画像に標識情報を付加する操作アイコンとしてのランドマークボタン29の操作によって設定される。すなわち、マーカー27bの開始時点とする撮像時点の被検体内画像を主表示画像23として表示し、ランドマークボタン29に対して図示しないマウスによるクリック操作等を実行して、この主表示画面23としての被検体内画像に開始時点を示す標識情報が付加される。同様に、マーカー27bの終了時点とする撮像時点の被検体内画像を主表示し、ランドマークボタン29を操作して、主表示した被検体内画像に終了時点を示す標識情報が付加される。そして、このように開始時点と終了時点とが設定された場合に、指定された撮像期間を明示するマーカー27bが表示される。
The start time (the time at the left end of the
かかるマーカー27bによると、観察者等は、このマーカー27bで示される撮像期間内の被検体内画像が特に注目すべき注目画像であることなどを容易に認識することができる。また、マーカー27bの情報、すなわちマーカー27bの開始時点と終了時点とを示す標識情報を被検体内画像に対応付けて記録することによって、この一連の被検体内画像を表示するごとに注目画像が存在する撮像期間を表示することができ、観察者等の画像検索にかける時間および労力を削減することができるとともに、注目画像の観察を効率的に行えるようにできる。
According to the
なお、時間スケールとしてのカラーバー26およびタイムバー27の左端は、一連の被検体内画像における時系列で先頭の画像の撮像時点を示し、同右端は、時系列で末尾の画像の撮像時点を示す。通常、この左端の撮像時点は、受信装置3による画像データの受信開始時点に相当し、右端の撮像時点は、画像データの受信終了時点に相当する。
Note that the left end of the
副表示領域28には、一連の被検体内画像の中から選択抽出された画像がサムネイル画像28aとして表示される。具体的には、例えば、所定のボタン操作またはマウス操作等に応じて、この操作時点に主表示画像23として表示されている被検体内画像がサムネイル画像28aとして副表示領域28に追加表示される。
In the
また、副表示領域28には、各サムネイル画像の近傍に個別の付加情報が文字情報28bとして表示される。この文字情報28bとしては、表示される各サムネイル画像の撮像時刻や、撮像時点に対応し所定時点を基準とした相対時間、観察者等によって付記されたコメント等が示される。例えば図3における文字情報28bでは、時系列で先頭の画像の撮像時点を基準とした各サムネイル画像の撮像時点に対応する相対時間が示されている。
In the
かかる相対時間の表示では、所定操作に応じて基準時刻を変更可能であり、具体的には、例えば表示されているサムネイル画像のいずれかをクリック操作することによって、この操作対象としたサムネイル画像の撮像時点を相対時間の基準にすることができる。例えば図4に示す文字情報28b’では、サムネイル画像28a−nをクリック操作した結果として、相対時間の基準(時間「00:00:00」)がこのサムネイル画像28a−nの撮像時点に変更されている。
In the display of the relative time, the reference time can be changed according to a predetermined operation. Specifically, for example, by clicking on one of the displayed thumbnail images, the thumbnail image to be operated is displayed. The imaging time can be used as a reference for relative time. For example, in the
なお、このように各サムネイル画像に相対時間を表示することによって、観察者らは、注目するサムネイル画像の被検体内での撮像位置を、おおよそ予測することができる。具体的には、例えば小腸を撮像し始めた被検体内画像の撮像時点を基準として、病変部等を含む画像を観察した場合、この画像の相対時間をもとに、小腸開始位置を基点とした病変部等の位置が推測できる。 By displaying the relative time on each thumbnail image in this way, the observer can roughly predict the imaging position of the thumbnail image of interest within the subject. Specifically, for example, when an image including a lesioned part is observed with reference to the imaging time of the in-vivo image starting to image the small intestine, based on the relative time of the image, the small intestine start position is used as a base point. The position of the affected part can be estimated.
また、副表示領域28に示される文字情報28b,28b’は、所定操作に応じて表示する情報内容を切替可能であるとともに、非表示とすることも可能である。さらに、副表示領域28には、各サムネイル画像と、タイムバー27上に示される各サムネイル画像の撮像時点と、を対応付けた線分が表示される。
The
なお、副表示領域28には表示領域の大きさに制約があるため、所定数までのサムネイル画像28aが一括表示可能とされている。例えば図3には、最大5枚のサムネイル画像が一括表示可能な場合が示されている。抽出されたサムネイル画像28aが一括表示可能な所定数より多い場合、この所定数を超えたサムネイル画像は、副表示領域28内に表示されるスクロールバー28cの操作に応じて切替表示される。また、副表示領域28に表示された各サムネイル画像は、所定のボタン操作またはマウス操作等に応じて主表示画像23として表示される。
In addition, since the size of the display area is limited in the
ここで、本実施の形態にかかる画像表示装置4がタイムバー27上にマーカーを表示する処理としてのランドマーク設定処理の処理手順について説明する。図4は、ランドマーク設定処理手順を示すフローチャートである。図4に示すように、画像処理制御部15bは、ランドマーク設定処理の処理開始の判断として、ランドマークボタン29が操作されたか否かを判断し(ステップS101)、操作されていない場合(ステップS101:No)、この判断処理を所定周期で繰り返す。
Here, a processing procedure of the landmark setting process as a process in which the
一方、ランドマークボタン29が操作された場合には(ステップS101:Yes)、画像表示制御部15aは、標識情報の詳細を取得するためのランドマーク設定ダイアログを表示する(ステップS102)。このステップS102では、画像表示制御部15aは、例えば図5に示すように、ランドマーク設定ダイアログ30をウインドウ21上に重ねて表示する制御を行う。
On the other hand, when the
図5に示すランドマーク設定ダイアログ30では、タイムバー27上に示すマーカーの開始時点を指示する標識情報を設定する項目としての「特徴領域開始」と、同様に終了時点を指示する標識情報を設定する項目としての「特徴領域終了」と、いずれの設定も行わない項目としての「設定なし」と、サムネイル画像28aに付記する文字情報としての相対時間の基準を設定する項目としての「相対時間基準」とが表示され、いずれかの項目が選択される。
In the
また、ランドマーク設定ダイアログ30には、選択した項目を確定するための「OK」ボタンと、ランドマーク設定ダイアログ30による設定操作をキャンセルする「キャンセル」ボタンとが表示される。なお、「OK」ボタンまたは「キャンセル」ボタンが操作された場合、所定の処理後、ランドマーク設定ダイアログ30が自動的に閉じられる。
In the
つぎに、画像表示制御部15aは、ランドマーク設定ダイアログ30上で設定項目が選択されたか否かを判断し(ステップS103)、選択された場合(ステップS103:Yes)、設定された項目の設定内容を一時記憶する(ステップS104)。一方、設定項目が選択されていない場合には(ステップS103:No)、ステップS105に移行する。なお、ステップS103における判断処理は、ステップS102の実行から所定時間経過時点に行うようにするとよい。
Next, the image
つづいて、画像表示制御部15aは、ランドマーク設定ダイアログ30上で「OK」ボタンが操作されたか否かを判断し(ステップS105)、操作された場合(ステップS105:Yes)、選択された設定項目に応じて標識情報を更新し(ステップS106)、更新した標識情報に基づいてタイムバー27上にマーカーを表示する(ステップS107)。その後、更新した標識情報を記憶部14に記録して(ステップS108)、ステップS111に移行する。
Subsequently, the image
一方、「OK」ボタンが操作されていない場合には(ステップS105:No)、画像表示制御部15aは、ランドマーク設定ダイアログ30上で「キャンセル」ボタンが操作されたか否かを判断し(ステップS109)、操作されていない場合(ステップS109:No)、ステップS103からの処理を繰り返す。「キャンセル」ボタンが操作された場合には(ステップS109:Yes)、このランドマーク設定処理にかかるすべての処理をキャンセルし(ステップS110)、ランドマーク設定ダイアログ30を閉じ(ステップS111)、この一連のランドマーク設定処理を終了する。
On the other hand, when the “OK” button is not operated (step S105: No), the image
なお、ステップS107では、画像表示制御部15aは、ランドマーク設定ダイアログ30上で選択された項目が「特徴領域開始」であって、一連の被検体内画像内に標識情報の対応付けられた被検体内画像が他に存在しなければ、例えば図6に示すように、新たに標識情報が対応付けられた被検体内画像の撮像時点以前のタイムバー27上の表示領域を、マーカー27cによって表示する。
In step S107, the image
また、ステップS107では、画像表示制御部15aは、画像表示制御部15aは、選択された項目が「特徴領域終了」であって、一連の被検体内画像内に標識情報の対応付けられた被検体内画像が他に存在しなければ、例えば図7に示すように、新たに標識情報が対応付けられた被検体内画像の撮像時点以降のタイムバー27上の表示領域を、マーカー27dによって表示する。
In step S107, the image
さらに、ステップS107では、画像表示制御部15aは、選択された項目が「特徴領域開始」(もしくは「特徴領域終了」)であって、一連の被検体内画像内に終了時点(もしくは開始時点)を示す標識情報の対応付けられた被検体内画像が存在する場合には、例えば図3に示したように、タイムバー27上で各指標情報に応じて挟まれた表示領域を、マーカー27bによって表示する。
Further, in step S107, the image
以上説明したように、本実施の形態にかかる画像表示装置4では、一連の被検体内画像の撮像期間を示すタイムバー27上に、注目画像として認識された画像群の撮像期間を示すマーカー27b〜27d等が、タイムバー27上の他の表示領域と識別可能に表示されるため、観察者等は、注目画像が存在する撮像期間を容易に認識することができ、観察ごとに注目画像を検索する時間および労力を削減することができ、注目画像の観察を効率的に行うことなどができる。
As described above, in the
なお、上述した実施の形態では、本発明にかかる画像表示装置4が表示する一連の画像を、被検体1内に導入されたカプセル型内視鏡2を用いて撮像された一連の被検体内画像として説明したが、かかる被検体内画像に限定して解釈する必要はなく、複数の時点に撮像された一連の画像であれば任意の画像でよく、撮像装置や撮像対象も任意でよい。
In the above-described embodiment, a series of images displayed by the
1 被検体
2 カプセル型内視鏡
3 受信装置
4 画像表示装置
5 携帯型記録媒体
6 受信アンテナ
6a〜6h アンテナ
11 入力部
12 表示部
13 画像処理部
14 記憶部
15 制御部
15a 画像表示制御部
15b 画像処理制御部
21 ウインドウ
22 主表示領域
23 主表示画像
24 アンテナ配置図
25 画像操作領域
26 カラーバー
26a〜26d 分割カラーバー
27 タイムバー
27a スライダ
27b〜27d マーカー
28 副表示領域
28a,28a−n サムネイル画像
28b,28b’ 文字情報
28c スクロールバー
29 ランドマークボタン
30 ランドマーク設定ダイアログ
DESCRIPTION OF
Claims (4)
前記一連の画像のうち複数の画像に注目画像であることを示す標識情報を付加する付加手段と、
前記標識情報が付加された注目画像の撮像時点以前または撮像時点以降の前記時間スケール上の表示領域を、該時間スケール上の他の表示領域と識別可能に表示する制御を行うと共に、前記標識情報が付加された各注目画像をサムネイル画像として表示し、この表示した各サムネイル画像の近傍に該各サムネイル画像の撮像時刻に対応した相対時間を表示する制御を行う表示制御手段と、
前記各サムネイル画像の中から前記基準サムネイル画像を選択する選択情報を取得する選択情報取得手段と、
を備え、
前記表示制御手段は、前記選択情報取得手段が選択情報を取得するごとに、前記基準サムネイル画像の撮像時点を基準として前記相対時間を更新して、該相対時間を表示する制御を行うことを特徴とする画像表示装置。 In an image display device that displays a time scale indicating an imaging period of a series of images together with a series of images taken at a plurality of time points,
An adding means for adding sign information indicating the image of interest to a plurality of images in the series of images;
Control is performed to display the display area on the time scale before or after the imaging time of the image of interest to which the marker information is added so as to be distinguishable from other display areas on the time scale. Display control means for performing control to display each attention image to which is added as a thumbnail image and displaying a relative time corresponding to the imaging time of each thumbnail image in the vicinity of each displayed thumbnail image;
Selection information acquisition means for acquiring selection information for selecting the reference thumbnail image from the thumbnail images;
With
The display control unit performs control to update the relative time with respect to the time point of capturing the reference thumbnail image and display the relative time each time the selection information acquisition unit acquires selection information. An image display device.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005263090A JP4472602B2 (en) | 2005-09-09 | 2005-09-09 | Image display device |
EP06796602A EP1918870A4 (en) | 2005-08-22 | 2006-08-21 | Image display apparatus |
US11/577,027 US20090027486A1 (en) | 2005-08-22 | 2006-08-21 | Image display apparatus |
PCT/JP2006/316339 WO2007023771A1 (en) | 2005-08-22 | 2006-08-21 | Image display device |
CN2006800306400A CN101248452B (en) | 2005-08-22 | 2006-08-21 | Image display apparatus |
AU2006282459A AU2006282459B2 (en) | 2005-08-22 | 2006-08-21 | Image display device |
US12/028,919 US8169472B2 (en) | 2005-08-22 | 2008-02-11 | Image display apparatus with interactive database |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005263090A JP4472602B2 (en) | 2005-09-09 | 2005-09-09 | Image display device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009271526A Division JP4923096B2 (en) | 2009-11-30 | 2009-11-30 | Image display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007075158A JP2007075158A (en) | 2007-03-29 |
JP4472602B2 true JP4472602B2 (en) | 2010-06-02 |
Family
ID=37936059
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005263090A Expired - Fee Related JP4472602B2 (en) | 2005-08-22 | 2005-09-09 | Image display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4472602B2 (en) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2072003B1 (en) * | 2007-12-17 | 2016-08-10 | Olympus Corporation | Image display apparatus and image display system |
EP2347695A4 (en) * | 2009-07-29 | 2012-03-28 | Olympus Medical Systems Corp | Image display device, radiographic interpretation support system, and radiographic interpretation support program |
JP2012170751A (en) * | 2011-02-23 | 2012-09-10 | Olympus Medical Systems Corp | Image display device, method and program, and capsule type endoscope system |
EP2742847A4 (en) * | 2011-08-12 | 2015-01-28 | Olympus Medical Systems Corp | Image management device, method, and program for image reading |
US9468420B2 (en) | 2013-05-02 | 2016-10-18 | Toshiba Medical Systems Corporation | Medical imaging data processing apparatus and method |
CN105848559B (en) * | 2014-01-30 | 2018-09-14 | 奥林巴斯株式会社 | Medical moving picture recording playback system and medical moving picture recording recording/reproduction apparatus |
JP6938232B2 (en) * | 2017-06-09 | 2021-09-22 | キヤノン株式会社 | Information processing equipment, information processing methods and programs |
-
2005
- 2005-09-09 JP JP2005263090A patent/JP4472602B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2007075158A (en) | 2007-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8830307B2 (en) | Image display apparatus | |
AU2006282459B2 (en) | Image display device | |
CN101686799B (en) | Image processing device, and its operating method | |
US8216129B2 (en) | Image display apparatus, endoscope system using the same, and image display method | |
EP2316327B1 (en) | Image display device, image display method, and image display program | |
EP1787574B1 (en) | Image display device, image display method, and image display program | |
EP2172902B1 (en) | Image display apparatus, image display method, and image display program | |
JP4472602B2 (en) | Image display device | |
JP6027960B2 (en) | Image display apparatus, image display method, and image display program | |
JPWO2014061553A1 (en) | Image processing apparatus and image processing method | |
US8169472B2 (en) | Image display apparatus with interactive database | |
JP4574983B2 (en) | Image display apparatus, image display method, and image display program | |
US8406489B2 (en) | Image display apparatus | |
JP2005218584A (en) | Display processor of image information and its display processing method and display processing program | |
JP4464894B2 (en) | Image display device | |
JP4923096B2 (en) | Image display device | |
JP5231160B2 (en) | Image display device, image display method, and image display program | |
JP4789961B2 (en) | Image display device | |
JP5684300B2 (en) | Image display device, image display method, and image display program | |
JP4594834B2 (en) | Image display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070517 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090929 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091222 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100209 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100303 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130312 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4472602 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130312 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140312 Year of fee payment: 4 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |