JP4868965B2 - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP4868965B2
JP4868965B2 JP2006196095A JP2006196095A JP4868965B2 JP 4868965 B2 JP4868965 B2 JP 4868965B2 JP 2006196095 A JP2006196095 A JP 2006196095A JP 2006196095 A JP2006196095 A JP 2006196095A JP 4868965 B2 JP4868965 B2 JP 4868965B2
Authority
JP
Japan
Prior art keywords
image
display
information
subject
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006196095A
Other languages
Japanese (ja)
Other versions
JP2008022918A (en
Inventor
聡美 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Medical Systems Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2006196095A priority Critical patent/JP4868965B2/en
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Priority to CN200780013447.0A priority patent/CN101420900B/en
Priority to PCT/JP2007/058066 priority patent/WO2007119784A1/en
Priority to EP07741502A priority patent/EP2008574B1/en
Priority to KR1020087024980A priority patent/KR101047253B1/en
Priority to AU2007239598A priority patent/AU2007239598B2/en
Publication of JP2008022918A publication Critical patent/JP2008022918A/en
Priority to US12/249,552 priority patent/US8194096B2/en
Application granted granted Critical
Publication of JP4868965B2 publication Critical patent/JP4868965B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)

Description

この発明は、時系列に沿って撮像した被検体内の一連の画像を表示する画像表示装置に関するものである。   The present invention relates to an image display device that displays a series of images in a subject taken in time series.

従来から、内視鏡分野においては、撮像機能と無線通信機能とを備えた飲込み型のカプセル型内視鏡が提案され、このようなカプセル型内視鏡を用いて被検体内の画像を取得する被検体内情報取得システムが開発されている。カプセル型内視鏡は、観察（検査）のために被検体の口から飲込まれた後、自然排出されるまでの間、胃や小腸等の臓器の内部をその蠕動運動に従って移動するとともに、例えば０．５秒間隔で被検体内の画像を順次撮像する。   Conventionally, in the field of endoscope, a swallowable capsule endoscope having an imaging function and a wireless communication function has been proposed, and an image in a subject can be captured using such a capsule endoscope. An in-subject information acquisition system has been developed. The capsule endoscope is swallowed from the subject's mouth for observation (examination) and then moves inside the organs such as the stomach and small intestine according to its peristaltic movement until it is naturally discharged. For example, images in the subject are sequentially captured at intervals of 0.5 seconds.

カプセル型内視鏡が被検体内を移動する間、このカプセル型内視鏡によって撮像された画像は、順次無線通信によって外部の受信装置に送信される。受信装置は、無線通信機能とメモリ機能とを有し、被検体内のカプセル型内視鏡から受信した画像をメモリに順次保存する。被検体は、かかる受信装置を携帯することによって、カプセル型内視鏡を飲込んでから自然排出するまでの間に亘り、自由に行動できる。カプセル型内視鏡が被検体から自然排出された後、医師または看護師においては、受信装置のメモリに蓄積された画像を画像表示装置に取り込ませ、被検体内の臓器の画像を画像表示装置に表示させて被検体の診断を行うことができる。   While the capsule endoscope moves within the subject, images captured by the capsule endoscope are sequentially transmitted to an external receiving device by wireless communication. The receiving device has a wireless communication function and a memory function, and sequentially stores images received from the capsule endoscope in the subject in the memory. The subject can act freely by carrying such a receiving apparatus from swallowing the capsule endoscope to spontaneous discharge. After the capsule endoscope is spontaneously ejected from the subject, the doctor or nurse takes the image stored in the memory of the receiving device into the image display device, and the image of the organ in the subject is displayed in the image display device. It is possible to make a diagnosis of a subject by displaying on the screen.

一方、このような被検体内情報取得システムには、複数の撮像素子を搭載した多眼のカプセル型内視鏡が用いられる場合もある。かかる多眼のカプセル型内視鏡は、複数の撮像素子によって進行方向の前方および後方を交互に撮像する。画像表示装置は、かかる多眼のカプセル型内視鏡によって撮像された複数方向の画像群を取得し、取得した画像群に含まれる各画像を画面上の各表示領域にそれぞれ交互に表示する（例えば、特許文献１参照）。なお、撮像素子によって撮像された大量の画像を画面上の各表示領域にそれぞれ分割して表示する画像表示装置には、特許文献２，３に記載されたものもある。   On the other hand, in such an in-subject information acquisition system, a multi-lens capsule endoscope equipped with a plurality of image sensors may be used. Such a multi-lens capsule endoscope alternately images forward and backward in the traveling direction by a plurality of imaging elements. The image display device acquires a plurality of image groups captured by the multi-lens capsule endoscope, and alternately displays each image included in the acquired image group in each display area on the screen ( For example, see Patent Document 1). Note that there are some image display devices described in Patent Documents 2 and 3 that display a large number of images captured by the image sensor by dividing them into respective display areas on the screen.

特開２００６−６８５３４号公報JP 2006-68534 A 特開２００２−２１１０４９号公報JP 2002-211049 A 特開平１１−２５９６３０号公報JP-A-11-259630

ところで、被検体内情報取得システムの画像表示装置は、一般に、カプセル型内視鏡によって撮像された被検体内の画像を大量に取得し、かかる被検体内の画像を撮像素子毎に分類する。その後、画像表示装置は、このように分類した複数の画像群に含まれる被検体内の各画像を時系列に沿って順次表示する。   Incidentally, the image display apparatus of the in-subject information acquisition system generally acquires a large amount of images in the subject imaged by the capsule endoscope, and classifies the images in the subject for each image sensor. Thereafter, the image display device sequentially displays each image in the subject included in the plurality of image groups classified in this way in time series.

しかしながら、従来の画像表示装置では、撮像素子毎に分類した複数の画像群の間で互いに近似する各画像（例えば、互いに近傍の被検体内部位が撮像された各画像）をそれぞれ表示するための操作が煩雑であり、かかる複数の画像群の間で互いに近似する各画像を観察するまでに多大な手間がかかるという問題点があった。   However, in the conventional image display device, each image that approximates each other among a plurality of image groups classified for each image sensor (for example, each image obtained by imaging an in-subject region close to each other) is displayed. There is a problem that the operation is complicated and it takes a lot of time to observe the images that are similar to each other among the plurality of image groups.

本発明は、上記事情に鑑みてなされたものであって、複数の撮像素子によって被検体内を撮像した複数の画像群の間で互いに近似する各画像を容易に観察することができる画像表示装置を提供することを目的とする。   The present invention has been made in view of the above circumstances, and is an image display device capable of easily observing images that approximate each other among a plurality of image groups obtained by imaging the inside of a subject with a plurality of imaging elements. The purpose is to provide.

上述した課題を解決し、目的を達成するために、請求項１にかかる画像表示装置は、複数の撮像素子によって撮像された被検体内の複数の画像群と該複数の画像群に含まれる各画像をそれぞれ特定する特定情報とを記憶する記憶手段と、前記複数の画像群に含まれる画像を表示する表示手段と、前記複数の画像群の中から前記表示手段に表示すべき画像群を選択する選択手段と、前記表示手段に現に表示されている現表示画像の特定情報と前記選択手段によって選択された画像群に含まれる各画像の特定情報とをもとに、前記現表示画像に最も近似する前記選択された画像群内の関連画像を決定し、前記関連画像を表示する制御を行う制御手段と、を備えたことを特徴とする。   In order to solve the above-described problems and achieve the object, an image display apparatus according to claim 1 includes a plurality of image groups in a subject imaged by a plurality of imaging elements and each of the plurality of image groups. Storage means for storing specific information for specifying each image, display means for displaying images included in the plurality of image groups, and selecting an image group to be displayed on the display means from the plurality of image groups Based on the selection means, the specific information of the current display image currently displayed on the display means, and the specific information of each image included in the image group selected by the selection means. Control means for determining a related image in the selected group of images to be approximated and performing control to display the related image.

また、請求項２にかかる画像表示装置は、上記の発明において、前記制御手段は、前記現表示画像を前記関連画像に切り替える制御を行うことを特徴とする。   According to a second aspect of the present invention, in the above invention, the control means performs control to switch the current display image to the related image.

また、請求項３にかかる画像表示装置は、上記の発明において、前記制御手段は、前記複数の画像群の間で互いに近似する複数の前記関連画像を前記表示手段に同時に表示する制御を行うことを特徴とする。   According to a third aspect of the present invention, in the above invention, the control unit performs control to simultaneously display the plurality of related images that approximate each other among the plurality of image groups on the display unit. It is characterized by.

また、請求項４にかかる画像表示装置は、上記の発明において、前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像のフレーム順序を示す番号情報とを含み、前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の番号情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする。   According to a fourth aspect of the present invention, in the above invention, in the above invention, the specific information includes ID information for specifying any one of the plurality of image sensors and an image group captured by the image sensor specified by the ID information. And the control means extracts the related image having the ID information corresponding to the image group selected by the selection means and the number information of the current display image. And controlling to display the extracted related image.

また、請求項５にかかる画像表示装置は、上記の発明において、前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の時間情報とを含み、前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の時間情報の近似値とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする。   In the image display device according to claim 5, in the above invention, the identification information includes ID information that identifies one of the plurality of imaging elements and an image group captured by the imaging element that is identified by the ID information. The control means extracts the related image having the ID information corresponding to the image group selected by the selection means and the approximate value of the time information of the current display image. , And control to display the extracted related image.

また、請求項６にかかる画像表示装置は、上記の発明において、前記現表示画像と前記関連画像との時間差を設定する設定手段を備え、前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の時間情報とを含み、前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の時間情報に対して前記時間差に近似する差になる時間情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする。   According to a sixth aspect of the present invention, in the above invention, the image display device further includes setting means for setting a time difference between the current display image and the related image, and the specific information includes any one of the plurality of image sensors. ID information to be identified and time information of images in an image group captured by the image sensor identified by the ID information, wherein the control means includes the ID information corresponding to the image group selected by the selection means, Control is performed to extract the related image having time information that becomes a difference approximate to the time difference with respect to the time information of the current display image, and to display the extracted related image.

また、請求項７にかかる画像表示装置は、上記の発明において、前記制御手段は、前記ＩＤ情報によって特定される撮像素子のフレームレートと該撮像素子が撮像した画像群内の画像のフレーム順序を示す番号情報とをもとに前記時間情報を算出することを特徴とする。   In the image display device according to claim 7, in the above invention, the control unit determines a frame rate of the image sensor specified by the ID information and a frame order of images in the image group captured by the image sensor. The time information is calculated based on the indicated number information.

また、請求項８にかかる画像表示装置は、上記の発明において、前記特定情報は、前記複数の撮像素子をそれぞれ特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の撮像位置情報とを含み、前記制御手段は、前記複数の画像群に含まれる各画像の撮像位置情報をそれぞれ検出し、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の撮像位置情報に近似する撮像位置情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする。   In the image display device according to claim 8, in the above invention, the specific information includes ID information for specifying each of the plurality of image sensors and an image group captured by the image sensor specified by the ID information. Imaging position information of the image, and the control means detects the imaging position information of each image included in the plurality of image groups, and the ID information corresponding to the image group selected by the selection means and the The related image having imaging position information approximate to the imaging position information of the current display image is extracted, and control is performed to display the extracted related image.

また、請求項９にかかる画像表示装置は、上記の発明において、前記表示手段は、主表示領域に前記現表示画像を表示するとともに、副表示領域に前記関連画像を表示し、前記選択手段は、前記副表示領域内に形成されることを特徴とする。   According to a ninth aspect of the present invention, in the above invention, the display means displays the current display image in a main display area and the related image in a sub display area, and the selection means The sub-display area is formed in the sub-display area.

この発明によれば、選択ＧＵＩを用いた容易な操作によって、被検体内の複数の画像群の間で互いに近似する画像同士、例えば互いに近傍の被検体内部位が撮像された画像同士を表示部の主表示領域に切り替えて表示することができる。この結果、被検体内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、被検体の臓器内を詳細に観察可能な画像表示装置を実現できるという効果を奏する。   According to the present invention, the display unit displays images that are similar to each other among a plurality of image groups in the subject, for example, images in which regions in the subject that are close to each other are captured by an easy operation using the selection GUI. The main display area can be switched and displayed. As a result, it is possible to easily observe the images that are close to each other among the plurality of image groups in the subject, and it is possible to realize an image display device that can observe the inside of the organ of the subject in detail.

以下、図面を参照して、本発明にかかる画像表示装置の好適な実施の形態を詳細に説明する。なお、この実施の形態によって本発明が限定されるものではない。   DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of an image display device according to the invention will be described in detail with reference to the drawings. Note that the present invention is not limited to the embodiments.

（実施の形態１）
図１は、本発明の実施の形態１にかかる画像表示装置を有する被検体内情報取得システムの一構成例を示す模式図である。図１に示すように、この被検体内情報取得システムは、被検体１の臓器内を移動するとともに被検体１内の画像を撮像するカプセル型内視鏡２ａ，２ｂと、カプセル型内視鏡２ａ，２ｂによって送信された無線信号を受信し、受信した無線信号に含まれる被検体１内の画像群を蓄積する受信装置３と、受信装置３に蓄積された画像群に含まれる被検体１の画像を表示する画像表示装置４と、受信装置３と画像表示装置４との間のデータの受け渡しを行うための携帯型記録媒体５とを備える。 (Embodiment 1)
FIG. 1 is a schematic diagram illustrating a configuration example of an in-vivo information acquiring system including an image display device according to a first embodiment of the present invention. As shown in FIG. 1, this in-subject information acquisition system includes capsule endoscopes 2a and 2b that move in an organ of a subject 1 and capture an image in the subject 1, and a capsule endoscope. The receiving device 3 that receives the wireless signals transmitted by 2a and 2b and stores the image group in the subject 1 included in the received wireless signal, and the subject 1 included in the image group stored in the receiving device 3 An image display device 4 for displaying the image and a portable recording medium 5 for transferring data between the receiving device 3 and the image display device 4.

カプセル型内視鏡２ａ，２ｂは、被検体１内の画像（具体的には臓器内部の画像）を順次撮像する撮像機能と、撮像した被検体１内の画像群を外部の受信装置３に無線送信する無線通信機能とをそれぞれ有する。具体的には、カプセル型内視鏡２ａ，２ｂは、所定の時間（例えば数時間以上）を空けて被検体１の内部に順次導入され、蠕動によって被検体１の臓器内をそれぞれ移動するとともに、かかる被検体１の臓器内部の画像をそれぞれ撮像する。この場合、カプセル型内視鏡２ａ，２ｂにそれぞれ搭載されたＣＣＤ等の各撮像素子は、例えば互いに同じフレームレートで被検体１内の画像を逐次撮像する。かかるカプセル型内視鏡２ａ，２ｂのそれぞれは、撮像素子によって撮像された被検体１内の画像とこの撮像素子に特有なＩＤ情報とを含む無線信号を外部の受信装置３に逐次送信する。   The capsule endoscopes 2a and 2b are provided with an imaging function for sequentially capturing images in the subject 1 (specifically, images inside the organ) and an image group in the captured subject 1 to the external receiving device 3. Each has a wireless communication function for wireless transmission. Specifically, the capsule endoscopes 2a and 2b are sequentially introduced into the subject 1 with a predetermined time (for example, several hours or more), and moved in the organ of the subject 1 by peristalsis. Each of the images inside the organ of the subject 1 is taken. In this case, each imaging element such as a CCD mounted in each of the capsule endoscopes 2a and 2b sequentially captures images in the subject 1 at the same frame rate, for example. Each of the capsule endoscopes 2a and 2b sequentially transmits a radio signal including an image in the subject 1 imaged by the imaging device and ID information unique to the imaging device to the external receiving device 3.

受信装置３は、例えば被検体１の体表上に分散配置された複数の受信アンテナ３ａ〜３ｈが接続され、かかる複数の受信アンテナ３ａ〜３ｈを介してカプセル型内視鏡２ａ，２ｂからの各無線信号をそれぞれ受信する。受信装置３は、受信したカプセル型内視鏡２ａからの無線信号をもとに、カプセル型内視鏡２ａの撮像素子によって撮像された被検体１内の画像およびこの撮像素子のＩＤ情報を取得する。これと同様に、受信装置３は、受信したカプセル型内視鏡２ｂからの無線信号をもとに、カプセル型内視鏡２ｂの撮像素子によって撮像された被検体１内の画像およびこの撮像素子のＩＤ情報を取得する。   The receiving device 3 is connected to, for example, a plurality of receiving antennas 3a to 3h distributed on the body surface of the subject 1, and the capsule endoscopes 2a and 2b are connected via the plurality of receiving antennas 3a to 3h. Each radio signal is received. Based on the received radio signal from the capsule endoscope 2a, the receiving device 3 acquires an image in the subject 1 imaged by the imaging element of the capsule endoscope 2a and ID information of the imaging element. To do. Similarly, the receiving device 3 uses the received radio signal from the capsule endoscope 2b to capture an image in the subject 1 captured by the imaging element of the capsule endoscope 2b and the imaging element. ID information is acquired.

また、受信装置３は、携帯型記録媒体５が着脱可能に挿着される。受信装置３は、カプセル型内視鏡２ａの撮像素子によって撮像された被検体１内の画像と、この被検体１内の画像の受信順序を示す受信番号と、カプセル型内視鏡２ａの撮像素子のＩＤ情報とを携帯型記録媒体５に逐次格納する。このようにして、受信装置３は、カプセル型内視鏡２ａの撮像素子が時系列に沿って撮像した被検体１内の画像群を、各画像の受信番号とカプセル型内視鏡２ａの撮像素子のＩＤ情報とに対応付けて携帯型記録媒体５に蓄積する。これと同様に、受信装置３は、カプセル型内視鏡２ｂの撮像素子が時系列に沿って撮像した被検体１内の画像群を、各画像の受信番号とカプセル型内視鏡２ｂの撮像素子のＩＤ情報とに対応付けて携帯型記録媒体５に蓄積する。   The portable recording medium 5 is detachably inserted into the receiving device 3. The receiving device 3 includes an image in the subject 1 captured by the imaging element of the capsule endoscope 2a, a reception number indicating the reception order of the images in the subject 1, and the imaging of the capsule endoscope 2a. The element ID information is sequentially stored in the portable recording medium 5. In this way, the reception device 3 captures the image group in the subject 1 captured in time series by the imaging element of the capsule endoscope 2a, and the reception number of each image and the imaging of the capsule endoscope 2a. The information is stored in the portable recording medium 5 in association with the element ID information. Similarly, the receiving apparatus 3 captures an image group in the subject 1 captured in time series by the imaging element of the capsule endoscope 2b, and the reception number of each image and the imaging of the capsule endoscope 2b. The information is stored in the portable recording medium 5 in association with the element ID information.

受信アンテナ３ａ〜３ｈは、例えばループアンテナを用いて実現され、カプセル型内視鏡２ａ，２ｂによってそれぞれ送信された各無線信号を受信する。受信アンテナ３ａ〜３ｈは、図１に示すように、被検体１の体表上の所定位置、例えば被検体１内におけるカプセル型内視鏡２ａ，２ｂの通過経路（すなわち消化管）に対応する位置に分散配置される。なお、受信アンテナ３ａ〜３ｈは、被検体１に着用させるジャケットの所定位置に分散配置されてもよい。この場合、受信アンテナ３ａ〜３ｈは、被検体１がこのジャケットを着用することによって、被検体１内におけるカプセル型内視鏡２の通過経路に対応する被検体１の体表上の所定位置に配置される。このような受信アンテナは、被検体１に対して１以上配置されればよく、その配置数は、特に８つに限定されない。   The receiving antennas 3a to 3h are realized by using, for example, loop antennas, and receive the respective radio signals transmitted by the capsule endoscopes 2a and 2b. As shown in FIG. 1, the receiving antennas 3a to 3h correspond to predetermined positions on the body surface of the subject 1, for example, passage paths (that is, digestive tracts) of the capsule endoscopes 2a and 2b in the subject 1. Distributed in position. The receiving antennas 3a to 3h may be distributed at predetermined positions of a jacket worn by the subject 1. In this case, the receiving antennas 3a to 3h are placed at predetermined positions on the body surface of the subject 1 corresponding to the passage path of the capsule endoscope 2 in the subject 1 when the subject 1 wears this jacket. Be placed. One or more such receiving antennas may be arranged with respect to the subject 1, and the number of the receiving antennas is not particularly limited to eight.

携帯型記録媒体５は、コンパクトフラッシュ（登録商標）等の携帯可能な記録メディアである。携帯型記録媒体５は、受信装置３および画像表示装置４に対して着脱可能であって、両者に対する挿着時にデータの出力および記録が可能な構造を有する。具体的には、携帯型記録媒体５は、受信装置３に挿着された場合、受信装置３によって取得された被検体１内の複数の画像群と、かかる複数の画像群に含まれる各画像にそれぞれ対応付けられたカプセル型内視鏡２ａ，２ｂの各撮像素子のＩＤ情報および受信番号とを格納する。一方、携帯型記録媒体５は、画像表示装置４に挿着された場合、上述した被検体１内の複数の画像群、各撮像素子のＩＤ情報、および各画像の受信番号等の保存データを画像表示装置４に出力する。このようにして、携帯型記録媒体５の保存データは、画像表示装置４に取り込まれる。なお、携帯型記録媒体５は、被検体１の患者ＩＤや検査日等の情報が画像表示装置４によって書き込まれる。   The portable recording medium 5 is a portable recording medium such as CompactFlash (registered trademark). The portable recording medium 5 is detachable from the receiving device 3 and the image display device 4 and has a structure capable of outputting and recording data when being inserted into both. Specifically, when the portable recording medium 5 is inserted into the receiving device 3, a plurality of image groups in the subject 1 acquired by the receiving device 3, and each image included in the plurality of image groups. The ID information and the reception number of each imaging element of the capsule endoscopes 2a and 2b respectively associated with are stored. On the other hand, when the portable recording medium 5 is inserted into the image display device 4, the storage data such as the plurality of image groups in the subject 1, the ID information of each image sensor, and the reception number of each image are stored. Output to the image display device 4. In this way, the data stored in the portable recording medium 5 is taken into the image display device 4. In the portable recording medium 5, information such as the patient ID and examination date of the subject 1 is written by the image display device 4.

画像表示装置４は、カプセル型内視鏡２ａ，２ｂによって撮像された被検体１の臓器内部の画像を表示するためのものである。具体的には、画像表示装置４は、受信装置３によって携帯型記録媒体５に蓄積された各種データを取り込むことによって、上述した被検体１内の画像群等の各種データを取得し、取得した画像群に含まれる被検体１内の画像を表示するワークステーション等のような構成を有する。この場合、画像表示装置４は、取得した被検体１内の画像群をカプセル型内視鏡２ａ，２ｂの撮像素子毎に分類し、かかる撮像素子毎に分類した複数の画像群を記憶部に保存する。かかる画像表示装置４は、このように分類した複数の画像群の間で互いに近似する各画像（例えば、被検体１内において互いに近傍の部位が撮像された各画像）を切り替えて表示する画像切替表示機能を有する。さらに、画像表示装置４は、医師または看護師等のユーザが被検体１内の画像を観察（検査）して被検体１を診断するための処理機能を有する。この場合、ユーザは、画像表示装置４に被検体１内の画像を順次表示させて被検体１内の部位、例えば食道、胃、小腸、および大腸等を観察（検査）し、これをもとに、被検体１を診断できる。   The image display device 4 is for displaying an image inside the organ of the subject 1 captured by the capsule endoscopes 2a and 2b. Specifically, the image display device 4 acquires various data such as the image group in the subject 1 described above by acquiring various data stored in the portable recording medium 5 by the receiving device 3. It has a configuration such as a workstation that displays images in the subject 1 included in the image group. In this case, the image display device 4 classifies the acquired image group in the subject 1 for each imaging element of the capsule endoscopes 2a and 2b, and stores a plurality of image groups classified for each imaging element in the storage unit. save. The image display device 4 switches and displays images that are similar to each other among a plurality of image groups classified in this way (for example, images obtained by imaging parts close to each other in the subject 1). Has a display function. Furthermore, the image display device 4 has a processing function for a user such as a doctor or a nurse to observe (examine) an image in the subject 1 and diagnose the subject 1. In this case, the user sequentially displays the images in the subject 1 on the image display device 4 and observes (examines) the parts in the subject 1, such as the esophagus, stomach, small intestine, and large intestine. In addition, the subject 1 can be diagnosed.

つぎに、本発明の実施の形態１にかかる画像表示装置４の構成について説明する。図２は、本発明の実施の形態１にかかる画像表示装置４の一構成例を模式的に示すブロック図である。図２に示すように、この実施の形態１にかかる画像表示装置４は、各種情報を入力する入力部１１と、被検体１内の画像およびＧＵＩ（Graphical User Interface）等を画面表示する表示部１２と、携帯型記録媒体５から被検体１内の画像群等の保存データを取り込むためのカードインターフェース（Ｉ／Ｆ）１３とを有する。また、画像表示装置４は、カプセル型内視鏡２ａ，２ｂの撮像素子毎に分類される被検体１の複数の画像群等を記憶する記憶部１４と、画像表示装置４の各構成部を制御する制御部１５とを有する。   Next, the configuration of the image display device 4 according to the first embodiment of the present invention will be described. FIG. 2 is a block diagram schematically illustrating a configuration example of the image display device 4 according to the first embodiment of the present invention. As shown in FIG. 2, the image display apparatus 4 according to the first embodiment includes an input unit 11 for inputting various information, and a display unit for displaying an image in the subject 1 and a GUI (Graphical User Interface). 12 and a card interface (I / F) 13 for taking stored data such as an image group in the subject 1 from the portable recording medium 5. The image display device 4 includes a storage unit 14 that stores a plurality of image groups of the subject 1 classified for each imaging element of the capsule endoscopes 2a and 2b, and each component unit of the image display device 4. And a control unit 15 for controlling.

入力部１１は、キーボードおよびマウス等の入力デバイスを用いて実現され、ユーザによる入力操作によって、制御部１５に各種情報を入力する。かかる入力部１１によって制御部１５に入力される情報として、制御部１５に対して指示する指示情報、被検体１に関する患者情報、複数の画像群の中から表示部１２に表示する被検体１の画像群を選定する選択情報等が挙げられる。   The input unit 11 is realized by using an input device such as a keyboard and a mouse, and inputs various information to the control unit 15 by an input operation by a user. As information input to the control unit 15 by the input unit 11, instruction information instructed to the control unit 15, patient information regarding the subject 1, and the subject 1 displayed on the display unit 12 from among a plurality of image groups. Examples include selection information for selecting an image group.

表示部１２は、ＣＲＴディスプレイまたは液晶ディスプレイ等の各種ディスプレイを用いて実現され、制御部１５によって表示指示された各種情報等を表示する。具体的には、表示部１２は、被検体１を観察し診断するための各種情報、例えば、カプセル型内視鏡２ａ，２ｂの各撮像素子によって撮像された複数の画像群に含まれる被検体１内の画像等を表示する。また、表示部１２は、かかる複数の画像群の中から表示すべき画像群を選択するための選択ＧＵＩ、この選択ＧＵＩによって選択された画像群の表示操作を行うための表示操作ＧＵＩ等を表示する。   The display unit 12 is realized by using various displays such as a CRT display or a liquid crystal display, and displays various information instructed to be displayed by the control unit 15. Specifically, the display unit 12 observes and diagnoses the subject 1, for example, subjects included in a plurality of image groups captured by the imaging elements of the capsule endoscopes 2 a and 2 b. The image in 1 is displayed. Further, the display unit 12 displays a selection GUI for selecting an image group to be displayed from the plurality of image groups, a display operation GUI for performing a display operation of the image group selected by the selection GUI, and the like. To do.

カードＩ／Ｆ１３は、上述した携帯型記録媒体５の保存データを取り込むためのものである。具体的には、カードＩ／Ｆ１３は、携帯型記録媒体５が着脱可能に挿着された場合、かかる携帯型記録媒体５に蓄積された保存データを読み取るとともに、得られた保存データを制御部１５に転送する。また、カードＩ／Ｆ１３は、挿着された携帯型記録媒体５に対し、制御部１５によって書き込み指示された情報、例えば被検体１の患者情報等を書き込む。   The card I / F 13 is for taking in the storage data of the portable recording medium 5 described above. Specifically, when the portable recording medium 5 is detachably inserted, the card I / F 13 reads the saved data stored in the portable recording medium 5 and uses the obtained saved data as a control unit. 15 for transfer. In addition, the card I / F 13 writes information instructed to be written by the control unit 15, for example, patient information of the subject 1, to the inserted portable recording medium 5.

記憶部１４は、ＲＡＭ、ＥＥＰＲＯＭ、またはハードディスク等を用いて実現され、制御部１５によって書き込み指示されたデータを保存し、制御部１５によって読み出し指示された保存データを制御部１５に送信する。このような記憶部１４は、カプセル型内視鏡２ａ，２ｂの撮像素子毎に分類された被検体１内の複数の画像群と、かかる複数の画像群に含まれる各画像をそれぞれ特定する特定情報とを記憶する記憶手段として機能する。具体的には、記憶部１４は、カプセル型内視鏡２ａの撮像素子によって撮像された被検体１内の画像群ＰＧ１と画像群ＰＧ１に含まれる各画像の特定情報とをフォルダＦ１に保存し、カプセル型内視鏡２ｂの撮像素子によって撮像された被検体１内の画像群ＰＧ２と画像群ＰＧ２に含まれる各画像の特定情報とをフォルダＦ２内に記憶する。この場合、記憶部１４は、画像群ＰＧ１に含まれる各画像にそれぞれ対応付けて画像群ＰＧ１の各画像の特定情報を記憶し、画像群ＰＧ２に含まれる各画像にそれぞれ対応付けて画像群ＰＧ２の各画像の特定情報を記憶する。   The storage unit 14 is implemented using a RAM, an EEPROM, a hard disk, or the like, stores data instructed to be written by the control unit 15, and transmits stored data instructed to be read out by the control unit 15 to the control unit 15. Such a storage unit 14 specifies a plurality of image groups in the subject 1 classified for each imaging element of the capsule endoscopes 2a and 2b and each image included in the plurality of image groups. It functions as a storage means for storing information. Specifically, the storage unit 14 stores the image group PG1 in the subject 1 imaged by the imaging element of the capsule endoscope 2a and the specific information of each image included in the image group PG1 in the folder F1. The image group PG2 in the subject 1 imaged by the imaging device of the capsule endoscope 2b and the specific information of each image included in the image group PG2 are stored in the folder F2. In this case, the storage unit 14 stores the specific information of each image in the image group PG1 in association with each image included in the image group PG1, and the image group PG2 in association with each image included in the image group PG2. The specific information of each image is stored.

ここで、かかる記憶部１４に保存される各画像の特定情報は、例えば、カプセル型内視鏡２ａ，２ｂのいずれかに搭載された撮像素子のＩＤ情報と、このＩＤ情報によって特定される撮像素子が撮像した画像群内の画像のフレーム順序を示す番号情報（後述する入力番号）とを組み合わせたものである。すなわち、被検体１内の画像群ＰＧ１，ＰＧ２に含まれる各画像は、かかる撮像素子のＩＤ情報とフレーム順序を示す入力番号との組み合わせである特定情報によってそれぞれ特定される。   Here, the specific information of each image stored in the storage unit 14 is, for example, the ID information of the image sensor mounted in one of the capsule endoscopes 2a and 2b and the imaging specified by this ID information. This is a combination of number information (input number to be described later) indicating the frame order of images in an image group captured by the element. That is, each image included in the image groups PG1 and PG2 in the subject 1 is specified by specifying information that is a combination of the ID information of the image sensor and the input number indicating the frame order.

制御部１５は、画像表示装置４の各構成部を制御する。具体的には、制御部１５は、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。この場合、制御部１５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から、被検体１内の画像群と、かかる被検体１内の画像群に含まれる各画像に対応付けられた撮像素子のＩＤ情報および各画像の受信番号とを取得する。制御部１５は、かかる被検体１内の画像群（例えば上述した画像群ＰＧ１，ＰＧ２）と撮像素子のＩＤ情報および画像の受信番号とを画像毎に対応付けて記憶部１４に保存する。制御部１５は、かかる記憶部１４に保存した被検体１内の画像群に含まれる各画像を上述した特定情報毎に保持管理する。制御部１５は、入力部１１によって入力された指示情報に基づいて、かかる被検体１内の画像群に含まれる各画像を表示部１２に表示させる。   The control unit 15 controls each component of the image display device 4. Specifically, the control unit 15 controls the input unit 11, the display unit 12, the card I / F 13, and the storage unit 14, and controls input / output of information between the respective components. In this case, the control unit 15 is associated with the image group in the subject 1 and each image included in the image group in the subject 1 from the portable recording medium 5 inserted in the card I / F 13. The ID information of the image sensor and the reception number of each image are acquired. The control unit 15 stores the image group in the subject 1 (for example, the above-described image groups PG1 and PG2), the image sensor ID information, and the image reception number in the storage unit 14 in association with each image. The control unit 15 holds and manages each image included in the image group in the subject 1 stored in the storage unit 14 for each specific information described above. Based on the instruction information input by the input unit 11, the control unit 15 causes the display unit 12 to display each image included in the image group in the subject 1.

また、制御部１５は、表示制御部１５ａ、画像分類部１５ｂ、および画像抽出部１５ｃを有する。表示制御部１５ａは、記憶部１４に保存した被検体１内の画像群ＰＧ１，ＰＧ２に含まれる各画像を表示部１２に表示する制御を行う。また、表示制御部１５ａは、入力部１１によって画像群の選択情報が入力された場合、この選択情報に基づいて選定される画像群内の画像と現に表示部１２に表示されている画像とを切り替えて表示する制御を行う。   The control unit 15 includes a display control unit 15a, an image classification unit 15b, and an image extraction unit 15c. The display control unit 15a performs control to display each image included in the image groups PG1 and PG2 in the subject 1 stored in the storage unit 14 on the display unit 12. Further, when image group selection information is input by the input unit 11, the display control unit 15 a displays an image in the image group selected based on the selection information and an image currently displayed on the display unit 12. Control to switch and display.

画像分類部１５ｂは、カードＩ／Ｆ１３に挿着された携帯型記録媒体５を媒介にして取得した被検体１内の画像群を撮像素子毎に分類する。この場合、画像分類部１５ｂは、被検体１内の画像群に含まれる各画像に対応付けられた撮像素子のＩＤ情報を確認し、かかる撮像素子のＩＤ情報別に被検体１の画像群を複数に分類する。このようにして、画像分類部１５ｂは、かかる被検体１内の画像群を例えば複数の画像群ＰＧ１，ＰＧ２に分類する。また、画像分類部１５ｂは、このように分類した画像群ＰＧ１内の各画像にそれぞれ対応付けられた受信番号の昇順に沿って、画像群ＰＧ１内の各画像に入力番号をそれぞれ付与する。かかる画像群ＰＧ１内の各画像に付与された入力番号は、この画像群ＰＧ１における画像のフレーム順序を示す番号情報である。これと同様に、画像分類部１５ｂは、この画像群ＰＧ２における画像のフレーム順序を示す入力番号を画像群ＰＧ２内の各画像にそれぞれ付与する。   The image classification unit 15b classifies the image group in the subject 1 acquired through the portable recording medium 5 inserted in the card I / F 13 for each image sensor. In this case, the image classification unit 15b confirms the ID information of the image sensor associated with each image included in the image group in the subject 1, and selects a plurality of image groups of the subject 1 for each ID information of the image sensor. Classify into: In this way, the image classification unit 15b classifies the image group in the subject 1 into, for example, a plurality of image groups PG1 and PG2. In addition, the image classification unit 15b assigns input numbers to the images in the image group PG1 in ascending order of the reception numbers respectively associated with the images in the image group PG1 thus classified. The input number given to each image in the image group PG1 is number information indicating the frame order of the images in the image group PG1. Similarly, the image classification unit 15b assigns an input number indicating the frame order of images in the image group PG2 to each image in the image group PG2.

画像抽出部１５ｃは、入力部１１によって入力された選択情報に基づいて選定される画像群（例えば画像群ＰＧ１，ＰＧ２のいずれか）から、現に表示部１２に表示されている画像（現表示画像）に最も近似する関連画像を抽出する。この場合、画像抽出部１５ｃは、かかる選択情報に基づいて選定された画像群の中から、この画像群を撮像した撮像素子のＩＤ情報と現表示画像の入力番号とを特定情報として有する関連画像を決定し、この関連画像を抽出する。かかる画像抽出部１５ｃによって抽出された関連画像は、この現表示画像に代えて表示部１２に表示される。なお、ここでいう関連画像とは、現表示画像に最も近似する画像、すなわち、現表示画像によって示される被検体内部位の近傍を撮像した画像であって、現表示画像に関連深い画像である。   The image extraction unit 15c selects an image (current display image) currently displayed on the display unit 12 from an image group (for example, one of the image groups PG1 and PG2) selected based on the selection information input by the input unit 11. ) To extract the related image that is most similar to In this case, the image extraction unit 15c includes, as specific information, the ID information of the image sensor that has captured the image group and the input number of the current display image from the image group selected based on the selection information. And the related image is extracted. The related image extracted by the image extraction unit 15c is displayed on the display unit 12 instead of the current display image. Note that the related image referred to here is an image that is most similar to the current display image, that is, an image obtained by capturing the vicinity of the part in the subject indicated by the current display image, and an image that is closely related to the current display image. .

このような構成を有する制御部１５は、かかる選択情報に基づいて選定された画像群内の各画像の特定情報と現表示画像の特定情報とをもとに、この選定された画像群の中からこの現表示画像に最も近似する関連画像を決定し、この現表示画像をこの関連画像に切り替えて表示する制御を行う制御手段として機能する。   The control unit 15 having such a configuration, among the selected image group, based on the specific information of each image in the image group selected based on the selection information and the specific information of the current display image. From this, it functions as a control means for determining a related image that is most similar to the current display image and switching the current display image to the related image for display.

つぎに、表示部１２の表示画面の一具体例に示し、表示部１２に表示される各種ＧＵＩと表示部１２の表示動作を制御する表示制御部１５ａの動作とを説明する。図３は、表示部１２に表示される各種ＧＵＩの一具体例を模式的に示す模式図である。表示制御部１５ａは、制御部１５によって所定のログイン処理が行われた場合、図３に示すようなウィンドウＷを表示部１２に表示させる。   Next, an example of the display screen of the display unit 12 will be described, and various GUIs displayed on the display unit 12 and operations of the display control unit 15a for controlling the display operation of the display unit 12 will be described. FIG. 3 is a schematic diagram schematically illustrating a specific example of various GUIs displayed on the display unit 12. When a predetermined login process is performed by the control unit 15, the display control unit 15 a displays a window W as illustrated in FIG. 3 on the display unit 12.

ウィンドウＷには、カプセル型内視鏡２ａ，２ｂの各撮像素子によって撮像された被検体１内の画像群ＰＧ１，ＰＧ２に含まれる各画像を表示する主表示領域１００が形成される。また、ウィンドウＷには、かかる主表示領域１００に表示する画像群を選択するための画像群選択アイコン１０１，１０２と、主表示領域１００に表示する画像の各種表示操作を行うための表示操作アイコン群１０３と、主表示領域１００に表示される画像群の時間的な長さ（例えば表示される画像群の撮像開始からの経過時間）を示すタイムバー１０４と、現に主表示領域１０１に表示されている画像（現表示画像）の時間的な位置（すなわち現表示画像に時間的に対応するタイムバー１０４上の位置）を指し示すスライダ１０５と、カーソル１０６とが表示される。   In the window W, a main display area 100 for displaying images included in the image groups PG1 and PG2 in the subject 1 captured by the imaging elements of the capsule endoscopes 2a and 2b is formed. In the window W, image group selection icons 101 and 102 for selecting an image group to be displayed in the main display area 100, and display operation icons for performing various display operations for images to be displayed in the main display area 100 are displayed. A group 103, a time bar 104 indicating the time length of an image group displayed in the main display area 100 (for example, an elapsed time since the start of imaging of the displayed image group), and a current bar displayed in the main display area 101. A slider 105 indicating a temporal position of the current image (current display image) (that is, a position on the time bar 104 corresponding to the current display image in time) and a cursor 106 are displayed.

主表示領域１００は、カプセル型内視鏡２ａ，２ｂの各撮像素子によって撮像された被検体１内の複数の画像群に含まれる各画像を表示する表示手段として機能する。具体的には、主表示領域１００は、表示制御部１５ａの制御に基づいて、記憶部１４のフォルダＦ１，Ｆ２にそれぞれ保存された被検体１内の複数の画像群ＰＧ１，ＰＧ２の中から選択された画像群内の各画像を表示する。この場合、表示制御部１５ａは、表示部１２に対し、画像群ＰＧ１に含まれる画像Ｐn（フレーム番号ｎ＝１，２，３，…）または画像群ＰＧ２に含まれる画像Ｑm（フレーム番号ｍ＝１，２，３，…）を例えば時系列に沿って順次表示する制御を行う。 The main display area 100 functions as a display unit that displays each image included in a plurality of image groups in the subject 1 imaged by each imaging element of the capsule endoscopes 2a and 2b. Specifically, the main display area 100 is selected from a plurality of image groups PG1 and PG2 in the subject 1 respectively stored in the folders F1 and F2 of the storage unit 14 based on the control of the display control unit 15a. Each image in the set image group is displayed. In this case, the display control unit 15a gives the display unit 12 an image P n (frame number n = 1, 2, 3,...) Included in the image group PG1 or an image Q m (frame number) included in the image group PG2. m = 1, 2, 3,...) is sequentially displayed, for example, in time series.

画像群選択アイコン１０１，１０２は、かかる被検体１内の複数の画像群ＰＧ１，ＰＧ２の中から主表示領域１００に表示すべき画像群を選択する選択手段として機能する。具体的には、画像群選択アイコン１０１は、被検体１内を撮像する複数の撮像素子のうちの一つの撮像素子、例えばカプセル型内視鏡２ａの撮像素子によって撮像された画像群ＰＧ１を選択するための選択ＧＵＩである。画像群選択アイコン１０２は、かかる複数の撮像素子のうちの別の撮像素子、例えばカプセル型内視鏡２ｂの撮像素子によって撮像された画像群ＰＧ２を選択するための選択ＧＵＩである。   The image group selection icons 101 and 102 function as selection means for selecting an image group to be displayed in the main display area 100 from the plurality of image groups PG1 and PG2 in the subject 1. Specifically, the image group selection icon 101 selects the image group PG1 imaged by one of the plurality of imaging elements that images the inside of the subject 1, for example, the imaging element of the capsule endoscope 2a. It is a selection GUI to do. The image group selection icon 102 is a selection GUI for selecting an image group PG2 imaged by another imaging element of the plurality of imaging elements, for example, the imaging element of the capsule endoscope 2b.

かかる画像群選択アイコン１０１にカーソル１０６を合わせてクリック操作した場合、入力部１１は、複数の画像群ＰＧ１，ＰＧ２のうちの画像群ＰＧ１に対応する選択情報、例えば、この画像群ＰＧ１を撮像した撮像素子のＩＤ情報を制御部１５に入力する。この場合、制御部１５は、かかる画像群ＰＧ１の選択情報をもとに、複数の画像群ＰＧ１，ＰＧ２の中から画像群ＰＧ１を選定し、この画像群ＰＧ１内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像に近似する画像群ＰＧ１内の関連画像を決定し、この現表示画像をこの画像群ＰＧ１内の関連画像に切り替える制御を行う。一方、かかる画像群選択アイコン１０２にカーソル１０６を合わせてクリック操作した場合、入力部１１は、複数の画像群ＰＧ１，ＰＧ２のうちの画像群ＰＧ２に対応する選択情報、例えば、この画像群ＰＧ２を撮像した撮像素子のＩＤ情報を制御部１５に入力する。この場合、制御部１５は、かかる画像群ＰＧ２の選択情報をもとに、複数の画像群ＰＧ１，ＰＧ２の中から画像群ＰＧ２を選定し、この画像群ＰＧ２内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像に近似する画像群ＰＧ２内の関連画像を決定し、この現表示画像をこの画像群ＰＧ２内の関連画像に切り替える制御を行う。   When the cursor 106 is placed on the image group selection icon 101 and a click operation is performed, the input unit 11 captures selection information corresponding to the image group PG1 out of the plurality of image groups PG1 and PG2, for example, the image group PG1. ID information of the image sensor is input to the control unit 15. In this case, the control unit 15 selects the image group PG1 from the plurality of image groups PG1 and PG2 based on the selection information of the image group PG1, and specifies the main information and main information of each image in the image group PG1. Control for determining a related image in the image group PG1 that approximates the current display image based on the specific information of the current display image in the display area 100, and switching the current display image to the related image in the image group PG1. I do. On the other hand, when the cursor 106 is placed on the image group selection icon 102 and a click operation is performed, the input unit 11 selects selection information corresponding to the image group PG2 out of the plurality of image groups PG1 and PG2, for example, the image group PG2. The ID information of the imaged image sensor is input to the control unit 15. In this case, the control unit 15 selects the image group PG2 from the plurality of image groups PG1 and PG2 based on the selection information of the image group PG2, and specifies the main information and main information of each image in the image group PG2. Control for determining a related image in the image group PG2 that approximates the current display image based on the specific information of the current display image in the display area 100, and switching the current display image to the related image in the image group PG2. I do.

表示操作アイコン群１０３は、主表示領域１００に表示する画像の表示操作を行うための表示操作ＧＵＩである。具体的には、表示操作アイコン群１０３は、例えば画像群選択アイコン１０１，１０２によって複数の画像群ＰＧ１，ＰＧ２の中から選択された画像群内の各画像を主表示領域１００に表示させる各種表示操作を行うための表示操作手段として機能する。かかる表示操作アイコン群１０３には、例えば図３に示すように、再生アイコン１０３ａと、停止アイコン１０３ｂと、コマ再生アイコン１０３ｃとが含まれる。   A display operation icon group 103 is a display operation GUI for performing a display operation of an image displayed in the main display area 100. Specifically, the display operation icon group 103 is, for example, various displays for displaying each image in the image group selected from among the plurality of image groups PG1 and PG2 by the image group selection icons 101 and 102 in the main display area 100. It functions as a display operation means for performing an operation. For example, as shown in FIG. 3, the display operation icon group 103 includes a reproduction icon 103a, a stop icon 103b, and a frame reproduction icon 103c.

例えば、再生アイコン１０３ａにカーソル１０６を合わせてクリック操作した場合、入力部１１は、かかる再生アイコン１０３ａに対応する表示指示情報を制御部１５に入力する。この場合、表示制御部１５ａは、かかる再生アイコン１０３ａに対応する表示指示情報に基づいて、主表示領域１００に被検体１内の画像（すなわち画像群選択アイコン１０１，１０２によって複数の画像群ＰＧ１，ＰＧ２の中から選択された画像群内の画像）を時系列に沿って順次表示する制御を行う。停止アイコン１０３ｂにカーソル１０６を合わせてクリック操作した場合、入力部１１は、かかる停止アイコン１０３ｂに対応する表示指示情報を制御部１５に入力する。この場合、表示制御部１５ａは、かかる停止アイコン１０３ｂに対応する表示指示情報に基づいて、主表示領域１００の現表示画像を一時停止状態にする制御を行う。コマ再生アイコン１０３ｃにカーソル１０６を合わせてクリック操作した場合、入力部１１は、その都度、かかるコマ再生アイコン１０３ｃに対応する表示指示情報を制御部１５に入力する。この場合、表示制御部１５ａは、かかるコマ再生アイコン１０３ｃに対応する表示指示情報に基づいて、主表示領域１００に被検体１内の画像をコマ送り再生する制御を行う。   For example, when the cursor 106 is placed on the reproduction icon 103a and a click operation is performed, the input unit 11 inputs display instruction information corresponding to the reproduction icon 103a to the control unit 15. In this case, the display control unit 15a, based on the display instruction information corresponding to the reproduction icon 103a, displays an image in the subject 1 in the main display area 100 (that is, a plurality of image groups PG1, PG1 by the image group selection icons 101, 102). Control is performed to sequentially display images in the image group selected from PG2 in time series. When the cursor 106 is placed on the stop icon 103b and a click operation is performed, the input unit 11 inputs display instruction information corresponding to the stop icon 103b to the control unit 15. In this case, the display control unit 15a performs control for temporarily stopping the current display image in the main display area 100 based on the display instruction information corresponding to the stop icon 103b. When the cursor 106 is placed on the frame reproduction icon 103c and a click operation is performed, the input unit 11 inputs display instruction information corresponding to the frame reproduction icon 103c to the control unit 15 each time. In this case, the display control unit 15a performs control for frame-by-frame playback of the image in the subject 1 in the main display area 100 based on the display instruction information corresponding to the frame playback icon 103c.

スライダ１０５は、主表示領域１００の現表示画像（例えば画像Ｐn，Ｑmのいずれか）の時間的な位置を指し示すとともに、表示制御部１５ａの制御に基づいて、主表示領域１００の現表示画像の切り替わりに同期してタイムバー１０４上を移動する。この場合、表示制御部１５ａは、かかるスライダ１０５の移動に同期して、このスライダ１０５に指し示される現在の時間的な位置に対応する被検体１内の画像を主表示領域１００に表示させる。かかるスライダ１０５をタイムバー１０４上の所望の位置に移動させることによって、主表示領域１００には、このスライダ１０５に指し示される時間的な位置に対応する被検体１内の画像が表示される。 The slider 105 indicates the temporal position of the current display image (for example, one of the images P n and Q m ) in the main display area 100 and is currently displayed in the main display area 100 based on the control of the display control unit 15a. It moves on the time bar 104 in synchronization with image switching. In this case, the display control unit 15 a causes the main display area 100 to display an image in the subject 1 corresponding to the current temporal position indicated by the slider 105 in synchronization with the movement of the slider 105. By moving the slider 105 to a desired position on the time bar 104, an image in the subject 1 corresponding to the temporal position indicated by the slider 105 is displayed in the main display area 100.

なお、かかるタイムバー１０４によって示される時間的な長さ、すなわち、主表示領域１００に表示される画像群の撮像開始からの経過時間は、主表示領域１００に表示される画像群を撮像した撮像素子のフレームレートと各画像のフレーム順序を示す番号情報（上述した入力番号）とをもとに算出される。   Note that the time length indicated by the time bar 104, that is, the elapsed time from the start of imaging of the image group displayed in the main display area 100, is an image obtained by imaging the image group displayed in the main display area 100. It is calculated based on the frame rate of the element and number information (the input number described above) indicating the frame order of each image.

つぎに、複数の画像群ＰＧ１，ＰＧ２の中から選択された被検体１内の画像群に含まれる関連画像に主表示領域１００の現表示画像を切り替える制御を行う制御部１５の動作を説明する。図４は、実施の形態１にかかる画像表示装置４の制御部１５の処理手順を説明するフローチャートである。   Next, the operation of the control unit 15 that performs control to switch the current display image of the main display region 100 to the related image included in the image group in the subject 1 selected from the plurality of image groups PG1 and PG2 will be described. . FIG. 4 is a flowchart for explaining a processing procedure of the control unit 15 of the image display apparatus 4 according to the first embodiment.

図４に示すように、まず、制御部１５は、上述したウィンドウＷ（図３を参照）を表示部１２に表示させた状態において、このウィンドウＷの主表示領域１００に表示させる画像群（主表示の画像群）を選択する（ステップＳ１０１）。この場合、表示制御部１５ａは、かかるウィンドウＷを表示した後、主表示領域１００に最初に表示させる被検体内の画像群を選択するためのデフォルト設定が予めプログラムされ、かかるデフォルト設定に基づいて、記憶部１４に保存された複数の画像群の中から主表示の画像群を初期的に選択する。   As shown in FIG. 4, first, the control unit 15 displays an image group (main image) to be displayed in the main display area 100 of the window W in a state where the window W (see FIG. 3) is displayed on the display unit 12. A display image group) is selected (step S101). In this case, after displaying the window W, the display control unit 15a is programmed in advance with default settings for selecting an image group in the subject to be displayed first in the main display area 100, and based on the default settings. The main display image group is initially selected from the plurality of image groups stored in the storage unit 14.

つぎに、制御部１５は、このように選択した主表示の画像群のフレーム番号を初期化する（ステップＳ１０２）。この場合、表示制御部１５ａは、選択した主表示の画像群（例えば画像群ＰＧ１，ＰＧ２のいずれか）に含まれる表示処理対象の画像を示すフレーム番号を例えば“１”に初期化する。   Next, the control unit 15 initializes the frame number of the main display image group selected in this way (step S102). In this case, the display control unit 15a initializes the frame number indicating the display processing target image included in the selected main display image group (for example, one of the image groups PG1 and PG2) to, for example, “1”.

その後、制御部１５は、主表示領域１００に対する画像表示指示の有無を判断する（ステップＳ１０３）。具体的には、入力部１１は、上述した表示操作アイコン群１０３に含まれるいずれかのアイコン（例えば再生アイコン１０３ａ、コマ再生アイコン１０３ｃ）に対応した表示指示情報を制御部１５に入力する。表示制御部１５ａは、かかる表示指示情報が入力部１１によって入力されなければ、主表示領域１００に対する画像表示指示なしと判断し（ステップＳ１０３，Ｎｏ）、このステップＳ１０３を繰り返す。すなわち、表示制御部１５ａは、かかる表示指示情報が入力部１１によって入力されるまで、このステップＳ１０３を繰り返す。   Thereafter, the control unit 15 determines whether there is an image display instruction for the main display region 100 (step S103). Specifically, the input unit 11 inputs display instruction information corresponding to any of the icons (for example, the reproduction icon 103a and the frame reproduction icon 103c) included in the display operation icon group 103 described above to the control unit 15. If the display instruction information is not input by the input unit 11, the display control unit 15a determines that there is no image display instruction for the main display area 100 (No in Step S103), and repeats Step S103. That is, the display control unit 15a repeats this step S103 until such display instruction information is input by the input unit 11.

一方、制御部１５は、かかる表示指示情報が入力部１１によって入力された場合、主表示領域１００に対する画像表示指示ありと判断し（ステップＳ１０３，Ｙｅｓ）、主表示領域１００に現フレーム番号の画像を表示する制御を行う（ステップＳ１０４）。この場合、表示制御部１５ａは、入力部１１によって入力された表示指示情報（再生指示またはコマ再生指示等）に基づいて、記憶部１４内の複数の画像群のうちの主表示の画像群に含まれる現フレーム番号の画像を抽出し、この現フレーム番号の画像を主表示領域１００に表示する制御を行う。   On the other hand, when the display instruction information is input by the input unit 11, the control unit 15 determines that there is an image display instruction for the main display region 100 (step S103, Yes), and the image of the current frame number is displayed in the main display region 100. Is displayed (step S104). In this case, the display control unit 15 a sets the main display image group among the plurality of image groups in the storage unit 14 based on the display instruction information (such as a reproduction instruction or a frame reproduction instruction) input by the input unit 11. An image with the current frame number included is extracted, and control is performed to display the image with the current frame number in the main display area 100.

なお、このステップＳ１０４において主表示領域１００に表示される画像のフレーム番号（すなわち現フレーム番号）は、上述したステップＳ１０２において初期化したフレーム番号または後述するステップＳ１０８において更新したフレーム番号である。   Note that the frame number (that is, the current frame number) of the image displayed in the main display area 100 in step S104 is the frame number initialized in step S102 described above or the frame number updated in step S108 described later.

つぎに、制御部１５は、現に主表示領域１００に表示されている画像（主表示領域１００の現表示画像）の画像切替指示の有無を判断する（ステップＳ１０５）。具体的には、画像群選択アイコン１０１，１０２は、入力部１１を用いたクリック操作によって、記憶部１４内の複数の画像群の中から主表示領域１００に表示すべき被検体内の画像群（主表示の画像群）を選択する。この場合、入力部１１は、かかる画像群選択アイコン１０１，１０２のうちのクリック操作された画像群選択アイコンに対応する画像群の選択情報を制御部１５に入力する。制御部１５は、かかる画像群選択アイコンに対応する画像群の選択情報が入力された場合、入力された選択情報に基づいて、現表示画像の画像切替指示ありと判断する。   Next, the control unit 15 determines whether or not there is an image switching instruction for the image currently displayed in the main display area 100 (the current display image in the main display area 100) (step S105). Specifically, the image group selection icons 101 and 102 are image groups in the subject to be displayed in the main display area 100 from among a plurality of image groups in the storage unit 14 by a click operation using the input unit 11. Select (main display image group). In this case, the input unit 11 inputs selection information of an image group corresponding to the clicked image group selection icon of the image group selection icons 101 and 102 to the control unit 15. When the image group selection information corresponding to the image group selection icon is input, the control unit 15 determines that there is an image switching instruction for the current display image based on the input selection information.

制御部１５は、このように画像切替指示ありと判断した場合（ステップＳ１０５，Ｙｅｓ）、ステップＳ１０５において入力された選択情報をもとに、主表示の画像群を切り替える（ステップＳ１０６）。この場合、表示制御部１５ａは、記憶部１４に保存された被検体内の複数の画像群の中から、この選択情報によって特定される画像群を選定し、選定した画像群を主表示の画像群に切り替える。これによって、この選択情報に対応する被検体内の画像群は、主表示領域１００に表示すべき画像群に切り替えられる。   When the control unit 15 determines that there is an image switching instruction in this manner (step S105, Yes), the control unit 15 switches the main display image group based on the selection information input in step S105 (step S106). In this case, the display control unit 15a selects an image group specified by the selection information from among a plurality of image groups in the subject stored in the storage unit 14, and the selected image group is the main display image. Switch to a group. As a result, the image group in the subject corresponding to the selection information is switched to the image group to be displayed in the main display area 100.

続いて、制御部１５は、この選択情報に対応する画像群内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像を同一入力番号の関連画像に切り替える制御を行う（ステップＳ１０７）。この場合、画像抽出部１５ｃは、主表示領域１００の現表示画像の特定情報に含まれる入力番号と、この選択情報に対応する画像群内の各画像の入力番号とを確認し、この選択情報に対応する画像群の中から、この現表示画像の入力番号と同一の入力番号を特定情報に含む画像を抽出する。かかる画像抽出部１５ｃによって抽出された画像は、この現表示画像に最も近似する関連画像であり、この選択情報に対応する撮像素子のＩＤ情報とこの現表示画像に一致する入力番号とを特定情報に含むものである。このようにして、画像抽出部１５ｃは、この現表示画像に最も近似する関連画像を決定する。表示制御部１５ａは、この現表示画像を、かかる画像抽出部１５ｃによって抽出された関連画像に切り替える制御を行う。これによって、主表示領域１００には、現在、この関連画像が表示されている。   Subsequently, the control unit 15 selects the current display image with the same input number based on the specific information of each image in the image group corresponding to the selection information and the specific information of the current display image in the main display area 100. Control to switch to a related image is performed (step S107). In this case, the image extraction unit 15c confirms the input number included in the specific information of the current display image in the main display area 100 and the input number of each image in the image group corresponding to this selection information, and this selection information Are extracted from the image group corresponding to the input information having the same input number as that of the current display image in the specific information. The image extracted by the image extraction unit 15c is a related image that most closely approximates the current display image, and the identification information of the ID information of the image sensor corresponding to the selection information and the input number that matches the current display image is specified information. Is included. In this way, the image extraction unit 15c determines a related image that most closely approximates the current display image. The display control unit 15a performs control to switch the current display image to the related image extracted by the image extraction unit 15c. As a result, the related image is currently displayed in the main display area 100.

その後、制御部１５は、表示処理対象の被検体内の画像群、すなわち現に主表示領域１００に表示されている画像（関連画像等）を含む主表示の画像群のフレーム番号を更新する（ステップＳ１０８）。この場合、表示制御部１５ａは、例えば現に主表示領域１００に表示している画像のフレーム番号に＋１を加算することによって、主表示の画像群のフレーム番号を更新する。   Thereafter, the control unit 15 updates the frame number of the image group in the subject to be displayed, that is, the main display image group including the image (related image or the like) that is currently displayed in the main display region 100 (Step S15). S108). In this case, the display control unit 15a updates the frame number of the main display image group by adding +1 to the frame number of the image currently displayed in the main display area 100, for example.

つぎに、制御部１５は、現に主表示領域１００に表示している被検体内の画像の一時停止指示の有無を判断する（ステップＳ１０９）。具体的には、制御部１５は、停止アイコン１０３ｂに対応する表示指示情報またはコマ再生アイコン１０３ｃに対応する表示指示情報が入力部１１によって入力された場合、一時停止指示ありと判断する（ステップＳ１０９，Ｙｅｓ）。この場合、制御部１５は、上述したステップＳ１０３に戻り、このステップＳ１０３以降の処理手順を繰り返す。   Next, the control unit 15 determines whether or not there is an instruction to pause the image in the subject currently displayed in the main display area 100 (step S109). Specifically, when the display instruction information corresponding to the stop icon 103b or the display instruction information corresponding to the frame reproduction icon 103c is input by the input unit 11, the control unit 15 determines that there is a pause instruction (step S109). , Yes). In this case, the control unit 15 returns to step S103 described above and repeats the processing procedure after step S103.

一方、制御部１５は、停止アイコン１０３ｂに対応する表示指示情報またはコマ再生アイコン１０３ｃに対応する表示指示情報が入力されていなければ、一時停止指示なしと判断し（ステップＳ１０９，Ｎｏ）、主表示領域１００に被検体内の画像を表示する画像表示処理が終了したか否かを判断する（ステップＳ１１０）。   On the other hand, if the display instruction information corresponding to the stop icon 103b or the display instruction information corresponding to the frame reproduction icon 103c is not input, the control unit 15 determines that there is no pause instruction (No in step S109), and performs the main display. It is determined whether or not the image display process for displaying the image in the subject in the region 100 is completed (step S110).

具体的には、制御部１５は、上述したステップＳ１０８において更新したフレーム番号が主表示の画像群のフレーム数を超えた場合、かかる被検体内の画像の画像表示処理が終了したと判断し（ステップＳ１１０，Ｙｅｓ）、かかる被検体内の画像の画像表示処理を終了する。一方、制御部１５は、上述したステップＳ１０８において更新したフレーム番号が主表示の画像群のフレーム数以下である場合、かかる被検体内の画像の画像表示処理が終了していないと判断し（ステップＳ１１０，Ｎｏ）、上述したステップＳ１０４に戻り、このステップＳ１０４以降の処理手順を繰り返す。   Specifically, when the frame number updated in step S108 described above exceeds the number of frames in the main display image group, the control unit 15 determines that the image display processing of the image in the subject has ended ( In step S110, Yes), the image display processing of the image in the subject is ended. On the other hand, when the frame number updated in step S108 described above is equal to or less than the number of frames in the main display image group, the control unit 15 determines that the image display processing of the image in the subject has not been completed (step S1). (S110, No), it returns to step S104 mentioned above, and repeats the process sequence after this step S104.

なお、制御部１５は、上述したステップＳ１０５において、画像群選択アイコン１０１，１０２のいずれかに対応する画像群の選択情報が入力されなければ、現表示画像の画像切替指示なしと判断し（ステップＳ１０５，Ｎｏ）、上述したステップＳ１０８に進み、このステップＳ１０８以降の処理手順を繰り返す。   Note that if the image group selection information corresponding to any of the image group selection icons 101 and 102 is not input in step S105 described above, the control unit 15 determines that there is no image switching instruction for the current display image (step S105). (S105, No), the process proceeds to step S108 described above, and the processing procedure after step S108 is repeated.

つぎに、被検体１の臓器内部に複数のカプセル型内視鏡２ａ，２ｂを導入し、かかるカプセル型内視鏡２ａ，２ｂの各撮像素子によって撮像された被検体１内の画像群を撮像素子毎に２つの画像群ＰＧ１，ＰＧ２に分類した場合を例示して、かかる画像群ＰＧ１，ＰＧ２内の各画像に上述した入力番号を付与する画像分類部１５ｂの処理を具体的に説明する。図５は、被検体１内の複数の画像群にそれぞれ含まれる各画像に入力番号を付与する画像分類部１５ｂの処理を説明するための模式図である。   Next, a plurality of capsule endoscopes 2a and 2b are introduced into the organ of the subject 1, and an image group in the subject 1 taken by each imaging element of the capsule endoscopes 2a and 2b is picked up. The case of classifying into two image groups PG1 and PG2 for each element will be described as an example, and the processing of the image classification unit 15b for assigning the input numbers to the images in the image groups PG1 and PG2 will be specifically described. FIG. 5 is a schematic diagram for explaining the processing of the image classification unit 15 b that assigns input numbers to the images included in the plurality of image groups in the subject 1.

画像分類部１５ｂは、被検体１内の各画像に対応付けられた撮像素子のＩＤ情報を確認し、かかる撮像素子のＩＤ情報別に被検体１内の各画像を区別することによって、例えば図５に示すように、被検体１内の画像群をカプセル型内視鏡２ａ，２ｂの撮像素子毎に複数の画像群ＰＧ１，ＰＧ２に分類する。   The image classification unit 15b confirms the ID information of the image sensor associated with each image in the subject 1, and distinguishes each image in the subject 1 according to the ID information of the image sensor, for example, FIG. As shown in FIG. 4, the image group in the subject 1 is classified into a plurality of image groups PG1 and PG2 for each imaging element of the capsule endoscopes 2a and 2b.

ここで、画像群ＰＧ１内の画像Ｐ1〜Ｐ6に受信番号「１」，「２」，「３」，「６」，「８」，「１０」がそれぞれ対応付けられ、画像群ＰＧ２内の画像Ｑ1〜Ｑ6に受信番号「４」，「５」，「７」，「９」，「１１」，「１２」がそれぞれ対応付けられていた場合、かかる被検体１内の各画像Ｐ1〜Ｐ6，Ｑ1〜Ｑ6は、受信番号の昇順、すなわち、画像Ｐ1、画像Ｐ2、画像Ｐ3、画像Ｑ1、画像Ｑ2、画像Ｐ4、画像Ｑ3、画像Ｐ5、画像Ｑ4、画像Ｐ6、画像Ｑ5、画像Ｑ6の順に受信装置３に受信されたことになる。画像分類部１５ｂは、この画像群ＰＧ１内の各画像Ｐn（フレーム番号ｎ＝１，２，３，…）の受信番号を確認し、かかる各画像Ｐnの受信番号の昇順に沿って、この画像群ＰＧ１の各画像Ｐnに「１」から連続する入力番号（１，２，３，…）をそれぞれ付与する。この場合、画像分類部１５ｂは、例えば画像Ｐ1〜Ｐ6に対し、入力番号「１」，「２」，「３」，「４」，「５」，「６」をそれぞれ付与する。かかる入力番号は、画像Ｐ1〜Ｐ6のフレーム順序を示す。 Here, the reception numbers “1”, “2”, “3”, “6”, “8”, and “10” are associated with the images P 1 to P 6 in the image group PG1, respectively. When the reception numbers “4”, “5”, “7”, “9”, “11”, and “12” are associated with the images Q 1 to Q 6 , the images in the subject 1 are associated with each other. P 1 to P 6 and Q 1 to Q 6 are in ascending order of reception numbers, that is, image P 1 , image P 2 , image P 3 , image Q 1 , image Q 2 , image P 4 , image Q 3 , image P 5 , the image Q 4 , the image P 6 , the image Q 5 , and the image Q 6 are received by the receiving device 3 in this order. The image classification unit 15b confirms the reception number of each image P n (frame number n = 1, 2, 3,...) In the image group PG1, and follows the ascending order of the reception number of each image P n . An input number (1, 2, 3,...) Consecutive from “1” is assigned to each image P n of the image group PG1. In this case, the image classification unit 15b assigns input numbers “1”, “2”, “3”, “4”, “5”, and “6” to the images P 1 to P 6 , for example. Such an input number indicates the frame order of the images P 1 to P 6 .

これと同様に、画像分類部１５ｂは、この画像群ＰＧ２内の各画像Ｑm（フレーム番号ｍ＝１，２，３，…）の受信番号を確認し、かかる各画像Ｑmの受信番号の昇順に沿って、この画像群ＰＧ２の各画像Ｑmに「１」から連続する入力番号（１，２，３，…）をそれぞれ付与する。この場合、画像分類部１５ｂは、例えば画像Ｑ1〜Ｑ6に対し、入力番号「１」，「２」，「３」，「４」，「５」，「６」をそれぞれ付与する。かかる入力番号は、画像Ｑ1〜Ｑ6のフレーム順序を示す。 Similarly, the image classification section 15b, the respective image Q m of the image group PG2 (the frame number m = 1, 2, 3, ...) to verify the received number of the receiving number of the images Q m In ascending order, input numbers (1, 2, 3,...) Consecutive from “1” are assigned to the images Q m of the image group PG2. In this case, the image classification unit 15b assigns input numbers “1”, “2”, “3”, “4”, “5”, and “6” to the images Q 1 to Q 6 , for example. Such an input number indicates the frame order of the images Q 1 to Q 6 .

なお、この画像群ＰＧ１のフレーム順序を示す入力番号が対応付けられた各画像Ｐnは、かかる入力番号とカプセル型内視鏡２ａの撮像素子のＩＤ情報とによって特定される。また、この画像群ＰＧ２のフレーム順序を示す入力番号が対応付けられた各画像Ｑmは、かかる入力番号とカプセル型内視鏡２ｂの撮像素子のＩＤ情報とによって特定される。 Each image P n associated with an input number indicating the frame order of the image group PG1 is specified by the input number and the ID information of the imaging element of the capsule endoscope 2a. Further, each image Q m the input number is associated indicating the frame order of the image group PG2 is specified by the ID information of the imaging device according the input number and the capsule endoscope 2b.

つぎに、カプセル型内視鏡２ａ，２ｂによって撮像された複数の画像群ＰＧ１，ＰＧ２に含まれる被検体１内の画像を表示部１２の主表示領域１００に表示する場合を例示して、現に主表示領域１００に表示されている現表示画像を別の画像群（選択ＧＵＩによって選択された画像群）内の関連画像に切り替える制御部１５の動作を具体的に説明する。図６は、入力番号を含む画像の特定情報をもとに主表示領域１００の現表示画像を別の画像群内の関連画像に切り替える制御部１５の動作を説明するための模式図である。   Next, an example of displaying images in the subject 1 included in the plurality of image groups PG1 and PG2 captured by the capsule endoscopes 2a and 2b in the main display area 100 of the display unit 12 will be described. The operation of the control unit 15 for switching the current display image displayed in the main display area 100 to a related image in another image group (an image group selected by the selection GUI) will be specifically described. FIG. 6 is a schematic diagram for explaining the operation of the control unit 15 that switches the current display image in the main display area 100 to a related image in another image group based on image specifying information including an input number.

図６に示すように、表示部１２の主表示領域１００には、現在、カプセル型内視鏡２ａの撮像素子によって撮像された画像群ＰＧ１に含まれる被検体１内の画像、例えば画像Ｐ7が表示されている。この場合、主表示領域１００の現表示画像である画像Ｐ7を含む画像群ＰＧ１は、主表示領域１００に表示される表示処理対称の画像群（すなわち主表示の画像群）である。また、かかる主表示領域１００の画像Ｐ7は、カプセル型内視鏡２ａの撮像素子のＩＤ情報と入力番号「７」とが特定情報として対応付けられている。 As shown in FIG. 6, in the main display area 100 of the display unit 12, the current image of the subject 1 included in the image group PG1 imaged by the imaging device of the capsule endoscope 2a, for example, the image P 7 Is displayed. In this case, the image group PG1 including the image P 7 is a currently displayed image in the main display area 100 is an image group of the display process symmetric to be displayed on the main display area 100 (i.e. the main display image group). Further, in the image P 7 in the main display area 100, the ID information of the imaging element of the capsule endoscope 2a and the input number “7” are associated as specific information.

この状態において、上述した画像群選択アイコン１０２のクリック操作が行われ、入力部１１が、画像群ＰＧ２に対応する選択情報を制御部１５に入力した場合、制御部１５は、この画像群ＰＧ２に対応する選択情報をもとに、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。具体的には、かかる画像群ＰＧ２に対応する選択情報が例えばカプセル型内視鏡２ｂの撮像素子のＩＤ情報であり、表示制御部１５ａは、記憶部１４に保存された複数の画像群ＰＧ１，ＰＧ２の中から、かかる選択情報によって特定されるカプセル型内視鏡２ｂの撮像素子に撮像された画像群ＰＧ２を主表示の画像群に選定する。このようにして、表示制御部１５ａは、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。   In this state, when the above-described click operation of the image group selection icon 102 is performed and the input unit 11 inputs selection information corresponding to the image group PG2 to the control unit 15, the control unit 15 adds the image group PG2 to this image group PG2. Based on the corresponding selection information, the main display image group is switched from the current image group PG1 to the image group PG2. Specifically, the selection information corresponding to the image group PG2 is, for example, ID information of the imaging element of the capsule endoscope 2b, and the display control unit 15a includes a plurality of image groups PG1, PG1, which are stored in the storage unit 14. From PG2, the image group PG2 imaged by the imaging element of the capsule endoscope 2b specified by the selection information is selected as the main display image group. In this way, the display control unit 15a switches the main display image group from the current image group PG1 to the image group PG2.

つぎに、制御部１５は、かかる画像群選択アイコン１０２によって選択された画像群ＰＧ２内の各画像の特定情報と現に主表示領域１００に表示されている画像Ｐ7の特定情報とをもとに、この現表示画像である画像Ｐ7に最も近似する画像群ＰＧ２内の関連画像を決定し、この現表示画像を関連画像に切り替える制御を行う。この場合、画像抽出部１５ｃは、この選択された画像群ＰＧ２内の各画像（Ｑ1，Ｑ2，Ｑ3，Ｑ4，Ｑ5，Ｑ6，…）の入力番号と、この現表示画像である画像Ｐ7の入力番号とを確認し、この画像Ｐ7と同一の入力番号「７」を有する画像Ｑ7をこの画像Ｐ7に最も近似する関連画像に決定する。そして、画像抽出部１５ｃは、この画像Ｐ7の関連画像に決定した画像Ｑ7を画像群ＰＧ２から抽出する。この場合、表示制御部１５ａは、主表示領域１００の現表示画像を画像Ｐ7から画像Ｑ7（すなわち画像Ｐ7の関連画像）に切り替える制御を行う。 Next, the control unit 15, based on the specific information of the image P 7 being displayed currently on the main display area 100 and the identification information of each image of such image group selection icon 102 image group PG2 selected by , to determine the relevant image in the image group in PG2 most similar to the image P 7 is the currently displayed image, performs control to switch the currently displayed image to the relevant image. In this case, the image extraction unit 15c inputs the input number of each image (Q 1 , Q 2 , Q 3 , Q 4 , Q 5 , Q 6 ,...) In the selected image group PG2 and the current display image. check the input number of the image P 7 is to determine the image Q 7 having the image P 7 identical input and number "7" to the associated image most similar to the image P 7. Then, the image extracting unit 15c extracts the image Q 7 determined the relevant image of the image P 7 from the image group PG2. In this case, the display control unit 15a performs control for switching to the image Q 7 (i.e. related image of the image P 7) the current display image of the main display area 100 from the image P 7.

ここで、このような現表示画像と関連画像との関係にある画像Ｐ7，Ｑ7は、互いに近似する画像同士であって、例えば、被検体１の同一臓器内において略同じ部位が撮像された画像同士、互いに前後または対向する位置関係にある近傍の部位が撮像された画像同士である。このように現表示画像とその関連画像とを切り替えて主表示領域１００に表示することによって、被検体１内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、この結果、被検体１の臓器内を詳細に観察することができる。 Here, the images P 7 and Q 7 having the relationship between the current display image and the related image are images that are similar to each other, and for example, substantially the same part is imaged in the same organ of the subject 1. These images are images obtained by capturing images of neighboring parts that are in a positional relationship in front of or behind each other. By switching the current display image and its related image and displaying them in the main display area 100 in this way, it is possible to easily observe each image that approximates each other among a plurality of image groups in the subject 1, As a result, the inside of the organ of the subject 1 can be observed in detail.

以上、説明したように、本発明の実施の形態１では、複数の撮像素子によって撮像された被検体内の画像群を撮像素子毎に分類し、かかる被検体内の複数の画像群とこれら複数の画像群内の各画像をそれぞれ特定する特定情報とを記憶部に保存し、かかる複数の画像群の中から表示部の主表示領域に表示すべき画像群を選択ＧＵＩによって選択した場合、この選択した画像群内の各画像の特定情報に含まれる入力番号と、この主表示領域に現在表示されている現表示画像の特定情報に含まれる入力番号とをもとに、この選択した画像群の中からこの現表示画像に最も近似する関連画像を決定し、この現表示画像をこの関連画像に切り替えるように構成している。このため、選択ＧＵＩを用いた容易な操作によって、かかる複数の画像群の間で互いに近似する画像同士、例えば互いに近傍の被検体内部位が撮像された画像同士を主表示領域に切り替えて表示することができる。この結果、被検体内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、被検体の臓器内を詳細に観察できる画像表示装置を実現することができる。   As described above, in the first embodiment of the present invention, the image groups in the subject imaged by the plurality of image sensors are classified for each image sensor, and the plurality of image groups in the subject and the plurality of these image groups are classified. Specific information for specifying each image in the image group is stored in the storage unit, and the image group to be displayed in the main display area of the display unit is selected from the plurality of image groups by the selection GUI. Based on the input number included in the specific information of each image in the selected image group and the input number included in the specific information of the current display image currently displayed in the main display area, the selected image group The related image closest to the current display image is determined from among the images, and the current display image is switched to the related image. For this reason, by an easy operation using the selection GUI, images that are approximate to each other among the plurality of image groups, for example, images in which the in-subject regions near each other are imaged are switched to the main display area and displayed. be able to. As a result, it is possible to easily observe images that are close to each other among a plurality of image groups in the subject, and to realize an image display device that can observe the inside of the organ of the subject in detail.

（実施の形態２）
つぎに、本発明の実施の形態２について説明する。上述した実施の形態１では、被検体内の複数の画像群の中から選択ＧＵＩによって選択された画像群内の画像であって、主表示領域１００の現表示画像と一致する入力番号の画像をこの現表示画像の関連画像に決定していたが、この実施の形態２では、かかる画像の入力番号に代えて、画像群内の撮像開始からの経過時間を示す時間情報を画像の特定情報に含めるようにし、この選択された画像群内の画像であって、この現表示画像の時間情報に最も近似する時間情報を有する画像をこの現表示画像の関連画像に決定している。 (Embodiment 2)
Next, a second embodiment of the present invention will be described. In the first embodiment described above, an image in the image group selected by the selection GUI from the plurality of image groups in the subject and having an input number that matches the current display image in the main display area 100 is displayed. In the second embodiment, the time information indicating the elapsed time from the start of imaging in the image group is used as image specific information in place of the input number of the image. An image that is included in the selected image group and has time information closest to the time information of the current display image is determined as the related image of the current display image.

図７は、本発明の実施の形態２にかかる画像表示装置の一構成例を模式的に示すブロック図である。図７に示すように、この実施の形態２にかかる画像表示装置２４は、上述した実施の形態１にかかる画像表示装置４の制御部１５に代えて制御部２５を有する。また、本発明の実施の形態２にかかる被検体内情報取得システムは、上述した実施の形態１にかかる被検体内情報取得システム（図１を参照）の画像表示装置４に代えて画像表示装置２４を有する。この場合、受信装置３は、上述した画像の受信番号に代えて、被検体１内の画像を受信した際の受信時間を携帯型記録媒体５に順次蓄積する。すなわち、この実施の形態２では、被検体１内の画像と、この被検体１内の画像を撮像した撮像素子のＩＤ情報と、この被検体１内の画像の受信時間とが互いに対応付けられる。その他の構成は実施の形態１と同じであり、同一構成部分には同一符号を付している。   FIG. 7 is a block diagram schematically illustrating a configuration example of the image display apparatus according to the second embodiment of the present invention. As illustrated in FIG. 7, the image display device 24 according to the second embodiment includes a control unit 25 instead of the control unit 15 of the image display device 4 according to the first embodiment described above. An in-subject information acquisition system according to the second exemplary embodiment of the present invention is an image display device instead of the image display device 4 of the in-subject information acquisition system (see FIG. 1) according to the first exemplary embodiment described above. 24. In this case, the receiving device 3 sequentially stores in the portable recording medium 5 the reception time when the image in the subject 1 is received instead of the above-described image reception number. That is, in the second embodiment, the image in the subject 1, the ID information of the image sensor that has captured the image in the subject 1, and the reception time of the image in the subject 1 are associated with each other. . Other configurations are the same as those of the first embodiment, and the same reference numerals are given to the same components.

制御部２５は、上述した実施の形態１にかかる画像表示装置４の制御部１５と略同様に、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。この場合、制御部２５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から、被検体１内の画像群と、かかる被検体１内の画像群に含まれる各画像に対応付けられた撮像素子のＩＤ情報および各画像の受信時間とを取得する。制御部２５は、かかる被検体１内の画像群（例えば上述した画像群ＰＧ１，ＰＧ２）と撮像素子のＩＤ情報および画像の受信時間とを画像毎に対応付けて記憶部１４に保存する。   The control unit 25 controls the input unit 11, the display unit 12, the card I / F 13, and the storage unit 14 in substantially the same manner as the control unit 15 of the image display device 4 according to the first embodiment described above. Controls the input and output of information between components. In this case, the control unit 25 is associated with the image group in the subject 1 and each image included in the image group in the subject 1 from the portable recording medium 5 inserted in the card I / F 13. The ID information of the image sensor and the reception time of each image are acquired. The control unit 25 stores the image group in the subject 1 (for example, the above-described image groups PG1 and PG2), the ID information of the image sensor, and the image reception time in the storage unit 14 in association with each image.

このような制御部２５は、上述した表示制御部１５ａを有し、実施の形態１にかかる画像表示装置４の制御部１５の画像分類部１５ｂに代えて画像分類部２５ｂを有し、画像抽出部１５ｃに代えて画像抽出部２５ｃを有する。   Such a control unit 25 includes the display control unit 15a described above, and includes an image classification unit 25b instead of the image classification unit 15b of the control unit 15 of the image display apparatus 4 according to the first embodiment, and performs image extraction. An image extracting unit 25c is provided instead of the unit 15c.

画像分類部２５ｂは、上述した制御部１５の画像分類部１５ｂと同様に、各画像に対応付けられた撮像素子のＩＤ情報別に被検体１内の画像群を複数の画像群（例えば画像群ＰＧ１，ＰＧ２）に分類する。また、画像分類部２５ｂは、このように分類した画像群ＰＧ１内の各画像の受信時間をもとに、この画像群ＰＧ１内の各画像の入力時間を算出し、算出した入力時間をこの画像群ＰＧ１内の各画像にそれぞれ対応付ける。ここで、かかる画像群ＰＧ１内の各画像に対応付けた入力時間は、この画像群ＰＧ１内の各画像Ｐn（フレーム番号ｎ＝１，２，３，…）の撮像開始からの経過時間を示す時間情報であり、この画像群ＰＧ１の先頭画像Ｐ1の受信時間に対する各画像の相対時間として算出される。これと同様に、画像分類部２５ｂは、画像群ＰＧ２内の各画像の入力時間を算出し、算出した入力時間をこの画像群ＰＧ２内の各画像にそれぞれ対応付ける。 Similar to the image classifying unit 15b of the control unit 15 described above, the image classifying unit 25b converts an image group in the subject 1 into a plurality of image groups (for example, an image group PG1) for each ID information of an image sensor associated with each image. , PG2). Further, the image classification unit 25b calculates the input time of each image in the image group PG1 based on the reception time of each image in the image group PG1 classified in this way, and uses the calculated input time as the image. Corresponding to each image in the group PG1. Here, the input time associated with each image in the image group PG1 is the elapsed time from the start of imaging of each image P n (frame number n = 1, 2, 3,...) In the image group PG1. Time information, and is calculated as the relative time of each image with respect to the reception time of the first image P1 of the image group PG1. Similarly, the image classification unit 25b calculates the input time of each image in the image group PG2, and associates the calculated input time with each image in the image group PG2.

制御部２５は、かかる画像分類部２５ｂによって撮像素子毎に分類された画像群ＰＧ１，ＰＧ２を記憶部１４のフォルダＦ１，Ｆ２にそれぞれ保存する。この場合、かかる記憶部１４に保存された画像群ＰＧ１，ＰＧ２内の各画像には、かかる画像分類部２５ｂによって算出された入力時間と上述した撮像素子のＩＤ情報とが対応付けられる。したがって、かかる画像群ＰＧ１，ＰＧ２内の各画像の特定情報は、上述した撮像素子のＩＤ情報と画像の入力時間とを組み合わせたものである。   The control unit 25 stores the image groups PG1 and PG2 classified for each image sensor by the image classification unit 25b in the folders F1 and F2 of the storage unit 14, respectively. In this case, each image in the image groups PG1 and PG2 stored in the storage unit 14 is associated with the input time calculated by the image classification unit 25b and the ID information of the imaging element described above. Therefore, the specific information of each image in the image groups PG1 and PG2 is a combination of the above-described ID information of the image sensor and the input time of the image.

画像抽出部２５ｃは、上述した制御部１５の画像抽出部１５ｃと略同様に、入力部１１によって入力された画像群の選択情報に対応する被検体内の画像群（例えば画像群選択アイコン１０１，１０２によって選択された画像群ＰＧ１，ＰＧ２のいずれか）から、表示部１２の主表示領域１００の現表示画像に最も近似する関連画像を抽出する。この場合、画像抽出部２５ｃは、かかる選択情報に基づいて選定された画像群の中から、この画像群を撮像した撮像素子のＩＤ情報と現表示画像の入力時間に最も近似する入力時間とを特定情報として有する関連画像を決定し、この関連画像を抽出する。かかる画像抽出部２５ｃによって抽出された関連画像は、この現表示画像に代えて表示部１２の主表示領域１００に表示される。   The image extraction unit 25c is similar to the image extraction unit 15c of the control unit 15 described above, and the image group in the subject corresponding to the selection information of the image group input by the input unit 11 (for example, the image group selection icon 101, From the image group PG <b> 1 or PG <b> 2 selected by 102), a related image that most closely approximates the current display image in the main display area 100 of the display unit 12 is extracted. In this case, the image extraction unit 25c obtains the ID information of the image sensor that has captured the image group from the image group selected based on the selection information and the input time closest to the input time of the current display image. The related image which has as specific information is determined, and this related image is extracted. The related image extracted by the image extraction unit 25c is displayed in the main display area 100 of the display unit 12 instead of the current display image.

つぎに、複数の画像群ＰＧ１，ＰＧ２の中から選択された被検体１内の画像群に含まれる関連画像に主表示領域１００の現表示画像を切り替える制御を行う制御部２５の動作を説明する。図８は、実施の形態２にかかる画像表示装置２４の制御部２５の処理手順を説明するフローチャートである。   Next, the operation of the control unit 25 that performs control to switch the current display image of the main display area 100 to the related image included in the image group in the subject 1 selected from the plurality of image groups PG1 and PG2 will be described. . FIG. 8 is a flowchart for explaining a processing procedure of the control unit 25 of the image display device 24 according to the second embodiment.

制御部２５は、上述した実施の形態１にかかる画像表示装置４の制御部１５と略同様に、被検体１内の画像群ＰＧ１，ＰＧ２内の各画像を表示部１２の主表示領域１００に表示する制御を行い、画像群選択アイコン１０１，１０２によって主表示領域１００に表示すべき画像群（主表示の画像群）が選択された場合、この選択された画像群内の関連画像に主表示領域１００の現表示画像を切り替える制御を行う。この場合、制御部２５は、上述した画像の入力番号に代えて画像の入力時間をもとに、この選択された画像群の中から、この現表示画像に最も近似する関連画像を決定する。   The control unit 25 displays the images in the image groups PG1 and PG2 in the subject 1 in the main display area 100 of the display unit 12 in substantially the same manner as the control unit 15 of the image display apparatus 4 according to the first embodiment described above. When display control is performed and an image group to be displayed in the main display area 100 (main display image group) is selected by the image group selection icons 101 and 102, main display is performed on related images in the selected image group. Control to switch the current display image in the area 100 is performed. In this case, the control unit 25 determines a related image that most closely approximates the current display image from the selected image group based on the image input time instead of the image input number.

すなわち、図８に示すように、制御部２５は、上述したステップＳ１０１〜Ｓ１０４（図４を参照）と同様の処理手順を行い、被検体１内の複数の画像群（例えば画像群ＰＧ１，ＰＧ２）の中から主表示の画像群を選択し、画像表示指示ありの場合、この主表示の画像群に含まれる被検体内の画像を主表示領域１００に表示する制御を行う（ステップＳ２０１〜Ｓ２０４）。つぎに、制御部２５は、上述したステップＳ１０５，Ｓ１０６と同様の処理手順を行い、主表示領域１００の現表示画像を切り替える画像切替指示の有無を判断し（ステップＳ２０５）、画像切替指示ありの場合（ステップＳ２０５，Ｙｅｓ）、入力部１１によって入力された画像群の選択情報に特定される画像群を主表示の画像群に切り替える（ステップＳ２０６）。   That is, as illustrated in FIG. 8, the control unit 25 performs a processing procedure similar to that in steps S <b> 101 to S <b> 104 (see FIG. 4) described above, and a plurality of image groups (for example, image groups PG <b> 1 and PG <b> 2) in the subject 1. The main display image group is selected from the main display area 100, and when there is an image display instruction, control is performed to display the image in the subject included in the main display image group in the main display area 100 (steps S201 to S204). ). Next, the control unit 25 performs the same processing procedure as in steps S105 and S106 described above, determines whether or not there is an image switching instruction for switching the current display image in the main display area 100 (step S205), and has an image switching instruction. In the case (step S205, Yes), the image group specified by the image group selection information input by the input unit 11 is switched to the main display image group (step S206).

続いて、制御部２５は、この選択情報に対応する画像群内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像を最も近似な入力時間の関連画像に切り替える制御を行う（ステップＳ２０７）。この場合、画像抽出部２５ｃは、主表示領域１００の現表示画像の特定情報に含まれる入力時間と、この選択情報に対応する画像群内の各画像の入力時間とを確認し、この選択情報に対応する画像群の中から、この現表示画像の入力時間に最も近似する入力時間を特定情報に含む画像を抽出する。かかる画像抽出部２５ｃによって抽出された画像は、この現表示画像に最も近似する関連画像であり、この選択情報に対応する撮像素子のＩＤ情報とこの現表示画像に最も近似する入力時間とを特定情報に含むものである。このようにして、画像抽出部２５ｃは、この現表示画像に最も近似する関連画像を決定する。表示制御部１５ａは、この現表示画像を、かかる画像抽出部２５ｃによって抽出された関連画像に切り替える制御を行う。これによって、主表示領域１００には、現在、この関連画像が表示されている。   Subsequently, the control unit 25 inputs the most approximate input of the current display image based on the specific information of each image in the image group corresponding to the selection information and the specific information of the current display image in the main display area 100. Control to switch to a related image of time is performed (step S207). In this case, the image extraction unit 25c confirms the input time included in the specific information of the current display image in the main display area 100 and the input time of each image in the image group corresponding to the selection information, and this selection information Are extracted from the image group corresponding to the input information including the input time closest to the input time of the current display image in the specific information. The image extracted by the image extraction unit 25c is a related image that is most approximate to the current display image, and specifies the ID information of the image sensor corresponding to the selection information and the input time that is closest to the current display image. It is included in the information. In this way, the image extraction unit 25c determines a related image that is most approximate to the current display image. The display control unit 15a performs control to switch the current display image to the related image extracted by the image extraction unit 25c. As a result, the related image is currently displayed in the main display area 100.

その後、制御部２５は、上述したステップＳ１０８と同様に、現に主表示領域１００に表示されている画像（関連画像等）を含む主表示の画像群のフレーム番号を更新する（ステップＳ２０８）。そして、制御部２５は、上述したステップＳ１０９と同様に、主表示領域１００の画像の一時停止指示の有無を判断し（ステップＳ２０９）、一時停止指示ありの場合（ステップＳ２０９，Ｙｅｓ）、ステップＳ２０３に戻り、このステップＳ２０３以降の処理手順を繰り返す。   Thereafter, similarly to step S108 described above, the control unit 25 updates the frame number of the main display image group including the image (related image or the like) actually displayed in the main display area 100 (step S208). Then, similarly to step S109 described above, the control unit 25 determines whether there is an instruction to pause the image in the main display area 100 (step S209). If there is a pause instruction (step S209, Yes), step S203 is performed. Returning to step S203, the processing procedure after step S203 is repeated.

一方、制御部２５は、一時停止指示なしの場合（ステップＳ２０９，Ｎｏ）、上述したステップＳ１１０と同様に、主表示領域１００に被検体内の画像を表示する画像表示処理が終了したか否かを判断する（ステップＳ２１０）。制御部２５は、画像表示処理が終了していないと判断した場合（ステップＳ２１０，Ｎｏ）、ステップＳ２０４に戻り、このステップＳ２０４以降の処理手順を繰り返し、画像表示処理が終了したと判断した場合（ステップＳ２１０，Ｙｅｓ）、かかる被検体内の画像の画像表示処理を終了する。   On the other hand, when there is no pause instruction (No at Step S209), the control unit 25 determines whether or not the image display process for displaying the image in the subject in the main display area 100 is completed, similar to Step S110 described above. Is determined (step S210). When it is determined that the image display process has not ended (No at Step S210), the control unit 25 returns to Step S204, repeats the processing procedure after Step S204, and determines that the image display process has ended (Step S210). In step S210, Yes), the image display processing of the image in the subject is ended.

なお、制御部２５は、上述したステップＳ２０５において画像切替指示なしと判断した場合（ステップＳ２０５，Ｎｏ）、上述したステップＳ２０８に進み、このステップＳ２０８以降の処理手順を繰り返す。   If the control unit 25 determines that there is no image switching instruction in step S205 described above (No in step S205), the control unit 25 proceeds to step S208 described above, and repeats the processing procedure after step S208.

つぎに、被検体１の臓器内部に複数のカプセル型内視鏡２ａ，２ｂを導入し、かかるカプセル型内視鏡２ａ，２ｂの各撮像素子によって撮像された被検体１内の画像群を撮像素子毎に２つの画像群ＰＧ１，ＰＧ２に分類した場合を例示して、かかる画像群ＰＧ１，ＰＧ２内の各画像に上述した入力時間を対応付ける画像分類部２５ｂの処理を具体的に説明する。図９は、被検体１内の複数の画像群にそれぞれ含まれる各画像に入力時間を対応付ける画像分類部２５ｂの処理を説明するための模式図である。   Next, a plurality of capsule endoscopes 2a and 2b are introduced into the organ of the subject 1, and an image group in the subject 1 taken by each imaging element of the capsule endoscopes 2a and 2b is picked up. The case of classifying into two image groups PG1 and PG2 for each element will be described as an example, and the processing of the image classification unit 25b for associating the input time described above with each image in the image groups PG1 and PG2 will be specifically described. FIG. 9 is a schematic diagram for explaining the processing of the image classification unit 25b that associates the input time with each image included in each of the plurality of image groups in the subject 1. FIG.

画像分類部２５ｂは、被検体１内の各画像に対応付けられた撮像素子のＩＤ情報を確認し、かかる撮像素子のＩＤ情報別に被検体１内の各画像を区別することによって、例えば図９に示すように、被検体１内の画像群をカプセル型内視鏡２ａ，２ｂの撮像素子毎に複数の画像群ＰＧ１，ＰＧ２に分類する。   The image classification unit 25b confirms the ID information of the image sensor associated with each image in the subject 1, and distinguishes each image in the subject 1 according to the ID information of the image sensor, for example, FIG. As shown in FIG. 4, the image group in the subject 1 is classified into a plurality of image groups PG1 and PG2 for each imaging element of the capsule endoscopes 2a and 2b.

ここで、画像群ＰＧ１内の画像Ｐ1〜Ｐ6に受信時間Ｔ1，Ｔ2，Ｔ3，Ｔ6，Ｔ8，Ｔ10がそれぞれ対応付けられ、画像群ＰＧ２内の画像Ｑ1〜Ｑ6に受信時間Ｔ4，Ｔ5，Ｔ7，Ｔ9，Ｔ11，Ｔ12がそれぞれ対応付けられていた場合、かかる被検体１内の各画像Ｐ1〜Ｐ6，Ｑ1〜Ｑ6は、受信時間の時系列順、すなわち、画像Ｐ1、画像Ｐ2、画像Ｐ3、画像Ｑ1、画像Ｑ2、画像Ｐ4、画像Ｑ3、画像Ｐ5、画像Ｑ4、画像Ｐ6、画像Ｑ5、画像Ｑ6の順に受信装置３に受信されたことになる。 Here, the reception times T 1 , T 2 , T 3 , T 6 , T 8 , and T 10 are associated with the images P 1 to P 6 in the image group PG1, respectively, and the images Q 1 to Q in the image group PG2 are associated with each other. 6 is associated with reception times T 4 , T 5 , T 7 , T 9 , T 11 , and T 12 , the images P 1 to P 6 and Q 1 to Q 6 in the subject 1 are , Chronological order of reception time, that is, image P 1 , image P 2 , image P 3 , image Q 1 , image Q 2 , image P 4 , image Q 3 , image P 5 , image Q 4 , image P 6 , The image Q 5 and the image Q 6 are received by the receiving device 3 in this order.

画像分類部２５ｂは、この画像群ＰＧ１内の各画像Ｐn（フレーム番号ｎ＝１，２，３，…）の受信時間を確認し、この画像群ＰＧ１の先頭画像Ｐ1の受信時間Ｔ1に対する各画像Ｐnの相対時間（すなわち入力時間）を算出する。この場合、画像分類部２５ｂは、例えば、この先頭画像Ｐ1の受信時間Ｔ1を基準にし、この受信時間Ｔ1（すなわち画像群ＰＧ１の撮像開始時間）からの経過時間を画像の入力時間として算出する。具体的には、画像分類部２５ｂは、この受信時間Ｔ1からの経過時間（すなわち０時０分０秒）である画像Ｐ1の入力時間Ｕ1を算出し、この受信時間Ｔ1から受信時間Ｔ2，Ｔ3，Ｔ6，Ｔ8，Ｔ10が経過するまでの各経過時間である画像Ｐ2〜Ｐ6の各入力時間Ｕ2，Ｕ3，Ｕ4，Ｕ5，Ｕ6を算出する。画像分類部２５ｂは、このように算出した各入力時間（Ｕ1，Ｕ2，Ｕ3，・・・）をこの画像群ＰＧ１内の各画像Ｐnにそれぞれ対応付ける。 The image classification unit 25b confirms the reception time of each image P n (frame number n = 1, 2, 3,...) In this image group PG1, and receives the reception time T 1 of the first image P 1 of this image group PG1. The relative time (that is, input time) of each image P n with respect to is calculated. In this case, the image classification section 25b is, for example, the reception time T 1 of the this first image P 1 a reference, the time elapsed from the reception time T 1 (i.e. imaging start time of the image group PG1) as the input time of the image calculate. Specifically, the image classification unit 25b calculates an input time U 1 of the image P 1 that is an elapsed time from the reception time T 1 (that is, 0 hours 0 minutes 0 seconds), and receives from the reception time T 1. The input times U 2 , U 3 , U 4 , U 5 , U 6 of the images P 2 to P 6 , which are the elapsed times until the times T 2 , T 3 , T 6 , T 8 , T 10 elapse, are obtained. calculate. The image classification unit 25b associates each input time (U 1 , U 2 , U 3 ,...) Calculated in this way with each image P n in the image group PG1.

これと同様に、画像分類部２５ｂは、この画像群ＰＧ２内の各画像Ｑm（フレーム番号ｍ＝１，２，３，…）の受信時間を確認し、この画像群ＰＧ２の先頭画像Ｑ1の受信時間Ｔ4に対する各画像Ｑmの相対時間（すなわち入力時間）を算出する。この場合、画像分類部２５ｂは、この受信時間Ｔ4からの経過時間（すなわち０時０分０秒）である画像Ｑ1の入力時間Ｖ1を算出し、この受信時間Ｔ4から受信時間Ｔ5，Ｔ7，Ｔ9，Ｔ11，Ｔ12が経過するまでの各経過時間である画像Ｑ2〜Ｑ6の各入力時間Ｖ2，Ｖ3，Ｖ4，Ｖ5，Ｖ6を算出する。画像分類部２５ｂは、このように算出した各入力時間（Ｖ1，Ｖ2，Ｖ3，・・・）をこの画像群ＰＧ２内の各画像Ｑmにそれぞれ対応付ける。 Similarly, the image classification unit 25b confirms the reception time of each image Q m (frame number m = 1, 2, 3,...) In this image group PG2, and the first image Q 1 of this image group PG2. to calculate the relative time of each image Q m for the received time T 4 (ie input time). In this case, the image classification unit 25b calculates an input time V 1 of the image Q 1 that is an elapsed time from the reception time T 4 (that is, 0: 0: 0), and receives the reception time T 4 from the reception time T 4. 5 , the input times V 2 , V 3 , V 4 , V 5 , V 6 of the images Q 2 to Q 6 , which are the elapsed times until the time T 5 , T 7 , T 9 , T 11 , T 12 elapses . The image classification unit 25b associates each input time (V 1 , V 2 , V 3 ,...) Calculated in this way with each image Q m in the image group PG2.

なお、このように入力時間（Ｕ1，Ｕ2，Ｕ3，・・・）が対応付けられた画像群ＰＧ１内の各画像Ｐnは、かかる入力時間とカプセル型内視鏡２ａの撮像素子のＩＤ情報とによって特定される。また、このように入力時間（Ｖ1，Ｖ2，Ｖ3，・・・）が対応付けられた画像群ＰＧ２内の各画像Ｑmは、かかる入力時間とカプセル型内視鏡２ｂの撮像素子のＩＤ情報とによって特定される。 In addition, each image P n in the image group PG1 in which the input times (U 1 , U 2 , U 3 ,...) Are associated with each other in this way is the input time and the image sensor of the capsule endoscope 2a. ID information. In addition, each image Q m in the image group PG2 in which the input times (V 1 , V 2 , V 3 ,...) Are associated with each other in this way is the input time and the image sensor of the capsule endoscope 2b. ID information.

つぎに、カプセル型内視鏡２ａ，２ｂによって撮像された複数の画像群ＰＧ１，ＰＧ２に含まれる被検体１内の画像を表示部１２の主表示領域１００に表示する場合を例示して、現に主表示領域１００に表示されている現表示画像を別の画像群（選択ＧＵＩによって選択された画像群）内の関連画像に切り替える制御部２５の動作を具体的に説明する。図１０は、入力時間を含む画像の特定情報をもとに主表示領域１００の現表示画像を別の画像群内の関連画像に切り替える制御部２５の動作を説明するための模式図である。   Next, an example of displaying images in the subject 1 included in the plurality of image groups PG1 and PG2 captured by the capsule endoscopes 2a and 2b in the main display area 100 of the display unit 12 will be described. An operation of the control unit 25 for switching the current display image displayed in the main display area 100 to a related image in another image group (an image group selected by the selection GUI) will be specifically described. FIG. 10 is a schematic diagram for explaining the operation of the control unit 25 that switches the current display image in the main display area 100 to a related image in another image group based on image specifying information including the input time.

図１０に示すように、表示部１２の主表示領域１００には、現在、カプセル型内視鏡２ａの撮像素子によって撮像された画像群ＰＧ１に含まれる被検体１内の画像、例えば画像Ｐ7が表示されている。この場合、主表示領域１００の現表示画像である画像Ｐ7を含む画像群ＰＧ１は、主表示領域１００に表示される表示処理対称の画像群（すなわち主表示の画像群）である。また、かかる主表示領域１００の画像Ｐ7は、カプセル型内視鏡２ａの撮像素子のＩＤ情報と入力時間Ｕ7とが特定情報として対応付けられている。 As shown in FIG. 10, in the main display region 100 of the display unit 12, an image in the subject 1 included in the image group PG1 currently captured by the imaging element of the capsule endoscope 2a, for example, an image P 7 is displayed. Is displayed. In this case, the image group PG1 including the image P 7 is a currently displayed image in the main display area 100 is an image group of the display process symmetric to be displayed on the main display area 100 (i.e. the main display image group). Further, in the image P 7 in the main display area 100, the ID information of the imaging element of the capsule endoscope 2a and the input time U 7 are associated as specific information.

この状態において、上述した画像群選択アイコン１０２のクリック操作が行われ、入力部１１が、画像群ＰＧ２に対応する選択情報を制御部２５に入力した場合、制御部２５は、この画像群ＰＧ２に対応する選択情報をもとに、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。具体的には、かかる画像群ＰＧ２に対応する選択情報が例えばカプセル型内視鏡２ｂの撮像素子のＩＤ情報であり、表示制御部１５ａは、記憶部１４に保存された複数の画像群ＰＧ１，ＰＧ２の中から、かかる選択情報によって特定されるカプセル型内視鏡２ｂの撮像素子に撮像された画像群ＰＧ２を主表示の画像群に選定する。このようにして、表示制御部１５ａは、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。   In this state, when the click operation of the image group selection icon 102 described above is performed and the input unit 11 inputs selection information corresponding to the image group PG2 to the control unit 25, the control unit 25 adds the image group PG2 to this image group PG2. Based on the corresponding selection information, the main display image group is switched from the current image group PG1 to the image group PG2. Specifically, the selection information corresponding to the image group PG2 is, for example, ID information of the imaging element of the capsule endoscope 2b, and the display control unit 15a includes a plurality of image groups PG1, PG1, which are stored in the storage unit 14. From PG2, the image group PG2 imaged by the imaging element of the capsule endoscope 2b specified by the selection information is selected as the main display image group. In this way, the display control unit 15a switches the main display image group from the current image group PG1 to the image group PG2.

つぎに、制御部２５は、かかる画像群選択アイコン１０２によって選択された画像群ＰＧ２内の各画像の特定情報と現に主表示領域１００に表示されている画像Ｐ7の特定情報とをもとに、この現表示画像である画像Ｐ7に最も近似する画像群ＰＧ２内の関連画像を決定し、この現表示画像を関連画像に切り替える制御を行う。この場合、画像抽出部２５ｃは、この選択された画像群ＰＧ２内の各画像（Ｑ1，Ｑ2，Ｑ3，Ｑ4，Ｑ5，Ｑ6，Ｑ7，…）の入力時間（Ｖ1，Ｖ2，Ｖ3，Ｖ4，Ｖ5，Ｖ6，Ｖ7，・・・）と、この現表示画像である画像Ｐ7の入力時間Ｕ7とを確認し、この画像Ｐ7の入力時間Ｕ7に最も近似する入力時間Ｖ7を有する画像Ｑ7をこの画像Ｐ7に最も近似する関連画像に決定する。そして、画像抽出部２５ｃは、この画像Ｐ7の関連画像に決定した画像Ｑ7を画像群ＰＧ２から抽出する。この場合、表示制御部１５ａは、主表示領域１００の現表示画像を画像Ｐ7から画像Ｑ7（すなわち画像Ｐ7の関連画像）に切り替える制御を行う。 Next, the control unit 25, based on the specific information of the image P 7 being displayed currently on the main display area 100 and the identification information of each image of such image group selection icon 102 image group PG2 selected by , to determine the relevant image in the image group in PG2 most similar to the image P 7 is the currently displayed image, performs control to switch the currently displayed image to the relevant image. In this case, the image extraction unit 25c inputs the input time (V 1 ) of each image (Q 1 , Q 2 , Q 3 , Q 4 , Q 5 , Q 6 , Q 7 ,...) In the selected image group PG2. , V 2, V 3, V 4, V 5, V 6, V 7, and...), to confirm the input time U 7 image P 7 is the currently displayed image, the input of the image P 7 The image Q 7 having the input time V 7 that is closest to the time U 7 is determined to be the related image that is closest to the image P 7 . Then, the image extracting unit 25c extracts the image Q 7 determined the relevant image of the image P 7 from the image group PG2. In this case, the display control unit 15a performs control for switching to the image Q 7 (i.e. related image of the image P 7) the current display image of the main display area 100 from the image P 7.

ここで、このような現表示画像と関連画像との関係にある画像Ｐ7，Ｑ7は、互いに近似する画像同士であって、例えば、被検体１の同一臓器内において略同じ部位が撮像された画像同士、互いに前後または対向する位置関係にある近傍の部位が撮像された画像同士である。このように現表示画像とその関連画像とを切り替えて主表示領域１００に表示することによって、被検体１内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、この結果、被検体１の臓器内を詳細に観察することができる。 Here, the images P 7 and Q 7 having the relationship between the current display image and the related image are images that are similar to each other, and for example, substantially the same part is imaged in the same organ of the subject 1. These images are images obtained by capturing images of neighboring parts that are in a positional relationship in front of or behind each other. By switching the current display image and its related image and displaying them in the main display area 100 in this way, it is possible to easily observe each image that approximates each other among a plurality of image groups in the subject 1, As a result, the inside of the organ of the subject 1 can be observed in detail.

以上、説明したように、本発明の実施の形態２では、複数の撮像素子によって撮像された被検体内の画像群を撮像素子毎に分類し、かかる被検体内の複数の画像群とこれら複数の画像群内の各画像をそれぞれ特定する特定情報とを記憶部に保存し、かかる複数の画像群の中から表示部の主表示領域に表示すべき画像群を選択ＧＵＩによって選択した場合、この選択した画像群内の各画像の特定情報に含まれる入力時間と、この主表示領域に現在表示されている現表示画像の特定情報に含まれる入力時間とをもとに、この選択した画像群の中からこの現表示画像に最も近似する関連画像を決定し、この現表示画像をこの関連画像に切り替えるように構成している。このため、上述した実施の形態１の場合と同様に、選択ＧＵＩを用いた容易な操作によって、かかる複数の画像群の間で互いに近似する画像同士を主表示領域に切り替えて表示できる。この結果、上述した実施の形態１と同様の作用効果を享受できる画像表示装置を実現することができる。   As described above, in the second embodiment of the present invention, the image groups in the subject imaged by the plurality of imaging elements are classified for each imaging element, and the plurality of image groups in the subject and the plurality of these groups. Specific information for specifying each image in the image group is stored in the storage unit, and the image group to be displayed in the main display area of the display unit is selected from the plurality of image groups by the selection GUI. Based on the input time included in the specific information of each image in the selected image group and the input time included in the specific information of the current display image currently displayed in the main display area, the selected image group The related image closest to the current display image is determined from among the images, and the current display image is switched to the related image. For this reason, as in the case of the first embodiment described above, images that are similar to each other among the plurality of image groups can be switched and displayed in the main display area by an easy operation using the selection GUI. As a result, it is possible to realize an image display device that can enjoy the same effects as those of the first embodiment.

（実施の形態３）
つぎに、本発明の実施の形態３について説明する。上述した実施の形態２では、被検体内の複数の画像群の中から選択ＧＵＩによって選択された画像郡内の画像であって、主表示領域１００の現表示画像の入力時間に最も近似する画像をこの現表示画像の関連画像に決定していたが、この実施の形態３では、被検体内の複数の画像群のうちの互いに最も近似する画像同士の時間差を所定のＧＵＩによって設定できるようにし、設定した時間差に最も近似する受信時間差をなす画像同士である現表示画像と関連画像とを切り替えるようにしている。 (Embodiment 3)
Next, a third embodiment of the present invention will be described. In the above-described second embodiment, the image within the image group selected by the selection GUI from the plurality of image groups in the subject, and the image that most closely approximates the input time of the current display image in the main display area 100. Is determined as the related image of the current display image. In the third embodiment, the time difference between the images closest to each other in the plurality of image groups in the subject can be set by a predetermined GUI. The current display image and the related image, which are images having a reception time difference that is most approximate to the set time difference, are switched.

図１１は、本発明の実施の形態３にかかる画像表示装置を有する被検体内情報取得システムの一構成例を示す模式図である。図１１に示すように、この実施の形態３にかかる被検体内情報取得システムは、上述した実施の形態２にかかる被検体内情報取得システムのカプセル型内視鏡２ａ，２ｂに代えて多眼のカプセル型内視鏡２ｃを有し、画像表示装置２４に代えて画像表示装置３４を有する。その他の構成は実施の形態２と同じであり、同一構成部分には同一符号を付している。   FIG. 11 is a schematic diagram illustrating a configuration example of the in-vivo information acquiring system including the image display device according to the third embodiment of the present invention. As shown in FIG. 11, the in-subject information acquisition system according to the third embodiment is a multi-view instead of the capsule endoscopes 2a and 2b of the in-subject information acquisition system according to the second embodiment. And an image display device 34 instead of the image display device 24. Other configurations are the same as those of the second embodiment, and the same components are denoted by the same reference numerals.

カプセル型内視鏡２ｃは、互いに異なる方向の画像をそれぞれ撮像する複数の撮像素子を搭載した多眼のカプセル型内視鏡である。このような多眼のカプセル型内視鏡２ｃは、被検体１の内部に導入され、この被検体１内の複数方向の画像を時系列に沿って順次撮像する多方向の撮像機能と、撮像した多方向の画像群を外部の受信装置３に無線送信する無線通信機能とを有する。具体的には、カプセル型内視鏡２ｃは、例えば、被検体１内における進行方向に向かって斜め前方に視野を有する撮像素子（以下、前方の撮像素子と称する）と、斜め後方に視野を有する撮像素子（以下、後方の撮像素子と称する）とを有する。かかるカプセル型内視鏡２ｃは、被検体１の臓器内部に導入された後、蠕動によって被検体１の臓器内を移動するとともに、進行方向に向かって斜め前方と斜め後方とについて、この被検体１の臓器内部の画像を順次撮像する。この場合、かかるカプセル型内視鏡２ｃの前方および後方の各撮像素子は、例えば同じフレームレートで交互に被検体１内の画像を撮像する。カプセル型内視鏡２ｃは、かかる前方および後方の各撮像素子によって撮像された被検体１内の画像とこの画像を撮像した撮像素子のＩＤ情報とを含む無線信号を外部の受信装置３に逐次送信する。   The capsule endoscope 2c is a multi-lens capsule endoscope equipped with a plurality of imaging elements that respectively capture images in different directions. Such a multi-lens capsule endoscope 2c is introduced into the subject 1, and has a multi-directional imaging function for sequentially capturing images in a plurality of directions in the subject 1 in time series, and imaging. And a wireless communication function for wirelessly transmitting the multidirectional image group to the external receiving device 3. Specifically, the capsule endoscope 2c has, for example, an imaging device having a visual field obliquely forward (hereinafter referred to as a front imaging device) in the traveling direction in the subject 1, and a visual field obliquely rearward. Image sensor (hereinafter referred to as a rear image sensor). The capsule endoscope 2c is introduced into the organ of the subject 1 and then moves in the organ of the subject 1 by peristalsis. The capsule endoscope 2c is obliquely forward and obliquely rearward in the traveling direction. Images of one organ are sequentially taken. In this case, the imaging elements in front of and behind the capsule endoscope 2c capture images in the subject 1 alternately at the same frame rate, for example. The capsule endoscope 2c sequentially transmits a wireless signal including an image in the subject 1 captured by the front and rear imaging elements and ID information of the imaging element that has captured the image to the external receiving device 3. Send.

つぎに、本発明の実施の形態３にかかる画像表示装置３４の構成について説明する。図１２は、本発明の実施の形態３にかかる画像表示装置３４の一構成例を模式的に示すブロック図である。図１２に示すように、この実施の形態３にかかる画像表示装置３４は、上述した実施の形態２にかかる画像表示装置２４の制御部２５に代えて制御部３５を有する。また、かかる画像表示部３４の表示部１２は、上述したウィンドウＷ内に、画像の時間差を設定するための設定ＧＵＩをさらに表示する。入力部１１は、かかる表示部１２に表示された設定ＧＵＩによって設定された時間差情報を制御部３５に入力する。その他の構成は実施の形態２と同じであり、同一構成部分には同一符号を付している。   Next, the configuration of the image display device 34 according to the third embodiment of the present invention will be described. FIG. 12 is a block diagram schematically illustrating a configuration example of the image display device 34 according to the third embodiment of the present invention. As shown in FIG. 12, the image display device 34 according to the third embodiment includes a control unit 35 instead of the control unit 25 of the image display device 24 according to the second embodiment. Further, the display unit 12 of the image display unit 34 further displays a setting GUI for setting a time difference between images in the window W described above. The input unit 11 inputs time difference information set by the setting GUI displayed on the display unit 12 to the control unit 35. Other configurations are the same as those of the second embodiment, and the same components are denoted by the same reference numerals.

制御部３５は、上述した実施の形態２にかかる画像表示装置２４の制御部２５と略同様に、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。この場合、制御部３５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から、多眼のカプセル型内視鏡２ｃによって撮像された被検体１内の画像群と、かかる被検体１内の画像群に含まれる各画像に対応付けられた撮像素子のＩＤ情報および各画像の受信時間とを取得する。制御部３５は、かかる被検体１内の画像群と撮像素子のＩＤ情報および画像の受信時間とを画像毎に対応付けて記憶部１４に保存する。   The control unit 35 controls the input unit 11, the display unit 12, the card I / F 13, and the storage unit 14 in substantially the same manner as the control unit 25 of the image display device 24 according to the second embodiment described above. Controls the input and output of information between components. In this case, the control unit 35 includes an image group in the subject 1 captured by the multi-lens capsule endoscope 2c from the portable recording medium 5 inserted in the card I / F 13, and the subject 1 The ID information of the image sensor associated with each image included in the image group and the reception time of each image are acquired. The control unit 35 stores the image group in the subject 1, the image sensor ID information, and the image reception time in the storage unit 14 in association with each image.

このような制御部３５は、上述した表示制御部１５ａを有し、実施の形態２にかかる画像表示装置２４の制御部２５の画像分類部２５ｂに代えて画像分類部３５ｂを有し、画像抽出部２５ｃに代えて画像抽出部３５ｃを有する。   Such a control unit 35 includes the display control unit 15a described above, and includes an image classification unit 35b instead of the image classification unit 25b of the control unit 25 of the image display device 24 according to the second embodiment, and performs image extraction. An image extracting unit 35c is provided instead of the unit 25c.

画像分類部３５ｂは、上述した制御部２５の画像分類部２５ｂと同様に、各画像に対応付けられた撮像素子のＩＤ情報別に被検体１内の画像群を複数の画像群（例えば画像群ＰＧ１，ＰＧ２）に分類する。かかる画像分類部３５ｂによって分類された画像群内の各画像には、例えばカプセル型内視鏡２ｃの前方の撮像素子または後方の撮像素子のＩＤ情報と、受信装置３に受信された際の受信時間とがそれぞれ対応付けられる。   Similar to the image classification unit 25b of the control unit 25 described above, the image classification unit 35b converts an image group in the subject 1 into a plurality of image groups (for example, an image group PG1) according to the ID information of the image sensor associated with each image. , PG2). Each image in the image group classified by the image classification unit 35b includes, for example, the ID information of the front image sensor or the rear image sensor of the capsule endoscope 2c and the reception when the reception device 3 receives the ID information. Each time is associated with each other.

制御部３５は、かかる画像分類部３５ｂによって撮像素子毎に分類された画像群ＰＧ１，ＰＧ２を記憶部１４のフォルダＦ１，Ｆ２にそれぞれ保存する。この場合、かかる記憶部１４に保存された画像群ＰＧ１，ＰＧ２内の各画像には、上述した撮像素子のＩＤ情報と受信時間とが対応付けられる。したがって、かかる画像群ＰＧ１，ＰＧ２内の各画像の特定情報は、かかる撮像素子のＩＤ情報と画像の受信時間とを組み合わせたものである   The control unit 35 stores the image groups PG1 and PG2 classified for each image sensor by the image classification unit 35b in the folders F1 and F2 of the storage unit 14, respectively. In this case, each image in the image groups PG1 and PG2 stored in the storage unit 14 is associated with the above-described ID information of the image sensor and the reception time. Therefore, the specific information of each image in the image groups PG1 and PG2 is a combination of the ID information of the image sensor and the reception time of the image.

画像抽出部３５ｃは、入力部１１によって入力された画像群の選択情報と画像の時間差情報とをもとに、この選択情報に対応する被検体内の画像群（例えば画像群選択アイコン１０１，１０２によって選択された画像群ＰＧ１，ＰＧ２のいずれか）から、表示部１２の主表示領域１００の現表示画像に最も近似する関連画像を抽出する。ここで、この画像の時間差情報は、表示部１２に表示された設定ＧＵＩによって設定される画像の設定時間差△ｔに対応する。画像抽出部３５ｃは、かかる選択情報に基づいて選定された画像群の中から、この画像群を撮像した撮像素子のＩＤ情報と現表示画像の受信時間に対する差が設定時間差△ｔに最も近似する受信時間とを特定情報として有する関連画像を決定し、この関連画像を抽出する。かかる画像抽出部３５ｃによって抽出された関連画像は、この現表示画像に代えて表示部１２の主表示領域１００に表示される。   Based on the image group selection information and the image time difference information input by the input unit 11, the image extraction unit 35 c selects an image group (for example, image group selection icons 101 and 102) in the subject corresponding to the selection information. The related image that most closely approximates the current display image in the main display area 100 of the display unit 12 is extracted from any one of the image groups PG1 and PG2 selected by (1). Here, the time difference information of the image corresponds to the set time difference Δt of the image set by the setting GUI displayed on the display unit 12. In the image extraction unit 35c, the difference between the ID information of the image sensor that has captured the image group and the reception time of the current display image is the closest to the set time difference Δt among the image groups selected based on the selection information. A related image having the reception time as specific information is determined, and the related image is extracted. The related image extracted by the image extraction unit 35c is displayed in the main display area 100 of the display unit 12 in place of the current display image.

つぎに、被検体内の画像群に含まれる画像の設定時間差△ｔを設定する設定ＧＵＩについて説明する。図１３は、画像の設定時間差△ｔを設定する設定ＧＵＩを表示した表示部１２のウィンドウＷを例示する模式図である。図１３に示すように、表示部１２のウィンドウＷには、被検体内の画像を表示する主表示領域１００が形成され、画像群選択アイコン１０１，１０２と、表示操作アイコン群１０３と、タイムバー１０４と、スライダ１０５と、カーソル１０６と、時間差設定部１１０とが表示される。   Next, a setting GUI for setting the set time difference Δt of images included in the image group in the subject will be described. FIG. 13 is a schematic view illustrating the window W of the display unit 12 displaying a setting GUI for setting the image setting time difference Δt. As shown in FIG. 13, a main display area 100 for displaying an image in the subject is formed in the window W of the display unit 12, and image group selection icons 101 and 102, a display operation icon group 103, a time bar, and the like. 104, a slider 105, a cursor 106, and a time difference setting unit 110 are displayed.

時間差設定部１１０は、主表示領域１００の現表示画像の受信時間とこの現表示画像に最も近似する関連画像の受信時間との時間差を設定する設定手段として機能する設定ＧＵＩである。具体的には、時間差設定部１１０には、入力部１１の入力操作によって、所望の時間差を示す数値が入力される。かかる時間差設定部１１０に入力された数値は、主表示領域１００の現表示画像の受信時間とその関連画像の受信時間との差として設定される設定時間差△ｔを示す。このように所望の時間差を入力することによって、時間差設定部１１０は、かかる現表示画像と関連画像との設定時間差△ｔを設定する。この場合、入力部１１は、かかる設定時間差△ｔに対応する時間差情報を制御部３５に入力する。制御部３５は、かかる設定時間差△ｔに対応する時間差情報を記憶部１４に保存する。   The time difference setting unit 110 is a setting GUI that functions as a setting unit that sets a time difference between the reception time of the current display image in the main display area 100 and the reception time of the related image that is closest to the current display image. Specifically, a numerical value indicating a desired time difference is input to the time difference setting unit 110 by an input operation of the input unit 11. The numerical value input to the time difference setting unit 110 indicates a set time difference Δt set as a difference between the reception time of the current display image in the main display area 100 and the reception time of the related image. By inputting the desired time difference in this way, the time difference setting unit 110 sets the set time difference Δt between the current display image and the related image. In this case, the input unit 11 inputs time difference information corresponding to the set time difference Δt to the control unit 35. The control unit 35 stores time difference information corresponding to the set time difference Δt in the storage unit 14.

なお、かかる時間差設定部１１０に入力される数値（すなわち設定時間差△ｔ）は、正負のいずれであってもよい。時間差設定部１１０は、かかる設定時間差△ｔが正の数値である場合、主表示領域１００の現表示画像の受信時間に比して時系列的に前の受信時間の画像（すなわち、この現表示画像の撮像以前に撮像された画像）に対する受信時間差を設定する。一方、時間差設定部１１０は、かかる設定時間差△ｔが負の数値である場合、主表示領域１００の現表示画像の受信時間に比して時系列的に後の受信時間の画像（すなわち、この現表示画像の撮像以後に撮像された画像）に対する受信時間差を設定する。   The numerical value input to the time difference setting unit 110 (that is, the set time difference Δt) may be positive or negative. When the set time difference Δt is a positive numerical value, the time difference setting unit 110 chronologically compares the reception time of the current display image in the main display area 100 with the previous reception time (that is, the current display). A reception time difference with respect to an image captured before the image capture is set. On the other hand, when the set time difference Δt is a negative numerical value, the time difference setting unit 110 chronologically compares the reception time of the current display image in the main display area 100 with an image (that is, this reception time). A reception time difference with respect to an image captured after the current display image is captured is set.

つぎに、複数の画像群ＰＧ１，ＰＧ２の中から選択された被検体１内の画像群に含まれる関連画像に主表示領域１００の現表示画像を切り替える制御を行う制御部３５の動作を説明する。図１４は、実施の形態３にかかる画像表示装置３４の制御部３５の処理手順を説明するフローチャートである。   Next, the operation of the control unit 35 that performs control for switching the current display image in the main display region 100 to the related image included in the image group in the subject 1 selected from the plurality of image groups PG1 and PG2 will be described. . FIG. 14 is a flowchart for explaining a processing procedure of the control unit 35 of the image display device 34 according to the third embodiment.

制御部３５は、上述した実施の形態２にかかる画像表示装置２４の制御部２５と略同様に、被検体１内の画像群ＰＧ１，ＰＧ２内の各画像を表示部１２の主表示領域１００に表示する制御を行い、画像群選択アイコン１０１，１０２によって主表示領域１００に表示すべき画像群（主表示の画像群）が選択された場合、この選択された画像群内の関連画像に主表示領域１００の現表示画像を切り替える制御を行う。この場合、制御部３５は、上述した画像の入力時間に代えて画像の受信時間差をもとに、この選択された画像群の中から、この現表示画像に最も近似する関連画像を決定する。   The control unit 35 displays each image in the image groups PG1 and PG2 in the subject 1 in the main display region 100 of the display unit 12 in substantially the same manner as the control unit 25 of the image display device 24 according to the second embodiment described above. When display control is performed and an image group to be displayed in the main display area 100 (main display image group) is selected by the image group selection icons 101 and 102, main display is performed on related images in the selected image group. Control to switch the current display image in the area 100 is performed. In this case, the control unit 35 determines a related image that most closely approximates the current display image from the selected image group based on the difference in image reception time instead of the above-described image input time.

すなわち、図１４に示すように、制御部３５は、上述したステップＳ２０１〜Ｓ２０４（図８を参照）と同様の処理手順を行い、被検体１内の複数の画像群（例えば画像群ＰＧ１，ＰＧ２）の中から主表示の画像群を選択し、画像表示指示ありの場合、この主表示の画像群に含まれる被検体内の画像を主表示領域１００に表示する制御を行う（ステップＳ３０１〜Ｓ３０４）。つぎに、制御部３５は、上述したステップＳ２０５，Ｓ２０６と同様の処理手順を行い、主表示領域１００の現表示画像を切り替える画像切替指示の有無を判断し（ステップＳ３０５）、画像切替指示ありの場合（ステップＳ３０５，Ｙｅｓ）、入力部１１によって入力された画像群の選択情報に特定される画像群を主表示の画像群に切り替える（ステップＳ３０６）。   That is, as shown in FIG. 14, the control unit 35 performs the same processing procedure as the above-described steps S201 to S204 (see FIG. 8), and a plurality of image groups in the subject 1 (for example, image groups PG1, PG2). ), A main display image group is selected, and if there is an image display instruction, control is performed to display an image in the subject included in the main display image group in the main display area 100 (steps S301 to S304). ). Next, the control unit 35 performs the same processing procedure as in steps S205 and S206 described above, determines whether or not there is an image switching instruction for switching the current display image in the main display area 100 (step S305), and has an image switching instruction. In the case (step S305, Yes), the image group specified by the image group selection information input by the input unit 11 is switched to the main display image group (step S306).

続いて、制御部３５は、この選択情報に対応する画像群内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像に対する受信時間差が設定時間差△ｔに最も近似する関連画像に切り替える制御を行う（ステップＳ３０７）。この場合、画像抽出部３５ｃは、主表示領域１００の現表示画像の特定情報に含まれる受信時間と、この選択情報に対応する画像群内の各画像の受信時間と、入力部１１によって入力された時間差情報に対応する設定時間差△ｔとを確認し、この選択情報に対応する画像群の中から、この現表示画像に対する受信時間差が設定時間差△ｔに最も近似する受信時間を特定情報に含む画像を抽出する。かかる画像抽出部３５ｃによって抽出された画像は、この現表示画像に最も近似する関連画像であり、この選択情報に対応する撮像素子のＩＤ情報と、この現表示画像の受信時間に対して設定時間差△ｔに最も近似する受信時間差をなす受信時間とを特定情報に含むものである。このようにして、画像抽出部３５ｃは、この現表示画像に最も近似する関連画像を決定する。表示制御部１５ａは、この現表示画像を、かかる画像抽出部３５ｃによって抽出された関連画像に切り替える制御を行う。これによって、主表示領域１００には、現在、この関連画像が表示されている。   Subsequently, the control unit 35 sets a reception time difference with respect to the current display image based on the specific information of each image in the image group corresponding to the selection information and the specific information of the current display image in the main display area 100. Control is performed to switch to a related image that most closely approximates the time difference Δt (step S307). In this case, the image extraction unit 35c is input by the input unit 11 with the reception time included in the specific information of the current display image in the main display area 100, the reception time of each image in the image group corresponding to this selection information. The set time difference Δt corresponding to the time difference information is confirmed, and from the image group corresponding to the selected information, the reception time that the reception time difference with respect to the current display image is closest to the set time difference Δt is included in the specific information. Extract images. The image extracted by the image extraction unit 35c is a related image that most closely approximates the current display image, and a set time difference with respect to the ID information of the image sensor corresponding to the selection information and the reception time of the current display image. The specific information includes a reception time having a reception time difference that is closest to Δt. In this way, the image extraction unit 35c determines a related image that is closest to the current display image. The display control unit 15a performs control to switch the current display image to the related image extracted by the image extraction unit 35c. As a result, the related image is currently displayed in the main display area 100.

その後、制御部３５は、上述したステップＳ２０８と同様に、現に主表示領域１００に表示されている画像（関連画像等）を含む主表示の画像群のフレーム番号を更新する（ステップＳ３０８）。そして、制御部３５は、上述したステップＳ２０９と同様に、主表示領域１００の画像の一時停止指示の有無を判断し（ステップＳ３０９）、一時停止指示ありの場合（ステップＳ３０９，Ｙｅｓ）、ステップＳ３０３に戻り、このステップＳ３０３以降の処理手順を繰り返す。   Thereafter, the control unit 35 updates the frame number of the main display image group including the image (related image or the like) that is currently displayed in the main display area 100, similarly to step S208 described above (step S308). Then, similarly to step S209 described above, the control unit 35 determines whether or not there is an instruction to pause the image in the main display area 100 (step S309). If there is an instruction to pause (step S309, Yes), step S303 is performed. Returning to step S303, the processing procedure after step S303 is repeated.

一方、制御部３５は、一時停止指示なしの場合（ステップＳ３０９，Ｎｏ）、上述したステップＳ２１０と同様に、主表示領域１００に被検体内の画像を表示する画像表示処理が終了したか否かを判断する（ステップＳ３１０）。制御部３５は、画像表示処理が終了していないと判断した場合（ステップＳ３１０，Ｎｏ）、ステップＳ３０４に戻り、このステップＳ３０４以降の処理手順を繰り返し、画像表示処理が終了したと判断した場合（ステップＳ３１０，Ｙｅｓ）、かかる被検体内の画像の画像表示処理を終了する。   On the other hand, when there is no pause instruction (No at Step S309), the control unit 35 determines whether or not the image display process for displaying the image in the subject in the main display area 100 is completed, similar to Step S210 described above. Is determined (step S310). When the control unit 35 determines that the image display process has not ended (No at Step S310), the control unit 35 returns to Step S304, repeats the processing procedure after Step S304, and determines that the image display process has ended (Step S310). In step S310, Yes), the image display processing of the image in the subject is ended.

なお、制御部３５は、上述したステップＳ３０５において画像切替指示なしと判断した場合（ステップＳ３０５，Ｎｏ）、上述したステップＳ３０８に進み、このステップＳ３０８以降の処理手順を繰り返す。   If the control unit 35 determines that there is no image switching instruction in step S305 described above (No in step S305), the control unit 35 proceeds to step S308 described above, and repeats the processing procedure after step S308.

つぎに、多眼のカプセル型内視鏡２ｃによって撮像された複数の画像群ＰＧ１，ＰＧ２に含まれる被検体１内の画像を表示部１２の主表示領域１００に表示する場合を例示して、現に主表示領域１００に表示されている現表示画像を別の画像群（選択ＧＵＩによって選択された画像群）内の関連画像に切り替える制御部３５の動作を具体的に説明する。図１５は、画像の受信時間差をもとに主表示領域１００の現表示画像を別の画像群内の関連画像に切り替える制御部３５の動作を説明するための模式図である。   Next, exemplifying a case where images in the subject 1 included in the plurality of image groups PG1 and PG2 captured by the multi-lens capsule endoscope 2c are displayed in the main display region 100 of the display unit 12, The operation of the control unit 35 for switching the current display image actually displayed in the main display area 100 to a related image in another image group (an image group selected by the selection GUI) will be specifically described. FIG. 15 is a schematic diagram for explaining the operation of the control unit 35 that switches the current display image in the main display area 100 to a related image in another image group based on the difference in image reception time.

図１５に示すように、カプセル型内視鏡２ｃの前方の撮像素子によって撮像された画像群ＰＧ１内の各画像Ｐn（フレーム番号ｎ＝１，２，３，…）には、受信装置３に受信された際の受信時間Ｔ1，Ｔ3，Ｔ5，Ｔ7，Ｔ9，Ｔ11，Ｔ13，・・・がそれぞれ対応付けられている。一方、カプセル型内視鏡２ｃの後方の撮像素子によって撮像された画像群ＰＧ２内の各画像Ｑm（フレーム番号ｍ＝１，２，３，…）には、受信装置３に受信された際の受信時間Ｔ2，Ｔ4，Ｔ6，Ｔ8，Ｔ10，Ｔ12，Ｔ14，・・・がそれぞれ対応付けられている。すなわち、かかる被検体１内の各画像Ｐn，Ｑmは、受信時間の時系列順、すなわち、画像Ｐ1、画像Ｑ1、画像Ｐ2、画像Ｑ2、画像Ｐ3、画像Ｑ3、画像Ｐ4、画像Ｑ4、画像Ｐ5、画像Ｑ5、画像Ｐ6、画像Ｑ6、画像Ｐ7、画像Ｑ7の順に受信装置３に受信されたことになる。 As shown in FIG. 15, each image P n (frame number n = 1, 2, 3,...) In the image group PG1 imaged by the imaging element in front of the capsule endoscope 2c includes the receiving device 3. , Reception times T 1 , T 3 , T 5 , T 7 , T 9 , T 11 , T 13 ,. On the other hand, when each image Q m (frame number m = 1, 2, 3,...) In the image group PG2 captured by the image sensor behind the capsule endoscope 2c is received by the receiving device 3. , Reception times T 2 , T 4 , T 6 , T 8 , T 10 , T 12 , T 14 ,. That is, the images P n and Q m in the subject 1 are received in chronological order of reception time, that is, image P 1 , image Q 1 , image P 2 , image Q 2 , image P 3 , image Q 3 , That is, the receiving device 3 receives the images P 4 , Q 4 , P 5 , Q 5 , P 6 , Q 6 , P 7 , and Q 7 in this order.

ここで、表示部１２の主表示領域１００には、現在、この画像群ＰＧ１に含まれる被検体１内の画像Ｐnのうちの例えば画像Ｐ7が表示されている。この場合、主表示領域１００の現表示画像である画像Ｐ7を含む画像群ＰＧ１は、主表示領域１００に表示される表示処理対称の画像群（すなわち主表示の画像群）である。また、かかる主表示領域１００の画像Ｐ7は、カプセル型内視鏡２ｃの前方の撮像素子のＩＤ情報と受信時間Ｔ13とが特定情報として対応付けられている。 Here, the main display area 100 of the display unit 12, now, for example, the image P 7 in the image P n of the subject 1 are displayed included in the image group PG1. In this case, the image group PG1 including the image P 7 is a currently displayed image in the main display area 100 is an image group of the display process symmetric to be displayed on the main display area 100 (i.e. the main display image group). In the image P 7 in the main display area 100, the ID information of the imaging element in front of the capsule endoscope 2c and the reception time T 13 are associated as specific information.

この状態において、上述した画像群選択アイコン１０２のクリック操作が行われ、入力部１１が、画像群ＰＧ２に対応する選択情報を制御部３５に入力した場合、制御部３５は、この画像群ＰＧ２に対応する選択情報をもとに、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。具体的には、かかる画像群ＰＧ２に対応する選択情報が例えばカプセル型内視鏡２ｃの後方の撮像素子のＩＤ情報であり、表示制御部１５ａは、記憶部１４に保存された複数の画像群ＰＧ１，ＰＧ２の中から、かかる選択情報によって特定されるカプセル型内視鏡２ｃの後方の撮像素子に撮像された画像群ＰＧ２を主表示の画像群に選定する。このようにして、表示制御部１５ａは、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。   In this state, when the click operation of the image group selection icon 102 described above is performed and the input unit 11 inputs selection information corresponding to the image group PG2 to the control unit 35, the control unit 35 adds the image group PG2 to this image group PG2. Based on the corresponding selection information, the main display image group is switched from the current image group PG1 to the image group PG2. Specifically, the selection information corresponding to the image group PG2 is, for example, ID information of the image sensor behind the capsule endoscope 2c, and the display control unit 15a includes a plurality of image groups stored in the storage unit 14. From among PG1 and PG2, an image group PG2 captured by the image sensor behind the capsule endoscope 2c specified by the selection information is selected as the main display image group. In this way, the display control unit 15a switches the main display image group from the current image group PG1 to the image group PG2.

つぎに、制御部３５は、かかる画像群選択アイコン１０２によって選択された画像群ＰＧ２内の各画像の特定情報と、現に主表示領域１００に表示されている画像Ｐ7の特定情報と、時間差設定部１１０によって設定された設定時間差△ｔとをもとに、この現表示画像である画像Ｐ7に最も近似する画像群ＰＧ２内の関連画像を決定し、この現表示画像を関連画像に切り替える制御を行う。この場合、画像抽出部３５ｃは、この選択された画像群ＰＧ２内の各画像（Ｑ1，Ｑ2，Ｑ3，Ｑ4，Ｑ5，Ｑ6，Ｑ7，…）の受信時間（Ｔ2，Ｔ4，Ｔ6，Ｔ8，Ｔ10，Ｔ12，Ｔ14，・・・）と、この現表示画像である画像Ｐ7の受信時間Ｔ13と、設定時間差△ｔとを確認する。そして、画像抽出部３５ｃは、この画像Ｐ7の受信時間Ｔ13に対する受信時間差が設定時間差△ｔに最も近似する受信時間Ｔ14を有する画像Ｑ7をこの画像Ｐ7に最も近似する関連画像に決定する。画像抽出部３５ｃは、このように画像Ｐ7の関連画像に決定した画像Ｑ7を画像群ＰＧ２から抽出する。この場合、表示制御部１５ａは、主表示領域１００の現表示画像を画像Ｐ7から画像Ｑ7（すなわち画像Ｐ7の関連画像）に切り替える制御を行う。 Next, the control unit 35, the specific information of each image of such image group selection icon 102 image group PG2 selected by the specifying information of the image P 7 being displayed currently on the main display area 100, the time difference setting based on the set set time difference △ t by section 110, to determine the relevant image in the image group in PG2 most similar to the image P 7 is the currently displayed image, switching the currently displayed image to the relevant image control I do. In this case, the image extraction unit 35c receives the reception time (T 2 ) of each image (Q 1 , Q 2 , Q 3 , Q 4 , Q 5 , Q 6 , Q 7 ,...) In the selected image group PG2. , T 4 , T 6 , T 8 , T 10 , T 12 , T 14 ,...), The reception time T 13 of the current display image P 7 , and the set time difference Δt. Then, the image extracting unit 35c is a related image that best approximates the image Q 7 having a reception time T 14 the difference reception time is closest to set the time difference △ t for the received time T 13 of the image P 7 in the image P 7 decide. Image extracting unit 35c extracts thus the image Q 7 determined the relevant image in the image P 7 from the image group PG2. In this case, the display control unit 15a performs control for switching to the image Q 7 (i.e. related image of the image P 7) the current display image of the main display area 100 from the image P 7.

ここで、このような現表示画像と関連画像との関係にある画像Ｐ7，Ｑ7は、互いに近似する画像同士であって、例えば、被検体１の同一臓器内において略同じ部位が撮像された画像同士、互いに前後または対向する位置関係にある近傍の部位が撮像された画像同士である。このように現表示画像とその関連画像とを切り替えて主表示領域１００に表示することによって、被検体１内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、この結果、被検体１の臓器内を詳細に観察することができる。 Here, the images P 7 and Q 7 having the relationship between the current display image and the related image are images that are similar to each other, and for example, substantially the same part is imaged in the same organ of the subject 1. These images are images obtained by capturing images of neighboring parts that are in a positional relationship in front of or behind each other. By switching the current display image and its related image and displaying them in the main display area 100 in this way, it is possible to easily observe each image that approximates each other among a plurality of image groups in the subject 1, As a result, the inside of the organ of the subject 1 can be observed in detail.

以上、説明したように、本発明の実施の形態３では、複数の撮像素子によって撮像された被検体内の画像群を撮像素子毎に分類し、かかる被検体内の複数の画像群と、これら複数の画像群内の各画像をそれぞれ特定する特定情報と、設定ＧＵＩによって設定された画像の設定時間差△ｔとを記憶部に保存し、かかる複数の画像群の中から表示部の主表示領域に表示すべき画像群を選択ＧＵＩによって選択した場合、この選択した画像群内の画像であって、この主表示領域に現在表示されている現表示画像に対して設定時間差△ｔに最も近似する受信時間差をなす受信時間の画像を、この現表示画像に最も近似する関連画像に決定し、この現表示画像をこの関連画像に切り替えるように構成している。このため、上述した実施の形態２の場合と同様に、選択ＧＵＩを用いた容易な操作によって、かかる複数の画像群の間で互いに近似する画像同士を主表示領域に切り替えて表示できるとともに、主表示領域の現表示画像と関連画像との受信時間差を容易に調整できる。したがって、被検体内の画像を順次撮像する複数の撮像素子の間に、被検体の臓器内部を移動する際の移動速度または被検体内の画像を撮像する際のフレームレートに差がある場合であっても、選択された画像群の中から現表示画像に最も近似する関連画像を確実に抽出することができる。この結果、上述した実施の形態２と同様の作用効果を享受するとともに、現表示画像をその関連画像に確実に切り替えることが可能な画像表示装置を実現することができる。   As described above, in the third embodiment of the present invention, the image groups in the subject imaged by the plurality of imaging elements are classified for each imaging element, and the plurality of image groups in the subject, and these Specific information for specifying each image in the plurality of image groups and the set time difference Δt of the images set by the setting GUI are stored in the storage unit, and the main display area of the display unit from among the plurality of image groups When the image group to be displayed on the screen is selected by the selection GUI, the image within the selected image group and closest to the set time difference Δt with respect to the current display image currently displayed in the main display area. An image having a reception time that makes a difference in reception time is determined as a related image that is closest to the current display image, and the current display image is switched to the related image. For this reason, as in the case of the second embodiment described above, images that are similar to each other among the plurality of image groups can be switched and displayed in the main display area by an easy operation using the selection GUI. The reception time difference between the current display image and the related image in the display area can be easily adjusted. Therefore, when there is a difference in the moving speed when moving inside the organ of the subject or the frame rate when capturing the image inside the subject, between the plurality of image sensors that sequentially capture the images in the subject. Even so, it is possible to reliably extract the related image that most closely approximates the current display image from the selected image group. As a result, it is possible to realize an image display apparatus that can enjoy the same operational effects as those of the second embodiment described above and can reliably switch the current display image to the related image.

（実施の形態４）
つぎに、本発明の実施の形態４について説明する。上述した実施の形態２では、主表示領域１００の現表示画像に最も近似する入力時間の画像をこの現表示画像の関連画像に決定していたが、この実施の形態４では、被検体内に導入されたカプセル型内視鏡（すなわち撮像素子）の撮像位置情報を検出するようにし、検出した撮像位置情報をもとに現表示画像の関連画像を決定している。 (Embodiment 4)
Next, a fourth embodiment of the present invention will be described. In the second embodiment described above, the image of the input time that most closely approximates the current display image in the main display area 100 is determined as the related image of the current display image. The imaging position information of the introduced capsule endoscope (that is, the imaging device) is detected, and the related image of the current display image is determined based on the detected imaging position information.

図１６は、本発明の実施の形態４にかかる画像表示装置の一構成例を模式的に示すブロック図である。図１６に示すように、この実施の形態４にかかる画像表示装置４４は、上述した実施の形態２にかかる画像表示装置２４の制御部２５に代えて制御部４５を有する。また、本発明の実施の形態４にかかる被検体内情報取得システムは、上述した実施の形態２にかかる被検体内情報取得システムの画像表示装置２４に代えて画像表示装置４４を有する。この場合、受信装置３は、上述した画像の受信時間に代えて、被検体１内の画像を受信した際の受信電界強度を携帯型記録媒体５に順次蓄積する。すなわち、この実施の形態３では、被検体１内の画像と、この被検体１内の画像を撮像した撮像素子のＩＤ情報と、この被検体１内の画像の受信電界強度とが互いに対応付けられる。その他の構成は実施の形態２と同じであり、同一構成部分には同一符号を付している。   FIG. 16 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fourth embodiment of the present invention. As illustrated in FIG. 16, the image display device 44 according to the fourth embodiment includes a control unit 45 instead of the control unit 25 of the image display device 24 according to the second embodiment described above. An in-subject information acquisition system according to the fourth embodiment of the present invention includes an image display device 44 instead of the image display device 24 of the in-subject information acquisition system according to the second embodiment. In this case, the receiving device 3 sequentially stores in the portable recording medium 5 the received electric field strength when the image in the subject 1 is received instead of the above-described image receiving time. That is, in the third embodiment, the image in the subject 1, the ID information of the image sensor that has captured the image in the subject 1, and the received electric field strength of the image in the subject 1 are associated with each other. It is done. Other configurations are the same as those of the second embodiment, and the same components are denoted by the same reference numerals.

制御部４５は、上述した実施の形態２にかかる画像表示装置２４の制御部２５と略同様に、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。この場合、制御部４５は、カードＩ／Ｆ１３に挿着された携帯型記録媒体５から、被検体１内の画像群と、かかる被検体１内の画像群に含まれる各画像に対応付けられた撮像素子のＩＤ情報および各画像の受信電界強度とを取得する。なお、かかる画像の受信電界強度には、例えば受信装置３の受信アンテナ３ａ〜３ｈによって被検体内の画像を受信した際の上位３つ以上の受信電界強度が含まれる。制御部３５は、かかる被検体１内の画像群と撮像素子のＩＤ情報および画像の受信電界強度とを画像毎に対応付けて記憶部１４に保存する。   The control unit 45 controls the input unit 11, the display unit 12, the card I / F 13, and the storage unit 14 in substantially the same manner as the control unit 25 of the image display device 24 according to the second embodiment described above. Controls the input and output of information between components. In this case, the control unit 45 is associated with the image group in the subject 1 and each image included in the image group in the subject 1 from the portable recording medium 5 inserted in the card I / F 13. The ID information of the image sensor and the received electric field strength of each image are acquired. Note that the received electric field strength of the image includes, for example, the upper three or more received electric field strengths when the images in the subject are received by the receiving antennas 3a to 3h of the receiving device 3. The control unit 35 stores the image group in the subject 1, the ID information of the imaging element, and the received electric field strength of the image in the storage unit 14 in association with each image.

このような制御部３５は、上述した表示制御部１５ａを有し、実施の形態２にかかる画像表示装置２４の制御部２５の画像分類部２５ｂに代えて画像分類部４５ｂを有し、画像抽出部２５ｃに代えて画像抽出部４５ｃを有する。さらに、制御部３５は、画像の受信電界強度をもとに被検体内における撮像素子の撮像位置情報を検出する位置検出部４５ｄを有する。   Such a control unit 35 includes the display control unit 15a described above, and includes an image classification unit 45b instead of the image classification unit 25b of the control unit 25 of the image display device 24 according to the second embodiment. An image extraction unit 45c is provided instead of the unit 25c. Furthermore, the control unit 35 includes a position detection unit 45d that detects imaging position information of the imaging element in the subject based on the received electric field strength of the image.

画像分類部４５ｂは、上述した制御部２５の画像分類部２５ｂと同様に、各画像に対応付けられた撮像素子のＩＤ情報別に被検体１内の画像群を複数の画像群（例えば画像群ＰＧ１，ＰＧ２）に分類する。かかる画像分類部４５ｂによって分類された画像群内の各画像には、例えばカプセル型内視鏡２ａ，２ｂのいずれかの撮像素子のＩＤ情報と、受信装置３に受信された際の上位３つ以上の受信電界強度とがそれぞれ対応付けられる。   Similar to the image classification unit 25b of the control unit 25 described above, the image classification unit 45b converts an image group in the subject 1 into a plurality of image groups (for example, an image group PG1) according to ID information of the image sensor associated with each image. , PG2). Each image in the image group classified by the image classification unit 45b includes, for example, the ID information of one of the imaging devices of the capsule endoscopes 2a and 2b and the top three when received by the receiving device 3. The above received electric field strengths are associated with each other.

画像抽出部４５ｃは、入力部１１によって入力された画像群の選択情報と位置検出部４５ｄによって検出された撮像位置情報とをもとに、この選択情報に対応する被検体内の画像群（例えば画像群選択アイコン１０１，１０２によって選択された画像群ＰＧ１，ＰＧ２のいずれか）から、表示部１２の主表示領域１００の現表示画像に最も近似する関連画像を抽出する。この場合、画像抽出部４５ｃは、かかる選択情報に基づいて選定された画像群の中から、この画像群を撮像した撮像素子のＩＤ情報と現表示画像の撮像位置情報に最も近似する撮像位置情報とを特定情報として有する関連画像を決定し、この関連画像を抽出する。かかる画像抽出部４５ｃによって抽出された関連画像は、この現表示画像に代えて表示部１２の主表示領域１００に表示される。   The image extraction unit 45c is based on the image group selection information input by the input unit 11 and the imaging position information detected by the position detection unit 45d, and the image group in the subject corresponding to the selection information (for example, A related image that most closely approximates the current display image in the main display area 100 of the display unit 12 is extracted from any one of the image groups PG1 and PG2 selected by the image group selection icons 101 and 102. In this case, the image extraction unit 45c captures image position information that most closely approximates the ID information of the image sensor that captured the image group and the image position information of the current display image from the image group selected based on the selection information. Are determined as specific information, and the related images are extracted. The related image extracted by the image extraction unit 45c is displayed in the main display area 100 of the display unit 12 in place of the current display image.

位置検出部４５ｄは、被検体内に導入されたカプセル型内視鏡２ａ，２ｂの撮像位置情報を検出する位置検出手段として機能する。具体的には、位置検出部４５ｄは、画像群ＰＧ１内の各画像に対応付けられた受信電界強度をもとに、この画像群ＰＧ１を撮像したカプセル型内視鏡２ａの撮像素子の撮像位置情報を画像毎に検出する。位置検出部４５ｄは、この画像群ＰＧ１内の画像毎に検出した撮像素子の撮像位置情報を画像群ＰＧ１内の各画像にそれぞれ対応付ける。これと同様に、位置検出部４５ｄは、画像群ＰＧ２内の各画像に対応付けられた受信電界強度をもとに、この画像群ＰＧ２を撮像したカプセル型内視鏡２ｂの撮像素子の撮像位置情報を画像毎に検出する。位置検出部４５ｄは、この画像群ＰＧ２内の画像毎に検出した撮像素子の撮像位置情報を画像群ＰＧ２内の各画像にそれぞれ対応付ける。   The position detecting unit 45d functions as a position detecting unit that detects imaging position information of the capsule endoscopes 2a and 2b introduced into the subject. Specifically, the position detection unit 45d, based on the received electric field strength associated with each image in the image group PG1, captures the imaging position of the imaging element of the capsule endoscope 2a that captures the image group PG1. Information is detected for each image. The position detection unit 45d associates the imaging position information of the imaging element detected for each image in the image group PG1 with each image in the image group PG1. Similarly, the position detection unit 45d, based on the received electric field strength associated with each image in the image group PG2, captures the imaging position of the imaging element of the capsule endoscope 2b that images the image group PG2. Information is detected for each image. The position detection unit 45d associates the imaging position information of the imaging device detected for each image in the image group PG2 with each image in the image group PG2.

このような構成を有する制御部４５は、かかる画像分類部４５ｂによって撮像素子毎に分類された画像群ＰＧ１，ＰＧ２を記憶部１４のフォルダＦ１，Ｆ２にそれぞれ保存する。この場合、かかる記憶部１４に保存された画像群ＰＧ１，ＰＧ２内の各画像には、上述した撮像素子のＩＤ情報と位置検出部４５ｄによって検出された撮像位置情報とが対応付けられる。したがって、かかる画像群ＰＧ１，ＰＧ２内の各画像の特定情報は、かかる撮像素子のＩＤ情報と撮像位置情報とを組み合わせたものである。   The control unit 45 having such a configuration stores the image groups PG1 and PG2 classified for each image sensor by the image classification unit 45b in the folders F1 and F2 of the storage unit 14, respectively. In this case, each image in the image groups PG1 and PG2 stored in the storage unit 14 is associated with the ID information of the imaging element described above and the imaging position information detected by the position detection unit 45d. Therefore, the specific information of each image in the image groups PG1 and PG2 is a combination of the ID information of the image sensor and the imaging position information.

つぎに、被検体内の画像群に含まれる各画像に対応付けられた受信電界強度をもとに各画像の撮像位置情報を検出する位置検出部４５ｄの処理を説明する。図１７は、被検体内の画像の撮像位置情報を検出する位置検出部４５ｄの処理を説明するための模式図である。以下、図１７を参照しつつ、かかる位置検出部４５ｄの処理を説明する。   Next, the processing of the position detection unit 45d that detects the imaging position information of each image based on the received electric field strength associated with each image included in the image group in the subject will be described. FIG. 17 is a schematic diagram for explaining processing of the position detection unit 45d that detects imaging position information of an image in the subject. Hereinafter, the processing of the position detection unit 45d will be described with reference to FIG.

位置検出部４５ｄは、例えば、被検体１の臓器内部における位置座標と被検体１の体表上に分散配置された受信アンテナ３ａ〜３ｈの各位置座標とを規定する原点Ｏのｘｙ座標系を有する。位置検出部４５ｄは、画像群ＰＧ１，ＰＧ２内の各画像にそれぞれ対応付けられた上位３つ以上の受信電界強度をもとに、かかる上位３つ以上の受信電界強度の受信アンテナとカプセル型内視鏡２ａ，２ｂの撮像素子との距離を算出し、かかる３つ以上の受信アンテナと撮像素子との距離を用いた三角法に基づいて、各画像の撮像位置情報を検出する。   The position detection unit 45d uses, for example, an xy coordinate system of the origin O that defines the position coordinates inside the organ of the subject 1 and the position coordinates of the receiving antennas 3a to 3h distributed on the body surface of the subject 1. Have. Based on the upper three or more received electric field strengths respectively associated with the images in the image groups PG1 and PG2, the position detection unit 45d receives the upper three or more received electric field strengths and the capsule type The distance between the imaging devices of the endoscopes 2a and 2b is calculated, and the imaging position information of each image is detected based on the trigonometry using the distances between the three or more receiving antennas and the imaging device.

具体的には、位置検出部４５ｄは、例えば画像群ＰＧ１内の画像Ｐnに対応付けられた上位３つの受信電界強度Ｅ１，Ｅ２，Ｅ３を確認する。ここで、かかる上位３つの受信電界強度Ｅ１，Ｅ２，Ｅ３が、受信アンテナ３ａ，３ｂ，３ｄによってそれぞれ受信されたカプセル型内視鏡２ａからの無線信号の受信電界強度である場合、位置検出部４５ｄは、受信電界強度Ｅ１をもとに受信アンテナ３ａとカプセル型内視鏡２ａとの距離Ｌ１を算出し、受信電界強度Ｅ２をもとに受信アンテナ３ｂとカプセル型内視鏡２ａとの距離Ｌ２を算出し、受信電界強度Ｅ３をもとに受信アンテナ３ｄとカプセル型内視鏡２ａとの距離Ｌ３を算出する。 Specifically, the position detection unit 45d confirms the upper three received electric field strengths E1, E2, E3 associated with the image Pn in the image group PG1, for example. Here, when the upper three received electric field strengths E1, E2, E3 are the received electric field strengths of the radio signals from the capsule endoscope 2a received by the receiving antennas 3a, 3b, 3d, respectively, the position detector 45d calculates the distance L1 between the receiving antenna 3a and the capsule endoscope 2a based on the received electric field strength E1, and the distance between the receiving antenna 3b and the capsule endoscope 2a based on the received electric field strength E2. L2 is calculated, and a distance L3 between the receiving antenna 3d and the capsule endoscope 2a is calculated based on the received electric field strength E3.

なお、かかる受信アンテナ３ａとカプセル型内視鏡２ａとの距離Ｌ１は、受信電界強度Ｅ１の増大に伴って減少し、受信電界強度Ｅ１の減少に伴って増大する。このような受信電界強度と受信アンテナからカプセル内視鏡２ａまでの距離との関係は、受信電界強度Ｅ２と距離Ｌ２との間および受信電界強度Ｅ３と距離Ｌ３との間についても同様に成立する。   Note that the distance L1 between the receiving antenna 3a and the capsule endoscope 2a decreases as the received electric field strength E1 increases, and increases as the received electric field strength E1 decreases. Such a relationship between the received electric field strength and the distance from the receiving antenna to the capsule endoscope 2a is similarly established between the received electric field strength E2 and the distance L2 and between the received electric field strength E3 and the distance L3. .

位置検出部４５ｄは、このように算出した距離Ｌ１，Ｌ２，Ｌ３を用いた三角法に基づいて、受信アンテナ３ａ，３ｂ，３ｄからそれぞれ距離Ｌ１，Ｌ２，Ｌ３に位置するｘｙ座標系内の位置座標Ａn（ｘ，ｙ）を算出する。かかるｘｙ座標系内の位置座標Ａnは、被検体１の臓器内部の画像Ｐnを撮像した際のカプセル型内視鏡２ａの撮像素子の位置を示すものであり、この画像Ｐnの撮像位置情報である。位置検出部４５ｄは、このような位置座標Ａnを画像Ｐnの撮像位置情報として検出する。かかる画像Ｐnの撮像位置情報は、画像Ｐnに対応付けられて記憶部１４に保存される。 Based on the trigonometry using the distances L1, L2, and L3 calculated in this way, the position detection unit 45d is positioned in the xy coordinate system located at the distances L1, L2, and L3 from the receiving antennas 3a, 3b, and 3d, respectively. Coordinates A n (x, y) are calculated. Coordinates A n in accordance xy coordinate system, which indicates the position of the imaging device of the capsule endoscope 2a at the time of capturing the image P n of the inside of the organ of the subject 1, captured in the image P n Location information. Position detection unit 45d detects such coordinates A n as the imaging position information of the image P n. Image pickup position information of such images P n is stored associated with the image P n in the storage unit 14.

これと同様に、位置検出部４５ｄは、上位３つの受信電界強度の受信アンテナとカプセル型内視鏡２ｂとの各距離を用いた三角法に基づいて、被検体１の臓器内部の画像Ｑmを撮像した際のカプセル型内視鏡２ｂの撮像素子の位置座標Ｂm（ｘ，ｙ）を算出し、この位置座標Ｂmを画像Ｑmの撮像位置情報として検出する。かかる画像Ｑmの撮像位置情報は、画像Ｑmに対応付けられて記憶部１４に保存される。 Similarly, the position detection unit 45d, based on the trigonometry using the distances between the reception antennas with the highest three reception electric field strengths and the capsule endoscope 2b, the image Q m inside the organ of the subject 1 The position coordinate B m (x, y) of the image sensor of the capsule endoscope 2b when the image is picked up is calculated, and this position coordinate B m is detected as the imaging position information of the image Q m . Image pickup position information of the image-Q m are stored corresponding to the image Q m in the storage unit 14.

つぎに、複数の画像群ＰＧ１，ＰＧ２の中から選択された被検体１内の画像群に含まれる関連画像に主表示領域１００の現表示画像を切り替える制御を行う制御部４５の動作を説明する。図１８は、実施の形態４にかかる画像表示装置４４の制御部４５の処理手順を説明するフローチャートである。   Next, the operation of the control unit 45 that performs control for switching the current display image in the main display region 100 to the related image included in the image group in the subject 1 selected from the plurality of image groups PG1 and PG2 will be described. . FIG. 18 is a flowchart for explaining the processing procedure of the control unit 45 of the image display device 44 according to the fourth embodiment.

制御部４５は、上述した実施の形態２にかかる画像表示装置２４の制御部２５と略同様に、被検体１内の画像群ＰＧ１，ＰＧ２内の各画像を表示部１２の主表示領域１００に表示する制御を行い、画像群選択アイコン１０１，１０２によって主表示領域１００に表示すべき画像群（主表示の画像群）が選択された場合、この選択された画像群内の関連画像に主表示領域１００の現表示画像を切り替える制御を行う。この場合、制御部４５は、上述した画像の入力時間に代えて画像の撮像位置情報をもとに、この選択された画像群の中から、この現表示画像に最も近似する関連画像を決定する。   The control unit 45 assigns each image in the image groups PG1 and PG2 in the subject 1 to the main display region 100 of the display unit 12 in substantially the same manner as the control unit 25 of the image display device 24 according to the second embodiment described above. When display control is performed and an image group to be displayed in the main display area 100 (main display image group) is selected by the image group selection icons 101 and 102, main display is performed on related images in the selected image group. Control to switch the current display image in the area 100 is performed. In this case, the control unit 45 determines a related image that most closely approximates the current display image from the selected image group based on the image capturing position information instead of the image input time described above. .

すなわち、図１８に示すように、制御部４５は、上述したステップＳ２０１〜Ｓ２０４（図８を参照）と同様の処理手順を行い、被検体１内の複数の画像群（例えば画像群ＰＧ１，ＰＧ２）の中から主表示の画像群を選択し、画像表示指示ありの場合、この主表示の画像群に含まれる被検体内の画像を主表示領域１００に表示する制御を行う（ステップＳ４０１〜Ｓ４０４）。つぎに、制御部４５は、上述したステップＳ２０５，Ｓ２０６と同様の処理手順を行い、主表示領域１００の現表示画像を切り替える画像切替指示の有無を判断し（ステップＳ４０５）、画像切替指示ありの場合（ステップＳ４０５，Ｙｅｓ）、入力部１１によって入力された画像群の選択情報に特定される画像群を主表示の画像群に切り替える（ステップＳ４０６）。   That is, as shown in FIG. 18, the control unit 45 performs the same processing procedure as the above-described steps S201 to S204 (see FIG. 8), and a plurality of image groups (for example, image groups PG1 and PG2) in the subject 1. The main display image group is selected from the main display area 100, and when there is an image display instruction, control is performed to display the image in the subject included in the main display image group in the main display area 100 (steps S401 to S404). ). Next, the control unit 45 performs the same processing procedure as in steps S205 and S206 described above, determines whether or not there is an image switching instruction for switching the current display image in the main display area 100 (step S405), and has an image switching instruction. In the case (step S405, Yes), the image group specified by the image group selection information input by the input unit 11 is switched to the main display image group (step S406).

続いて、制御部４５は、この選択情報に対応する画像群内の各画像の特定情報と主表示領域１００の現表示画像の特定情報とをもとに、この現表示画像を最も近似な撮像位置情報の関連画像に切り替える制御を行う（ステップＳ４０７）。この場合、画像抽出部４５ｃは、主表示領域１００の現表示画像の特定情報に含まれる撮像位置情報と、この選択情報に対応する画像群内の各画像の撮像位置情報とを確認し、この選択情報に対応する画像群の中から、この現表示画像の撮像位置情報に最も近似する撮像位置情報を特定情報に含む画像を抽出する。かかる画像抽出部４５ｃによって抽出された画像は、この現表示画像に最も近似する関連画像であり、この選択情報に対応する撮像素子のＩＤ情報とこの現表示画像に最も近似する位置座標の撮像位置情報とを特定情報に含むものである。このようにして、画像抽出部４５ｃは、この現表示画像に最も近似する関連画像を決定する。表示制御部１５ａは、この現表示画像を、かかる画像抽出部４５ｃによって抽出された関連画像に切り替える制御を行う。これによって、主表示領域１００には、現在、この関連画像が表示されている。   Subsequently, the control unit 45 captures the current display image most closely based on the specific information of each image in the image group corresponding to the selection information and the specific information of the current display image in the main display area 100. Control to switch to the related image of the position information is performed (step S407). In this case, the image extraction unit 45c confirms the imaging position information included in the specific information of the current display image in the main display area 100 and the imaging position information of each image in the image group corresponding to the selection information. From the group of images corresponding to the selection information, an image is extracted that includes the imaging position information closest to the imaging position information of the current display image in the specific information. The image extracted by the image extraction unit 45c is a related image that most closely approximates the current display image, and the imaging position of the position coordinate that most closely approximates the ID information of the image sensor corresponding to the selection information and the current display image. Information is included in the specific information. In this way, the image extraction unit 45c determines a related image that is closest to the current display image. The display control unit 15a performs control to switch the current display image to a related image extracted by the image extraction unit 45c. As a result, the related image is currently displayed in the main display area 100.

その後、制御部４５は、上述したステップＳ２０８と同様に、現に主表示領域１００に表示されている画像（関連画像等）を含む主表示の画像群のフレーム番号を更新する（ステップＳ４０８）。そして、制御部４５は、上述したステップＳ２０９と同様に、主表示領域１００の画像の一時停止指示の有無を判断し（ステップＳ４０９）、一時停止指示ありの場合（ステップＳ４０９，Ｙｅｓ）、ステップＳ４０３に戻り、このステップＳ４０３以降の処理手順を繰り返す。   After that, the control unit 45 updates the frame number of the main display image group including the images (related images and the like) that are currently displayed in the main display area 100, similarly to step S208 described above (step S408). Then, similarly to step S209 described above, the control unit 45 determines whether or not there is an instruction to pause the image in the main display area 100 (step S409). If there is a pause instruction (step S409, Yes), step S403 is performed. Returning to step S403, the processing procedure after step S403 is repeated.

一方、制御部４５は、一時停止指示なしの場合（ステップＳ４０９，Ｎｏ）、上述したステップＳ２１０と同様に、主表示領域１００に被検体内の画像を表示する画像表示処理が終了したか否かを判断する（ステップＳ４１０）。制御部４５は、画像表示処理が終了していないと判断した場合（ステップＳ４１０，Ｎｏ）、ステップＳ４０４に戻り、このステップＳ４０４以降の処理手順を繰り返し、画像表示処理が終了したと判断した場合（ステップＳ４１０，Ｙｅｓ）、かかる被検体内の画像の画像表示処理を終了する。   On the other hand, when there is no pause instruction (No at Step S409), the control unit 45 determines whether or not the image display process for displaying the image in the subject in the main display area 100 is completed, similar to Step S210 described above. Is determined (step S410). When it is determined that the image display process has not ended (No at Step S410), the control unit 45 returns to Step S404, repeats the processing procedure after Step S404, and determines that the image display process has ended (Step S410). In step S410, Yes), the image display processing of the image in the subject is ended.

なお、制御部４５は、上述したステップＳ４０５において画像切替指示なしと判断した場合（ステップＳ４０５，Ｎｏ）、上述したステップＳ４０８に進み、このステップＳ４０８以降の処理手順を繰り返す。   When determining that there is no image switching instruction in step S405 described above (step S405, No), the control unit 45 proceeds to step S408 described above and repeats the processing procedure after step S408.

つぎに、カプセル型内視鏡２ａ，２ｂによって撮像された複数の画像群ＰＧ１，ＰＧ２に含まれる被検体１内の画像を表示部１２の主表示領域１００に表示する場合を例示して、現に主表示領域１００に表示されている現表示画像を別の画像群（選択ＧＵＩによって選択された画像群）内の関連画像に切り替える制御部４５の動作を具体的に説明する。図１９は、撮像位置情報を含む画像の特定情報をもとに主表示領域１００の現表示画像を別の画像群内の関連画像に切り替える制御部４５の動作を説明するための模式図である。   Next, an example of displaying images in the subject 1 included in the plurality of image groups PG1 and PG2 captured by the capsule endoscopes 2a and 2b in the main display area 100 of the display unit 12 will be described. The operation of the control unit 45 for switching the current display image displayed in the main display area 100 to a related image in another image group (an image group selected by the selection GUI) will be specifically described. FIG. 19 is a schematic diagram for explaining the operation of the control unit 45 that switches the current display image in the main display area 100 to a related image in another image group based on image specifying information including imaging position information. .

図１９に示すように、カプセル型内視鏡２ａの撮像素子によって撮像された画像群ＰＧ１内の各画像Ｐn（フレーム番号ｎ＝１，２，３，…）には、位置検出部４５ｄによって検出された撮像位置情報である位置座標Ａ1，Ａ2，Ａ3，Ａ4，Ａ5，Ａ6，Ａ7，・・・，Ａnがそれぞれ対応付けられている。一方、カプセル型内視鏡２ｂの撮像素子によって撮像された画像群ＰＧ２内の各画像Ｑm（フレーム番号ｍ＝１，２，３，…）には、位置検出部４５ｄによって検出された撮像位置情報である位置座標Ｂ1，Ｂ2，Ｂ3，Ｂ4，Ｂ5，Ｂ6，Ｂ7，・・・，Ｂnがそれぞれ対応付けられている。 As shown in FIG. 19, each image P n (frame number n = 1, 2, 3,...) In the image group PG1 imaged by the imaging element of the capsule endoscope 2a is detected by the position detection unit 45d. Position coordinates A 1 , A 2 , A 3 , A 4 , A 5 , A 6 , A 7 ,..., An that are detected imaging position information are associated with each other. On the other hand, in each image Q m (frame number m = 1, 2, 3,...) In the image group PG2 imaged by the imaging device of the capsule endoscope 2b, the imaging position detected by the position detection unit 45d. the position coordinates B 1 is information, B 2, B 3, B 4, B 5, B 6, B 7, ···, B n are respectively associated.

ここで、表示部１２の主表示領域１００には、現在、この画像群ＰＧ１に含まれる被検体１内の画像Ｐnのうちの例えば画像Ｐ7が表示されている。この場合、主表示領域１００の現表示画像である画像Ｐ7を含む画像群ＰＧ１は、主表示領域１００に表示される表示処理対称の画像群（すなわち主表示の画像群）である。また、かかる主表示領域１００の画像Ｐ7は、カプセル型内視鏡２ａの撮像素子のＩＤ情報と撮像位置情報である位置座標Ａ7とが特定情報として対応付けられている。 Here, the main display area 100 of the display unit 12, now, for example, the image P 7 in the image P n of the subject 1 are displayed included in the image group PG1. In this case, the image group PG1 including the image P 7 is a currently displayed image in the main display area 100 is an image group of the display process symmetric to be displayed on the main display area 100 (i.e. the main display image group). Further, in the image P 7 of the main display area 100, ID information of the imaging element of the capsule endoscope 2a and position coordinates A 7 that are imaging position information are associated as specific information.

この状態において、上述した画像群選択アイコン１０２のクリック操作が行われ、入力部１１が、画像群ＰＧ２に対応する選択情報を制御部４５に入力した場合、制御部４５は、この画像群ＰＧ２に対応する選択情報をもとに、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。具体的には、かかる画像群ＰＧ２に対応する選択情報が例えばカプセル型内視鏡２ｂの撮像素子のＩＤ情報であり、表示制御部１５ａは、記憶部１４に保存された複数の画像群ＰＧ１，ＰＧ２の中から、かかる選択情報によって特定されるカプセル型内視鏡２ｂの撮像素子に撮像された画像群ＰＧ２を主表示の画像群に選定する。このようにして、表示制御部１５ａは、主表示の画像群を現在の画像群ＰＧ１から画像群ＰＧ２に切り替える。   In this state, when the click operation of the image group selection icon 102 described above is performed and the input unit 11 inputs selection information corresponding to the image group PG2 to the control unit 45, the control unit 45 adds the information to the image group PG2. Based on the corresponding selection information, the main display image group is switched from the current image group PG1 to the image group PG2. Specifically, the selection information corresponding to the image group PG2 is, for example, ID information of the imaging element of the capsule endoscope 2b, and the display control unit 15a includes a plurality of image groups PG1, PG1, which are stored in the storage unit 14. From PG2, the image group PG2 imaged by the imaging element of the capsule endoscope 2b specified by the selection information is selected as the main display image group. In this way, the display control unit 15a switches the main display image group from the current image group PG1 to the image group PG2.

つぎに、制御部４５は、かかる画像群選択アイコン１０２によって選択された画像群ＰＧ２内の各画像の特定情報と、現に主表示領域１００に表示されている画像Ｐ7の特定情報とをもとに、この現表示画像である画像Ｐ7に最も近似する画像群ＰＧ２内の関連画像を決定し、この現表示画像を関連画像に切り替える制御を行う。この場合、画像抽出部４５ｃは、この選択された画像群ＰＧ２内の各画像（Ｑ1，Ｑ2，Ｑ3，Ｑ4，Ｑ5，Ｑ6，Ｑ7，…，Ｑm）の撮像位置情報（位置座標Ｂ1，Ｂ2，Ｂ3，Ｂ4，Ｂ5，Ｂ6，Ｂ7，・・・，Ｂm）と、この現表示画像である画像Ｐ7の撮像位置情報（位置座標Ａ7）とを確認する。そして、画像抽出部４５ｃは、この画像Ｐ7の撮像位置情報である位置座標Ａ7に最も近似する位置座標Ｂ7を撮像位置情報として有する画像Ｑ7をこの画像Ｐ7に最も近似する関連画像に決定する。画像抽出部４５ｃは、このように画像Ｐ7の関連画像に決定した画像Ｑ7を画像群ＰＧ２から抽出する。この場合、表示制御部１５ａは、主表示領域１００の現表示画像を画像Ｐ7から画像Ｑ7（すなわち画像Ｐ7の関連画像）に切り替える制御を行う。 Original Next, the control unit 45, the specific information for each image in the image group PG2 selected by the image group selection icon 102, and the specific information of the image P 7 being displayed currently on the main display area 100 to, to determine the relevant image in the image group in PG2 most similar to the image P 7 is the currently displayed image, performs control to switch the currently displayed image to the relevant image. In this case, the image extraction unit 45c captures images of the images (Q 1 , Q 2 , Q 3 , Q 4 , Q 5 , Q 6 , Q 7 ,..., Q m ) in the selected image group PG2. Information (position coordinates B 1 , B 2 , B 3 , B 4 , B 5 , B 6 , B 7 ,..., B m ) and imaging position information (position coordinates) of this current display image P 7 to confirm the a 7). Then, the image extracting unit 45c, the relevant image that best approximates the image Q 7 having position coordinates B 7 most approximate to the position coordinates A 7 is an imaging position information of the image P 7 as image pickup position information to the image P 7 To decide. Image extracting unit 45c extracts thus the image Q 7 determined the relevant image in the image P 7 from the image group PG2. In this case, the display control unit 15a performs control for switching to the image Q 7 (i.e. related image of the image P 7) the current display image of the main display area 100 from the image P 7.

ここで、このような現表示画像と関連画像との関係にある画像Ｐ7，Ｑ7は、互いに近似する画像同士であって、例えば、被検体１の同一臓器内において略同じ部位が撮像された画像同士、互いに前後または対向する位置関係にある近傍の部位が撮像された画像同士である。このように現表示画像とその関連画像とを切り替えて主表示領域１００に表示することによって、被検体１内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、この結果、被検体１の臓器内を詳細に観察することができる。 Here, the images P 7 and Q 7 having the relationship between the current display image and the related image are images that are similar to each other, and for example, substantially the same part is imaged in the same organ of the subject 1. These images are images obtained by capturing images of neighboring parts that are in a positional relationship in front of or behind each other. By switching the current display image and its related image and displaying them in the main display area 100 in this way, it is possible to easily observe each image that approximates each other among a plurality of image groups in the subject 1, As a result, the inside of the organ of the subject 1 can be observed in detail.

以上、説明したように、本発明の実施の形態４では、複数の撮像素子によって撮像された被検体内の画像群に含まれる各画像の撮像位置情報を検出し、かかる撮像素子毎に分類した被検体内の複数の画像群と、かかる撮像位置情報を含む各画像の特定情報とを記憶部に保存し、かかる複数の画像群の中から表示部の主表示領域に表示すべき画像群を選択ＧＵＩによって選択した場合、この選択した画像群内の画像であって、この主表示領域に現在表示されている現表示画像の撮像位置情報に最も近似する撮像位置情報の画像を、この現表示画像に最も近似する関連画像に決定し、この現表示画像をこの関連画像に切り替えるように構成している。このため、上述した実施の形態２の場合と同様に、選択ＧＵＩを用いた容易な操作によって、かかる複数の画像群の間で互いに近似する画像同士を主表示領域に切り替えて表示できるとともに、被検体内の画像を順次撮像する複数の撮像素子の間に、被検体の臓器内部を移動する際の移動速度または被検体内の画像を撮像する際のフレームレートに差がある場合であっても、選択された画像群の中から現表示画像に最も近似する関連画像を確実に抽出することができる。この結果、上述した実施の形態２と同様の作用効果を享受するとともに、現表示画像をその関連画像に確実に切り替えることが可能な画像表示装置を実現することができる。   As described above, in the fourth embodiment of the present invention, the imaging position information of each image included in the image group in the subject imaged by the plurality of imaging elements is detected and classified for each imaging element. A plurality of image groups in the subject and specific information of each image including the imaging position information are stored in the storage unit, and an image group to be displayed in the main display area of the display unit is selected from the plurality of image groups. When selected by the selection GUI, an image of the imaging position information that is the image in the selected image group and that is closest to the imaging position information of the current display image currently displayed in the main display area is displayed in the current display. The related image closest to the image is determined, and the current display image is switched to the related image. For this reason, as in the case of the second embodiment described above, images that are close to each other among the plurality of image groups can be switched and displayed in the main display area by an easy operation using the selection GUI. Even when there is a difference in the moving speed when moving inside the organ of the subject or the frame rate when capturing the image inside the subject, between the plurality of imaging elements that sequentially capture the images in the subject Thus, it is possible to reliably extract the related image closest to the current display image from the selected image group. As a result, it is possible to realize an image display apparatus that can enjoy the same operational effects as those of the second embodiment described above and can reliably switch the current display image to the related image.

（実施の形態５）
つぎに、本発明の実施の形態５について説明する。上述した実施の形態１では、主表示領域１００の現表示画像を最も近似する関連画像に切り替えていたが、この実施の形態５では、表示部１２のウィンドウＷ内に複数の主表示領域を形成し、被検体内の複数の画像群の間で互いに最も近似する関連画像同士を複数の主表示領域にそれぞれ同時に表示するように構成している。 (Embodiment 5)
Next, a fifth embodiment of the present invention will be described. In the first embodiment described above, the current display image in the main display area 100 is switched to the closest related image. In the fifth embodiment, a plurality of main display areas are formed in the window W of the display unit 12. In addition, related images that are closest to each other among a plurality of image groups in the subject are simultaneously displayed in a plurality of main display areas.

図２０は、本発明の実施の形態５にかかる画像表示装置の一構成例を模式的に示すブロック図である。図２０に示すように、この実施の形態５にかかる画像表示装置５４は、上述した実施の形態１にかかる画像表示装置４の制御部１５に代えて制御部５５を有する。また、本発明の実施の形態５にかかる被検体内情報取得システムは、上述した実施の形態１にかかる被検体内情報取得システム（図１を参照）の画像表示装置４に代えて画像表示装置５４を有する。その他の構成は実施の形態１と同じであり、同一構成部分には同一符号を付している。   FIG. 20 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fifth embodiment of the present invention. As illustrated in FIG. 20, the image display device 54 according to the fifth embodiment includes a control unit 55 instead of the control unit 15 of the image display device 4 according to the first embodiment described above. An in-subject information acquisition system according to the fifth embodiment of the present invention is an image display device instead of the image display device 4 of the in-subject information acquisition system (see FIG. 1) according to the first embodiment described above. 54. Other configurations are the same as those of the first embodiment, and the same reference numerals are given to the same components.

制御部５５は、上述した実施の形態１にかかる画像表示装置４の制御部１５と略同様に、入力部１１、表示部１２、カードＩ／Ｆ１３、および記憶部１４をそれぞれ制御し、かかる各構成部間の情報の入出力を制御する。この場合、制御部５５は、被検体１内の複数の画像群（例えば上述した画像群ＰＧ１，ＰＧ２）に含まれる各画像を画像群別にそれぞれ表示する複数の主表示領域を表示部１２のウィンドウＷ内に形成し、かかる複数の主表示領域に、被検体１内の複数の画像群の間で互いに最も近似する関連画像同士（すなわち複数の関連画像）を同時に表示する制御を行う。このような制御部５５は、上述した画像分類部１５ｂおよび画像抽出部１５ｃを有し、実施の形態１にかかる画像表示装置４の制御部１５の表示制御部１５ａに代えて表示制御部５５ａを有する。   The control unit 55 controls the input unit 11, the display unit 12, the card I / F 13, and the storage unit 14 in substantially the same manner as the control unit 15 of the image display device 4 according to the first embodiment described above. Controls the input and output of information between components. In this case, the control unit 55 displays a plurality of main display areas for displaying each image included in a plurality of image groups in the subject 1 (for example, the above-described image groups PG1 and PG2) for each image group. Control is performed to simultaneously display related images (that is, a plurality of related images) that are most similar to each other among the plurality of image groups in the subject 1 in the plurality of main display areas. Such a control unit 55 includes the image classification unit 15b and the image extraction unit 15c described above, and includes a display control unit 55a instead of the display control unit 15a of the control unit 15 of the image display apparatus 4 according to the first embodiment. Have.

表示制御部５５ａは、被検体１内の複数の画像群に含まれる各画像を画像群別にそれぞれ表示する複数の主表示領域（後述する主表示領域１００ａ，１００ｂ）を表示部１２のウィンドウＷ内に形成する。表示制御部５５ａは、かかる複数の主表示領域のそれぞれに、被検体１内の複数の画像群に含まれる各画像を画像群別に並べて順次表示する制御を行う。この場合、表示制御部５５ａは、かかる複数の画像群の間で互いに最も近似する画像同士、すなわち、かかる複数の画像群からそれぞれ抽出した各関連画像を複数の主表示領域のそれぞれに同時に表示する制御を行う。   The display control unit 55a displays a plurality of main display areas (main display areas 100a and 100b described later) in the window W of the display unit 12 for displaying each image included in the plurality of image groups in the subject 1 for each image group. To form. The display control unit 55a performs control for sequentially displaying each of the images included in the plurality of image groups in the subject 1 by arranging them in each of the plurality of main display areas. In this case, the display control unit 55a simultaneously displays the images that are closest to each other among the plurality of image groups, that is, the related images extracted from the plurality of image groups, in each of the plurality of main display areas. Take control.

つぎに、表示部１２の具体的な表示態様を例示して、被検体１内の画像群ＰＧ１，ＰＧ２に含まれる各画像を画像群別に並べて表示する複数の主表示領域を説明する。図２１は、被検体内の画像を画像群別に並べて表示する複数の主表示領域が形成された表示部１２のウィンドウＷを例示する模式図である。図２１に示すように、この実施の形態５にかかる画像表示装置５４の表示部１２に表示されるウィンドウＷには、上述した実施の形態１の場合の主表示領域１００に代えて複数の主表示領域１００ａ，１００ｂが形成され、上述した画像群選択アイコン１０１，１０２が形成されない。かかるウィンドウＷの他の構成は実施の形態１と同じであり、同一構成部分には同一符号を付している。   Next, a specific display mode of the display unit 12 will be exemplified to describe a plurality of main display areas in which the images included in the image groups PG1 and PG2 in the subject 1 are displayed side by side by image group. FIG. 21 is a schematic view illustrating the window W of the display unit 12 in which a plurality of main display regions for displaying images in the subject side by side for each image group are displayed. As shown in FIG. 21, a window W displayed on the display unit 12 of the image display device 54 according to the fifth embodiment includes a plurality of main display areas in place of the main display area 100 in the first embodiment described above. Display areas 100a and 100b are formed, and the above-described image group selection icons 101 and 102 are not formed. Other configurations of the window W are the same as those of the first embodiment, and the same components are denoted by the same reference numerals.

複数の主表示領域１００ａ，１００ｂは、被検体１内の複数の画像群ＰＧ１，ＰＧ２に含まれる各画像を画像群別に並べて表示する表示手段として機能する。具体的には、主表示領域１００ａは、かかる複数の画像群のうちの画像群ＰＧ１内の各画像を表示する。この場合、主表示領域１００ａは、例えば図２１に示すように、画像群ＰＧ１内で連続する複数の画像Ｐn-1，Ｐnを順次表示する。なお、かかる主表示領域１００ａの近傍には、表示対象の画像群ＰＧ１を撮像した撮像素子（カプセル型内視鏡２ａの撮像素子）を示す情報（例えば「第１撮像素子」等）が表示される。 The plurality of main display areas 100a and 100b function as display means for displaying the images included in the plurality of image groups PG1 and PG2 in the subject 1 side by side for each image group. Specifically, the main display area 100a displays each image in the image group PG1 among the plurality of image groups. In this case, as shown in FIG. 21, for example, the main display area 100a sequentially displays a plurality of images P n−1 and P n that are continuous in the image group PG1. In the vicinity of the main display area 100a, information (for example, “first image sensor” or the like) indicating an image sensor (image sensor of the capsule endoscope 2a) that images the image group PG1 to be displayed is displayed. The

主表示領域１００ｂは、かかる複数の画像群のうちの画像群ＰＧ２内の各画像を表示する。この場合、主表示領域１００ｂは、例えば図２１に示すように、画像群ＰＧ２内で連続する複数の画像Ｑm-1，Ｑmを順次表示する。なお、かかる主表示領域１００ｂの近傍には、表示対象の画像群ＰＧ２を撮像した撮像素子（カプセル型内視鏡２ｂの撮像素子）を示す情報（例えば「第２撮像素子」等）が表示される。 The main display area 100b displays each image in the image group PG2 among the plurality of image groups. In this case, as shown in FIG. 21, for example, the main display region 100b sequentially displays a plurality of images Q m−1 and Q m that are continuous in the image group PG2. In the vicinity of the main display area 100b, information (for example, “second image sensor” or the like) indicating the image sensor (image sensor of the capsule endoscope 2b) that images the image group PG2 to be displayed is displayed. The

このような複数の主表示領域１００ａ，１００ｂは、表示制御部５５ａの制御に基づいて、画像群ＰＧ１，ＰＧ２の間で最も近似する関連画像同士を並べて同期表示する。例えば図２１に示すように、主表示領域１００ａに画像群ＰＧ１内の画像Ｐn-1，Ｐnが表示され、主表示領域１００ｂに画像群ＰＧ２内の画像Ｑm-1，Ｑmが表示された場合、かかる主表示領域１００ａの現表示画像である画像Ｐnと、この画像Ｐnに並んで主表示領域１００ｂに同期表示された現表示画像である画像Ｑmとが、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士である。これと同様に、かかる主表示領域１００ａの現表示画像である画像Ｐn-1と、この画像Ｐn-1に並んで主表示領域１００ｂに同期表示された現表示画像である画像Ｑm-1とが、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士である。 The plurality of main display areas 100a and 100b display the related images that are closest to each other between the image groups PG1 and PG2 and display them synchronously under the control of the display control unit 55a. For example, as shown in FIG. 21, images P n−1 and P n in the image group PG1 are displayed in the main display area 100a, and images Q m−1 and Q m in the image group PG2 are displayed in the main display area 100b. If it is, according the image P n is the current display image of the main display area 100a, the image Q m is a current display image displayed synchronized to the main display area 100b arranged in the image P n is, the image group PG1 , PG2 are related images that are closest to each other. Similarly, an image P n−1 that is the current display image of the main display area 100a and an image Q m− that is the current display image that is displayed in synchronization with the main display area 100b along with the image P n−1. 1 is the related images that are closest to each other between the image groups PG1 and PG2.

つぎに、複数の画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士を画像群別の主表示領域１００ａ，１００ｂに並べて同期表示する制御を行う制御部５５の動作を説明する。図２２は、実施の形態５にかかる画像表示装置５４の制御部５５の処理手順を説明するフローチャートである。   Next, an operation of the control unit 55 that performs control to display the related images that are closest to each other between the plurality of image groups PG1 and PG2 in the main display areas 100a and 100b for each image group and display them synchronously will be described. FIG. 22 is a flowchart for explaining the processing procedure of the control unit 55 of the image display device 54 according to the fifth embodiment.

図２２に示すように、制御部５５は、まず、主表示領域１００ａ，１００ｂに表示する被検体１の画像群ＰＧ１，ＰＧ２の各フレーム番号を初期化する（ステップＳ５０１）。この場合、表示制御部５５ａは、主表示領域１００ａに表示すべき画像群ＰＧ１のフレーム番号ｎを例えば“１”に初期化し、主表示領域１００ｂに表示すべき画像群ＰＧ２のフレーム番号ｍを例えば“１”に初期化する。   As shown in FIG. 22, the control unit 55 first initializes the frame numbers of the image groups PG1 and PG2 of the subject 1 displayed in the main display areas 100a and 100b (step S501). In this case, the display control unit 55a initializes the frame number n of the image group PG1 to be displayed in the main display area 100a to “1”, for example, and sets the frame number m of the image group PG2 to be displayed in the main display area 100b to, for example, Initialize to “1”.

つぎに、制御部５５は、上述したステップＳ１０３と同様に、主表示領域１００ａ，１００ｂに対する画像表示指示の有無を判断する（ステップＳ５０２）。この場合、表示制御部５５ａは、上述した表示指示情報が入力部１１によって入力されなければ、主表示領域１００ａ，１００ｂに対する画像表示指示なしと判断し、上述した表示指示情報が入力部１１によって入力されれば、主表示領域１００ａ，１００ｂに対する画像表示指示ありと判断する。制御部５５は、主表示領域１００ａ，１００ｂに対する画像表示指示なしと判断した場合（ステップＳ５０２，Ｎｏ）、このステップＳ５０２を繰り返す。   Next, similarly to step S103 described above, the control unit 55 determines whether there is an image display instruction for the main display areas 100a and 100b (step S502). In this case, if the display instruction information described above is not input by the input unit 11, the display control unit 55 a determines that there is no image display instruction for the main display regions 100 a and 100 b, and the display instruction information described above is input by the input unit 11. Then, it is determined that there is an image display instruction for the main display areas 100a and 100b. When the control unit 55 determines that there is no image display instruction for the main display areas 100a and 100b (No in step S502), the control unit 55 repeats step S502.

制御部５５は、主表示領域１００ａ，１００ｂに対する画像表示指示ありと判断した場合（ステップＳ５０２，Ｙｅｓ）、画像群ＰＧ１，ＰＧ２内の現フレーム番号の各関連画像を主表示領域１００ａ，１００ｂに同期表示する制御を行う（ステップＳ５０３）。この場合、画像抽出部１５ｃは、上述した画像の入力番号をもとに、画像群ＰＧ１内の現フレーム番号の画像に最も近似する関連画像を画像群ＰＧ２の中から抽出する。表示制御部５５ａは、入力部１１によって入力された表示指示情報（再生指示またはコマ再生指示等）に基づいて、画像群ＰＧ１内の現フレーム番号の画像を主表示領域１００ａに表示する制御を行うとともに、かかる画像抽出部１５ｃによって抽出された画像群ＰＧ２内の関連画像（すなわち画像群ＰＧ１内の現フレーム番号の画像に最も近似する関連画像）を主表示領域１００ｂに表示する制御を行う。このようにして、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士（現フレーム番号の各関連画像）が、主表示領域１００ａ，１００ｂに並んで同期表示される。   When the control unit 55 determines that there is an image display instruction for the main display areas 100a and 100b (step S502, Yes), the related images of the current frame numbers in the image groups PG1 and PG2 are synchronized with the main display areas 100a and 100b. Display control is performed (step S503). In this case, the image extraction unit 15c extracts, from the image group PG2, a related image that most closely approximates the image of the current frame number in the image group PG1, based on the input number of the image described above. The display control unit 55a performs control to display the image of the current frame number in the image group PG1 in the main display area 100a based on the display instruction information (reproduction instruction or frame reproduction instruction or the like) input by the input unit 11. At the same time, the related image in the image group PG2 extracted by the image extraction unit 15c (that is, the related image closest to the image of the current frame number in the image group PG1) is displayed in the main display area 100b. In this way, related images that are closest to each other between the image groups PG1 and PG2 (relevant images of the current frame number) are synchronously displayed side by side in the main display areas 100a and 100b.

続いて、制御部５５は、画像群ＰＧ１，ＰＧ２内の次のフレーム番号の各関連画像を主表示領域１００ａ，１００ｂに同期表示する制御を行う（ステップＳ５０４）。この場合、画像抽出部１５ｃは、上述した画像の入力番号をもとに、画像群ＰＧ１内の次のフレーム番号の画像に最も近似する関連画像を画像群ＰＧ２の中から抽出する。表示制御部５５ａは、画像群ＰＧ１内の次のフレーム番号の画像を主表示領域１００ａに表示する制御を行うとともに、かかる画像抽出部１５ｃによって抽出された画像群ＰＧ２内の関連画像（すなわち画像群ＰＧ１内の次のフレーム番号の画像に最も近似する関連画像）を主表示領域１００ｂに表示する制御を行う。このようにして、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士（次のフレーム番号の各関連画像）が、主表示領域１００ａ，１００ｂに並んで同期表示される。   Subsequently, the control unit 55 performs control to synchronously display each related image of the next frame number in the image groups PG1 and PG2 in the main display areas 100a and 100b (step S504). In this case, the image extraction unit 15c extracts, from the image group PG2, a related image that most closely approximates the image of the next frame number in the image group PG1 based on the input number of the image described above. The display control unit 55a performs control to display the image of the next frame number in the image group PG1 in the main display area 100a, and also related images (that is, the image group) in the image group PG2 extracted by the image extraction unit 15c. Control is performed to display the related image closest to the image of the next frame number in PG1 in the main display area 100b. In this way, related images that are closest to each other between the image groups PG1 and PG2 (respective related images of the next frame number) are synchronously displayed side by side in the main display areas 100a and 100b.

つぎに、制御部５５は、主表示領域１００ａ，１００ｂに表示する画像群ＰＧ１，ＰＧ２の各フレーム番号を更新する（ステップＳ５０５）。この場合、表示制御部５５ａは、現に主表示領域１００ａに表示している画像群ＰＧ１内の画像のフレーム番号に＋１を加算することによって、かかる画像群ＰＧ１のフレーム番号を更新する。これと同様に、表示制御部５５ａは、現に主表示領域１００ｂに表示している画像群ＰＧ２内の画像のフレーム番号に＋１を加算することによって、かかる画像群ＰＧ２のフレーム番号を更新する。   Next, the control unit 55 updates the frame numbers of the image groups PG1 and PG2 displayed in the main display areas 100a and 100b (step S505). In this case, the display control unit 55a updates the frame number of the image group PG1 by adding +1 to the frame number of the image in the image group PG1 that is currently displayed in the main display area 100a. Similarly, the display control unit 55a updates the frame number of the image group PG2 by adding +1 to the frame number of the image in the image group PG2 that is currently displayed in the main display area 100b.

その後、制御部５５は、上述したステップＳ１０９と同様に、主表示領域１００ａ，１００ｂの各画像の一時停止指示の有無を判断し（ステップＳ５０６）、一時停止指示ありの場合（ステップＳ５０６，Ｙｅｓ）、ステップＳ５０２に戻り、このステップＳ５０２以降の処理手順を繰り返す。   After that, the control unit 55 determines whether or not there is a pause instruction for each image in the main display areas 100a and 100b (step S506), as in step S109 described above, and if there is a pause instruction (Yes in step S506). Returning to step S502, the processing procedure after step S502 is repeated.

一方、制御部５５は、一時停止指示なしの場合（ステップＳ５０６，Ｎｏ）、主表示領域１００ａ，１００ｂに被検体内の関連画像同士を同期表示する画像表示処理が終了したか否かを判断する（ステップＳ５０７）。具体的には、制御部５５は、上述したステップＳ５０５において更新した画像群ＰＧ１のフレーム番号が画像群ＰＧ１のフレーム数を超えた場合、または、上述したステップＳ５０５において更新した画像群ＰＧ２のフレーム番号が画像群ＰＧ２のフレーム数を超えた場合、画像表示処理が終了したと判断し（ステップＳ５０７，Ｙｅｓ）、かかる主表示領域１００ａ，１００ｂに対する画像表示処理を終了する。一方、制御部５５は、上述したステップＳ５０５において更新した画像群ＰＧ１のフレーム番号が画像群ＰＧ１のフレーム数以下であり、且つ、上述したステップＳ５０５において更新した画像群ＰＧ２のフレーム番号が画像群ＰＧ２のフレーム数以下である場合、画像表示処理が終了していないと判断し（ステップＳ５０７，Ｎｏ）、ステップＳ５０３に戻り、このステップＳ５０３以降の処理手順を繰り返す。   On the other hand, when there is no pause instruction (No in step S506), the control unit 55 determines whether or not the image display process for synchronously displaying the related images in the subject in the main display areas 100a and 100b is completed. (Step S507). Specifically, when the frame number of the image group PG1 updated in step S505 described above exceeds the number of frames of the image group PG1, or the frame number of the image group PG2 updated in step S505 described above. When the number of frames exceeds the number of frames of the image group PG2, it is determined that the image display process has ended (step S507, Yes), and the image display process for the main display areas 100a and 100b is ended. On the other hand, the control unit 55 determines that the frame number of the image group PG1 updated in step S505 described above is equal to or less than the number of frames of the image group PG1, and the frame number of the image group PG2 updated in step S505 described above is the image group PG2. If the number of frames is equal to or less than the number of frames, it is determined that the image display process has not ended (step S507, No), the process returns to step S503, and the processing procedure after step S503 is repeated.

つぎに、カプセル型内視鏡２ａ，２ｂによって撮像された複数の画像群ＰＧ１，ＰＧ２に含まれる被検体１内の各画像を画像群別に主表示領域１００ａ，１００ｂに表示する場合を例示して、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士を主表示領域１００ａ，１００ｂに並べて同期表示する制御を行う制御部５５の動作を具体的に説明する。図２３は、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士を主表示領域１００ａ，１００ｂに並べて同期表示する制御を行う制御部５５の動作を説明するための模式図である。   Next, the case where each image in the subject 1 included in the plurality of image groups PG1 and PG2 captured by the capsule endoscopes 2a and 2b is displayed in the main display areas 100a and 100b for each image group is illustrated. The operation of the control unit 55 that performs control to display the related images that are closest to each other between the image groups PG1 and PG2 in the main display areas 100a and 100b and synchronously display them will be specifically described. FIG. 23 is a schematic diagram for explaining the operation of the control unit 55 that performs control to display the related images that are closest to each other between the image groups PG1 and PG2 in the main display areas 100a and 100b and display them synchronously.

制御部５５は、画像群ＰＧ１内の画像Ｐ1，Ｐ2，Ｐ3，…を主表示領域１００ａに順次表示する制御を行い、これと同時に、画像群ＰＧ２内の画像Ｑ1，Ｑ2，Ｑ3，…を主表示領域１００ｂに順次表示する制御を行う。ここで、主表示領域１００ａに画像群ＰＧ１内の画像Ｐ6が現フレーム番号の画像として表示される場合、画像抽出部１５ｃは、画像の入力番号をもとに、この現フレーム番号の画像Ｐ6に最も近似する画像Ｑ6を画像群ＰＧ２の中から抽出する。表示制御部５５ａは、この現フレーム番号の画像Ｐ6を主表示領域１００ａに表示する制御を行うとともに、かかる画像抽出部１５ｃによって抽出された画像Ｑ6（すなわち画像Ｐ6の関連画像）を主表示領域１００ｂに表示する制御を行う。かかる表示制御部５５ａの制御によって、主表示領域１００ａ，１００ｂには、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士の一例である画像Ｐ6，Ｑ6が並んで同期表示される。 The control unit 55 performs control to sequentially display the images P 1 , P 2 , P 3 ,... In the image group PG1 in the main display area 100a, and at the same time, the images Q 1 , Q 2 ,. Control for sequentially displaying Q 3 ,... In the main display area 100b is performed. Here, if the main display area 100a image P 6 in image group PG1 is displayed as an image of the current frame number, the image extracting unit 15c, based on the input number of images, the image P of the current frame number extracting the image Q 6 most approximate to 6 from the image group PG2. The display control unit 55a, as well as performs control to display the image P 6 of the current frame number in the main display area 100a, the image Q 6 are extracted by the image extracting unit 15c (i.e. associated image of the image P 6) Main Control to display in the display area 100b is performed. The control of the display control unit 55a, the main display area 100a, the 100b, are displayed synchronized alongside the image P 6, Q 6 is an example of the related image among most similar to each other among the image group PG1, PG2 is .

さらに、主表示領域１００ａに画像群ＰＧ１内の画像Ｐ7が次のフレーム番号の画像として追加表示される場合、画像抽出部１５ｃは、画像の入力番号をもとに、現フレーム番号の画像Ｐ6の次のフレーム番号の画像Ｐ7に最も近似する画像Ｑ7を画像群ＰＧ２の中から抽出する。表示制御部５５ａは、この画像Ｐ7を主表示領域１００ａに追加表示する制御を行うとともに、かかる画像抽出部１５ｃによって抽出された画像Ｑ7（すなわち画像Ｐ7の関連画像）を主表示領域１００ｂに追加表示する制御を行う。かかる表示制御部５５ａの制御によって、主表示領域１００ａ，１００ｂには、上述した画像Ｐ6，Ｑ6に追加して、画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士の一例である画像Ｐ7，Ｑ7が並んで同期表示される。 Further, when the image P 7 in the main display image group PG1 to the region 100a is additionally displayed as the image of the next frame number, the image extracting unit 15c, based on the input number of images, the image P of the current frame number An image Q 7 that is closest to the image P 7 of the next frame number 6 is extracted from the image group PG2. The display control unit 55a, as well as performs control additionally displays the image P 7 in the main display area 100a, the image Q 7 extracted by the image extracting unit 15c (i.e. associated image of the image P 7) main display area 100b of Performs additional display control. The control of the display control unit 55a, the main display area 100a, the 100b, in addition to the image P 6, Q 6 as described above, is an example of the related image among most similar to each other among the image group PG1, PG2 The images P 7 and Q 7 are displayed synchronously side by side.

かかる主表示領域１００ａ，１００ｂに並んで同期表示された画像Ｐ6，Ｑ6は、上述したように互いに近似する関連画像同士である。同様に、かかる主表示領域１００ａ，１００ｂに並んで同期表示された画像Ｐ7，Ｑ7は、上述したように互いに近似する関連画像同士である。かかる関連画像同士は、例えば、被検体１の同一臓器内において略同じ部位が撮像された画像同士、互いに前後または対向する位置関係にある近傍の部位が撮像された画像同士である。このように画像群ＰＧ１，ＰＧ２の間で互いに最も近似する関連画像同士を主表示領域１００ａ，１００ｂに同期表示することによって、被検体１内の複数の画像群の間で互いに近似する各画像を容易に観察することができ、この結果、被検体１の臓器内を詳細に観察することができる。 The images P 6 and Q 6 that are synchronously displayed side by side in the main display areas 100a and 100b are related images that approximate each other as described above. Similarly, the images P 7 and Q 7 that are synchronously displayed side by side in the main display areas 100a and 100b are related images that approximate each other as described above. Such related images are, for example, images in which substantially the same part is imaged in the same organ of the subject 1, and images in which neighboring parts in a positional relationship opposite to each other are imaged. As described above, the related images that are closest to each other between the image groups PG1 and PG2 are synchronously displayed in the main display areas 100a and 100b, so that the images that are approximate to each other among the plurality of image groups in the subject 1 are displayed. It can be easily observed, and as a result, the inside of the organ of the subject 1 can be observed in detail.

以上、説明したように、本発明の実施の形態５では、複数の撮像素子によって撮像された被検体内の画像群を撮像素子毎に分類し、かかる被検体内の複数の画像群とこれら複数の画像群内の各画像をそれぞれ特定する特定情報とを記憶部に保存し、表示部に形成された複数の主表示領域に、かかる複数の画像群の間で互いに最も近似する関連画像同士を順次同期表示するように構成している。このため、表示操作アイコン群を用いた容易な操作によって、かかる複数の画像群の間で互いに近似する画像同士、例えば互いに近傍の被検体内部位が撮像された画像同士を複数の主表示領域に並べて同期表示することができる。この結果、被検体内の複数の画像群の間で互いに近似する関連画像同士を比較しつつ容易に観察することができ、被検体の臓器内を詳細に観察できる画像表示装置を実現することができる。   As described above, in the fifth embodiment of the present invention, the image groups in the subject imaged by the plurality of image sensors are classified for each image sensor, and the plurality of image groups in the subject and the plurality of these image groups. Specific information for specifying each image in the image group is stored in the storage unit, and related images that are closest to each other among the plurality of image groups are stored in a plurality of main display areas formed in the display unit. It is configured to display sequentially synchronously. For this reason, images that are close to each other between the plurality of image groups, for example, images in which the in-subject regions near each other are captured by a simple operation using the display operation icon group are displayed in the plurality of main display areas. It can be displayed side by side and synchronized. As a result, it is possible to easily observe while comparing related images that are similar to each other among a plurality of image groups in the subject, and to realize an image display device that can observe the inside of the organ of the subject in detail. it can.

なお、本発明の実施の形態１〜４では、主表示領域１００に表示すべき被検体内の画像群を選択する画像群選択アイコン１０１，１０２（画像群の選択ＧＵＩ）を図３，１４に例示するように押しボタンの態様で表示していたが、これに限らず、主表示領域１００の現表示画像に最も近似する関連画像を縮小した縮小画像（例えばサムネイル画像）を画像群の選択ＧＵＩ上に表示してもよい。   In the first to fourth embodiments of the present invention, image group selection icons 101 and 102 (image group selection GUI) for selecting an image group in the subject to be displayed in the main display area 100 are shown in FIGS. As shown in the example, the image is displayed in the form of a push button. However, the present invention is not limited to this, and a reduced image (for example, a thumbnail image) obtained by reducing a related image that is closest to the current display image in the main display area 100 is selected as an image group selection GUI. It may be displayed above.

具体的には、例えば図２４に示すように、かかる関連画像の縮小画像を表示する副表示領域１２０を主表示領域１００の近傍に追加形成し、主表示の画像群を選択する選択ＧＵＩをこの副表示領域１２０内に形成する。かかる選択ＧＵＩ上には、主表示領域１００の現表示画像に最も近似する関連画像の縮小画像が表示される。この場合、かかる現表示画像が画像群ＰＧ１内の画像Ｐnであれば、表示制御部１５ａは、この画像Ｐnに最も近似する画像群ＰＧ２内の関連画像を縮小した縮小画像ＳＱmをこの副表示領域１２０内の選択ＧＵＩ上に追加表示する。かかる縮小画像ＳＱmが表示された選択ＧＵＩをクリック操作することによって、この縮小画像ＳＱmに対応する関連画像を含む画像群ＰＧ２が主表示の画像群に選択されるとともに、この現表示画像である画像Ｐnがこの縮小画像ＳＱmに対応する関連画像に切り替わる。 Specifically, for example, as shown in FIG. 24, a sub display area 120 for displaying a reduced image of the related image is additionally formed in the vicinity of the main display area 100, and a selection GUI for selecting a group of images for main display is displayed. It is formed in the sub display area 120. On the selection GUI, a reduced image of the related image that is closest to the current display image in the main display area 100 is displayed. In this case, if the current display image is an image P n in the image group PG1, the display control unit 15a displays a reduced image SQ m obtained by reducing the related image in the image group PG2 that is closest to the image P n. Additional display is performed on the selection GUI in the sub display area 120. By clicking the selection GUI on which the reduced image SQ m is displayed, the image group PG2 including the related images corresponding to the reduced image SQ m is selected as the main display image group, and the current display image A certain image P n is switched to a related image corresponding to the reduced image SQ m .

一方、かかる現表示画像が画像群ＰＧ２内の画像Ｑmであれば、表示制御部１５ａは、この画像Ｑmに最も近似する画像群ＰＧ１内の関連画像を縮小した縮小画像ＳＰnをこの副表示領域１２０内の選択ＧＵＩ上に追加表示する。かかる縮小画像ＳＰnが表示された選択ＧＵＩをクリック操作することによって、この縮小画像ＳＰnに対応する関連画像を含む画像群ＰＧ１が主表示の画像群に選択されるとともに、この現表示画像である画像Ｑmがこの縮小画像ＳＰnに対応する関連画像に切り替わる。 On the other hand, if the image Q m of such currently displayed picture image group PG2, the display controller 15a, the reduced image SP n obtained by reducing the relevant image in the image group in the PG1 most similar to the image Q m The sub An additional display is performed on the selection GUI in the display area 120. By clicking the selection GUI on which the reduced image SP n is displayed, an image group PG1 including a related image corresponding to the reduced image SP n is selected as the main display image group, and the current display image is displayed. an image Q m is switched to the associated image corresponding to the reduced image SP n.

また、本発明の実施の形態１〜５では、主表示領域１００の現表示画像の時間的な位置をタイムバー１０４およびスライダ１０５によって示していたが、これに限らず、主表示領域１００の現表示画像の撮像位置を模式的に示してもよい。具体的には、例えば図２５に示すように、上述したタイムバー１０４およびスライダ１０５に代えて、被検体内におけるカプセル型内視鏡の移動経路（すなわち消化管）を模式的に示す体内模式画像１３０と、この体内模式画像１３０によって示される消化管に沿って移動するスライダ１３１とをウィンドウＷ内に表示し、かかる体内模式画像１３０とスライダ１３１とによって、主表示領域１００の現表示画像の撮像位置を示してもよい。この場合、表示制御部１５ａは、画像群ＰＧ１，ＰＧ２内の各画像の受信時間または撮像位置情報をもとに、体内模式画像１３０の消化管内における各画像の位置をもとめる。表示制御部１５ａは、主表示領域１００の現表示画像の撮像位置を示すように、この体内模式画像１３０の消化管に沿ってスライダ１３１を移動させればよい。   In the first to fifth embodiments of the present invention, the time position of the current display image in the main display area 100 is indicated by the time bar 104 and the slider 105. However, the present invention is not limited to this. You may show typically the imaging position of a display image. Specifically, as shown in FIG. 25, for example, instead of the time bar 104 and the slider 105 described above, an in-vivo schematic image schematically showing the movement path (that is, the digestive tract) of the capsule endoscope in the subject. 130 and a slider 131 that moves along the digestive tract indicated by the in-vivo schematic image 130 are displayed in the window W, and the in-vivo schematic image 130 and the slider 131 capture an image of the current display image in the main display area 100. A position may be indicated. In this case, the display control unit 15a determines the position of each image in the digestive tract of the in-vivo schematic image 130 based on the reception time or imaging position information of each image in the image groups PG1 and PG2. The display control unit 15a may move the slider 131 along the digestive tract of the in-vivo schematic image 130 so as to indicate the imaging position of the current display image in the main display region 100.

さらに、本発明の実施の形態２では、被検体内の複数の画像群に含まれる各画像に上述した入力時間をそれぞれ対応付けていたが、これに限らず、かかる画像群内の各画像に対応付ける時間情報は、カプセル型内視鏡の撮像素子の撮像時刻を示す時間情報であってもよいし、被検体内にカプセル型内視鏡を導入してから被検体内の画像を順次撮像する際の経過時間を示す時間情報であってもよい。かかる画像の撮像時刻または導入からの経過時間を示す時間情報は、カプセル型内視鏡によって被検体内の各画像にそれぞれ対応付けられる。画像表示装置２４は、かかるカプセル型内視鏡によって画像毎に対応付けられた時間情報を被検体内の画像群とともに取得すればよい。   Furthermore, in Embodiment 2 of the present invention, the input time described above is associated with each image included in the plurality of image groups in the subject. However, the present invention is not limited to this, and each image in the image group is associated with each image. The time information to be associated may be time information indicating the imaging time of the imaging device of the capsule endoscope, or images in the subject are sequentially captured after the capsule endoscope is introduced into the subject. It may be time information indicating the elapsed time. The time information indicating the image capture time or the elapsed time from the introduction is associated with each image in the subject by the capsule endoscope. The image display device 24 may acquire the time information associated with each image by the capsule endoscope together with the image group in the subject.

また、本発明の実施の形態２では、被検体内の各画像にそれぞれ対応付けられた受信時間をもとに、かかる被検体内の各画像の入力時間を算出していたが、これに限らず、上述した実施の形態１に例示した画像の入力番号と撮像素子のフレームレートとをもとに画像の時間情報（入力時間）を算出してもよい。この場合、画像分類部２５ｂは、上述した実施の形態１の画像分類部１５ｂと同様に被検体内の各画像に入力番号をそれぞれ付与し、かかる画像の入力番号をこの画像を撮像した撮像素子のフレームレートによって除算することによって、この画像の時間情報を算出できる。   In Embodiment 2 of the present invention, the input time of each image in the subject is calculated based on the reception time associated with each image in the subject. However, the present invention is not limited to this. Instead, the time information (input time) of the image may be calculated based on the input number of the image exemplified in the first embodiment and the frame rate of the image sensor. In this case, the image classification unit 25b assigns an input number to each image in the subject, similarly to the image classification unit 15b of the first embodiment described above, and the image pickup element that picks up the input number of the image. By dividing by the frame rate, the time information of this image can be calculated.

さらに、本発明の実施の形態３では、主表示領域１００の現表示画像とその関連画像との受信時間差を設定ＧＵＩによって設定していたが、これに限らず、画像の入力番号差またはフレーム番号差を設定する設定ＧＵＩをウィンドウＷ内に形成し、主表示領域１００の現表示画像とその関連画像との入力番号差またはフレーム番号差をこの設定ＧＵＩによって設定してもよい。   Furthermore, in Embodiment 3 of the present invention, the reception time difference between the current display image in the main display area 100 and the related image is set by the setting GUI. However, the present invention is not limited to this. A setting GUI for setting a difference may be formed in the window W, and an input number difference or a frame number difference between the current display image of the main display area 100 and its related image may be set by this setting GUI.

また、本発明の実施の形態４では、被検体内の画像を含む無線信号の受信電界強度をもとにこの被検体内の画像を撮像したカプセル型内視鏡（撮像素子）の位置座標を検出していたが、これに限らず、カプセル型内視鏡を導入した被検体をＸ線撮像して取得できる被検体内のＸ線画像をもとに被検体内におけるカプセル型内視鏡の位置座標を検出してもよいし、被検体に対して発生した磁場または超音波をもとに被検体内におけるカプセル型内視鏡の位置座標を検出してもよい。   In the fourth embodiment of the present invention, the position coordinates of the capsule endoscope (imaging device) that captures an image in the subject based on the received electric field strength of the radio signal including the image in the subject are obtained. However, the present invention is not limited to this, and the capsule endoscope in the subject can be acquired based on the X-ray image in the subject that can be acquired by X-ray imaging of the subject into which the capsule endoscope is introduced. The position coordinates may be detected, or the position coordinates of the capsule endoscope in the subject may be detected based on the magnetic field or ultrasonic wave generated with respect to the subject.

さらに、本発明の実施の形態１，２，４，５では、１つの撮像素子を搭載したカプセル型内視鏡を２つ被検体内に導入した場合を例示したが、これに限らず、１以上の撮像素子を搭載した複数のカプセル型内視鏡を被検体内に導入してもよく、かかる複数のカプセル型内視鏡によって撮像された被検体内の複数の画像群を取得してもよい。   Furthermore, in the first, second, fourth, and fifth embodiments of the present invention, the case where two capsule endoscopes each equipped with one image sensor are introduced into the subject is exemplified. A plurality of capsule endoscopes equipped with the above imaging elements may be introduced into the subject, or a plurality of image groups in the subject imaged by the plurality of capsule endoscopes may be acquired. Good.

また、本発明の実施の形態３では、２つの撮像素子を搭載した多眼のカプセル型内視鏡を被検体内に導入した場合を例示したが、これに限らず、１以上の撮像素子を搭載した１以上のカプセル型内視鏡を被検体内に導入してもよく、かかる１以上のカプセル型内視鏡によって撮像された被検体内の複数の画像群を取得してもよい。   In the third embodiment of the present invention, a case where a multi-lens capsule endoscope having two image sensors mounted therein is illustrated as an example. However, the present invention is not limited to this, and one or more image sensors are used. One or more mounted capsule endoscopes may be introduced into the subject, and a plurality of image groups in the subject captured by the one or more capsule endoscopes may be acquired.

さらに、本発明の実施の形態５では、被検体１内の２つの画像群ＰＧ１，ＰＧ２の間で互いに近似する関連画像同士を複数の主表示領域１００ａ，１００ｂにそれぞれ同期表示していたが、これに限らず、被検体１内の３以上の画像群の間で互いに近似する各関連画像を３以上の主表示領域にそれぞれ同期表示してもよい。この場合、表示部１２のウィンドウＷ内に、かかる被検体１内の複数の画像群のグループ数に対応して３以上の主表示領域を形成し、３以上の画像群のそれぞれについて決定した３以上の関連画像を３以上の主表示領域にそれぞれ同期表示すればよい。なお、かかる３以上の関連画像のうちの１つは、３以上の画像群のうちの１つの画像群内の現表示画像に決定し、残りの２以上の関連画像は、これら３以上の画像群のうちの残りの２以上の画像群の画像群毎に、この現表示画像に最も近似する２以上の画像に決定すればよい。   Furthermore, in the fifth embodiment of the present invention, related images that are close to each other between the two image groups PG1 and PG2 in the subject 1 are synchronously displayed on the plurality of main display areas 100a and 100b, respectively. However, the present invention is not limited to this, and the related images that approximate each other among the three or more image groups in the subject 1 may be synchronously displayed in the three or more main display areas. In this case, three or more main display areas are formed in the window W of the display unit 12 corresponding to the number of groups of the plurality of image groups in the subject 1, and each of the three or more image groups is determined. The above related images may be synchronously displayed in three or more main display areas. One of the three or more related images is determined as a current display image in one image group of the three or more image groups, and the remaining two or more related images are the three or more images. For each image group of the remaining two or more image groups in the group, two or more images that are closest to the current display image may be determined.

また、本発明の実施の形態５では、上述した実施の形態１と同様に画像の入力番号をもとに関連画像を決定していたが、これに限らず、上述した実施の形態２と同様に画像の時間情報（受信時間、入力時間等）をもとに関連画像を決定してもよいし、上述した実施の形態３と同様に画像の時間差またはフレーム番号差をもとに関連画像を決定してもよいし、上述した実施の形態４と同様に撮像位置情報をもとに関連画像を決定してもよい。この場合、実施の形態５にかかる画像表示装置５４の制御部５５は、画像分類部１５ｂに代えて上述した画像分類部２５ｂ，３５ｂのいずれかを有し、画像抽出部１５ｃに代えて上述した画像分類部２５ｃ，３５ｃのいずれかを有していればよい。または、かかる制御部５５は、画像分類部１５ｂに代えて上述した画像分類部４５ｂを有し、画像抽出部１５ｃに代えて上述した画像分類部４５ｃを有し、さらに位置検出部４５ｄを有していればよい。   In the fifth embodiment of the present invention, the related image is determined based on the input number of the image as in the first embodiment. However, the present invention is not limited to this, and the same as in the second embodiment described above. The related image may be determined based on the time information of the image (reception time, input time, etc.), or the related image may be determined based on the time difference or frame number difference of the image as in the third embodiment. The related image may be determined based on the imaging position information as in the fourth embodiment described above. In this case, the control unit 55 of the image display device 54 according to the fifth embodiment includes any of the image classification units 25b and 35b described above instead of the image classification unit 15b, and described above instead of the image extraction unit 15c. Any one of the image classification units 25c and 35c may be included. Alternatively, the control unit 55 includes the image classification unit 45b described above instead of the image classification unit 15b, includes the image classification unit 45c described above instead of the image extraction unit 15c, and further includes a position detection unit 45d. It only has to be.

さらに、本発明の実施の形態１〜５では、カプセル型内視鏡に搭載された１以上の撮像素子を特定するＩＤ情報を被検体内の全画像のそれぞれに付加していたが、これに限らず、２つの撮像素子によって被検体内の画像を撮像する場合、一方の撮像素子によって撮像された被検体内の各画像には撮像素子のＩＤ情報を付加し、他方の撮像素子によって撮像された被検体内の各画像には撮像素子のＩＤ情報を付加しないようにしてもよい。この場合、撮像素子のＩＤ情報が付加された画像群を一方の撮像素子によって撮像された画像群に分類し、撮像素子のＩＤ情報が付加されていない画像群を他方の撮像素子によって撮像された画像群に分類すればよい。   Furthermore, in Embodiments 1 to 5 of the present invention, ID information for specifying one or more image sensors mounted on the capsule endoscope is added to each of all images in the subject. Not limited to, when an image in the subject is picked up by two image pickup devices, ID information of the image pickup device is added to each image picked up by one image pickup device and picked up by the other image pickup device. The ID information of the image sensor may not be added to each image in the subject. In this case, the image group to which the ID information of the image sensor is added is classified into an image group captured by one image sensor, and the image group to which the ID information of the image sensor is not added is imaged by the other image sensor. What is necessary is just to classify | categorize into an image group.

また、本発明の実施の形態１〜５では、カプセル型内視鏡の撮像素子によって撮像した被検体内の画像が体外の受信装置３に受信された場合に、この被検体内の画像に撮像素子のＩＤ情報が付加されていたが、これに限らず、被検体内の画像に撮像素子のＩＤ情報を付加するタイミングは、本発明にかかる画像表示装置の記憶部に被検体内の画像を保存する際であってもよい。この場合、複数の撮像素子によって撮像された被検体内の画像群を画像表示装置が取得した際の各画像の取得順序等をもとに、画像を撮像した撮像素子を特定し、特定した撮像素子のＩＤ情報を画像に付加すればよい。かかる画像の取得順序は、例えば、上述した画像の入力番号、入力時間、受信番号、受信時間等をもとに決定してもよい。   In Embodiments 1 to 5 of the present invention, when an image inside the subject captured by the imaging device of the capsule endoscope is received by the external receiving device 3, the image inside the subject is captured. Although the element ID information is added, the present invention is not limited to this, and the timing of adding the image sensor ID information to the image in the subject is not limited to the image in the subject in the storage unit of the image display device according to the present invention. It may be when saving. In this case, the image pickup device that picks up the image is specified based on the order of acquisition of each image when the image display device acquires the image group in the subject picked up by the plurality of image pickup devices, and the specified image pickup is performed. The element ID information may be added to the image. The image acquisition order may be determined based on, for example, the above-described image input number, input time, reception number, reception time, and the like.

さらに、本発明の実施の形態１〜４では、表示部１２に単一の主表示領域１００を形成し、かかる主表示領域１００に被検体１内の画像とその関連画像とを切り替えて表示していたが、これに限らず、表示部１２に複数の主表示領域を形成し、かかる複数の主表示領域に被検体１内の画像とその関連画像とを切り替えて表示してもよい。この場合、３以上の撮像素子によってそれぞれ撮像された３以上の画像群の中から、かかる複数の主表示領域に表示すべき２以上の画像群を選択し、かかる２以上の画像群の間で互いに近似する画像同士（すなわち関連画像同士）を複数の主表示領域にそれぞれ切り替えて表示すればよい。   Furthermore, in the first to fourth embodiments of the present invention, a single main display area 100 is formed on the display unit 12, and an image in the subject 1 and its related image are switched and displayed on the main display area 100. However, the present invention is not limited to this, and a plurality of main display areas may be formed on the display unit 12, and an image in the subject 1 and its related images may be switched and displayed in the plurality of main display areas. In this case, two or more image groups to be displayed in the plurality of main display areas are selected from the three or more image groups respectively captured by the three or more image sensors, and the two or more image groups are selected. Images that are close to each other (that is, related images) may be switched to a plurality of main display areas and displayed.

本発明の実施の形態１にかかる画像表示装置を有する被検体内情報取得システムの一構成例を示す模式図である。It is a schematic diagram which shows the example of 1 structure of the in-subject information acquisition system which has an image display apparatus concerning Embodiment 1 of this invention. 本発明の実施の形態１にかかる画像表示装置の一構成例を模式的に示すブロック図である。1 is a block diagram schematically showing a configuration example of an image display apparatus according to a first embodiment of the present invention. 表示部に表示される各種ＧＵＩの一具体例を模式的に示す模式図である。It is a schematic diagram which shows typically a specific example of various GUI displayed on a display part. 実施の形態１にかかる画像表示装置の制御部の処理手順を説明するフローチャートである。4 is a flowchart for explaining a processing procedure of a control unit of the image display apparatus according to the first embodiment; 被検体内の複数の画像群にそれぞれ含まれる各画像に入力番号を付与する画像分類部の処理を説明するための模式図である。It is a schematic diagram for demonstrating the process of the image classification | category part which assign | provides an input number to each image each contained in the several image group in a subject. 入力番号を含む画像の特定情報をもとに主表示領域の現表示画像を別の画像群内の関連画像に切り替える制御部の動作を説明するための模式図である。It is a schematic diagram for demonstrating operation | movement of the control part which switches the present display image of a main display area to the related image in another image group based on the specific information of the image containing an input number. 本発明の実施の形態２にかかる画像表示装置の一構成例を模式的に示すブロック図である。It is a block diagram which shows typically one structural example of the image display apparatus concerning Embodiment 2 of this invention. 実施の形態２にかかる画像表示装置の制御部の処理手順を説明するフローチャートである。10 is a flowchart for explaining a processing procedure of a control unit of the image display apparatus according to the second embodiment; 被検体内の複数の画像群にそれぞれ含まれる各画像に入力時間を対応付ける画像分類部の処理を説明するための模式図である。It is a schematic diagram for demonstrating the process of the image classification | category part which matches input time with each image each contained in the some image group in a subject. 入力時間を含む画像の特定情報をもとに主表示領域の現表示画像を別の画像群内の関連画像に切り替える制御部の動作を説明するための模式図である。It is a schematic diagram for demonstrating operation | movement of the control part which switches the present display image of a main display area to the related image in another image group based on the specific information of the image containing input time. 本発明の実施の形態３にかかる画像表示装置を有する被検体内情報取得システムの一構成例を示す模式図である。It is a schematic diagram which shows the example of 1 structure of the in-subject information acquisition system which has an image display apparatus concerning Embodiment 3 of this invention. 本発明の実施の形態３にかかる画像表示装置の一構成例を模式的に示すブロック図である。It is a block diagram which shows typically the example of 1 structure of the image display apparatus concerning Embodiment 3 of this invention. 画像の設定時間差を設定する設定ＧＵＩを表示した表示部のウィンドウを例示する模式図である。It is a schematic diagram which illustrates the window of the display part which displayed the setting GUI which sets the setting time difference of an image. 実施の形態３にかかる画像表示装置の制御部の処理手順を説明するフローチャートである。10 is a flowchart illustrating a processing procedure of a control unit of the image display apparatus according to the third embodiment. 画像の受信時間差をもとに主表示領域の現表示画像を別の画像群内の関連画像に切り替える制御部の動作を説明するための模式図である。It is a schematic diagram for demonstrating operation | movement of the control part which switches the present display image of a main display area to the related image in another image group based on the reception time difference of an image. 本発明の実施の形態４にかかる画像表示装置の一構成例を模式的に示すブロック図である。It is a block diagram which shows typically the example of 1 structure of the image display apparatus concerning Embodiment 4 of this invention. 被検体内の画像の撮像位置情報を検出する位置検出部の処理を説明するための模式図である。It is a schematic diagram for demonstrating the process of the position detection part which detects the imaging position information of the image in a subject. 実施の形態４にかかる画像表示装置の制御部の処理手順を説明するフローチャートである。10 is a flowchart for explaining a processing procedure of a control unit of an image display apparatus according to a fourth embodiment; 撮像位置情報を含む画像の特定情報をもとに主表示領域の現表示画像を別の画像群内の関連画像に切り替える制御部の動作を説明するための模式図である。It is a schematic diagram for demonstrating operation | movement of the control part which switches the present display image of a main display area to the related image in another image group based on the specific information of the image containing imaging position information. 本発明の実施の形態５にかかる画像表示装置の一構成例を模式的に示すブロック図である。It is a block diagram which shows typically one structural example of the image display apparatus concerning Embodiment 5 of this invention. 被検体内の画像を画像群別に並べて表示する複数の主表示領域が形成された表示部のウィンドウを例示する模式図である。It is a schematic diagram which illustrates the window of the display part in which the some main display area which arranges and displays the image in a subject according to an image group was formed. 実施の形態５にかかる画像表示装置の制御部の処理手順を説明するフローチャートである。10 is a flowchart for explaining a processing procedure of a control unit of an image display apparatus according to a fifth embodiment; 複数の画像群の間で互いに最も近似する関連画像同士を複数の主表示領域に並べて同期表示する制御を行う制御部の動作を説明するための模式図である。It is a schematic diagram for demonstrating operation | movement of the control part which performs control which arranges the related images which are the closest mutually between several image groups in a some main display area, and displays them synchronously. 主表示領域に表示すべき画像群を選択する選択ＧＵＩの別態様を例示する模式図である。It is a schematic diagram which illustrates another aspect of selection GUI which selects the image group which should be displayed on a main display area. 被検体内における現表示画像の撮像位置を示す体内模式画像を例示する模式図である。It is a schematic diagram which illustrates the model image in a body which shows the imaging position of the present display image in a subject.

符号の説明Explanation of symbols

１ 被検体
２ａ，２ｂ，２ｃ カプセル型内視鏡
３ 受信装置
３ａ〜３ｈ 受信アンテナ
４，２４，３４，４４，５４ 画像表示装置
５ 携帯型記録媒体
１１ 入力部
１２ 表示部
１３ カードＩ／Ｆ
１４ 記憶部
１５，２５，３５，４５，５５ 制御部
１５ａ，５５ａ 表示制御部
１５ｂ，２５ｂ，３５ｂ，４５ｂ 画像分類部
１５ｃ，２４ｃ，３５ｃ，４５ｃ 画像抽出部
４５ｄ 位置検出部
１００，１００ａ，１００ｂ 主表示領域
１０１，１０２ 画像群選択アイコン
１０３ 表示操作アイコン群
１０３ａ 再生アイコン
１０３ｂ 停止アイコン
１０３ｃ コマ再生アイコン
１０４ タイムバー
１０５ スライダ
１０６ カーソル
１１０ 時間差設定部
１２０ 副表示領域
１３０ 体内模式画像
１３１ スライダ
Ｆ１，Ｆ２ フォルダ
ＰＧ１，ＰＧ２ 画像群
Ｐn，Ｑm 画像
ＳＰn，ＳＱm 縮小画像
Ｗ ウィンドウ DESCRIPTION OF SYMBOLS 1 Subject 2a, 2b, 2c Capsule endoscope 3 Receiving device 3a-3h Receiving antenna 4, 24, 34, 44, 54 Image display device 5 Portable recording medium 11 Input part 12 Display part 13 Card I / F
14 storage unit 15, 25, 35, 45, 55 control unit 15a, 55a display control unit 15b, 25b, 35b, 45b image classification unit 15c, 24c, 35c, 45c image extraction unit 45d position detection unit 100, 100a, 100b main Display area 101, 102 Image group selection icon 103 Display operation icon group 103a Playback icon 103b Stop icon 103c Frame playback icon 104 Time bar 105 Slider 106 Cursor 110 Time difference setting part 120 Sub display area 130 In-vivo schematic image 131 Slider F1, F2 Folder PG1 , PG2 image group P n, Q m image SP n, SQ m reduced image W window

Claims (9)

複数の撮像素子によって撮像された被検体内の複数の画像群と該複数の画像群に含まれる各画像をそれぞれ特定する特定情報とを記憶する記憶手段と、
前記複数の画像群に含まれる画像を表示する表示手段と、
前記複数の画像群の中から前記表示手段に表示すべき画像群を選択する選択手段と、
前記表示手段に現に表示されている現表示画像の特定情報と前記選択手段によって選択された画像群に含まれる各画像の特定情報とをもとに、前記現表示画像に最も近似する前記選択された画像群内の関連画像を決定し、前記関連画像を表示する制御を行う制御手段と、
を備えたことを特徴とする画像表示装置。 Storage means for storing a plurality of image groups in a subject imaged by a plurality of image sensors and specific information for specifying each image included in the plurality of image groups;
Display means for displaying images included in the plurality of image groups;
Selecting means for selecting an image group to be displayed on the display means from the plurality of image groups;
Based on the specific information of the current display image currently displayed on the display means and the specific information of each image included in the image group selected by the selection means, the selection that most closely approximates the current display image. Control means for determining a related image in the selected image group and performing control to display the related image;
An image display device comprising: 前記制御手段は、前記現表示画像を前記関連画像に切り替える制御を行うことを特徴とする請求項１に記載の画像表示装置。   The image display apparatus according to claim 1, wherein the control unit performs control to switch the current display image to the related image. 前記制御手段は、前記複数の画像群の間で互いに近似する複数の前記関連画像を前記表示手段に同時に表示する制御を行うことを特徴とする請求項１に記載の画像表示装置。   The image display apparatus according to claim 1, wherein the control unit performs control to simultaneously display the plurality of related images that approximate each other among the plurality of image groups on the display unit. 前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像のフレーム順序を示す番号情報とを含み、
前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の番号情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする請求項２または３に記載の画像表示装置。 The identification information includes ID information that identifies one of the plurality of imaging elements, and number information that indicates a frame order of images in an image group captured by the imaging element identified by the ID information,
The control means performs control to extract the related image having the ID information corresponding to the image group selected by the selection means and the number information of the current display image, and to display the extracted related image. The image display device according to claim 2, wherein: 前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の時間情報とを含み、
前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の時間情報の近似値とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする請求項２または３に記載の画像表示装置。 The specific information includes ID information for specifying any of the plurality of image sensors and time information of images in an image group captured by the image sensor specified by the ID information,
The control means extracts the related image having the ID information corresponding to the image group selected by the selection means and the approximate value of the time information of the current display image, and displays the extracted related image The image display device according to claim 2, wherein: 前記現表示画像と前記関連画像との時間差を設定する設定手段を備え、
前記特定情報は、前記複数の撮像素子のいずれかを特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の時間情報とを含み、
前記制御手段は、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の時間情報に対して前記時間差に近似する差になる時間情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする請求項２または３に記載の画像表示装置。 Setting means for setting a time difference between the current display image and the related image;
The specific information includes ID information for specifying any of the plurality of image sensors and time information of images in an image group captured by the image sensor specified by the ID information,
The control means extracts the related image having the ID information corresponding to the image group selected by the selection means and time information that is a difference approximate to the time difference with respect to the time information of the current display image. The image display apparatus according to claim 2, wherein control for displaying the extracted related image is performed. 前記制御手段は、前記ＩＤ情報によって特定される撮像素子のフレームレートと該撮像素子が撮像した画像群内の画像のフレーム順序を示す番号情報とをもとに前記時間情報を算出することを特徴とする請求項５または６に記載の画像表示装置。   The control means calculates the time information based on a frame rate of an image sensor specified by the ID information and number information indicating a frame order of images in an image group captured by the image sensor. The image display device according to claim 5 or 6. 前記特定情報は、前記複数の撮像素子をそれぞれ特定するＩＤ情報と該ＩＤ情報によって特定される撮像素子が撮像した画像群内の画像の撮像位置情報とを含み、
前記制御手段は、前記複数の画像群に含まれる各画像の撮像位置情報をそれぞれ検出し、前記選択手段によって選択された画像群に対応する前記ＩＤ情報と前記現表示画像の撮像位置情報に近似する撮像位置情報とを有する前記関連画像を抽出し、抽出した前記関連画像を表示する制御を行うことを特徴とする請求項２または３に記載の画像表示装置。 The identification information includes ID information for identifying each of the plurality of imaging elements and imaging position information of an image in an image group captured by the imaging element identified by the ID information,
The control unit detects imaging position information of each image included in the plurality of image groups, and approximates the ID information corresponding to the image group selected by the selection unit and the imaging position information of the current display image. 4. The image display device according to claim 2, wherein control is performed to extract the related image having imaging position information to be displayed and to display the extracted related image. 5. 前記表示手段は、主表示領域に前記現表示画像を表示するとともに、副表示領域に前記関連画像を表示し、
前記選択手段は、前記副表示領域内に形成されることを特徴とする請求項１〜８のいずれか一つに記載の画像表示装置。 The display means displays the current display image in a main display area and displays the related image in a sub display area,
The image display device according to claim 1, wherein the selection unit is formed in the sub display area.
JP2006196095A 2006-04-14 2006-07-18 Image display device Expired - Fee Related JP4868965B2 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2006196095A JP4868965B2 (en) 2006-07-18 2006-07-18 Image display device
PCT/JP2007/058066 WO2007119784A1 (en) 2006-04-14 2007-04-12 Image display apparatus
EP07741502A EP2008574B1 (en) 2006-04-14 2007-04-12 Image display apparatus
KR1020087024980A KR101047253B1 (en) 2006-04-14 2007-04-12 Image display
CN200780013447.0A CN101420900B (en) 2006-04-14 2007-04-12 Image display apparatus
AU2007239598A AU2007239598B2 (en) 2006-04-14 2007-04-12 Image display apparatus
US12/249,552 US8194096B2 (en) 2006-04-14 2008-10-10 Image display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006196095A JP4868965B2 (en) 2006-07-18 2006-07-18 Image display device

Publications (2)

Publication Number Publication Date
JP2008022918A JP2008022918A (en) 2008-02-07
JP4868965B2 true JP4868965B2 (en) 2012-02-01

Family

ID=39114192

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006196095A Expired - Fee Related JP4868965B2 (en) 2006-04-14 2006-07-18 Image display device

Country Status (1)

Country Link
JP (1) JP4868965B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2412299B1 (en) * 2009-03-23 2017-02-01 Olympus Corporation Image processing system, external apparatus and image processing method therefor
JP5572440B2 (en) 2009-09-15 2014-08-13 富士フイルム株式会社 Diagnosis support system, diagnosis support program, and diagnosis support method
JP5551960B2 (en) * 2009-09-30 2014-07-16 富士フイルム株式会社 Diagnosis support system, diagnosis support program, and diagnosis support method

Also Published As

Publication number Publication date
JP2008022918A (en) 2008-02-07

Similar Documents

Publication Publication Date Title
US8194096B2 (en) Image display apparatus
US8467615B2 (en) Image display apparatus
JP4891646B2 (en) Image display device
JP5005981B2 (en) Image display device
US8900124B2 (en) Image display device
JP4716794B2 (en) Image display device
EP2316327B1 (en) Image display device, image display method, and image display program
JP4547293B2 (en) Image display device
EP1920709A1 (en) Image display method and image display apparatus
JP4823659B2 (en) In vivo image display device
JP5327641B2 (en) Image information display processing device
JP2006288612A (en) Picture display device
JP2009039449A (en) Image processor
JP2006055262A (en) Image display device, image display method and image display program
JP4574983B2 (en) Image display apparatus, image display method, and image display program
JP4868965B2 (en) Image display device
JP5231160B2 (en) Image display device, image display method, and image display program
JP2006288611A (en) Medical image display device
JP2006345929A (en) Image display device
JP4789961B2 (en) Image display device
JP4663698B2 (en) Image display device, image display method, and image display program
JP2013075244A (en) Image display device, image display method, and image display program
JP2009089910A (en) Photographing direction discriminating apparatus, photographing direction discriminating method, photographing direction discriminating program, and computer-readable recording medium on which photographing direction discriminating program is recorded
JP4594834B2 (en) Image display device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090626

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111108

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111115

R151 Written notification of patent or utility model registration

Ref document number: 4868965

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141125

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees