JP4526447B2 - Image display device, image display method, and image display program - Google Patents

Image display device, image display method, and image display program Download PDF

Info

Publication number
JP4526447B2
JP4526447B2 JP2005179705A JP2005179705A JP4526447B2 JP 4526447 B2 JP4526447 B2 JP 4526447B2 JP 2005179705 A JP2005179705 A JP 2005179705A JP 2005179705 A JP2005179705 A JP 2005179705A JP 4526447 B2 JP4526447 B2 JP 4526447B2
Authority
JP
Japan
Prior art keywords
scale
image
display
display control
controlling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005179705A
Other languages
Japanese (ja)
Other versions
JP2006346356A5 (en
JP2006346356A (en
Inventor
利正 赤木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Medical Systems Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Priority to JP2005179705A priority Critical patent/JP4526447B2/en
Publication of JP2006346356A publication Critical patent/JP2006346356A/en
Publication of JP2006346356A5 publication Critical patent/JP2006346356A5/ja
Application granted granted Critical
Publication of JP4526447B2 publication Critical patent/JP4526447B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Endoscopes (AREA)

Description

本発明は、たとえばカプセル型内視鏡などから取り込んだ画像を表示する画像表示装置、画像表示方法および画像表示プログラムに関するものである。   The present invention relates to an image display device, an image display method, and an image display program for displaying an image captured from, for example, a capsule endoscope.

近年、内視鏡の分野では、撮像機能と無線通信機能とが装備されたカプセル型内視鏡が登場している。このカプセル型内視鏡は、観察(検査)のために被検体である被検者の口から飲み込まれた後、被検者の生体(人体)から自然排出されるまでの観察期間、たとえば食道、胃、小腸などの臓器の内部(体腔内)をその蠕動運動に伴って移動し、撮像機能を用いて所定の撮像レートで順次撮像する構成を有する。   In recent years, in the field of endoscopes, capsule endoscopes equipped with an imaging function and a wireless communication function have appeared. This capsule endoscope is an observation period, for example, the esophagus, after it is swallowed from the subject's mouth for observation (examination) until it is naturally discharged from the subject's living body (human body). In addition, the inside (inside the body cavity) of an organ such as the stomach and the small intestine is moved along with its peristaltic movement, and images are sequentially captured at a predetermined imaging rate using an imaging function.

また、これら臓器内を移動するこの観察期間、カプセル型内視鏡によって体腔内で撮像された画像データは、順次無線通信などの無線通信機能により、被検体の外部に送信され、外部の受信装置内に設けられたメモリに蓄積される。被検者がこの無線通信機能とメモリ機能を備えた受信装置を携帯することにより、被検者は、カプセル型内視鏡を飲み込んだ後、排出されるまでの観察期間であっても、不自由を被ることなく自由に行動が可能になる。観察後は、医者もしくは看護士によって、受信装置のメモリに蓄積された画像データに基づいて、体腔内の画像をディスプレイなどの表示手段に表示させて診断を行うことができる(たとえば特許文献1参照)。   Also, during this observation period of moving through these organs, image data imaged in the body cavity by the capsule endoscope is sequentially transmitted to the outside of the subject by a wireless communication function such as wireless communication, and an external receiving device It is stored in a memory provided in the inside. When the subject carries the receiving device equipped with the wireless communication function and the memory function, the subject is incapable of performing the observation even during the observation period from swallowing the capsule endoscope until it is discharged. It is possible to act freely without incurring freedom. After the observation, a doctor or a nurse can make a diagnosis by displaying an image in the body cavity on a display means such as a display based on the image data stored in the memory of the receiving device (see, for example, Patent Document 1). ).

ところで、近年では、ワークステーションなどの画像表示装置のディスプレイ(表示部)に体腔内の画像を表示させることがあり、この場合には、表示部に上記画像を順次表示するほか、たとえば画像認識の容易化や診断の迅速化をはかるために、表示される画像の時刻を認識可能なタイムバーや医師などによって上記画像から選択された選択画像(サムネイル画像)を合わせて表示するとともに、このタイムバーとサムネイル画像を撮像時間に対応させて結線させて、表示部に表示するものも考案されている(たとえば特許文献2参照)。   By the way, in recent years, an image in a body cavity may be displayed on a display (display unit) of an image display device such as a workstation. In this case, in addition to sequentially displaying the image on the display unit, for example, image recognition In order to facilitate and speed up diagnosis, a time bar that can recognize the time of the displayed image and a selected image (thumbnail image) selected from the above images by a doctor or the like are displayed together. In addition, a method has been devised in which thumbnail images are connected in correspondence with the imaging time and displayed on a display unit (see, for example, Patent Document 2).

特開2003−19111号公報Japanese Patent Laid-Open No. 2003-19111 米国特許出願公開第2002/171669号明細書US Patent Application Publication No. 2002/171669

しかしながら、このような画像表示装置では、タイムバーの時間軸スケールを常に一定のスケールで表示しているのみであり、たとえばタイムバーの時間軸スケール上において、サムネイル画像が集中する特定の範囲を詳細に確認したい場合などにこのようなタイムバーの表示ではその確認が困難であった。   However, in such an image display device, the time axis scale of the time bar is always displayed at a constant scale. For example, a specific range in which thumbnail images concentrate on the time axis scale of the time bar is detailed. In such a case, it is difficult to confirm with such a time bar display.

本発明は、上記に鑑みてなされたものであって、タイムバーの時間軸スケール上の特定の範囲を詳細に確認することができる画像表示装置、画像表示方法および画像表示プログラムを提供することを目的とする。また、本発明の他の目的は、全体的な撮像期間における指定画像の粗密分布が把握できる画像表示装置、画像表示方法および画像表示プログラムを提供することにある。   The present invention has been made in view of the above, and provides an image display device, an image display method, and an image display program capable of confirming in detail a specific range on a time axis scale of a time bar. Objective. Another object of the present invention is to provide an image display device, an image display method, and an image display program capable of grasping the density distribution of a designated image in the entire imaging period.

上述した課題を解決し、目的を達成するために、本発明にかかる画像表示装置は、取り込んだ画像を順次表示するように制御する画像表示制御手段と、前記画像表示制御手段で表示制御された所望の画像を指定する画像指定手段と、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御手段と、前記スケール上に前記画像指定手段により指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御手段と、を備えることを特徴とする。   In order to solve the above-described problems and achieve the object, an image display device according to the present invention is controlled by an image display control unit that controls to sequentially display captured images, and the display control is performed by the image display control unit. An image designating unit for designating a desired image and a scale indicating a predetermined time period of the entire captured image are controlled to be displayed, and a distance corresponding to a specific time zone is enlarged or reduced on the scale. Scale display control means for controlling to perform, and index display control means for controlling to display an index indicating a position corresponding to a predetermined time of an image as a designated time designated by the image designation means on the scale. It is characterized by providing.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記スケール上で時間に対応する距離を、前記指定時刻に対応する位置を基点とした関数で定義して、前記スケールを表示するように制御することを特徴とする。 Further, in the image display device according to the present invention, in the above invention, the scale display control means defines a distance corresponding to time on the scale as a function based on a position corresponding to the specified time, Control is performed to display the scale.

また、発明にかかる画像表示装置は、上記発明において、前記関数は、前記指定時刻から時間的に離れるほど、時間に対する距離が短くなる関数であることを特徴とする。 In the image display device according to the present invention as set forth in the invention described above, the function is a function in which the distance with respect to time becomes shorter as the time is further away from the specified time.

また、発明にかかる画像表示装置は、上記発明において、前記関数は、前記指定時刻を基点とした時間をx、前記画像表示装置における画面上の前記指定時刻に対応する座標を基準とした相対座標値をy、定数をkとした時に、y=k√|x|で、定義されることを特徴とする。 The image display device according to the present invention is the image display device according to the invention described above, wherein the function is a time relative to the coordinate corresponding to the designated time on the screen in the image display device, where x is a time based on the designated time. The coordinate value is defined as y = k√ | x |, where y is a coordinate value and k is a constant.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するように制御することを特徴とする。 In the image display device according to the present invention, in the above invention, the scale display control unit includes a first scale indicating a predetermined time period of the entire captured image, and the first scale in the specific time zone. Control is performed to display the second scale arranged at another position.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記第1のスケール上に、前記第2のスケールに対応する範囲を判別自在な形式で現した分別部を表示するように制御することを特徴とする。 In the image display device according to the present invention as set forth in the invention described above, the scale display control means may include a classification unit on the first scale, in which a range corresponding to the second scale is displayed in a discriminable form. The display is controlled to be displayed.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記分別部を前記第1のスケールにおける所定範囲を空白領域で表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the scale display control means controls the sorting unit to display a predetermined range in the first scale in a blank area.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記分別部と、前記第2のスケールとのそれぞれ対応する位置を結ぶ線状図示部を表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the scale display control means controls to display linear illustrated portions connecting the corresponding positions of the sorting portion and the second scale. It is characterized by doing.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記第1および第2のスケールと前記線状図示部とをほぼ同等の幅の帯形状で、かつ俯瞰図として表示するように制御することを特徴とする。 In the image display device according to the present invention as set forth in the invention described above, the scale display control means is a bird's-eye view in which the first and second scales and the linearly illustrated portion are in a band shape having substantially the same width. It controls to display as.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記第2のスケールを前記第1のスケールに対して平行に表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the scale display control means controls the second scale to be displayed in parallel with the first scale.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記第2のスケールを前記第1のスケールにおける前記空白領域内に所定の範囲で複数の屈曲部を有して表示するように制御することを特徴とする。 Further, in the image display device according to the present invention, in the above invention, the scale display control means has a plurality of bent portions within a predetermined range in the blank area of the first scale. The display is controlled to be displayed.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記第2のスケールを前記第1のスケールに対して垂直に表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the scale display control means controls the second scale to be displayed perpendicular to the first scale.

また、発明にかかる画像表示装置は、取り込んだ画像を順次表示するように制御する画像表示制御手段と、前記画像表示制御手段で表示制御された所望の画像を指定する画像指定手段と、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上に前記画像指定手段により指定された画像の枚数が単位時間に占める比率に対応した図を表示するように制御するスケール表示制御手段と、前記スケール上に前記画像指定手段により指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御手段と、を備えることを特徴とする。 The image display apparatus according to the present invention includes an image display control unit that controls to sequentially display captured images, an image designation unit that designates a desired image that is controlled by the image display control unit, Control is performed to display a scale indicating the predetermined time period of the entire captured image, and a figure corresponding to the ratio of the number of images specified by the image specifying means to the unit time is displayed on the scale. Scale display control means for controlling, and index display control means for controlling to display an index indicating a position corresponding to a predetermined time of an image as a designated time designated by the image designation means on the scale. It is characterized by that.

また、発明にかかる画像表示装置は、上記発明において、前記スケール表示制御手段は、前記比率に対応して変化した色彩による図を表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the scale display control means controls to display a figure with a color changed corresponding to the ratio.

また、発明にかかる画像表示装置は、前記取り込んだ画像を順次表示するように制御する画像表示制御手段と、前記画像表示制御手段で表示制御された所望の画像を指定する画像指定手段と、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するスケール表示制御手段と、前記スケール上に前記画像指定手段により指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御手段と、前記指標表示制御手段により表示制御された指標に対応する画像を、該画像の時間に対応する座標軸に平行な方向を、前記時間に対応する座標軸に垂直な方向に対して縮小した縮小画像として表示するように制御する縮小画像表示制御手段と、を備えることを特徴とする。 The image display device according to the present invention includes an image display control unit that controls to sequentially display the captured image, an image designation unit that designates a desired image that is display-controlled by the image display control unit, A scale display control means for controlling to display a scale indicating a predetermined time period of the entire captured image, and a position corresponding to a predetermined time of the image as a specified time specified by the image specifying means on the scale. An index display control unit that controls to display an index to be displayed; an image corresponding to the index controlled by the index display control unit; a direction parallel to a coordinate axis corresponding to the time of the image; And reduced image display control means for controlling to display as a reduced image reduced in a direction perpendicular to the coordinate axis.

また、発明にかかる画像表示装置は、上記発明において、前記縮小画像表示制御手段は、前記縮小画像を俯瞰図として表示するように制御することを特徴とする。 In the image display apparatus according to the present invention as set forth in the invention described above, the reduced image display control means controls to display the reduced image as an overhead view.

また、発明にかかる画像表示方法は、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、を含むことを特徴とする。 Further, an image display method according to the present invention includes an image display control step for controlling to sequentially display captured images, an image designation step for designating a desired image that has been display-controlled in the image display control step, A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced; and An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記スケール上で時間に対応する距離を、前記指定時刻に対応する位置を基点とした関数で定義して、前記スケールを表示するように制御することを特徴とする。 Further, in the image display method according to the present invention, in the above invention, the scale display control step defines a distance corresponding to time on the scale as a function based on a position corresponding to the specified time, Control is performed to display the scale.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記関数として前記指定時刻から時間的に離れるほど、時間に対する距離が短くなる関数で、前記スケール上で時間に対応する距離を定義して、前記スケールを表示するように制御することを特徴とする。 Further, in the image display method according to the present invention, in the above invention, the scale display control step is a function in which the distance with respect to time becomes shorter as the function moves away from the designated time in time. A corresponding distance is defined, and the scale is controlled to be displayed.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記関数として前記指定時刻を基点とした時間をx、前記画像表示装置における画面上の前記指定時刻に対応する座標を基準とした相対座標値をy、定数をkとした時に、y=k√|x|の関数で、前記スケール上で時間に対応する距離を定義して、前記スケールを表示するように制御することを特徴とする In the image display method according to the present invention as set forth in the invention described above, the scale display control step corresponds to the specified time on the screen in the image display device, where x is a time based on the specified time as the function. When the relative coordinate value based on the coordinates is y and the constant is k, the distance corresponding to time is defined on the scale by the function of y = k√ | x |, and the scale is displayed. It is characterized by controlling .

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するように制御することを特徴とする。 In the image display method according to the present invention, in the above invention, the scale display control step includes a first scale indicating a predetermined time period of the entire captured image, and the first scale in the specific time zone. Control is performed to display the second scale arranged at another position.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第1のスケール上に、前記第2のスケールに対応する範囲を判別自在な形式で現した分別部を表示するように制御することを特徴とする。 The image display method according to the present invention is the image display method according to the above invention, wherein the scale display control step includes a classification unit that displays a range corresponding to the second scale on the first scale in a form that can be discriminated. The display is controlled to be displayed.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記分別部を、前記第1のスケールにおける所定範囲を空白領域で表示するように制御することを特徴とする。 In the image display method according to the present invention as set forth in the invention described above, the scale display control step controls the sorting unit to display a predetermined range in the first scale in a blank area. .

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第1のスケールにおける前記分別部と前記第2のスケールとのそれぞれ対応する位置を結ぶ線状図示部を表示するように制御することを特徴とする。 The image display method according to the present invention is the image display method according to the above invention, wherein the scale display control step includes a linear illustration unit that connects corresponding positions of the classification unit and the second scale in the first scale. The display is controlled to be displayed.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第1および第2のスケールと前記線状図示部とをほぼ同等の幅の帯形状で、かつ俯瞰図として表示するように制御することを特徴とする。 In the image display method according to the present invention as set forth in the invention described above, in the scale display control step, the first and second scales and the linearly illustrated portion have a band shape with substantially the same width, and an overhead view. It controls to display as.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第2のスケールを前記第1のスケールに対して平行に表示するように制御することを特徴とする。 In the image display method according to the present invention as set forth in the invention described above, the scale display control step performs control so that the second scale is displayed in parallel with the first scale.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第2のスケールを前記第1のスケールにおける前記空白領域内に所定の範囲で複数の屈曲部を有して表示するように制御することを特徴とする。 Further, in the image display method according to the present invention as set forth in the invention described above, the scale display control step includes a plurality of bent portions within a predetermined range in the blank area of the first scale. The display is controlled to be displayed.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記第2のスケールを前記第1のスケールに対して垂直に表示するように制御することを特徴とする。 The image display method according to the present invention is characterized in that, in the above invention, the scale display control step controls the second scale to be displayed perpendicularly to the first scale.

また、発明にかかる画像表示方法は、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上に前記画像指定手段により指定された画像の枚数が単位時間に占める比率に対応した図を表示するように制御するスケール表示制御ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、を含むことを特徴とする。 Further, an image display method according to the present invention includes an image display control step for controlling to sequentially display captured images, an image designation step for designating a desired image that has been display-controlled in the image display control step, Control is performed to display a scale indicating the predetermined time period of the entire captured image, and a figure corresponding to the ratio of the number of images specified by the image specifying means to the unit time is displayed on the scale. A scale display control step for controlling, and an index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the designated time designated by the image designation step on the scale. It is characterized by that.

また、発明にかかる画像表示方法は、上記発明において、前記スケール表示制御ステップは、前記比率に対応して変化した色彩による図を表示するように制御することを特徴とする。 The image display method according to the present invention is characterized in that, in the above-mentioned invention, the scale display control step performs control so as to display a figure with a color changed corresponding to the ratio.

また、発明にかかる画像表示方法は、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するスケール表示制御ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、前記指標表示制御ステップにより表示制御された指標に対応する画像を、該画像の時間に対応する座標軸に平行な方向を、前記時間に対応する座標軸に垂直な方向に対して縮小した縮小画像として表示するように制御する縮小画像表示制御ステップと、を含むことを特徴とする。 Further, an image display method according to the present invention includes an image display control step for controlling to sequentially display captured images, an image designation step for designating a desired image that has been display-controlled in the image display control step, A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and a position corresponding to the predetermined time of the image as the specified time specified by the image specifying step on the scale An index display control step for controlling to display an index, an image corresponding to the index controlled by the index display control step, a direction parallel to a coordinate axis corresponding to the time of the image, and the time A reduced image display control step for controlling to display as a reduced image reduced in a direction perpendicular to the coordinate axis; And wherein the Mukoto.

また、発明にかかる画像表示方法は、上記発明において、前記縮小画像表示制御ステップは、前記縮小画像を俯瞰図として表示するように制御することを特徴とする。 The image display method according to the present invention is characterized in that, in the above invention, the reduced image display control step performs control so that the reduced image is displayed as an overhead view.

また、発明にかかる画像表示プログラムは、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、を含むことを特徴とする。 An image display program according to the present invention includes an image display control step for controlling the captured images to be sequentially displayed, an image designation step for designating a desired image that is controlled in the image display control step, A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced; and An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale.

また、発明にかかる画像表示プログラムは、上記発明において、前記スケール表示制御ステップは、前記スケール上で時間に対応する距離を、前記指定時刻に対応する位置を基点とした関数で定義して、前記スケールを表示するように制御することを特徴とする。 In the image display program according to the present invention, in the above invention, the scale display control step defines a distance corresponding to time on the scale by a function based on a position corresponding to the specified time, Control is performed to display the scale.

また、発明にかかる画像表示プログラムは、上記発明において、前記スケール表示制御ステップは、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するように制御することを特徴とする。 In the image display program according to the present invention, in the above invention, the scale display control step includes: a first scale indicating a predetermined time period of the entire captured image; and the first scale in the specific time zone. Control is performed to display the second scale arranged at another position.

また、発明にかかる画像表示プログラムは、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上に前記画像指定手段により指定された画像の枚数が単位時間に占める比率に対応した図を表示するように制御するスケール表示ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、を含むことを特徴とする。 An image display program according to the present invention includes an image display control step for controlling the captured images to be sequentially displayed, an image designation step for designating a desired image that is controlled in the image display control step, Control is performed to display a scale indicating the predetermined time period of the entire captured image, and a figure corresponding to the ratio of the number of images specified by the image specifying means to the unit time is displayed on the scale. A scale display step for controlling, and an index display control step for controlling so as to display an index indicating a position corresponding to a predetermined time of the image as the designated time designated by the image designation step on the scale. It is characterized by.

また、発明にかかる画像表示プログラムは、上記発明において、前記スケール表示制御ステップは、前記比率に対応して変化した色彩による図を表示するように制御することを特徴とする。 Further, the image display program according to the present invention is characterized in that, in the above-mentioned invention, the scale display control step performs control so as to display a figure with a color changed corresponding to the ratio.

また、発明にかかる画像表示プログラムは、取り込んだ画像を順次表示するように制御する画像表示制御ステップと、前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するスケール表示制御ステップと、前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、前記指標表示制御ステップにより表示制御された指標に対応する画像を、該画像の時間に対応する座標軸に平行な方向を、前記時間に対応する座標軸に垂直な方向に対して縮小した縮小画像として表示するように制御する縮小画像表示制御ステップと、を含むことを特徴とする。 An image display program according to the present invention includes an image display control step for controlling the captured images to be sequentially displayed, an image designation step for designating a desired image that is controlled in the image display control step, A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and a position corresponding to the predetermined time of the image as the specified time specified by the image specifying step on the scale An index display control step for controlling to display an index, an image corresponding to the index controlled by the index display control step, a direction parallel to a coordinate axis corresponding to the time of the image, and the time Reduced image display control step for controlling to display as a reduced image reduced in a direction perpendicular to the coordinate axis , Characterized in that it comprises a.

また、発明にかかる画像表示プログラムは、上記発明において、前記縮小画像表示制御ステップは、前記縮小画像を俯瞰図として表示するように制御することを特徴とする。 The image display program according to the present invention is characterized in that, in the above invention, the reduced image display control step controls to display the reduced image as an overhead view.

本発明にかかる画像表示装置、画像表示方法および画像表示プログラムによれば、スケール表示制御手段が画像全体の所定時刻期間を示すスケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するので、たとえば指定された画像の指定時刻に対応する位置を基点とした特定時間帯に対応する特定の範囲を確認したい場合、その特定の範囲に対応する距離を拡大し、他の範囲に対応する距離を縮小して表示することが可能となり、これによってタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができるという効果を奏する。   According to the image display device, the image display method, and the image display program according to the present invention, the scale display control means displays the distance corresponding to the specific time zone on the scale indicating the predetermined time period of the entire image in an enlarged or reduced manner. For example, when it is desired to confirm a specific range corresponding to a specific time zone based on the position corresponding to the specified time of the specified image, the distance corresponding to the specific range is expanded, The distance corresponding to the range can be reduced and displayed, thereby producing an effect that a specific range on the time axis scale of the time bar can be confirmed in detail.

以下に、本発明にかかる画像表示装置、画像表示方法および画像表示プログラムの実施の形態を図1〜図13の図面に基づいて詳細に説明する。なお、本発明は、これらの実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲で種々の変更実施の形態が可能である。   Embodiments of an image display device, an image display method, and an image display program according to the present invention will be described below in detail with reference to the drawings of FIGS. The present invention is not limited to these embodiments, and various modifications can be made without departing from the scope of the present invention.

(実施の形態1)
図1は、本発明にかかる画像表示装置の好適な実施の形態である無線方の被検体内情報取得システムの全体構成を示す模式図である。この被検体内情報取得システムは、被検体内導入装置の一例としてカプセル型内視鏡を用いている。図1に示すように、無線型被検体内情報取得システムは、被検体1内に導入され、体腔内画像を撮像して受信装置2に対して映像信号などのデータ送信を行うカプセル型内視鏡3と、カプセル型内視鏡3から無線送信された体腔内画像データを受信する受信装置2とを備える。また、無線型被検体内情報取得システムは、受信装置2が受信した映像信号に基づいて体腔内画像を表示する画像表示装置4と、受信装置2と画像表示装置4との間でデータの受け渡しを行うための携帯型記録媒体5とを備える。受信装置2は、被検体1の対外表面に貼付される複数の受信用アンテナA1〜Anを有した無線ユニット2aと、複数の受信用アンテナA1〜Anを介して受信される無線信号の処理などを行う受信本体ユニット2bとを備え、これらユニットはコネクタなどを介して着脱可能に接続される。なお、受信用アンテナA1〜Anのそれぞれは、たとえば被検体1が着用可能なジャケットに備え付けられ、被検体1は、このジャケットを着用することによって受信用アンテナA1〜Anを装着するようにしてもよい。また、この場合、受信用アンテナA1〜Anは、ジャケットに対して着脱可能なものであってもよい。
(Embodiment 1)
FIG. 1 is a schematic diagram showing an overall configuration of a wireless in-vivo information acquiring system which is a preferred embodiment of an image display apparatus according to the present invention. This intra-subject information acquisition system uses a capsule endoscope as an example of the intra-subject introduction apparatus. As shown in FIG. 1, the wireless in-vivo information acquiring system is a capsule-type endoscope that is introduced into a subject 1 and images a body cavity image and transmits data such as a video signal to a receiving device 2. A mirror 3 and a receiving device 2 that receives in-vivo image data wirelessly transmitted from the capsule endoscope 3 are provided. The wireless in-vivo information acquiring system also transfers data between the image display device 4 that displays an in-vivo image based on the video signal received by the receiving device 2, and the receiving device 2 and the image display device 4. A portable recording medium 5 for performing the above. The receiving device 2 includes a radio unit 2a having a plurality of receiving antennas A1 to An attached to the outer surface of the subject 1, processing of radio signals received through the plurality of receiving antennas A1 to An, and the like. And a receiving body unit 2b for performing these operations, and these units are detachably connected via a connector or the like. Each of the receiving antennas A1 to An is provided, for example, in a jacket on which the subject 1 can be worn, and the subject 1 wears the receiving antennas A1 to An by wearing this jacket. Good. In this case, the receiving antennas A1 to An may be detachable from the jacket.

画像表示装置4は、カプセル型内視鏡3によって撮像された体腔内画像などを表示するためのものであり、携帯型記録媒体5によって得られるデータをもとに画像表示を行うワークステーションなどのような構成を有する。具体的には、画像表示装置4は、CRTディスプレイ、液晶ディスプレイなどによって直接画像を表示する構成としてもよいし、プリンタなどのように、他の媒体に画像を出力する構成としてもよい。   The image display device 4 is for displaying an in-vivo image captured by the capsule endoscope 3, and is a workstation that displays an image based on data obtained by the portable recording medium 5. The configuration is as follows. Specifically, the image display device 4 may be configured to directly display an image using a CRT display, a liquid crystal display, or the like, or may be configured to output an image to another medium such as a printer.

携帯型記録媒体5は、受信本体ユニット2bおよび画像表示装置4に対して着脱可能であって、両者に対して挿着された時に情報の出力または記録が可能な構造を有する。この実施の形態では、携帯型記録媒体5は、カプセル型内視鏡3が被検体1の体腔内を移動している間は、受信本体ユニット2bに挿着され、カプセル型内視鏡3から送信されるデータが携帯型記録媒体5に記録される。そして、被検体1の内部の撮像が終了した後には、受信本体ユニット2bから取り出されて画像表示装置4に挿着され、この画像表示装置4によって、携帯型記録媒体5に記録されたデータが読み出される構成を有する。たとえば、受信本体ユニット2bと画像表示装置4とのデータの受け渡しを、コンパクトフラッシュ(登録商標)メモリなどから構成される携帯型記録媒体5によって行うことで、被検体1が体腔内の撮影中に自由に動作することが可能となり、また画像表示装置4との間のデータの受け渡し期間の短縮にも寄与している。なお、ここでは、受信本体ユニット2bと画像表示装置4との間のデータの受け渡しに携帯型記録媒体5を使用したが、必ずしもこれに限らず、たとえば受信本体ユニット2bに内蔵型の他の記録装置、たとえばハードディスクを用い、画像表示装置4と有線または無線接続するように構成してもよい。   The portable recording medium 5 is detachable with respect to the receiving main unit 2b and the image display device 4, and has a structure capable of outputting or recording information when inserted into both. In this embodiment, the portable recording medium 5 is inserted into the receiving body unit 2 b while the capsule endoscope 3 is moving in the body cavity of the subject 1, and Data to be transmitted is recorded on the portable recording medium 5. Then, after the imaging of the inside of the subject 1 is completed, the data taken out from the receiving body unit 2b and inserted into the image display device 4 is used to store the data recorded on the portable recording medium 5 by the image display device 4. It has a configuration to be read out. For example, data is exchanged between the receiving main body unit 2b and the image display device 4 using a portable recording medium 5 composed of a compact flash (registered trademark) memory or the like, so that the subject 1 is imaged in the body cavity. It is possible to operate freely, and also contributes to shortening the data transfer period with the image display device 4. In this example, the portable recording medium 5 is used for data transfer between the receiving main unit 2b and the image display device 4. However, the present invention is not limited to this. A device such as a hard disk may be used and connected to the image display device 4 in a wired or wireless manner.

次に、図2のブロック図の一例を用いて画像表示装置4の構成を説明する。図2において、画像表示装置4は、入力部20と、記憶部30と、表示部40と、制御部50とを備える。   Next, the configuration of the image display device 4 will be described using an example of the block diagram of FIG. In FIG. 2, the image display device 4 includes an input unit 20, a storage unit 30, a display unit 40, and a control unit 50.

入力部20は、キーボードやマウスなどのポインティングデバイスなどによって実現され、画像表示装置4の動作指示および画像表示装置4が行う処理の指示情報を入力し、各指示情報を制御部50に送出している。また、入力部20は、画像指定手段としての機能を有し、表示部40の画像表示領域に表示された画像の中から所望の画像を指定する指定情報を入力する。たとえば、入力部20のマウスを操作し、画面上に表示されたカーソルを、画像表示領域に表示された画像上に移動させて、所望の画像に対してボタンをクリックした場合、入力部20は、この画像を指定するための指定情報としての指示情報を入力する。   The input unit 20 is realized by a pointing device such as a keyboard or a mouse, inputs an operation instruction of the image display device 4 and instruction information of processing performed by the image display device 4, and sends each instruction information to the control unit 50. Yes. The input unit 20 has a function as an image designation unit, and inputs designation information for designating a desired image from the images displayed in the image display area of the display unit 40. For example, when the mouse of the input unit 20 is operated, the cursor displayed on the screen is moved onto the image displayed in the image display area, and the button is clicked on the desired image, the input unit 20 The instruction information as the designation information for designating the image is input.

たとえば、入力部20のマウスを操作し、後述する画面上のカーソル21を体腔内画像上に移動させた状態で、マウスの左ボタンがダブルクリックされた場合に、入力部20は、所望の体腔内画像の縮小表示(サムネイル表示)を指示する指示情報を入力する。また、入力部20のマウスを操作し、後述する画面上のカーソル21を画像再生ボタン上に移動させた状態でマウスの左ボタンがクリックされた場合に、体腔内画像の再生を指示する指示情報を入力する。   For example, when the mouse of the input unit 20 is operated and the cursor 21 on the screen to be described later is moved onto the in-vivo image and the left button of the mouse is double-clicked, the input unit 20 displays the desired body cavity. Instruction information for instructing reduction display (thumbnail display) of the inner image is input. In addition, when the left button of the mouse is clicked in a state where the mouse of the input unit 20 is operated and the cursor 21 on the screen to be described later is moved onto the image reproduction button, instruction information for instructing reproduction of the in-vivo image Enter.

記憶部30は、たとえばハードディスク装置などによって実現され、各種画像などを保持する。たとえば、記憶部30は、フォルダF1とフォルダF2を有し、フォルダF1内には、カプセル型内視鏡3によって撮像された画像群Paが格納される。フォルダF1に格納された画像群Paには、画像ごとに、受信装置2における画像データの受信順にしたがってフレーム番号と時間が付与されている。   The storage unit 30 is realized by a hard disk device, for example, and holds various images. For example, the storage unit 30 includes a folder F1 and a folder F2, and an image group Pa captured by the capsule endoscope 3 is stored in the folder F1. The image group Pa stored in the folder F1 is given a frame number and a time for each image according to the order of reception of the image data in the receiving device 2.

フォルダF2内には、画像群Paの各フレーム番号と、入力部20によって選択指示された体腔内画像を示すためのフラグとを対応付けたテーブルTaが格納される。なお、体腔内画像のフレーム番号は、撮像順に1からN(Nは任意の正数)まで順番に番号が付されており、選択指示された体腔内画像のフレーム番号には、フラグ“1”が立っている。   Stored in the folder F2 is a table Ta in which each frame number of the image group Pa is associated with a flag for indicating an in-vivo image selected and designated by the input unit 20. The frame numbers of the in-vivo images are numbered sequentially from 1 to N (N is an arbitrary positive number) in the order of imaging, and the flag number “1” is included in the frame number of the in-vivo image that has been selected. Is standing.

表示部40は、CRTディスプレイ、液晶ディスプレイなどによって実現され、入力部20の指示情報あるいは指示結果などを表示する。表示部40は、記憶部30のフォルダF1に格納された画像群Paにおける体腔内画像、指示情報によって指示された縮小画像(サムネイル画像)などが表示される画像表示領域を有する。   The display unit 40 is realized by a CRT display, a liquid crystal display, or the like, and displays instruction information or an instruction result of the input unit 20. The display unit 40 has an image display area in which an intra-body cavity image in the image group Pa stored in the folder F1 of the storage unit 30, a reduced image (thumbnail image) instructed by instruction information, and the like are displayed.

すなわち、表示部40は、図3の表示画面の一例に示すように、表示画面に画像表示領域(ウィンドウ)Wが表示される。このウィンドウWには、大きくは、体腔内画像を表示する体腔内画像表示領域A1、サムネイル画像Pcを表示するサムネイル画像表示領域A2、検査IDや患者IDなどの識別情報を表示する識別情報表示領域A3が設けられている。サムネイル画像表示領域A2は、体腔内画像表示領域A1の下方の領域に、識別情報表示領域A3は、体腔内画像表示領域A1の向かって左側の領域に設けられ、体腔内画像表示領域A1とサムネイル画像表示領域A2との間には、再生、一時停止、コマ送り、先頭出し、終端出しなどの各ボタンからなる再生制御ボタン群41とタイムバー42とがそれぞれ設けられている。また、43は、再生速度を低速/高速の2段階で切り換えるための再生速度変更ボタンである。   That is, the display unit 40 displays an image display area (window) W on the display screen as shown in the example of the display screen of FIG. In this window W, there are mainly an in-vivo image display area A1 for displaying an in-vivo image, a thumbnail image display area A2 for displaying a thumbnail image Pc, and an identification information display area for displaying identification information such as examination ID and patient ID. A3 is provided. The thumbnail image display area A2 is provided below the body cavity image display area A1, and the identification information display area A3 is provided on the left side of the body cavity image display area A1. Between the image display area A2, a playback control button group 41 and a time bar 42 each including buttons for playback, pause, frame advance, head start, end end, and the like are provided. Reference numeral 43 denotes a playback speed change button for switching the playback speed in two stages of low speed and high speed.

表示部40は、フォルダF1に格納された画像群Paにおける体腔内画像Pbを、所望の再生フレームレート(画像を再生するための表示レート)で順次表示する。タイムバー42は、被検体内の体腔内画像全体の所定時刻期間たとえば撮像時間を示している。このタイムバー42は、バー全体の長さがたとえば10時間に設定されており、再生中の画像の時間的な位置を表示する。また、このタイムバー42上には、入力部20で指定された画像の所定時刻たとえば撮像時刻を示す縦のバー形状の指標44が表示されている。入力部20の指定によってサムネイル画像表示領域A2に表示されているサムネイル画像Pcとこのサムネイル画像Pcに該当するタイムバー42上の指標44とは、体腔内画像Pbに付与された時間情報によって互いに結線でリンクされている。なお、体腔内画像全体の所定時刻期間は、たとえば受信装置2が体腔内画像全体を受信した受信時間であってもよく、各画像の所定時刻は、たとえば受信装置2が各体腔内画像を受信した受信時間であってもよい。   The display unit 40 sequentially displays the in-vivo images Pb in the image group Pa stored in the folder F1 at a desired playback frame rate (display rate for playing back images). The time bar 42 indicates a predetermined time period, for example, an imaging time of the entire body cavity image in the subject. The time bar 42 is set to have a total length of 10 hours, for example, and displays the temporal position of the image being reproduced. On the time bar 42, a vertical bar-shaped index 44 indicating a predetermined time, for example, an imaging time, of the image designated by the input unit 20 is displayed. The thumbnail image Pc displayed in the thumbnail image display area A2 by the designation of the input unit 20 and the index 44 on the time bar 42 corresponding to the thumbnail image Pc are connected to each other by the time information given to the in-vivo image Pb. Linked by The predetermined time period of the whole body cavity image may be, for example, the reception time when the receiving device 2 receives the whole body cavity image. The predetermined time of each image is, for example, the reception device 2 receiving each body cavity image. It may be the received time.

制御部50は、図2に示すように、入力部20、記憶部30、表示部40の各処理または動作を制御する。制御部50は、画像群Paに含まれる画像などを処理する画像処理部51と、表示部40における表示処理を制御する表示制御部52とを備える。   As illustrated in FIG. 2, the control unit 50 controls each process or operation of the input unit 20, the storage unit 30, and the display unit 40. The control unit 50 includes an image processing unit 51 that processes images included in the image group Pa, and a display control unit 52 that controls display processing in the display unit 40.

画像処理部51は、画像群Paに含まれる画像などを処理するとともに、画像群Paの各画像のフレーム番号と、フラグとを対応付けたテーブルTaを生成する。また、画像処理部51は、このテーブルTaに、入力部20からの指示情報に基づく、画像のフレーム番号にサムネイル画像である旨を示すフラグを付与して出力する。たとえば、テーブルTaにおいて、フラグ“1”はサムネイル画像であることを示し、フラグ“0”は、サムネイル画像でないことを示す。   The image processing unit 51 processes an image included in the image group Pa and generates a table Ta in which the frame number of each image in the image group Pa is associated with a flag. Further, the image processing unit 51 assigns a flag indicating that the image is a thumbnail image to the frame number of the image based on the instruction information from the input unit 20 and outputs the table Ta. For example, in the table Ta, the flag “1” indicates that the image is a thumbnail image, and the flag “0” indicates that the image is not a thumbnail image.

表示制御部52は、表示部40における表示処理を制御する機能であり、画像の表示処理を制御する画像表示制御手段としての画像表示制御部53と、スケールとしてのタイムバー42などの時刻の表示処理を制御するスケール表示制御手段としてのスケール表示制御部54と、指標44の表示処理を制御する指標表示制御手段としての指標表示制御部55と、サムネイル画像の表示処理を制御する縮小画像表示制御手段としての縮小画像表示制御部56とを備える。   The display control unit 52 has a function of controlling display processing in the display unit 40, and displays time such as an image display control unit 53 as image display control means for controlling image display processing and a time bar 42 as a scale. Scale display control unit 54 as scale display control means for controlling processing, index display control unit 55 as index display control means for controlling display processing of index 44, and reduced image display control for controlling thumbnail image display processing And a reduced image display control unit 56 as means.

画像表示制御部53は、フォルダF1に格納された画像群PaおよびフォルダF2に格納されたテーブルTaの情報をもとに、表示部40に対して、体腔内画像表示領域A1に画像群Paにおける体腔内画像を、フレーム番号順にしたがって表示させる。   Based on the information in the image group Pa stored in the folder F1 and the information in the table Ta stored in the folder F2, the image display control unit 53 displays the image group Pa in the body cavity image display area A1 with respect to the display unit 40. The body cavity images are displayed in the order of the frame numbers.

スケール表示制御部54は、タイムバー42上で時間に対応する距離を、入力部20により指定された画像の撮像時刻(指定時刻)に対応する位置を基点とした関数で定義して、タイムバー42を表示するように制御する。すなわち、スケール表示制御部54は、指定時刻を基点とした時間をx、前記画像表示装置における画面上の上記指定時刻に対応する座標を基準とした相対座標値をyとし、定数をkとした時に、図4に示すようにy=k√|x|の関数で定義し、相対座標値yに基づいて、タイムバー42の時刻表示を行うように制御する。たとえば、図4中の時刻6時(6h)が指定時刻とすると、この6時を基点として、時間x1に相当する時刻5時(5h)と7時(7h)が相対座標値y1で、時間x2に相当する時刻4時(4h)と8時(8h)が相対座標値y2で、時間x3に相当する時刻3時(3h)と9時(9h)が相対座標値y3で、時間x4に相当する時刻2時(2h)と10時(10h)が相対座標値y4で、時間x5に相当する時刻1時(1h)が相対座標値y5でそれぞれ表示されることとなり、時刻が指定時刻から時間的に離れるほど、時間に対する距離が短くなる。   The scale display control unit 54 defines the distance corresponding to the time on the time bar 42 as a function based on the position corresponding to the imaging time (specified time) of the image specified by the input unit 20. 42 is displayed. That is, the scale display control unit 54 sets the time with the specified time as a base point to x, the relative coordinate value based on the coordinates corresponding to the specified time on the screen in the image display device as y, and the constant as k. Sometimes, as shown in FIG. 4, the function is defined by a function of y = k√ | x |, and the time bar 42 is controlled to display the time based on the relative coordinate value y. For example, if the designated time is 6 o'clock (6h) in FIG. 4, the time 5 o'clock (5h) and 7 o'clock (7h) corresponding to time x1 are relative coordinate values y1, Times 4 o'clock (4h) and 8 o'clock (8h) corresponding to x2 are relative coordinate values y2, and times 3 o'clock (3h) and 9 o'clock (9h) corresponding to time x3 are relative coordinate values y3 at time x4. The corresponding time 2:00 (2h) and 10:00 (10h) are displayed with the relative coordinate value y4, and the time 1:00 (1h) corresponding to the time x5 is displayed with the relative coordinate value y5. The longer the distance, the shorter the distance to time.

指標表示制御部55は、入力部20により指定された指定時刻としての画像の撮像時刻に対応する位置を示す指標44を、タイムバー42上の該当する位置に表示するように制御を行う。このタイムバー42上に表示される指標も、上記定義された関数の制約を受けることとなり、入力部20により指定された指定時刻から時間的に離れるほど、時間に対する距離が短く表示されることとなる。   The index display control unit 55 performs control so that the index 44 indicating the position corresponding to the image capturing time as the specified time specified by the input unit 20 is displayed at the corresponding position on the time bar 42. The index displayed on the time bar 42 is also restricted by the function defined above, and the distance to the time is displayed shorter as the time is separated from the specified time specified by the input unit 20. Become.

縮小画像表示制御部56は、入力部20により指定された画像のサムネイル画像をサムネイル画像表示領域A2に表示させるように表示制御しており、表示されたサムネイル画像は該当する指標44と線で結ばれている。すなわち、入力部20のマウスが操作され、画面上のカーソル21を体腔内画像上に移動させた状態で、マウスの左ボタンがダブルクリックされることによる指定情報の入力に対して、縮小画像表示制御部56は、この指定された画像の縮小画像であるサムネイル画像をサムネイル画像表示領域A2の該当箇所に表示するように制御する。   The reduced image display control unit 56 performs display control so that the thumbnail image of the image designated by the input unit 20 is displayed in the thumbnail image display area A2, and the displayed thumbnail image is connected to the corresponding index 44 by a line. It is. That is, when the mouse of the input unit 20 is operated and the cursor 21 on the screen is moved onto the body cavity image, a reduced image is displayed in response to input of designation information by double-clicking the left button of the mouse. The control unit 56 controls the thumbnail image, which is a reduced image of the designated image, to be displayed at a corresponding location in the thumbnail image display area A2.

次に、図5のフローチャートを用いて、図2に示した画像表示装置4による画像表示の動作を説明する。図5において、まず、画像処理部51は、記憶部30のフォルダF1に格納されている画像群Paの画像情報を取得する(ステップS101)。スケール表示制御部54は、画像表示領域W内の所定位置にタイムバー42を表示するように制御する(ステップS102)。なお、この時点においては、スケール表示制御部54はタイムバー42上で時間に対応する距離を一定にしてタイムバー42を表示するように制御する。   Next, the operation of image display by the image display device 4 shown in FIG. 2 will be described using the flowchart of FIG. In FIG. 5, first, the image processing unit 51 acquires image information of the image group Pa stored in the folder F1 of the storage unit 30 (step S101). The scale display control unit 54 performs control to display the time bar 42 at a predetermined position in the image display area W (step S102). At this time, the scale display control unit 54 performs control so that the time bar 42 is displayed with a constant distance corresponding to time on the time bar 42.

次に、表示制御部52では、画像群Paの画像表示を指示する指示情報が入力部20から入力したかどうか判断する(ステップS103)。ここでは、たとえば入力部20のマウスを操作し、図3に示す画面上のカーソル21を再生制御ボタン群41の画像再生ボタン上に移動させた状態でマウスの左ボタンがクリックされた場合に、体腔内画像の再生、すなわち画像群Paの画像表示を指示する指示情報が入力される。   Next, the display control unit 52 determines whether instruction information for instructing image display of the image group Pa is input from the input unit 20 (step S103). Here, for example, when the mouse of the input unit 20 is operated and the left button of the mouse is clicked in a state where the cursor 21 on the screen shown in FIG. 3 is moved onto the image playback button of the playback control button group 41, Instruction information for instructing reproduction of an image in the body cavity, that is, image display of the image group Pa is input.

ここで、表示制御部52が、画像群Paの画像表示を指示する指示情報を入力しないと判断した場合(ステップS103:Noの場合)、制御部50は、画像群Paに対する画像処理を終了する。また、表示制御部52が、画像群Paの画像表示を指示する指示情報を入力したと判断した場合(ステップS103:Yesの場合)、画像表示制御部53は、表示部40に対して、体腔内画像表示領域A1に画像群Paにおける体腔内画像を、フレーム番号順にしたがって表示させる(ステップS104)。   Here, when the display control unit 52 determines that the instruction information for instructing the image display of the image group Pa is not input (step S103: No), the control unit 50 ends the image processing for the image group Pa. . Further, when the display control unit 52 determines that the instruction information for instructing the image display of the image group Pa is input (step S103: Yes), the image display control unit 53 controls the display unit 40 with respect to the body cavity. The in-vivo images in the image group Pa are displayed in the inner image display area A1 in the order of frame numbers (step S104).

次に、表示制御部52では、画像の指定があるかどうか判断する(ステップS105)。ここで、画像の指定がない場合(ステップS105:Noの場合)、表示制御部52では、最終画像まで表示したかどうか判断し(ステップS109)、画像表示が最終画像まで表示されていない場合(ステップS109:Noの場合)には、ステップS104に戻って、画像表示制御部53による画像表示を行い、また画像表示が最終画像まで表示された場合(ステップS109:Yesの場合)には、上記動作を終了する。   Next, the display control unit 52 determines whether an image is designated (step S105). If no image is specified (step S105: No), the display control unit 52 determines whether the final image has been displayed (step S109), and if the image display has not been displayed until the final image (step S109) If NO in step S109, the process returns to step S104 to display an image by the image display control unit 53. If the image display is displayed up to the final image (in the case of YES in step S109), the above-described process is performed. End the operation.

また、入力部20のマウスを操作し、画面上のカーソル21を体腔内画像上に移動させた状態で、マウスの左ボタンがダブルクリックされた場合に、表示制御部52では、画像の指定がなされたと判断する。この画像の指定があると、縮小画像表示制御部56は、指定された画像のサムネイル画像を、サムネイル画像表示領域A2にフレーム番号順にしたがって表示させる(ステップS106)。そして、スケール表示制御部54は、画像表示領域W内の所定位置にタイムバー42を表示するように制御する(ステップS107)。なお、この時点においては、スケール表示制御部54は、タイムバー42上で時間に対応する距離を、入力部20により指定された画像の撮像時刻(指定時刻)に対応する位置を基点としたy=k√|x|の関数で定義して、タイムバー42を表示するように制御する。さらに、指標表示制御部55は、入力部20により指定された画像の撮像時刻に対応する位置を示す指標44を、タイムバー42上の該当する位置に表示するように制御を行う(ステップS108)。   Further, when the left button of the mouse is double-clicked while the mouse of the input unit 20 is operated and the cursor 21 on the screen is moved onto the body cavity image, the display control unit 52 specifies the image. Judge that it was made. When this image is designated, the reduced image display control unit 56 causes the thumbnail image of the designated image to be displayed in the thumbnail image display area A2 in the order of the frame number (step S106). Then, the scale display control unit 54 performs control so that the time bar 42 is displayed at a predetermined position in the image display area W (step S107). At this time, the scale display control unit 54 sets the distance corresponding to the time on the time bar 42 as the base point at the position corresponding to the imaging time (specified time) of the image specified by the input unit 20. = K√ | x | is defined by a function, and the time bar 42 is controlled to be displayed. Further, the index display control unit 55 performs control so that the index 44 indicating the position corresponding to the imaging time of the image designated by the input unit 20 is displayed at the corresponding position on the time bar 42 (step S108). .

そして、ステップS109において、表示制御部52では、最終画像まで表示したかどうか判断し、画像表示が最終画像まで表示されていない場合(ステップS109:Noの場合)には、ステップS104に戻って、画像表示制御部53による画像表示を行い、また画像表示が最終画像まで表示された場合(ステップS109:Yesの場合)には、上記動作を終了する。   In step S109, the display control unit 52 determines whether or not the final image is displayed. If the image display is not displayed until the final image (step S109: No), the process returns to step S104. The image display by the image display control unit 53 is performed, and when the image display is displayed up to the final image (step S109: Yes), the above operation is terminated.

このように、この実施の形態では、入力部20からの画像の指定により、スケール表示制御部54が時間に対応する距離を、指定時刻に対応する位置を基点とした関数で定義して、タイムバー42の表示制御を行うので、指定時刻に対応する位置を基点とした特定時間帯としての特定の範囲に対応する距離を拡大し、指定時刻から時間的に離れるほど、時間に対する距離が短く表示することができ、タイムバーの時間軸スケール上の特定の範囲を詳細に確認することができる。   As described above, in this embodiment, the scale display control unit 54 defines the distance corresponding to the time by the function based on the position corresponding to the specified time according to the designation of the image from the input unit 20. Since the display control of the bar 42 is performed, the distance corresponding to a specific range as a specific time zone with the position corresponding to the specified time as a base point is enlarged, and the distance to the time is displayed shorter as the time is further away from the specified time. The specific range on the time axis scale of the time bar can be confirmed in detail.

(実施の形態2)
図6は、図2に示した実施の形態2にかかる表示部の表示画面を示す図である。なお、この実施の形態および以下に示す実施の形態において、ブロック構成は、図2に示した構成と同様であるので、異なる点を以下に説明する。
(Embodiment 2)
FIG. 6 is a diagram showing a display screen of the display unit according to the second embodiment shown in FIG. In this embodiment and the embodiment described below, the block configuration is the same as the configuration shown in FIG. 2, and different points will be described below.

この実施の形態では、スケール表示制御部54は、取り込んだ画像全体の撮像時刻を示す第1のスケールとしての第1のタイムバー42と、特定時間帯において第1のタイムバー42と別の位置に配置される第2のスケールとしての第2のタイムバー45と、第1のタイムバー42上に第2のタイムバー45に対応する範囲を判別自在な空白領域で現した分別部46と、この分別部46と第2のタイムバー45とのそれぞれ対応する位置を結ぶ線状図示部47とを表示するように制御する。   In this embodiment, the scale display control unit 54 has a first time bar 42 as a first scale indicating the imaging time of the entire captured image, and a position different from the first time bar 42 in a specific time zone. A second time bar 45 as a second scale disposed in the first time bar 42, and a classification unit 46 that represents a range corresponding to the second time bar 45 on the first time bar 42 as a discriminable blank area; Control is performed so as to display a linear illustration unit 47 connecting the corresponding positions of the sorting unit 46 and the second time bar 45.

この実施の形態では、第1および第2のタイムバー42,45と線状図示部47は、ほぼ同等の幅の帯形状で、かつ俯瞰図として表示されて、さらにこの第2のタイムバー45は、第1のタイムバー42に対して平行に表示されている。第2のタイムバー45は、スケール表示制御部54によって、入力部20で指定された画像の撮像時刻に対応する位置を示す縦のバー形状の指標44を基点として、たとえば前後約30分間に設定された特定時間帯に対応する距離を拡大して表示制御されたものである。   In the present embodiment, the first and second time bars 42 and 45 and the linearly-illustrated portion 47 are displayed in a band shape having substantially the same width and as an overhead view, and this second time bar 45 is further displayed. Are displayed in parallel to the first time bar 42. The second time bar 45 is set by the scale display control unit 54, for example, about 30 minutes before and after the vertical bar-shaped index 44 indicating the position corresponding to the image capturing time specified by the input unit 20. The display is controlled by enlarging the distance corresponding to the specified time zone.

このように、この実施の形態では、特定時間帯である第2のタイムバーを第1のタイムバーとは別体で、かつ立体的に拡大するように表示制御するので、特定時間帯を容易に認識することができ、これによりさらにタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができる。   Thus, in this embodiment, the second time bar, which is a specific time zone, is displayed separately from the first time bar and is controlled to expand three-dimensionally, so that the specific time zone can be easily set. Accordingly, a specific range on the time axis scale of the time bar can be further confirmed in detail.

なお、この実施の形態では、第2のタイムバー45の下方にサムネイル画像を表示させ、実施の形態1と同様に、該当する指標44と結線させることも可能であり、第2のタイムバー45の拡大率や特定時間帯の設定された時間幅(範囲)は、無論任意に設定することも可能である。   In this embodiment, it is also possible to display a thumbnail image below the second time bar 45 and connect it to the corresponding index 44 in the same manner as in the first embodiment. Of course, the expansion rate and the set time width (range) of the specific time zone can be arbitrarily set.

図7は、図6に示した実施の形態2のタイムバーの変形例を示す図である。この変形例において、実施の形態2と異なる点は、空白領域で現した分別部46と第2のタイムバー45とのそれぞれ対応する位置を結ぶ線状図示部47を点線で表している点である。   FIG. 7 is a diagram showing a modification of the time bar of the second embodiment shown in FIG. In this modified example, the difference from the second embodiment is that the linear illustration part 47 connecting the corresponding positions of the classification part 46 and the second time bar 45 shown in the blank area is indicated by a dotted line. is there.

この変形例の場合も、実施の形態2と同様に、特定時間帯である第2のタイムバーを第1のタイムバーとは別体で、かつ立体的に拡大するように表示制御するので、特定時間帯を容易に認識することができ、これによりさらにタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができる。   Also in the case of this modification, as in the second embodiment, the second time bar, which is a specific time zone, is separate from the first time bar and is displayed and controlled so as to expand three-dimensionally. A specific time zone can be easily recognized, whereby a specific range on the time axis scale of the time bar can be confirmed in detail.

(実施の形態3)
図8は、図2に示した実施の形態3にかかるタイムバーの一例を示す図である。この実施の形態では、スケール表示制御部54は、取り込んだ画像全体の撮像時刻を示す第1のスケールとしての第1のタイムバー42と、この第1のタイムバー42の空白領域で現した分別部46内に設けられる第2のスケールとしての第2のタイムバー45とを表示するように制御する。
(Embodiment 3)
FIG. 8 is a diagram illustrating an example of a time bar according to the third embodiment illustrated in FIG. 2. In this embodiment, the scale display control unit 54 sorts the first time bar 42 as the first scale indicating the imaging time of the entire captured image and the blank area of the first time bar 42. The second time bar 45 as the second scale provided in the unit 46 is controlled to be displayed.

図8において、この実施の形態では、第2のタイムバー45は、分別部46内に所定の範囲で複数の屈曲部を有し、第1のタイムバー42に対して垂直方向のつづら折り形状に表示されている。この第2のタイムバー45は、スケール表示制御部54によって、入力部20で指定された画像の撮像時刻に対応する位置を示す指標44を基点として、たとえば前後約1時間に設定された特定時間帯に対応する距離を拡大して表示制御されたものである。また、指標表示制御部55は、この第2のタイムバー45上に入力部20により指定された画像の指定時刻に対応する位置を示す指標44を縦のバー形状の指標に代えて、たとえば黒丸印で表示するように制御する。   In FIG. 8, in this embodiment, the second time bar 45 has a plurality of bent portions within a predetermined range in the sorting portion 46, and has a zigzag shape perpendicular to the first time bar 42. It is displayed. The second time bar 45 is, for example, a specific time set to about 1 hour before and after the index 44 indicating the position corresponding to the image capturing time designated by the input unit 20 by the scale display control unit 54. The display is controlled by enlarging the distance corresponding to the band. Further, the index display control unit 55 replaces the index 44 indicating the position corresponding to the specified time of the image specified by the input unit 20 on the second time bar 45 with a vertical bar-shaped index, for example, a black circle. Control to display with mark.

この実施の形態では、第2のタイムバーを第1のタイムバーの空白領域内につづら折り形状に拡大するように表示制御するので、狭いスペースを有効に使用して特定時間帯を容易に認識することができ、これによりさらにタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができるとともに、第1のタイムバーとつづら折り形状の第2のタイムバーとを直接結線するので、実施の形態2のような第1のタイムバーと第2のタイムバーを結ぶ線状図示部が不要となる。   In this embodiment, display control is performed so that the second time bar is expanded into a folded shape in the blank area of the first time bar, so that a specific time zone can be easily recognized by effectively using a narrow space. This makes it possible to further confirm a specific range on the time axis scale of the time bar, and to connect the first time bar and the second time bar having a spelled shape directly. The linear illustration part which connects the 1st time bar and the 2nd time bar like form 2 of the above becomes unnecessary.

(実施の形態4)
図9は、図2に示した実施の形態4にかかるタイムバーの一例を示す図である。この実施の形態では、スケール表示制御部54は、タイムバー42上に入力部20により指定された画像の枚数が、特定時間帯としての単位時間たとえば1時間単位に占める比率に対応して変化した色彩による図を表示するように制御する。
(Embodiment 4)
FIG. 9 is a diagram illustrating an example of a time bar according to the fourth embodiment illustrated in FIG. 2. In this embodiment, the scale display control unit 54 changes the number of images designated by the input unit 20 on the time bar 42 in accordance with the ratio of unit time as a specific time zone, for example, one hour unit. Control to display a color diagram.

この実施の形態では、たとえば1時間単位に占める画像の枚数が0枚の場合(0h以上1h未満、3h以上4h未満、4h以上5h未満、6h以上7h未満、9h以上10h以下の場合)、タイムバー42の表示領域を白色で、画像の枚数が1枚の場合(5h以上6h未満の場合)、タイムバー42の表示領域を青色で、画像の枚数が2枚の場合(5h以上6h未満の場合)、タイムバー42の表示領域を黄色で、画像の枚数が3枚の場合(7h以上8h未満の場合)、タイムバー42の表示領域を緑色で、画像の枚数が4枚の場合(8h以上9h未満の場合)、タイムバー42の表示領域をグレー色で、画像の枚数が5枚以上の場合(1h以上2h未満の場合)、タイムバー42の表示領域を赤色で表示するように制御する。また、指標表示制御部55は、実施の形態1と同様に、入力部20により指定された画像の指定時刻に対応する位置を示す指標44を、タイムバー42上に縦のバー形状で表示するように制御する。   In this embodiment, for example, when the number of images in one hour unit is 0 (0 to 1 h, 3 to 4 h, 4 to 5 h, 6 to 7 h, 9 to 10 h, 9 h to 10 h), time When the display area of the bar 42 is white and the number of images is 1 (from 5h to less than 6h), when the display area of the time bar 42 is blue and the number of images is 2 (from 5h to less than 6h) ), When the display area of the time bar 42 is yellow and the number of images is 3 (from 7h to less than 8h), when the display area of the time bar 42 is green and the number of images is 4 (8h) If the display area of the time bar 42 is gray and the number of images is 5 or more (1 to 2 hours), the display area of the time bar 42 is controlled to be displayed in red. To do. Also, the index display control unit 55 displays the index 44 indicating the position corresponding to the specified time of the image specified by the input unit 20 in the form of a vertical bar on the time bar 42 as in the first embodiment. To control.

この実施の形態では、タイムバー上に表示制御された指標44とともに、入力部により指定された画像の枚数が、単位時間に占める比率に対応して変化した色彩による図を表示するように制御するので、特定時間帯としての単位時間を容易に認識することができ、これによりさらにタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができるとともに、単位時間に占める画像枚数を色分布で表示させるので、指定された画像の粗密分布を視覚的に容易に認識することができる。   In this embodiment, together with the index 44 controlled to be displayed on the time bar, control is performed so as to display a figure with colors in which the number of images specified by the input unit has changed in accordance with the ratio of unit time. Therefore, it is possible to easily recognize the unit time as a specific time zone, and in addition to this, it is possible to confirm in detail the specific range on the time axis scale of the time bar, and the number of images occupying the unit time. Since the distribution is displayed, the density distribution of the designated image can be easily recognized visually.

図10は、図9に示した実施の形態4のタイムバーの変形例を示す図である。この変形例において、実施の形態4と異なる点は、入力部により指定された画像の枚数が、単位時間に占める比率に対応して変化したグラフによる図を表示するように、スケール表示制御部54が制御する点である。   FIG. 10 is a diagram showing a modification of the time bar of the fourth embodiment shown in FIG. In this modification, the scale display control unit 54 is different from the fourth embodiment in that a graph is displayed so that the number of images specified by the input unit changes in accordance with the ratio of the unit time. Is the point to control.

この変形例の場合には、タイムバー上に表示制御された指標44とともに、単位時間(1時間単位)に占める画像の枚数が、たとえばグラフの長さの変化として図示されるので、実施の形態4と同様に、特定時間帯としての単位時間を容易に認識することができ、これによりさらにタイムバーの時間軸スケール上の特定の範囲を詳細に確認することができるとともに、指定された画像の粗密分布を視覚的に容易に認識することができる。   In the case of this modification, the number of images occupying a unit time (unit of one hour) is shown as a change in the length of the graph, for example, together with the index 44 controlled to be displayed on the time bar. 4, the unit time as a specific time zone can be easily recognized, and this allows a specific range on the time axis scale of the time bar to be confirmed in detail. The density distribution can be easily recognized visually.

(実施の形態5)
図11は、図2に示した実施の形態5にかかるタイムバーとサムネイル画像表示領域の一例を示す図である。この実施の形態では、縮小画像表示制御部56は、指標表示制御部55により表示制御された指標に対応する画像を、この画像の時間に対応する座標軸に平行な方向(図中、X方向)を、この画像の時間に対応する座標軸に垂直な方向(図中、Y方向)に対して縮小した縮小画像Pdとして、サムネイル画像表示領域A2に表示するように制御する。
(Embodiment 5)
FIG. 11 is a diagram showing an example of a time bar and thumbnail image display area according to the fifth embodiment shown in FIG. In this embodiment, the reduced image display control unit 56 displays an image corresponding to the index controlled by the index display control unit 55 in a direction parallel to the coordinate axis corresponding to the time of this image (X direction in the figure). Are controlled to be displayed in the thumbnail image display area A2 as a reduced image Pd reduced in the direction perpendicular to the coordinate axis corresponding to the time of the image (Y direction in the figure).

しかも、縮小画像表示制御部56は、指定時刻の画像、この実施の形態では画像Pd1におけるY方向に対するX方向の縮小率を最大とし、指定時刻から時間的に離れるほど、Y方向に対するX方向の縮小率が小さくなるように、縮小画像の表示制御を行う。これにより、指定された各縮小画像は、ブックシェルフ型の俯瞰図のように表示されることとなる。なお、指定画像Pd1は、画像表示制御部53によって表示部40の体腔内画像表示領域A1に表示制御されているので、縮小率が大きくてもなんら問題は生じない。   In addition, the reduced image display control unit 56 maximizes the reduction ratio in the X direction with respect to the Y direction in the image at the designated time, in this embodiment, the image Pd1 in this embodiment. Display control of a reduced image is performed so that the reduction ratio is reduced. Thus, each designated reduced image is displayed like a bookshelf type overhead view. Since the designated image Pd1 is controlled to be displayed in the body cavity image display area A1 of the display unit 40 by the image display control unit 53, no problem occurs even if the reduction ratio is large.

この実施の形態では、タイムバー42上に表示制御された指標44とともに、ブックシェルフ型の書籍の表紙のように縮小画像をサムネイル画像表示領域A2に立体的に表示制御させるので、時間軸上の指定された画像の粗密分布を視覚的に容易に認識することができるとともに、各指定画像の概略内容を容易に検知することができる。   In this embodiment, together with the index 44 controlled to be displayed on the time bar 42, the reduced image is three-dimensionally controlled to be displayed in the thumbnail image display area A2 like a cover of a bookshelf type book. The density distribution of the designated image can be easily recognized visually, and the outline content of each designated image can be easily detected.

また、上記実施の形態1〜5で説明した画像表示装置4は、あらかじめ用意されたプログラムをパーソナル・コンピュータやワークステーションなどのコンピュータシステムで実行することによって実現することができる。以下、上記実施の形態で説明した画像表示装置と同様の機能を有する画像表示プログラムを実行するコンピュータシステムについて説明する。   The image display device 4 described in the first to fifth embodiments can be realized by executing a program prepared in advance on a computer system such as a personal computer or a workstation. Hereinafter, a computer system that executes an image display program having the same function as that of the image display apparatus described in the above embodiment will be described.

図12は、上述した実施の形態を用いたコンピュータシステムの構成を示すシステム構成図であり、図13は、このコンピュータシステムにおける本体部の構成を示すブロック図である。図12に示すように、本実施の形態1〜5にかかるコンピュータシステム100は、本体部101と、本体部101からの指示によって表示画面102aに画像などの情報を表示するためのディスプレイ102と、このコンピュータシステム100に種々の情報を入力するためのキーボード103と、ディスプレイ102の表示画面102a上の任意の位置を指定するためのマウス104とを備える。   FIG. 12 is a system configuration diagram showing a configuration of a computer system using the above-described embodiment, and FIG. 13 is a block diagram showing a configuration of a main body portion in this computer system. As shown in FIG. 12, the computer system 100 according to the first to fifth embodiments includes a main body 101, a display 102 for displaying information such as an image on a display screen 102 a according to an instruction from the main body 101, A keyboard 103 for inputting various information to the computer system 100 and a mouse 104 for designating an arbitrary position on the display screen 102a of the display 102 are provided.

また、このコンピュータシステム100における本体部101は、図13に示すように、CPU121と、RAM122と、ROM123と、ハードディスクドライブ(HDD)124と、CD−ROM109を受け入れるCD−ROMドライブ125と、フレキシブルディスク(FD)108を受け入れるFDドライブ126と、ディスプレイ102、キーボード103並びにマウス104を接続するI/Oインターフェース127と、ローカルエリアネットワークまたは広域エリアネットワーク(LAN/WAN)106に接続するLANインターフェース128とを備える。   Further, as shown in FIG. 13, a main body 101 in the computer system 100 includes a CPU 121, a RAM 122, a ROM 123, a hard disk drive (HDD) 124, a CD-ROM drive 125 that receives a CD-ROM 109, and a flexible disk. An FD drive 126 that accepts an (FD) 108; an I / O interface 127 that connects the display 102, keyboard 103, and mouse 104; and a LAN interface 128 that connects to a local area network or wide area network (LAN / WAN) 106 Prepare.

さらに、このコンピュータシステム100には、インターネットなどの公衆回線107に接続するためのモデム105が接続されるとともに、LANインターフェース128およびLAN/WAN106を介して、他のコンピュータシステム(PC)111、サーバ112、プリンタ113などが接続される。   Further, a modem 105 for connecting to a public line 107 such as the Internet is connected to the computer system 100, and another computer system (PC) 111 and server 112 are connected via a LAN interface 128 and a LAN / WAN 106. The printer 113 is connected.

そして、このコンピュータシステム100は、所定の記録媒体に記録された画像表示プログラムを読み出して実行することで画像表示装置を実現する。ここで、所定の記録媒体とは、フレキシブルディスク(FD)108、CD−ROM109、MOディスク、DVDディスク、光磁気ディスク、ICカードなどの「可搬用の物理媒体」の他に、コンピュータシステム100の内外に備えられるハードディスクドライブ(HDD)124や、RAM122、ROM123などの「固定用の物理媒体」、さらに、モデム105を介して接続される公衆回線107や、他のコンピュータシステム111並びにサーバ112が接続されるLAN/WAN106などのように、プログラムの送信に際して短期にプログラムを保持する「通信媒体」など、コンピュータシステム100によって読み取り可能な画像表示プログラムを記録する、あらゆる記録媒体を含むものである。   And this computer system 100 implement | achieves an image display apparatus by reading and executing the image display program recorded on the predetermined recording medium. Here, the predetermined recording medium is not limited to “portable physical medium” such as flexible disk (FD) 108, CD-ROM 109, MO disk, DVD disk, magneto-optical disk, IC card, etc. Connected to internal and external hard disk drives (HDD) 124, “fixed physical media” such as RAM 122 and ROM 123, public line 107 connected via modem 105, other computer system 111 and server 112 Any recording medium that records an image display program that can be read by the computer system 100, such as a “communication medium” that holds the program in a short period of time when the program is transmitted, such as a LAN / WAN 106 that is used.

すなわち、画像表示プログラムは、上記した「可搬用の物理媒体」、「固定用の物理媒体」、「通信媒体」などの記録媒体に、コンピュータ読み取り可能に記録されるものであり、コンピュータシステム100は、このような記録媒体から画像表示プログラムを読み出して実行することで画像表示装置および画像表示方法を実現する。なお、画像表示プログラムは、コンピュータシステム100によって実行されることに限定されるものではなく、他のコンピュータシステム111またはサーバ112が画像表示プログラムを実行する場合や、これらが協働して画像表示プログラムを実行するような場合にも、本発明を同様に適用することができる。   That is, the image display program is recorded on a recording medium such as the above-mentioned “portable physical medium”, “fixed physical medium”, “communication medium”, etc. so that it can be read by a computer. The image display program and the image display method are realized by reading and executing the image display program from such a recording medium. Note that the image display program is not limited to be executed by the computer system 100, and when the other computer system 111 or the server 112 executes the image display program or in cooperation with them, the image display program is executed. The present invention can be similarly applied to the case where the above is executed.

本発明にかかる画像表示装置の好適な実施の形態である無線方の被検体内情報取得システムの全体構成を示す模式図である。1 is a schematic diagram illustrating an overall configuration of a wireless in-vivo information acquiring system that is a preferred embodiment of an image display device according to the present invention. 図1に示した画像表示装置の構成を示すブロック図である。It is a block diagram which shows the structure of the image display apparatus shown in FIG. 図2に示した実施の形態1にかかる表示部の表示画面を示す図である。FIG. 3 is a diagram illustrating a display screen of the display unit according to the first exemplary embodiment illustrated in FIG. 2. タイムバーの時刻表示に用いられる関数を示した図である。It is the figure which showed the function used for the time display of a time bar. 画像表示装置による画像表示の動作を説明するためのフローチャートである。It is a flowchart for demonstrating operation | movement of the image display by an image display apparatus. 図2に示した実施の形態2にかかる表示部の表示画面を示す図である。FIG. 6 is a diagram showing a display screen of the display unit according to the second exemplary embodiment shown in FIG. 2. 図6に示した実施の形態2のタイムバーの変形例を示す図である。It is a figure which shows the modification of the time bar of Embodiment 2 shown in FIG. 図2に示した実施の形態3にかかるタイムバーの一例を示す図である。It is a figure which shows an example of the time bar concerning Embodiment 3 shown in FIG. 図2に示した実施の形態4にかかるタイムバーの一例を示す図である。It is a figure which shows an example of the time bar concerning Embodiment 4 shown in FIG. 図9に示した実施の形態4のタイムバーの変形例を示す図である。It is a figure which shows the modification of the time bar of Embodiment 4 shown in FIG. 図2に示した実施の形態5にかかるタイムバーとサムネイル画像表示領域の一例を示す図である。It is a figure which shows an example of the time bar and thumbnail image display area concerning Embodiment 5 shown in FIG. 実施の形態1〜5を用いたコンピュータシステムの構成を示すシステム構成図である。1 is a system configuration diagram illustrating a configuration of a computer system using Embodiments 1 to 5. FIG. 図12に示したコンピュータシステムにおける本体部の構成を示すブロック図である。It is a block diagram which shows the structure of the main-body part in the computer system shown in FIG.

符号の説明Explanation of symbols

1 被検体
2 受信装置
2a 無線ユニット
2b 受信本体ユニット
3 カプセル型内視鏡
4 画像表示装置
5 携帯型記録媒体
20 入力部
21 カーソル
30 記憶部
40 表示部
41 再生制御ボタン群
42,45 タイムバー
43 再生速度変更ボタン
44 指標
46 分別部
47 線状図示部
50 制御部
51 画像処理部
52 表示制御部
53 画像表示制御部
54 スケール表示制御部
55 指標表示制御部
56 縮小画像表示制御部
100 コンピュータシステム
101 本体部
102 ディスプレイ
102a 表示画面
103 キーボード
104 マウス
105 モデム
107 公衆回線
111 コンピュータシステム
112 サーバ
113 プリンタ
125,126 ドライブ
127,128 インターフェース
A1〜An 受信用アンテナ
DESCRIPTION OF SYMBOLS 1 Subject 2 Reception apparatus 2a Wireless unit 2b Reception main body unit 3 Capsule endoscope 4 Image display apparatus 5 Portable recording medium 20 Input part 21 Cursor 30 Storage part 40 Display part 41 Playback control button group 42, 45 Time bar 43 Playback speed change button 44 Index 46 Sorting unit 47 Linear illustration unit 50 Control unit 51 Image processing unit 52 Display control unit 53 Image display control unit 54 Scale display control unit 55 Index display control unit 56 Reduced image display control unit 100 Computer system 101 Main unit 102 Display 102a Display screen 103 Keyboard 104 Mouse 105 Modem 107 Public line 111 Computer system 112 Server 113 Printer 125, 126 Drive 127, 128 Interface A1-An Receiving antenna

Claims (16)

取り込んだ画像を順次表示するように制御する画像表示制御手段と、
前記画像表示制御手段で表示制御された所望の画像を指定する画像指定手段と、
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御手段と、
前記スケール上に前記画像指定手段により指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御手段と、
を備え
前記スケール表示制御手段は、前記指定時刻を基点とした時間をx、前記画像表示装置における画面上の前記指定時刻に対応する座標を基準とした相対座標値をy、定数をkとした時に、y=k√|x|で定義される関数に基づいて、前記スケールを表示するように制御することを特徴とする画像表示装置。
Image display control means for controlling to sequentially display captured images;
Image designation means for designating a desired image whose display is controlled by the image display control means;
A scale display control means for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced; and
Index display control means for controlling to display an index indicating a position corresponding to a predetermined time of an image as a designated time designated by the image designation means on the scale;
Equipped with a,
The scale display control means has a time when the designated time is a base point, x, a relative coordinate value based on coordinates corresponding to the designated time on the screen in the image display device as a reference, and a constant as k. An image display device that controls to display the scale based on a function defined by y = k√ | x | .
取り込んだ画像を順次表示するように制御する画像表示制御手段と、
前記画像表示制御手段で表示制御された所望の画像を指定する画像指定手段と、
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御手段と、
前記スケール上に前記画像指定手段により指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御手段と、
を備え、
前記スケール表示制御手段は、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するとともに、前記第1のスケール上で前記第2のスケールに対応する範囲を空白領域で現した分別部を表示するように制御することを特徴とする画像表示装置。
Image display control means for controlling to sequentially display captured images;
Image designation means for designating a desired image whose display is controlled by the image display control means;
A scale display control means for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced; and
Index display control means for controlling to display an index indicating a position corresponding to a predetermined time of an image as a designated time designated by the image designation means on the scale;
With
The scale display control means displays a first scale indicating a predetermined time period of the entire captured image and a second scale arranged at a position different from the first scale in the specific time zone. In addition, the image display apparatus is controlled to display a classification unit in which a range corresponding to the second scale is represented by a blank area on the first scale .
前記スケール表示制御手段は、The scale display control means includes
前記第1のスケールにおける前記分別部と前記第2のスケールとのそれぞれ対応する位置を結ぶ線状図示部を表示するように制御することを特徴とする請求項2に記載の画像表示装置。  The image display device according to claim 2, wherein the image display device is controlled to display a linear illustration unit that connects the corresponding positions of the classification unit and the second scale in the first scale.
前記スケール表示制御手段は、The scale display control means includes
前記第1および第2のスケールと前記線状図示部とをほぼ同等の幅の帯形状で、かつ俯瞰図として表示するように制御することを特徴とする請求項3に記載の画像表示装置。4. The image display device according to claim 3, wherein the first and second scales and the linearly illustrated portion are controlled to be displayed in a band shape having substantially the same width and as an overhead view.
前記スケール表示制御手段は、The scale display control means includes
前記第2のスケールを前記第1のスケールに対して平行に表示するように制御することを特徴とする請求項2に記載の画像表示装置。The image display device according to claim 2, wherein the second scale is controlled to be displayed in parallel with the first scale.
前記スケール表示制御手段は、The scale display control means includes
前記第2のスケールを前記第1のスケールにおける前記空白領域内に所定の範囲で複数の屈曲部を有して表示するように制御することを特徴とする請求項2に記載の画像表示装置。The image display apparatus according to claim 2, wherein the second scale is controlled so as to be displayed with a plurality of bent portions within a predetermined range in the blank area of the first scale.
前記スケール表示制御手段は、The scale display control means includes
前記第2のスケールを前記第1のスケールに対して垂直に表示するように制御することを特徴とする請求項6に記載の画像表示装置。The image display apparatus according to claim 6, wherein the second scale is controlled so as to be displayed perpendicular to the first scale.
取り込んだ画像を順次表示するように制御する画像表示制御ステップと、An image display control step for controlling to sequentially display the captured images;
前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、An image designating step of designating a desired image whose display is controlled in the image display control step;
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced, and
前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale;
を含み、Including
前記スケール表示制御ステップは、前記指定時刻を基点とした時間をx、前記画像表示装置における画面上の前記指定時刻に対応する座標を基準とした相対座標値をy、定数をkとした時に、y=k√|x|で定義される関数に基づいて、前記スケールを表示するように制御することを特徴とする画像表示方法。In the scale display control step, when the time based on the designated time is x, the relative coordinate value based on the coordinates corresponding to the designated time on the screen in the image display device is y, and the constant is k, An image display method comprising controlling the scale to be displayed based on a function defined by y = k√ | x |.
取り込んだ画像を順次表示するように制御する画像表示制御ステップと、An image display control step for controlling to sequentially display the captured images;
前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、An image designating step of designating a desired image whose display is controlled in the image display control step;
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced, and
前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale;
を含み、Including
前記スケール表示制御ステップは、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するとともに、前記第1のスケール上で前記第2のスケールに対応する範囲を空白領域で現した分別部を表示するように制御することを特徴とする画像表示方法。The scale display control step displays a first scale indicating a predetermined time period of the entire captured image, and a second scale arranged at a position different from the first scale in the specific time zone. In addition, the image display method is characterized in that control is performed so as to display a classification unit in which a range corresponding to the second scale is represented by a blank area on the first scale.
前記スケール表示制御ステップは、The scale display control step includes
前記第1のスケールにおける前記分別部と前記第2のスケールとのそれぞれ対応する位置を結ぶ線状図示部を表示するように制御することを特徴とする請求項9に記載の画像表示方法。10. The image display method according to claim 9, wherein a control is performed so as to display a linear illustration unit that connects positions corresponding to the classification unit and the second scale in the first scale. 11.
前記スケール表示制御ステップは、The scale display control step includes
前記第1および第2のスケールと前記線状図示部とをほぼ同等の幅の帯形状で、かつ俯瞰図として表示するように制御することを特徴とする請求項10に記載の画像表示方法。11. The image display method according to claim 10, wherein the first and second scales and the linear illustrated portion are controlled to be displayed in a band shape having substantially the same width and as an overhead view.
前記スケール表示制御ステップは、The scale display control step includes
前記第2のスケールを前記第1のスケールに対して平行に表示するように制御することを特徴とする請求項9に記載の画像表示方法。The image display method according to claim 9, wherein the second scale is controlled to be displayed in parallel with the first scale.
前記スケール表示制御ステップは、The scale display control step includes
前記第2のスケールを前記第1のスケールにおける前記空白領域内に所定の範囲で複数の屈曲部を有して表示するように制御することを特徴とする請求項9に記載の画像表示方法。The image display method according to claim 9, wherein the second scale is controlled so as to be displayed with a plurality of bent portions within a predetermined range in the blank area in the first scale.
前記スケール表示制御ステップは、The scale display control step includes
前記第2のスケールを前記第1のスケールに対して垂直に表示するように制御することを特徴とする請求項13に記載の画像表示方法。The image display method according to claim 13, wherein the second scale is controlled so as to be displayed perpendicular to the first scale.
取り込んだ画像を順次表示するように制御する画像表示制御ステップと、An image display control step for controlling to sequentially display the captured images;
前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、An image designation step for designating a desired image whose display is controlled in the image display control step;
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced, and
前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale;
を含み、Including
前記スケール表示制御ステップは、前記指定時刻を基点とした時間をx、前記画像表示装置における画面上の前記指定時刻に対応する座標を基準とした相対座標値をy、定数をkとした時に、y=k√|x|で定義される関数に基づいて、前記スケールを表示するように制御することを特徴とする画像表示プログラム。In the scale display control step, when the time based on the designated time is x, the relative coordinate value based on the coordinates corresponding to the designated time on the screen in the image display device is y, and the constant is k, An image display program for controlling to display the scale based on a function defined by y = k√ | x |.
取り込んだ画像を順次表示するように制御する画像表示制御ステップと、An image display control step for controlling to sequentially display the captured images;
前記画像表示制御ステップで表示制御された所望の画像を指定する画像指定ステップと、An image designation step for designating a desired image whose display is controlled in the image display control step;
前記取り込んだ画像全体の所定時刻期間を示すスケールを表示するように制御するとともに、前記スケール上で特定時間帯に対応する距離を拡大または縮小して表示するように制御するスケール表示制御ステップと、A scale display control step for controlling to display a scale indicating a predetermined time period of the entire captured image, and controlling to display a distance corresponding to a specific time zone on the scale to be enlarged or reduced, and
前記スケール上に前記画像指定ステップにより指定された指定時刻としての画像の所定時刻に対応する位置を示す指標を表示するように制御する指標表示制御ステップと、An index display control step for controlling to display an index indicating a position corresponding to a predetermined time of the image as the specified time specified by the image specifying step on the scale;
を含み、Including
前記スケール表示制御手段は、前記取り込んだ画像全体の所定時刻期間を示す第1のスケールと、前記特定時間帯において前記第1のスケールと別の位置に配置される第2のスケールとを表示するとともに、前記第1のスケール上で前記第2のスケールに対応する範囲を空白領域で現した分別部を表示するように制御することを特徴とする画像表示プログラム。The scale display control means displays a first scale indicating a predetermined time period of the entire captured image and a second scale arranged at a position different from the first scale in the specific time zone. And an image display program for controlling to display a classification unit in which a range corresponding to the second scale is represented by a blank area on the first scale.
JP2005179705A 2005-06-20 2005-06-20 Image display device, image display method, and image display program Expired - Fee Related JP4526447B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005179705A JP4526447B2 (en) 2005-06-20 2005-06-20 Image display device, image display method, and image display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005179705A JP4526447B2 (en) 2005-06-20 2005-06-20 Image display device, image display method, and image display program

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007180959A Division JP4939326B2 (en) 2007-07-10 2007-07-10 Image display device, image display method, and image display program

Publications (3)

Publication Number Publication Date
JP2006346356A JP2006346356A (en) 2006-12-28
JP2006346356A5 JP2006346356A5 (en) 2007-08-23
JP4526447B2 true JP4526447B2 (en) 2010-08-18

Family

ID=37642793

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005179705A Expired - Fee Related JP4526447B2 (en) 2005-06-20 2005-06-20 Image display device, image display method, and image display program

Country Status (1)

Country Link
JP (1) JP4526447B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101677756B (en) * 2007-05-17 2012-10-17 奥林巴斯医疗株式会社 Image information display processing device and display processing method
JP5422117B2 (en) * 2007-12-20 2014-02-19 株式会社東芝 Medical image processing apparatus and medical image photographing apparatus

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11345061A (en) * 1998-06-01 1999-12-14 Nec Corp Extension scroll system
JP2001075701A (en) * 1999-09-01 2001-03-23 Canon Inc Information equipment, image information equipment and information display method
US20020171669A1 (en) * 2001-05-18 2002-11-21 Gavriel Meron System and method for annotation on a moving image

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11345061A (en) * 1998-06-01 1999-12-14 Nec Corp Extension scroll system
JP2001075701A (en) * 1999-09-01 2001-03-23 Canon Inc Information equipment, image information equipment and information display method
US20020171669A1 (en) * 2001-05-18 2002-11-21 Gavriel Meron System and method for annotation on a moving image

Also Published As

Publication number Publication date
JP2006346356A (en) 2006-12-28

Similar Documents

Publication Publication Date Title
US8233037B2 (en) Image display apparatus
EP1922977B1 (en) Image display device
JP5005981B2 (en) Image display device
EP1787574B1 (en) Image display device, image display method, and image display program
US8216129B2 (en) Image display apparatus, endoscope system using the same, and image display method
EP2316327B1 (en) Image display device, image display method, and image display program
US20080184168A1 (en) Image display apparatus
JP5327641B2 (en) Image information display processing device
JP4914680B2 (en) Image display device
JP4823659B2 (en) In vivo image display device
JP5379442B2 (en) Image display device
JP4574983B2 (en) Image display apparatus, image display method, and image display program
JP4526447B2 (en) Image display device, image display method, and image display program
JP4939326B2 (en) Image display device, image display method, and image display program
JP5231160B2 (en) Image display device, image display method, and image display program
JP2006345929A (en) Image display device
JP5684300B2 (en) Image display device, image display method, and image display program
JP4663698B2 (en) Image display device, image display method, and image display program
JP4590444B2 (en) Image display device, image display method, and image display program
JP4598458B2 (en) Image display device, image display method, and image display program
JP2006075301A (en) Image processing device, method and program
JP2006141898A (en) Image display system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070523

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070710

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100309

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100311

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100525

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100601

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130611

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4526447

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130611

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130611

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130611

Year of fee payment: 3

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130611

Year of fee payment: 3

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees