JP2006296882A - Image display device - Google Patents
Image display device Download PDFInfo
- Publication number
- JP2006296882A JP2006296882A JP2005125595A JP2005125595A JP2006296882A JP 2006296882 A JP2006296882 A JP 2006296882A JP 2005125595 A JP2005125595 A JP 2005125595A JP 2005125595 A JP2005125595 A JP 2005125595A JP 2006296882 A JP2006296882 A JP 2006296882A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- moving image
- displayed
- setting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Endoscopes (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
本発明は、カプセル型内視鏡等の被検体内導入装置によって時系列で撮像されて取得された被検体内の画像を観察するための画像表示装置に関するものである。 The present invention relates to an image display device for observing an image in a subject acquired by time-series imaging by an in-subject introduction device such as a capsule endoscope.
近年、内視鏡の分野においては、飲込み型のカプセル型内視鏡が開発されている。このカプセル型内視鏡は、撮像機能と無線機能とを備え、体腔内の観察のために患者の口から飲み込まれた後、人体から自然排出されるまでの間、体腔内、例えば食道、胃、小腸などの臓器の内部をその蠕動運動に従って移動し、移動に伴い、例えば0.5秒間隔で被検体内画像の撮像を行う機能を有する(例えば、特許文献1参照)。 In recent years, swallowable capsule endoscopes have been developed in the field of endoscopes. This capsule endoscope has an imaging function and a wireless function, and after being swallowed from the patient's mouth for observation inside the body cavity, until it is naturally discharged from the human body, for example, the esophagus, stomach It has a function of moving inside an organ such as the small intestine according to its peristaltic movement, and taking images of the in-subject at intervals of 0.5 seconds, for example (see, for example, Patent Document 1).
体腔内を移動する間、カプセル型内視鏡によって体内で撮像された画像データは、順次無線通信により体外に送信され、体外の受信機内に設けられたメモリに蓄積される。カプセル型内視鏡が排出された後、医師もしくは看護師においては、メモリに蓄積された画像データをもとにワークステーションなどのディスプレイ画面上に表示させた画像に基づいて診断を行うことができる(例えば、特許文献2〜4参照)。
While moving inside the body cavity, image data captured inside the body by the capsule endoscope is sequentially transmitted outside the body by wireless communication, and is stored in a memory provided in a receiver outside the body. After the capsule endoscope is ejected, the doctor or nurse can make a diagnosis based on the image displayed on the display screen of a workstation or the like based on the image data stored in the memory. (For example, refer to
ここで、ディスプレイ画面上での診断に際しては、膨大な枚数の画像を扱うため、多数枚の画像を時系列的に連続する動画として上映するようにしている。この場合、特許文献2によれば、動画の上映方法として、操作者によるスクローリングホイール等のポインティングデバイス操作によって、時系列的に前進方向となる上映と、逆に、時系列的に後退方向となる上映とが設定自在とされている。これにより、体腔内を口腔側から肛門側に向かう順に動画を観察することもでき、逆に、再度注視したい部分などを肛門側から口腔側に戻る形で動画を観察することもできる。
Here, when a diagnosis is made on the display screen, a large number of images are handled, so that a large number of images are screened as time-sequential moving images. In this case, according to
ところで、この種の動画の観察は、医師もしくは看護師が一人で行う場合もあるが、複数の医師や看護師が同時に観察する場合も多い。この場合、一人が操作者となって動画上映に関してポインティングデバイス等の操作を行い、他の者は、供覧者となって操作者とともにディスプレイ画面上の動画を観察することとなる。 By the way, this kind of moving image is sometimes observed by a doctor or a nurse alone, but a plurality of doctors and nurses often observe it at the same time. In this case, one person becomes an operator and operates a pointing device or the like for moving picture display, and the other person becomes a viewer and observes the moving picture on the display screen together with the operator.
ところが、操作者は、動画上映に関して自分が操作しているので、動画の時系列的な上映方向が前進方向であるか後退方向であるかは当然理解できるが、ディスプレイ画面を見ているだけの供覧者は、上映中の動画の上映方向が前進方向であるのか後退方向であるのかを理解できない場合もあり、不便であった。 However, since the operator is operating with regard to the video screening, the operator can naturally understand whether the time-series screening direction of the video is the forward direction or the backward direction, but only looking at the display screen It was inconvenient for the viewers to be unable to understand whether the direction of the movie being shown was forward or backward.
また、一般に、この種のディスプレイ画面では、動画として時系列的に順次表示される画像の時系列上の位置をバーチャート上で移動するカーソルによって示すようにしている。例えば、左右方向のバーチャートの場合、カーソルが右方向に移動すれば動画が前進方向に移動しており、逆に、カーソルが左方向に移動すれば動画が後退方向に移動していることとなる。ところが、バーチャート上のカーソルの動きも、例えば10時間分といった膨大な枚数の画像を扱う中では、移動量が僅かずつであり、カーソルを見ただけでは左右(或いは、上下)のいずれの方向、すなわち、前進方向か後退方向かは判りにくい。 In general, on this type of display screen, the position on the time series of images sequentially displayed as a moving picture in time series is indicated by a cursor moving on the bar chart. For example, in the case of a horizontal bar chart, if the cursor moves to the right, the movie moves in the forward direction, and conversely, if the cursor moves to the left, the movie moves in the backward direction. Become. However, the movement of the cursor on the bar chart also moves little by little while handling a huge number of images, for example, for 10 hours. That is, it is difficult to determine whether the direction is forward or backward.
本発明は、上記に鑑みてなされたものであって、カプセル型内視鏡等の被検体内導入装置によって時系列で撮像されて取得された画像の動画としての上映において動画の進行方向を供覧者に判りやすくすることができる画像表示装置を提供することを目的とする。 The present invention has been made in view of the above, and provides an indication of the moving direction of a moving image as a moving image of an image captured and acquired in time series by an intra-subject introduction apparatus such as a capsule endoscope. An object of the present invention is to provide an image display device that can be easily understood by a person.
上述した課題を解決し、目的を達成するために、請求項1に係る画像表示装置は、被検体内導入装置によって時系列で撮像された画像データを取得する取得手段と、前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、前記動画の上映方法を規定するパラメータを変更自在に設定する設定手段と、前記パラメータ設定による前記上映方法の設定状態を前記表示部上に前記動画と同時に表示する設定状態表示手段と、を備えたことを特徴とする。
In order to solve the above-described problems and achieve the object, an image display device according to
請求項2に係る画像表示装置は、上記発明において、前記動画上映手段は、前記動画の上映方法として時系列的に前進方向の上映と時系列的に後退方向の上映とが自在であり、前記パラメータは、前記動画の時系列的な上映方向を規定するパラメータであることを特徴とする。
In the image display device according to
請求項3に係る画像表示装置は、上記発明において、前記設定状態表示手段は、前記動画として表示中の画像の近傍に配置させた所定の記号表示により前記上映方向を表示することを特徴とする。 According to a third aspect of the present invention, in the above invention, the setting state display means displays the screening direction by a predetermined symbol display arranged in the vicinity of the image being displayed as the moving image. .
請求項4に係る画像表示装置は、上記発明において、前記設定状態表示手段は、前記動画の時系列的な上映方向が前進方向の場合に該前進方向を示す第1の記号と、前記動画の時系列的な上映方向が後退方向の場合に該後退方向を示す第2の記号とを前記所定の記号として用いることを特徴とする。 According to a fourth aspect of the present invention, in the above invention, the setting state display means includes a first symbol indicating the forward direction when the time-series presentation direction of the moving image is the forward direction, and the moving image When the time-series screening direction is the backward direction, a second symbol indicating the backward direction is used as the predetermined symbol.
請求項5に係る画像表示装置は、上記発明において、前記動画上映手段は、2行2列からなる4コマの画像を用い、前記動画の上映方向が前進方向の場合には第1の回転方向に、前記動画の上映方向が後退方向の場合には第2の回転方向に画像を更新することで動画を時系列的に上映し、前記設定状態表示手段は、前記第1の記号として前記第1の回転方向に回る図柄の矢印、前記第2の記号として前記第2の回転方向に回る図柄の矢印を用いることを特徴とする。 According to a fifth aspect of the present invention, in the above invention, the moving image screening means uses a four-frame image having two rows and two columns, and the first rotation direction when the moving image is displayed in the forward direction. In addition, when the moving direction of the moving image is the backward direction, the moving image is displayed in time series by updating the image in the second rotation direction, and the setting state display means uses the first symbol as the first symbol. It is characterized in that an arrow of a symbol that rotates in the rotation direction of 1 is used, and an arrow of a symbol that rotates in the second rotation direction is used as the second symbol.
請求項6に係る画像表示装置は、上記発明において、前記設定状態表示手段は、前記第1の記号として表示部の画面表面側から画面奥側に向かう図柄の矢印、前記第2の記号として表示部の画面奥側から画面表面側に向かう図柄の矢印を用いることを特徴とする。 According to a sixth aspect of the present invention, in the above invention, the setting state display means displays the first symbol as an arrow of a symbol from the screen surface side of the display unit toward the back of the screen, as the second symbol. The arrow of the pattern which goes to the screen surface side from the screen back side of a part is used.
請求項7に係る画像表示装置は、上記発明において、前記設定状態表示手段は、前記動画の上映方向を前進方向に規定するパラメータ設定操作用のアイコンを強調表示することにより前記第1の記号とし、前記動画の上映方向を後退方向に規定するパラメータ設定操作用のアイコンを強調表示することにより前記第2の記号とすることを特徴とする。 According to a seventh aspect of the present invention, in the above invention, the setting state display means sets the first symbol by highlighting an icon for parameter setting operation that defines a moving direction of the moving image as a forward direction. The second symbol is formed by highlighting a parameter setting operation icon that defines the moving direction of the moving image as the backward direction.
請求項8に係る画像表示装置は、上記発明において、前記設定状態表示手段は、前記動画として表示中の画像の近傍に配置されこれらの画像の時系列的な順序を示す数字を前記所定の記号として用いることを特徴とする。 The image display device according to claim 8 is the image display device according to claim 8, wherein the setting state display means is arranged in the vicinity of the image being displayed as the moving image, and a number indicating a time-series order of the images is the predetermined symbol. It is used as.
請求項9に係る画像表示装置は、上記発明において、前記設定状態表示手段は、時系列的な順序を示す数字として各画像が撮像された時刻を示す数字のうちの一部又は全部を用いることを特徴とする。
In the image display device according to
請求項10に係る画像表示装置は、上記発明において、前記設定状態表示手段は、各画像が撮像された時刻を示す数字を対応する画像の配置と相似に配置させて表示することを特徴とする。 The image display device according to claim 10 is characterized in that, in the above invention, the setting state display means displays a number indicating the time at which each image is imaged in a similar arrangement to the arrangement of the corresponding image. .
請求項11に係る画像表示装置は、上記発明において、動画として時系列的に順次表示される画像の時系列上の位置をバーチャート上で移動するカーソルによって示すバーチャート手段を備え、前記設定状態表示手段は、所定操作に基づき前記カーソルを含む前記バーチャートの一部を拡大表示し該カーソルの移動方向を可視化することを特徴とする。 An image display device according to an eleventh aspect of the invention includes a bar chart unit that indicates a position on a time series of images sequentially displayed in time series as a moving image by a cursor that moves on the bar chart in the above invention, and the setting state The display means enlarges and displays a part of the bar chart including the cursor based on a predetermined operation and visualizes the moving direction of the cursor.
請求項12に係る画像表示装置は、上記発明において、前記動画上映手段は、同一画面上に複数の画像を同時に表示させて動画を時系列的に上映し、前記設定状態表示手段は、同時に表示される複数の画像を重畳状態が動画の時系列的な上映方向を示すように部分的に重畳配置させて表示することを特徴とする。
In the image display device according to
請求項13に係る画像表示装置は、上記発明において、前記設定状態表示手段は、時系列的に新しい画像が表示画面の前面側に位置するように複数の画像を部分的に重畳配置させて表示することを特徴とする。 According to a thirteenth aspect of the present invention, in the above invention, the setting state display means displays a plurality of images partially overlapped so that a new image is positioned in front of the display screen in time series. It is characterized by doing.
請求項14に係る画像表示装置は、被検体内導入装置によって時系列で撮像された画像データを取得する取得手段と、前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づくフレーム単位の画像を表示部上に動画として上映する動画上映手段と、前記動画の上映状態で該動画のフレーム表示レートを変更自在に設定する設定手段と、を備えたことを特徴とする。
The image display device according to
請求項15に係る画像表示装置は、上記発明において、前記設定手段は、フットスイッチの強弱操作に応じて前記フレーム表示レートを設定することを特徴とする。 The image display device according to a fifteenth aspect is characterized in that, in the above invention, the setting means sets the frame display rate in accordance with an operation of a foot switch.
請求項16に係る画像表示装置は、上記発明において、前記設定手段は、前記動画の再生を指示する再生ボタンの繰り返し操作回数に応じて前記フレーム表示レートを設定することを特徴とする。 The image display device according to claim 16 is characterized in that, in the above invention, the setting means sets the frame display rate in accordance with the number of repetitive operations of a reproduction button for instructing reproduction of the moving image.
請求項17に係る画像表示装置は、上記発明において、前記設定手段は、前記表示部上に表示された表示レート設定用のスライドバー上を移動自在なカーソルの移動操作に応じて前記フレーム表示レートを設定することを特徴とする。 The image display device according to claim 17 is the image display device according to the above invention, wherein the setting unit is configured to display the frame display rate in accordance with a movement operation of a movable cursor on a display rate setting slide bar displayed on the display unit. Is set.
請求項18に係る画像表示装置は、上記発明において、前記設定手段は、特定キー操作と同時のホイール付きマウスのホイール操作に応じて前記フレーム表示レートを設定することを特徴とする。
The image display device according to
請求項19に係る画像表示装置は、上記発明において、前記設定手段は、キーボード上の矢印キー操作に応じて前記フレーム表示レートを設定することを特徴とする。 The image display device according to claim 19 is characterized in that, in the above invention, the setting means sets the frame display rate in accordance with an arrow key operation on a keyboard.
請求項20に係る画像表示装置は、被検体内導入装置によって時系列で撮像された画像データを取得する取得手段と、前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、汎用端末の一部の操作部材に割り当てられ、前記動画の上映方法を操作する操作手段と、を備えたことを特徴とする。 The image display device according to claim 20 is an acquisition unit that acquires image data captured in time series by the in-subject introduction apparatus, and the image data that is acquired by being acquired in time series by the in-subject introduction apparatus. A moving image display means for displaying an image based on the image as a moving image on a display unit; and an operation means assigned to some operation members of the general-purpose terminal and operating the moving image display method.
請求項21に係る画像表示装置は、被検体内導入装置によって時系列で撮像された画像データを取得する取得手段と、前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、フットスイッチに割り当てられ、前記動画の上映方法を操作する操作手段と、を備えたことを特徴とする。
The image display device according to
請求項22に係る画像表示装置は、上記発明において、前記操作手段は、前記フットスイッチの操作により前記動画の上映を一時停止させることを特徴とする。 The image display device according to a twenty-second aspect is characterized in that, in the above invention, the operation means temporarily stops the moving image by operating the foot switch.
本発明に係る画像表示装置によれば、被検体内導入装置によって時系列で撮像されて取得された画像データに基づく画像を表示部上に動画として上映する上で、動画の上映方法を規定するパラメータの設定を変更自在とするが、このパラメータ設定による上映方法の設定状態を表示部上に動画と同時に表示させるようにしたので、供覧者は動画と同時に表示されている上映方法の設定状態を見ることによりその設定状態を容易に確認することができ、例えば、パラメータを動画の時系列的な上映方向を規定するパラメータとする場合、上映方向の設定状態を見ることによって、供覧者は動画が前進しているのか後退しているのかを容易に確認することができるという効果を奏する。 According to the image display device of the present invention, a method for showing a moving image is defined when an image based on image data captured and acquired in time series by the intra-subject introduction device is displayed as a moving image on the display unit. Although the parameter setting can be changed freely, the display method setting state by this parameter setting is displayed on the display unit at the same time as the video, so the viewer can change the display method setting state displayed at the same time as the video. The setting state can be easily confirmed by watching.For example, when the parameter is a parameter that defines the time-series presentation direction of the moving image, the viewer can view the moving image by viewing the setting state of the displaying direction. There is an effect that it can be easily confirmed whether the vehicle is moving forward or backward.
以下、添付図面を参照して、本発明に係る画像表示装置の好適な実施の形態である無線型の被検体内情報取得システムについて説明する。なお、本実施の形態により本発明が限定されるものではない。また、図面の記載において、同一部分又は相当する部分には同一の符号を付している。 Hereinafter, a wireless in-vivo information acquiring system which is a preferred embodiment of an image display device according to the present invention will be described with reference to the accompanying drawings. In addition, this invention is not limited by this Embodiment. In the description of the drawings, the same or corresponding parts are denoted by the same reference numerals.
(実施の形態1)
本発明の実施の形態1について説明する。図1は、無線型の被検体内情報取得システムの全体構成を示す模式図である。この被検体内情報取得システムは、被検体内導入装置の一例としてカプセル型内視鏡を用いている。図1に示すように、無線型の被検体内情報取得システムは、被検体1の体内に導入され、体腔内画像を撮像して受信装置2に対して映像信号などのデータ送信を無線によって行うカプセル型内視鏡3と、カプセル型内視鏡3から無線送信された体腔内画像データを受信する受信装置2と、受信装置2が受信した映像信号に基づいて体腔内画像を表示する画像表示装置4と、受信装置2と画像表示装置4との間のデータ受け渡しを行うための携帯型記録媒体5とを備える。
(Embodiment 1)
A first embodiment of the present invention will be described. FIG. 1 is a schematic diagram showing the overall configuration of a wireless in-vivo information acquiring system. This intra-subject information acquisition system uses a capsule endoscope as an example of the intra-subject introduction apparatus. As shown in FIG. 1, the wireless in-vivo information acquiring system is introduced into the body of the subject 1, images a body cavity image, and wirelessly transmits data such as a video signal to the receiving
また、受信装置2は、被検体1の体外表面に貼付される複数の受信用アンテナA1〜Anを有した無線ユニット2aと、複数の受信用アンテナA1〜Anを介して受信された無線信号の処理等を行う受信本体ユニット2bとを備え、これらユニットはコネクタ等を介して着脱可能に接続される。なお、受信用アンテナA1〜Anのそれぞれは、例えば、被検体1が着用可能なジャケットに備え付けられ、被検体1は、このジャケットを着用することによって受信用アンテナA1〜Anを装着するようにしてもよい。また、この場合、受信用アンテナA1〜Anは、ジャケットに対して着脱可能なものであってもよい。
The receiving
画像表示装置4は、カプセル型内視鏡3によって撮像された体腔内画像を表示するためのものであり、携帯型記録媒体5によって得られるデータをもとに画像表示を行うワークステーション等の汎用端末の構成を有する。具体的には、画像表示装置4は、CRTディスプレイ、液晶ディスプレイ等によって直接画像を表示する構成としてもよいし、プリンタ等のように、他の媒体に画像を出力する構成としてもよい。
The
携帯型記録媒体5は、コンパクトフラッシュ(登録商標)メモリ等が用いられ、受信本体ユニット2b及び画像表示装置4に対して着脱可能であって、両者に対する挿着時に情報の出力又は記録が可能な機能を有する。具体的には、携帯型記録媒体5は、カプセル型内視鏡3が被検体1の体腔内を移動している間は受信本体ユニット2bに挿着され、カプセル型内視鏡3から送信されるデータが携帯型記録媒体5に記録される。そして、カプセル型内視鏡3が被検体1から排出された後、つまり、被検体1の内部の撮像が終わった後には、受信本体ユニット2bから取り出されて画像表示装置4に挿着され、画像表示装置4によって記録されたデータが読み出される。
The
受信本体ユニット2bと画像表示装置4との間のデータの受け渡しを携帯型記録媒体5によって行うことで、被検体1が体腔内の撮像中に自由に行動することが可能となり、また、画像表示装置4との間のデータの受け渡し期間の短縮にも寄与している。なお、受信本体ユニット2bと画像表示装置4との間のデータの受け渡しは、受信本体ユニット2bに内蔵型の他の記録装置を用い、画像表示装置4と有線又は無線接続するように構成してもよい。
By passing data between the receiving body unit 2b and the
次に、図2を参照して画像表示装置4について説明する。図2は、図1に示す画像表示装置4の概略構成を示すブロック図である。図2に示すように、画像表示装置4は、入力部41、表示部42、記憶部43、及び制御部44を備える。
Next, the
入力部41は、図1中に示すように、キーボード11等の汎用端末における操作部材の他、ホイール12付きのマウス13やジョイスティックなどのポインティングデバイス、或いは、フットスイッチ14、さらには表示部42上に表示されたアイコンなどによって実現され、画像表示装置4の動作指示及び画像表示装置4が行う処理の指示情報を入力し、各指示情報を制御部44に送出する。表示部42は、CRTディスプレイ、液晶ディスプレイ等によって実現され、入力部41の指示情報或いは指示結果などを表示する。表示部42は、記憶部43のフォルダF1に格納された画像群Pa中の画像が表示される所定の画像表示領域等を有する。
As shown in FIG. 1, the
記憶部43は、例えばハードディスク装置などによって実現され、携帯型記録装置5から取得した各種画像などを保持し、本実施の形態1では、カプセル型内視鏡3によって時系列で撮像された画像データを取得する取得手段として機能する。例えば、本実施の形態1の場合、フォルダF1内には、カプセル型内視鏡3中の撮像素子(図示せず)によって撮像された複数枚のフレーム画像からなる画像群Paが格納される。フォルダF1に格納された画像群Paには、画像毎に、受信装置2における画像データの受信順に従ってフレーム番号が付与されている。また、記憶部43は表示記号フォーマット部を有し、画像表示に際して必要なアイコン表示用のフォーマット類の他に、動画の上映中に上映方向を示す表示記号として、例えば、後述するような時計方向に回る図柄の矢印や反時計方向に回る図柄の矢印のような記号が登録されている。
The
制御部44は、入力部41、表示部42、及び記憶部43の各処理又は動作を制御する。制御部44は、動画上映部45、表示制御部46、及び画像選択部47を備える。画像上映部45は、カプセル型内視鏡3によって時系列で撮像されて取得され記憶部43中のフォルダF1中に格納されている画像データに基づく多数枚のフレーム画像を、上映方法を規定するパラメータ設定に従い表示部42の画面上に動画として上映する処理を行う。表示制御部46は、表示部42における各種表示処理を制御する機能を有し、本実施の形態1の場合、特に、動画の上映方法を規定するためのパラメータ設定による上映方法の設定状態を表示部42上に動画と同時に表示する設定状態表示手段の機能を実現する。画像選択部47は、動画上映の指示情報が入力された場合、その上映方向が前進方向であるか後退方向であるかに応じて、フォルダF1に格納された画像群Pa中からフレーム表示レートに従いフレーム番号順又は逆順に画像を1枚ずつ画像上映部45に対して選択出力し、動画表示に供する。
The
次に、図3−1を参照して、表示部42の表示画面について説明する。図3−1は、表示部42の表示画面の一例を示す正面図であり、表示部42の表示画面は、カプセル型内視鏡3により撮像された検査画像を表示する主観察モニタ51部分を有する。本実施の形態1では、この主観察モニタ51部分を利用して撮像画像が動画として上映される。
Next, the display screen of the
図3−1において、52は、検査日一覧を表示するファイリングリスト欄であり、検査日毎に患者名が一覧表示される。検査日下の患者名を選択すると主観察モニタ51部分に該患者の検査の先頭画像が表示される。53は、主観察モニタ51部分の再生方法、本実施の形態1の場合、動画の上映方法を変更設定するための設定手段となるパラメータ設定操作用のアイコン表示の再生コントローラ部分であり、左側から順に、先頭出しボタン53a、逆コマ送りボタン53b、逆再生ボタン53c、再生ボタン53d、コマ送りボタン53e、終端出しボタン53f等の各ボタンをポインティングデバイスによる指示操作により選択自在に有する。例えば、再生コントローラ53部分で再生ボタン53dを選択すると、画像上映部45はその指示に従い主観察モニタ51部分に静止画像を時系列的に連続的に表示することで、擬似的な動画表示を行う。なお、再生ボタン53dは、一時停止ボタン53gの機能も兼用しており、押下する毎に、一時停止ボタン53gと再生ボタン53dとが順に機能するトグル構成とされている。
In FIG. 3-1, 52 is a filing list column for displaying a list of examination dates, and a list of patient names is displayed for each examination date. When the patient name under the examination date is selected, the head image of the examination of the patient is displayed on the main observation monitor 51 portion. 53 is a playback controller portion for icon display for parameter setting operation, which is a setting means for changing and setting the playback method of the moving image in the case of the first embodiment. In order, each button such as a
54は、フレーム表示レートを低速/高速の2段階で切換えるための再生速度変更ボタンである。55は、主観察モニタ51部分に同時に表示する枚数(コマ数)を1枚/2枚/4枚で切換えるための表示枚数変更ボタンであり、例えばこの表示枚数変更ボタン55により4枚表示を選択指示すると、画像上映部45は、観察モニタ51部分にカプセル型内視鏡3により撮像されて時系列的に連続する4コマ分の画像を図3−1に示すように2行2列の形で同時に表示させる。56は、バー全体の長さが例えば10時間とされたバーチャートであり、このバーチャート56上を左右方向に移動するカーソル57の位置によって再生中の画像の時間的な位置を表示する。
58は、観察モニタ51部分に表示中の画像をダブルクリックすることでピックアップされた画像を示し、選択画像リスト欄59に縮小表示される。同時に、バーチャート56の選択画像が対応する位置と選択画像の上部とが線で結ばれ、時間的な位置関係が明示される。
このような構成において、本実施の形態1の動画上映時の表示例を図3−1、図3−2を参照して説明する。なお、図4は図3−1、図3−2で用いる連続する4コマ分の画像例の時系列的な前後関係(新旧関係)を示す説明図である。ここで、これらの4コマの画像A〜Dは時間的に2秒程度の間に撮像されたものであり、現実的には似通った画像となるが、ここでは個々の画像の区別を判りやすくするため、大幅に異なる画像例を連続するコマ画像として用いた場合を示している。 In such a configuration, a display example at the time of moving image display according to the first embodiment will be described with reference to FIGS. 3A and 3B. FIG. 4 is an explanatory diagram showing the time-series chronological relationship (new and old relationship) of the image examples for four consecutive frames used in FIGS. 3-1 and 3-2. Here, these four-frame images A to D are taken in about 2 seconds in time, and are actually similar images, but here, it is easy to distinguish the individual images. Therefore, a case is shown in which significantly different image examples are used as continuous frame images.
図3−1は、動画の上映方法を規定するパラメータ設定として、操作者による表示枚数変更ボタン55の操作により4枚表示が選択指示され、かつ、再生ボタン53dが押下された場合の動画の表示例を示している。すなわち、画像上映部45は、観察モニタ51部分にカプセル型内視鏡3により撮像されて時系列的に連続する4コマ分の画像A〜Dを2行2列の形で同時に表示させる。この場合、再生ボタン53dが押下されているので、動画の時系列的な上映方向は、時系列的に前進方向の上映となり、2行2列の4コマの画像は前進方向を示す第1の回転方向が時計方向となるように画像が順次更新されつつ動画表示されることとなる。したがって、図示例では、左下部分に最新の画像Dが位置しているが、次の更新表示のタイミングでは、左上部分に画像Aに代えて画像Bが表示され、右上部分に画像Bに代えて画像Cが表示され、右下部分に画像Cに代えて画像Dが表示され、左下部分に画像Dに代えて最新の画像が新たに表示される、如く画像が順次更新されることで、動画上映が行われる。
FIG. 3A is a table of moving images when a four-image display is instructed by an operator's operation of the display
ここで、表示制御部46は、動画の時系列的な上映方向を規定するパラメータに関して、再生ボタン53dが押下されたことにより、上映方向のパラメータ設定が前進方向であることから、この上映方向が前進方向であることを所定の記号表示により動画と同時に観察モニタ51上で表示する。具体的には、動画として表示中の画像A〜Dの近傍中央に配置させた第1の回転方向(時計方向)に回る図柄の矢印61を、表示記号フォーマット部中から読み出して前進方向を意味する第1の記号として表示する。供覧者は、この時計方向に回る図柄の矢印61を見ることにより、動画の上映方向が前進方向であり、順次表示される画像が進んでいることを容易に理解できる。
Here, the
図3−2は、動画の上映方法を規定するパラメータ設定として、操作者による表示枚数変更ボタン55の操作により4枚表示が選択指示され、かつ、逆再生ボタン53cが押下された場合の動画の表示例を示している。すなわち、画像上映部45は、観察モニタ51部分にカプセル型内視鏡3により撮像されて時系列的に連続する4コマ分の画像A〜Dを2行2列の形で同時に表示させる。この場合、逆再生ボタン53cが押下されているので、動画の時系列的な上映方向は、時系列的に後退方向の上映となり、2行2列の4コマの画像は後退方向を示す第2の回転方向が反時計方向となるように画像が順次更新されつつ動画表示されることとなる。したがって、図示例では、左上部分に最新の画像Dが位置しているが、次の更新表示のタイミングでは、左上部分に画像Dに代えて画像Cが表示され、右上部分に画像Cに代えて画像Bが表示され、右下部分に画像Bに代えて画像Aが表示され、左下部分に画像Aに代えてさらに古い画像が新たに表示される、如く画像が順次更新されることで、動画上映が行われる。
FIG. 3-2 shows the parameter setting for defining the movie display method. When the operator selects the four-image display by operating the display
ここで、表示制御部46は、動画の時系列的な上映方向を規定するパラメータに関して、逆再生ボタン53cが押下されたことにより、上映方向のパラメータ設定が後退方向であることから、この上映方向が後退方向であることを所定の記号表示により動画と同時に表示部42上で表示する。具体的には、動画として表示中の画像D〜Aの近傍中央に配置させた第2の回転方向(反時計方向)に回る図柄の矢印62を、表示記号フォーマット部中から読み出して後退方向を意味する第2の記号として表示する。供覧者は、この反時計方向に回る図柄の矢印62を見ることにより、動画の上映方向が後退方向であり、順次表示される画像が後退していることを容易に理解できる。
Here, the
(変形例1)
図5−1、図5−2を参照して変形例1を説明する。図5−1は、変形例1の動画上映時の表示例として上映方向が前進方向の場合を示す正面図であり、図5−2は、変形例1の動画上映時の表示例として上映方向が後退方向の場合を示す正面図である。
(Modification 1)
実施の形態1では、前進方向を意味する第1の記号として時計方向に回る図柄の矢印61を表示させるようにしたが、変形例1では、前進方向を意味する第1の記号として遠近法表示に従い表示部42の画面表面側から画面奥側に向かう図柄の矢印63を表示させるようにしたものである。同様に、実施の形態1では、後退方向を意味する第2の記号として反時計方向に回る図柄の矢印62を表示させるようにしたが、変形例1では、後退方向を意味する第2の記号として遠近法表示に従い表示部42の画面奥側から画面表面側に向かう図柄の矢印64を表示させるようにしたものである。
In the first embodiment, the
図5−1、図5−2はいずれも2行2列の4コマ表示時への適用例として説明したが、変形例1の矢印63又は64による上映方向の表示は、1コマ表示や2コマ表示の場合に、より効果的となる。
FIGS. 5A and 5B have been described as application examples when displaying 4 frames of 2 rows and 2 columns. However, the display of the display direction by the
また、これらの矢印63,64の表示に代えて、電磁気分野などで用いられている記号であって、表裏方向を表す図6−1、図6−2に示すような矢印65,66の表示を用いるようにしてもよい。
Further, instead of displaying the
(変形例2)
図7−1、図7−2を参照して変形例2を説明する。図7−1は、変形例2の動画上映時の表示例として上映方向が前進方向の場合を示す正面図であり、図7−2は、変形例2の動画上映時の表示例として上映方向が後退方向の場合を示す正面図である。
(Modification 2)
実施の形態1では、前進方向を意味する第1の記号として時計方向に回る図柄の矢印61を表示させるようにしたが、変形例2では、パラメータ設定操作用のアイコン表示の再生コントローラ53部分中で前進方向に関連する再生ボタン53d、コマ送りボタン53e、終端出しボタン53f部分を点灯表示、或いは赤色表示等による強調表示部分67とすることで前進方向を意味する第1の記号としたものである。同様に、実施の形態1では、後退方向を意味する第2の記号として反時計方向に回る図柄の矢印62を表示させるようにしたが、変形例2では、パラメータ設定操作用のアイコン表示の再生コントローラ53部分中で後退方向に関連する先頭出しボタン53a、逆コマ送りボタン53b、逆再生ボタン53c部分を店頭表示、或いは赤色表示等による強調表示部分68とすることで後退方向を意味する第2の記号としたものである。
In the first embodiment, the
これらの強調表示部分67,68は、再生ボタン53d部分や逆再生ボタン53c部分のみの強調表示であってもよい。また、ボタン53d〜53f間やボタン53c〜53a間を順次点滅しながら移動するような動的な強調表示であってもよい。
These highlighting
(変形例3)
図8−1、図8−2を参照して変形例3を説明する。図8−1は、変形例3の動画上映時の表示例として上映方向が前進方向の場合を示す正面図であり、図8−2は、変形例3の動画上映時の表示例として上映方向が後退方向の場合を示す正面図である。
(Modification 3)
実施の形態1や変形例1,2では、所定の記号として方向性を持つ記号を用いて前進方向や後退方向を表示させるようにしたが、変形例3では、各画像A〜Dの時系列的な順序を示す数字、例えば、“1”〜“4”を、上映方向を表示する記号として用いるようにしたものである。
In
前進方向の画面例を示す図8−1では、主観察モニタ51中の隅部、例えば右下隅部に、時計回りに“1”〜“4”の番号を付した2行2列の表形式の上映方向表記部69が表示され、後退方向の画面例を示す図8−2では、主観察モニタ51中の隅部、例えば右下隅部に、反時計回りに“1”〜“4”の番号を付した2行2列の表形式の上映方向表記部70が表示されている例を示している。これらの上映方向表記部69,70は、2行2列の4コマ画像の表示例に対応しているので、上映方向が判りやすいものとなる。
In FIG. 8A showing a screen example in the forward direction, a tabular form of 2 rows and 2 columns in which the corners in the
なお、数字を用いた上映方向表記としては、表形式一覧表記に限らず、例えば、図9−1や図9−2のように、各画像A〜Dの一隅近傍に数字“1”〜“4”を上映方向表記部71,72として個別に表示させるようにしてもよい。この場合の上映方向表記部71,72の位置は各画像A〜Dの左上一隅に限らず、例えば、左下一隅等であってもよい。さらには、図10に示すように、4コマの画像が互いに接近する中央周りの一隅に集中させて上映方向表記部71を設定するようにしてもよい。また、この場合の数字“1”〜“4”の表記は、丸付き数字、ローマ数字等であってもよい。
Note that the presentation direction notation using numbers is not limited to the table format list notation, and for example, as shown in FIGS. 9-1 and 9-2, the numbers “1” to “ 4 ″ may be individually displayed as the screening
(変形例4)
図11−1、図11−2を参照して変形例4を説明する。図11−1は、変形例4の動画上映時の表示例として上映方向が前進方向の場合を示す正面図であり、図11−2は、変形例4の動画上映時の表示例として上映方向が後退方向の場合を示す正面図である。
(Modification 4)
各画像A〜Dの時系列的な順序を示す数字として、変形例3では、例えば、“1”〜“4”のような単純な数字を用いたが、変形例4では、各画像がそれぞれの撮像時のデータとして保有している撮像された時刻を示す数字、例えば○○:△△:××といった時分秒を示す数字を、所定の記号として用いるようにしたものである。 As a number indicating the time series order of the images A to D, for example, in the third modification, simple numbers such as “1” to “4” are used. A number indicating the time when the image is held as data at the time of image capture, for example, a number indicating hour, minute and second such as OO: ΔΔ: XX is used as a predetermined symbol.
ここで、各画像A〜Dの撮影時刻の情報は、一般には、例えば主観察モニタ51中で4コマ画像の左側の空白欄に縦一列に上から順に表示されるが、変形例4では、各画像が撮像された時刻を示す数字を、対応する画像の配置と相似に配置、すなわち、2行2列からなるコマ画像表示の配置に相似となるように2行2列の表形式にまとめて上映方向表記部73,74として表示させるようにしたものである。これらの上映方向表記部73,74は、2行2列の4コマ画像の表示例に対応しているので、時刻を表す数字を見ることにより、上映方向が判りやすいものとなる。
Here, the information on the shooting times of the images A to D is generally displayed in the vertical column on the left side of the four-frame image in the
なお、各画像の撮像時刻を表す数字の全部を用いず、その一部、例えば、下2桁の秒単位の数字だけを用い、図10に示した上映方向表記部71の場合と同様、図12に示すように、対応する画像の一隅(好ましくは、4コマの画像が互いに接近する中央周りの一隅に集中させて)近傍に配置させ上映方向表記部75として表示させるようにしてもよい。
As in the case of the screening
(変形例5)
図13を参照して変形例5を説明する。図13は、変形例5の動画上映時の表示例を示す正面図である。変形例5は、カーソル57の位置によって表示中の画像の時系列的な位置を示すバーチャート56を利用して、動画の時系列的な上映方向を供覧者が判るようにしたものである。
(Modification 5)
前述したように、動画として時系列的に順次表示される画像の時系列上の位置をバーチャート56上で移動するカーソル57によって示しており、カーソル57が右方向に移動すれば動画が前進方向に移動しており、逆に、カーソル57が左方向に移動すれば動画が後退方向に移動していることとなるが、バーチャート56上のカーソル57の動きは、例えば10時間分といった膨大な枚数のフレーム画像を扱う中では、移動量が僅かずつであり、カーソル57を見ただけでは左右のいずれの方向、すなわち、前進方向か後退方向かは判りにくい。
As described above, the position on the time series of images displayed sequentially in time series as a moving picture is indicated by the
そこで、変形例5では、例えば図13に示すような動画の上映状態において、所定のキー操作として、例えば一時停止ボタン53gを押下する操作を行うと、表示制御部46は、図13中に示すように、カーソル57を含むバーチャート56の一部を虫眼鏡的に拡大表示する。この拡大表示により、拡大表示部分においてはカーソル57の移動方向が可視化される。よって、供覧者は、動きが可視化されたこの拡大表示部分に注目してカーソル57の移動方向を見ることにより、カーソル57が右方向に移動していれば動画が前進方向に上映されており、逆に、カーソル57が左方向に移動していれば動画が後退方向に上映されていることが簡単に判る。
Therefore, in
(変形例6)
図14−1、図14−2を参照して変形例6を説明する。図14−1は、変形例6の動画上映時の表示例として上映方向が前進方向の場合を示す正面図であり、図14−2は、変形例6の動画上映時の表示例として上映方向が後退方向の場合を示す正面図である。
(Modification 6)
Modification 6 will be described with reference to FIGS. 14-1 and 14-2. FIG. 14A is a front view illustrating a case in which the screening direction is the forward direction as a display example when the moving image is displayed in Modification 6. FIG. 14B is a display direction as a display example when the moving image is displayed in Modification 6. It is a front view which shows the case where is a backward direction.
変形例6では、同一画面上に2コマや4コマの複数の画像を同時に表示させて動画を時系列的に上映する場合に、記号等を用いることなく、同時に表示される複数の画像を重畳状態が動画の時系列的な上映方向を示すように部分的に重畳配置させて表示させるようにしたものである。この場合、時系列的に新しい画像が表示画面の前面側に位置するように複数の画像を部分的に重畳配置させて表示する。 In Modification 6, when a plurality of images of two or four frames are simultaneously displayed on the same screen and a moving image is displayed in time series, a plurality of images displayed at the same time are superimposed without using symbols or the like. The state is partially overlapped and displayed so as to indicate the time-series presentation direction of the moving image. In this case, a plurality of images are partially overlapped and displayed so that a new image in time series is positioned on the front side of the display screen.
上映方向が前進方向の場合を示す図14−1にあっては、左上に位置する古い方の画像Aが最も表示画面の奥側、左下に位置する新しい方の画像Dが最も表示画面の前面側となるように、これらの画像A〜Dが少しずつ重畳する状態で重畳配置させて動画表示されている。このような部分的な重畳配置により動画の上映方向が前進方向であることが判る。 In FIG. 14A showing the case where the screening direction is the forward direction, the older image A located at the upper left is the farthest side of the display screen, and the newer image D located at the lower left is the front of the display screen. The images A to D are superimposed and arranged so as to be superimposed little by little so as to be on the side. It can be seen that the moving direction of the moving image is the forward direction by such a partial overlapping arrangement.
一方、上映方向が後退方向の場合を示す図14−2にあっては、左下に位置する古い方の画像Aが最も表示画面の奥側、左上に位置する新しい方の画像Dが最も表示画面の前面側となるように、これらの画像A〜Dが少しずつ重畳する状態で重畳配置させて動画表示されている。このような部分的な重畳配置により動画の上映方向が後退方向であることが判る。 On the other hand, in FIG. 14-2 showing the case where the screening direction is the backward direction, the older image A located at the lower left is the farthest display screen, and the newer image D located at the upper left is the most display screen. These images A to D are superimposed and arranged so as to be superimposed little by little so that they are on the front side. It can be seen that the moving direction of the moving image is the backward direction by such a partial overlapping arrangement.
(実施の形態2)
図15を参照して本発明の実施の形態2について説明する。本実施の形態2は、動画の上映状態で動画のフレーム表示レートを変更自在とし、フットスイッチ14をこのための設定手段として利用し、フレーム表示レートの変更操作を、フットスイッチ14の強弱操作によって行うようにしたものである。
(Embodiment 2)
A second embodiment of the present invention will be described with reference to FIG. In the second embodiment, the frame display rate of the moving image can be freely changed in the state of the moving image, the
従来、フレーム表示レートの変更は、セッティングボタン操作により画面上に出現するダイアログ内のプルダウンメニューで高速と低速とを切換える操作を行うことにより可能とされている(例えば、特許文献2等参照)。また、特許文献3,4等によれば、マウスやジョイスティックに搭載されているホイール操作によりフレーム表示レートを変更する方式が開示されている。しかしながら、このようなフレーム表示レートの変更操作は、上映中の動画から目を離して行わなければならない等の不具合があり、フレーム表示レートの変更が容易ではない。また、操作者が手で操作する方式であり、操作者が他のポインティングコマンドに集中している場合には掛け持ちの集中力を要し、フレーム表示レートの変更が容易ではない。
Conventionally, the frame display rate can be changed by performing an operation of switching between high speed and low speed using a pull-down menu in a dialog that appears on the screen by a setting button operation (see, for example, Patent Document 2).
この点、本実施の形態2は、フットスイッチ14の強弱操作によりフレーム表示レートの変更を可能とすることにより、上映中の動画を見ながら行うことができるとともに、操作者が足で操作するので、両手を他の操作に使用することも可能となり、フレーム表示レートの変更が容易となる。
In this respect, the second embodiment allows the frame display rate to be changed by operating the
図15は、本実施の形態2の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。まず、再生ボタン53dが押下されたか否か、或いは、逆再生ボタン53cが押下されたか否かを判断する(ステップS1,S2)。いずれかのボタン53d又は53cが押下された場合には(ステップS1:Yes又はステップS2:Yes)、その時点で設定されているフレーム表示レートを読出す(ステップS3)。特に設定されていなければ、デフォルト値が読出される。次いで、読出したフレーム表示レートに従い、フォルダF1中のフレーム画像をそのフレーム番号順(再生ボタン53d押下の場合)、或いは、逆順(逆再生ボタン53c押下の場合)に読出し、表示部42の主観察モニタ51上に更新表示させる(ステップS4)。
FIG. 15 is a schematic flowchart illustrating an example of display control during movie screening executed by the
このような表示状態で、一時停止ボタン53gが押下されたか否かを監視し(ステップS5)、押下された場合には(ステップS5:Yes)、その指示に従い、一時停止し(ステップS6)、ステップS1に戻る。押下されていない場合には(ステップS5:No)、対象となる全フレーム画像の表示が終了したか否かを判断する(ステップS7)。全フレーム画像の表示が終了していれば(ステップS7:Yes)、動画上映処理を終了する。
In such a display state, it is monitored whether or not the
全フレーム画像の表示が終了していなければ(ステップS7:No)、フットスイッチ14の操作があったか否かを判定する(ステップS8)。フットスイッチ14の操作があった場合には(ステップS8:Yes)、その強弱操作に応じてフレーム表示レートを変更設定する(ステップS9)。すなわち、自動車のアクセルペダルの場合のように、フットスイッチ14を強く踏むほどフレーム表示レートが速くなるように設定され、フットスイッチ14を弱く踏むほどフレーム表示レートが遅くなるように設定される。
If the display of all frame images has not been completed (step S7: No), it is determined whether or not the
その後、その時点で設定されているフレーム表示レートに従う画像更新タイミングに達したか否かを判定し(ステップS10)、達していなければ(ステップS10:No)、達するまで待機するが、達した場合には(ステップS10:Yes)、ステップS4に戻り、その時点で設定されているフレーム表示レートに従い、フォルダF1中のフレーム画像をそのフレーム番号順(再生ボタン53d押下の場合)、或いは、逆順(逆再生ボタン53c押下の場合)に読出し、表示部42の主観察モニタ51上に更新表示させる(ステップS4)ことで、動画として上映させる。
Thereafter, it is determined whether or not the image update timing according to the frame display rate set at that time has been reached (step S10). If not reached (step S10: No), the process waits until it is reached. (Step S10: Yes), the process returns to step S4, and the frame images in the folder F1 are arranged in order of their frame numbers (when the
(変形例7)
図16を参照して変形例7について説明する。変形例7は、動画の上映状態で動画のフレーム表示レートを変更自在とし、再生ボタン53dをこのための設定手段として利用し、フレーム表示レートの変更操作を、再生ボタン53dのクリック回数(繰り返し操作回数)によって行うようにしたものである。
(Modification 7)
Modification 7 will be described with reference to FIG. In the modified example 7, the frame display rate of the moving image is freely changeable in the moving image display state, the
図16は、変形例7の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。図15中に示すステップS8,S9に代えて、変形例7ではステップS11,S12が実行される。全フレーム画像の表示が終了していなければ(ステップS7:No)、再生ボタン53dをクリックする操作があったか否かを判定する(ステップS11)。再生ボタン53dをクリックする操作があった場合には(ステップS11:Yes)、そのクリック回数に応じてフレーム表示レートを変更設定する(ステップS12)。すなわち、クリック回数が多いほどフレーム表示レートが速くなるように設定される。後の処理制御は、図15の場合と同様である。
FIG. 16 is a schematic flowchart illustrating an example of display control during moving image screening executed by the
変形例7によれば、動画の上映中において、再生ボタン53dをクリックした回数に応じてフレーム表示レートの変更設定が可能であるので、人間工学的な操作によってフレーム表示レートの変更を容易に行うことができる。
According to the modified example 7, the frame display rate can be changed and set according to the number of times the
(変形例8)
図17を参照して変形例8について説明する。変形例8は、表示部42の一部に表示レート設定用のスライドバーを表示させておくとともに、動画の上映状態で動画のフレーム表示レートを変更自在とし、表示レート設定用のスライドバー上をマウス13操作によって移動自在なカーソルをこのための設定手段として利用し、フレーム表示レートの変更操作をカーソルの移動操作に応じて行うようにしたものである。
(Modification 8)
Modification 8 will be described with reference to FIG. In the modified example 8, a slide bar for setting the display rate is displayed on a part of the
図17は、変形例8の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。図15中に示すステップS8,S9に代えて、変形例8ではステップS13,S14が実行される。全フレーム画像の表示が終了していなければ(ステップS7:No)、表示レート設定用のスライドバー上でカーソルの移動操作があったか否かを判定する(ステップS13)。表示レート設定用のスライドバー上でカーソルの移動操作があった場合には(ステップS13:Yes)、その移動方向に応じてフレーム表示レートを変更設定する(ステップS14)。すなわち、カーソルを右側に移動させるほどフレーム表示レートが速くなるように設定され、カーソルを左側に移動させるほどフレーム表示レートが遅くなるように設定される。後の処理制御は、図15の場合と同様である。
FIG. 17 is a schematic flowchart showing an example of display control during the movie showing, which is executed by the
変形例8によれば、フレーム表示レートの変更を容易に行うことができる上に、表示レート設定用のスライドバーは表示部42上に表示されており、画面上で視認できるので、供覧者にとっても、表示レート設定用のスライドバー上のカーソル位置を確認することで、フレーム表示レートの変更の余地がまだ残っているか否かを知ることができ、操作者にフレーム表示レートの変更を適宜要求することができる。
According to the modification 8, the frame display rate can be easily changed, and the display rate setting slide bar is displayed on the
(変形例9)
図18を参照して変形例9について説明する。変形例9は、変形例8における表示レート設定用のスライドバー上のカーソル移動を、キーボード11上の特定キー操作と同時のホイール12の操作に応じて行うようにしたものである。
(Modification 9)
図18は、変形例9の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。図17中に示すステップS13に代えて、変形例9ではステップS15,S16が実行される。全フレーム画像の表示が終了していなければ(ステップS7:No)、キーボード11上の特定キー操作と同時に、マウス13のホイール12の操作があったか否かを判定する(ステップS15)。ホイール12の操作があった場合には(ステップS15:Yes)、その操作量に応じて表示レート設定用のスライドバー上でカーソルを移動させる(ステップS16)。そして、このカーソルの移動方向に応じてフレーム表示レートを変更設定する(ステップS14)。すなわち、カーソルを右側に移動させるほどフレーム表示レートが速くなるように設定され、カーソルを左側に移動させるほどフレーム表示レートが遅くなるように設定される。後の処理制御は、図15、図17の場合と同様である。
FIG. 18 is a schematic flowchart illustrating an example of display control during moving image screening executed by the
変形例9によれば、動画の上映中において、マウス12のホイール12の操作に応じてフレーム表示レートの変更設定が可能であるので、人間工学的な操作によってフレーム表示レートの変更を容易に行うことができる。
According to the
(変形例10)
図19を参照して変形例10について説明する。変形例10は、動画の上映状態で動画のフレーム表示レートを変更自在とし、キーボード11上の矢印キーである“↑”“↓”“→”“←”キーをこのための設定手段として利用し、フレーム表示レートの変更操作をキーボード11上の矢印キー操作により行うようにしたものである。ここで、各矢印キーには、それぞれフレーム表示レート変更に関して、例えば、“↑”キーの場合には「ゆっくり」、“↓”キーの場合には「速く」、“→”キーの場合には「次コマに進む」、“←”キーの場合には「前コマに戻る」といった役割が設定されている。
(Modification 10)
Modification 10 will be described with reference to FIG. In the modified example 10, the frame display rate of the moving image can be freely changed while the moving image is being displayed, and the “↑”, “↓”, “→”, and “←” keys that are arrow keys on the
図19は、変形例10の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。図15中に示すステップS8,S9に代えて、変形例10ではステップS17,S18が実行される。全フレーム画像の表示が終了していなければ(ステップS7:No)、キーボード11上で矢印キーの操作があったか否かを判定する(ステップS17)。矢印キーの操作があった場合には(ステップS17:Yes)、操作された矢印キーに応じて上述の役割に従いフレーム表示レートを変更設定する(ステップS18)。後の処理制御は、図15の場合と同様である。
FIG. 19 is a schematic flowchart illustrating an example of display control during the movie showing that is executed by the
変形例10によれば、表示部42の画面を離れて、キーボード11上での手元操作でフレーム表示レートの変更が可能であるので、画面上でフレーム表示レート変更のためにカーソル位置に注視するといったことが不要となり、フレーム表示レートの変更を容易に行うことができる。
According to the tenth modification, the frame display rate can be changed by leaving the screen of the
(実施の形態3)
図20及び図21を参照して本発明の実施の形態3について説明する。本実施の形態3は、汎用端末であるワークステーションの一部の操作部材であるキーボード11の数個のキーを、動画の上映方法を操作する操作手段として利用するようにしたものである。
(Embodiment 3)
A third embodiment of the present invention will be described with reference to FIGS. In the third embodiment, several keys of a
図20は、表示部42上に表示される各種設定操作用のアイコンとキーボード11上のキーに割り当てられた対応関係を示す模式図である。本実施の形態3では、一時停止ボタン53gによる機能が“Space”キー21に割り当てられている他、先頭出しボタン53a、逆コマ送りボタン53b、逆再生ボタン53c、再生ボタン53d、コマ送りボタン53e、終端出しボタン53fの各機能がそれぞれ“Home”キー22、“Page down”キー23、“Delete”キー24、“Insert”キー25、“Page up”キー26、“End”キー27に割り当てられている。
FIG. 20 is a schematic diagram showing a correspondence relationship between icons for various setting operations displayed on the
図21は、本実施の形態3の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。まず、キーボード11上の“Insert”キー25が押下されたか否か、或いは、“Delete”キー24が押下されたか否かを判断する(ステップS21,S22)。ここで、“Insert”キー25の押下は再生ボタン押下に相当し、“Delete”キー24の押下は逆再生ボタン押下に相当する。いずれかのキー24又は25が押下された場合には(ステップS21:Yes又はステップS22:Yes)、その時点で設定されているフレーム表示レートを読出す(ステップS23)。特に設定されていなければ、デフォルト値が読出される。次いで、読出したフレーム表示レートに従い、フォルダF1中のフレーム画像をそのフレーム番号順(“Insert”キー25押下の場合)、或いは、逆順(“Delete”キー24押下の場合)に読出し、表示部42の主観察モニタ51上に更新表示させる(ステップS24)。
FIG. 21 is a schematic flowchart showing an example of display control during moving image screening executed by the
このような表示状態で、キーボード11上のキーが押下されたか否かを監視し(ステップS25)、押下されていない場合には(ステップS25:No)、対象となる全フレーム画像の表示が終了したか否かを判断する(ステップS26)。全フレーム画像の表示が終了していれば(ステップS26:Yes)、動画上映処理を終了する。
In such a display state, it is monitored whether or not a key on the
全フレーム画像の表示が終了していなければ(ステップS26:No)、フレーム表示レートに従う画像更新タイミングに達したか否かを判定し(ステップS27)、達していなければ(ステップS27:No)、達するまで待機するが、達した場合には(ステップS27:Yes)、ステップS24に戻り、設定されているフレーム表示レートに従い、フォルダF1中のフレーム画像をそのフレーム番号順(“Insert”キー25押下の場合)、或いは、逆順(“Delete”キー24押下の場合)に読出し、表示部42の主観察モニタ51上に更新表示させる(ステップS24)ことで、動画として上映させる。 If the display of all frame images has not been completed (step S26: No), it is determined whether or not the image update timing according to the frame display rate has been reached (step S27), and if not reached (step S27: No), Wait until it reaches, but if it reaches (Yes at Step S27), return to Step S24 and, according to the set frame display rate, frame images in the folder F1 in the order of their frame numbers ("Insert" key 25 pressed) ) Or in reverse order (when the “Delete” key 24 is pressed), and is updated and displayed on the main observation monitor 51 of the display unit 42 (step S24) to be displayed as a moving image.
一方、キーボード11上のキーが押下された場合(ステップS25:Yes)、そのキーが一時停止ボタン53gに相当する“Space”キー21であった場合には(ステップS28:Yes)、そのキー指示に従い、一時停止し(ステップS29)、ステップS21に戻る。また、押下されたキーがコマ送りボタン53eに相当する“Page up”キー26であった場合には(ステップS30:Yes)、そのキー指示に従い、上映中の動画をコマ送り表示させ(ステップS31)、ステップS21に戻る。さらに、押下されたキーが逆コマ送りボタン53bに相当する“Page down”キー23であった場合には(ステップS32:Yes)、そのキー指示に従い、上映中の動画を逆コマ送り表示させ(ステップS33)、ステップS21に戻る。
On the other hand, when a key on the
さらに、押下されたキーが終端出しボタン53fに相当する“End”キー27であった場合には(ステップS34:Yes)、そのキー指示に従い、上映中の動画を終端出し位置に移動させ(ステップS35)、ステップS21に戻る。一方に、押下されたキーが先頭出しボタン53aに相当する“Home”キー22であった場合には(ステップS34:No)、そのキー指示に従い、上映中の動画を先頭出し位置に移動させ(ステップS36)、ステップS21に戻る。
Further, when the pressed key is the “End” key 27 corresponding to the
一般に、ワークステーションのような汎用端末を被検体情報取得システムに流用した場合、各種操作は画面上表示のアイコン等に矢印カーソルを合わせながらマウス13操作で行うことが多く、その操作部材であるキーボード11は殆ど活用されない状況にある。この点、本実施の形態3によれば、遊んでいるキーボード11の数個のキーに動画の上映方法を操作する機能を割り当てているので、有効に活用することができる。特に、画面上のアイコン操作の場合には注視力を要し、上映中の動画から目を離してしまうが、物体の位置で決まるキーボード11上のキー操作によれば、熟練者であれば動画から目を離すことなくブラインドタッチでの上映方法に関する操作が可能となる。
In general, when a general-purpose terminal such as a workstation is diverted to the subject information acquisition system, various operations are often performed by operating the
なお、不慣れな操作者を考慮した場合には、“Space”キー21、“Home”キー22、“Page down”キー23、“Delete”キー24、“Insert”キー25、“Page up”キー26、“End”キー27の各キーのキートップに割り当てられた対応する機能を表記したシールを貼ればよい。これにより、当該キーボード11を観察作業用キーボードとして専用化することもできる。
When an unfamiliar operator is considered, the “Space” key 21, “Home” key 22, “Page down” key 23, “Delete” key 24, “Insert” key 25, “Page up” key 26 , A sticker indicating the corresponding function assigned to the key top of each key of the “End” key 27 may be pasted. Accordingly, the
(実施の形態4)
図22を参照して本発明の実施の形態4について説明する。本実施の形態4は、フットスイッチ14を、動画の上映方法に関するうち、その上映を一時停止させるための操作手段として利用するようにしたものである。
(Embodiment 4)
A fourth embodiment of the present invention will be described with reference to FIG. In the fourth embodiment, the
図22は、本実施の形態4の表示制御部46により実行される動画上映中の表示制御例を示す概略フローチャートである。例えば、図19中に示したステップS5に代えて、本実施の形態4ではステップS20が実行される。すなわち、ステップS4による動画の表示状態で、フットスイッチ14が踏まれたか否かを監視し(ステップS20)、踏まれた場合には(ステップS20:Yes)、その指示に従い、一時停止し(ステップS6)、ステップS1に戻る。踏まれていない場合には(ステップS20:No)、図19で示した以降の処理が実行される。
FIG. 22 is a schematic flowchart illustrating an example of display control during the movie showing, which is executed by the
なお、このステップS20の処理は、図21中に示したステップS28の処理に代えて用いるようにしてもよい。 The process of step S20 may be used instead of the process of step S28 shown in FIG.
本実施の形態4によれば、上映中の動画の一時停止の操作をフットスイッチ14によって行うことができるので、上映中の動画から目を離すことなく、関心度の高い動画部分で適正に一時停止させて詳細に観察することができる。
According to the fourth embodiment, since the operation of pausing the movie being screened can be performed by the
本発明は、上述した実施の形態に限らず、本発明の趣旨を逸脱しない範囲であれば、種々の変形が可能である。 The present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the spirit of the present invention.
3 カプセル型内視鏡
11 キーボード
12 ホイール
13 マウス
14 フットスイッチ
42 表示部
56 バーチャート
57 カーソル
61〜66 矢印
67,68 強調表示部分
69〜75 上映方向表記部
3
Claims (22)
前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、
前記動画の上映方法を規定するパラメータを変更自在に設定する設定手段と、
前記パラメータ設定による前記上映方法の設定状態を前記表示部上に前記動画と同時に表示する設定状態表示手段と、
を備えたことを特徴とする画像表示装置。 Acquisition means for acquiring image data imaged in time series by the in-subject introduction apparatus;
A moving image screening means for displaying an image based on the image data captured and acquired in time series by the intra-subject introduction apparatus as a moving image on a display unit;
Setting means for variably setting a parameter that defines a method for showing the moving image;
Setting state display means for displaying the setting state of the screening method by the parameter setting simultaneously with the moving image on the display unit;
An image display device comprising:
前記パラメータは、前記動画の時系列的な上映方向を規定するパラメータであることを特徴とする請求項1に記載の画像表示装置。 The moving image screening means is free to time-sequentially forward and time-reversely screened as the moving image screening method,
The image display device according to claim 1, wherein the parameter is a parameter that defines a time-series presentation direction of the moving image.
前記設定状態表示手段は、前記第1の記号として前記第1の回転方向に回る図柄の矢印、前記第2の記号として前記第2の回転方向に回る図柄の矢印を用いることを特徴とする請求項4に記載の画像表示装置。 The moving image display means uses four frames of 2 rows and 2 columns, and when the moving image is displayed in the forward direction, the moving image is displayed in the first rotation direction, and when the moving image is displayed in the backward direction. By updating the image in the second rotation direction, the video is shown in time series,
The setting state display means uses an arrow of a symbol that rotates in the first rotation direction as the first symbol, and an arrow of a symbol that rotates in the second rotation direction as the second symbol. Item 5. The image display device according to Item 4.
前記設定状態表示手段は、所定操作に基づき前記カーソルを含む前記バーチャートの一部を拡大表示し該カーソルの移動方向を可視化することを特徴とする請求項2に記載の画像表示装置。 A bar chart means for indicating a position on a time series of images displayed sequentially in time series as a moving picture by a cursor moving on the bar chart,
3. The image display device according to claim 2, wherein the setting state display means enlarges and displays a part of the bar chart including the cursor based on a predetermined operation and visualizes the moving direction of the cursor.
前記設定状態表示手段は、同時に表示される複数の画像を重畳状態が動画の時系列的な上映方向を示すように部分的に重畳配置させて表示することを特徴とする請求項2に記載の画像表示装置。 The moving image screening means simultaneously displays a plurality of images on the same screen to display a moving image in time series,
The said setting state display means displays the several image displayed simultaneously by superimposing and arrange | positioning partially so that a superimposition state may show the time-sequential showing direction of a moving image. Image display device.
前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づくフレーム単位の画像を表示部上に動画として上映する動画上映手段と、
前記動画の上映状態で該動画のフレーム表示レートを変更自在に設定する設定手段と、
を備えたことを特徴とする画像表示装置。 Acquisition means for acquiring image data imaged in time series by the in-subject introduction apparatus;
Movie display means for displaying an image in frame units based on the image data acquired by time series imaging by the intra-subject introduction apparatus as a movie on a display unit;
Setting means for freely setting a frame display rate of the moving image in the moving image display state;
An image display device comprising:
前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、
汎用端末の一部の操作部材に割り当てられ、前記動画の上映方法を操作する操作手段と、
を備えたことを特徴とする画像表示装置。 Acquisition means for acquiring image data imaged in time series by the in-subject introduction apparatus;
A moving image screening means for displaying an image based on the image data captured and acquired in time series by the intra-subject introduction apparatus as a moving image on a display unit;
An operation means assigned to some operation members of the general-purpose terminal and operating the movie display method;
An image display device comprising:
前記被検体内導入装置によって時系列で撮像されて取得された前記画像データに基づく画像を表示部上に動画として上映する動画上映手段と、
フットスイッチに割り当てられ、前記動画の上映方法を操作する操作手段と、
を備えたことを特徴とする画像表示装置。 Acquisition means for acquiring image data imaged in time series by the in-subject introduction apparatus;
A moving image screening means for displaying an image based on the image data captured and acquired in time series by the intra-subject introduction apparatus as a moving image on a display unit;
An operation means assigned to a foot switch and operating the movie display method;
An image display device comprising:
The image display device according to claim 21, wherein the operation means temporarily stops the moving image by operating the foot switch.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005125595A JP2006296882A (en) | 2005-04-22 | 2005-04-22 | Image display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005125595A JP2006296882A (en) | 2005-04-22 | 2005-04-22 | Image display device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006296882A true JP2006296882A (en) | 2006-11-02 |
Family
ID=37465692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005125595A Pending JP2006296882A (en) | 2005-04-22 | 2005-04-22 | Image display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006296882A (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008136759A (en) * | 2006-12-05 | 2008-06-19 | Pentax Corp | Moving image recording/reproducing device |
KR100864945B1 (en) | 2007-06-21 | 2008-10-30 | 주식회사 인트로메딕 | Image processing method of image processing workstation |
KR100911219B1 (en) | 2008-12-29 | 2009-08-06 | 주식회사 인트로메딕 | Apparatus and method for displaying of capsule endoscope image, and record media recoded program for implement thereof |
KR100960777B1 (en) | 2007-12-31 | 2010-06-01 | 주식회사 인트로메딕 | System and method for acquiring information in living body |
JPWO2013046901A1 (en) * | 2011-09-30 | 2015-03-26 | 株式会社日立メディコ | X-ray image diagnostic apparatus and X-ray image display method |
JP2016063854A (en) * | 2014-09-22 | 2016-04-28 | フクダ電子株式会社 | Electrophysiological inspection system |
CN106157925A (en) * | 2016-08-30 | 2016-11-23 | 南京巨鲨显示科技有限公司 | A kind of refresh rate resolution selects display device and the method for mode of priority |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0823520A (en) * | 1994-07-06 | 1996-01-23 | Sony Corp | Moving image display method and editing device |
JP2000047651A (en) * | 1998-07-29 | 2000-02-18 | Mitsubishi Electric Corp | Video reproducing device |
JP2002077820A (en) * | 2000-09-05 | 2002-03-15 | Matsushita Electric Ind Co Ltd | Accumulating/reproducing device and digital broadcast transmitting device |
JP2002109863A (en) * | 2000-09-28 | 2002-04-12 | Toshiba Corp | Information recording and reproducing device |
JP2003068058A (en) * | 2001-08-27 | 2003-03-07 | Jisedai Joho Hoso System Kenkyusho:Kk | Contents structure editing device and computer readable recording medium with program for executing computer as respective means for the same recorded thereon |
JP2004228752A (en) * | 2003-01-21 | 2004-08-12 | Matsushita Electric Ind Co Ltd | Fixed form data broadcasting/reproducing apparatus and fixed form data description method |
JP2004321603A (en) * | 2003-04-25 | 2004-11-18 | Olympus Corp | Device, method and program for image display |
JP2004337596A (en) * | 2003-04-25 | 2004-12-02 | Olympus Corp | Device, method and program for displaying image |
JP2005518160A (en) * | 2002-02-12 | 2005-06-16 | ギブン・イメージング・リミテッド | System and method for displaying an image stream |
-
2005
- 2005-04-22 JP JP2005125595A patent/JP2006296882A/en active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0823520A (en) * | 1994-07-06 | 1996-01-23 | Sony Corp | Moving image display method and editing device |
JP2000047651A (en) * | 1998-07-29 | 2000-02-18 | Mitsubishi Electric Corp | Video reproducing device |
JP2002077820A (en) * | 2000-09-05 | 2002-03-15 | Matsushita Electric Ind Co Ltd | Accumulating/reproducing device and digital broadcast transmitting device |
JP2002109863A (en) * | 2000-09-28 | 2002-04-12 | Toshiba Corp | Information recording and reproducing device |
JP2003068058A (en) * | 2001-08-27 | 2003-03-07 | Jisedai Joho Hoso System Kenkyusho:Kk | Contents structure editing device and computer readable recording medium with program for executing computer as respective means for the same recorded thereon |
JP2005518160A (en) * | 2002-02-12 | 2005-06-16 | ギブン・イメージング・リミテッド | System and method for displaying an image stream |
JP2004228752A (en) * | 2003-01-21 | 2004-08-12 | Matsushita Electric Ind Co Ltd | Fixed form data broadcasting/reproducing apparatus and fixed form data description method |
JP2004321603A (en) * | 2003-04-25 | 2004-11-18 | Olympus Corp | Device, method and program for image display |
JP2004337596A (en) * | 2003-04-25 | 2004-12-02 | Olympus Corp | Device, method and program for displaying image |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008136759A (en) * | 2006-12-05 | 2008-06-19 | Pentax Corp | Moving image recording/reproducing device |
KR100864945B1 (en) | 2007-06-21 | 2008-10-30 | 주식회사 인트로메딕 | Image processing method of image processing workstation |
KR100960777B1 (en) | 2007-12-31 | 2010-06-01 | 주식회사 인트로메딕 | System and method for acquiring information in living body |
KR100911219B1 (en) | 2008-12-29 | 2009-08-06 | 주식회사 인트로메딕 | Apparatus and method for displaying of capsule endoscope image, and record media recoded program for implement thereof |
JPWO2013046901A1 (en) * | 2011-09-30 | 2015-03-26 | 株式会社日立メディコ | X-ray image diagnostic apparatus and X-ray image display method |
JP2016063854A (en) * | 2014-09-22 | 2016-04-28 | フクダ電子株式会社 | Electrophysiological inspection system |
CN106157925A (en) * | 2016-08-30 | 2016-11-23 | 南京巨鲨显示科技有限公司 | A kind of refresh rate resolution selects display device and the method for mode of priority |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9626477B2 (en) | System and method for displaying annotated capsule images | |
US8216129B2 (en) | Image display apparatus, endoscope system using the same, and image display method | |
JP5005981B2 (en) | Image display device | |
EP1787574B1 (en) | Image display device, image display method, and image display program | |
EP1922977B1 (en) | Image display device | |
JP2006296882A (en) | Image display device | |
JP4716794B2 (en) | Image display device | |
US8225209B2 (en) | Capsule endoscope image display device | |
JP5327641B2 (en) | Image information display processing device | |
JP4823659B2 (en) | In vivo image display device | |
US20090131746A1 (en) | Capsule endoscope system and method of processing image data thereof | |
JP2006095304A (en) | System and method for editing image stream captured in vivo | |
WO2007023771A1 (en) | Image display device | |
JP2010094185A (en) | Image display apparatus | |
JP4574983B2 (en) | Image display apparatus, image display method, and image display program | |
US8077144B2 (en) | Medical image display apparatus | |
US9916076B2 (en) | Endoscopic image display device | |
JP4709578B2 (en) | Image display device | |
JP5388886B2 (en) | Electronic scope | |
JP2006345929A (en) | Image display device | |
US20170180674A1 (en) | System and Method for Displaying Bookmarked Capsule Images | |
EP3222200A1 (en) | Endoscopic device | |
KR100946203B1 (en) | Capsule endoscope system, and method of managing image data thereof | |
JP4891566B2 (en) | Image display device | |
JP2013075244A (en) | Image display device, image display method, and image display program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061206 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091023 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100727 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100916 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110705 |