JP5259032B2 - Image processing device - Google Patents

Image processing device Download PDF

Info

Publication number
JP5259032B2
JP5259032B2 JP2001214285A JP2001214285A JP5259032B2 JP 5259032 B2 JP5259032 B2 JP 5259032B2 JP 2001214285 A JP2001214285 A JP 2001214285A JP 2001214285 A JP2001214285 A JP 2001214285A JP 5259032 B2 JP5259032 B2 JP 5259032B2
Authority
JP
Japan
Prior art keywords
monitor
image processing
screen size
displayed
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001214285A
Other languages
Japanese (ja)
Other versions
JP2003024273A (en
Inventor
龍 大島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2001214285A priority Critical patent/JP5259032B2/en
Publication of JP2003024273A publication Critical patent/JP2003024273A/en
Application granted granted Critical
Publication of JP5259032B2 publication Critical patent/JP5259032B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Endoscopes (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

本発明は画像処理装置、更に詳しくはモニタ画面の設定制御部分に特徴のある画像処理装置に関する。  The present invention relates to an image processing apparatus, and more particularly to an image processing apparatus characterized by a setting control portion of a monitor screen.

近年、体腔内に挿入部を挿入し、挿入部先端に設けた撮像素子により観察部位を撮像しモニタに内視鏡画像を表示させ、患部の診断・検査を行う内視鏡装置が広く用いられるようになってきた。  2. Description of the Related Art In recent years, endoscope apparatuses that insert an insertion part into a body cavity, image an observation site with an imaging device provided at the distal end of the insertion part, display an endoscopic image on a monitor, and perform diagnosis / examination of the affected part are widely used. It has become like this.

従来より、複数人のユーザによる診断・検査を行う場合、各自が見やすいように、病変検査用の高画質なモニタと確認用のサブモニタを設ける場合が多い。  Conventionally, when performing diagnosis / inspection by a plurality of users, a high-quality monitor for lesion inspection and a sub-monitor for confirmation are often provided so that each person can easily see.

発明が解決しようとする課題Problems to be solved by the invention

その際に、それぞれのモニタをみるそれぞれのユーザの好み・診断方法は異なるため、それぞれのモニタについて、別々に細部の映像信号パラメータの設定を行える必要がある。  At that time, since each user's preference / diagnosis method for viewing each monitor is different, it is necessary to be able to set detailed video signal parameters separately for each monitor.

また、診断中に、設定画面において映像信号パラメータを設定する場合、双方のモニタにパラメータの設定画面が表示されると 被写体画像が表示されないため、診断が中断されてしまい、診断の精度・効率が下がり問題であった。  Also, when setting video signal parameters on the setting screen during diagnosis, if the parameter setting screen is displayed on both monitors, the subject image will not be displayed, so the diagnosis will be interrupted and the accuracy and efficiency of the diagnosis will be reduced. It was a falling problem.

さらに、病変の早期発見のために使用する高画質な記録機器に、容易に対応できるようにして欲しいという、ユーザの要望が強かった。  Furthermore, there has been a strong demand from users to make it possible to easily cope with high-quality recording equipment used for early detection of lesions.

また、内視鏡装置の機能追加を行う場合、基板が追加されたかを判断する手段がなかった為、装置を分解して確認する必要があり、大変な作業であった。  Further, when adding a function of an endoscope apparatus, since there is no means for determining whether a substrate has been added, it is necessary to disassemble the apparatus and confirm it, which is a difficult operation.

また、設定画面における高画質映像出力専用の項目について、追加基板未装着時 に、設定不可にする事を表示しないため、ユーザへの誤解を生じるという問題があった。  In addition, the item dedicated to high-quality video output on the setting screen does not display that the setting cannot be disabled when the additional board is not mounted, resulting in a misunderstanding to the user.

さらに、高画質映像出力によるHDTVの高画質・大画面モニタを使用した場合、ユーザの中には、以下の2通りの使用法を設定できることが望まれていた。  Furthermore, when using an HDTV high image quality and large screen monitor with high image quality output, it has been desired that the user can set the following two usage methods.

(1)高画質だが、被写体像の拡大率はSDTVサイズのまま。今までSDTVサイズのモニタ上の被写体像の観察に慣れていたため、HDTVサイズの大画面化を行うと目が疲れやすいユーザがいる。(1) Although the image quality is high, the magnification rate of the subject image remains the SDTV size. Until now, users have become accustomed to observing subject images on an SDTV-sized monitor, so there are some users whose eyes tend to get tired when the HDTV-sized screen is enlarged.

(2)高画質でかつ、被写体像の拡大率はHDTVサイズ・病変発見を重視するユーザがいる。(2) There is a user who attaches high importance to HDTV size / lesion finding in the high image quality and the enlargement rate of the subject image.

本発明は、上記事情に鑑みてなされたものであり、高画質モニタ及びサブモニタ別々に映像信号パラメータの設定ができ、診断・検査の効率化をはかることのできる画像処理装置を提供することを目的としている。  The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an image processing apparatus that can set video signal parameters separately for a high-quality monitor and a sub-monitor, and can improve the efficiency of diagnosis and inspection. It is said.

課題を解決するための手段Means for solving the problem

【課題を解決するための手段】
本発明の画像処理装置は、内視鏡から得られる被写体像の撮像信号に画像処理を施して映像信号として出力する画像処理装置において、前記撮像信号に画像処理を施して、第1のモニタ画面サイズを有すると共に第1の解像度を有する第1のモニタにおける当該第1の解像度に応じた映像信号を得る第1の画像処理部と、前記撮像信号に画像処理を施して、前記第1のモニタより大きなモニタ画面サイズである第2のモニタ画面サイズを有すると共に前記第1のモニタより高解像度である第2の解像度を有する第2のモニタにおける当該第2の解像度に応じた映像信号を得る第2の画像処理部と、記第2のモニタにおける観察画面サイズを、前記第1のモニタにおけるモニタ画面サイズに応じた第1の観察画面サイズにより表示する第1のモードと、当該第2のモニタにおけるモニタ画面サイズに応じた第2の観察画面サイズにより表示する第2のモードと、を選択的に設定する共に、前記第1のモニタまたは前記第2のモニタに表示する観察画面サイズの拡大率を切替操作するための拡大率設定操作手段からの操作信号に基づいて、前記第1のモニタまたは前記第2のモニタに表示する観察画面サイズの拡大率を変えて表示するよう、前記第1の画像処理部または前記第2の画像処理部を制御する画面サイズ設定手段と、を備え、前記画面サイズ設定手段は、前記第1のモードに設定した際には、前記第1のモニタに表示される観察画面サイズを、前記拡大率設定操作手段からの操作信号に応じて拡大率を切り替えて表示するよう前記第1の画像処理部を制御すると共に、前記第2のモニタに表示される観察画面サイズを、前記第1の観察画面サイズと同じ大きさの領域のみにおいて表示させ、かつ、当該領域において、前記拡大率設定操作手段からの操作信号に応じて拡大率を切り替えて表示するよう前記第2の画像処理部を制御し、前記第2のモードに設定した際には、前記第2のモニタに表示される観察画面サイズを、前記第2の観察画面サイズに応じて表示すると共に、前記拡大率設定操作手段からの操作信号に応じて、当該拡大率を切り替えて表示するよう前記第2の画像処理部を制御することを特徴とする。
[Means for Solving the Problems]
An image processing apparatus according to the present invention performs image processing on an imaging signal of a subject image obtained from an endoscope and outputs the image signal as a video signal. A first image processing unit for obtaining a video signal corresponding to the first resolution in a first monitor having a size and a first resolution; and performing image processing on the imaging signal to obtain the first monitor A video signal corresponding to the second resolution is obtained in a second monitor having a second monitor screen size that is a larger monitor screen size and having a second resolution that is higher than the first monitor . and second image processing unit, the observation screen size before Symbol second monitor, the first to be displayed by the first observation screen size corresponding to the monitor screen size in the first monitor Over de and, the second mode for displaying the second observation screen size corresponding to the monitor screen size in the second monitor, selectively both sets, said first monitor and the second monitor The magnification of the observation screen displayed on the first monitor or the second monitor is changed based on the operation signal from the magnification setting operation means for switching the magnification of the observation screen displayed on the screen. Screen size setting means for controlling the first image processing section or the second image processing section so that the first image processing section is displayed, and when the screen size setting means is set to the first mode, Controlling the first image processing unit to display the observation screen size displayed on the first monitor by switching the enlargement ratio in accordance with an operation signal from the enlargement ratio setting operation means, and The observation screen size displayed on the second monitor is displayed only in an area having the same size as the first observation screen size, and the area is enlarged according to an operation signal from the enlargement ratio setting operation means. When the second image processing unit is controlled to switch and display the rate and set to the second mode, the observation screen size displayed on the second monitor is set to the second observation screen. The second image processing unit is controlled to display according to the size and to switch and display the enlargement factor according to an operation signal from the enlargement factor setting operation means.

以下、図面を参照しながら本発明の実施の形態について述べる。  Embodiments of the present invention will be described below with reference to the drawings.

図1ないし図7は本発明の一実施の形態に係わり、図1は内視鏡装置の構成を示すブロック図、図2は図1のフロントパネルの構成を示す図、図3は図1の画像処理装置により表示されるユーザ設定画面の一例を示す図、図4は図1の画像処理装置により表示されるユーザ設定画面の変形例を示す図、図5は図1の画像処理装置の作用を説明する第1の図、図6は図1の画像処理装置の作用を説明する第2の図、図7は図1の画像処理装置により表示されるシステム設定画面の一例を示す図である。  1 to 7 relate to an embodiment of the present invention, FIG. 1 is a block diagram showing the configuration of the endoscope apparatus, FIG. 2 is a diagram showing the configuration of the front panel of FIG. 1, and FIG. 4 is a diagram showing an example of a user setting screen displayed by the image processing apparatus, FIG. 4 is a diagram showing a modification of the user setting screen displayed by the image processing apparatus in FIG. 1, and FIG. 5 is an operation of the image processing apparatus in FIG. FIG. 6 is a second diagram illustrating the operation of the image processing apparatus of FIG. 1, and FIG. 7 is a diagram illustrating an example of a system setting screen displayed by the image processing apparatus of FIG. .

本実施の形態の内視鏡装置は、図1に示すように、被写体像を撮像する内視鏡1と、内視鏡1内のCCD1aから送られる撮像信号を画像処理してSDTV又はHDTV相当の映像信号に変換しSDTVモニタ3、HDTVモニタ5又は記録機器4、6に送る画像処理装置2と、内視鏡1に照明光を供給する光源装置7とを備えて構成される。なお、ここで記録機器4、6とは、VTR、プリンタ、ファイリング装置、写真撮影装置などのことをいう。  As shown in FIG. 1, the endoscope apparatus according to the present embodiment performs image processing on an imaging signal sent from an endoscope 1 that captures a subject image and a CCD 1 a in the endoscope 1 and is equivalent to an SDTV or an HDTV. The image processing device 2 is converted to a video signal and sent to the SDTV monitor 3, HDTV monitor 5 or recording device 4, 6, and the light source device 7 that supplies illumination light to the endoscope 1. Here, the recording devices 4 and 6 refer to a VTR, a printer, a filing device, a photography device, and the like.

画像処理装置2は、内視鏡1内のCCDから送られるアナログ信号にCDS、クランプ処理などの処理を行うアナログ映像処理回路11と、アナログ映像処理回路11の出力をアナログーデジタル変換を行うA/D回路12と、A/D回路12の出力に対してフォトカプラ、トランスなどにより絶縁処理を行う絶縁回路13と、R、G、B信号のレベル調整を行う色調整回路14と、G信号を基準として、ホワイトバランス処理を行うホワイトバランス回路15と、ガンマ補正を行うガンマ補正回路16とを有している。  The image processing apparatus 2 includes an analog video processing circuit 11 that performs processing such as CDS and clamp processing on analog signals sent from the CCD in the endoscope 1, and analog-digital conversion of the output of the analog video processing circuit 11. / D circuit 12, insulation circuit 13 that performs insulation processing on the output of A / D circuit 12 using a photocoupler, transformer, etc., color adjustment circuit 14 that adjusts the levels of R, G, and B signals, and G signal Is a white balance circuit 15 that performs white balance processing, and a gamma correction circuit 16 that performs gamma correction.

また、画像処理装置2は、フリーズ回路20、拡大・縮小回路21、強調処理回路22、マスク回路23、文字合成回路24、グラフィックIC25、VRAM26、カラーバー回路27、セレクタ28、エンコーダ29、D/A変換回路30、ブザー31、WDT(ウオッチドッグタイマ)32、発信器33、CPU34、アドレスデコーダ35、ROM36、RAM37、RTC38、BackUPRAM39、SIO40、PIO41等を備えている。  The image processing apparatus 2 includes a freeze circuit 20, an enlargement / reduction circuit 21, an enhancement processing circuit 22, a mask circuit 23, a character synthesis circuit 24, a graphic IC 25, a VRAM 26, a color bar circuit 27, a selector 28, an encoder 29, a D / D A conversion circuit 30, buzzer 31, WDT (watchdog timer) 32, transmitter 33, CPU 34, address decoder 35, ROM 36, RAM 37, RTC 38, BackUP RAM 39, SIO 40, PIO 41, and the like are provided.

詳細には、フリーズ回路20は、色ずれ補正などを行い、画像をフリーズする。  Specifically, the freeze circuit 20 performs color misregistration correction and freezes the image.

拡大・縮小回路21は、画像の拡大又は縮小を行う。  The enlargement / reduction circuit 21 enlarges or reduces the image.

強調処理回路22は、構造強調、輪郭強調、IHb強調などの強調処理及びRGBの同時化処理を行う。  The enhancement processing circuit 22 performs enhancement processing such as structure enhancement, contour enhancement, and IHb enhancement, and RGB synchronization processing.

マスク回路23は、画像に(例えば8角形の)マスク処理を行う。  The mask circuit 23 performs mask processing (for example, octagonal) on the image.

文字合成回路24は、グラフィックIC25で作成されたデータを合成して出力する。  The character synthesis circuit 24 synthesizes the data created by the graphic IC 25 and outputs it.

グラフィックIC25は、内視鏡関連情報(患者ID、患者名、日時、生年月日、周辺機器の接続状況及び記録枚数、ユーザ名、コメント、STOPWatch,各種設定画面、その他内視鏡又は接続される記録機器又はモニタの動作状況や設定状況)を作成する。  The graphic IC 25 is connected to endoscope-related information (patient ID, patient name, date and time, date of birth, connection status and number of recorded peripheral devices, user name, comment, STOPwatch, various setting screens, and other endoscopes or connected. Recording device or monitor operating status and setting status).

VRAM26は、文字合成などに使用するバッファ(DRAM、FIFO、ROMなど)である。  The VRAM 26 is a buffer (DRAM, FIFO, ROM, etc.) used for character synthesis.

カラーバー回路27は、カラーバー又はホワイト画面を表示する。  The color bar circuit 27 displays a color bar or a white screen.

セレクタ28は、文字合成された観察画像orカラーバーを選択する。  The selector 28 selects an observation image or color bar in which characters are synthesized.

エンコーダ29は、RGB信号をY/C又はNTSC信号に変換する。  The encoder 29 converts the RGB signal into a Y / C or NTSC signal.

D/A変換回路30は、デジタルーアナログ変換を行う。  The D / A conversion circuit 30 performs digital-analog conversion.

ブザー31は、キーボード42又はフロントパネル43上のキーを入力時、又は記録機器4、6のエラー動作時に音を出力する。  The buzzer 31 outputs a sound when a key on the keyboard 42 or the front panel 43 is input or when an error operation of the recording devices 4 and 6 occurs.

CPU34は、少なくとも、キーボード42又はフロントパネル43のキー入力に応じて各回路の制御を行う。  The CPU 34 controls each circuit in accordance with at least a key input from the keyboard 42 or the front panel 43.

アドレスデコーダ35は、CPU34から出力されるアドレス信号からチップセレクト信号を生成し、各回路に出力する事により、各回路を制御する。  The address decoder 35 controls each circuit by generating a chip select signal from the address signal output from the CPU 34 and outputting it to each circuit.

BackUPRAM38は、記憶しておくべきデータ(フロントパネル43及びキーボード42の設定状況、各種設定画面で設定した項目など)を記憶する。電源OFF時にも保持する。  The BackUPRAM 38 stores data to be stored (the setting status of the front panel 43 and the keyboard 42, items set on various setting screens, etc.). Holds when power is off.

SIO40は、USB、IEEE1394、RS・232Cなどのシリアルインターフェースであって、モニタ、記録機器、キーボード、光源装置などを制御する制御信号の入出力を行う。  The SIO 40 is a serial interface such as USB, IEEE 1394, or RS232C, and inputs and outputs control signals for controlling a monitor, a recording device, a keyboard, a light source device, and the like.

PIO41は、パラレルインターフェースであって、モニタ、記録機器、フロントパネル、光源装置などを制御する制御信号の入出力を行う。  The PIO 41 is a parallel interface, and inputs and outputs control signals for controlling a monitor, a recording device, a front panel, a light source device, and the like.

ここで、SDTVモニタ3は例えば有効走査線数480本、1ラインあたりの有効サンプル数720のモニタであって、上記フリーズ回路20、拡大・縮小回路21、強調処理回路22、マスク回路23、文字合成回路24、グラフィックIC25、VRAM26、カラーバー回路27、セレクタ28、エンコーダ29、D/A変換回路30は、例えば13。5Mhz、RGB各8ビットで動作する。  Here, the SDTV monitor 3 is a monitor having, for example, 480 effective scanning lines and 720 effective samples per line. The freeze circuit 20, the enlargement / reduction circuit 21, the enhancement processing circuit 22, the mask circuit 23, the character The synthesis circuit 24, the graphic IC 25, the VRAM 26, the color bar circuit 27, the selector 28, the encoder 29, and the D / A conversion circuit 30 operate, for example, at 13.5 Mhz and 8 bits each for RGB.

また、HDTVモニタ5は例えば有効走査線数1080本、1ラインあたりの有効サンプル数1920のモニタであって、画像処理装置2は、フリーズ回路20H、拡大・縮小回路21H、強調処理回路22H、マスク回路23H、文字合成回路24H、グラフィックIC25H、VRAM26H、エンコーダ29H、D/A変換回路30Hを搭載した追加基板51が接続可能となっており、追加基板51は例えば74Mhz、RGB各10ビットで動作する。追加基板51の接続状態は、PIO41を介してCPU34に取り込まれるようになっている。  The HDTV monitor 5 is, for example, a monitor having 1080 effective scanning lines and 1920 effective samples per line. The image processing apparatus 2 includes a freeze circuit 20H, an enlargement / reduction circuit 21H, an enhancement processing circuit 22H, a mask. An additional board 51 equipped with a circuit 23H, a character synthesis circuit 24H, a graphic IC 25H, a VRAM 26H, an encoder 29H, and a D / A conversion circuit 30H can be connected. The additional board 51 operates, for example, at 74 Mhz and 10 bits each for RGB. . The connection state of the additional board 51 is taken into the CPU 34 via the PIO 41.

また、内視鏡1には、内視鏡1の種別を識別する識別回路52が設けられており、PIO41を介してCPU34に取り込まれ、CPU34は内視鏡1の種別に応じた画像処理を行うように上記各回路を制御する。  Further, the endoscope 1 is provided with an identification circuit 52 for identifying the type of the endoscope 1 and is taken into the CPU 34 via the PIO 41, and the CPU 34 performs image processing according to the type of the endoscope 1. Control each of the above circuits to do so.

図2はフロントパネル43を示す。各キーSWを押すと、入力信号がPIOを経出して、CPU34に入力される。CPU34は入力信号に基づき、下記の制御を行う。  FIG. 2 shows the front panel 43. When each key SW is pressed, an input signal passes through the PIO and is input to the CPU 34. The CPU 34 performs the following control based on the input signal.

モニター出力:セレクタ(D/A変換後にあるリレースイッチなど、図示しない)などによって、モニタに表示される画像を選択する。  Monitor output: An image displayed on the monitor is selected by a selector (such as a relay switch after D / A conversion, not shown).

スコープ:内視鏡1で撮像された画像を内視鏡関連情報と共に表示する。  Scope: An image captured by the endoscope 1 is displayed together with endoscope related information.

VTR:記録機器4、6の内、VTRからの出力画像を表示する。  VTR: An output image from the VTR among the recording devices 4 and 6 is displayed.

デジタルファイル:記録機器4、6の内、ファイリング装置からの出力画像を表示する。  Digital file: Displays an output image from the filing device among the recording devices 4 and 6.

ビデオプリンタ:記録機器4、6の内、ビデオプリンタからの出力画像を表示する。  Video printer: Displays an output image from the video printer among the recording devices 4 and 6.

プリンタ:SIO40を経由して、記録機器4、6の内プリンタを制御し、画像のプリントアウト又はキャプチャー処理を行う。処理中は、スイッチ上部のLEDが点灯又は点滅する。  Printer: Controls the printers of the recording devices 4 and 6 via the SIO 40 to perform image printout or capture processing. During processing, the LED above the switch lights up or flashes.

スタンダード:フロントパネル43又はキーボード42により設定された、各設定データ(後述するユーザ設定画面、システム設定画面を含む、すべての設定画面上の設定データ)の一部又はすべてをリセットする。  Standard: A part or all of each setting data (setting data on all setting screens including a user setting screen and a system setting screen described later) set by the front panel 43 or the keyboard 42 is reset.

強調:キーSWを押す毎に、強調設定が1→2→3→1→2→3‥と変更すると共に、SW上部のLEDが変更する。強調設定モードは、図3、4に示すユーザ設定画面によって設定される。  Emphasis: Every time the key SW is pressed, the emphasis setting changes as 1 → 2 → 3 → 1 → 2 → 3... And the LED above the SW changes. The emphasis setting mode is set on the user setting screen shown in FIGS.

拡大:キーSWを押す毎に、強調設定が0→1→2→0→1→2‥と変更すると共に、SW上部のLEDが変更する。拡大設定モードは、図3、4に示すユーザ設定画面によって設定される。  Enlargement: Every time the key SW is pressed, the emphasis setting changes from 0 → 1 → 2 → 0 → 1 → 2... And the LED above the SW changes. The enlargement setting mode is set on the user setting screen shown in FIGS.

測光:キーSWを押す毎に、調光モードがオート→ピーク→平均→オート‥と変更すると共に、SW上部のLEDが変更する。CPU34はSIO40又はPIO41を経由して、光源装置7を制御し、調光を行う。  Metering: Every time the key SW is pressed, the dimming mode changes from auto to peak to average to auto, and the LED above the SW changes. The CPU 34 performs light control by controlling the light source device 7 via the SIO 40 or the PIO 41.

ホワイトバランス:キーSWが押されると、CPU34はホワイトバランス回路15を制御し、ホワイトバランス処理を行う。処理中は、上部のLEDを点灯又は点滅する。処理エラーの場合は、LEDを点滅する。  White balance: When the key SW is pressed, the CPU 34 controls the white balance circuit 15 to perform white balance processing. During processing, the upper LED is turned on or blinked. In the case of a processing error, the LED blinks.

赤/青:キーSWを押す毎に、変更する色調をOFF→赤→青と選択変更すると共に、SW上部のLED(赤、青の部分)が変更する。赤又は青選択時は、右となりのカーソルキーにより、色調値を変更する(図1の色調整回路14を制御する)と共に、上部のパラメータ表示用LEDを変更する。  Red / Blue: Each time the key SW is pressed, the color tone to be changed is changed from OFF → red → blue, and the LED (red and blue portions) above the SW changes. When red or blue is selected, the color value is changed (controls the color adjustment circuit 14 in FIG. 1) and the upper parameter display LED is changed by the cursor key to the right.

図1の追加基板51を接続時には、接続検知信号が”L”になり、未接続時には、”H”になる。電源ON時又はスタンダードSW入力時に、CPU34はPIO41を経由して検知信号レベルを読み取り、以下の処理を行う。  When the additional board 51 of FIG. 1 is connected, the connection detection signal becomes “L”, and when not connected, it becomes “H”. When the power is turned on or the standard SW is input, the CPU 34 reads the detection signal level via the PIO 41 and performs the following processing.

検知信号が”H”の場合:図2の「高画質」のLEDを消灯する。モニタに未接続の旨を表示する(電源ON時に一定時間のみ表示してもよい)。  When the detection signal is “H”: the “high image quality” LED in FIG. 2 is turned off. The fact that it is not connected is displayed on the monitor (may be displayed for a certain period of time when the power is turned on).

ユーザ設定画面の内、追加基板のみで設定する項目(例えば、図3、図4のENHANCEのIhbCe、IHb、ImageSizeのHDMode、HD。図7のHDTVSetting、ReleaseTimeのHDTVなど)はグレー処理などを表示変更を行うと共に、設定ができないようにカーソル移動の際、スキップするようにする。  Items to be set only on the additional board in the user setting screen (for example, ENHANCE IhbCe, IHb, ImageSize HDMode, HD in FIG. 3 and FIG. 4, HDTV Setting in FIG. 7, ReleaseTime HDTV, etc.) display gray processing, etc. In addition to making changes, skip when moving the cursor so that settings cannot be made.

検知信号が”L”の場合:図2の「高画質」のLEDを点灯する。モニタに接続の旨を表示する(電源ON時に一定時間のみ表示してもよい)。  When the detection signal is “L”: the “high image quality” LED in FIG. 2 is turned on. The connection is displayed on the monitor (may be displayed for a certain period of time when the power is turned on).

ユーザ設定画面の内、追加基板51のみで設定する項目を設定可能にする。  In the user setting screen, items to be set only with the additional board 51 can be set.

図3、4はユーザ設定画面の一例を示す。本画面では、ユーザが使用時に設定する項目を一つの画面で設定し、かつ設定データをBackupRAM39に記憶することにより、電源OFFした場合でも保存可能となる。また、ユーザ名ごとにデータを保存することにより、容易にデータの管理、変更、読み出しが可能となる。設定項目は、以下の通りである。  3 and 4 show examples of user setting screens. In this screen, items to be set by the user when used can be set on one screen, and the setting data can be stored in the Backup RAM 39, so that it can be saved even when the power is turned off. In addition, data can be easily managed, changed, and read by storing data for each user name. The setting items are as follows.

User:ユーザー名の登録。  User: User name registration.

ScopeSwitch:内視鏡1に具備している(図示しない)SWを押下時に行う機能の設定を行う。  ScopeSwitch: Sets a function to be performed when the SW (not shown) provided in the endoscope 1 is pressed.

Enhance:フロントパネル43の強調のキーSW入力時、又はScopeSwitchでEnhanceの設定を行ってScopeSWを押下時に変更される強調のモード1、2、3それぞれについて、構造強調又は輪郭強調(Str。1の表示の箇所)及びIhbCEのパラメータの設定を行う。  Enhancement: Structure emphasis or outline emphasis (Str. 1) for each of the emphasis modes 1, 2, and 3 that are changed when the emphasis key SW is input on the front panel 43 or when Enhance is set by pressing ScopeSwitch and the Scope SW is pressed. (Display location) and IhbCE parameters are set.

ImageSlze:モニタに表示される観察画像のサイズの設定を行う。フロントパネルの拡大キーSW又はキーボードの(図示しない)画像サイズキーを押す毎に、設定したサイズが交互に切り替わる(本例では、FullサイズとMediumサイズが切り替わる)。  ImageSlze: Sets the size of the observation image displayed on the monitor. Each time the enlargement key SW on the front panel or the image size key (not shown) on the keyboard is pressed, the set size is alternately switched (in this example, the full size and the medium size are switched).

HDMode:モニタ5上に表示される画面の拡大サイズの変更を行う。  HDMode: The enlargement size of the screen displayed on the monitor 5 is changed.

SD:モニタ3(SDTVモニタ)の拡大サイズの設定を行う。  SD: Sets the enlargement size of the monitor 3 (SDTV monitor).

HD:モニタ5(HDTVモニタ)の拡大サイズの設定を行う(モニタ3、モニタ5それぞれについて、拡大サイズを設定可能)。  HD: The enlargement size of the monitor 5 (HDTV monitor) is set (the enlargement size can be set for each of the monitor 3 and the monitor 5).

ヘルプメッセージエリア:キーボードの(図示しない)カーソル移動キーにより、選択された上記設定項目に関する、説明、補助情報、入力方法等を表示する。  Help message area: An explanation, auxiliary information, input method, and the like regarding the selected setting item are displayed by a cursor movement key (not shown) on the keyboard.

図5、6にHDModeによる設定の一例を示す。図5はHDMode=Norma1の時の拡大サイズを示す。拡大サイズがモニタ3(SDTVモニタ)及びモニタ5(HDTVモニタ)双方とも、同じ拡大サイズとなる。  5 and 6 show an example of setting by HDMode. FIG. 5 shows an enlarged size when HDMode = Normal1. Both the monitor 3 (SDTV monitor) and the monitor 5 (HDTV monitor) have the same enlargement size.

これより、従来SDTVモニタを使用していたユーザがHDTVモニタを使用した場合でも、同じ拡大サイズとなるため、違和感なく使用できると共に、拡大サイズが大きすぎる状態での長期使用時に発生する、目の疲労による診断率の低下を防ぐ事ができる。  As a result, even if a user who has used an SDTV monitor uses an HDTV monitor, the same enlargement size can be used, so that it can be used without a sense of incongruity, and can occur during long-term use when the enlargement size is too large. It is possible to prevent a decrease in diagnosis rate due to fatigue.

図6はHDMode=Largeの時の拡大サイズを示す。モニタ5(HDTVモニタ)はモニタ3(SDTVモニタ)より大画面であるため、画面全体に観察画像が表示できるような拡大サイズとなる。  FIG. 6 shows an enlarged size when HDMode = Large. Since the monitor 5 (HDTV monitor) has a larger screen than the monitor 3 (SDTV monitor), the monitor 5 (HDTV monitor) has an enlarged size capable of displaying an observation image on the entire screen.

これより、観察画像を拡大して、病変部の診断効率を高めることが可能となる。  As a result, the observation image can be enlarged to improve the diagnostic efficiency of the lesion.

ImageControl:Iris、Contrust:調光、コントラストの設定。  ImageControl: Iris, Control: Light control and contrast settings.

Enh。Type:EnhanceのStr。部の設定の切り替えを行う。構造強調1、2(Str。1、Str。2)、輪郭強調(Edge)の切替えを行う。パラメータ設定の上の表示も切り替える。  Enh. Type: Strength Str. Change the setting of the part. Switching between structure enhancement 1, 2 (Str. 1, Str. 2) and edge enhancement (Edge) is performed. The display above the parameter setting is also switched.

図7はシステム設定画面の一例を示す。本画面は、複数のページを持ち、画面上部にページ番号を表示する。キーボードの(図示しない)ページ切替えキーにより、1回の入力で、ページの切替えが可能である。設定データをBackUPRAM39に記憶する事により、電源OFFした場合でも保存可能となり、容易にデータの管理、変更、読み出し、自動設定が可能となる。  FIG. 7 shows an example of the system setting screen. This screen has multiple pages and displays the page number at the top of the screen. Pages can be switched by a single input by a page switching key (not shown) on the keyboard. By storing the setting data in the BackUPRAM 39, it can be saved even when the power is turned off, and data can be easily managed, changed, read out, and automatically set.

HDTVSetting:MON。  HDTVSetting: MON.

SCOPE:モニタ5(HDTVモニタ)に表示する画像の信号の種類(RGB、Y/C、NTSC)を選択する。  SCOPE: Selects the signal type (RGB, Y / C, NTSC) of the image to be displayed on the monitor 5 (HDTV monitor).

Display:各種設定画面(システム設定画面、ユーザ設定画面、その他本装置の設定に関するすべての設定画面)を表示するモニタを選択する。  Display: Select a monitor that displays various setting screens (system setting screen, user setting screen, and all other setting screens related to the settings of the apparatus).

SDTV:モニタ3(SDTVモニタ)のみで設定画面を表示する。  SDTV: A setting screen is displayed only on the monitor 3 (SDTV monitor).

HDTV:モニタ5(HDTVモニタ)のみで設定画面を表示する。  HDTV: A setting screen is displayed only on the monitor 5 (HDTV monitor).

HDTV十SDTV:モニタ5+モニタ3で設定画面を表示する。  HDTV + SDTV: Display the setting screen on monitor 5 + monitor 3.

本設定より、CPU34はそれぞれのグラフィックIC25及び文字合成回路24を制御し、各種設定画面の表示制御を行う。  From this setting, the CPU 34 controls the graphic IC 25 and the character synthesis circuit 24 to control display of various setting screens.

Patient、Data:電源OFF時にBackUPRAM39にデータを保存するか、消去するかを選択する。  Patent, Data: Select whether to save or delete data in the BackUPRAM 39 when the power is turned off.

ImageRecord:SCVRemote。  ImageRecord: SCVRemote.

SCVCounter:記録機器の内、写真撮影装置のリモートのON/OFF制御、及び撮影枚数の初期化を行う。  SCVCounter: Performs remote ON / OFF control of the photo photographic device and initialization of the number of shots in the recording device.

D。FRemote:記録機器の内、ファイリング装置のリモートのON/OFF制御を行う。  D. FRemote: Performs remote ON / OFF control of the filing device among the recording devices.

ReleaseTime:内視鏡1に具備される(図示しない)SW又はキーボード42上の(図示しない)キーSWにより、レリーズ(記録指示)入力を行った場合に、観察画像をフリーズする時間を設定する。  ReleaseTime: Sets a time to freeze an observation image when a release (recording instruction) is input by a SW (not shown) provided in the endoscope 1 (not shown) or a key SW (not shown) on the keyboard 42.

SCV:記録機器4、6の内、写真撮影装置に出力する観察画像のフリーズ時間を設定する。  SCV: Sets the freeze time of the observation image to be output to the photographic device among the recording devices 4 and 6.

D。F:記録機器4、6の内、ファイリング装置に出力する観察画像のフリーズ時間を設定する。HDTV:モニタ3(HDTVモニタ)に表示された観察画像のフリーズ時間を設定する。  D. F: Sets the freeze time of the observation image to be output to the filing device among the recording devices 4 and 6. HDTV: Sets the freeze time of the observation image displayed on the monitor 3 (HDTV monitor).

SDTV:モニタ5(SDTVモニタ)に表示された観察画像のフリーズ時間を設定する。  SDTV: Sets the freeze time of the observation image displayed on the monitor 5 (SDTV monitor).

本設定により、CPU34はフリーズ回路20をそれぞれ制御し、フリーズ時間を制御する。  With this setting, the CPU 34 controls the freeze circuit 20 to control the freeze time.

このように本実施の形態では、複数人のユーザが診断時に、少なくとも病変検査用の高画質モニタと確認用のサブモニタを使用している場合に、モニタをみるそれぞれのユーザの好みに応じて、高画質モニタ及びサブモニタ別々に映像信号パラメータの設定が可能となるため、診断・検査の効率化をはかれる。  Thus, in this embodiment, when a plurality of users use at least a high-quality monitor for lesion examination and a sub-monitor for confirmation at the time of diagnosis, according to the preference of each user who views the monitor, Since the video signal parameters can be set separately for the high-quality monitor and the sub-monitor, the efficiency of diagnosis and inspection can be improved.

また、病変の早期発見のために使用する高画質な記録機器に容易に対応可能なため、診断精度が向上する。  In addition, since it can be easily applied to a high-quality recording device used for early detection of lesions, diagnostic accuracy is improved.

さらに、内視鏡装置の機能追加を行う場合、基板が追加されたかを外部から容易に判断可能なため、装置を分解する必要がなく、作業の効率化がはかれる。  Furthermore, when adding a function of the endoscope apparatus, it is possible to easily determine from the outside whether a board has been added, so that it is not necessary to disassemble the apparatus, and work efficiency can be improved.

また、高画質映像出力によるHDTVの高画質・大画面モニタを使用した場合、拡大率をユーザの好みに応じて容易にカスタマイズできるため、ユーザの負担が減り、診断効率が上がる。  Further, when an HDTV high-quality and large-screen monitor with high-quality video output is used, the enlargement ratio can be easily customized according to the user's preference, reducing the burden on the user and increasing the diagnostic efficiency.

発明の効果Effect of the invention

以上説明したように本発明によれば、高画質モニタ及びサブモニタ別々に映像信号パラメータの設定ができ、診断・検査の効率化をはかることができるという効果がある。  As described above, according to the present invention, it is possible to set the video signal parameters separately for the high-quality monitor and the sub-monitor, and to improve the efficiency of diagnosis / inspection.

本発明の一実施の形態に係る内視鏡装置の構成を示すブロック図  The block diagram which shows the structure of the endoscope apparatus which concerns on one embodiment of this invention. 図1のフロントパネルの構成を示す図  The figure which shows the structure of the front panel of FIG. 図1の画像処理装置により表示されるユーザ設定画面の一例を示す図  The figure which shows an example of the user setting screen displayed by the image processing apparatus of FIG. 図1の画像処理装置により表示されるユーザ設定画面の変形例を示す図  The figure which shows the modification of the user setting screen displayed by the image processing apparatus of FIG. 図1の画像処理装置の作用を説明する第1の図  FIG. 1 is a first diagram illustrating the operation of the image processing apparatus of FIG. 図1の画像処理装置の作用を説明する第2の図  FIG. 2 is a second diagram for explaining the operation of the image processing apparatus of FIG. 図1の画像処理装置により表示されるシステム設定画面の一例を示す図  The figure which shows an example of the system setting screen displayed by the image processing apparatus of FIG.

1…内視鏡
2…画像処理装置
3…SDTVモニタ
5…HDTVモニタ
4,6…記録機器
7…光源装置
代理人 弁理士 伊藤 進
DESCRIPTION OF SYMBOLS 1 ... Endoscope 2 ... Image processing apparatus 3 ... SDTV monitor 5 ... HDTV monitor 4, 6 ... Recording equipment 7 ... Light source device Agent Patent attorney Susumu Ito

Claims (1)

内視鏡から得られる被写体像の撮像信号に画像処理を施して映像信号として出力する画像処理装置において、
前記撮像信号に画像処理を施して、第1のモニタ画面サイズを有すると共に第1の解像度を有する第1のモニタにおける当該第1の解像度に応じた映像信号を得る第1の画像処理部と、
前記撮像信号に画像処理を施して、前記第1のモニタより大きなモニタ画面サイズである第2のモニタ画面サイズを有すると共に前記第1のモニタより高解像度である第2の解像度を有する第2のモニタにおける当該第2の解像度に応じた映像信号を得る第2の画像処理部と、
記第2のモニタにおける観察画面サイズを、前記第1のモニタにおけるモニタ画面サイズに応じた第1の観察画面サイズにより表示する第1のモードと、当該第2のモニタにおけるモニタ画面サイズに応じた第2の観察画面サイズにより表示する第2のモードと、を選択的に設定する共に、前記第1のモニタまたは前記第2のモニタに表示する観察画面サイズの拡大率を切替操作するための拡大率設定操作手段からの操作信号に基づいて、前記第1のモニタまたは前記第2のモニタに表示する観察画面サイズの拡大率を変えて表示するよう、前記第1の画像処理部または前記第2の画像処理部を制御する画面サイズ設定手段と、
を備え、
前記画面サイズ設定手段は、
前記第1のモードに設定した際には、前記第1のモニタに表示される観察画面サイズを、前記拡大率設定操作手段からの操作信号に応じて拡大率を切り替えて表示するよう前記第1の画像処理部を制御すると共に、前記第2のモニタに表示される観察画面サイズを、前記第1の観察画面サイズと同じ大きさの領域のみにおいて表示させ、かつ、当該領域において、前記拡大率設定操作手段からの操作信号に応じて拡大率を切り替えて表示するよう前記第2の画像処理部を制御し、
前記第2のモードに設定した際には、前記第2のモニタに表示される観察画面サイズを、前記第2の観察画面サイズに応じて表示すると共に、前記拡大率設定操作手段からの操作信号に応じて、当該拡大率を切り替えて表示するよう前記第2の画像処理部を制御する
ことを特徴とする画像処理装置。
In an image processing device that performs image processing on an imaging signal of a subject image obtained from an endoscope and outputs it as a video signal,
A first image processing unit that performs image processing on the imaging signal and obtains a video signal corresponding to the first resolution in a first monitor having a first monitor screen size and a first resolution ;
The image signal is subjected to image processing to have a second monitor screen size that is larger than the first monitor and a second resolution that is higher than the first monitor and has a second resolution. A second image processing unit for obtaining a video signal corresponding to the second resolution in the monitor;
The observation screen size before Symbol second monitor, a first mode for displaying the first observation screen size corresponding to the monitor screen size in the first monitor, depending on the monitor screen size in the second monitor And a second mode for displaying according to the second observation screen size, and for switching the enlargement ratio of the observation screen size displayed on the first monitor or the second monitor. Based on the operation signal from the enlargement ratio setting operation means, the first image processing unit or the first image display unit or the second image display section is changed so that the enlargement ratio of the observation screen size displayed on the first monitor or the second monitor is changed. Screen size setting means for controlling the two image processing units ;
With
The screen size setting means includes:
When the first mode is set, the observation screen size displayed on the first monitor is displayed by switching the magnification rate according to an operation signal from the magnification rate setting operation means. The observation screen size displayed on the second monitor is displayed only in an area having the same size as the first observation screen size, and the enlargement ratio is displayed in the area. Controlling the second image processing unit to switch and display an enlargement ratio according to an operation signal from the setting operation means;
When the second mode is set, the observation screen size displayed on the second monitor is displayed according to the second observation screen size, and the operation signal from the enlargement factor setting operation means is displayed. In accordance with the image processing apparatus, the second image processing unit is controlled so as to switch and display the enlargement ratio .
JP2001214285A 2001-07-13 2001-07-13 Image processing device Expired - Fee Related JP5259032B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001214285A JP5259032B2 (en) 2001-07-13 2001-07-13 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001214285A JP5259032B2 (en) 2001-07-13 2001-07-13 Image processing device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2013058967A Division JP5412592B2 (en) 2013-03-04 2013-03-04 Image processing device

Publications (2)

Publication Number Publication Date
JP2003024273A JP2003024273A (en) 2003-01-28
JP5259032B2 true JP5259032B2 (en) 2013-08-07

Family

ID=19049134

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001214285A Expired - Fee Related JP5259032B2 (en) 2001-07-13 2001-07-13 Image processing device

Country Status (1)

Country Link
JP (1) JP5259032B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11372334B2 (en) 2015-01-22 2022-06-28 Carl Zeiss Smt Gmbh Method for producing a reflective optical element, reflective optical element, and use of a reflective optical element

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005013409A (en) * 2003-06-25 2005-01-20 Olympus Corp Endoscope apparatus or endoscope system
JP2005080752A (en) * 2003-09-05 2005-03-31 Pentax Corp Endoscope system
JP4401884B2 (en) * 2004-07-16 2010-01-20 キヤノン株式会社 Video signal processing apparatus and method
JP4575208B2 (en) * 2005-03-30 2010-11-04 オリンパスメディカルシステムズ株式会社 Electronic endoscope device
JP5144915B2 (en) * 2006-10-19 2013-02-13 Hoya株式会社 Electronic endoscope system
JP5730634B2 (en) 2011-03-24 2015-06-10 オリンパス株式会社 Image processing device
JP6045794B2 (en) * 2012-02-10 2016-12-14 Hoya株式会社 Electronic endoscope system
JP5976342B2 (en) * 2012-03-02 2016-08-23 Hoya株式会社 Electronic endoscope system
CN104684452B (en) * 2012-12-26 2017-04-12 奥林巴斯株式会社 Image recording device and image recording method
JP5412592B2 (en) * 2013-03-04 2014-02-12 オリンパス株式会社 Image processing device
CN106068644B (en) 2014-09-26 2019-03-01 奥林巴斯株式会社 Conveyer system and processing unit
JP6625357B2 (en) * 2015-07-17 2019-12-25 オリンパス株式会社 Endoscope device
US10614555B2 (en) 2016-01-13 2020-04-07 Sony Corporation Correction processing of a surgical site image

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04253831A (en) * 1991-02-05 1992-09-09 Fuji Photo Optical Co Ltd Electronic endoscope
JP3402710B2 (en) * 1993-12-28 2003-05-06 オリンパス光学工業株式会社 Image processing display
JP3419907B2 (en) * 1994-10-12 2003-06-23 オリンパス光学工業株式会社 Endoscope imaging device
JPH10155737A (en) * 1996-11-29 1998-06-16 Olympus Optical Co Ltd Electronic endoscope apparatus
JP2001137183A (en) * 1999-11-16 2001-05-22 Olympus Optical Co Ltd Endoscope equipment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11372334B2 (en) 2015-01-22 2022-06-28 Carl Zeiss Smt Gmbh Method for producing a reflective optical element, reflective optical element, and use of a reflective optical element

Also Published As

Publication number Publication date
JP2003024273A (en) 2003-01-28

Similar Documents

Publication Publication Date Title
JP5259032B2 (en) Image processing device
US8189041B2 (en) Endoscope signal processing apparatus
US20050020879A1 (en) Electronic endoscope device
JP2004305373A (en) Electronic endoscope system
WO2003077560A1 (en) Pickup system
JPWO2012005108A1 (en) Image recording / playback system
JP2010036017A (en) Electronic endoscope signal-processing device and electronic endoscope system
JP5308884B2 (en) Endoscopic processor device and method of operating the same
JP2008086666A (en) Endoscopic system
JP5173130B2 (en) Electronic endoscope device
JP4981397B2 (en) Medical image processing system
JP3396190B2 (en) Image processing device
JP2011110281A (en) Electronic endoscope apparatus
JP2005103030A (en) Apparatus and program for medical image generation
JP5412592B2 (en) Image processing device
JP4424811B2 (en) Medical image switching device and medical image display system provided with medical image switching device
JP2008086667A (en) Medical image processor
JP5030394B2 (en) Endoscopic image display device and control method thereof
JP2006115963A (en) Electronic endoscope apparatus
JPH10276973A (en) Electronic endoscope device
JP4315750B2 (en) Image processing apparatus and image pickup apparatus
US7338438B2 (en) Signal output apparatus of endoscope system
JP2005013409A (en) Endoscope apparatus or endoscope system
JP3373055B2 (en) Endoscopy system having fluoroscopy diagnostic device
JP4618982B2 (en) Enlarged display electronic endoscope device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080611

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110201

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110322

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120313

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120514

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121204

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130304

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130312

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130409

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130424

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5259032

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees