JP2012165865A - Endoscope apparatus, and setting method of reference image of endoscope apparatus - Google Patents

Endoscope apparatus, and setting method of reference image of endoscope apparatus Download PDF

Info

Publication number
JP2012165865A
JP2012165865A JP2011028860A JP2011028860A JP2012165865A JP 2012165865 A JP2012165865 A JP 2012165865A JP 2011028860 A JP2011028860 A JP 2011028860A JP 2011028860 A JP2011028860 A JP 2011028860A JP 2012165865 A JP2012165865 A JP 2012165865A
Authority
JP
Japan
Prior art keywords
reference image
endoscope apparatus
scope
initial setting
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011028860A
Other languages
Japanese (ja)
Other versions
JP5800517B2 (en
JP2012165865A5 (en
Inventor
Kenji Numata
健児 沼田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2011028860A priority Critical patent/JP5800517B2/en
Priority to US13/368,744 priority patent/US20120209064A1/en
Publication of JP2012165865A publication Critical patent/JP2012165865A/en
Publication of JP2012165865A5 publication Critical patent/JP2012165865A5/ja
Application granted granted Critical
Publication of JP5800517B2 publication Critical patent/JP5800517B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an endoscope apparatus accurately and surely acquiring a reference image of a scope at a place other than a plant or the like, and to provide a setting method of the reference image of the endoscope apparatus.SOLUTION: This endoscope apparatus 1 includes a body section 4 to which the scope having an image pickup device at a distal end portion of an insertion portion 7 is detachably attachable, a video signal processing section 22, a display section 5 and a control section 21. The control section 21 displays on the display section 5 an initialization instruction screen for instructing a user to start an initialization processing to acquire a reference image of the image pickup device, displays on the display section 5 a message for instructing the user to light-shield the distal end portion according to an instruction to start initialization processing, acquires the reference image with the distal end portion light-shielded and stores the acquired reference image in a memory 27.

Description

本発明は、内視鏡装置及び内視鏡装置のリファレンス画像の設定方法に関する。   The present invention relates to an endoscope apparatus and a reference image setting method for the endoscope apparatus.

内視鏡装置は、工業分野及び医療分野において広く利用されている。内視鏡装置には、先端部に撮像素子が設けられた挿入部を有するスコープと、スコープが着脱可能に接続される本体部とから構成されるものがある。
ユーザは、細長な挿入部の先端部を被写体の近傍に接近させ、撮像素子により撮像された画像を、本体部のモニタに表示させることにより、被写体の検査を行うことができる。
Endoscopic devices are widely used in the industrial and medical fields. Some endoscope apparatuses are configured by a scope having an insertion portion in which an imaging element is provided at a distal end portion, and a main body portion to which the scope is detachably connected.
The user can inspect the subject by causing the distal end of the elongated insertion portion to approach the vicinity of the subject and displaying the image captured by the imaging device on the monitor of the main body.

先端部に設けられる撮像素子は、画素間の感度バラツキ、画素欠陥を有する。そのため、内視鏡装置は、一般に、これらの感度バラツキ等を補正するための補正回路を有している。例えば、特開昭63−117727号公報に提案されているように、本体部に接続されるスコープ内に補正回路を設け、スコープの撮像素子の感度バラツキ等の補正をスコープ内で行う内視鏡装置がある。この提案の内視鏡装置によれば、スコープ内に補正回路を設けたので、スコープの交換時に、本体部における、感度バラツキ等の補正のための作業が不要になる、というメリットがある。   The image sensor provided at the tip has a variation in sensitivity between pixels and pixel defects. Therefore, the endoscope apparatus generally has a correction circuit for correcting these sensitivity variations and the like. For example, as proposed in Japanese Patent Application Laid-Open No. Sho 63-117727, an endoscope in which a correction circuit is provided in a scope connected to a main body, and correction of sensitivity variations of an imaging element of the scope is corrected in the scope. There is a device. According to the proposed endoscope apparatus, since the correction circuit is provided in the scope, there is an advantage that work for correcting sensitivity variation or the like in the main body is not required when the scope is replaced.

通常、補正回路は、補正用のリファレンス画像を記憶する不揮発性メモリを有する。リファレンス画像は、工場においてスコープの製造時に、暗室等の光の無い空間内にスコープを配置して、所定の恒温状態下で撮像素子を駆動して出力された撮像素子の映像信号から生成され、そのデータは補正回路のフラッシュメモリ等に記録される。撮像素子は、温度依存性を有するので、所定の恒温状態下でリファレンス画像を取得しなければならない。   Usually, the correction circuit has a non-volatile memory for storing a reference image for correction. The reference image is generated from the image signal of the image sensor output by driving the image sensor under a predetermined constant temperature state by placing the scope in a space without light such as a dark room when the scope is manufactured in the factory. The data is recorded in a flash memory of the correction circuit. Since the image sensor has temperature dependence, a reference image must be acquired under a predetermined constant temperature state.

内視鏡装置の使用時、スコープにおいて撮像されて得られた映像信号は、リファレンス画像を用いて、画素間の感度バラツキ、画素欠陥などが補正されて、本体部に供給される。その結果、本体部では、画素欠陥などが補正された映像信号に対して信号処理をして、モニタに被写体像を表示する。   When the endoscope apparatus is used, a video signal obtained by being picked up by a scope is supplied to the main body after correcting sensitivity variations between pixels and pixel defects using a reference image. As a result, the main body performs signal processing on the video signal in which pixel defects and the like are corrected, and displays the subject image on the monitor.

一方で、内視鏡装置が過酷な作業環境で使用されると、スコープが破損あるいは故障する場合がある。その場合、破損等したスコープは交換されなければならない。
上述した補正回路を有するスコープの場合、交換されて新たに接続されるスコープも補正回路を有しているので、本体部には画素欠陥などが補正された映像信号が供給され、モニタには、感度バラツキ等が補正された画像が表示される。
On the other hand, when the endoscope apparatus is used in a harsh working environment, the scope may be damaged or broken. In that case, the damaged scope must be replaced.
In the case of the scope having the correction circuit described above, the scope that is replaced and newly connected also has the correction circuit, so that the video signal in which the pixel defect is corrected is supplied to the main body, and the monitor An image with corrected sensitivity variations is displayed.

特開昭63−117727号公報JP 63-117727 A

上述した内視鏡装置のスコープは補正回路も有するため、その分だけ、スコープは高価になってしまう。スコープの交換の可能性を考えた場合、スコープが安価であることは、ユーザにとってはコストの面で好ましいので、スコープの細長い挿入部だけを交換できるようにするのが望ましい。
仮に、スコープの細長い挿入部だけを交換できるようにした場合は、本体部側に補正回路が設けられるので、交換の度に、リファレンス画像の取得をしなければならない。
Since the scope of the endoscope apparatus described above also has a correction circuit, the scope becomes expensive accordingly. Considering the possibility of exchanging the scope, it is preferable for the user that the scope is inexpensive in terms of cost, so it is desirable that only the elongated insertion portion of the scope can be exchanged.
If only the elongated insertion portion of the scope can be exchanged, a correction circuit is provided on the main body side, so that a reference image must be acquired each time the scope is exchanged.

しかし、上述したように、リファレンス画像の取得は、工場において、所定の環境下で所定の手順で行われていたものであり、工場以外の場所、例えば、挿入部の交換される現場で、リファレンス画像の取得ができる内視鏡装置は、これまでは無かった。   However, as described above, the acquisition of the reference image is performed at a factory in a predetermined procedure under a predetermined environment, and the reference image is acquired at a place other than the factory, for example, at a place where the insertion unit is replaced. Until now, there has been no endoscope apparatus capable of acquiring images.

内視鏡装置が使用される現場等で挿入部だけを交換可能なものであっても、リファレンス画像の取得のために内視鏡装置を工場、メーカのサービスステーション等へ搬送し、補正回路へのリファレンス画像の取得を行わなければならない。その場合、内視鏡装置を、工場等へ送ってリファレンス画像を取得し、工場等から現場へ返す、という一連の処理が生じ、その処理の間は、ユーザは、内視鏡装置を使用できない。また、ユーザが内視鏡装置の予備を持つようにすることも考えられるが、コストの面で好ましくない。   Even if only the insertion part can be exchanged at the site where the endoscope device is used, the endoscope device is transported to the factory, the manufacturer's service station, etc. to obtain the reference image, and to the correction circuit The reference image must be acquired. In that case, a series of processes occurs in which the endoscope apparatus is sent to a factory or the like to acquire a reference image and returned from the factory or the like to the site, and the user cannot use the endoscope apparatus during the process. . In addition, it is conceivable for the user to have a spare for the endoscope apparatus, but this is not preferable in terms of cost.

さらに、リファレンス画像の取得は、本来的に、スコープの製造時に工場等の恒温室において適切に撮像素子に光が入らないような所定の環境あるいは状態で行われるものであり、ユーザが簡単にできるものではない。   Furthermore, the acquisition of the reference image is inherently performed in a predetermined environment or state in which light does not enter the image pickup device properly in a temperature-controlled room such as a factory at the time of manufacture of the scope, and can be easily performed by the user. It is not a thing.

交換されて新たに接続された挿入部の撮像素子のリファレンス画像の取得と設定が適切に行われないと、モニタに表示される画像は、品質の悪い画像となり、ユーザは、適切な内視鏡検査を行うことができなくなる。   If the reference image of the imaging element of the insertion unit that has been replaced and newly connected is not properly acquired and set, the image displayed on the monitor will be an image of poor quality, and the user will be able to use an appropriate endoscope. The inspection cannot be performed.

そこで、本発明は、スコープのリファレンス画像の取得を、工場等以外の場所において、正確にかつ確実に行うことができる内視鏡装置及び内視鏡装置のリファレンス画像の設定方法を提供することを目的とする。   Therefore, the present invention provides an endoscope apparatus and a reference image setting method for an endoscope apparatus capable of accurately and reliably obtaining a scope reference image in a place other than a factory or the like. Objective.

本発明の一態様によれば、細長の挿入部を有し、該挿入部の先端部に撮像素子を有するスコープが着脱可能な本体部と、前記本体部に設けられ、前記撮像素子を駆動して、前記撮像素子で撮像して得られた映像信号を処理する映像信号処理部と、表示部と、前記本体部に設けられ、前記撮像素子のリファレンス画像の取得のための初期設定処理の開始をユーザに指示させるための初期設定指示画面を前記表示部に表示し、前記初期設定処理の開始の指示に応じて、前記先端部の遮光をユーザにさせるため第1のメッセージを前記表示部に表示し、前記先端部の遮光がされた状態で、前記リファレンス画像を取得し、取得された前記リファレンス画像を、所定のメモリに格納する制御部と、を有する内視鏡装置を提供することができる。   According to one aspect of the present invention, a main body having an elongated insertion portion and having a detachable scope having an image pickup device at a distal end of the insertion portion, the main body provided in the main body, and driving the image pickup device. The video signal processing unit that processes the video signal obtained by imaging with the imaging device, the display unit, and the main body unit are provided, and an initial setting process for acquiring a reference image of the imaging device is started. An initial setting instruction screen for instructing the user to display is displayed on the display unit, and a first message is displayed on the display unit in order to cause the user to shield the tip portion in response to an instruction to start the initial setting process. To provide an endoscope apparatus that includes a control unit that displays and acquires the reference image in a state where the distal end portion is shielded, and stores the acquired reference image in a predetermined memory. it can.

本発明の一態様によれば、内視鏡装置の本体部に着脱可能なスコープの先端部に設けられた撮像素子のリファレンス画像の取得のための初期設定処理の開始をユーザに指示させるための初期設定指示画面を表示部に表示し、前記初期設定処理の開始の指示に応じて、前記先端部の遮光をユーザにさせるため第1のメッセージを前記表示部に表示し、前記先端部の遮光がされた状態で、前記リファレンス画像を取得し、取得された前記リファレンス画像を、所定のメモリに格納する内視鏡装置のリファレンス画像の設定方法を提供することができる。   According to one aspect of the present invention, a user is instructed to start an initial setting process for acquiring a reference image of an imaging device provided at a distal end portion of a scope that is detachable from a main body portion of an endoscope apparatus. An initial setting instruction screen is displayed on the display unit, and in response to an instruction to start the initial setting process, a first message is displayed on the display unit so as to make the user shield the tip. In this state, it is possible to provide a reference image setting method for an endoscope apparatus in which the reference image is acquired and the acquired reference image is stored in a predetermined memory.

本発明の内視鏡装置及び内視鏡装置のリファレンス画像の設定方法によれば、スコープのリファレンス画像の取得を、工場等以外の場所において、正確にかつ確実に行うことができる。   According to the endoscope apparatus and the reference image setting method of the endoscope apparatus of the present invention, the reference image of the scope can be accurately and reliably obtained at a place other than the factory.

本発明の実施の形態に係わる内視鏡装置の外観構成図である。1 is an external configuration diagram of an endoscope apparatus according to an embodiment of the present invention. 本発明の実施の形態に係わる内視鏡装置1の構成を模式的に示したブロック図である。1 is a block diagram schematically showing the configuration of an endoscope apparatus 1 according to an embodiment of the present invention. 本発明の実施の形態に係わる、内視鏡装置1の初期設定の処理の流れの例を示すフローチャートである。It is a flowchart which shows the example of the flow of the process of the initial setting of the endoscope apparatus 1 concerning embodiment of this invention. 本発明の実施の形態に係わる、内視鏡装置1の初期設定の処理の流れの例を示すフローチャートである。It is a flowchart which shows the example of the flow of the process of the initial setting of the endoscope apparatus 1 concerning embodiment of this invention. 本発明の実施の形態に係わる、初期設定をするか否かをユーザに指示させるための画面の例を示す図である。It is a figure which shows the example of the screen for making a user instruct | indicate whether it performs the initial setting concerning embodiment of this invention. 本発明の実施の形態に係わる、スコープ7が本体部4に接続がされていない場合におけるスコープ接続指示メッセージの画面の例を示す図である。It is a figure which shows the example of the screen of a scope connection instruction | indication message in case the scope 7 is not connected to the main-body part 4 concerning embodiment of this invention. 本発明の実施の形態に係わる、遮光指示メッセージの画面の例を示す図である。It is a figure which shows the example of the screen of the light-shielding instruction | indication message concerning embodiment of this invention. 本発明の実施の形態に係わる、正しく遮光が行われていないことを告知するためのメッセージの画面の例を示す図である。It is a figure which shows the example of the screen of the message for notifying that light-shielding is not correctly performed concerning embodiment of this invention. 本発明の実施の形態に係わる、ユーザに、所定の時間だけ待つことを指示する画面の例を示す図である。It is a figure which shows the example of the screen which instruct | indicates it to wait for predetermined time to the user concerning embodiment of this invention. 本発明の実施の形態に係わる、スコープ初期設定の正常終了をユーザに告知するための画面の例を示す図である。It is a figure which shows the example of the screen for notifying a user of the normal completion of the scope initial setting concerning embodiment of this invention. 本発明の実施の形態の変形例に係わる、初期設定処理を含むメニュー画面の例を示す図である。It is a figure which shows the example of the menu screen containing the initialization process concerning the modification of embodiment of this invention.

以下、本発明の実施の形態を、図面を用いて説明する。
1.全体構成
まず図1に基づき、本発明の実施の形態に係わる内視鏡装置の構成を説明する。図1は、本発明の実施の形態に係わる内視鏡装置の外観構成図である。
図1に示すように、内視鏡装置1は、メインユニット2と、メインユニット2に接続される操作部3とを含んで構成される。メインユニット2と操作部3により、内視鏡装置1の本体部4が構成される。メインユニット2は、内視鏡画像、操作メニュー等が表示される表示装置としての液晶パネル(LCD)等の表示部5を有する。なお、モニタとしての表示部5は、タッチパネルであってもよい。操作部3は、接続ケーブルであるユニバーサルケーブル6により、メインユニット2と接続される。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
1. Overall Configuration First, the configuration of an endoscope apparatus according to an embodiment of the present invention will be described with reference to FIG. FIG. 1 is an external configuration diagram of an endoscope apparatus according to an embodiment of the present invention.
As shown in FIG. 1, the endoscope apparatus 1 includes a main unit 2 and an operation unit 3 connected to the main unit 2. The main unit 2 and the operation unit 3 constitute a main body 4 of the endoscope apparatus 1. The main unit 2 includes a display unit 5 such as a liquid crystal panel (LCD) as a display device on which an endoscopic image, an operation menu, and the like are displayed. The display unit 5 as a monitor may be a touch panel. The operation unit 3 is connected to the main unit 2 by a universal cable 6 that is a connection cable.

操作部3には、可撓性の挿入チューブからなるスコープ部(以下、スコープともいう)7が着脱可能に接続される。スコープ7は、接続箇所CPにおいて、操作部3に対して着脱可能となっている。スコープ7のコネクタ部7aが、操作部3のコネクタ部3aに接続されることによって、スコープ7は、本体部4に接続される。本体部4は、挿入部7bの先端部8に撮像素子を有するスコープ7が着脱可能に構成されている。   A scope portion (hereinafter also referred to as a scope) 7 made of a flexible insertion tube is detachably connected to the operation portion 3. The scope 7 can be attached to and detached from the operation unit 3 at the connection point CP. The scope 7 is connected to the main body part 4 by connecting the connector part 7 a of the scope 7 to the connector part 3 a of the operation part 3. The main body 4 is configured such that a scope 7 having an image sensor is detachable at the distal end 8 of the insertion portion 7b.

スコープ7の挿入部7bの先端部8には、図示しない撮像素子、例えばCMOSセンサ等、が内蔵され、撮像素子の撮像面側には、レンズ等の撮像光学系が配置されている。先端部8の基端側には、湾曲部9が設けられている。先端部8は、遮光部材である遮光用アダプタ10が取り付け可能になっている。遮光用アダプタ10は、キャップ形状を有し、先端部8を覆うように先端部8に装着可能になっていて、先端部8に遮光用アダプタ10が装着されると、撮像素子は、撮像面に光が進入しない遮光状態になる。   An imaging element (not shown) such as a CMOS sensor is built in the distal end portion 8 of the insertion portion 7b of the scope 7, and an imaging optical system such as a lens is disposed on the imaging surface side of the imaging element. A bending portion 9 is provided on the proximal end side of the distal end portion 8. A light-shielding adapter 10 that is a light-shielding member can be attached to the distal end portion 8. The light shielding adapter 10 has a cap shape and can be attached to the distal end portion 8 so as to cover the distal end portion 8. When the light shielding adapter 10 is attached to the distal end portion 8, the imaging element The light enters a light blocking state where no light enters.

なお、本実施の形態では、遮光用アダプタ10は、図1に示すように、先端部8に装着するキャップ形状を有するが、先端部8を挿入可能な暗箱のような装置でもよく、あるいは、先端部8に貼り付けられる、光を透過しない材料でできた粘着性のシール部材でもよい。シール部材の場合、粘着材がシール部材の片面に設けられ、その粘着面を、撮像部12のための撮像窓に貼り付けることで、簡単に撮像素子の遮光をすることができる。   In the present embodiment, the shading adapter 10 has a cap shape to be attached to the tip 8 as shown in FIG. 1, but it may be a device such as a dark box into which the tip 8 can be inserted, or An adhesive seal member made of a material that does not transmit light and is attached to the distal end portion 8 may be used. In the case of the seal member, an adhesive material is provided on one surface of the seal member, and the adhesive surface can be attached to an imaging window for the imaging unit 12 so that the image sensor can be easily shielded from light.

レリーズボタン、上下左右(U/D/L/R)方向湾曲ボタン、等の各種操作ボタンが、操作部3に設けられている。ユーザは、操作部3の各種操作ボタンを操作して、被写体の撮像、静止画記録等を行うことができる。なお、表示部5がタッチパネルであった場合、ユーザは、タッチパネルを操作して、初期設定等の内視鏡装置1の種々の操作、例えば、内視鏡装置1の動作内容を指示することができるので、表示部自体が指示部を構成する。   Various operation buttons such as a release button, an up / down / left / right (U / D / L / R) direction bending button, and the like are provided on the operation unit 3. The user can operate various operation buttons on the operation unit 3 to perform imaging of a subject, recording of a still image, and the like. When the display unit 5 is a touch panel, the user can operate the touch panel to instruct various operations of the endoscope apparatus 1 such as initial settings, for example, operation contents of the endoscope apparatus 1. The display unit itself constitutes the instruction unit.

撮像して得られた画像データは、検査対象の検査データであり、メモリカード等の記録媒体に記録され、その記録媒体である外部メモリ30(図2)は、本体部2に対して着脱可能となっている。
操作部3は、メインユニット2に着脱可能となっている。
Image data obtained by imaging is inspection data to be inspected, and is recorded on a recording medium such as a memory card. The external memory 30 (FIG. 2) as the recording medium is detachable from the main body 2. It has become.
The operation unit 3 can be attached to and detached from the main unit 2.

スコープ7は、後述するように、本体部4への接続時に、それぞれの種類を判別するための識別部を有している。本体部4は、スコープ7が接続されると、それぞれの識別部の状態あるいは識別データ(すなわちIDデータ)を検出あるいは読み出して、それぞれの種類を判別するように構成されている。ここでは、IDは、機器の型番等の種類の情報だけでなく、個体識別のための製造番号等のユニークな情報も含んでいる。
以上のように、スコープ7は、操作部3に着脱可能になっており、スコープ7が破損等した場合には、スコープ7だけを交換することができる。
As will be described later, the scope 7 has an identification unit for identifying each type when connected to the main body unit 4. When the scope 7 is connected, the main body unit 4 is configured to detect or read the state of the identification unit or the identification data (that is, ID data) and discriminate each type. Here, the ID includes not only information on the type such as the model number of the device but also unique information such as a manufacturing number for individual identification.
As described above, the scope 7 can be attached to and detached from the operation unit 3, and when the scope 7 is damaged or the like, only the scope 7 can be replaced.

また、図1の場合、メインユニット2と操作部3はユニバーサルケーブル6により接続されているが、メインユニット2と操作部3とを一体化にして一つのユニットとしてもよい。その場合、スコープ7は、その一つのユニットである装置(本体部)に対して着脱可能となる。
2.回路構成
図2は、内視鏡装置1の構成を模式的に示したブロック図である。上述したように、内視鏡装置1は、本体部4とスコープ7とから構成され、スコープ7の先端には、遮光用アダプタ10が装着可能となっている。
In the case of FIG. 1, the main unit 2 and the operation unit 3 are connected by the universal cable 6, but the main unit 2 and the operation unit 3 may be integrated into one unit. In this case, the scope 7 can be attached to and detached from the apparatus (main body part) that is one unit.
2. Circuit Configuration FIG. 2 is a block diagram schematically showing the configuration of the endoscope apparatus 1. As described above, the endoscope apparatus 1 includes the main body 4 and the scope 7, and the light shielding adapter 10 can be attached to the distal end of the scope 7.

スコープ7は、光学レンズ部11,撮像部12,照明部13,及びメモリ14を含んで構成されている。
光学レンズ部11は、先端部8に設けられ、被写体からの反射光を受光する対物光学系である。
撮像部12は、CMOSセンサ等の撮像面を有する撮像素子であり、光学レンズ部11の焦点位置に撮像面が位置するように、先端部8内に配置されている。撮像部12は、本体部4からの駆動信号に基づいて、撮像素子を駆動し、光電変換された映像信号を本体部4へ出力する。
The scope 7 includes an optical lens unit 11, an imaging unit 12, an illumination unit 13, and a memory 14.
The optical lens unit 11 is an objective optical system that is provided at the distal end 8 and receives reflected light from a subject.
The imaging unit 12 is an imaging element having an imaging surface such as a CMOS sensor, and is disposed in the distal end portion 8 so that the imaging surface is located at the focal position of the optical lens unit 11. The imaging unit 12 drives the imaging device based on the drive signal from the main body unit 4, and outputs a photoelectrically converted video signal to the main body unit 4.

照明部13は、先端部に設けられ、被写体への照明光を出射する発光素子を含んで構成されている。発光素子は、例えば、LED(発光ダイオード)である。照明部13は、本体部4からの駆動信号に基づいて駆動されて、被写体へ照明光を出射する。
メモリ14は、スコープ7の種類及び個体識別するための識別子(以下、IDという)の情報を記憶する不揮発性メモリである。
The illuminating unit 13 includes a light emitting element that is provided at the distal end and emits illumination light to the subject. The light emitting element is, for example, an LED (light emitting diode). The illumination unit 13 is driven based on a drive signal from the main body unit 4 and emits illumination light to the subject.
The memory 14 is a non-volatile memory that stores information on the type of the scope 7 and an identifier for identifying the individual (hereinafter referred to as ID).

本体部4は、操作部3,表示部5,制御部21,映像信号処理部22,グラフィック重畳部23,照明駆動部24,メインメモリ部25,リアルタイムクロック(RTC)部26、及びメモリ27を含んで構成されている。   The main unit 4 includes an operation unit 3, a display unit 5, a control unit 21, a video signal processing unit 22, a graphic superimposing unit 23, an illumination driving unit 24, a main memory unit 25, a real time clock (RTC) unit 26, and a memory 27. It is configured to include.

制御部21は、中央処理装置(CPU)を含み、本体部4内の各種回路の動作の全体を制御する処理部である。制御部21は、ユーザによる操作部3(あるいはタッチパネル)への操作に応じた処理を実行する。   The control unit 21 includes a central processing unit (CPU) and is a processing unit that controls the overall operation of various circuits in the main body unit 4. The control unit 21 executes processing according to an operation on the operation unit 3 (or touch panel) by the user.

映像信号処理部22は、制御部21からの制御信号に基づいて動作し、撮像部12へ駆動信号を供給し、撮像部12からの映像信号を受信して、受信した映像信号に対して所定の画像処理を施して、グラフィック重畳部23を介して、表示部5へ出力する。さらに、映像信号処理部22は、制御部21からの制御信号に基づいて、映像信号をメモリ27へ格納したり、メモリ27から映像信号を読み出して表示部5へ出力する。すなわち、映像信号処理部22は、本体部4に設けられ、撮像素子を駆動して、撮像素子で撮像して得られた映像信号を処理する回路である。   The video signal processing unit 22 operates based on a control signal from the control unit 21, supplies a drive signal to the imaging unit 12, receives a video signal from the imaging unit 12, and performs predetermined processing on the received video signal. Is output to the display unit 5 via the graphic superimposing unit 23. Further, the video signal processing unit 22 stores the video signal in the memory 27 based on the control signal from the control unit 21, or reads the video signal from the memory 27 and outputs it to the display unit 5. In other words, the video signal processing unit 22 is a circuit that is provided in the main body unit 4 and processes the video signal obtained by driving the image sensor and capturing an image with the image sensor.

グラフィック重畳部23は、制御部21からの制御信号及び映像信号処理部22からの映像信号に基づいて、メニュー画面などを表示部5に表示したり、被写体画像に所定の情報を重畳させた映像信号を表示部5に出力する。
照明駆動部24は、制御部21からの制御信号に基づいて、駆動信号を照明部13へ出力する。
The graphic superimposing unit 23 displays a menu screen or the like on the display unit 5 based on the control signal from the control unit 21 and the video signal from the video signal processing unit 22, or a video in which predetermined information is superimposed on the subject image. The signal is output to the display unit 5.
The illumination drive unit 24 outputs a drive signal to the illumination unit 13 based on the control signal from the control unit 21.

メインメモリ部25は、各種機能のためのプログラムを格納するROMと、制御部21内のCPUがプログラムを実行するときに作業領域として利用されるRAMと、フラッシュメモリなどの不揮発性メモリを含む。よって、制御部21のCPUは、操作部3からの操作信号に応じて、メインメモリ部25内のプログラムを読み出して、RAMを使いながら実行する。不揮発性メモリには、接続されているスコープ7の個体識別するための識別子(以下、IDという)などの情報が記録される。後述するように、電源がオンされたときに、制御部21は、スコープ7が交換されたか否かを判定するために、接続されているあるいは接続されていたスコープのIDの情報は、不揮発性メモリに記録される。
リアルタイムクロック部26は、内視鏡画像を記録するときに記録される時刻を発生して保持する回路である。
The main memory unit 25 includes a ROM that stores programs for various functions, a RAM that is used as a work area when the CPU in the control unit 21 executes the programs, and a nonvolatile memory such as a flash memory. Therefore, the CPU of the control unit 21 reads out the program in the main memory unit 25 according to the operation signal from the operation unit 3 and executes it while using the RAM. Information such as an identifier (hereinafter referred to as an ID) for identifying an individual connected scope 7 is recorded in the nonvolatile memory. As will be described later, when the power is turned on, the control unit 21 determines whether or not the scope 7 has been replaced. The information on the ID of the connected or connected scope is non-volatile. Recorded in memory.
The real-time clock unit 26 is a circuit that generates and holds a time that is recorded when an endoscopic image is recorded.

外部メモリ30は、撮像部12で撮像されて得られた映像信号を記録するための不揮発性メモリである。制御部21は、映像信号処理部22を介して、外部メモリ30に記録されている画像を、表示部5に表示させることもできる。
3.動作
次に、内視鏡装置1における初期設定の動作、特にリファレンス画像の取得の動作、について説明する。
スコープ7を交換する場合、ユーザは、まず内視鏡装置1の電源をオフし、そのオフ状態で、スコープ7の交換を行う。交換後、ユーザは、内視鏡装置1の電源をオンにすると、図3及び図4の処理が実行される。
図3及び図4は、内視鏡装置1の初期設定の処理の流れの例を示すフローチャートである。図3と図4の処理は、制御部21のCPUにより実行される。
The external memory 30 is a non-volatile memory for recording a video signal obtained by being imaged by the imaging unit 12. The control unit 21 can also display an image recorded in the external memory 30 on the display unit 5 via the video signal processing unit 22.
3. Operation Next, an initial setting operation in the endoscope apparatus 1, in particular, a reference image acquisition operation will be described.
When exchanging the scope 7, the user first turns off the power of the endoscope apparatus 1, and replaces the scope 7 in the off state. After the replacement, when the user turns on the power of the endoscope apparatus 1, the processes of FIGS. 3 and 4 are executed.
FIG. 3 and FIG. 4 are flowcharts showing an example of the process flow of the initial setting of the endoscope apparatus 1. 3 and 4 are executed by the CPU of the control unit 21.

まず、内視鏡装置1の電源がオンにされると、制御部21は、前に接続されていたスコープと異なるスコープを検出したか否かを判定する(S1)。この判定は、スコープ7に設けられたメモリ14に記録されているスコープのIDと、メインメモリ部25に記録されているスコープのIDとを比較することによって行うことができる。   First, when the power of the endoscope apparatus 1 is turned on, the control unit 21 determines whether or not a scope different from the previously connected scope is detected (S1). This determination can be made by comparing the scope ID recorded in the memory 14 provided in the scope 7 with the scope ID recorded in the main memory unit 25.

異なるスコープが検出されない場合(S1:NO)、制御部21は、初期設定実行を確認するための画面を表示部5に表示し、その表示に基づいてユーザにより操作部3において初期設定が指示されたか否かを判定する。すなわち、制御部21は、内視鏡装置1の本体部4の電源がオンされたときに接続されているスコープが、本体部4が前回オフされたときに接続されていたスコープと異なっていることが検出されたときに、初期設定指示画面(図5)を表示部5に表示する。   When a different scope is not detected (S1: NO), the control unit 21 displays a screen for confirming execution of the initial setting on the display unit 5, and the user is instructed to perform initial setting in the operation unit 3 based on the display. It is determined whether or not. That is, in the control unit 21, the scope connected when the power source of the main body unit 4 of the endoscope apparatus 1 is turned on is different from the scope connected when the main body unit 4 was turned off last time. When this is detected, an initial setting instruction screen (FIG. 5) is displayed on the display unit 5.

図5は、初期設定をするか否かをユーザに指示させるための画面の例を示す図である。異なるスコープが接続されていない場合(S1:NO)、制御部21は、メインメモリ部25のROMに記録されている画面データを読み出して、モニタ5の画面5aに、図5の画面を表示する(S2)。ユーザは、画面上の「OK」ボタンを選択すると、初期設定を指示し(S3:YES)、「キャンセル」ボタンを選択すると、初期設定を指示しない(S3:NO)ことになる。初期設定の指示がされない場合(S3:NO)、処理は、終了する。すなわち、制御部21は、スコープ7の先端部8に設けられた撮像素子のリファレンス画像の取得のための初期設定処理の開始をユーザに指示させるための初期設定指示画面(図5)を表示部5に表示する。   FIG. 5 is a diagram illustrating an example of a screen for instructing the user whether or not to perform initial setting. When a different scope is not connected (S1: NO), the control unit 21 reads the screen data recorded in the ROM of the main memory unit 25 and displays the screen of FIG. 5 on the screen 5a of the monitor 5. (S2). When the user selects the “OK” button on the screen, the initial setting is instructed (S3: YES), and when the “cancel” button is selected, the initial setting is not instructed (S3: NO). If the initial setting is not instructed (S3: NO), the process ends. That is, the control unit 21 displays an initial setting instruction screen (FIG. 5) for instructing the user to start an initial setting process for obtaining a reference image of the image sensor provided at the distal end portion 8 of the scope 7. 5 is displayed.

初期設定の指示がされた場合(S3:YES)、制御部21は、スコープ7と本体部4が接続されているか否かを判定する(S4)。スコープ7と本体部4が接続されているか否かは、スコープのIDが読み出せる等を確認することによって行うことができる。   When an instruction for initial setting is given (S3: YES), the control unit 21 determines whether or not the scope 7 and the main body unit 4 are connected (S4). Whether or not the scope 7 and the main body 4 are connected can be determined by confirming that the scope ID can be read out.

スコープ7が本体部4に接続されていない場合(S4:NO)、制御部21は、「スコープを本体部に接続して下さい。」というスコープ接続指示メッセージを、モニタ5の画面5aに表示し(S5)、処理は、S3に戻る。すなわち、制御部21は、リファレンス画像の取得の前に、スコープ7が本体部4に接続されていないことが検出された場合には、スコープ7の本体部4への接続を指示するメッセージを表示部5に表示する。   When the scope 7 is not connected to the main unit 4 (S4: NO), the control unit 21 displays a scope connection instruction message “Please connect the scope to the main unit” on the screen 5a of the monitor 5. (S5), the process returns to S3. That is, if it is detected that the scope 7 is not connected to the main body 4 before acquiring the reference image, the control unit 21 displays a message instructing connection of the scope 7 to the main body 4. This is displayed on part 5.

図6は、スコープ7が本体部4に接続がされていない場合におけるスコープ接続指示メッセージの画面の例を示す図である。図6に示すように、画面5a上には、そのメッセージと「OK」ボタンが表示される。   FIG. 6 is a diagram illustrating an example of a scope connection instruction message screen when the scope 7 is not connected to the main body 4. As shown in FIG. 6, the message and an “OK” button are displayed on the screen 5a.

異なるスコープが検出された場合(S1:YES)、あるいはスコープ7が本体部4に接続されている場合(S4:YES)、制御部21は、「スコープ初期設定を行います。スコープの先端部を遮光して下さい。」という遮光指示メッセージを、モニタ5に表示する(S6)。すなわち、制御部21により、スコープ7の先端部8に設けられた撮像部12に光が入らないように、撮像部12を遮光させるために遮光部材の取り付け指示のメッセージが、表示部5に表示される。   When a different scope is detected (S1: YES), or when the scope 7 is connected to the main unit 4 (S4: YES), the control unit 21 performs “scope initial setting. A light shielding instruction message “Please shield light” is displayed on the monitor 5 (S6). In other words, the control unit 21 displays on the display unit 5 a message for attaching a light shielding member so as to shield the imaging unit 12 so that light does not enter the imaging unit 12 provided at the distal end 8 of the scope 7. Is done.

図7は、遮光指示メッセージの画面の例を示す図である。図7に示すように、画面5a上には、そのメッセージと「OK」ボタンが表示される。すなわち、制御部21は、初期設定処理の開始の指示に応じて、先端部8の遮光をユーザにさせるためメッセージを表示部5に表示する。
図7の表示がモニタ5の画面5a上に表示されるので、ユーザは、遮光用アダプタ10をスコープ7の先端部8に取り付ける。取り付け後、ユーザは、OKボタンを選択することができる。制御部21は、その遮光用アダプタ10をスコープ7の先端部8に取り付ける作業時間を考慮して、所定の時間だけ待つ(S8)。 所定時間が経過すると、制御部21は、スコープ7の遮光が正しく行われているか否かを判定する(S9)。
FIG. 7 is a diagram illustrating an example of a screen for a light shielding instruction message. As shown in FIG. 7, the message and an “OK” button are displayed on the screen 5a. That is, the control unit 21 displays a message on the display unit 5 in order to make the user shield the tip 8 from light in response to an instruction to start the initial setting process.
Since the display of FIG. 7 is displayed on the screen 5 a of the monitor 5, the user attaches the light shielding adapter 10 to the distal end portion 8 of the scope 7. After installation, the user can select the OK button. The control unit 21 waits for a predetermined time in consideration of the work time for attaching the shading adapter 10 to the distal end portion 8 of the scope 7 (S8). When the predetermined time has elapsed, the control unit 21 determines whether or not the scope 7 is correctly shielded from light (S9).

この遮光が正しく行われているか否かの判定は、撮像部12を駆動して、所定の閾値TH以上の画素出力が、所定数以上あるか否かによって行うことができる。所定の閾値TH以上の画素出力がある場合は、撮像素子が光を受けていると考えられるからである。   The determination as to whether or not the light shielding is correctly performed can be performed by driving the imaging unit 12 and determining whether there are a predetermined number or more of pixel outputs that are equal to or greater than a predetermined threshold TH. This is because the image sensor is considered to receive light when there is a pixel output equal to or greater than a predetermined threshold TH.

正しく遮光されていない場合(S9:NO)、制御部21は、「正しく遮光をして下さい。」とうメッセージを、モニタ5に表示し(S10)、処理は、S8に移行する。すなわち、制御部21は、図7のメッセージを表示した後に、先端部8の遮光状態を判定し、先端部8が正しく遮光されていないと判定された場合には、先端部8の遮光を正しく行うようにユーザに指示するメッセージを表示部5に表示する。
なお、先端部8を遮光させるためのメッセージは、図7のメッセージ「スコープの初期設定を行います。スコープの先端部を遮光用アダプタで遮光して下さい。」に代えて、「正しく遮光されていません」、「(そもそも)遮光してありますか?」、「(このまま)リファレンス画像取得していいですか?」、「リファレンス画像取得状態になっていますか?」、等のメッセージでもよい。
When the light is not properly shielded (S9: NO), the control unit 21 displays a message “Please shield properly” on the monitor 5 (S10), and the process proceeds to S8. That is, after displaying the message of FIG. 7, the control unit 21 determines the light shielding state of the distal end portion 8, and when it is determined that the distal end portion 8 is not properly shielded from light, the light shielding of the distal end portion 8 is correctly performed. A message instructing the user to do so is displayed on the display unit 5.
Note that the message for shading the tip 8 is replaced with the message “The light is shielded correctly” instead of the message “Set the scope initially. Shake the tip of the scope with the shading adapter.” Messages such as “No”, “(Is it light-shielded in the first place?),“ Can I get the reference image (as it is) ”,“ Is it in the reference image acquisition state? ”, Etc.

図8は、正しく遮光が行われていないことを告知するためのメッセージの画面の例を示す図である。図8に示すように、そのメッセージと「OK」ボタンが表示される。図8に示すように、「正しく遮光されていません。遮光用アダプタを適切に取り付けて下さい。」のメッセージがモニタ5の画面5a上に表示されるので、ユーザは、遮光用アダプタ10をスコープ7の先端部8に適切に取り付けることができる。取り付け後、ユーザは、OKボタンを選択する。これにより、制御部21への遮光作業の終了の指示がされたことになる。   FIG. 8 is a diagram showing an example of a message screen for notifying that light is not properly shielded. As shown in FIG. 8, the message and an “OK” button are displayed. As shown in FIG. 8, the message “The light is not properly shielded. Please attach the light shielding adapter properly.” Is displayed on the screen 5a of the monitor 5. 7 can be appropriately attached to the distal end portion 8. After attachment, the user selects the OK button. As a result, the control unit 21 is instructed to end the light shielding operation.

このような接続確認(S9)と画面表示(S10)を行うのは、リファレンス画像を取得するための作業は、ユーザにとっては頻繁に行われる作業ではないので、その作業が確実に行われたか否かを確認し、後の処理で確実なリファレンス画像が取得できるようにするためである。   The connection confirmation (S9) and the screen display (S10) are performed because the operation for acquiring the reference image is not a frequent operation for the user. This is to ensure that a reliable reference image can be acquired in later processing.

正しく遮光されていると判定された場合(S7:YES)、制御部21は、「スコープ初期設定中です。1分間お待ち下さい。」とうメッセージを、モニタ5に表示する(S5)。すなわち、ユーザに、所定の時間だけ待つことの指示が行われる。言い換えると、制御部21は、リファレンス画像の取得にかかる時間をユーザに告知するメッセージを表示部5に表示する。
図9は、ユーザに、所定の時間だけ待つことを指示する画面の例を示す図である。
When it is determined that the light is properly shielded (S7: YES), the control unit 21 displays a message “Scope is being initialized. Please wait for one minute” on the monitor 5 (S5). That is, the user is instructed to wait for a predetermined time. In other words, the control unit 21 displays a message notifying the user of the time taken to acquire the reference image on the display unit 5.
FIG. 9 is a diagram illustrating an example of a screen instructing the user to wait for a predetermined time.

スコープ7が本体部4に新たに接続された時から、スコープ7の撮像素子の温度が定常状態と同じになるまでの時間が、予め実験などによって測定して判っている。よって、その時間は、通常の室温下において、熱伝導によりスコープ7の先端部8の硬質部材が、定常状態と同じになるまでの時間である。   The time from when the scope 7 is newly connected to the main body 4 until the temperature of the imaging device of the scope 7 becomes the same as that in the steady state is previously measured and known by experiments. Therefore, the time is a time until the hard member of the distal end portion 8 of the scope 7 becomes the same as the steady state by heat conduction at a normal room temperature.

なお、撮像部12を、定常状態の温度、例えば50±1℃、にしてから、リファレンス画像を取得する場合は、先端部8内にヒータ等の加熱部を配置して、その加熱部に所定の電流を流すことによって、撮像部12は所定の温度にされる。その場合は、加熱部の加熱を開始してから、その所定の温度になるまでの時間も加味して、図9のメッセージ中の時間が決定されて表示される。すなわち、図9のメッセージ中に含まれるリファレンス画像の取得にかかる時間は、撮像素子を、スコープ7の先端部8内に設けられたヒータにより加熱して所定の温度になるまでの時間を含む。
なお、撮像部12を所定の温度に加熱方法としては、ヒータ等の加熱部を用いないで、例えば、照明部13を駆動して撮像部12の温度を所定の温度まで上げたり、撮像部12の電力消費量が高くなるような高消費電力モードで撮像部12を駆動して撮像部12自体の温度が所定の温度まで上がるようにしてもよい。
In addition, when acquiring a reference image after setting the imaging unit 12 to a steady state temperature, for example, 50 ± 1 ° C., a heating unit such as a heater is disposed in the tip 8 and a predetermined value is set in the heating unit. By causing the current to flow, the imaging unit 12 is brought to a predetermined temperature. In that case, the time in the message in FIG. 9 is determined and displayed in consideration of the time from the start of heating of the heating unit to the predetermined temperature. That is, the time taken to acquire the reference image included in the message of FIG. 9 includes the time until the imaging device is heated by the heater provided in the distal end portion 8 of the scope 7 to reach a predetermined temperature.
As a method for heating the imaging unit 12 to a predetermined temperature, for example, the lighting unit 13 is driven to raise the temperature of the imaging unit 12 to a predetermined temperature without using a heating unit such as a heater, or the imaging unit 12 is driven. Alternatively, the imaging unit 12 may be driven in a high power consumption mode in which the power consumption of the imaging unit 12 is increased so that the temperature of the imaging unit 12 itself rises to a predetermined temperature.

図9のメッセージの表示後、所定の時間が経過すると、制御部21は、前記先端部の遮光がされた状態で、撮像部12を駆動して、リファレンス画像を取得する(S13)。そして、制御部21は、リファレンス画像の取得前に、初期設定処理が実行中であることをユーザに告知するメッセージを表示部5に表示する。すなわち、図9の画面表示は、少なくとも、リファレンス画像の取得前の図7あるいは図8の画面において「OK」ボタンが選択された後、リファレンス画像が取得されるまで表示されている。   When a predetermined time elapses after the message shown in FIG. 9 is displayed, the control unit 21 drives the imaging unit 12 in a state where the tip portion is shielded to obtain a reference image (S13). Then, the control unit 21 displays a message on the display unit 5 informing the user that the initial setting process is being executed before acquiring the reference image. That is, the screen display of FIG. 9 is displayed until at least the reference image is acquired after the “OK” button is selected on the screen of FIG. 7 or FIG. 8 before acquisition of the reference image.

ここで、リファレンス画像の取得は、画素間の感度バラツキを補正するための固定パターンノイズ画像の取得と、撮像面上の欠陥画素の位置情報及び輝度レベルの取得を含む。よって、リファレンス画像は、固定パターンノイズ画像と欠陥画素の位置情報及び輝度レベルを含む。なお、求められる画像品質等によっては、リファレンス画像の取得では、固定パターンノイズ画像と欠陥画素の位置情報及び輝度レベルのいずれかを取得するものであってもよい。   Here, acquisition of a reference image includes acquisition of a fixed pattern noise image for correcting sensitivity variations between pixels, and acquisition of position information and luminance levels of defective pixels on the imaging surface. Therefore, the reference image includes a fixed pattern noise image, position information of defective pixels, and a luminance level. Depending on the required image quality and the like, the acquisition of the reference image may acquire either the fixed pattern noise image, the position information of the defective pixel, or the luminance level.

制御部21は、撮像部12により撮像して取得したリファレンス画像を、メモリ27に格納し、記録する(S14)。
なお、リファレンス画像を撮像素子により複数回取得して、複数得られた画像の平均値、又は最大値のデータを利用して、リファレンス画像としてもよい。
さらになお、制御部21は、リファレンス画像を、メモリ27ではなく、メモリ14に格納するようにしてもよい。
The control unit 21 stores and records the reference image acquired by imaging by the imaging unit 12 in the memory 27 (S14).
Note that the reference image may be acquired a plurality of times by the imaging element, and the reference image may be obtained by using data of an average value or a maximum value of the plurality of images obtained.
Furthermore, the control unit 21 may store the reference image in the memory 14 instead of the memory 27.

リファレンス画像の格納後、制御部21は、「スコープ初期設定は正常に終了しました。」というメッセージを、モニタ5に表示する(S15)。すなわち、制御部21は、リファレンス画像が所定のメモリに格納された後に、初期設定処理の終了をユーザに告知するための初期設定終了画面(図10)を表示部5に表示する。   After storing the reference image, the control unit 21 displays a message “Scope initial setting has been completed normally” on the monitor 5 (S15). That is, after the reference image is stored in a predetermined memory, the control unit 21 displays on the display unit 5 an initial setting end screen (FIG. 10) for notifying the user of the end of the initial setting process.

図10は、スコープ初期設定の正常終了をユーザに告知するための画面の例を示す図である。図10に示すように、画面5a上には、メッセージ「スコープ初期設定は正常に終了しました。」と共に、「OK」ボタンが表示されている。   FIG. 10 is a diagram illustrating an example of a screen for notifying the user of the normal end of the scope initial setting. As shown in FIG. 10, an “OK” button is displayed on the screen 5 a together with a message “Scope initial setting has been completed normally”.

制御部21は、ユーザは、画面上の「OK」ボタンを選択したか否かを判定し(S16)、ユーザが、画面上の「OK」ボタンを選択すると(S16:YES)、制御部21は、照明部13を駆動して点灯し、通常動作状態、すなわちモニタ5にライブ画像が表示される状態、に移行し(S17)、その後、ユーザは、内視鏡装置1を検査業務に使用することができる。ユーザが、画面上の「OK」ボタンを選択しないと(S16:NO)、処理は何もしない。   The control unit 21 determines whether or not the user has selected the “OK” button on the screen (S16), and when the user selects the “OK” button on the screen (S16: YES), the control unit 21 The lighting unit 13 is driven and turned on, and the state shifts to a normal operation state, that is, a state where a live image is displayed on the monitor 5 (S17), and then the user uses the endoscope device 1 for inspection work. can do. If the user does not select the “OK” button on the screen (S16: NO), no processing is performed.

図10に示すようなメッセージの表示をするのは、何の表示をしないで、初期設定が終了し、表示部5に通常動作状態の表示がされると、ユーザは、正しく初期設定が行われた否かを知ることができないからである。さらに、ユーザに「OK」ボタンを選択させるのは、初期設定の終了したことの確認をさせるためである。   The message as shown in FIG. 10 is displayed without any display, when the initial setting is completed and when the normal operation state is displayed on the display unit 5, the user is correctly initialized. This is because it is impossible to know whether or not there was. Further, the user selects the “OK” button in order to confirm that the initial setting has been completed.

本体部4のメモリ27に記録されたリファレンス画像は、本体部4の映像信号処理部22により、画素間の感度バラツキ、画素欠陥などの補正のために利用され、画素間の感度バラツキ等が補正された綺麗な映像信号が表示部5に出力される。   The reference image recorded in the memory 27 of the main body unit 4 is used by the video signal processing unit 22 of the main body unit 4 to correct sensitivity variations between pixels, pixel defects, and the like. The beautiful video signal is output to the display unit 5.

以上のように、従来、リファレンス画像の取得はスコープの製造時に工場等における恒温室において行われるものであり、ユーザが確実にできるものではなかったが、本実施の形態の内視鏡装置によれば、ユーザがリファレンス画像の取得作業を確実に行うことができ、正確なリファレンス画像を取得することができる。
4.変形例
次に、上述した実施の形態の変形例について説明する。
(変形例1)
上述した実施の形態では、初期設定の処理は、内視鏡装置1の電源がオンされた時に、まず、異なるスコープの検出を行って、異なるスコープが検出された場合と、異なるスコープが検出されず、かつ初期設定の指示がされた場合に行われているが、内視鏡装置1の電源がオンになって、通常動作状態、すなわちモニタ5にライブ画像が表示される状態で動作しているときに、別途メニュー画面を表示させて、そのメニュー画面において、初期設定を選択させることによって、S5以下の初期設定の処理が実行されるようにしてもよい。
As described above, the acquisition of the reference image is conventionally performed in a temperature-controlled room in a factory or the like at the time of manufacture of the scope and has not been surely performed by the user. However, according to the endoscope apparatus of the present embodiment, In this case, the user can surely perform the reference image acquisition operation, and an accurate reference image can be acquired.
4). Modified Example Next, a modified example of the above-described embodiment will be described.
(Modification 1)
In the above-described embodiment, when the endoscope apparatus 1 is turned on, the initial setting process first detects a different scope and detects a different scope than when a different scope is detected. This is performed when an initial setting instruction is issued, but the endoscope apparatus 1 is turned on and operates in a normal operation state, that is, in a state where a live image is displayed on the monitor 5. The initial setting process from S5 onward may be executed by displaying a separate menu screen and selecting the initial setting on the menu screen.

図11は、初期設定処理を含む、メニュー画面の例を示す図である。図10に示すように、所定のメニュー画面、例えばメインメニュー画面、中に、上述したリファレンス画像を取得するための「初期設定」ボタン31が含まれ、ユーザがそのボタン31を選択すると、図3のS4以下の初期設定の処理が実行されるようにしてもよい。すなわち、図11のメニュー画面は、撮像素子のリファレンス画像の取得を含む初期設定処理の開始をユーザに指示させるための初期設定指示画面を構成する。
(変形例2)
上述した実施の形態では、内視鏡装置1の電源を一旦オフにしてから新しいスコープを装着しているが、内視鏡装置1の電源をオフにしない状態で、すなわち活線状態で、スコープ7の抜去と装着が行える内視鏡装置の場合、スコープの抜去後の装着を検知して、上述した初期設定の処理を行うようにしてもよい。すなわち、制御部21は、内視鏡装置1の本体部4の電源オン中にスコープ7が交換されたときに、初期設定指示画面(図5)を前記表示部に表示するようにしてもよい。
例えば、ユーザが、内視鏡検査中に、内視鏡装置1の電源をオフにしない状態で、スコープを交換する場合、制御部21は、スコープ抜去後の装着を検知すると、S6以下の初期設定の処理が実行されるようにしてもよい。
FIG. 11 is a diagram illustrating an example of a menu screen including an initial setting process. As shown in FIG. 10, a predetermined menu screen, for example, a main menu screen, includes an “initial setting” button 31 for acquiring the above-described reference image, and when the user selects the button 31, FIG. The initial setting process from S4 onward may be executed. That is, the menu screen of FIG. 11 constitutes an initial setting instruction screen for instructing the user to start an initial setting process including acquisition of a reference image of the image sensor.
(Modification 2)
In the above-described embodiment, the endoscope apparatus 1 is turned off and then a new scope is attached. However, the scope is not turned off, that is, in a live line state. In the case of an endoscope apparatus that can be removed and attached to 7, the attachment after the removal of the scope may be detected and the above-described initial setting process may be performed. That is, the control unit 21 may display an initial setting instruction screen (FIG. 5) on the display unit when the scope 7 is replaced while the main body unit 4 of the endoscope apparatus 1 is powered on. .
For example, when the user replaces the scope without turning off the power of the endoscope apparatus 1 during the endoscopic examination, when the control unit 21 detects the attachment after removing the scope, the initial value of S6 or less A setting process may be executed.

以上のように、上述した実施の形態及び各変形例によれば、従来、リファレンス画像の取得はスコープの製造時に工場等における恒温室において行われるものであり、ユーザが正確にかつ確実にできるものではなかったが、本実施の形態の内視鏡装置によれば、ユーザが工場等以外の場所においてリファレンス画像を正確にかつ確実に取得することができる。   As described above, according to the above-described embodiment and each modification, the acquisition of the reference image is conventionally performed in a temperature-controlled room in a factory or the like when the scope is manufactured, and can be accurately and reliably performed by the user. However, according to the endoscope apparatus of the present embodiment, the user can accurately and reliably acquire the reference image at a place other than the factory.

本発明は、上述した実施の形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。   The present invention is not limited to the above-described embodiments, and various changes and modifications can be made without departing from the scope of the present invention.

1、内視鏡装置、2 メインユニット、3 操作部、3a、7a コネクタ部、4 本体部、5 表示部、5a 画面、6 ユニバーサルケーブル、7 スコープ、8 先端部、9 湾曲部、10 遮光用アダプタ、11 光学レンズ部、12 撮像部、13 照明部、14,27 メモリ、21 制御部、22 映像信号処理部、23 グラフィック重畳部、24 照明駆動部、25 メインメモリ部、26 リアルタイムクロック部、27 メモリ、 30 外部メモリ 1, Endoscopic device, 2 Main unit, 3 Operation part, 3a, 7a Connector part, 4 Main body part, 5 Display part, 5a Screen, 6 Universal cable, 7 Scope, 8 Tip part, 9 Curved part, 10 Light shielding Adapter, 11 Optical lens unit, 12 Imaging unit, 13 Illumination unit, 14, 27 Memory, 21 Control unit, 22 Video signal processing unit, 23 Graphic superimposing unit, 24 Illumination drive unit, 25 Main memory unit, 26 Real-time clock unit, 27 memory, 30 external memory

Claims (20)

細長の挿入部を有し、該挿入部の先端部に撮像素子を有するスコープが着脱可能な本体部と、
前記本体部に設けられ、前記撮像素子を駆動して、前記撮像素子で撮像して得られた映像信号を処理する映像信号処理部と、
表示部と、
前記本体部に設けられ、前記撮像素子のリファレンス画像の取得のための初期設定処理の開始をユーザに指示させるための初期設定指示画面を前記表示部に表示し、前記初期設定処理の開始の指示に応じて、前記先端部の遮光をユーザにさせるため第1のメッセージを前記表示部に表示し、前記先端部の遮光がされた状態で、前記リファレンス画像を取得し、取得された前記リファレンス画像を、所定のメモリに格納する制御部と、
を有することを特徴とする内視鏡装置。
A main body having an elongated insertion portion, and a detachable scope having an image sensor at the distal end of the insertion portion;
A video signal processing unit that is provided in the main body, drives the imaging device, and processes a video signal obtained by imaging with the imaging device;
A display unit;
An initial setting instruction screen provided on the main body unit for instructing a user to start an initial setting process for obtaining a reference image of the image sensor is displayed on the display unit, and an instruction to start the initial setting process is displayed. In response to this, the first message is displayed on the display unit to cause the user to shield the tip, and the reference image is acquired in a state where the tip is shielded. Is stored in a predetermined memory,
An endoscope apparatus characterized by comprising:
前記制御部は、前記第1のメッセージを前記表示部に表示した後に、前記リファレンス画像の取得前に、前記初期設定処理が実行中であることを前記ユーザに告知する第2のメッセージを前記表示部に表示し、前記先端部の遮光がされた状態で、前記リファレンス画像を取得することを特徴とする請求項1に記載の内視鏡装置。   The control unit displays the second message for notifying the user that the initial setting process is being executed after the first message is displayed on the display unit and before the acquisition of the reference image. The endoscope apparatus according to claim 1, wherein the reference image is acquired in a state where the reference image is displayed and the distal end portion is shielded from light. 前記制御部は、前記先端部の遮光がされた状態で、前記リファレンス画像を取得後に、前記初期設定処理が完了したことを前記ユーザに告知する第6のメッセージを前記表示部に表示することを特徴とする請求項1又は2に記載の内視鏡装置。   The control unit displays a sixth message on the display unit for notifying the user that the initial setting process is completed after acquiring the reference image in a state where the tip end portion is shielded. The endoscope apparatus according to claim 1, wherein the endoscope apparatus is characterized. 前記制御部は、前記第1のメッセージを表示した後に、前記先端部の遮光状態を判定し、前記遮光状態の判定から、前記先端部が正しく遮光されていないと判定された場合には、前記先端部の遮光を正しく行うように指示する第3のメッセージを前記表示部に表示することを特徴とする請求項1から3のいずれか1つに記載の内視鏡装置。   The controller determines the light shielding state of the tip after displaying the first message, and if the tip is determined not to be shielded correctly from the determination of the light shielding state, The endoscope apparatus according to any one of claims 1 to 3, wherein a third message for instructing to correctly shield the distal end portion is displayed on the display portion. 前記制御部は、前記リファレンス画像の取得にかかる時間をユーザに告知する第4のメッセージを前記表示部に表示することを特徴とする請求項1から4のいずれか1つに記載の内視鏡装置。   The endoscope according to any one of claims 1 to 4, wherein the control unit displays a fourth message for notifying a user of a time taken to acquire the reference image on the display unit. apparatus. 前記制御部は、前記リファレンス画像の取得の前に、前記スコープが前記本体部に接続されていないことが検出された場合には、前記スコープの前記本体部への接続を指示する第5のメッセージを前記表示部に表示することを特徴とする請求項1から5のいずれか1つに記載の内視鏡装置。   When the control unit detects that the scope is not connected to the main body unit before acquiring the reference image, the control unit instructs the connection of the scope to the main body unit. Is displayed on the display unit. The endoscope apparatus according to any one of claims 1 to 5. 前記制御部は、前記リファレンス画像が前記所定のメモリに格納された後に、前記初期設定処理の終了を前記ユーザに告知するための初期設定終了画面を前記表示部に表示することを特徴とする請求項1から6のいずれか1つに記載の内視鏡装置。   The control unit displays an initial setting end screen for notifying the user of the end of the initial setting process on the display unit after the reference image is stored in the predetermined memory. The endoscope apparatus according to any one of Items 1 to 6. 前記制御部は、前記内視鏡装置の前記本体部の電源がオンされたときに接続されている前記スコープが、前記本体部が前回オフされたときに接続されていたスコープと異なっていることが検出されたときに、前記初期設定指示画面を前記表示部に表示することを特徴とする請求項1から7のいずれか1つに記載の内視鏡装置。   The control unit is configured such that the scope connected when the power source of the main body unit of the endoscope apparatus is turned on is different from the scope connected when the main body unit was previously turned off. The endoscope apparatus according to any one of claims 1 to 7, wherein the initial setting instruction screen is displayed on the display unit when an error is detected. 前記初期設定指示画面は、メニュー画面であることを特徴とする請求項1から8のいずれか1つに記載の内視鏡装置。   The endoscope apparatus according to any one of claims 1 to 8, wherein the initial setting instruction screen is a menu screen. 前記制御部は、前記内視鏡装置の本体部の電源オン中に前記スコープが交換されたときに、前記初期設定指示画面を前記表示部に表示することを特徴とする請求項1から9のいずれか1つに記載の内視鏡装置。   The said control part displays the said initial setting instruction | indication screen on the said display part, when the said scope is replaced | exchanged during the power-on of the main-body part of the said endoscope apparatus, The said display part is characterized by the above-mentioned. The endoscope apparatus according to any one of the above. 前記リファレンス画像の取得にかかる時間は、前記撮像素子を、前記スコープの前記先端部内に設けられたヒータにより加熱して所定の温度になるまでの時間を含むことを特徴とする請求項5に記載の内視鏡装置。   6. The time required for acquiring the reference image includes a time until the imaging element is heated to a predetermined temperature by a heater provided in the distal end portion of the scope. Endoscope device. 前記所定のメモリは、前記本体部に設けられていることを特徴とする請求項1から11のいずれか1つに記載の内視鏡装置。   The endoscope apparatus according to any one of claims 1 to 11, wherein the predetermined memory is provided in the main body. 内視鏡装置の本体部に着脱可能なスコープの先端部に設けられた撮像素子のリファレンス画像の取得のための初期設定処理の開始をユーザに指示させるための初期設定指示画面を表示部に表示し、
前記初期設定処理の開始の指示に応じて、前記先端部の遮光をユーザにさせるため第1のメッセージを前記表示部に表示し、
前記先端部の遮光がされた状態で、前記リファレンス画像を取得し、
取得された前記リファレンス画像を、所定のメモリに格納する、
ことを特徴とする内視鏡装置のリファレンス画像の設定方法。
An initial setting instruction screen for instructing the user to start an initial setting process for acquiring a reference image of an image sensor provided at the distal end of a scope that can be attached to and detached from the main body of the endoscope apparatus is displayed on the display unit. And
In response to an instruction to start the initial setting process, a first message is displayed on the display unit in order to make the user shield the tip.
In a state where the tip portion is shielded, the reference image is acquired,
Storing the acquired reference image in a predetermined memory;
A reference image setting method for an endoscope apparatus, characterized in that:
前記第1のメッセージを前記表示部に表示した後、
前記リファレンス画像の取得前に、前記初期設定処理が実行中であることを前記ユーザに告知する第2のメッセージを前記表示部に表示し、
前記先端部の遮光がされた状態で、前記リファレンス画像を取得することを特徴とする請求項13に記載の内視鏡装置のリファレンス画像の設定方法。
After displaying the first message on the display unit,
Before acquiring the reference image, a second message for notifying the user that the initial setting process is being executed is displayed on the display unit,
The method for setting a reference image for an endoscope apparatus according to claim 13, wherein the reference image is acquired in a state where the distal end portion is shielded from light.
前記先端部の遮光がされた状態で、前記リファレンス画像を取得し、
前記初期設定処理が完了すると、前記初期設定処理が完了したことを前記ユーザに告知する第6のメッセージを前記表示部に表示することを特徴とする請求項13又は14に記載の内視鏡装置のリファレンス画像の設定方法。
In a state where the tip portion is shielded, the reference image is acquired,
The endoscope apparatus according to claim 13 or 14, wherein when the initial setting process is completed, a sixth message for notifying the user that the initial setting process is completed is displayed on the display unit. How to set the reference image.
前記第1のメッセージを表示した後に、前記先端部の遮光状態を判定し、
前記遮光状態の判定から、前記先端部が正しく遮光されていないと判定された場合には、前記先端部の遮光を正しく行うように指示する第3のメッセージを前記表示部に表示することを特徴とする請求項13から15のいずれか1つに記載の内視鏡装置のリファレンス画像の設定方法。
After displaying the first message, determine the light shielding state of the tip,
If it is determined from the determination of the light shielding state that the tip portion is not properly shielded, a third message instructing to correctly shield the tip portion is displayed on the display unit. The reference image setting method for an endoscope apparatus according to any one of claims 13 to 15.
前記リファレンス画像の取得にかかる時間をユーザに告知する第4のメッセージを前記表示部に表示することを特徴とする請求項13から16のいずれか1つに記載の内視鏡装置のリファレンス画像の設定方法。   The reference image of the endoscope apparatus according to any one of claims 13 to 16, wherein a fourth message for notifying a user of a time taken to acquire the reference image is displayed on the display unit. Setting method. 前記リファレンス画像の取得の前に、前記スコープが前記本体部に接続されていないことが検出された場合には、前記スコープの前記本体部への接続を指示する第5のメッセージを前記表示部に表示することを特徴とする請求項13から17のいずれか1つに記載の内視鏡装置のリファレンス画像の設定方法。   If it is detected that the scope is not connected to the main body before acquiring the reference image, a fifth message instructing connection of the scope to the main body is displayed on the display. The reference image setting method for an endoscope apparatus according to any one of claims 13 to 17, wherein the reference image is displayed. 前記リファレンス画像が前記所定のメモリに格納された後に、前記初期設定処理の終了を前記ユーザに告知するための初期設定終了画面を前記表示部に表示することを特徴とする請求項13から18のいずれか1つに記載の内視鏡装置のリファレンス画像の設定方法。   19. The initial setting end screen for notifying the user of the end of the initial setting process after the reference image is stored in the predetermined memory, is displayed on the display unit. A reference image setting method for an endoscope apparatus according to any one of the above. 前記所定のメモリは、前記本体部に設けられていることを特徴とする請求項13から19のいずれか1つに記載の内視鏡装置のリファレンス画像の設定方法。   The reference image setting method for an endoscope apparatus according to any one of claims 13 to 19, wherein the predetermined memory is provided in the main body.
JP2011028860A 2011-02-14 2011-02-14 Endoscope device Expired - Fee Related JP5800517B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2011028860A JP5800517B2 (en) 2011-02-14 2011-02-14 Endoscope device
US13/368,744 US20120209064A1 (en) 2011-02-14 2012-02-08 Endoscope apparatus and method of setting reference image of endoscope apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011028860A JP5800517B2 (en) 2011-02-14 2011-02-14 Endoscope device

Publications (3)

Publication Number Publication Date
JP2012165865A true JP2012165865A (en) 2012-09-06
JP2012165865A5 JP2012165865A5 (en) 2014-03-13
JP5800517B2 JP5800517B2 (en) 2015-10-28

Family

ID=46970654

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011028860A Expired - Fee Related JP5800517B2 (en) 2011-02-14 2011-02-14 Endoscope device

Country Status (1)

Country Link
JP (1) JP5800517B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015137297A1 (en) * 2014-03-13 2015-09-17 Ntn株式会社 Measurement device, medical device, and exercise device

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10262922A (en) * 1997-03-25 1998-10-06 Olympus Optical Co Ltd Electronic endoscope equipment
JPH11169338A (en) * 1997-12-11 1999-06-29 Fuji Photo Optical Co Ltd Electronic endoscope apparatus capable of making non-scope connection display
JPH11298907A (en) * 1998-04-10 1999-10-29 Asahi Optical Co Ltd Electronic endoscope system
JP2000032200A (en) * 1998-07-14 2000-01-28 Seiko Epson Corp Management device, its controlling method and recording medium
JP2002259463A (en) * 2001-02-28 2002-09-13 Toshiba Corp Analyzing device, method and program thereof
JP2004321511A (en) * 2003-04-25 2004-11-18 Pentax Corp Electronic endoscope device capable of adjusting white balance
JP2007259135A (en) * 2006-03-23 2007-10-04 Fujifilm Corp Imaging apparatus and method of driving same
JP2009136459A (en) * 2007-12-05 2009-06-25 Hoya Corp Noise elimination system, endoscope processor and endoscope system
JP2010028404A (en) * 2008-07-18 2010-02-04 Hitachi Ltd Recording and reproducing device

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10262922A (en) * 1997-03-25 1998-10-06 Olympus Optical Co Ltd Electronic endoscope equipment
JPH11169338A (en) * 1997-12-11 1999-06-29 Fuji Photo Optical Co Ltd Electronic endoscope apparatus capable of making non-scope connection display
JPH11298907A (en) * 1998-04-10 1999-10-29 Asahi Optical Co Ltd Electronic endoscope system
JP2000032200A (en) * 1998-07-14 2000-01-28 Seiko Epson Corp Management device, its controlling method and recording medium
JP2002259463A (en) * 2001-02-28 2002-09-13 Toshiba Corp Analyzing device, method and program thereof
JP2004321511A (en) * 2003-04-25 2004-11-18 Pentax Corp Electronic endoscope device capable of adjusting white balance
JP2007259135A (en) * 2006-03-23 2007-10-04 Fujifilm Corp Imaging apparatus and method of driving same
JP2009136459A (en) * 2007-12-05 2009-06-25 Hoya Corp Noise elimination system, endoscope processor and endoscope system
JP2010028404A (en) * 2008-07-18 2010-02-04 Hitachi Ltd Recording and reproducing device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015137297A1 (en) * 2014-03-13 2015-09-17 Ntn株式会社 Measurement device, medical device, and exercise device
JP2015175640A (en) * 2014-03-13 2015-10-05 Ntn株式会社 Measurement device, medical apparatus, and training apparatus

Also Published As

Publication number Publication date
JP5800517B2 (en) 2015-10-28

Similar Documents

Publication Publication Date Title
JP3938722B2 (en) Endoscope device
US20120209064A1 (en) Endoscope apparatus and method of setting reference image of endoscope apparatus
JP5873223B2 (en) Endoscope system and pixel correction method
JP6378846B2 (en) Image processing device
JP5379930B1 (en) Endoscope system
JP5933868B1 (en) Control device and endoscope system
WO2012121127A1 (en) Electronic endoscope device, electronic endoscope processor, light source device, and electronic endoscope system
JP2010088720A (en) Endoscopic apparatus, ic tag for displaying state of endoscope, and method of displaying state of endoscopic apparatus
JP4694308B2 (en) Endoscope system
JP5800517B2 (en) Endoscope device
JP2009213742A (en) Light source unit for endoscope
JP5926980B2 (en) Imaging apparatus and imaging system
JPWO2019198364A1 (en) Endoscope device, control method of endoscope device and control program of endoscope device
JP6097497B2 (en) Endoscope external module and endoscope system
JP2009201887A (en) Endoscope system
JP2012168331A (en) Endoscopic device and acquisition method of reference image thereof
US8732823B2 (en) Nondestructive testing system
JP2016220946A (en) Endoscope device and setting method of endoscope device
WO2019049451A1 (en) Video processor, endoscope system, display method, and display program
JP5067938B2 (en) Endoscope light source device and endoscope system
US20200229678A1 (en) Processing device, endoscope, endoscope system, image processing method, and computer-readable recording medium
WO2017033728A1 (en) Endoscope device
JP6625357B2 (en) Endoscope device
US20160174818A1 (en) Calibrated medical imaging devices and related methods
JPWO2019017019A1 (en) Endoscope apparatus and measurement support method

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140124

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140124

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140926

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141104

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150519

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150811

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150825

R151 Written notification of patent or utility model registration

Ref document number: 5800517

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees