JP2002258162A - Image acquisition apparatus - Google Patents
Image acquisition apparatusInfo
- Publication number
- JP2002258162A JP2002258162A JP2001060369A JP2001060369A JP2002258162A JP 2002258162 A JP2002258162 A JP 2002258162A JP 2001060369 A JP2001060369 A JP 2001060369A JP 2001060369 A JP2001060369 A JP 2001060369A JP 2002258162 A JP2002258162 A JP 2002258162A
- Authority
- JP
- Japan
- Prior art keywords
- image
- resolution
- objective lens
- data
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Lens Barrels (AREA)
- Microscoopes, Condenser (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、顕微鏡の観察像を
画像として取得する画像取得装置に関するものである。[0001] 1. Field of the Invention [0002] The present invention relates to an image acquisition device for acquiring an image observed by a microscope as an image.
【0002】[0002]
【従来の技術】微細な試料を拡大観察したり、その拡大
像を写真やビデオに記録できるようにした顕微鏡が、工
業分野を始め生物分野における研究や検査などに広く利
用されている。2. Description of the Related Art Microscopes capable of magnifying and observing a fine sample and recording the magnified image in a photograph or a video are widely used for research and inspection in the industrial field as well as the biological field.
【0003】このような分野で使用される顕微鏡は、一
般に、拡大倍率の異なる複数の対物レンズを保持する回
転式レボルバを有し、このレボルバを回転させて、観察
光路に挿入される対物レンズを切換えることで、観察倍
率を変更するようになっている。A microscope used in such a field generally has a rotary revolver for holding a plurality of objective lenses having different magnifications. By rotating the revolver, an objective lens inserted into an observation optical path is rotated. By switching, the observation magnification is changed.
【0004】一方、最近になって顕微鏡に電子スチルカ
メラなどの画像入力装置を接続して、顕微鏡の観察像よ
りデジタル画像を取得することが行われるようになって
おり、このようにして取得したデジタル画像を銀塩写真
の代わりに保存したり、コンピュータによる画像処理技
術により画像解析するようなことも行われている。On the other hand, recently, an image input device such as an electronic still camera has been connected to a microscope, and a digital image has been acquired from an observation image of the microscope. In some cases, digital images are stored in place of silver halide photographs, and images are analyzed by computer image processing techniques.
【0005】また、最近、デジタル画像の高解像化によ
り、顕微鏡の光学分解能を凌ぐ解像度の画像が取得でき
るようになっており、観察者は、顕微鏡の光学分解能を
殆ど意識することなく、光学分解能を超える解像のデジ
タル画像を取得するようなこともある。[0005] Recently, high resolution digital images have made it possible to acquire images having a resolution exceeding the optical resolution of a microscope, so that an observer can hardly be aware of the optical resolution of the microscope. In some cases, a digital image with a resolution exceeding the resolution is obtained.
【0006】ところが、このように光学分解能を超える
解像のデジタル画像を取得しても、画像の解像は、光学
分解能で決まるため、無駄な解像を取得するだけで、か
えって画像取得までに時間がかかる上に、画像サイズが
大きくなりハンドリング性が低下し、また、画像解析を
行う場合には、処理時間が長くなるだけで、解析精度の
向上に何らつながらない。However, even if a digital image having a resolution exceeding the optical resolution is obtained, the resolution of the image is determined by the optical resolution. Therefore, only a useless resolution is obtained. In addition to taking time, the image size becomes large and the handleability deteriorates. Further, when performing image analysis, only the processing time becomes long, and there is no improvement in analysis accuracy.
【0007】そこで、従来、本出願人が提案した特願平
11−260423号明細書に記載されるように、光学
分解能に最も適合する画像の分解能を自動的に選択する
ことによって、光学分解能に合った分解能のデジタル画
像を取得するようにしたものが考えられている。Therefore, conventionally, as described in Japanese Patent Application No. 11-260423 proposed by the present applicant, by automatically selecting a resolution of an image which is most suitable for the optical resolution, the optical resolution is improved. There has been proposed a device that acquires a digital image with a matching resolution.
【0008】[0008]
【発明が解決しようとする課題】しかし、このような考
え方だけでは、光学分解能に適合したデジタル画像を取
得できるものの、この時のデジタル画像は、光学分解能
に応じて自動的に選択されてしまうため、観察者が意図
していない分解能の画像を取得してしまうことがあっ
た。However, although a digital image suitable for the optical resolution can be obtained only by such a concept, the digital image at this time is automatically selected according to the optical resolution. In some cases, an image having a resolution not intended by the observer is obtained.
【0009】本発明は上記事情に鑑みてなされたもの
で、観察者が必要とする分解能の画像を容易に取得する
ことができる画像取得装置を提供することを目的とす
る。The present invention has been made in view of the above circumstances, and has as its object to provide an image acquisition apparatus capable of easily acquiring an image having a resolution required by an observer.
【0010】[0010]
【課題を解決するための手段】請求項1記載の発明は、
複数の対物レンズを有し、これら対物レンズを選択的に
観察光路に切換える変倍手段を有する顕微鏡に用いら
れ、前記変倍手段を介して観察像を画像として取得する
画像取得装置において、前記取得画像の分解能を指定す
る分解能指定手段と、この分解能指定手段で指定された
前記取得画像の分解能に対し、前記複数の対物レンズに
よってそれぞれ決定される光学分解能の中から最適な光
学分解能の対物レンズを決定する対物レンズ決定手段
と、この対物レンズ決定手段により決定された対物レン
ズを前記観察光路に切換えるように前記変倍手段を駆動
する駆動手段とを具備したことを特徴としている。According to the first aspect of the present invention,
An image acquisition apparatus for use in a microscope having a plurality of objective lenses and having a magnification changing means for selectively switching these objective lenses to an observation optical path, wherein the image acquisition apparatus acquires an observation image as an image via the magnification change means. Resolution specifying means for specifying the resolution of an image, and for the resolution of the acquired image specified by the resolution specifying means, an objective lens having an optimal optical resolution among the optical resolutions determined by the plurality of objective lenses, respectively. It is characterized by comprising objective lens determining means for determining, and driving means for driving the variable power means so as to switch the objective lens determined by the objective lens determining means to the observation optical path.
【0011】請求項2記載の発明は、請求項1記載の発
明において、対物レンズ決定手段は、前記対物レンズに
より決定される光学分解能を計算する演算手段を有する
ことを特徴としている。According to a second aspect of the present invention, in the first aspect of the present invention, the objective lens determining means has a calculating means for calculating an optical resolution determined by the objective lens.
【0012】請求項3記載の発明は、請求項1記載の発
明において、前記変倍手段は、複数の対物レンズを取り
付けた回転式レボルバからなり、前記駆動手段により回
転駆動され、前記対物レンズ決定手段により決定された
対物レンズを前記観察光路に切換えることを特徴として
いる。According to a third aspect of the present invention, in the first aspect of the invention, the zooming means comprises a rotary revolver to which a plurality of objective lenses are attached, and is driven to rotate by the driving means to determine the objective lens. The objective lens determined by the means is switched to the observation optical path.
【0013】この結果、本発明によれば、観察者が必要
とする画像分解能に適合するように顕微鏡での光学分解
能を自動的に変更することができ、光学分解能を超える
ような分解能の無駄な画像を取得することを無くして観
察者が必要とする分解能の画像を取得できる。As a result, according to the present invention, the optical resolution of the microscope can be automatically changed so as to be compatible with the image resolution required by the observer, and wasteful resolution exceeding the optical resolution can be obtained. An image having the resolution required by the observer can be acquired without acquiring an image.
【0014】[0014]
【発明の実施の形態】以下、本発明の一実施の形態を図
面に従い説明する。DESCRIPTION OF THE PREFERRED EMBODIMENTS One embodiment of the present invention will be described below with reference to the drawings.
【0015】図1は、本発明が適用される顕微鏡の概略
構成を示している。図において、1は顕微鏡本体で、こ
の顕微鏡本体1は、直立して形成された胴部1aを有
し、この胴部1aの先端部に、対物アーム1bを有して
いる。FIG. 1 shows a schematic configuration of a microscope to which the present invention is applied. In the drawing, reference numeral 1 denotes a microscope main body, which has a body 1a formed upright, and has an objective arm 1b at the tip of the body 1a.
【0016】対物アーム1bには、変倍手段として回転
式のレボルバ2が設けられている。このレボルバ2に
は、倍率の異なる複数の対物レンズ3が設けられ、レボ
ルバ2の回転動作により、これら対物レンズ3を選択的
に観察光路上に切換えるようにしている。The objective arm 1b is provided with a rotary revolver 2 as a magnification changing means. The revolver 2 is provided with a plurality of objective lenses 3 having different magnifications. By rotating the revolver 2, these objective lenses 3 are selectively switched to the observation optical path.
【0017】顕微鏡本体1の胴部1aには、図示しない
ガイド部を介して標本4を載置したステージ5が設けら
れている。このステージ5は、標本4のピント合わせお
よび観察部位を調整するため、観察光路の方向およびこ
の観察光路と直交する平面内で互いに直交するX−Y方
向に移動可能になっている。A stage 5 on which a sample 4 is placed is provided on a body 1a of the microscope body 1 via a guide (not shown). The stage 5 is movable in the direction of the observation optical path and in the XY directions orthogonal to each other in a plane orthogonal to the observation optical path in order to adjust the focus of the specimen 4 and the observation site.
【0018】対物アーム1bの上方には、鏡筒6が設け
られている。この鏡筒6には、接眼レンズ7および画像
入力手段としてCCDカメラ8が設けられている。接眼
レンズ7は、対物レンズ3を介して投影される標本4の
観察像を目視観察するものである。また、CCDカメラ
8は、標本4の観察像を撮像し、この撮像により取得し
た画像の信号を出力するようにしている。A lens barrel 6 is provided above the objective arm 1b. The lens barrel 6 is provided with an eyepiece 7 and a CCD camera 8 as image input means. The eyepiece 7 is for visually observing an observation image of the specimen 4 projected through the objective lens 3. The CCD camera 8 captures an observation image of the sample 4 and outputs a signal of an image obtained by the capturing.
【0019】CCDカメラ8には、制御装置9が接続さ
れている。制御装置9には、レボルバ2、レボルバ穴位
置検出器10、データ入力部11、モニタ12およびマ
ウス13が接続されている。A control device 9 is connected to the CCD camera 8. The revolver 2, the revolver hole position detector 10, the data input unit 11, the monitor 12, and the mouse 13 are connected to the control device 9.
【0020】制御装置9は、CCDカメラ8より取得す
る画像の分解能を指示する手段、指示された取得画像の
分解能に対し、複数の対物レンズ3によってそれぞれ決
定される光学分解能の中から最適な光学分解能の対物レ
ンズ3を決定する手段およびこの手段により決定された
対物レンズを観察光路に挿入させるようにレボルバ2を
駆動する駆動手段などを有するもので、図2に示すよう
に、レボルバ穴位置検出器10からのレボ穴位置デー
タ、データ入力部11からのキー入力データ、マウス1
3からの座標データなどを受け取る入力回路9a、CC
Dカメラ8より出力された画像信号を受け取る画像入力
回路9b、これら入力回路9aおよび画像入力回路9b
からのデータを制御する制御回路9c、制御回路9cか
らの所要の演算を行う演算回路9d、対物レンズ3に関
するデータ、演算回路9dでの演算に必要な各種データ
などを記憶した記憶回路9e、制御回路9cの指令によ
り回転式のレボルバ2を駆動する駆動回路9f、モニタ
12に画像や制御回路9cが作成したグラフィックスを
出力する画像出力回路9gを有している。The control unit 9 is a means for indicating the resolution of the image acquired from the CCD camera 8. The control unit 9 selects the optimum optical resolution from the optical resolutions determined by the plurality of objective lenses 3 for the indicated resolution of the acquired image. It has means for determining the objective lens 3 having a resolution and driving means for driving the revolver 2 so that the objective lens determined by the means is inserted into the observation optical path. As shown in FIG. Revo-hole position data from the container 10, key input data from the data input unit 11, mouse 1
Input circuit 9a, CC for receiving coordinate data from
An image input circuit 9b for receiving an image signal output from the D camera 8, these input circuits 9a and an image input circuit 9b
A control circuit 9c for controlling data from the control circuit 9c, a calculation circuit 9d for performing required calculations from the control circuit 9c, a storage circuit 9e for storing data relating to the objective lens 3, various data necessary for calculations in the calculation circuit 9d, and the like. It has a drive circuit 9f for driving the rotary revolver 2 according to a command from the circuit 9c, and an image output circuit 9g for outputting an image or graphics created by the control circuit 9c to the monitor 12.
【0021】このような制御装置9は、例えば、データ
入力部11からのキー入力データを入力回路9aが受け
取ると、キー情報を制御回路9cに通知し、制御回路9
cは、キー情報を解釈してから、キーに対応した文字を
画像出力回路9gを介してモニタ12に表示させるよう
になっている。このモニタ12上のキーデータを表示す
る位置は、制御回路9cがコントロールしている。モニ
タ12上での表示位置や形式は、操作内容によって異な
るが、データ入力操作に関しては、マウス13のカーソ
ルが指すウインドウ上で観察者が最後にマウスボタンを
押した(クリックして選択した)位置に表示させるよう
になっている。また、記憶回路9eは、対物レンズ3に
関するデータとして、各対物レンズ3のそれぞれの倍率
やNAなどのデータをレボルバ2のレボ穴に対応させて
記憶している。When the input circuit 9a receives, for example, key input data from the data input section 11, the control device 9 notifies the control circuit 9c of key information, and
In c, after interpreting the key information, a character corresponding to the key is displayed on the monitor 12 via the image output circuit 9g. The position where the key data is displayed on the monitor 12 is controlled by the control circuit 9c. The display position and format on the monitor 12 vary depending on the operation content. However, regarding the data input operation, the position where the observer last pressed (clicked and selected) the mouse button on the window pointed to by the cursor of the mouse 13. Is displayed. Further, the storage circuit 9e stores data such as the magnification and NA of each objective lens 3 in association with the revolving hole of the revolver 2 as data relating to the objective lens 3.
【0022】レボルバ穴位置検出器10は、観察光路上
に位置されたレボルバ2のレボルバ穴の位置を検出する
ものである。The revolver hole position detector 10 detects the position of the revolver hole of the revolver 2 located on the observation optical path.
【0023】データ入力部11は、レボ穴位置に対する
対物レンズ3の倍率を入力するもので、図3に示すよう
にテンキー11aとEnterキー11bを有してい
る。The data input unit 11 is for inputting the magnification of the objective lens 3 with respect to the position of the revolving hole, and has a ten key 11a and an Enter key 11b as shown in FIG.
【0024】モニタ12は、制御装置9の制御回路9c
から画像出力回路9gを介して画像データや制御回路9
cが作成した矩形グラフィックであるウインドウを合成
表示するもので、個々のウインドウ(ボタン表示も含
む)の表示座標や表示状態は、制御回路9cにより管理
されている。具体的には、図4(a)に示すCCDカメ
ラ8より取得された動画像12aを表示する動画表示ウ
インドウ12bおよび同図(b)に示すCCDカメラ8
より取得された静止画12cを表示する静止画表示ウイ
ンドウ12dを有している。この場合、動画像12a
は、リアルタイム性を保つためにデータ量の少ないサイ
ズの小さな画像が用いられ、観察者は、動画表示ウイン
ドウ12bに表示される動画像12aを参照しながら、
ステージ5による位置合わせやピント合わせを行う。そ
して、これらが適当と判断した時点で、高解像度の静止
画12cを取得し、静止画表示ウインドウ12dに表示
するとともに、記憶回路9eに保存するようにしてい
る。また、モニタ12は、動画表示ウインドウ12bお
よび静止画表示ウインドウ12dの他に、同図(c)に
示すコントロールウインドウ12eを有している。コン
トロールウインドウ12eは、画像分解能を指定するた
めの解像度選択ラジオボタン12f、静止画の取得を指
示するための画像キャプチャーボタン12gおよび対物
レンズ3に関するデータを入力するための対物レンズデ
ータ入力ウインドウ12hが表示されている。この場
合、対物レンズデータ入力ウインドウ12hには、図5
に示すように、レボルバ2の複数のレボルバ穴毎に付さ
れた1,2,3,…の番号が記載された項目12iと、
これら番号1,2,3,…に対応させて対物レンズ3の
倍率とNAのそれぞれのデータを書き込む項目12j、
12kが設けられている。The monitor 12 is connected to a control circuit 9c of the control device 9.
From the image data and control circuit 9 via the image output circuit 9g.
The window which is a rectangular graphic created by c is synthesized and displayed. The display coordinates and the display state of each window (including the button display) are managed by the control circuit 9c. Specifically, a moving image display window 12b for displaying a moving image 12a obtained from the CCD camera 8 shown in FIG. 4A and a CCD camera 8 shown in FIG.
It has a still image display window 12d for displaying the still image 12c obtained from the above. In this case, the moving image 12a
In order to maintain the real-time property, a small image having a small data amount is used. The observer refers to the moving image 12a displayed in the moving image display window 12b while
Positioning and focusing by the stage 5 are performed. When it is determined that these are appropriate, a high-resolution still image 12c is acquired, displayed in the still image display window 12d, and stored in the storage circuit 9e. The monitor 12 has a control window 12e shown in FIG. 3C in addition to the moving image display window 12b and the still image display window 12d. The control window 12e displays a resolution selection radio button 12f for specifying an image resolution, an image capture button 12g for instructing acquisition of a still image, and an objective lens data input window 12h for inputting data relating to the objective lens 3. Have been. In this case, the objective lens data input window 12h includes FIG.
, An item 12i in which numbers 1, 2, 3,... Assigned to a plurality of revolver holes of the revolver 2 are described,
Items 12j for writing the respective data of the magnification and NA of the objective lens 3 corresponding to these numbers 1, 2, 3,.
12k are provided.
【0025】マウス13は、図4に示すモニタ12上に
表示されるマウスカーソル13aを移動させるもので、
図6に示すようにマウスボタン13bを有している。The mouse 13 is used to move a mouse cursor 13a displayed on the monitor 12 shown in FIG.
As shown in FIG. 6, a mouse button 13b is provided.
【0026】このようなマウス13は、その操作にとも
ないう座標データを制御装置9の入力回路9aを介して
制御回路9cに通知すると、マウス座標に対応するモニ
タ12上に画像出力回路9gを介してマウスカーソル1
3aが表示されるようになっている。また、例えば、モ
ニタ12ののコントロールウインドウ12eの解像度選
択ラジオボタン12f上にマウスカーソル13aがある
状態で、マウスボタン13bを押し操作すると、押下げ
信号が入力回路9aを介して制御回路9cに通知され、
解像度選択ラジオボタン12fの座標とマウスカーソル
13aの座標の比較結果からマウスカーソル13aが示
す解像度選択ラジオボタン12fが押されたことを判断
すると、解像度選択ラジオボタン12fに割り当てられ
た処理が行われるようになっている。When the mouse 13 notifies the control circuit 9c of coordinate data associated with the operation via the input circuit 9a of the control device 9, the mouse 13 transmits the coordinate data on the monitor 12 corresponding to the mouse coordinates via the image output circuit 9g. Mouse cursor 1
3a is displayed. Further, for example, when the mouse button 13b is pressed while the mouse cursor 13a is positioned on the resolution selection radio button 12f of the control window 12e of the monitor 12, a pressing signal is sent to the control circuit 9c via the input circuit 9a. And
When it is determined from the comparison result of the coordinates of the resolution selection radio button 12f and the coordinates of the mouse cursor 13a that the resolution selection radio button 12f indicated by the mouse cursor 13a has been pressed, the processing assigned to the resolution selection radio button 12f is performed. It has become.
【0027】次に、このように構成した実施の形態の動
作を説明する。Next, the operation of the embodiment configured as described above will be described.
【0028】まず、装置の電源を投入し複数の対物レン
ズ3のうち、観察光路上に位置している対物レンズ3を
確認する。この確認動作は、レボルバ穴位置検出器10
により観察光路上に位置しているレボ穴位置を検出し、
この検出データを制御装置9の入力回路9aを介して制
御回路9cに入力する。制御回路9cでは、レボ穴位置
に対応するデータを受け取ると、記憶回路9eから、該
当するレボ穴位置に対応する対物レンズ3のデータとし
て倍率やNAなどのデータを読み出す。First, the power of the apparatus is turned on, and among the plurality of objective lenses 3, the objective lens 3 located on the observation optical path is confirmed. This checking operation is performed by the revolver hole position detector 10.
To detect the position of the revo-hole located on the observation optical path,
This detection data is input to the control circuit 9c via the input circuit 9a of the control device 9. When the control circuit 9c receives the data corresponding to the revolving hole position, it reads out data such as magnification and NA from the storage circuit 9e as data of the objective lens 3 corresponding to the revolving hole position.
【0029】ここで、記憶回路9eに、対物レンズ3の
データが存在しない場合は、モニタ12のコントロール
ウインドウ12eに表示された対物レンズデータ入力ウ
インドウ12hを参照しながら対物レンズ3の倍率やN
Aなどのデータを入力する。Here, when the data of the objective lens 3 does not exist in the storage circuit 9e, the magnification and the N of the objective lens 3 are referred to with reference to the objective lens data input window 12h displayed on the control window 12e of the monitor 12.
Input data such as A.
【0030】この場合、仮に、観察光路上に位置される
レボ穴が3番目で、図5に示す対物レンズデータ入力ウ
インドウ12hの項目12iの番号3に対応させて項目
12j、12kの欄に倍率とNAのデータを入力するも
のとすると、まず、制御回路9cは、項目12jの対応
欄を反転表示させる。In this case, it is assumed that the revolving hole located on the observation optical path is the third one, and the magnification is set in the columns of the items 12j and 12k corresponding to the item 3 of the item 12i of the objective lens data input window 12h shown in FIG. First, the control circuit 9c reversely displays the corresponding column of the item 12j.
【0031】この状態から、データ入力部11のテンキ
ー11aを用いて対物レンズ3の倍率データを入力す
る。すると、入力された倍率データは、制御装置9の制
御回路9cから画像出力回路9gを介して反転表示され
ている項目12jの対応欄に表示される。そして、倍率
データの入力が終了してEnterキー11bを入力す
ると、制御回路9cは、倍率データの入力が終了したも
のと判断し、次に、項目12kの対応欄を反転表示させ
る。そして、ここでも先に倍率データを入力したと同様
にしてNAデータを入力する。また、これら入力された
対物レンズ3の倍率およびNAのデータは、記憶回路9
eに書き込まれる。From this state, the magnification data of the objective lens 3 is input using the numeric keypad 11a of the data input section 11. Then, the input magnification data is displayed in the corresponding column of the item 12j which is highlighted by the control circuit 9c of the control device 9 via the image output circuit 9g. Then, when the input of the magnification data is completed and the Enter key 11b is inputted, the control circuit 9c determines that the input of the magnification data is completed, and then reversely displays the corresponding column of the item 12k. Here, the NA data is input in the same manner as the input of the magnification data. The input data of the magnification and NA of the objective lens 3 is stored in the storage circuit 9.
is written to e.
【0032】以上の操作は、レボルバ2のレボ穴に取り
付けられた対物レンズ3の記憶回路9eにデータが記憶
されていない対物レンズ3について全て行う。これによ
り、レボ穴位置に対応した全ての対物レンズ3の倍率お
よびNAのデータは、図5に示すようなデータテーブル
として記憶回路9eに記憶される。The above operation is performed for all the objective lenses 3 whose data is not stored in the storage circuit 9e of the objective lens 3 attached to the revolving hole of the revolver 2. Thereby, the magnification and NA data of all the objective lenses 3 corresponding to the revolving hole positions are stored in the storage circuit 9e as a data table as shown in FIG.
【0033】次に、モニタ12上の動画表示ウインドウ
12bに、CCDカメラ8より取得された標本4の観察
像を動画像12aとして表示する。この場合、CCDカ
メラ8が取得した画像データは、画像入力回路9bによ
り縮小されて制御回路9cに送られ、この制御回路9c
で設定された表示位置データとともに、画像出力回路9
gを介してモニタ12に送られ、動画表示ウインドウ1
2bに表示される。この動画像12aは、リアルタイム
性を保つためにデータ量の少ないサイズの小さな低解像
の画像である。観察者は、動画表示ウインドウ12b上
の動画像12aを参照しながら、ステージ5による位置
合わせやピント合わせを行う。Next, an observation image of the sample 4 obtained by the CCD camera 8 is displayed as a moving image 12a on a moving image display window 12b on the monitor 12. In this case, the image data obtained by the CCD camera 8 is reduced by the image input circuit 9b and sent to the control circuit 9c.
The image output circuit 9 together with the display position data set in
g to the monitor 12 and the moving image display window 1
2b. The moving image 12a is a small, low-resolution image having a small data amount in order to maintain real-time performance. The observer performs positioning and focusing by the stage 5 while referring to the moving image 12a on the moving image display window 12b.
【0034】なお、上述では、画像入力回路9bにより
画像の縮小を行っているが、CCDカメラ8にて転送す
る画像データの画素数を間引いて画像入力回路9bに縮
小された画像データを入力するようにしてもよい。In the above description, the image is reduced by the image input circuit 9b. However, the number of pixels of the image data to be transferred by the CCD camera 8 is thinned out and the reduced image data is input to the image input circuit 9b. You may do so.
【0035】その後、ステージ5による位置合わせやピ
ント合わせが適当と判断すると、CCDカメラ8により
高解像度の静止画12cを取得し、モニタ12の静止画
表示ウインドウ12dに表示する。この場合、モニタ1
2の画像キャプチャーボタン12gをマウスカーソル1
3aで選択してクリックすると、制御回路9cより画像
入力回路9bに対して静止画像の取得が通知され、CC
Dカメラ8により静止画像が取得される。この静止画取
得は、銀塩写真における写真撮影に相当するもので、静
止画12cは、記憶回路9eに保存したり、画像解析に
用いられ、このため、動画像12aより高解像であるこ
とが求められる。Thereafter, when it is determined that the positioning and focusing by the stage 5 are appropriate, a high-resolution still image 12c is acquired by the CCD camera 8 and displayed on the still image display window 12d of the monitor 12. In this case, monitor 1
2 image capture button 12g with mouse cursor 1
When the user selects and clicks on 3a, the control circuit 9c notifies the image input circuit 9b of the acquisition of the still image, and
A still image is acquired by the D camera 8. This still image acquisition is equivalent to taking a picture in a silver halide photograph, and the still image 12c is stored in the storage circuit 9e or used for image analysis, and therefore has a higher resolution than the moving image 12a. Is required.
【0036】このような静止画12cは、分解能の選択
を可能にしている。この分解能の選択は、モニタ12の
コントロールウインドウ12e上で行われる。つまり、
コントロールウインドウ12eには、複数(図示例では
3項目)の解像度を選択可能な解像度選択ラジオボタン
12fが表示されている。観察者は、解像度選択ラジオ
ボタン12fの中から必要とする解像度(図示例では画
像サイズ2776×2080)をマウスカーソル13a
を選択してクリックする。すると、選択された解像度が
制御回路9cに送られる。この場合、解像度選択ラジオ
ボタン12fは、選択された項目が黒塗りで表示され、
他の項目と排他的に選択されるように制御回路9cが制
御している。そして、観察者が選択した解像度は、制御
回路9cを介して演算回路9dにより画像分解能が計算
され、記憶回路9eに記録される。Such a still image 12c enables selection of resolution. The selection of the resolution is performed on the control window 12e of the monitor 12. That is,
In the control window 12e, resolution selection radio buttons 12f capable of selecting a plurality of (three in the illustrated example) resolutions are displayed. The observer selects the required resolution (image size 2776 × 2080 in the illustrated example) from the resolution selection radio buttons 12f with the mouse cursor 13a.
Select and click. Then, the selected resolution is sent to the control circuit 9c. In this case, the resolution selection radio button 12f displays the selected item in black,
The control circuit 9c controls so that the other items are exclusively selected. The image resolution of the resolution selected by the observer is calculated by the arithmetic circuit 9d via the control circuit 9c, and is recorded in the storage circuit 9e.
【0037】この場合、CCDカメラ8は、画像サイズ
をCCD素子数、解像をCCD素子間隔で決定される
が、CCDカメラ8の出力する最大の画像サイズ277
6×2080での分解能を10μmとすると、その半分
の画像サイズ1388×1040での分解能は、20μ
m、1/4の画像サイズの694×520での分解能
は、40μmとなる。In this case, the CCD camera 8 determines the image size by the number of CCD elements and the resolution by the CCD element interval.
Assuming that the resolution at 6 × 2080 is 10 μm, the resolution at half the image size 1388 × 1040 is 20 μm.
The resolution at 694 × 520 of m, 1/4 image size is 40 μm.
【0038】次に、観察者により選択された解像度から
計算した画像分解能に最も適合する光学分解能の対物レ
ンズ3を選択する。この場合、対物レンズ3の光学分解
能は、以下の式により求められる。Next, the objective lens 3 having an optical resolution most suitable for the image resolution calculated from the resolution selected by the observer is selected. In this case, the optical resolution of the objective lens 3 is obtained by the following equation.
【0039】分解能=λ/(2×NA)×β…(1) 但し、λ:明視野で使われる光の波長、β:倍率、N
A:対物レンズの開口そして、(1)式により求められ
る光学分解能を上述した画像分解能と比較し、光学分解
能が画像分解能に満たない場合は、CCDカメラ8の分
解能よりも光学分解能が劣ることになり、必要以上の解
像度で画像を取得してしまうことになる。Resolution = λ / (2 × NA) × β (1) where λ: wavelength of light used in a bright field, β: magnification, N
A: The aperture of the objective lens and the optical resolution obtained by the equation (1) are compared with the image resolution described above. If the optical resolution is less than the image resolution, the optical resolution is inferior to that of the CCD camera 8. That is, an image is acquired at a resolution higher than necessary.
【0040】そこで、観察者が選択した解像度より求め
られた画像分解能に最も近い光学分解能の対物レンズ3
を選択する。この場合、上述したように、レボルバ2の
各レボ穴に取り付けられた対物レンズ3の倍率とNAの
データは、事前に記憶回路9eに記憶されているので、
これらのデータを読み出して(1)式により各対物レン
ズ3による光学分解能を求め、最適な対物レンズ3を決
定する。Therefore, the objective lens 3 having the optical resolution closest to the image resolution obtained from the resolution selected by the observer.
Select In this case, as described above, the magnification and NA data of the objective lens 3 attached to each revolving hole of the revolver 2 are stored in the storage circuit 9e in advance.
These data are read out, the optical resolution of each objective lens 3 is obtained by the equation (1), and the optimal objective lens 3 is determined.
【0041】このような動作を図7に示すフローチャー
トを用いてさらに詳しく説明する。なお、処理中で使わ
れる変数は、記憶回路9eに記憶されており、制御回路
9cを介して演算回路9dによって演算されるものとす
る。Such an operation will be described in more detail with reference to the flowchart shown in FIG. The variables used in the processing are stored in the storage circuit 9e, and are calculated by the calculation circuit 9d via the control circuit 9c.
【0042】図において、ステップS1において、以後
の処理に利用するデータを初期化する。ここではレボル
バ2のレボ穴位置を示す変数Nに1を代入し、光学分解
能と画像分解能の差を格納する変数MinDiffに非
常に大きな値を代入する。次に、ステップS2で、変数
Nがレボ穴数より大きいかを判断する。ここで、変数N
がレボ穴数より大きい場合(N>レボ穴数)は、全ての
レボ穴に対する対物レンズ3を参照したとしてステップ
S8に進み、対物レンズ3の選択を終了する。一方、変
数Nがレボ穴数以下の場合(N≦レボ穴数)は、ステッ
プS3に進む。ステップS3では、変数Nに対応するレ
ボ穴番号の対物レンズ3の倍率およびNAのデータを記
憶回路9eのデータテーブル(図5参照)から読み出
し、(1)式から光学分解能を計算し、OptReso
に代入する。そして、ステップS4で、OptReso
から目的とする画像分解能を引算し、その結果をTmp
Diffに代入する。In the figure, in step S1, data used for the subsequent processing is initialized. Here, 1 is substituted for a variable N indicating the revolving hole position of the revolver 2, and a very large value is substituted for a variable MinDiff for storing the difference between the optical resolution and the image resolution. Next, in step S2, it is determined whether or not the variable N is larger than the number of revolving holes. Where the variable N
Is larger than the number of revolving holes (N> the number of revolving holes), it is determined that the objective lenses 3 for all revolving holes have been referred to, and the process proceeds to step S8 to end the selection of the objective lenses 3. On the other hand, if the variable N is equal to or smaller than the number of revolving holes (N ≦ the number of revolving holes), the process proceeds to step S3. In step S3, the magnification and NA data of the objective lens 3 of the revolving hole number corresponding to the variable N are read from the data table (see FIG. 5) of the storage circuit 9e, the optical resolution is calculated from the equation (1), and the OptReso is calculated.
Substitute for Then, in step S4, OptReso
Is subtracted from the target image resolution, and the result is expressed as Tmp
Assign to Diff.
【0043】ところで、光学分解能を十分に利用するに
は、画像分解能が少なくとも光学分解能より高分解能で
あることが必要である。つまり、観察者が求める画像分
解能より光学分解能が高解像であり、かつ画像分解能に
最も近い光学分解能となる対物レンズ3を選択すること
が必要である。Incidentally, in order to make full use of the optical resolution, it is necessary that the image resolution is at least higher than the optical resolution. That is, it is necessary to select an objective lens 3 having an optical resolution higher than the image resolution required by the observer and having an optical resolution closest to the image resolution.
【0044】そこで、ステップS5において、ステップ
S3で計算した値TmpDiffが正の値であり、且つ
TmpDiffがMinDiffより小さいかどうか
(TmpDiff<MinDiff)を判断する。これ
らの条件が満たされていれば、ステップS6において、
MinDiffにTmpDiffを代入するとともに、
レボ穴の番号に対応する変数NをMinRevoに格納
する。Therefore, in step S5, it is determined whether the value TmpDiff calculated in step S3 is a positive value and whether TmpDiff is smaller than MinDiff (TmpDiff <MinDiff). If these conditions are satisfied, in step S6,
While substituting TmpDiff for MinDiff,
The variable N corresponding to the number of the revolving hole is stored in MinRevo.
【0045】ステップS7では、変数Nに1を加えてカ
ウントアップし、上述した処理をステップS2で、N>
レボルバ穴数なるまで繰り返す。そして、ループが終了
した時点で、変数MinRevoには、観察者が指定し
た画像分解能に最も適合した光学解像度となる対物レン
ズ3のレボ穴の番号が代入されるようになる。In step S7, 1 is added to the variable N and the count is incremented.
Repeat until the number of revolver holes is reached. When the loop is completed, the number of the revolving hole of the objective lens 3 having the optical resolution most suitable for the image resolution specified by the observer is substituted for the variable MinRevo.
【0046】このようにして、観察者が選択した画像分
解能に最適な光学分解能となる対物レンズ3を決定した
ら、この決定に基づいて駆動回路9fによりレボルバ2
を回転駆動し、観察光路上に最適な対物レンズ3を位置
させる。なお、レボルバ2の駆動による対物レンズ3の
交換は、制御回路9cにより図5に示すデータテーブル
を参照して、交換前の対物レンズ3の倍率から検索した
レボ穴位置の番号と新たに交換する対物レンズ3の倍率
から検索したレボ穴のNoを基にレボルバ2の移動回数
を決定して制御する。例えば、対物レンズ3の倍率を4
倍から20倍に交換する場合は、4倍の対物レンズ3の
レボ穴の番号はNo2で、20倍の対物レンズ3のレボ
穴の番号はNo5であることからレボルバ2を3回移動
させるようになる。After the objective lens 3 having the optimum optical resolution for the image resolution selected by the observer is determined in this way, the revolver 2 is driven by the drive circuit 9f based on this determination.
Is rotated to position the optimal objective lens 3 on the observation optical path. When the objective lens 3 is replaced by driving the revolver 2, the control circuit 9c refers to the data table shown in FIG. 5 and newly replaces the number of the revo hole position searched from the magnification of the objective lens 3 before replacement. The number of movements of the revolver 2 is determined and controlled based on the number of the revolving hole retrieved from the magnification of the objective lens 3. For example, if the magnification of the objective lens 3 is 4
When changing the magnification from 20 times to 20 times, since the number of the revolving hole of the 4 times objective lens 3 is No. 2 and the number of the revolving hole of the 20 times objective lens 3 is No. 5, the revolver 2 is moved three times. become.
【0047】その後は、上述したと同様に、観察者がモ
ニタ12の動画像12aを参照して位置合わせやピント
合わせを行った後、静止画像を取得する。この場合も、
上述したようにモニタ12の画像キャプチャーボタン1
2gをマウスカーソル13aで選択してクリックし、制
御回路9cより画像入力回路9bに対して静止画像の取
得を通知することにより、CCDカメラ8より静止画像
が取得される。CCDカメラ8からの画像データは、指
定された解像により必要ならば画像入力回路9bにより
縮小され、制御回路9cに送られる。なお、ここでは、
画像入力回路9bにより画像の縮小を行っているが、C
CDカメラ8より転送する画像データの画素数を間引い
て縮小処理を行うようにしてもよい。Thereafter, as described above, the observer performs positioning and focusing with reference to the moving image 12a on the monitor 12, and then obtains a still image. Again,
As described above, the image capture button 1 on the monitor 12
2g is selected and clicked with the mouse cursor 13a, and the control circuit 9c notifies the image input circuit 9b of the acquisition of the still image, whereby the still image is acquired from the CCD camera 8. The image data from the CCD camera 8 is reduced by the image input circuit 9b if necessary by the designated resolution, and sent to the control circuit 9c. Here,
The image is reduced by the image input circuit 9b.
The reduction process may be performed by thinning out the number of pixels of the image data transferred from the CD camera 8.
【0048】そして、制御回路9cで取得された静止画
像は、記憶回路9eに保存されるとともに、画像出力回
路9gに対し表示位置データとともに転送され、モニタ
12の静止画表示ウインドウ12dに静止画12cとし
て表示される。The still image obtained by the control circuit 9c is stored in the storage circuit 9e and transferred to the image output circuit 9g together with the display position data, and is displayed in the still image display window 12d of the monitor 12. Will be displayed as
【0049】従って、このようにすれば、観察者が必要
とする画像分解能を指定するだけで、画像分解能に最適
な光学分解能となる対物レンズ3がレボルバ2に取り付
けられた対物レンズ3の中から決定され、この決定に基
づいて、レボルバ2が回転駆動されて最適な対物レンズ
3が観察光路に挿入され、静止画像が取得されるように
なるので、つまり、観察者が、必要とする画像分解能を
指定するという行為をするだけで、自動的に顕微鏡の光
学分解能が最適な状態が決定されるので、従来のよう
に、光学分解能を超える分解能に画像を取得するような
ことがなくなり、常に、観察者が意図した分解能の静止
画像を取得することができる。Therefore, in this way, the objective lens 3 having the optimum optical resolution for the image resolution can be selected from the objective lenses 3 attached to the revolver 2 simply by specifying the image resolution required by the observer. The revolver 2 is driven to rotate based on the determination, and the optimal objective lens 3 is inserted into the observation optical path, so that a still image is obtained. By simply performing the act of designating, the optimal state of the optical resolution of the microscope is automatically determined, so there is no longer the need to acquire images with a resolution exceeding the optical resolution as in the past, A still image with the resolution intended by the observer can be obtained.
【0050】なお、本発明は、上記の実施の形態にのみ
限定されず、要旨を変更しない範囲で適宜変形して実施
できる。It should be noted that the present invention is not limited to the above-described embodiment, and can be appropriately modified and implemented without changing the gist.
【0051】[0051]
【発明の効果】以上述べたように本発明によれば、観察
者が必要とする画像分解能に適合するように顕微鏡での
光学分解能を自動的に変更することができるので、光学
分解能を超えるような分解能の無駄な画像を取得するこ
とがなくなり、観察者が必要とする分解能の制止画像を
容易に取得することができる。As described above, according to the present invention, the optical resolution of the microscope can be automatically changed to match the image resolution required by the observer. It is not necessary to obtain a useless image with a high resolution, and it is possible to easily obtain a stopped image with a resolution required by the observer.
【図1】本発明の一実施の形態の概略構成を示す図。FIG. 1 is a diagram showing a schematic configuration of an embodiment of the present invention.
【図2】一実施の形態に用いられる制御装置の概略構成
を示す図。FIG. 2 is a diagram showing a schematic configuration of a control device used in one embodiment.
【図3】一実施の形態に用いられるデータ入力部の概略
構成を示す図。FIG. 3 is a diagram illustrating a schematic configuration of a data input unit used in the embodiment;
【図4】一実施の形態に用いられるモニタの概略構成を
示す図。FIG. 4 is a diagram showing a schematic configuration of a monitor used in one embodiment.
【図5】一実施の形態に用いられる対物レンズデータ入
力ウインドウの概略構成を示す図。FIG. 5 is a diagram showing a schematic configuration of an objective lens data input window used in one embodiment.
【図6】一実施の形態に用いられるマウスの概略構成を
示す図。FIG. 6 is a diagram showing a schematic configuration of a mouse used in one embodiment.
【図7】一実施の形態の動作を説明するフローチャー
ト。FIG. 7 is a flowchart illustrating an operation of one embodiment.
1…顕微鏡本体 1a…胴部 1b…対物アーム 2…レボルバ 3…対物レンズ 4…標本 5…ステージ 6…鏡筒 7…接眼レンズ 8…CCDカメラ 9…制御装置 9a…入力回路 9b…画像入力回路 9c…制御回路 9d…演算回路 9e…記憶回路 9f…駆動回路 9g…画像出力回路 10…レボルバ穴位置検出器 11…データ入力部 11a…テンキー 11b…Enterキー 12…モニタ 12a…動画像 12b…動画表示ウインドウ 12c…静止画 12d…静止画表示ウインドウ 12e…コントロールウインドウ 12f…解像度選択ラジオボタン 12g…画像キャプチャーボタン 12h…対物レンズデータ入力ウインドウ 13…マウス 13a…マウスカーソル 13b…マウスボタン DESCRIPTION OF SYMBOLS 1 ... Microscope main body 1a ... Body 1b ... Objective arm 2 ... Revolver 3 ... Objective lens 4 ... Sample 5 ... Stage 6 ... Barrel 7 ... Eyepiece 8 ... CCD camera 9 ... Control device 9a ... Input circuit 9b ... Image input circuit 9c control circuit 9d arithmetic circuit 9e storage circuit 9f drive circuit 9g image output circuit 10 revolver hole position detector 11 data input unit 11a numeric keypad 11b Enter key 12 monitor 12a moving image 12b moving image Display window 12c Still image 12d Still image display window 12e Control window 12f Resolution selection radio button 12g Image capture button 12h Objective lens data input window 13 Mouse 13a Mouse cursor 13b Mouse button
Claims (3)
ンズを選択的に観察光路に切換える変倍手段を有する顕
微鏡に用いられ、前記変倍手段を介して観察像を画像と
して取得する画像取得装置において、 前記取得画像の分解能を指定する分解能指定手段と、 この分解能指定手段で指定された前記取得画像の分解能
に対し、前記複数の対物レンズによってそれぞれ決定さ
れる光学分解能の中から最適な光学分解能の対物レンズ
を決定する対物レンズ決定手段と、 この対物レンズ決定手段により決定された対物レンズを
前記観察光路に切換えるように前記変倍手段を駆動する
駆動手段とを具備したことを特徴とする画像取得装置。1. An image acquisition apparatus for use in a microscope having a plurality of objective lenses and a magnification unit for selectively switching these objective lenses to an observation optical path, wherein an observation image is acquired as an image via the magnification unit. In the apparatus, resolution specifying means for specifying the resolution of the acquired image; and for the resolution of the acquired image specified by the resolution specifying means, the optimal optical from among the optical resolutions respectively determined by the plurality of objective lenses. Object lens determining means for determining an objective lens having a resolution, and driving means for driving the variable power means so as to switch the objective lens determined by the objective lens determining means to the observation optical path. Image acquisition device.
により決定される光学分解能を計算する演算手段を有す
ることを特徴とする請求項1記載の画像取得装置。2. The image acquisition apparatus according to claim 1, wherein the objective lens determining unit includes an arithmetic unit that calculates an optical resolution determined by the objective lens.
り付けた回転式レボルバからなり、前記駆動手段により
回転駆動され、前記対物レンズ決定手段により決定され
た対物レンズを前記観察光路に切換えることを特徴とす
る請求項1記載の画像取得装置。3. The magnification changing means comprises a rotary revolver on which a plurality of objective lenses are mounted, is driven to rotate by the driving means, and switches the objective lens determined by the objective lens determination means to the observation optical path. The image acquisition device according to claim 1, wherein:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001060369A JP4733845B2 (en) | 2001-03-05 | 2001-03-05 | Image acquisition device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001060369A JP4733845B2 (en) | 2001-03-05 | 2001-03-05 | Image acquisition device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002258162A true JP2002258162A (en) | 2002-09-11 |
JP4733845B2 JP4733845B2 (en) | 2011-07-27 |
Family
ID=18919801
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001060369A Expired - Fee Related JP4733845B2 (en) | 2001-03-05 | 2001-03-05 | Image acquisition device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4733845B2 (en) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03189544A (en) * | 1989-12-19 | 1991-08-19 | Omron Corp | Substrate inspecting device |
JPH03296011A (en) * | 1990-04-16 | 1991-12-26 | Olympus Optical Co Ltd | Magnification varying device for microscope |
JPH11183806A (en) * | 1997-12-18 | 1999-07-09 | Nikon Corp | Confocal microscope |
JP2001086384A (en) * | 1999-09-14 | 2001-03-30 | Olympus Optical Co Ltd | Image pickup unit |
JP2002174779A (en) * | 2000-12-08 | 2002-06-21 | Nikon Corp | Microscopic system and auxiliary method of determining magnification |
-
2001
- 2001-03-05 JP JP2001060369A patent/JP4733845B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03189544A (en) * | 1989-12-19 | 1991-08-19 | Omron Corp | Substrate inspecting device |
JPH03296011A (en) * | 1990-04-16 | 1991-12-26 | Olympus Optical Co Ltd | Magnification varying device for microscope |
JPH11183806A (en) * | 1997-12-18 | 1999-07-09 | Nikon Corp | Confocal microscope |
JP2001086384A (en) * | 1999-09-14 | 2001-03-30 | Olympus Optical Co Ltd | Image pickup unit |
JP2002174779A (en) * | 2000-12-08 | 2002-06-21 | Nikon Corp | Microscopic system and auxiliary method of determining magnification |
Also Published As
Publication number | Publication date |
---|---|
JP4733845B2 (en) | 2011-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4878913B2 (en) | Microscope system, microscope image synthesis method, and program | |
US7932504B2 (en) | Microscope system and VS image production and program thereof | |
JP4970869B2 (en) | Observation apparatus and observation method | |
JP5301970B2 (en) | Digital camera system for microscope and microscope system | |
US8699129B2 (en) | Microscope system, storage medium storing control program, and control method | |
JP4878914B2 (en) | Microscope system, microscope control method, and program | |
US20160062101A1 (en) | Method and apparatus for small and large format histology sample examination | |
US11112952B2 (en) | Interface for display of multi-layer images in digital microscopy | |
JP2007017930A (en) | Microscopic device | |
JP4296207B2 (en) | Microscopic measuring device | |
JP5192965B2 (en) | Microscope system, control program, and control method | |
JP2007034050A (en) | Observation apparatus and control method thereof | |
US7078664B2 (en) | Confocal laser microscope displaying target images side by side | |
JP2005266718A (en) | Microscopic image photographing system | |
JP4733845B2 (en) | Image acquisition device | |
JP2009042462A (en) | Microscope apparatus, observation method, and observed image processing method | |
JP2000155268A (en) | Enlarging observation device | |
JP2007316452A (en) | Observation device and picture display method for observation device | |
JP2007316993A (en) | Image processor, method for selecting image data, and program for making computer execute the method | |
JP2004265237A (en) | Image composition method and device, microphotographing system and image composition program | |
JP2000039564A (en) | Enlarging observation device | |
JP3152747B2 (en) | Microscope system with macroscopic image function | |
EP4016161A1 (en) | Control device for a microscope | |
JP2002040334A (en) | Microscopic controller, method for using microscopic controller and method for controlling microscopic apparatus | |
JP2009237267A (en) | Microscope system, control method used for microscope system, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110415 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110419 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110425 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140428 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140428 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |