JP4044914B2 - Scanning microscope - Google Patents
Scanning microscope Download PDFInfo
- Publication number
- JP4044914B2 JP4044914B2 JP2004177560A JP2004177560A JP4044914B2 JP 4044914 B2 JP4044914 B2 JP 4044914B2 JP 2004177560 A JP2004177560 A JP 2004177560A JP 2004177560 A JP2004177560 A JP 2004177560A JP 4044914 B2 JP4044914 B2 JP 4044914B2
- Authority
- JP
- Japan
- Prior art keywords
- color
- optical system
- light
- receiving element
- light receiving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は、共焦点原理を利用した走査顕微鏡に関するものである。 The present invention relates to a scanning microscope using a confocal principle.
従来より、共焦点原理を利用した走査顕微鏡がある。該走査顕微鏡は、対物レンズとピンホールを配設しており、対物レンズの焦点位置に試料がある場合、該ピンホールを通過したレーザ光を第1受光素子で受光するので、観察したい高さの部分についての画像(共焦点画像)だけが、鮮明に映し出される(解像度が高くなる)。かかる共焦点画像は白黒(無彩色)の映像となる。しかし、かかる白黒の映像では情報が少なく、つまり、試料の色彩に関する情報が得られず、傷や付着物の種類の判別など詳細な観察が困難となる場合がある。そのため、従来より、カラー(有彩色)の走査顕微鏡がある。 Conventionally, there are scanning microscopes using the confocal principle. The scanning microscope is provided with an objective lens and a pinhole, and when the sample is at the focal position of the objective lens, the laser beam that has passed through the pinhole is received by the first light receiving element, so that the height to be observed Only the image (confocal image) for the portion is clearly displayed (the resolution is increased). Such a confocal image is a black and white (achromatic) image. However, there is little information in such a black and white video, that is, information on the color of the sample cannot be obtained, and detailed observation such as determination of the type of scratches or deposits may be difficult. For this reason, there are color (chromatic) scanning microscopes.
しかし、従来のカラーの走査顕微鏡は、3つの光源からの3原色のレーザ光を用いて試料表面を走査する。そのため、光学系が複雑になって、顕微鏡が高価になるうえ大型になる。 However, a conventional color scanning microscope scans the sample surface using laser beams of three primary colors from three light sources. This complicates the optical system, making the microscope expensive and large.
したがって、本発明の目的は、レーザ光学系とカラー撮像情報用の照明光の光学系とを備えて、カラーの走査顕微鏡のコストダウンと小型化を図ることである。
また、試料ステージの高さ(Z座標)も移動可能であって、合焦点のカラー撮像情報を各画素(撮像単位)ごとに記憶して、ピントの合った映像が得られるようにする。
Accordingly, an object of the present invention is to reduce the cost and size of a color scanning microscope by including a laser optical system and an optical system for illumination light for color imaging information.
The height (Z coordinate) of the sample stage is also movable, and the in-focus color imaging information is stored for each pixel (imaging unit) so that a focused image can be obtained.
本発明の新規な走査顕微鏡は、レーザ光を用いた第1光学系の第1受光素子からの輝度情報と、カラー撮像情報用の照明光を用いた第2光学系の第2受光素子からのカラー撮像情報に基づいて、カラー映像信号を得るように構成される。
そして、本発明は、試料を対物レンズに対して三次元的に移動可能な試料ステージと、第1光学系が合焦点となったときの試料ステージの高さを記憶する手段とを備える。
また、本発明は、試料ステージの記憶された高さにおける第2受光素子からの焦点の合ったカラー撮像情報を記憶する手段を備える。
さらに、本発明は、第2受光素子はカラーCCDであって、その各画素ごとに第1光学系が合焦点となったときのカラー撮像情報を用いて焦点の合ったカラー映像信号を得るように構成される。
さらに、本発明は、第2受光素子は固体撮像素子であって、その各画素ごとに第1光学系が合焦点となったときのカラー撮像情報を用いて焦点の合ったカラー映像信号を得るように構成される。
ところで、本発明において、「カラー映像用の信号」とは、光の三原色(赤、緑、青)についての強度からなる映像信号や、輝度信号および色差信号からなる信号や、水平同期信号およびカラーバースト信号を含んだ複合カラー映像信号など、そのまま、または、加工した後、カラーの映像を映し出すことのできる信号をいう。
また、「カラー撮像情報」とは、撮像した情報であって、「輝度情報」および「色情報」を含む情報をいう。「輝度情報」とは、色彩を含まない輝度に関する情報をいい、「色情報」とは、たとえば色差信号のように、色の強度のバランスに関する情報をいう。
なお、以下の説明においては、「第1受光素子からの輝度情報」、「第2受光素子からの色情報」という場合、以下のようにカラー映像用の信号を得る場合を含むことを意味することがある。すなわち、以下の説明中においては、カラー映像用の信号には、第1受光素子からの輝度情報と、第2受光素子からのカラー撮像情報のうちの色情報とが含まれている場合もある。また、カラー映像用の信号には、第1受光素子からの輝度情報に基づく補正輝度情報と、第2受光素子からのカラー撮像情報のうちの色情報とが含まれている場合がある。さらに、カラー映像用の信号には、第1受光素子からの輝度情報と、第2受光素子からのカラー撮像情報のうちの色情報に基づく補正色情報とが含まれている場合がある。また、カラー映像用の信号には、前記補正輝度情報と補正色情報とが含まれている場合がある。
なお、集光したレーザ光が点状である場合は、レーザ光を試料表面に沿って二次元的に相対的に走査することができる。一方、集光したレーザ光が線状のラインレーザ光である場合は、集光したラインレーザ光に略直交する方向に、ラインレーザ光を試料表面に沿って相対的に走査することができる。ここで、「試料表面に沿って相対的に走査する」とは、試料を静止させてレーザ光またはラインレーザ光を走査する場合と、レーザ光またはラインレーザ光を走査せずに、試料を移動させて走査する場合と、レーザ光をX方向に走査し試料をY方向(X方向に直交する方向)に移動させる場合の少なくとも3つの場合があることを意味する。
The novel scanning microscope according to the present invention includes luminance information from the first light receiving element of the first optical system using laser light and a second light receiving element of the second optical system using illumination light for color imaging information. A color video signal is obtained based on the color imaging information.
The present invention includes a sample stage capable of moving the sample three-dimensionally with respect to the objective lens, and means for storing the height of the sample stage when the first optical system is in focus.
The present invention also includes means for storing focused color imaging information from the second light receiving element at the stored height of the sample stage.
Further, according to the present invention, the second light receiving element is a color CCD, and a color video signal in focus is obtained using color imaging information when the first optical system is in focus for each pixel. Configured.
Further, according to the present invention, the second light receiving element is a solid-state image sensor, and a focused color video signal is obtained using color imaging information when the first optical system is in focus for each pixel. Configured as follows.
By the way, in the present invention, the “color image signal” means an image signal composed of intensities for the three primary colors of light (red, green, blue), a signal composed of a luminance signal and a color difference signal, a horizontal synchronization signal, and a color signal. A composite color video signal including a burst signal is a signal that can display a color video as it is or after being processed.
Further, “color imaging information” refers to information obtained by imaging and includes “luminance information” and “color information”. “Luminance information” refers to information relating to luminance that does not include color, and “color information” refers to information relating to the balance of color intensity, such as color difference signals.
In the following description, the terms “luminance information from the first light receiving element” and “color information from the second light receiving element” mean that the case of obtaining a color video signal as follows is included. Sometimes. That is, in the following description, the color video signal may include luminance information from the first light receiving element and color information of the color imaging information from the second light receiving element. . The color video signal may include corrected luminance information based on luminance information from the first light receiving element and color information in the color imaging information from the second light receiving element. Further, the color video signal may include luminance information from the first light receiving element and correction color information based on color information in the color imaging information from the second light receiving element. In addition, the color video signal may include the corrected luminance information and the corrected color information.
In addition, when the condensed laser beam is dot-like, the laser beam can be relatively scanned two-dimensionally along the sample surface. On the other hand, when the condensed laser beam is a linear line laser beam, the line laser beam can be relatively scanned along the sample surface in a direction substantially orthogonal to the condensed line laser beam. Here, “relatively scanning along the sample surface” means that the sample is stationary and scanning with laser light or line laser light, and the sample is moved without scanning with laser light or line laser light. This means that there are at least three cases: scanning with laser light and scanning the laser beam in the X direction and moving the sample in the Y direction (direction orthogonal to the X direction).
本発明の走査顕微鏡によれば、第1光学系のレーザ光とは異なるカラー撮像用の照明光を用いた第2光学系によってカラー撮像情報を得るから、三原色のレーザ光を用いた従来のカラーレーザ顕微鏡に比べ、光学系が著しく簡単な構造になるので、コストダウンと小型化を図り得る。
そして、第1光学系が合焦点となったときの試料ステージの高さを記憶する手段を備えることにより、合焦点の試料ステージ高さを記憶できる。
また、試料ステージの記憶された高さにおける第2受光素子からの焦点の合ったカラー撮像情報を記憶する手段を備えることにより、厳密にピントの合った映像が得られる。
さらに、第2光学系の受光素子にカラーCCDを用い、その各画素ごとに第1光学系の合焦点におけるカラー撮像情報を用いるようにして、カラー映像用の信号を得るので、厳密にピントの合った映像が得られる。
さらに、第2光学系の受光素子に固体撮像素子を用い、その各画素ごとに第1光学系の合焦点におけるカラー撮像情報を用いるようにして、カラー映像用の信号を得るので、厳密にピントの合った映像が得られる。
なお、従来のカラーレーザ顕微鏡に比べ色情報についての解像度が低いが、レーザ光によって輝度情報を得ると、通常の拡大画像よりも解像度が高いので、十分利用価値が高い。すなわち、レーザ光を用いた第1光学系からの輝度情報を用いると、白色光を用いた単なる拡大画像に比べ解像度が高くなると共に、第2受光素子からの色情報を用いてカラーの映像が得られ、その結果、傷や付着物の詳細な観察が可能になる。
また、対物レンズから試料までの距離を変化させながら、第1受光素子に入射した応答光の最大輝度を求め、最大輝度の輝度情報として用いることで、凹凸の大きい試料でも、映像の一部が著しく暗くなるおそれがない。
According to the scanning microscope of the present invention, since color imaging information is obtained by the second optical system using illumination light for color imaging different from the laser light of the first optical system, the conventional color using the three primary colors of laser light is obtained. Compared to a laser microscope, the optical system has a remarkably simple structure, so that the cost and size can be reduced.
Then, by providing a means for storing the height of the sample stage when the first optical system is in focus, the height of the sample stage at the focus can be stored.
Further, by providing means for storing in-focus color imaging information from the second light receiving element at the stored height of the sample stage, a strictly focused image can be obtained.
Further, since a color CCD is used as the light receiving element of the second optical system and the color imaging information at the focal point of the first optical system is used for each pixel, a color video signal is obtained. Matched images can be obtained.
Further, a solid-state image sensor is used as the light receiving element of the second optical system, and color imaging information at the focal point of the first optical system is used for each pixel to obtain a color video signal. Can be obtained.
In addition, although the resolution about color information is low compared with the conventional color laser microscope, when luminance information is obtained by laser light, the resolution is higher than that of a normal enlarged image, and thus the utility value is sufficiently high. That is, when luminance information from the first optical system using laser light is used, the resolution is higher than that of a simple enlarged image using white light, and a color image is generated using color information from the second light receiving element. As a result, detailed observation of scratches and deposits becomes possible.
Further, by obtaining the maximum luminance of the response light incident on the first light receiving element while changing the distance from the objective lens to the sample, and using it as luminance information of the maximum luminance, a part of the image can be obtained even in a sample with large unevenness. There is no danger of darkening.
以下、本発明の実施形態を図面にしたがって説明する。
図1〜図4は、本発明の走査顕微鏡の第1実施形態を示す図面である。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
1 to 4 are drawings showing a first embodiment of a scanning microscope of the present invention.
図1は、第1実施形態を示す概略構成図である。
図1において、走査顕微鏡は、レーザ光学系(第1光学系)1と、白色光光学系(第2光学系)2とを備えている。
FIG. 1 is a schematic configuration diagram showing the first embodiment.
In FIG. 1, the scanning microscope includes a laser optical system (first optical system) 1 and a white light optical system (second optical system) 2.
図2は、第1実施形態を示すブロック図である。 FIG. 2 is a block diagram showing the first embodiment.
図3は、第1実施形態に関し、撮像領域を示す平面図である。 FIG. 3 is a plan view showing an imaging region in the first embodiment.
図4は、第1実施形態に関し、フローチャートを示す。 FIG. 4 is a flowchart regarding the first embodiment.
まず、レーザ光学系1について説明する。レーザ光学系1は、試料wの深度に関する情報を検出できる共焦点光学系で、たとえば赤色のレーザ光L1を出射する He-Neレーザ10を光源としている。該レーザ10の光軸上には、第1のコリメートレンズ11、偏光ビームスプリッタ12、 1/4波長板13、二次元走査装置14、第1リレーレンズ15、第2リレーレンズ16および対物レンズ17が順に配設されている。対物レンズ17の焦点位置の付近には、試料ステージ30が配設されており、対物レンズ17はレーザ光L1を試料wの表面に集光させる。前述の二次元走査装置14は、たとえば2枚のガルバノミラーから構成され、レーザ光L1を偏向させることで、試料wへの集光位置を試料wの表面に沿って二次元的(X,Y方向)に走査させる。なお、試料ステージ30は、ステージ制御回路40によりZ(上下)方向に駆動制御され、X,Y方向については手動ハンドルで移動可能となっている。
First, the laser
試料wで反射されたレーザ光(応答光)L1は、対物レンズ17、第2リレーレンズ16および第1リレーレンズ15を通り、再び、二次元走査装置14を介して 1/4波長板13および偏光ビームスプリッタ12を透過し、第2の結像レンズ18に向かう。該レーザ光L1は、第2の結像レンズ18によって集光され、ピンホールを有する光絞り部19aを通過して第1受光素子19bに入射する。第1受光素子19bは、たとえばフォトマルチプライヤまたはフォトダイオードなどで構成され、入射したレーザ光L1を光電変換して、アナログ光量信号を、出力アンプおよびゲイン制御回路(図示せず)を介して第1A/Dコンバータ41に出力する。
The laser light (response light) L1 reflected by the sample w passes through the
つぎに、レーザ光学系1によって得られる輝度情報について説明する。前述の光絞り部19aは、第2の結像レンズ18の焦点位置に配設されており、一方、光絞り部19aのピンホールは極めて微小であるから、レーザ光L1が試料w上で焦点を結ぶと、その反射光L1が光絞り部19aのピンホールで結像し、第1受光素子19bに入射する受光光量が著しく大きくなり、逆に、レーザ光L1が試料w上で焦点を結んでいないと、その反射光L1は、光絞り部19aのピンホールを殆ど通過しないので、第1受光素子19bの受光光量が著しく小さくなる。したがって、レーザ光学系1による撮像領域(走査領域)のうち、焦点の合った部分(合焦点の撮像単位)について明るい映像が得られ、一方、それ以外の高さの部分については暗い映像が得られる。なお、レーザ光学系1は単色のレーザ光L1を用いた共焦点光学系であるから、分解能に優れた輝度情報が得られる。
Next, luminance information obtained by the laser
つぎに、白色光光学系2について説明する。白色光光学系2は、白色光(色情報用の照明光)L2を出射する白色光源20を光源としている。該白色光源20の光軸上には、第2のコリメートレンズ21、第1のハーフミラー22および前記対物レンズ17が配設されており、前記第1のハーフミラー22において2つの光学系1,2の光軸が合致するように白色光光学系2が配設されている。したがって、白色光L2は、レーザ光L1の走査領域と同一の箇所に集光される。試料wで反射された白色光(応答光)L2は、対物レンズ17、第1のハーフミラー22および第2リレーレンズ16を透過し、さらに、第2のハーフミラー23で反射されてカラーCCD(第2受光素子)24の表面で結像する。すなわち、カラーCCD24は、光絞り部19aと共役ないし共役に近い位置に配設されている。なお、カラーCCD24で撮像された画像は、アナログのカラー撮像情報として、CCD駆動回路43に読み出されて第2A/Dコンバータ42に出力される。
Next, the white light
つぎに、後述するカラー共焦点画像モードにおいて作動する図2のカラー映像信号作成手段5について説明する。カラー映像信号作成手段5は、第1受光素子19bからの輝度情報と、カラーCCD24からの色情報とを組み合わせて、カラー映像用のデジタル信号ro,go,boを作成するものである。前記カラー映像信号作成手段5は、第1および第2領域回路51,52と、輝度変換回路53などを備えている。
Next, the color video signal generating means 5 of FIG. 2 that operates in the color confocal image mode described later will be described. The color video signal creation means 5 creates color video digital signals ro, go, bo by combining the luminance information from the first
前記第1および第2領域回路51,52は、図3に示すように、それぞれ、レーザ光学系1および白色光光学系2の撮像領域A1,A2の所定の共通部分を映像領域A0として選択し、選択した部分についてデジタル信号を出力する。すなわち、図2の第1領域回路51は、前記映像領域A0について、カラーCCD24の各画素に対応した分解能で輝度信号iを輝度用メモリMiに記憶させる。一方、前記第2領域回路52は、前記映像領域A0について、各画素ごとに赤、緑、青の色強度信号rm,gm,bmを第1色強度メモリMr1,Mg1,Mb1 に記憶させる。なお、色強度信号とは、三原色についての輝度(強度)を含む信号をいう。
As shown in FIG. 3, the first and
前記輝度変換回路53は、下記の演算式(1),(2),(3) にしたがって、各画素についての前記色強度信号rm,gm,bmの輝度情報を、輝度信号iの輝度情報に置換して、変換色強度信号ro,go,boを求め、該信号を第2色強度メモリMr2,Mg2,Mb2 に記憶させるものである。
Ro=I・Rm/(Rm+Gm+Bm) …(1)
Go=I・Gm/(Rm+Gm+Bm) …(2)
Bo=I・Bm/(Rm+Gm+Bm) …(3)
I:輝度信号iの輝度
Rm,Gm,Bm:色強度信号
rm,gm,bmの輝度(強度)
Ro,Go,Bo:変換色強度信号ro,go,boの輝度(強度)
なお、第1および第2色強度メモリMr1 〜Mb1,Mr2 〜Mb2 は、カラーCCD24のうち前述の映像領域A0の部分の画素に対応した記憶部を有している。
The
Ro = I · Rm / (Rm + Gm + Bm) (1)
Go = I · Gm / (Rm + Gm + Bm) (2)
Bo = I · Bm / (Rm + Gm + Bm) (3)
I: luminance of the luminance signal i Rm, Gm, Bm: luminance (intensity) of the color intensity signal rm, gm, bm
Ro, Go, Bo: Brightness (intensity) of converted color intensity signals ro, go, bo
The first and second color intensity memories Mr1 to Mb1 and Mr2 to Mb2 have storage units corresponding to the pixels of the above-described video area A0 in the
こうして得られた変換色強度信号ro,go,boは、カラーCCD24からのカラー撮像情報のうちの輝度情報を、第1受光素子19bからの輝度情報に置換した信号となる。前記変換色強度信号ro,go,boは、前記第2色強度メモリMr2,Mg2,Mb2 から読み出されて、D/Aコンバータ60に出力され、更に、加算器61において同期信号aが付加されて、アナログの複合カラー映像信号cとなる。該複合カラー映像信号cはモニタ62に出力されて、試料wの映像が映し出される。
The converted color intensity signals ro, go, and bo thus obtained are signals obtained by replacing the luminance information in the color imaging information from the
つぎに、本走査顕微鏡の用い方について説明する。本走査顕微鏡は、領域探索モード、白黒(無彩色)共焦点画像モードおよびカラー共焦点画像モードの3つのモードのうち1つを選択して用いる。これらのモードの設定は、操作部63を操作して設定する。
Next, how to use the present scanning microscope will be described. The present scanning microscope selects and uses one of three modes: an area search mode, a monochrome (achromatic) confocal image mode, and a color confocal image mode. These modes are set by operating the
領域探索モードが選択されると、カラー映像信号作成手段5は図1のレーザ駆動回路44を停止させると共に、CCD駆動回路43を作動させてカラーCCD24により撮像させる。この領域探索モードでは、図2の第2領域回路52から第1色強度メモリMr1,Mg1,Mb1 に記憶された色強度信号rm,gm,bmが、そのまま、D/Aコンバータ60に出力されて、被写界深度の深い通常の拡大画像がモニタ62に映し出される。したがって、図1の試料ステージ30をX,Y方向に移動させることにより、撮像したい領域を探し出すことができる。
When the area search mode is selected, the color video signal generating means 5 stops the
白黒共焦点画像モードが選択されると、カラー映像信号作成手段5(図2)は、レーザ光学系1のレーザ駆動回路44および二次元走査装置14などを作動させ、レーザ光学系1により撮像させる。この白黒共焦点画像モードでは、図2の第1領域回路51から輝度用メモリMiに記憶された輝度信号iが、そのまま、D/Aコンバータ60に出力されて、解像度の高い白黒(無彩色)の拡大画像がモニタ62に映し出される。
When the black and white confocal image mode is selected, the color video signal generating means 5 (FIG. 2) operates the
カラー共焦点画像モードが選択されると、以下に説明するように、レーザ駆動回路44とCCD駆動回路43とが交互に駆動される。すなわち、図4のステップS1で該モードが選択されると、ステップS2に進み、レーザ光L1による1画面分の走査がなされた後、ステップS3に進む。ステップS3では図1のレーザ駆動回路44が停止し、レーザ10からレーザ光L1が出射されなくなる。この状態で図4のステップS4に進み、カラーCCD24に電荷を蓄積する。該ステップS4で得た図2の色強度信号rm,gm,bmは、該信号に含まれている輝度情報が前記ステップS2で得た輝度信号iの輝度情報に置換され、変換色強度信号ro,go,boとなる。該変換色強度信号ro,go,boは、それぞれ、第2色強度メモリMr2,Mg2,Mb2 に記憶された後、D/Aコンバータ60に出力されてカラーの拡大画像がモニタ62に映し出される。なお、図4のステップS4の後にステップS5に進み、前記レーザ光L1の走査と、CCD駆動回路43による電荷の蓄積および読み出しが繰り返される。
When the color confocal image mode is selected, the
こうして得られるカラー共焦点画像は、色情報についての解像度が低いので、三原色のレーザ光を用いた従来のカラーレーザ顕微鏡に比べ、若干解像度が低くなるものの、通常の拡大画像よりも解像度が高いので、十分利用価値の高い映像が得られる。 Since the color confocal image thus obtained has a low resolution for color information, the resolution is slightly lower than that of a conventional color laser microscope using three primary colors of laser light, but the resolution is higher than that of a normal enlarged image. A video with a sufficiently high utility value can be obtained.
また、図1の白色光源20とカラーCCD24を用いた白色光光学系2によって色情報を得るから、三原色のレーザ光を用いた従来のカラーレーザ顕微鏡に比べ、光学系が著しく簡単な構造になるので、走査顕微鏡のコストダウンと小型化を図り得る。
Further, since the color information is obtained by the white light
また、本実施形態の場合、図1のカラーCCD24によって撮像する(カラーCCD24に電荷を蓄積する)際には、レーザ駆動回路44を停止してレーザ光L1がカラーCCD24に入射しないようにしている。したがって、レーザ光L1の色を帯びた映像になることもなく、試料wの実際の色に近い色彩の映像が得られる。
In the case of the present embodiment, when imaging is performed by the
なお、レーザ光L1がカラーCCD24に入射しないようにする手段としては、レーザ光L1を遮光するシャッタを用いたり、あるいは、レーザ光L1の走査範囲をカラーCCD24の撮像領域外に設定するなど種々の方法を採用することができる。また、レーザ光L1がカラーCCD24に入射して、レーザ光L1の色を帯びても、カラーの映像が得られるので、本発明の範囲に含まれる。
As means for preventing the laser light L1 from entering the
ところで、図1の試料wの色とレーザ光L1の色が同系色であると、試料wにおける反射光L1の光量(式(1) 〜(3) の輝度I)が大きくなるので、第1受光素子19bに入射する光量が増大する。そのため、このような場合、映像が実際の試料wの色よりも白っぽくなる。そこで、図5に示す第2実施形態では、かかる同系色の場合でも、実際の試料の色彩に近い色彩が得られる機能を備えている。
By the way, if the color of the sample w in FIG. 1 and the color of the laser beam L1 are similar colors, the amount of reflected light L1 on the sample w (the luminance I in the equations (1) to (3)) increases. The amount of light incident on the
図5の第2実施形態では、輝度変換回路53が判別手段53aおよび3つの補正変数を記憶する補正変数記憶部53bを備えている点において前記第1実施形態と異なっている。本実施形態では、輝度変換回路53が下記の演算式(11)〜(13)にしたがって、色強度信号rm,gm,bmの輝度Rm,Gm,Bmを補正して変換色強度信号ro,go,boの輝度(強度)Ro,Go,Boを求める。
Ro=Kr・I・Rm/(Rm+Gm+Bm) …(11)
Go=Kg・I・Gm/(Rm+Gm+Bm) …(12)
Bo=Kb・I・Bm/(Rm+Gm+Bm) …(13)
Kr,Kg,Kb:補正変数
The second embodiment shown in FIG. 5 differs from the first embodiment in that the
Ro = Kr · I · Rm / (Rm + Gm + Bm) (11)
Go = Kg · I · Gm / (Rm + Gm + Bm) (12)
Bo = Kb · I · Bm / (Rm + Gm + Bm) (13)
Kr, Kg, Kb: correction variables
前記輝度変換回路53の判別手段53aは、下記の(14)式に示す赤色比Rcと所定の閾値Srとを比較して、試料wの撮像領域における各撮像単位(カラーCCD24の各画素)ごとに、当該各撮像単位の部分が、所定の閾値Srよりも赤っぽいか否かを判別するものである。
Rc=Rm/(Rm+Gm+Bm) …(14)
すなわち、判別手段53aは、カラーCCD24の各画素が受光した赤色の輝度Rmが、当該3色の輝度の合計値(Rm+Gm+Bm)に対して大きいときは、当該撮像単位の部分が赤っぽいと判断するものである。
The discriminating means 53a of the
Rc = Rm / (Rm + Gm + Bm) (14)
That is, when the red luminance Rm received by each pixel of the
前記輝度変換回路53は、前記(14)式の赤色比Rcが閾値Srよりも小さい場合は、Kr=Kg=Kb=1に設定して、前述の第1実施形態と同様に変換色強度信号ro,go,boを得る。一方、輝度変換回路53は、赤色比Rcが前記閾値Sr以上の場合は、補正変数記憶部53bから補正変数Kr,Kg,Kbを読み出し、前記(11)〜(13)式にしたがって変換色強度信号ro,go,boを得る。
When the red ratio Rc in the equation (14) is smaller than the threshold value Sr, the
図5(b)は前記補正変数Kr,Kg,Kbを示すグラフである。各補正変数Kr,Kg,Kbは、たとえば、試料wの撮像単位の赤色比Rcが大きい程"1.0"よりも小さくなるように設定されている。したがって、前記(11)〜(13)式のように補正変数Kr,Kg,Kbを乗算することで、輝度が小さくなるから、赤色比Rcが大きい場合にも、映像が白っぽくならず、実際の試料wの色彩に近い色彩の映像が得られる。 FIG. 5B is a graph showing the correction variables Kr, Kg, and Kb. Each correction variable Kr, Kg, Kb is set to be smaller than “1.0” as the red ratio Rc of the imaging unit of the sample w is larger, for example. Therefore, since the brightness is reduced by multiplying the correction variables Kr, Kg, and Kb as in the above equations (11) to (13), the image does not become whitish even when the red ratio Rc is large. An image having a color close to the color of the sample w is obtained.
ところで、前述のカラー共焦点画像モードで凹凸のある試料wを観察すると、焦点(高さ)の合っていない部分の映像が暗くなる。そこで、図6および図7に示す第3実施形態では、かかる凹凸のある試料wの観察に適した凹凸用カラー共焦点画像モードを備えている。 By the way, when the uneven sample w is observed in the color confocal image mode described above, the image of the portion out of focus (height) is darkened. Therefore, the third embodiment shown in FIG. 6 and FIG. 7 includes an uneven color confocal image mode suitable for observation of the uneven sample w.
つぎに、前記凹凸用カラー共焦点画像モードを備えた第3実施形態の構成について説明する。図6に示すように、本第3実施形態では、カラー映像信号作成手段5が最大輝度記憶部Mmax およびZ座標記憶部Mzからなるメモリを備えている。前記最大輝度記憶部Mmax は、走査領域における各撮像単位(カラーCCD24の各画素に対応する単位)ごとに、第1受光素子19b(図5)が受光した最大輝度Imax を記憶するものである。前記Z座標記憶部Mzは、輝度Iが最大輝度Imax となったときのZ座標(試料ステージ30の高さ)を各撮像単位ごとに記憶するものである。前記第2色強度メモリMr2,Mg2,Mb2 は合成撮像情報記憶部を構成しており、前記Z座標記憶部Mzに記憶されたZ座標においてカラーCCD24の各画素が受光したカラー撮像情報を記憶する。つまり、第2色強度メモリMr2,Mg2,Mb2 は、図1の試料ステージ30の高さが変化して第1光学系1が合焦点となったときのカラー撮像情報を各画素(撮像単位)ごとに記憶する。
Next, a configuration of the third embodiment provided with the uneven color confocal image mode will be described. As shown in FIG. 6, in the third embodiment, the color video signal generating means 5 includes a memory including a maximum luminance storage unit Mmax and a Z coordinate storage unit Mz. The maximum luminance storage unit Mmax stores the maximum luminance Imax received by the first
前記輝度変換回路53は輝度比較手段53cを備えている。該輝度比較手段53cは、最大輝度記憶部Mmax に記憶されている最大輝度Imax と、輝度用メモリMiに新たに記憶された輝度Iとを各撮像単位ごとに比較するものである。輝度変換回路53は、前記比較の結果、各撮像単位ごとに、輝度用メモリMiに新たに記憶された輝度Iが最大輝度Imax よりも大きければ、当該輝度Iを最大輝度として最大輝度記憶部Mmax に記憶させる。なお、その他の構成は前述の図5の第2実施形態と同様であり、その詳しい説明および図示を省略する。
The
つぎに、凹凸用カラー共焦点画像モードについて説明する。図7において、まず、ステップS11で図1の試料ステージ30を上昇端まで移動させる。つぎに、ステップS12で、第2光学系2によって撮像し、カラーCCD24に電荷を蓄積してカラー撮像情報を得る。つづいて、図7のステップS13に進み、第1光学系1によってレーザ光L1を走査して撮像することで、輝度情報を得、この内容を図6の最大輝度記憶部Mmax に、各撮像単位(カラーCCD24の画素に対応する単位)ごとに記憶させ、当該撮像時のZ座標をZ座標記憶部Mzに記憶させると共に、輝度変換を行った変換色強度信号ro,go,boを第2色強度メモリMr2,Mg2,Mb2 に記憶させる。
Next, the color confocal image mode for unevenness will be described. In FIG. 7, first, in step S11, the
つづいて、ステップS14に進み、試料ステージ30(図1)を1段階下降させた後、図7のステップS15に進む。ステップS15では、再び、第2光学系2によってカラー撮像情報を得、この内容を図6の第1色強度メモリMr1,Mg1,Mb1 に各画素ごとに記憶させ、図7のステップS16に進む。
Subsequently, the process proceeds to step S14, the sample stage 30 (FIG. 1) is lowered by one step, and then the process proceeds to step S15 in FIG. In step S15, color imaging information is obtained again by the second
ステップS16では、第1光学系1によってレーザ光L1を走査しながら、以下に説明するように、最大輝度記憶部Mmax の最大輝度Imax を更新記憶させると共に、最大輝度Imax を更新した撮像単位については第2色強度メモリMr2,Mg2,Mb2 に記憶させていた変換色強度信号ro,go,boを更新記憶させる。すなわち、レーザ光L1を走査して新たに図6の輝度用メモリMiに記憶された輝度Iと、最大輝度記憶部Mmax に記憶されている最大輝度Imax とを、各撮像単位ごとに、輝度比較手段53cが比較する。該比較の結果、I>Imax であれば、当該撮像単位については、輝度変換回路53が当該輝度Iを新たな最大輝度Imax として最大輝度記憶部Mmax に記憶させると共に、第1色強度メモリMr1,Mg1,Mb1 に記憶されている色強度信号rm,gm,bm、つまり、カラー撮像情報を輝度変換して、変換色強度信号ro,go,boとして第2色強度メモリMr2,Mg2,Mb2 の当該撮像単位のアドレスに更新記憶させる。一方、前記比較の結果、輝度Iが最大輝度Imax 以下であれば、当該撮像単位については、最大輝度Imax および変換色強度信号ro,go,boの更新をしない。
In step S16, as described below, while scanning the laser beam L1 with the first
つづいて、図7のステップS17に進み、試料ステージ30が下降端でなければ、ステップS14に戻り、一方、試料ステージ30が下降端であれば、ステップS18に進んで、変換色強度信号ro,go,boがD/Aコンバータ60(図5)に出力された後、複合カラー映像信号c(図5)が得られる。つまり、図7のステップS14〜ステップS17を繰り返すことで、前記図6の最大輝度記憶部Mmax の最大輝度Imax と、変換色強度信号ro,go,boの更新を繰り返す。したがって、ステップS18で出力される変換色強度信号ro,go,boの輝度は、前述の式(11)〜(13)と同様な下記の式(21)〜(23)で表される。
Ro=Kr・Imax ・Rm/(Rm+Gm+Bm) …(21)
Go=Kg・Imax ・Gm/(Rm+Gm+Bm) …(22)
Bo=Kb・Imax ・Bm/(Rm+Gm+Bm) …(23)
なお、図7のステップS19でモードOFF であれば、当該モードを終了する。
Subsequently, the process proceeds to step S17 in FIG. 7. If the
Ro = Kr · Imax · Rm / (Rm + Gm + Bm) (21)
Go = Kg · Imax · Gm / (Rm + Gm + Bm) (22)
Bo = Kb · Imax · Bm / (Rm + Gm + Bm) (23)
If the mode is OFF in step S19 of FIG. 7, the mode is terminated.
このように、本実施形態では、図1のカラーCCD24の各画素ごとに、第1光学系1が合焦点となった際のZ座標についてのカラー撮像情報を用いるので、凹凸があっても各画素ごとに焦点の合った映像が得られるから、通常のカラーの拡大画像よりもピントの合った映像が得られる。
As described above, in this embodiment, the color imaging information about the Z coordinate when the first
ところで、前記各実施形態では、輝度変換を行ったが、本発明では輝度変換を必ずしも行う必要はない。すなわち、前述の図7のステップS13およびステップS16で輝度変換を行わずに、第1色強度メモリMr1,Mg1,Mb1 に記憶されているカラー撮像情報を第2色強度メモリMr2,Mg2,Mb2 に出力して、つまり、下記の式(31)〜(33)に従って、複合カラー映像信号cを得てもよい。
Ro=Rm …(31)
Go=Gm …(32)
Bo=Bm …(33)
By the way, although luminance conversion was performed in each said embodiment, in this invention, it is not necessary to perform luminance conversion. That is, the color imaging information stored in the first color intensity memory Mr1, Mg1, Mb1 is stored in the second color intensity memory Mr2, Mg2, Mb2 without performing the luminance conversion in Step S13 and Step S16 of FIG. In other words, the composite color video signal c may be obtained according to the following equations (31) to (33).
Ro = Rm (31)
Go = Gm (32)
Bo = Bm (33)
この場合も、第3実施形態と同様に、図1のカラーCCD24の各画素ごとに第1光学系1が合焦点となった際のZ座標についてのカラー撮像情報を用いるので、通常のカラー拡大画像と異なり、厳密にピントの合った映像が得られる。
Also in this case, as in the third embodiment, the color imaging information about the Z coordinate when the first
ところで、前記各実施形態では、試料wの表面および第1受光素子19bにおいて点状に集光するレーザ光L1を用いたが、本発明では、試料wの表面および第1受光素子19bにおいて線状に集光するラインレーザ光L1を用いることもできる。すなわち、図8のように、レーザ光L1に代えてY方向に長いラインレーザ光L1を用いると共に、点状の第1受光素子19bに代えてY方向に長い一次元CCD19Aを用い、更に、二次元走査装置14に代えて一次元走査装置14Aを用いる。この場合、図8(b)のように、ラインレーザ光L1が試料wの表面で集光した際の長手方向に直交する方向に、ラインレーザ光L1を走査する。なお、光絞り部19aはスリット状(溝状)にする。
By the way, in each said embodiment, although the laser beam L1 condensed in a dot shape on the surface of the sample w and the 1st
ところで、前記各実施形態では、図1のレーザ光学系1の第1受光素子19bの前方に光絞り部19aを設けたが、該光絞り部19aは必ずしも設ける必要はない。たとえば、図9のように、第2の結像レンズ18の焦点の位置に白黒用の一次元CCD19Aを設けてもよい。この場合、第1の一次元走査装置14Aを第1のコリメートレンズ11と偏光ビームスプリッタ12の間に設け、第2の一次元走査装置14Bを 1/4波長板13と第1リレーレンズ15との間に設ける。
Incidentally, in each of the above embodiments, the
また、前記各実施形態では、図1の第2光学系2の第2受光素子としてカラーCCD24を用いたが、他の受光素子を用いてもよい。たとえば、ダイクロイックミラーを使用して反射光L2を3原色に分解し、これらの3原色の反射光を3つの白黒映像用の二次元CCDに入射させてもよい。また、光学系は異なるが、第2受光素子としてカラーラインCCDを用い、白色応答光を一次元的に走査する一次元走査装置を設けてもよい。さらに、第2受光素子としては、3つの白黒映像用のラインCCD(R,G,B用)を用いることもでき、また、3つの点受光素子(R,G,B用)を用いることもできる。なお、これらの場合において、白色応答光を走査する走査装置は、レーザ光L1を走査する走査装置と兼用することもできる。
In each of the above embodiments, the
また、第2受光素子としては、カラーCCDの他にMOS型などの他の固体撮像素子や複数の撮像管を組み合わせたテレビカメラなどを用いることもできる。 Further, as the second light receiving element, in addition to the color CCD, other solid-state imaging elements such as a MOS type, a television camera in which a plurality of imaging tubes are combined, or the like can be used.
ところで、前記図1の実施形態では、レーザ光L1および白色光L2の反射光を、それぞれ、第1受光素子19bおよびカラーCCD24に受光させることとしたが、本発明では、試料wを透過した透過光や、前記反射光を置換した蛍光を受光させるものであってもよい。
By the way, in the embodiment of FIG. 1, the reflected light of the laser light L1 and the white light L2 is received by the first
また、前記実施形態では、色彩を光の三原色に分解したが、本発明では補色系(黄、シアン、緑)に分解してもよい。また、色情報として色差信号を用いてもよい。 In the above embodiment, the colors are separated into the three primary colors of light. However, in the present invention, the colors may be separated into complementary colors (yellow, cyan, and green). Further, a color difference signal may be used as the color information.
また、前記各実施形態では、レーザ光学系1および白色光光学系2に第2リレーレンズ16を設けて無限補正系を採用したが、第2リレーレンズ16を設けずに有限補正系を採用してもよい。
In each of the above embodiments, the laser relay
1:第1光学系
17:対物レンズ
19b:第1受光素子
19A:第1受光素子
2:第2光学系
20:色情報用の照明光(白色光源)
24:第2受光素子
L1:レーザ光
L2:照明光
ro,go,bo:カラー映像用の信号
c:カラー映像用の信号(複合カラー映像信号)
1: first optical system 17:
24: second light receiving element L1: laser light L2: illumination light ro, go, bo: signal for color video c: signal for color video (composite color video signal)
Claims (4)
前記レーザ光とは異なるカラー撮像情報用の照明光を試料に照射して、その応答光を第2受光素子に受光させる第2光学系と、
前記試料を前記対物レンズに対して三次元的に移動可能な試料ステージと、
前記第1光学系が合焦点となったときの前記試料ステージの高さを記憶する手段と、
前記レーザー光を用いた前記第1光学系の前記第1受光素子からの輝度情報と、前記照明光を用いた前記第2光学系の前記第2受光素子からのカラー撮像情報とに基づいて、カラー映像信号を得る構成とを備えたことを特徴とする走査顕微鏡。 A first optical system for condensing laser light onto a sample by an objective lens, causing the laser light to relatively scan along the sample surface, and causing the first light receiving element to receive response light;
A second optical system that irradiates the sample with illumination light for color imaging information different from the laser light, and causes the second light receiving element to receive the response light;
A sample stage capable of moving the sample in three dimensions relative to the objective lens;
Means for storing the height of the sample stage when the first optical system is in focus;
Based on luminance information from the first light receiving element of the first optical system using the laser light and color imaging information from the second light receiving element of the second optical system using the illumination light, A scanning microscope comprising a configuration for obtaining a color video signal.
前記試料ステージの前記記憶された高さにおける前記第2受光素子からの焦点の合ったカラー撮像情報を記憶する手段を備えたことを特徴とする走査顕微鏡。 The scanning microscope according to claim 1, wherein
A scanning microscope comprising: means for storing focused color imaging information from the second light receiving element at the stored height of the sample stage.
前記第2受光素子はカラーCCDであって、その各画素ごとに前記第1光学系が合焦点となったときのカラー撮像情報を用いて焦点の合ったカラー映像信号を得るように構成したことを特徴とする走査顕微鏡。 The scanning microscope according to claim 1 or 2,
The second light receiving element is a color CCD, and is configured to obtain a focused color video signal using color imaging information when the first optical system is in focus for each pixel. A scanning microscope characterized by this.
前記第2受光素子は固体撮像素子であって、その各画素ごとに前記第1光学系が合焦点となったときのカラー撮像情報を用いて焦点の合ったカラー映像信号を得るように構成したことを特徴とする走査顕微鏡。 The scanning microscope according to claim 1 or 2,
The second light receiving element is a solid-state imaging element, and is configured to obtain a focused color video signal using color imaging information when the first optical system is in focus for each pixel. A scanning microscope characterized by that.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004177560A JP4044914B2 (en) | 2004-06-15 | 2004-06-15 | Scanning microscope |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004177560A JP4044914B2 (en) | 2004-06-15 | 2004-06-15 | Scanning microscope |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP18064797A Division JP3874893B2 (en) | 1997-06-20 | 1997-06-20 | Scanning microscope |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004258691A JP2004258691A (en) | 2004-09-16 |
JP4044914B2 true JP4044914B2 (en) | 2008-02-06 |
Family
ID=33128783
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004177560A Expired - Fee Related JP4044914B2 (en) | 2004-06-15 | 2004-06-15 | Scanning microscope |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4044914B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8241773B2 (en) | 2005-08-19 | 2012-08-14 | Lg Chem, Ltd. | Electrochemical device with high capacity and method for preparing the same |
JP5095935B2 (en) | 2005-11-15 | 2012-12-12 | オリンパス株式会社 | Microscope equipment |
JP4884764B2 (en) * | 2005-12-26 | 2012-02-29 | 大倉インダストリー株式会社 | Laser microscope |
-
2004
- 2004-06-15 JP JP2004177560A patent/JP4044914B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2004258691A (en) | 2004-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3874893B2 (en) | Scanning microscope | |
US9575304B2 (en) | Pathology slide scanners for fluorescence and brightfield imaging and method of operation | |
Jonkman et al. | Any way you slice it—a comparison of confocal microscopy techniques | |
US8106978B2 (en) | Image capturing apparatus generating image data having increased color reproducibility | |
JP4996304B2 (en) | Scanning microscope and its adjustment method | |
US10877255B2 (en) | High resolution pathology scanner with improved signal to noise ratio | |
US6590612B1 (en) | Optical system and method for composing color images from chromatically non-compensated optics | |
JP4044914B2 (en) | Scanning microscope | |
JP4185711B2 (en) | Microscope with multiple light sources | |
JP4044915B2 (en) | Scanning microscope | |
JP4185712B2 (en) | Color microscope | |
JP4050039B2 (en) | Scanning confocal microscope and its image construction method | |
JP5019279B2 (en) | Confocal microscope and method for generating focused color image | |
JP2006350363A (en) | Scanning microscope | |
JP2004029373A (en) | Color microscope | |
JP5996462B2 (en) | Image processing apparatus, microscope system, and image processing method | |
JP2000310734A (en) | Confocal microscope and adjusting method | |
Awamura et al. | Color laser microscope | |
JP4536845B2 (en) | Confocal microscope | |
CA3035109A1 (en) | Scanning microscope using a mosaic scan filter | |
JP4885439B2 (en) | Color image acquisition method and confocal laser microscope | |
JP2000321503A (en) | Automatic adjusting method for confocal microscope and confocal microscope | |
JP4300915B2 (en) | Microscope image processing system and image processing apparatus | |
JP2004145153A (en) | Confocal microscope with light quantity saturation display function | |
JP2004177732A (en) | Optical measuring device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040615 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070626 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070731 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070828 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071009 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20071113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071116 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101122 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131122 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |