JP2005274784A - Image processing device - Google Patents

Image processing device Download PDF

Info

Publication number
JP2005274784A
JP2005274784A JP2004085651A JP2004085651A JP2005274784A JP 2005274784 A JP2005274784 A JP 2005274784A JP 2004085651 A JP2004085651 A JP 2004085651A JP 2004085651 A JP2004085651 A JP 2004085651A JP 2005274784 A JP2005274784 A JP 2005274784A
Authority
JP
Japan
Prior art keywords
optical system
sample stage
observation optical
image
contrast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004085651A
Other languages
Japanese (ja)
Inventor
Yoshihisa Taniguchi
芳久 谷口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2004085651A priority Critical patent/JP2005274784A/en
Publication of JP2005274784A publication Critical patent/JP2005274784A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Automatic Focus Adjustment (AREA)
  • Lens Barrels (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To quicken focusing operation on a sample on whose surface a light transmissive film is formed. <P>SOLUTION: The respective contrast values c<SB>10</SB>, c<SB>11</SB>and c<SB>12</SB>of respective image data successively picked up when a sample stage 1 is made to descend stepwise are compared with a preset threshold Th. When the contrast values c<SB>10</SB>, c<SB>11</SB>and c<SB>12</SB>are less than the threshold Th, the sample stage 1 is made to descend stepwise by 1st pitch interval width Ha, and when a contrast value c<SB>13</SB>is more than the threshold Th, the sample stage 1 is made to descend stepwise by switching pitch interval width to 2nd pitch interval width Hb smaller than the 1st pitch interval width Ha, and when the contrast value exceeds a peak, the sample stage 1 is made to ascend stepwise by the 2nd pitch interval width Hb and restored to a height position attained when a contrast value c<SB>15</SB>of the peak is obtained. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、例えば半導体ウエハや液晶ディスブレイのガラス基板などの試料を顕微鏡等の観察光学系を通して観察するときの合焦画像の取得時間の短縮化を図った画像処理装置に関する。   The present invention relates to an image processing apparatus that shortens the acquisition time of a focused image when a sample such as a semiconductor wafer or a glass substrate of a liquid crystal display is observed through an observation optical system such as a microscope.

図9は画像処理装置における観察光学系の構成図である。試料台1上には、半導体ウエハ等の試料2が載置されている。この試料2の表面3上には、光透過性の保護膜4が形成されている。試料台1の上方には、顕微鏡5の対物レンズ6が設けられている。なお、対物レンズ6からの観察光は、途中の図示を省略するが接眼レンズ7に導かれる。   FIG. 9 is a configuration diagram of an observation optical system in the image processing apparatus. A sample 2 such as a semiconductor wafer is placed on the sample stage 1. On the surface 3 of the sample 2, a light-transmitting protective film 4 is formed. Above the sample stage 1, an objective lens 6 of the microscope 5 is provided. Note that the observation light from the objective lens 6 is guided to the eyepiece lens 7 although illustration in the middle is omitted.

試料2の表面3を観察するときは、試料台1を対物レンズ6を通る光軸Pと同一方向に上下移動させて、試料2の表面3を対物レンズ6を有する観察光学系の焦点面Fに一致させる。このような合焦動作をオートフォーカス機構によって行うと、図10に示すように対物レンズ6を有する観察光学系の焦点面Fが保護膜4の表面上に一致してしまうことがある。   When observing the surface 3 of the sample 2, the sample stage 1 is moved up and down in the same direction as the optical axis P passing through the objective lens 6, and the surface 3 of the sample 2 is the focal plane F of the observation optical system having the objective lens 6. To match. When such a focusing operation is performed by an autofocus mechanism, the focal plane F of the observation optical system having the objective lens 6 may coincide with the surface of the protective film 4 as shown in FIG.

このような問題を解決するために、特許文献1及び2には、保護膜4を表面3上に形成した試料2でも、その表面3上に合焦させるために、画像データのコントランス値を求め、このコントランス値に基づいて試料台1を位置決めする技術が記載されている。   In order to solve such a problem, Patent Documents 1 and 2 describe a contrast value of image data in order to focus on the surface 3 of the sample 2 in which the protective film 4 is formed on the surface 3. A technique for determining and positioning the sample stage 1 based on the contrast value is described.

特許文献1には、図11のF〜Fに示すように試料台1を間欠運動により所定ピッチ毎に下降させ、かつ図12に示すように試料台1の間欠運動のピッチ間隔毎の撮像タイミングで対物レンズ6を通して試料2を撮像する。この試料2の撮像タイミングは、試料台1の間欠運動により試料台1が停止する毎の各時刻t、t、…、t10毎に行なわれ、これら撮像により各画像データが取得される。そして、これら画像データ毎にそれぞれ各コントラスト値c、c、…、c10が求められる。 In Patent Document 1, as shown in F 1 to F 3 in FIG. 11, the sample stage 1 is lowered at predetermined pitches by intermittent movement, and as shown in FIG. 12, for every pitch interval of the intermittent movement of the sample stage 1. The sample 2 is imaged through the objective lens 6 at the imaging timing. The imaging timing of the sample 2 is performed every time t 1 , t 2 ,..., T 10 every time the sample table 1 stops due to the intermittent motion of the sample table 1, and each image data is acquired by these imaging. . Then, the contrast values c 1 , c 2 ,..., C 10 are obtained for each of these image data.

これらコントラスト値は、対物レンズ6を有する観察光学系の焦点面Fが試料2の表面に一致していれば、画像が鮮明となり、試料2の表面の輪郭が明瞭に現れることから、高い値になる。従って、コントラスト値は、図12に示すように試料台1の間欠運動が進むにつれて高くなり、合焦位置となる時刻tでピークとなり、その後小さくなる。しかるに、ピーク値を示した時刻tおいて試料台1と対物レンズ6との間隔のときが、対物レンズ6を有する観察光学系の焦点面Fが試料2の表面に一致したときとなる。これにより、試料台1が時刻tでの試料台1と対物レンズ6との間隔に戻すことにより、合焦動作が完了することが記載されている。 These contrast values are high because the image becomes clear and the contour of the surface of the sample 2 appears clearly if the focal plane F of the observation optical system having the objective lens 6 coincides with the surface of the sample 2. Become. Therefore, the contrast value becomes higher as the intermittent motion of the sample stage 1, as shown in FIG. 12 proceeds, it peaked at time t 9 to the focus position, then smaller. However, when the interval between the time t 9 Oite sample table 1 and the objective lens 6 shown a peak value, and when the focal plane F of the observation optical system having an objective lens 6 coincides with the surface of the sample 2. Accordingly, by the sample stage 1 is returned to the interval between the sample stage 1 and the objective lens 6 at time t 9, it is described that the focusing operation is completed.

特許文献2には、図13に示すように試料台1を一定の速度で連続的に下降し、かつ一定のタイミング毎に対物レンズ6を通して試料2を撮像してその各画像データを記憶する。そして、これら画像データ毎にそれぞれ各コントラスト値c、c、…、c10を求め、これらコントラスト値c、c、…、c10がピークを越えると、ピーク値を示したときのコントラスト値cの画像データを読み出して合焦画像データとして表示されたり、使用されることが記載されている。このようにピーク値を示したときの画像データを読み出すので、試料台1を戻す動作が不要になり、特許文献1よりも合焦画像を取得する時間を短くできる。
特開平10−48512号公報 特開2001−59935号公報
In Patent Document 2, as shown in FIG. 13, the sample stage 1 is continuously lowered at a constant speed, and the sample 2 is imaged through the objective lens 6 at every constant timing, and each image data is stored. Then, they are each image data each contrast value c 1, c 2, ..., the determined c 10, these contrast value c 1, c 2, ..., when c 10 exceeds the peak, when a peak value or displayed as an in-focus image data by reading the image data of the contrast value c 9, it is described that is used. Thus, since the image data when the peak value is shown is read, the operation of returning the sample stage 1 becomes unnecessary, and the time for acquiring the focused image can be shortened compared to Patent Document 1.
Japanese Patent Laid-Open No. 10-48512 JP 2001-59935 A

しかしながら、特許文献1は、試料台1を間欠運動により所定ピッチ毎に下降させる毎に試料2を撮像し、これら撮像により取得された各画像データ毎にコントラスト値c、c、…、c10を求める演算を繰り返すために、演算処理の負担が重く、合焦画像を取得するまでの動作が遅くなる。 However, Patent Document 1 captures an image of the sample 2 every time the sample stage 1 is lowered at predetermined pitches by intermittent motion, and contrast values c 1 , c 2 ,..., C for each image data acquired by the imaging. Since the calculation for obtaining 10 is repeated, the load of the calculation process is heavy, and the operation until the focused image is acquired becomes slow.

特許文献2では、試料台1と観察光学系の焦点面Fとが離れていると、合焦動作の開始時にはコントラスト値の低い画像データを取得し続け、試料2が焦点面Fにある程度近付いてから合焦判定に必要なコントラスト値の高い画像データを取得できるようになる。このため、試料台1と観察光学系の焦点面Fとが離れている場合には、合焦判定に必要なコントラスト値の高い画像データを取得できるまでに時間がかかり、合焦動作が遅くなる。   In Patent Document 2, if the sample stage 1 and the focal plane F of the observation optical system are separated from each other, image data having a low contrast value is continuously acquired at the start of the focusing operation, and the sample 2 approaches the focal plane F to some extent. Therefore, it is possible to acquire image data having a high contrast value necessary for focus determination. For this reason, when the sample stage 1 and the focal plane F of the observation optical system are separated from each other, it takes time to acquire image data having a high contrast value necessary for focusing determination, and the focusing operation is slowed down. .

本発明は、試料を載置した試料台と、試料の観察像を得る観察光学系と、試料台と観察光学系との間隔を間欠運動させて相対的に変化させる移動駆動部と、観察光学系により得られた観察像を撮像する撮像装置と、撮像装置の撮像により取得された観察像の画像データのコントラスト値を演算し求めるコントラスト演算部と、コントラスト演算部により求められたコントラスト値と予め設定された閾値とを比較し、コントラスト値が閾値を下回っていれば、移動駆動部による試料台と観察光学系との間隔を間欠運動させるときのピッチ間隔を第1のピッチ間隔幅に制御し、コントラスト値が閾値を上回っていれば、ピッチ間隔を第1のピッチ間隔幅よりも狭い第2のピッチ間隔幅に制御するピッチ可変制御部と、試料台と観察光学系との間隔を第2のピッチ間隔幅で間欠運動させる毎に、コントラスト演算部により求められるコントラスト値がピーク値を越えると、移動駆動部を制御してピーク値を得た試料台と観察光学系との間隔に戻して観察光学系により合焦の観察像を得る合焦制御部とを具備した画像処理装置である。   The present invention includes a sample stage on which a sample is placed, an observation optical system that obtains an observation image of the sample, a movement drive unit that relatively changes the distance between the sample stage and the observation optical system by intermittent movement, and observation optics An imaging device that captures an observation image obtained by the system, a contrast calculation unit that calculates and calculates a contrast value of image data of an observation image acquired by imaging of the imaging device, and a contrast value that is obtained in advance by the contrast calculation unit Compared with the set threshold value, if the contrast value is lower than the threshold value, the pitch interval when the interval between the sample stage and the observation optical system by the movement driving unit is intermittently moved is controlled to the first pitch interval width. If the contrast value exceeds the threshold value, the pitch variable control unit that controls the pitch interval to a second pitch interval width narrower than the first pitch interval width, and the interval between the sample stage and the observation optical system When the contrast value obtained by the contrast calculation unit exceeds the peak value every time the intermittent motion is performed with the second pitch interval width, the distance between the sample stage that has obtained the peak value by controlling the movement driving unit and the observation optical system is set. The image processing apparatus includes a focusing control unit that returns and obtains a focused observation image by the observation optical system.

本発明は、試料を載置した試料台と、試料の観察像を得る観察光学系と、試料台と観察光学系との間隔を相対的に定速度で連続的に変化させる移動駆動部と、観察光学系により得られた観察像を一定のタイミング毎に撮像する撮像装置と、撮像装置の撮像により取得された観察像の画像データを記憶する記憶部と、撮像装置の撮像により取得された観察像の画像データのコントラスト値を演算し求めるコントラスト演算部と、コントラスト演算部により求められたコントラスト値と予め設定された閾値とを比較し、コントラスト値が閾値を下回っていれば、移動駆動部による試料台と観察光学系との間隔を連続的に変化させる速度を第1の速度に制御し、コントラスト値が閾値を上回っていれば、速度を第1の速度よりも遅い第2の速度に制御する速度可変制御部と、試料台と観察光学系との間隔を第2の速度で連続的に変化させている状態で、コントラスト演算部により求められるコントラスト値がピーク値を越えると、当該ピーク値を得た試料台と観察光学系との間隔のときの画像データを合焦画像として記憶部から読み出す合焦画像読出部とを具備した画像処理装置である。   The present invention includes a sample stage on which a sample is placed, an observation optical system that obtains an observation image of the sample, a movement drive unit that continuously changes the distance between the sample stage and the observation optical system at a relatively constant speed, An imaging device that captures an observation image obtained by the observation optical system at a certain timing, a storage unit that stores image data of the observation image acquired by imaging of the imaging device, and an observation acquired by imaging of the imaging device The contrast calculation unit that calculates and calculates the contrast value of the image data of the image is compared with the contrast value calculated by the contrast calculation unit and a preset threshold value, and if the contrast value is below the threshold value, the movement drive unit The speed at which the distance between the sample stage and the observation optical system is continuously changed is controlled to the first speed, and if the contrast value exceeds the threshold value, the speed is controlled to the second speed that is slower than the first speed. When the contrast value calculated by the contrast calculation unit exceeds the peak value while the interval between the variable speed control unit, the sample stage and the observation optical system is continuously changed at the second speed, the peak value And an in-focus image reading unit that reads out image data from the storage unit as an in-focus image as the in-focus image.

本発明は、表面に光透過性の膜が形成された試料に対する合焦動作の速い画像処理装置を提供できる。   The present invention can provide an image processing apparatus having a fast focusing operation for a sample having a light-transmitting film formed on the surface.

以下、本発明の第1の実施の形態について図面を参照して説明する。なお、図9と同一部分には同一符号を付してその詳しい説明は省略する。   Hereinafter, a first embodiment of the present invention will be described with reference to the drawings. The same parts as those in FIG. 9 are denoted by the same reference numerals, and detailed description thereof is omitted.

図1は画像処理装置の構成図である。試料台1には、移動機構10が設けられている。この移動機構10は、合焦動作時に、試料台1を対物レンズ6を通る光軸Pと同一方向(Z方向)にピッチ間隔毎に移動させる、本実施の形態では、下降させる間欠運動を行わせる。この移動機構10は、例えばモータ11の軸にボールネジ12を連結し、このボールネジ12に螺合する摺動体13を試料台1に設けた構成である。モータ11は、モータ駆動部14によって回転駆動する。   FIG. 1 is a configuration diagram of an image processing apparatus. The sample stage 1 is provided with a moving mechanism 10. This moving mechanism 10 moves the sample stage 1 at every pitch interval in the same direction (Z direction) as the optical axis P passing through the objective lens 6 during the focusing operation. Make it. The moving mechanism 10 has a configuration in which, for example, a ball screw 12 is connected to a shaft of a motor 11, and a slide body 13 that is screwed into the ball screw 12 is provided on the sample stage 1. The motor 11 is rotationally driven by the motor drive unit 14.

対物レンズ6を通る光軸P上には、CCD等の撮像装置15が設けられている。この撮像装置15は、対物レンズ6を有する観察光学系により得られた試料2の観察像を撮像してその画像信号を出力する。   An imaging device 15 such as a CCD is provided on the optical axis P passing through the objective lens 6. The imaging device 15 captures an observation image of the sample 2 obtained by the observation optical system having the objective lens 6 and outputs the image signal.

画像取り込み部16は、撮像装置15から出力された画像信号を取り込んでその画像データをファイル化する。これらファイル化された画像データは、制御部17の制御によって記憶部18に記憶される。なお、マルチスレッドにすると、コントラスト計算を別スレッドで計算させることができるので、高速化することができる。   The image capturing unit 16 captures the image signal output from the imaging device 15 and converts the image data into a file. The filed image data is stored in the storage unit 18 under the control of the control unit 17. Note that when multi-threading is used, contrast calculation can be performed by another thread, so that the speed can be increased.

画像処理部(コントラスト演算部)19は、記憶部18に順次記憶される各画像データを読み出し、これら画像データに対して例えば図3に示すように画像データDを斜め方向に横切るラインL上の輝度値を読み取り、これら輝度値からコントラスト値を演算し求める。   The image processing unit (contrast calculation unit) 19 reads each image data sequentially stored in the storage unit 18, and for example, on the line L that crosses the image data D in an oblique direction as shown in FIG. The brightness value is read and a contrast value is calculated from the brightness value.

試料2として例えば半導体ウエハや液晶ディスプレイのガラス基板などでは、その表面上に格子状の規則的なパターンが形成されている。このような格子状パターンに対して当該パターン方向と同一方向の各輝度値を読み取ってコントラスト値を求めても、そのコントラスト値は、画像データD全体のコントラスト値を表わさないため、画像データDに対して斜め方向に横切るラインL上の輝度値を読み取ることにより画像データD全体のコントラスト値を求める。なお、画像データD全体のコントラスト値は、斜め方向のラインL上の輝度値を読み取るに限らず、互いに交差する斜め方向の2本のラインL上の輝度値を読み取ってもよく、画像データD中の4隅の各領域内における輝度値を読み取ってもよい。   For example, a semiconductor wafer or a glass substrate of a liquid crystal display as the sample 2 has a lattice-like regular pattern formed on the surface thereof. Even when the brightness value in the same direction as the pattern direction is read for such a lattice pattern and the contrast value is obtained, the contrast value does not represent the contrast value of the entire image data D. On the other hand, the contrast value of the entire image data D is obtained by reading the luminance value on the line L that crosses in an oblique direction. The contrast value of the entire image data D is not limited to reading the luminance value on the diagonal line L, but may be the luminance value on two diagonal lines L intersecting each other. You may read the luminance value in each area | region of four inside corners.

制御部17は、画像処理部19により順次求められる各コントラスト値に基づいて試料台1を昇降させるときのピッチ間隔を制御するもので、ピッチ可変制御部20と、合焦制御部21とを有する。   The control unit 17 controls the pitch interval when the sample stage 1 is moved up and down based on the contrast values sequentially obtained by the image processing unit 19, and has a pitch variable control unit 20 and a focus control unit 21. .

ピッチ可変制御部20は、画像処理部19により順次求められる各コントラスト値と予め設定された閾値Thとを比較し、コントラスト値が閾値Thを下回っていれば、図4に示すように試料台1をステップ下降させるときのピッチ間隔を粗くした第1のピッチ間隔幅Haに制御する指令をモータ駆動部14に発し、コントラスト値が閾値Thを上回っていれば、ピッチ間隔を第1のピッチ間隔幅Haよりも狭い第2のピッチ間隔幅Hbに制御する指令をモータ駆動部14に発する。この第2のピッチ間隔幅Hbは、例えば対物レンズ6を有する観察光学系の被写界深度程度以内に設定するのが好適である。   The pitch variable control unit 20 compares each contrast value sequentially obtained by the image processing unit 19 with a preset threshold value Th. If the contrast value is lower than the threshold value Th, the sample table 1 as shown in FIG. A command is issued to the motor drive unit 14 to control the first pitch interval width Ha, which is a rough pitch interval when the step is lowered, and if the contrast value exceeds the threshold Th, the pitch interval is set to the first pitch interval width. A command for controlling the second pitch interval width Hb narrower than Ha is issued to the motor drive unit 14. For example, the second pitch interval width Hb is preferably set within the depth of field of the observation optical system having the objective lens 6.

合焦制御部21は、試料台1を第2のピッチ間隔幅Hbでステップ下降させる毎に、画像処理部19により順次求められる各コントラスト値がピーク値を越えると、モータ駆動部14に対して逆転の指令を発し、試料台1を第2のピッチ間隔幅Hbでステップ上昇させてコントラスト値がピーク値を得たときの試料台1の高さ位置に戻す。   When each contrast value sequentially obtained by the image processing unit 19 exceeds the peak value every time the sample stage 1 is stepped down by the second pitch interval width Hb, the focusing control unit 21 causes the motor driving unit 14 to A reverse rotation command is issued, and the sample stage 1 is stepped up by the second pitch interval width Hb to return to the height position of the sample stage 1 when the peak value of the contrast value is obtained.

次に、上記の如く構成された装置の合焦動作について説明する。   Next, the focusing operation of the apparatus configured as described above will be described.

合焦動作の開始時、試料台1は、上昇し、対物レンズ6に対して接近されている。従って、合焦動作では、試料台1を下降させて対物レンズ6から遠ざける。これにより、試料台1を上昇させたときに対物レンズ6が試料台1に当接するのを予め回避できる。   At the start of the focusing operation, the sample stage 1 is raised and approached to the objective lens 6. Therefore, in the focusing operation, the sample stage 1 is lowered and moved away from the objective lens 6. Thereby, it can avoid beforehand that the objective lens 6 contact | abuts the sample stand 1 when the sample stand 1 is raised.

ピッチ可変制御部20は、図4に示すように粗い第1のピッチ間隔幅Haで試料台1を下降させる指令をモータ駆動部14に発する。この指令を受けたモータ駆動部14は、第1のピッチ間隔幅Haに対応する期間だけモータ11を回転駆動し、これら回転駆動の後に所定の停止期間Sだけモータ11を停止する間欠運動を行わせる。これにより、モータ11が各時刻t10、t11、t12毎に第1のピッチ間隔幅Haに対応する期間だけ回転駆動すると、この回転によりボールネジ12が回転することにより、このボールネジ12に螺合する摺動体13を介して試料台1が第1のピッチ間隔幅Haでステップ下降する。 As shown in FIG. 4, the variable pitch control unit 20 issues a command to the motor drive unit 14 to lower the sample table 1 with a coarse first pitch interval width Ha. Upon receiving this command, the motor drive unit 14 rotates and drives the motor 11 for a period corresponding to the first pitch interval width Ha, and performs an intermittent motion to stop the motor 11 for a predetermined stop period S after the rotation drive. Make it. As a result, when the motor 11 is driven to rotate at a time corresponding to the first pitch interval width Ha at each time t 10 , t 11 , t 12 , the ball screw 12 is rotated by this rotation, so that the ball screw 12 is screwed. The sample stage 1 is stepped down by the first pitch interval width Ha through the sliding body 13 to be joined.

試料台1がステップ下降する毎の各停止期間Sになると、撮像装置15は、対物レンズ6を有する観察光学系により得られた試料2の観察像を撮像してその画像信号を出力する。   In each stop period S each time the sample stage 1 moves down, the imaging device 15 captures an observation image of the sample 2 obtained by the observation optical system having the objective lens 6 and outputs the image signal.

画像取り込み部16は、一例として画像処理機能付のコンピュータのインタフェースボードなどが考えられ、撮像装置15から出力される画像信号を取り込んでその画像データをファイル化する。これら画像データは、制御部17の制御によってコンピュータのハードディスクなどの記憶部18に記憶される。なお、撮像装置15が常時、試料2の観察像を撮像してその画像信号を出力するものであれば、画像処理部19は、間欠運動の各停止期間S毎に撮像装置15からの画像信号を取り込んでファイル化する。   As an example, the image capturing unit 16 may be a computer interface board with an image processing function. The image capturing unit 16 captures an image signal output from the imaging device 15 and converts the image data into a file. These image data are stored in a storage unit 18 such as a hard disk of a computer under the control of the control unit 17. In addition, if the imaging device 15 always captures an observation image of the sample 2 and outputs the image signal, the image processing unit 19 outputs the image signal from the imaging device 15 for each stop period S of the intermittent motion. Is taken into a file.

画像処理部19は、図2に示す合焦動作フローチャートに従って動作する。画像処理部19は、ステップ#1において、上記の如く撮像装置15から出力される画像信号を取り込んでその画像データをファイル化し、記憶部18に記憶する。   The image processing unit 19 operates according to the focusing operation flowchart shown in FIG. In step # 1, the image processing unit 19 captures the image signal output from the imaging device 15 as described above, converts the image data into a file, and stores the file in the storage unit 18.

画像処理部19は、ステップ#2において、記憶部18に順次記憶される各画像データを読み出し、これら画像データの各コントラスト値c10、c11、c12を順次演算し求め、ステップ#3において、各コントラスト値c10、c11、c12(=ct)や対物レンズ6と試料台1との距離ht、時刻t10、t11、t12などのデータを記憶部18に記憶する。 The image processing unit 19, at step # 2, reads out the image data sequentially stored in the storage unit 18 sequentially obtains operation each contrast value c 10, c 11, c 12 of the image data, in step # 3 The storage unit 18 stores data such as the contrast values c 10 , c 11 , c 12 (= ct), the distance ht between the objective lens 6 and the sample stage 1, times t 10 , t 11 , t 12 .

ピッチ可変制御部20は、ステップ#4において、画像処理部19により順次求められる各コントラスト値c10、c11、c12と予め設定された閾値Thとを比較する。この比較の結果、各コントラスト値c10、c11、c12が閾値Thを下回っていれば、ピッチ可変制御部20は、ステップ#5において、図4に示すように試料台1をステップ下降させるときのピッチ間隔を第1のピッチ間隔幅Haに維持する。 In step # 4, the variable pitch control unit 20 compares the contrast values c 10 , c 11 , c 12 sequentially obtained by the image processing unit 19 with a preset threshold Th. As a result of this comparison, if each of the contrast values c 10 , c 11 , c 12 is below the threshold Th, the pitch variable control unit 20 steps down the sample stage 1 as shown in FIG. 4 in step # 5. Is maintained at the first pitch interval width Ha.

このように第1のピッチ間隔幅Haで試料台1が順次ステップ下降し、例えば時刻t13において画像取り込み部16により取り込んだ画像データのコントラスト値c13が閾値Thを上回ると、ピッチ可変制御部20は、ステップ#6において、ピッチ間隔を第1のピッチ間隔幅Haよりも狭い第2のピッチ間隔幅Hbに切替え制御する指令をモータ駆動部14に発する。これにより、試料台1は、各時刻t13、t14、…、t16毎に例えば対物レンズ6を有する観察光学系の被写界深度の2〜3倍の範囲内の第2のピッチ間隔幅Hbでステップ下降する。 With such sample table 1 is lowered successively step at a first pitch interval width Ha, the contrast value c 13 of the image data captured by the image capture unit 16 exceeds the threshold value Th, for example, in a time t 13, the pitch variation control unit In step # 6, 20 issues a command to the motor drive unit 14 to switch and control the pitch interval to the second pitch interval width Hb that is narrower than the first pitch interval width Ha. Thereby, the sample stage 1 has the second pitch interval within a range of 2 to 3 times the depth of field of the observation optical system having the objective lens 6 at each time t 13 , t 14 ,..., T 16 , for example. Step down with the width Hb.

試料台1が第2のピッチ間隔幅Hbに切り替えられてステップ下降する状態でも、画像処理部19は、撮像装置15の撮像により取得された各画像データの各コントラスト値c13、c14、…、c16を順次演算し求める。 Even in a state where the sample stage 1 is switched to the second pitch interval width Hb and stepped down, the image processing unit 19 performs the contrast values c 13 , c 14 ,... Of each image data acquired by the imaging device 15. , C 16 are sequentially calculated and obtained.

試料台1が第2のピッチ間隔幅Hbで順次ステップ下降すると、撮像装置15により撮像される画像は、図5(a)に示すような不鮮明な状態から、対物レンズ6を有する観察光学系の焦点面Fが試料2の表面に一致すると、同図(b)に示すような試料2の表面の輪郭が明瞭に現れる鮮明な状態になり、再び同図(c)に示すような不鮮明な状態になる。これにより、観察光学系の焦点面Fが試料2の表面に一致したときのコントラスト値がピーク値となる。ここで、図4に示すように試料台1を第2のピッチ間隔幅Hbでステップ下降させたときの各コントラスト値c13、c14、…、c16は、コントラスト値c13、c14、c15と順次高くなり、コントラスト値c16で低下している。 When the sample stage 1 is stepped down step by step with the second pitch interval width Hb, the image picked up by the image pickup device 15 is from the unclear state as shown in FIG. 5A from the observation optical system having the objective lens 6. When the focal plane F coincides with the surface of the sample 2, the surface of the sample 2 as shown in FIG. 2B is clearly displayed, and the image becomes unclear as shown in FIG. become. Thereby, the contrast value when the focal plane F of the observation optical system coincides with the surface of the sample 2 becomes a peak value. Here, as shown in FIG. 4, the contrast values c 13 , c 14 ,..., C 16 when the sample stage 1 is stepped down by the second pitch interval width Hb are contrast values c 13 , c 14 , sequentially increases and c 15, is reduced by the contrast value c 16.

合焦制御部21は、ステップ#8において、画像処理部19により順次求められる各コントラスト値c13、c14、…、c16同士を順次比較して大きいコントラスト値c15をピーク値として記憶すると共に、コントラストのピーク値c15、すなわち合焦位置を越えたものと判断する。そして、合焦制御部21は、ステップ#9において、ピーク値のコントラスト値c15を越えた時刻t16においてモータ駆動部14に対して逆転の指令を発し、試料台1を第2のピッチ間隔幅Hbでステップ上昇させて、ピークのコントラスト値c15を得たときの高さ位置に試料台1を戻す。この結果、時刻t17で対物レンズ6を有する観察光学系の焦点面Fは、試料2の表面に一致して合焦動作が完了する。 Focus control section 21, at step # 8, successively each contrast value determined c 13 by the image processing unit 19, c 14, ..., is stored as a peak value greater contrast value c 15 sequentially compares the c 16 together At the same time, it is determined that the contrast peak value c 15 , that is, the in-focus position is exceeded. Then, the focusing controller 21, in step # 9, issues an instruction of reverse rotation to the motor drive unit 14 at time t 16 beyond the contrast value c 15 of the peak value, the sample stage 1 second pitch distance and step is raised by the width Hb, returning the sample stage 1 in the height position when the obtained contrast value c 15 peaks. As a result, the focal plane F of the observation optical system having an objective lens 6 at time t 17, the focusing operation is completed in agreement with the surface of the sample 2.

このように上記第1の実施の形態によれば、試料台1をステップ下降させたときに順次撮像される各画像データの各コントラスト値c10、c11、c12と予め設定された閾値Thとを比較し、各コントラスト値c10、c11、c12が閾値Thを下回っていれば、試料台1を第1のピッチ間隔幅Haでステップ下降し、コントラスト値c13が閾値Thを上回ると、試料台1を第1のピッチ間隔幅Haよりも狭い第2のピッチ間隔幅Hbに切替えてステップ下降し、コントラスト値がピークを越えると、試料台1を第2のピッチ間隔幅Hbでステップ上昇させてピークのコントラスト値c15を得たときの高さ位置に戻す。 As described above, according to the first embodiment, the contrast values c 10 , c 11 , c 12 of each image data sequentially captured when the sample stage 1 is stepped down and the preset threshold Th If the contrast values c 10 , c 11 , c 12 are below the threshold Th, the sample stage 1 is stepped down by the first pitch interval width Ha, and the contrast value c 13 exceeds the threshold Th. Then, the sample stage 1 is switched to the second pitch interval width Hb that is narrower than the first pitch interval width Ha, and the step descends. When the contrast value exceeds the peak, the sample stage 1 is changed to the second pitch interval width Hb. step moved up back to the height position at which to obtain a contrast value c 15 peaks.

これにより、対物レンズ6を有する観察光学系の焦点面Fを、保護膜4の形成された試料2の表面上に対して一致させる合焦動作の時間を速くできる。例えば、図4に示すように合焦動作を時刻t17において完了することができ、従来での合焦完了時刻t18よりも時間tgだけ短縮できる。 Thereby, the time of the focusing operation | movement which makes the focal plane F of the observation optical system which has the objective lens 6 correspond with the surface of the sample 2 in which the protective film 4 was formed can be shortened. For example, can be completed at time t 17 a focusing operation as shown in FIG. 4, it can be shortened by focusing completion time t 18 time than tg in the conventional.

又、例えば対物レンズ6を有する観察光学系の被写界深度内又は被写界深度数倍、例えば2〜3倍の範囲内で少なくともピーク値を含む3点のコントラスト値を求める第2のピッチ間隔幅Hbでステップ下降させて合焦動作させるので、被写界深度の狭い対物レンズ6を用いても合焦動作ができ、かつ精細な画像を取得したい場合でも、高精度に合焦動作ができてその合焦画像を取得できる。   Further, for example, the second pitch for obtaining the contrast value of at least three points including the peak value within the depth of field of the observation optical system having the objective lens 6 or within the range of several times the depth of field, for example, 2 to 3 times. Since the focusing operation is performed with the step width lowered by the interval width Hb, the focusing operation can be performed even when the objective lens 6 having a narrow depth of field is used, and even when it is desired to obtain a fine image, the focusing operation can be performed with high accuracy. And the focused image can be acquired.

さらに、対物レンズ6を有する観察光学系の焦点面Fと試料2との間隔が離れている状態から合焦動作させても、従来の技術に比べ短時間で合焦画像を得ることができる。   Furthermore, even if the focusing operation is performed from a state where the distance between the focal plane F of the observation optical system having the objective lens 6 and the sample 2 is separated, a focused image can be obtained in a shorter time than the conventional technique.

次に、本発明の第2の実施の形態について図面を参照して説明する。なお、図1と同一部分には同一符号を付してその詳しい説明は省略する。   Next, a second embodiment of the present invention will be described with reference to the drawings. The same parts as those in FIG. 1 are denoted by the same reference numerals, and detailed description thereof is omitted.

図6は画像処理装置の構成図である。この画像処理装置の上記第1の実施の形態と相違するところは、モータ駆動部14は、モータ11に対して定速度で連続的に下降させる指令を発する。   FIG. 6 is a configuration diagram of the image processing apparatus. The difference from the first embodiment of the image processing apparatus is that the motor drive unit 14 issues a command for continuously lowering the motor 11 at a constant speed.

撮像装置15は、対物レンズ6を有する観察光学系により得られた試料2の観察像を一定のタイミング毎に撮像してその画像信号を出力する。なお、画像取り込み部16により撮像装置15から連続して出力される動画の画像信号を一定のタイミング毎に取り込んでもよい。   The imaging device 15 captures an observation image of the sample 2 obtained by the observation optical system having the objective lens 6 at a certain timing and outputs the image signal. Note that the image signal of the moving image continuously output from the imaging device 15 by the image capturing unit 16 may be captured at a certain timing.

制御部17は、画像処理部19により順次求められる各コントラスト値に基づいて試料台1を昇降させるときの速度を制御するもので、速度可変制御部22と、合焦画像読出部23とを有する。   The control unit 17 controls the speed when the sample stage 1 is moved up and down based on the contrast values sequentially obtained by the image processing unit 19, and includes a speed variable control unit 22 and a focused image reading unit 23. .

速度可変制御部22は、画像処理部19により順次求められたコントラスト値と予め設定された閾値Thとを比較し、コントラスト値が閾値Thを下回っていれば、モータ駆動部14に対して試料台1の下降速度を通常よりも速い第1の速度vに制御する指令を発し、コントラスト値が閾値Thを上回っていれば、試料台1の下降速度を第1の速度vよりも遅い第2の速度vに変速する指令を発する。 The speed variable control unit 22 compares the contrast value sequentially obtained by the image processing unit 19 with a preset threshold value Th, and if the contrast value is lower than the threshold value Th, the sample table for the motor driving unit 14 is used. If the command to control the descending speed of 1 to the first speed v 1 faster than normal is issued and the contrast value exceeds the threshold Th, the descending speed of the sample stage 1 is set to be slower than the first speed v 1 . A command for shifting to a speed 2 of 2 is issued.

合焦画像読出部23は、試料台1を第2の速度で連続的に下降させている状態で、画像処理部19により順次求められるコントラスト値がピーク値を越えると、当該ピーク値を得た試料台1の高さ位置のときの画像データを合焦画像として記憶部18から読み出してディスプレイ等に表示出力する。   The focused image reading unit 23 obtains the peak value when the contrast value sequentially obtained by the image processing unit 19 exceeds the peak value while the sample stage 1 is continuously lowered at the second speed. Image data at the height position of the sample stage 1 is read from the storage unit 18 as a focused image and displayed on a display or the like.

次に、上記の如く構成された装置の合焦動作について説明する。   Next, the focusing operation of the apparatus configured as described above will be described.

合焦動作の開始時、速度可変制御部22は、図7に示すように通常よりも速い第1の速度vで試料台1を連続的に下降させる指令をモータ駆動部14に発する。これにより、試料台1は、通常よりも速い第1の速度vで連続的に下降する。このとき、撮像装置15は、対物レンズ6を有する観察光学系により得られた試料2の観察像を一定のタイミング毎に撮像してその画像信号を出力する。画像取り込み部16は、撮像装置15からの画像信号を取り込んでその画像データをファイル化して記憶部18に記憶する。画像処理部19は、記憶部18に順次記憶される各画像データを読み出し、これら画像データの各コントラスト値c20、c21、c22を順次演算し求める。 At the start of the focusing operation, the variable speed control unit 22 issues a command to the motor drive unit 14 to continuously lower the sample stage 1 at a first speed v 1 that is faster than normal, as shown in FIG. Thereby, the sample stage 1 is continuously lowered at the first speed v 1 that is faster than usual. At this time, the imaging device 15 captures an observation image of the sample 2 obtained by the observation optical system having the objective lens 6 at every predetermined timing and outputs the image signal. The image capturing unit 16 captures an image signal from the imaging device 15, converts the image data into a file, and stores the file in the storage unit 18. The image processing unit 19 reads out each image data sequentially stored in the storage unit 18 and sequentially calculates and obtains each contrast value c 20 , c 21 , c 22 of these image data.

このとき各コントラスト値c20、c21、c22は、予め設定された閾値Thを下回っているので、速度可変制御部22は、図7に示すようにモータ駆動部14に対して試料台1の下降速度を通常よりも速い第1の速度vに制御維持する。そして、これらコントラスト値c20、c21、c22を求めるときの試料台1の各高さ位置の間隔は、試料台1が通常よりも速い第1の速度vで連続的に下降するので、広くなる。 At this time, since each contrast value c 20 , c 21 , c 22 is lower than a preset threshold value Th, the speed variable control unit 22 makes the sample table 1 with respect to the motor drive unit 14 as shown in FIG. Is maintained at a first speed v 1 that is faster than normal. The intervals between the height positions of the sample stage 1 when obtaining these contrast values c 20 , c 21 , c 22 are continuously lowered at the first speed v 1 at which the sample stage 1 is faster than usual. , Become wider.

試料台1の下降が進んで例えば時刻t23において画像取り込み部16により取り込んだ画像データのコントラスト値c23が閾値Thを上回ると、速度可変制御部22は、図6に示すようにモータ駆動部14に対して試料台1の下降速度を第1の速度vよりも遅い第2の速度vに変速する指令を発する。 If the contrast value c 23 of the image data captured by the image capture unit 16, for example, in a time t 23 is lowered advances of the sample table 1 is above the threshold value Th, variable speed controller 22, a motor drive unit as shown in FIG. 6 14, a command to shift the descending speed of the sample stage 1 to a second speed v 2 that is slower than the first speed v 1 is issued.

これ以降も、撮像装置15は、対物レンズ6を有する観察光学系により得られた試料2の観察像を一定のタイミング毎に撮像するので、画像処理部19は、記憶部18に順次記憶される各画像データの各コントラスト値c24、c25、c26を順次演算し求める。このとき、各コントラスト値c24、c25、c26を求めるときの試料台1の各高さ位置の間隔は、試料台1が第1の速度vよりも遅い第2の速度vで連続的に下降するので、狭くなる。そして、この試料台1の各高さ位置の間隔は、対物レンズ6を有する観察光学系の被写界深度以内に設定される。 Since then, the imaging device 15 captures the observation image of the sample 2 obtained by the observation optical system having the objective lens 6 at a certain timing, so that the image processing unit 19 is sequentially stored in the storage unit 18. Each contrast value c 24 , c 25 , c 26 of each image data is sequentially calculated and obtained. At this time, the intervals between the height positions of the sample stage 1 when obtaining the contrast values c 24 , c 25 , and c 26 are set at a second speed v 2 where the sample stage 1 is slower than the first speed v 1. Since it descends continuously, it becomes narrower. The interval between the height positions of the sample stage 1 is set within the depth of field of the observation optical system having the objective lens 6.

合焦制御部21は、画像処理部19により順次求められる各コントラスト値c24、c25、c26同士を順次比較して最も大きいコントラスト値c25をピーク値として判断すると、このときに対物レンズ6を有する観察光学系の焦点面Fが試料2の表面に一致したと判断し、当該ピーチ値を得た時刻t25のときにおける試料台1の高さ位置のときの画像データを合焦画像として記憶部18から読み出してディスプレイ等に表示出力する。 When the focus control unit 21 sequentially compares the contrast values c 24 , c 25 , and c 26 that are sequentially obtained by the image processing unit 19 and determines the largest contrast value c 25 as a peak value, the objective lens at this time It is determined that the focal plane F of the observation optical system having 6 coincides with the surface of the sample 2, and the image data at the height position of the sample stage 1 at the time t 25 when the peach value is obtained is the focused image. Are read out from the storage unit 18 and displayed on a display or the like.

このように上記第2の実施の形態によれば、試料台1を連続的に下降させたときに順次撮像される各画像データのコントラスト値が閾値Thを下回っていれば、試料台1の下降速度を通常よりも速い第1の速度vに制御し、コントラスト値が閾値Thを上回っていれば、試料台1の下降速度を第1の速度vよりも遅い第2の速度vに変速し、コントラスト値のピーク値を得た試料台1の高さ位置のときの画像データを合焦画像として記憶部18から読み出してディスプレイ等に表示出力する。 As described above, according to the second embodiment, if the contrast value of each image data sequentially captured when the sample stage 1 is continuously lowered is below the threshold Th, the sample stage 1 is lowered. If the speed is controlled to the first speed v 1 that is faster than normal and the contrast value exceeds the threshold Th, the descending speed of the sample stage 1 is changed to a second speed v 2 that is slower than the first speed v 1. The image data at the height position of the sample table 1 that has been shifted and obtained the peak value of the contrast value is read out from the storage unit 18 as a focused image and displayed on a display or the like.

これにより、対物レンズ6を有する観察光学系の焦点面Fを、保護膜4の形成された試料2の表面上に対して一致させる合焦動作の時間を、例えば、図7に示すように従来の合焦完了時刻t28からよりも時間thだけ短縮した時刻t25において完了でき、対物レンズ6を有する観察光学系の焦点面Fと試料2との間隔が離れている状態からでも合焦動作させるまでの時間を短縮できる。 Accordingly, the focusing operation time for matching the focal plane F of the observation optical system having the objective lens 6 with the surface of the sample 2 on which the protective film 4 is formed, for example, as shown in FIG. The focusing operation can be completed even at a time t 25 which is shorter than the focusing completion time t 28 by a time th 25 and the distance between the focal plane F of the observation optical system having the objective lens 6 and the sample 2 is separated. The time until it can be shortened.

又、試料台1を比較的遅い第2の速度vで下降させたときの各コントラスト値を求める試料台1の各高さ位置の間隔を、対物レンズ6を有する観察光学系の被写界深度以内に設定するので、高精度に合焦動作できて、精細な画像を取得できる。 Further, the distance between the height positions of the sample stage 1 for obtaining the contrast values when the sample stage 1 is lowered at the relatively slow second speed v 2 is set as the object field of the observation optical system having the objective lens 6. Since the depth is set within the depth, the focusing operation can be performed with high accuracy and a fine image can be acquired.

さらに、コントラスト値のピーク値を得たときの画像データを記憶部18から読み出してディスプレイ等に表示出力するので、試料台1を戻す動作を行う必要がなく、その分だけ合焦画像を得るまでの時間を短縮できる。   Furthermore, since the image data when the peak value of the contrast value is obtained is read from the storage unit 18 and displayed on a display or the like, there is no need to perform the operation of returning the sample stage 1, and until the focused image is obtained accordingly. Can be shortened.

次に、本発明の第3の実施の形態について図面を参照して説明する。なお、図1及び図6と同一部分には同一符号を付してその詳しい説明は省略する。   Next, a third embodiment of the present invention will be described with reference to the drawings. 1 and 6 are denoted by the same reference numerals, and detailed description thereof is omitted.

画像処理部19により順次求められる各画像データの各コントラスト値が低い試料2の場合、対物レンズ6を有する観察光学系の合焦面Fの付近でも各コントラスト値が閾値Thを越えない場合がある。   In the case of the sample 2 in which the contrast values of the respective image data sequentially obtained by the image processing unit 19 are low, the respective contrast values may not exceed the threshold Th even in the vicinity of the focal plane F of the observation optical system having the objective lens 6. .

この場合に対処するために、図1に示す画像処理装置では、合焦制御部21に図8に示すような試料台1の折り返し距離Lrを設定する。この折り返し距離Lrは、対物レンズ6を有する観察光学系の被写界深度の略10〜20倍に設定する。   In order to deal with this case, in the image processing apparatus shown in FIG. 1, the folding distance Lr of the sample stage 1 as shown in FIG. This folding distance Lr is set to approximately 10 to 20 times the depth of field of the observation optical system having the objective lens 6.

合焦制御部21は、試料台1をステップ下降させて順次求められた各コントラスト値が折り返し距離Lrを超えても閾値Thを上回らなければ、試料台1のステップ下降を停止して間欠運動方向を反転し、試料台1を第2のピッチ間隔Hbでステップ上昇させる。そして、合焦制御部21は、各コントラスト値が最大値なると、当該最大値を得た試料台1の高さ位置を合焦位置と判定する。この場合、合焦制御部21は、順次求められる各コントラスト値同士を順次比較して大きいコントラスト値をピーク値として記憶し、当該ピーク値すなわち合焦位置を越えたものと判断すると、再度モータ駆動部14に対して逆転の指令を発し、試料台1をピークのコントラスト値を得たときの高さ位置に試料台1を戻す。   If the contrast control unit 21 sequentially lowers the contrast value obtained by stepping down the sample stage 1 beyond the turn-back distance Lr, the focusing control unit 21 stops stepping down the sample stage 1 and performs the intermittent motion direction. And the sample stage 1 is stepped up at the second pitch interval Hb. Then, when each contrast value reaches the maximum value, the focus control unit 21 determines the height position of the sample stage 1 that has obtained the maximum value as the focus position. In this case, the focus control unit 21 sequentially compares the contrast values obtained sequentially and stores a large contrast value as a peak value. When it is determined that the peak value, that is, the focus position is exceeded, the motor drive is performed again. A reverse rotation command is issued to the unit 14, and the sample stage 1 is returned to the height position when the sample table 1 obtains the peak contrast value.

一方、図6に示す画像処理装置では、図1に示す画像処理装置と同様に、合焦制御部21に試料台1の折り返し距離Lrを設定する。   On the other hand, in the image processing apparatus illustrated in FIG. 6, the folding distance Lr of the sample stage 1 is set in the focusing control unit 21 as in the image processing apparatus illustrated in FIG. 1.

合焦画像読出部23は、試料台1を連続的に下降させて順次求められた各コントラスト値が折り返し距離Lrを超えても閾値Thを上回らなければ、試料台2の連続的な下降を停止し、試料台2の移動方向を反転して比較的遅い第2の速度vで連続的に上昇させる。そして、合焦画像読出部23は、各コントラスト値が最大値なると、当該最大値を得た試料台1の高さ位置を合焦位置と判定し、このときの画像データを合焦画像として記憶部18から読み出す。 The focused image reading unit 23 stops the continuous lowering of the sample stage 2 if the contrast values sequentially obtained by sequentially lowering the sample stage 1 exceed the turn-back distance Lr and do not exceed the threshold Th. and continuously increase at a relatively slow second velocity v 2 by reversing the direction of movement of the sample stage 2. Then, when each contrast value reaches the maximum value, the focused image reading unit 23 determines the height position of the sample table 1 that has obtained the maximum value as the focused position, and stores the image data at this time as a focused image. Read from unit 18.

このように上記第3の実施の形態によれば、画像データのコントラスト値が低い特殊な試料2であって、コントラスト値が閾値Thを越えなくても、小さな第2のピッチ間隔Haで確実に合焦のピーク点を検出して、対物レンズ6を有する観察光学系の被写界深度以内に高精度に合焦動作できて、精細な画像を取得できる。   As described above, according to the third embodiment, the sample 2 is a special sample 2 with a low contrast value of the image data, and even if the contrast value does not exceed the threshold value Th, it is ensured with a small second pitch interval Ha. A focus peak point is detected, and a focusing operation can be performed with high accuracy within the depth of field of the observation optical system having the objective lens 6 so that a fine image can be obtained.

なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。   Note that the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Further, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine suitably the component covering different embodiment.

上記第1及び第2の実施の形態では、試料台1をステップ下降させたり、連続的に下降させているが、対物レンズ6を有する観察光学系をステップ上昇させたり、連続的に上昇させてもよい。この場合、観察光学系を上昇させたときにコントラスト値のピークが現れるように、対物レンズ6を下降させて試料台1に接近させた高さ位置から上昇させる。   In the first and second embodiments, the sample stage 1 is stepped down or continuously lowered, but the observation optical system having the objective lens 6 is stepped up or continuously raised. Also good. In this case, the objective lens 6 is lowered and raised from the height position approaching the sample stage 1 so that the peak of the contrast value appears when the observation optical system is raised.

本発明に係る画像処理装置の第1の実施の形態を示す構成図。1 is a configuration diagram showing a first embodiment of an image processing apparatus according to the present invention. 同装置における合焦動作フローチャート。The focusing operation | movement flowchart in the same apparatus. 同装置における画像処理部によりコントラスト値を求めるために輝度値を読み取る画像データ上のラインを示す模式図。FIG. 3 is a schematic diagram showing lines on image data for reading a luminance value in order to obtain a contrast value by an image processing unit in the apparatus. 同装置において試料台を間欠運動させたときの試料の撮像タイミングを示す図。The figure which shows the imaging timing of a sample when a sample stand is intermittently moved in the same apparatus. 同装置によりステップ降下させたときに撮像される各画像の鮮明状態を示す模式図。The schematic diagram which shows the clear state of each image imaged when making it step-fall with the apparatus. 本発明に係る画像処理装置の第2の実施の形態を示す構成図。The block diagram which shows 2nd Embodiment of the image processing apparatus which concerns on this invention. 同装置において試料台を定速度で連続的に下降させたときの試料の撮像タイミングを示す図。The figure which shows the imaging timing of a sample when the sample stand is continuously descended at a constant speed in the apparatus. 本発明に係る画像処理装置の第3の実施の形態における試料台の折り返し距離を示す図。The figure which shows the folding distance of the sample stand in 3rd Embodiment of the image processing apparatus which concerns on this invention. 従来の画像処理装置における観察光学系の構成図。The block diagram of the observation optical system in the conventional image processing apparatus. 従来の画像処理装置による対物レンズを有する観察光学系の焦点面を試料面上の保護膜上に一致する不具合を示す図。The figure which shows the malfunction which matches the focal plane of the observation optical system which has the objective lens by the conventional image processing apparatus on the protective film on a sample surface. 従来の画像処理装置による試料台の間欠運動を示す図。The figure which shows the intermittent motion of the sample stand by the conventional image processing apparatus. 従来の画像処理装置による間欠運動させたときの試料の撮像タイミングを示す図。The figure which shows the imaging timing of the sample when carrying out the intermittent motion by the conventional image processing apparatus. 従来の画像処理装置による試料台を一定の速度で連続的に下降させたときの試料の撮像タイミングを示す図。The figure which shows the imaging timing of the sample when the sample stand by the conventional image processing apparatus is continuously lowered at a constant speed.

符号の説明Explanation of symbols

1:試料台、2:試料、3:試料表面、4:保護膜、5:顕微鏡、6:対物レンズ、7:接眼レンズ、10:移動機構、11:モータ、12:ボールネジ、13:摺動体、14:モータ駆動部、15:撮像装置、16:画像取り込み部、17:制御部、18:記憶部、19:画像処理部(コントラスト演算部)、20:ピッチ可変制御部、21:合焦制御部、22:速度可変制御部、23:合焦画像読出部。   1: sample stage, 2: sample, 3: sample surface, 4: protective film, 5: microscope, 6: objective lens, 7: eyepiece lens, 10: moving mechanism, 11: motor, 12: ball screw, 13: sliding body , 14: motor drive unit, 15: imaging device, 16: image capturing unit, 17: control unit, 18: storage unit, 19: image processing unit (contrast calculation unit), 20: variable pitch control unit, 21: focusing Control unit, 22: speed variable control unit, 23: focused image reading unit.

Claims (7)

試料を載置した試料台と、
前記試料の観察像を得る観察光学系と、
前記試料台と前記観察光学系との間隔を間欠運動させて相対的に変化させる移動駆動部と、
前記観察光学系により得られた前記観察像を撮像する撮像装置と、
前記撮像装置の撮像により取得された前記観察像の画像データのコントラスト値を演算し求めるコントラスト演算部と、
前記コントラスト演算部により求められた前記コントラスト値と予め設定された閾値とを比較し、前記コントラスト値が前記閾値を下回っていれば、前記移動駆動部による前記試料台と前記観察光学系との間隔を間欠運動させるときのピッチ間隔を第1のピッチ間隔幅に制御し、前記コントラスト値が前記閾値を上回っていれば、前記ピッチ間隔を前記第1のピッチ間隔幅よりも狭い第2のピッチ間隔幅に制御するピッチ可変制御部と、
前記試料台と前記観察光学系との間隔を前記第2のピッチ間隔幅で間欠運動させる毎に、前記コントラスト演算部により求められる前記コントラスト値がピーク値を越えると、前記移動駆動部を制御して前記ピーク値を得た前記試料台と前記観察光学系との間隔に戻して前記観察光学系により合焦の前記観察像を得る合焦制御部と、
を具備したことを特徴とする画像処理装置。
A sample stage on which the sample is placed;
An observation optical system for obtaining an observation image of the sample;
A movement drive unit that intermittently moves the distance between the sample stage and the observation optical system to change relatively,
An imaging device for capturing the observation image obtained by the observation optical system;
A contrast calculation unit for calculating a contrast value of image data of the observation image acquired by imaging of the imaging device;
The contrast value obtained by the contrast calculation unit is compared with a preset threshold value, and if the contrast value is below the threshold value, the distance between the sample stage and the observation optical system by the movement driving unit If the contrast value exceeds the threshold value, the pitch interval is controlled to the first pitch interval width, and the pitch interval is narrower than the first pitch interval width. A variable pitch control unit that controls the width;
When the interval between the sample stage and the observation optical system is intermittently moved at the second pitch interval width, and the contrast value obtained by the contrast calculation unit exceeds a peak value, the movement driving unit is controlled. A focusing control unit that obtains the focused observation image by the observation optical system by returning to the interval between the sample stage and the observation optical system obtained the peak value;
An image processing apparatus comprising:
前記ピッチ可変制御部は、前記第2のピッチ間隔幅を前記観察光学系の被写界深度の2〜3倍に設定することを特徴とする請求項1記載の画像処理装置。 The image processing apparatus according to claim 1, wherein the pitch variable control unit sets the second pitch interval width to 2 to 3 times the depth of field of the observation optical system. 前記コントラスト演算部により求められた前記コントラスト値が合焦範囲を超えても前記閾値を上回らなければ、前記合焦制御部は、前記試料台と前記観察光学系との間隔の間欠運動方向を反転し、前記試料台と前記観察光学系との間隔を前記第2のピッチ間隔で間欠運動させる毎に前記コントラスト演算部により求められる前記コントラスト値が最大値になると、当該最大値を得た前記試料台と前記観察光学系との間隔に戻して前記観察光学系により合焦の前記観察像を得ることを特徴とする請求項1記載の画像処理装置。 If the contrast value obtained by the contrast calculation unit exceeds the threshold even if the contrast value exceeds the focusing range, the focusing control unit reverses the intermittent motion direction of the interval between the sample stage and the observation optical system. When the contrast value obtained by the contrast calculation unit reaches a maximum value every time the interval between the sample stage and the observation optical system is intermittently moved at the second pitch interval, the sample having the maximum value is obtained. The image processing apparatus according to claim 1, wherein the observation image is focused by the observation optical system by returning to a distance between the stage and the observation optical system. 試料を載置した試料台と、
前記試料の観察像を得る観察光学系と、
前記試料台と前記観察光学系との間隔を相対的に定速度で連続的に変化させる移動駆動部と、
前記観察光学系により得られた前記観察像を一定のタイミング毎に撮像する撮像装置と、
前記撮像装置の撮像により取得された前記観察像の画像データを記憶する記憶部と、
前記撮像装置の撮像により取得された前記観察像の画像データのコントラスト値を演算し求めるコントラスト演算部と、
前記コントラスト演算部により求められた前記コントラスト値と予め設定された閾値とを比較し、前記コントラスト値が前記閾値を下回っていれば、前記移動駆動部による前記試料台と前記観察光学系との間隔を連続的に変化させる速度を第1の速度に制御し、前記コントラスト値が前記閾値を上回っていれば、前記速度を前記第1の速度よりも遅い第2の速度に制御する速度可変制御部と、
前記試料台と前記観察光学系との間隔を前記第2の速度で連続的に変化させている状態で、前記コントラスト演算部により求められる前記コントラスト値がピーク値を越えると、当該ピーク値を得た前記試料台と前記観察光学系との間隔のときの前記画像データを合焦画像として前記記憶部から読み出す合焦画像読出部と、
を具備したことを特徴とする画像処理装置。
A sample stage on which the sample is placed;
An observation optical system for obtaining an observation image of the sample;
A movement drive unit for continuously changing the distance between the sample stage and the observation optical system at a relatively constant speed;
An imaging device that captures the observation image obtained by the observation optical system at certain timings;
A storage unit that stores image data of the observation image acquired by imaging of the imaging device;
A contrast calculation unit for calculating a contrast value of image data of the observation image acquired by imaging of the imaging device;
The contrast value obtained by the contrast calculation unit is compared with a preset threshold value, and if the contrast value is below the threshold value, the distance between the sample stage and the observation optical system by the movement driving unit A speed variable control unit that controls the speed for continuously changing the speed to the first speed, and controls the speed to a second speed that is slower than the first speed if the contrast value exceeds the threshold value. When,
When the interval between the sample stage and the observation optical system is continuously changed at the second speed and the contrast value obtained by the contrast calculation unit exceeds the peak value, the peak value is obtained. A focused image reading unit for reading out the image data from the storage unit as a focused image when the distance between the sample stage and the observation optical system;
An image processing apparatus comprising:
前記試料台と前記観察光学系との間隔が予め設定された折返し距離に到達しても前記コントラスト値が前記閾値を上回らなければ、前記合焦画像読出部は、前記試料台と前記観察光学系との間隔の変化方向を反転し、前記試料台と前記観察光学系との間隔を前記第2の速度で変化させて前記コントラスト演算部により求められる前記コントラスト値が最大値を得た前記試料台と前記観察光学系との間隔のときの前記画像データを合焦画像として前記記憶部から読み出すことを特徴とする請求項4記載の画像処理装置。 If the contrast value does not exceed the threshold value even when the interval between the sample stage and the observation optical system reaches a predetermined folding distance, the focused image reading unit The sample stage obtained by inverting the direction of change of the distance between the sample stage and the distance between the sample stage and the observation optical system at the second speed to obtain the maximum contrast value obtained by the contrast calculation unit The image processing apparatus according to claim 4, wherein the image data at the interval between the image and the observation optical system is read from the storage unit as a focused image. 前記折返し距離は、前記観察光学系の被写界深度の10〜20倍に設定することを特徴とする請求項5記載の画像処理装置。 6. The image processing apparatus according to claim 5, wherein the folding distance is set to 10 to 20 times the depth of field of the observation optical system. 前記試料は、表面に光透過性の膜が形成されたことを特徴とする請求項1又は4記載の画像処理装置。 The image processing apparatus according to claim 1, wherein the sample has a light-transmitting film formed on a surface thereof.
JP2004085651A 2004-03-23 2004-03-23 Image processing device Withdrawn JP2005274784A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004085651A JP2005274784A (en) 2004-03-23 2004-03-23 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004085651A JP2005274784A (en) 2004-03-23 2004-03-23 Image processing device

Publications (1)

Publication Number Publication Date
JP2005274784A true JP2005274784A (en) 2005-10-06

Family

ID=35174550

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004085651A Withdrawn JP2005274784A (en) 2004-03-23 2004-03-23 Image processing device

Country Status (1)

Country Link
JP (1) JP2005274784A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015031789A (en) * 2013-08-01 2015-02-16 オリンパス株式会社 Laser scanning microscope
CN106796343A (en) * 2014-10-06 2017-05-31 徕卡显微系统(瑞士)股份公司 Microscope
JP2018512609A (en) * 2015-02-18 2018-05-17 アボット ラボラトリーズ Method, system and apparatus for automatically focusing a microscope on a substrate

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015031789A (en) * 2013-08-01 2015-02-16 オリンパス株式会社 Laser scanning microscope
CN106796343A (en) * 2014-10-06 2017-05-31 徕卡显微系统(瑞士)股份公司 Microscope
JP2017534907A (en) * 2014-10-06 2017-11-24 ライカ マイクロシステムズ (シュヴァイツ) アクチエンゲゼルシャフトLeica Microsystems (Schweiz) AG microscope
CN106796343B (en) * 2014-10-06 2020-05-29 徕卡显微系统(瑞士)股份公司 Microscope
US10928619B2 (en) 2014-10-06 2021-02-23 Leica Microsystems (Schweiz) Ag Microscope
JP2018512609A (en) * 2015-02-18 2018-05-17 アボット ラボラトリーズ Method, system and apparatus for automatically focusing a microscope on a substrate
US10983305B2 (en) 2015-02-18 2021-04-20 Abbott Laboratories Methods for correctly orienting a substrate in a microscope

Similar Documents

Publication Publication Date Title
CN1856021B (en) Image-taking apparatus and focusing method
JP4874669B2 (en) Autofocus unit and digital camera
US9383569B2 (en) Magnification observation device
CN1091523A (en) The method for tracking target and the device thereof that are used for autozoom
CN1450398A (en) Image pick up apparatus and camera system thereof
US20060006308A1 (en) Autofocus control apparatus and method
EP3879172B1 (en) Machine vision based intelligent focusing method for a moving head lamp
CN105283791A (en) Image acquisition device and image acquisition device focusing method
JP2005114859A (en) Microscope
JP5255968B2 (en) Height measuring device and measuring method
JP2005274784A (en) Image processing device
JP5981241B2 (en) Microscope imaging apparatus and microscope imaging method
JP2006145793A (en) Microscopic image pickup system
JP4695558B2 (en) CMOS image sensor with automatic focusing function and camera device including the same
JP2014126819A (en) Imaging apparatus
JP2006227605A (en) Imaging apparatus, method of detecting focused position and recording medium readable by information processor
JPH1026725A (en) Automatic focusing device
JP2019211603A (en) Observed body imaging method using optical observation device, and optical observation device
WO2024014079A1 (en) Cell observation device and imaging method used in cell observation device
JP6982018B2 (en) Three-dimensional shape detection device, three-dimensional shape detection method, and three-dimensional shape detection program
JP2012150142A (en) Microscope control apparatus, microscope system and control method thereof
JP2006072154A (en) Microscopic device, microscopic unit and program
JP4308494B2 (en) Camera, subject image acquisition apparatus, automatic focusing system, and automatic focusing method
JP2004205289A (en) Image measuring instrument
JP2007299007A (en) Object image acquiring apparatus

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20070605