TWI764786B - 沿著試樣之期望的ｘ’方向成像該試樣的方法及顯微鏡系統 - Google Patents

Abstract

一種顯微鏡系統及方法允許沿著試樣掃描之期望的x’方向自XY平移台的x方向有角度地偏移，並旋轉與顯微鏡關聯的影像感測器以放置影像感測器的畫素列使其與期望的x’方向實質上平行。判斷相對於x方向x’方向的偏移角度並利用XY平移台來相對於影像感測器沿著期望的x’方向移動試樣至不同位置，而在y’方向中相對於檢體影像感測器無實質上的位移，該y’方向與檢體的x’方向呈正交。該移動是依據偏移角度。

Description

沿著試樣之期望的ｘ’方向成像該試樣的方法及顯微鏡系統

本發明一般涉及顯微鏡成像技術。尤其，本發明提供用於將相機/影像感測器與試樣對準之設備及方法以沿著期望的方向精準地掃描通過試樣。 [相關申請案之交互參照]

本申請案主張於2017年2月10日申請之美國臨時申請案第62/457,470號之優先權。

在顯微術中，試樣中欲成像之關注區域常常比藉由顯微鏡取得單一影像而可顯示的更大。因此，採用掃描技術來成像一整個期望的區域。於自動掃描中，在顯微鏡的物鏡下藉由一XY平移台移動試樣，使顯微鏡得以掃描通過期望的區域，並收集多個影像然後加以匯總或縫合來形成單一個較大的影像。可使用標準軟體技術或藉由非常精準的平台移動反饋來確保在特定的位置擷取這些影像，使得當擷取了第一影像，平台移動的位置剛好等於第一影像之寬度(且無高度方向的移動)並擷取第二影像然後在交界處將兩者連接來完成此縫合。若夠精準，第一影像的左邊緣與第二影像的右邊緣將完全相配及互補。

將相機畫素相對於試樣對準一特定定向並接著在一特定期望方向中並以維持該期望定向的方式掃描試樣往往是有利的。例如，矽晶圓上的構件(例如，微電子裝置或諸如透過光刻而得之圖案化薄膜)時常以列(x方向)或行(y方向)為定向，而將相機畫素列與一構件列平行對準或將相機畫素列與一構件行平行對準並接著準確地沿著期望的列或行掃描同時保持兩者間的平行關係是有幫助的。

在當前最先進的技術中，往往會藉由肉眼觀察將相機畫素定向手動對準平台之XY行程，有鑑於通常牽涉到的大小比例，這種方式無法為眾多成像需求提供適當的準確度水準。準確將畫素列與平台的x方向對準以及將畫素行與平台的y方向對準的機率很低。在這個很可能不準確的對準之後，相對於平台旋轉試樣以試圖將影像感測器的畫素列與掃描試樣的期望x’方向對準及/或畫素行與掃描試樣的期望y’方向對準。換言之，相對於XY平移台旋轉試樣以將試樣之期望的x’掃描方向定位成與平台的x方向移動平行及/或將試樣之期望的y’掃描方向定位成與平台的y方向移動平行(亦即，希望x’方向與x方向相同且希望y’方向與y方向相同)。先前已經視覺上對準XY平台之x方向與相機的畫素列(按照公理，平台的y方向與畫素行也對準)，在期望x方向或期望y方向中平台的移動維持期望的對準但僅在影像感測器畫素與平台的XY行程之手動對準極為準確及精準的情形下。

回到圖案化的矽晶圓範例，期望的x方向可能是微電路的一列，而此列與XY平移台的x方向移動平行，且因此與相機的畫素列平行。故可藉由在x方向中移動XY平移台而輕易掃描該微電路列，同時保持畫素列與微電路列之間的平行關係，且不在y’方向中位移影像感測器，以促成準確記錄與縫合。

因此，準確的結果取決於相機畫素、平台的XY行程、及試樣的期望x’及/或y’掃描方向的高準確對準。有鑑於加工中的正常容限及單單以肉眼觀察對準本質上的誤差，高準確對準很困難。即便只稍不對準，因為透過平移台移動試樣，影像感測器會在x’方向及/或y’方向中移至無法被接受的程度，故難以輕易分析影像及/或將其縫合在一起。另外，常希望以最少處理試樣的情形下分析試樣。遂本領域中需要一種用於對準及掃描的新方法而不依賴試樣移動並確保影像感測器與試樣之間的準確對準。

在第一實施例中，本發明提供一種沿著試樣之期望的x’方向成像該試樣的顯微鏡方法。該試樣被置於XY平移台上並可藉由該XY平移台加以移動以使其之部分置於影像感測器的視野內。該XY平移台在x方向及y方向中可移動以相對於該影像感測器移動該試樣，該影像感測器具有配置成畫素列及畫素行之複數個畫素，該試樣的該期望的x’方向自該XY平移台之該x方向有角度地偏移以界定相對於其之斜度和偏移角度，該影像感測器一次僅看到該試樣的一離散區段。該方法包含下列步驟：旋轉該影像感測器使得該些畫素列與該試樣的該期望的x’方向實質上平行；判斷與該XY平移台之該x方向相比下該期望的x’方向的該偏移角度；相對於在該旋轉步驟中經旋轉的該影像感測器建立該試樣之第一位置，該第一位置將該試樣的至少一部分置於該影像感測器的該視野內；以及在該判斷步驟及該建立步驟之後，沿著該期望的x’方向連同該XY平移台移動該試樣至第二位置，其中該第二位置將該試樣的至少第二部份置於該影像感測器的該視野內，且該第二位置在該試樣的y’方向中無實質上的位移，該y’方向與該試樣的該x’方向呈正交，其中該移動步驟依據在該判斷步驟中所判斷之該偏移角度。

在第二實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該判斷偏移角度的步驟包括：測量沿著該期望的x’方向對準並因此界定該期望的x’方向之第一焦點特徵與第二焦點特徵之間的x距離和y距離，相對於該平移台的該x方向及該y方向測量該x距離和該y距離。

在第三實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該測量該x距離和該y距離之步驟包括：放置該第一焦點特徵使其與該影像感測器之一或更多目標畫素重疊，以及之後移動該試樣以放置該第二焦點特徵使其重疊該相同一或更多目標畫素，該測量該x距離和該y距離之步驟為達成該移動該試樣以放置該第二焦點特徵使其重疊該相同一或更多目標畫素之步驟所需的該平移台之x及y移動的量(ΔX,ΔY)。

在第四實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該些目標畫素涵蓋該影像感測器的中心。

在第五實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該旋轉該影像感測器的步驟識別該試樣上之沿著該x’方向延伸的軸界定特徵，並使用電腦視覺來對準該些畫素列使其與該試樣的該可偵測方向實質上平行。

在第六實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中在該測量該x距離和該y距離的步驟之前執行該旋轉該影像感測器的步驟。

在第七實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該旋轉該影像感測器的步驟包括取得適合用於計算該第一焦點特徵與該第二焦點特徵之間的參考線之影像的鑲嵌並且使用電腦視覺將該影像感測器的該些畫素列與該參考線對準。

在第八實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中在進行該測量該x距離和該y距離的步驟的同時進行該該取得影像鑲嵌的步驟。

在第九實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中，在該旋轉該影像感測器的步驟之前，該方法包括對準該些畫素列使其與該XY平移台的該x方向實質上平行的步驟。

在第十實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該旋轉該影像感測器的步驟包括：識別該試樣上的軸界定特徵，該軸界定特徵具有沿著該期望的x’方向中延伸的可偵測形狀；以及使用電腦視覺來對準該些畫素列使其與該可偵測形狀實質上平行，以及該判斷該偏移角度的步驟包括：測量該影像感測器從該對準該些畫素列使其與該XY平移台的該x方向實質上平行的步驟之後其之位置到該旋轉該影像感測器的步驟之後其之位置的旋轉角度。

在第十一實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該XY平移台提供試樣夾頭來夾持該試樣，其中該試樣夾頭或置於其上之試樣包括參考標記，且該對準該些畫素列使其與該XY平移台的該x方向實質上平行的步驟包括：將該參考標記置於該影像感測器的該視野內的第一位置並取得影像資料以判斷相對於該些畫素列該參考標記之該位置的第一畫素列數，僅沿著該XY平移台的該x方向移動該試樣夾頭以將該參考標記置於該影像感測器的該視野內的第二位置並取得影像資料以判斷相對於該些畫素列該參考標記之該位置的第二畫素列數，以及在該些放置及移動步驟之後，旋轉該影像感測器以將該參考標記置於具有第三畫素列數之第三位置，該第三畫素列數介於該第一畫素列數與該第二畫素列數之間。

在第十二實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中，在該旋轉該影像感測器以將該參考標記置於第三位置的步驟之後，重複該些(i)將該參考標記置於第一位置，(ii)僅沿著該x方向移動該試樣夾頭，以及(iii)旋轉該影像感測器以將該參考標記置於第三位置之步驟直到該些畫素列與該XY平移台的該x方向實質上平行。

在第十三實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中在該對準該些畫素列使其與該XY平移台的該x方向實質上平行的步驟之後進行該判斷步驟。

在第十四實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該旋轉該影像感測器的步驟包括：識別該試樣上的軸界定特徵，該軸界定特徵具有沿著該期望的x’方向中延伸的可偵測形狀；以及使用電腦視覺來對準該些畫素列使其與該可偵測形狀實質上平行，以及該判斷該偏移角度的步驟包括：測量該影像感測器從該對準該些畫素列使其與該XY平移台的該x方向實質上平行的步驟之後其之位置到該旋轉該影像感測器的步驟之後其之位置的旋轉角度。

在第十五實施例中，本發明提供如上述實施例的任何者中之顯微鏡方法，其中該測量該影像感測器之該旋轉角度的步驟包括從旋轉該影像感測器的儀器獲得信號輸出。

在第十六實施例中，本發明提供一種顯微鏡系統，包含：顯微鏡；記錄影像資料的影像感測器，該影像感測器包括畫素列及畫素行；XY平移台；在該XY平移台上並由該影像感測器觀看的試樣，其中該XY平移台在x方向及y方向中可移動以相對於該影像感測器移動該試樣，該影像感測器具有配置成畫素列及畫素行之複數個畫素，其中該試樣呈現沿著x’方向之特徵，該x’方向自該XY平移台的該x方向有角度地偏移，以界定相對於其之偏移角度，該試樣進一步包括第一焦點特徵及第二焦點特徵，該處理器用以：相對於該試樣旋轉該影像感測器使得該些畫素列與該試樣的該x’方向實質上平行；移動該XY平移台；判斷與該XY平移台之該x方向相比下該x’方向的該偏移角度；以及藉由下列在該期望的x’方向中掃描通過該試樣：相對於當該些畫素列與該x’方向平行時之該影像感測器建立該試樣之第一位置，該第一位置將該試樣的至少一部分置於該影像感測器的視野內；以及沿著該期望的x’方向連同該XY平移台移動該試樣至第二位置，其中該第二位置將該試樣的至少第二部份置於該影像感測器的該視野內，且該第二位置在該試樣的y’方向中無實質上的位移，該y’方向與該試樣的該x’方向呈正交，其中該移動依據該處理器所判斷之該偏移角度。

在第十七實施例中，本發明提供一種將影像感測器的畫素列與XY平移台的x方向對準的方法，其中該XY平移台提供試樣夾頭來夾持該試樣，由該XY平移台在x方向及y方向中移動該試樣夾頭，該方法包含下列步驟：在該試樣夾頭或置於該試樣夾頭上之試樣上提供參考標記；將該參考標記置於該影像感測器的該視野內的第一位置並取得影像資料以判斷相對於該影像感測器的該些畫素列該參考標記之該位置的第一畫素列數；僅沿著該XY平移台的該x方向移動該試樣夾頭以將該參考標記置於該影像感測器的該視野內的第二位置並取得影像資料以判斷相對於該些畫素列該參考標記之該位置的第二畫素列數；以及在該些放置及移動步驟之後，旋轉該影像感測器以將該參考標記置於具有第三畫素列數之第三位置，該第三畫素列數介於該第一畫素列數與該第二畫素列數之間，其中，在該旋轉該影像感測器以將該參考標記置於第三位置的步驟之後，重複該些(i)將該參考標記置於第一位置，(ii)僅沿著該x方向移動該試樣夾頭，以及(iii)旋轉該影像感測器以將該參考標記置於第三位置之步驟直到該些畫素列與該XY平移台的該x方向實質上平行。

有別於先前技術，本發明不試圖將期望的x’方向與XY台的x方向對準，反而允許掃描通過試樣之期望的x’方向與XY平移台的移動之x方向不對準。本發明旋轉影像感測器以達成期望的對準，藉此產生平移台之XY方向與影像感測器之畫素列及行之間的偏移。本發明亦判斷相對於XY平移台之x方向期望的x’方向之偏移角度或斜度。知道偏移角度/斜度，且畫素列與期望的掃描方向(亦即x’方向)對準後，可控制XY平移台以相對於影像感測器沿著期望的x’方向移動試樣至不同位置而無影像感測器相對於試樣在y’方向中之實質位移，y’方向與試樣的x’方向呈正交。

本發明亦提供一種方法以準確且精準地將影像感測器之畫素列與XY平移台之x方向對準。此對準因此引出一種用於判斷相對於XY平移台之x方向試樣之期望的x’方向之偏移角度/斜度的方法。

在此於各種實施例中揭露本發明之一般程序，且一旦建立程序的一般物理條件，可使用適當組態的顯微鏡系統及相關的電腦處理及顯微技術(諸如電腦視覺、運動控制及測量、等等)以自動方式進行程序。如此所用之「電腦視覺」應理解為涵蓋影像處理、圖案辨別、電腦視覺或影像分析之其他已知技術之演算法。首先，揭露一般顯微設備的態樣，隨後揭露本發明之方法。

第1A及1B圖顯示作為本發明之一範例的反射光顯微鏡系統2之一實施例，注意到本發明同樣適用於顯微鏡之其他類型，像是透射光顯微鏡、倒置顯微鏡、電子顯微鏡等等。典型的顯微鏡系統2之標準部件包括立架4、垂直照明器6、相機8、透鏡管10、物鏡轉換盤12、物鏡14、z軸聚焦臂16及XY平移台18。這些構件為熟悉本領域者已知。相機旋轉器20與XY平移台18一起合作以實現根據本發明之掃描及/或成像的獨特方法。

XY平移台為本領域中為人熟知者。可藉由步階、伺服、或線性馬達等等驅動XY平移台。XY平移台的組態典型為附加一單軸台至z軸聚焦臂16並附加第二單軸台至第一台，且彼此軸平移90度，不過實務上X及Y台之正交對準會有微小誤差。正交對準為一般已知的術語並指出這兩個台沿著x及y軸精準行進的事實，y軸的行進線必定與x軸的行進線呈正交。若這兩條行進線並非正交，x軸行進會在y方向中產生位置誤差。正交誤差可表示為理論x軸方向與根據發生在y方向中的位置誤差之經驗(empirical)x軸行進方向之間的偏移度。其亦可表示為每x方向行進長度y位置偏移(例如，每400mm的x方向行進10微米的y位置偏移)。

第2A、2B、及2C圖提供XY平移台之典型組態的一範例。第2A圖表示包含驅動馬達23、驅動螺桿24、及具有墊塊26a及26b的立架26之單軸台18a之前視圖。墊塊26a及26b含有軸承及承件(未圖示)以支撐驅動螺桿24，其藉由聯結器(未圖示)附接至驅動馬達23。第2b圖為單軸台18a之由上往下視圖。在此實施例中，有導桿28a及28b以提供試樣夾頭30之行進的穩定性及導引。試樣夾頭30含有導桿行進通過之線性軸承(未圖示)，以及根據驅動螺桿24的旋轉方向沿著驅動螺桿24推進滾珠螺母32。立架26設有安裝孔34a及34b以附接至z軸聚焦臂。第一單軸台18a及第二單軸台18b可連接在一起以創造出本領域者眾所周知的XY平移台，並顯示於第2C圖中，其中台18b保持台18a，其則保持試樣夾頭30。

僅提供此特定XY平移台作為一個範例，且應可理解到現有或此後創造出來之其他XY平移台的組態可用於本發明中。將從本揭露中理解到，本發明所使用的平移台僅需能夠允許XY台的精準控制並提供X及Y台的精準位置資訊。例如，在利用螺桿型驅動器的平移台中，反饋可為旋轉編碼器的形式，提供與行進距離直接成正比的信號。在其他平移台中，可使用線性編碼器來提供平台之位置的直接反饋。

第3A及3B圖提如第1A圖中所示之供相機旋轉器20的更多細節。應注意到此組態僅為例示性且可有導致相機將對於XY台旋轉之其他組態。在此，旋轉器外殼36設有凸緣38，使其可附接至透鏡管10並藉由鎖定螺絲40a及40b固定。旋轉相機座42保持在外殼36中並於軸承55內自由旋轉。連接器46用來附接相機8至相機座42。驅動馬達48連同滑輪50、驅動帶52及相機旋轉器滑輪54提供旋轉相機8之手段。可使用旋轉編碼器、電位器、步階器馬達控制或其他類似裝置，以得知角旋轉α。這些會提供與旋轉度成正比之信號輸出(例如至處理器22)，以從那個信號判斷出極為準確的偏移角度。在一些實施例中，在馬達裝配中設置旋轉編碼器以提供相機之確切的旋轉度。

應可理解到可藉由額外適當的硬體及一或更多處理器來控制顯微鏡的所有可調整部件。處理器22在此顯示為控制相機旋轉器20、相機8、及XY平移台18 (和z軸聚焦臂16)，且可隱含適當硬體及軟體並統一標示為處理器22。應可理解到可採用多個處理器，並且在圖中以處理器22的簡單使用涵蓋它們。亦可如此控制顯微鏡系統2之其他態樣。編程軟體以控制XY平移台18的X、Y、及Z移動，還有相機8之旋轉以及相機的啟動以透過影像感測器56記錄影像資料。也可藉由已知方法自動化聚焦。如本領域中已知，可精準得知平台行進並以旋轉或線性編碼器予以控制。可藉由旋轉編碼器、電位器、步階器馬達控制或其他來精準得知相機旋轉。使用這些精準定位裝置以提供輸入至協助進行本發明之軟體。採用電腦、可編程控制器或其他處理器，如處理器22，來分析輸入並提供控制輸出至平台及旋轉器。

相機8可含有用以擷取試樣S之影像(或影像資料)的影像感測器56(如CCD或CMOS感測器)。如此所用，「影像」不需為觀察者可見的影像之真實產生，並可簡單地需要取得可用來產生期望影像的數位資料。故在此所用之「影像」及「影像資料」並無顯著區別。影像感測器由畫素構成。一典型的感測器可有0.6至10百萬畫素或更多。畫素尺寸可變且典型介於3及10微米(um)且典型感測器尺寸可介於小於25平方毫米及大於800平方毫米。在第4圖中顯示影像感測器56的表示。很重要的請意識到影像感測器的視野(field of view)為顯微鏡物鏡14之放大率的函數。10×12mm之影像感測器在100倍放大率會有0.10×0.12mm的視野。可理解到放大的視野比觀察之試樣小許多。

如前述，所進行的程序包括兩個主要步驟，一為旋轉影像感測器使得影像感測器之畫素列與期望的x’方向(亦即期望的掃描方向)實質上平行的步驟，以及判斷與XY平移台的x方向相比下期望的x’方向之偏移角度的步驟。在此的不同實施例中，有時這些步驟分開且不同，而有時為重疊。根據一實施例，首先實施用於將影像感測器的畫素列與XY平移台的X方向對準的程序以在旋轉影像感測器以使畫素列與試樣的x’方向對準之前提供影像感測器之準確的參考位置。

當畫素列與x’方向實質上平行時，且得知偏移角度時，有利的試樣掃描可藉由下列實現：建立試樣相對於影像感測器之第一位置，第一位置將試樣的至少一部分置於影像感測器的視野內；並以XY平移台沿著期望的x’方向移動試樣至第二位置，其中第二位置將試樣的至少第二部份置於影像感測器的視野內，且第二位置實質上不在試樣的y’方向中位移，y’方向與試樣的x’方向呈正交。在移動步驟中，移動依據在判斷步驟中判定的偏移角度。

在一些實施例中，雖明確說明採用偏移角度，但可理解到可取代地使用與XY平移台之x’方向相比下期望的x’方向之斜度，且為了在此之目的「偏移角度」可表示或概念化為斜度(m)或角度(度數)，而斜度m的線之角度相對於一基線為tan-1(m)。亦即，知道斜度則可計算角度，且反之亦然。

參考第5至8圖說明本發明的第一實施例，其中顯示顯微鏡系統2的相關部件並有助於解釋本實施例所滿足的概括掃描情況。試樣S定位在設置在相機8的影像感測器56之附近的試樣夾頭30上。影像感測器56係在固定位置可圍繞其中心軸旋轉，使XY平移台18(由導桿表示)及試樣S可移動以將試樣S定位在影像感測器56下方。在一些實施例中，相機8及影像感測器56為顯微鏡的一部分，並應可理解到可用影像感測器56來記錄通過物鏡14及其他熟知的顯微鏡構件到達影像感測器56之影像資料。本領域中具有通常技藝者不需超出在此提出之示意圖以外的進一步揭露即可理解如何牽涉顯微鏡之使用。

在第5至8圖的此特定範例中，希望能沿著試樣的期望x’方向掃描試樣S。注意到，試樣的期望x’方向自試樣夾頭30之x及y移動方向(由x及y箭頭表示)有角度地偏移，因此期望的x’方向界定出一相對於台18之x及y方向之斜度。在此範例中，由繪於對準標記60與對準標記62之間的線指示x’行程之方向。為了揭露，偏移角度顯示成頗為顯著，且可能如此，但應可理解到本發明常用於偏移角度極小的情況中，因為即使是一度的非常微小部份之偏移角度都可能造成在高放大率之掃描及/或縫合影像的重大問題。

如第4圖中所見，及本領域中一般已知，影像感測器56包括畫素列及畫素行，其示意性呈現為畫素列P(1,1)至P(j,1)及畫素行P(1,1)至P(1,i)。如先前技術曾提及，相機8及其影像感測器56典型安裝成試圖將畫素列設置成與XY平移台18/試樣夾頭30之x方向平行，也因此將畫素行設置成與XY平移台18及試樣夾頭30的y方向平行。然而，因為無論透過自動化或，更典型地，視覺方法實現完美對準中之加工容限及限制，影像感測器56的列及行通常會與平移台18的x及y方向不對準。故在此實施例中，感測器列及行不與掃描的x’或y’期望方向平行。

對比先前技術，本發明旋轉相機8且進而包含在相機8內的影像感測器56，以將畫素列放置在與試樣之期望x’方向平行的位置。在一些實施例中，可藉由旋轉影像感測器、保持影像感測器之相機、或保持相機的顯微鏡或透過任何系統構件的適當操縱來完成相對旋轉。

在第5圖的實施例中，藉由評估試樣8上的兩個參考標記(在此對準標記)之間的斜度來判斷偏移角度。使畫素列置於與期望的x’方向實質上平行的影像感測器之旋轉可在評估斜度之前或之後實施，並且可實施這種旋轉的各種方法。

在第5圖中，可見到試樣S刻有兩個對準標記60及62。通過標記60及62之線的方向界定掃描之期望方向x’。作為參考，顯示穿過影像感測器56之正交中心線，且其交叉點標記影像感測器中心C。第6A圖繪示移動試樣夾頭30至一位置使得對準標記60定位在影像感測器56的中心。使用電腦視覺及標準平移台移動控制來判斷此移動及定位。記錄XY平移台18的座標並作為未來移動的起點。例如，根據在此之教示，處理器22可記錄並分析位置及移動資料。使用電腦視覺及運動控制(例如經由處理器22)，重新定位XY平移台18使得對準標記62置中於影像感測器56中，如第6B圖中所示。根據在此之教示，記錄或否則保留x方向及y方向中移動平台的距離以供後續。第7A圖繪示此移動並將x方向中的改變標為ΔX而y方向中的改變標為ΔY。

雖將對準標記60及62聚焦到影像感測器56的中心C以評估ΔX及ΔY，可理解到可指定任何畫素或畫素組作為放置對準標記並評估ΔX及ΔY之目標畫素。因此，放置對準標記60使其與影像感測器56的一或更多目標畫素重疊，然後移動試樣以放置對準標記62使其與相同的一或更多目標畫素重疊，接著評估x及y移動以獲得ΔX及ΔY已足矣。

在一些實施例中，對準標記小於一個畫素，因此以單一畫素瞄準以評估ΔX及ΔY。在其他實施例中，對準標記涵蓋多個畫素。在一些實施例中，對準標記涵蓋多個畫素，並計算對準標記的中心以用來定位在一目標畫素中(比如在此範例中所用的中心C)。可透過電腦視覺計算中心。

取代使用故意置於試樣上的對準標記，在一些實施例中，可採用試樣S上的構件特徵，比如在期望的x’方向中延伸之微電路構件(在一些實施例中)或光刻特徵(在其他非限制實施例中)。以和對準標記相同的方式使用可辨識構件特徵。

知道ΔX及ΔY則可得斜度(m)，其為ΔY/ΔX。藉由該斜度，將移動的期望方向x’界定為與XY平移台之x方向和y方向相比。由斜度ΔY/ΔX界定的通過對準標記60及62的線相對於在x方向中延伸並延伸通過對準標記60的線形成一角度α。參考第8圖，角度α可計算為tan-1(m)。得知角度α後可計算自任何起點(例如由對準標記60所涵蓋的點)x’方向中的任何移動。例如，在第8圖中，欲於x’方向中自對準標記60之起點移動d’之距離，試樣夾頭可移動ΔX=d’(cos(α))、ΔY=d’(sin(α))。起點可設定在平移台18於x方向及y方向中之最大行程所界定的平面內之任何位置。可理解到同樣的程序可用來計算y’方向中的移動。亦可理解到可使用其他數學技術來計算x’及y’方向中的行程。

能夠精準地沿著x’方向移動到不同位置而無y’方向中的實質位移允許x’方向中的準確掃描並促進由影像感測器所記錄的多個影像或影像資料之準確縫合，尤其當影像感測器之畫素列實質上與x’方向平行時。因此，於本實施例中，在如上述般判定斜度/偏移角度之前或之後，旋轉影像感測器以使畫素列定向成與x’方向實質上平行，接下來揭露如此做的一些實施例。

在圖中所示的特定方法中，尤其第7B圖，以旋轉度Ra旋轉感測器以將畫素列對準期望的掃描方向x’。在此實施例中，在判斷出ΔX及ΔY後發生旋轉，但可理解到，在其他實施例中，可先對準影像感測器再透過上述的移動判斷ΔX及ΔY。餘下在此揭露旋轉技術。

在一些實施例中，如第11A、11B、及11C圖中所概示，影像感測器之旋轉包括識別試樣S上之軸界定特徵66，軸界定特徵66具有在期望的x’方向中延伸之可偵測形狀。名為軸界定特徵66是因為其是供界定期望的掃描方向x’。電腦視覺用來依據軸界定特徵66的可偵測形狀定向畫素列而與試樣的x’方向平行。以矩形呈現軸界定特徵66。

在第13圖中顯示另一種旋轉技術，並包括形成涵蓋第一對準標記60及第二對準標記62之重疊影像(m1、m2、m3、m4)的鑲嵌，並使用電腦視覺來計算兩個對準標記之間的參考線70(此線亦為期望的x’方向)並將影像感測器之畫素列對準參考線70。在第13圖中，相對於影像感測器56移動試樣以取得複數影像(m1、m2、m3、m4)，並得以由電腦處理這些影像(亦即，影像資料)以界定對準標記60與對準標記62之間的參考線70。藉由此影像資料合成，使用電腦視覺來將影像感測器之畫素列與電腦(如處理器22)所計算之參考線70對準。

例如，從影像m1的位置，考慮到對準標記60的位置，在x方向中以小於影像感測器之視野寬度的增量距離移動試樣。在此，為了方便描繪圖之概念，距離為寬度之75%(亦即，在總共4個畫素中移動3個)。然而，在一些實施例中，這些增量(包括下述之y增量移動)可介於視野(之寬度或高度)之5及50%之間。在其他實施例中，增量介於視野的10%與30%之間，且在其他實施例中，介於視野的10%與20%之間。於x方向中以這種增量移動試樣直到其已經移動了適合將影像感測器56對準在對準標記62下的距離。在每一個增量移動取得一個影像(例如m1、m2、m3、m4)。接著在y方向中移動試樣直到對準標記62在感測器的視野內。在每一個增量取得一個影像(例如m5、m6)。使用標準影像縫合技術，獲得一合成影像，在該合成影像中顯示對準標記60及62。同樣地，藉由此影像資料合成，使用電腦視覺來將影像感測器之畫素列與參考線70對準。

當對準了畫素列(無論採用何種方法來進行)，可如參考第8圖所述般使用斜度/偏移角度來準確地沿著x’方向移動/掃描。

針對將畫素列定向成與期望的x’方向平行，應可理解到完美平行關係有可能僅為理論上，尤其當考慮到在高放大率工作的可能性(在此情況中較易察覺小的有角度地偏移)。本發明試圖將畫素列與期望的x’方向對準，使試樣的x’方向與畫素列延伸的方向之間有極小或無偏移角度。這與前面針對XY平移台所述之「正交誤差」的問題類似。在一些實施例中，畫素列偏離期望的x’方向少於0.002度在此已足矣。在一些實施例中，畫素列偏離期望的x’方向少於0.0015度，在其他實施例，少於0.001度，在其他實施例，少於0.0005度，在其他實施例，少於0.00025度，在其他實施例，少於0.0002度，在其他實施例，少於0.00015度，在其他實施例，少於0.0001度，以及在其他實施例，少於0.00005度。總言之，在此有關於對準之列舉不需絕對完美對準，而只要提供適合本發明之目的之實質上的對準(或實質上平行關係)。在一些實施例中，本發明用以實質上減少在高放大率可見的正交誤差，即使在100倍或更高的數量級。尤其，本發明提供適合沿著期望的x’方向掃描而無顯著的y’方向中的位移之高準確對準。

於第9至11圖中顯示本發明的第二實施例，並且首先有關於一種對準影像感測器56和平移台18以使畫素列實質上與x方向平行的方法。此實施例的第一步驟因此需要將感測器56與平移台18之移動對準(亦即，畫素列和行與x方向行程及y方向行程平行)。第9A圖顯示具有位在影像感測器56左邊的試樣夾頭30之平移台。在一些實施例中，試樣夾頭30a具有印記於其上之參考標記64以供電腦視覺察覺並定位。在其他實施例，置於試樣夾頭30a上的試樣S上具有參考標記，使得此方法設想得到試樣夾頭或置於其上之試樣包括參考標記，但該方法特別揭露關於顯示參考標記64在試樣夾頭30a上的影像。當在置於試樣夾頭上之試樣上有參考標記的情況下實施本發明時，則於試樣夾頭移動期間不應允許改變夾頭與試樣之間的相對位置。

針對第9B圖，在x方向中移動試樣夾頭30直到參考標記64在影像感測器56的視野內。如前述，每一個畫素具有由P(j,i)所標示之一個獨特的位置。在第9B圖中，那個標記64被成像，且為了示範目的，位在P(13,4)。如在第9C圖中可見，藉由XY平移台18在x方向中移動試樣夾頭30，使參考標記64相對於影像感測器56橫移(x方向)但仍在影像感測器視野內。參考標記64現位在畫素P(9,17)的位置。注意到所示的範例並非真實比例。影像感測器可具有1000多個畫素列和1000多個畫素行。

在此第一橫移及成像後，目的為旋轉相機，以當影像感測器56掃描通過試樣夾頭30的視野時，參考標記64在通過感測器時會成像於相同(多個)列中，亦即，在y方向中無相對位置之實質上的改變。第10A圖顯示影像感測器56及在第9B圖的影像中之參考標記64(標記在P(13,4))和在第9C圖的影像中之參考標記64(標記在P(9,17))的相對位置。中央線顯示試樣夾頭30的x及y方向的移動(由平移台18界定)。當影像感測器56如第9A至9C圖般定向時，影像感測器56與試樣夾頭30的相對移動期間會有非常大的y方向位移，可藉由一種包括取參考標記64在這兩個位置之列數的平均值之方法來減少或有效消除此位移。在此範例中，參考標記64於第9B圖的影像中在列13中，而於第9C圖的影像中在列9中。在第10a及10b圖中橫越列11顯示一條代表平均值(亦即，(9+13)÷2=11)的線。假設試樣夾頭30仍位在第9C圖中所示的第二位置中，則藉由相機旋轉器20旋轉相機8及影像感測器56一旋轉度Rb(見第10A圖)，以使參考標記64在列11中。如第10B圖中可見，此步驟將影像感測器56中的畫素列放置在較接近與試樣夾頭30的x方向平行。重複在影像感測器上於兩個位置成像標記然後旋轉相機的這些步驟直到實現影像感測器之畫素列與平移台之x方向之間為期望的實質上對準。在一些實施例中，重複這些步驟直到當掃描通過影像感測器56的整個寬度時參考標記64的中心(由電腦視覺判斷)維持在單一畫素列中。注意到平均化在兩個位置的參考標記64之列數僅為迭代式達成高精準對準的一種方式。在其他實施例中，由Rb代表的旋轉度單純將參考標記64放置於影像感測器移動於兩個位置之間時參考標記的兩個列數之間的一個列數已足矣。

在一些實施例中，參考標記64小於一畫素，並因此以單一畫素瞄準來執行此對準程序。在其他實施例中，參考標記64涵蓋多個畫素，則計算參考標記64的中心以用來定位在一目標畫素中(比如在此範例中所用的中心C)。可透過電腦視覺計算中心。

在一些實施例中，參考標記64位在視野邊緣附近，但在每一次放置中仍在影像感測器的視野內。這提供較準確的評估，因為如此會採用較長的x方向行程，藉此評估y方向位移。例如，針對圖示，在第9B圖中所示的影像中，定位參考標記64使得標記位在中心左邊靠近視野邊緣但仍在視野內，而在第9C圖中接著重新定位參考標記64使得參考標記64位在中心右邊靠近視野邊緣但仍在視野內。

在將影像感測器56對準至試樣夾頭30的x移動後，旋轉影像感測器56以將影像感測器56與用於掃描試樣之期望的x’方向對準。在此實施例中，試樣S1代表具有印記有軸界定特徵66於其上之試樣，該軸界定特徵66具有界定用於掃描試樣S1之期望的x’方向及/或y’方向之軸界定特徵。第11A圖顯示在掃描前置於試樣夾頭30上之試樣S1，並提供線72以視覺性表示影像感測器56對準至試樣夾頭30的x及y行程。如在第11B圖中可見，移動試樣夾頭30使特徵66在感測器56的視野內。在第11C圖中，旋轉影像感測器56一測量過的度數Rc，其亦為α，以將影像感測器的畫素列與特徵66所界定的x’方向對準。如先前已提過，可藉由可使用旋轉編碼器、電位器、步階器馬達控制或其他類似裝置，以得知角旋轉α。

替代地，在將影像感測器56對準至試樣夾頭30的x移動後，可採用對準標記及一鑲嵌來識別期望的x’方向並旋轉影像感測器(如第13圖中般)。

注意到，由於參考標記64與XY平移台關聯，影像感測器之畫素列與XY平移台之x方向的對準僅需執行一次，並可記錄對準的位置以供後續使用。因此，可將具有不同定向及不同軸界定特徵之不同的試樣放置在夾頭上，並可定位影像感測器使畫素列對準至x方向(依照上述程序)並接著旋轉至軸界定特徵以找出新試樣之期望的x’方向之偏移角度。

無論在此用於將畫素列與期望的x’方向對準並判斷x’方向相對於XY平移台之x方向的斜度/偏移角度的方法為何，一旦對準好畫素並判斷出斜度/角度，可以一種方式移動試樣S，使得第一影像的左邊界可準確地縫合至第二影像的右邊界，其中在x’方向中界定「左」及「右」。例如，在第12圖中，由影像感測器56在p1的定位顯示第一成像位置並由影像感測器56在p2的定位顯示第二成像位置，其中影像感測器56在p1的之左邊界與影像感測器56在p2的之右邊界對準，同樣地無任何顯著的y’方向中的位移。也應理解到可以重疊區域取得影像p1及p2是可接受的，亦即，其中在p1的影像之左側的畫素行與在p2的影像之右側的畫素行重疊。重疊部份已知可幫助準確縫合。然而，藉由導致畫素列與期望的x’方向對準，本發明促進影像之準確的邊界至邊界之縫合，由於需要較少影像及較少運算，可減少整個成像程序。

應可理解在此的各種步驟可以，且較佳地，由顯微鏡系統2自動執行。藉由適當軟體及硬體來處置可移動及可旋轉構件之移動，並可採用電腦視覺來識別可偵測的特徵，比如對準標記60和62、參考標記64、及支配影像感測器56相對於試樣的定向之軸界定特徵66。亦可自動化影像資料的聚焦及擷取。這些全部皆由處理器22在圖中表示。因此，本發明允許試樣及XY平移台不對準(亦即，試樣的期望x’及y’方向與平移台的x及y方向不對準)且不需擺弄試樣來彌補此不對準。系統自校準，且在知道影像感測器之寬度下，可漸進地掃描試樣並取得具有對準的邊界之離散影像然後將它們縫合在一起來形成期望的試樣影像。

已藉由在此之圖及說明向此領域中具通常技藝者充分揭露本發明之一般概念。提供詳細揭露以廣泛揭露那些一般概念，但此領域中具通常技藝者不需這些詳細的揭露來完全實施本發明的概念。即使圖示為例示性亦是如此。

在結束前應注意到於此揭露中專注於x方向絕非限制性，x及y方向單單基於定向，並可以相同方式使用本發明來進行y’方向中的掃描。故對於x及y的參照單純是為了有方向性的參考。

雖然在此已詳細揭露本發明的特定實施例，應理解到本發明不限於此或被此受限，因為本領域中具有通常技藝者可輕易認知本發明的變化。應從下列申請專利範圍認知本發明之範疇。

2:顯微鏡系統 4:立架 6:垂直照明器 8:相機 10:透鏡管 12:物鏡轉換盤 14:物鏡 16:z軸聚焦臂 18:XY平移台 18a:單軸台 18b:單軸台 20:相機旋轉器 22:處理器 23:驅動馬達 24:驅動螺桿 26:立架 26a:墊塊 26b:墊塊 28a:導桿 28b:導桿 30:試樣夾頭 30a:試樣夾頭 32:滾珠螺母 36:旋轉器外殼 38:凸緣 40a:鎖定螺絲 40b:鎖定螺絲 42:相機座 46:連接器 48:驅動馬達 50:滑輪 52:驅動帶 54:相機旋轉器滑輪 55:軸承 56:影像感測器 60:對準標記 62:對準標記 64:參考標記 66:軸界定特徵 70:參考線

[第1A圖]為根據本發明之顯微鏡系統的示意側視圖；

[第1B圖]為第1圖的示意前視圖；

[第2A圖]為單軸平移台之示意側視圖；

[第2B圖]為第2A圖之平移台的示意頂平面圖；

[第2C圖]為由兩個單軸平移台所形成之XY平移台的示意頂平面圖；

[第3A圖]為用於本發明之一實施例的相機旋轉器之示意頂平面圖；

[第3B圖]為第3A圖之相機旋轉器的示意側視圖；

[第4圖]為影像感測器之畫素的示意圖；

[第5圖]為相對於影像感測器56在XY平移台(18a, 18b)上之試樣S的示意圖，顯示用於判斷與XY平移台的x方向相比下用於掃描試樣之期望x’方向的偏移角度之本發明的一實施例之應用的一般情況；

[第6A圖]為從第5圖之一般初始情況判斷偏移角度的第一步驟之示意圖；

[第6B圖]為判斷偏移角度的第二步驟之示意圖；

[第7A圖]為判斷偏移角度的第三步驟之示意圖，以判斷x’方向的斜度(ΔX及ΔY)進而其偏移角度的能力作結；

[第7B圖]為旋轉步驟的示意圖，其中使影像感測器的畫素列與x’方向實質上平行；

[第8圖]為用於相對於影像感測器沿著期望的x’方向移動試樣期望的d’距離之方法的示意圖；

[第9A圖]為在XY平移台(18a, 18b)上之試樣夾頭30上的參考標記64以及影像感測器56之示意圖，其中用於將影像感測器之畫素列與XY平移台之x方向對準之本發明的一實施例之應用的一般情況；

[第9B圖]為從第5圖之一般初始情況對準畫素列中的第一步驟之示意圖；

[第9C圖]為從第5圖之一般初始情況對準畫素列中的第二步驟之示意圖；

[第10A及10B圖]一起提供用於迭代式旋轉影像感測器以將其之畫素列與XY平移台的x方向對準之方法的示意圖；

[第11A、11B及11C圖]一起提供用於旋轉影像感測器以使畫素列與軸界定特徵實質上平行之方法的示意圖；

[第12圖]為根據本發明之影像縫合技術的示意圖；以及

[第13圖]為利用影像(影像資料)鑲嵌之旋轉技術的示意圖。

18a:單軸台

18b:單軸台

30:試樣夾頭

60:對準標記

62:對準標記

2:顯微鏡系統

Claims (8)

1. 一種用於對試樣成像的顯微鏡方法，包含： 相對於可在x方向及y方向移動的XY平移台上的試樣，將具有畫素列及畫素行的影像感測器圍繞其中心軸旋轉，其中，該旋轉步驟包含： 識別該試樣上之沿著x’方向延伸的軸界定特徵，其中，該XY平移台可移動的該x方向及該y方向界定該XY平移台的平面，並且，該x’方向在該XY平移台的該平面中且自該XY平移台的該x方向有角度地偏移；以及 使用電腦視覺來對準該等畫素列，使其與該試樣上的該軸界定特徵實質上平行。
2. 如請求項1之方法，還包含在旋轉該影像感測器之前，對準該等畫素列使其與該XY平移台的x方向實質上平行。
3. 如請求項1之方法，其中，該軸限定特徵具有沿x’方向延伸的可檢測形狀，並且，該對準該畫素列步驟使用電腦視覺來對準該等畫素列，使其與該可偵測形狀實質上平行。
4. 一種顯微鏡系統，包含： 顯微鏡； 影像感測器，具有畫素列及畫素行且可繞其中心軸旋轉，該影像感測器被配置用以記錄影像資料； XY平移台，可在x方向及y方向上移動； 處理器，被配置用以： 相對於試樣旋轉具有畫素列及畫素行的該影像感測器； 識別該試樣上之沿著x’方向延伸的軸界定特徵，其中，該XY平移台可移動的該x方向及該y方向界定該XY平移台的平面，並且，該x’方向在該XY平移台的該平面中且自該XY平移台的該x方向有角度地偏移；以及 使用電腦視覺來對準該等畫素列，使其與該試樣上的該軸界定特徵實質上平行。
5. 如請求項4之顯微鏡系統，其中，該處理器還被配置用以在旋轉該影像感測器之前，對準該等畫素列使其與該XY平移台的x方向實質上平行。
6. 如請求項4之顯微鏡系統，其中， 該軸限定特徵具有沿x’方向延伸的可檢測形狀，並且，該處理器被配置用以使用電腦視覺來對準該等畫素列，使其與該可偵測形狀實質上平行。
7. 一種用於對試樣成像的顯微鏡方法，包含： 相對於可在x方向及y方向移動的XY平移台上的試樣，將具有畫素列及畫素行的影像感測器圍繞其中心軸旋轉，其中，該旋轉步驟包含：取得適合用於計算該試樣上之第一焦點特徵與第二焦點特徵之間的參考線之影像的鑲嵌以及使用電腦視覺將該影像感測器的該等畫素列與該參考線對準。
8. 一種顯微鏡系統，包含： 顯微鏡； 影像感測器，具有畫素列及畫素行且可繞其中心軸旋轉，該影像感測器被配置用以記錄影像資料； XY平移台，可在x方向及y方向上移動； 處理器，被配置用以： 相對於試樣旋轉具有畫素列及畫素行的該影像感測器； 識別試樣上之沿著x’方向延伸的軸界定特徵； 取得適合用於計算該試樣上之第一焦點特徵與第二焦點特徵之間的參考線之影像的鑲嵌並使用電腦視覺將該影像感測器的該等畫素列與該參考線對準。

Images