TWI395473B - 在低亮度場景執行自動對焦之系統與方法 - Google Patents

Description

在低亮度場景執行自動對焦之系統與方法

本發明為一種低亮度場景執行自動對焦之系統與方法，特別是於低亮度場景拍攝時，透過記憶位元的選取與色調調整達到準確即時影像自動對焦的技術。

自動對焦(Automatic Focusing，簡稱AF)技術讓相機或攝影機於特定區域進行測距，進而調整鏡頭於一焦距(focal length)內，得到清晰的影像，此對於一般消費性的數位相機或攝影機來說已經是不可缺少的要件。

一般手動對焦(MF)的方式是由使用者於觀景窗(viewfinder)利用其中的對焦屏(focusing screen)調整影像的清晰度，主要是調整底片或是感光元件與鏡片組間的距離，也就是所謂的焦距，讓影像準確地投影於底片或是感光元件上，也讓使用者在觀景窗看到清晰的影像。

而自動對焦有幾種方式，分為被動式和主動式兩種，同樣應用於目前消費性的數位相機或是攝影機上。

被動式自動對焦應用於一些自動相機，其藉由被攝物反光的分析計算鏡片組的移動位置，若在光線不足的環境下，則常常使用輔助對焦燈，如一些相機在進行對焦時，會打出一束顏色光，遇到被攝物體後反射回來，能夠得到足夠的反光，進而分析焦距，據以控制鏡片組的位置。

而另一自動對焦技術則是由相機或是攝影機本身發出超音波或紅外線，利用由被攝物反射的訊號計算距離，包括應用來往時間或是利用反射角來得出被攝物距離，進而調整自身焦距。

隨著科技進步，除了習知的自動對焦方式，更有相機或攝影機透過即時擷取的觀景畫面(如透過影像感測器擷取，而於LCD螢幕預覽的畫面)執行自動對焦程序，這也就是即時影像自動對焦(Live View自動對焦)，可於即時預覽的同時完成構圖及自動對焦。其中應用於相機內的自動對焦系統採用影像處理能力強大的處理器，透過影像清晰度運算，能夠即時比對由影像感測器擷取的影像並快速搜尋焦點。

第一圖顯示習知技術之自動對焦程序，自動對焦主要是透過步進馬達(stepping motor)移動對焦鏡片(步驟S101)，移動至一特定位置時，透過鏡頭擷取影像畫面(步驟S103)，並在預設的幾個位置點計算上述對焦屏中物體的清晰度，同時得出相對焦距(步驟S105)，此時判斷是否有足夠的資料(步驟S107)，若為否，表示還要繼續執行透過馬達移動對焦鏡片、擷取影像、計算清晰度等步驟；若為是，則接著在這幾個預設的位置中估計出具有最大清晰度的位置，即得出使影像最清楚的對焦位置(步驟S109)。之後移動鏡片組(lens group)至最佳的焦距上(步驟S111)，完成自動對焦的程序。

在上述利用擷取的影像計算清晰度的技術中，提供用以對焦的影像可能是足夠亮度的影像，能夠得到較為精確的焦距，但也可能為較暗的影像，而讓對焦產生不精確的問題。

第二圖顯示習知技術中數位相機中的電路方塊圖。其中顯示數位相機內之主要元件，此例的相機中主要包括有自動白平衡、自動曝光與自動對焦的電路，相機利用鏡頭20拍攝影像，由影像感測器21接收並轉換為數位訊號，經影像前置處理單元22處理後，經自動白平衡單元23調整色溫，之後經影像訊號處理器24後執行預覽、拍攝，或是儲存影像。在擷取影像的過程中，仍需透過自動曝光單元27找到曝光值，透過自動對焦單元28得到正確的成像距離，這些訊息透過馬達驅動器29控制鏡頭馬達，以得到正確對焦的影像。

另外，處理影像的過程中，包括從感光元件擷取影像開始，到影像處理、預覽到儲存，期間的記憶方式也可能因為硬體設計而擷取了較高位元的值，使得對焦的精確度下降，尤其是在低亮度場景中，會因為擷取較高位元而損失影像細節，除了雜訊增加，更影響對焦的精確度。

本發明主要是在一般數位相機或是攝影機中設置一自動對焦系統，特別針對在低亮度場景下，利用即時影像對焦的方式會導致對焦不準確的問題，能夠透過記憶位元的選取與色調調整的手段，達到準確對焦的效果。

由於影像感測器要具有自動對焦的功能，尤其是針對即時影像對焦的方式，就必須經由搜尋鏡頭位置(調整成像距離)與影像清晰度的資訊，調整焦距，取得最清晰的影像。

其中實施例之一包括利用一鏡頭模組拍攝影像，接著由感光元件，如CCD或CMOS，感光產生數位影像訊號，之後，能透過增益調整單元調整數位影像訊號之增益值，以降低雜訊。由於由感光元件擷取的影像有較高的記憶位元值，接著會因為硬體的限制而無法儲存原有的記憶位元值，本發明透過一記憶位元擷取單元擷取有效的複數個記憶位元的資料。

接著，引入一色調調整單元執行色調調整步驟，能夠將有效的記憶位元值放大至一範圍，以提高數位影像訊號的對比，藉以產生一對焦影像，再透過對焦單元計算對焦影像之清晰度，並根據一焦距自動調整鏡頭模組，以執行拍攝。

另外，由於本發明係應用於低亮度場景的拍攝環境，故會引入由自動曝光單元(auto exposure)產生的曝光值與判斷亮度高低的門檻值，經判斷後，當環境處理低亮度場景時，即重複上述步驟達到準確即時影像自動對焦的目的。

自動即時影像對焦技術係透過由鏡頭、感光元件所拍攝的影像進行對焦的技術，在數位相機或攝影機對著影像拍攝時，鏡頭的驅動馬達即先移動對焦鏡片，在特定的幾個位置點計算影像的清晰度，能自動搜尋取得對焦清晰銳利的位置的影像。自動搜尋的過程之一是，連續計算對焦區域內影像邊緣清晰度，並尋找最大影像邊緣清晰度的位置，而清晰度的常用方法有Sobel空間濾波器及Laplacian空間濾波器等，但本發明並非限制於這些方法中。

在一般影像擷取時，由於硬體上的設計(通常有成本考量)，在影像處理的過程中，常常會損失掉一些影像的細節，而在低亮度場景的影像亮度已經很低，且影像的雜訊很大，故容易影響到對焦的精確度，如第三圖所示的記憶位元在各階段的狀態示意圖。

第三圖中，圖(a)顯示為由鏡頭拍攝、感光元件轉換為數位影像訊號、進入影像處理單元後的記憶位元值，此例為12位元，也就是數位影像訊號有2¹² 的資料。而於之後經影像處理，儲存(或暫存)於記憶媒體中，此時，所儲存的值可能變成圖(b)顯示的10位元，也就是資料變成2¹⁰ 。

接著，更可能因為要產生用於對焦的即時畫面，而再降低即時影像的品質，如圖(c)顯示，成為8位元的資料。

此時，本發明提出一種低亮度場景執行自動對焦之系統與方法，特別是應用於低亮度場景的拍攝環境，針對上述可能在整個影像處理過程損失影像細節的問題，透過選取有效的記憶位元，與色調調整的程序，產生較佳的對焦影像。

請參閱第四圖所示之在低亮度場景執行自動對焦之系統的電路方塊圖，其中顯示為本發明揭露之對焦系統，其中應用一影像處理模組400執行即時影像的最佳化，增進透過即時影像的對焦能力。

其中，利用一鏡頭模組40拍攝影像，鏡頭模組40係以一組鏡片組形成，可透過其中對焦鏡片進行對焦，影像拍攝後，由一連結於鏡頭模組40的感光元件41擷取，經感光後轉換為數位影像訊號。感光元件41可為一般的CCD或是CMOS等。

為了要降低影像的雜訊，故此對焦系統具有一連接於感光元件41的增益調整單元42，能將數位影像訊號經增益調整後降低雜訊，較佳的方式是降低感光元件41的增益值，同時能降低影像雜訊。但是經降低增益值雖然可降低雜訊，但會影響影像品質，故於正常拍攝的過程中，會再輔助以數位增益調整，以確保拍攝品質。如圖中數位增益補償單元45，此單元45即接收經增益調整後的數位影像訊號，再透過數位增益補償，以補償調整感光元件41增益值後的影像。

經增益調整單元42調整增益值後，接著由一連接增益調整單元42的記憶位元擷取單元43擷取經降低雜訊後的數位影像訊號，以擷取複數個記憶位元的資料(如前例中由較高的10位元中擷取出8位元的資料)，特別是擷取其中有效的記憶位元，如擷取較低位置的記憶位元，以避免於處理過程損失了影像的細節。值得注意的地方是，在低亮度場景下拍攝的影像，較高位置的記憶位元通常是沒有資料的狀態，故擷取較低位階的位元，可避免損失細節。

之後，引入一連接記憶位元擷取單元43的色調調整單元44，用以對數位影像訊號執行一色調調整(tone mapping)步驟，提高數位影像訊號的對比。此色調調整步驟是將上述擷取的記憶位元透過線性比例放大至一個範圍，以放大其中的細節，經色調調整的影像有利於準確對焦。

在此實施例中，有一對焦影像產生單元47，連結於色調調整單元44，用以接收經色調調整的數位影像訊號，並產生對焦影像，此對焦影像即用以作為即時影像對焦的影像，再由所連結的對焦單元48計算對焦影像之清晰度，最後根據一可令該對焦影像清晰之焦距自動調整該鏡頭模組40，以執行拍攝。

此實施例之圖式中，顯示相機內更具有影像顯示處理單元46，接收自對焦單元48所得出的鏡頭模組40位置，藉以輸出自未顯示的驅動馬達，以拍攝準確對焦的影像。上述經自動對焦後自動調整鏡頭模組40之成像更應用於顯示一即時影像，也就是，圖式中影像顯示處理單元46同時提供顯示單元49顯示即時影像，供使用者預覽拍攝。

第五圖即顯示應用第四圖所示之本發明在低亮度場景執行自動對焦之系統的整體電路方塊圖。

由鏡頭模組40拍攝影像，透過感光元件41擷取後，轉換為數位影像訊號，經第四圖顯示之影像處理模組400產生用於對焦的即時影像，並產生提供使用者預覽的即時影像，如透過顯示單元49顯示的即時影像，或是產生數位影像檔案儲存於儲存單元57中。

同時，由影像處理模組400產生的對焦結果，其資料傳遞於控制單元53，控制單元53接收使用者透過按鍵組51的指令，比如半按快門按鍵，即自動執行對焦程序，由控制單元53接收到對焦資訊，控制驅動單元55去驅動鏡頭模組40，調整對焦鏡片的位置。

經過反覆的對焦程序，最後可得到一個最佳的對焦結果，達到準確即時影像自動對焦的目的。

上述對焦時，將移動鏡頭模組40到複數個位置上，以計算清晰度，清晰度之計算之一方式是根據影像之邊緣之畫素進行比對，並估計清晰度最大的位置，即為自動對焦的結果。

本發明在進行自動對焦前，先降低感光元件的增益值，之後，由於硬體或是其他考量(如成本、效率)的關係，僅擷取有效的記憶位元，而在低亮度的拍攝場景下，本發明更提供如第六圖顯示的色調調整的對應曲線，能夠將數位影像訊號透過線性比例放大，保持最多的細節。

此例中，色調調整的對應曲線之橫軸顯示色調輸入值，原輸入的影像可有0-4095(12位元)的範圍，經過上述選取記憶位元後(損失部份細節)，在一實施例中，實際處理的影像值經計算影像亮度的平均值及標準差，將落於圖中M_low 與M_high 之間，之後經線性放大，色調輸出值(縱軸)即放大到0至255(8位元)之間，以此線性比例放大至一個範圍，以放大其中的細節，有利於使用即時畫面準確對焦。

第七圖顯示為本發明執行自動對焦之方法流程圖。

在此實施例開始時，如步驟S701，由鏡頭模組擷取影像，經自動曝光(AE)後，由自動曝光程序產生的曝光值得出明亮度(步驟S703)，並透過一門檻值判斷亮或暗？(步驟S705)。

若判斷為「亮」，即屬於一高亮度場景，表示透過所擷取的影像可以產生準確的對焦，故可執行自動對焦(步驟S713)，產生即時影像，並供使用者預覽(步驟S715)。

但，若判斷為「暗」，若屬於一低亮度場景，表示位於低亮度場景中，先如步驟S707，降低感光元件增益值，以降低影像中的雜訊。之後選擇性擷取記憶位元(步驟S709)，由於在低亮度場景容易因為在擷取記憶位元的過程中損失掉更多細節，故本發明選擇擷取有效的記憶位元，比如擷取較低位階的記憶位元，以維持其中細節。

之後，如步驟S711，執行一線性對應運算，經色調調整至一範圍，藉此提高該數位影像訊號的對比產生能夠精確對焦的即時影像，接著利用經前述步驟調整過後的數位影像訊號令鏡頭模組執行自動對焦(步驟S713)與即時影像預覽(步驟S715)。

接著請參閱第八圖顯示之本發明在低亮度場景執行自動對焦之方法流程圖。此例為已判斷在低亮度場景中拍攝的流程，在低亮度場景中，先降低感光元件增益值(步驟S801)，以降低雜訊。接著，所擷取的影像同時會用於「對焦用」與「拍攝用」。

若用於對焦用，本發明所提供的對焦系統將選擇地調整擷取記憶位元(步驟S803)，再用於調整色調(步驟S805)，色調調整可參考第六圖。經調整色調的影像提供用於即時影像預覽(步驟S807)，接收經色調調整的數位影像訊號後，產生對焦影像，也就是一即時影像，藉以執行自動對焦，透過鏡頭模組移動的複數個位置上計算出複數個清晰度，並估計清晰度最大的位置即為自動對焦的結果(步驟S809)。

若用於拍攝用，由於先於步驟S801中降低感光元件的增益值，此時，即再執行數位增益補償(步驟S811)，使得使用者於螢幕看到的影像亮度與未降低增益值時相同，之後經影像處理，接收由上述對焦程序的結果(步驟S813)，執行拍攝(步驟S815)。

綜上所述，根據本發明揭露一種在低亮度場景執行自動對焦之系統與方法，透過判斷亮、暗度的程序，於低亮度場景中應用調整擷取的記憶位元、線性色調調整，在使用較多的有效位元的情況下，能得到更精確的對焦。另一方面，於拍攝過程中，能透過數位增益補償，得到維持亮度的影像。

惟以上所述僅為本發明之較佳可行實施例，非因此即侷限本發明之專利範圍，故舉凡運用本發明說明書及圖示內容所為之等效結構變化，均同理包含於本發明之範圍內，合予陳明。

20．．．鏡頭

21．．．影像感測器

22．．．影像前置處理單元

23．．．自動白平衡單元

24．．．影像訊號處理器

27．．．自動曝光單元

28．．．自動對焦單元

29．．．馬達驅動器

40．．．鏡頭模組

41．．．感光元件

42．．．增益調整單元

43．．．記憶位元擷取單元

44．．．色調調整單元

45．．．數位增益補償單元

46．．．影像顯示處理單元

47．．．對焦影像產生單元

48．．．對焦單元

49．．．顯示單元

57．．．儲存單元

51．．．按鍵組

53．．．控制單元

55．．．驅動單元

第一圖顯示習知技術之自動對焦程序的流程圖；

第二圖顯示習知技術中數位相機中的電路方塊圖；

第三圖所示為記憶位元在各階段的狀態示意圖；

第四圖所示為本發明在低亮度場景執行自動對焦之系統的電路方塊圖；

第五圖顯示應用第四圖所示之本發明在低亮度場景執行自動對焦之系統的整體電路方塊圖；

第六圖為色調調整的對應曲線；

第七圖顯示為本發明執行自動對焦之方法流程圖；

第八圖顯示為本發明在低亮度場景執行自動對焦之方法流程圖。

40．．．鏡頭模組

41．．．感光元件

42．．．增益調整單元

43．．．記憶位元擷取單元

44．．．色調調整單元

45．．．數位增益補償單元

46．．．影像顯示處理單元

47．．．對焦影像產生單元

48．．．對焦單元

49．．．顯示單元

Claims (17)

1. 一種在低亮度場景執行自動對焦之系統，係應用於一低亮度場景之拍攝，包括有：一鏡頭模組，係用以拍攝一影像；一感光元件，係連結該鏡頭模組，且將該影像感光後而轉換為數位影像訊號；一增益調整單元，係連結該感光元件，且將該數位影像訊號增益調整後以降低雜訊；一記憶位元擷取單元，係連結該增益調整單元，用以擷取經降低雜訊後的數位影像訊號中複數個記憶位元的資料；一色調調整單元，係連結該記憶位元擷取單元，用以對該數位影像訊號執行一色調調整步驟，藉此提高該數位影像訊號的對比；一對焦影像產生單元，係連結該色調調整單元以接收該經色調調整的數位影像訊號，並將其轉換為一對焦影像；以及一對焦單元，係連結該對焦影像產生單元及該鏡頭模組，該對焦單元係先計算出該對焦影像之清晰度，再根據一可令該對焦影像清晰之焦距自動調整該鏡頭模組，俾接續執行拍攝。
2. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中該系統係根據一曝光值區分出一高亮度場景與該低亮度場景。
3. 如申請專利範圍第2項所述之在低亮度場景執行自動對焦之系統，其中該曝光值由一自動曝光單元產生。
4. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中根據該焦距自動調整該鏡頭模組之成像更應用於顯示一即時影像。
5. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中透過該增益調整單元降低經該感光元件產生的數位影像訊號之增益值，以降低雜訊。
6. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中該色調調整步驟係由該色調調整單元執行一線性對應運算。
7. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中於該鏡頭模組移動的複數個位置上計算該清晰度，估計該清晰度最大的位置即為自動對焦的結果。
8. 如申請專利範圍第7項所述之在低亮度場景執行自動對焦之系統，其中該清晰度之計算係根據該影像之邊緣之畫素進行比對得出。
9. 如申請專利範圍第1項所述之在低亮度場景執行自動對焦之系統，其中該記憶位元擷取單元，係選擇性地擷取該複數個記憶位元的資料。
10. 如申請專利範圍第9項所述之在低亮度場景執行自動對焦之系統，其中於該低亮度場景拍攝時，該記憶位元擷取單元係擷取該複數個記憶位元中較低位階的資料。
11. 一種在低亮度場景執行自動對焦之方法，包括：透過一鏡頭模組擷取一影像，並透過一感光元件將該影像轉換為數位影像訊號；判斷該影像之明亮度，若屬於一低亮度場景，即進行：調整該感光元件之增益值，以降低該數位影像訊號之雜訊；選擇性擷取該數位影像訊號之複數個記憶位元；調整該經選擇的數位影像訊號之色調，藉此提高該數位影像訊號的對比；以及利用經前述步驟調整過後的數位影像訊號令該鏡頭模組執行自動對焦。
12. 如申請專利範圍第11項所述之在低亮度場景執行自動對焦之方法，其中於該自動對焦步驟包括：接收該經色調調整的數位影像訊號，產生一對焦影像；以及透過一鏡頭模組移動的複數個位置上計算出複數個清晰度，估計該清晰度最大的位置即為自動對焦的結果。
13. 如申請專利範圍第11項所述之在低亮度場景執行自動對焦之方法，其中係透過一自動曝光程序產生的曝光值判斷該影像之明亮度。
14. 如申請專利範圍第13項所述之在低亮度場景執行自動對焦之方法，其中係透過一門檻值判斷該影像係處於一高亮度場景或該低亮度場景。
15. 如申請專利範圍第11項所述之在低亮度場景執行自動對焦之方法，其中該調整該感光元件之增益值之步驟係降低經該感光元件產生的數位影像訊號之增益值，以降低雜訊。
16. 如申請專利範圍第11項所述之在低亮度場景執行自動對焦之方法，其中該色調調整步驟係於所選擇的記憶位元的值執行一線性對應運算。
17. 如申請專利範圍第11項所述之在低亮度場景執行自動對焦之方法，其中於該低亮度場景拍攝時，係擷取該複數個記憶位元中較低位階的資料。