TWI708166B - 可動態學習不同工作表面之材質的光學導航機制 - Google Patents

Abstract

一種能夠動態學習一光學導航裝置移動時之一工作表面之材質的方法，包含：利用至少一發光單元，發射至少一光線至該工作表面，反射成像至一影像感測器；根據該影像感測器之至少一感測像素在一特定時間內所感測到之至少一影像移動資訊，感測並計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移；以及，根據該至少一平均影像位移與一臨界值，動態判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於該裝置移動時之一特徵影像。

Description

可動態學習不同工作表面之材質的光學導航機制

本發明係關於一種光學導航機制，尤指一種能夠動態學習光學導航裝置移動時之不同工作表面之材質的方法及對應的光學導航裝置。

目前傳統光學滑鼠有採用亮場技術的光學滑鼠以及採用雷射光源偵測與暗場技術的雷射光學滑鼠，一般採用亮場技術的光學滑鼠在玻璃工作表面等比較光滑的工作表面使用時，因為光反射特性不同的關係，無法穩定準確地偵測出光學滑鼠於表面的移動量，因此，為了能夠使用於玻璃工作表面，一般均採用雷射光源偵測及暗場的技術，以偵測玻璃工作表面上的粉塵顆粒，據此來推算光學滑鼠的移動量，然而，雷射光源偵測無可避免地需要吃較大的電源功率，有較大的功耗，不符合現今使用者的需求。目前並未有可同時節省功耗且又穩定準確地偵測出光學滑鼠於光滑工作表面之移動量的機制。

因此本案之目的之一在於提供一種能夠動態學習一光學導航裝置移動時之不同工作表面之材質的方法及對應的光學導航裝置，達到同時節省功耗且又穩定準確地偵測出光學導航裝置於光滑工作表面之移動量，解決上述的問題。

根據本發明實施例，其揭露了一種能夠動態學習一光學導航裝置移動時之一工作表面之材質的方法。該方法包含：利用至少一發光單元，發射至少一光線至該工作表面，反射成像至一影像感測器；根據該影像感測器之至少一感測像素在一特定時間內所感測到之至少一影像移動資訊，感測並計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移；以及，根據該至少一平均影像位移與一臨界值，動態判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於該光學導航裝置移動時之一特徵影像。

根據本發明實施例，其揭露了一種能夠動態學習該光學導航裝置移動時之一工作表面之材質的光學導航裝置。該光學導航裝置包含一影像感測器、至少一發光單元及一處理器。該發光單元用以發射至少一光線至該工作表面，反射成像至該影像感測器。該處理器耦接至該影像感測器，用以根據該影像感測器之至少一感測像素在一特定時間內所感測到之至少一影像移動資訊，計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移，以及根據該至少一平均影像位移與一臨界值，動態判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於該光學導航裝置移動時之一特徵影像。

第1圖為本發明一實施例之電子裝置100的方塊示意圖，第2圖為第1圖所示之電子裝置100的操作流程圖。電子裝置100為一可攜式的光學導航裝置，例如實作上可為一光學滑鼠（此非本發明的限制），可動態學習該電子裝置100本身移動時所位於之一工作表面的材質，當初次放置於一工作表面或該電子裝置100啟動時，電子裝置100可先於一第一時間（學習時間）學習目前之工作表面的材質，之後於第二時間實際使用時再根據所學習到之材質的資訊來校正感測到的影像，可大幅提升電子裝置100實際使用時的準確率及穩定性，該電子裝置100特別適用於不同材質的工作表面（光滑工作表面及粗糙工作表面均適用）。

一般而言，傳統光學滑鼠被使用於光滑工作表面（例如玻璃表面）時，會因為光滑工作表面之光反射係數的特性而造成鼠標追蹤時的準確率極低以及穩定性極差，例如當使用者只是在玻璃表面上輕輕移動傳統光學滑鼠，傳統光學滑鼠的鼠標於顯示器上可能會產生不定向且大幅度的偏移，因此，為求適用於光滑表面，傳統光學滑鼠在實作上會採用雷射光發光與暗場的技術，而不採用二極體發光與亮場的技術，然而，雷射光發光與暗場的技術相比來說大幅增加功耗，並不符合現今使用者對可攜式電子裝置的要求。因此，本案之電子裝置100為了解決上述問題，採用了二極體發光與亮場的技術，其具有低功耗的優點，同時為了適用於工作表面之材質為玻璃材質或其他光滑工作表面的材質等，通過了動態學習所使用之工作表面之材質，據此來判斷所感測之影像值為對應於電子裝置100移動時之特徵影像或是對應於光學系統本身之一固定圖案影像（fixed pattern），根據判斷的結果修正或校正光學鼠標追蹤所參考的感測影像值，令大幅提升光學鼠標追蹤時的準確率及穩定性。相較傳統雷射滑鼠，本案之電子裝置100的功耗較低，可有效節省電力，較能滿足於現今使用者對於可攜式電子裝置的要求。

應注意的是，本案所述之特徵影像為一影像感測器所對應感測到的影像中可用來較穩定準確地估測出一光學導航裝置於一工作表面上之位移的影像，而所述之固定圖案影像是一影像感測器所對應感測到的影像中無法用於穩定準確地估測出一光學導航裝置於一工作表面上之位移的影像，也就是，該固定圖案影像可視為是光學導航追蹤的雜訊（例如由不同材質之工作表面所造成的不同雜訊），該影像感測器所對應感測到的一張感測影像中的一感測像素影像值可能是對應於光學導航裝置的特徵影像或是對應於固定圖案的雜訊，本案之電子裝置100可判定每一感測像素之影像值是電子裝置100的特徵影像或是固定圖案的雜訊，並修正對應於固定圖案雜訊之一或多個感測像素的影像值，提升後續執行光學導航移動估測時的準確率及穩定性。以下說明電子裝置100的實施方式。

電子裝置100至少包括一影像感測器105、至少一發光單元110及一處理器115。該至少一發光單元110例如一發光二極體單元，用以發射至少一光線至該工作表面（步驟205），該表面可以是光滑表面或非光滑表面，反射成像至該影像感測器105，該影像感測器100例如一影像感測器陣列，具有M*N個感測像素，每一感測像素可在其所對應之特定的曝光時間或快門時時感測產生一影像值（步驟210），該處理器115耦接至影像感測器105，並用以根據該影像感測器100之至少一感測像素在一特定時間內所感測到之至少一影像值，估算得到至少一影像移動資訊（motion information）（步驟215），根據該影像移動資訊來計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移（步驟220），以及根據該至少一平均影像位移與至少一臨界值TH，動態對應地判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於電子裝置100移動的一特徵影像（步驟225）。通過動態判斷該至少一感測像素所感測到之至少一影像是相應於固定圖案或相應於特徵影像，處理器115得以動態學習該工作表面的材質，此外，可通過一特定的演算法機制，判別每一感測像素或一組感測像素之影像值是特徵影像或是固定圖案，因此，後續進行光學導航追蹤時可通過修正對應於固定圖案之感測像素之影像值、採用修正後之影像值來進行光學導航追蹤，如此可避免參考到固定圖案來進行光學導航追蹤，大幅提升使用於光滑表面之光學導航追蹤的準確度及穩定性。

處理器115包含一特徵增強單元1151、一過濾單元1152、一光學導航單元1153、一特徵統計單元1154及一固定圖案偵測單元1155，上述單元可採用軟體、硬體或軟硬體組合來實現；以軟體而言，該些單元可包括於一特定程式碼中，該特定程式碼儲存於一非揮發性記憶體，該處理器115通過載入並執行該特定程式碼來進行該些單元的操作與功能。以硬體實現，則該些單元可採用電路元件來實現。

本案提升光學鼠標於光滑表面追蹤的準確率及穩定性的機制可分有兩個部分，其主要部分是通過該特徵統計單元1154及該固定圖案偵測單元1155在上述第一學習時間先動態學習目前之工作表面的材質，之後於第二時間實際使用時再通過該光學導航單元1153根據所學習到之材質的資訊來校正感測到的影像，提升電子裝置100使用時的準確率及穩定性；而輔助的部份是通過該特徵增強單元1151用以增強原本感測影像（raw image）中的特徵，實作上，該特徵增強單元1151可以通過提升一類比數位轉換器之解析度位元數來增強特徵（例如增加2至3位元的解析度），及/或通過先將原本感測影像中的直流值扣除、將剩餘的交流值乘上一個特定增益值之後再將原直流值加回去，其中，較佳實施例為同時採用上述兩種機制，而在另一實施例，該處理器115可不包括該特徵增強單元1151，亦即該特徵增強單元1151是可選的（optional）。

該過濾單元1152包括至少一影像濾波器（image filter），例如採用兩個影像濾波器，對於一張感測影像的每一感測像素之影像值，第一影像濾波器執行八個不同方向的邊緣（edge）抑制產生八張邊緣抑制後的影像、從該些抑制後的影像選取出其中具有較弱特徵的影像，而第二影像濾波器執行八個不同方向的邊緣抑制、從該些抑制後的影像選取出其中具有較強特徵的影像，當判斷出該張影像的特徵影像較強或較多時，該過濾單元1152選取第一影像濾波器所產生輸出的影像作為目前像素的像素值，而當該張影像的特徵影像較弱或較少時，該過濾單元1152選取第二影像濾波器所產生輸出的影像作為目前像素的像素值。另外，若電子裝置100已判別出目前之工作表面的材質比較乾淨（例如固定圖案影像之值較少），該過濾單元1152選取第二影像濾波器所產生輸出的影像作為目前像素的像素值，而若電子裝置100已判別出目前之工作表面的材質比較髒（例如固定圖案影像之值較多），該過濾單元1152選取第一影像濾波器所產生輸出的影像作為目前像素的像素值。也就是說，該過濾單元1152可因應於感測到之特徵影像的強弱及/或所學習到之工作表面材質的差異，動態選取出具有較強特徵或較弱特徵的影像作為一感測像素的影像值。

接著，處理器115可通過該特徵統計單元1154，判斷一張感測影像中一或多個感測像素之影像值是否產生位移，例如判斷一個感測像素之影像值是否產生位移的操作可針對於每一感測像素為單位範圍進行判斷，而判斷多個感測像素之影像值是否產生位移的操作可針對於例如32*32的感測像素為單位範圍進行判斷（非本案的限制）。如果發生位移，則再計算一或多個感測像素之影像值於一特定時間內的一平均影像位移之值（代表平均位移的影像強度值），接著，處理器115可通過該固定圖案偵測單元1155，比對該平均影像位移之值與上述該臨界值TH，動態判斷一或多個感測像素之影像值對應於一固定圖案或是對應於電子裝置100的特徵影像，當該平均影像位移之值小於該臨界值TH時，處理器115判斷該影像值對應於固定圖案，而當該平均影像位移之值大於該臨界值TH，處理器115判斷該影像值對應於特徵影像。

之後，根據固定圖案偵測單元1155對於一或多個感測像素的判斷結果，電子裝置100通過該光學導航單元1153，當一或多個感測像素所感測到之影像值被判定為對應於一固定圖案時，該處理器115係對一或多個感測像素所感測到之影像值執行一校正操作，產生至少一校正後影像像素值，以及接著根據該至少一校正後影像像素值，執行光學導航追蹤的移動估測，穩定準確追蹤電子裝置100於目前工作表面的移動。實作上，該校正操作可以是對應地從一或多個感測像素所感測到之影像值扣除掉該平均影像位移的值，產生該至少一校正後影像像素值，然此並非本案的限制。此外，在校正時，處理器115亦可通過該光學導航單元1153，將被判定為對應於一固定圖案的一或多個感測像素所感測到之影像值，指派至少一對應的位元來取代一或多個感測像素所感測到之影像值，例如指派位元“1”或位元“0”來取代一或多個感測像素所感測到之影像值，令該光學導航單元1153於參照到位元“1”或位元“0”時，即可知道對應的感測像素之影像值為相應於一固定圖案，而不採用對應的感測像素之影像值來執行光學導航追蹤的移動估測。再者，指派位元“1”或位元“0”來取代一或多個感測像素所感測到之影像值的好處在於，光學導航單元1153根據所指派之位元“1”或位元“0”可動態學習到固定圖案雜訊於整張影像範圍的長相為何。

應注意的是，上述的臨界值TH可因應於不同的感測像素而設定為不同數值，亦即，處理器115於比對不同感測像素之影像值與臨界值TH時，可分別採用不同數值的臨界值TH。再者，本案電子裝置100於動態學習一工作表面之材質時，該工作表面並沒有限定，亦即電子裝置100適用於動態學習所有可能之工作表面的材質（乾淨的表面或是比較髒的表面均適用）。

另外，電子裝置100於出廠前，可被置於一完全乾淨的表面（理論上無微小顆粒粒子）進行移動感測的測試，處理器115可通過該特徵統計單元1154，估計計算一或多個感測像素之影像值的一平均影像位移之值，亦可計算每一感測像素之影像值於一特定時間內之一平均影像位移的值，該平均影像位移的值可代表光學系統本身的固定圖案雜訊的強度值，處理器115可記錄出廠測試時的固定圖案雜訊之強度值於一非揮發性記憶體中，之後，待電子裝置100實際被使用時，處理器115可從該非揮發性記憶體載入該固定圖案雜訊的強度值，並根據此強度值來校正對應感測像素所感測產生之影像值，之後根據校正後之影像值來進行光學導航追蹤的移動估測。 以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所做之均等變化與修飾，皆應屬本發明之涵蓋範圍。

100‧‧‧光學導航裝置 105‧‧‧影像感測器 110‧‧‧發光單元 115‧‧‧處理器 1151‧‧‧特徵增強單元 1152‧‧‧過濾單元 1153‧‧‧光學導航單元 1154‧‧‧特徵統計單元 1155‧‧‧固定圖案偵測單元

第1圖為本發明一實施例之光學導航裝置的方塊示意圖。 第2圖為第1圖所示之光學導航裝置的操作流程圖。

100‧‧‧光學導航裝置

105‧‧‧影像感測器

110‧‧‧發光單元

115‧‧‧處理器

1151‧‧‧特徵增強單元

1152‧‧‧過濾單元

1153‧‧‧光學導航單元

1154‧‧‧特徵統計單元

1155‧‧‧固定圖案偵測單元

Claims (13)

1. 一種能夠動態學習一光學導航裝置移動時之一工作表面之材質的方法，包含： 利用至少一發光單元，發射至少一光線至該工作表面，反射成像至一影像感測器； 根據該影像感測器之至少一感測像素在一特定時間內所感測到之至少一影像移動資訊，感測並計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移；以及 根據該至少一平均影像位移與一臨界值，動態判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於該光學導航裝置移動時之一特徵影像。
2. 如申請專利範圍第1項所述之方法，其中根據該至少一平均影像位移與該臨界值，動態判斷該至少一感測像素所感測到之該至少一影像值的步驟包含： 比對該至少一平均影像位移與該臨界值，動態判斷該至少一感測像素所感測到之該至少一影像值是該固定圖案或是該特徵影像。
3. 如申請專利範圍第2項所述之方法，其中比對且動態判斷的步驟包含有： 當該至少一平均影像位移小於該臨界值，判斷該至少一影像值是該固定圖案；以及 當該至少一平均影像位移大於該臨界值，判斷該至少一影像值是該特徵影像。
4. 如申請專利範圍第1項所述之方法，另包含： 當該至少一感測像素所感測到之該至少一影像值被判定是對應於該固定圖案時，對該至少一感測像素所感測到之該至少一影像值執行一校正操作，產生至少一校正後影像像素值；以及 根據該至少一校正後影像像素值，執行一移動估測，以準確追蹤該光學導航裝置於該工作表面之該移動。
5. 如申請專利範圍第4項所述之方法，其中執行該校正操作的步驟包含： 對應地從該至少一感測像素所感測到之該至少一影像值扣除掉該至少一平均影像位移，產生該至少一校正後影像像素值。
6. 如申請專利範圍第4項所述之方法，其中執行該校正操作的步驟包含： 將被判定是對應於該固定圖案的該至少一感測像素所感測到之該至少一影像值，指派至少一對應的位元來取代該至少一感測像素所感測到之該至少一影像值。
7. 一種光學導航裝置，能夠動態學習該光學導航裝置移動時之一工作表面之材質，該光學導航裝置包含： 一影像感測器； 至少一發光單元，用以發射至少一光線至該工作表面，反射成像至該影像感測器； 一處理器，耦接至該影像感測器，用以根據該影像感測器之至少一感測像素在一特定時間內所感測到之至少一影像移動資訊，計算該至少一感測像素於該特定時間內所感測到之至少一平均影像位移，以及根據該至少一平均影像位移與一臨界值，動態判斷該至少一感測像素所感測到之至少一影像值是對應於一固定圖案或是對應於該光學導航裝置移動時之一特徵影像。
8. 如申請專利範圍第7項所述之光學導航裝置，其中該處理器係比對該至少一平均影像位移與該臨界值，動態判斷該至少一感測像素所感測到之該至少一影像值是該固定圖案或是該特徵影像。
9. 如申請專利範圍第8項所述之光學導航裝置，其中： 當該至少一平均影像位移小於該臨界值，該處理器判斷該至少一影像值是該固定圖案；以及 當該至少一平均影像位移大於該臨界值，該處理器判斷該至少一影像值是該特徵影像。
10. 如申請專利範圍第7項所述之光學導航裝置，其中當該至少一感測像素所感測到之該至少一影像值被判定是對應於該固定圖案時，該處理器係對該至少一感測像素所感測到之該至少一影像值執行一校正操作，產生至少一校正後影像像素值；以及，該處理器係根據該至少一校正後影像像素值，執行一移動估測，以準確追蹤該光學導航裝置於該工作表面之該移動。
11. 如申請專利範圍第10項所述之光學導航裝置，其中該處理器係對應地從該至少一感測像素所感測到之該至少一影像值扣除掉該至少一平均影像位移，產生該至少一校正後影像像素值。
12. 如申請專利範圍第10項所述之光學導航裝置，其中該處理器係將被判定是對應於該固定圖案的該至少一感測像素所感測到之該至少一影像值，指派至少一對應的位元來取代該至少一感測像素所感測到之該至少一影像值。
13. 如申請專利範圍第7項所述之光學導航裝置，為一光學滑鼠。

Images