TW200901012A - Dynamically reconfigurable pixel array for optical navigation - Google Patents

Dynamically reconfigurable pixel array for optical navigation Download PDF

Info

Publication number
TW200901012A
TW200901012A TW97107209A TW97107209A TW200901012A TW 200901012 A TW200901012 A TW 200901012A TW 97107209 A TW97107209 A TW 97107209A TW 97107209 A TW97107209 A TW 97107209A TW 200901012 A TW200901012 A TW 200901012A
Authority
TW
Taiwan
Prior art keywords
electrical signals
dynamic reconfiguration
pixel
logic
trigger
Prior art date
Application number
TW97107209A
Other languages
English (en)
Other versions
TWI460615B (zh
Inventor
Ramakrishna Kakarala
Annette C Grot
David W Dolfi
Original Assignee
Avago Tech Ecbu Ip Sg Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Avago Tech Ecbu Ip Sg Pte Ltd filed Critical Avago Tech Ecbu Ip Sg Pte Ltd
Publication of TW200901012A publication Critical patent/TW200901012A/zh
Application granted granted Critical
Publication of TWI460615B publication Critical patent/TWI460615B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0383Signal control means within the pointing device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0317Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks

Description

200901012 九、發明說明: 【先前技術】 習知光學巡覽感測器使用 陣列以得到用於計算運 '之像素的像素 1异連動之數位影像。鋏 有種類之表面或成像場景 肖於解析所 在。 …寺點的敢理想像素尺寸並不存 對於光學滑鼠感測器來說,—血 卓而弋.典句 八1之成像場景為一例如 桌面或滑鼠墊之表面。由於多個類型之表面的存/ 之像素陣列在各種表面上有不心志之表面的存在,不同 尺寸顧及了用於在深色表 权大像素 疋,對於具有小特徵之表面來 仁 理想的,因為具有較大像♦尺+車大像素尺寸並不是最 _ 象素尺寸之像素陣列並不具有用於 廷類表面的適當解析度。另一 θ ' 1固例子疋’如果傻音ρ弓 中門由志“ ㈣貝1卜些南度重複的表面如 甲間色表面會引起追蹤誤差。 因此’習知光學巡覽咸測考廿 俊以⑽心並不能輕而易舉得調適被成 像以计异運動的不同類 之将《Ρ ^ 貞°尤其是該常規像素陣列 之特徵已被固定且不能為最佳 【發明内容】 ^供夕種成像%景。 一種裝置之實施例將被描述。在一項實施例中,該裝置 Γ光學巡覽電路。詳細來說,該光學巡覽電路可為一光 =覽器件之部分。該光學巡覽電路包括—影㈣測器' ^組態邏輯及一數位信號處理器。該影像感測器包括 像素陣列以產生相應於在該像素陣列之入射光的複數個 129200.doc 200901012 電信號。該動態重組態邏輯被輕合至該影像感測器。該動 態重組態邏輯餘態以從該像切㈣收該複數個電信號 及基於從該像素陣賴收之該複數個電信號產生複數個經 重組態電信號。該數位㈣處理器㈣合至該動態重組態 邏輯。該數位信號處理器被組態以從該動態重組態邏輯接 收該複數個經重組態電信號。 該裝置之另-項實施例亦被描述。該裝置包括用於基於 來自-光學巡覽器件之-像素陣列的複數個電信號之一分 析而產生-動態重組態觸發之構件。該裝置亦包括回應該 動態重組態觸發而產生複數個經重組態電信號之構件。在 一項實施例中,該複數個經重組態電信號係基於來自該像 素陣列之該複數個電㈣。該裝置亦包括用於處理該經重 組態電信號之構件以識別該光學巡覽器件之一運動。該裝 置之其他實施例亦將被描述。 一種方法之實施例亦被描述。在一項實施例中,該方法 係用於一光學巡覽器件之一像素陣列之一動態重組態方 法。該動態重組態方法包括在該像素陣列處接收入射光以 產生複數個電信號。該動態重組態方法亦包括分析該複數 個電信號以決定是否產生一動態重組態觸發。該動態重組 方法亦包括回應於S亥動態重組態觸發之產生而產生複數 個經重組態電信號《在一項實施例中,該複數個經重組態 電信號係基於來自該像素陣列的該複數個電信號。該動態 重組態方法亦包括處理該經重組態電信號以識別該光學巡 覽器件之一運動。亦描述本方法之其他實施例。 129200.doc 200901012 關~所附之圖式,通過本發明原理之示例來顯示,本發 明實施例之其他態樣及優點將從下述之詳細說明中變得顯 而易見。 【實施方式】 圖1為一種光學巡覽系統1 00之一實施例的系統方塊圖。 該被顯示的光學巡覽系統100包括一光學巡覽器件102及一 巡覽表面1〇4。該光學巡覽器件1〇2發射一光信號,其藉由 該巡覽表面104至少部分地被反射。該光學巡覽器件1〇2偵 測該反射光信號並處理該反射光信 號,如下所述。 應注意,根據使用該光學巡覽器件102之應用,該到巡 覽器件102及該巡覽表面1〇4之間之距離可不盡相同。在近 場應用中’該光學巡覽器件102可相對接近該巡覽表面 104 °例如’該光學巡覽器件1〇2可實體接觸該巡覽表面 104’或者該光學巡覽器件102可距離該巡覽表面104幾釐 求或幾英寸以内。或者,在遠場應用中,該光學巡覽器件 102可相對遠離該巡覽表面104。例如,該光學巡覽器件 102可在近場光學範圍之外操作。 被顯示之光學巡覽器件102包含一光源1〇6,一光學巡覽 電路108,一微控制器11〇,及光學元件112及114。其他實 施例可包括更少或更多元件。例如,該光學巡覽器件i 〇2 之一些實施例不包括一個或多個該等光學元件112及114。 在一項實施例中,該光源106為一發光二極體(LED)。在 另一實施例中,該光源106為一鐳射。或者,該光源106可 為另一類型之光源。 129200.doc 200901012 被顯示的充學巡覽電路108包括一影像採集系統 (IAS)120、一數位信號處理器(DSP)122、及一驅動器 124。在一項實施例中’該光學巡覽電路1〇8之該驅動器 124控制該光源1 〇6之操作(例如,使用一驅動器信號)以產 生藉由該光學元件112被傳送至該巡覽表面ι〇4之光信號。 然後該反射光信號藉由該另一個光學元件1 1 4被接收並被 該影像採集系統120偵測。 被顯示的影像採集系統120包括一影像感測器126,其包 括一像素陣列127。該影像採集系統120亦包括動態重組態 邏輯1 28及一類比轉數位轉換器(ADC) 1 30。該動態重組態 邏輯128亦可被提及為一動態重組態電路。 在一項實施例中’該影像感測器126產生複數個相應於 在a亥像素陣列12 7之入射光的電信號。各個該等電信號相 應於該像素陣列127之一影像元素(或像素)^在一實施例 中’各個像素為一感光器或其他感光器件。從該巡覽表面 104反射之該光信號入射於該像素陣列127上。在一實施例 中’該光學元件1 14促進在該像素陣列ι27之細微表面影像 之解析度。然後該影像感測器126將該複數個電信號傳送 送至該動態重組態邏輯128。 叙來說’該動態重組態邏輯128從該影像感測器126之 該像素陣列127接收該複數個電信號並產生複數個經重組 態電信號。該經重組態電信號係基於從該影像感測器126 之該像素陣列127接收之該複數個電信號。多種經重組態 電L唬之不例性描述,及該等經重組態電信號係如何產生 129200.doc 10 200901012 的,將被更詳細地提供於下文。然後該動態重組態邏輯 12 8將„亥等經重組態電信號傳送至該類比轉數位轉換器 13 〇。該類比轉數位轉換器將該複數個經重組態電信號從 類比信號轉換為數位信號,然後將該等數位信號傳遞至該 數位信號處理器122。 在該數位k號處理益122從該影像採集系統〖2〇之該類比 轉數位轉換器130接收該等經重組態電信號之數位形式 後,該數位處理器122可執行一使用該等經重組態電信號 之附加處理。然後該數位信號處理器122將一個或多個俨 號傳达至該微控制器110。從該光學巡覽電路丨〇8之該數位 處理器122傳送至該微控制器i 1〇之信號的示例性類型包括 基於Δχ及Ay相對位移值的頻道正交信號。這些信號,或其 他信號,可為對該光學巡覽器件1〇2相對於該巡覽表面1〇4 之一運動之指示❶該數位信號處理器122之其他實施例可 將其他類型之信號傳送至該微控制器11〇。在一實施例 中,該微控制器1 1 0執行多種功能,包括將資料傳送至一 主電腦系統(未顯示)’或從該主電腦系統(未顯示)接收資 料。 圖2為圖1中該影像採集系統12〇之該動態重組態邏輯128 之貫鉍例的系統方塊圖。該被顯示的動態重組態邏輯 128包括一動態重組態控制器132、分格化㈨仙比幻邏輯 134、裁剪邏輯136,及可變增益邏輯138。該動態重組態 邏輯128亦包括觸發邏輯14卜或者,該動態重組態邏輯 128之其他實施例不包括該觸發邏輯丨4〇。 129200.doc 200901012 在一實施例中,該動態重組態控制器132被組態以實施 一動態重組態模式。—般來說,-動態重組態模式涉及該 動態重組態邏輯1 28之任何操作模式,其中該複數個電信 號係從該影像感測器126接收及複數個經重組態電信號係 基於從該影像感測器126接收之原始電信號而被產生。可 被該動態重組悲控制器132實施的動態重組態模式之一些 例子包括一分格化模式、一裁剪模式及一可變增益模式。 该動態重組態控制器132之一些實施例可實施其他類型之 動態重組態扠式。此外,一些實施例可實施動態重組態模 式之一組合。. 在一實施例中’該動態重組態控制器13 2回應於一動態 重組態觸發而實施一動態重組態模式。換句話說,該動態 重組態控制器132回應於一動態重組態觸發而產生該經重 組態電信號。在一實施例中,該動態重組態邏輯128之該 觸發邏輯14〇產生動態重組態觸發。或者,該動態重組態 觸發可由該數位信號處理器122予以產生。在此實施例 中,該數位信號處理器122將該動態處理觸發發送至該影 像採集系統120之該動態重組態邏輯〖28。 在一實施例中’該動態重組態觸發為一分格化觸發。該 分格化觸發可基於一個或多個指示符而被產生。用於產生 分格化觸發之示例性指示符包括:相關聯於一像素平均值 之-第-像素統計指示符;相關聯於一像素最大值之一第 二像素統計指示符;相關聯於一像素直方圖之一第三像素 、-充彳日不付,一平滑度指不符’以指不該光學巡覽器件之 129200.doc -12- 200901012 運動追蹤平滑度;一影像自相關指示符,以指示 (例如S亥巡覽表面1 04)的圖案重複。該觸發邏輯i40之一些 實施例可使用其他指示符或指示符之組合。 在另一實施例中’該動態重組態觸發為一裁剪觸發。該 裁苜觸發可基於一個或多個指示符。用於產生該裁剪觸發 之示例性指示符包括:一時間指示符,以指示一運動計算 之處理時間,一平滑度指示符,以指示該光學巡覽器件 之運動追蹤平滑度;一影像自相關指示符,以指示一表面 (例如該巡覽表面1 〇4)的圖案重複。 在另實施例中,s亥動態重組態觸發為一可變增益觸 發:該可變增益觸發可為基於一個或多個指示二:: 生該可變增益觸發之示例性指示符包括:相關聯於一像素 平均值之-第-像素統計指示#;相關聯於一像素最大值 之一第二像素統計指示符;相關聯於一像素直方圖之一第 三像素統計指示符;及一影像特徵指示符,以指示一被該 像素陣列127接收之影像的影像特徵計數。在—實施例 中,該觸發邏輯14〇執行一帶通遽波器142以產生該影像特 徵指示符。或者,該帶通渡波器142可藉由該數位信號處 理器m或該光學巡覽電路!附之另—組件予以實施。在 另-實施例中’單獨的帶通濾波器142可被實施於該觸發 邏輯uo及該數位信號處判122之各者i各個帶通遽波 器⑷可具有適合於該等單獨的觸發操作及巡覽 特濾波特徵。 胃 一帶通遽波器M2之-示例性實施例可藉由捲積一高通 I29200.doc -13- 200901012 一合適的高通濾波器為— 其通常被表示為一 3x3陣 /慮波器及一低通遽波器而產生 拉普拉斯(Laplacian);慮波器, 列’具有如下係數:
L
-1 —2 一適當之低通濾波器為如下的2x2加法陣 由捲積該等陣列L及S而產生的該帶通濾波器 為如下之4 X 4陣列:
-3 7 7 -3 f I ·*>;»«· 一 I — 3· —3 _ 1 或者’其他帶通濾波器142可被實施 該動態重組態控制器132依靠由該觸發邏輯14〇產生的動 態重毫發之類型而產生不同的動態重組態模式。各個 該等動,4重組態模式都可使用—特定類型之邏輯。例如, 該分格化模式使料分格化邏輯134,該裁剪模式使用該 裁剪邏輯136,及該可變增益模式使用該可變增益邏輯 138。引用圖3至圖8,纟個這些動態重組態模式將被更詳 細地描述。 圖3及圖4顯不了該分格化模式之態樣。在一實施例中, 該分格化邏輯134被組態以組合該複數個電信號之子集以 產生忒複數個經重組態電信號。因此,經重組態電信號之 數量相等於子集之數量。換句話說,該分格化邏輯134產 129200.doc -14· 200901012 生a重組態電信號,該經重組態電信號係基於從該像素 j中之像素的一子集’或集合接收的多個電信號。 圖3之原理圖描繪了一像素陣列15〇之一實施例以顯示分 格化°在被描㈣實施例中’該㈣像素陣列Μ峨細分 為16個像素格(bin)154,或像素152之集合。各個像素格 广括像素I52之BxB陣列。因此,所得到的像素格陣 列係像素格之Pxp陣列。在一像素格154中之該等單獨像 素152之該等電信號被組合,因而各個像素格154都具有-回應的I重組態電信號H i 6個像素格可為—像 素格陣列(即P=4),其中各個像素格包括一 4x4像素陣列(即 B=4pB亦被提及為分格化因數,因為其表明了在每個像 素格1 54中有多少個像素1 52。由於在所顯示之實施例中有 16個像素格154,因此該分格化邏輯134產生16個相應的經 重組怨電k號(例如,一個經重組態電信號用於一個該等 16個像素格154)用於該像素陣列15〇,而不是256個原始電 托號(例如,一個原始信號用於一個像素丨52)。 圖4為一像素分格化結構之一實施例的系統方塊圖。該 動態重組態控制器132被耦合至該分格化邏輯134以控制該 分格化模式之實施。該分格化邏輯134接收NxN個電信 號,其中ΝχΝ表示在該像素陣列15〇中之像素152的數量。 然後該分格化邏輯134組合該ΝχΝ個電信號以產生ρχΡ個經 重組態電信號,其中Ρχρ表示像素格154之數量(因為一個 經重組態電號用於一個像素格1 5 4)。 應注意’該重組態模式可降低處理之複雜度,因為經重 129200.doc -15- 200901012 組態電#號之數量(如16)小於原始電信號之數量(如256)。 同時,該分格化模式可被使用於一相對深色之巡覽表面 104上以有效產生一更大,更敏感之回應。當該巡覽表面 104為深色,由於朝該深色巡覽表面ι〇4反射之光的數量有 限,因此由該影像感測器! 26產生之該等電信號相對較 弱。所以,將多個電信號一起組合為一經重組態電信號將 增加該信號之強度及該影像感測器之靈敏度。此外,組合 多個像素152之該等電信號將增大該影像感測器126之有效 間距,或像素尺寸。舉例來說,該像素陣列i 5 〇之該有效 間距可從原始像素間距x增大到更大之像素間距χ,。當該光 學巡覽器件102被使用於一更明亮、更具反射性之巡覽表 面104之上時,該分格化模式可被禁用,因而從該等單獨 像素1 52發出之該等原始電信號可被使用以允許更小特徵 之解析。 為更透徹的闡明該分格化模式之操作,如下之例子被提 供。這些例子顯示了分格化如何被開啟及關閉。這些例子 亦顯示了在該分格化模式被實施時如何動態調整該分格化 因數。 在一項例子中,當該分格化模式被關閉時,一由該影像 感測器126所解析之影像可能過深。這可藉由確定用於該 衫像之該最大像素值及該平均像素值低於一臨限值及該積 分時間被設定在一最大值而被偵測出來。在這個例子中, 由於積分時間不能增加,該分格化模式可被開始實施,或 開啟’以有效增加該像素陣列127之該像素間距。在一實 129200.doc -16· 200901012 施例中,該分格化因數3可被設定為取決於一該目標平均 像素值及該Λ際平均像素值之比率(例如,b=:目標/實際)。 在另一例子中,當該分格化模式可被操作時,一影像具 有過夕之可偵測特徵。4奐句話說,該影像感測器不能 解析忒巡Λ表面104之細小特徵,例如因為當分格化被開 啟時,該等像素像素格154之有效尺寸過大及該等像素格 154將該等細小特徵平均化。這可被㈣出來,如果一帶 通濾波器之輸出低於一臨限值及如果自相關(例如,去均 值後)低於-臨限值。為解決這個問題,分格化可被關 閉。 在另例子中,當分格化被開啟時,自相關可顯示緊密 第-蜂值。這說明該影像具有—週期性接近該有效像素間 距之重複圖案。為解決這個問題,該分格化因㈣可被減 小。在-實施例中,該分格化因數可被減去—相應於該目 標峰值間距及該實際峰值間距之比率(例如,β,=β*目標/ 實際)的數量。 丁 在另一實施例中,當分格化被關閉時,該光學巡覽器件 102之該被偵測速度可增大。這可藉由測量從最後一圖框 藉由交互相關之像素位移而被偵測出。為解決這個問題, 該分格化因數Β可被增大。在—實施例中,該分格化因數 被增加一相應於該目標追蹤速度及當前最大速度之比率 (例如,目標/當前最大)的數量。或者,該分格化因 數可增加或減少另一數量。 圖5至圖7顯示了該裁剪模式之態樣。在一實施例中,該 • Ϊ7- 129200.doc 200901012 裁剪邏輯13 6被設定以選擇哕銪鉍 太W 擇以數個電信號之一子集,以 產生该複數個經重組態電作垆 ^ ^ 琥及攸该後數個經重組態電信 唬中排除該複數個電信號 β _ ±。 井所璉子集。換言之,該裁 剪邏輯13 6使用該原始電_ _ 壬,〇 电乜唬之專用子集以產生該等經 重組態電信號。 圖5為一原理圖,其描洽 、 _ 、々了 像素陣列之一實施例的原 理以顯不裁男。在被描繪的實施例中,該㈣像素陣列 Γ
15〇之-MxM子集156被選擇。該等剩餘之像素職該所 選子集156被排除,或裁剪。然後在該子集156中之該等像 素m之该等電信號被當作該等經重組態電信號而使用。 §亥荨剩餘或裁剪之傻音1 & 素52之该專電信號不被使用或包括 在該等經重組態電信號中。舉例來說,有Μ個經重組態電 信號(即M’用於該像素陣歹"5〇,而不是W個原 號(即 N=16)。 ° 圖6為一原理圖,i ^ ^ 八描緣了一像素陣列1 50之另一實施例 的原理以顯示裁剪。在被描緣之實施例中,該ΝχΝ像素陣 列之MXL子集158被選擇。該等剩餘之像素152從該 所集158被裁剪。然後在該子集156中之該等像素I” 之-亥等電L號被當作該等經重組態電信號而使^舉例來 說有32個電信號用於該像㈣列n而不是以個原始 電心號應、;主思,该等子集156及158之組態並不相同。因 此々該裁剪邏輯136可使用該像素陣列】%之多種子集,且 „亥等子集可為任意形狀或排列,包括持續式(即所選像素 152鄰近另—所選像素)及非持續式(即至少—些該等所選像 I29200.doc 18 200901012 素152不鄰近其他所選像素)組態。 這種類型之裁剪(或分格化)有益於運動追蹤應用,其中 該運動已知為絕大部分發生在一個方向。例如’―打^頭 絕大部分地在水平方向移動’因此相比於沿著一垂直維 度,一運動追蹤感測器可使用更多沿一水平維度之像素。 • 圖7為一像素裁剪結構之一實施例的系統方塊圖。該動 態重組態控制器132被耦合至該裁剪邏輯136以控制該裁剪 f 模式之實施。該裁剪邏輯136接收NxN個電信號,其中 NXN係在該像素陣列15〇中之像素152的個數。然後該裁剪 邏輯13 6選擇該等像素152之一子集以產生ΜχΜ個經重組態 電信號,其中ΜχΜ(或MxL)係所選像素152之個數。 應注意該裁剪模式可降低處理之複雜度,因為相比原始 電仏唬之個數(例如,256),經重組態電信號之個數更少 (例如,64)。另外,該動態重組態控制器132之一些實施例 可結合另一動態重組態模式(如該分格化模式)而實施該裁 〔 勞模式。該裁剪模式之其他實施例可具有其他性能考慮。 因此,應注意該動態重組態邏輯128之一些實施例可促 進在不同動態重組態模式之間之調適性切換。例如,該動 態重組態邏輯128可促進在該分格化模式及該裁剪模式之 間之切換。這可使一種與習知像素陣列相比為不同類型之 像素陣列126被使用。例如,由於該動態重組態邏輯128在 忒巡覽表面104具有較小特徵時實施該裁剪模式;及在該 巡覽表面104顏色較深時實施該分格化模式,可使用一具 有更小像素間距之像素陣列。亦應注意在該裁剪模式及該 129200.doc -19- 200901012 刀格化模式之間之動態切換允許該影像採集系統〗20處理 同樣數量之作·號· & & i $ ^ , 彳°唬而無須考慮何種模式被實施。當該分格化 ' '只施時,該等像素格154之尺寸可被設定因而像辛 格154之备旦边 里為一預定之數量。然後當該裁剪模式被實施 $所選之像素152之數量可被設定為相同於被使用於該 K式中之像素格1 54的數量。在處理該等相同數量 之信號用於兩種模式時,這提供了在該分格化及裁f模式 之間切換的靈活性。 圖8為可變增益結構之一實施例的系統方塊圖。在一 、 】中該可變增益結構被使用以實施一可變增益模 弋主思,與上述之該分格化模式及該裁剪模式相比, j可II增盈模 < 並不會必然地對何種像素信號被使用產生 :因此,一單獨像素陣列之示意圖未被提供與該可變 增益模式的這種描述關聯。在一實施例中,該可變增益邏 輯138提供一可程式化類比增益。 :"亥可二增盈結構包括該動態重組態控制器132及該可變 ^ k輯13 8。6亥動態重組態控制器1 3 2被耗合至該可變增 盃邏輯138以控制該可變增益模式之實施。在一實施例 中,該可變增益邏輯138被組態以將該複數個電信號中之 至少一個的類比增益改變以產生該複數個經重組態電信 號由於被使用之信號的數量不冑,因而該可變增益邏輯 138具有相同數量之輸人及輸出、然而,由於—個或多個 L號之增盈被修改以提高或降低相應信號之強度,所以至 少一些從該可變增益邏輯138輸出之該等經重組態電信號 129200.doc -20- 200901012 不同於輸入至該可變增益邏輯138之該等電信號。 應注意該可變增錢式可允許該f彡像“ H126使用更 =之陕門才間及更快之圖框率,其反過來允許該影像感測 器1^6在-顏色更深之巡覽表面1()4上解析特徵。此外,該 動知重”且態控制器】32可結合其他動態重組態模式如該分 格化模式或該裁剪模式而實施該可變增益模式。該可變增 益結構之其他實施例可具有其他性能考慮。 圖9為一用於動態重組態一像素陣列丨2 7之一動態重組態 方法160的實施例之流程圖。雖然引用的係圖1中之該光學 巡覽系統100,該動態重組態方法16〇可關聯其他類型之光 學巡覽系統而被實施。 在方塊162中,該影像採集系統12〇獲得類比像素資料。 在一實施例中,該影像感測器126在該像素陣列127處接收 入射光,該像素陣列整合一對應電信號陣列。然後該等電 信號被傳送至該動態重組態邏輯128。在方塊〗以中,該動 態重組態邏輯128確定是否存在一動態重組態觸發。在一 實施例中,該動態重組態邏輯128之該觸發邏輯14〇分析該 複數個電信號以確定是否產生一動態重組態觸發。在一實 施例中,該觸發邏輯140產生該動態重組態觸發,如上所 述。或者,該數位信號處理器122可產生該動態重組態觸 發。 如果一動態重組態觸發未被產生,則在方塊166中,該 動態重組態邏輯128將該等原始電信號傳遞至該類比轉數 位轉換器130,該轉換器13〇基於該原始類比像素資料而產 129200.doc -21 · 200901012 生數位像素信號。反之,如果一動態重組態觸發被產生, 則在方塊168中該動態重組態邏輯ι28基於來自該像素陣列 127之該複數個電信號而產生複數個經重組態電信號。然 後該動態重組態邏輯128將該等經重組態電信號發送至該 類比轉數位轉換器130。在方塊17〇中,該類比轉數位轉換 器1 3 0基於該經重組態類比像素資料而產生數位像素資 才斗。 、、 在將該等原始電信號或該等經重組態電信號之任一者從 類比信號轉換為數位信號後,在方塊172中該類比轉數位 轉換器130將該數位像素資料發送至該數位信號處理器 122。在方塊174中該數位信號處理器122處理該數位像素 資料。在一實施例中,該數位信號處理器122處理該數位 像素資料以識別該光學巡覽器件1〇〇相對於該巡覽表面1〇4 之一運動。然後該數位信號處理器122將例如基於紅及幼 相對位移值之頻道正交錢的計數信f虎或其他信號輸出至 該微控制器110。然後該被描繪之動態重組態方法16〇結 束。 應注意用以產生該等經重組態電信號之該操作168可被 以多種方式實施。在一實施例中,該等經重組態電信號可 藉由組合該複數個電信號之子集來使用被組合之信號而被 產生。在另-實施例中,該等經重組態f信號可藉由選擇 該複數個電信號之-子集及從該複數個經重組態電信號排 除該複數個電信號之一未所選之子集來使用被裁剪之信號 而被產生。在另-實施例中,該等經重組態電信號可藉由 129200.doc -22- 200901012 改變該複數個電信號之該類比增益來使用可變增益信號而 破產生。其他實施例可使用其他類型之信號以產生該等瘦 重組態電信號。 ^ 、、雖然在此該(等)方法之操作以一種特定順序顯示及插 述,各個方法之操作的順序可被改變,因此某些操作可以 -種^向順序執行或某些操作可至少部分地與其他操作同
時執仃。在另-實施例中,+同操作之指示或從操作可以 一種間歇及/或交替方式執行。 雖然本發明之具體實施例已被描述或顯示,但本發明將 不限於如此描述及顯示之特定形式或部件安排。本發明之 範圍將藉由附於此之請求項及其等效物而被界定。 【圖式簡單說明】 圖1為一種光學巡覽系統之一實施例的系統方塊圖。 圖2為圖1中該影像採集系統之該動態重組態邏輯之—實 施例的系統方塊圖。 圖為原理圖,其描繪了 一像素陣列之一實施例的原 理以顯示分格化。 θ為像素分格化結構之一實施例的系肌~ w… 圖為原理圖,其描繪了 一像素陣列之一實施例的原 理以顯示裁剪。 圖6為一原理圖,其描繪了 一像素陣列之另一實施例的 原理以顯示裁剪。 :、像素裁剪結構之一實施例的系統原理圖。 圖8為—可變增益結構之-實施例的系統原理圖。 129200.doc -23· 200901012 圖9為一用於動態重組態一像素陣列之一動態重組態方 法之實施例的流程圖。 貫穿本說明,相似之參考數字可被使用以識別相似之元 件。 【主要元件符號說明】
100 光學巡覽系統 102 光學巡覽器件 104 巡覽表面 106 光源 108 光學巡覽電路 110 微控制器 112 光學元件 114 光學元件 120 影像採集系统 122 數位信號處理器 124 驅動器 126 影像感測器 127 像素陣列 128 動態重組態邏輯 130 類比轉數位轉換器 132 動態重組態控制器 134 分格化邏輯 136 裁剪邏輯 138 可變增益邏輯 129200.doc -24- 200901012 140 142 150 152 154 156 158 160 162 164 166 168 170 172 I 174 176 觸發邏輯 帶通濾波器 像素陣列 像素 像素格 ΜχΜ子集
MxL子集 動態重組態方法 獲得類比像素資料 動態重組態觸發? 基於原始類比像素資料產生數位像素資料 基於原始電信號產生經重組態電信號 基於經重組態類比像素資料產生數位信 號資料 將該數位像素資料發送至該數位信號處 理器 處理該數位像素資料 輸出計數信號至該微控制器 129200.doc -25-

Claims (1)

  1. 200901012 十、申請專利範圍: ι_ -種-光學巡覽器件之光學巡覽電路,該光學巡覽電路 包含: -影像感測器’其包含—像素陣列以產生相應於該像 素陣列處之入射光的複數個電信號; -動態重組態邏輯’其_合至該影像感測器,該動 態重組態邏輯被用於從該像素陣列接收該複數個電信號 及基於來自該像素陣列之該複數個電信號而產生複數個 經重組態電信號;及 一數位信號處理器,其被耦合至該動態重組態邏輯, 該數位信號處理器被用於從該動態重組態邏輯接收該複 數個經重組態電信號。 2. 如請求項1之光學巡覽電路,其中該動態重組態邏輯進 一步被組態以回應於一動態重組態觸發而產生該等經重 組態電信號。 3. 如請求項2之光學巡覽電路,其中該動態重組態邏輯包 括觸發邏輯以產生該動態重組態觸發。 4. 如請求項3之光學巡覽電路,其中該動態重組態觸發包 括一分格化觸發,且該觸發邏輯進一步被組態以基於如 下指示符之至少一個指示符而產生該分格化觸發: 相關聯於一像素平均值之一第一像素統計指示符; 相關聯於一像素最大值之一第二像素統計指示符; 相關聯於一像素直方圖之一第三像素統計指示符; 一平滑度指示符,其用於指示該光學巡覽器件之運動 129200.doc 200901012 追縱平滑度;及 其用於指示一表面之一圖案重 衫像自相關指示符, 複。 5.如請求項3之光學 紅一& 重路’其中該動態重組態觸發包 枯一裁剪觸發,且兮·鋸& ,t _ μ觸發邏輯進一步被組態以基於如下 才曰不符之至少一個丼 U知不付而產生該裁剪觸發: 一時間指示符,J:田▲ 扣. 八用於指示一運動計算之一處理時
    間, ''月度&不其用於指示該光學巡覽器件之運動 追縱平滑度;及 〃衫像自相關指示符’其用於指示一表面之一圖案重 複。 6’如:求項3之光學巡覽電路,其中該動態重組態觸發包 括可變增益觸發,且該觸發邏輯進一步被組態以基於 如下指示籍夕5小 . v —個指示符而產生該可變增益觸發: 冲關辦於-像素平均值之—第—像素統計指示符; 冲關聯於—像素最大值之H象素統計指示符; 相2聯於-像素直方圖之一第三像素統計指示符;及 衫像特徵指示符’其用於指示—影像特徵計數,其 中該光學巡覽電路進—步包括一帶通濾波器以產生該影 像特徵指示符。 7.如凊求項2之光學巡覽電路’其中該數位信號處理器進 v被、、且恕以產生该動態重組態觸發及將該動態重組態 觸發發送至該動態重缸態邏輯。 129200.doc 200901012 8. 如請求項1之光學巡覽電路,其中該動態重組態邏輯包 括一動態重組態控制器以實施一動態重組態模式。 9. 如請求項8之光學巡覽電路,其中該動態重組態邏輯進 一步包括被耦合至該動態重組態控制器之分格化邏輯, 該分格化邏輯被用於組合該複數個電信號之子集以產生 該複數個經重組態電信號,其中該經重組態電信號之數 量係等於子集之數量。 10. 如請求項9之光學巡覽電路,其中該分格化邏輯進一步 被組態以利用該等子集之各者動態調整代表多個像素之 一分格化因數。 1 1.如請求項8之該光學巡覽電路,其中該動態重組態邏輯 進一步包括被耦合至該動態重組態控制器之裁剪邏輯, 該裁剪邏輯被用於選擇該複數個電信號之一子集以產生 該複數個經重組態電信號及從該複數個經重組態電信號 中排除該複數個電信號之一非所選子集。 12.如請求項8之光學巡覽電路,其中該動態重組態邏輯進 一步包括被耦合至該動態重組態控制器之可變增益邏 輯,該可變增益邏輯被用於改變該複數個電信號之至少 一者之一類比增益以產生該複數個經重組態電信號。 1 3.如請求項8之光學巡覽電路,其中該動態重組態控制器 進一步被組態以在不同動態重組態模式之間調適性切 換。 1 4. 一種用於一光學巡覽器件之一像素陣列的動態重組態方 法,該動態重組態方法包括: 129200.doc 200901012 在該像素ρ車列處接收入射光以產生複數個電信號; 分析該複數個電信號以決定是否產生一動態重組態觸 發; 回應於該動態重組態觸發之產生而產生複數個經重組 態電信號,其中該複數個電信號係基於來自該像素陣列 之該複數個電信號;及 處理該等經重組態電信號以識別該光學巡覽器件之一 運動。 15. 如請求項14之動態重組態方法,其中產生該複數個經重 組態電信號包括藉由組合該複數個電信號之子集而產生 經分格化信號’其中該經重組態電信號之數量等同於子 集之數量。 16. 如請求項14之動態重組態方法’其中產生該複數個經重 組態電信號包括藉由選擇該複數個電信號之一子集及從 該複數個經重組態電信號中排除該複數個電信號之一非 所選子集而產生經裁剪信號。 17. 如睛求項14之動態重組態方法,其中產生該複數個經重 組態電信號包括藉由改變該複數個電信號之類比增益而 產生可變增益信號。 18. —種裝置,其包括: 用於基於來自一光學巡覽件之一像素陣列的複數個 電信號之一分析而產生一動態重組態觸發的構件; 用於回應於3亥動態重組態觸發而產生複數個經重組態 電信號之構件’其中該複數個經重組態電信號係基於來 129200.doc 200901012 自該像素陣列之該複數個電信號;及 用於處理該等經重組態電信號以識別該光學巡覽器件 之一運動之構件。 19.如請求項18之裝置,其中用於產生該動態重組態觸發之 該構件進一步包括:用於基於如下指示符之至少一個指 示符而產生該動態重組態觸發之構件: 相關聯於一像素平均值之一第一像素統計指示符; 相關聯於一像素最大值之一第二像素統計指示符; 相關聯於一像素直方圖之一第三像素統計指示符; —平滑度指示符,其用於指示該光學巡覽器件之運動 追蹤平滑度; 一影像自相關指示符’其用於指示一表面之一圖案重 複; 一時間指示符,其用於指示一運動計算之一處理時 間;及 ’ 一影像特徵指示符,其用於指示一影像特徵計數。 20.如請求項18之襞置,其中該用於產生該複數個經重組態 電信號之該構件進—步包括: 用於產生複數個經分格化信號之構件,其中該複數個 經分格化信號之各者係衍生自該複數個電信號之—子集 之一組合; ' 用於產生複數個經裁剪信號之構件,其中該複數個經 裁剪信號之各者包括該複數個電信號中之一相應信號, 其中該複數個經裁剪信號包括少於所有該複數個電信°號 129200,d〇c 200901012 / 之信號;及 用於產生複數個可變增益信號之構件,其中該複數個 可變增益信號之各個包括該複數個電信號中藉由一所選 增益修改之一相應信號。 129200.doc
TW097107209A 2007-04-11 2008-02-29 用於光學巡覽之動態可重組態的像素陣列 TWI460615B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/734,244 US9052759B2 (en) 2007-04-11 2007-04-11 Dynamically reconfigurable pixel array for optical navigation

Publications (2)

Publication Number Publication Date
TW200901012A true TW200901012A (en) 2009-01-01
TWI460615B TWI460615B (zh) 2014-11-11

Family

ID=39744450

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097107209A TWI460615B (zh) 2007-04-11 2008-02-29 用於光學巡覽之動態可重組態的像素陣列

Country Status (4)

Country Link
US (1) US9052759B2 (zh)
JP (1) JP4809388B2 (zh)
DE (1) DE102008018225B4 (zh)
TW (1) TWI460615B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103970293A (zh) * 2013-02-05 2014-08-06 原相科技股份有限公司 光学导航装置及光学导航方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7965278B2 (en) * 2006-12-29 2011-06-21 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Optical navigation device adapted for navigation on a transparent plate
US10025395B2 (en) 2011-02-16 2018-07-17 Pixart Imaging Inc. Image-capturing device configured for a 3D space optical pointing apparatus with adjustable resolution setting
TWI486822B (zh) * 2011-02-16 2015-06-01 Pixart Imaging Inc 應用於光學指標裝置之影像擷取裝置
TWI471767B (zh) * 2013-03-26 2015-02-01 Pixart Imaging Inc 位移偵測裝置
CN104102360B (zh) * 2013-04-08 2017-06-06 原相科技股份有限公司 位移检测装置
WO2014205705A1 (zh) * 2013-06-26 2014-12-31 林大伟 光传感器阵列装置
DE102016102110A1 (de) * 2016-02-07 2017-08-10 Nikolaus Tichawa Verfahren zur zeilenweisen Bildabtastung
US10365370B2 (en) 2016-10-31 2019-07-30 Timothy Webster Wear tolerant hydraulic / pneumatic piston position sensing using optical sensors
US10592007B2 (en) * 2017-07-26 2020-03-17 Logitech Europe S.A. Dual-mode optical input device
CN111292233B (zh) * 2018-12-06 2023-08-15 成都微晶景泰科技有限公司 透镜阵列图像拼接方法、装置及存储介质
CN111292232B (zh) * 2018-12-06 2023-08-15 成都微晶景泰科技有限公司 透镜阵列图像拼接方法、装置及存储介质
CN113261008A (zh) * 2019-02-04 2021-08-13 指纹卡有限公司 光学生物特征成像装置中的可变像素分箱
CN111694447A (zh) * 2019-03-11 2020-09-22 原相科技股份有限公司 多模光学导航装置及方法
US11625108B2 (en) * 2020-09-30 2023-04-11 Logitech Europe S.A. Working range and lift detection in an input device

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4631400A (en) 1984-01-20 1986-12-23 California Institute Of Technology Correlating optical motion detector
US5578813A (en) 1995-03-02 1996-11-26 Allen; Ross R. Freehand image scanning device which compensates for non-linear movement
US5786804A (en) 1995-10-06 1998-07-28 Hewlett-Packard Company Method and system for tracking attitude
US6078312A (en) 1997-07-09 2000-06-20 Gateway 2000, Inc. Pointing device with absolute and relative positioning capability
US6466265B1 (en) 1998-06-22 2002-10-15 Eastman Kodak Company Parallel output architectures for CMOS active pixel sensors
EP1105842B1 (en) 1998-08-25 2002-10-02 Holding B.E.V. S.A. Image processing apparatus
US6222174B1 (en) 1999-03-05 2001-04-24 Hewlett-Packard Company Method of correlating immediately acquired and previously stored feature information for motion sensing
US6888568B1 (en) 1999-08-19 2005-05-03 Dialog Semiconductor Gmbh Method and apparatus for controlling pixel sensor elements
US6462330B1 (en) 2000-03-24 2002-10-08 Microsoft Corporation Cover with integrated lens for integrated chip optical sensor
KR100399635B1 (ko) 2000-12-21 2003-09-29 삼성전기주식회사 광학식 마우스
DE10316208A1 (de) 2002-04-12 2003-11-20 Samsung Electro Mech Navigationssystem und Navigationsverfahren
US20040018593A1 (en) * 2002-06-03 2004-01-29 Carton Jill Anti-RELP fusion antibodies, compositions, methods and uses
JP2004302533A (ja) * 2003-03-28 2004-10-28 Hitachi Ltd 光学式マウス及びそれを用いた端末装置
US7019733B2 (en) 2003-03-31 2006-03-28 Ban Kuan Koay Optical mouse adapted for use on glass surfaces
US7116427B2 (en) 2003-10-30 2006-10-03 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Low power consumption, broad navigability optical mouse
US7209116B2 (en) * 2003-10-08 2007-04-24 Universal Electronics Inc. Control device having integrated mouse and remote control capabilities
US7221356B2 (en) * 2004-02-26 2007-05-22 Microsoft Corporation Data input device and method for detecting an off-surface condition by a laser speckle size characteristic
US7446756B2 (en) 2004-03-22 2008-11-04 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Apparatus for controlling the position of a screen pointer with low sensitivity to particle contamination
US8325140B2 (en) 2004-04-20 2012-12-04 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Illumination spot alignment
US7339575B2 (en) * 2004-05-25 2008-03-04 Avago Technologies Ecbu Ip Pte Ltd Optical pointing device with variable focus
US20060086712A1 (en) 2004-10-25 2006-04-27 Feldmeier David C Safety device for flat irons based on optical motion detection
US20060114231A1 (en) 2004-11-12 2006-06-01 Creative Technology Ltd. Optical wireless mouse power saving feature
EP1659778A1 (en) 2004-11-23 2006-05-24 Dialog Semiconductor GmbH A column averaging/row binning circuit for image sensor resolution adjustment in lower intensity light environment
TWI288353B (en) 2004-12-24 2007-10-11 Lite On Semiconductor Corp Motion detection method
US20060146023A1 (en) 2005-01-04 2006-07-06 Oren Kidron Mobile computer mouse
US8081159B2 (en) 2005-02-24 2011-12-20 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Programmable lift response for an optical navigation device
US7399953B2 (en) * 2005-05-06 2008-07-15 Avago Technologies Ecbu Ip Pte Ltd Light source control in optical pointing device
US20060266934A1 (en) 2005-05-27 2006-11-30 Lye Hock Bernard C Optical navigation method and apparatus
US7777722B2 (en) * 2006-06-23 2010-08-17 Microsoft Corporation Multi-mode optical navigation
US7442916B2 (en) 2006-08-25 2008-10-28 Avago Technologies General Ip (Singapore) Pte. Ltd. Lift detection adapted for navigation on a transparent structure

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103970293A (zh) * 2013-02-05 2014-08-06 原相科技股份有限公司 光学导航装置及光学导航方法

Also Published As

Publication number Publication date
JP4809388B2 (ja) 2011-11-09
TWI460615B (zh) 2014-11-11
US20080252602A1 (en) 2008-10-16
JP2008293482A (ja) 2008-12-04
US9052759B2 (en) 2015-06-09
DE102008018225B4 (de) 2018-05-09
DE102008018225A1 (de) 2008-10-16

Similar Documents

Publication Publication Date Title
TW200901012A (en) Dynamically reconfigurable pixel array for optical navigation
Liu et al. Event-driven sensing for efficient perception: Vision and audition algorithms
KR101613133B1 (ko) 3차원 영상 처리 장치 및 그 방법
US10007330B2 (en) Region of interest segmentation
US10760906B2 (en) Apparatus and method for obtaining three-dimensional depth image
JP2019060652A (ja) 測距センサ
US20190147624A1 (en) Method for Processing a Raw Image of a Time-of-Flight Camera, Image Processing Apparatus and Computer Program
US8988662B1 (en) Time-of-flight calculations using a shared light source
JP2022141637A (ja) ライト・フィールドを表すデータを生成する方法および装置
JP6087947B2 (ja) 非同期センサに依存するシーンの3d再構成の方法
CN106529561A (zh) 超声彩色流中的闪光伪像检测
WO2021084530A1 (en) Method and system for generating a depth map
TWI510082B (zh) 用於影像辨識之影像擷取方法及其系統
WO2022241942A1 (zh) 一种深度相机及深度计算方法
US20090123061A1 (en) Depth image generating method and apparatus
AU2016321728B2 (en) An apparatus and a method for encoding an image captured by an optical acquisition system
EP3350770B1 (en) An apparatus and a method for generating data representing a pixel beam
KR20210126624A (ko) 동적 비전 센서 및 패턴 투사를 사용하는 3차원 이미징 및 감지
CN106791497A (zh) 一种脉冲增益调制式单像素三维成像系统及方法
JP2007322921A5 (zh)
CN105653025B (zh) 一种信息处理方法和电子设备
Bai et al. Ultra-low-power acoustic imaging
US20190383942A1 (en) Lidar-only lock-on tracking system
US8854481B2 (en) Image stabilization devices, methods, and systems
CN106034207A (zh) 图像获得方法以及电子设备