TWI507806B - 用於自動對焦一影像之方法、設備及電腦可讀媒體 - Google Patents

用於自動對焦一影像之方法、設備及電腦可讀媒體 Download PDF

Info

Publication number
TWI507806B
TWI507806B TW102102724A TW102102724A TWI507806B TW I507806 B TWI507806 B TW I507806B TW 102102724 A TW102102724 A TW 102102724A TW 102102724 A TW102102724 A TW 102102724A TW I507806 B TWI507806 B TW I507806B
Authority
TW
Taiwan
Prior art keywords
sample image
focus window
image
frame
image frame
Prior art date
Application number
TW102102724A
Other languages
English (en)
Other versions
TW201319711A (zh
Inventor
Jingqiang Li
Szepo Hung
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW201319711A publication Critical patent/TW201319711A/zh
Application granted granted Critical
Publication of TWI507806B publication Critical patent/TWI507806B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6811—Motion detection based on the image signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
    • H04N23/6842—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time by controlling the scanning position, e.g. windowing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Description

用於自動對焦一影像之方法、設備及電腦可讀媒體
各個實例大體上係關於影像攝取設備，且更特定而言，係關於用於諸如數位相機之設備的自動對焦方法。
在典型數位相機中，自動對焦涉及將透鏡移入或移出以在對焦視窗內搜尋最大對比度。在此自動對焦過程期間，數位相機之光感測器連續"開啟"以攝取對比度。攝取到最大對比度之透鏡位置被選擇為焦點對準(in-focus)位置。此等自動對焦過程可花費幾秒鐘來完成。在此時間期間，作為使用者固持相機時手之移動的結果，相機可能會移動、顫動或震動。儘管使用者未意識到移動，但手正在繼續移動。當此情形發生時，在對焦過程中對焦視窗可能會攝取在不同點處稍微不同的影像區域。因為稍微不同之影像區域在每一影像中具有潛在不同之對象的情況下可用以進行對比判定，所以可能無法達成最佳對焦位置。亦即，特定透鏡位置可能會被錯誤地識別為提供最大對比度。
可能需要提供一種用於即使在相機在自動對焦期間移動、顫動或震動時仍精確地自動對焦諸如相機之設備的方法。
提供一種用於攝取影像的方法。獲得具有一第一對焦視窗之第一影像圖框及具有一第二對焦視窗之第二影像圖框。獲得第一影像圖框與第二影像圖框之間的第一運動向 量。獲得第三影像圖框，其具有一由第一運動向量調整以覆蓋與第一對焦視窗大體上相同之目標影像部分的第三對焦視窗。亦可獲得複數個其他影像圖框，每一影像圖框具有由先前對焦視窗之間的相關聯運動向量調整以覆蓋與先前對焦視窗大體上相同之目標影像部分的對焦視窗。先前對焦視窗可緊接在具有由運動向量調整之對焦視窗的影像圖框之前。複數個影像圖框中之一影像圖框具有最大對比。一對焦視窗可覆蓋一正被照相之影像之僅一部分。
可識別及/或選擇與複數個影像圖框中之具有最大對比之影像圖框相關聯的對焦視窗。可藉由使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備。可接著使用該透鏡位置來獲得數位照片。每一對焦視窗可對應於一不同透鏡位置。在一實例中，可以每秒十五(15)個圖框或更多圖框之頻率獲得影像圖框。
第一對焦視窗可具有一相對於正被照相之影像的相關聯第一參考點，且第二對焦視窗具有一相對於正被照相之影像的相關聯第二參考點，第一運動向量係藉由取得第一參考點與第二參考點之間的差而獲得。
提供一種包含一影像感測器及/或一自動對焦模組的影像攝取設備。影像感測器可允許攝取影像圖框。自動對焦模組可耦接至影像感應器且經組態以：獲得具有一第一對焦視窗之第一影像圖框；獲得具有一第二對焦視窗之第二影像圖框；獲得第一影像圖框與第二影像圖框之間的第一運動向量；獲得第三影像圖框，其具有一由第一運動向量 調整以覆蓋與第一對焦視窗大體上相同之目標影像部分的第三對焦視窗；及/或獲得複數個影像圖框，每一影像圖框具有由先前對焦視窗之間的相關聯運動向量調整以覆蓋與先前對焦視窗大體上相同之目標影像部分的對焦視窗。自動對焦模組可進一步經組態以：識別複數個影像圖框中之一具有最大對比之影像圖框；選擇與複數個影像圖框中之具有最大對比之影像圖框相關聯的對焦視窗；及/或藉由使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備。第一對焦視窗亦可具有一相對於正被照相之影像的相關聯第一參考點，且第二對焦視窗具有一相對於正被照相之影像的相關聯第二參考點，第一運動向量係藉由取得第一參考點與第二參考點之間的差而獲得。
影像攝取設備亦可包括一耦接至自動對焦模組之透鏡調整模組。透鏡調整模組可經組態以在最小與最大位置範圍之間調整透鏡，其中影像圖框係在範圍內之各個透鏡位置處獲得。對焦視窗可覆蓋正被照相之影像之僅一部分。
在一實例中，自動對焦模組可包括：一用於判定對焦視窗之對焦視窗模組；一用於攝取影像圖框之影像攝取模組；及/或一用於獲得影像圖框與先前影像圖框之間的運動向量之運動向量計算模組。
亦提供一種影像攝取設備且該影像攝取設備包含：用於獲得具有一第一對焦視窗之第一影像圖框的構件；用於獲得具有一第二對焦視窗之第二影像圖框的構件；用於獲得第一影像圖框與第二影像圖框之間的第一運動向量的構 件；用於獲得第三影像圖框的構件，該第三影像圖框具有一由第一運動向量調整以覆蓋與第一對焦視窗大體上相同之影像部分的第三對焦視窗；用於獲得複數個影像圖框的構件，每一影像圖框具有由先前對焦視窗之間的相關聯運動向量調整以覆蓋與先前對焦視窗大體上相同之目標影像部分的對焦視窗；用於選擇與複數個影像圖框中之具有最大對比之影像圖框相關聯的對焦視窗的構件；用於使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備的構件；及/或用於使用透鏡位置來獲得數位照片的構件。第一對焦視窗可具有一相對於正被照相之影像的相關聯第一參考點，且第二對焦視窗具有一相對於正被照相之影像的相關聯第二參考點，第一運動向量係藉由取得第一參考點與第二參考點之間的差而獲得。
亦提供一種具有對影像攝取設備操作以在自動對焦期間減輕顫動效應之一或多個指令的電腦可讀媒體，該一或多個指令由一處理器執行時使處理器：獲得具有一第一對焦視窗之第一影像圖框；獲得具有一第二對焦視窗之第二影像圖框；獲得第一影像圖框與第二影像圖框之間的第一運動向量；獲得第三影像圖框，其具有一由第一運動向量調整以覆蓋與第一對焦視窗大體上相同之影像部分的第三對焦視窗；獲得複數個影像圖框，每一影像圖框具有由先前對焦視窗之間的相關聯運動向量調整以覆蓋與先前對焦視窗大體上相同之目標影像部分的對焦視窗。
電腦可讀媒體亦可包括一或多個指令，該一或多個指令 由一處理器執行時使處理器進一步：識別複數個影像圖框中之一具有最大對比之影像圖框；選擇與複數個影像圖框中之具有最大對比之影像圖框相關聯的對焦視窗；及/或藉由使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備。第一對焦視窗可具有一相對於正被照相之影像的相關聯第一參考點，且第二對焦視窗具有一相對於正被照相之影像的相關聯第二參考點，第一運動向量係藉由取得第一參考點與第二參考點之間的差而獲得。電腦可讀媒體亦可包括一或多個指令，該一或多個指令由一處理器執行時使處理器進一步：在最小與最大位置範圍之間調整透鏡，其中該等影像圖框係在該範圍內之各個透鏡位置處獲得。對焦視窗可覆蓋正被照相之影像之僅一部分。可以每秒十五(15)個圖框或更多圖框之頻率獲得影像圖框。
在以下描述中，給出特定細節以提供對實例的瞭解。然而，熟習此項技術者將瞭解，可在無某些特定細節的情況下實踐實例。舉例而言，電路可能並未展示於方塊圖中以免因不必要細節混淆實例。又，注意到，可將實例描述為一描繪為流程表、流程圖、結構圖或方塊圖的過程。雖然流程表可將操作描述為依序過程，但可並行或同時執行操作中之許多者。此外，可重新配置操作之次序。當過程之操作完成時，過程終止。過程可對應於方法、函數、程序、子常式、子程式等。當過程對應於函數時，其終止對應於函數返回至調用函數或主函數。
此外，可由硬體、軟體、韌體、中間軟體、微碼或其組合來實施各種組態。當以軟體、韌體、中間軟體或微碼實施時，可將執行所述任務之程式碼或碼段儲存於諸如儲存媒體或其他儲存構件之電腦可讀媒體中。處理器可執行所界定之任務。碼段可表示程序、函數、子程式、程式、常式、子常式、模組、軟體封包、類，或指令、資料結構或程式語句之一組合。碼段可藉由傳遞及/或接收資訊、資料、引數、參數或記憶體內容而耦接至另一碼段或硬體電路。可經由包括記憶體共用、訊息傳遞、符記傳遞及網路傳輸等之合適方式而傳遞、轉遞或傳輸資訊、引數、參數、資料及類似物。本文中所揭示之方法可實施於硬體、軟體或兩者中。
若函數以軟體實施，則可將函數作為一或多個指令或碼儲存在電腦可讀媒體上或在電腦可讀媒體上予以傳輸。電腦可讀媒體包括電腦儲存媒體及通信媒體，通信媒體包括有助於將電腦程式自一處傳送至另一處之任何媒體。儲存媒體可為可由通用或專用電腦予以存取之任何可用媒體。以實例說明之且並非限制，此等電腦可讀媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存設備，或可用以載運或儲存呈指令或資料結構形式之所要程式碼構件且可由通用或專用電腦或通用或專用處理器予以存取的任何其他媒體。又，適當地將任何連接稱作電腦可讀媒體。舉例而言，若使用同軸電纜、光纖電纜、雙扭線、數位用戶線(DSL)或諸如紅 外線、無線電及微波之無線技術而自網站、伺服器或其他遠端源傳輸軟體，則同軸電纜、光纖電纜、雙扭線、DSL或諸如紅外線、無線電及微波之無線技術包括於媒體定義中。如本文中所使用，磁碟及碟片包括緊密碟片(CD)、雷射碟片、光學碟片、數位化通用碟片(DVD)、軟性磁碟及藍光碟片，其中磁碟通常磁性地再現資料，而光碟由雷射光學地再現資料。上述各物之組合亦應包括於電腦可讀媒體之範疇內。
此外，儲存媒體可表示用於儲存資料之一或多個設備，其包括唯讀記憶體(ROM)、隨機存取記憶體(RAM)、磁碟儲存媒體、光學儲存媒體、快閃記憶體設備及/或用於儲存資訊的其他電腦可讀媒體。
結合本文中揭示之實例所描述之各種說明性功能、邏輯區塊、模組、電路、元件及/或組件可由以下經設計以執行本文中所述之功能的各物實施或執行：通用處理器、數位信號處理器(DSP)、特殊應用積體電路(ASIC)、場可程式化閘陣列(FPGA)或其他可程式化邏輯組件、離散閘或電晶體邏輯、離散硬體組件或其任何組合。通用處理器可為微處理器，但在替代案中，處理器可為任何習知處理器、控制器、微控制器或狀態機。處理器亦可實施為計算組件之組合，例如，一DSP與一微處理器之組合、若干微處理器之組合、一或多個微處理器連同一DSP核心之組合，或任何其他此等組態。
結合本文中揭示之實例所描述之方法及演算法可以硬 體，由處理器執行之軟體模組或兩者之組合，以處理單元、程式化指令或其他指導之形式直接實施，且可含於單一設備中或分布於多個設備上。軟體模組可駐留於RAM記憶體、快閃記憶體、ROM記憶體、EPROM記憶體、EEPROM記憶體、暫存器、硬碟、抽取式磁碟、CD-ROM或此項技術中已知之任何其他形式之儲存媒體中。儲存媒體可耦接至處理器，使得處理器可自儲存媒體讀取資訊且向儲存媒體寫入資訊。在替代案中，儲存媒體可整合至處理器。
一特徵提供一種用於在影像攝取設備之自動對焦過程期間減輕及/或最小化手震或顫動效應的方法及設備。為了更精確地對焦用於攝取數位目標影像之透鏡，在最小與最大位置之間(沿軸線)移動透鏡同時在各個透鏡位置處使用對焦視窗來攝取樣本影像圖框。藉由動態調整每一影像圖框之對焦視窗的相對位置以覆蓋目標影像之大體上相同影像部分而達成改良之自動對焦。藉由調整每一影像圖框之對焦視窗以覆蓋目標影像之大體上相同影像部分，來自震動/顫動之變化得以最小化，藉此改良自動對焦。
圖1為說明一影像攝取設備之方塊圖，該影像攝取設備可經組態以實施動態自動對焦視窗選擇。影像攝取設備100可包括一透鏡102、一影像感測器104、一自動對焦模組106及一透鏡調整模組108。透鏡102用以將目標影像對焦於影像感測器104上。影像感測器104可將目標影像或其部分轉化為電信號。舉例而言，影像感測器104可包括以 陣列配置之複數個光感測器或像素感測器，諸如，電荷耦合設備(CCD)或互補金氧半導體(CMOS)感測器。舉例而言，光感測器可組態為Bayer濾波器、Foveon X3感測器或三色稜鏡總成(3CCD)等。光感測器獲得用於形成一數位影像的經取樣之像素值。
在一組態中，影像感測器104在自動對焦模組106之控制下在自動對焦過程期間攝取影像圖框。自動對焦模組106使透鏡調整模組108沿軸線在起始位置與末端位置之間移動透鏡102之位置。亦即，透鏡102朝向及/或遠離目標影像移動以找尋目標影像處於焦點對準的透鏡位置。隨著透鏡位置之調整，影像感測器102攝取到複數個影像圖框且將此等影像圖框提供至自動對焦模組106。可界定一對焦視窗，經由該對焦視窗而攝取目標影像之一部分以獲得每一影像圖框。
在自動對焦過程期間，可獲得攝取目標影像之一部分的複數個影像圖框(每一圖框與不同透鏡位置相關聯)。選擇依序影像圖框(亦即，一基礎圖框及一移動圖框)。基礎圖框與移動圖框之間的任何水平及/或垂直移動(移位)可表示為運動向量。基礎影像圖框對之間的運動向量可用以調整下一影像圖框之對焦視窗的位置。藉由調整對焦視窗之相對位置，下一影像圖框攝取與基礎影像圖框大體上相同之目標影像之部分。可對複數個依序影像圖框重複此過程以調整下一影像圖框之對焦視窗的相對位置。在一實例中，影像圖框可與其對焦視窗之區域為等量相稱的(coextensive)。 亦即，並非覆蓋整個目標影像，而是影像圖框可覆蓋與對焦視窗大體上相同之區域。
識別具有最大對比之影像圖框且選擇其相關聯透鏡位置作為"焦點對準"位置以攝取目標影像。可藉由各種方法來判定每一影像圖框之對比度。舉例而言，特定像素感測器可用以確定影像圖框中之哪一者具有特定特徵(例如，顏色、強度、明度(luma)、色度等)之最大累積值。
然而，在自動對焦正發生時影像攝取設備100之顫動可使不同對焦視窗攝取目標影像之不同部分，藉此可能導致低於最佳"焦點對準"透鏡位置。亦即，若對焦視窗攝取目標影像之不同部分，則影像圖框之對比可能會由於正攝取不同目標影像部分而非由於透鏡處於較好或較差對焦而變化。結果，不精確透鏡位置可能會被選擇且用以對目標影像照相。
為了在自動對焦過程期間減輕顫動之效應，自動對焦模組106調整對焦視窗，使得其攝取大體上相同之目標影像部分。亦即，在時間ti ，使用第一對焦視窗來獲得第一影像圖框。在時間ti+1 ，使用第二對焦視窗來獲得第二影像圖框。接著獲得第一影像圖框與第二影像圖框之間的第一運動向量。亦即，可藉由識別兩個影像中之共同點且使用該等共同點來獲得第一運動向量而獲得第一影像圖框與第二影像圖框之間的移位。在一實例中，第一影像圖框及第二影像圖框可為目標影像之部分的明度通道版本(luma channel version)。獲得第一影像圖框與第二影像圖框之垂 直分量與水平分量之間的總絕對差以確定兩個影像圖框之間的垂直及水平移位。第一運動向量可指示第一影像與第二影像之間的垂直及水平移位。在時間ti+2 ，獲得具有由第一運動向量調整之第三對焦視窗的第三影像圖框。亦即，由第一運動向量"校正"第三對焦視窗，使得其覆蓋與第一對焦視窗大體上相同之影像部分。雖然在攝取第二影像圖框之時間與攝取第三影像圖框之時間之間可能存在一定移位，但若圖框之間的時間間隔為小的(例如，每秒15個圖框)，則此移位很可能為小的。亦即，由使用者之手可能導致之顫動或震動通常較慢於圖框之間的時間間隔而發生。以此方式獲得複數個額外影像圖框，每一影像具有由與先前對焦視窗相關聯之運動向量調整以覆蓋與先前對焦視窗大體上相同之影像部分的自身對焦視窗。
透鏡調整模組108在最小與最大位置範圍之間調整透鏡102，故在範圍內之各種透鏡位置處攝取到複數個影像圖框。一旦自動對焦模組106識別出複數個影像圖框中之具有最大對比之影像圖框，其即選擇與複數個影像圖框中之具有最大對比之影像圖框相關聯的對焦視窗。接著藉由使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備100。一旦對焦，影像攝取設備100即可攝取目標影像。
影像攝取設備之各個實例包括具有數位相機之行動電話、數位相機、數位錄影機或具有影像攝取及/或處理能力的任何其他設備。
圖2為說明自動對焦模組之一實例的方框圖，該自動對 焦模組用於在自動對焦過程期間動態調整自動對焦視窗以覆蓋目標影像之大體上相同部分。自動對焦模組202可包括一對焦視窗模組204、一影像攝取模組206及一行動向量計算模組208。對焦視窗模組204可用以產生覆蓋目標影像之一部分的對焦視窗。對焦視窗模組204亦可基於自運動向量計算模組208獲得之運動(移位)向量而調整對焦視窗的位置。影像攝取模組206攝取複數個影像圖框，其中一影像圖框攝取目標影像之一部分。一旦攝取到第一影像圖框及第二影像圖框，運動向量計算模組208即可計算第一影像圖框與第二影像圖框之間的運動(移位)向量。接著可基於運動向量而調整第三圖框。亦即，移位或校正第三圖框以使得其覆蓋與第一影像大體上相同之目標影像部分。可獲得複數個額外其他影像圖框，其中每一影像圖框由與兩個緊接在前之影像圖框之間的移位相關聯之運動向量來調整。獲得每一影像圖框之對比度且識別具有最大對比之影像圖框。使用用以獲得經識別之影像圖框之透鏡位置作為"焦點對準"透鏡位置以獲得目標影像之數位照片。
因此，提供包含以下構件之自動對焦影像攝取設備：(a)用於獲得具有一第一對焦視窗之第一影像圖框的構件；(b)用於獲得具有一第二對焦視窗之第二影像圖框的構件；(c)用於獲得第一影像與第二影像之間的第一運動向量的構件；(d)用於獲得第三影像圖框的構件，該第三影像圖框具有一由第一運動向量調整以覆蓋與第一對焦視窗大體上相同之影像部分的第三對焦視窗；(e)用於選擇與複數個影像 圖框中之具有最大對比之影像圖框相關聯的對焦視窗的構件；(f)用於藉由使用與選定對焦視窗相關聯之相機透鏡位置而對焦相機的構件；及/或(g)用於使用經對焦之相機透鏡位置來獲得數位照片的構件。
圖3、圖4及圖5說明對焦視窗如何經動態調整以使得其在自動對焦過程期間攝取目標影像之大體上相同部分。圖3說明目標影像302及第一對焦視窗304，該第一對焦視窗304具有相對於目標影像302在第一位置(x0 ,y0 )處之參考點P0 。在此影像中，第一對焦視窗304之左下角攝取目標影像302中之塔306的一小部分。圖4說明與第一對焦視窗304大小相同之第二對焦視窗408如何已經移動或移位以使得其覆蓋目標影像302的稍微不同部分。在此實例中，第二對焦視窗408可覆蓋目標影像302中之塔306的較大部分。因為第二視窗圖框408相對於第一視窗圖框304之移位，第二視窗圖框408之參考點P1 相對於目標影像302在第二位置(x1 ,y1 )處。因此，第一視窗圖框304與第二視窗圖框408之間的移位可由運動向量(x0 -x1 ,y0 -y1 )或(△x1 ,△y1 )來表示。
圖5說明與第一對焦視窗304及第二對焦視窗408大小相同之第三對焦視窗510如何已經移動或移位以使得其覆蓋目標影像302的稍微不同部分。舉例而言，第三對焦視窗510之參考點P2 相對於目標影像302處於第三位置(x2 ,y2 )處。為了調整第三對焦視窗510以使得其覆蓋與第一對焦視窗304大體上相同之目標影像302的部分，第三對焦視窗510之參考點P2 由運動向量(△x1 ,△y1 )來調整。亦即，參考 點P2 經調整以使得P2 =(x2 ,y2 )-(△x1 ,△y1 )。此過程概述如下：P0 =(x0 ,y0 ){預設起始位置} {圖框0}
P1 =(x1 ,y1 )，且(△x1 ,△y1 )=(x0 -x1 ,y0 -y1 ) {圖框1}
P2 =(x2 ,y2 )，且(△x2 ,△y2 )=(x1 -x2 ,y1 -y2 ) {圖框2}
P3 =(x3 ,y3 )，且(△x3 ,△y3 )=(x2 -x3 ,y2 -y3 ) {圖框3}
Pj =(xj ,yj )，且(△xj ,△yj )=(xj-1 -xj ,yj-1 -yj ), {圖框j} 其中j為整數。可在複數個對焦視窗中執行對焦視窗之動態調整以獲得攝取目標影像302之大體上相同部分的影像圖框。
圖6說明用於使用經動態調整之對焦視窗來自動對焦一影像攝取設備以攝取目標影像之大體上相同部分的方法。獲得具有一第一對焦視窗之第一影像圖框(602)。獲得具有一第二對焦視窗之第二影像圖框(604)。第一對焦視窗及第二對焦視窗可具有相同尺寸。獲得第一影像圖框與第二影像圖框之間的第一運動向量(606)。舉例而言，第一對焦視窗可具有相對於正被照相之目標影像的相關聯第一參考點，且第二對焦視窗可具有相對於正被照相之目標影像的相關聯第二參考點。接著藉由取得第一參考點與第二參考點之間的差而獲得第一運動向量。
接著獲得第三影像圖框，其具有一由第一運動向量調整以覆蓋與第一對焦視窗大體上相同之目標影像部分的第三對焦視窗(608)。每一對焦視窗可對應於影像攝取設備之不 同透鏡位置。
亦可獲得複數(N)個影像圖框，每一影像圖框具有由先前對焦視窗之間的運動向量調整以覆蓋與先前對焦視窗大體上相同之目標影像部分的對焦視窗(610)。舉例而言，(在N個影像圖框之序列中之)可藉由在N個影像圖框之時間序列中緊接在影像圖框k之前的影像圖框k-1與影像圖框k-2之間的運動向量來調整影像圖框k。在一實例中，可以每秒十五(15)個圖框或更多圖框之頻率獲得影像圖框。識別複數(N)個影像圖框中之具有最大對比之影像圖框(612)。接著選擇與複數個影像圖框中之經識別之影像圖框相關聯的對焦視窗(614)。接著可使用與選定對焦視窗相關聯之透鏡位置而對焦影像攝取設備(616)。可接著使用經對焦之透鏡位置來獲得數位照片。
圖7為說明具有一影像攝取設備之行動通信設備的方塊圖，該影像攝取設備動態調整其對焦視窗以攝取目標影像之大體上相同部分。行動通信設備702可包括一處理電路704、一通信模組及一影像攝取設備708。處理電路704可經組態以經由通信模組706向無線通信網路710發送資訊且自無線通信網路710接收資訊。另外，影像攝取設備可經組態以攝取數位照片。在攝取數位照片的過程中，影像攝取設備702可經組態以在照相一數位照片之前自動對焦。如圖1至圖6中詳細描述，影像攝取設備中之透鏡可朝向及/或遠離目標影像移動同時對焦視窗用以在不同透鏡位置處攝取影像圖框。提供具有最大對比度之影像圖框的透鏡位 置被用作"焦點對準"位置。為了使對焦視窗不管行動通信設備702之顫動而攝取大體上相同之目標影像部分，計算先前影像圖框之運動向量且使用該等運動向量來校正後續對焦視窗之位置，以使得對焦視窗覆蓋目標影像之大體上相同部分。
圖1至圖18中所說明之組件、操作及/或功能中之一或多者可經重新配置及/或組合至單一組件、操作及/或功能中或分離為若干組件、操作及/或功能中而不背離本揭示案之精神及/或範疇。亦可添加額外元件、組件、操作及/或功能而不背離本揭示案之精神及/或範疇。圖1、圖2及/或圖7中說明之裝置、設備及/或組件可經組態以執行圖3、圖4、圖5及/或圖6中所說明之方法、特徵或操作中的一或多者。
熟習此項技術者將進一步瞭解，結合本文中揭示之實例所描述之各種說明性邏輯區塊、模組、電路及演算法操作可實施為電子硬體、電腦軟體或兩者之組合。為了清楚地說明硬體與軟體之互換性，以上已大致在其功能性方面描述各種說明性組件、區塊、模組、電路及操作。此功能性實施為硬體還是軟體視特定應用及強加於整個系統上之設計約束而定。
請注意，前述組態僅為實例且不應理解為限制本揭示案之精神及/或範疇。此等實例之描述意欲為說明性的，且並非限制申請專利範圍之範疇。同樣，本教示可易於應用至其他類型裝置，且許多替代、修改及變化對於熟習此項 技術者將為顯而易見。
100‧‧‧影像攝取設備
102‧‧‧透鏡
104‧‧‧影像感測器
106‧‧‧自動對焦模組
108‧‧‧透鏡調整模組
202‧‧‧自動對焦模組
204‧‧‧對焦視窗模組
206‧‧‧影像攝取模組
208‧‧‧行動向量計算模組
302‧‧‧目標影像
304‧‧‧第一對焦視窗
306‧‧‧塔
408‧‧‧第二對焦視窗
510‧‧‧第三對焦視窗
702‧‧‧行動通信設備
704‧‧‧處理電路
706‧‧‧通信模組
708‧‧‧影像攝取設備
710‧‧‧無線通信網路
P0 ‧‧‧參考點
P1 ‧‧‧參考點
P2 ‧‧‧參考點
圖1為說明一影像攝取設備之方塊圖，該影像攝取設備可經組態以實施動態自動對焦視窗選擇。
圖2為說明一自動對焦模組之一實例之方塊圖，該自動對焦模組用於在自動對焦過程期間動態調整自動對焦視窗以覆蓋目標影像之大體上相同部分。
圖3、圖4及圖5說明對焦視窗可如何經動態調整以使得其在自動對焦過程期間攝取目標影像之大體上相同部分。
圖6說明用於使用經動態調整之對焦視窗來自動對焦一影像攝取設備以攝取目標影像之大體上相同部分的方法。
圖7為說明具有一影像攝取設備之行動通信設備的方塊圖，該影像攝取設備動態調整其對焦視窗以攝取目標影像之大體上相同部分。
100‧‧‧影像攝取設備
102‧‧‧透鏡
104‧‧‧影像感測器
106‧‧‧自動對焦模組
108‧‧‧透鏡調整模組

Claims (19)

  1. 一種用於攝取一目標影像之方法，該方法包含：沿一軸線在一起始位置與一末端位置之間移動一透鏡；隨著該透鏡沿該軸線移動以攝取複數個樣本影像圖框，其中每一樣本影像圖框具有一對焦視窗，每一對焦視窗具有覆蓋該目標影像之至少一部分之一位置；及對該複數個樣本影像圖框中之至少某些樣本影像圖框動態地調整該對焦視窗之該位置以覆蓋該目標影像之實質上相同的部分。
  2. 如請求項1之方法，其中該複數個樣本影像圖框係以約每秒十五(15)個圖框或更多圖框之一頻率攝取。
  3. 如請求項1之方法，其中由經組態以沿該軸線移動該透鏡之一自動對焦模組完成移動該透鏡。
  4. 如請求項3之方法，其中進一步對該複數個樣本影像圖框中之至少某些樣本影像圖框動態地調整該對焦視窗之該位置包含提供該複數個樣本影像圖框至該自動對焦模組。
  5. 如請求項1之方法，其進一步包含：自該複數個樣本影像圖框中選擇一基礎圖框及一移動圖框，其中該基礎圖框及該移動圖框係接續的；確定該基礎圖框與該移動圖框之間之一水平及/或垂直移位；及將該移位表示為一運動向量。
  6. 如請求項5之方法，其中對每一樣本影像圖框動態地調整該對焦視窗之該位置進一步包含使用該運動向量以對一接續的樣本影像圖框調整該對焦視窗之該位置。
  7. 如請求項5之方法，其中確定任何水平或垂直移位進一步包含在該基礎圖框與該移動圖框兩者中識別至少一共同點。
  8. 如請求項1之方法，其中每一樣本影像圖框係與一對比值相關聯，該方法進一步包含：藉由比較與每一樣本影像圖框相關聯之該對比值以判定一最大對比值；及將具有該最大對比值之該樣本影像圖框與用於攝取該目標影像之一對焦位置相關聯。
  9. 如請求項8之方法，其中基於顏色、強度、明度(luma)或色度值中之一或多者的一累積以判定該對比值。
  10. 一種電子成像設備，其包含：一對焦視窗模組，其經組態以判定複數個對焦視窗；一影像攝取模組，其經組態以攝取複數個樣本影像圖框，每一樣本影像圖框具有一對焦視窗；及一運動向量計算模組，其經組態以獲得至少一運動向量，該至少一運動向量中之每一者表示該複數個樣本影像圖框中之一者與一接續的樣本影像圖框之間的移位。
  11. 如請求項10之電子成像設備，其進一步包含一處理器，該處理器經組態以自該複數個樣本影像圖框判定具有一最高對比值之一樣本影像圖框。
  12. 如請求項11之電子成像設備，其中該對焦視窗模組進一步經組態以選擇與具有該最高對比值之該樣本影像圖框相關聯之一透鏡位置。
  13. 如請求項12之電子成像設備，其中該影像攝取模組進一步經組態以使用選定之該透鏡位置而攝取一目標影像。
  14. 如請求項10之電子成像設備，其中該對焦視窗模組進一步經組態以至少部分基於自該運動向量計算模組所獲得之一運動向量以調整一對焦視窗之該位置。
  15. 如請求項10之電子成像設備，其中該設備係具有一整合之數位相機的一行動電話。
  16. 如請求項10之電子成像設備，其中每一樣本影像圖框係與一對比值相關聯。
  17. 如請求項16之電子成像設備，其中基於顏色、強度、明度(luma)或色度值中之一或多者的一累積以判定該對比值。
  18. 一種電腦可讀取媒體，其具有儲存之指令，當該等指令由一處理器執行時可執行一方法，該方法包含下列步驟：沿一軸線在一起始位置與一末端位置之間移動一透鏡；隨著該透鏡沿該軸線移動以攝取複數個樣本影像圖框，其中每一樣本影像圖框具有一對焦視窗，每一對焦視窗具有覆蓋該目標影像之至少一部分之一位置；及對該複數個樣本影像圖框中之至少某些樣本影像圖框 動態地調整該對焦視窗之該位置以覆蓋該目標影像之實質上相同的部分。
  19. 如請求項18之電腦可讀取媒體，其中對每一樣本影像圖框動態地調整該對焦視窗之該位置進一步包含計算一運動向量，該運動向量係用以對一接續的樣本影像圖框調整該對焦視窗之該位置。
TW102102724A 2007-01-04 2008-01-04 用於自動對焦一影像之方法、設備及電腦可讀媒體 TWI507806B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/619,694 US7634187B2 (en) 2007-01-04 2007-01-04 Dynamic auto-focus window selection that compensates for hand jitter

Publications (2)

Publication Number Publication Date
TW201319711A TW201319711A (zh) 2013-05-16
TWI507806B true TWI507806B (zh) 2015-11-11

Family

ID=39166882

Family Applications (2)

Application Number Title Priority Date Filing Date
TW097100485A TWI393982B (zh) 2007-01-04 2008-01-04 用於自動對焦一影像之方法、設備及電腦可讀媒體
TW102102724A TWI507806B (zh) 2007-01-04 2008-01-04 用於自動對焦一影像之方法、設備及電腦可讀媒體

Family Applications Before (1)

Application Number Title Priority Date Filing Date
TW097100485A TWI393982B (zh) 2007-01-04 2008-01-04 用於自動對焦一影像之方法、設備及電腦可讀媒體

Country Status (3)

Country Link
US (1) US7634187B2 (zh)
TW (2) TWI393982B (zh)
WO (1) WO2008083403A1 (zh)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4518131B2 (ja) * 2007-10-05 2010-08-04 富士フイルム株式会社 撮像方法及び装置
KR101431536B1 (ko) * 2007-12-14 2014-08-19 삼성전자주식회사 디지털 촬영장치 및 이의 제어방법
KR20100013171A (ko) * 2008-07-30 2010-02-09 삼성디지털이미징 주식회사 오토 포커스 영역의 움직임 보상 방법 및 장치, 이를이용한 오토 포커스 방법 및 장치
GB2479835B (en) * 2008-10-31 2013-09-18 Hewlett Packard Development Co Method and digital imaging appliance adapted for selecting a focus setting
JP5457013B2 (ja) * 2008-11-18 2014-04-02 セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー 振動補償制御回路、及び撮像装置
US8238681B2 (en) * 2008-11-25 2012-08-07 Nokia Corporation Adaptive configuration of windows-of-interest for accurate and robust focusing in multispot autofocus cameras
JP5206494B2 (ja) * 2009-02-27 2013-06-12 株式会社リコー 撮像装置、画像表示装置と、撮像方法及び画像表示方法並びに合焦領域枠の位置補正方法
JP5395512B2 (ja) * 2009-05-26 2014-01-22 オリンパスイメージング株式会社 撮影装置
US8760563B2 (en) 2010-10-19 2014-06-24 Hand Held Products, Inc. Autofocusing optical imaging device
TWI424361B (zh) * 2010-10-29 2014-01-21 Altek Corp 物件追蹤方法
EP2461198A3 (en) * 2010-12-01 2017-03-08 BlackBerry Limited Apparatus, and associated method, for a camera module of electronic device
FR2968499B1 (fr) * 2010-12-06 2013-06-14 Astrium Sas Procede d'utilisation d'un capteur d'image.
US8692927B2 (en) 2011-01-19 2014-04-08 Hand Held Products, Inc. Imaging terminal having focus control
US9596398B2 (en) 2011-09-02 2017-03-14 Microsoft Technology Licensing, Llc Automatic image capture
US9477138B2 (en) * 2013-06-10 2016-10-25 Apple Inc. Autofocus
TWI487995B (zh) * 2013-07-10 2015-06-11 Acer Inc 影像擷取裝置以及其方法
US20150022679A1 (en) * 2013-07-16 2015-01-22 Motorola Mobility Llc Fast Motion Detection with GPU
JP6102602B2 (ja) * 2013-07-23 2017-03-29 ソニー株式会社 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置
TWI554098B (zh) * 2014-10-07 2016-10-11 緯創資通股份有限公司 錄影裝置與錄影方法
CN106101540B (zh) * 2016-06-28 2019-08-06 北京旷视科技有限公司 对焦点确定方法及装置
CN106131416B (zh) * 2016-07-19 2019-02-19 Oppo广东移动通信有限公司 双摄像头的变焦处理方法、装置和移动终端
CN107231526B (zh) * 2017-06-09 2020-02-21 联想(北京)有限公司 图像处理方法以及电子设备
JP7277149B2 (ja) * 2019-01-18 2023-05-18 キヤノン株式会社 撮像装置及びその制御方法
US11627244B1 (en) 2019-09-09 2023-04-11 Apple Inc. Synchronization of camera focus movement control with frame capture
US11202007B1 (en) 2019-09-27 2021-12-14 Apple Inc. Camera movement control for reduced power consumption

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5561498A (en) * 1988-09-09 1996-10-01 Canon Kabushiki Kaisha Automatic image stabilization device
US6317114B1 (en) * 1999-01-29 2001-11-13 International Business Machines Corporation Method and apparatus for image stabilization in display device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5187585A (en) 1989-08-19 1993-02-16 Canon Kabushiki Kaisha Image sensing apparatus with settable focus detection area
JP2004229002A (ja) 2003-01-23 2004-08-12 Sony Corp 撮像装置
US9215363B2 (en) 2004-09-29 2015-12-15 Hewlett-Packard Development Company, L.P. Implementing autofocus in an image capture device while compensating for movement
US7557832B2 (en) * 2005-08-12 2009-07-07 Volker Lindenstruth Method and apparatus for electronically stabilizing digital images
US7546026B2 (en) * 2005-10-25 2009-06-09 Zoran Corporation Camera exposure optimization techniques that take camera and scene motion into account

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5561498A (en) * 1988-09-09 1996-10-01 Canon Kabushiki Kaisha Automatic image stabilization device
US6317114B1 (en) * 1999-01-29 2001-11-13 International Business Machines Corporation Method and apparatus for image stabilization in display device
TW501090B (en) * 1999-01-29 2002-09-01 Ibm Method and apparatus for image stabilization in display device

Also Published As

Publication number Publication date
WO2008083403A1 (en) 2008-07-10
TW201319711A (zh) 2013-05-16
TW200837476A (en) 2008-09-16
US7634187B2 (en) 2009-12-15
TWI393982B (zh) 2013-04-21
US20080166117A1 (en) 2008-07-10

Similar Documents

Publication Publication Date Title
TWI507806B (zh) 用於自動對焦一影像之方法、設備及電腦可讀媒體
JP4872797B2 (ja) 撮像装置、撮像方法および撮像プログラム
US9489747B2 (en) Image processing apparatus for performing object recognition focusing on object motion, and image processing method therefor
US9113059B2 (en) Image pickup apparatus and image region discrimination method
JP5944055B2 (ja) 撮像装置、撮像方法及び画像処理装置
JP6771192B2 (ja) 撮像装置
WO2018191070A2 (en) Optical flow and sensor input based background subtraction in video content
US7864239B2 (en) Lens barrel and imaging apparatus
JP4775644B2 (ja) 撮像装置及びそのプログラム
JP2010054730A (ja) 合焦位置検出装置、撮像装置及び合焦位置検出方法
US8854503B2 (en) Image enhancements through multi-image processing
US8654204B2 (en) Digtal photographing apparatus and method of controlling the same
US9503650B2 (en) Zoom-tracking method performed by imaging apparatus
KR20120071972A (ko) 사용자가 원하는 시점의 정지 영상을 획득할 수 있는 디지털 영상 신호 처리 장치 및 이의 제어 방법
WO2013094552A1 (ja) 撮像装置、その制御方法およびプログラム
US7899315B2 (en) Method of automatically adjusting the depth of field
CN107529019A (zh) 摄像设备及其控制方法和计算机可读介质
JP5257969B2 (ja) 合焦位置制御装置、及び合焦位置制御方法、合焦位置制御プログラム
WO2019104508A1 (zh) 图像传感器、芯片、图像处理设备及相关方法
US20110032390A1 (en) Digital photographing apparatus and moving picture capturing method performed by the same
TW201911853A (zh) 雙攝像頭影像擷取裝置及其攝像方法
WO2017010027A1 (ja) 撮像装置，信号処理方法，信号処理プログラム
JP5182395B2 (ja) 撮像装置、撮像方法および撮像プログラム
US10038835B2 (en) Image pickup device and still picture generating method
JP2016206310A (ja) 撮像装置およびその制御方法