TW202139684A

TW202139684A - 追焦方法及相關設備

Info

Publication number: TW202139684A
Application number: TW110107617A
Authority: TW
Inventors: 王文東
Original assignee: 大陸商Ｏｐｐｏ廣東移動通信有限公司
Priority date: 2020-03-03
Filing date: 2021-03-03
Publication date: 2021-10-16
Also published as: WO2021175014A1; CN111225157A; TWI791198B; CN111225157B

Abstract

本申請公開了一種追焦方法及相關設備，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述方法包括：顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。採用本申請實施例可解決攝影過程中的失焦問題，提升成像品質。

Description

追焦方法及相關設備

本申請涉及電子技術領域，尤其涉及一種追焦方法及相關設備。

隨著電子技術的發展，帶有攝影功能的電子設備成為人們當前不可或缺的工具。在使用電子設備給人或物拍照攝影時，現有技術通常是透過手指點擊螢幕選中目標進行對焦，或者是基於人臉識別進行人物檢測，基於檢測結果自動對焦。當畫面切換時，攝影焦點容易丟失，從而造成成像品質差。

本申請實施例提供一種追焦方法及相關設備，解決攝影過程中的失焦問題，提升成像品質。

第一方面，本申請實施例提供一種追焦方法，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述方法包括：

顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；

透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；

基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；

透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。

第二方面，本申請實施例提供一種追焦裝置，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述裝置包括：

顯示單元，用於顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；

確定單元，用於透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；

追焦單元，用於透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。

第三方面，本申請實施例提供一種電子設備，包括處理器、記憶體、通訊介面以及一個或多個程式，其中，上述一個或多個程式被儲存在上述記憶體中，並且被配置由上述處理器執行，上述程式包括用於執行本申請實施例第一方面所述的方法中的步驟的指令。

第四方面，本申請實施例提供了一種電腦可讀儲存媒介，其中，上述電腦可讀儲存媒介儲存用於電子資料交換的電腦程式，其中，上述電腦程式使得電腦執行如本申請實施例第一方面所述的方法中所描述的部分或全部步驟。

第五方面，本申請實施例提供了一種電腦程式產品，其中，上述電腦程式產品包括儲存了電腦程式的非暫態性電腦可讀儲存媒介，上述電腦程式可操作來使電腦執行如本申請實施例第一方面所述的方法中所描述的部分或全部步驟。該電腦程式產品可以為一個軟體安裝包。

可以看出，在本申請實施例中，電子設備顯示的攝影預覽畫面包括至少一個待拍攝目標時，其透過眼球追蹤模組確定使用者注視該攝影預覽畫面的注視位置，進而基於該注視位置確定焦點追蹤目標，上述至少一個待拍攝目標包括該焦點追蹤目標，最後透過焦點追蹤模組對該焦點追蹤目標進行追焦，實現了透過眼球追蹤模組和焦點追蹤模組對焦點追蹤進行定位和追焦，有利於解決攝影過程中的失焦問題，提升成像品質。

本申請的這些方面或其他方面在以下實施例的描述中會更加簡明易懂。

為了使本技術領域的人員更好地理解本申請方案，下面將結合本申請實施例中的附圖，對本申請實施例中的技術方案進行清楚、完整地描述，顯然，所描述的實施例僅僅是本申請一部分的實施例，而不是全部的實施例。基於本申請中的實施例，本領域普通技術人員在沒有做出創造性勞動前提下所獲得的所有其他實施例，都應當屬於本申請保護的範圍。

以下分別進行詳細說明。

本申請的說明書和申請專利範圍及所述附圖中的術語“第一”、“第二”、“第三”和“第四”等是用於區別不同物件，而不是用於描述特定順序。此外，術語“包括”和“具有”以及它們任何變形，意圖在於覆蓋不排他的包含。例如包含了一系列步驟或單元的過程、方法、系統、產品或設備沒有限定於已列出的步驟或單元，而是可選地還包括沒有列出的步驟或單元，或可選地還包括對於這些過程、方法、產品或設備固有的其它步驟或單元。

在本文中提及“實施例”意味著，結合實施例描述的特定特徵、結構或特性可以包含在本申請的至少一個實施例中。在說明書中的各個位置出現該短語並不一定均是指相同的實施例，也不是與其它實施例互斥的獨立的或備選的實施例。本領域技術人員顯式地和隱式地理解的是，本文所描述的實施例可以與其它實施例相結合。

以下，對本申請中的部分用語進行解釋說明，以便於本領域技術人員理解。

如圖1A所示，圖1A是本申請實施例提供的一種電子設備硬體的結構示意圖。該電子設備包括處理器、記憶體、信號處理器、收發器、顯示器、揚聲器、麥克風、隨機存取記憶體（Random Access Memory，RAM）、攝影模組和感測器等等。其中，記憶體、信號處理器、顯示器、揚聲器、麥克風、RAM、攝影模組、感測器與處理器連接，收發器與信號處理器連接。

其中，顯示器可以是液晶顯示器（Liquid Crystal Display，LCD）、有機或無機發光二極體（Organic Light-Emitting Diode，OLED）、主動式矩陣有機發光二極體面板（Active Matrix/Organic Light Emitting Diode，AMOLED）等。

其中，該攝影模組可以包括第一攝影模組、第二攝影模組，第一攝影模組例如可以為微距攝影頭或是超微距攝影頭，第二攝影頭可以是廣角攝影頭，還可以為長焦攝影頭或是超廣角攝影頭等等，在此不作限定；上述的攝影頭可以包括前置攝影頭或後置攝影頭，在此不作限定。

其中，感測器包括以下至少一種：光感感測器、陀螺儀、眼球追蹤感測器、指紋感測器、壓力感測器等等。其中，光感感測器，也稱為環境光感測器，用於檢測環境光亮度。光感感測器可以包括光敏元件和模數轉換器。其中，光敏元件用於將採集的光信號轉換為電信號，模數轉換器用於將上述電信號轉換為數位信號。可選的，光線感測器還可以包括信號放大器，信號放大器可以將光敏元件轉換的電信號進行放大後輸出至模數轉換器。上述光敏元件可以包括光電二極體、光電三極管、光敏電阻、矽光電池中的至少一種。其中，眼球追蹤感測器例如可以是紅外光（Infrared Radiation，IR）感測器，IR感測器用於暗亮交替地照射人眼，在人眼上產生亮斑（glint），攝影模組用於拍攝人眼，得到亮瞳和暗瞳隔幀交替出現的注視影像序列。

其中，處理器是電子設備的控制中心，利用各種介面和線路連接整個電子設備的各個部分，透過運行或執行儲存在記憶體內的軟體程式和/或模組，以及調用儲存在記憶體內的資料，執行電子設備的各種功能和處理資料，從而對電子設備進行整體監控。

其中，處理器可集成應用處理器和數據機，其中，應用處理器主要處理作業系統、使用者介面和應用程式等，數據機主要處理無線通訊。可以理解的是，上述數據機也可以不集成到處理器中。

其中，記憶體用於儲存軟體程式和/或模組，處理器透過運行儲存在記憶體的軟體程式和/或模組，從而執行電子設備的各種功能應用以及資料處理。記憶體可主要包括儲存程式區和儲存資料區，其中，儲存程式區可儲存作業系統、至少一個功能所需的軟體程式等；儲存資料區可儲存根據電子設備的使用所創建的資料等。此外，記憶體可以包括高速隨機存取記憶體，還可以包括非揮發性記憶體，例如至少一個磁碟記憶體件、快閃記憶體器件、或其他揮發性固態記憶體件。

如圖1B所示，圖1B是本申請實施例提供的一種追焦系統的軟體架構圖。該軟體架構圖可以應用於安卓（Android）系統、IOS系統或者是Windows系統，在此不做限定。該軟體架構圖包括應用層、框架層和硬體抽象層。其中，應用層包括電子書、瀏覽器、啟動器、解鎖、行動支付、相機、眼球追蹤等應用。框架層包括眼球追蹤服務（OEyeTrackerService）模組，眼球追蹤授權（OEyeTrackerAuthentication）模組、眼球追蹤策略（OEyeTrackerStrategy）模組、眼球追蹤演算法（OEyeTrackerAlgo）模組和眼球追蹤參數（OEyeTrackerParams）模組等，框架層的OEyeTrackerService模組透過眼球追蹤SDK（OEyeTrackerSDK）介面與應用層的應用連接起來；框架層還包括相機NDK介面（CameraNDKInterface）、相機服務（CameraService）模組，CameraNDKInterface與OEyeTrackerService模組連接，CameraService模組與CameraNDKInterface相互連接。硬體抽象層包括谷歌HAL介面（Google HAL Interface）、高通HAL介面（Qualcomm HAL Interface）、Cam X、Chi-cdk和追蹤焦點模組等，Google HAL Interface與框架層的CameraService模組連接，Qualcomm HAL Interface與Google HAL Interface和追蹤焦點模組連接，Cam X分別與Qualcomm HAL Interface和Chi-cdk連接。OEyeTrackerService模組與OEyeTrackerSDK之間的連接、CameraService模組與CameraNDKInterface之間的連接以及Google HAL Interface與CameraService模組之間的連接均透過Binder架構。

其中，OEyeTrackerSDK介面負責為相機應用提供獲取注視點以及輸入的api，形式為jar/aar包。OEyeTrackerService模組負責管理注視點演算法、注視點後處理、輸入處理以及認證和參數設置。EyeTrackerAlgo模組是眼球追蹤的核心演算法模組，包括本申請中的確定目標眼球追蹤演算法。OEyeTrackerStrategy模組與演算法後處理相關，如濾波、注視點跳動、注視點轉監聽、注視點輸入。OEyeTrackerAuthentication模組回調各模組，負責認證請求者是否被允許。OEyeTrackerParam模組負責解析配置和熱更新配置。追蹤焦點模組主要用於追蹤目標，追蹤焦點模組還可以透過切換攝影模組實現焦點調整，實現追焦的目的。

下面對本申請實施例進行詳細介紹。

如圖2所示，圖2是本申請實施例提供的一種追焦方法的流程示意圖，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述方法包括：

步驟201：顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標。

其中，電子設備包括攝影模組，所述攝影預覽畫面是所述攝影模組採集得到的，所述攝影模組包括第一攝影模組和第二攝影模組。所述第一攝影模組和/或所述第二攝影模組可以是前置攝影頭，也可以是後置攝影頭，在此不做限定。

步驟202：透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置。

步驟203：基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標。

具體地，所述注視位置用注視點的座標表示，所述基於所述注視位置確定焦點追蹤目標，包括：電子設備確定所述至少一個待拍攝目標所在的至少一個區域；電子設備確定所述注視點的座標在所述至少一個區域中所屬的目的地區域；電子設備將所述目的地區域對應的待拍攝目標確定為焦點追蹤目標。

步驟204：透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。

具體地，所述電子設備還包括相機應用，相機NDK介面、相機服務模組、谷歌HAL介面和高通HAL介面，所述透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦，包括：透過相機應用、相機NDK介面、相機服務模組、谷歌HAL介面和高通HAL介面向追蹤焦點模組發送所述焦點追蹤目標的標識訊息；控制所述焦點追蹤模組基於所述焦點追蹤目標的標識訊息對所述焦點追蹤目標進行追焦。

其中，焦點追蹤目標的標識訊息例如可以為焦點追蹤目標在螢幕上的座標點，焦點追蹤目標的顏色或者焦點追蹤目標的其他特徵訊息；例如，若焦點追蹤目標為人物，則特徵訊息例如可以為眼、口、鼻等等，若焦點追蹤目標為樹木，則特徵訊息例如可以為樹冠、樹根、樹幹等等，在此，不再一一舉例說明。

在本申請的一實現方式中所述電子設備還包括攝影模組，所述攝影預覽畫面是所述攝影模組採集得到的，所述透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦，包括：

確定所述焦點追蹤目標與所述攝影模組的相對位置；

基於所述相對位置確定所述攝影模組對焦需要的距離；

透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦。

其中，所述焦點追蹤目標與所述攝影模組的相對位置的確定方式可以是電子設備透過其包括的測距模組確定，例如飛行時間（Time Of Flight，TOF）模組，還可以基於其它方式確定，在此不做限定。

其中，攝影模組對焦需要的距離例如可以為12mm、14mm、16mm，或是其他值，在此不做限定。攝影模組對焦需要的距離與焦點追蹤目標與攝影模組的相對位置具有一一對應的關係，例如焦點追蹤目標與攝影模組的相對位置為7m，則攝影模組對焦需要的距離例如可以為12mm。

可以看出，在本申請實施例中，焦點追蹤模組基於焦點追蹤目標的標識訊息對焦點追蹤目標進行定位和跟蹤，焦點追蹤模組基於攝影模組對焦需要的距離進行對焦，從而實現了對焦點追蹤目標的追焦。

在本申請的一實現方式中，所述攝影模組包括第一攝影模組和第二攝影模組，所述第一攝影模組的對焦範圍為第一焦距範圍，所述第二攝影模組的對焦範圍為第二焦距範圍，所述攝影預覽畫面是所述第一攝影模組採集得到的；所述透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦，包括：

若所述距離處於所述第一焦距範圍，則透過所述焦點追蹤模組控制所述第一攝影模組對所述焦點追蹤目標進行追焦；

若所述距離處於所述第二焦距範圍，則透過所述焦點追蹤模組將所述攝影預覽畫面的採集攝影模組從所述第一攝影模組切換至所述第二攝影模組，以及透過所述焦點追蹤模組控制所述第二攝影模組對所述焦點追蹤目標進行追焦。

其中，第二焦距範圍可以與第一焦距範圍存在部分重合或包括第一焦距範圍，第二焦距範圍與第一焦距範圍也可以為互補的關係。例如廣角攝影模組的焦距範圍一般為28mm-34mm，標準攝影模組的焦距範圍一般為70mm-135mm，長焦攝影模組的焦距範圍一般為85mm-300mm，則第一攝影模組例如可以為廣角攝影模組，第二攝影模組例如可以為標準攝影模組或長焦攝影模組；或者，第一攝影模組例如可以為標準攝影模組，第二攝影模組例如可以為廣角攝影模組或長焦攝影模組；第一攝影模組例如可以為長焦攝影模組，第二攝影模組例如可以為標準攝影模組或廣角攝影模組。

可以看出，在本申請實施例中，透過判斷攝影模組對焦需要的距離所處的焦距範圍去選擇當前採集攝影預覽畫面的攝影模組，能夠避免由於對焦需要的距離過遠或過近造成無法追焦的問題。

在本申請的一實現方式中，所述電子設備還包括顯示器，所述確定所述焦點追蹤目標與所述攝影模組的相對位置，包括：

確定所述焦點追蹤目標在所述顯示器中所占區域的第一面積，以及確定所述攝影預覽畫面在所述顯示器中所占區域的第二面積；

基於所述第一面積與所述第二面積的比值，確定所述焦點追蹤目標與所述攝影模組的相對位置。

其中，在攝影預覽畫面一定時，焦點追蹤目標在攝影預覽介面中的大小（所占區域的面積）與距離成反比，所占區域的面積越大，則距離越近，所占區域的面積越小，則距離越遠。

可以看出，在本申請實施例中，以顯示器為參考目標，分別確定攝影預覽畫面和焦點追蹤目標在顯示器中所占區域的面積，然後根據兩者面積的比值確定焦點追蹤目標與攝影模組的相對位置，提高了相對位置確定的準確度，從而也提升了後續追焦的準確度。

在本申請的一實現方式中，所述電子設備還包括眼球追蹤感測器，所述透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置，包括：

透過所述眼球追蹤感測器獲取注視資料；

透過所述眼球追蹤模組調用目標眼球追蹤演算法處理所述注視資料，得到目標資料；

基於所述目標資料確定使用者注視所述攝影預覽畫面的注視位置。

其中，注視資料可以是圖像、影像、錄影，也可以是其他資料，在此不作限定。

其中，眼球追蹤感測器例如可以為紅外感測器。紅外感測器發射紅外線，用於暗亮交替地照射人眼，在人眼上產生亮斑（glint），攝影裝置拍攝人眼，得到亮瞳和暗瞳隔幀交替出現的注視資料。

具體地，所述電子設備包括眼球追蹤應用，所述透過所述眼球追蹤感測器獲取注視資料，包括：

透過所述眼球追蹤應用向所述眼球追蹤感測器發送注視資料獲取請求；

透過所述眼球追蹤感測器接收所述注視資料獲取請求，獲取注視資料。

具體地，所述眼球追蹤模組還包括眼球追蹤服務模組和眼球追蹤演算法模組，所述透過所述眼球追蹤模組調用目標眼球追蹤演算法處理所述注視資料，得到目標資料，包括：

透過所述眼球追蹤服務模組向所述眼球追蹤演算法模組發送注視資料；

透過所述眼球追蹤演算法模組使能目標眼球追蹤演算法計算所述注視資料，得到目標資料。

具體地，所述眼球追蹤模組還包括眼球追蹤策略模組，所述基於所述目標資料確定使用者注視所述攝影預覽畫面的注視位置，包括：

透過所述眼球追蹤策略模組接收所述眼球追蹤演算法模組發送的目標資料，基於所述目標資料確定使用者注視所述攝影預覽畫面的注視位置。

具體地，目標眼球追蹤演算法的具體實現方式如下：

x_s ’=a₀ +a₁ *v_x ’+a₂ *v_y ’+a₃ *v_x ’² +a₄ *v_y ’² +a₅ *v_x ’*v_y ’，

y_s ’=b₀ +b₁ *v_x ’+b₂ *v_y ’+b₃ *v_x ’² +b₄ *v_y ’² +b₅ *v_x ’*v_y ’；

其中，所述（x_s ’，y_s ’）為所述目標資料，所述（v_x ’，v_y ’）為所述注視資料，所述a₀ 、a₁ 、a₂ 、a₃ 、a₄ 、a₅ 和b₀ 、b₁ 、b₂ 、b₃ 、b₄ 、b₅ 為預先配置的注視位置確定參數。

舉例說明，眼球追蹤感測器發出紅外線，在人眼上依次產生5個亮斑，則這5個亮斑則為注視資料，則計算這5個注視資料可以得到5個目標資料，然後對5個目標資料進行過濾，例如刪除大於或等於第一閾值的資料，且刪除小於或等於第二閾值的資料，然後將剩餘的目標資料取平均值，得到注視位置。

進一步地，所述眼球追蹤模組還包括眼球追蹤參數模組，所述透過所述眼球追蹤演算法模組使能目標眼球追蹤演算法計算所述注視資料，得到目標資料之前，所述方法還包括：

向所述眼球追蹤服務模組發送所述相機應用的標識訊息；

透過所述眼球追蹤服務模組基於所述相機應用的標識訊息確定目標眼球追蹤功能的第一配置訊息；

透過所述眼球追蹤參數模組接收所述眼球追蹤服務模組發送的所述第一配置訊息，將所述第一配置訊息轉換為所述眼球追蹤演算法模組允許識別的第二配置訊息；

透過所述眼球追蹤演算法模組接收所述眼球追蹤參數模組發送的所述第二配置訊息，以及基於所述第二配置訊息確定所述目標眼球追蹤演算法。

其中，所述相機應用的標識訊息例如可以為相機應用的名稱、版本號、認證碼，不同的標識訊息對應不同的第一配置訊息，例如不同的標識訊息需要確定的注視點個數不同，不同個數的注視點對應不同的第一配置訊息。

進一步地，所述眼球追蹤模組還包括眼球追蹤認證模組，所述向所述眼球追蹤服務模組發送所述相機應用的標識訊息之後，所述方法還包括：

透過所述眼球追蹤認證模組對所述相機應用的標識訊息進行校驗，且校驗透過。

進一步地，所述相機應用的標識訊息為認證碼，所述眼球追蹤認證模組對所述相機應用的標識訊息進行校驗，且校驗透過，包括：所述眼球追蹤認證模組獲取所述相機應用的非對稱金鑰，使用所述非對稱私密金鑰解密所述相機應用的認證碼得到所述相機應用的APP簽名key、系統日期、約定欄位；所述眼球追蹤認證模組根據所述APP簽名key、所述系統日期、所述約定欄位確定校驗透過。

其中，非對稱私密金鑰是非對稱加密中金鑰對中的一個，非對稱加密演算法需要兩個金鑰：公開金鑰（publickey:簡稱公鑰）和私密金鑰（privatekey:簡稱私鑰）。公開金鑰與私密金鑰是一對，如果用公開金鑰對資料進行加密，只有用對應的私密金鑰才能解密。因為加密和解密使用的是兩個不同的金鑰，所以這種演算法叫作非對稱加密演算法。非對稱加密演算法實現機密訊息交換的基本過程是：甲方生成一對金鑰並將公開金鑰公開，需要向甲方發送訊息的其他角色，即乙方使用該公開金鑰對機密訊息進行加密後再發送給甲方，甲方再用自己私密金鑰對加密後的訊息進行解密。

具體實現中，APP簽名key可以理解為安裝所述相機應用的許可，下載所述相機應用到電子設備之後，將所述相機應用給到內部的伺服器，內部伺服器根據該所述相機應用的APP簽名key、系統日期、約定欄位等訊息使用非對稱公開金鑰加密得到認證碼，該認證碼可以作為所述相機應用的標識訊息，眼球追蹤認證模組在收到來自所述相機應用的認證碼之後，會獲取預先配置的與公開金鑰對應的該相機應用的非對稱私密金鑰，然後用這個非對稱私密金鑰對認證碼解密，得到該相機應用的APP簽名key、系統日期、約定欄位等訊息，然後系統對這些訊息進行判斷，如果訊息無誤校驗透過。

可以看出，在本申請實施例中，在調用目標眼球追蹤演算法前，透過眼球追蹤認證模組對相機的標識訊息進行認證，有利於提高軟體系統內部的安全保護。

在本申請的一實現方式中，所述眼球追蹤感測器的工作頻率基於所述攝影模組的工作頻率確定。

其中，攝影模組每獲取一幀攝影預覽畫面，則眼球追蹤感測器獲取一幀注視資料；或者，攝影模組每獲取預設幀數攝影預覽畫面，眼球追蹤感測器獲取一幀注視資料。兩者的工作頻率可以相同，也可以不同，在此不做限定。

可以看出，在本申請實施例中，基於攝影模組的工作頻率去確定眼球追蹤感測器的工作頻率，有利於保持眼球追蹤模組與焦點追蹤模組兩個模組工作的協調性。

在本申請的一實現方式中，所述顯示攝影預覽畫面之後，所述方法還包括：

調用目標檢測演算法處理所述攝影預覽畫面，確定所述至少一個待拍攝目標。

具體地，所述目標檢測演算法的具體實現方式如下：

將所述攝影預覽畫面的每一個像素作為一組待處理資料，得到多組待處理資料；確定每組待處理資料的紋理；將每組待處理資料的紋理與其相鄰的待處理資料的紋理進行比較；若存在紋理小於或等於預設紋理閾值的待處理資料，則將存在紋理小於或等於預設紋理閾值的待處理資料進行合併，得到新的待處理資料；重複將每組待處理資料的紋理與其相鄰的待處理資料的紋理進行比較的步驟，直至不存在紋理小於或等於預設紋理閾值的待處理資料；將每個待處理資料對應的圖像區域確定為待拍攝目標。

其中，紋理指的是像素與像素之間由於像素值不同造成的界限。

可以看出，在本申請實施例中，調用目標檢測演算法處理攝影預覽畫面，確定至少一個待拍攝目標，有利於準確地識別攝影預覽畫面，得到待拍攝目標，從而提高了後續判斷注視位置在哪個待拍攝目標上的準確性。

如圖3所示，圖3是本申請實施例提供的一種追焦方法的流程示意圖，應用於包括眼球追蹤模組、焦點追蹤模組、攝影模組和眼球追蹤感測器的電子設備，所述眼球追蹤感測器的工作頻率基於所述攝影模組的工作頻率確定，所述攝影模組包括第一攝影模組和第二攝影模組，所述第一攝影模組的對焦範圍為第一焦距範圍，所述第二攝影模組的對焦範圍為第二焦距範圍；所述方法包括：

步驟301：顯示攝影預覽畫面，所述攝影預覽畫面是所述第一攝影模組採集得到的。

步驟302：調用目標檢測演算法處理所述攝影預覽畫面，確定至少一個待拍攝目標。

步驟303：透過所述眼球追蹤感測器獲取注視資料。

步驟304：透過所述眼球追蹤模組調用目標眼球追蹤演算法處理所述注視資料，得到目標資料。

步驟305：基於所述目標資料確定使用者注視所述攝影預覽畫面的注視位置。

步驟306：基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標。

步驟307：確定所述焦點追蹤目標在所述顯示器中所占區域的第一面積，以及確定所述攝影預覽畫面在所述顯示器中所占區域的第二面積。

步驟308：基於所述第一面積與所述第二面積的比值，確定所述焦點追蹤目標與所述攝影模組的相對位置。

步驟309：基於所述相對位置確定所述攝影模組對焦需要的距離。

步驟310：若所述距離處於所述第一焦距範圍，則透過所述焦點追蹤模組控制所述第一攝影模組對所述焦點追蹤目標進行追焦。

步驟311：若所述距離處於所述第二焦距範圍，則透過所述焦點追蹤模組將所述攝影預覽畫面的採集攝影模組從所述第一攝影模組切換至所述第二攝影模組，以及透過所述焦點追蹤模組控制所述第二攝影模組對所述焦點追蹤目標進行追焦。

需要說明的是，本實施例的具體實現過程可參見上述方法實施例所述的具體實現過程，在此不再敘述。

請參閱圖4，圖4是本申請實施例提供的一種電子設備的結構示意圖，所述電子設備包括眼球追蹤模組和焦點追蹤模組，如圖4所示，所述電子設備還包括記憶體、通訊介面以及一個或多個程式，其中，上述一個或多個程式被儲存在上述記憶體中，並且被配置由上述處理器執行，上述程式包括用於執行以下步驟的指令：

透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。

在本申請的一實現方式中，所述電子設備還包括攝影模組，所述攝影預覽畫面是所述攝影模組採集得到的，在透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦方面，上述程式包括具體用於執行以下步驟的指令：

確定所述焦點追蹤目標與所述攝影模組的相對位置；

基於所述相對位置確定所述攝影模組對焦需要的距離；

在本申請的一實現方式中，所述攝影模組包括第一攝影模組和第二攝影模組，所述第一攝影模組的對焦範圍為第一焦距範圍，所述第二攝影模組的對焦範圍為第二焦距範圍，所述攝影預覽畫面是所述第一攝影模組採集得到的；在透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦方面，上述程式包括具體用於執行以下步驟的指令：

在本申請的一實現方式中，所述電子設備還包括顯示器，在確定所述焦點追蹤目標與所述攝影模組的相對位置方面，上述程式包括具體用於執行以下步驟的指令：

在本申請的一實現方式中，所述電子設備還包括眼球追蹤感測器，在透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置方面，上述程式包括具體用於執行以下步驟的指令：

透過所述眼球追蹤感測器獲取注視資料；

在本申請的一實現方式中，在顯示攝影預覽畫面之後，上述程式包括還用於執行以下步驟的指令：

上述實施例主要從方法側執行過程的角度對本申請實施例的方案進行了介紹。可以理解的是，電子設備為了實現上述功能，其包含了執行各個功能相應的硬體結構和/或軟體模組。本領域技術人員應該很容易意識到，結合本文中所公開的實施例描述的各示例的單元及演算法步驟，本申請能夠以硬體或硬體和電腦軟體的結合形式來實現。某個功能究竟以硬體還是電腦軟體驅動硬體的方式來執行，取決於技術方案的特定應用和設計約束條件。專業技術人員可以對每個特定的應用使用不同方法來實現所描述的功能，但是這種實現不應認為超出本申請的範圍。

本申請實施例可以根據所述方法示例對電子設備進行功能單元的劃分，例如，可以對應各個功能劃分各個功能單元，也可以將兩個或兩個以上的功能集成在一個處理單元中。所述集成的單元既可以採用硬體的形式實現，也可以採用軟體功能單元的形式實現。

需要說明的是，本申請實施例中對單元的劃分是示意性的，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式。

下面為本申請裝置實施例，本申請裝置實施例用於執行本申請方法實施例所實現的方法。請參閱圖5，圖5是本申請實施例提供的一種追焦裝置的結構示意圖，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述裝置包括：

顯示單元501，用於顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；

確定單元502，用於透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；

追焦單元503，用於透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。

在本申請的一實現方式中，所述電子設備還包括攝影模組，所述攝影預覽畫面是所述攝影模組採集得到的，在透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦方面，所述追焦單元503，具體用於：

確定所述焦點追蹤目標與所述攝影模組的相對位置；

基於所述相對位置確定所述攝影模組對焦需要的距離；

在本申請的一實現方式中，所述攝影模組包括第一攝影模組和第二攝影模組，所述第一攝影模組的對焦範圍為第一焦距範圍，所述第二攝影模組的對焦範圍為第二焦距範圍，所述攝影預覽畫面是所述第一攝影模組採集得到的；在透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦方面，所述追焦單元503，具體用於：

在本申請的一實現方式中，所述電子設備還包括顯示器，在確定所述焦點追蹤目標與所述攝影模組的相對位置方面，所述追焦單元503，具體用於：

在本申請的一實現方式中，所述電子設備還包括眼球追蹤感測器，在透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置方面，所述確定單元502，具體用於：

透過所述眼球追蹤感測器獲取注視資料；

在本申請的一實現方式中，在顯示攝影預覽畫面之後，所述確定單元502，還用於：

其中，所述顯示單元501、確定單元502和追焦單元503可以是處理器。

可以理解的是，由於方法實施例與裝置實施例為相同技術構思的不同呈現形式，因此，本申請中方法實施例部分的內容應同步適配於裝置實施例部分，此處不再贅述。

本申請實施例還提供了一種晶片，其中，該晶片包括處理器，用於從記憶體中調用並運行電腦程式，使得安裝有所述晶片的設備執行如上述方法實施例中電子設備所描述的部分或全部步驟。

本申請實施例還提供一種電腦儲存媒介，其中，該電腦儲存媒介儲存用於電子資料交換的電腦程式，該電腦程式使得電腦執行如上述方法實施例中記載的任一方法的部分或全部步驟，上述電腦包括電子設備。

本申請實施例還提供一種電腦程式產品，上述電腦程式產品包括儲存了電腦程式的非暫態性電腦可讀儲存媒介，上述電腦程式可操作來使電腦執行如上述方法實施例中記載的任一方法的部分或全部步驟。該電腦程式產品可以為一個軟體安裝包，上述電腦包括電子設備。

需要說明的是，對於前述的各方法實施例，為了簡單描述，故將其都表述為一系列的動作組合，但是本領域技術人員應該知悉，本申請並不受所描述的動作順序的限制，因為依據本申請，某些步驟可以採用其他順序或者同時進行。其次，本領域技術人員也應該知悉，說明書中所描述的實施例均屬於優選實施例，所涉及的動作和模組並不一定是本申請所必須的。

在上述實施例中，對各個實施例的描述都各有側重，某個實施例中沒有詳述的部分，可以參見其他實施例的相關描述。

在本申請所提供的幾個實施例中，應該理解到，所揭露的裝置，可透過其它的方式實現。例如，以上所描述的裝置實施例僅僅是示意性的，例如上述單元的劃分，僅僅為一種邏輯功能劃分，實際實現時可以有另外的劃分方式，例如多個單元或元件可以結合或者可以集成到另一個系統，或一些特徵可以忽略，或不執行。另一點，所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是透過一些介面，裝置或單元的間接耦合或通訊連接，可以是電性或其它的形式。

上述作為分離部件說明的單元可以是或者也可以不是實體上分開的，作為單元顯示的部件可以是或者也可以不是實體單元，即可以位於一個地方，或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例方案的目的。

另外，在本申請各個實施例中的各功能單元可以集成在一個處理單元中，也可以是各個單元單獨實體存在，也可以兩個或兩個以上單元集成在一個單元中。上述集成的單元既可以採用硬體的形式實現，也可以採用軟體功能單元的形式實現。

上述集成的單元如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時，可以儲存在一個電腦可讀取記憶體中。基於這樣的理解，本申請的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的全部或部分可以以軟體產品的形式體現出來，該電腦軟體產品儲存在一個記憶體中，包括若干指令用以使得一台電腦設備（可為個人電腦、伺服器或者網路設備等）執行本申請各個實施例上述方法的全部或部分步驟。而前述的記憶體包括：隨身碟、唯讀記憶體（ROM，Read-Only Memory）、隨機存取記憶體（RAM，Random Access Memory）、行動硬碟、磁碟或者光碟等各種可以儲存程式碼的媒介。

本領域普通技術人員可以理解上述實施例的各種方法中的全部或部分步驟是可以透過程式來指令相關的硬體來完成，該程式可以儲存於一電腦可讀記憶體中，記憶體可以包括：快閃記憶體盤、唯讀記憶體（英文：Read-Only Memory ，簡稱：ROM）、隨機存取記憶體（英文：Random Access Memory，簡稱：RAM）、磁片或光碟等。

以上對本申請實施例進行了詳細介紹，本文中應用了具體個例對本申請的原理及實施方式進行了闡述，以上實施例的說明只是用於幫助理解本申請的方法及其核心思想；同時，對於本領域的一般技術人員，依據本申請的思想，在具體實施方式及應用範圍上均會有改變之處，綜上所述，本說明書內容不應理解為對本申請的限制。

201~204:步驟 301~311:步驟 501:顯示單元 502:確定單元 503:追焦單元

為了更清楚地說明本申請實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本申請的一些實施例，對於本領域普通技術人員來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其他的附圖。

圖1A是本申請實施例提供的一種電子設備硬體的結構示意圖；

圖1B是本申請實施例提供的一種追焦系統的軟體架構圖；

圖2是本申請實施例提供的一種追焦方法的流程示意圖；

圖3是本申請實施例提供的一種追焦方法的流程示意圖；

圖4是本申請實施例提供的一種電子設備的結構示意圖；

圖5是本申請實施例提供的一種追焦裝置的結構示意圖。

201~204:步驟

Claims

一種追焦方法，其特徵在於，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述方法包括：顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。
根據請求項1所述的方法，其特徵在於，所述電子設備還包括攝影模組，所述攝影預覽畫面是所述攝影模組採集得到的，所述透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦，包括：確定所述焦點追蹤目標與所述攝影模組的相對位置；基於所述相對位置確定所述攝影模組對焦需要的距離；透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦。
根據請求項2所述的方法，其特徵在於，所述攝影模組包括第一攝影模組和第二攝影模組，所述第一攝影模組的對焦範圍為第一焦距範圍，所述第二攝影模組的對焦範圍為第二焦距範圍，所述攝影預覽畫面是所述第一攝影模組採集得到的；所述透過所述焦點追蹤模組基於所述距離對所述焦點追蹤目標進行追焦，包括：若所述距離處於所述第一焦距範圍，則透過所述焦點追蹤模組控制所述第一攝影模組對所述焦點追蹤目標進行追焦；若所述距離處於所述第二焦距範圍，則透過所述焦點追蹤模組將所述攝影預覽畫面的採集攝影模組從所述第一攝影模組切換至所述第二攝影模組，以及透過所述焦點追蹤模組控制所述第二攝影模組對所述焦點追蹤目標進行追焦。
根據請求項2或3所述的方法，其特徵在於，所述電子設備還包括顯示器，所述確定所述焦點追蹤目標與所述攝影模組的相對位置，包括：確定所述焦點追蹤目標在所述顯示器中所占區域的第一面積，以及確定所述攝影預覽畫面在所述顯示器中所占區域的第二面積；基於所述第一面積與所述第二面積的比值，確定所述焦點追蹤目標與所述攝影模組的相對位置。
根據請求項4所述的方法，其特徵在於，所述電子設備還包括眼球追蹤感測器，所述透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置，包括：透過所述眼球追蹤感測器獲取注視資料；透過所述眼球追蹤模組調用目標眼球追蹤演算法處理所述注視資料，得到目標資料；基於所述目標資料確定使用者注視所述攝影預覽畫面的注視位置。
根據請求項5所述的方法，其特徵在於，所述眼球追蹤感測器的工作頻率基於所述攝影模組的工作頻率確定。
根據請求項1-6任一項所述的方法，其特徵在於，所述顯示攝影預覽畫面之後，所述方法還包括：調用目標檢測演算法處理所述攝影預覽畫面，確定所述至少一個待拍攝目標。
一種追焦裝置，其特徵在於，應用於包括眼球追蹤模組和焦點追蹤模組的電子設備，所述裝置包括：顯示單元，用於顯示攝影預覽畫面，所述攝影預覽畫面包括至少一個待拍攝目標；確定單元，用於透過所述眼球追蹤模組確定使用者注視所述攝影預覽畫面的注視位置；基於所述注視位置確定焦點追蹤目標，所述至少一個待拍攝目標包括所述焦點追蹤目標；追焦單元，用於透過所述焦點追蹤模組對所述焦點追蹤目標進行追焦。
一種電子設備，其特徵在於，包括處理器、記憶體、通訊介面，以及一個或多個程式，所述一個或多個程式被儲存在所述記憶體中，並且被配置由所述處理器執行，所述程式包括用於執行如請求項1-7任一項所述的方法中的步驟的指令。
一種電腦可讀儲存媒介，其特徵在於，所述電腦可讀儲存媒介儲存有電腦程式，所述電腦程式被處理器執行以實現請求項1-7任一項所述的方法。