TWI723119B

TWI723119B - 相機應用的圖像預覽方法、裝置及相機應用系統

Info

Publication number: TWI723119B
Application number: TW106102243A
Authority: TW
Inventors: 胡俊遠
Original assignee: 香港商斑馬智行網絡（香港）有限公司
Priority date: 2017-01-20
Filing date: 2017-01-20
Publication date: 2021-04-01
Also published as: TW201828256A

Abstract

本申請實施例中提供了一種相機應用的圖像預覽方法、裝置及相機應用系統，該方法包括：觸發框架Framework接收硬體適配層HAL採集的圖像；對圖像進行處理，得到處理後的圖像；將處理後的圖像輸出至Framework層對應的顯示模組以進行顯示。採用本申請實施例中的方案，能夠解決現有技術中的相機應用的圖像預覽方案相容性較差的問題。

Description

相機應用的圖像預覽方法、裝置及相機應用系統

本申請關於電腦技術，具體關於一種相機應用的圖像預覽方法、裝置及相機應用系統。

目前已有多種應用能夠調用移動設備相機以進行不同模式的拍攝，該應用可以是如QQ、全能相機、超級相機等應用，該移動設備可以是如手機、平板電腦等的設備，該模式可以是如拍照、攝影、全景等模式；本申請中將這些能夠調用移動設備的相機進行不同模式的拍攝的應用統稱為相機應用。

為了使使用者拍攝的圖像能夠更好看，很多相機應用提供了影像處理功能，例如美顏處理。同時，為了使用戶能夠在拍攝之前瞭解經影像處理之後的效果，很多相機應用都提供了即時預覽功能，例如，美顏預覽；即，當鏡頭對著使用者臉部時，螢幕上顯示的使用者的臉是已經美顏處理的預覽圖像。

在現有技術中，相機應用的圖像預覽功能的實現方法流程如圖1所示：S101，在相機的HAL(Hardware Adapter Layer硬體適配層)增加影像處理功能；S102，HAL採集預覽圖像，然後進行影像處理；S103，將處理後的圖像輸出至HAL的顯示模組進行顯示。由於HAL依賴於如MTK、高通、展訊等的各個平臺，所以現有技術中的不同平臺的相機應用的圖像預覽功能的實現方法差異較大。

現有技術相機應用的圖像預覽方案依賴於各平臺的HAL，代碼的實現差異性大，相容性較差。

本申請實施例中提供了一種相機應用的圖像預覽方法、裝置及相機應用系統，用於解決現有技術中的相機應用的圖像預覽方案相容性較差的問題。

根據本申請實施例的一個態樣，提供了一種相機應用的圖像預覽方法，包括：觸發框架Framework接收硬體適配層HAL採集的圖像；對圖像進行處理，得到處理後的圖像；將處理後的圖像輸出至Framework層對應的顯示模組以進行顯示。

根據本申請實施例的另一個態樣，提供了一種相機應用的圖像預覽裝置，包括：觸發模組，用於觸發框架Framework接收HAL採集的圖像；影像處理模組，用於對圖像進行處理，得到處理後的圖像；第一輸出模組，用於將處理後的圖像輸出至Framework層對應的顯示模組以進行顯示。

根據本申請實施例的再一個態樣，提供了一種相機應用系統，包括：上述的相機應用的圖像預覽裝置。

採用本申請實施例中的相機應用的圖像預覽方法，能夠結合Framework層實現圖像預覽，由於Framework是系統自帶框架，不依賴於平臺，因此能夠跨平臺、跨手機使用，提升了相容性。

500‧‧‧相機應用的圖像預覽裝置

502‧‧‧觸發模組

504‧‧‧影像處理模組

506‧‧‧第一輸出模組

600‧‧‧相機應用系統

此處所說明的附圖用來提供對本申請的進一步理解，構成本申請的一部分，本申請的示意性實施例及其說明用於解釋本申請，並不構成對本申請的不當限定。在附圖中：圖1為現有技術中的相機應用的圖像預覽功能的實現方法流程圖；圖2為本申請實施例一所示的相機應用的圖像預覽方法的流程圖；圖3為本申請實施例二所示的相機應用的圖像預覽方法的流程圖；圖4為本申請實施例三所示的相機應用的圖像預覽方法的流程圖；圖5為本申請實施例四所示相機應用的圖像預覽裝置的結構示意圖；圖6為本申請實施例五所示相機應用系統的結構示意圖。

為了使本申請實施例中的技術方案及優點更加清楚明白，以下結合附圖對本申請的示例性實施例進行進一步詳細的說明，顯然，所描述的實施例僅是本申請的一部分實施例，而不是所有實施例的窮舉。需要說明的是，在不衝突的情況下，本申請中的實施例及實施例中的特徵可以相互組合。

在實現本申請的過程中，申請人發現，在現有技術中，相機應用的圖像預覽功能的實現方法如圖1所示：在相機的HAL增加影像處理功能；HAL採集預覽圖像，然後進行影像處理，將處理後的圖像輸出至HAL的顯示模組進行顯示。由於HAL依賴於如MTK、高通、展訊等的各個平臺，所以現有技術中的不同平臺的相機應用的圖像預覽功能的實現方法差異較大。現有技術中的方案依賴於各平臺的HAL，代碼的實現差異性大，相容性較差。另外，對於不開放原始程式碼的三方手機，由於無法獲得HAL原始程式碼，所以現有技術中的方案無法實施。

針對上述問題，本申請實施例中提供了一種相機應用的圖像預覽方法，通過在Framework層增加影像處理功能和顯示模組來對HAL採集的圖像進行相應處理，並進行顯示，從而能夠結合Framework層實現圖像預覽，由於Framework是系統自帶框架，不依賴於平臺，因此能夠跨平臺、跨手機使用，提升了相容性。

本申請實施例中的方案可以在相機應用的硬體底層如Framework層實現，也可以在作業系統層實現。

本申請實施例中的方案可以應用於相機應用中，該相機應用可以是如Camera360、全能相機、超級相機等的協力廠商相機應用，也可以是如小米、三星、聯想、酷派、華為等硬體廠商的內置相機應用，還可以是如雲OS(Operating System，作業系統)等作業系統、小米ROM(Android協力廠商作業系統)、百度ROM等協力廠商作業系統自帶的相機應用。

實施例一

圖2為本申請實施例一所示的相機應用的圖像預覽方法的流程圖。

如圖2所示，根據本申請實施例一所示的相機應用的圖像預覽方法包括以下步驟：S201，觸發框架Framework接收硬體適配層HAL採集的圖像；S202，對圖像進行處理，得到處理後的圖像；S203，將處理後的圖像輸出至Framework層對應的顯示模組SurfaceTexture以進行顯示。

在S201的一種具體實施方式中，可以通過HAL的圖像回傳元件(該功能是標準功能，所有平臺都支援)來觸發Framework接收HAL採集的圖像。

在S202的一種具體實施方式中，可以採用本領域技術人員常用的多種影像處理方式以對圖像進行多種模式的處理，如美顏、懷舊、沖洗、黑白、燭光等，本申請對此不作限制。

在具體實施時，Framework可以是如安卓Android系統的作業系統自帶框架，該框架可以用於向相機應用APK控制相機硬體的介面。

在具體實施時，本申請實施例中的相機應用的圖像預覽方法與Framework之間的介面可以採用多種邏輯和名稱，本領域技術人員應當理解，只要能夠將圖像顯示到顯示模組即可。

在具體實施時，本申請實施例中的相機應用的圖像預覽方法可以以原始程式碼的形式實現，也可以以靜態程式庫、動態庫的形式被Framework調用。

在具體實施時，顯示模組可以是用於顯示的軟體功能模組，由相機應用創建。

在本申請實施例中，在步驟203之前，還可以預先為Framework設置顯示模組，該顯示模組可以是安卓系統中的SurfaceTexture。

在具體實施時，可以採用將HAL的顯示模組設置為Framework的顯示模組的方式為Framework層設置顯示模組；更具體地，可以將HAL的顯示模組的控制碼使用者修改為Framework；例如，在安卓系統中，將SurfaceTexture的控制碼使用者由原來的HAL改為Framework。這種單顯示模組方式在某些平臺上也能達到該方案的效果，即，雖然修改了HAL的顯示邏輯(即HAL不再進行顯示)，但是在例如MTK、高通、三星Exynos的平臺上也是可以運行的。

在具體實施時，還可以採用創建新的顯示模組，並將創建的顯示模組設置為Framework的顯示模組的方式為Framework層設置顯示模組。在具體實施時，可以通過在安卓系統的應用層調用UI(User Interface，使用者介面)介面創建新的SurfaceTexture。採用在Framework新增顯示模組的雙顯示模組方式，能夠避免對HAL的顯示邏輯進行修改，能夠更好的跨平臺。

在本申請實施例的另一具體實施方式中，在觸發框架Framework接收硬體適配層HAL採集的圖像之前，還可以包括：獲取相機應用的圖像預覽模式，該圖像預覽模式包括處理模式和非處理模式。

在具體實施時，相機應用的圖像預覽模式可以是由使用者設置的，也可以是由相機應用默認設置的，本申請對此不作限制。在具體實施時，處理模式可以是要求相機提供處理後的圖像供使用者預覽，非處理模式可以是要求相機提供原始的HAL層採集的圖像供使用者預覽。透過圖像預覽模式的設置可以向使用者提供更多種的預覽模式，提升使用者體驗。

在本申請實施例的另一具體實施方式中，在採用在Framework新增顯示模組的雙顯示模組方式時，為了避免HAL的顯示模組與Framework顯示模組之間的影響，可以在圖像預覽模式為處理模式時，隱藏HAL的顯示模組；同時，將處理後的圖像輸出至Framework的顯示模組進行顯示。

在具體實施時，可以通過設置HAL的顯示模組的參數來實現隱藏HAL的顯示模組，例如，將HAL的顯示模組的透明度設置為100%，或者，還可以採用將HAL的顯示模組的尺寸設置為非常小的方式，例如1x1像素；還可以採用將HAL的顯示模組放置到顯示幕幕中的使用者可視區域之外的方式，例如，將HAL的顯示模組設置在可視區域之外的某一個固定位置上，例如，在可視區域右上角離頁面頂端(0，-9999)。

在具體實施時，還可以透過對Framework的顯示模組的參數進行設置來隱藏HAL的顯示模組，例如，將Framework的顯示模組的位置設置於HAL的顯示模組之上，同時將Framework的顯示模組的透明度設置為0%。由於未對HAL的顯示模組的代碼進行修改，並且未修改HAL的運行邏輯，即沒有通過設置某些參數來影響HAL的運行邏輯；因此不依賴於HAL，所以跨平臺能力大大增強。

在本申請實施例的另一具體實施方式中，在採用在Framework新增顯示模組的雙顯示模組方式時，為了避免HAL的顯示模組與Framework顯示模組之間的影響，可以在圖像預覽模式為非處理模式時，隱藏Framework的顯示模組；並將HAL採集的圖像輸出至HAL的顯示模組進行顯示。

在具體實施時，可以採用多種方式來隱藏Framework的顯示模組，例如，將Framework的顯示模組的透明度設置為100%，或者，將HAL的顯示模組的位置設置於Framework的顯示模組之上，且HAL的顯示模組的透明度設置為0%；還可以採用將Framework的顯示模組的尺寸設置為非常小的方式，例如1x1像素；還可以採用將Framework的顯示模組放置到顯示幕幕中的使用者可視區域之外的方式，例如，將Framework的顯示模組的設置在可視區域之外的某一個固定位置上，例如，在可視區域右上角離頁面頂端(0，-9999)。

在本申請實施例的一種具體實施方式中，在HAL採集的圖像中包括人臉時；處理後的圖像可以為美顏後的圖像；對圖像進行處理可以具體包括：識別HAL採集的圖像中的人臉；對人臉進行美顏處理。

另外，與相關技術中在相機應用APK層實現圖像預覽相比，將預覽圖像傳輸到APK需要進行一次跨進程傳輸和至少一次JNI(JavaNativeInterface,JAVA本地調用)拷貝，耗時較長，影響用戶體驗。

而採用本申請實施例中的相機應用的圖像預覽方法，結合Framework層不需要待預覽圖像的跨進程傳輸和JNI拷貝，比在APK實現的流暢性要好，用時也較短，提升了用戶體驗。

下面將以具體的應用實例為例，對本申請實施例中的圖像預覽方法的流程進行說明。

實施例二

圖3為本申請實施例二所示的相機應用的圖像預覽方法的流程圖。

在本申請實施例二中，採用將HAL的顯示模組設置為Framework的顯示模組的單顯示模組的方式。

如圖3所示，根據本申請實施例二所示的相機應用的圖像預覽方法包括以下步驟：S301，接收使用者選擇的圖像預覽模式；S302，HAL採集圖像後，將圖像輸出至Framework層；S303，如果使用者選擇的圖像預覽模式為非處理模式，則執行步驟S304-S305；如果為“美顏”處理模式，則執行步驟S306-S307；S304，在Framework層對圖像做透傳處理，即，不對圖像進行處理，直接輸出輸入的圖像；S305，將透傳處理的圖像輸出至Framework層的顯示模組進行顯示。至此，非處理模式的圖像預覽結束。

在執行步驟S305之後，使用者看到的是Framework 層的顯示模組顯示的未處理圖像。

S306，結合Framework層對圖像做美顏處理；S307，將美顏處理後的圖像輸出至Framework層的顯示模組進行顯示。至此，處理模式的圖像預覽結束。在執行步驟S307之後，使用者看到的是Framework層的顯示模組中顯示的經美顏處理後的圖像。

實施例三

圖4為本申請實施例三所示的相機應用的圖像預覽方法的流程圖。

在本申請實施例三中，採用為Framework創建新的顯示模組的雙顯示模組的方式。

如圖4所示，根據本申請實施例三所示的相機應用的圖像預覽方法包括以下步驟：S401，接收使用者選擇的圖像預覽模式；S402，HAL採集圖像後，將圖像輸出至HAL的顯示模組和Framework層；S403，如果使用者選擇的圖像預覽模式為非處理模式，則執行步驟S404和S405；如果為“美顏”處理模式，則執行步驟S406和S407；S404，在Framework層對圖像進行透傳處理，即，不對圖像進行處理，直接輸出輸入的圖像，並將透傳後的圖像輸出至Framework層的顯示模組；S405，觸發隱藏Framework的顯示模組。至此，非處理模式的圖像預覽結束。

在執行步驟S405之後，使用者看到的是HAL的顯示模組中顯示的未處理圖像。

在具體實施時，步驟S404和S405之間並沒有嚴格的時間順序，可以先執行S404，再執行S405；也可以先執行S405，再執行S404。

S406，結合Framework層對圖像進行美顏處理，並將美顏後的圖像輸出至Framework層的顯示模組；S407，觸發隱藏HAL的顯示模組。至此，處理模式的圖像預覽結束。

在執行步驟S407之後，使用者看到的是Framework層的顯示模組中顯示的經美顏處理後的圖像。

在具體實施時，步驟S406和S407之間並沒有嚴格的時間順序，可以先執行S406，再執行S407；也可以先執行S406，再執行S407。

由於顯示模組，如安卓系統中的SurfaceTextue，是作業系統提供的標準元件，所以對顯示模組的創建、隱藏、顯示等均不依賴於平臺，因此提高了本申請實施例的跨平臺能力。

基於同一發明構思，本申請實施例中還提供了一種相機應用的圖像預覽裝置，由於該裝置解決問題的原理與本申請實施例所提供的方法相似，因此該裝置的實施可以參見方法的實施，重複之處不再贅述。

實施例四

圖5為本申請實施例四所示相機應用的圖像預覽裝置的結構示意圖。

如圖5所示，根據本申請實施例四所示的相機應用的圖像預覽裝置500，包括：觸發模組501，用於觸發框架Framework接收硬體適配層HAL採集的圖像；影像處理模組502，用於對圖像進行處理，得到處理後的圖像；第一輸出模組503，用於將處理後的圖像輸出至Framework層對應的顯示模組以進行顯示。

較佳地，根據本申請實施例二所示的相機應用的圖像預覽裝置還包括：設置模組，用於為Framework設置顯示模組。

可選地，創建模組具體用於將HAL的SurfaceTexture設置為Framework的SurfaceTexture。

較佳地，創建模組具體用於將HAL的顯示模組設置為Framework的顯示模組。

較佳地，設置模組具體用於將HAL的顯示模組的控制碼使用者修改為Framework。

較佳地，設置模組具體包括：創建子模組，用於創建顯示模組；設置子模組，用於將創建的顯示模組設置為 Framework的顯示模組。

較佳地，根據本申請實施例二所示的相機應用的圖像預覽裝置還包括：模式獲取模組，用於獲取相機應用的圖像預覽模式，圖像預覽模式包括處理模式和非處理模式。

較佳地，圖像預覽模式為處理模式時，根據本申請實施例二所示的相機應用的圖像預覽裝置還包括：第一隱藏模組，用於隱藏HAL的顯示模組。

較佳地，圖像預覽模式為非處理模式時，根據本申請實施例二所示的相機應用的圖像預覽裝置還包括：第二隱藏模組，用於隱藏Framework的顯示模組。

較佳地，所述裝置還包括：第二輸出模組，用於將HAL採集的圖像輸出至HAL對應的顯示模組以進行顯示。

較佳地，HAL採集的圖像中包括人臉；處理後的圖像為美顏後的圖像；影像處理模組具體包括：識別子模組，用於識別HAL採集的圖像中的人臉；美顏子模組，用於對人臉進行美顏處理。

採用本申請實施例中的相機應用的圖像預覽裝置，能夠結合Framework層實現人臉的美顏預覽，由於Framework是系統自帶框架，不依賴於平臺，因此能夠跨平臺、跨手機使用，提升了相容性。

基於同一發明構思，本申請實施例中還提供了一種相機應用系統，由於該系統解決問題的原理與本申請實施例所提供的方法相似，因此該系統的實施可以參見方法的實施，重複之處不再贅述。

實施例五

圖6為本申請實施例五所示相機應用系統的結構示意圖。

如圖6所示，根據本申請實施例五所示的相機應用系統600，包括：相機應用的圖像預覽裝置500。

採用本申請實施例中的相機應用系統，能夠在Framework實現人臉的美顏預覽，由於Framework是系統自帶框架，不依賴於平臺，因此能夠跨平臺、跨手機使用，提升了相容性。

本領域內的技術人員應明白，本申請的實施例可提供為方法、系統、或電腦程式產品。因此，本申請可採用完全硬體實施例、完全軟體實施例、或結合軟體和硬體方面的實施例的形式。而且，本申請可採用在一個或多個其中包含有電腦可用程式碼的電腦可用儲存媒體(包括但不限於磁碟記憶體、CD-ROM、光學記憶體等)上實施的電腦程式產品的形式。

本申請是參照根據本申請實施例的方法、設備(系統)、和電腦程式產品的流程圖和/或方框圖來描述的。應理解可由電腦程式指令實現流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結合。可提供這些電腦程式指令到通用電腦、專用電腦、嵌入式處理機或其他可程式設計資料處理設備的處理器以產生一個機器，使得透過電腦或其他可程式設計資料處理設備的處理器執行的指令產生用於實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的裝置。

這些電腦程式指令也可儲存在能引導電腦或其他可程式設計資料處理設備以特定方式工作的電腦可讀記憶體中，使得儲存在該電腦可讀記憶體中的指令產生包括指令裝置的製造品，該指令裝置實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能。

這些電腦程式指令也可裝載到電腦或其他可程式設計資料處理設備上，使得在電腦或其他可程式設計設備上執行一系列操作步驟以產生電腦實現的處理，從而在電腦或其他可程式設計設備上執行的指令提供用於實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的步驟。

儘管已描述了本申請的較佳實施例，但本領域內的技術人員一旦得知了基本創造性概念，則可對這些實施例作出另外的變更和修改。所以，所附申請專利範圍意欲解釋為包括較佳實施例以及落入本申請範圍的所有變更和修改。

顯然，本領域的技術人員可以對本申請進行各種改動和變型而不脫離本申請的精神和範圍。這樣，倘若本申請的這些修改和變型屬於本申請專利範圍及其等同技術的範圍之內，則本申請也意圖包含這些改動和變型在內。

Claims

一種相機應用的圖像預覽方法，其特徵在於，包括：觸發框架Framework接收硬體適配層HAL採集的圖像；對該圖像進行處理，得到處理後的圖像；將處理後的圖像輸出至該Framework層對應的顯示模組以進行顯示，其中，在觸發框架Framework接收硬體適配層HAL採集的圖像之前，還包括：獲取該相機應用的圖像預覽模式，該圖像預覽模式包括處理模式和非處理模式，其中，該圖像預覽模式為處理模式時，該方法還包括：隱藏該HAL的顯示模組。
根據申請專利範圍第1項所述的方法，其中，在將處理後的圖像輸出至該Framework層的顯示模組以進行顯示之前，還包括：為該Framework設置顯示模組。
根據申請專利範圍第2項所述的方法，其中，為該Framework設置顯示模組，具體包括：將該HAL的顯示模組設置為該Framework的顯示模組。
根據申請專利範圍第3項所述的方法，其中，將該 HAL的顯示模組設置為該Framework的顯示模組，具體包括：將該HAL的顯示模組的控制碼使用者修改為Framework。
根據申請專利範圍第2項所述的方法，其中，為該Framework設置顯示模組具體包括：創建顯示模組；將創建的該顯示模組設置為該Framework的顯示模組。
根據申請專利範圍第1項所述的方法，其中，該圖像預覽模式為非處理模式時，該方法還包括：隱藏該Framework的顯示模組。
根據申請專利範圍第6項所述的方法，其中，該方法還包括：將該HAL採集的圖像輸出至該HAL對應的顯示模組以進行顯示。
根據申請專利範圍第1項所述的方法，其中，該HAL採集的圖像中包括人臉；該處理後的圖像為美顏後的圖像；對該圖像進行處理具體包括：識別該HAL採集的圖像中的人臉；對該人臉進行美顏處理。
一種相機應用的圖像預覽裝置，其特徵在於，包括：觸發模組，用於觸發框架Framework接收HAL採集的圖像；影像處理模組，用於對該圖像進行處理，得到處理後的圖像；第一輸出模組，用於將處理後的圖像輸出至該Framework層對應的顯示模組以進行顯示，其中，還包括：模式獲取模組，用於獲取該相機應用的圖像預覽模式，該圖像預覽模式包括處理模式和非處理模式，其中，該圖像預覽模式為處理模式時，該裝置還包括：第一隱藏模組，用於隱藏該HAL的顯示模組。
根據申請專利範圍第9項所述的裝置，其中，還包括：設置模組，用於為該Framework設置顯示模組。
根據申請專利範圍第10項所述的裝置，其中，該設置模組具體用於將該HAL的顯示模組設置為該Framework的顯示模組。
根據申請專利範圍第11項所述的裝置，其中，該設置模組具體用於將該HAL的顯示模組的控制碼使用者修改為Framework。
根據申請專利範圍第10項所述的裝置，其中，該設置模組具體包括：創建子模組，用於創建顯示模組；設置子模組，用於將創建的該顯示模組設置為該 Framework的顯示模組。
根據申請專利範圍第9項所述的裝置，其中，該圖像預覽模式為非處理模式時，該裝置還包括：第二隱藏模組，用於隱藏該Framework的顯示模組。
根據申請專利範圍第14項所述的裝置，其中，該裝置還包括：第二輸出模組，用於將該HAL採集的圖像輸出至該HAL對應的顯示模組以進行顯示。
根據申請專利範圍第9項所述的裝置，其中，該HAL採集的圖像中包括人臉；該處理後的圖像為美顏後的圖像；該影像處理模組具體包括：識別子模組，用於識別該HAL採集的圖像中的人臉；美顏子模組，用於對該人臉進行美顏處理。
一種相機應用系統，其特徵在於，包括：如申請專利範圍第9至16項中任一項所述的相機應用的圖像預覽裝置。