TWI828298B

TWI828298B - 拍攝方法、拍攝裝置、電子設備和可讀存儲介質

Info

Publication number: TWI828298B
Application number: TW111133148A
Authority: TW
Inventors: 許昱超
Original assignee: 英屬維爾京群島商威爾德嘉德有限公司
Priority date: 2022-09-01
Filing date: 2022-09-01
Publication date: 2024-01-01
Also published as: TW202412502A

Abstract

本發明公開了一種拍攝方法、拍攝裝置、電子設備和可讀存儲介質，屬於攝像技術領域。該拍攝方法包括：在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；將該第二中繼資料存儲在該中繼資料資源池中；根據該第二中繼資料，生成目標圖像。

Description

拍攝方法、拍攝裝置、電子設備和可讀存儲介質

本發明屬於攝像技術領域，具體是關於一種拍攝方法、拍攝裝置、電子設備和可讀存儲介質。

目前，在電子設備使用者使用相機拍攝的過程中，為了使拍照流程順暢，一般會在預覽階段將最新的幾幀原始圖像資料以及相機參數相關的中繼資料（Metadata）進行保存，當用戶按下拍照時，在不需要更新曝光參數的情況下，演算法可以直接拿取這些剛保存下來的資料進行拍攝的處理。由於原始圖像資料以及相機參數相關的中繼資料是一一對應的關係，因此會將請求物件（預覽請求、拍照請求等）與Metadata進行綁定。

本發明實施例的目的是提供一種拍攝方法、拍攝裝置、電子設備和可讀存儲介質，能夠解決相關技術中將預覽請求、拍照請求等直接與中繼資料進行互相綁定而導致的物件生命週期縮短、不利於管控的問題。

第一方面，本發明實施例提供了一種拍攝方法，該方法包括：在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；將該第二中繼資料存儲在該中繼資料資源池中；根據該第二中繼資料，生成目標圖像。

第二方面，本發明實施例提供了一種拍攝裝置，該裝置包括：第一存儲模組，用於在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；資料獲取模組，用於向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；第二存儲模組，用於將該第二中繼資料存儲在該中繼資料資源池中；生成模組，用於根據該第二中繼資料，生成目標圖像。

第三方面，本發明實施例提供了一種電子設備，該電子設備包括處理器和記憶體，該記憶體存儲可在該處理器上運行的程式或指令，該程式或指令被該處理器執行時實現如第一方面所述的方法的步驟。

第四方面，本發明實施例提供了一種可讀存儲介質，該可讀存儲介質上存儲程式或指令，該程式或指令被處理器執行時實現如第一方面所述的方法的步驟。

第五方面，本發明實施例提供了一種晶片，該晶片包括處理器和通信介面，該通信介面和該處理器耦合，該處理器用於運行程式或指令，實現如第一方面所述的方法。

第六方面，本發明實施例提供一種電腦程式產品，該程式產品被存儲在存儲介質中，該程式產品被至少一個處理器執行以實現如第一方面所述的方法。

在本發明實施例中，通過將中繼資料存儲在中繼資料資源池中，無論是預覽階段還是拍攝階段，均可從中繼資料資源池中獲取相應中繼資料，從而無需預覽請求、拍照請求與中繼資料之間的綁定，解耦了不同層級和不同流程之間控制中繼資料的行為，提高了中繼資料的管控效率；此外，在後續新增需要使用中繼資料的模組的情況下，也無需將相關請求物件傳遞至該新增模組，只需賦予該新增模組可獲取中繼資料資源池中的中繼資料的能力即可，由此可以有效降低維護成本及開發成本。

為下面將結合本發明實施例中的附圖，對本發明實施例中的技術方案進行清楚地描述，顯然，所描述的實施例是本發明一部分實施例，而不是全部的實施例。基於本發明中的實施例，本領域普通技術人員獲得的所有其他實施例，都屬於本發明保護的範圍。

本發明的說明書和申請專利範圍中的術語「第一」、「第二」等是用於區別類似的物件，而不用於描述特定的順序或先後次序。應該理解這樣使用的資料在適當情況下可以互換，以便本發明的實施例能夠以除了在這裡圖示或描述的那些以外的順序實施，且「第一」、「第二」等所區分的對象通常為一類，並不限定物件的個數，例如第一物件可以是一個，也可以是多個。此外，說明書以及申請專利範圍中「和/或」表示所連線物件的至少其中之一，字元「/」，一般表示前後關聯物件是一種「或」的關係。

下面結合附圖，通過具體的實施例及其應用場景對本發明實施例提供的拍攝方法、拍攝裝置、電子設備和可讀存儲介質進行詳細地說明。

目前，在使用相機拍攝的過程中，為了使拍照流程順暢，一般會在預覽階段將最新的幾幀RAW Buffer（原始圖像資料）中的像素資料以及中繼資料進行保存，其中，中繼資料是相機框架中，從APP（應用程式）層級，Framework（框架）層級，到Native（原生方法）層級之間用於交流各式相機相關參數的一個資料結構體，當使用者按下拍照時，在不需要更新曝光參數的情況下，系統演算法可以直接拿取這些剛保存下來的資料進行拍攝的處理，以生成拍攝圖像。

由於原始圖像資料中的像素資料與中繼資料是一一對應的關係，常規的方案是將請求與中繼資料進行綁定。具體來說，在預覽階段，預覽請求會將RAW Buffer中的像素資料以及中繼資料保存在緩存佇列之中。當拍照請求發生時，可以分成兩種狀況：一種是演算法不需要更新曝光參數，此時拍照請求可以直接從緩存佇列獲取所需的RAW Buffer中的像素資料以及中繼資料來使用，另一種是系演算法需要更新曝光參數，此時拍照請求的中繼資料要更新給下一幀預覽請求，方能控制此次圖像感測器輸出的像素資料，進而得到預期的結果。對於第一種方案，由於中繼資料是綁定在請求物件上，因此當需要獲取中繼資料時，就從對應的請求物件獲取中繼資料物件，又或者直接傳遞該中繼資料物件。

示例性地，當發生一個演算法需要更新曝光參數的拍照請求時，首先，將拍攝應用程式中拍照請求物件的中繼資料傳遞給預覽請求，之後從緩存佇列獲取更新的中繼資料，放回拍照請求中，最後回傳給拍攝應用程式。然而，由於需要使用中繼資料的地方繁多，將請求/中繼資料物件傳遞到各處流程繁瑣，耗時長，不方便傳遞，並且若後續新增模組也需要獲取中繼資料，則又需要將該物件傳遞給該新增模組，這將會影響物件的生命週期，不利於管控。

由此，請參考圖1，圖1為本發明實施例提供的一種拍攝方法的流程示意圖。如圖1所示，本發明實施例中的拍攝方法可以應用於電子設備，該拍攝方法包括以下步驟：步驟101：在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；其中，拍照請求的產生可以是電子設備回應於使用者的拍攝輸入的結果，用戶的拍攝輸入可以為在拍攝應用程式上對拍攝控制項的輸入，也可以是對電子設備的預設按鍵的輸入。

本實施例中，可選地，所謂中繼資料，即Metadata，可以是相機框架中，從APP層級，Framework層級，到Native層級之間用於交流各式相機相關參數的一個資料結構體。

本實施例中，通過根據拍照請求生成第一中繼資料，並將第一中繼資料存儲在中繼資料資源池中，由中繼資料資源池對相關中繼資料進行存儲管控，可以實現拍照請求與中繼資料之間的解綁，方便了中繼資料的管控，提升了拍照效率。

本實施例中，在電子設備為回應於拍照請求而得到拍攝圖像時，會通過系統演算法確定所需的圖像的數量以及每一張圖像對應的拍攝控制參數，如曝光參數等，繼而獲取到相應的圖像後，對圖像進行融合處理、降噪處理等，最終得到所需的拍攝圖像。

其中，根據拍照請求生成第一中繼資料時，可以根據電子設備的拍攝環境參數和拍攝模式等確定相應的拍攝控制參數，例如光圈、快門速度、感光度等等。拍攝控制參數用於控制圖像感測器按照相應的參數進行拍攝，繼而得到所需的原始圖像資料。

步驟102：向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係。

本發明實施例中，可選地，為向系統演算法提供生成拍攝圖像所需要的素材，需要通過預覽請求來獲取這些素材。也就是說，通過向圖像感測器發送預覽請求的方式，使得圖像感測器根據預覽請求拍攝得到相應的素材，繼而回饋給系統演算法。

其中，可選地，系統演算法確定出生成拍攝圖像所需的圖像的數量以及每一張圖像對應的拍攝控制參數之後，會進一步生成預覽請求，每一個預覽請求用於獲取一張圖像，每一個預覽請求中攜帶有拍攝該張圖像的拍攝控制參數。例如，當拍攝圖像需要融合多張不同亮度下的圖像才能得到時，將生成多個預覽請求，每一預覽請求用於拍攝一張特定亮度的圖像。

本實施例中，預覽請求所需的相關拍攝控制參數可以從中繼資料資源池中獲取，即獲取中繼資料資源池中的第一中繼資料，繼而得到相應的拍攝控制參數。由此，預覽請求無需從拍照請求處獲取相關中繼資料，而是可直接從中繼資料資源池中獲取，實現了預覽請求與中繼資料之間的解綁。

本發明實施例中，圖像感測器初始輸出的為原始圖像資料，即圖像感應器將捕捉到的光源信號轉化為數位信號後得到的原始資料，而第二中繼資料則與原始圖像資料具有關聯關係，如第二中繼資料中包含原始圖像資料以及圖像感測器對應的3A（自動對焦、自動曝光、自動白平衡）參數等。

步驟103：將該第二中繼資料存儲在該中繼資料資源池中；在獲取了原始圖像資料以及第二中繼資料之後，該第二中繼資料同樣將被存儲在中繼資料資源池中，以方便後續各項流程可以直接從中繼資料資源池中獲取原始圖像資料和第二中繼資料。

步驟104：根據該第二中繼資料，生成目標圖像。

本實施例中，目標圖像可以是預覽圖像，也可以是拍攝得到的圖像（即拍攝圖像），或者兩者同時生成，第二中繼資料可以被預覽演算法使用，用於處理預覽圖像，也可以是後續被拍照請求使用，用於處理拍攝圖像。在需要生成預覽圖像以及拍攝圖像時，即需要採用系統演算法對原始圖像資料進行處理繼而得到預覽圖像以及拍攝圖像時，可以直接從中繼資料資源池中獲取第二中繼資料，即得到相應的原始圖像資料，繼而根據第二中繼資料生成目標圖像，方便了資料之間的傳遞，提升了拍攝效率。

由此，在本發明實施例中，通過將中繼資料存儲在中繼資料資源池中，無論是預覽階段還是拍攝階段，均可從中繼資料資源池中獲取相應中繼資料，從而無需預覽請求、拍照請求與中繼資料之間的綁定，解耦了不同層級和不同流程之間控制中繼資料的行為，提高了中繼資料的管控效率；此外，在後續新增需要使用中繼資料的模組的情況下，也無需將相關請求物件傳遞至該新增模組，只需賦予該新增模組可獲取中繼資料資源池中的中繼資料的能力即可，由此可以有效降低維護成本及開發成本。

請參考圖2，圖2為本發明實施例提供的一種中繼資料資源池的示意圖。如圖2所示，中繼資料資源池中的中繼資料可以按照相機編號、請求編號等進行存儲，從而，在需要使用中繼資料資源池中的中繼資料時，通過填入相機編號以及請求編號即可從中繼資料資源池中取出相應的中繼資料，由此可以免除綁定中繼資料的動作，達到解耦的目的。具體來說，如圖2中，電子設備具有兩個相機，分別為相機1和相機2，相機1對應有請求1、請求2……請求K等，相機2也對應有請求1、請求2……請求K等，在需要利用相機進行預覽圖像時，在中繼資料資源池中存儲邏輯/實體相機中繼資料，即相機拍攝參數的相關資料，並通過相機編號以及請求編號進行標記，分類存儲；APP發出預覽請求，該預覽請求對應有APP控制預覽中繼資料，該APP控制預覽中繼資料可以從中繼資料資源池中進行獲取；並且，圖像感測器根據預覽請求得到的中繼資料也會存儲在中繼資料資源池中，而預覽流輸出中繼資料可以從中繼資料資源池中獲取，以得到預覽圖像。在需要利用相機進行拍攝圖像時，確定拍照中繼資料，並將拍照中繼資料存儲在中繼資料資源池中，該拍照中繼資料即包含相機拍攝參數的相關資料，APP發出拍照請求，該拍照請求對應有APP控制拍照中繼資料，該APP控制拍照中繼資料可以從中繼資料資源池中獲取，而拍照輸出中繼資料也可以從中繼資料資源池中獲取，以得到拍攝圖像。

請參考圖3，圖3為本發明實施例提供的與中繼資料資源池進行交互的示意圖。如圖3所示，獲取中繼資料的過程都是通過中繼資料資源池實現的，無需通過請求（預覽請求或是拍照請求）。其中，拍照請求可以將APP下發的拍攝控制參數以中繼資料的形式存儲在中繼資料資源池中；預覽請求可以從中繼資料資源池中獲取該次拍照所需的參數，預覽請求發送給圖像感測器之後，圖像感測器依據預覽請求中的拍攝控制參數進行拍照，輸出參數，即輸出原始圖像資料，圖像感測器輸出的資料也將以中繼資料的形式存儲在中繼資料資源池中；緩存佇列可以從中繼資料資源池中獲取圖像感測器輸出參數，以便後續在系統演算法需要生成拍攝圖像時可以從緩存佇列中獲取相應圖像資料；最終，從中繼資料資源池中取出預覽輸出參數，將其返回APP，即可得到預覽圖像，而從中繼資料資源池中取出拍照輸出參數，將其返回APP，即可得到拍攝圖像。

本發明的一些實施例中，該中繼資料資源池包括與該拍照請求對應的第一輸入設置資料欄，以及與該預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄；該將該第一中繼資料存儲在中繼資料資源池中包括：將該第一中繼資料存儲在該中繼資料資源池的第一輸入設置資料欄中；該將該第二中繼資料存儲在該中繼資料資源池中包括：將該第二中繼資料存儲在該中繼資料資源池的第二輸出結果資料欄以及圖像感測器輸出資料欄中。

本實施例中，中繼資料資源池劃分了多個資料欄，以對應保存相應類型的中繼資料，從而方便存取。其中，中繼資料資源池包括與拍照請求對應的第一輸入設置資料欄，該第一輸入設置資料欄用於保存與拍照請求對應的第一中繼資料，第一中繼資料即包含與該拍照請求對應的拍攝控制參數。中繼資料資源池還包括與預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄，圖像感測器根據預覽請求獲取了原始圖像資料以及第二中繼資料之後，即可將第二中繼資料保存在第二輸出結果資料欄以及圖像感測器輸出資料欄。

本發明的另一些實施例中，該中繼資料資源池還包括與該預覽請求對應的第二輸入設置資料欄；該向圖像感測器發送預覽請求之前，該方法還包括：從該第一輸入設置資料欄中獲取該第一中繼資料；根據該第一中繼資料更新該第二輸入設置資料域中的中繼資料，以及根據更新後的該第二輸入設置資料域中的中繼資料生成預覽請求。

本實施例中，由於第一輸入設置資料欄中存儲了本次拍照請求相關的拍攝控制參數，即第一中繼資料，則可以根據該第一中繼資料確定預覽請求中所需攜帶的拍攝控制參數。其中，中繼資料資源池還包括與預覽請求對應的第二輸入設置資料欄，該第二輸入設置資料欄即用於存儲本次預覽請求相關的拍攝控制參數。因此，在向圖像感測器發送預覽請求之前，應先從中繼資料資源池的第一輸入設置資料欄中獲取第一中繼資料，然後利用該第一中繼資料更新第二輸入設置資料域中的中繼資料，然後再從第二輸入設置資料欄中取出更新後的中繼資料，並生成相應的預覽請求，則該預覽請求中即可攜帶最新的拍攝控制參數。

本發明的一些實施例中，該根據該第二中繼資料，生成預覽圖像以及拍攝圖像包括：對該第二輸出結果資料域中的中繼資料進行圖像處理，得到第三中繼資料；基於該第三中繼資料生成預覽圖像；其中，該圖像處理的次數為至少一次，每對該第二輸出結果資料域中的第二中繼資料進行一次圖像處理，則更新該第二輸出結果資料域中的第二中繼資料。

本實施例中，在生成預覽圖像時，由於第二輸出結果資料欄中已經存儲了根據圖像感測器拍攝到的原始圖像資料得到的第二中繼資料，則可以從第二輸出結果資料欄中取出第二中繼資料，並對其進行圖像處理，得到第三中繼資料，基於第三中繼資料即可生成預覽圖像，將第三中繼資料發送給拍攝應用程式，即可顯示最終的預覽圖像，例如拍攝應用程式可將預覽圖像顯示在預覽介面中。其中，對第二輸出結果資料域中的中繼資料進行圖像處理的次數可以為一次，也可以為多次，具體可以根據實際成像需求和成像演算法確定。在每次對從第二輸出結果資料欄中取出的中繼資料進行一次圖像處理後，將利用本次圖像處理後得到的中繼資料更新第二輸出結果資料域中的中繼資料。也就是說，若從第二輸出結果資料欄中取出了第二中繼資料，對其進行了一次圖像處理，並得到了一個新的中繼資料，則會將該新的中繼資料更新第二輸出結果資料域中的資料，從而需要進行下一次圖像處理時，從第二輸出結果資料欄中取出的將是上一次圖像處理得到的結果。由此，可以利用中繼資料資源池作為中繼資料存儲、管控的中心，方便中間結果中繼資料的存取。

其中，可選地，可以先對第二中繼資料進行一次YUV預覽處理，之後，對YUV預覽處理後得到的資料結果再進行Y2Y處理，如重新切割圖像大小等，最終得到第三中繼資料。

本發明的另一些實施例中，該中繼資料資源池還包括與該拍照請求對應的第一輸出結果資料欄；該根據該第二中繼資料，生成預覽圖像以及拍攝圖像包括：從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料；對該第一輸出結果資料域中的中繼資料進行圖像處理，得到第四中繼資料；基於該第四中繼資料生成拍攝圖像；其中，該圖像處理的次數為至少一次，每對該第一輸出結果資料域中的中繼資料進行一次圖像處理，則更新該第一輸出結果資料域中的中繼資料。

本實施例中，在生成拍攝圖像時，由於第二輸出結果資料欄中已經存儲了根據圖像感測器拍攝到的原始圖像資料得到的第二中繼資料，則可以從第二輸出結果資料欄中取出第二中繼資料，並將其存儲在中繼資料資源池中的第一輸出結果資料欄中，該第一輸出結果資料欄為與拍照請求相對應。之後，可以從第一輸出結果資料欄中取出中繼資料，並對其進行圖像處理，得到第四中繼資料，則基於第四中繼資料，即可生成拍攝圖像，將第四中繼資料發送給拍攝應用程式，即可顯示最終的拍攝圖像，以呈現給使用者查看。其中，對第一輸出結果資料域中的中繼資料進行圖像處理的次數可以為一次，也可以為多次，具體可以根據實際成像需求和成像演算法確定。在每次對從第一輸出結果資料欄中取出的中繼資料進行一次圖像處理後，將利用本次圖像處理後得到的中繼資料更新第一輸出結果資料域中的中繼資料。也就是說，若從第一輸出結果資料欄中取出了第二中繼資料，對其進行了一次圖像處理，並得到了一個新的中繼資料，則會將該新的中繼資料更新第一輸出結果資料域中的中繼資料，從而需要進行下一次圖像處理時，從第一輸出結果資料欄中取出的將是上一次圖像處理得到的結果。由此，可以利用中繼資料資源池作為中繼資料存儲、管控的中心，方便中間結果中繼資料的存取。

其中，可選地，可以先對第二中繼資料進行一次R2Y處理，即將RAW圖像資料轉換為YUV域圖像，之後，對R2Y處理後得到的資料結果再進行YUV處理，如YUV域演算法，或轉換為JPEG格式等，最終得到第四中繼資料。

本發明實施例中，利用第一輸出結果資料欄保存拍照流程相關的中繼資料，利用第二輸出結果資料欄保存預覽流程相關的中繼資料，兩者之間互不衝突，也免去了中繼資料的綁定和依次傳遞過程，提升了資料處理效率。

本發明的另一些實施例中，該從該圖像感測器輸出資料欄中獲取該第二中繼資料，並將該第二中繼資料存儲在該第一輸出結果資料欄中包括：從該圖像感測器輸出資料欄中獲取該第二中繼資料並暫存在緩存佇列中；基於該緩存佇列中的第二中繼資料更新該第一輸出結果資料域中的中繼資料。

本實施例中，可以先將第二中繼資料從圖像感測器輸出資料欄中取出，並利用緩存佇列進行緩存，之後，再從緩存佇列中取出第二中繼資料並存儲在中繼資料資源池的第一輸出結果資料欄中。由此，在不需要更新拍攝控制參數時，可以直接從緩存佇列獲取需要的原始圖像資料來使用，以快速生成拍攝圖像。

請參考圖4和圖5，圖4為本發明實施例提供的拍攝流程和預覽流程的示意圖，圖5為本發明實施例提供的中繼資料轉移的示意圖。如圖4和圖5所示，本發明實施例中的拍攝方法包括以下步驟：步驟1：當拍照請求發生時，APP會將控制拍照的相關參數寫入中繼資料，並保存在中繼資料資源池的第一輸入結果資料欄中；步驟2：從中繼資料資源池取出拍照控制中繼資料進行更新；步驟3：將從中繼資料資源池取出的拍照控制中繼資料保存在中繼資料資源池的第二輸入結果資料欄中；步驟4：從第二輸入結果資料欄中取出預覽控制參數，通過預覽請求發送給圖像感測器；步驟5：圖像感測器根據預覽請求進行拍攝，得到原始圖像資料，之後保存圖像感測器輸出的中繼資料至中繼資料資源池的第二輸出結果資料欄和圖像感測器輸出資料欄中；步驟6：從第二輸出結果資料欄中取出圖像感測器中繼資料，並將圖像感測器中繼資料輸入至即時YUV處理模組；步驟7：輸出並保存YUV處理模組輸出的中繼資料至第二輸出結果資料欄；步驟8：從第二輸出結果資料欄中取出YUV處理模組輸出的中繼資料，並將YUV處理模組輸出的中繼資料輸入至Y2Y處理模組；步驟9：輸出並保存Y2Y處理模組輸出的中繼資料至第二輸出結果資料欄；步驟10：從第二輸出結果資料欄中取出Y2Y處理模組輸出的中繼資料，併發送給APP，最終得到預覽圖像；步驟11：從圖像感測器輸出資料欄中取出中繼資料並暫存在緩存佇列中，而後從緩存佇列中取出圖像感測器輸出的中繼資料，並將圖像感測器輸出參數更新到第一輸出結果資料欄中；步驟12：從第一輸出結果資料欄中取出圖像感測器輸出的中繼資料並輸入到RAW處理模組中；步驟13：RAW處理模組輸出的中繼資料並保存在第一輸出結果資料欄中；步驟14：從第一輸出結果資料欄中取出RAW處理模組輸出的中繼資料並輸入到RAW2YUV處理模組中；步驟15：RAW2YUV處理模組輸出中繼資料並保存在第一輸出結果資料欄中；步驟16：從第一輸出結果資料欄中取出RAW2YUV處理模組輸出的中繼資料並輸入到YUV處理模組中；步驟17：YUV處理模組輸出的中繼資料並保存在第一輸出結果資料欄中；步驟18：從第一輸出結果資料欄中取出YUV處理模組輸出的中繼資料並輸入到Y2J處理模組中；步驟19：Y2J處理模組輸出中繼資料並保存在第一輸出結果資料欄中；步驟20：從第一輸出結果資料欄中取出Y2J處理模組輸出的中繼資料併發送給APP，最終得到拍攝圖像。

可以看到，上述預覽流程、拍攝流程中的中繼資料均存儲在中繼資料資源池中，由中繼資料資源池統一保存管理，以供相關演算法處理使用。

本發明實施例提供的拍攝方法，執行主體可以為拍攝裝置。本發明實施例中以拍攝裝置執行拍攝方法為例，說明本發明實施例提供的拍攝裝置。

請參考圖6，圖6為本發明實施例提供的一種拍攝裝置的結構示意圖。如圖6所示，本發明實施例中的拍攝裝置600包括：第一存儲模組601，用於在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；資料獲取模組602，用於向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；第二存儲模組603，用於將該第二中繼資料存儲在該中繼資料資源池中；生成模組604，用於根據該第二中繼資料，生成目標圖像。

可選地，該中繼資料資源池包括與該拍照請求對應的第一輸入設置資料欄，以及與該預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄；該第一存儲模組包括：第一存儲單元，用於將該第一中繼資料存儲在該中繼資料資源池的第一輸入設置資料欄中；該第二存儲模組包括：第二存儲單元，用於將該第二中繼資料存儲在該中繼資料資源池的第二輸出結果資料欄以及圖像感測器輸出資料欄中。

可選地，該中繼資料資源池還包括與該預覽請求對應的第二輸入設置資料欄；該裝置還包括：獲取模組，用於從該第一輸入設置資料欄中獲取該第一中繼資料；預覽請求模組，用於根據該第一中繼資料更新該第二輸入設置資料域中的中繼資料，以及根據更新後的該第二輸入設置資料域中的中繼資料生成預覽請求。

可選地，該生成模組包括：第一圖像處理單元，用於對該第二輸出結果資料域中的第二中繼資料進行圖像處理，得到第三中繼資料；預覽圖像單元，用於基於該第三中繼資料生成預覽圖像；其中，該圖像處理的次數為至少一次，每對該第二輸出結果資料域中的第二中繼資料進行一次圖像處理，則更新該第二輸出結果資料域中的第二中繼資料。

可選地，該中繼資料資源池還包括與該拍照請求對應的第一輸出結果資料欄；該生成模組包括：第三存儲單元，用於從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料；第二圖像處理單元，用於對該第一輸出結果資料域中的中繼資料進行圖像處理，得到第四中繼資料；拍攝圖像單元，用於基於該第四中繼資料生成拍攝圖像；其中，該圖像處理的次數為至少一次，每對該第一輸出結果資料域中的中繼資料進行一次圖像處理，則更新該第一輸出結果資料域中的中繼資料。

可選地，該第三存儲單元包括：緩存佇列子單元，用於從該圖像感測器輸出資料欄中獲取該第二中繼資料並暫存在緩存佇列中；存儲子單元，用於基於該緩存佇列中的第二中繼資料更新該第一輸出結果資料域中的中繼資料。

本發明實施例中的拍攝裝置可以是電子設備，也可以是電子設備中的部件，例如積體電路或晶片。該電子設備可以是終端，也可以為除終端之外的其他設備。示例性的，電子設備可以為手機、平板電腦、筆記型電腦、掌上型電腦、車載電子設備、移動上網裝置（Mobile Internet Device，MID）、增強現實(augmented reality，AR)/虛擬實境(virtual reality，VR)設備、機器人、可穿戴設備、超級移動個人電腦（ultra-mobile personal computer，UMPC）、上網本或者個人數位助理（personal digital assistant，PDA）等，還可以為個人電腦（personal computer，PC）、電視機（television，TV）、櫃員機或者自助機等，本發明實施例不作具體限定。

本發明實施例中的拍攝裝置可以為具有作業系統的裝置。該作業系統可以為安卓（Android）作業系統，可以為iOS作業系統，還可以為其他可能的作業系統，本發明實施例不作具體限定。

本發明實施例提供的拍攝裝置能夠實現圖1至圖5的方法實施例實現的各個過程，實現相同的技術效果，為避免重複，這裡不再贅述。

可選地，如圖7所示，本發明實施例還提供一種電子設備700，包括處理器701和記憶體702，記憶體702上存儲有可在該處理器701上運行的程式或指令，該程式或指令被處理器701執行時實現上述拍攝方法實施例的各個步驟，且能達到相同的技術效果，為避免重複，這裡不再贅述。

圖8為實現本發明實施例的一種電子設備的硬體結構示意圖。

該電子設備800包括但不限於：射頻單元801、網路模組802、音訊輸出單元803、輸入單元804、感測器805、顯示單元806、使用者輸入單元807、介面單元808、記憶體809、以及處理器8010等部件。

本領域技術人員可以理解，電子設備800還可以包括給各個部件供電的電源（比如電池），電源可以通過電源管理系統與處理器8010邏輯相連，從而通過電源管理系統實現管理充電、放電、以及功耗管理等功能。圖8中示出的電子設備結構並不構成對電子設備的限定，電子設備可以包括比圖示更多或更少的部件，或者組合某些部件，或者不同的部件佈置，在此不再贅述。

其中，處理器8010，用於在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；記憶體809，用於將該第一中繼資料存儲在中繼資料資源池中；處理器8010，還用於向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；記憶體809，還用於將該第二中繼資料存儲在該中繼資料資源池中；處理器8010，還用於根據該第二中繼資料，生成目標圖像。在本發明實施例中，通過將中繼資料存儲在中繼資料資源池中，無論是預覽階段還是拍攝階段，均可從中繼資料資源池中獲取相應中繼資料，從而無需預覽請求、拍照請求與中繼資料之間的綁定，解耦了不同層級和不同流程之間控制中繼資料的行為，提高了中繼資料的管控效率；此外，在後續新增需要使用中繼資料的模組的情況下，也無需將相關請求物件傳遞至該新增模組，只需賦予該新增模組可獲取中繼資料資源池中的中繼資料的能力即可，由此可以有效降低維護成本及開發成本。

可選地，該中繼資料資源池包括與該拍照請求對應的第一輸入設置資料欄，以及與該預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄；該將該第一中繼資料存儲在中繼資料資源池中包括：將該第一中繼資料存儲在該中繼資料資源池的第一輸入設置資料欄中；該將該第二中繼資料存儲在該中繼資料資源池中包括：將該第二中繼資料存儲在該中繼資料資源池的第二輸出結果資料欄以及圖像感測器輸出資料欄中。

可選地，該中繼資料資源池還包括與該預覽請求對應的第二輸入設置資料欄；處理器8010，還用於從該第一輸入設置資料欄中獲取該第一中繼資料；根據該第一中繼資料更新該第二輸入設置資料域中的中繼資料，以及根據更新後的該第二輸入設置資料域中的中繼資料生成預覽請求。

可選地，處理器8010，還用於對該第二輸出結果資料域中的第二中繼資料進行圖像處理，得到第三中繼資料；基於該第三中繼資料生成預覽圖像；其中，該圖像處理的次數為至少一次，每對該第二輸出結果資料域中的第二中繼資料進行一次圖像處理，則更新該第二輸出結果資料域中的第二中繼資料。可選地，該中繼資料資源池還包括與該拍照請求對應的第一輸出結果資料欄；處理器8010，還用於從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料；對該第一輸出結果資料域中的中繼資料進行圖像處理，得到第四中繼資料；基於該第四中繼資料生成拍攝圖像；其中，該圖像處理的次數為至少一次，每對該第一輸出結果資料域中的中繼資料進行一次圖像處理，則更新該第一輸出結果資料域中的中繼資料。

可選地，處理器8010，還用於從該圖像感測器輸出資料欄中獲取該第二中繼資料並暫存在緩存佇列中；處理器8010，還用於基於該緩存佇列中的第二中繼資料更新該第一輸出結果資料域中的中繼資料。

應理解的是，本發明實施例中，輸入單元804可以包括圖形處理器（Graphics Processing Unit，GPU）8041和麥克風8042，圖形處理器8041對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置（如攝像頭）獲得的靜態圖片或視頻的圖像資料進行處理。顯示單元806可包括顯示面板8061，可以採用液晶顯示器、有機發光二極體等形式來配置顯示面板8061。使用者輸入單元807包括觸控面板8071以及其他輸入裝置8072中的至少一種。觸控面板8071，也稱為觸控式螢幕。觸控面板8071可包括觸摸檢測裝置和觸摸控制器兩個部分。其他輸入裝置8072可以包括但不限於實體鍵盤、功能鍵（比如音量控制按鍵、開關按鍵等）、軌跡球、滑鼠、操作桿，在此不再贅述。

記憶體809可用於存儲軟體程式以及各種資料，記憶體809可主要包括存儲程式或指令的第一存儲區和存儲資料的第二存儲區，其中，第一存儲區可存儲作業系統、至少一個功能所需的應用程式或指令（比如聲音播放功能、圖像播放功能等）等。此外，記憶體809可以包括易失性記憶體或非易失性記憶體，或者，記憶體809可以包括易失性和非易失性記憶體兩者。其中，非易失性記憶體可以是唯讀記憶體(Read-Only Memory，ROM)、可程式設計唯讀記憶體(Programmable ROM，PROM)、可擦除可程式設計唯讀記憶體(Erasable PROM，EPROM)、電可擦除可程式設計唯讀記憶體(Electrically EPROM，EEPROM)或快閃記憶體。易失性記憶體可以是隨機存取記憶體(Random Access Memory，RAM)，靜態隨機存取記憶體(Static RAM，SRAM)、動態隨機存取記憶體(Dynamic RAM，DRAM)、同步動態隨機存取記憶體(Synchronous DRAM，SDRAM)、雙倍數據速率同步動態隨機存取記憶體(Double Data Rate SDRAM，DDRSDRAM)、增強型同步動態隨機存取記憶體(Enhanced SDRAM，ESDRAM)、同步連接動態隨機存取記憶體(Synch link DRAM，SLDRAM)和直接記憶體匯流排隨機存取記憶體(Direct Rambus RAM，DRRAM)。本發明實施例中的記憶體809包括但不限於這些和任意其它適合類型的記憶體。

處理器8010可包括一個或多個處理單元；可選地，處理器8010集成應用處理器和調制解調處理器，其中，應用處理器主要處理涉及作業系統、使用者介面和應用程式等的操作，調制解調處理器主要處理無線通訊信號，如基帶處理器。可以理解的是，上述調制解調處理器也可以不集成到處理器8010中。

本發明實施例還提供一種可讀存儲介質，該可讀存儲介質上存儲有程式或指令，該程式或指令被處理器執行時實現上述拍攝方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

其中，該處理器為上述實施例中所述的電子設備中的處理器。該可讀存儲介質，包括電腦可讀存儲介質，如電腦唯讀記憶體、隨機存取記憶體、磁碟或者光碟等。

本發明實施例另提供了一種晶片，該晶片包括處理器和通信介面，該通信介面和該處理器耦合，該處理器用於運行程式或指令，實現上述拍攝方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

應理解，本發明實施例提到的晶片還可以稱為系統級晶片、系統晶片、晶片系統或片上系統晶片等。

本發明實施例提供一種電腦程式產品，該程式產品被存儲在存儲介質中，該程式產品被至少一個處理器執行以實現如上述拍攝方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

需要說明的是，在本文中，術語「包括」、「包含」或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素，而且還包括沒有明確列出的其他要素，或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下，由語句「包括一個……」限定的要素，並不排除在包括所述要素的過程、方法、物品或者裝置中還存在另外的相同要素。此外，需要指出的是，本發明實施方式中的方法和裝置的範圍不限按示出或討論的順序來執行功能，還可包括根據所涉及的功能按基本同時的方式或按相反的順序來執行功能，例如，可以按不同於所描述的次序來執行所描述的方法，並且還可以添加、省去、或組合各種步驟。另外，參照某些示例所描述的特徵可在其他示例中被組合。

通過以上的實施方式的描述，本領域的技術人員可以清楚地瞭解到上述實施例方法可借助軟體加必需的通用硬體平臺的方式來實現，當然也可以通過硬體，但很多情況下前者是更佳的實施方式。基於這樣的理解，本發明的技術方案本質上或者說對現有技術做出貢獻的部分可以以電腦軟體產品的形式體現出來，該電腦軟體產品存儲在一個存儲介質（如ROM/RAM、磁碟、光碟）中，包括若干指令用以使得一台終端（可以是手機，電腦，伺服器，或者網路設備等）執行本發明各個實施例所述的方法。

上面結合附圖對本發明的實施例進行了描述，但是本發明並不局限於上述的具體實施方式，上述的具體實施方式僅僅是示意性的，而不是限制性的，本領域的普通技術人員在本發明的啟示下，在不脫離本發明宗旨和申請專利範圍所保護的範圍情況下，還可做出很多形式，均屬於本發明的保護之內。

101~104、1~20:步驟 600:拍攝裝置 601:第一存儲模組 602:資料獲取模組 603:第二存儲模組 604:生成模組 700:電子設備 701:處理器 702:記憶體 800:電子設備 801:射頻單元 802:網路模組 803:音訊輸出單元 804:輸入單元 8041:圖形處理器 8042:麥克風 805:感測器 806:顯示單元 8061:顯示面板 807:使用者輸入單元 8071:觸控面板 8072:其他輸入裝置 808:介面單元 809:記憶體 8010:處理器

圖1為本發明實施例提供的一種拍攝方法的流程示意圖；圖2為本發明實施例提供的一種中繼資料資源池的示意圖；圖3為本發明實施例提供的與中繼資料資源池進行交互的示意圖；圖4為本發明實施例提供的拍攝流程和預覽流程的示意圖；圖5為本發明實施例提供的中繼資料轉移的示意圖；圖6為本發明實施例提供的一種拍攝裝置的結構示意圖；圖7為本發明實施例提供的一種電子設備的結構示意圖；圖8為實現本發明實施例的一種電子設備的硬體結構示意圖。

101~104:步驟

Claims

一種拍攝方法，其特徵在於，包括：在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；將該第二中繼資料存儲在該中繼資料資源池中；根據該第二中繼資料，生成目標圖像。
如請求項1所述的拍攝方法，其中，該中繼資料資源池包括與該拍照請求對應的第一輸入設置資料欄，以及與該預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄；該將該第一中繼資料存儲在中繼資料資源池中包括：將該第一中繼資料存儲在該中繼資料資源池的第一輸入設置資料欄中；該將該第二中繼資料存儲在該中繼資料資源池中包括：將該第二中繼資料存儲在該中繼資料資源池的第二輸出結果資料欄以及圖像感測器輸出資料欄中。
如請求項2所述的拍攝方法，其中，該中繼資料資源池還包括與該預覽請求對應的第二輸入設置資料欄；該向圖像感測器發送預覽請求之前，該方法還包括：從該第一輸入設置資料欄中獲取該第一中繼資料；根據該第一中繼資料更新該第二輸入設置資料域中的中繼資料，以及根據更新後的該第二輸入設置資料域中的中繼資料生成預覽請求。
如請求項2所述的拍攝方法，其中，該根據該第二中繼資料，生成目標圖像包括：對該第二輸出結果資料域中的第二中繼資料進行圖像處理，得到第三中繼資料；基於該第三中繼資料生成預覽圖像；其中，該圖像處理的次數為至少一次，每對該第二輸出結果資料域中的第二中繼資料進行一次圖像處理，則更新該第二輸出結果資料域中的第二中繼資料。
如請求項2所述的拍攝方法，其中，該中繼資料資源池還包括與該拍照請求對應的第一輸出結果資料欄；該根據該第二中繼資料，生成目標圖像包括：從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料；對該第一輸出結果資料域中的中繼資料進行圖像處理，得到第四中繼資料；基於該第四中繼資料生成拍攝圖像；其中，該圖像處理的次數為至少一次，每對該第一輸出結果資料域中的中繼資料進行一次圖像處理，則更新該第一輸出結果資料域中的中繼資料。
如請求項5所述的拍攝方法，其中，該從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料包括：從該圖像感測器輸出資料欄中獲取該第二中繼資料並暫存在緩存佇列中；基於該緩存佇列中的第二中繼資料更新該第一輸出結果資料域中的中繼資料。
一種拍攝裝置，其特徵在於，包括：第一存儲模組，用於在獲取到拍照請求的情況下，根據該拍照請求生成第一中繼資料，並將該第一中繼資料存儲在中繼資料資源池中，該第一中繼資料包括與該拍照請求對應的拍攝控制參數；資料獲取模組，用於向圖像感測器發送預覽請求，並從該圖像感測器獲取原始圖像資料和第二中繼資料，該預覽請求包括從該中繼資料資源池中第一中繼資料獲取的該拍攝控制參數，該原始圖像資料為該圖像感測器基於該預覽請求中的拍攝控制參數拍攝得到，該第二中繼資料與該原始圖像資料具有關聯關係；第二存儲模組，用於將該第二中繼資料存儲在該中繼資料資源池中；生成模組，用於根據該第二中繼資料，生成目標圖像。
如請求項7所述的拍攝裝置，其中，該中繼資料資源池包括與該拍照請求對應的第一輸入設置資料欄，以及與該預覽請求對應的第二輸出結果資料欄以及圖像感測器輸出資料欄；該第一存儲模組包括：第一存儲單元，用於將該第一中繼資料存儲在該中繼資料資源池的第一輸入設置資料欄中；該第二存儲模組包括：第二存儲單元，用於將該第二中繼資料存儲在該中繼資料資源池的第二輸出結果資料欄以及圖像感測器輸出資料欄中。
如請求項8所述的拍攝裝置，其中，該中繼資料資源池還包括與該預覽請求對應的第二輸入設置資料欄；該裝置還包括：獲取模組，用於從該第一輸入設置資料欄中獲取該第一中繼資料；預覽請求模組，用於根據該第一中繼資料更新該第二輸入設置資料域中的中繼資料，以及根據更新後的該第二輸入設置資料域中的中繼資料生成預覽請求。
如請求項8所述的拍攝裝置，其中，該生成模組包括：第一圖像處理單元，用於對該第二輸出結果資料域中的第二中繼資料進行圖像處理，得到第三中繼資料；預覽圖像單元，用於基於該第三中繼資料生成預覽圖像；其中，該圖像處理的次數為至少一次，每對該第二輸出結果資料域中的第二中繼資料進行一次圖像處理，則更新該第二輸出結果資料域中的第二中繼資料。
如請求項8所述的拍攝裝置，其中，該中繼資料資源池還包括與該拍照請求對應的第一輸出結果資料欄；該生成模組包括：第三存儲單元，用於從該圖像感測器輸出資料欄中獲取該第二中繼資料，並基於該第二中繼資料更新該第一輸出結果資料域中的中繼資料；第二圖像處理單元，用於對該第一輸出結果資料域中的中繼資料進行圖像處理，得到第四中繼資料；拍攝圖像單元，用於基於該第四中繼資料生成拍攝圖像；其中，該圖像處理的次數為至少一次，每對該第一輸出結果資料域中的中繼資料進行一次圖像處理，則更新該第一輸出結果資料域中的中繼資料。
如請求項11所述的拍攝裝置，其中，該第三存儲單元包括：緩存佇列子單元，用於從該圖像感測器輸出資料欄中獲取該第二中繼資料並暫存在緩存佇列中；存儲子單元，用於基於該緩存佇列中的第二中繼資料更新該第一輸出結果資料域中的中繼資料。
一種電子設備，其特徵在於，包括處理器和記憶體，該記憶體存儲可在該處理器上運行的程式或指令，該程式或指令被該處理器執行時實現如請求項1至6中任一項所述的拍攝方法的步驟。
一種可讀存儲介質，其特徵在於，該可讀存儲介質上存儲程式或指令，該程式或指令被處理器執行時實現如請求項1至6中任一項所述的拍攝方法的步驟。