TWI825972B - 影像處理系統、方法、電子設備及介質 - Google Patents

Abstract

本發明提供了一種影像處理系統、方法、電子設備及可讀存儲介質，屬於通信技術領域，該影像處理方法包括：中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統在接收到第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料；第二內核系統在接收到第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料；其中，第一影像處理任務包括第一圖像資料，第二影像處理任務包括第二圖像資料。

Description

影像處理系統、方法、電子設備及介質

本發明屬於通信技術領域，具體關於一種影像處理系統、方法、電子設備及可讀存儲介質。

目前，越來越多的使用者使用電子設備拍照，使用電子設備拍照的流程一般為：使用者打開拍照應用程式，電子設備開啟攝像機，並使用處理器對攝像機拍攝到的畫面進行影像處理，進而在電子設備的顯示介面顯示預覽畫面，在接收到使用者輸入的拍攝指令之後，將當前預覽畫面對應的預覽圖像確定為照片。

當電子設備同時運行多個應用程式時，電子設備中的處理器按照每個應用程式的開啟順序逐個回應各個應用程式，這樣，在電子設備開啟攝像機之後，處理器不能及時回應，也就無法對攝像機拍攝到的畫面進行影像處理，進而導致顯示的預覽畫面卡頓。

本發明實施例的目的是一種影像處理系統、方法、電子設備及可讀存儲介質，能夠解決相關技術中預覽畫面卡頓的問題。

第一方面，本發明實施例提供了一種影像處理系統，該系統包括： 中斷處理模組，用於接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，，向第二內核系統發送第二影像處理任務； 第一內核系統，用於在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料； 第二內核系統，用於在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料； 其中，該第一影像處理任務包括該第一圖像資料，該第二影像處理任務包括該第二圖像資料。

第二方面，本發明實施例提供了一種影像處理方法，該方法應用於影像處理系統，該影像處理系統包括中斷處理模組、第一內核系統和第二內核系統，該方法包括： 該中斷處理模組接收圖像感測器採集的圖像資料，並向該第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務； 該第一內核系統在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料； 該第二內核系統在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料； 其中，該第一影像處理任務包括該第一圖像資料，該第二影像處理任務包括該第二圖像資料。

第三方面，本發明實施例提供了一種電子設備，該電子設備包括處理器、記憶體及存儲在該記憶體上並可在該處理器上運行的程式或指令，該程式或指令被該處理器執行時實現如第二方面所述的方法的步驟。

第四方面，本發明實施例提供了一種可讀存儲介質，該可讀存儲介質上存儲程式或指令，該程式或指令被處理器執行時實現如第二方面所述的方法的步驟。

第五方面，本發明實施例提供了一種晶片，該晶片包括處理器和通信介面，該通信介面和該處理器耦合，該處理器用於運行程式或指令，實現如第二方面所述的方法。

第六方面，本發明實施例提供一種電腦程式產品，該程式產品被存儲在存儲介質中，該程式產品被至少一個處理器執行以實現如第二方面所述的方法。

本發明實施例中，中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務；以此對圖像感測器採集到的圖像資料即時回應，這樣，在電子設備同時運行多個應用程式時，也能確保電子設備優先對圖像感測器採集到的圖像資料回應。進一步的，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統在接收到第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料。上述第三圖像資料是基於圖像感測器採集的圖像資料得到的，通過對第一圖像資料進行第一影像處理任務，即時回應圖像感測器採集到的圖像資料，避免出現丟幀，進而提高後續的預覽畫面的流暢度。

為了使本發明的目的、技術方案及優點更加清楚明白，下面結合附圖及實施例，對本發明進行進一步詳細說明。應當理解，此處所描述的具體實施例僅用以解釋本發明，但並不用於限定本發明。

需要說明的是，當元件被稱為“固定於”或“設置於”另一個元件，它可以直接在另一個元件上或者間接在所述另一個元件上。當一個元件被稱為是“連接於”另一個元件，它可以是直接連接到另一個元件或間接連接至所述另一個元件上。

需要理解的是，術語“長度”、“寬度”、“上”、“下”、“前”、“後”、“左”、“右”、“豎直”、“水準”、“頂”、“底”、“內”、“外”等指示的方位或位置關係為基於附圖所示的方位或位置關係，僅是為了便於描述本發明和簡化描述，而不是指示或暗示所指的裝置或元件必須具有特定的方位、以特定的方位構造和操作，因此不能理解為對本發明的限制。

此外，術語“第一”、“第二”僅用於描述目的，而不能理解為指示或暗示相對重要性或者隱含指明所指示的技術特徵的數量。由此，限定有“第一”、“第二”的特徵可以明示或者隱含地包括一個或者更多個所述特徵。在本發明的描述中，“多個”的含義是兩個或兩個以上，除非另有明確具體的限定。

在本發明中，除非另有明確的規定和限定，術語“安裝”、“相連”、“連接”、“固定”等術語應做廣義理解，例如，可以是固定連接，也可以是可拆卸連接，或成一體；可以是機械連接，也可以是電連接；可以是直接相連，也可以通過中間媒介間接相連，可以是兩個元件內部的連通或兩個元件的相互作用關係。對於本領域的具有通常知識者而言，可以根據具體情況理解上述術語在本發明中的具體含義。

為便於理解，以下結合圖1對相關技術中的影像處理方法進行說明： 電子設備中的影像處理系統如圖1所示，影像處理系統包括作業系統和Linux系統，應理解，上述作業系統可以是IOS系統或者安卓系統，上述作業系統。作業系統包括應用層、架構層和硬體抽象層，Linux系統包括驅動程式和硬體。使用者對電子設備上的應用程式執行相應的操作，例如，打開攝像機，這種情況下，應用層接收用戶操作，通過架構層和硬體抽象層向Linux系統發送插斷要求（Interrupt Request，IRQ），Linux系統回應該插斷要求，對攝像機拍攝到的畫面進行影像處理，隨後基於影像處理後的拍攝圖像，顯示預覽畫面。

應理解，上述影像處理可以理解為使用圖像信號處理（Image Signal Processor，ISP）模組對拍攝到的圖像進行影像處理，上述影像處理分為raw域ISP處理和yuv域ISP處理兩部分，raw域ISP處理又稱為raw域影像處理，yuv域ISP處理又稱為yuv域影像處理。其中，攝像機拍攝到的圖像的格式通常為raw格式。

相關技術中對於攝像機拍攝到的圖像的處理流程為：應用層在接收到用戶的操作之後，向Linux系統發送IRQ指令，Linux系統回應該IRQ指令對拍攝到的raw格式的圖像進raw域影像處理和yuv域影像處理，得到yuv格式的圖像，進而基於該yuv格式的圖像形成預覽畫面。

然而，在上述過程中，當電子設備運行較多應用程式時，電子設備處理器不能及時回應該IRQ指令，這會造成攝像機拍攝圖像的部分丟失，進而導致預覽畫面丟幀，從而存在卡頓現象。

例如，在用戶執行“打開相機”這一操作之後，攝像機在1秒之內拍攝到30幀圖像，但由於處理器同時運行較多應用程式，在使用25個執行緒該30幀圖像的情況下，則會造成5幀圖像的丟失，從而導致預覽畫面丟幀，從而存在卡頓現象。

為了解決上述存在的技術問題，本發明實施例提供了一種影像處理方法，下面結合附圖，通過具體的實施例及其應用場景對本發明實施例提供的影像處理方法進行詳細地說明。

為便於理解本發明實施例提供的技術方案，請參閱圖2，圖2示出的是應用本發明實施例提供的影像處理方法的影像處理系統的示意圖之一。如圖2所示，在圖1示出的相關技術中的影像處理系統的基礎上新增了一個即時作業系統（Real-Time Operating System，RTOS）系統，該RTOS系統包括驅動程式和第一硬體層，該第一硬體層與對圖像進行raw域ISP處理的硬體通信；圖2示出的Linux系統包括驅動程式和第二硬體層，該第二硬體層與對圖像進行yuv域ISP處理的硬體通信。其中，上述RTOS系統又稱為第一內核系統，上述Linux系統又稱為第二內核系統。

其中，作業系統向Linux系統發送的中斷指令的指令類型為IRQ，作業系統向RTOS系統發送的中斷指令的指令類型為快速插斷要求（Fast Interrupt Request，FIQ），處理器會優先回應FIQ指令，因此處理器會即時回應與FIQ指令關聯的事件。

在影像處理系統中新增了RTOS系統可以理解為在影像處理系統中新增了中斷機制，RTOS系統對應的中斷指令為回應優先順序最高的FIQ指令，即對需要進行raw域ISP處理的圖像使用處理器即時回應的第一中斷機制；Linux系統對應的中斷指令為IRQ，即對需要進行yuv域ISP處理的圖像使用第二中斷機制。

應理解，由於在影像處理系統中新增了RTOS系統，為了保證RTOS系統和作業系統之間可以正常通信，應確保影像處理系統具有垮作業系統通信的功能。

應理解，由於在影像處理系統中新增了RTOS系統，因此需要對電子設備中的部分硬體進行初始化設置，以使得RTOS系統可以正常運行。

請參閱圖3，圖3是本發明實施例提供的影像處理方法的流程圖。本發明實施例提供的影像處理方法應用於影像處理系統，該影像處理系統可以應用於電子設備，該影像處理系統包括中斷處理模組、第一內核系統和第二內核系統，該方法包括： S101，中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務。

本步驟中，可選地實施方式為：當用戶通過相關操作開啟相機時，例如，點擊電子設備桌面的相機控制項，開啟攝像機，並獲取攝像機拍攝的圖像資料，上述攝像機可以理解為圖像感測器。

為便於理解本實施例的技術方案，請參閱圖4，如圖4所示，中斷處理模組與第一內核系統和第二內核系統通信連接，且中斷處理模組還與第一硬體和第二硬體通信。上述第一內核系統即RTOS系統，第二內核系統即Linux系統。

其中，第一硬體具備對圖像資料進行raw域影像處理的功能，第二硬體具備對圖像資料進行yuv域影像處理的功能；上述raw域影像處理包括但不限於增強圖像清晰度、去除馬賽克和去除圖像雜訊等操作，上述yuv域影像處理包括但不限於將圖像資料的資料格式轉換為yuv。

可選地，該第一影像處理任務為raw域影像處理，該第二影像處理任務為yuv域影像處理。

中斷處理模組接收圖像感測器採集的圖像資料，在圖像資料需要進行raw域影像處理的情況下，中斷處理模組向第一內核系統發送第一影像處理任務；在圖像資料需要進行yuv域影像處理的情況下，中斷處理模組向第二內核系統發送第二影像處理任務。其中，上述第一影像處理任務包括第一圖像資料和FIQ指令，上述第二影像處理任務包括第二圖像資料和IRQ指令，上述第一圖像資料和第二圖像資料包括至少一幀圖像。

S102，該第一內核系統在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料。

可選地，上述第一圖像資料為圖像感測器採集到的圖像資料。

本步驟中，第一內核系統在接收到該第一影像處理任務，即第一圖像資料和FIQ指令的情況下，對第一圖像資料進行raw域影像處理，得到第三圖像資料。

S103，該第二內核系統在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料。

本步驟中，第二內核系統在接收到該第二影像處理任務，即第二圖像資料和IRQ指令的情況下，對第二圖像資料進行yuv域影像處理，得到第四圖像資料。

本實施例中，基於電子設備處理器的工作情況，確定與第二內核系統關聯的執行緒數量，並將該執行緒數量確定為第二內核系統每次進行第二影像處理任務的第二圖像資料的數量。

示例性的，在處理器同時處理多個應用程式的情況下，處理器的執行緒池中還剩下20個執行緒處於空閒狀態，則第二內核系統可以使用這20個執行緒20個第二圖像資料，即第二內核系統每次只處理20個第二圖像資料。

若待處理的第二圖像資料的數量為30，則第二內核系統在第一次處理過程中，獲取20個第二圖像資料，對這20個第二圖像資料進行yuv域影像處理，得到20個第四圖像資料；在第二次處理過程中獲取10個第二圖像資料，對這10個第二圖像資料進行yuv域影像處理，得到10個第四圖像資料，以此完成對30個第二圖像資料的處理。

可選地，該預設條件包括以下至少一項：該第一影像處理任務處理完成；接收到作業系統發送的影像處理請求。

需要說明的是，中斷處理模組可以在第一影像處理任務處理完成的情況下，向第二內核系統發送第二影像處理任務。

中斷處理模組也可以在第一影像處理任務未處理完成的情況下，向第二內核系統發送第二內核系統發送第二影像處理任務，即，在接收到作業系統發送的影像處理請求的情況下，向第二內核系統發送第二影像處理任務，以保證在第一影像處理任務處理完成的情況下，第二內核系統可以直接對第二影像處理任務進行處理，節省了中斷處理模組發送第二影像處理任務的時間，使得內核系統可以更快的回應影像處理任務。

本發明實施例中，中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務；以此對圖像感測器採集到的圖像資料即時回應，這樣，在電子設備同時運行多個應用程式時，也能確保電子設備優先處理圖像感測器採集到的圖像資料。進一步的，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統在接收到第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料。上述第三圖像資料是基於圖像感測器採集的圖像資料得到的，通過對第一圖像資料進行第一影像處理任務，即時回應圖像感測器採集到的圖像資料，避免出現丟幀，進而提高後續的預覽畫面的流暢度。

可選地，該影像處理系統還包括作業系統和圖像感測器，該方法還包括： 該作業系統接收使用者的第一輸入；該作業系統回應於該第一輸入，向該圖像感測器發送圖像資料採集指令； 該圖像感測器在接收到該圖像資料採集指令的情況下，採集圖像資料，並發送該圖像資料至該中斷處理模組。

可選地實施方式為，電子設備的介面顯示有“拍照”控制項，使用者對該控制項執行觸控操作以此向作業系統發送第一輸入，或者，用戶也可以通過其他操作，例如，執行語音輸入，向作業系統發送第一輸入，在此不作具體限定。

本實施例中，作業系統在接收到第一輸入之後，回應於該第一輸入，向圖像感測器發送圖像資料採集指令，以使得圖像感測器將採集到的圖像資料發送至中斷處理模組。

應理解，對應中斷處理模組，請參閱圖5，如圖5所示，中斷處理模組在在接收到第一輸入的情況下，觸發中斷機制，具體而言，作業系統向第一內核系統發送FIQ指令，將與FIQ指令關聯的第一圖像資料確定為即時事件，第一內核系統即時回應該FIQ指令；作業系統向第二內核系統發送IRQ指令，將與IRQ指令關聯的第二圖像資料確定為非即時事件，第二內核系統利用空閒執行緒回應該IRQ指令。

可選地，該作業系統包括顯示單元，該方法還包括： 該顯示單元回應於該第一輸入，顯示拍攝預覽圖像，該拍攝預覽圖像包括該第四圖像資料。

本實施例中，在第二內核系統完成第二影像處理任務，得到第四圖像之後，顯示單元顯示拍攝預覽圖像，應理解，上述拍攝預覽圖像該第四圖像資料。

可選地，上述顯示單元還可以顯示預覽畫面，上述預覽畫面包括多幀第四圖像資料構成的畫面。

具體而言，在得到第四圖像資料之後，獲取每個第四圖像資料對應的拍攝時間，並按照拍攝時間從早到晚的順序，依次顯示對應的第四圖像資料，以此顯示預覽畫面。

例如，預覽畫面的時長為1秒，則可以獲取第二內核系統在1秒內生成的第四圖像資料，根據每個第四圖像資料對應的拍攝時間從早到晚的順序排序，在1秒內依次顯示上述第四圖像資料。

可選地，該方法還包括： 該中斷處理模組並在滿足預設條件的情況下，向該第二內核系統發送第三影像處理任務； 該第二內核系統在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料； 其中，該第三影像處理任務包括該第三圖像資料。

本實施例中，第二內核系統所處理的圖像資料可以是經過第一內核系統raw域影像處理後的圖像資料，也就是說，第二圖像資料與第三圖像資料為同一圖像資料。

具體而言，中斷處理系統接收圖像感測器採集到的第一圖像資料，並向第一內核系統發送第一影像處理任務，使得第一內核系統對第一圖像資料進行raw域影像處理，得到第三圖像資料；隨後，中斷處理系統向第二內核系統發送第三影像處理任務，使得第二內核系統對第三圖像資料進行yuv域影像處理，得到第五圖像資料。

可選地，該影像處理系統還包括圖像資料存儲模組，該向該第二內核系統發送第三影像處理任務之後，該方法包括： 該圖像資料存儲模組存儲該第一內核系統對該第一圖像資料進行處理後得到的該第三圖像資料； 該對該第三圖像資料進行影像處理，得到第五圖像資料包括： 該第二內核系統在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料。

需要說明的是，本發明實施例提供的影像處理系統還包括圖像資料存儲模組，該圖像資料存儲模組可以是共用記憶體，該共用記憶體又稱為記憶體，該共用記憶體可以是影像處理系統的唯讀記憶體（Read-Only Memory，ROM）中被第一內核系統和第二內核系統共同訪問的部分。

需要說明的是，第一內核系統在對第一圖像資料即時進行raw域影像處理，得到第三圖像資料之後，將第三圖像資料存儲至圖像資料存儲模組中，並向中斷處理模組發送相應的信號，中斷處理模組在接收到該信號之後，向第二內核系統發送第三影像處理，以使得第二內核系統對圖像資料存儲模組中的第三圖像資料進行影像處理，得到第五圖像資料。

在其他實施例中，第一內核系統具備獨立執行raw域影像處理和yuv域影像處理的功能，中斷處理模組在獲取到圖像感測器採集的第一圖像資料之後，向第一內核系統發送FIQ指令，第一內核系統基於該FIQ指令對第一圖像資料執行raw域影像處理和yuv域影像處理，得到目標圖像資料，其中，上述目標圖像資料的格式為yuv。

請參閱圖6，如圖6所示，可以在電子設備增加一個實體按鍵或在電子設備的顯示介面顯示切換控制項，在使用者按下實體按鍵或者對該切換控制項執行操作之後，對電子設備的影像處理模式進行轉換，即只使用上述具備獨立執行raw域影像處理和yuv域影像處理功能的第一內核系統對圖像進行處理。

下面結合附圖，通過具體的實施例及其應用場景對本發明實施例提供的影像處理系統進行詳細地說明。

如圖7所示，影像處理系統700包括： 中斷處理模組701，用於接收圖像感測器採集的圖像資料，並向第一內核系統702發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統703發送第二影像處理任務； 第一內核系統702，用於在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料； 第二內核系統703，用於在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二像處理，得到第四圖像資料； 其中，該第一影像處理任務包括該第一圖像資料，該第二影像處理任務包括該第二圖像資料。

可選地，該影像處理系統700還包括： 作業系統，用於接收使用者的第一輸入； 該作業系統，還用於回應於該第一輸入，向該圖像感測器發送圖像資料採集指令； 圖像感測器，用於在接收到該圖像資料採集指令的情況下，採集圖像資料，並發送該圖像資料至該中斷處理模組。

可選地，該作業系統包括顯示單元； 顯示單元，用於回應於該第一輸入，顯示拍攝預覽圖像，該拍攝預覽圖像包括該第四圖像資料。

可選地，該中斷處理模組701，還用於在滿足預設條件的情況下，向該第二內核系統703發送第三影像處理任務； 該第二內核系統703，還用於在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料； 其中，該第三影像處理任務包括該第三圖像資料。

可選地，該影像處理系統700還包括： 圖像資料存儲模組，用於存儲該第一內核系統702對該第一圖像資料進行處理後得到的該第三圖像資料； 該第二內核系統703，還用於從該圖像資料存儲模組讀取該第三圖像資料，並對該第三圖像資料進行處理，得到該第五圖像資料。

本發明實施例中，中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務；以此對圖像感測器採集到的圖像資料即時回應，這樣，在電子設備同時運行多個應用程式時，也能確保電子設備優先對圖像感測器採集到的圖像資料回應。進一步的，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統在接收到第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料。上述第三圖像資料是基於圖像感測器採集的圖像資料得到的，通過對第一圖像資料進行第一影像處理任務，即時回應圖像感測器採集到的圖像資料，避免出現丟幀，進而提高後續的預覽畫面的流暢度。

可選地，如圖8所示，本發明實施例還提供一種電子設備800，包括處理器801，記憶體802，存儲在記憶體802上並可在該處理器801上運行的程式或指令，該程式或指令被處理器801執行時實現上述影像處理方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

需要說明的是，本發明實施例中的電子設備包括上述該的移動電子設備和非移動電子設備。

圖9為實現本發明實施例的一種電子設備的硬體結構示意圖。

該電子設備900包括但不限於：射頻單元901、網路模組902、音訊輸出單元903 、輸入單元904、感測器905、顯示單元906、使用者輸入單元907、介面單元908、記憶體909、以及處理器910等部件。

本領域的具有通常知識者可以理解，電子設備900還可以包括給各個部件供電的電源（比如電池），電源可以通過電源管理系統與處理器910邏輯相連，從而通過電源管理系統實現管理充電、放電、以及功耗管理等功能。圖9中示出的電子設備結構並不構成對電子設備的限定，電子設備可以包括比圖示更多或更少的部件，或者組合某些部件，或者不同的部件佈置，在此不再贅述。

其中，處理器910，還用於接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務； 在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料； 在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料。 其中，使用者輸入單元907，還用於接收用戶的第一輸入； 處理器910，還用於回應於該第一輸入，向圖像感測器發送圖像資料採集指令； 在接收到該圖像資料採集指令的情況下，採集圖像資料，並發送該圖像資料至該中斷處理模組。

其中，顯示單元906，還用於回應於該第一輸入，顯示拍攝預覽圖像。

可選地，處理器910，還用於並在滿足預設條件的情況下，向該第二內核系統發送第三影像處理任務； 在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料。

可選地，記憶體909，還用於存儲該第一內核系統對該第一圖像資料進行處理後得到的該第三圖像資料； 處理器910，還用於在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料。

可選地，該預設條件包括以下至少一項：該第一影像處理任務處理完成；接收到作業系統發送的影像處理請求。

本發明實施例中，中斷處理模組接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務；以此對圖像感測器採集到的圖像資料即時回應，這樣，在電子設備同時運行多個應用程式時，也能確保電子設備優先對圖像感測器採集到的圖像資料回應。進一步的，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統在接收到第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料。上述第三圖像資料是基於圖像感測器採集的圖像資料得到的，通過對第一圖像資料進行第一影像處理任務，即時回應圖像感測器採集到的圖像資料，避免出現丟幀，進而提高後續的預覽畫面的流暢度。

應理解的是，本發明實施例中，輸入單元904可以包括圖形處理器（Graphics Processing Unit，GPU）9041和麥克風9042，圖形處理器9041對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置（如攝像機）獲得的靜態圖片或視頻的圖像資料進行處理。顯示單元906可包括顯示面板9061，可以採用液晶顯示器、有機發光二極體等形式來配置顯示面板9071。使用者輸入單元907包括觸控面板9071以及其他輸入裝置9072中的至少一種。觸控面板9071，也稱為觸控式螢幕。觸控面板9071可包括觸摸檢測裝置和觸摸控制器兩個部分。其他輸入裝置9072可以包括但不限於實體鍵盤、功能鍵（比如音量控制按鍵、開關按鍵等）、軌跡球、滑鼠、操作桿，在此不再贅述。

記憶體909可用於存儲軟體程式以及各種資料。記憶體909可主要包括存儲程式或指令的第一存儲區和存儲資料的第二存儲區，其中，第一存儲區可存儲作業系統、至少一個功能所需的應用程式或指令（比如聲音播放功能、圖像播放功能等）等。此外，記憶體909可以包括揮發性記憶體或非揮發性記憶體，或者，記憶體909可以包括揮發性和非揮發性記憶體兩者。其中，非揮發性記憶體可以是唯讀記憶體(Read-Only Memory，ROM)、可程式設計唯讀記憶體(Programmable ROM，PROM)、可擦除可程式設計唯讀記憶體(Erasable PROM，EPROM)、電可擦除可程式設計唯讀記憶體(Electrically EPROM，EEPROM)或快閃記憶體。易失性記憶體可以是隨機存取記憶體(Random Access Memory，RAM)，靜態隨機存取記憶體(Static RAM，SRAM)、動態隨機存取記憶體(Dynamic RAM，DRAM)、同步動態隨機存取記憶體(Synchronous DRAM，SDRAM)、雙倍數據速率同步動態隨機存取記憶體(Double Data Rate SDRAM，DDRSDRAM)、增強型同步動態隨機存取記憶體(Enhanced SDRAM，ESDRAM)、同步連接動態隨機存取記憶體(Synch link DRAM，SLDRAM)和直接記憶體匯流排隨機存取記憶體(Direct Rambus RAM，DRRAM)。本發明實施例中的記憶體909包括但不限於這些和任意其它適合類型的記憶體。

處理器910可包括一個或多個處理單元；可選的，處理器910集成應用處理器和調製解調處理器，其中，應用處理器主要處理涉及作業系統、使用者介面和應用程式等的操作，調製解調處理器主要處理無線通訊信號，如基帶處理器。可以理解的是，上述調製解調處理器也可以不集成到處理器910中。

本發明實施例還提供一種可讀存儲介質，該可讀存儲介質上存儲有程式或指令，該程式或指令被處理器執行時實現上述影像處理方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

其中，該處理器為上述實施例中該的電子設備中的處理器。該可讀存儲介質，包括電腦可讀存儲介質，如電腦唯讀記憶體（ROM）、隨機存取記憶體（RAM）、磁碟或者光碟等。

本發明實施例另提供了一種晶片，該晶片包括處理器和通信介面，該通信介面和該處理器耦合，該處理器用於運行程式或指令，實現上述影像處理方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

應理解，本發明實施例提到的晶片還可以稱為系統級晶片、系統晶片、晶片系統或片上系統晶片等。

本發明實施例提供一種電腦程式產品，該程式產品被存儲在存儲介質中，該程式產品被至少一個處理器執行以實現如上述影像處理方法實施例的各個過程，且能達到相同的技術效果，為避免重複，這裡不再贅述。

需要說明的是，在本文中，術語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含，從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素，而且還包括沒有明確列出的其他要素，或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下，由語句“包括一個……”限定的要素，並不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。此外，需要指出的是，本發明實施方式中的方法和裝置的範圍不限按示出或討論的順序來執行功能，還可包括根據所涉及的功能按基本同時的方式或按相反的順序來執行功能，例如，可以按不同於所描述的次序來執行所描述的方法，並且還可以添加、省去、或組合各種步驟。另外，參照某些示例所描述的特徵可在其他示例中被組合。

通過以上的實施方式的描述，本領域的具有通常知識者可以清楚地瞭解到上述實施例方法可借助軟體加必需的通用硬體平臺的方式來實現，當然也可以通過硬體，但很多情況下前者是更佳的實施方式。基於這樣的理解，本發明的技術方案本質上或者說對現有技術做出貢獻的部分可以以電腦軟體產品的形式體現出來，該電腦軟體產品存儲在一個存儲介質（如ROM/RAM、磁碟、光碟）中，包括若干指令用以使得一台終端（可以是手機，電腦，伺服器，或者網路設備等）執行本發明各個實施例所述的方法。

上面結合附圖對本發明的實施例進行了描述，但是本發明並不局限於上述的具體實施方式，上述的具體實施方式僅僅是示意性的，而不是限制性的，本領域的具有通常知識者在本發明的啟示下，在不脫離本發明宗旨和權利要求所保護的範圍情況下，還可做出很多形式，均屬於本發明的保護之內。

S101-S103:步驟 700:影像處理系統 701:中斷處理模組 702:第一內核系統 703:第二內核系統 800:電子設備 801:處理器 802:記憶體 900:電子設備 901:射頻單元 902:網路模組 903:音訊輸出單元 904:輸入單元 9041:圖形處理器 9042:麥克風 905:感測器 906:顯示單元 9061:顯示面板 907:使用者輸入單元 9071:觸控面板 9072:其他輸入裝置 908:介面單元 909:記憶體 901:處理器

圖1是相關技術中的影像處理系統的示意圖； 圖2是本發明實施例提供的影像處理系統的示意圖之一； 圖3是本發明實施例提供的影像處理方法的流程圖； 圖4是本發明實施例提供的影像處理系統的示意圖之二； 圖5是本發明實施例提供的影像處理方法的應用場景圖； 圖6是本發明實施例提供的影像處理系統的示意圖之三； 圖7是本發明實施例提供的影像處理系統的結構圖； 圖8是本發明實施例提供的電子設備的結構圖； 圖9是本發明實施例提供的電子設備的硬體結構圖。

900:電子設備

901:射頻單元

902:網路模組

903:音訊輸出單元

904:輸入單元

9041:圖形處理器

9042:麥克風

905:感測器

906:顯示單元

9061:顯示面板

907:使用者輸入單元

9071:觸控面板

9072:其他輸入裝置

908:介面單元

909:記憶體

901:處理器

Claims (14)

1. 一種影像處理系統，其特徵在於，包括：中斷處理模組，用於接收圖像感測器採集的圖像資料，並向第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務；第一內核系統，用於在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料；第二內核系統，用於在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料；其中，該第一影像處理任務包括該第一圖像資料，該第二影像處理任務包括該第二圖像資料；該中斷處理模組，還用於並在滿足預設條件的情況下，向該第二內核系統發送第三影像處理任務；該第二內核系統，還用於在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料；其中，該第三影像處理任務包括該第三圖像資料。
2. 如請求項1所述的影像處理系統，其中，還包括：作業系統，用於接收使用者的第一輸入；該作業系統，還用於回應於該第一輸入，向該圖像感測器發送圖像資料採集指令；圖像感測器，用於在接收到該圖像資料採集指令的情況下，採集圖像資料，並發送該圖像資料至該中斷處理模組。
3. 如請求項2所述的影像處理系統，其中，該作業系統包括顯示單元；該顯示單元，用於回應於該第一輸入，顯示拍攝預覽圖像，該拍攝預覽圖像包括該第四圖像資料。
4. 如請求項1所述的影像處理系統，其中，還包括：圖像資料存儲模組，用於存儲該第一內核系統對該第一圖像資料進行處理後得到的該第三圖像資料；該第二內核系統，還用於從該圖像資料存儲模組讀取該第三圖像資料，並對該第三圖像資料進行處理，得到該第五圖像資料。
5. 如請求項1所述的影像處理系統，其中，該預設條件包括以下至少一項：該第一影像處理任務處理完成；接收到作業系統發送的影像處理請求。
6. 如請求項1至5中任一項所述的影像處理系統，其中，該第一影像處理任務為raw域影像處理，該第二影像處理任務為yuv域影像處理。
7. 一種影像處理方法，其特徵在於，應用於影像處理系統，該影像處理系統包括中斷處理模組、第一內核系統和第二內核系統，該方法包括：該中斷處理模組接收圖像感測器採集的圖像資料，並向該第一內核系統發送第一影像處理任務，並在滿足預設條件的情況下，向第二內核系統發送第二影像處理任務； 該第一內核系統在接收到該第一影像處理任務的情況下，對第一圖像資料進行第一影像處理，得到第三圖像資料；該第二內核系統在接收到該第二影像處理任務的情況下，對第二圖像資料進行第二影像處理，得到第四圖像資料；其中，該第一影像處理任務包括該第一圖像資料，該第二影像處理任務包括該第二圖像資料；該中斷處理模組在滿足預設條件的情況下，向該第二內核系統發送第三影像處理任務；該第二內核系統在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料；其中，該第三影像處理任務包括該第三圖像資料。
8. 如請求項7所述的影像處理方法，其中，該影像處理系統還包括作業系統和圖像感測器，該方法還包括：該作業系統接收使用者的第一輸入；該作業系統回應於該第一輸入，向該圖像感測器發送圖像資料採集指令；該圖像感測器在接收到該圖像資料採集指令的情況下，採集圖像資料，並發送該圖像資料至該中斷處理模組。
9. 如請求項8所述的影像處理方法，其中，該作業系統包括顯示單元，該影像處理方法還包括：該顯示單元回應於該第一輸入，顯示拍攝預覽圖像，該拍攝預覽圖像包括該第四圖像。
10. 如請求項7所述的影像處理方法，其中，該影像處理系統還包括圖像資料存儲模組，該向該第二內核系統發送第三影像處理任務之後，該影像處理方法包括：該圖像資料存儲模組存儲該第一內核系統對該第一圖像資料進行處理後得到的該第三圖像資料；該對該第三圖像資料進行影像處理，得到第五圖像資料包括：該第二內核系統在接收到第三影像處理任務的情況下，對該第三圖像資料進行影像處理，得到第五圖像資料。
11. 如請求項7所述的影像處理方法，其中，該預設條件包括以下至少一項：該第一影像處理任務處理完成；接收到作業系統發送的影像處理請求。
12. 如請求項8至11中任一項所述的影像處理方法，其中，該第一影像處理任務為raw域影像處理，該第二影像處理任務為yuv域影像處理。
13. 一種電子設備，其特徵在於，包括處理器，記憶體及存儲在該記憶體上並可在該處理器上運行的程式或指令，該程式或指令被該處理器執行時實現如請求項7至12中任一項所述的影像處理方法的步驟。
14. 一種可讀存儲介質，其特徵在於，該可讀存儲介質上存儲程式或指令，該程式或指令被處理器執行時實現如請求項7至12中任一項所述的影像處理方法的步驟。