TWI777098B - 一種圖像處理方法及裝置、電子設備、儲存介質 - Google Patents

一種圖像處理方法及裝置、電子設備、儲存介質 Download PDF

Info

Publication number
TWI777098B
TWI777098B TW108138711A TW108138711A TWI777098B TW I777098 B TWI777098 B TW I777098B TW 108138711 A TW108138711 A TW 108138711A TW 108138711 A TW108138711 A TW 108138711A TW I777098 B TWI777098 B TW I777098B
Authority
TW
Taiwan
Prior art keywords
image
background area
blurred
filter kernel
input image
Prior art date
Application number
TW108138711A
Other languages
English (en)
Other versions
TW202016876A (zh
Inventor
任思捷
陳焜
陳曉濠
Original Assignee
大陸商深圳市商湯科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商深圳市商湯科技有限公司 filed Critical 大陸商深圳市商湯科技有限公司
Publication of TW202016876A publication Critical patent/TW202016876A/zh
Application granted granted Critical
Publication of TWI777098B publication Critical patent/TWI777098B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20004—Adaptive image processing
    • G06T2207/20012—Locally adaptive
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Holo Graphy (AREA)

Abstract

本公開實施例公開了一種圖像處理方法，該方法包括：確定目標濾波核；根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域；將非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。本公開實施例的技術方案能夠在較短時間內獲得背景虛化且具備光斑效果的背景虛化圖像，從而支援即時預覽顯示該背景虛化圖像，實現拍攝得到的效果跟所看見的效果一致。

Description

一種圖像處理方法及裝置、電子設備、儲 存介質
本公開關於圖像處理技術領域，尤其圖像一種圖像處理方法及裝置、電子設備、儲存介質。
隨著電子技術的不斷發展，終端早已不僅僅局限於通信的單一功能，而是集休閒、通信和娛樂等功能於一體的設備。例如，一般的終端上都具備攝影頭，用於滿足用戶的拍照或攝影需求。
目前，由於手機、平板電腦等終端體積受限，無法配置相關光學器件，終端通常採用軟體演算法對圖像進行後期處理，得到背景虛化的效果。而目前常見的具備光斑效果的軟體演算法過程較為複雜，耗時較長，無法支持即時預覽。
本公開實施例期望提供一種圖像處理方法及裝置、電子設備、儲存介質，通過對輸入圖像進行濾波區分處理，將獲得的虛化背景區域和輸入圖像的非背景區域進行混合，能夠在較短時間內獲得具備光斑效果的背景虛化圖像，從而支援即時預覽顯示該背景虛化圖像，實現拍攝得到的效果跟所看見的效果一致。
本公開實施例的技術方案是如下實現的。
本公開實施例提供了一種圖像處理方法，包括：
確定目標濾波核；
根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域；
將所述非背景區域和所述虛化背景區域進行混合，獲得背景虛化圖像。
在上述方案中，所述確定目標濾波核之前，所述圖像處理方法還包括：
獲取第一範本圖像；
將所述第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像；
將所述第二範本圖像對應的二維陣列確定為所述目標濾波核。
在上述方案中，所述確定目標濾波核之前，包括：
接收選擇指令，所述選擇指令包括光斑類型；
所述獲取第一範本圖像包括：根據所述選擇指令的光斑類型確定所述第一範本圖像。
在上述方案中，所述根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域，包括：
根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像；
根據所述景深資訊，區分所述虛化圖像的背景區域和非背景區域，以及所述輸入圖像的背景區域和非背景區域；
將所述虛化圖像的背景區域確定為所述虛化背景區域。
在上述方案中，所述根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像，包括：
按照預設亮度變換方式對所述輸入圖像進行亮度拉伸變換，獲得第一圖像；
根據所述目標濾波核，對所述第一圖像進行濾波處理，獲得第二圖像；
按照所述預設亮度變化方式對所述第二圖像進行亮度拉伸反變換，獲得所述虛化圖像。
在上述方案中，所述根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域，包括：
根據所述景深資訊，區分所述輸入圖像的背景區域和非背景區域；
根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域。
在上述方案中，所述根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域，包括：
按照預設亮度變換方式對所述輸入圖像的背景區域進行亮度拉伸變換，獲得第一背景區域；
根據所述目標濾波核，對所述第一背景區域進行濾波處理，獲得第二背景區域；
按照所述預設亮度變化方式對所述第二背景區域進行亮度拉伸反變換，獲得所述虛化背景區域。
本公開實施例提供了一種圖像處理裝置，所述圖像處理裝置包括：
確定模組，用於確定目標濾波核；
獲取模組，用於根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域；
成像模組，用於將所述非背景區域和所述虛化背景區域進行混合，獲得背景虛化圖像。
在上述圖像處理裝置中，所述確定模組，具體用於獲取第一範本圖像；將所述第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像；將所述第二範本圖像對應的二維陣列確定為所述目標濾波核。
在上述圖像處理裝置中，還包括：接收模組；
所述接收模組，用於接收選擇指令，所述選擇指令包括光斑類型；
所述確定模組獲取第一範本圖像包括：根據所述選擇指令的光斑類型確定所述第一範本圖像。
在上述圖像處理裝置中，所述獲取模組，具體用於根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像；根據所述景深資訊，區分所述虛化圖像的背景區域和非背景區域，以及所述輸入圖像的背景區域和非背景區域；將所述虛化圖像的背景區域確定為所述虛化背景區域。
在上述圖像處理裝置中，所述獲取模組，具體用於按照預設亮度變換方式對所述輸入圖像進行亮度拉伸變換，獲得第一圖像；根據所述目標濾波核，對所述第一圖像進行濾波處理，獲得第二圖像；按照所述預設亮度變化方式對所述第二圖像進行亮度拉伸反變換，獲得所述虛化圖像。
在上述圖像處理裝置中，所述獲取模組，具體用於根據所述景深資訊，區分所述輸入圖像的背景區域和非背景區域；根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域。
在上述圖像處理裝置中，所述獲取模組，具體用於按照預設亮度變換方式對所述輸入圖像的背景區域進行亮度拉伸變換，獲得第一背景區域；根據所述目標濾波核，對所述第一背景區域進行濾波處理，獲得第二背景區 域；按照所述預設亮度變化方式對所述第二背景區域進行亮度拉伸反變換，獲得所述虛化背景區域。
本公開實施例提供了一種電子設備，所述電子設備包括：處理器、記憶體和通信匯流排；其中：
所述通信匯流排，用於實現所述處理器和所述記憶體之間的連接通信；
所述處理器，用於執行所述記憶體中儲存的圖像處理程式，以實現上述圖像處理方法。
在上述電子設備中，所述電子設備為手機或平板電腦。
本公開提供了一種電腦可讀儲存介質，所述電腦可讀儲存介質儲存有一個或者多個程式，所述一個或者多個程式可以被一個或者多個處理器執行，以實現上述圖像處理方法。
由此可見，在本公開實施例的技術方案中，圖像處理裝置確定目標濾波核；根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域；將輸入圖像的非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。也就是說，在本公開實施例的技術方案中，通過對輸入圖像進行濾波區分處理，將獲得的虛化背景區域和非背景區域進行混合，能夠在較短時間內獲得背景虛化且具備光斑效果的圖像，從而支援即時預覽顯示該背景虛化圖像，實現拍攝得到的效果跟所看見的效果一致。
601‧‧‧確定模組
602‧‧‧獲取模組
603‧‧‧成像模組
701‧‧‧處理器
702‧‧‧記憶體
703‧‧‧通信匯流排
圖1為本公開實施例提供的一種圖像處理方法的流程示意圖；
圖2為本公開實施例提供的一種確定目標濾波核的流程示意圖；
圖3(a)為本公開實施例提供的一種示例性的第一範本圖像的示意圖一；
圖3(b)為本公開實施例提供的一種示例性的第一範本圖像的示意圖二；
圖4為本公開實施例提供的一種示例性的預設亮度變換方式的變換示意曲線；
圖5(a)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖一；
圖5(b)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖二；
圖5(c)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖二；
圖6為本公開實施例提供的一種圖像處理裝置的結構示意圖；
圖7為本公開實施例提供的一種電子設備的結構示意圖。
下面將結合本公開實施例中的附圖，對本公開實施例中的技術方案進行清楚、完整地描述。
實施例一
本公開提供了一種圖像處理方法。圖1為本公開提供的一種圖像處理方法的流程示意圖。如圖1所示，主要包括以下步驟：
S101、確定目標濾波核。
在本公開的實施例中，圖像處理裝置可以先確定目標濾波核，用於執行後續對輸入圖像的處理步驟。
圖2為本公開實施例提供的一種確定目標濾波核的流程示意圖。如圖2所示，圖像處理裝置確定目標濾波核的具體步驟如下：
S201、獲取第一範本圖像。
在本公開的實施例中，圖像處理裝置可以獲取第一範本圖像。其中，第一範本圖像為目標濾波核對應的原始圖像範本。
需要說明的是，在本公開的實施例中，圖像處理裝置在確定目標濾波核之前，可以接收使用者發送的選擇指令，選擇指令中包括光斑類型，例如光斑的形狀和朝向，圖像即可根據選擇指令的光斑類型，從其它儲存裝置，或者採用任意方式獲得相應的第一範本圖像。具體的選擇指令和獲取第一範本圖像的方法本公開實施例不作限定。
圖3(a)為本公開實施例提供的一種示例性的第一範本圖像的示意圖一。在本公開的實施例中，目標濾波核可以為五角星濾波核，圖像處理裝置為了確定五角星濾波核，需要先獲取如圖3(a)所示第一範本圖像。
圖3(b)為本公開實施例提供的一種示例性的第一範本圖像的示意圖二。在本公開的實施例中，目標濾波核可以為心形濾波核，圖像處理裝置為了確定五角星濾波核，需要先獲取如圖3(b)所示第一範本圖像。
S202、將第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像。
在本公開的實施例中，圖像處理裝置在獲取到第一範本圖像之後，可以將第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像。
需要說明的是，在本公開的實施例中，圖像處理裝置中儲存有預設濾波核大小，用於限定生成的濾波核的具體大小。具體的預設濾波核大小本公開實施例不作限定。
示例性的，在本公開的實施例中，預設濾波核大小為9×9，因此，圖像處理裝置在獲取第一範本圖像之後，將第一範本圖像縮放至9×9。
可以理解的是，在本公開的實施例中，第一範本圖像可能過大，也可能過小，因此，圖像處理裝置需要將第一範本圖像縮放至實際需求的大小，即縮放至預設濾波核大小，才能進一步生成合適的濾波核。
S203、將第二範本圖像對應的二維陣列確定為目標濾波核。
在本公開的實施例中，圖像處理裝置在獲得第二範本圖像之後，將第二範本圖像對應的二維陣列確定為目標濾波核。
需要說明的是，在本公開的實施例中，第二範本圖像對應的二維陣列中每一個數值表示第二範本圖像中對應區域的像素值。具體的第二範本圖像對應的二維陣列本公開實施例不作限定。
示例性的，在本公開的實施例中，目標濾波核為五角星濾波核，預設濾波核大小為9×9，因此，圖像處理裝置獲取的第一範本圖像如圖3(a)所示，在將第一範本圖像縮放至9×9大小，獲得第二範本圖像之後，將第二範本圖像對對應的二維陣列確定為五角星濾波核，具體的五角星濾波核如公式(1)所示：
Figure 108138711-A0101-12-0010-1
示例性的，在本公開的實施例中，目標濾波核為心形濾波核，預設濾波核大小為9×9，因此，圖像處理裝置獲取的第一範本圖像如圖3(b)所示，在將第一範本圖像縮放至9×9大小，獲得第二範本圖像之後，將第二範本圖 像對對應的二維陣列確定為心形濾波核，具體的心形濾波核如公式(2)所示：
Figure 108138711-A0101-12-0011-2
可以理解的是，在本公開的實施例中，圖像處理裝置確定的目標濾波核可以為圓形濾波核，即具備圓形光斑效果的濾波核，由於圓形為規則圖形，因此，不僅可以通過步驟S201~S203生成圓形濾波核，還可以直接調用現有技術中的關於圓形濾波核的數學式子。而對於五角星濾波核和心形濾波核等需要具備不規則形狀光斑效果的濾波核，雖然可以通過大量計算採用數學式子來表達，但是較為複雜，因此，可以採用上述步驟S201~S203提供的採用範本轉化的方式確定相應的濾波核。具體的確定目標濾波核的方式本公開實施例不作限定。
可以理解的是，在現有技術中，使用單反相機獲得背景虛化的圖像時，通常圖像上會存在圓形光斑效果，提升了圖像的顯示美感，而在本公開的實施例中，圖像處理裝置不僅可以提供使圖像產生圓形光斑效果的圓形濾波核，還可以提供其它各種形狀的濾波核，例如，心形濾波核，五角星濾波核等，能夠使圖像產生心形光斑，或者五角星光斑。
S102、根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域。
在本公開的實施例中，圖像處理裝置在確定目標濾波核之後，還可以獲取輸入圖像對應的景深資訊，從而根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域。
需要說明的是，在本公開的實施例中，輸入圖像為圖像處理裝置當前預覽介面上顯示的圖像，也就是圖像處理裝置在拍攝時，進入取景範圍內的圖像。具體的輸入圖像本公開實施例不作限定。
需要說明的是，在本公開的實施例中，圖像處理裝置在獲取輸入圖像的時候，同時可以獲取到輸入圖像對應的景深資訊。其中，輸入圖像對應的景深資訊可以表徵輸入圖像中不同物體的遠近。具體的輸入圖像對應的景深資訊本公開實施例不作限定。
在本公開的實施例中，圖像處理裝置根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域，包括：根據目標濾波核，對輸入圖像進行濾波處理，獲得虛化圖像；根據景深資訊，區分虛化圖像的背景區域和非背景區域，以及輸入圖像的背景區域和非背景區域；將虛化圖像的背景區域確定為虛化背景區域。
需要說明的是，在本公開的實施例中，目標濾波核可以為圓形濾波核、心形濾波核，或者，五角星濾波核，因此，圖像處理裝置根據這些目標濾波核，對輸入圖像進行處理，獲得的虛化圖像是具備相應光斑形狀的。
具體的，在本公開的實施例中，為了獲得光斑效果更好的虛化圖像，圖像處理裝置根據目標濾波核，對輸入圖像進行濾波處理，獲得虛化圖像，包括：按照預設亮度變換方式對輸入圖像進行亮度拉伸變換，獲得第一圖像；根據目標濾波核，對第一圖像進行濾波處理，獲得第二圖像；按照預設亮度變化方式對第二圖像進行亮度拉伸反變換，獲得虛化圖像。
需要說明的是，在本公開的實施例中，圖像處理裝置中儲存有預設亮度變換方式，用於對輸入圖像進行亮度拉伸變換，以及對第二圖像進行亮度拉伸反變換，具體的預設亮度變換方式本公開實施例不作限定。
可以理解的是，在本公開的實施例中，圖像處理裝置對輸入圖像先進行亮度拉伸變化，獲得第一圖像，從而可以快速從第一圖像中找到在濾波處理時增加光斑的區域。圖像處理裝置對第二圖像進行拉伸反變換，實際上就是將第二圖像的亮度恢復到正常顯示範圍內，從而獲得亮度在正常顯示範圍內的虛化圖像。
示例性的，在本公開的實施例中，預設亮度變換方式如公式(3)所示：
Figure 108138711-A0101-12-0013-3
其中，圖像處理裝置在按照公式(1)對輸入圖像進行亮度拉伸變換，獲得第一圖像時，x為輸入圖像中像素點的亮度值，y為第一圖像中像素點的亮度值，在按照公式(3)對第二圖像進行亮度拉伸反變換，獲得虛化圖像時，y為第二圖像中像素點的亮度值，x為虛化圖像中像素點的亮度值。
圖4為本公開實施例提供的一種示例性的預設亮度變換方式的變換示意曲線。如圖4所示，對於公式(3)所示的預設亮度變換方式，當圖像處理裝置按照公式(3)所示的預設亮度變換方式對輸入圖像進行亮度拉伸變換時，輸入圖像中，亮度值小於等於128的像素點，在第一圖像中對應的亮度值不變，亮度值大於128的像素點，在第一圖像中對應的亮度值呈指數級別增大，即變換示意曲線在x小於等於128時，y較小，而在x大於128時，y迅速增大。
可以理解的是，在本公開的實施例中，由於目標濾波核可以具備光斑效果，因此，圖像處理裝置在獲得第一圖像之後，採用目標濾波核對第一圖像進行濾波處理，獲得的第二圖像具備光斑效果，即，第二圖像具備目標濾波核對應的光斑形狀。進一步的，圖像處理裝置按照預設亮度變換方式對第二圖像進行亮度拉伸反變換，獲得的虛化圖像也具備光斑效果。
示例性的，在本公開的實施例中，圖像處理裝置確定的目標濾波核為心形濾波核，心形濾波核具備心形光斑效果。圖像處理裝置按照公式(3)所示的亮度變換方式 對輸入圖形進行亮度拉伸變化，獲得第一圖像，之後，採用心形濾波核對第一圖像進行濾波處理，獲得第二圖像，最後，再次按照公式(3)所示的亮度變換方式對第二圖像進行亮度拉伸反變換，獲得虛化圖像。其中，第二圖像和虛化圖像均具備心形光斑效果。
需要說明的是，在本公開的實施例中，圖像處理裝置可以獲得輸入圖像對應的景深資訊，由於虛化圖像為對輸入圖像進行濾波後獲得的圖像，並未改變圖像的景深，因此，虛化圖像對應的景深資訊實際上與輸入圖像對應的景深資訊相同。圖像處理裝置可以直接根據輸入圖像對應的景深資訊，區分虛化圖像的背景區域和非背景區域，以及輸入圖像的背景區域和非背景區域，同時，將虛化圖像的背景區域確定為虛化背景區域。
在本公開的實施例中，圖像處理裝置根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域，還可以包括：根據景深資訊，區分輸入圖像的背景區域和非背景區域；根據目標濾波核，對輸入圖像的背景區域進行濾波處理，獲得虛化背景區域。
具體的，在本公開的實施例中，圖像處理裝置根據目標濾波核，對輸入圖像的背景區域進行濾波處理，獲得虛化背景區域，包括：按照預設亮度變換方式對輸入圖像的背景區域進行亮度拉伸變換，獲得第一背景區域；根據目 標濾波核，對第一背景區域進行濾波處理，獲得第二背景區域；按照預設亮度變化方式對第二背景區域進行亮度拉伸反變換，獲得虛化背景區域。
需要說明的是，在本公開的實施例中，圖像處理裝置根據目標濾波核，對輸入圖像的背景區域進行濾波處理的過程與上述對輸入圖像直接進行濾波處理的過程完全相同，預設亮度變換方式也可以如上述公式(3)所示，區別僅在於處理的物件不同，在此不再贅述。
可以理解的是，在本公開的實施例中，圖像處理裝置對輸入圖像進行濾波區分處理，可以執行區分處理，再執行濾波處理，也可以先執行濾波處理，再執行區分處理，即上述兩種濾波處理過程，但是，圖像處理裝置均可以獲得非背景區域和虛化背景區域，具體的執行方式本發明實施例不作限定。
S103、將非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。
在本公開的實施例中，圖像處理裝置在獲得輸入圖像的非背景區域和虛化背景區域之後，可以將非背景區域和虛化背景區域進行混合，從而獲得背景虛化圖像。
需要說明的是，在本公開的實施例中，圖像處理裝置中可以儲存有預設混合方式，用於將非背景區域和背景區域進行混合，具體的預設混合方式本公開實施例不作限定。
可以理解的是，在本公開的實施例中，圖像處理裝置實際上是為了將輸入圖像的背景區域進行虛化處理，並且虛化後的虛化背景區域具備光斑效果。對於輸入圖像而言，其背景區域並未虛化，而虛化背景區域已經虛化，且具備光斑效果，因此，將非背景區域和虛化背景區域兩者按照預設混合方式進行混合，獲得的背景虛化圖像，即實現了輸入圖像的背景區域進行虛化處理，而前景仍保持輸入圖像的清晰度，並且虛化後的背景區域具備光斑效果。
示例性的，在本公開的實施例中，預設混合方式為阿爾法透明混合處理(Alpha Blending)，圖像處理裝置在獲得輸入圖像的非背景區域和虛化背景區域之後，即可按照Alpha Blending將非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。
需要說明的是，在本公開的實施例中，Alpha Blending為一種可以使圖像中的物體產生透明感的技術，可以使非背景區域和虛化背景區域和諧的融入到一起。具體的Alpha Blending為現有技術，在此不再贅述。
需要說明的是，在本公開的實施例中，由於採用了帶光斑效果的濾波核和亮度拉伸變換及反變換來模擬光斑效果，並在終端上進行了加速處理，使得耗時較少，因此，圖像處理裝置在獲得背景虛化圖像之後，可以將背景虛化圖像進行即時預覽顯示。
圖5(a)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖一。如圖5(a)所示， 背景虛化圖像的背景區域已經虛化，並且具備圓形光斑，即目標濾波核為圓形濾波核。
圖5(b)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖二。如圖5(b)所示，背景虛化圖像的背景區域已經虛化，並且具備心形光斑效果，即目標濾波核為心形濾波核。
圖5(c)為本公開實施例提供的一種示例性的背景虛化圖像的即時預覽顯示示意圖二。如圖5(c)所示，背景虛化圖像的背景區域已經虛化，並且具備五角星光斑效果，即目標濾波核為五角星濾波核。
本公開實施例提供了一種圖像處理方法，圖像處理裝置確定目標濾波核；根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域；將非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。也就是說，在本公開實施例的技術方案中，通過對輸入圖像進行濾波區分處理，將獲得的虛化背景區域和非背景區域進行混合，能夠在較短時間內獲得具備光斑效果的背景虛化圖像，從而支援即時預覽顯示該背景虛化圖像，實現拍攝得到的效果跟所看見的效果一致。
實施例二
本公開實施例提供了一種圖像處理裝置。圖6為本公開實施例提供的一種圖像處理裝置的結構示意圖，如圖6所示，所述圖像處理裝置包括：
確定模組601，用於確定目標濾波核；
獲取模組602，用於根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域；
成像模組603，用於將所述非背景區域和所述虛化背景區域進行混合，獲得背景虛化圖像。
可選的，所述確定模組601，具體用於獲取第一範本圖像；將所述第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像；將所述第二範本圖像對應的二維陣列確定為所述目標濾波核。
可選的，所述圖像處理處理裝置還包括：接收模組604；
所述接收模組604，用於接收選擇指令，所述選擇指令包括光斑類型；
所述確定模組601獲取第一範本圖像包括：根據所述選擇指令的光斑類型確定所述第一範本圖像。
可選的，所述獲取模組602，具體用於根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像；根據所述景深資訊，區分所述虛化圖像的背景區域和非背景區域，以及所述輸入圖像的背景區域和非背景區域；將所述虛化圖像的背景區域確定為所述虛化背景區域。
可選的，所述獲取模組602，具體用於按照預設亮度變換方式對所述輸入圖像進行亮度拉伸變換，獲得第一圖像；根據所述目標濾波核，對所述第一圖像進行濾波處 理，獲得第二圖像；按照所述預設亮度變化方式對所述第二圖像進行亮度拉伸反變換，獲得所述虛化圖像。
可選的，所述獲取模組602，具體用於根據所述景深資訊，區分所述輸入圖像的背景區域和非背景區域；根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域。
可選的，所述獲取模組602，具體用於按照預設亮度變換方式對所述輸入圖像的背景區域進行亮度拉伸變換，獲得第一背景區域；根據所述目標濾波核，對所述第一背景區域進行濾波處理，獲得第二背景區域；按照所述預設亮度變化方式對所述第二背景區域進行亮度拉伸反變換，獲得所述虛化背景區域。
本公開實施例提供了一種圖像處理裝置，確定目標濾波核；根據目標濾波核和輸入圖像對應的景深資訊，對輸入圖像進行濾波區分處理，獲得輸入圖像的非背景區域和虛化背景區域；將非背景區域和虛化背景區域進行混合，獲得背景虛化圖像。也就是說，本公開實施例提供的圖像處理裝置，通過對輸入圖像進行濾波區分處理，將獲得的虛化背景區域和非背景區域進行混合，能夠在較短時間內獲得具備光斑效果的背景虛化圖像，從而支援即時預覽顯示該背景虛化圖像，實現拍攝得到的效果跟所看見的效果一致。
本公開實施例提供了一種電子設備。圖7為本公開實施例提供的一種電子設備的結構示意圖，如圖7所示， 所述電子設備包括：處理器701、記憶體702和通信匯流排703；其中：
所述通信匯流排703，用於實現所述處理器701和所述記憶體702之間的連接通信；
所述處理器701，用於執行所述記憶體702中儲存的圖像處理程式，以實現上述圖像處理方法。
可選的，所述電子設備為手機或平板電腦。
需要說明的是，在本公開的實施例中，上述圖像處理裝置中的確定模組601、獲取模組602、成像模組603和接收模組604，實際上與上述電子設備中的處理器701相對應。上述圖像處理裝置中確定模組601、獲取模組602、成像模組603和接收模組604執行的步驟，與上述電子設備中的處理器701執行的步驟相同。
本公開實施例還提供了一種電腦可讀儲存介質，所述電腦可讀儲存介質儲存有一個或者多個程式，所述一個或者多個程式可以被一個或者多個處理器執行，以實現上述圖像處理方法。電腦可讀儲存介質可以是是易失性記憶體(volatile memory)，例如隨機存取記憶體(Random-Access Memory，RAM)；或者非易失性記憶體(non-volatile memory)，例如唯讀記憶體(Read-Only Memory，ROM)，快閃記憶體(flash memory)，硬碟(Hard Disk Drive，HDD)或固態硬碟(Solid-State Drive，SSD)；也可以是包括上述記憶體 之一或任意組合的各自設備，如行動電話、電腦、平板設備、個人數位助理等。
本領域內的技術人員應明白，本公開的實施例可提供為方法、系統、或電腦程式產品。因此，本公開可採用硬體實施例、軟體實施例、或結合軟體和硬體方面的實施例的形式。而且，本公開可採用在一個或多個其中包含有電腦可用程式碼的電腦可用儲存介質(包括但不限於磁碟記憶體和光學記憶體等)上實施的電腦程式產品的形式。
本公開是參照根據本公開實施例的方法、設備(系統)、和電腦程式產品的流程圖和/或方塊圖來描述的。應理解可由電腦程式指令實現流程圖和/或方塊圖中的每一流程和/或方塊、以及流程圖和/或方塊圖中的流程和/或方塊的結合。可提供這些電腦程式指令到通用電腦、專用電腦、嵌入式處理機或其他可程式設計信號處理設備的處理器以產生一個機器，使得通過電腦或其他可程式設計信號處理設備的處理器執行的指令產生用於實現在流程圖一個流程或多個流程和/或方塊圖一個方塊或多個方塊中指定的功能的裝置。
這些電腦程式指令也可儲存在能引導電腦或其他可程式設計信號處理設備以特定方式工作的電腦可讀記憶體中，使得儲存在該電腦可讀記憶體中的指令產生包括指令裝置的製造品，該指令裝置實現在流程圖一個流程或多個流程和/或方塊圖一個方塊或多個方塊中指定的功能。
這些電腦程式指令也可裝載到電腦或其他可程式設計信號處理設備上，使得在電腦或其他可程式設計設備上執行一系列操作步驟以產生電腦實現的處理，從而在電腦或其他可程式設計設備上執行的指令提供用於實現在流程圖一個流程或多個流程和/或方塊圖一個方塊或多個方塊中指定的功能的步驟。
以上所述，僅為本公開的較佳實施例而已，並非用於限定本公開的保護範圍。
圖1代表圖為流程圖，無元件符號說明。

Claims (10)

  1. 一種圖像處理方法，包括：確定目標濾波核，目標濾波核具有光斑效果；根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域；其中，對所述輸入圖像進行濾波區分處理能夠先執行區分處理，再執行濾波處理；以及能夠先執行濾波處理，再進行區分處理；其中，濾波處理之前對待濾波的圖像進行亮度拉伸變換，濾波處理之後對濾波後的圖像進行亮度拉伸反變換；將所述非背景區域和所述虛化背景區域進行混合，獲得背景虛化圖像。
  2. 根據請求項1所述的圖像處理方法，其中所述確定目標濾波核包括：獲取第一範本圖像；將所述第一範本圖像縮放至預設濾波核大小，獲得第二範本圖像；將所述第二範本圖像對應的二維陣列確定為所述目標濾波核。
  3. 根據請求項2所述的圖像處理方法，其中所述確定目標濾波核之前，包括：接收選擇指令，所述選擇指令包括光斑類型；所述獲取第一範本圖像包括：根據所述選擇指令的光斑類型確定所述第一範本圖像。
  4. 根據請求項1-3中任意一項所述的圖像處理方法，其中所述根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域，包括：根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像；根據所述景深資訊，區分所述虛化圖像的背景區域和非背景區域，以及所述輸入圖像的背景區域和非背景區域；將所述虛化圖像的背景區域確定為所述虛化背景區域。
  5. 根據請求項4所述的圖像處理方法，其中所述根據所述目標濾波核，對所述輸入圖像進行濾波處理，獲得虛化圖像，包括：按照預設亮度變換方式對所述輸入圖像進行亮度拉伸變換，獲得第一圖像；根據所述目標濾波核，對所述第一圖像進行濾波處理，獲得第二圖像；按照所述預設亮度變化方式對所述第二圖像進行亮度拉伸反變換，獲得所述虛化圖像。
  6. 根據請求項1-3中任意一項所述的圖像處理方法，其中所述根據所述目標濾波核和輸入圖像對應的景深資訊，對所述輸入圖像進行濾波區分處理，獲得所述輸入圖像的非背景區域和虛化背景區域，包括： 根據所述景深資訊，區分所述輸入圖像的背景區域和非背景區域；根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域。
  7. 根據請求項6所述的圖像處理方法，其中所述根據所述目標濾波核，對所述輸入圖像的背景區域進行濾波處理，獲得所述虛化背景區域，包括：按照預設亮度變換方式對所述輸入圖像的背景區域進行亮度拉伸變換，獲得第一背景區域；根據所述目標濾波核，對所述第一背景區域進行濾波處理，獲得第二背景區域；按照所述預設亮度變化方式對所述第二背景區域進行亮度拉伸反變換，獲得所述虛化背景區域。
  8. 一種電子設備，所述電子設備包括：處理器、記憶體和通信匯流排；其中：所述通信匯流排，用於實現所述處理器和所述記憶體之間的連接通信；所述處理器，用於執行所述記憶體中儲存的圖像處理程式，以實現請求項1-7任一項所述的圖像處理方法。
  9. 根據請求項8所述的電子設備，其中所述電子設備為手機或平板電腦。
  10. 一種電腦可讀儲存介質，所述電腦可讀儲存介質儲存有一個或者多個程式，所述一個或者多個程式 可以被一個或者多個處理器執行，以實現請求項1-7任一項所述的圖像處理方法。
TW108138711A 2018-10-30 2019-10-25 一種圖像處理方法及裝置、電子設備、儲存介質 TWI777098B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201811278997.1A CN109559272A (zh) 2018-10-30 2018-10-30 一种图像处理方法及装置、电子设备、存储介质
CN201811278997.1 2018-10-30

Publications (2)

Publication Number Publication Date
TW202016876A TW202016876A (zh) 2020-05-01
TWI777098B true TWI777098B (zh) 2022-09-11

Family

ID=65865397

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108138711A TWI777098B (zh) 2018-10-30 2019-10-25 一種圖像處理方法及裝置、電子設備、儲存介質

Country Status (6)

Country Link
US (1) US20210097651A1 (zh)
JP (1) JP2022500792A (zh)
CN (1) CN109559272A (zh)
SG (1) SG11202012560XA (zh)
TW (1) TWI777098B (zh)
WO (1) WO2020087729A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110751593A (zh) * 2019-09-25 2020-02-04 北京迈格威科技有限公司 一种图像虚化处理方法及装置
CN111010514B (zh) * 2019-12-24 2021-07-06 维沃移动通信（杭州）有限公司 一种图像处理方法及电子设备
WO2021135676A1 (zh) * 2019-12-30 2021-07-08 武汉Tcl集团工业研究院有限公司 一种拍照背景虚化方法、移动终端及存储介质
CN112270728B (zh) * 2020-10-27 2024-09-24 维沃移动通信有限公司 图像处理方法、装置、电子设备及可读存储介质
CN113570501B (zh) * 2021-09-28 2021-12-28 泰山信息科技有限公司 一种图片虚化方法、装置及设备
CN114125296B (zh) * 2021-11-24 2024-08-09 维沃移动通信有限公司 图像处理方法、装置、电子设备和可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW384419B (en) * 1997-03-06 2000-03-11 Ind Tech Res Inst Method of application of diffraction to obtain special image effect using hologram and the apparatus
CN104463787A (zh) * 2014-12-11 2015-03-25 厦门美图之家科技有限公司 一种光斑虚化特效实现方法
CN108156378A (zh) * 2017-12-27 2018-06-12 努比亚技术有限公司 拍照方法、移动终端及计算机可读存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008310377A (ja) * 2007-06-12 2008-12-25 Namco Bandai Games Inc 画像生成システム、プログラム、及び情報記憶媒体
JP2009003858A (ja) * 2007-06-25 2009-01-08 Nikon Corp 画像処理プログラム、および画像処理装置
CN101587586B (zh) * 2008-05-20 2013-07-24 株式会社理光 一种图像处理装置及图像处理方法
JP5444026B2 (ja) * 2010-02-02 2014-03-19 オリンパスイメージング株式会社 撮影装置
JP2013025650A (ja) * 2011-07-23 2013-02-04 Canon Inc 画像処理装置、画像処理方法およびプログラム
JP5818552B2 (ja) * 2011-07-23 2015-11-18 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
CN104424640B (zh) * 2013-09-06 2017-06-20 格科微电子（上海）有限公司 对图像进行虚化处理的方法和装置
CN106504220B (zh) * 2016-08-19 2019-07-23 华为机器有限公司 一种图像处理方法及装置
CN107016639A (zh) * 2017-03-30 2017-08-04 努比亚技术有限公司 一种图像处理方法和装置
CN107454332B (zh) * 2017-08-28 2020-03-10 厦门美图之家科技有限公司 图像处理方法、装置及电子设备
CN108230333B (zh) * 2017-11-28 2021-01-26 深圳市商汤科技有限公司 图像处理方法、装置、计算机程序、存储介质和电子设备
CN108122195B (zh) * 2018-01-10 2021-10-08 北京小米移动软件有限公司 图片处理方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW384419B (en) * 1997-03-06 2000-03-11 Ind Tech Res Inst Method of application of diffraction to obtain special image effect using hologram and the apparatus
CN104463787A (zh) * 2014-12-11 2015-03-25 厦门美图之家科技有限公司 一种光斑虚化特效实现方法
CN108156378A (zh) * 2017-12-27 2018-06-12 努比亚技术有限公司 拍照方法、移动终端及计算机可读存储介质

Also Published As

Publication number Publication date
WO2020087729A1 (zh) 2020-05-07
CN109559272A (zh) 2019-04-02
TW202016876A (zh) 2020-05-01
US20210097651A1 (en) 2021-04-01
JP2022500792A (ja) 2022-01-04
SG11202012560XA (en) 2021-01-28

Similar Documents

Publication Publication Date Title
TWI777098B (zh) 一種圖像處理方法及裝置、電子設備、儲存介質
CN108898567B (zh) 图像降噪方法、装置及系统
CN109474780B (zh) 一种用于图像处理的方法和装置
WO2017016050A1 (zh) 一种图像的预览方法、装置及终端
CN108848367B (zh) 一种图像处理的方法、装置及移动终端
JP2020535758A (ja) 画像処理方法、装置、及び、デバイス
CN106412458A (zh) 一种图像处理方法和装置
US11132770B2 (en) Image processing methods and apparatuses, computer readable storage media and electronic devices
WO2018210318A1 (zh) 图像虚化处理方法、装置、存储介质及电子设备
WO2014146561A1 (zh) 缩略图生成方法及系统
CN111131688B (zh) 一种图像处理方法、装置及移动终端
CN109785264B (zh) 图像增强方法、装置及电子设备
CN109151329A (zh) 拍照方法、装置、终端及计算机可读存储介质
CN111163265A (zh) 图像处理方法、装置、移动终端及计算机存储介质
US10726524B2 (en) Low-resolution tile processing for real-time bokeh
CN108230333A (zh) 图像处理方法、装置、计算机程序、存储介质和电子设备
CN108230234A (zh) 图像虚化处理方法、装置、存储介质及电子设备
CN113012082A (zh) 图像显示方法、装置、设备及介质
CN104836957A (zh) 一种照片拍摄的处理方法及装置
CN110022430A (zh) 图像虚化方法、装置、移动终端及计算机可读存储介质
WO2022001648A1 (zh) 图像处理方法、装置、设备及介质
CN108495041B (zh) 一种用于电子终端的图像处理和显示方法、装置
CN111311481A (zh) 背景虚化方法、装置、终端设备及存储介质
CN105678696B (zh) 一种信息处理方法及电子设备
CN105574818B (zh) 一种景深渲染方法和装置

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent