TWI785258B - 人臉影像處理方法、裝置及儲存介質 - Google Patents
人臉影像處理方法、裝置及儲存介質 Download PDFInfo
- Publication number
- TWI785258B TWI785258B TW108125852A TW108125852A TWI785258B TW I785258 B TWI785258 B TW I785258B TW 108125852 A TW108125852 A TW 108125852A TW 108125852 A TW108125852 A TW 108125852A TW I785258 B TWI785258 B TW I785258B
- Authority
- TW
- Taiwan
- Prior art keywords
- deformation
- face
- face image
- deformed
- target
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims abstract description 73
- 238000000034 method Methods 0.000 title claims abstract description 29
- 230000000694 effects Effects 0.000 claims abstract description 43
- 230000001815 facial effect Effects 0.000 claims description 75
- 238000013507 mapping Methods 0.000 claims description 36
- 238000003672 processing method Methods 0.000 claims description 31
- 238000001514 detection method Methods 0.000 claims description 22
- 230000008859 change Effects 0.000 claims description 21
- 238000009877 rendering Methods 0.000 claims description 14
- 210000004709 eyebrow Anatomy 0.000 description 45
- 238000010586 diagram Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 13
- 210000000887 face Anatomy 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 238000004364 calculation method Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 210000000056 organ Anatomy 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000010276 construction Methods 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 4
- 230000001960 triggered effect Effects 0.000 description 4
- 238000007726 management method Methods 0.000 description 3
- 238000012952 Resampling Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 241000699666 Mus <mouse, genus> Species 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 238000002316 cosmetic surgery Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G06T3/18—
-
- G06T3/04—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
Abstract
本發明公開一種人臉影像處理方法、裝置及儲存介質,本發明獲取待處理的人臉圖像;接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型;根據操作類型確定形變的形變參數,並根據形變參數生成調節器;獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果;根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
Description
本發明涉及影像處理技術領域,具體涉及一種人臉影像處理方法、裝置及儲存介質。
隨著數碼相機、平板電腦及手機等終端的普及,拍照已經成為用戶個人日常生活中的普遍行為,而且對圖像中的人臉進行美容整形成為大多數愛美人士的需求,其中,對五官進行整形是最重要關鍵的一個環節。例如,可以對拍攝出來的圖像中的臉、眼、鼻、嘴、眉等五官區域進行一定程度的放大、縮小、拉長或變短等形變操作,使其五官看起來更加精緻好看。
在一些人臉圖像處理技術中,在對圖像中的人臉進行整形時,需要使用者透過手動點擊、移動、或拖拽等方式對其想要修改的人臉位置進行處理。例如,以進行瘦臉為例,用戶選中一張圖像之後,先選擇進入瘦臉模組,再選中瘦臉模組對應的某檔推動的細微性,然後在臉部某一區域的位置進行手動推動,當使用者鬆手之後,根據推動的距離和選中的細微性之間的關係,對這一區域做形變處理,使用者可以對這個區域反復執行不同的推動形變操作。用戶想要完成一個人臉形變重塑的操作,需要手動對多個不同的模組分別進行操作調整,而且每個模組單獨進行不同程度的手動處理。
上述技術中,由於需要使用者手動控制形變的區域,手動拖拽操作的力度及區域等很難把控,因此導致形變出來的效果常常不盡如人意,而且手動在人臉區域進行操作,很容易因為用戶手動的誤操作導致效果不理想,另外需要使用者多次手動操作,其步驟比較繁瑣。
本發明實施例提供一種人臉影像處理方法、裝置及儲存介質,旨在提高對人臉圖像進行處理的便捷性,及提升人臉圖像的處理效果。
為解決上述技術問題,本發明實施例提供以下技術方案:
一種人臉影像處理方法,包括:獲取待處理的人臉圖像;接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型;根據所述操作類型確定形變的形變參數,並根據所述形變參數生成調節器;獲取通過所述調節器對所述目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示所述目標人臉部位基於動態調節的變化效果;根據所述調節幅度確定調節參數,根據所述調節參數獲取形變後人臉圖像。
一種人臉影像處理裝置,包括:第一獲取單元、接收單元、生成單元、調節單元和第二獲取單元。所述第一獲取單元用於獲取待處理的人臉圖像。所述接收單元用於接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型。所述生成單元用於根據所述操作類型確定形變的形變參數,並根據所述形變參數生成調節器。所述調節單元用於獲取通過所述調節器對所述目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示所述目標人臉部位基於動態調節的變化效果;所述第二獲取單元用於根據所述調節幅度確定調節參數,根據所述調節參數獲取形變後人臉圖像。
一種儲存介質,所述儲存介質儲存有多條指令,所述指令適於處理器進行載入,以執行本發明實施例提供的任一種人臉影像處理方法中的步驟。
本發明實施例可以獲取待處理的人臉圖像,並接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型,例如可以對嘴巴寬度、眼睛大小或臉部胖瘦等進行形變操作,然後根據操作類型確定形變的形變參數,並根據形變參數生成調節器,此時可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進行動態調節,最後,可以根據調節幅度確定調節參數,並根據調節參數獲取形變後人臉圖像。該方案可以根據對各個人臉部位進行劃分,確定待形變的目標人臉部位,並通過形變參數生成調節器對目標人臉部位進行動態調節,並顯示目標人臉部位基於動態調節的變化效果供用戶參考,可以得到形變後人臉圖像,而無需使用者手動在人臉區域進行盲目推動操作,提高了對人臉圖像進行處理的便捷性,及提升人臉圖像的處理效果。
為了使本申請的目的、技術方案及優點更加清楚明白,以下結合附圖及實施例,對本申請進行進一步詳細說明。應當理解,此處所描述的具體實施例僅僅用以解釋本申請,並不用於限定本申請。
本發明實施例提供一種人臉影像處理方法、裝置及儲存介質。
請參閱圖1,圖1為本發明實施例所提供的人臉影像處理系統的場景示意圖,該人臉影像處理系統可以包括人臉影像處理裝置,該人臉影像處理裝置具體可以集成在平板電腦、手機、筆記型電腦、及照相機等具備儲存單元並安裝有微處理器而具有運算能力的終端中,例如,該終端可以獲取待處理的人臉圖像,例如,終端在接收到用戶輸入的人臉影像處理指令時,可以從終端本地獲取人臉圖像,或者向伺服器發送圖像獲取請求,並接收伺服器基於圖像獲取請求返回的人臉圖像。其中,終端本地包括終端本身或者與終端相連的設備。在得到人臉圖像後,終端可以偵測是否接收到操作指令,當終端接收到對人臉圖像中人臉的目標人臉部位進行形變的操作指令時,可以根據操作指令確定形變的操作類型。例如,終端可以對人臉圖像中的人臉進行特徵點檢測,得到各個人臉部位的特徵點,及根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位,根據接收到的形變請求生成形變操作介面,通過形變操作介面中的部位選擇介面接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令通過形變操作介面中的類型設置介面選擇形變的操作類型。然後,終端可以根據操作類型確定形變的形變參數,並根據形變參數生成調節器,例如,可以獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數,根據形變參數生成調節器,該形變參數可以包括形變中心、形變半徑、形變類型及形變強度等。其次,獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供用戶參考,最後,可以根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像;例如,可以對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域;根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域,根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像等等。
需要說明的是,圖1所示的人臉影像處理系統的場景示意圖僅僅是一個示例,本發明實施例描述的人臉影像處理系統以及場景是為了更加清楚的說明本發明實施例的技術方案,並不構成對於本發明實施例提供的技術方案的限定,本領域普通技術人員可知,隨著人臉影像處理系統的演變和新業務場景的出現,本發明實施例提供的技術方案對於類似的技術問題,同樣適用。
以下分別進行詳細說明。
在本實施例中,將從人臉影像處理裝置的角度進行描述,該人臉影像處理裝置具體可以集成在平板電腦、手機、筆記型電腦、及照相機等具備儲存單元並安裝有微處理器而具有運算能力的終端中。
一種人臉影像處理方法,包括:獲取待處理的人臉圖像;接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型;根據操作類型確定形變的形變參數,並根據形變參數生成調節器;獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果;根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
請參閱圖2,圖2是本發明一實施例提供的人臉影像處理方法的流程示意圖。該人臉影像處理方法可以包括:
在步驟S101中,獲取待處理的人臉圖像。
其中,待處理的人臉圖像中可以包含一張或多張人臉,還可以包括其他的物體,人臉圖像中包含的人臉可以是正面的人臉(即正臉),或者任意角度的人臉(即側臉)等。
人臉圖像的獲取方式可以包括:在拍照的過程中,人臉影像處理裝置通過拍照攝像頭採集到人臉圖像;或者是,人臉影像處理裝置從本機存放區空間中獲取預存的人臉圖像;或者是,人臉影像處理裝置從伺服器上的圖像資料庫中獲取到人臉圖像等;當然,人臉圖像也可以是通過其他方式獲取到,具體獲取方式在此處不作限定。
在步驟S102中,接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型。
人臉影像處理裝置可以即時或間隔預設時間偵測是否接收到操作指令,該操作指令用於指示對人臉圖像中人臉的目標人臉部位進行形變操作,該目標人臉部位即為待形變的人臉部位,其中,人臉部位可以包括眼睛、眉毛、鼻子、嘴巴及臉部等,每個人臉部位對應的形變的操作類型可以包括多種,例如,人臉部位對應的形變的操作類型可以包括對調整眉毛的角度、眉距、及位置等,調整嘴巴的大小、嘴寬、嘴唇的厚度、及位置等,調整鼻子的大小、鼻翼、鼻樑、鼻尖及位置等,調整眼睛的大小、眼高、眼距、傾斜度、亮眼程度及祛眼袋等,調整臉的整體輪廓、臉頰、下巴及額頭等。當接收到操作指令時,可以根據操作指令確定形變的操作類型;當未接收到操作指令時,可以不執行後續的根據操作指令確定形變的操作類型等操作。
在某些實施方式中,接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型的步驟之前,人臉影像處理方法還可以包括:對人臉圖像中的人臉進行特徵點檢測,得到各個人臉部位的特徵點;根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。
人臉影像處理裝置在獲取到待處理的人臉圖像後,可以採用人臉檢測及配准技術對人臉圖像中的人臉進行特徵點檢測,例如,可以對人臉圖像中的眼睛、鼻子、眉毛、嘴巴及臉部等各個人臉部位進行檢測,得到各個人臉部位的特徵點,特徵點可以是人臉部位的關鍵點的座標點。
例如,如圖3(a)所示,可以對人臉圖像中人臉的各個人臉部位進行檢測,得到各個人臉部位對應的特徵點,該特徵點可以在人臉的外部輪廓和各個人臉部位的邊緣或中心等,該特徵點的個數可以是90個、83個或68個等,具體個數可以根據實際需要進行靈活設置。基於對人臉部位進行特徵點檢測得到的各個人臉部位的特徵點,可以對各個人臉部位所在的區域進行劃分,從而可以形成臉部、嘴巴、鼻子、眼睛、及眉毛等區域,例如,如圖3(b)所示,示出了左眼角、右眼角、鼻子和嘴巴等區域。此時,可以根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位,例如,可以根據眉毛的8個特徵點確定人臉圖像中眉毛所在的區域。
對人臉圖像中人臉進行特徵點檢測,得到各個人臉部位的特徵點的步驟可以包括:對人臉圖像中的人臉進行識別,得到人臉區域;在人臉區域內對人臉部位進行檢測,得到各個人臉部位的特徵點。
具體地,人臉影像處理裝置可以先對人臉圖像中的人臉進行識別,例如,當人臉圖像中包括使用者A的人臉時,可以從人臉圖像中識別出使用者A的人臉所在的人臉區域1;當人臉圖像中包括使用者A、用戶B和用戶C的人臉時,可以從人臉圖像中識別出使用者A、用戶B和用戶C的人臉分別所在的人臉區域1、人臉區域2和人臉區域3;等等。
在得到人臉圖像中的人臉區域後,可以在人臉區域內對各個人臉部位進行檢測,例如,可以對人臉區域中左眼睛、右眼睛、鼻子、左眉毛、右眉毛、下巴及嘴巴等各個人臉部位進行檢測,得到各個人臉部位所在的區域,此時可以為各個人臉部位設置預設數量的特徵點,並根據各個人臉部位所在的區域獲取各個人臉部位的特徵點,例如,可以獲取左眉毛的8個特徵點,獲取鼻子的14個特徵點,獲取眼睛的9個特徵點等。當需要對多個人臉進行檢測時,可以在用戶A的人臉所在的人臉區域1內對各個人臉部位進行檢測,得到用戶A對應的各個人臉部位的特徵點;以及在用戶B的人臉所在的人臉區域2內對各個人臉部位進行檢測,得到用戶B對應的各個人臉部位的特徵點等。
在某些實施方式中,根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位的步驟可以包括:根據特徵點確定人臉圖像中各個人臉部位所在的區域;當接收到選擇指令時,獲取指令標識與區域標識之間的映射關係;根據映射關係確定與選擇指令的指令標識對應的區域標識,得到目的地區域標識;根據目的地區域標識確定人臉圖像中待形變人臉部位,得到目標人臉部位。
具體地,人臉影像處理裝置可以預先為每個選擇指令設置指令標識,以及為每個器官區域設置區域標識,並設置選擇指令的指令標識與各個人臉部位所在區域的區域標識之間的映射關係,其中,指令標識可以是選擇指令的編號或名稱等,區域標識可以是器官區域的編號或名稱等,例如,可以設置選擇指令1的指令標識1與眼睛的區域標識1之間的映射關係,以及設置選擇指令2的指令標識2與鼻子的區域標識2之間的映射關係,以及設置選擇指令3的指令標識3與嘴巴的區域標識3之間的映射關係;等等。在得到映射關係後,可以將指令標識與區域標識之間的映射關係儲存在本地或伺服器等。
人臉影像處理裝置在得到各個人臉部位的特徵點後,可以根據各個人臉部位的特徵點分別確定各個人臉部位所在的區域,例如,可以根據左眉毛的8個特徵點確定人臉圖像中左眉毛所在的區域,根據鼻子的14個特徵點確定人臉圖像中鼻子所在的區域,根據右眼睛的9個特徵點確定人臉圖像中右眼睛所在的區域,等等。
人臉影像處理裝置可以偵測是否接收到選擇指令,該選擇指令可以用於選擇待形變的人臉部位,當未接收到選擇指令時,可以不執行後續的獲取指令標識與區域標識之間的映射關係等操作;當接收到選擇指令時,可以從本地或伺服器獲取指令標識與區域標識之間的映射關係,以及獲取接收到的選擇指令的指令標識,然後根據映射關係確定與選擇指令的指令標識對應的區域標識,得到目的地區域標識,此時,可以根據目的地區域標識確定對應的區域,並根據該區域確定人臉圖像中待形變人臉部位,得到目標人臉部位。
在某些實施方式中,接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型的步驟包括:
接收形變請求,根據形變請求生成形變操作介面,其中形變操作介面包括部位選擇介面及類型設置介面;通過部位選擇介面接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令;根據操作指令通過類型設置介面選擇形變的操作類型。
具體地,人臉影像處理裝置可以偵測是否接收到形變請求,該形變請求用於觸發對人臉圖像中人臉的目標人臉部位進行形變操作。當接收到形變請求時,可以根據形變請求生成形變操作介面,在該形變操作介面內可以對待形變的目標人臉部位、操作類型及調節參數等進行選擇。其中,形變操作介面包括部位選擇介面及類型設置介面等,該部位選擇介面可以用於接收操作指令,類型設置介面可以用於選擇操作類型等。部位選擇介面及類型設置介面的形式可以根據實際需要進行靈活設置,例如可以是輸入文字方塊、選擇按鈕或選擇清單等形式。此時,人臉影像處理裝置可以通過部位選擇介面接收用戶對人臉圖像中人臉的目標人臉部位進行形變的操作指令,以及根據操作指令通過類型設置介面選擇形變的操作類型等。
在步驟S103中,根據操作類型確定形變的形變參數,並根據形變參數生成調節器。
其中,形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,調節器可以與一個或多個形變單元對應,每個形變單元均設置有形變參數,當通過調節器對目標人臉部位進行動態調節時,可以觸發調節器調用一個或多個形變單元,並根據調用的每個形變單元的形變參數對目標人臉部位進行動態調節等。該調節器可以包括可見的或不可見的調節器,其中,可見的調節器可以在顯示介面內進行顯示,可以包括滑動條形式或箭頭形式等,該可見的調節器可以正常顯示於顯示介面,也可以以隱藏按鈕的形式顯示於顯示介面,並可通過點擊隱藏按鈕顯示調節器;不可見的調節器可以不在顯示介面內進行顯示,例如,可以向左或向右滑動螢幕來控制調節器的調節幅度,或者向上或向下滑動螢幕來控制調節器的調節幅度等,大大節省了顯示介面的顯示空間。
在某些實施方式中,根據操作類型確定形變的形變參數,並根據形變參數生成調節器的步驟可以包括:獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數;根據形變參數生成調節器。
在某些實施方式中,獲取與操作類型對應的形變單元集合的步驟之前,該人臉影像處理方法還可以包括:為各個操作類型分別設置對應的形變單元集合,並建立每個操作類型與各自對應的形變單元集合之間的一一對應關係。
人臉影像處理裝置可以預先設置每個操作類型對應的每種形變所對應的形變單元集合,該形變單元集合中可以包括一個或多個形變單元。例如,對眉毛的眉距進行調整的操作類型可以對應n1個形變單元,對嘴巴大小進行調整的操作類型可以對應n2個形變單元,對鼻子位置進行調整的操作類型可以對應n3個形變單元,對眼睛的眼距進行調整的操作類型可以對應n4個形變單元,對臉部的整體輪廓進行調整的操作類型可以對應n5個形變單元等,n1、n2、n3、n4及n5的取值可以根據實際需要進行靈活設置。在為各個操作類型分別設置對應的形變單元集合後,可以建立每個操作類型與各自對應的形變單元集合之間的一一對應關係,例如,建立各個操作類型的標識與各自對應的形變單元集合的集合標識之間的對應關係,並將該對應關係儲存至終端或者伺服器上。
其中,形變單元的形狀、大小及位置等可以根據實際需要進行靈活設置,例如,一個形變單元集合中的每個形變單元進行可以均是圓形,每個形變單元的位置可以均不一樣,一個形變單元集合中可以存在一部分形變單元的大小一樣,而另一部分形變單元的大小不一樣等。例如,如圖4所示,圖4中的每個圓圈代表對應的每個形變單元。
需要說明的是,人臉影像處理裝置還可以為每個形變單元設置形變參數,該形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,其中,形變中心為形變單元的中心,形變半徑為形變單元的半徑,形變類型可以包括放大、縮小或推動等,形變強度可以包括放大的力度、縮小的力度或推動的力度等。該形變單元的形變參數可以用於對在該形變單元內的人臉部位按照該形變參數進行相應的形變操作。可以建立各個形變單元的形變參數與各自對應的形變單元之間的映射關係,並儲存形變參數與形變單元之間的映射關係。
在確定操作類型後,人臉影像處理裝置可以獲取與該操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數。
在某些實施方式中,獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數的步驟可以包括:獲取操作類型與形變單元集合之間的對應關係,基於對應關係確定與操作類型對應的形變單元集合;獲取形變單元集合中每個形變單元對應的形變中心、形變半徑、形變類型及形變強度。
由於人臉影像處理裝置預先設置了各個操作類型與各自對應的形變單元集合之間的一一對應關係,因此,人臉影像處理裝置可以從本地或伺服器等獲取各個操作類型與各自對應的形變單元集合之間的一一對應關係,並基於該對應關係確定與操作類型對應的形變單元集合。例如,可以獲取各個操作類型的標識與各自對應的形變單元集合的集合標識之間的對應關係,以及獲取操作類型的標識,然後根據該對應關係確定與該操作類型的標識對應的集合標識,並確定與該集合標識對應的形變單元集合,得到的該形變單元集合即為操作類型對應的形變單元集合。
在確定操作類型對應的形變單元集合後,可以獲取該形變單元集合中每個形變單元對應的形變參數。由於人臉影像處理裝置預先為每個形變單元設置形變參數,並儲存形變參數與形變單元之間的映射關係,因此,人臉影像處理裝置可以獲取形變參數與形變單元之間的映射關係,並根據形變參數與形變單元之間的映射關係獲取形變單元集合中每個形變單元對應的形變參數。其中,每個形變單元的形變參數可以包括形變中心、形變半徑、形變類型及形變強度等。在得到形變參數後,可以根據形變參數生成調節器。
在步驟S104中,獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果。
在生成調節器後,可以通過調節器對目標人臉部位進行動態調節。例如,可以通過調節器對眼睛進行第一幅度的放大,然後進行第二幅度的放大,再進行第三幅度的縮小等。此時,人臉影像處理裝置可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,例如,可以獲取向左滑動螢幕對臉頰部位進行動態調節的第一調節幅度,以及獲取向右滑動螢幕對臉頰部位進行動態調節的第二調節幅度等。其中,該調節幅度可以決定形變程度,可以是調節幅度越大,形變程度越大;調節幅度越小,形變程度越小。為了方便使用者即時觀察動態調節的效果,在對目標人臉部位進行動態調節的過程中,可以在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進一步進行動態調節,可以在短時間內得到用戶所需的效果,減少誤操作等。
在步驟S105中,根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
在某些實施方式中,根據調節幅度確定調節參數的步驟可以包括:獲取各個調節幅度與各個調節參數之間的映射關係;根據映射關係確定與調節幅度對應的調節參數。
人臉影像處理裝置可以預先設置各個調節幅度與各個調節參數之間的映射關係,當需要根據調節幅度確定調節參數時,可以根據該根據映射關係確定與調節幅度對應的調節參數。
在得到調節參數後,人臉影像處理裝置可以根據調節參數對待形變的目標人臉部位進行形變操作,得到形變後人臉圖像。例如,可以根據調節參數從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度等,根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的待形變的目標人臉部位的區域,以及按照形變類型及形變強度分別計算每個形變單元中包含的目標人臉部位的區域的調整位置(例如可以計算每個形變單元中包含的待形變的目標人臉部位的各個像素點的調整位置),並根據調整位置對目標人臉部位的區域進行形變操作。例如,可以按照每個形變單元的形變類型及形變強度分別計算形變單元中包含的待形變人臉部位的全部或局部像素點的移動位置,並根據移動位置對待形變的目標器官進行形變操作。
在某些實施方式中,根據調節參數獲取形變後人臉圖像的步驟可以包括:
對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域;根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像。
人臉影像處理裝置可以根據調節參數對待形變的目標人臉部位的各個像素點的調整位置進行計算,並根據計算得到的調整位置對目標人臉部位的各個像素點進行調整,以達到對目標人臉部位進行形變的目的,由於目標人臉部位可能包含的像素點較多,因此為了減少計算量,提高處理效率,可以僅計算目標人臉部位中部分像素點的調整位置,例如可以對人臉圖像進行網格劃分,然後僅計算目標人臉部位所在的網格區域頂點的調整位置,也可以達到對目標人臉部位進行形變的目的。
具體地,首先可以根據預設演算法對人臉圖像進行網格劃分,得到多個網格區域,例如,如圖5(a)所示,可以將人臉圖像劃分為14*18個網格。其中,預設演算法可以根據實際需要進行靈活設置,例如,可以根據人臉圖像的大小進行網格劃分,例如,可以將人臉圖像劃分為50*66個矩形的網格,或者可以將人臉圖像劃分為60*80個矩形的網格等;或者是,根據人臉圖像中人臉部位的大小進行網格劃分等。然後,可以根據對人臉圖像中的人臉部位進行特徵點檢測所得到的各個人臉部位的特徵點,確定待形變的目標人臉部位所分佈在的網格區域,得到目標網格區域,例如,待形變的目標人臉部位可以分佈在6個網格區域或18個網格區域等,即目標網格區域可以包括6個網格區域或18個網格區域等。其次,確定待形變的目標人臉部位對應的形變單元集合中每個形變單元所包含的目標網格區域,根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域。例如,當待形變的目標人臉部位A對應的形變單元集合1包括3個形變單元,且待形變的目標人臉部位A對應的目標網格區域包括6個網格區域時,可以根據調節參數對形變單元1包含的1個網格區域進行形變操作,根據調節參數對形變單元2包含的3個網格區域進行形變操作,以及根據調節參數對形變單元3包含的2個網格區域進行形變操作,從而可以得到形變後網格區域。其中,在各個形變單元進行形變操作的過程中,在對每個形變單元所包含的目標網格區域進行形變後,可以對每個形變單元所對應的形變效果進行融合等處理,以使得得到的形變後人臉部位可以達到平滑效果。最後,可以根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像,例如,如圖5(b)所示。
在某些實施方式中,根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域的步驟可以包括:
根據調節參數分別計算每個形變單元中包含的目標網格區域的調整位置;根據調整位置對目標網格區域進行調整,得到形變後網格區域。
在對目標網格區域進行形變操作的過程中,可以根據調節參數分別計算每個形變單元中包含的目標網格區域的調整位置,例如,如圖6所示,可以根據調節參數確定形變參數,並根據形變參數中的形變中心c及形變半徑r確定每個形變單元中包含的目標網格區域,然後,根據形變參數中的形變類型及形變強度等計算目標網格區域的頂點的調整位置,並根據調整位置對目標網格區域進行調整,得到形變後網格區域。可以僅對網格區域的頂點位置進行調整,從而提高了處理效率。
在某些實施方式中,根據調節參數分別計算每個形變單元中包含的目標網格區域的調整位置的步驟可以包括:
根據調節參數確定每個形變單元對應的形變參數,從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度;根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的目標網格區域;按照形變類型及形變強度分別計算每個形變單元中包含的目標網格區域的調整位置。
具體地,在通過調節器對目標人臉部位進行動態調節後,可以確定該動態調節對應的調節幅度,並根據調節幅度確定調節參數,其中,調節參數可以包括一個或多個形變單元對應的調節參數,即一個調節幅度可以確定一組或多組調節參數,每組調節參數即為每個形變單元對應的形變參數。即當通過調節器對目標人臉部位進行動態調節時,可以觸發調節器調用一個或多個形變單元,並根據調用的每個形變單元的形變參數對目標人臉部位進行動態調節等。此時可以根據調節參數確定每個形變單元對應的形變參數,由於形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,因此人臉影像處理裝置可以從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度等,其中,形變中心為形變單元的中心,形變半徑為形變單元的半徑,形變類型可以包括放大、縮小或推動等,形變強度可以包括放大的力度、縮小的力度或推動的力度等,該形變中心、形變半徑及形變類型可以根據形變單元的需要預先設置,在同一形變單元內距離形變單元中心越近,形變強度越大,反之距離形變單元中心越遠,形變強度越小。此時,人臉影像處理裝置可根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的目標網格區域。然後按照形變類型及形變強度分別計算每個形變單元中包含的目標網格區域的頂點或多個像素點的調整位置。
例如,如圖7所示,當需要對右眼睛的寬度進行調整時,可以根據調節參數獲取與右眼睛對應的形變單元集合,並獲取該形變單元集合中每個形變單元對應的形變參數,以及對人臉圖像進行網格劃分,並確定右眼睛所在的網格區域,根據每個形變單元對應的形變參數,分別計算每個形變單元中包含的右眼睛所在的網格區域的調整位置。例如,可以從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度等,根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的右眼睛所在的網格區域,然後按照形變類型及形變強度分別計算每個形變單元中包含的網格區域的頂點的調整位置。其中,網格區域的頂點的調整位置的計算方法可以為:
x2
= (x1
– center_x) * a* mask * adjustValue
y2
= (y1
– center_y) * a* mask * adjustValue
其中,x2
表示頂點調整位置的x值(即偏移後的x軸方向上的位置),x1
表示頂點調整前的x值,center_x表示網格區域中心的x值,a表示常係數,a可以設置為1.3,或者其取值可以實際需要進行靈活設置,mask表示形變強度,adjustValue表示形變程度值,該形變程度值可以是使用者根據自己的需求調節形變強度滑竿的幅度生成的,y2
表示頂點調整位置的y值(即偏移後的y軸方向上的位置),y1
表示頂點調整前的y值,center_y表示網格區域中心的y值。此時,可以根據調整位置(x2
,y2
)對右眼睛所在的網格區域進行調整,得到形變後網格區域,根據形變後網格區域構建形變後右眼睛。如圖7(a)中,右眼睛處的實線圍成的區域為形變前的右眼睛區域,虛線圍成的區域為形變後的右眼睛區域,如圖7(b)中,實線圍成區域內的頂點(即像素點)可以向實線外移動,擴大為虛線圍成的區域,得到形變後的右眼睛。
在某些實施方式中,根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像的步驟可以包括:
對形變後網格區域中的像素進行插值處理,得到形變後網格區域對應的像素值;根據形變後網格區域構建形變後人臉部位,並根據像素值對形變後人臉部位進行像素渲染,得到形變後人臉圖像。
在確定形變後網格區域後,可以進行人臉圖像像素點的移動渲染,例如,可以使用最近鄰插值、雙線性插值、像素區域關係進行重採樣、雙三次插值、以及其他插值方法等,對形變後網格區域中的像素進行插值處理,得到形變後網格區域對應的像素值。然後根據形變後網格區域構建形變後人臉部位,並根據像素值對形變後人臉部位進行像素渲染,得到形變後人臉圖像。
其中,人臉部位形變可以是基於圖像渲染原理,如圖8所示,圖像渲染的圖像渲染管線應用到形變的場景下,簡單直觀的表現就是移動像素點的位置。具體的做法可以是:先把人臉圖像劃分成多個網格區域,例如9:16比例的圖像可以分成50*66個網格區域。然後將載入的網格區域的頂點陣列作為輸入傳遞給頂點著色器,在頂點著色vertex shader中,按照需要形變的形狀修改網格區域的頂點位置。在使用渲染管線過程中,vertex shader負責確定頂點位置,在vertex shader中可以按照形變規則(即各個形變單元的形變參數)調整網格區域的頂點的座標,片段著色fragment shader負責每個像素繪製,每個網格區域內部的像素按照頂點的座標做差值,最後把修改過的網格頂點位置座標轉換到螢幕坐標系中(即投影到螢幕上進行顯示)。
由上可知,本發明實施例可以獲取待處理的人臉圖像,並接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型,例如可以對嘴巴寬度、眼睛大小或臉部胖瘦等進行形變操作,然後根據操作類型確定形變的形變參數,並根據形變參數生成調節器,此時可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進行動態調節,最後,可以根據調節幅度確定調節參數,並根據調節參數獲取形變後人臉圖像。該方案可以根據對各個人臉部位進行劃分,確定待形變的目標人臉部位,並通過形變參數生成調節器對目標人臉部位進行動態調節,並顯示目標人臉部位基於動態調節的變化效果供用戶參考,可以得到形變後人臉圖像,而無需使用者手動在人臉區域進行盲目推動操作,提高了對人臉圖像進行處理的便捷性,及提升人臉圖像的處理效果。
根據上述實施例所描述的方法,以下將舉例作進一步詳細說明。
本實施例以人臉影像處理裝置為終端為例,終端可以對人臉圖像中的人臉部位進行形變操作。請參閱圖9,圖9為本發明實施例提供的人臉影像處理方法的流程示意圖。該方法流程可以包括:
S201、終端獲取待處理的人臉圖像,對人臉圖像中人臉進行特徵點檢測,得到各個人臉部位的特徵點。
其中,終端可以預先安裝影像處理的應用程式(Application,APP),在開啟該APP後,可以通過該APP載入待處理的人臉圖像,該人臉圖像可以是終端開啟拍照攝像頭採集到的人臉圖像,或者是,終端從本地或伺服器上獲取到的人臉圖像等,該人臉圖像中可以包含一張或多張人臉,還可以包括其他的物體,人臉圖像中包含的人臉可以是正臉或側臉等。該人臉部位可以包括眼睛、眉毛、鼻子、嘴巴及臉部等。
在獲取到待處理的人臉圖像後,終端可以對人臉圖像中的人臉部位進行特徵點檢測,例如,可以對人臉圖像中眼睛、鼻子、眉毛、嘴巴及臉部等各個人臉部位進行檢測,得到各個人臉部位的特徵點,例如,如圖3(a)所示。該特徵點可以在人臉的外部輪廓和各個人臉部位的邊緣或中心等,該特徵點的個數可以是90個或83個等,具體個數可以根據實際需要進行靈活設置。
S202、終端根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。
基於對人臉部位進行特徵點檢測得到的各個人臉部位的特徵點,可以對各個人臉部位所在的區域進行劃分,從而可以形成臉部、嘴巴、鼻子、眼睛、及眉毛等區域,例如,如圖3(b)所示,示出了左眼角、右眼角、鼻子和嘴巴等區域。此時,終端可以根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。例如,當人臉中各個器官的特徵點使用90個座標點進行描述時,可以根據臉部輪廓對應的21個特徵點確定人臉圖像中臉部輪廓所在的區域,根據左眼睛對應的8個特徵點確定人臉圖像中左眼睛所在的區域,根據右眼睛對應的8個特徵點確定人臉圖像中右眼睛所在的區域,根據瞳孔對應的2個特徵點確定人臉圖像中瞳孔所在的區域,根據左眉毛對應的8個特徵點確定人臉圖像中左眉毛所在的區域,根據右眉毛對應的8個特徵點確定人臉圖像中右眉毛所在的區域,根據嘴巴對應的22個特徵點確定人臉圖像中嘴巴所在的區域,根據鼻子對應的13個特徵點確定人臉圖像中鼻子所在的區域等。
S203、終端接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型。
其中,每個人臉部位對應的形變的操作類型可以包括多種,例如,人臉部位對應的形變的操作類型可以包括對調整眉毛的角度、眉距、及位置等,調整嘴巴的大小、嘴寬、嘴唇的厚度、及位置等,調整鼻子的大小、鼻翼、鼻樑、鼻尖及位置等,調整眼睛的大小、眼高、眼距、傾斜度、亮眼程度及祛眼袋等,調整臉整體輪廓、臉頰、下巴及額頭等。
在載入人臉圖像後,例如,如圖10所示,終端可以在人臉圖像的顯示介面內顯示臉、眼、鼻、嘴、及眉等人臉部位列表供用戶選擇,在每類人臉部位下,可以再細分為二級部位,例如,臉可以對應分為整體、臉頰、下巴、及額頭等二級部位,眼可以對應分為大小、眼高、眼距、傾斜、亮眼及祛眼袋等二級部位,等等。
終端可以基於顯示的清單接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,例如,終端可以即時或間隔預設時間偵測是否接收到操作指令,如圖10(a)所示,當用戶選擇臉及其對應的整體時,可以生成操作指令,或者,如圖10(b)所示,當用戶選擇眼及其對應的眼高時,可以生成操作指令等。當接收到操作指令時,可以根據操作指令確定形變的操作類型。
S204、終端獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數,根據形變參數生成調節器。
其中,形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,調節器可以與一個或多個形變單元對應,每個形變單元均設置有形變參數,當通過調節器對目標人臉部位進行動態調節時,可以觸發調節器調用一個或多個形變單元,並根據調用的每個形變單元的形變參數對目標人臉部位進行動態調節等。該調節器可以包括可見的或不可見的調節器,其中,可見的調節器可以在顯示介面內進行顯示,可以包括滑動條形式或箭頭形式等,該可見的調節器可以正常顯示於顯示介面,也可以以隱藏按鈕的形式顯示於顯示介面,並可通過點擊隱藏按鈕顯示調節器;不可見的調節器可以不在顯示介面內進行顯示,例如,可以向左或向右滑動螢幕來控制調節器的調節幅度,或者向上或向下滑動螢幕來控制調節器的調節幅度等。
終端可以預先設置每個操作類型對應的每種形變所對應的形變單元集合,該形變單元集合中可以包括一個或多個形變單元。例如,對眉毛進行眉距的調整可以包括N1個形變單元,對眼睛的眼距進行調整可以包括N2個形變單元,對臉部的整體輪廓進行調整可以包括N3個形變單元等,N1、N2、及N3的取值可以根據實際需要進行靈活設置。在為各個操作類型分別設置對應的形變單元集合後,可以建立每個操作類型與各自對應的形變單元集合之間的一一對應關係,例如,建立各個操作類型的標識與各自對應的形變單元集合的集合標識之間的對應關係,並將該對應關係儲存至終端或者伺服器上。其中,形變單元的形狀、大小及位置等可以根據實際需要進行靈活設置,例如,一個形變單元集合中的每個形變單元進行可以均是圓形,每個形變單元的位置可以均不一樣,一個形變單元集合中每個形變單元的大小可以一樣,也可以不一樣。例如,如圖4所示,圖4中的每個圓圈代表對應的每個形變單元。
終端還可以為每個形變單元設置形變參數,該形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,可以建立各個形變單元的形變參數與各自對應的形變單元之間的映射關係,並儲存形變參數與形變單元之間的映射關係。在確定操作類型後,終端可以從本地或伺服器等獲取各個操作類型與各自對應的形變單元集合之間的一一對應關係,並基於該對應關係確定與操作類型對應的形變單元集合。
在確定操作類型對應的形變單元集合後,終端可以獲取形變參數與形變單元之間的映射關係,並根據形變參數與形變單元之間的映射關係獲取形變單元集合中每個形變單元對應的形變參數,在得到形變參數後,可以根據形變參數生成調節器。其中,每個形變單元的形變參數可以包括形變中心、形變半徑、形變類型、形變強度及形變程度等,該形變中心為形變單元的中心,形變半徑為形變單元的半徑,形變類型可以包括放大、縮小或推動等,形變強度可以包括放大的力度、縮小的力度或推動的力度,該形變程度可以是通過顯示介面內的滑竿來確定。該形變單元的形變參數可以用於對在該形變單元內的人臉部位按照該形變參數進行相應的形變操作。
S205、終端獲取通過調節器對目標人臉部位進行動態調節的調節幅度,根據調節幅度確定調節參數,並在顯示介面中展示目標人臉部位基於動態調節的變化效果。
在生成調節器後,終端可以通過調節器對目標人臉部位進行動態調節,此時,終端可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,例如,可以獲取向左滑動螢幕對臉頰部位進行動態調節的第一調節幅度,以及獲取向右滑動螢幕對臉頰部位進行動態調節的第二調節幅度等。為了方便使用者即時觀察動態調節的效果,在對目標人臉部位進行動態調節的過程中,可以在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進一步進行動態調節,可以在短時間內得到用戶所需的效果。
S206、終端對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域。
終端可以根據預設演算法對人臉圖像進行網格劃分,得到多個網格區域,例如,如圖5(a)所示,可以將人臉圖像劃分為14*18個網格。當然,該預設演算法也可以根據實際需要進行靈活設置,例如,可以根據人臉圖像的大小進行網格劃分,例如,可以將人臉圖像劃分為50*66個矩形的網格,或者可以將人臉圖像劃分為60*80個矩形的網格等;或者是,根據人臉圖像中人臉部位的大小進行網格劃分等。然後,可以根據對人臉圖像中的人臉部位進行特徵點檢測所得到的各個人臉部位的特徵點,確定待形變的目標人臉部位所分佈在的網格區域,得到目標網格區域,例如,圖5中待形變的鼻子可以分佈在8個網格區域,或者待形變的嘴巴可以分佈在4個網格區域等。
終端可以確定待形變的目標人臉部位對應的形變單元集合中每個形變單元所包含的目標網格區域,根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域。例如,如圖5(b)所示,當待形變的臉頰對應的形變單元集合包括7個形變單元,且臉頰對應的目標網格區域包括20個網格區域(即圖5(b)中標有資料1至20所對應的網格區域)時,此時在通過對臉頰進行調節的調節器對臉頰進行動態調節後,可以確定該動態調節對應的調節幅度,並根據調節幅度確定調節參數,其中,調節參數可以包括一個或多個形變單元對應的調節參數,由於待形變的臉頰對應的形變單元集合包括7個形變單元,因此,該調節幅度可以對應這7個形變單元的調節參數,此時可以根據對臉頰進行調節的調節器的調節幅度確定這7個形變單元的調節參數,該調節參數可以包括這7個形變單元的形變中心、形變半徑、形變類型、形變強度及形變程度等形變參數,然後可以根據形變單元1對應的形變參數對其包含的S1個網格區域(包括標有資料1至4所對應的網格區域)進行形變操作,根據形變單元2對應的形變參數對其包含的S2個網格區域(包括標有資料5至7所對應的網格區域)進行形變操作,以及根據形變單元3至7對應的形變參數分別對其包含的S3、S4、S5、S6及S7個網格區域進行形變操作,從而可以得到形變後網格區域,其中S1至S7的累加值為20,這7個形變單元進行形變操作的過程中,可以對每個形變單元所對應的形變進行效果融合等處理,最後,可以根據形變後網格區域構建形變後人臉部位,以使得形變後人臉部位可以達到平滑效果。
具體地,可以根據調節參數確定每個形變單元對應的形變參數,由於形變參數可以包括形變中心、形變半徑、形變類型、形變強度及形變程度等,因此終端可以從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型、形變強度及形變程度等,其中,該形變中心、形變半徑及形變類型可以根據形變單元的需要預先設置,在同一形變單元內距離形變單元中心越近,形變強度越大,反之距離形變單元中心越遠,形變強度越小;形變程度可以通過滑竿的滑動位置來確定,滑竿的滑動按鈕距離原點越遠,形變程度越大,反之滑竿的滑動按鈕距離原點越近,形變程度越小。此時,終端可以根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的目標網格區域。然後按照形變類型、形變強度及形變程度分別計算每個形變單元中包含的目標網格區域的頂點或多個像素點的調整位置。
S207、終端根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域。
例如,當需要對右眉毛進行旋轉時,可以根據調節參數獲取與右眼眉毛對應的形變單元集合,並獲取該形變單元集合中每個形變單元對應的形變參數,以及對人臉圖像進行網格劃分,並確定右眼眉毛所在的網格區域,根據每個形變單元對應的形變參數,分別計算每個形變單元中包含的右眉毛所在的網格區域的調整位置。例如,可以從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度等,根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的右眉毛所在的網格區域,然後按照形變類型及形變強度分別計算每個形變單元中包含的網格區域的頂點的調整位置。其中,右眉毛網格區域的頂點的調整位置的計算方法可以如下:
rotatedPoint=leftEyebrowCenter.xy+rotate2DPoint(point.xy-leftEyebrowCenter.xy,-eyebrowTiltAngle)
vec2 rotate2DPoint(vec2 point,float angle)
{
return vec2(cos(angle)*point.x-sin(angle)*point.y,sin(angle)*point.x+cos(angle)*point.y);
}
其中,rotatedPoint表示右眉毛對應的旋轉向量,包括了右眉毛所在網格區域的各個頂點的旋轉角度或右眉毛各個像素點的旋轉角度,leftEyebrowCenter.xy表示右眉毛的中點位置(即需要計算的網格區域的中點),point.xy表示當前需要計算的像素點(即網格區域的頂點)的位置資訊,eyebrowTiltAngle表示旋轉角度,vec2 point表示需要計算的像素點,與point.xy對應,angle表示旋轉角度,與eyebrowTiltAngle對應,return表示返回,cos表示餘弦函數,point.x表示需要計算的像素點的x值,sin表示正弦函數,point.y表示需要計算的像素點的y值。此時,可以根據調整位置對右眉毛所在的網格區域進行調整,得到形變後網格區域,根據形變後網格區域構建形變後右眉毛,實現了調整眉毛的旋轉,例如,如圖11(a)所示,可以對右眉毛進行形變操作。由於僅計算右眉毛所在的網格區域頂點的調整位置,而不需要計算右眉毛各個像素點的調整位置,因此可以減少計算量及提高處理效率。
S208、終端根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像。
終端可以根據形變後網格區域構建形變後人臉部位,並利用圖像渲染原理對形變後人臉部位進行像素渲染,得到形變後人臉圖像,例如,對形變後網格區域中的像素進行插值處理,得到形變後網格區域對應的像素值;根據形變後網格區域構建形變後人臉部位,並根據像素值對形變後人臉部位進行像素渲染,得到形變後人臉圖像。
在得到形變後人臉圖像後,終端可以通過對比按鈕切換顯示形變前的人臉圖像及形變後的人臉圖像,以方便使用者對形變前的人臉圖像及形變後的人臉圖像進行對比。另外,終端還可以分屏對形變前的人臉圖像及形變後的人臉圖像進行顯示,如圖11(b)所示,終端可以將顯示幕幕分為第一顯示幕幕和第二顯示幕幕,並在第一顯示幕幕內顯示形變前的人臉圖像,以及在第二顯示幕幕內顯示形變後的人臉圖像。
需要說明的是,終端可以對不同的人臉部位進行形變操作,最終顯示不同的人臉部位形變後疊加效果,例如,如圖10所示,終端可以先對人臉圖像中臉部的整體進行瘦臉操作,得到瘦臉後的人臉圖像,然後在該瘦臉後的人臉圖像中對眼睛的眼高進行調整,從而得到既瘦臉又調整眼高後的人臉圖像。
本發明實施例中,可以根據對各個人臉部位進行劃分,確定待形變的目標人臉部位,並通過待形變的目標人臉部位對應的形變單元集合中每個形變單元對應的形變參數對目標人臉部位進行形變操作,以得到形變後人臉圖像,而無需使用者手動在人臉區域進行推動操作,打破了傳統的各個人臉部位分散操作的弊端,可以有效的減少用戶手動誤操作導致的效果不理想,得到更加符合預期的形變後人臉圖像;從而通過對人臉圖像中的人臉部位進行精准檢測,以對人臉部位區域進行劃分,可以實現針對不同人臉部位區域的精確控制,另外加上即時人臉部位的形變,達到讓用戶可以通過簡單的選中需要形變的人臉部位區域,再通過調節器就可以完成自動形變的目的,提高了使用者操作便捷性,也保證了人臉圖像進行形變重塑的良好效果,還可以在同一個動作頁面內即時看到形變的效果,極大的提高了對人臉圖像進行處理的便捷性及效率。
為便於更好的實施本發明實施例提供的人臉影像處理方法,本發明實施例還提供一種基於上述人臉影像處理方法的裝置。其中名詞的含義與上述人臉影像處理方法中相同,具體實現細節可以參考方法實施例中的說明。
請參閱圖12,圖12為本發明實施例提供的人臉影像處理裝置的結構示意圖,其中該人臉影像處理裝置可以包括第一獲取單元301、接收單元302、生成單元303、調節單元304及第二獲取單元305等。
其中,第一獲取單元301,用於獲取待處理的人臉圖像。
其中,待處理的人臉圖像中可以包含一張或多張人臉,還可以包括其他的物體,人臉圖像中包含的人臉可以是正臉,或者任意角度的側臉等。
第一獲取單元301獲取人臉圖像的方式可以包括:在拍照的過程中,通過拍照攝像頭採集到人臉圖像;或者是,從本機存放區空間中獲取預存的人臉圖像;或者是,從伺服器上的圖像資料庫中獲取到人臉圖像等;當然,人臉圖像也可以是通過其他方式獲取到,具體獲取方式在此處不作限定。
接收單元302,用於接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型。
接收單元302可以即時或間隔預設時間偵測是否接收到操作指令,該操作指令用於指示對人臉圖像中人臉的目標人臉部位進行形變操作,該目標人臉部位即為待形變的人臉部位。其中,人臉部位可以包括眼睛、眉毛、鼻子、嘴巴及臉部等。每個人臉部位對應的形變的操作類型可以包括多種。例如,人臉部位對應的形變的操作類型可以包括調整眉毛的角度、眉距、及位置等,調整嘴巴的大小、嘴寬、嘴唇的厚度、及位置等,調整鼻子的大小、鼻翼、鼻樑、鼻尖及位置等,調整眼睛的大小、眼高、眼距、傾斜度、亮眼程度及祛眼袋等,調整臉的整體輪廓、臉頰、下巴及額頭等。當接收到操作指令時,接收單元302可以根據操作指令確定形變的操作類型;當未接收到操作指令時,可以不執行後續的根據操作指令確定形變的操作類型等操作。
在某些實施方式中,如圖14所示,人臉影像處理裝置還可以包括檢測單元306和確定單元307。
檢測單元306用於對人臉圖像中的人臉進行特徵點檢測,得到各個人臉部位的特徵點。
確定單元307用於根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。
在獲取到待處理的人臉圖像後,檢測單元306可以採用人臉檢測及配准技術對人臉圖像中的人臉進行特徵點檢測,例如,可以對人臉圖像中的眼睛、鼻子、眉毛、嘴巴及臉部等各個人臉部位進行檢測,得到各個人臉部位的特徵點,特徵點可以是人臉部位的關鍵點的座標點。此時,確定單元307可以根據特徵點確定人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。
在某些實施方式中,確定單元307具體可以用於:根據特徵點確定人臉圖像中各個人臉部位所在的區域;當接收到選擇指令時,獲取指令標識與區域標識之間的映射關係;根據映射關係確定與選擇指令的指令標識對應的區域標識,得到目的地區域標識;根據目的地區域標識確定人臉圖像中待形變人臉部位,得到目標人臉部位。
接收單元302具體可以用於:接收形變請求,根據形變請求生成形變操作介面,其中形變操作介面包括部位選擇介面及類型設置介面;通過部位選擇介面接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令;根據操作指令通過類型設置介面選擇形變的操作類型。
具體地,接收單元302可以偵測是否接收到形變請求,該形變請求用於觸發對人臉圖像中人臉的目標人臉部位進行形變操作。當接收到形變請求時,可以根據形變請求生成形變操作介面,在該形變操作介面內可以對待形變的目標人臉部位、操作類型及調節參數等進行選擇。其中,形變操作介面包括部位選擇介面及類型設置介面等。部位選擇介面可以用於接收操作指令,類型設置介面可以用於選擇操作類型等。部位選擇介面及類型設置介面的形式可以根據實際需要進行靈活設置,例如可以是輸入文字方塊、選擇按鈕或選擇清單等形式。此時,接收單元302可以通過部位選擇介面接收用戶對人臉圖像中人臉的目標人臉部位進行形變的操作指令,以及根據操作指令通過類型設置介面選擇形變的操作類型等。
生成單元303,用於根據操作類型確定形變的形變參數,並根據形變參數生成調節器。
其中,形變參數可以包括形變中心、形變半徑、形變類型及形變強度等。調節器可以與一個或多個形變單元對應,每個形變單元均設置有形變參數。當通過調節器對目標人臉部位進行動態調節時,可以觸發調節器調用一個或多個形變單元,並根據調用的每個形變單元的形變參數對目標人臉部位進行動態調節等。該調節器可以包括可見的或不可見的調節器,其中,可見的調節器可以在顯示介面內進行顯示,可以包括滑動條形式或箭頭形式等,該可見的調節器可以正常顯示於顯示介面,也可以以隱藏按鈕的形式顯示於顯示介面,並可通過點擊隱藏按鈕顯示調節器;不可見的調節器可以不在顯示介面內進行顯示,例如,可以向左或向右滑動螢幕來控制調節器的調節幅度,或者向上或向下滑動螢幕來控制調節器的調節幅度等,大大節省了顯示介面的顯示空間。
在某些實施方式中,如圖13所示,生成單元303可以包括:
獲取子單元3031,用於獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數;
生成子單元3032,用於根據形變參數生成調節器。
在某些實施方式中,人臉影像處理裝置還可以包括:建立單元,用於為各個操作類型分別設置對應的形變單元集合,並建立每個操作類型與各自對應的形變單元集合之間的一一對應關係。
獲取子單元3031具體用於:獲取操作類型與形變單元集合之間的對應關係,基於對應關係確定與操作類型對應的形變單元集合;獲取形變單元集合中每個形變單元對應的形變中心、形變半徑、形變類型及形變強度。
建立單元可以預先設置每個操作類型對應的每種形變所對應的形變單元集合,該形變單元集合中可以包括一個或多個形變單元。例如,對眉毛的眉距進行調整的操作類型可以對應n1個形變單元,對嘴巴大小進行調整的操作類型可以對應n2個形變單元,對鼻子位置進行調整的操作類型可以對應n3個形變單元等,n1、n2、及n3的取值可以根據實際需要進行靈活設置。在為各個操作類型分別設置對應的形變單元集合後,建立單元可以建立每個操作類型與各自對應的形變單元集合之間的一一對應關係,例如,建立各個操作類型的標識與各自對應的形變單元集合的集合標識之間的對應關係,並將該對應關係儲存至終端或者伺服器上。
其中,形變單元的形狀、大小及位置等可以根據實際需要進行靈活設置,例如,一個形變單元集合中的每個形變單元進行可以均是圓形,每個形變單元的位置可以均不一樣,一個形變單元集合中可以存在一部分形變單元的大小一樣,而另一部分形變單元的大小不一樣等。例如,如圖4所示,圖4中的每個圓圈代表對應的每個形變單元。
需要說明的是,還可以為每個形變單元設置形變參數,該形變參數可以包括形變中心、形變半徑、形變類型及形變強度等,其中,形變中心為形變單元的中心,形變半徑為形變單元的半徑,形變類型可以包括放大、縮小或推動等,形變強度可以包括放大的力度、縮小的力度或推動的力度等。該形變單元的形變參數可以用於對在該形變單元內的人臉部位按照該形變參數進行相應的形變操作。可以建立各個形變單元的形變參數與各自對應的形變單元之間的映射關係,並儲存形變參數與形變單元之間的映射關係。
在確定操作類型後,獲取子單元3031可以獲取與該操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數。例如,獲取子單元3031可以從本地或伺服器等獲取各個操作類型與各自對應的形變單元集合之間的一一對應關係,並基於該對應關係確定與操作類型對應的形變單元集合。例如,可以獲取各個操作類型的標識與各自對應的形變單元集合的集合標識之間的對應關係,以及獲取操作類型的標識,然後根據該對應關係確定與該操作類型的標識對應的集合標識,並確定與該集合標識對應的形變單元集合,得到的該形變單元集合即為操作類型對應的形變單元集合。
在確定操作類型對應的形變單元集合後,獲取子單元3031可以獲取該形變單元集合中每個形變單元對應的形變參數。由於預先為每個形變單元設置形變參數,並儲存形變參數與形變單元之間的映射關係,因此,人臉影像處理裝置可以獲取形變參數與形變單元之間的映射關係,並根據形變參數與形變單元之間的映射關係獲取形變單元集合中每個形變單元對應的形變參數。其中,每個形變單元的形變參數可以包括形變中心、形變半徑、形變類型及形變強度等。在得到形變參數後,生成子單元3032可以根據形變參數生成調節器。
調節單元304,用於獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果。
在生成調節器後,可以通過調節器對目標人臉部位進行動態調節,例如,可以通過調節器對眼睛進行第一幅度的放大,然後進行第二幅度的放大,再進行第三幅度的縮小等。此時,調節單元304可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,例如,可以獲取向左滑動螢幕對臉頰部位進行動態調節的第一調節幅度,以及獲取向右滑動螢幕對臉頰部位進行動態調節的第二調節幅度等。其中,該調節幅度可以決定形變程度,可以是調節幅度越大,形變程度越大;調節幅度越小,形變程度越小。為了方便使用者即時觀察動態調節的效果,在對目標人臉部位進行動態調節的過程中,可以在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進一步進行動態調節,可以在短時間內得到用戶所需的效果,減少誤操作等。
第二獲取單元305,用於根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
在某些實施方式中,第二獲取單元305可以包括:確定子單元,用於獲取各個調節幅度與各個調節參數之間的映射關係,根據映射關係確定與調節幅度對應的調節參數。
在某些實施方式中,如圖15所示,第二獲取單元305可以包括劃分子單元3051、形變子單元3052和構建子單元3053。
劃分子單元3051用於對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域;
形變子單元3052用於根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;
構建子單元3053用於根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像。
首先,劃分子單元3051可以根據預設演算法對人臉圖像進行網格劃分,得到多個網格區域,例如,如圖5(a)所示。其中,預設演算法可以根據實際需要進行靈活設置,例如,可以根據人臉圖像的大小進行網格劃分,例如,可以將人臉圖像劃分為50*66個矩形的網格,或者可以將人臉圖像劃分為60*80個矩形的網格等;或者是,根據人臉圖像中人臉部位的大小進行網格劃分等。然後,可以根據對人臉圖像中的人臉部位進行特徵點檢測所得到的各個人臉部位的特徵點,確定待形變的目標人臉部位所分佈在的網格區域,得到目標網格區域。其次,形變子單元3052確定待形變的目標人臉部位對應的形變單元集合中每個形變單元所包含的目標網格區域,根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域。最後,構建子單元3053可以根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像,例如,如圖5(b)所示。
在某些實施方式中,形變子單元3052包括:計算模組,用於根據調節參數分別計算每個形變單元中包含的目標網格區域的調整位置;調整模組,用於根據調整位置對目標網格區域進行調整,得到形變後網格區域。
在某些實施方式中,計算模組具體用於:根據調節參數確定每個形變單元對應的形變參數,從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度;根據形變中心和形變半徑確定每個形變單元的形變區域,並根據形變區域確定每個形變單元中包含的目標網格區域;按照形變類型及形變強度分別計算每個形變單元中包含的目標網格區域的調整位置。
構建子單元3053具體用於:對形變後網格區域中的像素進行插值處理,得到形變後網格區域對應的像素值;根據形變後網格區域構建形變後人臉部位,並根據像素值對形變後人臉部位進行像素渲染,得到形變後人臉圖像。
在確定形變後網格區域後,可以進行人臉圖像像素點的移動渲染,例如,構建子單元3053可以使用最近鄰插值、雙線性插值、像素區域關係進行重採樣、雙三次插值、以及其他插值方法等,對形變後網格區域中的像素進行插值處理,得到形變後網格區域對應的像素值。然後構建子單元3053可以根據形變後網格區域構建形變後人臉部位,並根據像素值對形變後人臉部位進行像素渲染,得到形變後人臉圖像。
由上可知,本發明實施例可以通過第一獲取單元301獲取待處理的人臉圖像,並由接收單元302接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型,例如可以對嘴巴寬度、眼睛大小或臉部胖瘦等進行形變操作,然後生成單元303根據操作類型確定形變的形變參數,並根據形變參數生成調節器,此時調節單元304可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進行動態調節,最後,第二獲取單元305可以根據調節幅度確定調節參數,並根據調節參數獲取形變後人臉圖像。該方案可以根據對各個人臉部位進行劃分,確定待形變的目標人臉部位,並通過形變參數生成調節器對目標人臉部位進行動態調節,並顯示目標人臉部位基於動態調節的變化效果供用戶參考,可以得到形變後人臉圖像,而無需使用者手動在人臉區域進行盲目推動操作,提高了對人臉圖像進行處理的便捷性,及提升人臉圖像的處理效果。
相應的,本發明實施例還提供一種終端,如圖16所示,該終端可以包括射頻(RF,Radio Frequency)電路601、包括有一個或一個以上電腦可讀儲存介質的記憶體602、輸入單元603、顯示單元604、感測器605、音訊電路606、無線保真(WiFi,Wireless Fidelity)模組607、包括有一個或者一個以上處理核心的處理器608、以及電源609等部件。圖16中示出的終端結構並不構成對終端的限定,可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件佈置。其中:
RF電路601可用於收發資訊或通話過程中,信號的接收和發送,特別地,將基地台的下行資訊接收後,交由一個或者一個以上處理器608處理;另外,將涉及上行的資料發送給基地台。通常,RF電路601包括但不限於天線、至少一個放大器、調諧器、一個或多個振盪器、使用者身份模組(SIM, Subscriber Identity Module)卡、收發信機、耦合器、低雜訊放大器(LNA,Low Noise Amplifier)、雙工器等。此外,RF電路601還可以通過無線通訊與網路和其他設備通信。所述無線通訊可以使用任一通信標準或協定,包括但不限於全球移動通訊系統 (GSM,Global System of Mobile communication)、通用分組無線服務(GPRS ,General Packet Radio Service)、碼分多址(CDMA,Code Division Multiple Access)、寬頻碼分多址(WCDMA,Wideband Code Division Multiple Access)、長期演進(LTE,Long Term Evolution)、電子郵件、短消息服務(SMS,Short Messaging Service)等。
記憶體602可用於儲存軟體程式以及模組,處理器608通過運行儲存在記憶體602的軟體程式以及模組,從而執行各種功能應用以及資料處理。記憶體602可主要包括儲存程式區和儲存資料區,其中,儲存程式區可儲存作業系統、至少一個功能所需的應用程式(比如聲音播放功能、圖像播放功能等)等;儲存資料區可儲存根據終端的使用所創建的資料(比如音訊資料、電話本等)等。此外,記憶體602可以包括高速隨機存取記憶體,還可以包括非易失性記憶體,例如至少一個磁碟記憶體件、快閃記憶體器件、或其他易失性固態記憶體件。相應地,記憶體602還可以包括記憶體控制器,以提供處理器608和輸入單元603對記憶體602的訪問。
輸入單元603可用於接收輸入的數位或字元資訊,以及產生與使用者設置以及功能控制有關的鍵盤、滑鼠、操作桿、光學或者軌跡球信號輸入。具體地,在一個具體的實施例中,輸入單元603可包括觸敏表面以及其他輸入裝置。觸敏表面,也稱為觸摸顯示幕或者觸控板,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸敏表面上或在觸敏表面附近的操作),並根據預先設定的程式驅動相應的連接裝置。觸敏表面可包括觸摸檢測裝置和觸摸控制器兩個部分。其中,觸摸檢測裝置檢測使用者的觸摸方位,並檢測觸摸操作帶來的信號,將信號傳送給觸摸控制器;觸摸控制器從觸摸檢測裝置上接收觸摸資訊,並將它轉換成觸點座標,再送給處理器608,並能接收處理器608發來的命令並加以執行。此外,可以採用電阻式、電容式、紅外線以及表面聲波等多種類型實現觸敏表面。除了觸敏表面,輸入單元603還可以包括其他輸入裝置。具體地,其他輸入裝置可以包括但不限於物理鍵盤、功能鍵(比如音量控制按鍵、開關按鍵等)、軌跡球、滑鼠、操作桿等中的一種或多種。
顯示單元604可用於顯示由使用者輸入的資訊或提供給使用者的資訊以及終端的各種圖形使用者介面,這些圖形使用者介面可以由圖形、文本、圖示、視頻和其任意組合來構成。顯示單元604可包括顯示面板,可以採用液晶顯示器(LCD,Liquid Crystal Display)、有機發光二極體(OLED,Organic Light-Emitting Diode)等形式來配置顯示面板。進一步的,觸敏表面可覆蓋顯示面板,當觸敏表面檢測到在其上或附近的觸摸操作後,傳送給處理器608以確定觸摸事件的類型,隨後處理器608根據觸摸事件的類型在顯示面板上提供相應的視覺輸出。雖然在圖16中,觸敏表面與顯示面板是作為兩個獨立的部件來實現輸入和輸入功能,但是在某些實施例中,可以將觸敏表面與顯示面板集成而實現輸入和輸出功能。
終端還可包括至少一種感測器605,比如光感測器、運動感測器以及其他感測器。具體地,光感測器可包括環境光感測器及接近感測器,其中,環境光感測器可根據環境光線的明暗來調節顯示面板的亮度,接近感測器可在終端移動到耳邊時,關閉顯示面板和/或背光。作為運動感測器的一種,重力加速度感測器可檢測各個方向上(一般為三軸)加速度的大小,靜止時可檢測出重力的大小及方向,可用於識別終端姿態的應用(比如橫豎屏切換、相關遊戲、磁力計姿態校準)、振動識別相關功能(比如計步器、敲擊)等; 至於終端還可配置的陀螺儀、氣壓計、濕度計、溫度計、紅外線感測器等其他感測器,在此不再贅述。
音訊電路606、揚聲器,傳聲器可提供使用者與終端之間的音訊介面。音訊電路606可將接收到的音訊資料轉換後的電信號,傳輸到揚聲器,由揚聲器轉換為聲音信號輸出;另一方面,傳聲器將收集的聲音信號轉換為電信號,由音訊電路606接收後轉換為音訊資料,再將音訊資料輸出處理器608處理後,經RF電路601以發送給比如另一終端,或者將音訊資料輸出至記憶體602以便進一步處理。音訊電路606還可能包括耳塞插孔,以提供外設耳機與終端的通信。
WiFi屬於短距離無線傳輸技術,終端通過WiFi模組607可以説明使用者收發電子郵件、流覽網頁和訪問流式媒體等,它為用戶提供了無線的寬頻互聯網訪問。雖然圖16示出了WiFi模組607,但是可以理解的是,其並不屬於終端的必須構成,完全可以根據需要在不改變發明的本質的範圍內而省略。
處理器608是終端的控制中心,利用各種介面和線路連接整個終端的各個部分,通過運行或執行儲存在記憶體602內的軟體程式和/或模組,以及調用儲存在記憶體602內的資料,執行終端的各種功能和處理資料,從而對終端進行整體監控。處理器608可包括一個或多個處理核心;處理器608可集成應用處理器和調製解調處理器,其中,應用處理器主要處理作業系統、使用者介面和應用程式等,調製解調處理器主要處理無線通訊。可以理解的是,上述調製解調處理器也可以不集成到處理器608中。
終端還包括給各個部件供電的電源609(比如電池),電源可以通過電源管理系統與處理器608邏輯相連,從而通過電源管理系統實現管理充電、放電、以及功耗管理等功能。電源609還可以包括一個或一個以上的直流或交流電源、再充電系統、電源故障檢測電路、電源轉換器或者逆變器、電源狀態指示器等任意元件。
儘管未示出,終端還可以包括攝像頭、藍牙模組等,在此不再贅述。具體在本實施例中,終端中的處理器608會按照如下的指令,將一個或一個以上的應用程式的進程對應的可執行檔載入到記憶體602中,並由處理器608來運行儲存在記憶體602中的應用程式,從而實現各種功能:
獲取待處理的人臉圖像;接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型;根據操作類型確定形變的形變參數,並根據形變參數生成調節器;獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果;根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
根據操作類型確定形變的形變參數,並根據形變參數生成調節器的步驟可以包括:獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數;根據形變參數生成調節器。
接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型的步驟可以包括:接收形變請求,根據形變請求生成形變操作介面,其中形變操作介面包括部位選擇介面及類型設置介面;通過部位選擇介面接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令;根據操作指令通過類型設置介面選擇形變的操作類型。
根據調節參數獲取形變後人臉圖像的步驟可以包括:對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域;根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像。
在上述實施例中,對各個實施例的描述都各有側重,某個實施例中沒有詳述的部分,可以參見上文針對人臉影像處理方法的詳細描述,此處不再贅述。
由上可知,本發明實施例可以獲取待處理的人臉圖像,並接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型,例如可以對嘴巴寬度、眼睛大小或臉部胖瘦等進行形變操作,然後根據操作類型確定形變的形變參數,並根據形變參數生成調節器,此時可以獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果,以供使用者參考進行動態調節,最後,可以根據調節幅度確定調節參數,並根據調節參數獲取形變後人臉圖像。該方案可以根據對各個人臉部位進行劃分,確定待形變的目標人臉部位,並通過形變參數生成調節器對目標人臉部位進行動態調節,並顯示目標人臉部位基於動態調節的變化效果供用戶參考,可以得到形變後人臉圖像,而無需使用者手動在人臉區域進行盲目推動操作,提高了對人臉圖像進行處理的便捷性,及提升人臉圖像的處理效果。
本領域普通技術人員可以理解,上述實施例的各種方法中的全部或部分步驟可以通過指令來完成,或通過指令控制相關的硬體來完成,該指令可以儲存於一電腦可讀儲存介質中,並由處理器進行載入和執行。
為此,本發明實施例提供一種儲存介質,其中儲存有多條指令,該指令能夠被處理器進行載入,以執行本發明實施例所提供的任一種人臉影像處理方法中的步驟。例如,該指令可以執行如下步驟:
獲取待處理的人臉圖像;接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型;根據操作類型確定形變的形變參數,並根據形變參數生成調節器;獲取通過調節器對目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示目標人臉部位基於動態調節的變化效果;根據調節幅度確定調節參數,根據調節參數獲取形變後人臉圖像。
根據操作類型確定形變的形變參數,並根據形變參數生成調節器的步驟可以包括:獲取與操作類型對應的形變單元集合,並確定形變單元集合中每個形變單元對應的形變參數;根據形變參數生成調節器。
接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據操作指令確定形變的操作類型的步驟可以包括:接收形變請求,根據形變請求生成形變操作介面,其中形變操作介面包括部位選擇介面及類型設置介面;通過部位選擇介面接收對人臉圖像中人臉的目標人臉部位進行形變的操作指令;根據操作指令通過類型設置介面選擇形變的操作類型。
根據調節參數獲取形變後人臉圖像的步驟可以包括:對人臉圖像進行網格劃分,並確定目標人臉部位所在的網格區域,得到目標網格區域;根據調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;根據形變後網格區域構建形變後人臉部位,並根據形變後人臉部位得到形變後人臉圖像。
以上各個操作的具體實施可參見前面的實施例,在此不再贅述。
其中,該儲存介質可以包括:唯讀記憶體(ROM,Read Only Memory)、隨機存取記憶體(RAM,Random Access Memory)、磁片或光碟等。
由於該儲存介質中所儲存的指令,可以執行本發明實施例所提供的任一種人臉影像處理方法中的步驟,因此,可以實現本發明實施例所提供的任一種人臉影像處理方法所能實現的有益效果,詳見前面的實施例,在此不再贅述。
以上對本發明實施例所提供的一種人臉影像處理方法、裝置及儲存介質進行了詳細介紹,本文中應用了具體個例對本發明的原理及實施方式進行了闡述,以上實施例的說明只是用於幫助理解本發明的方法及其核心思想;同時,對於本領域的技術人員,依據本發明的思想,在具體實施方式及應用範圍上均會有改變之處,綜上所述,本說明書內容不應理解為對本發明的限制。
S101-S105‧‧‧步驟
S201-S208‧‧‧步驟
301‧‧‧獲取單元
302‧‧‧接收單元
303‧‧‧生成單元
304‧‧‧調節單元
305‧‧‧第二獲取單元
3031‧‧‧獲取子單元
3032‧‧‧生成子單元
306‧‧‧檢測單元
307‧‧‧確定單元
3051‧‧‧劃分子單元
3052‧‧‧形變子單元
3053‧‧‧構建子單元
601‧‧‧射頻電路
602‧‧‧記憶體
603‧‧‧輸入單元
604‧‧‧顯示單元
605‧‧‧感測器
606‧‧‧音訊電路
607‧‧‧WiFi模組
608‧‧‧處理器
609‧‧‧電源
圖1是本發明實施例提供的人臉影像處理系統的場景示意圖;
圖2是本發明實施例提供的人臉影像處理方法的流程示意圖;
圖3A是本發明實施例提供的對人臉器官進行特徵點檢測的示意圖;
圖3B是本發明實施例提供的人臉器官的區域劃分的示意圖;
圖4是本發明實施例提供的形變單元集合的示意圖;
圖5A是本發明實施例提供的人臉圖像進行網格劃分的示意圖;
圖5B是本發明實施例提供的形變後網格區域的示意圖;
圖6是本發明實施例提供的形變單元的示意圖;
圖7A是本發明實施例提供的對眼睛寬度進行調整的示意圖;
圖7B是本發明實施例提供的對眼睛寬度進行調整的另一示意圖;
圖8是本發明實施例提供的圖像渲染管線的示意圖;
圖9是本發明實施例提供的人臉影像處理方法的另一流程示意圖;
圖10A是本發明實施例提供的對臉部的整體進行調整的示意圖;
圖10B是本發明實施例提供的對眼睛的眼高進行調整的示意圖;
圖11A是本發明實施例提供的對眉毛進行旋轉的示意圖;
圖11B是本發明實施例提供的分屏顯示形變前後的人臉圖像的示意圖;
圖12是本發明實施例提供的人臉影像處理裝置的結構示意圖;
圖13是本發明實施例提供的人臉影像處理裝置的另一結構示意圖;
圖14是本發明實施例提供的人臉影像處理裝置的另一結構示意圖;
圖15是本發明實施例提供的人臉影像處理裝置的另一結構示意圖;
圖16是本發明實施例提供的終端的結構示意圖。
S101-S105‧‧‧步驟
Claims (11)
- 一種人臉影像處理方法,其包括:獲取待處理的人臉圖像;接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型;根據所述操作類型確定形變的形變參數,並根據所述形變參數生成調節器;獲取通過所述調節器對所述目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示所述目標人臉部位基於動態調節的變化效果;根據所述調節幅度確定調節參數,根據所述調節參數獲取形變後人臉圖像;其中所述根據所述操作類型確定形變的形變參數,並根據所述形變參數生成調節器的步驟包括:獲取與所述操作類型對應的形變單元集合,並確定所述形變單元集合中每個形變單元對應的形變參數;以及根據所述形變參數生成調節器;其中所述根據所述調節參數獲取形變後人臉圖像的步驟包括:對所述人臉圖像進行網格劃分,並確定所述目標人臉部位所在的網格區域,得到目標網格區域;根據所述調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;以及根據所述形變後網格區域構建形變後人臉部位,並根據所述形變後人臉部位得到形變後人臉圖像。
- 根據請求項1所述的人臉影像處理方法,其中,所述獲取與所述操作類型對應的形變單元集合的步驟之前,所述方法還包括:為各個操作類型分別設置對應的形變單元集合,並建立每個操作類型與各自對應的形變單元集合之間的一一對應關係;所述獲取與所述操作類型對應的形變單元集合,並確定所述形變單元集合中每個形變單元對應的形變參數的步驟包括:獲取所述對應關係,基於所述對應關係確定與所述操作類型對應的形變單元集合; 獲取所述形變單元集合中每個形變單元對應的形變中心、形變半徑、形變類型及形變強度。
- 根據請求項1所述的人臉影像處理方法,其中,所述接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型的步驟之前,所述方法還包括:對所述人臉圖像中人臉進行特徵點檢測,得到各個人臉部位的特徵點;根據所述特徵點確定所述人臉圖像中需要進行形變的人臉部位,得到目標人臉部位。
- 根據請求項3所述的人臉影像處理方法,其中,所述根據所述特徵點確定所述人臉圖像中需要進行形變的人臉部位,得到目標人臉部位的步驟包括:根據所述特徵點確定所述人臉圖像中各個人臉部位所在的區域;當接收到選擇指令時,獲取指令標識與區域標識之間的映射關係;根據所述映射關係確定與所述選擇指令的指令標識對應的區域標識,得到目的地區域標識;根據所述目的地區域標識確定所述人臉圖像中待形變人臉部位,得到目標人臉部位。
- 根據請求項1所述的人臉影像處理方法,其中,所述接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型的步驟包括:接收形變請求,根據所述形變請求生成形變操作介面,其中所述形變操作介面包括部位選擇介面及類型設置介面;通過所述部位選擇介面接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令;根據所述操作指令通過所述類型設置介面選擇形變的操作類型。
- 根據請求項1至5任一項所述的人臉影像處理方法,其中,所述根據所述調節幅度確定調節參數的步驟包括:獲取各個調節幅度與各個調節參數之間的映射關係;根據所述映射關係確定與所述調節幅度對應的調節參數。
- 根據請求項1所述的人臉影像處理方法,其中,所述根據所述調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域的步驟包括:根據所述調節參數分別計算每個形變單元中包含的目標網格區域的調整位置;根據所述調整位置對所述目標網格區域進行調整,得到形變後網格區域。
- 根據請求項7所述的人臉影像處理方法,其中,所述根據所述調節參數分別計算每個形變單元中包含的目標網格區域的調整位置的步驟包括:根據所述調節參數確定每個形變單元對應的形變參數,從每個形變單元對應的形變參數中提取出形變中心、形變半徑、形變類型及形變強度;根據所述形變中心和形變半徑確定每個形變單元的形變區域,並根據所述形變區域確定每個形變單元中包含的目標網格區域;按照所述形變類型及形變強度分別計算每個形變單元中包含的目標網格區域的調整位置。
- 根據請求項1所述的人臉影像處理方法,其中,所述根據所述形變後網格區域構建形變後人臉部位,並根據所述形變後人臉部位得到形變後人臉圖像的步驟包括:對所述形變後網格區域中的像素進行插值處理,得到所述形變後網格區域對應的像素值;根據所述形變後網格區域構建形變後人臉部位,並根據所述像素值對所述形變後人臉部位進行像素渲染,得到形變後人臉圖像。
- 一種人臉影像處理裝置,其包括:第一獲取單元,用於獲取待處理的人臉圖像;接收單元,用於接收對所述人臉圖像中人臉的目標人臉部位進行形變的操作指令,根據所述操作指令確定形變的操作類型;生成單元,用於根據所述操作類型確定形變的形變參數,並根據所述形變參數生成調節器;調節單元,用於獲取通過所述調節器對所述目標人臉部位進行動態調節的調節幅度,並在顯示介面中展示所述目標人臉部位基於動態調節的變化效果;第二獲取單元,用於根據所述調節幅度確定調節參數,根據所述調節參數獲取形變後人臉圖像; 其中,所述生成單元包括:獲取子單元,用於獲取與所述操作類型對應的形變單元集合,並確定所述形變單元集合中每個形變單元對應的形變參數;以及生成子單元,用於根據所述形變參數生成調節器;其中所述第二獲取單元包括:劃分子單元,用於對所述人臉圖像進行網格劃分,並確定所述目標人臉部位所在的網格區域,得到目標網格區域;形變子單元,用於根據所述調節參數對每個形變單元中包含的目標網格區域進行形變操作,得到形變後網格區域;以及構建子單元,用於根據所述形變後網格區域構建形變後人臉部位,並根據所述形變後人臉部位得到形變後人臉圖像。
- 一種儲存介質,其儲存有多條指令,所述指令適於處理器進行載入,以執行請求項1至9任一項所述的人臉影像處理方法中的步驟。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810827850.7A CN109087239B (zh) | 2018-07-25 | 2018-07-25 | 一种人脸图像处理方法、装置及存储介质 |
CN201810827850.7 | 2018-07-25 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202008216A TW202008216A (zh) | 2020-02-16 |
TWI785258B true TWI785258B (zh) | 2022-12-01 |
Family
ID=64838631
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW108125852A TWI785258B (zh) | 2018-07-25 | 2019-07-22 | 人臉影像處理方法、裝置及儲存介質 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10990804B2 (zh) |
EP (1) | EP3742385A4 (zh) |
CN (1) | CN109087239B (zh) |
TW (1) | TWI785258B (zh) |
WO (1) | WO2020019913A1 (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109087239B (zh) * | 2018-07-25 | 2023-03-21 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法、装置及存储介质 |
CN109472753B (zh) * | 2018-10-30 | 2021-09-07 | 北京市商汤科技开发有限公司 | 一种图像处理方法、装置、计算机设备和计算机存储介质 |
CN109741277A (zh) * | 2018-12-29 | 2019-05-10 | 广州华多网络科技有限公司 | 图像处理方法、装置、存储介质和服务器 |
CN111488759A (zh) * | 2019-01-25 | 2020-08-04 | 北京字节跳动网络技术有限公司 | 动物脸部的图像处理方法和装置 |
CN109865283A (zh) * | 2019-03-05 | 2019-06-11 | 网易(杭州)网络有限公司 | 游戏中虚拟角色面部调整方法、装置、电子设备及介质 |
CN109934766B (zh) * | 2019-03-06 | 2021-11-30 | 北京市商汤科技开发有限公司 | 一种图像处理方法及装置 |
CN110378847A (zh) * | 2019-06-28 | 2019-10-25 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、介质及电子设备 |
CN111343472B (zh) * | 2020-02-21 | 2023-05-26 | 腾讯科技(深圳)有限公司 | 一种图像处理效果的调节方法、装置、设备及介质 |
CN111415397B (zh) * | 2020-03-20 | 2024-03-08 | 广州虎牙科技有限公司 | 一种人脸重构、直播方法、装置、设备及存储介质 |
CN111553221B (zh) * | 2020-04-21 | 2023-10-31 | 海信集团有限公司 | 一种数据处理方法及智能设备 |
CN111524062B (zh) * | 2020-04-22 | 2023-11-24 | 北京百度网讯科技有限公司 | 图像生成方法和装置 |
CN111563855B (zh) * | 2020-04-29 | 2023-08-01 | 百度在线网络技术(北京)有限公司 | 图像处理的方法及装置 |
CN113986105A (zh) * | 2020-07-27 | 2022-01-28 | 北京达佳互联信息技术有限公司 | 人脸图像的变形方法、装置、电子设备及存储介质 |
CN114296622B (zh) * | 2020-09-23 | 2023-08-08 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN112257594A (zh) * | 2020-10-22 | 2021-01-22 | 广州繁星互娱信息科技有限公司 | 多媒体数据的显示方法、装置、计算机设备及存储介质 |
CN112381729A (zh) * | 2020-11-12 | 2021-02-19 | 广州繁星互娱信息科技有限公司 | 图像处理方法、装置、终端及存储介质 |
CN112766215A (zh) * | 2021-01-29 | 2021-05-07 | 北京字跳网络技术有限公司 | 人脸融合方法、装置、电子设备及存储介质 |
CN113426128B (zh) * | 2021-06-24 | 2024-04-30 | 网易(杭州)网络有限公司 | 自定义角色的相貌调节方法、装置、终端和存储介质 |
CN113674139A (zh) * | 2021-08-17 | 2021-11-19 | 北京京东尚科信息技术有限公司 | 人脸图像的处理方法、装置、电子设备及存储介质 |
CN114565507A (zh) * | 2022-01-17 | 2022-05-31 | 北京新氧科技有限公司 | 一种头发处理方法、装置、电子设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWM403706U (en) * | 2010-09-30 | 2011-05-11 | Tlj Intertech Inc | Simulation system for 3D face image |
CN103208133A (zh) * | 2013-04-02 | 2013-07-17 | 浙江大学 | 一种图像中人脸胖瘦的调整方法 |
US20160283780A1 (en) * | 2015-03-25 | 2016-09-29 | Alibaba Group Holding Limited | Positioning feature points of human face edge |
US20170069065A1 (en) * | 2015-09-08 | 2017-03-09 | Htc Corporation | Facial image adjustment method and facial image adjustment system |
CN107578328A (zh) * | 2017-09-25 | 2018-01-12 | 山东浪潮商用系统有限公司 | 一种开具退税申请单的自助终端及方法 |
CN107730449A (zh) * | 2017-11-07 | 2018-02-23 | 深圳市云之梦科技有限公司 | 一种人脸五官美化处理的方法及系统 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2919428B2 (ja) * | 1997-04-10 | 1999-07-12 | 日本電気株式会社 | 画像変形装置 |
JP5240795B2 (ja) * | 2010-04-30 | 2013-07-17 | オムロン株式会社 | 画像変形装置、電子機器、画像変形方法、および画像変形プログラム |
JP5719480B2 (ja) * | 2012-07-13 | 2015-05-20 | 富士フイルム株式会社 | 画像変形装置およびその動作制御方法 |
CN103824253B (zh) * | 2014-02-19 | 2017-01-18 | 中山大学 | 一种基于图像局部精确变形的人物五官变形方法 |
CN105184735B (zh) * | 2014-06-19 | 2019-08-06 | 腾讯科技(深圳)有限公司 | 一种人像变形方法及装置 |
CN104268932A (zh) * | 2014-09-12 | 2015-01-07 | 上海明穆电子科技有限公司 | 3d脸型自动变化方法及系统 |
CN105184249B (zh) * | 2015-08-28 | 2017-07-18 | 百度在线网络技术(北京)有限公司 | 用于人脸图像处理的方法和装置 |
CN106296571B (zh) * | 2016-07-29 | 2019-06-04 | 厦门美图之家科技有限公司 | 一种基于人脸网格的缩小鼻翼方法、装置和计算设备 |
CN108229279B (zh) * | 2017-04-14 | 2020-06-02 | 深圳市商汤科技有限公司 | 人脸图像处理方法、装置和电子设备 |
IL252657A0 (en) * | 2017-06-04 | 2017-08-31 | De Identification Ltd | System and method for preventing image recognition |
CN107330868B (zh) * | 2017-06-26 | 2020-11-13 | 北京小米移动软件有限公司 | 图片处理方法及装置 |
CN107578380A (zh) * | 2017-08-07 | 2018-01-12 | 北京金山安全软件有限公司 | 一种图像处理方法、装置、电子设备及存储介质 |
CN107578382A (zh) * | 2017-08-18 | 2018-01-12 | 北京小米移动软件有限公司 | 图像处理方法及装置 |
CN107578371A (zh) * | 2017-09-29 | 2018-01-12 | 北京金山安全软件有限公司 | 一种图像处理方法、装置、电子设备及介质 |
CN107730444B (zh) * | 2017-10-31 | 2022-02-01 | Oppo广东移动通信有限公司 | 图像处理方法、装置、可读存储介质和计算机设备 |
CN107833177A (zh) * | 2017-10-31 | 2018-03-23 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN107835367A (zh) * | 2017-11-14 | 2018-03-23 | 维沃移动通信有限公司 | 一种图像处理方法、装置及移动终端 |
CN108280883B (zh) * | 2018-02-07 | 2021-05-04 | 北京市商汤科技开发有限公司 | 变形特效程序文件包的生成及变形特效生成方法与装置 |
CN108717719A (zh) * | 2018-05-23 | 2018-10-30 | 腾讯科技(深圳)有限公司 | 卡通人脸图像的生成方法、装置及计算机存储介质 |
CN109087238B (zh) * | 2018-07-04 | 2021-04-23 | 北京市商汤科技开发有限公司 | 图像处理方法和装置、电子设备以及计算机可读存储介质 |
CN109087239B (zh) * | 2018-07-25 | 2023-03-21 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法、装置及存储介质 |
US11049310B2 (en) * | 2019-01-18 | 2021-06-29 | Snap Inc. | Photorealistic real-time portrait animation |
CN109934766B (zh) * | 2019-03-06 | 2021-11-30 | 北京市商汤科技开发有限公司 | 一种图像处理方法及装置 |
CN110458121B (zh) * | 2019-08-15 | 2023-03-14 | 京东方科技集团股份有限公司 | 一种人脸图像生成的方法及装置 |
-
2018
- 2018-07-25 CN CN201810827850.7A patent/CN109087239B/zh active Active
-
2019
- 2019-06-21 WO PCT/CN2019/092235 patent/WO2020019913A1/zh unknown
- 2019-06-21 EP EP19840999.7A patent/EP3742385A4/en active Pending
- 2019-07-22 TW TW108125852A patent/TWI785258B/zh active
-
2020
- 2020-08-31 US US17/008,417 patent/US10990804B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWM403706U (en) * | 2010-09-30 | 2011-05-11 | Tlj Intertech Inc | Simulation system for 3D face image |
CN103208133A (zh) * | 2013-04-02 | 2013-07-17 | 浙江大学 | 一种图像中人脸胖瘦的调整方法 |
US20160283780A1 (en) * | 2015-03-25 | 2016-09-29 | Alibaba Group Holding Limited | Positioning feature points of human face edge |
US20170069065A1 (en) * | 2015-09-08 | 2017-03-09 | Htc Corporation | Facial image adjustment method and facial image adjustment system |
TW201711000A (zh) * | 2015-09-08 | 2017-03-16 | 宏達國際電子股份有限公司 | 人臉影像調整系統及人臉影像調整方法 |
CN107578328A (zh) * | 2017-09-25 | 2018-01-12 | 山东浪潮商用系统有限公司 | 一种开具退税申请单的自助终端及方法 |
CN107730449A (zh) * | 2017-11-07 | 2018-02-23 | 深圳市云之梦科技有限公司 | 一种人脸五官美化处理的方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2020019913A1 (zh) | 2020-01-30 |
TW202008216A (zh) | 2020-02-16 |
EP3742385A1 (en) | 2020-11-25 |
US20200401790A1 (en) | 2020-12-24 |
EP3742385A4 (en) | 2021-04-14 |
US10990804B2 (en) | 2021-04-27 |
CN109087239B (zh) | 2023-03-21 |
CN109087239A (zh) | 2018-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI785258B (zh) | 人臉影像處理方法、裝置及儲存介質 | |
WO2019233229A1 (zh) | 一种图像融合方法、装置及存储介质 | |
TWI672629B (zh) | 表情展示方法、裝置及電腦可讀取儲存媒體 | |
US10055879B2 (en) | 3D human face reconstruction method, apparatus and server | |
CN110471596B (zh) | 一种分屏切换方法、装置、存储介质及电子设备 | |
WO2019223421A1 (zh) | 卡通人脸图像的生成方法、装置及计算机存储介质 | |
CN109712224B (zh) | 虚拟场景的渲染方法、装置及智能设备 | |
CN111324250B (zh) | 三维形象的调整方法、装置、设备及可读存储介质 | |
CN108388849B (zh) | 调整终端的显示图像的方法和装置、电子设备、存储介质 | |
CN109242765B (zh) | 一种人脸图像处理方法、装置和存储介质 | |
JP2021524957A (ja) | 画像処理方法およびその、装置、端末並びにコンピュータプログラム | |
US9811611B2 (en) | Method and apparatus for creating curved surface model | |
CN110263617B (zh) | 三维人脸模型获取方法及装置 | |
CN107172347B (zh) | 一种拍照方法及终端 | |
JP2016522437A (ja) | 画像表示方法、画像表示装置、端末、プログラム及び記録媒体 | |
CN111010512A (zh) | 显示控制方法及电子设备 | |
WO2020233403A1 (zh) | 三维角色的个性化脸部显示方法、装置、设备及存储介质 | |
WO2020073334A1 (zh) | 扩展内容显示方法、装置、系统及存储介质 | |
CN110941375B (zh) | 对图像进行局部放大的方法、装置及存储介质 | |
KR102468086B1 (ko) | 컨텐츠 표시 방법 및 이를 구현한 전자 장치 | |
WO2022062808A1 (zh) | 头像生成方法及设备 | |
US20220351330A1 (en) | Image cropping method and electronic device | |
CN110796083B (zh) | 图像显示方法、装置、终端及存储介质 | |
CN111353946B (zh) | 图像修复方法、装置、设备及存储介质 | |
CN111556248B (zh) | 拍摄方法、装置、存储介质及移动终端 |