JP7066855B2 - 変形特殊効果プログラムファイルパッケージの生成及び変形特殊効果生成方法並びに装置 - Google Patents
変形特殊効果プログラムファイルパッケージの生成及び変形特殊効果生成方法並びに装置 Download PDFInfo
- Publication number
- JP7066855B2 JP7066855B2 JP2020536147A JP2020536147A JP7066855B2 JP 7066855 B2 JP7066855 B2 JP 7066855B2 JP 2020536147 A JP2020536147 A JP 2020536147A JP 2020536147 A JP2020536147 A JP 2020536147A JP 7066855 B2 JP7066855 B2 JP 7066855B2
- Authority
- JP
- Japan
- Prior art keywords
- deformation
- parameter
- effect
- region
- transformation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000694 effects Effects 0.000 title claims description 748
- 230000009466 transformation Effects 0.000 title claims description 276
- 238000000034 method Methods 0.000 title claims description 184
- 238000001514 detection method Methods 0.000 claims description 39
- 230000033001 locomotion Effects 0.000 claims description 38
- 230000015654 memory Effects 0.000 claims description 31
- 230000009471 action Effects 0.000 claims description 29
- 230000001815 facial effect Effects 0.000 claims description 28
- 238000004590 computer program Methods 0.000 claims description 27
- 210000003128 head Anatomy 0.000 claims description 27
- 210000000689 upper leg Anatomy 0.000 claims description 27
- 239000002537 cosmetic Substances 0.000 claims description 22
- 230000006870 function Effects 0.000 claims description 22
- 230000006835 compression Effects 0.000 claims description 20
- 238000007906 compression Methods 0.000 claims description 20
- 210000004709 eyebrow Anatomy 0.000 claims description 17
- 238000009877 rendering Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 8
- 238000013528 artificial neural network Methods 0.000 claims description 5
- 230000004424 eye movement Effects 0.000 claims description 2
- 230000004886 head movement Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 26
- 238000004891 communication Methods 0.000 description 15
- 210000003423 ankle Anatomy 0.000 description 12
- 230000002452 interceptive effect Effects 0.000 description 12
- 210000003127 knee Anatomy 0.000 description 12
- 210000000707 wrist Anatomy 0.000 description 12
- 210000002683 foot Anatomy 0.000 description 11
- 230000033458 reproduction Effects 0.000 description 8
- 238000012217 deletion Methods 0.000 description 7
- 230000037430 deletion Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 230000008676 import Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 210000004247 hand Anatomy 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 210000000245 forearm Anatomy 0.000 description 3
- 210000003205 muscle Anatomy 0.000 description 3
- 230000001936 parietal effect Effects 0.000 description 3
- 238000009434 installation Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 241000320126 Pseudomugilidae Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000003811 finger Anatomy 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 238000010926 purge Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G06T3/18—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformation in the plane of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/34—Graphical or visual programming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/20—Software design
- G06F8/22—Procedural
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
Description
本願は、2018年2月7日に中国特許局に提出された、出願番号がCN201810123074.2であり、発明の名称が「変形特殊効果プログラムファイルパッケージの生成及び変形特殊効果生成方法並びに装置」である中国特許出願の優先権を主張し、その開示の全てが参照によって本願に組み込まれる。
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する操作と、
少なくとも1つの前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作と、
前記パラメータ値が取得された少なくとも1つの前記変形領域及び前記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成する操作と、を含む変形特殊効果プログラムファイルパッケージの生成方法を提供する。
変形領域の変形効果パラメータのパラメータ値を取得する操作と、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する操作と、を更に含む変形特殊効果生成方法を提供する。
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得するための第1の取得モジュールと、
少なくとも1つの前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立するための確立モジュールと、
前記パラメータ値が取得された少なくとも1つの前記変形領域及び前記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成するための第1の生成モジュールスと、を含む変形特殊効果プログラムファイルパッケージの生成装置を提供する。
変形領域の変形効果パラメータのパラメータ値を取得するための第2の取得モジュールと、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成するための第2の生成モジュールと、を含む変形特殊効果生成装置を提供する。
コンピュータプログラムを記憶するためのメモリと、
前記メモリに記憶されたコンピュータプログラムを実行するために用いられ、前記コンピュータプログラムが実行されると、本願のいずれか1つの実施例に記載の方法を実現するプロセッサと、を含む電子機器を提供する。
例えば、本願は以下の項目を提供する。
(項目1)
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する操作と、
少なくとも1つの上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作と、
上記パラメータ値が取得された少なくとも1つの上記変形領域及び上記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成する操作と、を含むことを特徴とする変形特殊効果プログラムファイルパッケージの生成方法。
(項目2)
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する上記操作の前に、上記少なくとも1つの変形領域を追加する操作を更に含むことを特徴とする項目1に記載の方法。
(項目3)
上記変形領域が複数である場合、少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、複数の変形領域の変形効果パラメータのパラメータ値を一括取得する操作、及び/又は、複数の変形領域のうちの少なくとも一部の上記変形領域の変形効果パラメータのパラメータ値をそれぞれ取得する操作、及び/又は、1つの変形領域をコピーして、他の1つの変形領域と上記他の1つの変形領域の変形効果パラメータのパラメータ値とを取得する操作を含むことを特徴とする項目1又は2に記載の方法。
(項目4)
操作欄の対話インターフェイスで入力された変形領域追加コマンドを受け取り、少なくとも1つの上記変形領域を追加し、上記変形領域の変形効果パラメータ設定画面を生成し、上記操作欄に上記変形領域の変形効果パラメータ設定画面を表示する操作を更に含み、
変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、上記変形効果パラメータ設定画面で上記変形領域の変形効果パラメータのパラメータ値を取得する操作を含むことを特徴とする項目1-3のいずれか一項に記載の方法。
(項目5)
変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、参照画像上で変形領域を移動することで、上記変形領域の位置パラメータを取得する操作、及び/又は、上記変形領域の大きさを調整することで、上記変形領域の範囲を取得する操作、及び/又は、変形効果を制御するための変形曲線を調整することで、上記変形領域の変形効果パラメータのパラメータ値を取得する操作、及び/又は、変形効果制御パラメータのパラメータ値を受け取ることで、上記変形領域の変形効果パラメータのパラメータ値を取得する操作を含むことを特徴とする項目1-4のいずれか一項に記載の方法。
(項目6)
変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、上記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られたことに応じて、設定されたパラメータ値を上記変形領域の変形効果パラメータのパラメータ値とする操作、及び/又は、上記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られていないことに応じて、事前設定パラメータ値を上記変形領域の変形効果パラメータのパラメータ値とする操作を含むことを特徴とする項目4又は5に記載の方法。
(項目7)
操作欄の対話インターフェイスで入力された変形領域削除コマンドを受け取り、上記変形領域及び上記変形領域の変形効果パラメータのパラメータ値を削除する操作を更に含むことを特徴とする項目4-6のいずれか一項に記載の方法。
(項目8)
上記キーポイントは、頭部キーポイント、顔部キーポイント、肩部キーポイント、腕キーポイント、ジェスチャキーポイント、腰部キーポイント、腿部キーポイント、足部キーポイント、人体骨格キーポイントの中のいずれか1種又は複数種を含むことを特徴とする項目1-7のいずれか一項に記載の方法。
(項目9)
上記頭部キーポイントは、頭頂部キーポイント、鼻先キーポイント及びあごキーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記面部顔部キーポイントは、顔部輪郭キーポイント、目キーポイント、眉毛キーポイント、鼻キーポイント、口部キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記肩部キーポイントは、肩部と頭部の結合位置に位置する肩頭結合キーポイント、及び腕根元部輪郭キーポイントと肩頭結合キーポイントとの間の中点位置に位置する肩輪郭中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腕キーポイントは、手首輪郭キーポイント、肘輪郭キーポイント、腕根元部輪郭キーポイント、手首輪郭キーポイントと肘輪郭キーポイントとの間の中点位置に位置する前腕輪郭中点キーポイント、及び肘輪郭キーポイントと腕根元部輪郭キーポイントとの間の中点位置に位置する上腕中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記ジェスチャキーポイントは、ジェスチャボックスの4つの頂点キーポイント、及びジェスチャボックスの中心キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腿部キーポイントは、股間部キーポイント、ひざ輪郭キーポイント、足首輪郭キーポイント、太腿付け根外側輪郭キーポイント、ひざ輪郭キーポイントと足首輪郭キーポイントとの間の中点位置に位置する下腿輪郭中点キーポイント、ひざ内輪郭キーポイントと股間部キーポイントとの間の中点位置に位置する太腿内輪郭中点キーポイント、及びひざ外輪郭キーポイントと太腿付け根外側輪郭キーポイントとの間の中点位置に位置する太腿外輪郭中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腰部キーポイントは、太腿付け根外側輪郭キーポイントと腕根元部輪郭キーポイントとの間をN等分して生成したN個の等分点の中のいずれか一項又は複数項を含み、上記Nが1より大きく、及び/又は、
上記足部キーポイントは、つま先キーポイント及び踵キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記人体骨格キーポイントは、右肩骨格キーポイント、右肘骨格キーポイント、右手首骨格キーポイント、左肩骨格キーポイント、左肘骨格キーポイント、左手首骨格キーポイント、右寛骨骨格キーポイント、右膝骨格キーポイント、右踝骨格キーポイント、左寛骨骨格キーポイント、左膝骨格キーポイント、左踝骨格キーポイント、頭頂部骨格キーポイント、及び頸部骨格キーポイントの中のいずれか一項又は複数項を含むことを特徴とする項目8に記載の方法。
(項目10)
上記目キーポイントは、左目縁キーポイント、左目瞳孔中心キーポイント、左目中心キーポイント、右目縁キーポイント、右目瞳孔中心キーポイント、及び右目中心キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記眉毛キーポイントは、左眉毛キーポイント及び右眉毛キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記鼻キーポイントは、鼻筋キーポイント、鼻下縁キーポイント、及び鼻外側輪郭キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記口部キーポイントは、上口唇キーポイント、及び下口唇キーポイントの中のいずれか一項又は複数項を含むことを特徴とする項目9に記載の方法。
(項目11)
上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する上記操作に、上記変形領域の位置参照点と上記少なくとも1つのキーポイントとの間の対応関係を確立する操作、及び/又は、上記変形領域の位置参照点と検出ボックスの中心キーポイントとの間の対応関係を確立する操作を含むことを特徴とする項目1-10のいずれか一項に記載の方法。
(項目12)
上記変形効果パラメータは、
変形領域の変形効果を表示するか否かを制御するための表示パラメータ、
変形領域の変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータ、
変形効果のリピート再生回数を表すためのリピートパラメータ、
変形領域の変形効果を遅延表示する時間を表すための遅延トリガパラメータ、
変形領域の変形効果の表示を終了する動作を表すためのトリガ終了パラメータ、
変形領域の変形効果を制御するための変形効果制御パラメータ、
変形領域のサイズ変化の参照基準を表すための表示サイズパラメータ、
変形領域と事前設定キーポイントとの間の位置結び付け関係を表すための位置パラメータ、
変形領域の回転が従う中心点を表すための回転中心パラメータ、
変形領域の中心点を表すための変形中心パラメータ、
変形領域の中心点ずらしモードを切り替えるためのモード切り替えパラメータ、
変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータの中のいずれか一項又は複数項を含むことを特徴とする項目1-11のいずれか一項に記載の方法。
(項目13)
上記回転中心パラメータのパラメータ値は画像の中心点であることを特徴とする項目12に記載の方法。
(項目14)
上記トリガ動作パラメータのパラメータ値に対応するトリガ動作は、無動作トリガ、眼部動作、頭部動作、眉部動作、手部動作、口部動作、肩部動作の中のいずれか一項又は複数項を含むことを特徴とする項目12又は13に記載の方法。
(項目15)
変形曲線によって上記変形領域の変形効果を制御し、上記変形効果制御パラメータは上記変形曲線のパラメータを含み、
上記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータの中のいずれか一項又は複数項を含むことを特徴とする項目12-14のいずれか一項に記載の方法。
(項目16)
上記変形効果の引伸方向は、上記変形領域の中心点から外へ引伸する方向、及び/又は、上記変形領域の中心点から内へ引伸する方向を含むことを特徴とする項目15に記載の方法。
(項目17)
上記位置パラメータ内の事前設定キーポイントは、所定キーポイントのうち、上記変形領域の境界に位置し且つ連結線が上記変形領域の中心点を通過する2つのキーポイントを含み、
上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作は、上記変形領域と上記変形領域の境界に位置し且つ連結線が上記変形領域の中心点を通過する上記2つのキーポイントとの間の対応関係を確立する操作を含むことを特徴とする項目12-16のいずれか一項に記載の方法。
(項目18)
上記変形領域の中心点ずらしモードは、中心点簡便引伸モード及び/又は径方向ずらし引伸モードを含むことを特徴とする項目12-17のいずれか一項に記載の方法。
(項目19)
コンテンツ表示欄によって、少なくとも1つの参照部位を含む参照画像を表示する操作を更に含むことを特徴とする項目1-18のいずれか一項に記載の方法。
(項目20)
操作欄の対話インターフェイスで入力された参照点表示コマンドを受け取り、上記参照画像上のキーポイントを表示する操作、及び/又は、操作欄の対話インターフェイスで入力された参照点非表示コマンドを受け取り、上記参照画像上のキーポイントを表示しない操作を更に含むことを特徴とする項目19に記載の方法。
(項目21)
上記参照画像は、参照人物の少なくとも一部の画像を含むことを特徴とする項目19又は20に記載の方法。
(項目22)
上記参照人物の少なくとも一部の画像は、上記参照人物の完全画像、頭部画像、顔部画像、肩部画像、腕画像、ジェスチャ画像、腰部画像、腿部画像、足部画像の中のいずれか一項又は複数項を含むことを特徴とする項目21に記載の方法。
(項目23)
上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記コンテンツ表示欄に上記変形領域の変形効果を表示する操作を更に含むことを特徴とする項目19-22のいずれか一項に記載の方法。
(項目24)
上記コンテンツ表示欄で受け取られた、上記変形領域に対する位置移動操作により、上記コンテンツ表示欄における上記変形領域の表示位置を更新し、且つ上記変形領域の変形効果パラメータ内の対応するパラメータ値を更新する操作を更に含むことを特徴とする項目23に記載の方法。
(項目25)
上記コンテンツ表示欄で受け取られた、上記変形領域に対するサイズ調整操作により、上記コンテンツ表示欄における上記変形領域の表示サイズを更新し、且つ上記変形領域の変形効果パラメータ内の対応するパラメータ値を更新する操作を更に含むことを特徴とする項目22-24のいずれか一項に記載の方法。
(項目26)
上記操作欄の対話インターフェイスで受け取られた2つ又は2つ以上の変形領域に対する画像レイヤーパラメータ調整コマンドに基づいて、上記2つ又は2つ以上の変形領域の間の遮蔽関係を調整し、調整された遮蔽関係及び上記2つ又は2つ以上の変形領域に対応する変形パラメータのパラメータ値に基づいて、上記2つ又は2つ以上の変形領域に対応する変形効果を表示する操作を更に含むことを特徴とする項目19-25のいずれか一項に記載の方法。
(項目27)
変形特殊効果プログラムファイルパッケージを生成する上記操作の前に、予め設定された変形特殊効果プログラムファイル及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記変形領域の特殊効果プログラムファイルを生成し、プログラムファイル欄によって、上記変形領域の特殊効果プログラムファイルを表示する操作を更に含むことを特徴とする項目1-26のいずれか一項に記載の方法。
(項目28)
上記変形特殊効果プログラムファイルは、jsonプログラムで生成された特殊効果プログラムファイルを含むことを特徴とする項目27に記載の方法。
(項目29)
受け取られた起動コマンドにより起動し、操作欄、コンテンツ表示欄及び/又はプログラムファイル欄を含む操作画面を表示する操作を更に含むことを特徴とする項目1-28のいずれか一項に記載の方法。
(項目30)
上記操作画面は、左側、中部及び右側という3つの領域を含み、
操作画面を表示する上記操作は、上記操作画面の左側に上記操作欄を表示し、上記操作画面の中部に上記コンテンツ表示欄を表示し、上記操作画面の右側に上記プログラムファイル欄を表示する操作を含むことを特徴とする項目29に記載の方法。
(項目31)
変形特殊効果プログラムファイルパッケージを生成する上記操作の後に、受け取られた保存コマンドにより、上記保存コマンドの指示した位置に上記変形特殊効果プログラムファイルパッケージを保存する操作を更に含むことを特徴とする項目1-30のいずれか一項に記載の方法。
(項目32)
受け取られた保存コマンドにより、上記保存コマンドの指示した位置に上記変形特殊効果プログラムファイルパッケージを保存する上記操作は、
保存コマンドが受け取られたことに応じて、保存パス選択インターフェイス及び圧縮インターフェイスを表示する操作と、
上記保存パス選択インターフェイスから送られた保存位置を受け取る操作と、上記圧縮インターフェイスにより送られた圧縮方式を受け取り、上記圧縮方式に基づいて上記変形特殊効果プログラムファイルパッケージを圧縮し、圧縮ファイルパッケージを生成する操作と、
上記圧縮ファイルパッケージを上記保存位置の指示したフォルダーに記憶する操作と、を含むことを特徴とする項目31に記載の方法。
(項目33)
変形領域の変形効果パラメータのパラメータ値を取得する操作と、
被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する操作と、を含むことを特徴とする変形特殊効果生成方法。
(項目34)
変形領域の変形効果パラメータのパラメータ値を取得する上記操作の前に、変形特殊効果プログラムファイルパッケージをインポートする操作を更に含み、
変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、上記変形特殊効果プログラムファイルパッケージ内の変形領域の変形効果パラメータのパラメータ値を取得する操作を含むことを特徴とする項目33に記載の方法。
(項目35)
上記変形特殊効果プログラムファイルパッケージは、項目1-32のいずれか一項に記載の方法を用いて生成したものであることを特徴とする項目33又は34に記載の方法。
(項目36)
上記被処理画像内のキーポイントを検出する操作を更に含むことを特徴とする項目33-35のいずれか一項に記載の方法。
(項目37)
上記変形領域の変形効果パラメータのパラメータ値は、上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を含むことを特徴とする項目33-36のいずれか一項に記載の方法。
(項目38)
変形特殊効果プログラムファイルパッケージをインポートする上記操作は、変形領域を読み取るための第1のインターフェイス関数を呼び出すことによって、上記変形特殊効果プログラムファイルパッケージを内部メモリに読み込む操作と、上記変形特殊効果プログラムファイルパッケージを解析し、上記変形効果パラメータのパラメータ値を含む変形特殊効果プログラムファイルを取得する操作と、を含むことを特徴とする項目34-37のいずれか一項に記載の方法。
(項目39)
上記変形特殊効果プログラムファイルは、jsonプログラムの変形特殊効果プログラムファイルを含むことを特徴とする項目38に記載の方法。
(項目40)
変形領域の変形効果パラメータのパラメータ値を取得する上記操作は、ステッカーハンドルを作成するための第2のインターフェイス関数によって、ステッカーハンドルを作成する操作と、上記変形特殊効果プログラムファイル内の変形領域の変形効果パラメータのパラメータ値を読み取り、上記ステッカーハンドルに記憶する操作と、を含むことを特徴とする項目38又は39に記載の方法。
(項目41)
上記ステッカーハンドル内の上記変形特殊効果プログラムファイルの変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像における上記変形領域の表示位置を取得する操作を更に含むことを特徴とする項目40に記載の方法。
(項目42)
上記被処理画像がビデオ内の画像である場合、上記変形領域が上記画像の所在するビデオに表示されるビデオフレーム数を取得し、上記ビデオから上記ビデオフレーム数に対応する画像を読み取る操作を更に含むことを特徴とする項目41に記載の方法。
(項目43)
被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する上記操作は、
変形領域をレンダリングするための第3のインターフェイス関数を呼び出すことによって、上記ステッカーハンドルから、上記被処理画像上に表示しようとする変形領域を読み取る操作と、
上記被処理画像内のキーポイント及び上記の表示しようとする変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像における上記変形領域の表示位置を決定する操作と、
上記被処理画像における上記変形領域の表示位置に基づいて、上記変形領域を上記被処理画像上の上記表示位置に表示する操作と、を含むことを特徴とする項目40-42のいずれか一項に記載の方法。
(項目44)
上記変形特殊効果プログラムファイルパッケージの再生が完了したことに応じて、ステッカーハンドルを廃棄するための第4のインターフェイス関数を呼び出すことによって、上記ステッカーハンドルを廃棄する操作を更に含むことを特徴とする項目40-43のいずれか一項に記載の方法。
(項目45)
上記被処理画像内のキーポイントを検出する上記操作は、ニューラルネットワークによって、上記被処理画像に対して上記対応関係に関わるキーポイントの検出を行い、キーポイント検出結果を出力する操作を含むことを特徴とする項目36-44のいずれか一項に記載の方法。
(項目46)
上記キーポイント検出結果は、上記対応関係に関わるキーポイントの上記被処理画像における位置、上記対応関係に関わるキーポイントの事前設定番号の中のいずれか一項又は複数項を含むことを特徴とする項目45に記載の方法。
(項目47)
上記変形効果パラメータは、変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータを含み、
上記方法は、上記被処理画像に上記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたか否かを検出する操作を更に含み、
被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する上記操作は、上記被処理画像に上記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたことが検出されたことに応じて、上記被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する操作を含むことを特徴とする項目45又は46に記載の方法。
(項目48)
上記変形効果パラメータは、変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータを含み、
被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する時に、上記美顔/化粧効果パラメータに基づいて、上記被処理画像に美顔/化粧効果を表示する操作を更に含むことを特徴とする項目33-47のいずれか一項に記載の方法。
(項目49)
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得するための第1の取得モジュールと、
少なくとも1つの上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立するための確立モジュールと、
上記パラメータ値が取得された少なくとも1つの上記変形領域及び上記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成するための第1の生成モジュールと、を含むことを特徴とする変形特殊効果プログラムファイルパッケージの生成装置。
(項目50)
上記少なくとも1つの変形領域を追加するための追加モジュールを更に含むことを特徴とする項目49に記載の装置。
(項目51)
上記変形領域が複数である場合、上記第1の取得モジュールは、複数の変形領域の変形効果パラメータのパラメータ値を一括取得する操作、及び/又は、複数の変形領域のうちの少なくとも一部の上記変形領域の変形効果パラメータのパラメータ値をそれぞれ取得する操作、及び/又は、1つの変形領域をコピーして、他の1つの変形領域と上記他の1つの変形領域の変形効果パラメータのパラメータ値とを取得する操作を実行するために用いられることを特徴とする項目49又は50に記載の装置。
(項目52)
操作欄を更に含み、上記操作欄が、対話インターフェイスを含み、上記対話インターフェイスが、上記対話インターフェイスで入力された変形領域追加コマンドを受け取り、少なくとも1つの上記変形領域を追加し、上記変形領域の変形効果パラメータ設定画面を生成し、上記変形領域の変形効果パラメータ設定画面を表示するために用いられる、
上記第1の取得モジュールは、上記変形効果パラメータ設定画面で上記変形領域の変形効果パラメータのパラメータ値を取得するために用いられることを特徴とする項目49-51のいずれか一項に記載の装置。
(項目53)
上記第1の取得モジュールは、参照画像上で変形領域を移動することで、上記変形領域の位置パラメータを取得する操作、及び/又は、上記変形領域の大きさを調整することで、上記変形領域の範囲を取得する操作、及び/又は、変形効果を制御するための変形曲線を調整することで、上記変形領域の変形効果パラメータのパラメータ値を取得する操作、及び/又は、変形効果制御パラメータのパラメータ値を受け取ることで、上記変形領域の変形効果パラメータのパラメータ値を取得する操作を実行するために用いられることを特徴とする項目49-52のいずれか一項に記載の装置。
(項目54)
上記第1の取得モジュールは、上記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られたことに応じて、設定されたパラメータ値を上記変形領域の変形効果パラメータのパラメータ値とする操作、及び/又は、上記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られていないことに応じて、事前設定パラメータ値を上記変形領域の変形効果パラメータのパラメータ値とする操作を実行するために用いられることを特徴とする項目52又は53に記載の装置。
(項目55)
操作欄の対話インターフェイスで入力された変形領域削除コマンドを受け取り、上記変形領域及び上記変形領域の変形効果パラメータのパラメータ値を削除するための削除モジュールを更に含むことを特徴とする項目52-54のいずれか一項に記載の装置。
(項目56)
上記キーポイントは、頭部キーポイント、顔部キーポイント、肩部キーポイント、腕キーポイント、ジェスチャキーポイント、腰部キーポイント、腿部キーポイント、足部キーポイント、人体骨格キーポイントの中のいずれか1種又は複数種を含むことを特徴とする項目49-55のいずれか一項に記載の装置。
(項目57)
上記頭部キーポイントは、頭頂部キーポイント、鼻先キーポイント及びあごキーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記面部顔部キーポイントは、顔部輪郭キーポイント、目キーポイント、眉毛キーポイント、鼻キーポイント、口部キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記肩部キーポイントは、肩部と頭部の結合位置に位置する肩頭結合キーポイント、及び腕根元部輪郭キーポイントと肩頭結合キーポイントとの間の中点位置に位置する肩輪郭中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腕キーポイントは、手首輪郭キーポイント、肘輪郭キーポイント、腕根元部輪郭キーポイント、手首輪郭キーポイントと肘輪郭キーポイントとの間の中点位置に位置する前腕輪郭中点キーポイント、及び肘輪郭キーポイントと腕根元部輪郭キーポイントとの間の中点位置に位置する上腕中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記ジェスチャキーポイントは、ジェスチャボックスの4つの頂点キーポイント、及びジェスチャボックスの中心キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腿部キーポイントは、股間部キーポイント、ひざ輪郭キーポイント、足首輪郭キーポイント、太腿付け根外側輪郭キーポイント、ひざ輪郭キーポイントと足首輪郭キーポイントとの間の中点位置に位置する下腿輪郭中点キーポイント、ひざ内輪郭キーポイントと股間部キーポイントとの間の中点位置に位置する太腿内輪郭中点キーポイント、及びひざ外輪郭キーポイントと太腿付け根外側輪郭キーポイントとの間の中点位置に位置する太腿外輪郭中点キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記腰部キーポイントは、太腿付け根外側輪郭キーポイントと腕根元部輪郭キーポイントとの間をN等分して生成したN個の等分点の中のいずれか一項又は複数項を含み、上記Nが1より大きく、及び/又は、
上記足部キーポイントは、つま先キーポイント及び踵キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記人体骨格キーポイントは、右肩骨格キーポイント、右肘骨格キーポイント、右手首骨格キーポイント、左肩骨格キーポイント、左肘骨格キーポイント、左手首骨格キーポイント、右寛骨骨格キーポイント、右膝骨格キーポイント、右踝骨格キーポイント、左寛骨骨格キーポイント、左膝骨格キーポイント、左踝骨格キーポイント、頭頂部骨格キーポイント、及び頸部骨格キーポイントの中のいずれか一項又は複数項を含むことを特徴とする項目56に記載の装置。
(項目58)
上記目キーポイントは、左目縁キーポイント、左目瞳孔中心キーポイント、左目中心キーポイント、右目縁キーポイント、右目瞳孔中心キーポイント、及び右目中心キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記眉毛キーポイントは、左眉毛キーポイント及び右眉毛キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記鼻キーポイントは、鼻筋キーポイント、鼻下縁キーポイント、及び鼻外側輪郭キーポイントの中のいずれか一項又は複数項を含み、及び/又は、
上記口部キーポイントは、上口唇キーポイント、及び下口唇キーポイントの中のいずれか一項又は複数項を含むことを特徴とする項目57に記載の装置。
(項目59)
上記確立モジュールは、上記変形領域の位置参照点と上記少なくとも1つのキーポイントとの間の対応関係を確立する操作、及び/又は、上記変形領域の位置参照点と検出ボックスの中心キーポイントとの間の対応関係を確立する操作を実行するために用いられることを特徴とする項目49-58のいずれか一項に記載の装置。
(項目60)
上記変形効果パラメータは、
変形領域の変形効果を表示するか否かを制御するための表示パラメータ、
変形領域の変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータ、
変形効果のリピート再生回数を表すためのリピートパラメータ、
変形領域の変形効果を遅延表示する時間を表すための遅延トリガパラメータ、
変形領域の変形効果の表示を終了する動作を表すためのトリガ終了パラメータ、
変形領域の変形効果を制御するための変形効果制御パラメータ、
変形領域のサイズ変化の参照基準を表すための表示サイズパラメータ、
変形領域と事前設定キーポイントとの間の位置結び付け関係を表すための位置パラメータ、
変形領域の回転が従う中心点を表すための回転中心パラメータ、
変形領域の中心点を表すための変形中心パラメータ、
変形領域の中心点ずらしモードを切り替えるためのモード切り替えパラメータ、
変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータの中のいずれか一項又は複数項を含むことを特徴とする項目49-59のいずれか一項に記載の装置。
(項目61)
上記回転中心パラメータのパラメータ値は画像の中心点であることを特徴とする項目60に記載の装置。
(項目62)
上記トリガ動作パラメータのパラメータ値に対応するトリガ動作は、無動作トリガ、眼部動作、頭部動作、眉部動作、手部動作、口部動作、肩部動作の中のいずれか一項又は複数項を含むことを特徴とする項目60又は61に記載の装置。
(項目63)
変形曲線によって上記変形領域の変形効果を制御し、上記変形効果制御パラメータは上記変形曲線のパラメータを含み
上記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータの中のいずれか一項又は複数項を含むことを特徴とする項目60-62のいずれか一項に記載の装置。
(項目64)
上記変形効果の引伸方向は、上記変形領域の中心点から外へ引伸する方向、及び/又は、上記変形領域の中心点から内へ引伸する方向を含むことを特徴とする項目63に記載の装置。
(項目65)
上記位置パラメータ内の事前設定キーポイントは、所定キーポイントのうち、上記変形領域の境界に位置し且つ連結線が上記変形領域の中心点を通過する2つのキーポイントを含み、
上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作は、上記変形領域と上記変形領域の境界に位置し且つ連結線が上記変形領域の中心点を通過する上記2つのキーポイントとの間の対応関係を確立する操作を含むことを特徴とする項目60-64のいずれか一項に記載の装置。
(項目66)
上記変形領域の中心点ずらしモードは、中心点簡便引伸モード及び/又は径方向ずらし引伸モードを含むことを特徴とする項目60-65のいずれか一項に記載の装置。
(項目67)
少なくとも1つの参照部位を含む参照画像を表すためのコンテンツ表示欄を更に含むことを特徴とする項目49-66のいずれか一項に記載の装置。
(項目68)
上記操作欄は、対話インターフェイスで入力された参照点表示コマンドを受け取り、上記参照画像上のキーポイントを表示する操作、及び/又は、対話インターフェイスで入力された参照点非表示コマンドを受け取り、上記参照画像上のキーポイントを表示しない操作のために用いられることを特徴とする項目67に記載の装置。
(項目69)
上記参照画像は、参照人物の少なくとも一部の画像を含むことを特徴とする項目67又は68に記載の装置。
(項目70)
上記参照人物の少なくとも一部の画像は、上記参照人物の完全画像、頭部画像、顔部画像、肩部画像、腕画像、ジェスチャ画像、腰部画像、腿部画像、足部画像の中のいずれか一項又は複数項を含むことを特徴とする項目69に記載の装置。
(項目71)
上記コンテンツ表示欄は、更に、上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記コンテンツ表示欄に上記変形領域の変形効果を表示するために用いられることを特徴とする項目67-70のいずれか一項に記載の装置。
(項目72)
上記コンテンツ表示欄は、更に、上記変形領域に対する位置移動操作を受け取るために用いられ、上記装置は、上記コンテンツ表示欄で受け取られた上記変形領域に対する位置移動操作により、上記コンテンツ表示欄における上記変形領域の表示位置を更新し、且つ上記変形領域の変形効果パラメータ内の対応するパラメータ値を更新するための第1の更新モジュールを更に含むことを特徴とする項目71に記載の装置。
(項目73)
上記コンテンツ表示欄は、更に上記変形領域に対するサイズ調整操作を受け取るために用いられ、
上記装置は、上記コンテンツ表示欄で受け取られた上記変形領域に対するサイズ調整操作により、上記コンテンツ表示欄における上記変形領域の表示サイズを更新し、且つ上記変形領域の変形効果パラメータ中の対応するパラメータ値を更新するための第2の更新モジュールを更に含むことを特徴とする項目70-72のいずれか一項に記載の装置。
(項目74)
上記操作欄は、更に、対話インターフェイスによって2つ又は2つ以上の変形領域に対する画像レイヤーパラメータ調整コマンドを受け取るために用いられ、
調整モジュールは、上記操作欄の対話インターフェイスで受け取られた2つ又は2つ以上の変形領域に対する画像レイヤーパラメータ調整コマンドに基づいて、上記2つ又は2つ以上の変形領域の間の遮蔽関係を調整し、調整された遮蔽関係及び上記2つ又は2つ以上の変形領域に対応する変形パラメータのパラメータ値に基づいて、上記2つ又は2つ以上の変形領域に対応する変形効果を表示するために用いられることを特徴とする項目67-73のいずれか一項に記載の装置。
(項目75)
上記第1の生成モジュールは、更に、予め設定された変形特殊効果プログラムファイル及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記変形領域の特殊効果プログラムファイルを生成し、プログラムファイル欄によって、上記変形領域の特殊効果プログラムファイルを表示するために用いられ、
上記装置は、上記変形領域の特殊効果プログラムファイルを表示するための上記プログラムファイル欄を更に含むことを特徴とする項目49-74のいずれか一項に記載の装置。
(項目76)
上記変形特殊効果プログラムファイルは、jsonプログラムで生成された特殊効果プログラムファイルを含むことを特徴とする項目75に記載の装置。
(項目77)
操作画面を更に含み、上記操作画面が、上記操作欄、上記コンテンツ表示欄及び/又は上記プログラムファイル欄を含むことを特徴とする項目49-76のいずれか一項に記載の装置。
(項目78)
上記操作画面は、左側、中部及び右側という3つの領域を含み、
上記操作画面の左側は上記操作欄であり、上記操作画面の中部は上記コンテンツ表示欄であり、上記操作画面の右側は上記プログラムファイル欄であることを特徴とする項目77に記載の装置。
(項目79)
受け取られた保存コマンドにより、上記保存コマンドの指示した位置に上記変形特殊効果プログラムファイルパッケージを保存するための保存モジュールを更に含むことを特徴とする項目49-78のいずれか一項に記載の装置。
(項目80)
上記保存モジュールは、
保存コマンドが受け取られたことに応じて、保存パス選択インターフェイス及び圧縮インターフェイスを表示する操作と、
上記保存パス選択インターフェイスから送られた保存位置を受け取る操作と、上記圧縮インターフェイスにより送られた圧縮方式を受け取り、上記圧縮方式に基づいて上記変形特殊効果プログラムファイルパッケージを圧縮し、圧縮ファイルパッケージを生成する操作と、
上記圧縮ファイルパッケージを上記保存位置の指示したフォルダーに記憶する操作とを実行するために用いられることを特徴とする項目79に記載の装置。
(項目81)
変形領域の変形効果パラメータのパラメータ値を取得するための第2の取得モジュールと、
被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成するための第2の生成モジュールと、を含むことを特徴とする変形特殊効果生成装置。
(項目82)
変形特殊効果プログラムファイルパッケージをインポートするためのインポートモジュールを更に含み、
上記第2の生成モジュールは、上記変形特殊効果プログラムファイルパッケージ中の変形領域の変形効果パラメータのパラメータ値を取得するために用いられることを特徴とする項目81に記載の装置。
(項目83)
上記変形特殊効果プログラムファイルパッケージは、項目1-32のいずれか一項に記載の方法又は項目49-80のいずれか一項に記載の装置を用いて生成したものであることを特徴とする項目81又は82に記載の装置。
(項目84)
上記被処理画像内のキーポイントを検出するための第1の検出モジュールを更に含むことを特徴とする項目81-83のいずれか一項に記載の装置。
(項目85)
上記変形領域の変形効果パラメータのパラメータ値は、上記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を含むことを特徴とする項目81-84のいずれか一項に記載の装置。
(項目86)
上記インポートモジュールは、変形領域を読み取るための第1のインターフェイス関数を呼び出すことによって、上記変形特殊効果プログラムファイルパッケージを内部メモリに読み込む操作と、上記変形特殊効果プログラムファイルパッケージを解析し、上記変形効果パラメータのパラメータ値を含む変形特殊効果プログラムファイルを取得する操作とを実行するために用いられることを特徴とする項目82-85のいずれか一項に記載の装置。
(項目87)
上記変形特殊効果プログラムファイルは、jsonプログラムの変形特殊効果プログラムファイルを含むことを特徴とする項目86に記載の装置。
(項目88)
上記第2の取得モジュールは、ステッカーハンドルを作成するための第2のインターフェイス関数によって、ステッカーハンドルを作成する操作と、上記変形特殊効果プログラムファイル中の変形領域の変形効果パラメータのパラメータ値を読み取り、上記ステッカーハンドルに記憶する操作とを実行するために用いられることを特徴とする項目86又は87に記載の装置。
(項目89)
上記第2の生成モジュールは、変形領域をレンダリングするための第3のインターフェイス関数を呼び出すことによって、上記ステッカーハンドルから、上記被処理画像上に表示しようとする変形領域を読み取る操作と、上記被処理画像内のキーポイント及び上記の表示しようとする変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像における上記変形領域の表示位置を決定する操作と、上記被処理画像における上記変形領域の表示位置に基づいて、上記変形領域を上記被処理画像上の上記表示位置に表示する操作とを実行するために用いられることを特徴とする項目88に記載の装置。
(項目90)
上記被処理画像がビデオ内の画像である場合、上記第2の生成モジュールは、更に、上記変形領域が上記画像の所在するビデオに表示されるビデオフレーム数を取得し、上記ビデオから上記ビデオフレーム数に対応する画像を読み取るために用いられることを特徴とする項目89に記載の装置。
(項目91)
上記第2の取得モジュールは、更に上記変形特殊効果プログラムファイルパッケージの再生が完了したことに応じて、ステッカーハンドルを廃棄するための第4のインターフェイス関数を呼び出すことによって、上記ステッカーハンドルを廃棄するために用いられることを特徴とする項目88-90のいずれか一項に記載の装置。
(項目92)
上記第1の検出モジュールは、上記被処理画像に対して上記対応関係に関わるキーポイントの検出を行い、キーポイント検出結果を出力するためのニューラルネットワークを含むことを特徴とする項目84-91のいずれか一項に記載の装置。
(項目93)
上記キーポイント検出結果は、上記対応関係に関わるキーポイントの上記被処理画像における位置、上記対応関係に関わるキーポイントの事前設定番号の中のいずれか一項又は複数項を含むことを特徴とする項目92に記載の装置。
(項目94)
上記変形効果パラメータは、変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータを含み、
上記装置は、上記被処理画像に上記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたか否かを検出するための第2の検出モジュールを更に含み、
上記第2の生成モジュールは、上記被処理画像に上記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたことが検出されたことに応じて、上記被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成するために用いられることを特徴とする項目92又は93に記載の装置。
(項目95)
上記変形効果パラメータは、変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータを含み、
上記第2の生成モジュールは、更に、被処理画像内のキーポイント及び上記変形領域の変形効果パラメータのパラメータ値に基づいて、上記被処理画像上で変形効果の特殊効果を生成する時に、上記美顔/化粧効果パラメータに基づいて、上記被処理画像に美顔/化粧効果を表示するために用いられることを特徴とする項目81-94のいずれか一項に記載の装置。
(項目96)
コンピュータプログラムを記憶するためのメモリと、
上記メモリに記憶されたコンピュータプログラムを実行するために用いられ、上記コンピュータプログラムが実行されると、上記項目1-49のいずれか一項に記載の方法を実現するプロセッサと、を含むことを特徴とする電子機器。
(項目97)
コンピュータプログラムが記憶されているコンピュータ可読記憶媒体であって、該コンピュータプログラムがプロセッサにより実行されると、上記項目1-49のいずれか一項に記載の方法を実現することを特徴とするコンピュータ可読記憶媒体
保存コマンドが受け取られたことに応じて、保存パス選択インターフェイス及び圧縮インターフェイスを表示する操作と、
上記保存パス選択インターフェイスから送られた保存位置を受け取る操作と、上記の圧縮インターフェイスにより送られた圧縮方式を受け取り、該圧縮方式により上記変形特殊効果プログラムファイルパッケージを圧縮し、圧縮ファイルパッケージを生成する操作と、
上記圧縮ファイルパッケージを上記保存位置の指示したフォルダーに記憶する操作と、を含んでもよい。
変形特殊効果プログラムファイルパッケージの再生が完了したことに応じて、ステッカーハンドルを廃棄するための第4のインターフェイス関数を呼び出すことによってステッカーハンドルを廃棄する操作を更に含んでもよい。
コンピュータプログラムを記憶するためのメモリと、
メモリに記憶されたコンピュータプログラムを実行するために用いられ、コンピュータプログラムが実行されると、本願のいずれか1つの実施例に記載の変形特殊効果プログラムファイルパッケージの生成方法又は変形特殊効果生成方法を実現するプロセッサと、を含む。
Claims (35)
- 変形特殊効果プログラムファイルパッケージを生成する方法であって、
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する操作であって、前記変形効果パラメータは、前記変形領域の変形効果を制御するための変形効果制御パラメータを含み、前記変形効果制御パラメータは、変形曲線のパラメータを含み、前記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータのうちのいずれか1つ又は複数を含み、前記変形効果の引伸方向は、前記変形領域の中心点から外へ引伸する方向、及び/又は、前記変形領域の中心点から内へ引伸する方向を含む、操作と、
少なくとも1つの前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作と、
前記パラメータ値が取得された少なくとも1つの前記変形領域及び前記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成する操作と
を含む、方法。 - 少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する前記操作の前に、前記少なくとも1つの変形領域を追加する操作を更に含む、請求項1に記載の方法。
- 前記変形領域が複数である場合、少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、複数の変形領域の変形効果パラメータのパラメータ値を一括取得する操作、及び/又は、複数の変形領域のうちの少なくとも一部の前記変形領域の変形効果パラメータのパラメータ値をそれぞれ取得する操作、及び/又は、1つの変形領域をコピーして、他の1つの変形領域と前記他の1つの変形領域の変形効果パラメータのパラメータ値とを取得する操作を含む、請求項1又は2に記載の方法。
- 操作欄の対話インターフェイスで入力された変形領域追加コマンドを受け取り、少なくとも1つの前記変形領域を追加し、前記変形領域の変形効果パラメータ設定画面を生成し、前記操作欄に前記変形領域の変形効果パラメータ設定画面を表示する操作を更に含み、
変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、前記変形効果パラメータ設定画面で前記変形領域の変形効果パラメータのパラメータ値を取得する操作を含む、請求項1~3のいずれか一項に記載の方法。 - 変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、参照画像上で変形領域を移動することで、前記変形領域の位置パラメータを取得する操作、及び/又は、前記変形領域の大きさを調整することで、前記変形領域の範囲を取得する操作、及び/又は、変形効果を制御するための変形曲線を調整することで、前記変形領域の変形効果パラメータのパラメータ値を取得する操作、及び/又は、変形効果制御パラメータのパラメータ値を受け取ることで、前記変形領域の変形効果パラメータのパラメータ値を取得する操作を含む、請求項1~4のいずれか一項に記載の方法。
- 変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、前記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られたことに応じて、設定されたパラメータ値を前記変形領域の変形効果パラメータのパラメータ値とする操作、及び/又は、前記変形領域の変形効果パラメータ設定画面内の対話インターフェイスから送られた変形効果パラメータのパラメータ値が受け取られていないことに応じて、事前設定パラメータ値を前記変形領域の変形効果パラメータのパラメータ値とする操作を含む、請求項4又は請求項5に記載の方法。
- 操作欄の対話インターフェイスで入力された変形領域削除コマンドを受け取り、前記変形領域及び前記変形領域の変形効果パラメータのパラメータ値を削除する操作を更に含む、請求項4~6のいずれか一項に記載の方法。
- 前記キーポイントは、頭部キーポイント、顔部キーポイント、肩部キーポイント、腕キーポイント、ジェスチャキーポイント、腰部キーポイント、腿部キーポイント、足部キーポイント、人体骨格キーポイントのうちのいずれか1種又は複数種を含む、請求項1~7のいずれか一項に記載の方法。
- 前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する前記操作に、前記変形領域の位置参照点と前記少なくとも1つのキーポイントとの間の対応関係を確立する操作、及び/又は、前記変形領域の位置参照点と検出ボックスの中心キーポイントとの間の対応関係を確立する操作を含む、請求項1~8のいずれか一項に記載の方法。
- 前記変形効果パラメータは、
変形領域の変形効果を表示するか否かを制御するための表示パラメータ、
変形領域の変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータ、
変形効果のリピート再生回数を表すためのリピートパラメータ、
変形領域の変形効果を遅延表示する時間を表すための遅延トリガパラメータ、
変形領域の変形効果の表示を終了する動作を表すためのトリガ終了パラメータ、
変形領域のサイズ変化の参照基準を表すための表示サイズパラメータ、
変形領域と事前設定キーポイントとの間の位置結び付け関係を表すための位置パラメータ、
変形領域の回転が従う中心点を表すための回転中心パラメータ、
変形領域の中心点を表すための変形中心パラメータ、
変形領域の中心点ずらしモードを切り替えるためのモード切り替えパラメータ、
変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータ
のうちのいずれか1つ又は複数を含み、
前記変形領域の中心点ずらしモードは、中心点簡便引伸モード及び/又は径方向ずらし引伸モードを含み、
前記トリガ動作パラメータのパラメータ値に対応するトリガ動作は、無動作トリガ、眼部動作、頭部動作、眉部動作、手部動作、口部動作、肩部動作のうちのいずれか1つ又は複数を含む、請求項1~9のいずれか一項に記載の方法。 - 前記位置パラメータ内の事前設定キーポイントは、所定キーポイントのうち、前記変形領域の境界に位置し且つ連結線が前記変形領域の中心点を通過する2つのキーポイントを含み、
前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立する操作は、前記変形領域と前記変形領域の境界に位置し且つ連結線が前記変形領域の中心点を通過する前記2つのキーポイントとの間の対応関係を確立する操作を含む、請求項10に記載の方法。 - 前記方法は、コンテンツ表示欄によって、少なくとも1つの参照部位を含む参照画像を表示する操作を更に含み、
前記方法は、操作欄の対話インターフェイスで入力された参照点表示コマンドを受け取り、前記参照画像上のキーポイントを表示する操作、及び/又は、操作欄の対話インターフェイスで入力された参照点非表示コマンドを受け取り、前記参照画像上のキーポイントを表示しない操作を更に含み、
前記参照画像は、参照人物の少なくとも一部の画像を含み、
前記参照人物の少なくとも一部の画像は、前記参照人物の完全画像、頭部画像、顔部画像、肩部画像、腕画像、ジェスチャ画像、腰部画像、腿部画像、足部画像のうちのいずれか1つ又は複数を含む、請求項1~11のいずれか一項に記載の方法。 - 前記方法は、前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記コンテンツ表示欄に前記変形領域の変形効果を表示する操作を更に含み、
前記方法は、前記コンテンツ表示欄で受け取られた、前記変形領域に対する位置移動操作により、前記コンテンツ表示欄における前記変形領域の表示位置を更新し、且つ前記変形領域の変形効果パラメータ内の対応するパラメータ値を更新する操作を更に含む、請求項12に記載の方法。 - 前記コンテンツ表示欄で受け取られた、前記変形領域に対するサイズ調整操作により、前記コンテンツ表示欄における前記変形領域の表示サイズを更新し、且つ前記変形領域の変形効果パラメータ内の対応するパラメータ値を更新する操作を更に含む、請求項12又は13に記載の方法。
- 前記操作欄の対話インターフェイスで受け取られた2つ又は2つ以上の変形領域に対する画像レイヤーパラメータ調整コマンドに基づいて、前記2つ又は2つ以上の変形領域の間の遮蔽関係を調整し、調整された遮蔽関係及び前記2つ又は2つ以上の変形領域に対応する変形パラメータのパラメータ値に基づいて、前記2つ又は2つ以上の変形領域に対応する変形効果を表示する操作を更に含む、請求項12~14のいずれか一項に記載の方法。
- 変形特殊効果プログラムファイルパッケージを生成する前記操作の前に、予め設定された変形特殊効果プログラムファイル及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記変形領域の特殊効果プログラムファイルを生成し、プログラムファイル欄によって、前記変形領域の特殊効果プログラムファイルを表示する操作を更に含む、請求項1~15のいずれか一項に記載の方法。
- 受け取られた起動コマンドにより起動し、操作欄、コンテンツ表示欄及び/又はプログラムファイル欄を含む操作画面を表示する操作を更に含み、
前記操作画面は、左側、中部及び右側という3つの領域を含み、
操作画面を表示する前記操作は、前記操作画面の左側に前記操作欄を表示し、前記操作画面の中部に前記コンテンツ表示欄を表示し、前記操作画面の右側に前記プログラムファイル欄を表示する操作を含む、請求項1~16のいずれか一項に記載の方法。 - 変形特殊効果プログラムファイルパッケージを生成する前記操作の後に、受け取られた保存コマンドにより、前記保存コマンドの指示した位置に前記変形特殊効果プログラムファイルパッケージを保存する操作を更に含む、請求項1~17のいずれか一項に記載の方法。
- 受け取られた保存コマンドにより、前記保存コマンドの指示した位置に前記変形特殊効果プログラムファイルパッケージを保存する前記操作は、
保存コマンドが受け取られたことに応じて、保存パス選択インターフェイス及び圧縮インターフェイスを表示する操作と、
前記保存パス選択インターフェイスから送られた保存位置を受け取る操作と、前記圧縮インターフェイスにより送られた圧縮方式を受け取り、前記圧縮方式に基づいて前記変形特殊効果プログラムファイルパッケージを圧縮し、圧縮ファイルパッケージを生成する操作と、
前記圧縮ファイルパッケージを前記保存位置の指示したフォルダーに記憶する操作と
を含む、請求項18に記載の方法。 - 変形特殊効果を生成する方法であって、
変形領域の変形効果パラメータのパラメータ値を取得する操作であって、前記変形効果パラメータは、前記変形領域の変形効果を制御するための変形効果制御パラメータを含み、前記変形効果制御パラメータは、変形曲線のパラメータを含み、前記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータのうちのいずれか1つ又は複数を含み、前記変形効果の引伸方向は、前記変形領域の中心点から外へ引伸する方向、及び/又は、前記変形領域の中心点から内へ引伸する方向を含む、操作と、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する操作と
を含む、方法。 - 変形領域の変形効果パラメータのパラメータ値を取得する前記操作の前に、変形特殊効果プログラムファイルパッケージをインポートする操作を更に含み、
変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、前記変形特殊効果プログラムファイルパッケージ内の変形領域の変形効果パラメータのパラメータ値を取得する操作を含む、請求項20に記載の方法。 - 前記変形特殊効果プログラムファイルパッケージは、請求項1~19のいずれか一項に記載の方法を用いて生成したものである、請求項20又は21に記載の方法。
- 前記被処理画像内のキーポイントを検出する操作を更に含み、
前記変形領域の変形効果パラメータのパラメータ値は、前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を含む、請求項20~22のいずれか一項に記載の方法。 - 変形特殊効果プログラムファイルパッケージをインポートする前記操作は、変形領域を読み取るための第1のインターフェイス関数を呼び出すことによって、前記変形特殊効果プログラムファイルパッケージを内部メモリに読み込む操作と、前記変形特殊効果プログラムファイルパッケージを解析し、前記変形効果パラメータのパラメータ値を含む変形特殊効果プログラムファイルを取得する操作とを含む、請求項21~23のいずれか一項に記載の方法。
- 変形領域の変形効果パラメータのパラメータ値を取得する前記操作は、ステッカーハンドルを作成するための第2のインターフェイス関数によって、ステッカーハンドルを作成する操作と、前記変形特殊効果プログラムファイル内の変形領域の変形効果パラメータのパラメータ値を読み取り、前記ステッカーハンドルに記憶する操作とを含む、請求項24に記載の方法。
- 前記ステッカーハンドル内の前記変形特殊効果プログラムファイルの変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像における前記変形領域の表示位置を取得する操作を更に含む、請求項25に記載の方法。
- 前記被処理画像がビデオ内の画像である場合、前記変形領域が前記画像の所在するビデオに表示されるビデオフレーム数を取得し、前記ビデオから前記ビデオフレーム数に対応する画像を読み取る操作を更に含む、請求項26に記載の方法。
- 被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する前記操作は、
変形領域をレンダリングするための第3のインターフェイス関数を呼び出すことによって、前記ステッカーハンドルから、前記被処理画像上に表示しようとする変形領域を読み取る操作と、
前記被処理画像内のキーポイント及び前記の表示しようとする変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像における前記変形領域の表示位置を決定する操作と、
前記被処理画像における前記変形領域の表示位置に基づいて、前記変形領域を前記被処理画像上の前記表示位置に表示する操作と
を含む、請求項25~27のいずれか一項に記載の方法。 - 前記被処理画像内のキーポイントを検出する前記操作は、ニューラルネットワークによって、前記被処理画像に対して前記対応関係に関わるキーポイントの検出を行い、キーポイント検出結果を出力する操作を含み、
前記キーポイント検出結果は、前記対応関係に関わるキーポイントの前記被処理画像における位置、前記対応関係に関わるキーポイントの事前設定番号のうちのいずれか1つ又は複数を含む、請求項23~28のいずれか一項に記載の方法。 - 前記変形効果パラメータは、変形効果の表示をトリガするトリガ動作を表すためのトリガ動作パラメータを含み、
前記方法は、前記被処理画像に前記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたか否かを検出する操作を更に含み、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する前記操作は、前記被処理画像に前記トリガ動作パラメータのパラメータ値に対応するトリガ動作が現れたことが検出されたことに応じて、前記被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する操作を含む、請求項29に記載の方法。 - 前記変形効果パラメータは、変形効果を表示する時に事前設定部位に表示される美顔/化粧効果を表すための美顔/化粧効果パラメータを含み、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成する時に、前記美顔/化粧効果パラメータに基づいて、前記被処理画像に美顔/化粧効果を表示する操作を更に含む、請求項20~30のいずれか一項に記載の方法。 - 変形特殊効果プログラムファイルパッケージを生成する装置であって、
少なくとも1つの変形領域の変形効果パラメータのパラメータ値を取得するための第1の取得モジュールであって、前記変形効果パラメータは、前記変形領域の変形効果を制御するための変形効果制御パラメータを含み、前記変形効果制御パラメータは、変形曲線のパラメータを含み、前記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータのうちのいずれか1つ又は複数を含み、前記変形効果の引伸方向は、前記変形領域の中心点から外へ引伸する方向、及び/又は、前記変形領域の中心点から内へ引伸する方向を含む、第1の取得モジュールと、
少なくとも1つの前記変形領域と所定の少なくとも1つのキーポイントとの間の対応関係を確立するための確立モジュールと、
前記パラメータ値が取得された少なくとも1つの前記変形領域及び前記対応関係に基づいて、変形特殊効果プログラムファイルパッケージを生成するための第1の生成モジュールと
を含む、装置。 - 変形特殊効果を生成する装置であって、
変形領域の変形効果パラメータのパラメータ値を取得するための第2の取得モジュールであって、前記変形効果パラメータは、前記変形領域の変形効果を制御するための変形効果制御パラメータを含み、前記変形効果制御パラメータは、変形曲線のパラメータを含み、前記変形曲線のパラメータは、変形効果の引伸方向及び引伸半径を制御するための第1の制御点パラメータ、変形領域の中間領域の変形平滑性を制御するための第2の制御点パラメータ、変形領域の境界領域の変形平滑性を制御するための第3の制御点パラメータのうちのいずれか1つ又は複数を含み、前記変形効果の引伸方向は、前記変形領域の中心点から外へ引伸する方向、及び/又は、前記変形領域の中心点から内へ引伸する方向を含む、第2の取得モジュールと、
被処理画像内のキーポイント及び前記変形領域の変形効果パラメータのパラメータ値に基づいて、前記被処理画像上で変形効果の特殊効果を生成するための第2の生成モジュールと
を含む、装置。 - 電子機器であって、
コンピュータプログラムを記憶するためのメモリと、
前記メモリに記憶されたコンピュータプログラムを実行するプロセッサと
を含み、
前記コンピュータプログラムは、前記プロセッサによって実行されると、請求項1~31のいずれか一項に記載の方法を実現する、電子機器。 - コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、前記コンピュータプログラムは、プロセッサによって実行されると、請求項1~31のいずれか一項に記載の方法を実現する、コンピュータ読み取り可能な記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810123074.2A CN108280883B (zh) | 2018-02-07 | 2018-02-07 | 变形特效程序文件包的生成及变形特效生成方法与装置 |
CN201810123074.2 | 2018-02-07 | ||
PCT/CN2019/074498 WO2019154337A1 (zh) | 2018-02-07 | 2019-02-01 | 变形特效程序文件包的生成及变形特效生成方法与装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021508882A JP2021508882A (ja) | 2021-03-11 |
JP7066855B2 true JP7066855B2 (ja) | 2022-05-13 |
Family
ID=62807901
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020536147A Active JP7066855B2 (ja) | 2018-02-07 | 2019-02-01 | 変形特殊効果プログラムファイルパッケージの生成及び変形特殊効果生成方法並びに装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11270408B2 (ja) |
JP (1) | JP7066855B2 (ja) |
KR (1) | KR102386640B1 (ja) |
CN (1) | CN108280883B (ja) |
SG (1) | SG11202006343RA (ja) |
WO (1) | WO2019154337A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108280883B (zh) * | 2018-02-07 | 2021-05-04 | 北京市商汤科技开发有限公司 | 变形特效程序文件包的生成及变形特效生成方法与装置 |
CN109087239B (zh) * | 2018-07-25 | 2023-03-21 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法、装置及存储介质 |
CN109064387A (zh) * | 2018-07-27 | 2018-12-21 | 北京微播视界科技有限公司 | 图像特效生成方法、装置和电子设备 |
CN109146770A (zh) * | 2018-07-27 | 2019-01-04 | 北京微播视界科技有限公司 | 一种形变图像生成方法、装置、电子设备及计算机可读存储介质 |
CN109064388A (zh) * | 2018-07-27 | 2018-12-21 | 北京微播视界科技有限公司 | 人脸图像效果生成方法、装置和电子设备 |
CN110880156A (zh) * | 2018-09-05 | 2020-03-13 | 武汉斗鱼网络科技有限公司 | 一种长腿特效实现方法、存储介质、设备及系统 |
CN111105345B (zh) * | 2018-10-26 | 2021-11-09 | 北京微播视界科技有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN109688324A (zh) * | 2018-12-04 | 2019-04-26 | 深圳市子瑜杰恩科技有限公司 | 短视频道具切换方法及相关产品 |
CN110070496B (zh) * | 2019-02-28 | 2020-07-31 | 北京字节跳动网络技术有限公司 | 图像特效的生成方法、装置和硬件装置 |
CN110035271B (zh) * | 2019-03-21 | 2020-06-02 | 北京字节跳动网络技术有限公司 | 保真图像生成方法、装置及电子设备 |
CN113434223A (zh) | 2020-03-23 | 2021-09-24 | 北京字节跳动网络技术有限公司 | 特效处理方法及装置 |
CN113709549A (zh) * | 2021-08-24 | 2021-11-26 | 北京市商汤科技开发有限公司 | 特效数据包生成、图像处理方法、装置、设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003263641A (ja) | 2002-03-11 | 2003-09-19 | Mitsubishi Heavy Ind Ltd | 移動分析装置 |
JP2011053942A (ja) | 2009-09-02 | 2011-03-17 | Seiko Epson Corp | 画像処理装置、画像処理方法および画像処理プログラム |
JP2016057775A (ja) | 2014-09-08 | 2016-04-21 | オムロン株式会社 | 似顔絵生成装置、似顔絵生成方法 |
CN105975935A (zh) | 2016-05-04 | 2016-09-28 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法和装置 |
WO2017073001A1 (ja) | 2015-10-26 | 2017-05-04 | パナソニックIpマネジメント株式会社 | メイクパーツ生成装置およびメイクパーツ生成方法 |
JP2017220039A (ja) | 2016-06-08 | 2017-12-14 | 大日本印刷株式会社 | プログラム生成装置及びプログラム |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3377307B2 (ja) * | 1994-07-29 | 2003-02-17 | ブラザー工業株式会社 | モンタージュ作成装置 |
US5990901A (en) * | 1997-06-27 | 1999-11-23 | Microsoft Corporation | Model based image editing and correction |
JPH11306372A (ja) * | 1998-04-17 | 1999-11-05 | Sharp Corp | 画像加工装置、画像加工方法およびその方法を記憶した記憶媒体 |
JP2001268594A (ja) * | 2000-03-15 | 2001-09-28 | Infiniteface.Com Inc | 三次元ビューティーシミュレーション用クライアントサーバシステム |
JP2003116053A (ja) * | 2001-10-05 | 2003-04-18 | Hitachi Ltd | 特殊効果データ符号化方法及び特殊効果表示方法及び特殊効果データ編集方法 |
US20070153091A1 (en) * | 2005-12-29 | 2007-07-05 | John Watlington | Methods and apparatus for providing privacy in a communication system |
FR2907569B1 (fr) * | 2006-10-24 | 2009-05-29 | Jean Marc Robin | Procede et dispositif de simulation virtuelle d'une sequence d'images video. |
CN102055912B (zh) * | 2009-10-29 | 2014-10-29 | 北京中星微电子有限公司 | 一种视频应用系统、视频特效处理系统和方法 |
EP2638526B1 (en) * | 2010-11-12 | 2020-04-29 | Provenance Asset Group LLC | Method and apparatus for selecting content segments |
US9007473B1 (en) * | 2011-03-30 | 2015-04-14 | Rawles Llc | Architecture for augmented reality environment |
CN102567031A (zh) * | 2012-03-01 | 2012-07-11 | 盛乐信息技术(上海)有限公司 | 视频特效扩充方法及系统 |
US9019310B2 (en) * | 2012-03-02 | 2015-04-28 | Adobe Systems Incorporated | Methods and apparatus for applying complex continuous gradients to images |
WO2014028009A1 (en) * | 2012-08-15 | 2014-02-20 | Empire Technology Development Llc | Digital media privacy protection |
CN103810739B (zh) * | 2014-02-20 | 2017-01-04 | 南京师范大学 | 一种图像文字变形动画的生成方法 |
CN105451090B (zh) * | 2014-08-26 | 2019-03-29 | 联想(北京)有限公司 | 图像处理方法和图像处理装置 |
CN105868769A (zh) * | 2015-01-23 | 2016-08-17 | 阿里巴巴集团控股有限公司 | 图像中的人脸关键点定位方法及装置 |
US9838641B1 (en) * | 2015-12-30 | 2017-12-05 | Google Llc | Low power framework for processing, compressing, and transmitting images at a mobile image capture device |
CN106302124A (zh) * | 2016-08-18 | 2017-01-04 | 北京奇虎科技有限公司 | 一种添加特效的方法及电子设备 |
WO2018033137A1 (zh) | 2016-08-19 | 2018-02-22 | 北京市商汤科技开发有限公司 | 在视频图像中展示业务对象的方法、装置和电子设备 |
CN107343211B (zh) * | 2016-08-19 | 2019-04-09 | 北京市商汤科技开发有限公司 | 视频图像处理方法、装置和终端设备 |
EP3321846A1 (en) * | 2016-11-15 | 2018-05-16 | Mastercard International Incorporated | Systems and methods for secure biometric sample raw data storage |
CN108280883B (zh) * | 2018-02-07 | 2021-05-04 | 北京市商汤科技开发有限公司 | 变形特效程序文件包的生成及变形特效生成方法与装置 |
-
2018
- 2018-02-07 CN CN201810123074.2A patent/CN108280883B/zh active Active
-
2019
- 2019-02-01 WO PCT/CN2019/074498 patent/WO2019154337A1/zh active Application Filing
- 2019-02-01 SG SG11202006343RA patent/SG11202006343RA/en unknown
- 2019-02-01 KR KR1020207018884A patent/KR102386640B1/ko active IP Right Grant
- 2019-02-01 JP JP2020536147A patent/JP7066855B2/ja active Active
-
2020
- 2020-06-29 US US16/914,654 patent/US11270408B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003263641A (ja) | 2002-03-11 | 2003-09-19 | Mitsubishi Heavy Ind Ltd | 移動分析装置 |
JP2011053942A (ja) | 2009-09-02 | 2011-03-17 | Seiko Epson Corp | 画像処理装置、画像処理方法および画像処理プログラム |
JP2016057775A (ja) | 2014-09-08 | 2016-04-21 | オムロン株式会社 | 似顔絵生成装置、似顔絵生成方法 |
WO2017073001A1 (ja) | 2015-10-26 | 2017-05-04 | パナソニックIpマネジメント株式会社 | メイクパーツ生成装置およびメイクパーツ生成方法 |
CN105975935A (zh) | 2016-05-04 | 2016-09-28 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法和装置 |
JP2017220039A (ja) | 2016-06-08 | 2017-12-14 | 大日本印刷株式会社 | プログラム生成装置及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20200327641A1 (en) | 2020-10-15 |
JP2021508882A (ja) | 2021-03-11 |
KR20200094769A (ko) | 2020-08-07 |
CN108280883B (zh) | 2021-05-04 |
US11270408B2 (en) | 2022-03-08 |
SG11202006343RA (en) | 2020-07-29 |
KR102386640B1 (ko) | 2022-04-14 |
WO2019154337A1 (zh) | 2019-08-15 |
CN108280883A (zh) | 2018-07-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7066855B2 (ja) | 変形特殊効果プログラムファイルパッケージの生成及び変形特殊効果生成方法並びに装置 | |
JP7015921B2 (ja) | 特殊効果プログラムファイルパッケージの生成及び特殊効果生成方法、装置並びに電子機器 | |
JP7167165B2 (ja) | 特殊効果プログラムファイルパッケージの生成及び特殊効果生成方法、装置並びに電子機器 | |
US11625878B2 (en) | Method, apparatus, and system generating 3D avatar from 2D image | |
JP7033372B2 (ja) | 輪郭描画特殊効果プログラムファイルパッケージの生成方法及び装置、並びに輪郭描画特殊効果生成方法及び装置 | |
CN108711180B (zh) | 美妆和/或换脸特效程序文件包的生成及美妆和/或换脸特效生成方法与装置 | |
US11868515B2 (en) | Generating textured polygon strip hair from strand-based hair for a virtual character | |
JP5442966B2 (ja) | ゲーム装置、ゲーム制御方法、ゲーム制御プログラム、及び、該プログラムを記録した記録媒体 | |
CN109035373A (zh) | 三维特效程序文件包的生成及三维特效生成方法与装置 | |
JP5920858B1 (ja) | プログラム、情報処理装置、深度定義方法及び記録媒体 | |
JP2723070B2 (ja) | 人物像表示によるユーザインタフェース装置 | |
KR20020015229A (ko) | 캐리커쳐의 표정변형을 위한 방법 및 장치 | |
CN115272631A (zh) | 一种虚拟面部模型处理方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200626 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200626 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210824 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220427 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7066855 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |