KR20230034351A - 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체 - Google Patents

얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체 Download PDF

Info

Publication number
KR20230034351A
KR20230034351A KR1020237003737A KR20237003737A KR20230034351A KR 20230034351 A KR20230034351 A KR 20230034351A KR 1020237003737 A KR1020237003737 A KR 1020237003737A KR 20237003737 A KR20237003737 A KR 20237003737A KR 20230034351 A KR20230034351 A KR 20230034351A
Authority
KR
South Korea
Prior art keywords
face
face mask
target
target face
preset
Prior art date
Application number
KR1020237003737A
Other languages
English (en)
Inventor
지아쳉 리우
Original Assignee
베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 filed Critical 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드
Publication of KR20230034351A publication Critical patent/KR20230034351A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G06T3/0012—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 출원은 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체를 제공한다. 본 출원에 따른 얼굴 이미지 표시 방법은, 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하고, 사용자가 얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크를 트리거한 후, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시함으로써, 얼굴 이미지 표시 과정에서의 인터랙션을 증강하고, 사용자가 타겟 얼굴 마스크를 트리거한 후에도, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시할 수 있으며, 이로부터 대상 얼굴에 특정 얼굴 마스크를 표시하는 효과를 구현한다.

Description

얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체
본 출원은 이미지 처리 기술분야에 관한 것으로, 특히 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체에 관한 것이다.
본 출원은 2020년 9월 17일 중국 특허청에 출원한 출원번호가 202010981627.5이고, 발명의 명칭이 "얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체"인 중국 특허 출원의 우선권을 주장하며, 그 모든 내용은 인용을 통해 본 출원에 결합된다.
과학 기술의 발전에 따라, 얼굴 이미지의 표시도 많은 응용 시나리오가 파생되었으며, 여기서, 일부 응용 시나리오에서 사용자는 얼굴 이미지에 대해 처리한 후에 표시할 수 있는 것을 원한다.
비록, 종래의 응용 프로그램은 이미지 처리 방식을 통해 얼굴 이미지에 대해 다양한 처리를 수행하고, 처리한 후의 얼굴 이미지를 표시할 수 있지만, 종래의 응용 프로그램은 사용자의 얼굴 이미지 표시 과정에 인터랙션 방식에 대한 다양성 수요를 만족하지 못한다.
본 출원은 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체를 제공하며, 현재의 사용자의 얼굴 이미지 표시 과정에 인터랙션 방식에 대한 다양성 수요를 만족하지 못하는 기술문제를 해결한다.
제1 측면에서, 본 출원의 실시예는 얼굴 이미지 표시 방법을 제공하는 바,
대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 단계;
타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 단계를 포함한다.
제2 측면에서, 본 출원의 실시예는 얼굴 이미지 표시 장치를 제공하는 바,
대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 표시 모듈;
타겟 얼굴 마스크에 작용하는 트리거 명령을 획득하는 획득 모듈;
또한 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 처리 모듈을 포함하며;
상기 표시 모듈은 또한, 상기 타겟 얼굴 마스크를 융합한 후의 상기 대상 얼굴을 표시한다.
제3 측면에서, 본 출원의 실시예는 전자기기를 제공하는 바,
적어도 하나의 프로세서와 메모리를 포함하고;
상기 메모리에는 컴퓨터 실행 명령이 저장되고;
상기 적어도 하나의 프로세서가 상기 메모리에 저장된 컴퓨터 실행 명령을 실행하여, 상기 적어도 하나의 프로세서가 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 실행하도록 한다.
제4 측면에서, 본 출원의 실시예는 컴퓨터 판독 가능 저장매체를 제공하는 바, 상기 컴퓨터 판독 가능 저장매체에 컴퓨터 실행 명령이 저장되어 있고, 상기 컴퓨터 실행 명령이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
제5 측면에서, 본 출원의 실시예는 컴퓨터 프로그램 제품을 제공하는 바, 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
제6 측면에서, 본 출원의 실시예는 컴퓨터 프로그램을 제공하는 바, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
본 출원의 실시예에 따른 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체는, 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하고, 사용자가 얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크를 트리거한 후, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시함으로써, 얼굴 이미지 표시 과정에서의 인터랙션을 증강하고, 사용자가 타겟 얼굴 마스크를 트리거한 후에, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시하여, 대상 얼굴에 특정 얼굴 마스크를 표시하는 효과를 구현할 수도 있다.
본 출원의 실시예 또는 종래기술에 따른 기술방안을 더욱 명확하게 설명하기 위하여, 아래에서는 실시예 또는 종래기술을 설명하기 위해 필요한 첨부 도면에 대해 간단하게 소개한다. 아래에서 설명되는 첨부 도면은 본 출원의 일부 실시예일 뿐, 본 분야의 통상적인 지식을 가진 자라면, 창조적 노력을 거치지 않고도 이러한 첨부 도면으로부터 기타 도면을 얻을 수 있음은 자명하다.
도 1은 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 흐름도이다.
도 2는 본 출원의 일 예시적인 실시예에 따른 싱글 얼굴 마스크의 생성을 나타내는 도면이다.
도 3은 본 출원의 일 예시적인 실시예에 따른 얼굴 마스크 시퀀스의 생성을 나타내는 도면이다.
도 4는 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 트리거 과정의 시나리오를 나타내는 도면이다.
도 5는 본 출원의 일 예시적인 실시예에 따른 트리거 후 융합 표시 단계의 흐름도이다.
도 6은 본 출원의 다른 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 흐름도이다.
도 7은 본 출원의 일 예시적인 실시예에 따른 랜더링 단계의 흐름도이다.
도 8은 도 7에 도시된 랜더링 단계의 랜더링 후의 표시 결과를 나타내는 도면이다.
도 9는 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 장치의 구조도이다.
도 10은 본 출원의 일 예시적인 실시예에 따른 전자기기의 구조도이다.
아래 첨부 도면을 참조하여 본 출원의 실시예에 대해 더욱 상세하게 설명한다. 첨부 도면에 본 출원의 일부 실시예가 도시되어 있지만, 본 출원은 다양한 형태로 구현될 수 있으며, 여기서 기재되는 실시예에 제한되는 것으로 해석되어서는 안되며, 반대로 이러한 실시예를 제공함으로써 본 출원을 더욱 명확하고 완전하게 이해하도록 하기 위한 것으로 이해해야 한다. 본 출원의 첨부 도면 및 실시예는 단지 예시적 역할을 위한 것으로, 본 출원의 보호 범위를 한정하지 않는다는 점을 이해하여야 한다.
본 출원의 방법 실시형태에 기재된 각 단계는 서로 다른 순서에 따라 실행되거나, 및/또는 병렬로 수행될 수 있다는 점을 이해하여야 한다. 또한, 방법 실시형태는 추가적인 단계를 포함 및/또는 도시된 단계의 실행을 생략할 수 있다. 본 출원의 범위는 이러한 측면에서는 제한되지 않는다.
본 문에서 사용되는 "포함” 및 그 변형은 개방형 포함으로서, 즉 "포함하지만 한정하지 않는다”이다. 용어 "기반하여”는 "적어도 부분적으로 기반하여”이다. 용어 "일 실시예”는 "적어도 하나의 실시예”를 표시하고; 용어 "다른 실시예”는 "적어도 하나의 다른 실시예”를 표시하며; 용어 "일부 실시예”는 "적어도 일부 실시예”를 표시한다. 기타 용어의 관련 정의는 아래의 설명에서 주어진다.
본 출원에서 언급되는 "제1 ", "제2 " 등의 개념은 서로 다른 장치, 모듈 또는 유닛을 구분하기 위한 것일 뿐, 이러한 장치, 모듈 또는 유닛에 의해 수행되는 기능의 순서 또는 상호 의존 관계를 한정하기 위한 것은 아니다.
주의하여야 할 점은, 본 출원에서 언급되는 "하나”, "복수”와 같은 수식어는 한정하기 위한 것이 아니라 예시적인 것이며, 당업자는 문맥에서 명확하게 나타나 있지 않는 한, "하나 또는 복수”로 이해하여야 한다는 점을 이해하여야 한다.
현재, 얼굴 이미지에 대한 처리 방식은 다양하며, 예를 들어, 얼굴 이미지에 대해 미안 처리를 수행할 수 있고, 얼굴 이미지에 대해 변형 처리를 수행할 수 있다. 그리고 처리 후의 얼굴 이미지에 대한 많은 응용 시나리오도 파생되었지만, 모두 이미 처리 완료된 얼굴 이미지에 기반하여 직접 응용하는 것으로, 사용자의 얼굴 이미지 표시 과정에 인터랙션 방식에 대한 다양성 수요를 만족하지는 못한다.
하지만, 본 출원에 따른 실시예에서, 사용자는 단말기(예를 들어: 개인용 컴퓨터, 노트북 컴퓨터, 태블릿 컴퓨터 및 스마트폰 등 기기)로 대상 얼굴을 획득한 후에, 먼저 대상 얼굴을 기초로 얼굴 마스크 시퀀스를 생성할 수 있고, 여기서, 해당 얼굴 마스크 시퀀스는 복수의 얼굴 마스크를 포함한다. 설명해야 할 바로는, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 대상 얼굴에 직접 대응되는 얼굴 마스크일 수 있고, 대상 얼굴에 대해 상응 처리(예를 들어：변형 처리, 미안 처리) 한 후에 생성된 얼굴 마스크일 수도 있다. 또한, 일 실시예에서, 얼굴 마스크 시퀀스는 복수의 서로 다른 얼굴 형태에 대응되는 마스크를 포함하는 것일 수 있다.
얼굴 마스크 시퀀스를 생성한 후에, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 특정 분포 규칙에 따라 배열한 것일 수 있으며, 예를 들어, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 기설정 원주 방향을 따라 배열된 것일 수 있으며, 여기서, 해당 기설정 원주 방향은 대상 얼굴을 중심으로, 대상 얼굴의 머리 꼭대기 방향을 중심축으로 하여, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸는 효과를 형성할 수 있다. 그리고, 얼굴 마스크 시퀀스는 기설정 운동 방식에 따라 동적으로 표시할 수도 있으며, 예를 들어, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전 운동을 하는 것일 수 있다.
또한, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전 운동하는 회전 속도는 사용자의 신체 특징에 따라 결정될 수 있으며, 예를 들어, 사용자 입 오픈 정도, 사용자 미소 정도 및 사용자의 관련 제스쳐에 따라 결정할 수 있다. 이때, 사용자의 입 오픈 정도에 따른 것을 예를 들어 설명할 수 있는 바, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전 운동하는 회전 속도는 사용자의 입 오픈 정도가 커짐에 따라 빨라질 수 있으며, 즉 사용자가 입을 크게 벌릴수록, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도는 더욱 빠르다. 이로부터, 사용자는 입을 벌리는 정도를 조절하여 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도에 대해 가속 및 감속할 수 있다는 것을 알 수 있다.
사용자가 얼굴 마스크 시퀀스 중의 어느 하나의 마스크에 대해 트리거할 때, 예를 들어, 사용자가 스크린을 클릭하는 방식을 통해, 얼굴 마스크 시퀀스 중의 하나의 마스크를 선택하였을 때 바로 타겟 얼굴 마스크이다. 트리거한 후, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도는, 타겟 얼굴 마스크가 대상 얼굴에 마주하게 이동할 때까지 먼저 감소하고, 이때, 얼굴 마스크 시퀀스의 회전은 정지하고, 해당 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시할 수 있다. 나아가, 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크를 제외한 기타 얼굴 마스크의 경우, 기설정된 투명도 변화 규칙에 따라 점변 소실할 수 있다.
본 출원에 따른 실시예에서, 대상 얼굴의 기설정 상대 위치에 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하고, 사용자가 얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크를 트리거한 후, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시한다. 이로부터 사용자가 타겟 얼굴 마스크에 대해 트리거하기 전에, 얼굴 마스크 시퀀스의 표시 방식과 대상 얼굴 사이에 인터랙션을 가지는 효과를 구현하고, 사용자가 타겟 얼굴 마스크에 대해 트리거한 후, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시하여, 대상 얼굴에 특정 얼굴 마스크를 표시하는 효과를 구현할 수 있다. 아래 몇개 구체적인 구현 형태를 통해 해당 이미지 처리 방법에 대해 상세하게 설명한다.
도 1은 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 흐름도이다. 도 1에 도시된 바와 같이, 본 실시예에 따른 얼굴 이미지 표시 방법은 아래의 단계를 포함한다.
단계(101), 대상 얼굴의 기설정 상대 위치에 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시한다.
본 단계에서, 사용자가 단말기를 통해 대상 얼굴을 획득한 후에, 대상 얼굴의 기설정 상대 위치에 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시할 수 있으며, 여기서, 얼굴 마스크 시퀀스는 복수의 대상 얼굴에 대응되는 얼굴 마스크를 포함할 수 있다. 설명해야 할 바로는, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 대상 얼굴이 처리되지 않은 상태에서 생성된 얼굴 마스크일 수 있고, 대상 얼굴에 대해 관련 처리(예를 들어: 변형 처리, 미안 처리)를 수행한 후 생성된 얼굴 마스크일 수도 있다. 여기서, 상술한 대상 얼굴을 기초로 얼굴 마스크를 생성하는 것은 관련 3D 얼굴 처리 툴을 사용하는 것일 수 있다. 또한, 일 실시예에서, 얼굴 마스크 시퀀스는 복수의 서로 다른 얼굴 형태에 대응되는 마스크를 포함할 수 있다.
얼굴 마스크 시퀀스를 생성한 후에, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 특정 분포 규칙에 따라 배열될 수 있으며, 예를 들어, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 기설정 원주 방향을 따라 배열된 것일 수 있으며, 기설정 방향으로 순차적으로 정렬하는 방식에 따라 배열된 것일 수도 있다.
선택적으로, 얼굴 마스크 시퀀스 중의 얼굴 마스크는 기설정 원주 방향을 따라 배열된 것일 수 있을 때, 해당 기설정 원주 방향은 대상 얼굴을 중심으로 하고, 대상 얼굴의 머리 꼭대기 방향을 중심축으로 하여, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸는 효과를 형성할 수 있다. 그리고, 얼굴 마스크 시퀀스는 기설정 운동 방식에 따라 동적으로 표시할 수도 있으며, 예를 들어, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전 운동을 하는 것일 수 있다.
그리고 얼굴 마스크 시퀀스 중의 얼굴 마스크가 기설정 방향으로 순차적으로 정렬되는 방식에 따라 배열될 때, 얼굴 마스크 시퀀스는 얼굴 마스크의 배열 선후 순서에 따라 대상 얼굴 전방으로부터 슬라이딩 운동할 수 있다.
설명해야 할 바로는, 얼굴 마스크 시퀀스의 구체적인 배열 방식, 및 얼굴 마스크 시퀀스와 대상 얼굴 사이의 상대 운동 방식에 대해 본 실시예에서 구체적으로 한정하지 않으며, 구체적인 형식은 구체적인 시나리오 수요에 따라 적응적으로 설정될 수 있고, 본 실시예에서는 예시적으로 대상 얼굴과 얼굴 마스크 시퀀스 사이에 특정한 상대 위치 관계 및 상대 운동 관계가 존재하는 것을 설명하고자 한다.
단계(102), 타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시한다.
사용자가 얼굴 마스크 시퀀스 중의 어느 하나의 마스크에 대해 트리거할 때, 예를 들어, 사용자가 스크린을 클릭하는 방식으로, 얼굴 마스크 시퀀스 중 하나의 얼굴 마스크를 선택한 것이 바로 타겟 얼굴 마스크이다. 트리거 한 후에, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도는 타겟 얼굴 마스크가 대상 얼굴에 마주하게 이동할 때까지 먼저 감소하여, 이때, 얼굴 마스크 시퀀스의 회전은 정지하고, 해당 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시할 수 있다. 나아가, 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크를 제외한 기타 얼굴 마스크의 경우, 기설정된 투명도 변화 규칙에 따라 점변 소실할 수 있다.
본 실시예에서, 대상 얼굴의 기설정 상대 위치에 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하고, 사용자가 얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크를 트리거한 후, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시함으로써, 얼굴 이미지 표시 과정에서의 인터랙션을 증강하고, 사용자가 타겟 얼굴 마스크를 트리거한 후에도, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시하여, 대상 얼굴에 특정 얼굴 마스크를 표시하는 효과를 구현할 수 있으며, 사용자의 인터랙션 흥미와 체험을 증강시킨다.
상술한 실시예에서, 얼굴 마스크 시퀀스에 포함된 얼굴 마스크는 대상 얼굴에 대응되는 원본 얼굴 마스크를 포함할 수 있고, 3D 얼굴 처리 툴을 사용하여 원본 얼굴 마스크에 대해 처리하여 생성된 변형 얼굴 마스크도 포함할 수 있다. 예를 들어, 얼굴 마스크 시퀀스는 8개 얼굴 마스크를 포함할 수 있고, 여기서, 2개의 원본 얼굴 마스크 및 6개의 변형 얼굴 마스크를 포함할 수 있다. 구체적으로, 먼저 8개 얼굴 마스크 실체를 생성한 후, 사전에 설계한 변형 효과를 갖는 3D 모델을 도입하여, 각각의 얼굴 마스크 실체에 변형기를 증가하여 대응되는 변형 정도를 조정할 수 있다. 각각의 얼굴 마스크의 변형 형식은 모두 상이하기에, 각종 변형 형식을 별도로 도입하야 하며, 여러가지 변형기를 동일한 하나의 모델에 내장할 수도 있다.
3D 얼굴 처리 툴로 생성한 얼굴 마스크는 베이스 알고리즘을 설치하였기에, 디폴트 초기 위치와 원본 얼굴은 일치하다. 하지만 이를 대상 얼굴의 기설정 상대 위치에 표시하기 위하여, 모델 공간의 얼굴 좌표계에서 생성된 얼굴 마스크에 대해 변위, 선택 및 스케일 등 조작을 수행할 수 있다. 여기서, 도 2는 본 출원의 일 예시적인 실시예에 따른 싱글 얼굴 마스크의 생성을 나타내는 도면이다. 도 2에 도시된 바와 같이, 현재 모델 공간 중 얼굴 마스크의 미변경 전의 꼭지 원시 위치 및 변형 후의 위치의 편이를 획득한 것일 수 있으며, 그 다음, 얼굴 마스크가 대상 얼굴에 대해 항상 외부를 향하여 표시하는 것을 확보해야 하기에, 먼저 변위 조작을 한 후에, 다시 회전 조작을 해야 한다.
구체적으로, 꼭지점 원시 위치에 변형 후의 위치 편이를 추가한 기초상에서 Z축 상의 좌표 편이량과 가산하여, 대상 얼굴의 원시 위치와의 편이를 구현할 수 있다. 또한, 얼굴 마스크가 원을 이루어 대상 얼굴을 둘러싸며 회전 운동을 할 때, 대상 얼굴을 완전하게 가리지 않도록 하기 위하여, 또한 생성된 얼굴 마스크에 대해 스케일 처리를 수행하며, 예를 들어 원본 크기의 90%로 스케일링 하여, 얼굴 마스크 시퀀스 중의 각 얼굴 마스크가 모두 대상 얼굴에 대응되는 스케일 얼굴 마스크이도록 한다. 이로부터, 상술한 방식을 통해, 대상 얼굴에서 기설정 거리만큼 이탈한 위치에 하나의 일정 비례로 스케일링한 얼굴 마스크를 표시하는 것을 구현할 수 있다는 것을 알 수 있으며, 구체적인 효과는 도 2에 도시된 바를 참조할 수 있다.
그리고 얼굴 마스크가 기설정 운동 방식을 따라 동적으로 표시되는 것을 구현하기 위하여, 예를 들어, 얼굴 마스크가 대상 얼굴을 둘러싸며 회전할 수 있도록 하기 위하여, 대상 얼굴을 중심으로 하고, 대상 얼굴의 머리 꼭대기 방향을 중심축(예를 들어： Y 축)으로 하여, 아래의 회전 행렬을 통해 회전할 수 있다.
Figure pct00001
여기서,
Figure pct00002
는 회전 각도이다.
상술한 방식을 통해, 하나의 싱글 얼굴 마스크가 원본 크기의 90%로 스케일링한 후 대상 얼굴을 중심으로 하고, 머리 꼭대기 방향을 중심축으로 하며, 지정된 반지름의 원형 및 얼굴 마스크의 정면이 영원히 외부를 향하는 회전 운동을 구현할 수 있다는 것을 알 수 있다.
또한, 싱글 얼굴 마스크의 동적 표시를 구현한 후에, 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하는 것을 더 구현할 수도 있다. 여기서, 얼굴 마스크 시퀀스는 8개 얼굴 마스크를 포함한 경우에 대해 예를 들어 설명할 수 있다.
도 3은 본 출원의 일 예시적인 실시예에 따른 얼굴 마스크 시퀀스의 생성을 나타내는 도면이다. 도 3에 도시된 바와 같이, 얼굴 마스크 시퀀스 중의 각 얼굴 마스크의 위치 파라미터를 초기화할 때, 동일한 이탈 변위 및 스케일 비례를 부여할 수 있다. 그 다음, 초기화 순서에 따라 순차적으로 회전 각도를 정의하고, 이렇게 초기화한 후의 8개 얼굴 마스크는 45도 마다 하나씩 이격하여 배치함으로써, 8개의 얼굴 마스크로 형성된 얼굴 마스크 시퀀스가 하나의 완정한 원을 이루도록 하여, 얼굴 마스크 시퀀스에 대해 표시할 때, 얼굴 마스크 시퀀스 중의 얼굴 마스크를 설정 원주 방향을 따라 배열하도록 한다.
이외에, 또한 8개의 얼굴 마스크에 서로 다른 변형 모델을 부여하고, 얼굴 마스크 선택을 제어하기 위한 알고리즘을 구성할 수 있으며, 이때 하나의 시스템 레벨 스크립트에서 이러한 얼굴 마스크의 운동을 통일적으로 제어하는 것을 구현할 수 있다.
대상 얼굴을 중심으로 하고, 머리 꼭대기 방향을 중심축으로 하여, 회전 운동 방식으로 얼굴 마스크 시퀀스를 동적으로 표시하는 것을 구현한 후, 사용자는 얼굴 마스크 시퀀스 중 어느 한 마스크에 대해 트리거하여, 타겟 얼굴 마스크를 선택함으로써, 해당 타겟 얼굴 마스크를 대상 얼굴에 융합 표시할 수 있다. 도 4는 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 트리거 과정의 시나리오를 나타내는 도면이다. 도 4에 도시된 바와 같이, 사용자는 스크린을 클릭하는 방식으로, 얼굴 마스크 시퀀스 중의 하나의 마스크를 타겟 얼굴 마스크로서 선택할 수 있다.
트리거 한 후에, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도는 타겟 얼굴 마스크가 대상 얼굴에 마주하도록 이동할 때까지 감소되어, 이때, 얼굴 마스크 시퀀스의 회전은 중지하고, 해당 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시할 수 있다. 나아가, 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크를 제외한 기타 얼굴 마스크는, 기설정된 투명도 변화 규칙에 따라 점변 소실될 수 있다.
가능한 한 설계에서, 도 5는 본 출원의 일 예시적인 실시예에 따른 트리거 후 융합 표시 단계의 흐름도이다. 도 5에 도시된 바와 같이, 상술한 실시예에서 단계(102)는 구체적으로 아래의 단계를 포함할 수 있다.
단계(1020), 타겟 얼굴 마스크에 작용하는 트리거 명령을 획득한다.
예를 들어, 사용자는 스크린을 클릭하는 방식으로, 얼굴 마스크 시퀀스 중 하나의 마스크를 선택하여 타겟 얼굴 마스크로 할 수 있다.
단계(1021), 회전 속도가 기설정 타겟 속도보다 작은지 여부를 판단한다. 판독 결과가 그렇다면, 단계(1022)를 실행하고; 판단 결과가 그렇지 않다면, 단계(1023)를 실행한다.
단계(1022), 현재 회전 각도를 설정한다.
단계(1023), 회전 속도를 감소한다.
단계(1024), 회전 속도가 기설정 타겟 속도보다 작은지 여부를 판단한다. 판독 결과가 그렇다면, 단계(1025)를 실행하고; 판단 결과가 그렇지 않다면, 단계(1023)를 실행한다.
단계(1025), 타겟 회전 각도를 계산한다.
얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크에 대해 트리거한 후, 회전 속도가 기설정 타겟 속도보다 작은지 여부를 판단해야 하며, 여기서, 기설정 타겟 속도는 하나의 회전 속도 임계값일 수 있다. 만약 판단 결과가 그렇다면, 현재 얼굴 마스크의 회전 속도가 보다 늦다는 것을 설명하고, 직접 타겟 회전 각도를 계산하는 방식을 통해, 타겟 얼굴 마스크가 타겟 위치, 예를 들어, 대상 얼굴의 정면 위치까지 회전하도록 제어할 수 있으며, 그 다음 후속의 융합 표시 조작을 수행한다. 하지만, 만약 현재 회전 속도가 기설정 타겟 속도보다 클 경우, 직접 타겟 회전 각도를 계산하는 방식을 사용하여, 타겟 얼굴 마스크가 타겟 위치까지 회전하도록 제어하면, 얼굴 마스크 시퀀스의 운동 상태의 추세 변화가 너무 커서 인터랙션 느낌이 좋지 않다. 따라서, 타겟 회전 각도를 계산하기 전에, 먼저 회전 속도를 감소하고, 회전 속도가 기설정 타겟 속도보다 작게 감소한 후, 후속의 타겟 회전 각도의 계산을 수행하여, 타겟 얼굴 마스크가 타겟 위치까지 이동도록 제어하여야 한다. 설명해야 할 바로는, 타겟 회전 각도는 얼굴 마스크의 운동 정지 시의 회전 각도이다. 계속 얼굴 마스크 시퀀스가 8개 얼굴 마스크를 포함하는 경우를 예로 들어 설명할 수 있으며, 정체 시, 반드시 하나의 얼굴 마스크가 사용자와 마주해야 하기에, 이때 해당 얼굴 마스크의 회전 각도는 0이며, 따라서 타겟 회전 각도는 반드시 45의 정수 배이어야 한다.
구체적으로, 얼굴 마스크 시퀀스 중의 각 얼굴 마스크의 타겟 회전 각도는 아래의 공식을 통해 계산할 수 있다.
Figure pct00003
여기서,
Figure pct00004
는 타겟 회전 각도이고,
Figure pct00005
는 현재 회전 각도이고, floor은 괄호안의 결과보다 작은 최대 정수를 얻는 것을 표시하고, 괄호 안의 1을 더하는 것은 타겟 각도와 현재 각도 사이의 관계 방향과 회전 속도 방향이 일치하도록 확보할 수 있고, 현재 회전 각도는 각 얼굴 마스크가 현재 대응하는 얼굴 각도이다.
단계(1026), 타겟 위치까지 회전한 얼굴 마스크의 번호를 기록한다.
구체적으로, 얼굴 마스크 시퀀스를 생성할 때, 얼굴 마스크 시퀀스 중의 각 얼굴 마스크에 번호를 할당할 수 있으며, 해당 번호는 각 얼굴 마스크를 유일하게 식별하기 위한 것이며, 예를 들어, 제1 얼굴 마스크에 번호 1을 할당하고, 제2 얼굴 마스크에 번호 2를 할당하고, 제3 얼굴 마스크에 번호 3을 할당하여, 제8 얼굴 마스크에 번호 8을 할당할 때까지 순차적으로 번호를 할당한다. 그리고 얼굴 마스크 시퀀스의 회전 과정에서, 현재 시작에 각 시각에 타겟 위치까지 회전한 얼굴 마스크의 번호를 기록하고, 예를 들어, 제1 시각에, 번호 1에 대응되는 제1 얼굴 마스크가 타겟 위치까지 회전하고, 제2 시각에, 번호 2에 대응되는 제2 얼굴 마스크가 타겟 위치까지 회전한 것을 기록한다.
단계(1027), 타겟 얼굴 마스크가 타겟 위치까지 회전하였는지 여부를 판단한다. 판독 결과가 그렇다면, 단계(1025)를 실행하고; 판단 결과가 그렇지 않다면, 단계(1028) 및 단계(1029)를 실행한다.
타겟 얼굴 마스크가 대상 얼굴과 마주할 때, 즉 타겟 얼굴 마스크의 타겟 회전 각도가 0일 때, 타겟 얼굴 마스크가 타겟 위치에 도달하였음을 의미하고, 이때, 얼굴 마스크 시퀀스의 회전 운동을 정지한다.
구체적으로, 타겟 얼굴 마스크를 트리거할 때, 타겟 얼굴 마스크에 대응되는 번호를 기록할 수 있으며, 얼굴 마스크 시퀀스의 회전 과정에, 현재 시각에 기록한 번호가 타겟 얼굴 마스크에 대응되는 번호이면, 타겟 얼굴 마스크가 대상 얼굴과 마주하였음을 의미하고, 이때, 얼굴 마스크 시퀀스의 회전 운동을 정지할 수 있다. 예를 들어, 사용자가 트리거한 타겟 얼굴 마스크가 제3 얼굴 마스크이면, 번호 3을 기록하고, 얼굴 마스크 시퀀스의 회전 과정에, 번호 3에 대응되는 얼굴 마스크가 타겟 위치까지 회전하였음을 기록할 때, 제3 얼굴 마스크가 타겟 위치까지 회전하였음을 의미하고, 얼굴 마스크 시퀀스의 회전 운동을 중지한다.
단계(1028), 대상 얼굴에 융합 얼굴 이미지를 표시한다.
일 실시예에서, 기설정 경로에 따라 타겟 얼굴 마스크를 대상 얼굴에 부착하고, 타겟 얼굴 마스크와 대상 얼굴을 융합하여, 융합 얼굴 이미지를 생성할 수 있으며, 여기서, 기설정 경로는 제1 위치로부터 제2 위치로 향하고, 제1 위치는 현재 타겟 얼굴 마스크가 얼굴 마스크 시퀀스에서 처해 있는 위치이고, 제2 위치는 현재 대상 얼굴이 처해 있는 위치이다. 본 단계에서, 얼굴 마스크의 Z축 방향에서의 이탈값을 축소하여, 모든 얼굴 마스크가 대상 얼굴을 향하여 원 반지름을 축소하여 운동하는 효과를 구현할 수 있다. 마지막으로, 대상 얼굴에 해당 융합 얼굴 이미지를 표시한다.
단계(1029), 기타 얼굴 마스크에 대해 점변 소실을 수행한다.
이외에, 또한 기설정된 투명도 변화 규칙에 따라, 얼굴 마스크 시퀀스 중의 타겟 얼굴 마스크를 제외한 기타 얼굴 마스크에 대해 점변 소실을 수행할 수 있다. 본 단계에서, 대상 얼굴과 마주하지 않은 얼굴 마스크의 alpha채널을 점차적으로 낮출 수 있으며, 여기서, alpha채널은 투명도를 조절하기 위한 것으로, 대상 얼굴과 마주하지 않는 얼굴 마스크가 점변하여 투명해 지도록 한다. 구체적으로, 구현 방식은 아래의 공식을 참조할 수 있다.
Figure pct00006
여기서,
Figure pct00007
는 현재 프레임 얼굴 마스크의 투명도이고,
Figure pct00008
는 이전 프레임 얼굴 마스크의 투명도이고,
Figure pct00009
는 시간 계수이고,
Figure pct00010
는 현재 프레임과 이전 프레임 사이의 시간 차이이다.
도 6은 본 출원의 다른 예시적인 실시예에 따른 얼굴 이미지 표시 방법의 흐름도이다. 도 6에 도시된 바와 같이, 본 실시예에 따른 얼굴 이미지 표시 방법은 아래의 단계를 포함한다.
단계(201), 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 랜더링 영역에 대해서만 랜더링을 수행한다.
본 단계에서, 얼굴 마스크 시퀀스에 대해 표시하기 전에, 각 얼굴 마스크에 대해 랜더링해야 한다. 만약 각 얼굴 마스크에 대해 무차별적, 전방위로 랜더링을 수행하면, 랜더링 계산량이 너무 많아, 지나치게 많은 연산 리소스를 점유하게 된다. 따라서, 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 랜더링 영역에 대해서만 랜더링을 수행할 수 있다.
구체적으로, 도 7은 본 출원의 일 예시적인 실시예에 따른 랜더링 단계의 흐름도이다. 도 7에 도시된 바와 같이, 본 실시예의 상술한 랜더링 단계는 아래의 단계를 포함할 수 있다.
단계(2011), 얼굴 마스크의 정면 영역인지 여부를 판단한다.
단계(2012), 만약 정면 영역이면, 텍셀 현재 위치가 대상 얼굴에 대응되는 위치 범위 이내 및 제3 방향에서 대상 얼굴의 특징 키 포인트 뒤에 위치하는지 여부를 판단한다. 만약 판단 결과가 그렇다면, 단계(2015)를 실행하고; 판단 결과가 그렇지 않다면, 단계(2014)를 실행한다.
이해해야 할 바로는, 제3 방향은 대상 얼굴과 얼굴 마스크 사이에 비전 공간이 가려진 방향일 수 있다.
단계(2013), 만약 배면 영역이면, 텍셀 현재 위치가 대상 얼굴에 대응되는 위치 범위 이내, 및 제3 방향에서 대상 얼굴의 특징 키 포인트 뒤에 있는지 여부를 판단한다. 판단 결과가 그렇다면, 단계(2015)를 실행하고; 판단 결과가 그렇지 않다면, 단계(2016)을 실행한다.
본 실시예에서, 얼굴 마스크의 정면 영역과 배면 영역은 각각 대응되는 처리 프로세스를 통해 완성될 수 있으며, 여기서, 첫 번째 처리 프로세스는 정면 영역에 대한 랜더링에만 사용되고, 두 번째 처리 프로세스는 반대면 영역에 대한 랜더링에만 사용된다. 하지만, 두 개의 처리 프로세스는 하나의 텍셀 착색 엔진을 공동으로 사용하여 랜더링할 수 있으며, 여기서, 텍셀 착색 엔진은 모두 현재의 대상 얼굴을 샘플링하여, 실시간 인물 가림 마스크를 리턴하여 얼굴 마스크에 대해 랜더링을 수행하는 것을 구현한다.
여기서, 텍셀 현재 위치가 대상 얼굴에 대응되는 위치 범위 내에 위치하고, 제3 방향(예를 들어, Z 축 방향)에서 대상 얼굴의 특징 키 포인트(예를 들어： 대상 얼굴의 귀밑머리 위치) 뒤에 위치하는지 여부를 판단하여, 해당 텍셀을 랜더링해야 하는지 여부를 판단할 수 있다.
구체적으로, 텍셀 현재 위치가 대상 얼굴에 대응되는 위치 범위 내에 위치하면, 텍셀은 대상 얼굴의 전방에 있을 수 있고, 대상 얼굴의 후방에 있을 수도 있다. 하지만, 만약 텍셀 현재 위치가 Z 축 방향에서 대상 얼굴의 귀밑머리 위치의 전방에 위치하면, 텍셀이 대상 얼굴의 전방에 위치하는 것으로 확정할 수 있으며, 해당 텍셀은 사용자에 대하여 보이는 부분임을 알 수 있고, 따라서, 해당 텍셀에 대해 랜더링해야 한다. 하지만, 만약 텍셀 현재 위치가 Z 축 방향에서 대상 얼굴의 귀밑머리 위치의 후방에 위치하면, 텍셀이 대상 얼굴의 후방에 위치하는 것으로 확정할 수 있으며, 해당 텍셀은 사용자에 대해 보이지 않는 부분임을 알 수 있고, 따라서, 해당 텍셀에 대해 랜더링을 수행할 필요가 없으며, 이로부터 랜더링 과정에 따른 컴퓨팅 리소스의 불필요한 낭비를 절략한다.
단계(2014), 대상 얼굴을 기초로 정면 영역을 랜더링한다.
구체적으로, 얼굴 마스크가 랜더링 영역 내에 위치한 텍셀에 대하여, 만약 역시 정면 영역에 속하면, 대상 얼굴을 기초로 랜더링을 수행하여, 얼굴 마스크에 대응되는 대상 얼굴의 구체적인 외관을 표시할 수 있다.
단계(2015), 얼굴 마스크의 비랜더링 영역 내에 위치한 텍셀은 랜더링하지 않는다.
얼굴 마스크가 비랜더링 영역 내에 위치한 텍셀에 대하여, 정면 영역에 속하든, 배면 영역에 속하든 모두 랜더링을 수행하지 않으며, 해당 영역의 텍셀을 투명으로 설정하는 것으로 이해할 수 있다.
단계(2016), 배면 영역을 기설정 고정 무늬로 랜더링한다.
얼굴 마스크가 랜더링 영역 내에 위치하는 텍셀에 대하여, 배면 영역에 속하면, 기설정 고정 무늬를 기초로 랜더링을 수행할 수 있으며, 예를 들어, 이를 회색으로 랜더링할 수 있다.
도 8은 도 7에 도시된 랜더링 단계의 랜더링 후의 표시 결과를 나타내는 도면이다. 도 8에 도시된 바와 같이, 영역 A의 경우, 랜더링 영역에 위치하고 정면 영역에 속하기에, 대상 얼굴을 기초로 랜더링을 수행하여, 얼굴 마스크에 대응되는 대상 얼굴의 구체적인 외관을 표시한다. 영역 B의 경우, 랜더링 영역에 위치하고 배면 영역에 속하기에, 이를 예를 들어 회색으로 랜더링한다.
도 6으로 돌아가면, 단계(202)는, 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시한다.
설명해야 할 바로는, 본 실시예의 단계(202)의 구체적인 구현 방식은 도 1에 도시된 실시예 중 단계(101)의 구체적인 설명을 참조할 수 있다.
또한, 도 1에 도시된 실시예 중 단계(101)의 기초상에서, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시할 때, 사용자의 신체 특징을 기초로 확정할 수 있으며, 예를 들어, 사용자의 입 오픈 정도, 사용자의 미소 정도 및 사용자 관련 제스쳐를 기초로 할 수 있다. 여기서, 사용자입 오픈 정도를 기초로 한 것을 예로 들어 설명할 수 있는 바, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전 운동하는 회전 속도는 사용자의 입 오픈 정도가 커짐에 따라 빨라질 수 있으며, 즉 사용자가 입을 크게 벌릴수록, 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도는 더욱 빠르다. 이로부터 사용자는 입을 벌리는 정도를 조정하여 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 회전하는 속도를 가속 및 감속할 수 있음을 알 수 있다.
구체적으로, 먼저 대상 얼굴의 타겟 부위의 특징 파라미터를 획득한 후, 특징 파라미터를 기초로 회전 속도를 확정하고, 회전 속도에 따라 얼굴 마스크 시퀀스를 동적으로 표시할 수 있다. 예를 들어, 대상 얼굴의 입 부위 특징 파라미터 및 눈 부위 특징 파라미터를 획득할 수 있으며, 여기서, 입 부위 특징 파라미터는 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 포함하고, 눈 부위 특징 파라미터는 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 포함한다. 그 다음, 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 기초로 제1 방향(예를 들어, Y 축) 상의 제1 좌표 차이값을 확정하고, 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 기초로 제2 방향(예를 들어, X 축) 상의 제2 좌표 차이값을 확정한다. 마지막으로, 제1 좌표 차이값 및 제2 좌표 차이값의 비례를 기초로 특징 파라미터를 확정하고, 여기서, 해당 특징 파라미터를 입 벌림 정도를 표시하는데 사용할 수 있다. 설명해야 할 바로는, 제1 좌표 차이값 및 제2 좌표 차이값 사이의 비례로 입 벌림 정도를 확정함으로써, 대상 얼굴이 카메라와의 거리가 변화함에 따른 입 벌림 정도의 파동을 방지할 수 있다.
여기서, 특징 파라미터가 기설정 제1 임계값보다 작거나 같으면, 회전 속도는 제1 기설정 속도이다. 특징 파라미터가 기설정 제1 임계값보다 크면, 회전 속도는 제1 기설정 속도와 부가 속도의 합이며, 여기서, 부가 속도와 특징 파라미터 차이값은 정비례하고, 특징 파라미터 차이값은 특징 파라미터와 기설정 제1 임계값의 차이이다. 그리고 상기 제1 기설정 속도와 상기 부가 속도의 합은 제2 기설정 속도보다 크거나 같으면, 상기 회전 속도를 상기 제2 기설정 속도로 확정한다.
상술한 방식을 통해, 입 벌림 정도를 기초로 현재 프레임 얼굴 마스크의 회전 속도를 계산하는 것을 구현할 수 있고, 구체적인 계산 공식은 아래와 같다.
Figure pct00011
여기서,
Figure pct00012
는 회전 속도이고,
Figure pct00013
은 최소 회전 속도이고,
Figure pct00014
는 입 벌림 정도이고,
Figure pct00015
는 입 벌림 검출 임계값이고,
Figure pct00016
는 속도 계수이고,
Figure pct00017
는 최대 회전 속도이다. 설명해야 할 바로는, 입 벌림 검출 임계값은 입 벌림 정도가 해당 임계값보다 클 때에만 입 벌림으로 판단할 수 있는 것을 의미하고, 속도 계수는 입 벌림 정도 파라미터를 회전 속도로 전환할 때 곱해야 하는 하나의 상수를 의미한다.
설명해야 할 바로는, 상술한 기설정 제1 임계값은 바로 입 벌림 검출 임계값(
Figure pct00018
)이고, 제1 기설정 속도는 바로 최소 회전 속도(
Figure pct00019
)이고, 부가 속도는
Figure pct00020
이며, 제2 기설정 속도는 최대 회전 속도(
Figure pct00021
)이다.
이로부터, 본 단계를 통해, 입 벌림 정도를 제어하여 얼굴 마스크 시퀀스가 대상 얼굴을 둘러싸며 서로 다른 회전 속도로 회전하는 효과를 구현할 수 있음을 알 수 있다.
또한, 상술한 확정한 회전 속도를 통해, 현재 프레임 중 각 얼굴 마스크의 회전 각도를 설정할 수도 있으며, 구체적인 공식은 아래와 같다.
Figure pct00022
여기서,
Figure pct00023
는 현재 프레임 중 얼굴 마스크의 회전 각도이고,
Figure pct00024
는 이전 프레임 중 얼굴 마스크의 회전 각도이고,
Figure pct00025
는 회전 속도이고,
Figure pct00026
는 현재 프레임과 이전 프레임 사이의 시간 차이이다.
설명해야 할 바로는, 상술한 공식 중 공식 끝 부분의 나머지 연산 조작은 회전 각도를 [0, 360]의 구간 내로 확보할 수 있도록 하기 위한 것이며, 이로부터 숫자가 너무 커서 메모리 오버플로우가 나타나는 것을 방지한다.
단계(203), 타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 타겟 얼굴 마스크를 대상 얼굴에 융합하여 표시한다.
설명해야 할 바로는, 본 실시예 중 단계(203)의 구체적인 구현 방식은 도 1에 도시된 실시예 중의 단계(102)의 구체적인 설명을 참조할 수 있으며, 여기서 중복 설명을 생략한다.
도 9는 본 출원의 일 예시적인 실시예에 따른 얼굴 이미지 표시 장치의 구조도이다. 도 9에 도시된 바와 같이, 본 실시예에 따른 얼굴 이미지 표시 장치(300)는,
대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 표시 모듈(301);
타겟 얼굴 마스크에 작용하는 트리거 명령을 획득하는 획득 모듈(302);
또한 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 처리 모듈(303)을 포함하고;
상기 표시 모듈(301)은 또한, 상기 타겟 얼굴 마스크를 융합한 후의 상기 대상 얼굴을 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스는 적어도 하나의 상기 대상 얼굴에 대응되는 변형 얼굴 마스크를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈(301)은 구체적으로,
상기 대상 얼굴을 중심으로 하고, 상기 대상 얼굴의 머리 꼭대기 방향을 중심축으로 하고, 회전 운동의 방식에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하며, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크를 설정 원주 방향을 따라 배열한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크는 상기 대상 얼굴에 대응되는 스케일된 얼굴 마스크이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈(301)은 구체적으로,
상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하고;
상기 특징 파라미터를 기초로 상기 회전 운동의 회전 속도를 확정하고, 상기 회전 속도에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 획득 모듈(302)은 또한, 상기 대상 얼굴의 입 부위 특징 파라미터 및 눈 부위 특징 파라미터를 획득하되, 상기 입 부위 특징 파라미터는 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 포함하고, 상기 눈 부위 특징 파라미터는 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 포함하고;
상기 처리 모듈(303)은 또한, 상기 윗입술 키 포인트 좌표 및 상기 아랫입술 키 포인트 좌표를 기초로 제1 방향에서의 제1 좌표 차이값을 확정하고, 상기 왼쪽 눈 키 포인트 좌표 및 상기 오른쪽 눈 키 포인트 좌표를 기초로 제2 방향에서의 제2 좌표 차이값을 확정하고;
상기 처리 모듈(303)은 또한, 상기 제1 좌표 차이값 및 상기 제2 좌표 차이값의 비례를 기초로 상기 특징 파라미터를 확정한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈(303)은 구체적으로,
상기 특징 파라미터가 기설정 제1 임계값보다 작거나 같으면, 상기 회전 속도는 제1 기설정 속도이고;
상기 특징 파라미터가 상기 기설정 제1 임계값보다 크면, 상기 회전 속도는 상기 제1 기설정 속도와 부가 속도의 합이며, 여기서, 상기 부가 속도와 특징 파라미터 차이값은 정비례하고, 상기 특징 파라미터 차이값은 상기 특징 파라미터와 상기 기설정 제1 임계값의 차이이고;
상기 제1 기설정 속도와 상기 부가 속도의 합이 제2 기설정 속도보다 크거나 같으면, 상기 회전 속도를 상기 제2 기설정 속도로 확정한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈(303)은 또한, 상기 타겟 얼굴 마스크를 타겟 위치까지 회전한 것을 확정하고, 상기 타겟 위치와 상기 대상 얼굴 사이는 기설정 위치 관계에 부합한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 위치는 상기 대상 얼굴 정면 위치이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 타겟 위치까지 회전할 때, 상기 회전 운동의 회전 속도는 기설정 타겟 속도로 감속한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈(303)은 또한, 기설정 경로에 따라 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 부착하고, 상기 타겟 얼굴 마스크와 상기 대상 얼굴을 융합하여, 융합 얼굴 이미지를 생성하되, 여기서, 상기 기설정 경로는 제1 위치로부터 제2 위치로 향하고, 상기 제1 위치는 현재 상기 타겟 얼굴 마스크가 상기 얼굴 마스크 시퀀스에서 처해 있는 위치이고, 상기 제2 위치는 현재 상기 대상 얼굴이 처해 있는 위치이고;
상기 표시 모듈(301)은 또한, 상기 대상 얼굴에 상기 융합 얼굴 이미지를 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈(301)은 또한, 기설정된 투명도 변화 규칙에 따라, 상기 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크 이외의 기타 얼굴 마스크에 대해 점변 소실을 수행한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈(303)은 또한, 상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 상기 랜더링 영역에 대해서만 랜더링을 수행한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 텍셀의 현재 위치가 상기 대상 얼굴에 대응되는 위치 범위 안에 있고, 제3 방향에서 상기 대상 얼굴의 특징 키 포인트 뒤에 있을 경우, 상기 텍셀은 상기 비랜더링 영역에 속한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈(303)은 또한, 상기 대상 얼굴을 기초로 상기 정면 영역을 랜더링하고;
상기 처리 모듈(303)은 또한, 상기 배면 영역을 기설정 고정 무늬로 랜더링한다.
설명해야 할 바로는, 도 9에 도시된 실시예에 따른 얼굴 이미지 표시 장치는, 상술한 어느 실시예에 따른 방법을 실행하는데 사용할 수 있고, 구체적인 구현 방식과 기술효과는 유사하기에, 여기서 중복 설명을 생략한다.
도 10은 본 출원의 일 예시적 실시예에 따른 전자기기(400)의 구조도이며, 도 10에 도시된 바와 같이, 본 출원의 실시예를 구현하는데 적합한 전자기기의 구조도가 도시되어 있다. 본 출원의 실시예 중의 단말기는 모바일폰, 노트북 PC, 디지털 방송 수신기, 개인용 정보 단말(Personal Digital Assistant, PDA), 테블릿 PC(Portable Android Device, PAD), 휴대형 멀티미디어 플레이어(Portable Media Player, PMP), 차량용 단말(예를 들어 차량용 네비게이션 단말) 등 이미지 획득 기능을 구비한 이동 단말 및 디지털 TV, 데스크톱 컴퓨터 등 외부에 이미지 획득 기기가 연결된 고정 단말을 포함할 수 있으나 이에 한정되지 않는다. 도 10에 도시된 전자기기는 단지 하나의 예시로서, 본 출원의 실시예의 기능과 사용 범위에 대해 아무런 한정을 하지 않아야 한다.
도 10에 도시된 바와 같이, 전자기기(400)는 판독 전용 메모리(Read-Only Memory, ROM, 402)에 저장된 프로그램 또는 메모리(408)로부터 랜덤 액세스 메모리(Random Access Memory, RAM, 403)로 로딩되는 프로그램을 실행하여, 다양한 적합한 동작과 처리를 수행할 수 있는 프로세서(예를 들어 중앙 프로세서， 그래픽 프로세서 등, 401)를 포함할 수 있다. RAM(403)에는 전자기기(400)의 조작에 필요한 다양한 프로그램과 데이터가 더 저장되어 있다. 프로세서(401), ROM(402), RAM(403)은 버스(404)를 통해 서로 연결된다. 입/출력(Input/Output, I/0) 인터페이스(405)도 버스(404)에 연결되어 있다. 메모리는 상술한 각 방법 실시예의 상기 방법을 실행하는 프로그램이 저장되고; 프로세서는 메모리에 저장된 프로그램을 실행하도록 구성된다.
일반적으로, 예를 들어 터치 스크린, 터치패드, 키보드, 마우스, 카메라, 마이크, 가속도계, 자이로스코프 등을 포함한 입력 장치(406); 예를 들어 액정 디스플레이(Liquid Crystal Display, LCD), 스피커, 진동기 등을 포함한 출력 장치(407); 예를 들어 자기테이프, 하드 디스크 등을 포함한 저장 장치(408); 및 통신 장치(409)는 I/O 인터페이스(405)에 연결될 수 있다. 통신 장치(409)는 전자기기(400)가 기타 기기와 무선 또는 유선 통신을 수행하여 데이터 교환을 수행하도록 허용할 수 있다. 비록 도 10에는 다양한 장치를 구비한 전자기기(400)가 도시되어 있지만, 이해해야 할 바로는, 도시된 모든 장치를 실시하거나 구비할 것을 요구하지는 않는다. 대안적으로 더욱 많거나 적은 장치를 실시하거나 구비할 수 있다.
특히, 본 출원의 실시예에 따르면, 상기 흐름도를 참조하여 설명한 프로세스는 컴퓨터 소프트웨어 프로그램으로 구현될 수 있다. 예를 들어, 본 출원의 실시예는 비일시적 컴퓨터 판독 가능 매체에 기록된 컴퓨터 프로그램을 포함하는 컴퓨터 프로그램 제품을 포함하고, 해당 컴퓨터 프로그램은 본 출원의 실시예의 흐름도에 도시된 방법을 실행하기 위한 프로그램 코드를 포함한다. 이러한 실시예에서, 해당 컴퓨터 프로그램은 통신 장치(409)를 통해 네트워크로부터 다운로드되어 설치될 수 있거나, 또는 저장 장치(408)로부터 설치되거나, 또는 ROM(402)으로부터 설치될 수 있다. 해당 컴퓨터 프로그램이 프로세서(401)에 의해 실행될 때, 본 출원의 실시예의 방법에서 한정한 상술한 기능을 실행한다.
설명해야 할 바로는, 본 출원의 상술한 컴퓨터 판독 가능 매체는 컴퓨터 판독 가능 신호 매체 또는 컴퓨터 판독 가능 저장매체 또는 상술한 양자의 임의의 조합일 수 있다. 컴퓨터 판독 가능 저장매체는 예를 들어 전기, 자기, 광, 전자기, 적외선 또는 반도체 시스템, 장치 또는 소자, 또는 상기 임의의 조합일 수 있지만, 이에 한정되지 않는다. 컴퓨터 판독 가능 저장매체의 더욱 구체적인 예로는 하나 또는 복수의 와이어를 구비한 전기적 연결, 휴대형 컴퓨터 자기 디스크, 하드 디스크, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 소거 가능한 프로그램 가능 판독 전용 메모리(Electrically Erasable Programmable Read-Only Memory, EPROM, 또는 플래시 메모리), 광섬유, 휴대형 컴팩트 디스크 판독 전용 메모리(Compact Disc Read-Only Memory, CD-ROM), 광 저장 소자, 자기 저장 소자, 또는 상술한 임의의 적합한 조합이 포함될 수 있지만 이에 한정되지 않는다. 본 출원에서, 컴퓨터 판독 가능 저장매체는 프로그램을 포함하거나 저장하는 유형의 매체일 수 있으며, 해당 프로그램은 명령 실행 시스템, 장치 또는 소자에 의해 사용되거나 이와 결합하여 사용될 수 있다. 하지만 본 출원에서 컴퓨터 판독 가능 신호 매체는 기저 대역 또는 반송파의 일부분으로서 전파되는 데이터 신호를 포함할 수 있으며, 이 중에 컴퓨터 판독 가능 프로그램 코드를 적재한다. 이러한 전파되는 데이터 신호는 다양한 형식을 사용할 수 있는 바, 전자기 신호, 광 신호 또는 상술한 임의의 적합한 조합을 포함하지만 이에 한정되지 않는다. 컴퓨터 판독 가능 신호 매체는 또한 컴퓨터 판독 가능 저장 매체 이외의 임의의 컴퓨터 판독 가능 매체일 수 있으며, 해당 컴퓨터 판독 가능 신호 매체는 명령 실행 시스템, 장치 또는 소자에 의해 사용되거나 또는 이와의 결합에 의해 사용되는 프로그램을 발송, 전파, 또는 전송할 수 있다. 컴퓨터 판독 가능 매체에 포함된 프로그램 코드는 임의의 적합한 매체를 통해 전송될 수 있는 바, 전선, 광케이블, 무선 주파수(Radio Frequency, RF) 등, 또는 상술한 임의의 적합한 조합을 포함하지만 이에 한정되지 않는다.
상술한 컴퓨터 판독 가능 매체는 상술한 전자기기에 포함된 것일 수 있고; 전자기기와 개별적으로 존재하는 것으로서, 상기 전자기기에 장착되어 있지 않은 것일 수도 있다.
상술한 컴퓨터 판독 가능 매체에 하나 또는 복수의 프로그램이 적재되어 있고, 상술한 하나 또는 복수의 프로그램이 상기 전자기기에 의해 실행될 때, 상기 전자기기가, 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하고; 타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하며, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크이다.
한가지 또는 여러가지 프로그램 설계 언어 또는 그 조합으로 본 출원의 동작을 실행하기 위한 컴퓨터 프로그램 코드를 작성할 수 있으며, 상술한 프로그램 설계 언어는 Java, Smalltalk, C++ 등과 같은 객체 지향 프로그램 설계 언어를 포함하고, “C” 언어 또는 유사한 프로그램 설계 언어와 같은 일반적인 절차형 프로그램 언어도 포함하지만 이에 한정하지 안는다. 프로그램 코드는 완전히 사용자 컴퓨터에서 실행되거나 부분적으로 사용자 컴퓨터에서 실행되거나, 하나의 독립된 소프트웨어 패키지로 실행되거나, 부분적으로 사용자 컴퓨터에서 부분적으로 원격 컴퓨터에서 실행되거나, 또는 완전히 원격 컴퓨터 또는 서버에서 실행될 수 있다. 원격 컴퓨터의 경우, 원격 컴퓨터는 근거리 통신망(Local Area Network, LAN) 또는 광역 통신망(Wide Area Network, WAN)을 포함하는 임의의 유형의 네트워크를 통해 사용자 컴퓨터에 연결되거나, 또는, 외부 컴퓨터(예를 들어 인터넷 서비스 제공업체를 이용하여 인터넷 연결을 통해)에 연결될 수 있다.
일부 실시형태에서, 단말기, 서버는 하이퍼 텍스트 전송 프로토콜(HyperText Transfer Protocol, HTTP)과 같은 임의의 현재 알려진 것 또는 미래에 연구 개발되는 네트워크 프로토콜을 사용하여 통신할 수 있으며, 임의의 형태 또는 매체의 디지털 데이터와 통신(예를 들어, 통신 네트워크) 상호 연결될 수 있다. 통신 네트워크의 예시로서 근거리 통신망(“LAN”), 광역 통신망(“WAN”), 인터넷 워크(예를 들어, 인터넷) 및 엔드 대 엔드 네트워크(예를 들어, ad hoc 엔드 대 엔드 네트워크), 및 임의의 현재 알려진 것 또는 미래에 연구 개발되는 네트워크를 포함하지만 이에 제한되지 않는다.
첨부 도면의 흐름도와 블록도에는 본 출원의 다양한 실시예에 따른 시스템, 방법과 컴퓨터 프로그램 제품의 구현 가능한 시스템 구조, 기능과 동작이 도시되었다. 이런 점에서, 흐름도 또는 블록도 중의 각 박스는 하나의 모듈, 프로그램 섹션, 또는 코드의 일부분을 표시할 수 있으며, 해당 모듈, 프로그램 섹션, 또는 코드의 일부분은 규정된 논리 기능을 구현하기 위한 하나 또는 복수의 실행 가능 명령을 포함한다. 주의해야 할 것은, 일부 대안적인 구현에서, 박스에 표시된 기능은 첨부 도면에 표시된 순서와 다르게 발생할 수도 있다. 예를 들어, 두 개 연이어 표시된 박스는 실제는 기본적으로 병행으로 실행될 수 있으며, 어떤 때에는 반대되는 순서로 실행될 수도 있고, 이는 관련된 기능에 따라 정해진다. 유의해야 할 점은, 블록도 및/또는 흐름도 중의 각 박스, 및 블록도 및/또는 흐름도 중의 박스의 조합은 규정된 기능 또는 동작을 실행하는 전용의 하드웨어 기반 시스템으로 구현될 수 있거나, 또는 전용 하드웨어와 컴퓨터 명령의 조합으로 구현될 수 있다.
본 출원의 실시예에 기재된 유닛은 소프트웨어 방식으로 구현될 수 있고, 하드웨어 방식으로 구현될 수도 있다. 여기서, 모듈의 명칭은 어느 경우에 해당 유닛 자체에 대해 한정하지 않으며, 예를 들어, 표시 모듈은 “대상 얼굴 및 얼굴 마스크 시퀀스를 표시하는 유닛"으로 기재할 수도 있다.
본문에 기재되는 기능은 적어도 부분적으로 하나 또는 복수의 하드웨어 논리 부재에 의해 실행될 수 있다. 예를 들어 비한정적으로, 사용 가능한 예시적인 유형의 하드웨어 논리 부재는 필드 프로그래머블 게이트 어레이(Field Programmable Gate Array, FPGA), 전용 집적 회로(Application Specific Integrated Circuit, ASIC), 전용 표준 제품(Application Specific Standard Parts, ASSP), 시스템 온 칩 시스템(System on Chip, SOC), 컴플렛 프로그래머블 논리 장치(Complex Programmable Logic Device, CPLD) 등을 포함한다.
본 출원의 문맥에서, 기계 판독 가능 매체는 유형의 매체일 수 있고, 명령 실행 시스템, 장치 또는 기기에 의해 사용되거나 명령 실행 시스템, 장치 또는 기기와 결합되어 사용되는 프로그램을 포함하거나 저장할 수 있다. 기계 판독 가능 매체는 기계 판독 가능 신호 매체이거나 기계 판독 가능 저장 매체일 수 있다. 기계 판독 가능 매체는 전자적, 자기적, 광학적, 전자기적, 적외선, 또는 반도체 시스템, 장치 또는 기기, 또는 상술한 내용의 임의의 적합한 조합을 포함할 수 있지만 이에 한정되는 것은 아니다. 기계 판독 가능 저장매체의 더 구체적인 예시로서 하나 또는 복수의 와이어를 기반으로 하는 전기적 연결, 휴대형 컴퓨터 디스크, 하드 디스크, 랜덤 액세스 메모리(RAM), 읽기 전용 메모리(ROM), 소거 가능 및 프로그래머블 읽기 전용 메모리(EPROM 또는 플래시 메모리), 광섬유, 휴대용 컴팩트 판독 전용 메모리(CD-ROM), 광학 저장 장치, 자기 저장 장치, 또는 상술한 내용의 임의의 조합을 포함한다.
제1 측면에서, 본 출원의 하나 또는 복수의 실시예에 따르면, 얼굴 이미지 표시 방법을 제공하는 바,
대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 단계;
타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스는 적어도 하나의 상기 대상 얼굴에 대응되는 변형 얼굴 마스크를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하는 단계는,
상기 대상 얼굴을 중심으로 하고, 상기 대상 얼굴의 머리 꼭대기 방향을 중심 축으로 하고, 회전 운동의 방식에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하며, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크를 기설정 원주 방향을 따라 배열하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크는 상기 대상 얼굴에 대응되는 스케일된 얼굴 마스크이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 회전 운동 방식으로 상기 얼굴 마스크 시퀀스를 동적으로 표시하는 단계는,
상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하는 단계;
상기 특징 파라미터를 기초로 상기 회전 운동의 회전 속도를 확정하고, 상기 회전 속도에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하는 상기 단계는,
상기 대상 얼굴의 입 부위 특징 파라미터 및 눈 부위 특징 파라미터를 획득하되, 상기 입 부위 특징 파라미터는 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 포함하고, 상기 눈 부위 특징 파라미터는 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 포함하는 단계;
상기 윗입술 키 포인트 좌표 및 상기 아랫입술 키 포인트 좌표를 기초로 제1 방향에서의 제1 좌표 차이값을 확정하고, 상기 왼쪽 눈 키 포인트 좌표 및 상기 오른쪽 눈 키 포인트 좌표를 기초로 제2 방향에서의 제2 좌표 차이값을 확정하는 단계;
상기 제1 좌표 차이값 및 상기 제2 좌표 차이값의 비례를 기초로 상기 특징 파라미터를 확정하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 특징 파라미터를 기초로 회전 속도를 확정하는 상기 단계는,
상기 특징 파라미터가 기설정 제1 임계값보다 작거나 같으면, 상기 회전 속도는 제1 기설정 속도인 단계;
상기 특징 파라미터가 상기 기설정 제1 임계값보다 크면, 상기 회전 속도는 상기 제1 기설정 속도와 부가 속도의 합이며, 여기서, 상기 부가 속도와 특징 파라미터 차이값은 정비례하고, 상기 특징 파라미터 차이값은 상기 특징 파라미터와 상기 기설정 제1 임계값의 차이인 단계;
상기 제1 기설정 속도와 상기 부가 속도의 합이 제2 기설정 속도보다 크거나 같으면, 상기 회전 속도를 상기 제2 기설정 속도로 확정하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 상기 단계 전에,
상기 타겟 얼굴 마스크를 타겟 위치까지 회전한 것을 확정하고, 상기 타겟 위치와 상기 대상 얼굴 사이는 기설정 위치 관계에 부합하는 단계를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 위치는 상기 대상 얼굴 정면 위치이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 타겟 위치까지 회전할 때, 상기 회전 운동의 회전 속도는 기설정 타겟 속도로 감속한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 상기 단계는,
기설정 경로에 따라 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 부착하고, 상기 타겟 얼굴 마스크와 상기 대상 얼굴을 융합하여, 융합 얼굴 이미지를 생성하되, 여기서, 상기 기설정 경로는 제1 위치로부터 제2 위치로 향하고, 상기 제1 위치는 현재 상기 타겟 얼굴 마스크가 상기 얼굴 마스크 시퀀스에서 처해 있는 위치이고, 상기 제2 위치는 현재 상기 대상 얼굴이 처해 있는 위치인 단계;
상기 대상 얼굴에 상기 융합 얼굴 이미지를 표시하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 상기 단계는,
기설정된 투명도 변화 규칙에 따라, 상기 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크 이외의 기타 얼굴 마스크에 대해 점변 소실을 수행하는 단계를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 이미지 표시 방법은,
상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 상기 랜더링 영역에 대해서만 랜더링을 수행하는 단계를 더 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하는 상기 단계는,
상기 텍셀의 현재 위치가 상기 대상 얼굴에 대응되는 위치 범위 안에 있고, 제3 방향에서 상기 대상 얼굴의 특징 키 포인트 뒤에 있을 경우, 상기 텍셀은 상기 비랜더링 영역에 속하는 단계를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 랜더링 영역은 정면 영역과 배면 영역을 포함하고, 상기 랜더링 영역에 대해 랜더링을 수행하는 상기 단계는,
상기 대상 얼굴을 기초로 상기 정면 영역을 랜더링하는 단계;
상기 배면 영역을 기설정 고정 무늬로 랜더링하는 단계를 포함한다.
제2 측면에서, 본 출원의 하나 또는 복수의 실시예에 따르면, 얼굴 이미지 표시 장치를 제공하는 바,
대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 표시 모듈;
타겟 얼굴 마스크에 작용하는 트리거 명령을 획득하는 획득 모듈;
또한 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 처리 모듈을 포함하고;
상기 표시 모듈은 또한, 상기 타겟 얼굴 마스크를 융합한 후의 상기 대상 얼굴을 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스는 적어도 하나의 상기 대상 얼굴에 대응되는 변형 얼굴 마스크를 포함한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈은 구체적으로,
상기 대상 얼굴을 중심으로 하고, 상기 대상 얼굴의 머리 꼭대기 방향을 중심축으로 하고, 회전 운동의 방식에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하며, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크를 기설정 원주 방향을 따라 배열한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크는 상기 대상 얼굴에 대응되는 스케일된 얼굴 마스크이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈은 구체적으로,
상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하고;
상기 특징 파라미터를 기초로 상기 회전 운동의 회전 속도를 확정하고, 상기 회전 속도에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 획득 모듈은 또한, 상기 대상 얼굴의 입 부위 특징 파라미터 및 눈 부위 특징 파라미터를 획득하되, 상기 입 부위 특징 파라미터는 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 포함하고, 상기 눈 부위 특징 파라미터는 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 포함하고;
상기 처리 모듈은 또한, 상기 윗입술 키 포인트 좌표 및 상기 아랫입술 키 포인트 좌표를 기초로 제1 방향에서의 제1 좌표 차이값을 확정하고, 상기 왼쪽 눈 키 포인트 좌표 및 상기 오른쪽 눈 키 포인트 좌표를 기초로 제2 방향에서의 제2 좌표 차이값을 확정하고;
상기 처리 모듈은 또한, 상기 제1 좌표 차이값 및 상기 제2 좌표 차이값의 비례를 기초로 상기 특징 파라미터를 확정한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈은 구체적으로,
상기 특징 파라미터가 기설정 제1 임계값보다 작거나 같으면, 상기 회전 속도는 제1 기설정 속도이고;
상기 특징 파라미터가 상기 기설정 제1 임계값보다 크면, 상기 회전 속도는 상기 제1 기설정 속도와 부가 속도의 합이며, 여기서, 상기 부가 속도와 특징 파라미터 차이값은 정비례하고, 상기 특징 파라미터 차이값은 상기 특징 파라미터와 상기 기설정 제1 임계값의 차이이고;
상기 제1 기설정 속도와 상기 부가 속도의 합은 제2 기설정 속도보다 크거나 같으면, 상기 회전 속도를 상기 제2 기설정 속도로 확정한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈은 또한, 상기 타겟 얼굴 마스크를 타겟 위치까지 회전한 것을 확정하고, 상기 타겟 위치와 상기 대상 얼굴 사이는 기설정 위치 관계에 부합한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 위치는 상기 대상 얼굴 정면 위치이다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 타겟 얼굴 마스크를 상기 타겟 위치까지 회전할 때, 상기 회전 운동의 회전 속도는 기설정 타겟 속도로 감속한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈은 또한, 기설정 경로에 따라 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 부착하고, 상기 타겟 얼굴 마스크와 상기 대상 얼굴을 융합하여, 융합 얼굴 이미지를 생성하되, 여기서, 상기 기설정 경로는 제1 위치로부터 제2 위치로 향하고, 상기 제1 위치는 현재 상기 타겟 얼굴 마스크가 상기 얼굴 마스크 시퀀스에서 처해 있는 위치이고, 상기 제2 위치는 현재 상기 대상 얼굴이 처해 있는 위치이고;
상기 표시 모듈은 또한, 상기 대상 얼굴에 상기 융합 얼굴 이미지를 표시한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 표시 모듈은 또한, 기설정된 투명도 변화 규칙에 따라, 상기 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크 이외의 기타 얼굴 마스크에 대해 점변 소실을 수행한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈은 또한, 상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 상기 랜더링 영역에 대해서만 랜더링을 수행한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 텍셀의 현재 위치가 상기 대상 얼굴에 대응되는 위치 범위 안에 있고, 제3 방향에서 상기 대상 얼굴의 특징 키 포인트 뒤에 있을 경우, 상기 텍셀은 상기 비랜더링 영역에 속한다.
본 출원의 하나 또는 복수의 실시예에 따르면, 상기 처리 모듈은 또한, 상기 대상 얼굴을 기초로 상기 정면 영역을 랜더링하고;
상기 처리 모듈은 또한, 상기 배면 영역을 기설정 고정 무늬로 랜더링한다.
제3 측면에서, 본 출원의 실시예는 전자기기를 제공하는 바,
적어도 하나의 프로세서와 메모리를 포함하고;
상기 메모리에는 컴퓨터 실행 명령이 저장되고;
상기 적어도 하나의 프로세서가 상기 메모리에 저장된 컴퓨터 실행 명령을 실행할 때, 상기 적어도 하나의 프로세서가 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 실행하도록 한다.
제4 측면에서, 본 출원의 실시예는 컴퓨터 판독 가능 저장매체를 제공하는 바, 상기 컴퓨터 판독 가능 저장매체에 컴퓨터 실행 명령이 저장되어 있고, 상기 컴퓨터 실행 명령이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
제5 측면에서, 본 출원의 실시예는 컴퓨터 프로그램 제품을 제공하는 바, 컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
제6 측면에서, 본 출원의 실시예는 컴퓨터 프로그램을 제공하는 바, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 상술한 제1 측면 및 제1 측면의 다양한 가능한 설계에 따른 얼굴 이미지 표시 방법을 구현한다.
상술한 내용은 본 출원의 보다 바람직한 실시예 및 사용되는 기술 원리에 대한 설명일 뿐이다. 본 분야의 기술자는, 본 출원에 관련된 공개 범위는 상술한 기술특징의 특정 조합으로 이루어진 기술방안에 제한되지 않고, 동시에 상술한 공개 범위를 벗어나지 않는 상황에서, 상술한 기술특징 또는 그 동등한 특징이 임의로 조합되어 이루어진 기타 기술방안, 예를 들어 상술한 특징과 본 출원에 개시된(단 이에 제한되지 않음) 유사한 기능을 갖는 기술특징에 대해 상호 치환하여 형성된 기술방안을 포괄하여야 한다는 점을 이해하여야 한다.
또한, 비록 특정 순서로 각 조작들에 대해 기재하였지만, 이는 이러한 조작들이 기재된 특정 순서로 또는 순차적인 순서로 수행될 것을 요구하는 것으로 이해되어서는 안된다. 일정 환경에서, 멀티 태스크 및 병렬 처리가 유리할 수 있다. 마찬가지로, 몇몇 구체적인 구현 세부사항이 상기 기재에 포함되어 있지만, 이들은 본 출원의 범위를 제한하는 것으로 해석되어서는 안된다. 별도의 실시예의 문맥에서 기재된 일부 특징들은 조합되어 단일 실시예에서 구현될 수도 있다. 반대로, 단일 실시예의 문맥에서 기재된 다양한 특징은 또한 개별적으로 또는 임의의 적합한 서브 조합의 형태로 복수의 실시예에서 구현될 수도 있다.
구조적 특징 및/또는 방법의 논리적 동작에 특정된 언어를 사용하여 본 주제에 대해 설명하였지만, 첨부된 청구범위에 한정된 주제가 반드시 위에 기재된 특정 특징 또는 동작에 제한되는 것은 아니라는 점을 이해하여야 한다. 반대로, 위에서 기재된 특정 특징 및 동작은 청구범위를 구현하는 예시적인 형태일 뿐이다.

Claims (20)

  1. 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 단계;
    타겟 얼굴 마스크에 작용하는 트리거 명령에 응답하여, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  2. 제1항에 있어서, 상기 얼굴 마스크 시퀀스는 적어도 하나의 상기 대상 얼굴에 대응되는 변형 얼굴 마스크를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  3. 제1항 또는 제2항에 있어서, 상기 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하는 단계는,
    상기 대상 얼굴을 중심으로 하고, 상기 대상 얼굴의 머리 꼭대기 방향을 중심축으로 하고, 회전 운동의 방식에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하며, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크를 기설정 원주 방향을 따라 배열하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  4. 제3항에 있어서, 상기 얼굴 마스크 시퀀스 중의 얼굴 마스크는 상기 대상 얼굴에 대응되는 스케일된 얼굴 마스크인 것을 특징으로 하는 얼굴 이미지 표시 방법.
  5. 제3항 또는 제4항에 있어서, 상기 회전 운동 방식으로 상기 얼굴 마스크 시퀀스를 동적으로 표시하는 단계는,
    상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하는 단계;
    상기 특징 파라미터를 기초로 상기 회전 운동의 회전 속도를 확정하고, 상기 회전 속도에 따라 상기 얼굴 마스크 시퀀스를 동적으로 표시하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  6. 제5항에 있어서, 상기 대상 얼굴 상의 타겟 부위의 특징 파라미터를 획득하는 상기 단계는,
    상기 대상 얼굴의 입 부위 특징 파라미터 및 눈 부위 특징 파라미터를 획득하되, 상기 입 부위 특징 파라미터는 윗입술 키 포인트 좌표 및 아랫입술 키 포인트 좌표를 포함하고, 상기 눈 부위 특징 파라미터는 왼쪽 눈 키 포인트 좌표 및 오른쪽 눈 키 포인트 좌표를 포함하는 단계;
    상기 윗입술 키 포인트 좌표 및 상기 아랫입술 키 포인트 좌표를 기초로 제1 방향에서의 제1 좌표 차이값을 확정하고, 상기 왼쪽 눈 키 포인트 좌표 및 상기 오른쪽 눈 키 포인트 좌표를 기초로 제2 방향에서의 제2 좌표 차이값을 확정하는 단계;
    상기 제1 좌표 차이값 및 상기 제2 좌표 차이값의 비례를 기초로 상기 특징 파라미터를 확정하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  7. 제6항에 있어서, 상기 특징 파라미터를 기초로 상기 회전 운동의 회전 속도를 확정하는 상기 단계는,
    상기 특징 파라미터가 기설정 제1 임계값보다 작거나 같으면, 상기 회전 속도는 제1 기설정 속도인 단계;
    상기 특징 파라미터가 상기 기설정 제1 임계값보다 크면, 상기 회전 속도는 상기 제1 기설정 속도와 부가 속도의 합이며, 여기서, 상기 부가 속도와 특징 파라미터 차이값은 정비례하고, 상기 특징 파라미터 차이값은 상기 특징 파라미터와 상기 기설정 제1 임계값의 차이인 단계;
    상기 제1 기설정 속도와 상기 부가 속도의 합은 제2 기설정 속도보다 크거나 같으면, 상기 회전 속도를 상기 제2 기설정 속도로 확정하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  8. 제3항 내지 제7항 중 어느 한 항에 있어서, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 단계 전에,
    상기 타겟 얼굴 마스크를 타겟 위치까지 회전한 것을 확정하되, 상기 타겟 위치와 상기 대상 얼굴 사이는 기설정 위치 관계에 부합하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  9. 제8항에 있어서, 상기 타겟 위치는 상기 대상 얼굴 정면 위치인 것을 특징으로 하는 얼굴 이미지 표시 방법.
  10. 제9항에 있어서, 상기 타겟 얼굴 마스크를 상기 타겟 위치까지 회전할 때, 상기 회전 운동의 회전 속도는 기설정 타겟 속도로 감속하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  11. 제1항 내지 제10항 중 어느 한 항에 있어서, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 상기 단계는,
    기설정 경로에 따라 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 부착하고, 상기 타겟 얼굴 마스크와 상기 대상 얼굴을 융합하여, 융합 얼굴 이미지를 생성하되, 여기서, 상기 기설정 경로는 제1 위치로부터 제2 위치로 향하고, 상기 제1 위치는 현재 상기 타겟 얼굴 마스크가 상기 얼굴 마스크 시퀀스에서 처해 있는 위치이고, 상기 제2 위치는 현재 상기 대상 얼굴이 처해 있는 위치인 단계;
    상기 대상 얼굴에 상기 융합 얼굴 이미지를 표시하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  12. 제11항에 있어서, 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하여 표시하는 상기 단계는,
    기설정된 투명도 변화 규칙에 따라, 상기 얼굴 마스크 시퀀스 중 상기 타겟 얼굴 마스크 이외의 기타 얼굴 마스크에 대해 점변 소실을 수행하는 단계 더 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  13. 제1항 내지 제12항 중 어느 한 항에 있어서,
    상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하고, 상기 랜더링 영역에 대해서만 랜더링을 수행하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  14. 제13항에 있어서, 상기 얼굴 마스크 시퀀스의 각 얼굴 마스크 상의 각 텍셀의 현재 위치 파라미터 및 상기 대상 얼굴의 위치 파라미터를 기초로 랜더링 영역 및 비랜더링 영역을 확정하는 상기 단계는,
    상기 텍셀의 현재 위치가 상기 대상 얼굴에 대응되는 위치 범위 안에 있고, 제3 방향에서 상기 대상 얼굴의 특징 키 포인트 뒤에 있을 경우, 상기 텍셀은 상기 비랜더링 영역에 속하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  15. 제14항에 있어서, 상기 랜더링 영역은 정면 영역과 배면 영역을 포함하고, 상기 랜더링 영역에 대해 랜더링을 수행하는 상기 단계는,
    상기 대상 얼굴을 기초로 상기 정면 영역을 랜더링하는 단계;
    상기 배면 영역을 기설정 고정 무늬로 랜더링하는 단계를 포함하는 것을 특징으로 하는 얼굴 이미지 표시 방법.
  16. 대상 얼굴의 기설정 상대 위치에, 기설정 운동 방식에 따라 얼굴 마스크 시퀀스를 동적으로 표시하되, 상기 얼굴 마스크 시퀀스는 복수의 상기 대상 얼굴에 대응되는 얼굴 마스크를 포함하는 표시 모듈;
    타겟 얼굴 마스크에 작용하는 트리거 명령을 획득하는 획득 모듈;
    또한 상기 타겟 얼굴 마스크를 상기 대상 얼굴에 융합하되, 여기서, 상기 타겟 얼굴 마스크는 상기 얼굴 마스크 시퀀스 중 어느 하나의 마스크인 처리 모듈을 포함하고;
    상기 표시 모듈은 또한, 상기 타겟 얼굴 마스크를 융합한 후의 상기 대상 얼굴을 표시하는 것을 특징으로 하는 얼굴 이미지 표시 장치.
  17. 적어도 하나의 프로세서와 메모리를 포함하고;
    상기 메모리에 컴퓨터 실행 명령이 저장되고;
    상기 적어도 하나의 프로세서는 상기 메모리에 저장된 컴퓨터 실행 명령을 실행하여, 상기 적어도 하나의 프로세서가 제1항 내지 제15항 중 어느 한 항에 따른 얼굴 이미지 표시 방법을 구현하도록 하는 것을 특징으로 하는 전자기기.
  18. 컴퓨터 판독 가능 저장매체에 있어서,
    상기 컴퓨터 판독 가능 저장매체에는 컴퓨터 실행 명령이 저장되고, 상기 컴퓨터 실행 명령이 프로세서에 의해 실행될 때, 제1항 내지 제15항 중 어느 한 항에 따른 얼굴 이미지 표시 방법을 구현하는 것을 특징으로 하는 컴퓨터 판독 가능 저장매체.
  19. 컴퓨터 프로그램 제품에 있어서,
    컴퓨터 프로그램을 포함하고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때, 제1항 내지 제15항 중 어느 한 항에 따른 얼굴 이미지 표시 방법을 구현하는 것을 특징으로 하는 컴퓨터 프로그램 제품.
  20. 컴퓨터 프로그램에 있어서,
    상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때 제1항 내지 제15항 중 어느 한 항에 따른 얼굴 이미지 표시 방법을 구현하는 것을 특징으로 하는 컴퓨터 프로그램.

KR1020237003737A 2020-09-17 2021-08-24 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체 KR20230034351A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202010981627.5 2020-09-17
CN202010981627.5A CN112099712B (zh) 2020-09-17 2020-09-17 人脸图像显示方法、装置、电子设备及存储介质
PCT/CN2021/114237 WO2022057576A1 (zh) 2020-09-17 2021-08-24 人脸图像显示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
KR20230034351A true KR20230034351A (ko) 2023-03-09

Family

ID=73760305

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020237003737A KR20230034351A (ko) 2020-09-17 2021-08-24 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체

Country Status (7)

Country Link
US (1) US11935176B2 (ko)
EP (1) EP4177724A4 (ko)
JP (1) JP7560208B2 (ko)
KR (1) KR20230034351A (ko)
CN (1) CN112099712B (ko)
BR (1) BR112023001930A2 (ko)
WO (1) WO2022057576A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112099712B (zh) * 2020-09-17 2022-06-07 北京字节跳动网络技术有限公司 人脸图像显示方法、装置、电子设备及存储介质

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030234871A1 (en) 2002-06-25 2003-12-25 Squilla John R. Apparatus and method of modifying a portrait image
US8028250B2 (en) * 2004-08-31 2011-09-27 Microsoft Corporation User interface having a carousel view for representing structured data
JP4655212B2 (ja) 2005-08-26 2011-03-23 富士フイルム株式会社 画像処理装置、画像処理方法及び画像処理プログラム
US20130080976A1 (en) * 2011-09-28 2013-03-28 Microsoft Corporation Motion controlled list scrolling
US10916044B2 (en) * 2015-07-21 2021-02-09 Sony Corporation Information processing apparatus, information processing method, and program
US10430867B2 (en) * 2015-08-07 2019-10-01 SelfieStyler, Inc. Virtual garment carousel
US20170092002A1 (en) * 2015-09-30 2017-03-30 Daqri, Llc User interface for augmented reality system
CN105357466A (zh) * 2015-11-20 2016-02-24 小米科技有限责任公司 视频通信方法及装置
CN105979360A (zh) * 2015-12-04 2016-09-28 乐视致新电子科技（天津）有限公司 一种渲染图像的处理方法及装置
US20180000179A1 (en) * 2016-06-30 2018-01-04 Alan Jeffrey Simon Dynamic face mask with configurable electronic display
US10534809B2 (en) * 2016-08-10 2020-01-14 Zeekit Online Shopping Ltd. Method, system, and device of virtual dressing utilizing image processing, machine learning, and computer vision
JP2018152646A (ja) 2017-03-10 2018-09-27 株式会社リコー 撮像装置、画像表示システム、操作方法およびプログラム
CN107247548B (zh) * 2017-05-31 2018-09-04 腾讯科技（深圳）有限公司 图像显示方法、图像处理方法及装置
JP2019537758A (ja) 2017-06-12 2019-12-26 美的集団股▲フン▼有限公司Ｍｉｄｅａ Ｇｒｏｕｐ Ｃｏ．， Ｌｔｄ． 制御方法、コントローラ、スマートミラー及びコンピュータ読み取り可能な記憶媒体
CN109410119A (zh) * 2017-08-18 2019-03-01 北京凤凰都市互动科技有限公司 面具图像变形方法及其系统
JP6981106B2 (ja) 2017-08-29 2021-12-15 株式会社リコー 撮像装置、画像表示システム、操作方法、プログラム
CN109034063A (zh) * 2018-07-27 2018-12-18 北京微播视界科技有限公司 人脸特效的多人脸跟踪方法、装置和电子设备
CN110619615A (zh) * 2018-12-29 2019-12-27 北京时光荏苒科技有限公司 用于处理图像方法和装置
CN110322416B (zh) * 2019-07-09 2022-11-18 腾讯科技（深圳）有限公司 图像数据处理方法、装置以及计算机可读存储介质
US11457196B2 (en) * 2019-08-28 2022-09-27 Snap Inc. Effects for 3D data in a messaging system
CN110992493B (zh) * 2019-11-21 2023-10-31 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质
US11381756B2 (en) * 2020-02-14 2022-07-05 Snap Inc. DIY effects image modification
KR102697772B1 (ko) * 2020-04-13 2024-08-26 스냅 인코포레이티드 메시징 시스템 내의 3d 데이터를 포함하는 증강 현실 콘텐츠 생성기들
CN111494934B (zh) * 2020-04-16 2024-05-17 网易（杭州）网络有限公司 游戏中虚拟道具展示方法、装置、终端及存储介质
CN112099712B (zh) * 2020-09-17 2022-06-07 北京字节跳动网络技术有限公司 人脸图像显示方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN112099712A (zh) 2020-12-18
EP4177724A4 (en) 2023-12-06
WO2022057576A1 (zh) 2022-03-24
BR112023001930A2 (pt) 2023-03-28
CN112099712B (zh) 2022-06-07
JP7560208B2 (ja) 2024-10-02
EP4177724A1 (en) 2023-05-10
US20230090457A1 (en) 2023-03-23
JP2023537721A (ja) 2023-09-05
US11935176B2 (en) 2024-03-19

Similar Documents

Publication Publication Date Title
CN110766777B (zh) 虚拟形象的生成方法、装置、电子设备及存储介质
US11133033B2 (en) Cinematic space-time view synthesis for enhanced viewing experiences in computing environments
US20180246635A1 (en) Generating user interfaces combining foreground and background of an image with user interface elements
US8610714B2 (en) Systems, methods, and computer-readable media for manipulating graphical objects
EP2814000B1 (en) Image processing apparatus, image processing method, and program
US10162498B2 (en) Providing selection areas for selectable objects in graphical interface
KR20230019975A (ko) 이미지 프로세싱 sdk에서 사용하기 위한 인터페이스 캐러셀
US20150089436A1 (en) Gesture Enabled Keyboard
JP7316387B2 (ja) 顔画像の処理方法、デバイス、可読媒体及び電子装置
KR20230079177A (ko) 증강 현실 콘텐츠 생성기들을 절차적으로 생성함
CN112053449A (zh) 基于增强现实的显示方法、设备及存储介质
WO2022088928A1 (zh) 弹性对象的渲染方法、装置、设备及存储介质
US20150063785A1 (en) Method of overlappingly displaying visual object on video, storage medium, and electronic device
KR20230021113A (ko) 이미지 프로세싱을 위한 소프트웨어 개발 키트
CN112053370A (zh) 基于增强现实的显示方法、设备及存储介质
CN111127469A (zh) 缩略图显示方法、装置、存储介质以及终端
JP7514331B2 (ja) 制御方法、装置、端末および記憶媒体
KR20230034351A (ko) 얼굴 이미지 표시 방법, 장치, 전자기기 및 저장매체
RU2666300C2 (ru) Технологии уменьшения пиксельного шейдинга
CN115516517A (zh) 用于构建三维几何图形的方法和装置
US8890889B1 (en) System and method for generating a pose of an object
US10613722B1 (en) Distorting a graph on a computer display to improve the computer's ability to display the graph to, and interact with, a user
CN103997634B (zh) 用户终端及其显示图像的方法
WO2024199386A1 (zh) 用于待显示对象的显示方法、电子设备和介质
CN117131296A (zh) 内容呈现方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination