KR20020048462A - 웹과 오프라인에서 실시간 2d / 3d 렌더링기술 - Google Patents

웹과 오프라인에서 실시간 2d / 3d 렌더링기술 Download PDF

Info

Publication number
KR20020048462A
KR20020048462A KR1020000077552A KR20000077552A KR20020048462A KR 20020048462 A KR20020048462 A KR 20020048462A KR 1020000077552 A KR1020000077552 A KR 1020000077552A KR 20000077552 A KR20000077552 A KR 20000077552A KR 20020048462 A KR20020048462 A KR 20020048462A
Authority
KR
South Korea
Prior art keywords
dimensional
real
expression
facial expression
web
Prior art date
Application number
KR1020000077552A
Other languages
English (en)
Inventor
오지수
Original Assignee
오지수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 오지수 filed Critical 오지수
Priority to KR1020000077552A priority Critical patent/KR20020048462A/ko
Publication of KR20020048462A publication Critical patent/KR20020048462A/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 사용자의 요구에 의해 3차원 얼굴 표정 합성에서는 현재의 표정을 컴퓨터가 인식하거나 사람의 얼굴 표정을 합성합니다.
이를 위해 먼저 이차원 영상에 나타난 얼굴영상에서 얼굴의 특징점을 추출하고 간단하게 3D 와이어 프레임을 정합한 후 표정과 감정의 매핑은 사람의 기분과 얼굴 구조로부터 추출된 정보를 기반으로 생성된 감성데이터베이스를 이용합니다.
위 두가지 정보를 이용하여 현재 영상에 나타난 사람의 표정을 인식하거나 여러가지 얼굴표정을 합성, 실시간 렌더링 할 수 있습니다.
MPEG-4기술을 응용하였고, 알고리즘만으로 웹이나 오프라인에서 실시간 3D렌더링을 하는 엔진 개발로 가능해진 응용 분야이다.
MPEG-4기존기술의 국제 표준과 다른 특징을 갖고 있다.
첫째, 자연영상 뿐만 아닌 컴퓨터 그래픽을 포함한 합성영상의 부호화를 포함하고 있다.
둘째, 객체 기반 부호화 방법을 사용한다. 또한 이를 복합적으로 조합하기 위해 BIFS(binary format for scene description) 정보를 제공한다.
셋째, 상호작용에 기반 하여 융통성 있는 구조를 지향한다.
넷째, 서비스 측면의 수요에 따른 개발보다 향후 수요를 위한 개발이라는 성격이 강하다.
다섯째, 저속 통신망에 알맞도록 오류 내성이 강하다.
이러한 MPEG-4 SHNC FBA그룹에서의 표준화 작업을 하고 이를 이용하여 real world의 인간의 얼굴의 모습을 컴퓨터로 바로 받아들여 3D 객체화하고, 애니메이션을 구현하는 것을 본 프로그램의 기본적인 목적으로 삼는다.
■특징
3차원 와이어 프레임을 이용한 기술

Description

웹과 오프라인에서 실시간 2D / 3D 렌더링기술{.}
기존의 몽타쥬 합성이나 성형솔루션은 웹에서 실시간으로 구현이 힙들다.
기존의 3D 가속 하드웨어를 장착하지 않고 실시간 알고리즘만으로 3D렌더링이 가능한 엔진 개발로 웹에서도 3차원 영상을 실시간으로 서비스 할 수 있게 되었다. 작업을 통해 이루어지고 있는 3차원 영상 작성을 컴퓨터를 이용하여 쉽고 빠르게 작성할 수 있는 시스템 시스템이다. 많은 데이터베이스를 구축하지 않고도 여러 가지 화장이나 성형 코디네이션을 할 수 있다. 3차원 그래픽스 기술과 영상처리기법을 융합함으로써 각 부위의 교환, 합성과 얼굴 및 부위의 변형, 나이 변화, 표정 변화, 측면 얼굴의 합성이 가능하다. 또한 흑백 영상뿐 아니라 칼라 사진 영상에 대해서도 적용이 가능하다.
인물 사진 한 장으로 2차원 얼굴 영상자료를 혼합, 합성, 부분합성, 회전 등의 기능을 이용하여 3차원의 새로운 이미지를 생성한다.
3차원 얼굴 표정 합성에서는 현재의 표정을 컴퓨터가 인식하거나 사람의 얼굴 표정을 합성한다.
이를 위해 먼저 이차원 영상에 나타난 얼굴영상에서 얼굴의 특징점을 추출하고 간단하게 3D 와이어 프레임을 정합한 후 표정과 감정의 매핑은 사람의 기분과 얼굴 구조로부터 추출된 정보를 기반으로 생성된 감성데이터베이스를 이용한다.
위 두가지 정보를 이용하여 현재 영상에 나타난 사람의 표정을 인식하거나 여러 가지 얼굴표정을 합성할 수 있다.
이용자의 얼굴과 신체를 자신의 style에 맞게 치수등을 조정해 볼수 있다. 다양한 조합을 통해 수만가지의 캐릭터를 만들 수 있다.
도 1은 웹에서의 유저와 프로그램과의 연동 플로우 챠트이다.
.
.

Claims (2)

  1. 웹과 오프라인에서 2D영상이 3D와이어 프레임에 의해 입체화되어 실시간으로 합성, 렌더링된다. 기존의 3D 가속 하드웨어를 장착하지 않고 실시간 알고리즘만으로 3D렌더링이 가능한 엔진 개발로 웹에서도 3차원 영상을 실시간으로 서비스 할 수 있게 되었다. 작업을 통해 이루어지고 있는 3차원 영상 작성을 컴퓨터를 이용하여 쉽고 빠르게 작성할 수 있는 시스템 이다.
  2. 제 1 항에 있어서,
    인물 사진 한 장으로 2차원 얼굴 영상자료를 혼합, 합성, 부분합성, 회전 등의 기능을 이용하여 3차원의 새로운 이미지를 생성한다.
    3차원 얼굴 표정 합성에서는 현재의 표정을 컴퓨터가 인식하거나 사람의 얼굴 표정을 합성한다. 이를 위해 먼저 이차원 영상에 나타난 얼굴영상에서 얼굴의 특징점을 추출하고 간단하게 3D 와이어 프레임을 정합한 후 표정과 감정의 매핑은 사람의 기분과 얼굴 구조로부터 추출된 정보를 기반으로 생성된 감성데이터베이스를 이용한다.
    위 두가지 정보를 이용하여 현재 영상에 나타난 사람의 표정을 인식하거나 여러 가지 얼굴표정을 합성할 수 있다.
KR1020000077552A 2000-12-16 2000-12-16 웹과 오프라인에서 실시간 2d / 3d 렌더링기술 KR20020048462A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020000077552A KR20020048462A (ko) 2000-12-16 2000-12-16 웹과 오프라인에서 실시간 2d / 3d 렌더링기술

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020000077552A KR20020048462A (ko) 2000-12-16 2000-12-16 웹과 오프라인에서 실시간 2d / 3d 렌더링기술

Publications (1)

Publication Number Publication Date
KR20020048462A true KR20020048462A (ko) 2002-06-24

Family

ID=27682618

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020000077552A KR20020048462A (ko) 2000-12-16 2000-12-16 웹과 오프라인에서 실시간 2d / 3d 렌더링기술

Country Status (1)

Country Link
KR (1) KR20020048462A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100727034B1 (ko) * 2005-12-09 2007-06-12 한국전자통신연구원 3차원 공간상에서 2차원 인간형 캐릭터의 표현 및애니메이션 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0896162A (ja) * 1994-09-21 1996-04-12 Atr Tsushin Syst Kenkyusho:Kk 表情再現装置
JPH09305798A (ja) * 1996-05-10 1997-11-28 Oki Electric Ind Co Ltd 画像表示装置
JPH1145349A (ja) * 1997-07-29 1999-02-16 Olympus Optical Co Ltd ワイヤーフレームモデル整合装置及び方法と記録媒体
JP2000259831A (ja) * 1999-03-05 2000-09-22 Atr Media Integration & Communications Res Lab 表情検出装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0896162A (ja) * 1994-09-21 1996-04-12 Atr Tsushin Syst Kenkyusho:Kk 表情再現装置
JPH09305798A (ja) * 1996-05-10 1997-11-28 Oki Electric Ind Co Ltd 画像表示装置
JPH1145349A (ja) * 1997-07-29 1999-02-16 Olympus Optical Co Ltd ワイヤーフレームモデル整合装置及び方法と記録媒体
JP2000259831A (ja) * 1999-03-05 2000-09-22 Atr Media Integration & Communications Res Lab 表情検出装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100727034B1 (ko) * 2005-12-09 2007-06-12 한국전자통신연구원 3차원 공간상에서 2차원 인간형 캐릭터의 표현 및애니메이션 방법

Similar Documents

Publication Publication Date Title
US11625878B2 (en) Method, apparatus, and system generating 3D avatar from 2D image
US10540817B2 (en) System and method for creating a full head 3D morphable model
CN101055646B (zh) 用于处理图像的方法和装置
JP7200439B1 (ja) アバター表示装置、アバター生成装置及びプログラム
JP3288353B2 (ja) 顔イメージから開始して３ｄ顔モデルを作る方法
US7027054B1 (en) Do-it-yourself photo realistic talking head creation system and method
CN108288072A (zh) 一种基于生成对抗网络的面部表情合成方法
Zheng et al. Avatarrex: Real-time expressive full-body avatars
Fu et al. M-face: An appearance-based photorealistic model for multiple facial attributes rendering
WO2002013144A1 (en) 3d facial modeling system and modeling method
CN114821675B (zh) 对象的处理方法、系统和处理器
KR20180080783A (ko) 가상 휴먼 인식 및 실시간 증강 합성 기술을 이용한 라이브 소셜 미디어 시스템 및 증강 합성 서버
KR20070086774A (ko) 화상 합성 장치
CN111950430A (zh) 基于颜色纹理的多尺度妆容风格差异度量及迁移方法、系统
JP6291265B2 (ja) 手話ｃｇ合成装置及びそのプログラム
KR20020048462A (ko) 웹과 오프라인에서 실시간 2d / 3d 렌더링기술
Mattos et al. 3D linear facial animation based on real data
CN113870404B (zh) 一种3d模型的皮肤渲染方法及显示设备
Yang et al. Poxture: Human posture imitation using neural texture
Qiu et al. Relitalk: Relightable talking portrait generation from a single video
Joachimczak et al. Creating 3D personal avatars with high quality facial expressions for telecommunication and telepresence
Rivotti et al. Composition Principles for Quality Depiction and Aesthetics.
Paier et al. Unsupervised learning of style-aware facial animation from real acting performances
Cowe Example-based computer-generated facial mimicry
KR20020046515A (ko) 웹과 오프라인에서 실시간 평면/입체 랜더링 기술

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application