JP2013054761A - 演技から作り出される顔アニメーション - Google Patents
演技から作り出される顔アニメーション Download PDFInfo
- Publication number
- JP2013054761A JP2013054761A JP2012243711A JP2012243711A JP2013054761A JP 2013054761 A JP2013054761 A JP 2013054761A JP 2012243711 A JP2012243711 A JP 2012243711A JP 2012243711 A JP2012243711 A JP 2012243711A JP 2013054761 A JP2013054761 A JP 2013054761A
- Authority
- JP
- Japan
- Prior art keywords
- face
- facial
- motion
- activity
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
Abstract
【解決手段】本方法では:複数の動作単位を定義し;複数の動作単位の各動作単位をアクターの演技を利用して校正し;第1の顔ポーズデータを撮影し;複数の重みを決定し、複数の重みの各重みは、各動作単位に固有に対応し、複数の重みによって、重み付け合成された複数の動作単位を特徴付け、重み付け合成によって、第1の顔ポーズデータを近似し;重み付けされた活動を、各重みを各動作単位に適用した結果を組み合わせることにより生成し;重み付けされた活動をデジタル顔形態モデルに適用し;そして複数の動作単位の内の少なくとも一つの動作単位を、重み付けされた活動に対するユーザによる入力調整内容を使用して再校正する。
【選択図】図1
Description
Claims (22)
- コンピュータシステムを使用してデジタル顔形態モデルをアニメートする方法であって、前記方法では:
複数の動作単位を定義するステップと、
前記コンピュータシステムを使用して前記複数の動作単位の各動作単位をアクターの演技を利用して校正するステップと、
ここで、前記各動作単位は、アクターの顔に取り付けられた顔マーカを使用して得られる第2の顔ポーズデータ及び活動を含んでおり、
ここで、前記各動作単位の前記活動は、複数の筋膜レイヤが前記複数の動作単位の活動によって可動するように、筋膜レイヤに適用され、
ここで、各動作単位を校正する前記ステップでは、前記各動作単位の前記第2の顔ポーズデータを、前記各動作単位に一致する校正演技から生成される校正ポーズデータを使用して校正することを含み、
全ての顔マーカからの信号を取得し、頭部、耳、及び鼻骨に取り付けられた顔マーカを含む顔の表情によって動かない第1の複数の顔マーカを使用して粗い安定化を実行し、そして、前記第1の複数の顔マーカに対する全ての顔マーカの動きを決定することによって細かい安定化を実行することによって、第1の顔ポーズデータを撮影しそして安定化するステップと、
複数の重みであって、前記複数の重みの各重みが前記各動作単位に固有に対応し、前記複数の重みによって重み付け合成された前記複数の動作単位を特徴付け、前記重み付け合成によって前記第1の顔ポーズデータを近似する、重みを前記コンピュータシステムを使用して決定するステップと、
筋肉活動としての重み付けされた活動を、前記コンピュータシステムを使用して前記各重みを前記各動作単位に適用した結果を組み合わせることにより生成するステップと、
前記コンピュータシステムを使用して、前記顔形態モデルに貼り付けられる前記複数の筋膜レイヤを起動することによって、前記重み付けされた活動を適用するステップと、そして
前記コンピュータシステムを使用して前記複数の動作単位の内の少なくとも一つの動作単位を、前記重み付けされた活動に対するユーザによる入力調整内容を使用して再校正するステップと、
を備える方法。 - 更に:
前記校正ポーズデータをクリーニングし、そして安定化させることを含む、請求項1記載の方法。 - 前記重み付け合成では、前記各動作単位の前記第2の顔ポーズデータを重み付け合成することを含む、請求項1記載の方法。
- 複数の重みを決定する前記ステップでは、前記第1の顔ポーズデータと前記重み付け合成された前記第2の顔ポーズデータとの対応を最適化することを含む、請求項3記載の方法。
- 前記最適化は線形最適化を含む、請求項4記載の方法。
- 前記線形最適化は最小二乗法を含む、請求項5記載の方法。
- 前記最適化は非線形最適化を含む、請求項4記載の方法。
- 重み付けされた活動を生成するステップでは、前記各重みを前記各動作単位の前記活動に適用した結果を組み合わせる、請求項1記載の方法。
- 少なくとも一つの動作単位を再校正する前記ステップでは、
前記第2の顔ポーズデータを再校正する、
請求項1記載の方法。 - 少なくとも一つの動作単位を再校正する前記ステップでは、
前記活動を再校正する、
請求項1記載の方法。 - 前記筋膜レイヤは筋肉レイヤを含む、請求項1記載の方法。
- 前記筋膜レイヤは顎レイヤを含む、請求項1記載の方法。
- 前記筋膜レイヤはボリュームレイヤを含む、請求項1記載の方法。
- 前記筋膜レイヤは開度レイヤを含む、請求項1記載の方法。
- 前記複数の動作単位は、該当するアクターの顔に対して詳細に調整された動作単位のライブラリであるFACS(顔面表情記号化システム)マトリクスを含む、請求項1記載の方法。
- コンピュータシステムを使用してデジタル顔形態モデルをアニメートする方法であって、前記方法では:
複数の動作単位を定義するステップと、
ここで、前記複数の動作単位の各動作単位は、アクターの顔に取り付けられた顔マーカを使用して得られる第2の顔ポーズデータ及び活動を含んでおり、
ここで、前記各動作単位の前記活動は、複数の筋膜レイヤが前記複数の動作単位の活動によって可動するように、筋膜レイヤに適用され、
撮影された複数の校正演技から生成される校正ポーズデータを使用して前記第2の顔ポーズデータを校正するステップと、ここで、前記撮影された複数の校正演技の各校正演技は前記各動作単位に対応するものであり、
頭部、耳、及び鼻骨に取り付けられた顔マーカを含む顔の表情によって動かない第1の複数の顔マーカを使用して粗い安定化を実行し、そして、前記第1の複数の顔マーカに対する全ての顔マーカの動きを決定することによって細かい安定化を実行することによって、前記第2の顔ポーズデータを安定化させるステップと、
前記撮影された複数の校正演技の他の校正演技から第1の顔ポーズデータを生成するステップと、
複数の重みであって、前記複数の重みの各重みが前記各動作単位に固有に対応し、前記複数の重みによって重み付け合成された前記第1の顔ポーズデータを特徴付け、前記重み付け合成によって前記第1の顔ポーズデータを近似する、重みを前記コンピュータシステムを使用して決定するステップと、
前記コンピュータシステムを使用して、前記各重みを前記活動に適用した結果を組み合わせることにより、重み付けされた活動を生成するステップと、
前記コンピュータシステムを使用して、前記デジタル顔形態モデルに貼り付けられる前記複数の筋膜レイヤを起動することによって、前記重み付けされた活動を適用するステップと、そして
前記コンピュータシステムを使用して、前記重み付けされた活動に対するユーザによる入力調整内容を使用して、前記第2の顔ポーズデータ及び前記活動を再校正するステップと、
を備える方法。 - 顔モーションキャプチャデータ(facial motion capture data)をデジタル顔形態モデルにリターゲットするシステムであって、前記システムは:
複数の動作単位を管理するFACS(顔面表情記号化システム)モジュールと、
前記コンピュータシステムを使用して前記複数の動作単位の各動作単位をアクターの演技を利用して校正する校正モジュールと、
ここで、前記各動作単位は、アクターの顔に取り付けられた顔マーカを使用して得られる第2の顔ポーズデータ及び活動を含んでおり、
ここで、前記各動作単位の前記活動は、複数の筋膜レイヤが前記複数の動作単位の活動によって可動するように、筋膜レイヤに適用され、
ここで、前記校正モジュールは、前記各動作単位に一致する校正演技から生成される校正ポーズデータを使用して前記第2の顔ポーズデータを校正することによって、各動作単位を校正し、
ここで、前記校正モジュールは、前記第2の顔ポーズデータを、頭部、耳、及び鼻骨に取り付けられた顔マーカを含む顔の表情に対してクリーニングし及び安定化させ、そして、前記第1の複数の顔マーカに対する全ての顔マーカの動きを決定することによって細かい安定化を実行し、
前記デジタル顔形態モデルに対応する重み付けされた少なくとも一つの活動を、前記顔モーションキャプチャデータ、及び前記複数の動作単位を使用して生成するリターゲットモジュール(retargeting module)と、
ここで、前記デジタル顔形態モデルには、第1の顔ポーズデータが含まれ、
前記顔形態モデルに貼り付けられる前記複数の筋膜レイヤを起動することにより重み付けされた前記少なくとも1つの活動を適用することによって、顔アニメーションフレームを生成するアニメーションモジュールと、
前記FACSモジュールに対応する再校正済みの動作単位(recalibrated action units)を、前記顔アニメーションに対するユーザによる入力調整内容に従って生成する調整インターフェースモジュールと、ここで、前記調整インターフェースモジュールは、重み付けされた前記少なくとも一つの活動を調整して前記デジタル顔形態モデルの所望のポーズを実現する重み変更ユニットを含んでおり、
を備えるシステム。 - 前記アニメーションモジュールは、前記デジタル顔形態モデルを生成するリギングユニット(rigging unit)を含む、請求項17記載のシステム。
- 前記リギングユニットは、少なくとも一つの筋膜レイヤを前記デジタル顔形態モデルに貼り付ける、請求項18記載のシステム。
- 前記アニメーションモジュールは、重み付けされた前記少なくとも一つの活動を前記少なくとも一つの筋膜レイヤに適用する反映モジュールを含む、請求項19記載のシステム。
- 前記調整インターフェースモジュールは、前記顔アニメーションフレームを選択して調整するフレーム選択ユニットを含む、請求項17記載のシステム。
- コンピュータシステム使用してデジタル顔アニメーション方法であって、前記方法は:
該当するアクターの顔に対して詳細に調整された動作単位のライブラリであるFACS(顔面表情記号化システム)マトリクスにおける複数の動作単位を定義するステップと、
前記コンピュータシステムを使用して前記複数の動作単位の各動作単位をアクターの演技を利用して校正するステップと、
ここで、前記各動作単位は、アクターの顔に取り付けられた顔マーカを使用して得られる第2の顔ポーズデータ及び活動を含んでおり、
ここで、前記各動作単位の前記活動は、複数の筋膜レイヤが前記複数の動作単位の活動によって可動するように、筋膜レイヤに適用され、
ここで、各動作単位を校正する前記ステップでは、前記各動作単位の前記第2の顔ポーズデータを、前記各動作単位に一致する校正演技から生成される校正ポーズデータを使用して校正することを含み、
アクターの顔に取り付けられた顔マーカを使用して、第1の顔ポーズデータを含む顔モーションデータを撮影するステップと、
前記コンピュータシステム使用して、前記顔モーションデータにラベル付けするステップと、
頭部、耳、及び鼻骨に取り付けられた顔マーカを含む顔の表情によって動かない第1の複数の顔マーカを使用して粗い安定化を実行し、そして、前記第1の複数の顔マーカに対する全ての顔マーカの動きを決定することによって細かい安定化を実行することによって、前記顔モーションデータを安定化させるステップと、
記顔モーションデータを、FACSマトリクスを使用してクリーニングするステップと、
前記コンピュータシステム使用して、前記顔モーションデータを正規化するステップと、
前記FACSマトリクスを使用して、前記複数の筋膜レイヤを起動することによって、前記顔モーションデータをデジタル顔形態モデルにリターゲットするステップと、そして
前記コンピュータシステム使用して、前記FACSマトリクスの多次元的な調整を行なうステップと、
を備える方法。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US79479006P | 2006-04-24 | 2006-04-24 | |
US60/794,790 | 2006-04-24 | ||
US73944807A | 2007-04-24 | 2007-04-24 | |
US11/739,448 | 2007-04-24 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009507927A Division JP2009534774A (ja) | 2006-04-24 | 2007-04-24 | 演技から作り出される顔アニメーション |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013054761A true JP2013054761A (ja) | 2013-03-21 |
JP5344358B2 JP5344358B2 (ja) | 2013-11-20 |
Family
ID=38656332
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009507927A Pending JP2009534774A (ja) | 2006-04-24 | 2007-04-24 | 演技から作り出される顔アニメーション |
JP2012243711A Active JP5344358B2 (ja) | 2006-04-24 | 2012-11-05 | 演技から作り出される顔アニメーション |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009507927A Pending JP2009534774A (ja) | 2006-04-24 | 2007-04-24 | 演技から作り出される顔アニメーション |
Country Status (8)
Country | Link |
---|---|
US (2) | US20100045680A1 (ja) |
EP (1) | EP2011087A4 (ja) |
JP (2) | JP2009534774A (ja) |
CN (1) | CN101473352A (ja) |
AU (1) | AU2007244921B2 (ja) |
CA (1) | CA2650796C (ja) |
NZ (1) | NZ572324A (ja) |
WO (1) | WO2007127743A2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101788709B1 (ko) * | 2014-08-25 | 2017-10-20 | 주식회사 룩시드랩스 | 표정을 인식하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 |
WO2022249539A1 (ja) * | 2021-05-26 | 2022-12-01 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Families Citing this family (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102007062843A1 (de) * | 2007-12-21 | 2009-06-25 | Amedo Smart Tracking Solutions Gmbh | Verfahren zur Bewegungserfassung |
NZ587526A (en) | 2008-01-31 | 2013-06-28 | Univ Southern California | Facial performance synthesis using deformation driven polynomial displacement maps |
US8447065B2 (en) | 2008-09-16 | 2013-05-21 | Cyberlink Corp. | Method of facial image reproduction and related device |
CN101436312B (zh) | 2008-12-03 | 2011-04-06 | 腾讯科技(深圳)有限公司 | 一种生成视频动画的方法及装置 |
US20100259683A1 (en) * | 2009-04-08 | 2010-10-14 | Nokia Corporation | Method, Apparatus, and Computer Program Product for Vector Video Retargeting |
US8334872B2 (en) * | 2009-05-29 | 2012-12-18 | Two Pic Mc Llc | Inverse kinematics for motion-capture characters |
US8736616B2 (en) * | 2009-09-15 | 2014-05-27 | Sony Corporation | Combining multi-sensory inputs for digital animation |
US20110066003A1 (en) * | 2009-09-16 | 2011-03-17 | Duffy Charles J | Method and system for quantitative assessment of facial emotion nulling |
US8777630B2 (en) * | 2009-09-16 | 2014-07-15 | Cerebral Assessment Systems, Inc. | Method and system for quantitative assessment of facial emotion sensitivity |
US20110065076A1 (en) * | 2009-09-16 | 2011-03-17 | Duffy Charles J | Method and system for quantitative assessment of social cues sensitivity |
US8614714B1 (en) * | 2009-12-21 | 2013-12-24 | Lucasfilm Entertainment Company Ltd. | Combining shapes for animation |
US20110304629A1 (en) * | 2010-06-09 | 2011-12-15 | Microsoft Corporation | Real-time animation of facial expressions |
US8655810B2 (en) | 2010-10-22 | 2014-02-18 | Samsung Electronics Co., Ltd. | Data processing apparatus and method for motion synthesis |
WO2012167475A1 (zh) * | 2011-07-12 | 2012-12-13 | 华为技术有限公司 | 生成形体动画的方法及装置 |
US9245176B2 (en) * | 2012-08-01 | 2016-01-26 | Disney Enterprises, Inc. | Content retargeting using facial layers |
US20140168204A1 (en) * | 2012-12-13 | 2014-06-19 | Microsoft Corporation | Model based video projection |
CN104123735B (zh) * | 2014-07-24 | 2017-05-10 | 无锡梵天信息技术股份有限公司 | 能实现多种动作混合的方法 |
US20180043122A1 (en) * | 2016-08-11 | 2018-02-15 | MetaMason, Inc. | Customized CPAP Masks and Related Modeling Algorithms |
CN106504308A (zh) * | 2016-10-27 | 2017-03-15 | 天津大学 | 基于mpeg‑4标准的人脸三维动画生成方法 |
CN107403170A (zh) * | 2017-08-08 | 2017-11-28 | 灵然创智(天津)动画科技发展有限公司 | 一种基于面部捕捉系统的捕捉点定位系统 |
US10796468B2 (en) | 2018-02-26 | 2020-10-06 | Didimo, Inc. | Automatic rig creation process |
US11508107B2 (en) | 2018-02-26 | 2022-11-22 | Didimo, Inc. | Additional developments to the automatic rig creation process |
US11741650B2 (en) | 2018-03-06 | 2023-08-29 | Didimo, Inc. | Advanced electronic messaging utilizing animatable 3D models |
US11062494B2 (en) | 2018-03-06 | 2021-07-13 | Didimo, Inc. | Electronic messaging utilizing animatable 3D models |
TWI694384B (zh) * | 2018-06-07 | 2020-05-21 | 鴻海精密工業股份有限公司 | 人臉圖像處理方法、電子裝置和存儲介質 |
US11763507B2 (en) * | 2018-12-05 | 2023-09-19 | Sony Group Corporation | Emulating hand-drawn lines in CG animation |
KR20210142627A (ko) * | 2019-03-22 | 2021-11-25 | 에씰로 앙터나시오날 | 가상 포유류를 사용하여 포유류의 생리적 행동을 시뮬레이션하기 위한 장치, 프로세스 및 컴퓨터 프로그램 |
US11182945B2 (en) | 2019-08-29 | 2021-11-23 | Didimo, Inc. | Automatically generating an animatable object from various types of user input |
US11645800B2 (en) | 2019-08-29 | 2023-05-09 | Didimo, Inc. | Advanced systems and methods for automatically generating an animatable object from various types of user input |
US11393149B2 (en) * | 2020-07-02 | 2022-07-19 | Unity Technologies Sf | Generating an animation rig for use in animating a computer-generated character based on facial scans of an actor and a muscle model |
EP4211659A1 (en) * | 2020-09-10 | 2023-07-19 | Weta Digital Limited | Systems and methods for building a muscle-to-skin transformation in computer animation |
US11875504B2 (en) | 2020-09-10 | 2024-01-16 | Unity Technologies Sf | Systems and methods for building a muscle-to-skin transformation in computer animation |
US11341702B2 (en) | 2020-09-10 | 2022-05-24 | Unity Technologies Sf | Systems and methods for data bundles in computer animation |
US20230102682A1 (en) * | 2021-09-30 | 2023-03-30 | Intuit Inc. | Large pose facial recognition based on 3d facial model |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2004084144A1 (en) * | 2003-03-13 | 2004-09-30 | Sony Pictures Entertainment Inc. | System and method for animating a digital facial model |
JP2005535031A (ja) * | 2002-08-02 | 2005-11-17 | 本田技研工業株式会社 | 人体測定に基づく骨格フィッティング |
WO2006039497A2 (en) * | 2004-10-01 | 2006-04-13 | Sony Pictures Entertainment Inc. | System and method for tracking facial muscle and eye motion for computer graphics animation |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6232965B1 (en) * | 1994-11-30 | 2001-05-15 | California Institute Of Technology | Method and apparatus for synthesizing realistic animations of a human speaking using a computer |
CA2227361A1 (en) * | 1998-01-19 | 1999-07-19 | Taarna Studios Inc. | Method and apparatus for providing real-time animation utilizing a database of expressions |
US6285794B1 (en) * | 1998-04-17 | 2001-09-04 | Adobe Systems Incorporated | Compression and editing of movies by multi-image morphing |
US6735566B1 (en) * | 1998-10-09 | 2004-05-11 | Mitsubishi Electric Research Laboratories, Inc. | Generating realistic facial animation from speech |
US8988419B2 (en) * | 2000-11-27 | 2015-03-24 | Ding Huang | Parameterization of deformation and simulation of interaction |
JP2003044873A (ja) * | 2001-08-01 | 2003-02-14 | Univ Waseda | 顔の3次元モデルの作成方法及びその変形方法 |
GB0128863D0 (en) | 2001-12-01 | 2002-01-23 | Univ London | Performance-driven facial animation techniques and media products generated therefrom |
US7969447B2 (en) * | 2004-05-06 | 2011-06-28 | Pixar | Dynamic wrinkle mapping |
-
2007
- 2007-04-24 WO PCT/US2007/067321 patent/WO2007127743A2/en active Application Filing
- 2007-04-24 JP JP2009507927A patent/JP2009534774A/ja active Pending
- 2007-04-24 AU AU2007244921A patent/AU2007244921B2/en active Active
- 2007-04-24 NZ NZ572324A patent/NZ572324A/en unknown
- 2007-04-24 CN CNA2007800228088A patent/CN101473352A/zh active Pending
- 2007-04-24 EP EP07761211A patent/EP2011087A4/en not_active Ceased
- 2007-04-24 CA CA2650796A patent/CA2650796C/en active Active
-
2009
- 2009-04-15 US US12/424,481 patent/US20100045680A1/en not_active Abandoned
-
2011
- 2011-01-06 US US12/986,095 patent/US8279228B2/en active Active
-
2012
- 2012-11-05 JP JP2012243711A patent/JP5344358B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005535031A (ja) * | 2002-08-02 | 2005-11-17 | 本田技研工業株式会社 | 人体測定に基づく骨格フィッティング |
WO2004084144A1 (en) * | 2003-03-13 | 2004-09-30 | Sony Pictures Entertainment Inc. | System and method for animating a digital facial model |
WO2006039497A2 (en) * | 2004-10-01 | 2006-04-13 | Sony Pictures Entertainment Inc. | System and method for tracking facial muscle and eye motion for computer graphics animation |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101788709B1 (ko) * | 2014-08-25 | 2017-10-20 | 주식회사 룩시드랩스 | 표정을 인식하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체 |
WO2022249539A1 (ja) * | 2021-05-26 | 2022-12-01 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5344358B2 (ja) | 2013-11-20 |
US20100045680A1 (en) | 2010-02-25 |
CA2650796C (en) | 2014-09-16 |
EP2011087A2 (en) | 2009-01-07 |
US8279228B2 (en) | 2012-10-02 |
AU2007244921B2 (en) | 2012-05-17 |
CN101473352A (zh) | 2009-07-01 |
WO2007127743A2 (en) | 2007-11-08 |
US20110175921A1 (en) | 2011-07-21 |
JP2009534774A (ja) | 2009-09-24 |
AU2007244921A1 (en) | 2007-11-08 |
NZ572324A (en) | 2011-10-28 |
CA2650796A1 (en) | 2007-11-08 |
WO2007127743A3 (en) | 2008-06-26 |
EP2011087A4 (en) | 2010-02-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5344358B2 (ja) | 演技から作り出される顔アニメーション | |
JP7198332B2 (ja) | 画像正則化及びリターゲティングシステム | |
Sifakis et al. | Simulating speech with a physics-based facial muscle model | |
Deng et al. | Computer facial animation: A survey | |
Ersotelos et al. | Building highly realistic facial modeling and animation: a survey | |
JP4631078B2 (ja) | リップシンクアニメーション作成用の統計確率モデル作成装置、パラメータ系列合成装置、リップシンクアニメーション作成システム、及びコンピュータプログラム | |
US20060023923A1 (en) | Method and system for a three dimensional facial recognition system | |
US20020024519A1 (en) | System and method for producing three-dimensional moving picture authoring tool supporting synthesis of motion, facial expression, lip synchronizing and lip synchronized voice of three-dimensional character | |
Li et al. | A survey of computer facial animation techniques | |
Kalberer et al. | Realistic face animation for speech | |
JP5109192B2 (ja) | モーションキャプチャにおけるfacs(顔の表情符号化システム)解決法 | |
Železný et al. | Design, implementation and evaluation of the Czech realistic audio-visual speech synthesis | |
Zhang et al. | Anatomy-based face reconstruction for animation using multi-layer deformation | |
Liu et al. | Data-driven 3d neck modeling and animation | |
Müller et al. | Realistic speech animation based on observed 3-D face dynamics | |
Ouni et al. | Dynamic lip animation from a limited number of control points: Towards an effective audiovisual spoken communication | |
Ma et al. | Animating visible speech and facial expressions | |
Du et al. | Realistic mouth synthesis based on shape appearance dependence mapping | |
WO2024053345A1 (ja) | 情報処理装置、情報処理方法、および、コンピュータ読み取り可能な非一時的記憶媒体 | |
Theobald et al. | 2.5 D Visual Speech Synthesis Using Appearance Models. | |
Ypsilos et al. | Speech-driven face synthesis from 3D video | |
WO2015042867A1 (zh) | 一种基于单摄像头与运动捕捉数据的人脸表情编辑方法 | |
Chauhan | Vertex-Based Facial Animation Transfer System for Models with Different Topology; A Tool for Maya | |
Kalberer et al. | Visual speech, a trajectory in viseme space | |
Salleh et al. | 3D Lips development and measurement for visual speech synthesis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130710 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130722 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130802 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5344358 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |