JP7434134B2 - データ処理装置、プログラム、及びデータ処理方法 - Google Patents

データ処理装置、プログラム、及びデータ処理方法 Download PDF

Info

Publication number
JP7434134B2
JP7434134B2 JP2020184621A JP2020184621A JP7434134B2 JP 7434134 B2 JP7434134 B2 JP 7434134B2 JP 2020184621 A JP2020184621 A JP 2020184621A JP 2020184621 A JP2020184621 A JP 2020184621A JP 7434134 B2 JP7434134 B2 JP 7434134B2
Authority
JP
Japan
Prior art keywords
data
movement
data processing
processing device
clothing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020184621A
Other languages
English (en)
Other versions
JP2023182867A (ja
Inventor
裕子 石若
和人 須田
翔 嘉数
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SoftBank Corp
Original Assignee
SoftBank Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SoftBank Corp filed Critical SoftBank Corp
Priority to JP2020184621A priority Critical patent/JP7434134B2/ja
Priority to EP21888863.4A priority patent/EP4213100A4/en
Priority to PCT/JP2021/005760 priority patent/WO2022097309A1/ja
Priority to US18/182,400 priority patent/US11922552B2/en
Publication of JP2023182867A publication Critical patent/JP2023182867A/ja
Application granted granted Critical
Publication of JP7434134B2 publication Critical patent/JP7434134B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/16Cloth

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、データ処理装置、プログラム、及びデータ処理方法に関する。
特許文献1には、試着者の姿勢をリアルタイムに推定し、推定した時系列の姿勢に合わせて衣服の動きをシミュレートする技術が記載されている。非特許文献1及び非特許文献2には、衣服モデルを生成するためのツール等が記載されている。
[先行技術文献]
[特許文献]
[特許文献1]特開2006-249618号公報
[非特許文献]
[非特許文献1]UMETANI N., KAUFMAN D. M., IGARASHI T., GRINSPUN E.: Sensitive couture for interactive garment editing and modeling. ACM Transactions on Graphics (SIGGRAPH 2011) 30, 4 (2011).
[非特許文献2]BERTHOUZOZ F., GARG A., KAUFMAN D. M., GRINSPUN E., AGRAWALA M.: Parsing sewing patterns into 3d garments. ACM Trans. Graph. 32, 4 (July 2013), 85:1-85:12.
本発明の第1の態様によれば、データ処理装置が提供される。データ処理装置は、衣服を装着した装着体の動きに合わせて前記衣服が動くアニメーションデータを取得するデータ取得部を備えてよい。データ処理装置は、指定された動きの個性に応じた割合の3種類の要素に基づいて、アニメーションデータを更新するデータ更新部を備えてよい。
上記データ取得部は、物理法則に従って上記アニメーションデータを生成してよい。上記3種類の要素は、上記衣服の動きの時間的要素と、上記衣服のエラスティシティの要素と、上記衣服のカーブの要素とを含んでよい。上記データ更新部は、上記動きの個性としてクールが指定され、クールを表現する場合に、上記3種類の要素のうち、上記時間的要素の割合を多くして上記アニメーションデータを更新してよい。上記時間的要素は、遅延の度合を示してよく、上記データ更新部は、上記動きの個性としてクールが指定され、クールを表現する場合に、上記衣服の遅延の度合が大きくなるように上記アニメ-ションデータを更新してよい。上記データ更新部は、上記動きの個性としてキュートが指定され、キュートを表現する場合に、上記3種類の要素のうち、上記カーブの要素の割合を多くして上記アニメーションデータを更新してよい。上記データ更新部は、上記動きの個性としてコミカルが指定され、コミカルを表現する場合に、上記時間的要素及び上記エラスティシティの要素の割合を多くして上記アニメーションデータを更新してよい。上記データ更新部は、上記装着体が位置する空間の環境の要素、上記衣服のマテリアルの要素、及び上記衣服に対するエフェクトの要素の少なくともいずれかにさらに基づいて、上記アニメーションデータを更新してよい。上記3種類の要素は、上記衣服の動きの時間的要素、上記衣服のエラスティシティの要素、上記衣服のカーブの要素、上記装着体が位置する空間の環境の要素、上記衣服のマテリアルの要素、及び上記衣服に対するエフェクトの要素のうちの3つであってよい。上記3種類の要素は、上記衣服の動きの時間的要素、上記衣服のエラスティシティの要素、及び上記衣服のカーブの要素のうちの少なくとも2つを含んでよい。
本発明の第2の態様によれば、コンピュータを、上記データ処理装置として機能させるためのプログラムが提供される。
本発明の第3の態様によれば、コンピュータによって実行されるデータ処理方法が提供される。データ処理方法は、衣服を装着した装着体の動きに合わせて衣服が動くアニメーションデータを取得するデータ取得段階を備えてよい。データ処理方法は、指定された感情の種類に応じた割合の3種類の要素に基づいて、アニメーションデータを更新するデータ更新段階を備えてよい。
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
データ処理装置100の一例を概略的に示す。 データ処理装置100の機能構成の一例を概略的に示す。 パラメータ300について説明するための説明図である。 クールを表現した場合の更新データ500の一例を概略的に示す。 キュートを表現した場合の更新データ510の一例を概略的に示す。 コミカルを表現した場合の更新データ520の一例を概略的に示す。 データ処理装置100として機能するコンピュータ1200のハードウェア構成の一例を概略的に示す。
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
図1は、データ処理装置100の一例を概略的に示す。データ処理装置100は、衣服を装着した装着体の動きに合わせて衣服が動くアニメーションデータを生成する。装着体の例として、人及び動物等が挙げられるが、衣服を装着して動く対象であれば、どのような対象であってもよい。本実施形態に係るデータ処理装置100は、特に、指定された動きの個性に応じた動きを衣服がするアニメーションデータを生成する。
現実世界において、衣服は、物理法則に従って、装着者の動きや環境に合わせて動くが、アニメーションデータにおいて、衣服に、動きの個性を与えることによって、様々なことを表現することができると考えられる。例えば、装着者が歩行しているアニメーションの衣服の動きにクールさを加えることによって、全体的にクールな印象を与えることができるようになり得る。
従来、例えば、感情を3種類のパラメータで表すLovheimの立方体感情モデルのように、表現したいことを複数のパラメータで表現するモデルが知られていた。しかしながら、従来のモデルは、衣服の動きの個性に対して直接適用することはできなかった。
発明者は、衣服の動きの個性の表現を実現するための3種類の要素について検討を重ね、複数種類の組み合わせを導出した。そのうちの代表的な組み合わせが、衣服の動きの時間的要素、衣服のエラスティシティの要素、及び衣服のカーブの要素である。データ処理装置100は、例えば、物理法則に従って装着体の動きに合わせて衣服が動くアニメーションデータ(基準データと記載する場合がある。)を生成し、指定された動きの個性に応じた割合の3種類の要素に基づいて、アニメーションデータを更新することによって、衣服の動きの個性を反映したアニメーションデータ(更新データと記載する場合がある。)を生成する。
より具体的に、データ処理装置100は、装着体データと、衣服データとを含む基準データを生成する。装着体データは、装着体が動くアニメーションのデータであってよい。衣服データは、物理法則に従って装着体の動きに合わせて動く衣服のアニメーションのデータであってよい。データ処理装置100は、指定された動きの個性に応じた割合の3種類の要素に基づいて、衣服の動きを変更した衣服データを生成することにより、更新データを生成する。
時間的要素の例として、ディレイが挙げられる。データ処理装置100は、ディレイの要素の割合が高いほど、基準データにおける衣服データのフレームを遅延させる。これにより、基準データにおける装着体に対する衣服の動きに対して、更新データにおける装着体に対する衣服の動きを遅くすることができ、更新データの閲覧者に与える余韻の印象を強くすることができる。時間的要素の他の例として、ディレイとは反対に時間を早める要素や、リズムの要素等が挙げられる。
カーブの要素は、衣服の曲線の特徴の度合を示す。データ処理装置100は、カーブの要素の割合が高いほど、衣服の曲線の特徴を強める。これにより、例えば、基準データにおいて、装着体の動きに合わせて衣服が少しなびいている場合に、更新データにおける衣服のなびきの度合を強くすることができ、更新データの閲覧者に与える柔らかい印象を強くすることができる。
エラスティシティの要素は、衣服の伸縮性の度合を示す。データ処理装置100は、エラスティシティの要素の割合が高いほど、衣服の伸縮性の度合を強める。これにより、例えば、基準データにおいて、装着体の動きに合わせて衣服がはためいている場合に、更新データにおける衣服のはためきの度合を強くすることができ、更新データの閲覧者に与えるダイナミックな印象を強くすることができる。
データ処理装置100は、実際の人物等の動きに合わせて基準データを生成してよい。例えば、データ処理装置100は、カメラ150によって撮像した人物の3次元形状をポリゴンメッシュによって表す装着体データと、当該人物が装着する衣服の3次元形状をポリゴンメッシュによって表す衣服データとを生成する。また、データ処理装置100は、実際の人物の動きとは無関係に、CGキャラクタのような基準データを生成してもよい。
データ処理装置100は、例えば、生成した更新データを、データ処理装置100が備えるディスプレイに表示させる。また、データ処理装置100は、例えば、生成した更新データを、ネットワーク20を介して通信端末200に送信することによって、通信端末200に表示させてもよい。
通信端末200は、PC(Personal Computer)、タブレット端末、及びスマートフォン等であってよい。データ処理装置100と通信端末200とは、ネットワーク20を介して通信してよい。ネットワーク20は、インターネットを含んでよい。ネットワーク20は、LAN(Local Area Network)を含んでよい。ネットワーク20は、移動体通信ネットワークを含んでよい。移動体通信ネットワークは、3G(3rd Generation)通信方式、LTE(Long Term Evolution)通信方式、5G(5th Generation)通信方式、及び6G(6th Generation)通信方式以降の通信方式のいずれに準拠していてもよい。
データ処理装置100は、通信端末200から基準データを受信してもよい。通信端末200は、例えば、カメラ250によって撮像した人物の装着体データと、当該人物が装着する衣服の衣服データと含む基準データを生成して、データ処理装置100に送信する。カメラ250は、通信端末200に内蔵されていてよく、また、通信端末200に対して外付けであってもよい。
図2は、データ処理装置100の機能構成の一例を概略的に示す。データ処理装置100は、データ受信部102、データ取得部110、設定部122、アニメーションデータ更新部124、及び表示制御部126を備える。
データ受信部102は、各種データを受信する。データ受信部102は、ネットワーク20を介して各種データを受信してよい。データ受信部102は、例えば、通信端末200から各種データを受信する。
データ受信部102は、例えば、人物等を撮像した撮像データを受信する。データ受信部102は、基準データを受信してもよい。データ受信部102は、装着体データを受信してもよい。
データ取得部110は、衣服を装着した装着体の動きに合わせて衣服が動くアニメーションデータを取得する。データ取得部110は、基準データを取得してよい。データ取得部110は、例えば、データ受信部102が受信した基準データを取得する。データ取得部110は、データ処理装置100を用いてデータ処理装置100の使用者によって生成された基準データを取得してもよい。データ取得部110は、可搬型のコンピュータ可読記憶媒体から基準データを取得してもよい。
データ取得部110は、基準データを生成することによって、基準データを取得してもよい。データ取得部110は、アニメーションデータ生成部112を有する。
アニメーションデータ生成部112は、例えば、データ受信部102が受信した撮像データを解析することによって、物理法則に従って衣服を装着した装着体の動きに合わせて衣服が動くアニメーションデータを生成する。また、アニメーションデータ生成部112は、データ受信部102が受信した装着体データを解析することによって、当該装着体データに含まれる装着体に装着され、物理法則に従って装着体の動きに合わせて動く衣服データを生成することによって、基準データを生成してもよい。アニメーションデータ生成部112は、公知の任意の技術を用いることによって、基準データを生成してよい。
設定部122は、各種設定を行う。例えば、設定部122は、動きの個性を設定する。設定部122は、例えば、予め登録された複数の動きの個性の中から、データ処理装置100の使用者や通信端末200の使用者等によって指定された動きの個性を設定する。動きの個性の例として、クール、キュート、コミカル等が挙げられるが、これらに限らず、様々な種類の動きの個性が設定可能であってよい。
アニメーションデータ更新部124は、設定部122によって設定された動きの個性に基づいて、データ取得部110によって取得された基準データを更新する。アニメーションデータ更新部124は、動きの個性に応じた割合の3種類の要素に基づいて、基準データを更新してよい。
アニメーションデータ更新部124は、動きの個性と、3種類の要素の割合とを対応付けた対応付けデータを予め格納しておき、当該対応付けデータを参照することによって、指定された動きの個性に対応する3種類の要素の割合を特定してよい。
表示制御部126は、アニメーションデータ更新部124によって更新されたアニメーションデータ(すなわち、更新データ)を表示させるように制御する。表示制御部126は、例えば、データ処理装置100が備えるディスプレイに更新データを表示させる。表示制御部126は、更新データを通信端末200に送信することによって、通信端末200が備えるディスプレイに表示データを表示させるよう制御してもよい。
図3は、パラメータ300について説明するための説明図である。パラメータ300は、3種類の要素によって構成される空間によって表現され得る。ここでは、ディレイ310、カーブ320、及びエラスティシティ330によって構成されたパラメータ300を例示している。
アニメーションデータ更新部124は、複数の動きの個性のそれぞれについて、パラメータ300の空間上の位置を対応付けて格納してよい。アニメーションデータ更新部124は、例えば、クールに対して、ディレイ310の割合を多くした位置を対応付ける。また、アニメーションデータ更新部124は、例えば、キュートに対して、カーブ320の割合を多くした位置を対応付ける。アニメーションデータ更新部124は、例えば、コミカルに対して、ディレイ310及びエラスティシティ330の割合を多くした位置を対応付ける。
図4は、クールを表現した場合の更新データ500の一例を概略的に示す。アニメーションデータ更新部124は、クールを表現する場合に、3種類の要素のうち、時間的要素の割合を高めてアニメーションデータを更新してよい。アニメーションデータ更新部124は、クールを表現する場合に、衣服の遅延の度合が大きくなるようにアニメーションデータを更新してよい。
基準データ400における装着体データ402と、更新データ500における装着体データ502とは同じ動きをする。更新データ500における衣服データ504は、基準データ400における衣服データ404と比較して、装着体データ502に対する遅延が大きくなっている。すなわち、更新データ500においては、通常よりも、装着体の動きに対して衣服が遅れて動くような、印象的な表現をすることができ、クールさを表現することができる。
図5は、キュートを表現した場合の更新データ510の一例を概略的に示す。アニメーションデータ更新部124は、キュートを表現する場合に、3種類の要素のうち、カーブの要素の割合を多くしてアニメーションデータを更新してよい。
基準データ410における装着体データ412と、更新データ510における装着体データ512とは同じ動きをする。更新データ510における衣服データ514は、基準データ410における衣服データ414と比較して、曲線の特徴の度合が大きくなっている。すなわち、更新データ510においては、衣服が通常よりも丸みを帯びて、柔らかく孤を描くような動きをすることにより、キュートさを表現することができる。
図6は、コミカルを表現した場合の更新データ520の一例を概略的に示す。アニメーションデータ更新部124は、コミカルを表現する場合に、3種類の要素のうち、時間的要素及びエラスティシティの要素の割合を多くしてアニメーションデータを更新してよい。アニメーションデータ更新部124は、例えば、3種類の要素のうち、ディレイの要素及びエラスティシティの要素の割合を多くする。
基準データ420における装着体データ422と、更新データ520における装着体データ522とは同じ動きをする。更新データ520における衣服データ524は、基準データ420における衣服データ424と比較して、伸縮性が大きく、かつ、装着体データ522に対する遅延が大きくなっている。すなわち、更新データ510においては、通常よりも、装着体の動きに対して衣服が遅れ、伸びが大きくなるように動きをすることにより、コミカルさを表現することができる。
上記実施形態では、アニメーションデータ更新部124は、時間的要素、カーブの要素、及びエラスティシティの要素に基づいて、基準データを更新する場合を例に挙げて説明したが、これに限らない。アニメーションデータ更新部124は、装着体が位置する空間の環境の要素、衣服のマテリアルの要素、及び衣服に対するエフェクトの要素の少なくともいずれかにさらに基づいて、基準データを更新してもよい。
装着体が位置する空間の環境の要素の例として、ライティングの要素が挙げられる。アニメーションデータ更新部124は、表現する動きの個性に応じて、ライティングの表現を変化させてよい。ライティングの表現は、例えば、ライティングの度合、ライティングの角度、及びライティングの色等を変化させることによって、変化し得る。なお、度合、角度、色は例示であり、ライティングの表現は、他の要素を変化させることによっても変化し得る。例えば、アニメーションデータ更新部124は、より明るい個性に対して、ライティングの度合をより弱め、より暗い個性に対して、ライティングの度合をより強める。これにより、より暗い個性を表現する場合に、ライティングの度合を強めて、影の要素を強めることによって、暗さの表現を加えることができ得る。
衣服のマテリアルの要素の例として、衣服の材質の要素が挙げられる。アニメーションデータ更新部124は、表現する動きの個性に応じて、衣服の材質を変化させてよい。例えば、アニメーションデータ更新部124は、より明るい個性を表現する場合、衣服の材質をより軽い材質に変化させ、より暗い個性を表現する場合、衣服の材質をより重い材質に変化させる。これにより、明るい個性の時は衣服が軽やかに動き、暗い個性の時は衣服が重く動くようなアニメーションとすることができる。また、例えば、アニメーションデータ更新部124は、より明るい個性を表現する場合、衣服の素材をより反射性の高い素材に変化させ、より暗い個性を表現する場合、衣服の素材をより反射性の低い素材に変化させる。これにより、より明るい個性を表現する場合に、反射性の高い素材に変化させることによって、衣服の明るさを向上させ、個性の明るさの表現を加えることができ得る。
衣服に対するエフェクトの要素の例として、衣服に重畳するオブジェクトの度合が挙げられる。アニメーションデータ更新部124は、表現する動きの個性に応じて、衣服に重畳するオブジェクトの度合を変化させてよい。例えば、アニメーションデータ更新部124は、より暗い個性を表現する場合に、雨だれのような暗いイメージのオブジェクトの度合を強める。これにより、より暗い個性を表現する場合に、衣服に対して、暗いイメージのオブジェクトをより強い度合で加えることによって、暗い個性の表現を加えることができる。
アニメーションデータ更新部124は、衣服の動きの時間的要素、衣服のエラスティシティの要素、衣服のカーブの要素、装着体が位置する空間の環境の要素、衣服のマテリアルの要素、及び衣服に対するエフェクトの要素のうちの3つの要素に基づいて、基準データを更新してもよい。例えば、アニメーションデータ更新部124は、衣服の動きの時間的要素、衣服のエラスティシティの要素、及び衣服のカーブの要素のうちの少なくとも2つと、装着体が位置する空間の環境の要素、衣服のマテリアルの要素、及び衣服に対するエフェクトの要素とから選択した3つの要素に基づいて、基準データを更新する。
図7は、データ処理装置100として機能するコンピュータ1200のハードウェア構成の一例を概略的に示す。コンピュータ1200にインストールされたプログラムは、コンピュータ1200を、本実施形態に係る装置の1又は複数の「部」として機能させ、又はコンピュータ1200に、本実施形態に係る装置に関連付けられるオペレーション又は当該1又は複数の「部」を実行させることができ、及び/又はコンピュータ1200に、本実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ1200に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、CPU1212によって実行されてよい。
本実施形態によるコンピュータ1200は、CPU1212、RAM1214、及びグラフィックコントローラ1216を含み、それらはホストコントローラ1210によって相互に接続されている。コンピュータ1200はまた、GPU1250を含む。コンピュータ1200はまた、通信インタフェース1222、記憶装置1224、DVDドライブ、及びICカードドライブのような入出力ユニットを含み、それらは入出力コントローラ1220を介してホストコントローラ1210に接続されている。DVDドライブは、DVD-ROMドライブ及びDVD-RAMドライブ等であってよい。記憶装置1224は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ1200はまた、ROM1230及びキーボードのようなレガシの入出力ユニットを含み、それらは入出力チップ1240を介して入出力コントローラ1220に接続されている。
CPU1212は、ROM1230及びRAM1214内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ1216は、RAM1214内に提供されるフレームバッファ等又はそれ自体の中に、CPU1212によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス1218上に表示されるようにする。
通信インタフェース1222は、ネットワークを介して他の電子デバイスと通信する。記憶装置1224は、コンピュータ1200内のCPU1212によって使用されるプログラム及びデータを格納する。DVDドライブは、プログラム又はデータをDVD-ROM等から読み取り、記憶装置1224に提供する。ICカードドライブは、プログラム及びデータをICカードから読み取り、及び/又はプログラム及びデータをICカードに書き込む。
ROM1230はその中に、アクティブ化時にコンピュータ1200によって実行されるブートプログラム等、及び/又はコンピュータ1200のハードウェアに依存するプログラムを格納する。入出力チップ1240はまた、様々な入出力ユニットをUSBポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ1220に接続してよい。
プログラムは、DVD-ROM又はICカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置1224、RAM1214、又はROM1230にインストールされ、CPU1212によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ1200に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ1200の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。
例えば、通信がコンピュータ1200及び外部デバイス間で実行される場合、CPU1212は、RAM1214にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース1222に対し、通信処理を命令してよい。通信インタフェース1222は、CPU1212の制御の下、RAM1214、記憶装置1224、DVD-ROM、又はICカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。
また、CPU1212は、記憶装置1224、DVDドライブ(DVD-ROM)、ICカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がRAM1214に読み取られるようにし、RAM1214上のデータに対し様々なタイプの処理を実行してよい。CPU1212は次に、処理されたデータを外部記録媒体にライトバックしてよい。
様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。CPU1212は、RAM1214から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索/置換等を含む、様々なタイプの処理を実行してよく、結果をRAM1214に対しライトバックする。また、CPU1212は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第2の属性の属性値に関連付けられた第1の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、CPU1212は、当該複数のエントリの中から、第1の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第2の属性の属性値を読み取り、それにより予め定められた条件を満たす第1の属性に関連付けられた第2の属性の属性値を取得してよい。
上で説明したプログラム又はソフトウエアモジュールは、コンピュータ1200上又はコンピュータ1200近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はRAMのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ1200に提供する。
本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び/又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び/又はアナログハードウェア回路を含んでよく、集積回路(IC)及び/又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ(FPGA)、及びプログラマブルロジックアレイ(PLA)等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。
コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー(登録商標)ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能プログラマブルリードオンリメモリ(EPROM又はフラッシュメモリ)、電気的消去可能プログラマブルリードオンリメモリ(EEPROM)、静的ランダムアクセスメモリ(SRAM)、コンパクトディスクリードオンリメモリ(CD-ROM)、デジタル多用途ディスク(DVD)、ブルーレイ(登録商標)ディスク、メモリスティック、集積回路カード等が含まれてよい。
コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ(ISA)命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はSmalltalk(登録商標)、JAVA(登録商標)、C++等のようなオブジェクト指向プログラミング言語、及び「C」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、1又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。
コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク(LAN)、インターネット等のようなワイドエリアネットワーク(WAN)を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
20 ネットワーク、100 データ処理装置、102 データ受信部、110 データ取得部、112 アニメーションデータ生成部、122 設定部、124 アニメーションデータ更新部、126 表示制御部、150 カメラ、200 通信端末、250 カメラ、300 パラメータ、310 ディレイ、320 カーブ、330 エラスティシティ、400 基準データ、402 装着体データ、404 衣服データ、410 基準データ、412 装着体データ、414 衣服データ、420 基準データ、422 装着体データ、424 衣服データ、500 更新データ、502 装着体データ、504 衣服データ、510 更新データ、512 装着体データ、514 衣服データ、520 更新データ、522 装着体データ、524 衣服データ、1200 コンピュータ、1210 ホストコントローラ、1212 CPU、1214 RAM、1216 グラフィックコントローラ、1218 ディスプレイデバイス、1220 入出力コントローラ、1222 通信インタフェース、1224 記憶装置、1230 ROM、1240 入出力チップ、1250 GPU

Claims (13)

  1. 衣服を装着した装着体の動きに合わせて前記衣服が動くアニメーションデータを取得するデータ取得部と、
    指定された動きの個性に応じた割合の3種類の要素に基づいて、前記アニメーションデータを更新するデータ更新部と
    を備える、データ処理装置。
  2. 前記動きの個性は、クール、キュート、及びコミカルの少なくともいずれかを含む、請求項1に記載のデータ処理装置。
  3. 前記データ取得部は、物理法則に従って前記アニメーションデータを生成する、請求項1又は2に記載のデータ処理装置。
  4. 前記3種類の要素は、前記衣服の動きの時間的要素と、前記衣服のエラスティシティの要素と、前記衣服のカーブの要素とを含む、請求項1から3のいずれか一項に記載のデータ処理装置。
  5. 前記データ更新部は、前記動きの個性としてクールが指定され、クールを表現する場合に、前記3種類の要素のうち、前記時間的要素の割合を多くして前記アニメーションデータを更新する、請求項4に記載のデータ処理装置。
  6. 前記時間的要素は、遅延の度合を示し、
    前記データ更新部は、前記動きの個性としてクールが指定され、クールを表現する場合に、前記衣服の遅延の度合が大きくなるように前記アニメーションデータを更新する、請求項5に記載のデータ処理装置。
  7. 前記データ更新部は、前記動きの個性としてキュートが指定され、キュートを表現する場合に、前記3種類の要素のうち、前記カーブの要素の割合を多くして前記アニメーションデータを更新する、請求項4から6のいずれか一項に記載のデータ処理装置。
  8. 前記データ更新部は、前記動きの個性としてコミカルが指定され、コミカルを表現する場合に、前記時間的要素及び前記エラスティシティの要素の割合を多くして前記アニメーションデータを更新する、請求項4から7のいずれか一項に記載のデータ処理装置。
  9. 前記データ更新部は、前記装着体が位置する空間の環境の要素、前記衣服のマテリアルの要素、及び前記衣服に対するエフェクトの要素の少なくともいずれかにさらに基づいて、前記アニメーションデータを更新する、請求項4から8のいずれか一項に記載のデータ処理装置。
  10. 前記3種類の要素は、前記衣服の動きの時間的要素、前記衣服のエラスティシティの要素、前記衣服のカーブの要素、前記装着体が位置する空間の環境の要素、前記衣服のマテリアルの要素、及び前記衣服に対するエフェクトの要素のうちの3つである、請求項1から3のいずれか一項に記載のデータ処理装置。
  11. 前記3種類の要素は、前記衣服の動きの時間的要素、前記衣服のエラスティシティの要素、及び前記衣服のカーブの要素のうちの少なくとも2つを含む、請求項10に記載のデータ処理装置。
  12. コンピュータを、請求項1から11のいずれか一項に記載のデータ処理装置として機能させるためのプログラム。
  13. コンピュータによって実行されるデータ処理方法であって、
    衣服を装着した装着体の動きに合わせて前記衣服が動くアニメーションデータを取得するデータ取得段階と、
    指定された動きの個性に応じた割合の3種類の要素に基づいて、前記アニメーションデータを更新するデータ更新段階と
    を備える、データ処理方法。
JP2020184621A 2020-11-04 2020-11-04 データ処理装置、プログラム、及びデータ処理方法 Active JP7434134B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020184621A JP7434134B2 (ja) 2020-11-04 2020-11-04 データ処理装置、プログラム、及びデータ処理方法
EP21888863.4A EP4213100A4 (en) 2020-11-04 2021-02-16 DATA PROCESSING DEVICE, PROGRAM, AND DATA PROCESSING METHOD
PCT/JP2021/005760 WO2022097309A1 (ja) 2020-11-04 2021-02-16 データ処理装置、プログラム、及びデータ処理方法
US18/182,400 US11922552B2 (en) 2020-11-04 2023-03-13 Data processing device, program, and data processing method for generating animation data representing movement of clothing worn by wearer's body

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020184621A JP7434134B2 (ja) 2020-11-04 2020-11-04 データ処理装置、プログラム、及びデータ処理方法

Publications (2)

Publication Number Publication Date
JP2023182867A JP2023182867A (ja) 2023-12-27
JP7434134B2 true JP7434134B2 (ja) 2024-02-20

Family

ID=81457718

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020184621A Active JP7434134B2 (ja) 2020-11-04 2020-11-04 データ処理装置、プログラム、及びデータ処理方法

Country Status (4)

Country Link
US (1) US11922552B2 (ja)
EP (1) EP4213100A4 (ja)
JP (1) JP7434134B2 (ja)
WO (1) WO2022097309A1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000242683A (ja) 1999-02-23 2000-09-08 Fujitsu Ltd 物体の形状データの作成方法、その装置および記憶媒体

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3765863B2 (ja) * 1996-02-19 2006-04-12 デジタルファッション株式会社 衣服の動きのシミュレーション方法
JP4473754B2 (ja) 2005-03-11 2010-06-02 株式会社東芝 仮想試着装置
US7843456B2 (en) * 2007-06-29 2010-11-30 Microsoft Corporation Gradient domain editing of animated meshes
US20190347865A1 (en) * 2014-09-18 2019-11-14 Google Inc. Three-dimensional drawing inside virtual reality environment
WO2017130158A1 (en) * 2016-01-27 2017-08-03 Vats Nitin Virtually trying cloths on realistic body model of user
US10482646B1 (en) * 2016-07-21 2019-11-19 Pixar Directable cloth animation
US10573091B2 (en) * 2017-02-22 2020-02-25 Andre R. Vincelette Systems and methods to create a virtual object or avatar
US11158121B1 (en) * 2018-05-11 2021-10-26 Facebook Technologies, Llc Systems and methods for generating accurate and realistic clothing models with wrinkles
US11308687B1 (en) * 2019-03-29 2022-04-19 Amazon Technologies, Inc. System and method of providing simulated three-dimensional objects

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000242683A (ja) 1999-02-23 2000-09-08 Fujitsu Ltd 物体の形状データの作成方法、その装置および記憶媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"新世代のクロスシミュレータとは?",日経CG,日経BP社,1998年,第146号,p.124-127

Also Published As

Publication number Publication date
US20230222724A1 (en) 2023-07-13
WO2022097309A1 (ja) 2022-05-12
EP4213100A4 (en) 2024-09-18
EP4213100A1 (en) 2023-07-19
JP2023182867A (ja) 2023-12-27
US11922552B2 (en) 2024-03-05

Similar Documents

Publication Publication Date Title
KR102296906B1 (ko) 이미지 또는 비디오 데이터로부터의 가상 캐릭터 생성
KR102658960B1 (ko) 얼굴 재연을 위한 시스템 및 방법
KR102338136B1 (ko) 이모티콘 애니메이션 생성 방법 및 디바이스, 저장 매체 및 전자 디바이스
CN113924601A (zh) 用于使人体的单个图像成动画并应用效果的娱乐性移动应用程序
US10032305B2 (en) Method and system for creating character poses in a virtual reality environment
US11670027B2 (en) Automated dance animation
US20240013467A1 (en) Management of pseudorandom animation system
JP2019204476A (ja) 画像生成装置、画像生成方法及びプログラム
US11347371B2 (en) Automatic translation of user interface elements from wireframe tools to production augmented reality framework
US11951390B2 (en) Method and system for incremental topological update within a data flow graph in gaming
US9480924B2 (en) Rules based system for managing user selections in customizable objects
US8902234B1 (en) Simulation primitives
US8847963B1 (en) Systems and methods for generating skin and volume details for animated characters
WO2008116426A1 (fr) Procédé de commande d'animation de rôle et système apparenté
JP2017068438A (ja) シルエットを生成するためのコンピュータ・プログラムおよびコンピュータ実装方法
JP7434134B2 (ja) データ処理装置、プログラム、及びデータ処理方法
AU2016230943B2 (en) Virtual trying-on experience
JP7514962B2 (ja) データ処理装置、プログラム、及びデータ処理方法
CN111389020A (zh) 游戏角色的处理方法及装置、存储介质及电子设备
CN113694510B (zh) 游戏角色渲染方法、装置及设备
CN114639161A (zh) 多任务模型的训练方法以及衣服的虚拟试穿方法
US20240233230A9 (en) Automated system for generation of facial animation rigs
US20240362844A1 (en) Facial expression processing method and apparatus, computer device, and storage medium
US20240331261A1 (en) Bakeless keyframe animation solver
JP2023102665A (ja) 画像処理プログラム、記録媒体、画像処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230106

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230106

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240207

R150 Certificate of patent or registration of utility model

Ref document number: 7434134

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150