JP7365457B2 - データ処理装置、プログラム、及びデータ処理方法 - Google Patents

Description

本発明は、データ処理装置、プログラム、及びデータ処理方法に関する。

特許文献１には、試着者の姿勢をリアルタイムに推定し、推定した時系列の姿勢に合わせて衣服の動きをシミュレートする技術が記載されている。非特許文献１及び非特許文献２には、衣服モデルを生成するためのツール等が記載されている。
［先行技術文献］
［特許文献］
［特許文献１］特開２００６－２４９６１８号公報
［非特許文献］
［非特許文献１］UMETANI N., KAUFMAN D. M., IGARASHI T., GRINSPUN E.: Sensitive couture for interactive garment editing and modeling. ACM Transactions on Graphics (SIGGRAPH 2011) 30, 4 (2011).
［非特許文献２］BERTHOUZOZ F., GARG A., KAUFMAN D. M., GRINSPUN E., AGRAWALA M.: Parsing sewing patterns into 3d garments. ACM Trans. Graph. 32, 4 (July 2013), 85:1-85:12.

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、ユーザの複数の部位のそれぞれの寸法を含むユーザ寸法データを取得するユーザ寸法データ取得部を備えてよい。データ処理装置は、デフォルトの体型を有するアバタの複数の部位のそれぞれの寸法を含むアバタ寸法データを取得するアバタ寸法データ取得部を備えてよい。データ処理装置は、ユーザの複数の部位と、ユーザの複数の部位に対応するアバタの複数の部位との合計誤差が小さくなるように、アバタの複数の部位のうちの一部の部位の寸法を、当該一部の部位に対応するユーザの部位の寸法との差異が少なくなるように変更し、かつ、変更に伴ってユーザの部位に関連するアバタの部位の寸法を変更した後、合計誤差を算出する処理を繰り返す調整部を備えてよい。

上記アバタの上記複数の部位の数は、上記ユーザの上記複数の部位の数よりも多くてよい。上記データ処理装置は、上記ユーザの上記複数の部位のそれぞれについて、上記アバタの上記複数の部位のそれぞれとの関連度が登録された部位関連度データを取得する関連度データ取得部を備えてよく、上記調整部は、上記部位関連度データを用いて、上記ユーザの部位に関連する上記アバタの部位の寸法を変更してよい。上記データ処理装置は、上記調整部によって、上記複数の部位の寸法が上記ユーザの上記複数の部位の寸法に合わせて調整されたアバタのアバタデータを取得するアバタデータ取得部と、衣服の衣服データを取得する衣服データ取得部と、上記アバタデータ及び上記衣服データに基づいて、上記アバタが上記衣服を着装している画像を生成する生成部と、上記画像を表示するよう制御する表示制御部とを備えてよい。上記生成部は、上記アバタデータ及び上記衣服データに基づいて、上記アバタが上記衣服を着装しているアニメーションを生成してよい。上記データ処理装置は、上記アバタに実行させるアクションを選択するアクション選択部を備えてよく、上記生成部は、上記アクション選択部によって選択された上記アクションを実行する上記アバタの動きに合わせて上記衣服が動く上記アニメーションを生成してよい。上記データ処理装置は、上記衣服の色及びサイズの少なくともいずれかの指定を受け付ける表示指定受付部を備えてよく、上記生成部は、上記表示指定受付部が受け付けた上記衣服の色及びサイズの少なくともいずれかの指定に基づいて、上記アバタが上記衣服を着装している上記アニメーションを生成してよい。

上記生成部は、上記アバタデータ及び上記衣服データに基づいて判定された上記衣服のきつさを反映した上記画像を生成してよい。上記衣服データは、上記衣服の素材の伸縮に関連する伸縮パラメータを含んでよく、上記生成部は、上記伸縮パラメータに基づいて特定した、上記アバタの上記衣服を着装している部位の上記衣服から受ける力の度合を反映した上記画像を生成してよい。上記伸縮パラメータは、上記衣服が当該衣服を着装している部位に対して力を与え始める上記衣服のメッシュの辺の長さの長さ閾値と、上記衣服が破れる上記衣服のメッシュの辺の長さの破れ閾値とを含んでよい。上記生成部は、上記衣服に、上記アバタの上記衣服を着装している部位の上記衣服から受ける力の度合に応じた色を反映した上記画像を生成してよい。上記データ処理装置は、上記アバタに上記衣服を着装させた状態における、上記アバタと上記衣服との距離に基づいて、上記アバタに対する上記衣服のサイズの余裕度を判定する余裕度判定部を備えてよく、上記生成部は、上記余裕度を反映した上記画像を生成してよい。上記生成部は、上記衣服に、上記余裕度に応じた色を反映した上記画像を生成してよい。

上記データ処理装置は、衣服の素材毎の摩擦音を格納する摩擦音格納部を備えてよく、上記生成部は、上記摩擦音格納部に格納されている上記摩擦音に基づいて、上記衣服を着装させた上記アバタの動きによって発生する上記衣服の摩擦に対応する摩擦音を生成してよい。上記生成部は、上記衣服の摩擦している領域のサイズが大きいほど、大きい音量の上記摩擦音を生成してよい。上記生成部は、上記衣服の摩擦の加速度が高いほど、高い音の上記摩擦音を生成してよい。上記データ処理装置は、上記衣服がボトムスである場合に、上記衣服を配置する上記アバタのウエスト位置、及び上記衣服を上記アバタに固定する固定強度の指定を受け付けるウエスト指定受付部を備えてよく、上記生成部は、指定された上記ウエスト位置に指定された上記固定強度で上記衣服を上記アバタに対して固定した上記画像を生成してよい。上記データ処理装置は、上記衣服がズボンである場合に、上記アバタに対応する上記衣服の丈、及び上記衣服の裾上げの種類を特定する裾上げ特定部を備えてよく、上記生成部は、上記衣服の丈及び上記衣服の裾上げの種類に基づいて上記衣服データを変更してよい。上記生成部は、上記衣服の衣服データの一部を、上記衣服の丈に基づいて削除し、上記一部に対応する位置に上記裾上げの種類に対応するテクスチャを適用した上記画像を生成してよい。上記データ処理装置は、上記衣服がトップスであり、かつ、上記衣服がジッパー又はボタンを有する場合に、上記ジッパー又は上記ボタンの状態を特定する状態特定部を備えてよく、上記生成部は、上記ジッパー又は上記ボタンの状態に応じた上記画像を生成してよい。上記生成部は、上記衣服がジッパーを有する場合に、上記衣服データにおける上記ジッパーに対応する部分の折り曲げ制約条件を強くしてよい。上記データ処理装置は、上記衣服に接する装飾品を特定する装飾品特定部を備えてよく、上記生成部は、上記衣服と上記装飾品との関係に応じた上記衣服の動きを生成してよい。上記データ処理装置は、上記衣服のポケット内の物を特定するポケット特定部を備えてよく、上記生成部は、上記ポケット内の物に応じた上記衣服の動きを生成してよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の素材の伸縮に関連する伸縮パラメータを含む衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、伸縮パラメータに基づいて特定した、アバタの衣服を着装している部位の衣服から受ける力の度合を反映した、アバタが衣服を着装している画像を生成する生成部を備えてよい。データ処理装置は、画像を表示するよう制御する表示制御部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、アバタに衣服を着装させた状態における、アバタと衣服との距離に基づいて、アバタに対する衣服のサイズの余裕度を判定する余裕度判定部を備えてよい。データ処理装置は、余裕度を反映した、アバタが衣服を着装している画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服の素材毎の摩擦音を格納する摩擦音格納部を備えてよい。データ処理装置は、アバタデータ及び衣服データに基づいて、アバタが衣服を着装している画像を生成し、摩擦音格納部に格納されている摩擦音に基づいて、衣服を着装させたアバタの動きによって発生する衣服の摩擦に対応する摩擦音を生成する生成部を備えてよい。データ処理装置は、生成部によって生成された画像を表示させ、摩擦音を音声出力するよう制御する出力制御部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服がボトムスである場合に、衣服を配置するアバタのウエスト位置、及び衣服をアバタに固定する固定強度の指定を受け付けるウエスト指定受付部を備えてよい。データ処理装置は、指定されたウエスト位置に指定された固定強度で衣服をアバタに対して固定した、アバタが衣服を着装している画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服がズボンである場合に、アバタに対応する衣服の丈、及び衣服の裾上げの種類を特定する裾上げ特定部を備えてよい。データ処理装置は、衣服の丈及び衣服の裾上げの種類に基づいて変更した衣服をアバタが着装している画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服がトップスであり、かつ、衣服がジッパー又はボタンを有する場合に、ジッパー又はボタンの状態を特定する状態特定部を備えてよい。データ処理装置は、アバタが衣服を着装している画像であって、ジッパー又はボタンの状態に応じた画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服に接する装飾品を特定する装飾品特定部を備えてよい。データ処理装置は、アバタが衣服を着装している画像であって、衣服が衣服と装飾品との関係に応じた動きをする画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、データ処理装置が提供される。データ処理装置は、アバタのアバタデータを取得するアバタデータ取得部を備えてよい。データ処理装置は、衣服の衣服データを取得する衣服データ取得部を備えてよい。データ処理装置は、衣服のポケット内の物を特定するポケット特定部を備えてよい。データ処理装置は、アバタが衣服を着装している画像であって、衣服がポケット内の物に応じた動きをする画像を生成する生成部を備えてよい。

本発明の一実施態様によれば、コンピュータを、上記データ処理装置として機能させるためのプログラムが提供される。

本発明の一実施態様によれば、コンピュータによって実行されるデータ処理方法が提供される。データ処理方法は、ユーザの複数の部位のそれぞれの寸法を含むユーザ寸法データを取得するユーザデータ取得段階を備えてよい。データ処理方法は、デフォルトの体型を有するアバタの複数の部位のそれぞれの寸法を含むアバタ寸法データを取得するアバタデータ取得段階を備えてよい。データ処理方法は、ユーザの複数の部位と、ユーザの複数の部位に対応するアバタの複数の部位との合計誤差が小さくなるように、アバタの複数の部位のうちの一部の部位の寸法を、当該一部の部位に対応するユーザの部位の寸法との差異が少なくなるように変更し、かつ、変更に伴って一部の部位に対応するユーザの身体に関連するアバタの部位の寸法を変更した後、合計誤差を算出する処理を繰り返す調整段階を備えてよい。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

データ処理装置１００の一例を概略的に示す。 データ処理装置１００によるＵＩ２００の一例を概略的に示す。 データ処理装置１００によるＵＩ２１０の一例を概略的に示す。 長さの寸法について説明するための説明図である。 周りの寸法について説明するための説明図である。 データ処理装置１００によるＵＩ２３０の一例を概略的に示す。 きつい箇所の表示の一例を概略的に示す。 データ処理装置１００の機能構成の一例を概略的に示す。 データ処理装置１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。

従来のバーチャルフィッティングは、既存のボディに対して、決められた衣服を着装するものであった。従来のバーチャルフィッティングでは、ユーザの体型に合わせた試着や、質感等をユーザに伝えることはできなかった。本実施形態に係るデータ処理装置１００は、例えば、ユーザのボディに合わせたアバタに衣服を試着することで、きつい箇所や裾等の長さをユーザに提供する。また、データ処理装置１００は、例えば、アニメーションによって、衣服の揺れ方や擦れた時の音を生成することで、従来技術では実現できなかった体験をユーザに提供する。データ処理装置１００は、例えば、ユーザのサイズに合わせたボディの自動生成、ボディに合わせたきつい箇所の提示、布の揺れによる質感、擦れた音による質感の提示、アクセサリー等の装飾品や、着こなしによるフィッティング感を感じられるような技術を提供する。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、データ処理装置１００の一例を概略的に示す。データ処理装置１００は、バーチャルフィッティングに関する処理を実行する。データ処理装置１００は、例えば、ユーザ３００の体型に合わせてアバタを生成する。データ処理装置１００は、例えば、生成したアバタが、ユーザ３００によって選択された衣服を着装したアニメーションを生成する。データ処理装置１００は、例えば、生成したアニメーションをユーザ３００に提供する。

データ処理装置１００は、例えば、デフォルトの体型を有するアバタのアバタデータを予め格納しておく。当該アバタデータは、複数の部位のそれぞれの寸法を含む。当該アバタデータは、各部位の寸法を変更可能に構成されていてよい。各部位の寸法は、直接変更可能であってよい。各部位の寸法は、抽象的なパラメータによって制御されてもよい。例えば、各部位の寸法は、寸法を示すパラメータを変更することによって変更可能であってよい。当該アバタデータは、各部位の寸法が変更された場合に、人物の体型として自然な形状になるように、当該部位に関連する他の部位の寸法が変化するように構成されていてよい。例えば、アバタデータは、ウエストの寸法が大きく変更された場合に、一部のみが大きくなるのではなく、その一部が大きくなるに伴って、近くの部位も大きくなるように構成されている。このように、当該アバタデータは、パラメトリック人体モデルによって実現されていてよい。

データ処理装置１００は、ユーザ３００の複数の部位のそれぞれの寸法を含むユーザ寸法データを取得する。データ処理装置１００は、例えば、センサ４５０によってユーザ３００を実測することによって生成されたユーザ寸法データを取得する。センサ４５０は、例えば、３次元形状を計測可能なセンサである。センサ４５０は、専用のスーツを着装したユーザ３００を撮像することによって、ユーザ３００の複数の部位を採寸するセンサであってもよい。センサ４５０は、ユーザ３００の体型を計測可能であれば、どのようなセンサであってもよい。

また、データ処理装置１００は、例えば、ユーザ３００によって入力されたユーザ寸法データを取得してもよい。ユーザ３００は、例えば、メジャー等を用いて自ら採寸したり、他者に採寸してもらうことによって、寸法を入力し得る。

データ処理装置１００は、通信端末４００から、ユーザ３００のユーザ寸法データを受信してよい。通信端末４００は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、タブレット端末、及びスマートフォン等であってよい。データ処理装置１００と通信端末４００とは、ネットワーク２０を介して通信してよい。ネットワーク２０は、インターネットを含んでよい。ネットワーク２０は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）を含んでよい。ネットワーク２０は、移動体通信ネットワークを含んでよい。移動体通信ネットワークは、３Ｇ（３ｒｄ Ｇｅｎｅｒａｔｉｏｎ）通信方式、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）通信方式、５Ｇ（５ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式、及び６Ｇ（６ｔｈ Ｇｅｎｅｒａｔｉｏｎ）通信方式以降の通信方式のいずれに準拠していてもよい。

データ処理装置１００は、センサ１５０によってユーザ３００を採寸することによって、ユーザ寸法データを取得してもよい。センサ１５０は、例えば、３次元形状を計測可能なセンサである。センサ１５０は、専用のスーツを着装したユーザ３００を撮像することによって、ユーザ３００の複数の部位を採寸するセンサであってもよい。

データ処理装置１００は、取得したユーザ寸法データを用いて、アバタデータの寸法を調整する。データ処理装置１００は、ユーザ寸法データが示すユーザの複数の部位の寸法と、アバタの複数の部位の寸法との誤差を最小に抑えるための反復最適化アルゴリズムを用いて、ユーザ３００の体型に合わせたアバタデータを生成してよい。

図２は、データ処理装置１００によるＵＩ２００の一例を概略的に示す。図３は、データ処理装置１００によるＵＩ２１０の一例を概略的に示す。ユーザ３００は、例えば、通信端末４００によってデータ処理装置１００にアクセスすることによって、ＵＩ２００及びＵＩ２１０を利用し得る。

ＵＩ２００の右側は、ユーザ３００の複数の部位のそれぞれの寸法を示す。これらの寸法は、例えば、センサ１５０又はセンサ４５０によって測定された値である。ユーザ３００は、例えば、表示された寸法を確認し、問題なければ、アバタの生成を指示する。

ＵＩ２１０の右側は、ユーザ３００の複数の部位の寸法を入力する入力画面を示す。ユーザ３００は、複数の部位の寸法を、すべて手動で入力してもよい。また、ユーザ３００は、センサ１５０又はセンサ４５０によって測定された結果を編集することによって、ユーザ寸法データを生成してもよい。

データ処理装置１００は、アバタの生成指示を受け付けたことに応じて、設定されているユーザ寸法データを用いて、ＵＩ２００の左側や、ＵＩ２１０の左側に示すようなアバタデータを生成してよい。

データ処理装置１００は、採寸されたユーザ３００の複数の部位が、アバタのどの部位に対応するかを特定する。データ処理装置１００は、例えば、ユーザ３００の指示に従って、ユーザ３００の部位と、その部位に対応するアバタの部位とを対応付ける。例えば、ユーザ３００は、採寸しようとしている部位に対応するアバタの部位をＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）で指定した後、その部位を採寸する。これにより、部位の対応付けが行われる。ユーザ３００は、既に採寸しているデータが、アバタのどの部位に対応するのかを指定してもよい。

データ処理装置１００は、ユーザ３００の複数の部位のそれぞれについて、アバタの複数の部位のそれぞれとの関連度を登録してよい。当該登録は、ユーザ３００によって行われてよく、データ処理装置１００の管理者等によって行われてもよい。データ処理装置１００は、ユーザ３００の複数の部位のそれぞれについて、アバタの複数の部位のそれぞれとの関連度を登録した部位関連度データを格納してよい。関連度は、例えば、最小が０、最大が１等であってよい。

例えば、ユーザ３００の一の部位と、当該部位に対応するアバタの部位とに、関連度１が登録され、当該部位に対応するアバタの部位から遠くなるにつれて低い関連度が登録され得る。例えば、ユーザ３００のウエストに対して、アバタのウエストに１が登録され、ウエストから上下方向に離れるにつれて、０．９、０．８、０．７、・・・の関連度が登録される。

例えば、ウエストの寸法が大きい場合に腕周りの寸法も大きい傾向にある場合には、ユーザ３００のウエストとアバタの腕回りとに対して、比較的高い関連度が登録され得る。

データ処理装置１００は、例えばまず、アバタを採寸する。データ処理装置１００は、採寸を、並行して部位ごとに実行してよい。部位の寸法には、長さの寸法と、周りの寸法との２種類が存在してよい。

図４は、長さの寸法について説明するための説明図である。長さの寸法として、データ処理装置１００は、アバタ２２０の部位開始点に配置されたオブジェクト２２２から、部位終点に配置されたオブジェクト２２２までの距離を計算する。具体例として、腕の長さを採寸する場合に、データ処理装置１００は、アバタ２２０の肩に配置したオブジェクト２２２と、アバタ２２０の手首に配置したオブジェクト２２２との距離を計算する。

図５は、周りの寸法について説明するための説明図である。周りの寸法として、データ処理装置１００は、まず、採寸部位に対応する位置のプレーン２２４と、アバタ２２０のモデルのメッシュの面と辺の全交差点を計算する。そして、データ処理装置１００は、交差点を多角形に繋ぎ合わせて、周辺の長さを計算する。

アバタ２２０は、パラメトリック人体モデルを用いて実現されており、各部位間に制約が存在することから、アバタ２２０の各部位の寸法を、ユーザ寸法データと一致するように一度に変更することは難しい。本実施形態に係るデータ処理装置１００は、上述したように、ユーザ寸法データと、アバタの体型の誤差を最小に抑えるための反復最適化アルゴリズムを用いてよい。

例えば、データ処理装置１００は、アバタの複数の部位のうちの一部の部位の寸法を、当該一部の部位に対応するユーザ３００の部位の寸法との差異が少なくなるように変更し、かつ、部位関連度データを用いて、当該ユーザ３００の部位に関連するアバタの部位の寸法を変更する。データ処理装置１００は、関連度に応じた乗数を適用して、ユーザ３００の部位に関連するアバタの部位の寸法を変更してよい。変更後、データ処理装置１００は、ユーザ３００の複数の部位と、ユーザ３００の複数の部位に対応するアバタの複数の部位との合計誤差を算出する。

データ処理装置１００は、このような処理を、例えば、合計誤差が予め定められた閾値より小さくなるまで繰り返す。また、データ処理装置１００は、このような処理を、予め設定された最大実行回数まで繰り返すようにしてもよい。これにより、パラメトリック人体モデルにおける各部位間の制約を守りつつ、ユーザ３００の体型との誤差がより少ないアバタを生成することができる。

図６は、データ処理装置１００によるＵＩ２３０の一例を概略的に示す。図６に例示するＵＩ２３０はアバタ領域２４０及び設定領域２５０を含む。

アバタ領域２４０には、ユーザ３００が選択した衣服を着装したアバタ２４２が表示される。アバタ２４２は、３Ｄ空間に配置され、アバタ２４２は、寄り引きや、３６０度で閲覧可能であってよい。

設定領域２５０は、商品説明２５２、カラバリ選択２５４、サイズ選択２５６、アクション選択２５８、カメラ選択２６０、及びキツイ箇所表示ボックス２６２を含む。商品説明２５２には、アクティブになっている衣服の詳細説明が表示される。詳細説明は、衣服の商品名を含んでよい。詳細説明は、衣服の値段を含んでよい。詳細説明は、衣服の説明を含んでよい。

カラバリ選択２５４は、衣服２４４の色の選択を受け付ける。データ処理装置１００は、衣服２４４の色を、カラバリ選択２５４において選択された色に変更する。

サイズ選択２５６は、衣服２４４のサイズの選択を受け付ける。データ処理装置１００は、衣服２４４のサイズを、サイズ選択２５６において選択されたサイズに変更する。

アクション選択２５８は、アバタ２４２のアクションの選択を受け付ける。データ処理装置１００は、アクション選択２５８において選択されたアクションを、アバタ２４２が実行するアニメーションを生成して表示させる。

カメラ選択２６０は、カメラアングルの選択を受け付ける。データ処理装置１００は、アバタ領域２４０の３Ｄ空間におけるカメラアングルを、カメラ選択２６０において選択されたカメラアングルに変更する。

キツイ箇所表示ボックス２６２は、着装した衣服２４４のキツイ箇所を表示する選択を受け付ける。データ処理装置１００は、キツイ箇所表示ボックス２６２が選択された場合に、衣服２４４のきつい箇所を表示する。

図６に示すＵＩ２３０は例示であり、構成等は変更可能である。また、ＵＩ２３０は、商品説明２５２、カラバリ選択２５４、サイズ選択２５６、アクション選択２５８、カメラ選択２６０、及びキツイ箇所表示ボックス２６２の全てを含まなくてもよく、これら以外を含んでもよい。例えば、ＵＩ２３０は、背景の選択や、ライティングの選択を受け付ける機能を有してもよい。

図７は、きつい箇所の表示の一例を概略的に示す。データ処理装置１００は、アバタ２４２のアバタデータと、衣服２４４の衣服データに基づいて、衣服２４４のきつい箇所を判定し、表示に反映してよい。図７では、色の濃淡によって、きつさを表現した場合を例示している。

データ処理装置１００は、静止した状態のアバタ２４２に対してキツイ箇所を表示してよく、また、アクション選択２５８において選択されたアクションをアバタ２４２に実行させながら、並行して、きつい箇所を表示するよう制御してもよい。これにより、ユーザ３００に、選択した衣服を着装しながら動いたときに、どの部分にどれだけのきつさを感じるかを知得させることができ、ユーザ３００に対して、商品の選択やサイズの選択の材料を提供することができる。

図８は、データ処理装置１００の機能構成の一例を概略的に示す。データ処理装置１００は、格納部１０２、登録部１０４、ユーザ寸法データ取得部１０６、アバタ寸法データ取得部１０８、関連度データ取得部１１０、調整部１１２、アバタデータ取得部１１４、衣服データ取得部１１６、生成部１２０、表示制御部１２２、表示指定受付部１２４、アクション選択部１２６、きつさ判定部１２８、余裕度判定部１３０、ウエスト指定受付部１３２、裾上げ特定部１３４、状態特定部１３６、装飾品特定部１３８、及びポケット特定部１４０を備える。なお、データ処理装置１００がこれらの全てを備えることは必須とは限らない。

格納部１０２は、各種データを格納する。格納部１０２は、例えば、デフォルトの体型を有するアバタのアバタデータを格納する。格納部１０２は、例えば、複数の衣服の衣服データを格納する。

登録部１０４は、各種データを登録する。登録部１０４は、登録したデータを格納部１０２に格納する。

例えば、登録部１０４は、ユーザ３００のユーザ寸法データを登録する。登録部１０４は、通信端末４００からユーザ寸法データを受信して登録してよい。登録部１０４は、センサ１５０によって測定したユーザ寸法データを登録してもよい。

ユーザ寸法データは、例えば、身長、股下、首周り、肩幅、胸囲、アンダーバスト、腕周り、手首周り、腕の長さ、身丈、ウエスト、ウエスト（腰骨上）、ヒップ、太もも周り、膝周り、ふくらはぎ周り、及び足首周りの寸法を含む。なお、これらは例示であって、ユーザ寸法データは、これらのうちの一部を含まなくてもよく、これら以外を含んでもよい。

アバタの複数の部位のそれぞれの寸法を含むアバタ寸法データにおける複数の部位の数は、ユーザ寸法データにおける複数の部位の数よりも多い。ユーザ３００が自身の身体のあらゆる寸法を測定すれば、正確なアバタを生成することができるが、特に一般のユーザにとっては困難である。しかし、一般のユーザが無理なく採寸できる箇所のみの採寸データでは、正確なアバタを生成することは難しい。

そこで、本実施形態に係るデータ処理装置１００では、ユーザ寸法データに含まれる複数の部位のそれぞれに、アバタの複数の部位を対応付ける。例えば、アバタにおいて、ウエストに対して５つの寸法を有する場合、ユーザ寸法データのウエストを、当該５つのウエストの寸法に対応付ける。そして、例えば、５つのうちの真ん中の寸法と、ユーザ寸法データのウエストとの関連度を１とし、上下に離れる毎に、関連度を０．９、０．８としたり、０．８、０．６としたりする。登録部１０４は、このような部位同士の関連度を含む部位関連度データを登録してよい。

登録部１０４は、他の装置によって生成されたアバタデータを格納部１０２に格納してもよい。登録部１０４は、例えば、他の装置によって、ユーザ３００の体型に合わせて生成されたアバタデータを格納部１０２に格納する。

ユーザ寸法データ取得部１０６は、ユーザ３００のユーザ寸法データを取得する。ユーザ寸法データ取得部１０６は、格納部１０２からユーザ寸法データを読み出してよい。

アバタ寸法データ取得部１０８は、アバタのアバタ寸法データを取得する。アバタ寸法データ取得部１０８は、格納部１０２に格納されているアバタデータのアバタを採寸することによって、アバタ寸法データを生成してよい。アバタ寸法データ取得部１０８は、アバタの複数の部位について、並行して採寸を実行してよい。アバタ寸法データ取得部１０８は、複数の長さの寸法と、複数の周りの寸法とを採寸する。

関連度データ取得部１１０は、部位関連度データを取得する。関連度データ取得部１１０は、格納部１０２から部位関連度データを読み出してよい。

調整部１１２は、ユーザ寸法データ、アバタ寸法データ、及び部位関連度データを用いて、アバタデータを生成する。調整部１１２は、生成したアバタデータを格納部１０２に格納する。

調整部１１２は、ユーザ３００の複数の部位と、ユーザ３００の複数の部位に対応するアバタの複数の部位との合計誤差が小さくなるように、アバタの複数の部位のうちの一部の部位の寸法を、当該一部の部位に対応するユーザ３００の部位の寸法との差異が少なくなるように変更し、かつ、変更に伴って、当該ユーザ３００の部位に関連するアバタの部位の寸法を変更した後、合計誤差を算出する処理を繰り返す。調整部１１２は、部位関連度データを用いて、ユーザ３００の部位に関連するアバタの部位の寸法を変更してよい。調整部１１２は、例えば、ユーザ３００の一の部位に対応するアバタの一の部位の寸法を値Ｘの分、変更した場合に、ユーザ３００の当該一の部位に対応するアバタの他の部位の寸法を、値Ｘに関連度を乗じた値の分、変更し得る。調整部１１２は、対象部位の寸法を直接変更してよい。調整部１１２は、対象部位の寸法を示すパラメータを変更してもよい。

調整部１１２は、合計誤差が予め定められた閾値より少なくなるまで、繰り返しを継続してよい。また、調整部１１２は、予め定められた回数、繰り返しを継続するようにしてもよい。閾値は、ユーザ３００の採寸部位の数に応じて決定されてもよい。例えば、ユーザ３００の採寸部位が多いほど、閾値を高くする。

調整部１１２は、ユーザ３００の複数の部位と、当該複数の部位に対応するアバタの複数の部位との合計誤差を、重み付けをせずに算出してよく、重み付けをして算出してもよい。調整部１１２は、例えば、部位毎に重み付けをして合計誤差を算出する。部位毎の重み付けは、アバタが着装する衣服の種類に応じて設定され得る。例えば、衣服がスカートである場合には、ウエスト周りの重み付けを重くし、衣服がトップスの場合には、胸囲周りの重み付けを重くし得る。

アバタデータ取得部１１４は、アバタデータを取得する。アバタデータ取得部１１４は、例えば、調整部１１２によって、複数の部位の寸法がユーザ３００の複数の部位の寸法に合わせて調整されたアバタのアバタデータを取得する。アバタデータ取得部１１４は、格納部１０２に格納されている当該アバタデータを読み出してよい。アバタデータ取得部１１４は、登録部１０４によって格納部１０２に格納された、他の装置によって生成されたアバタデータを格納部１０２から読み出してもよい。

衣服データ取得部１１６は、衣服の衣服データを取得する。衣服データ取得部１１６は、格納部１０２に格納されている衣服データを読み出してよい。衣服データ取得部１１６は、例えば、ＵＩ２３０においてユーザ３００によって選択された衣服の衣服データを取得する。

生成部１２０は、アバタデータ取得部１１４が取得したアバタデータと、衣服データ取得部１１６が取得した衣服データに基づいて、アバタが衣服を着装している画像を生成する。生成部１２０は、例えば、アバタデータ及び衣服データに基づいて、アバタが衣服を着装しているアニメーションを生成する。生成部１２０は、生成した画像を格納部１０２に格納する。

表示制御部１２２は、格納部１０２に格納されている、生成部１２０によって生成された画像を表示するよう制御する。表示制御部１２２は、例えば、データ処理装置１００が備えるディスプレイに画像を表示するよう制御する。また、表示制御部１２２は、例えば、通信端末４００に対して画像を送信して、通信端末４００に画像を表示させる。

表示指定受付部１２４は、衣服を着装したアバタの表示に関する指定を受け付ける。表示指定受付部１２４は、例えば、衣服の色の指定を受け付ける。具体例として、表示指定受付部１２４は、ＵＩ２３０におけるカラバリ選択２５４を介した色の指定を受け付ける。表示指定受付部１２４は、例えば、衣服のサイズの指定を受け付ける。具体例として、表示指定受付部１２４は、ＵＩ２３０におけるサイズ選択２５６を介したサイズの指定を受け付ける。表示指定受付部１２４は、例えば、カメラアングルの指定を受け付ける。具体例として、表示指定受付部１２４は、ＵＩ２３０におけるカメラ選択２６０を介したカメラアングルの指定を受け付ける。

生成部１２０は、表示指定受付部１２４が受け付けた指定に応じて、アバタが衣服を着装している画像を生成してよい。例えば、生成部１２０は、指定された色にした衣服をアバタが着装している画像を生成する。また、例えば、生成部１２０は、指定されたサイズにした衣服をアバタが着装している画像を生成する。例えば、生成部１２０は、指定されたカメラアングルで、アバタが衣服を着装している画像を生成する。

アクション選択部１２６は、アバタに実行させるアクションを選択する。アクション選択部１２６は、予め設定された複数のアクションから、アバタに実行させるアクションを選択してよい。アクション選択部１２６は、例えば、ＵＩ２３０におけるアクション選択２５８を介して指定されたアクションを選択する。また、アクション選択部１２６は、例えば、予め設定された複数のアクションから、順番にアクションを選択してもよい。生成部１２０は、アクション選択部１２６によって選択されたアクションを実行するアバタの動きに合わせて衣服が動くアニメーションを生成してよい。

きつさ判定部１２８は、アバタデータ及び衣服データに基づいて、アバタが着装している衣服のきつさを判定する。生成部１２０は、きつさ判定部１２８によって判定された衣服のきつさを反映した画像を生成してよい。きつさ判定部１２８は、例えば、アバタのサイズと衣服のサイズとを比較することによって、衣服のきつさの度合いを判定する。

きつさ判定部１２８は、衣服のシミュレーションであるクロスシミュレーションにおける伸縮パラメータのフォースから衣服のきつさを判定してもよい。例えば、衣服データは、衣服の素材の伸縮に関連する伸縮パラメータを含む。生成部１２０は、きつさ判定部１２８が伸縮パラメータに基づいて特定した、アバタの衣服を着装している部位の衣服から受ける力の度合を反映した画像を生成してよい。

伸縮パラメータは、衣服が当該衣服を着装している部位に対して力を与え始める衣服のメッシュの辺の長さの長さ閾値を含んでよい。伸縮パラメータは、衣服が破れる衣服のメッシュの辺の長さの破れ閾値を含んでよい。衣服の素材毎の伸縮パラメータは、例えば、ユーザ３００や、データ処理装置１００の管理者等によって登録される。また、きつさ判定部１２８が、衣服の素材毎の伸縮パラメータを、クロスシミュレーションの物性に基づいて決定してもよい。

きつさ判定部１２８は、例えばまず、対象となる衣服の衣服メッシュの初期状態を保存する。きつさ判定部１２８は、衣服メッシュの頂点毎に、１近傍頂点群を求めて、インデックスを保存し、頂点ｖと各１近傍頂点の距離（ｄ_ｖ０）を保存する。きつさ判定部１２８は、衣服を装着したアバタのアニメーションのフレーム毎に、現状と初期状態を比較する。きつさ判定部１２８は、衣服メッシュの頂点毎に、頂点ｖと各１近傍頂点の距離（ｄ_ｖｔ）を計算し、初期距離情報との差分をとり（ｄ_ｖ０－ｄ_ｖｔ）、負の差分を捨てて、整数のみを用いて平均をとり（ｄ）、きつさａ＝（ｄ－長さ閾値）／（破れ閾値－長さ閾値）を計算する。

生成部１２０は、衣服に、アバタの衣服を着装している部位の衣服から受ける力の度合に応じた色を反映した画像を生成してよい。例えば、生成部１２０は、各頂点のきつさａに基づいて、各頂点の色を決定する。生成部１２０は、元の衣服の色を反映しなくても、反映してもよい。例えば、元の衣服の色を反映しない場合、生成部１２０は、衣服のメッシュの各頂点の色を、きつさａに応じた色とする。例えば、きつさａ＝０を白色とし、きつさａ＝１を赤色とすると、きつさがきついほど色が赤い画像が生成される。生成部１２０は、衣服のメッシュの各頂点の色を、きつさａに応じた濃度の色としてもよい。

元の衣服の色を反映する場合、生成部１２０は、例えば、元の衣服の色に対して、きつさａに応じた色を加える。例えば、生成部１２０は、チョウテンシェーダによって頂点色を取得し、フラグメントシェーダに渡す。フラグメントシェーダは、テクスチャからサンプリングされた色と、事前に設定した色の加重平均をとる。これにより、元の衣服に対して、きつさａに応じた色が加わった画像を提供することができる。

余裕度判定部１３０は、アバタに衣服を着装させた状態における、アバタと衣服との距離に基づいて、アバタに対する衣服のサイズの余裕度を判定する。余裕度判定部１３０は、アバタを停止させた状態で余裕度を判定してよく、アバタを動かした状態で余裕度を判定してもよい。

例えば、アバタを停止させた状態で余裕度を判定する場合、余裕度判定部１３０は、衣服を着装したアバタにＴポーズをとらせてよい。余裕度判定部１３０は、腕周り、首周り、及び肩幅等について、アバタのサイズと衣服のサイズの差を計算する。余裕度判定部１３０は、アバタから離れている衣服のメッシュの頂点の数と、各頂点についてアバタとの距離を計算する。余裕度判定部１３０は、距離の合計と、予め設定された閾値とを比較して、距離の合計が閾値より大きい場合に、ゆったり目シルエットであると判定する。余裕度判定部１３０は、距離の合計と閾値との差が大きいほど、余裕度が高いと判定してよい。余裕度判定部１３０は、衣服がアバタにぴったり着装されている場合における、距離の合計を算出して、当該距離の合計に基づいて、閾値を設定してよい。

アバタを動かした状態で余裕度を判定する場合、余裕度判定部１３０は、アバタに予め定められたアクションを実行させる。余裕度判定部１３０は、アバタのモーションに合わせて、リアルタイムクロスシミュレーションを行う。余裕度判定部１３０は、アバタから離れている衣服のメッシュの頂点の数と、各頂点についてアバタとの距離を計算する。余裕度判定部１３０は、距離の合計と、予め設定された閾値とを比較して、距離の合計が閾値より大きい場合に、ゆったり目シルエットであると判定する。余裕度判定部１３０は、距離の合計と閾値との差が大きいほど、余裕度が高いと判定してよい。

なお、リアルタイムで計算することから、余裕度判定部１３０は、頂点の距離を計算する部位を制限してもよい。例えば、余裕度判定部１３０は、対象の衣服がズボンである場合、ウエスト、太もも周り、及び裾に制限する。また、例えば、余裕度判定部１３０は、対象の衣服がスカートである場合、ウエスト下と裾に制限する。また、例えば、余裕度判定部１３０は、対象の衣服がＴシャツである場合、腕周り及び首周りに制限する。

生成部１２０は、余裕度判定部１３０によって判定された余裕度を反映した画像を生成してよい。生成部１２０は、例えば、余裕度に応じた色を反映した画像を生成する。生成部１２０は、元の衣服の色を反映しなくても、反映してもよい。例えば、元の衣服の色を反映しない場合、生成部１２０は、衣服のメッシュの各頂点の色を、余裕度ａに応じた色とする。例えば、余裕度＝０を白色とし、余裕度＝１を青色とすると、余裕があるほど色が青い画像が生成される。生成部１２０は、衣服のメッシュの各頂点の色を、余裕度に応じた濃度の色としてもよい。元の衣服の色を反映する場合、生成部１２０は、例えば、元の衣服の色に対して、余裕度に応じた色を加える。

格納部１０２は、衣服の素材毎の摩擦音を格納してもよい。素材毎の摩擦音は、シミュレーションによって生成されてよい。実際に各素材の衣服に摩擦を生じさせて録音してもよい。格納部１０２は、摩擦音格納部の一例であってよい。生成部１２０は、格納部１０２に格納されている摩擦音に基づいて、衣服を着装させたアバタの動きによって発生する衣服の摩擦に対応する摩擦音を生成してもよい。

生成部１２０は、衣服の摩擦している領域のサイズが大きいほど、大きい音量の摩擦音を生成してよい。生成部１２０は、衣服の摩擦の加速度が高いほど、高い音の摩擦音を生成してもよい。

生成部１２０は、例えばまず、衣服のメッシュの単位面積あたりの音量を設定する。生成部１２０は、摩擦継続単位時間辺りの音を設定する。生成部１２０は、衣服のメッシュ構造のアニメーションに対して衝突判定を行う。生成部１２０は、摩擦面、摩擦スピードから音量を計算する。生成部１２０は、摩擦の加速度から音の高さを計算してよい。生成部１２０は、摩擦の継続時間から、音声波形を生成する。生成部１２０は、生成した音声を格納部１０２に格納してよい。表示制御部１２２は、生成部１２０によって生成された画像を表示するとともに、音声を音声出力してよい。これにより、例えば、スポーツウェアや、レザーの衣服等、音が気になりやすい衣服を検討しているユーザ３００に対して、どのような動きをすると、どのような音が発生するのかを直感的に把握させることができる。

ウエスト指定受付部１３２は、衣服がボトムスである場合に、衣服を配置するアバタのウエスト位置、及び衣服をアバタに固定する固定強度の指定を受け付ける。生成部１２０は、指定されたウエスト位置に、指定された固定強度で衣服をアバタに対して固定した画像を生成する。

ウエスト指定受付部１３２は、例えば、ユーザ３００による、ウエスト位置及び固定強度の指定を受け付ける。ユーザ３００は、例えば、自分がボトムスを身に着けるときに、ボトムスを固定したいウエスト位置と、ベルトによる固定強度とを指定する。具体例として、ユーザ３００は、表示制御部１２２によって表示されたアバタに対して、ボトムスを固定したい位置を指定する。生成部１２０は、アバタのメッシュコライダーから、固定する位置の最寄りエッジループを抽出する。生成部１２０は、ボトムスのメッシュから、固定する位置の最寄エッジループを抽出する。

生成部１２０は、両方のエッジループの中心点を算出する。生成部１２０は、中心点が一致するように、ボトムスの位置を移動する。生成部１２０は、ボトムスのエッジループの各頂点の、メッシュコライダーのエッジループからの最寄頂点を選択する。

生成部１２０は、クロスシミュレーションを起動するときに、全ての頂点ペアで距離の制約条件を定義する。具体的に、生成部１２０は、条件の距離を０に近い値に設定する。メッシュコライダーと交差しないように、０には設定しない。また、生成部１２０は、条件の強さを０～１で設定する。生成部１２０は、ユーザ３００によって指定された固定強度によって、条件の強さを０～１で設定する。

生成部１２０は、シミュレーションのソルバーのイテレーションの度に、既存の制約条件とともに、ウエスト位置の距離の制約条件を用いてボトムスのメッシュの頂点の位置を最適化する。すなわち、生成部１２０は、ウエスト位置が固定されるように、既存の制約条件に合わせて、ボトムスがアバタに固定されるように制約する。

生成部１２０は、イテレーションの度に、ボトムスのメッシュのエッジループの一定の割合の頂点同士の距離の制約条件の距離を超えてしまった場合は、イベントを発火してよい。例えば、アバタのパラメトリックモデルのコントローラでイベントを受け取り、定義されている最小ウエスト周囲よりウエストが大きい場合、アバタのエッジループの下のウエスト部分に影響が及ぶパラメータを少し少なくする。すなわち、生成部１２０は、アバタのウエストがボトムスのサイズよりも大きく、ボトムスが伸びている場合に、イベントを発火し、アバタ側で受け取って、アバタのウエストを小さくするとともに、アバタの肉がボトムスにめり込んでいるような画像を生成する。

裾上げ特定部１３４は、衣服がズボンである場合に、アバタに対応する衣服の丈、及び衣服の裾上げの種類を特定する。裾上げの種類は、例えば、シングル、ダブル、三つ折、及びカットソーを含む。生成部１２０は、裾上げ特定部１３４が特定した衣服の丈及び衣服の裾上げの種類に基づいて衣服データを変更する。生成部１２０は、例えば、衣服の衣服データの一部を、衣服の丈に基づいて削除し、当該衣服データの一部に対応する位置に、裾上げの種類に対応するテクスチャを適用した画像を生成する。

裾上げ特定部１３４は、事前準備として、ズボンのメッシュの股下の中心の頂点を特定する。裾上げ特定部１３４は、衣服データを解析することによって、当該頂点を特定してよく、また、ユーザ３００による指定を受け付けることによって当該頂点を特定してもよい。

裾上げ特定部１３４は、ズボンの丈を特定する。裾上げ特定部１３４は、ユーザ３００の股下の寸法（実測データ）を用いて、ユーザ３００に適したズボンの丈を特定してよい。また、裾上げ特定部１３４は、ユーザ３００による、ユーザ３００が希望する丈の指定を受け付けてもよい。

生成部１２０は、オリジナルのズボンのメッシュを保存する。裾上げ特定部１３４は、股下の頂点から、特定した丈ほど下の位置に、メッシュの両端にエッジループ（頂点とエッジのシーケンス）を挿入する。生成部１２０は、これによって新しく追加した頂点に、周辺の頂点からＵＶ座標を補完する。生成部１２０は、新しく追加した頂点より下の頂点を削除する。生成部１２０は、新しく追加した頂点と、それより上の、一定の範囲内の頂点を選択する。当該範囲は、特定した裾上げの種類に応じた範囲であってよい。生成部１２０は、選択中の頂点にテクスチャを適用する。当該テクスチャは、特定した裾上げの種類に応じたテクスチャであってよい。

生成部１２０は、選択中の頂点のクロスシミュレーションのパラメータを変更してもよい。生成部１２０は、例えば、特定した裾上げの種類に応じて、選択中の頂点のクロスシミュレーションのパラメータを変更する。

具体例として、生成部１２０は、裾上げの種類がシングルである場合、選択中の頂点の質量を２倍にし、折り曲げ制約条件の強さを２倍にしてよい（重み付けをしてもよい）。これにより、シングルの裾上げをすることによって、布が２重になった状態を疑似的にクロスシミュレーションに反映することができる。

生成部１２０は、裾上げの種類がダブルである場合、選択中の頂点の質量を４倍にし、折り曲げ制約条件の強さを４倍にしてよい（重み付けをしてもよい）。これにより、ダブルの裾上げをすることによって、布が４重になった状態を疑似的にクロスシミュレーションに反映することができる。

生成部１２０は、裾上げの種類が三つ折である場合、選択中の頂点の質量を３倍にし、折り曲げ制約条件の強さを３倍にしてよい（重み付けをしてもよい）。これにより、三つ折の裾上げをすることによって、布が３重になった状態を疑似的にクロスシミュレーションに反映することができる。

生成部１２０は、裾上げの種類がカットソーである場合、選択中の頂点の質量を２倍にし、折り曲げ制約条件の強さを２倍にしてよい（重み付けをしてもよい）。これにより、カットソーの裾上げをすることによって、布が２重になった状態を疑似的にクロスシミュレーションに反映することができる。

生成部１２０は、丈を変更する場合には、保存しておいたオリジナルのメッシュを用いて処理をやり直してよい。

状態特定部１３６は、衣服がトップスであり、かつ、衣服がジッパー又はボタンを有する場合に、ジッパー又はボタンの状態を特定する。例えば、データ処理装置１００が、衣服を着装したアバタに対して、ジッパーの開閉状態及びボタンの開閉状態を変更可能なＵＩをユーザ３００に提供する。ユーザ３００は、衣服の着こなし方を検討すべく、ジッパーの開閉状態やボタンの開閉状態をＵＩ上で変更する。

生成部１２０は、状態特定部１３６によって特定されたジッパー又はボタンの状態に応じた画像を生成する。生成部１２０は、衣服がジッパーを有する場合に、衣服データにおけるジッパーに対応する部分の折り曲げ制約条件を強くしてよい。生成部１２０は、ジッパーが閉じている状態の方が、ジッパーが開いている状態よりも折り曲げ制約条件を強くしてよい。生成部１２０は、ジッパーが半分開いている場合には、閉じている部分の折り曲げ制約条件を、開いている部分の折り曲げ制約条件よりも強くしてよい。

衣服がジッパーを有する場合において、生成部１２０は、衣服のメッシュのうち、両前裾の接続される縁の頂点ペアを選択する。生成部１２０は、選択した頂点の折り曲げ制約条件を強くする。生成部１２０は、ジッパーを再現できる固定値に設定してよい。生成部１２０は、頂点ペアの距離の制約条件を定義する。生成部１２０は、距離を０に設定し、強さを最大値に設定してよい。生成部１２０は、衣服を着装したアバタのアニメーションを表示している間に、ジッパーが空いている割合を自由に変更可能に構成してよく、ジッパーが開いている部分について、上記制約条件を無効にしてよい。

生成部１２０は、事前に、つながっているジッパーと、つながっていないジッパーの部分のメッシュを用意してよい。生成部１２０は、衣服を着装したアバタのアニメーションのフレーム毎に、前裾の各エッジに、当該メッシュを合わせて配置する。生成部１２０は、エッジの頂点が両方閉じてある場合、つながっているジッパーのメッシュを配置し、ペアのエッジにメッシュを配置しない。エッジの頂点が１つでも閉じていない場合、生成部１２０は、つながっていないジッパーのメッシュを配置する。

衣服がボタンを有する場合において、生成部１２０は、各ボタンについて、２つの頂点のペアを指定する。ボタン側は、前から見たボタンの上部と下部の周辺の２頂点であってよく、ボタンの穴の側は、穴の真上と真下の２頂点であってよい。生成部１２０は、指定した頂点の折り曲げ制約条件を、ボタンを再現できる固定値に設定してよい。生成部１２０は、頂点ペアの距離の制約条件を定義する。生成部１２０は、距離を０に設定し、強さを最大値に設定してよい。生成部１２０は、衣服を着装したアバタのアニメーションを表示している間に、各ボタンが空いているかどうかを自由に変更可能に構成してよく、ボタンが開いている部分について、上記制約条件を無効にしてよい。

装飾品特定部１３８は、衣服に接する装飾品を特定する。装飾品特定部１３８は、衣服にもともとついている装飾品を特定してよい。また、データ処理装置１００が、衣服に対して装飾品を追加するＵＩをユーザ３００に提供し、装飾品特定部１３８は、ユーザ３００によって追加された装飾品を特定してもよい。生成部１２０は、衣服と装飾品との関係に応じた衣服の動きを生成してよい。

装飾品の例として、帽子、カバン、リュック、スカーフ、マフラー、ネクタイ、蝶ネクタイ、靴下、ストッキング、タイツ、ポケットチーフ、ブートニア、時計、ブレスレット、及び指輪等が挙げられる。装飾品は、３つのカテゴリに分けられてよい。カテゴリは、硬いものをクロスにつけるもの、物理シミュレーションで制御されている硬いものとクロスを相互にインタラクションさせるものと、１つのクロスをもう一つのクロスにつけるもの（例えば、ハンカチをジャケットにつける場合）とを含んでよい。

生成部１２０は、装飾品が小さな剛体である場合、クロスシミュレーションに反映しなくてよい。生成部１２０は、例えば、装飾品を、ユーザ３００が指定した位置に配置する。生成部１２０は、クロスシミュレーションの起動時に、衣服メッシュ上の装飾品から最も近い頂点を検索する。生成部１２０は、検索した頂点と、周辺の頂点から平均の法線を計算する。生成部１２０は、起動時の配置情報を保存する。配置情報は、頂点と装飾品の相対的な位置と、法線と装飾品の相対的な向きを含んでよい。生成部１２０は、衣服を着装したアバタのアニメーションのフレーム毎に、頂点の位置と周辺の法線を計算する。そして、生成部１２０は、保存した配置情報を維持するように装飾品の位置と向きを変更する。これにより、小さな剛体である装飾品の自然な動きを表現することができる。

生成部１２０は、装飾品が剛体（小さな剛体以外の剛体）である場合、クロスシミュレーションに反映する。生成部１２０は、例えば、装飾品を、ユーザ３００が指定した位置に配置する。生成部１２０は、装飾品のメッシュをクロスシミュレーション用のコライダーで囲む。生成部１２０は、貼り付け用のコライダーの頂点を指定する。生成部１２０は、クロスシミュレーションの起動時に、指定した頂点と衣服メッシュの最も近い頂点の間の距離の制約条件を定義する。生成部１２０は、衣服を着装したアバタのアニメーションのフレーム毎に、全制約条件を守るために、ソルバーの処理で、クロスの粒子だけでなく、コライダーも移動・回転させる。

生成部１２０は、装飾品がクロスである場合、衣服メッシュで装飾品を貼り付け可能な領域の頂点を選択する。生成部１２０は、装飾品メッシュで貼り付け用の領域の頂点を選択する。生成部１２０は、装飾品メッシュを衣服に配置する。生成部１２０は、クロスシミュレーションの起動時に、一定範囲内で、装飾品メッシュと衣服メッシュの選択された頂点から最も短距離の頂点ペア群を集めて、ペアから距離の制約条件を定義する。

ポケット特定部１４０は、衣服のポケット内の物を特定する。データ処理装置１００は、衣服のポケットの中に、ユーザ３００が指定した物を配置するＵＩをユーザ３００に提供してよい。ユーザ３００は、例えば、スマートフォン及び財布等をポケットに入れたときの衣服の状態を確認したい場合に、スマートフォン及び財布等を指定し得る。生成部１２０は、ポケット内の物に応じた衣服の動きを生成する。

生成部１２０は、ポケット特定部１４０が特定した物（特定物と記載する場合がある。）の形状を計算し、初期値とする。生成部１２０は、特定物と、衣服の素材の摩擦を設定する。生成部１２０は、ポケットの形状と、特定物のサイズから、ポケットを中心としたヒートマップを生成する。ヒートマップは、特定物がポケットの中で移動した際に、影響を受けるポケットの周りのメッシュの頂点の設定と移動量であってよい。特定物に近く、縫い目がないとき（ポケットの口）は、移動量が大きく、縫い合わせ側は、移動量が小さい。

生成部１２０は、アバタの動きに合わせた通常のクロスシミュレーション結果に対して、ヒートマップ部分について、補正を加える。生成部１２０は、ヒートマップ内の各頂点のベクトルの再計算によって補正を加える。生成部１２０は、特定物の重量による重力、アニメーションによる方向と力、ヒートマップによる方向と力の合成によって、各頂点の移動方向と移動量を計算する。

図９は、データ処理装置１００として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。コンピュータ１２００にインストールされたプログラムは、コンピュータ１２００を、本実施形態に係る装置の１又は複数の「部」として機能させ、又はコンピュータ１２００に、本実施形態に係る装置に関連付けられるオペレーション又は当該１又は複数の「部」を実行させることができ、及び／又はコンピュータ１２００に、本実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ１２００に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ１２１２によって実行されてよい。

本実施形態によるコンピュータ１２００は、ＣＰＵ１２１２、ＲＡＭ１２１４、及びグラフィックコントローラ１２１６を含み、それらはホストコントローラ１２１０によって相互に接続されている。コンピュータ１２００はまた、ＧＰＵ１２５０を含む。コンピュータ１２００はまた、通信インタフェース１２２２、記憶装置１２２４、ＤＶＤドライブ、及びＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ１２２０を介してホストコントローラ１２１０に接続されている。ＤＶＤドライブは、ＤＶＤ－ＲＯＭドライブ及びＤＶＤ－ＲＡＭドライブ等であってよい。記憶装置１２２４は、ハードディスクドライブ及びソリッドステートドライブ等であってよい。コンピュータ１２００はまた、ＲＯＭ１２３０及びキーボードのようなレガシの入出力ユニットを含み、それらは入出力チップ１２４０を介して入出力コントローラ１２２０に接続されている。

ＣＰＵ１２１２は、ＲＯＭ１２３０及びＲＡＭ１２１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ１２１６は、ＲＡＭ１２１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ１２１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス１２１８上に表示されるようにする。

通信インタフェース１２２２は、ネットワークを介して他の電子デバイスと通信する。記憶装置１２２４は、コンピュータ１２００内のＣＰＵ１２１２によって使用されるプログラム及びデータを格納する。ＤＶＤドライブは、プログラム又はデータをＤＶＤ－ＲＯＭ等から読み取り、記憶装置１２２４に提供する。ＩＣカードドライブは、プログラム及びデータをＩＣカードから読み取り、及び／又はプログラム及びデータをＩＣカードに書き込む。

ＲＯＭ１２３０はその中に、アクティブ化時にコンピュータ１２００によって実行されるブートプログラム等、及び／又はコンピュータ１２００のハードウェアに依存するプログラムを格納する。入出力チップ１２４０はまた、様々な入出力ユニットをＵＳＢポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ１２２０に接続してよい。

プログラムは、ＤＶＤ－ＲＯＭ又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置１２２４、ＲＡＭ１２１４、又はＲＯＭ１２３０にインストールされ、ＣＰＵ１２１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ１２００に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ１２００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

例えば、通信がコンピュータ１２００及び外部デバイス間で実行される場合、ＣＰＵ１２１２は、ＲＡＭ１２１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース１２２２に対し、通信処理を命令してよい。通信インタフェース１２２２は、ＣＰＵ１２１２の制御の下、ＲＡＭ１２１４、記憶装置１２２４、ＤＶＤ－ＲＯＭ、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

また、ＣＰＵ１２１２は、記憶装置１２２４、ＤＶＤドライブ（ＤＶＤ－ＲＯＭ）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ１２１４に読み取られるようにし、ＲＡＭ１２１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ１２１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ１２１２は、ＲＡＭ１２１４から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ１２１４に対しライトバックする。また、ＣＰＵ１２１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ１２１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

上で説明したプログラム又はソフトウエアモジュールは、コンピュータ１２００上又はコンピュータ１２００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ１２００に提供する。

本実施形態におけるフローチャート及びブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）及び／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、及びプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、及び他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、及び「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。その様な変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

２０ ネットワーク、１００ データ処理装置、１０２ 格納部、１０４ 登録部、１０６ ユーザ寸法データ取得部、１０８ アバタ寸法データ取得部、１１０ 関連度データ取得部、１１２ 調整部、１１４ アバタデータ取得部、１１６ 衣服データ取得部、１２０ 生成部、１２２ 表示制御部、１２４ 表示指定受付部、１２６ アクション選択部、１２８ きつさ判定部、１３０ 余裕度判定部、１３２ ウエスト指定受付部、１３４ 裾上げ特定部、１３６ 状態特定部、１３８ 装飾品特定部、１４０ ポケット特定部、１５０ センサ、２００ ＵＩ、２１０ ＵＩ、２２０ アバタ、２２２ オブジェクト、２２４ プレーン、２３０ ＵＩ、２４０ アバタ領域、２４２ アバタ、２４４ 衣服、２５０ 設定領域、２５２ 商品説明、２５４ カラバリ選択、２５６ サイズ選択、２５８ アクション選択、２６０ カメラ選択、２６２ キツイ箇所表示ボックス、４００ 通信端末、４５０ センサ、１２００ コンピュータ、１２１０ ホストコントローラ、１２１２ ＣＰＵ、１２１４ ＲＡＭ、１２１６ グラフィックコントローラ、１２１８ ディスプレイデバイス、１２２０ 入出力コントローラ、１２２２ 通信インタフェース、１２２４ 記憶装置、１２３０ ＲＯＭ、１２４０ 入出力チップ、１２５０ ＧＰＵ

Claims (9)

1. アバタのアバタデータを取得するアバタデータ取得部と、
   衣服の素材の伸縮に関連する伸縮パラメータを含む衣服データを取得する衣服データ取得部と、
   前記伸縮パラメータに基づいて特定した、前記アバタの前記衣服を着装している部位の前記衣服から受ける力の度合に応じた色を、前記衣服の色に対して加えた前記衣服を、前記アバタが着装している画像を生成する生成部と、
   前記画像を表示するよう制御する表示制御部と
   を備えるデータ処理装置。
2. 前記生成部は、
   元の衣服の色を反映しない場合、前記衣服のメッシュの各頂点の色を前記衣服から受ける力の度合に応じた色とした前記衣服を前記アバタが着装している前記画像を生成し、
   元の衣服の色を反映する場合、前記衣服から受ける力の度合に応じた色を前記衣服の色に対して加えた前記衣服を前記アバタが着装している前記画像を生成する、
   請求項１に記載のデータ処理装置。
3. 前記伸縮パラメータは、前記衣服が当該衣服を着装している部位に対して力を与え始める前記衣服のメッシュの辺の長さの長さ閾値を含む、請求項１又は２に記載のデータ処理装置。
4. 前記伸縮パラメータは、前記衣服が破れる当該衣服のメッシュの辺の長さの破れ閾値を含む、請求項１から３のいずれか一項に記載のデータ処理装置。
5. アバタのアバタデータを取得するアバタデータ取得部と、
   衣服の素材の伸縮に関連する伸縮パラメータを含む衣服データを取得する衣服データ取得部と、
   前記伸縮パラメータに基づいて特定した、前記アバタの衣服を着装している部位の前記衣服のきつさの度合に応じた色を、前記衣服の色に対して加えた前記衣服を、前記アバタが着装している画像を生成する生成部と、
   前記画像を表示するよう制御する表示制御部と
   を備えるデータ処理装置。
6. 前記生成部は、
   元の衣服の色を反映しない場合、前記衣服のメッシュの各頂点の色を前記衣服のきつさの度合に応じた色とした前記衣服を前記アバタが着装している前記画像を生成し、
   元の衣服の色を反映する場合、前記衣服のきつさの度合に応じた色を前記衣服の色に対して加えた前記衣服を前記アバタが着装している前記画像を生成する、
   請求項５に記載のデータ処理装置。
7. アバタのアバタデータを取得するアバタデータ取得部と、
   衣服の素材の伸縮に関連する伸縮パラメータを含む衣服データを取得する衣服データ取得部と、
   前記伸縮パラメータに基づいて特定した、前記アバタの前記衣服を着装している部位の前記衣服から受ける力の度合に応じた色を、前記衣服の色に対して加えた前記衣服を、前記アバタが着装している画像を生成する生成部と、
   前記アバタに実行させるアクションを選択するアクション選択部と、
   前記アクション選択部における前記アバタのアクションに基づいて前記衣服から受ける力の度合を反映した、前記アバタが前記衣服を着装している画像を表示するよう制御する表示制御部と
   を備えるデータ処理装置。
8. 前記生成部は、
   元の衣服の色を反映しない場合、前記衣服のメッシュの各頂点の色を前記衣服から受ける力の度合に応じた色とした前記衣服を前記アバタが着装している前記画像を生成し、
   元の衣服の色を反映する場合、前記衣服から受ける力の度合に応じた色を前記衣服の色に対して加えた前記衣服を前記アバタが着装している前記画像を生成する、
   請求項５に記載のデータ処理装置。
9. コンピュータを、請求項１から８のいずれか一項に記載のデータ処理装置として機能させるためのプログラム。

Images