JP2012194782A - Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation - Google Patents

Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation Download PDF

Info

Publication number
JP2012194782A
JP2012194782A JP2011058243A JP2011058243A JP2012194782A JP 2012194782 A JP2012194782 A JP 2012194782A JP 2011058243 A JP2011058243 A JP 2011058243A JP 2011058243 A JP2011058243 A JP 2011058243A JP 2012194782 A JP2012194782 A JP 2012194782A
Authority
JP
Japan
Prior art keywords
clothes
footwear
image data
processing means
accessories
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011058243A
Other languages
Japanese (ja)
Inventor
Akihiko Katsuno
明彦 勝野
Tomonori Todoroki
智則 轟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HANASAKE PICTURES Inc
Original Assignee
HANASAKE PICTURES Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HANASAKE PICTURES Inc filed Critical HANASAKE PICTURES Inc
Priority to JP2011058243A priority Critical patent/JP2012194782A/en
Publication of JP2012194782A publication Critical patent/JP2012194782A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To reduce the great labor, time and cost of creating image data of clothes, shoes, accessories, hats, etc. to be used in outfit simulations and allow image data of clothes, shoes, accessories, hats, etc. that is created for other purposes to be used in outfit simulations.SOLUTION: By processing image data of clothes, shoes, accessories, hats, etc. to identify the shapes of the clothes, shoes, accessories, hats, etc. in the image data, the categories of the items are determined and the items are associated with various template data. The various template data extracted in the association process is processed to be combined and the image data is processed at the same time, and then these data are processed to be combined. Then, the combined data and a model image for outfit simulations are combined by attaching the combined data to the model image.

Description

本発明は、インターネット等の通信網を介して、端末装置で操作可能な着せ替えシミュレーションシステムにおける着せ替えシミュレーション用サーバ、着せ替えシミュレーション用の衣服等の画像データの自動生成システム及び着せ替えシミュレーション用の衣服等の画像データの自動生成方法に関するものである。   The present invention relates to a dress-up simulation server in a dress-up simulation system that can be operated by a terminal device via a communication network such as the Internet, an automatic generation system for image data such as clothes for dress-up simulation, and a dress-up simulation The present invention relates to a method for automatically generating image data such as clothes.

近年、人物、ペット等のモデル画像をベースとして、好みの衣服、履物、アクセサリ、帽子等の画像やヘアスタイル等の画像を当該モデル画像に合成することにより、ファッションをシミュレーションすることが行われている。このシミュレーションを行うシステムでは、モデル画像に加えて、衣服、履物、アクセサリ、帽子等の画像やモデルのヘアスタイル等の画像を予め画像データとしてサーバに保存蓄積しているのが一般的である。   In recent years, based on model images of people, pets, etc., fashion has been simulated by combining images of favorite clothing, footwear, accessories, hats, etc., and images of hairstyles, etc. with the model images. Yes. In a system that performs this simulation, in addition to model images, images of clothes, footwear, accessories, hats, etc. and images of model hairstyles are generally stored and stored in advance as image data in a server.

しかしながら、衣服、履物、アクセサリ、帽子等は、季節毎に新製品が発売されるため、これらの写真を撮影し画像データとして保存蓄積するのは非常な手間と時間と費用を要している。先ず、写真から画像データを作製する場合、衣服、履物、アクセサリ、帽子等の形は、モデルの形と合致させなければ使用できないため、画像データとして使用する写真の撮影に手間と時間と費用がかかっていた。また、当該着せ替えシミュレーションは、インターネット等を介して提供される場合が多いため、シミュレーションで使用可能な画像データであり且つ、端末装置のディスプレイに表示された場合の見やすさ、見栄えの良さ等まで考慮した加工を行う必要性から、手間と時間と費用がかかっていた。   However, since new products such as clothes, footwear, accessories, and hats are released every season, it is very time-consuming, time-consuming and expensive to take these pictures and store them as image data. First, when creating image data from photos, the shape of clothes, footwear, accessories, hats, etc. can only be used if they match the shape of the model, so it takes time, money, and money to shoot photos used as image data. It was hanging. In addition, since the dress-up simulation is often provided via the Internet or the like, it is image data that can be used in the simulation, and even if it is displayed on the display of the terminal device, it is easy to see. Since it was necessary to perform processing in consideration, it took time and money.

このように、着せ替えシミュレーション用の衣服等の画像データの作製には非常な手間と時間と費用がかかるため、商品販売業者や製造メーカーが着せ替えシミュレーションのシステムを簡単に利用できるものではなかった。更に、現在発表されている衣服、履物、アクセサリ、帽子等の新製品の数は膨大であり、これら全ての商品を上述したような方法で加工し利用することは殆ど不可能に近いものであった。   As described above, since it takes a lot of time and money to create image data such as clothes for changing clothes simulation, it is not easy for merchandise distributors and manufacturers to use the changing clothes simulation system. . Furthermore, the number of new products such as clothes, footwear, accessories, and hats that have been announced at present is enormous, and it is almost impossible to process and use all of these products in the manner described above. It was.

一方、着せ替えシミュレーションの利用者である一般ユーザーは、広い範囲の衣服、履物、アクセサリ、帽子等の商品をシミュレーション出来れば、商品購入の参考になり非常に便利である。   On the other hand, if a general user who is a user of a dress-up simulation can simulate a wide range of products such as clothes, footwear, accessories, and hats, it will be useful for purchasing products.

そこで、本願出願人は、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減し、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とした本発明を開発した。   Therefore, the applicant of the present application has reduced the labor and time and cost of creating image data such as clothes, footwear, accessories, and hats for dress-up simulation, and has not been made for dress-up simulation originally. The present invention has been developed in which image data of accessories, hats, etc. can also be used for dress-up simulation.

従来技術としては、撮像手段を備えた端末装置により撮像した顔部分を含む人物画像の髪の色や髪型、衣服、眼鏡などのアクセサリーなどを変えることが可能なシミュレーション画像生成システム及び装置が提案されている(特許文献1)。   As a prior art, a simulation image generation system and apparatus capable of changing the hair color, hairstyle, clothing, glasses, and other accessories of a human image including a face portion imaged by a terminal device equipped with an imaging means have been proposed. (Patent Document 1).

特開2004−318591号公報JP 2004-318591 A

発明が解決しようとする問題点は、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減し、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とする点である。   The problem to be solved by the invention is that it reduces the labor, time and cost in creating image data for clothes, footwear, accessories, hats, etc. for dress-up simulation, and was not originally made for dress-up simulation. Image data such as clothes, footwear, accessories, and hats can also be used for the dress-up simulation.

本発明は、衣服、鞄、アクセサリ、履物等の画像データをモデル画像に合成表示させる着せ替えシミュレーションにおける着せ替えシミュレーション用サーバであって、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
を備えてなることを特徴とする。
The present invention is a dress-up simulation server in a dress-up simulation for composing and displaying image data of clothes, bags, accessories, footwear, etc. on a model image, and image data such as photographs including clothes, bags, accessories, footwear, etc. , Shape recognition processing means for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data such as photographs, and shapes of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means. The data is associated with the template data of the shape of clothes, bags, accessories, footwear, etc. stored and stored in advance, and the clothes, bags, accessories, footwear, etc. recognized by the shape recognition processing means are clothes, Category determination processing means for determining whether the product is included in any category such as bags, accessories, footwear, etc., and the category determination processing Within the categories of clothing, shoes, accessories, footwear, etc., judged by the means, the detail recognition processing means for recognizing the shape and size, color, material, etc. of these details, and the detail recognition processing means. The detail data such as the shape and size, color, and material of the details are associated with the template data such as the shape, size, and color of the details stored and stored in advance and recognized by the detail recognition processing means. Detail determination processing means for determining whether the shape and size, color, material, etc. of the detail matches or approximates any template data, and the clothing and bag determined by the category determination processing means and the detail determination processing means. , Template data of accessories, footwear, etc., and template data such as shapes and dimensions of these details, colors, materials, etc. Template data extraction processing means for processing, template data composition processing means for synthesizing the template data extracted by the template data extraction processing means, clothing from image data such as photographs including the clothes, bags, accessories, footwear, etc. Cutout processing means for cutting out only image data of a bag, accessory, footwear, etc., and image data of clothes, bags, accessories, footwear, etc. cut out by the cutout processing means are synthesized by the template data synthesis processing means. Morphing processing means for performing morphing processing to match the shape of the template data, and image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means are combined by the template data combining processing means. A first image data pasting processing means for pasting the image data, and image data of clothes, bags, accessories, footwear, etc. pasted by the first image data pasting processing means; Second image data pasting processing means for performing pasting processing;
It is characterized by comprising.

また、本発明は、通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成システムにおいて、端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理手段と、当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、当該第2の画像データ貼り付け処理手段により生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示手段と、を備えてなることを特徴とする。   The present invention also provides a terminal for an automatic generation system for image data such as clothes for simulation of dressing, comprising a server for simulation of dressing connected to a communication network and one or a plurality of terminal devices connectable to the communication network. When there is a simulation program delivery request from the device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device, and the dress-up simulation program When the user starts up on the terminal device and drags and drops the image data such as clothing photos onto the model image for simulation, the image data such as clothing, clothing, accessories, footwear, etc. Photo etc. Shape recognition processing means for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data, shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means, and storage and storage in advance The clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing means are associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. Category determination processing means for determining whether the category is included, and within the categories of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means, Detail recognition processing means for recognizing dimensions, colors, materials, etc., and the shape and size of these details recognized by the detail recognition processing means, color, Detailed data such as materials are associated with template data such as detailed shape and dimensions, colors, and materials stored and stored in advance, and the detailed shape and dimensions recognized by the detail recognition processing means, color, Detailed judgment processing means for judging whether or not the material etc. matches or approximates any template data, and templates of shapes such as clothes, bags, accessories, footwear, etc. judged by the category judgment processing means and the detailed judgment processing means Template data extraction processing means for extracting data and template data such as the shape and size of these details, colors, materials, etc., and template data composition processing means for synthesizing the template data extracted by the template data extraction processing means, Clothing from image data such as photographs including clothing, bags, accessories, footwear, etc. Crop processing means for cutting out only image data of heels, bags, accessories, footwear, etc., and image data of clothes, bags, accessories, footwear, etc. cut out by the cutout processing means are combined by the template data combining processing means Morphing processing means for performing a morphing process that matches the shape of the template data that has been processed, and image data of clothes, bags, accessories, footwear, etc. that have been morphed by the morphing processing means are synthesized by the template data synthesis processing means. First image data pasting processing means for pasting to template data, and image data of clothes, bags, accessories, footwear, etc. pasted by the first image data pasting processing means, Second image data to be pasted to the image And Ri attached processing unit, characterized by comprising and a dress-up model image display means for displaying as a model image of the terminal device the image data generated by the second image data pasting processing means.

また、本発明は、通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成方法であって、端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理ステップと、当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理ステップと、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理ステップと、当該カテゴリ判断処理ステップにより判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理ステップと、当該細部認識処理ステップにより認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理ステップにより認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理ステップと、当該カテゴリ判断処理ステップ及び細部判断処理ステップにより判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理ステップと、当該テンプレートデータ抽出処理ステップにより抽出されたテンプレートデータを合成するテンプレートデータ合成処理ステップと、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理ステップと、当該切り抜き処理ステップにより切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理ステップと、当該モーフィング処理ステップによりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理ステップと、当該第1の画像データ貼り付け処理ステップにより貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理ステップと、当該第2の画像データ貼り付け処理ステップにより生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示ステップと、を備えてなることを特徴とする。   Further, the present invention is an automatic generation method of image data such as clothes for simulation of dressing, comprising a dressing simulation server connected to a communication network and one or a plurality of terminal devices connectable to the communication network. When a simulation program delivery request is made from the terminal device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device, and the dress-up simulation. When the program is started on the terminal device and the user drags and drops the image data such as clothing photos onto the model image for the dress-up simulation, from the image data such as photos including clothing, bags, accessories, footwear, etc. , Such photos Shape recognition processing step for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data, shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing step, and storage and storage in advance The clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing step is associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. In the category determination processing step for determining whether the category is included, and in the categories of clothes, shoes, accessories, footwear, etc. determined by the category determination processing step, the shape of these details and Detail recognition processing step for recognizing dimensions, colors, materials, etc., and those recognized by the detail recognition processing step The detail data such as the shape and size of the details, color, and material are associated with the template data such as the shape and size, color, material, etc. of the detail stored and stored in advance, and are recognized by the detail recognition processing step. Detail determination processing step for determining whether the shape and size of detail, color, material, etc. match or approximate any template data, and the clothing, bag, and the like determined by the category determination processing step and the detail determination processing step. A template data extraction process step for extracting template data of the shape of accessories, footwear, etc. and template data such as the shape and dimensions of these details, colors, materials, etc., and the template data extracted by the template data extraction process step are combined. Template data composition processing step and the clothing A cutting process step for cutting out only image data such as clothes, bags, accessories, footwear, etc. from image data such as photographs including bags, accessories, footwear, etc., and clothes, bags, accessories cut out by the cutting processing step, Morphing processing step for performing morphing processing for matching image data of footwear etc. with the shape of the template data synthesized by the template data synthesizing processing step, clothing, bag, accessory, footwear morphed by the morphing processing step The first image data pasting process step for pasting image data such as the above onto the template data synthesized by the template data synthesizing process step and the first image data pasting process step. clothes A second image data pasting processing step for further pasting image data of the bag, accessory, footwear, etc. on the model image, and the image data generated by the second image data pasting processing step as a terminal device A model image display step for displaying as a model image.

本発明に係る着せ替えシミュレーション用サーバ、着せ替えシミュレーション用の衣服等の画像データの自動生成システム及び着せ替えシミュレーション用の衣服等の画像データの自動生成方法は、次の効果を奏するものである。
着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製にかかる非常な手間と時間と費用を削減することが出来る。また、、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とすることが出来る。従って、着せ替えシミュレーションの利用者である一般ユーザーの購買意欲を向上させることにもなる。
The dressing simulation server, the dressing simulation clothing image automatic generation system, and the dressing simulation clothing image automatic generation method according to the present invention have the following effects.
It is possible to reduce the labor, time and cost required for creating image data of clothes, footwear, accessories, hats, etc. for changing clothes simulation. In addition, image data such as clothes, footwear, accessories, and hats that are not originally created for the dress-up simulation can be used for the dress-up simulation. Therefore, the willingness to purchase of general users who are users of the dress-up simulation is also improved.

図1は、本実施例に係る着せ替えシミュレーション用の衣服等の画像データの自動生成システムの全体構成図である。FIG. 1 is an overall configuration diagram of a system for automatically generating image data such as clothes for changing clothes simulation according to the present embodiment. 図2は、スタートボタンが表示された着せ替えシミュレーションシ用ウィンドウを表す図である。FIG. 2 is a diagram illustrating a dress-up simulation window on which a start button is displayed. 図3は、着せ替えウィンドウが開かれた状態の着せ替えシミュレーションシ用ウィンドウを表す図である。FIG. 3 is a diagram illustrating a dress-up simulation window with the dress-up window opened. 図4は、着せ替えウィンドウが開かれた状態の着せ替えシミュレーションシ用ウィンドウを表す図である。FIG. 4 is a diagram illustrating a dress-up simulation window with the dress-up window opened. 図5は、着せ替えウィンドウのパターンを示した図であり、(1)は第1のウィンドウのみ表示された場合、(2)は第1及び第2のウィンドウが表示された場合、(3)は第1乃至第3のウィンドウが表示された場合を示す図である。FIG. 5 is a diagram showing a pattern of dress-up windows. (1) is when only the first window is displayed, (2) is when the first and second windows are displayed, (3) FIG. 4 is a diagram showing a case where first to third windows are displayed. 図6は、着せ替えシミュレーションシ用サーバでの処理フローを示した図である。FIG. 6 is a diagram showing a processing flow in the dress-up simulation server.

先ず、本実施例に係る着せ替えシミュレーション用衣服等データの自動生成システムの全体構成の概略を図1を用いて説明する。当該着せ替えシミュレーション用の衣服の等画像データの自動生成システム1は、図1に示すように、インターネット、専用回線、イントラネット等の通信網20に接続された着せ替えシミュレーションシ用サーバ10と、当該通信網20に接続可能なディスクトップコンピュータ、タブレット型コンピュータ、携帯端末等の1又は複数の端末装置30からなる。ここで、タブレット型コンピュータとは、平板状の外形で一方の面にディスプレイを備え、タッチパネル式などの表示/入力部、音声出力部等を有し、携帯可能なパーソナルコンピュータである。また、携帯端末としては、画像表示可能なディスプレイを備えたものであればよい。   First, the overall configuration of an automatic generation system for data such as clothes for simulation for changing clothes according to the present embodiment will be described with reference to FIG. As shown in FIG. 1, the automatic generation system 1 for clothing image for the dressing simulation includes a dressing simulation server 10 connected to a communication network 20 such as the Internet, a dedicated line, an intranet, and the like. It comprises one or a plurality of terminal devices 30 such as a desktop computer, a tablet computer, and a portable terminal that can be connected to the communication network 20. Here, the tablet computer is a portable personal computer that has a flat outer shape, a display on one surface, a display / input unit such as a touch panel, an audio output unit, and the like. Moreover, what is necessary is just to provide the display which can display an image as a portable terminal.

着せ替えシミュレーションシ用サーバ10は、図示しないが、通信部、CPU、データベース等から構成される。当該データベースには、衣服、鞄、アクセサリ、履物等の形状のみのテンプレート(ベース)となるデータが保存蓄積されている。具体的には、衣服であれば、上半身に着る服であるトップス(上衣)、下半身に着る服であるボトムス(下衣)のテンプレートデータが存在する。当該トップスのテンプレートデータには、カーディガン、カットソー、シャツ、ジャケット、セーター、チュニック等のテンプレートデータが含まれ、更にカーディガン、カットソー、シャツ、ジャケット、セーター、チュニック等はその形状等により更に細かく分類されたテンプレートデータが保存蓄積されている。当該ボトムスのテンプレートデータには、パンツ、ショートパンツ、スカート等のテンプレートデータが含まれ、更にパンツ、ショートパンツ、スカート等はその形状等により更に細かく分類されたテンプレートデータが保存蓄積されている。なお、ジャンプスーツ等の上下一体の衣服は、トップス(上衣)に分類するか、又は別の分類を設けても良い。   Although not shown, the dress-up simulation server 10 includes a communication unit, a CPU, a database, and the like. The database stores and accumulates data serving as a template (base) for only shapes such as clothes, bags, accessories, and footwear. Specifically, in the case of clothes, there is template data of tops (upper garments) that are clothes worn on the upper body and bottoms (lower garments) that are clothes worn on the lower body. The tops template data includes cardigans, cut-and-sews, shirts, jackets, sweaters, tunics and other template data, and cardigans, cut-and-sews, shirts, jackets, jackets, sweaters, tunics, etc. are further classified according to their shapes. Template data is stored and accumulated. The bottoms template data includes template data such as pants, short pants, and skirts. Further, template data that is further classified into pants, short pants, skirts, and the like according to the shape thereof is stored and accumulated. The upper and lower clothes such as jumpsuits may be classified as tops (upper garments), or another classification may be provided.

前述したテンプレートデータは衣服等の全体の形状のデータであるが、更に衣服等の丈、袖の長さ、襟の形、素材等を細かく分類したデータ、及び皺等の形状データもテンプレートデータとして保存蓄積されている。   The template data described above is data on the overall shape of clothing, etc., but further data on the length of clothing, sleeve length, collar shape, material, etc., and shape data on heels, etc. are also used as template data. Stored and accumulated.

<利用者の利用方法>
利用者が、端末装置から着せ替えシミュレーションシステムを採用しているホームページにアクセスすると、これを受けた着せ替えシミュレーション用サーバ10は、着せ替えシミュレーションシプログラムを端末装置30に配信する。次に、これを受けた端末装置30は、図2に示す様な着せ替えシミュレーション用ウィンドウ(以下、ベースウィンドウという。)を表示する。
<How to use>
When a user accesses a homepage that employs the dress-up simulation system from the terminal device, the dress-up simulation server 10 that has received this distributes the dress-up simulation system program to the terminal device 30. Next, the terminal device 30 receiving this displays a dress-up simulation window (hereinafter referred to as a base window) as shown in FIG.

当該ベースウィンドウ100は、図2乃至図4に示されるように、スタートボタン110、検索等によりセレクトした衣服を着たモデル・バッグ・アクセサリ等の種々のアイテム(商品)の画像を表示するアイテム(商品)画像表示欄120、アイテム(商品)をキーワード、ブランド、男性・女性・子供等のタイプ、カテゴリ、価格、カラー等種々の方法で検索可能な検索欄130、ニュース、新着情報等が表示されたヘッド部分140から構成されている。   As shown in FIGS. 2 to 4, the base window 100 is an item (image) for displaying images of various items (products) such as models, bags, accessories, and the like wearing clothes selected by a start button 110, search, and the like. Product) Image display column 120, Search column 130 that can be searched by various methods such as keyword, brand, type of male / female / child, category, price, color, etc., news, new arrival information, etc. are displayed. The head portion 140 is constituted.

利用者が、当該スタートボタン110をクリックすると、図3〜図5に表示される着せ替えウィンドウ200が、ベースウィンドウ100上に別個のウィンドウで表示される。   When the user clicks the start button 110, the dress-up window 200 displayed in FIGS. 3 to 5 is displayed as a separate window on the base window 100.

当該着せ替えウィンドウ200は、複数のパターンで表示可能であるが、主要な3パターンを図5(1)乃至(3)に示している。当該着せ替えウィンドウ200は、第1の着せ替えウィンドウ210、第2の着せ替えウィンドウ220、第3の着せ替えウィンドウ230等から構成され、図5(1)には第一の着せ替えウィンドウ210のみが表示され、図5(2)には第1及び第2の着せ替えウィンドウ210,220が表示され、図5(3)には第1乃至第3のウィンドウ210,220,230が表示されている。   Although the dress-up window 200 can be displayed in a plurality of patterns, three main patterns are shown in FIGS. The dress-up window 200 includes a first dress-up window 210, a second dress-up window 220, a third dress-up window 230, and the like, and only the first dress-up window 210 is shown in FIG. 5 (2), the first and second dress-up windows 210, 220 are displayed, and FIG. 5 (3), the first to third windows 210, 220, 230 are displayed. Yes.

第1のウィンドウ210には、着せ替えシミュレーションを行うアバター(人物のモデル画像)が表示されるアバター表示部211、アバター(人物のモデル画像)が装着しているアイテム(商品)を表示する装着アイテム表示部212、第2の着せ替えウィンドウ220を開くための拡張ボタン213が表示されている。また、アバター(人物のモデル画像)を男性(MAN)又は女性(WOMAN)に切り替えるアバター切り替えボタン214、アバター(人物のモデル画像)の衣服等の装着をリセットするリセットボタン215、アバター(人物のモデル画像)の衣服等の装着状態をセーブするセーブボタン216が表示されている。   In the first window 210, an avatar display unit 211 on which an avatar (person model image) for performing a dress-up simulation is displayed, and an item on which an avatar (person model image) is worn (product) are displayed. An extension button 213 for opening the display unit 212 and the second dress-up window 220 is displayed. Also, an avatar switching button 214 for switching an avatar (a person model image) to a man (MAN) or a woman (WOMAN), a reset button 215 for resetting the avatar (a person model image) such as clothes, an avatar (a person model) A save button 216 for saving the wearing state of the image) is displayed.

第2の着せ替えウィンドウ220には、商品を検索するアイテム検索ボタン221、第2の着せ替えウィンドウ220を閉じて第1の着せ替えウィンドウ210のみを表示させる縮小ボタン222、着せ替えウィンドウ200を閉じるためのクローズボタン223、アイテム(商品)のコーディネートを行うアイテムコーデとトータルコーディネートを参照可能なアイテムコーデの2つのボタンからなるコーディネートボタン224、第2の着せ替えウィンドウ220に選択可能なアイテム(商品)やアバターモデルや背景を表示させる選択ボタン225、当該選択ボタン225により選択されたアイテム(商品)やアバター(人物のモデル画像)や背景の一覧を表示する表示部226、お気に入りのアイテム(商品)を表示するお気に入りアイテム表示部227が表示されている。   In the second dressing window 220, an item search button 221 for searching for a product, a reduction button 222 for closing the second dressing window 220 and displaying only the first dressing window 210, and a dressing window 200 are closed. Close button 223, coordinate button 224 consisting of two buttons, an item coordinate that coordinates an item (product) and an item coordinate that can refer to the total coordinate, and an item (product) that can be selected in the second dress-up window 220 And a selection button 225 for displaying an avatar model and background, an item (product) selected by the selection button 225, a display unit 226 for displaying a list of avatars (person model images) and backgrounds, and a favorite item (product). Favorites to display Item display unit 227 is displayed.

第3の着せ替えウィンドウ230には、第2の着せ替えウィンドウ220のアイテム検索ボタン221をクリックした場合に表示されるウィンドウであり、検索部分231、検索結果が複数表示される検索結果表示部分232、第3の着せ替えウィンドウ230を閉じるためのクローズボタン233が表示されている。   The third dress-up window 230 is a window that is displayed when the item search button 221 of the second dress-up window 220 is clicked. A search part 231 and a search result display part 232 in which a plurality of search results are displayed. A close button 233 for closing the third dressing window 230 is displayed.

利用者は、ベースウィンドウ100の検索欄130で所望のアイテム(商品)を検索し、アイテム画像表示欄120に表示させる。次に、ベースウィンドウ100に表示されたスタートボタン110をクリックする。すると、第1及び第2の着せ替えウィンドウ210,220がベースウィンドウ100上に表示される。なお、図3及び図4は、第1乃至第3の着せ替えウィンドウ210,220,230が開かれている状態である。利用者が、ベースウィンドウ100のアイテム(商品)画像表示欄120又は表示部226に表示されている洋服等のアイテム(商品)を、着せ替えウィンドウ200のアバター表示部211に表示されたアバター(人物のモデル画像)にドラッグアンドドロップすると、アバター(人物のモデル画像)に当該洋服等のアイテム(商品)が装着される。この際、アイテム(商品)画像表示欄120からドラッグアンドドロップしたアイテム(商品)の場合には、当当該アイテム(商品)の画像が表示部226に表示されるアイテム(商品)の一覧に追加される。アバター(人物のモデル画像)から洋服等のアイテム(商品)を外したい場合には、当該洋服等のアイテムをドラッグアンドドロップにより外すことが出来る。利用者は、この作業を行い所望のコーディネイトを作製することができる。なお、表示部226は、現在選んでいるアイテム(商品)、最近選んだアイテム(商品)、お勧めのアイテム(商品)、新着アイテム(商品)、アイテム(商品)のランキング等の別で表示される。これにより利用者は、商品を識別し易くなるため、アバター(人物のモデル画像)へのコーディネートが行い易くなる。   The user searches for a desired item (product) in the search field 130 of the base window 100 and displays it in the item image display field 120. Next, the start button 110 displayed on the base window 100 is clicked. Then, the first and second dress-up windows 210 and 220 are displayed on the base window 100. 3 and 4 show a state in which the first to third dressing windows 210, 220, and 230 are opened. A user displays an item (product) such as clothes displayed on the item (product) image display field 120 or the display unit 226 of the base window 100 and an avatar (person) displayed on the avatar display unit 211 of the dress-up window 200 When dragging and dropping onto the model image), an item (product) such as the clothes is attached to the avatar (a model image of the person). At this time, in the case of an item (product) dragged and dropped from the item (product) image display field 120, the image of the item (product) is added to the list of items (products) displayed on the display unit 226. The When an item (product) such as clothes is to be removed from an avatar (a person's model image), the item such as clothes can be removed by drag and drop. The user can create a desired coordination by performing this operation. The display unit 226 is displayed separately for the item (product) currently selected, the item (product) selected recently, the recommended item (product), the new item (product), the ranking of the item (product), and the like. The This makes it easier for the user to identify the product, and thus facilitates coordination with the avatar (person's model image).

また、利用者が、アバター(人物のモデル画像)が装着しているアイテム(商品)にカーソルを合わせると、図4に示す様な当該アイテム(商品)の色や模様違いのアイテム(商品)一覧を表示する小ウィンドウ300が表示される。利用者が、このアイテム(商品)一覧から所望の色や模様違いのアイテム(商品)をクリックするとアバター(人物のモデル画像)に装着される。   Further, when the user moves the cursor to an item (product) worn by an avatar (a person's model image), a list of items (products) with different colors and patterns of the item (product) as shown in FIG. A small window 300 for displaying is displayed. When the user clicks an item (product) having a desired color or a different pattern from this item (product) list, the user is attached to an avatar (a person's model image).

<着せ替えシミュレーションシ用サーバでの処理>
利用者が、ベースウィンドウ100のアイテム(商品)画像表示部120にリストアップされたアイテム(商品)から所望のトップス等の画像データを着せ替えウィンドウ200内のアバター表示部211に表示されたアバター(人物のモデル画像)にドラッグアンドドロップした場合に、次の処理がサーバで行われる。
先ず、ドラッグされたトップス等の画像データの解析が行われる。
当該トップス等の画像データから、当該トップス等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理が行われる(S10)。次に、この形状認識処理により認識された形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理により認識された形状データが、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理が行われる(S20)。
<Processing on the dress-up simulation server>
A user displays image data such as desired tops from an item (product) listed in the item (product) image display unit 120 of the base window 100, and an avatar (displayed on the avatar display unit 211 in the dressing window 200). When dragging and dropping onto a human model image), the following processing is performed on the server.
First, image data such as dragged tops is analyzed.
Shape recognition processing for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data of the tops is performed from the image data of the tops (S10). Next, the shape data recognized by the shape recognition process is associated with the template data of the shape of clothes, bags, accessories, footwear, etc. stored and stored in advance, and the shape recognized by the shape recognition process A category determination process for determining whether the data is included in any category such as clothes, bags, accessories, footwear, etc. is performed (S20).

当該カテゴリ判断処理の結果、当該トップス等の画像データが、例えば、トップスの画像データであると判断処理されると、トップスである洋服の細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材等を認識する細部認識処理が行われる(S30)。そして、当該細部認識処理により認識されたこれらの細部データと、予め保存蓄積されている細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材(生地等)等のテンプレートデータとの対応付けを行い、当該細部認識処理により認識された細部データがいずれのテンプレートデータに合致するか否かを判断する細部判断処理が行われる(S40)。この際、合致するテンプレートデータが存在しない場合には、最も近似するテンプレートデータを判断する細部判断処理が行われる(S40)。なお、当該写真の画像データから抽出されたデータは、新たなテンプレートデータとして保存蓄積される。このように新たなテンプレートデータが保存蓄積されることにより、カテゴリ判断処理、細部認識処理、細部判断処理の精度が向上する。   As a result of the category determination processing, if the image data of the tops or the like is determined to be, for example, tops image data, the shape and size of the details of the clothes that are the tops (shape type, clothes length, sleeves) The detail recognition processing for recognizing the color, material, etc. is performed (S30). And these details data recognized by the detail recognition process, and the shape and dimensions of the details stored and stored in advance (shape type, clothes length, sleeve length, collar shape, etc.), color, material A detail determination process is performed for associating with template data such as (fabric etc.) and determining which template data matches the detail data recognized by the detail recognition process (S40). At this time, if there is no matching template data, a detailed determination process for determining the most approximate template data is performed (S40). Note that data extracted from the image data of the photograph is stored and accumulated as new template data. Thus, by storing and storing new template data, the accuracy of the category determination process, the detail recognition process, and the detail determination process is improved.

次に、当該カテゴリ判断処理及び細部判断処理により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材等のテンプレートデータの抽出処理が行われる(S50)。そして、当該テンプレートデータ抽出処理により抽出された各々のテンプレートデータを合成するテンプレートデータ合成処理が行われる(S60)。   Next, template data of the shape of clothes, bags, accessories, footwear, etc. determined by the category determination process and the detail determination process, and the shape and dimensions of these details (shape type, clothes length, sleeve length, Template data such as collar shape, color, material, etc. is extracted (S50). Then, a template data synthesis process for synthesizing the template data extracted by the template data extraction process is performed (S60).

次に、トップスの画像データと、テンプレートデータに保存蓄積されている皺等のデータの対応付けを行い、当該画像データに表示されたトップスに皺等がよっていると判断された場合(テンプレートデータと合致又は近似していると判断された場合)には、皺等を薄くするための画像調整処理が行われる(S70)。また、画像データの色相、明度及び彩度を統一させるため、色相、明度及び彩度を調整するための画像調整処理が行われる(S70)。当該画像データに表示されたトップス等に光が当たる方向を一定にするための画像調整処理も行われる(S70)。当該画像データにグラデーションが生じている場合には、色を均すための画像調整処理が行われる(S70)。更に、画像データ中の衣服等の一部が欠けている場合(画像に写っていない場合)又はその他修正が必要な場合には、当該画像データに表示されている衣服等の他の部分をコピーし当てはめる画像調整処理が行われる(S70)。   Next, the tops image data is associated with the data such as wrinkles stored and accumulated in the template data, and it is determined that the tops displayed in the image data are wrinkled (template data and If it is determined that they match or approximate), image adjustment processing for thinning wrinkles or the like is performed (S70). Further, in order to unify the hue, brightness, and saturation of the image data, an image adjustment process for adjusting the hue, brightness, and saturation is performed (S70). Image adjustment processing is also performed to make the direction in which light hits the tops displayed in the image data constant (S70). When gradation is generated in the image data, an image adjustment process for leveling the color is performed (S70). In addition, if some of the clothing, etc. in the image data is missing (if it is not shown in the image) or if other modifications are required, copy other parts of the clothing, etc. displayed in the image data. An image adjustment process to be applied is performed (S70).

以上の画像調整処理後に、画像データのトップスの部分のみを切り抜く衣服等の画像データの切り抜き処理が行われる(S80)。当該切り抜き処理されたトップスの画像データは、テンプレートデータの形状(シミュレータアイテムの形状)に合致させるため、モーフィング処理が行われる(S90)。当該モーフィング処理の後の画像データ(モーフィング処理データ)を、既に抽出され合成処理されていたトップスのテンプレートデータへ貼り付ける第1の合成処理が行われる(S100)。この第1の貼り付け合成処理後のトップスの画像データを、モデル画像へ貼り付ける第2の合成処理が行われる(S110)。   After the image adjustment process described above, a process for cutting out image data such as clothes for cutting out only the tops of the image data is performed (S80). The tops image data subjected to the clipping process is subjected to a morphing process in order to match the shape of the template data (the shape of the simulator item) (S90). A first synthesis process is performed in which the image data (morphing process data) after the morphing process is pasted on tops template data that has already been extracted and synthesized (S100). A second synthesis process for pasting the top image data after the first pasting and synthesizing process to the model image is performed (S110).

<利用者が写真の画像データを送信する場合>
本実施例に係る着せ替えシミュレーション用の衣服等の画像データの自動生成システムでは、利用者が自己の所有する洋服等のアイテムを撮影し、それをアイテムの一つとしてコーディネイトすることも可能である。以下に説明する。
先ず、利用者が、端末装置30から、洋服、鞄、アクセサリ、履物等の写真の画像データを着せ替えシミュレーション用サーバ10に送信する。送信する際に、利用者は、洋服のカテゴリを選択する。このカテゴリは、パンツ、トップス、シューズ、バッグ等である。このカテゴリの選択は行わないようにしても良いが、シミュレーション用サーバ10での画像データ処理の精度を上げるために、カテゴリの選択を行うようにするのが好ましい。
着せ替えシミュレーションシ用サーバ10が当該写真の画像データ及びカテゴリデータを受信する。この受信後、着せ替えシミュレーションシ用サーバ10では、利用者から送信された画像データがベースウィンドウ100のアイテム(商品)画像表示欄120にリストアップされる。その後の着せ替えシミュレーションでは、上記に説明したと同様に処理される。
また、ベースウィンドウ100のアイテム(商品)画像表示欄120にリストアップせずに、直接着せ替えウィンドウ200内の表示部226に表示されるアイテムの一覧に加えることも可能である。その場合には、上記に説明した着せ替えシミュレーションシ用サーバでの処理が行われる。
なお、これらの画像加工処理がサーバで処理できない場合には、再度新しい写真の画像データを送信して欲しい旨を、端末装置30に通知し、再度送信を要求する。
<When users send image data of photos>
In the automatic generation system for image data such as clothes for changing clothes according to the present embodiment, it is also possible for the user to photograph an item such as clothes owned by the user and coordinate it as one of the items. . This will be described below.
First, a user transmits image data of a photograph of clothes, bags, accessories, footwear, and the like from the terminal device 30 to the dress-up simulation server 10. At the time of transmission, the user selects a clothing category. This category includes pants, tops, shoes, bags and the like. This category may not be selected, but it is preferable to select a category in order to increase the accuracy of image data processing in the simulation server 10.
The dress-up simulation server 10 receives image data and category data of the photo. After this reception, the dress-up simulation server 10 lists the image data transmitted from the user in the item (product) image display field 120 of the base window 100. In the subsequent dressing simulation, the same processing as described above is performed.
Further, without listing in the item (product) image display field 120 of the base window 100, it is also possible to add to the list of items displayed on the display unit 226 in the dress-up window 200 directly. In that case, the processing in the dress-up simulation server described above is performed.
If these image processing processes cannot be performed by the server, the terminal apparatus 30 is notified that the image data of a new photo is desired to be transmitted again, and the transmission is requested again.

以上説明した本実施例に係る着せ替えシミュレーション用の衣服等の画像データの自動生成システムにより、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減することが出来る。また、、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とすることが出来る。更に、利用者が自己が所有するアイテムを着せ替えシミュレーションのアイテムに加えてコーディネートをシミュレーションすることも可能となる。従って、着せ替えシミュレーションの利用者である一般ユーザーの購買意欲を向上させることにもなる。   The automatic generation system for image data such as clothes for dressing simulation according to the present embodiment described above, a great amount of labor, time and cost in creating image data such as clothes, footwear, accessories, and hats for dressing simulation. Can be reduced. In addition, image data such as clothes, footwear, accessories, and hats that are not originally created for the dress-up simulation can be used for the dress-up simulation. Furthermore, it is possible to simulate the coordination in addition to the items of the dress-up simulation by the user. Therefore, the willingness to purchase of general users who are users of the dress-up simulation is also improved.

本実施例では、アバター(人物のモデル画像)について説明したが、対象となるのは犬や猫等のペットの画像でも良く、その場合には当該ペットの形状にあった衣服、アクセサリ、履物等のテンプレートデータを着せ替えシミュレーション用サーバに保存蓄積することにより着せ替えシミュレーションを行うことが可能である。   In this embodiment, an avatar (a model image of a person) has been described. However, an object may be an image of a pet such as a dog or a cat. In that case, clothes, accessories, footwear, etc. that match the shape of the pet. It is possible to perform a dress-up simulation by storing and storing the template data in the dress-up simulation server.

10 コンテンツ配信サーバ
20 通信網
30 端末装置
100 ベースウィンドウ
110 スタートボタン
120 アイテム(商品)画像表示欄
130 検索欄
140 ヘッド部分
200 着せ替えウィンドウ
210 第1の着せ替えウィンドウ
211 アバター表示部
212 装着アイテム表示部
213 拡張ボタン
214 アバター切り替えボタン
215 リセットボタン
216 セーブボタン
220 第2の着せ替えウィンドウ
221 アイテム検索ボタン
222 縮小ボタン
223 クローズボタン
224 コーディネイトボタン
225 選択ボタン
226 表示部
227 お気に入りアイテム表示部
230 第3の着せ替えウィンドウ
231 検索部分
232 検索結果表示部分
233 クローズボタン
300 小ウィンドウ
DESCRIPTION OF SYMBOLS 10 Content distribution server 20 Communication network 30 Terminal device 100 Base window 110 Start button 120 Item (product) image display column 130 Search column 140 Head part 200 Dress-up window 210 First dress-up window 211 Avatar display unit 212 Wearing item display unit 213 Expansion button 214 Avatar switching button 215 Reset button 216 Save button 220 Second dress-up window 221 Item search button 222 Reduce button 223 Close button 224 Coordinate button 225 Selection button 226 Display unit 227 Favorite item display unit 230 Third dress-up Window 231 Search part 232 Search result display part 233 Close button 300 Small window

Claims (3)

衣服、鞄、アクセサリ、履物等の画像データをモデル画像に合成表示させる着せ替えシミュレーションにおける着せ替えシミュレーション用サーバであって、
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、
当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、
当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、
当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、
当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、
当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、
当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、
当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、
当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
を備えてなることを特徴とする着せ替えシミュレーションシ用サーバ。
A dress-up simulation server in a dress-up simulation for combining and displaying image data of clothes, bags, accessories, footwear, etc. on a model image,
Shape recognition processing means for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data, such as photographs, from images including clothes, bags, accessories, footwear, etc.,
Corresponding the shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means with the template data of the shapes of clothes, heels, accessories, footwear, etc. stored in advance, Category determination processing means for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing means are included in any category of clothes, bag, accessory, footwear, etc .;
Detail recognition processing means for recognizing the shape and size, color, material, etc. of these details in the category of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means;
The detailed data such as the shape and size, color, and material of the details recognized by the detail recognition processing means are associated with the template data such as the shape and size of the details stored in advance and the color, Detail determination processing means for determining whether the shape and size, color, material, etc. of the details recognized by the detail recognition processing means match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, bags, accessories, footwear, and the like determined by the category determination processing means and detail determination processing means, and template data such as the shapes and dimensions of these details, colors, and materials Processing means;
Template data synthesis processing means for synthesizing the template data extracted by the template data extraction processing means;
Cropping processing means for cropping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing means for performing morphing processing for matching image data of clothing, heels, accessories, footwear, etc. clipped by the clipping processing means with the shape of the template data synthesized by the template data synthesis processing means;
First image data pasting processing means for pasting image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means to template data synthesized by the template data synthesizing means;
Second image data pasting processing means for further pasting image data of clothes, heels, accessories, footwear, etc. pasted by the first image data pasting processing means on the model image;
A dress-up simulation server characterized by comprising:
通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成システムにおいて、
端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理手段と、
当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、
当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、
当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、
当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、
当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、
当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、
当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、
当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、
当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
当該第2の画像データ貼り付け処理手段により生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示手段と、
を備えてなることを特徴とする着せ替えシミュレーション用の衣服等の画像データの自動生成システム。
In a system for automatically generating image data such as clothes for simulation of dress-up comprising a server for dress-up simulation connected to a communication network and one or a plurality of terminal devices connectable to the communication network,
When there is a simulation program delivery request from the terminal device to the dress-up simulation server, the dress-up simulation program delivery processing means for the dress-up simulation server to deliver the dress-up simulation program to the terminal device;
When the dress-up simulation program is started on the terminal device and the user drags and drops image data such as a photograph of clothes onto a model image for dress-up simulation,
Shape recognition processing means for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data, such as photographs, from images including clothes, bags, accessories, footwear, etc.,
Corresponding the shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means with the template data of the shapes of clothes, heels, accessories, footwear, etc. stored in advance, Category determination processing means for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing means are included in any category of clothes, bag, accessory, footwear, etc .;
Detail recognition processing means for recognizing the shape and size, color, material, etc. of these details in the category of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means;
Correspondence between the detailed data such as the shape and size, color, material, etc. of these details recognized by the detail recognition processing means and the template data such as the shape shape, size, color, material, etc. stored in advance. Detail determination processing means for determining whether the shape and size, color, material, etc. of the details recognized by the detail recognition processing means match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, bags, accessories, footwear, and the like determined by the category determination processing means and detail determination processing means, and template data such as the shapes and dimensions of these details, colors, and materials Processing means;
Template data synthesis processing means for synthesizing the template data extracted by the template data extraction processing means;
Cropping processing means for cropping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing means for performing morphing processing for matching image data of clothing, heels, accessories, footwear, etc. clipped by the clipping processing means with the shape of the template data synthesized by the template data synthesis processing means;
First image data pasting processing means for pasting image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means to template data synthesized by the template data synthesizing means;
Second image data pasting processing means for further pasting image data of clothes, heels, accessories, footwear, etc. pasted by the first image data pasting processing means on the model image;
Dress-up model image display means for displaying the image data generated by the second image data pasting processing means as a model image of the terminal device;
A system for automatically generating image data such as clothes for simulation of changing clothes, comprising:
通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成方法であって、
端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理ステップと、
当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理ステップと、
当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理ステップと、
当該カテゴリ判断処理ステップにより判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理ステップと、
当該細部認識処理ステップにより認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理ステップにより認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理ステップと、
当該カテゴリ判断処理ステップ及び細部判断処理ステップにより判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理ステップと、
当該テンプレートデータ抽出処理ステップにより抽出されたテンプレートデータを合成するテンプレートデータ合成処理ステップと、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理ステップと、
当該切り抜き処理ステップにより切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理ステップと、
当該モーフィング処理ステップによりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理ステップと、
当該第1の画像データ貼り付け処理ステップにより貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理ステップと、
当該第2の画像データ貼り付け処理ステップにより生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示ステップと、
を備えてなることを特徴とする着せ替えシミュレーション用の衣服等の画像データの自動生成方法。
A method for automatically generating image data such as clothes for simulation for dressing comprising a server for dressing simulation connected to a communication network and one or a plurality of terminal devices connectable to the communication network,
When there is a simulation program delivery request from the terminal device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device;
When the dress-up simulation program is started on the terminal device and the user drags and drops image data such as a photograph of clothes onto a model image for dress-up simulation,
A shape recognition processing step for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data of the photos, etc. from image data, such as photos including clothes, bags, accessories, footwear, etc .;
The shape data of the clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing step is associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. stored and stored in advance, and the shape A category determination processing step for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing step are included in any category of clothing, bag, accessory, footwear, etc .;
In the category of clothing, shoes, accessories, footwear, etc. determined by the category determination processing step, further, a detail recognition processing step for recognizing the shape and size, color, material, etc. of these details;
Correspondence between detailed data such as shape and size, color, material, etc. of these details recognized by the detail recognition processing step and template data such as detailed shape, size, color, material, etc. stored and stored in advance. A detail determination processing step for determining whether the shape and size of the detail, the color, the material, and the like recognized by the detail recognition processing step match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, heels, accessories, footwear, etc. determined by the category determination processing step and detail determination processing step, and template data such as shapes and dimensions, colors, materials, etc. of these details Processing steps;
A template data synthesis processing step for synthesizing the template data extracted by the template data extraction processing step;
A clipping process step of clipping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing step for performing morphing processing for matching the image data of clothes, heels, accessories, footwear, etc. cut out by the cutting processing step with the shape of the template data combined by the template data combining processing step;
A first image data pasting process step for pasting image data of clothes, bags, accessories, footwear, etc. morphed in the morphing process step to the template data synthesized in the template data synthesis process step;
A second image data pasting process step for further pasting the image data of the clothing, bag, accessory, footwear, etc. pasted by the first image data pasting processing step on the model image;
Dress-up model image display step for displaying the image data generated by the second image data pasting processing step as a model image of the terminal device;
A method for automatically generating image data of clothes for simulation of dressing, characterized by comprising:
JP2011058243A 2011-03-16 2011-03-16 Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation Withdrawn JP2012194782A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011058243A JP2012194782A (en) 2011-03-16 2011-03-16 Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011058243A JP2012194782A (en) 2011-03-16 2011-03-16 Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation

Publications (1)

Publication Number Publication Date
JP2012194782A true JP2012194782A (en) 2012-10-11

Family

ID=47086614

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011058243A Withdrawn JP2012194782A (en) 2011-03-16 2011-03-16 Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation

Country Status (1)

Country Link
JP (1) JP2012194782A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018029969A (en) * 2016-08-26 2018-03-01 株式会社コロプラ Information processing method, and program for allowing computer to execute the information processing method
US10878229B2 (en) 2016-05-26 2020-12-29 Rakuten, Inc. Shape discrimination device, shape discrimination method and shape discrimination program
JP2023001185A (en) * 2017-06-16 2023-01-04 マーカブル インコーポレイテッド Image processing system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10878229B2 (en) 2016-05-26 2020-12-29 Rakuten, Inc. Shape discrimination device, shape discrimination method and shape discrimination program
JP2018029969A (en) * 2016-08-26 2018-03-01 株式会社コロプラ Information processing method, and program for allowing computer to execute the information processing method
JP2023001185A (en) * 2017-06-16 2023-01-04 マーカブル インコーポレイテッド Image processing system
JP7493829B2 (en) 2017-06-16 2024-06-03 マーカブル インコーポレイテッド Image Processing System

Similar Documents

Publication Publication Date Title
US11232512B2 (en) Method and device for combining an avatar image with a portion of a user&#39;s image
CN110021061B (en) Collocation model construction method, clothing recommendation method, device, medium and terminal
CN111681070B (en) Online commodity purchasing method, purchasing device, storage device and purchasing equipment
US10963939B1 (en) Computer vision based style profiles
CN106462979B (en) Fashion preference analysis
US20240202786A1 (en) Image/text-based design creating device and method
US20200342320A1 (en) Non-binary gender filter
WO2018165239A1 (en) Methods and systems for customized garment and outfit design generation
CN107924532A (en) Method and apparatus for the description for providing dress form
JP6242768B2 (en) Virtual try-on device, virtual try-on method, and program
JP6320237B2 (en) Virtual try-on device, virtual try-on method, and program
WO2019120031A1 (en) Method, device, storage medium, and mobile terminal for making recommendation about clothing matching
JP6338966B2 (en) Virtual try-on device, virtual try-on system, virtual try-on method, and program
KR102115574B1 (en) Method, device and program for customizing object design
JP4935275B2 (en) Information providing system and information providing method, etc.
GB2501473A (en) Image based clothing search and virtual fitting
JP2012194782A (en) Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation
CN110084675A (en) Commodity selling method, the network terminal and the device with store function on a kind of line
CN110084676A (en) Method of Commodity Recommendation, the network terminal and the device with store function on a kind of line
JP2003186965A (en) Apparel selection supporting system and method
JP2015179431A (en) Retrieval device, retrieval method, and program
WO2022081745A1 (en) Real-time rendering of 3d wearable articles on human bodies for camera-supported computing devices
KR20200122179A (en) apparatus and method for generating interior designs based on images and text
KR20200122177A (en) apparatus and method for generating game contents components designs based on images and text
KR20200122178A (en) apparatus and method for generating movie contents components designs based on images and text

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20140603