JP2012194782A - Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation - Google Patents
Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation Download PDFInfo
- Publication number
- JP2012194782A JP2012194782A JP2011058243A JP2011058243A JP2012194782A JP 2012194782 A JP2012194782 A JP 2012194782A JP 2011058243 A JP2011058243 A JP 2011058243A JP 2011058243 A JP2011058243 A JP 2011058243A JP 2012194782 A JP2012194782 A JP 2012194782A
- Authority
- JP
- Japan
- Prior art keywords
- clothes
- footwear
- image data
- processing means
- accessories
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
本発明は、インターネット等の通信網を介して、端末装置で操作可能な着せ替えシミュレーションシステムにおける着せ替えシミュレーション用サーバ、着せ替えシミュレーション用の衣服等の画像データの自動生成システム及び着せ替えシミュレーション用の衣服等の画像データの自動生成方法に関するものである。 The present invention relates to a dress-up simulation server in a dress-up simulation system that can be operated by a terminal device via a communication network such as the Internet, an automatic generation system for image data such as clothes for dress-up simulation, and a dress-up simulation The present invention relates to a method for automatically generating image data such as clothes.
近年、人物、ペット等のモデル画像をベースとして、好みの衣服、履物、アクセサリ、帽子等の画像やヘアスタイル等の画像を当該モデル画像に合成することにより、ファッションをシミュレーションすることが行われている。このシミュレーションを行うシステムでは、モデル画像に加えて、衣服、履物、アクセサリ、帽子等の画像やモデルのヘアスタイル等の画像を予め画像データとしてサーバに保存蓄積しているのが一般的である。 In recent years, based on model images of people, pets, etc., fashion has been simulated by combining images of favorite clothing, footwear, accessories, hats, etc., and images of hairstyles, etc. with the model images. Yes. In a system that performs this simulation, in addition to model images, images of clothes, footwear, accessories, hats, etc. and images of model hairstyles are generally stored and stored in advance as image data in a server.
しかしながら、衣服、履物、アクセサリ、帽子等は、季節毎に新製品が発売されるため、これらの写真を撮影し画像データとして保存蓄積するのは非常な手間と時間と費用を要している。先ず、写真から画像データを作製する場合、衣服、履物、アクセサリ、帽子等の形は、モデルの形と合致させなければ使用できないため、画像データとして使用する写真の撮影に手間と時間と費用がかかっていた。また、当該着せ替えシミュレーションは、インターネット等を介して提供される場合が多いため、シミュレーションで使用可能な画像データであり且つ、端末装置のディスプレイに表示された場合の見やすさ、見栄えの良さ等まで考慮した加工を行う必要性から、手間と時間と費用がかかっていた。 However, since new products such as clothes, footwear, accessories, and hats are released every season, it is very time-consuming, time-consuming and expensive to take these pictures and store them as image data. First, when creating image data from photos, the shape of clothes, footwear, accessories, hats, etc. can only be used if they match the shape of the model, so it takes time, money, and money to shoot photos used as image data. It was hanging. In addition, since the dress-up simulation is often provided via the Internet or the like, it is image data that can be used in the simulation, and even if it is displayed on the display of the terminal device, it is easy to see. Since it was necessary to perform processing in consideration, it took time and money.
このように、着せ替えシミュレーション用の衣服等の画像データの作製には非常な手間と時間と費用がかかるため、商品販売業者や製造メーカーが着せ替えシミュレーションのシステムを簡単に利用できるものではなかった。更に、現在発表されている衣服、履物、アクセサリ、帽子等の新製品の数は膨大であり、これら全ての商品を上述したような方法で加工し利用することは殆ど不可能に近いものであった。 As described above, since it takes a lot of time and money to create image data such as clothes for changing clothes simulation, it is not easy for merchandise distributors and manufacturers to use the changing clothes simulation system. . Furthermore, the number of new products such as clothes, footwear, accessories, and hats that have been announced at present is enormous, and it is almost impossible to process and use all of these products in the manner described above. It was.
一方、着せ替えシミュレーションの利用者である一般ユーザーは、広い範囲の衣服、履物、アクセサリ、帽子等の商品をシミュレーション出来れば、商品購入の参考になり非常に便利である。 On the other hand, if a general user who is a user of a dress-up simulation can simulate a wide range of products such as clothes, footwear, accessories, and hats, it will be useful for purchasing products.
そこで、本願出願人は、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減し、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とした本発明を開発した。 Therefore, the applicant of the present application has reduced the labor and time and cost of creating image data such as clothes, footwear, accessories, and hats for dress-up simulation, and has not been made for dress-up simulation originally. The present invention has been developed in which image data of accessories, hats, etc. can also be used for dress-up simulation.
従来技術としては、撮像手段を備えた端末装置により撮像した顔部分を含む人物画像の髪の色や髪型、衣服、眼鏡などのアクセサリーなどを変えることが可能なシミュレーション画像生成システム及び装置が提案されている(特許文献1)。 As a prior art, a simulation image generation system and apparatus capable of changing the hair color, hairstyle, clothing, glasses, and other accessories of a human image including a face portion imaged by a terminal device equipped with an imaging means have been proposed. (Patent Document 1).
発明が解決しようとする問題点は、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減し、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とする点である。 The problem to be solved by the invention is that it reduces the labor, time and cost in creating image data for clothes, footwear, accessories, hats, etc. for dress-up simulation, and was not originally made for dress-up simulation. Image data such as clothes, footwear, accessories, and hats can also be used for the dress-up simulation.
本発明は、衣服、鞄、アクセサリ、履物等の画像データをモデル画像に合成表示させる着せ替えシミュレーションにおける着せ替えシミュレーション用サーバであって、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
を備えてなることを特徴とする。
The present invention is a dress-up simulation server in a dress-up simulation for composing and displaying image data of clothes, bags, accessories, footwear, etc. on a model image, and image data such as photographs including clothes, bags, accessories, footwear, etc. , Shape recognition processing means for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data such as photographs, and shapes of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means. The data is associated with the template data of the shape of clothes, bags, accessories, footwear, etc. stored and stored in advance, and the clothes, bags, accessories, footwear, etc. recognized by the shape recognition processing means are clothes, Category determination processing means for determining whether the product is included in any category such as bags, accessories, footwear, etc., and the category determination processing Within the categories of clothing, shoes, accessories, footwear, etc., judged by the means, the detail recognition processing means for recognizing the shape and size, color, material, etc. of these details, and the detail recognition processing means. The detail data such as the shape and size, color, and material of the details are associated with the template data such as the shape, size, and color of the details stored and stored in advance and recognized by the detail recognition processing means. Detail determination processing means for determining whether the shape and size, color, material, etc. of the detail matches or approximates any template data, and the clothing and bag determined by the category determination processing means and the detail determination processing means. , Template data of accessories, footwear, etc., and template data such as shapes and dimensions of these details, colors, materials, etc. Template data extraction processing means for processing, template data composition processing means for synthesizing the template data extracted by the template data extraction processing means, clothing from image data such as photographs including the clothes, bags, accessories, footwear, etc. Cutout processing means for cutting out only image data of a bag, accessory, footwear, etc., and image data of clothes, bags, accessories, footwear, etc. cut out by the cutout processing means are synthesized by the template data synthesis processing means. Morphing processing means for performing morphing processing to match the shape of the template data, and image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means are combined by the template data combining processing means. A first image data pasting processing means for pasting the image data, and image data of clothes, bags, accessories, footwear, etc. pasted by the first image data pasting processing means; Second image data pasting processing means for performing pasting processing;
It is characterized by comprising.
また、本発明は、通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成システムにおいて、端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理手段と、当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、当該第2の画像データ貼り付け処理手段により生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示手段と、を備えてなることを特徴とする。 The present invention also provides a terminal for an automatic generation system for image data such as clothes for simulation of dressing, comprising a server for simulation of dressing connected to a communication network and one or a plurality of terminal devices connectable to the communication network. When there is a simulation program delivery request from the device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device, and the dress-up simulation program When the user starts up on the terminal device and drags and drops the image data such as clothing photos onto the model image for simulation, the image data such as clothing, clothing, accessories, footwear, etc. Photo etc. Shape recognition processing means for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data, shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means, and storage and storage in advance The clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing means are associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. Category determination processing means for determining whether the category is included, and within the categories of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means, Detail recognition processing means for recognizing dimensions, colors, materials, etc., and the shape and size of these details recognized by the detail recognition processing means, color, Detailed data such as materials are associated with template data such as detailed shape and dimensions, colors, and materials stored and stored in advance, and the detailed shape and dimensions recognized by the detail recognition processing means, color, Detailed judgment processing means for judging whether or not the material etc. matches or approximates any template data, and templates of shapes such as clothes, bags, accessories, footwear, etc. judged by the category judgment processing means and the detailed judgment processing means Template data extraction processing means for extracting data and template data such as the shape and size of these details, colors, materials, etc., and template data composition processing means for synthesizing the template data extracted by the template data extraction processing means, Clothing from image data such as photographs including clothing, bags, accessories, footwear, etc. Crop processing means for cutting out only image data of heels, bags, accessories, footwear, etc., and image data of clothes, bags, accessories, footwear, etc. cut out by the cutout processing means are combined by the template data combining processing means Morphing processing means for performing a morphing process that matches the shape of the template data that has been processed, and image data of clothes, bags, accessories, footwear, etc. that have been morphed by the morphing processing means are synthesized by the template data synthesis processing means. First image data pasting processing means for pasting to template data, and image data of clothes, bags, accessories, footwear, etc. pasted by the first image data pasting processing means, Second image data to be pasted to the image And Ri attached processing unit, characterized by comprising and a dress-up model image display means for displaying as a model image of the terminal device the image data generated by the second image data pasting processing means.
また、本発明は、通信網に接続された着せ替えシミュレーション用サーバと、通信網に接続可能な1又は複数の端末装置からなる着せ替えシミュレーション用の衣服等の画像データの自動生成方法であって、端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理ステップと、当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理ステップと、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理ステップと、当該カテゴリ判断処理ステップにより判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理ステップと、当該細部認識処理ステップにより認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理ステップにより認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理ステップと、当該カテゴリ判断処理ステップ及び細部判断処理ステップにより判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理ステップと、当該テンプレートデータ抽出処理ステップにより抽出されたテンプレートデータを合成するテンプレートデータ合成処理ステップと、当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理ステップと、当該切り抜き処理ステップにより切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理ステップと、当該モーフィング処理ステップによりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理ステップと、当該第1の画像データ貼り付け処理ステップにより貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理ステップと、当該第2の画像データ貼り付け処理ステップにより生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示ステップと、を備えてなることを特徴とする。 Further, the present invention is an automatic generation method of image data such as clothes for simulation of dressing, comprising a dressing simulation server connected to a communication network and one or a plurality of terminal devices connectable to the communication network. When a simulation program delivery request is made from the terminal device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device, and the dress-up simulation. When the program is started on the terminal device and the user drags and drops the image data such as clothing photos onto the model image for the dress-up simulation, from the image data such as photos including clothing, bags, accessories, footwear, etc. , Such photos Shape recognition processing step for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data, shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing step, and storage and storage in advance The clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing step is associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. In the category determination processing step for determining whether the category is included, and in the categories of clothes, shoes, accessories, footwear, etc. determined by the category determination processing step, the shape of these details and Detail recognition processing step for recognizing dimensions, colors, materials, etc., and those recognized by the detail recognition processing step The detail data such as the shape and size of the details, color, and material are associated with the template data such as the shape and size, color, material, etc. of the detail stored and stored in advance, and are recognized by the detail recognition processing step. Detail determination processing step for determining whether the shape and size of detail, color, material, etc. match or approximate any template data, and the clothing, bag, and the like determined by the category determination processing step and the detail determination processing step. A template data extraction process step for extracting template data of the shape of accessories, footwear, etc. and template data such as the shape and dimensions of these details, colors, materials, etc., and the template data extracted by the template data extraction process step are combined. Template data composition processing step and the clothing A cutting process step for cutting out only image data such as clothes, bags, accessories, footwear, etc. from image data such as photographs including bags, accessories, footwear, etc., and clothes, bags, accessories cut out by the cutting processing step, Morphing processing step for performing morphing processing for matching image data of footwear etc. with the shape of the template data synthesized by the template data synthesizing processing step, clothing, bag, accessory, footwear morphed by the morphing processing step The first image data pasting process step for pasting image data such as the above onto the template data synthesized by the template data synthesizing process step and the first image data pasting process step. clothes A second image data pasting processing step for further pasting image data of the bag, accessory, footwear, etc. on the model image, and the image data generated by the second image data pasting processing step as a terminal device A model image display step for displaying as a model image.
本発明に係る着せ替えシミュレーション用サーバ、着せ替えシミュレーション用の衣服等の画像データの自動生成システム及び着せ替えシミュレーション用の衣服等の画像データの自動生成方法は、次の効果を奏するものである。
着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製にかかる非常な手間と時間と費用を削減することが出来る。また、、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とすることが出来る。従って、着せ替えシミュレーションの利用者である一般ユーザーの購買意欲を向上させることにもなる。
The dressing simulation server, the dressing simulation clothing image automatic generation system, and the dressing simulation clothing image automatic generation method according to the present invention have the following effects.
It is possible to reduce the labor, time and cost required for creating image data of clothes, footwear, accessories, hats, etc. for changing clothes simulation. In addition, image data such as clothes, footwear, accessories, and hats that are not originally created for the dress-up simulation can be used for the dress-up simulation. Therefore, the willingness to purchase of general users who are users of the dress-up simulation is also improved.
先ず、本実施例に係る着せ替えシミュレーション用衣服等データの自動生成システムの全体構成の概略を図1を用いて説明する。当該着せ替えシミュレーション用の衣服の等画像データの自動生成システム1は、図1に示すように、インターネット、専用回線、イントラネット等の通信網20に接続された着せ替えシミュレーションシ用サーバ10と、当該通信網20に接続可能なディスクトップコンピュータ、タブレット型コンピュータ、携帯端末等の1又は複数の端末装置30からなる。ここで、タブレット型コンピュータとは、平板状の外形で一方の面にディスプレイを備え、タッチパネル式などの表示/入力部、音声出力部等を有し、携帯可能なパーソナルコンピュータである。また、携帯端末としては、画像表示可能なディスプレイを備えたものであればよい。
First, the overall configuration of an automatic generation system for data such as clothes for simulation for changing clothes according to the present embodiment will be described with reference to FIG. As shown in FIG. 1, the
着せ替えシミュレーションシ用サーバ10は、図示しないが、通信部、CPU、データベース等から構成される。当該データベースには、衣服、鞄、アクセサリ、履物等の形状のみのテンプレート(ベース)となるデータが保存蓄積されている。具体的には、衣服であれば、上半身に着る服であるトップス(上衣)、下半身に着る服であるボトムス(下衣)のテンプレートデータが存在する。当該トップスのテンプレートデータには、カーディガン、カットソー、シャツ、ジャケット、セーター、チュニック等のテンプレートデータが含まれ、更にカーディガン、カットソー、シャツ、ジャケット、セーター、チュニック等はその形状等により更に細かく分類されたテンプレートデータが保存蓄積されている。当該ボトムスのテンプレートデータには、パンツ、ショートパンツ、スカート等のテンプレートデータが含まれ、更にパンツ、ショートパンツ、スカート等はその形状等により更に細かく分類されたテンプレートデータが保存蓄積されている。なお、ジャンプスーツ等の上下一体の衣服は、トップス(上衣)に分類するか、又は別の分類を設けても良い。
Although not shown, the dress-up
前述したテンプレートデータは衣服等の全体の形状のデータであるが、更に衣服等の丈、袖の長さ、襟の形、素材等を細かく分類したデータ、及び皺等の形状データもテンプレートデータとして保存蓄積されている。 The template data described above is data on the overall shape of clothing, etc., but further data on the length of clothing, sleeve length, collar shape, material, etc., and shape data on heels, etc. are also used as template data. Stored and accumulated.
<利用者の利用方法>
利用者が、端末装置から着せ替えシミュレーションシステムを採用しているホームページにアクセスすると、これを受けた着せ替えシミュレーション用サーバ10は、着せ替えシミュレーションシプログラムを端末装置30に配信する。次に、これを受けた端末装置30は、図2に示す様な着せ替えシミュレーション用ウィンドウ(以下、ベースウィンドウという。)を表示する。
<How to use>
When a user accesses a homepage that employs the dress-up simulation system from the terminal device, the dress-up
当該ベースウィンドウ100は、図2乃至図4に示されるように、スタートボタン110、検索等によりセレクトした衣服を着たモデル・バッグ・アクセサリ等の種々のアイテム(商品)の画像を表示するアイテム(商品)画像表示欄120、アイテム(商品)をキーワード、ブランド、男性・女性・子供等のタイプ、カテゴリ、価格、カラー等種々の方法で検索可能な検索欄130、ニュース、新着情報等が表示されたヘッド部分140から構成されている。
As shown in FIGS. 2 to 4, the
利用者が、当該スタートボタン110をクリックすると、図3〜図5に表示される着せ替えウィンドウ200が、ベースウィンドウ100上に別個のウィンドウで表示される。
When the user clicks the
当該着せ替えウィンドウ200は、複数のパターンで表示可能であるが、主要な3パターンを図5(1)乃至(3)に示している。当該着せ替えウィンドウ200は、第1の着せ替えウィンドウ210、第2の着せ替えウィンドウ220、第3の着せ替えウィンドウ230等から構成され、図5(1)には第一の着せ替えウィンドウ210のみが表示され、図5(2)には第1及び第2の着せ替えウィンドウ210,220が表示され、図5(3)には第1乃至第3のウィンドウ210,220,230が表示されている。
Although the dress-up
第1のウィンドウ210には、着せ替えシミュレーションを行うアバター(人物のモデル画像)が表示されるアバター表示部211、アバター(人物のモデル画像)が装着しているアイテム(商品)を表示する装着アイテム表示部212、第2の着せ替えウィンドウ220を開くための拡張ボタン213が表示されている。また、アバター(人物のモデル画像)を男性(MAN)又は女性(WOMAN)に切り替えるアバター切り替えボタン214、アバター(人物のモデル画像)の衣服等の装着をリセットするリセットボタン215、アバター(人物のモデル画像)の衣服等の装着状態をセーブするセーブボタン216が表示されている。
In the
第2の着せ替えウィンドウ220には、商品を検索するアイテム検索ボタン221、第2の着せ替えウィンドウ220を閉じて第1の着せ替えウィンドウ210のみを表示させる縮小ボタン222、着せ替えウィンドウ200を閉じるためのクローズボタン223、アイテム(商品)のコーディネートを行うアイテムコーデとトータルコーディネートを参照可能なアイテムコーデの2つのボタンからなるコーディネートボタン224、第2の着せ替えウィンドウ220に選択可能なアイテム(商品)やアバターモデルや背景を表示させる選択ボタン225、当該選択ボタン225により選択されたアイテム(商品)やアバター(人物のモデル画像)や背景の一覧を表示する表示部226、お気に入りのアイテム(商品)を表示するお気に入りアイテム表示部227が表示されている。
In the
第3の着せ替えウィンドウ230には、第2の着せ替えウィンドウ220のアイテム検索ボタン221をクリックした場合に表示されるウィンドウであり、検索部分231、検索結果が複数表示される検索結果表示部分232、第3の着せ替えウィンドウ230を閉じるためのクローズボタン233が表示されている。
The third dress-up
利用者は、ベースウィンドウ100の検索欄130で所望のアイテム(商品)を検索し、アイテム画像表示欄120に表示させる。次に、ベースウィンドウ100に表示されたスタートボタン110をクリックする。すると、第1及び第2の着せ替えウィンドウ210,220がベースウィンドウ100上に表示される。なお、図3及び図4は、第1乃至第3の着せ替えウィンドウ210,220,230が開かれている状態である。利用者が、ベースウィンドウ100のアイテム(商品)画像表示欄120又は表示部226に表示されている洋服等のアイテム(商品)を、着せ替えウィンドウ200のアバター表示部211に表示されたアバター(人物のモデル画像)にドラッグアンドドロップすると、アバター(人物のモデル画像)に当該洋服等のアイテム(商品)が装着される。この際、アイテム(商品)画像表示欄120からドラッグアンドドロップしたアイテム(商品)の場合には、当当該アイテム(商品)の画像が表示部226に表示されるアイテム(商品)の一覧に追加される。アバター(人物のモデル画像)から洋服等のアイテム(商品)を外したい場合には、当該洋服等のアイテムをドラッグアンドドロップにより外すことが出来る。利用者は、この作業を行い所望のコーディネイトを作製することができる。なお、表示部226は、現在選んでいるアイテム(商品)、最近選んだアイテム(商品)、お勧めのアイテム(商品)、新着アイテム(商品)、アイテム(商品)のランキング等の別で表示される。これにより利用者は、商品を識別し易くなるため、アバター(人物のモデル画像)へのコーディネートが行い易くなる。
The user searches for a desired item (product) in the
また、利用者が、アバター(人物のモデル画像)が装着しているアイテム(商品)にカーソルを合わせると、図4に示す様な当該アイテム(商品)の色や模様違いのアイテム(商品)一覧を表示する小ウィンドウ300が表示される。利用者が、このアイテム(商品)一覧から所望の色や模様違いのアイテム(商品)をクリックするとアバター(人物のモデル画像)に装着される。 Further, when the user moves the cursor to an item (product) worn by an avatar (a person's model image), a list of items (products) with different colors and patterns of the item (product) as shown in FIG. A small window 300 for displaying is displayed. When the user clicks an item (product) having a desired color or a different pattern from this item (product) list, the user is attached to an avatar (a person's model image).
<着せ替えシミュレーションシ用サーバでの処理>
利用者が、ベースウィンドウ100のアイテム(商品)画像表示部120にリストアップされたアイテム(商品)から所望のトップス等の画像データを着せ替えウィンドウ200内のアバター表示部211に表示されたアバター(人物のモデル画像)にドラッグアンドドロップした場合に、次の処理がサーバで行われる。
先ず、ドラッグされたトップス等の画像データの解析が行われる。
当該トップス等の画像データから、当該トップス等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理が行われる(S10)。次に、この形状認識処理により認識された形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理により認識された形状データが、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理が行われる(S20)。
<Processing on the dress-up simulation server>
A user displays image data such as desired tops from an item (product) listed in the item (product)
First, image data such as dragged tops is analyzed.
Shape recognition processing for recognizing the shape of clothes, heels, accessories, footwear, etc. displayed in the image data of the tops is performed from the image data of the tops (S10). Next, the shape data recognized by the shape recognition process is associated with the template data of the shape of clothes, bags, accessories, footwear, etc. stored and stored in advance, and the shape recognized by the shape recognition process A category determination process for determining whether the data is included in any category such as clothes, bags, accessories, footwear, etc. is performed (S20).
当該カテゴリ判断処理の結果、当該トップス等の画像データが、例えば、トップスの画像データであると判断処理されると、トップスである洋服の細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材等を認識する細部認識処理が行われる(S30)。そして、当該細部認識処理により認識されたこれらの細部データと、予め保存蓄積されている細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材(生地等)等のテンプレートデータとの対応付けを行い、当該細部認識処理により認識された細部データがいずれのテンプレートデータに合致するか否かを判断する細部判断処理が行われる(S40)。この際、合致するテンプレートデータが存在しない場合には、最も近似するテンプレートデータを判断する細部判断処理が行われる(S40)。なお、当該写真の画像データから抽出されたデータは、新たなテンプレートデータとして保存蓄積される。このように新たなテンプレートデータが保存蓄積されることにより、カテゴリ判断処理、細部認識処理、細部判断処理の精度が向上する。 As a result of the category determination processing, if the image data of the tops or the like is determined to be, for example, tops image data, the shape and size of the details of the clothes that are the tops (shape type, clothes length, sleeves) The detail recognition processing for recognizing the color, material, etc. is performed (S30). And these details data recognized by the detail recognition process, and the shape and dimensions of the details stored and stored in advance (shape type, clothes length, sleeve length, collar shape, etc.), color, material A detail determination process is performed for associating with template data such as (fabric etc.) and determining which template data matches the detail data recognized by the detail recognition process (S40). At this time, if there is no matching template data, a detailed determination process for determining the most approximate template data is performed (S40). Note that data extracted from the image data of the photograph is stored and accumulated as new template data. Thus, by storing and storing new template data, the accuracy of the category determination process, the detail recognition process, and the detail determination process is improved.
次に、当該カテゴリ判断処理及び細部判断処理により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法(形のタイプ、洋服の丈、袖の長さ、襟の形等)、色彩、素材等のテンプレートデータの抽出処理が行われる(S50)。そして、当該テンプレートデータ抽出処理により抽出された各々のテンプレートデータを合成するテンプレートデータ合成処理が行われる(S60)。 Next, template data of the shape of clothes, bags, accessories, footwear, etc. determined by the category determination process and the detail determination process, and the shape and dimensions of these details (shape type, clothes length, sleeve length, Template data such as collar shape, color, material, etc. is extracted (S50). Then, a template data synthesis process for synthesizing the template data extracted by the template data extraction process is performed (S60).
次に、トップスの画像データと、テンプレートデータに保存蓄積されている皺等のデータの対応付けを行い、当該画像データに表示されたトップスに皺等がよっていると判断された場合(テンプレートデータと合致又は近似していると判断された場合)には、皺等を薄くするための画像調整処理が行われる(S70)。また、画像データの色相、明度及び彩度を統一させるため、色相、明度及び彩度を調整するための画像調整処理が行われる(S70)。当該画像データに表示されたトップス等に光が当たる方向を一定にするための画像調整処理も行われる(S70)。当該画像データにグラデーションが生じている場合には、色を均すための画像調整処理が行われる(S70)。更に、画像データ中の衣服等の一部が欠けている場合(画像に写っていない場合)又はその他修正が必要な場合には、当該画像データに表示されている衣服等の他の部分をコピーし当てはめる画像調整処理が行われる(S70)。 Next, the tops image data is associated with the data such as wrinkles stored and accumulated in the template data, and it is determined that the tops displayed in the image data are wrinkled (template data and If it is determined that they match or approximate), image adjustment processing for thinning wrinkles or the like is performed (S70). Further, in order to unify the hue, brightness, and saturation of the image data, an image adjustment process for adjusting the hue, brightness, and saturation is performed (S70). Image adjustment processing is also performed to make the direction in which light hits the tops displayed in the image data constant (S70). When gradation is generated in the image data, an image adjustment process for leveling the color is performed (S70). In addition, if some of the clothing, etc. in the image data is missing (if it is not shown in the image) or if other modifications are required, copy other parts of the clothing, etc. displayed in the image data. An image adjustment process to be applied is performed (S70).
以上の画像調整処理後に、画像データのトップスの部分のみを切り抜く衣服等の画像データの切り抜き処理が行われる(S80)。当該切り抜き処理されたトップスの画像データは、テンプレートデータの形状(シミュレータアイテムの形状)に合致させるため、モーフィング処理が行われる(S90)。当該モーフィング処理の後の画像データ(モーフィング処理データ)を、既に抽出され合成処理されていたトップスのテンプレートデータへ貼り付ける第1の合成処理が行われる(S100)。この第1の貼り付け合成処理後のトップスの画像データを、モデル画像へ貼り付ける第2の合成処理が行われる(S110)。 After the image adjustment process described above, a process for cutting out image data such as clothes for cutting out only the tops of the image data is performed (S80). The tops image data subjected to the clipping process is subjected to a morphing process in order to match the shape of the template data (the shape of the simulator item) (S90). A first synthesis process is performed in which the image data (morphing process data) after the morphing process is pasted on tops template data that has already been extracted and synthesized (S100). A second synthesis process for pasting the top image data after the first pasting and synthesizing process to the model image is performed (S110).
<利用者が写真の画像データを送信する場合>
本実施例に係る着せ替えシミュレーション用の衣服等の画像データの自動生成システムでは、利用者が自己の所有する洋服等のアイテムを撮影し、それをアイテムの一つとしてコーディネイトすることも可能である。以下に説明する。
先ず、利用者が、端末装置30から、洋服、鞄、アクセサリ、履物等の写真の画像データを着せ替えシミュレーション用サーバ10に送信する。送信する際に、利用者は、洋服のカテゴリを選択する。このカテゴリは、パンツ、トップス、シューズ、バッグ等である。このカテゴリの選択は行わないようにしても良いが、シミュレーション用サーバ10での画像データ処理の精度を上げるために、カテゴリの選択を行うようにするのが好ましい。
着せ替えシミュレーションシ用サーバ10が当該写真の画像データ及びカテゴリデータを受信する。この受信後、着せ替えシミュレーションシ用サーバ10では、利用者から送信された画像データがベースウィンドウ100のアイテム(商品)画像表示欄120にリストアップされる。その後の着せ替えシミュレーションでは、上記に説明したと同様に処理される。
また、ベースウィンドウ100のアイテム(商品)画像表示欄120にリストアップせずに、直接着せ替えウィンドウ200内の表示部226に表示されるアイテムの一覧に加えることも可能である。その場合には、上記に説明した着せ替えシミュレーションシ用サーバでの処理が行われる。
なお、これらの画像加工処理がサーバで処理できない場合には、再度新しい写真の画像データを送信して欲しい旨を、端末装置30に通知し、再度送信を要求する。
<When users send image data of photos>
In the automatic generation system for image data such as clothes for changing clothes according to the present embodiment, it is also possible for the user to photograph an item such as clothes owned by the user and coordinate it as one of the items. . This will be described below.
First, a user transmits image data of a photograph of clothes, bags, accessories, footwear, and the like from the
The dress-up
Further, without listing in the item (product)
If these image processing processes cannot be performed by the server, the
以上説明した本実施例に係る着せ替えシミュレーション用の衣服等の画像データの自動生成システムにより、着せ替えシミュレーション用の衣服、履物、アクセサリ、帽子等の画像データの作製における非常な手間と時間と費用を削減することが出来る。また、、もともと着せ替えシミュレーション用に作製されていない衣服、履物、アクセサリ、帽子等の画像データも着せ替えシミュレーションに利用可能とすることが出来る。更に、利用者が自己が所有するアイテムを着せ替えシミュレーションのアイテムに加えてコーディネートをシミュレーションすることも可能となる。従って、着せ替えシミュレーションの利用者である一般ユーザーの購買意欲を向上させることにもなる。 The automatic generation system for image data such as clothes for dressing simulation according to the present embodiment described above, a great amount of labor, time and cost in creating image data such as clothes, footwear, accessories, and hats for dressing simulation. Can be reduced. In addition, image data such as clothes, footwear, accessories, and hats that are not originally created for the dress-up simulation can be used for the dress-up simulation. Furthermore, it is possible to simulate the coordination in addition to the items of the dress-up simulation by the user. Therefore, the willingness to purchase of general users who are users of the dress-up simulation is also improved.
本実施例では、アバター(人物のモデル画像)について説明したが、対象となるのは犬や猫等のペットの画像でも良く、その場合には当該ペットの形状にあった衣服、アクセサリ、履物等のテンプレートデータを着せ替えシミュレーション用サーバに保存蓄積することにより着せ替えシミュレーションを行うことが可能である。 In this embodiment, an avatar (a model image of a person) has been described. However, an object may be an image of a pet such as a dog or a cat. In that case, clothes, accessories, footwear, etc. that match the shape of the pet. It is possible to perform a dress-up simulation by storing and storing the template data in the dress-up simulation server.
10 コンテンツ配信サーバ
20 通信網
30 端末装置
100 ベースウィンドウ
110 スタートボタン
120 アイテム(商品)画像表示欄
130 検索欄
140 ヘッド部分
200 着せ替えウィンドウ
210 第1の着せ替えウィンドウ
211 アバター表示部
212 装着アイテム表示部
213 拡張ボタン
214 アバター切り替えボタン
215 リセットボタン
216 セーブボタン
220 第2の着せ替えウィンドウ
221 アイテム検索ボタン
222 縮小ボタン
223 クローズボタン
224 コーディネイトボタン
225 選択ボタン
226 表示部
227 お気に入りアイテム表示部
230 第3の着せ替えウィンドウ
231 検索部分
232 検索結果表示部分
233 クローズボタン
300 小ウィンドウ
DESCRIPTION OF
Claims (3)
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、
当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、
当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、
当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、
当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、
当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、
当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、
当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、
当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
を備えてなることを特徴とする着せ替えシミュレーションシ用サーバ。 A dress-up simulation server in a dress-up simulation for combining and displaying image data of clothes, bags, accessories, footwear, etc. on a model image,
Shape recognition processing means for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data, such as photographs, from images including clothes, bags, accessories, footwear, etc.,
Corresponding the shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means with the template data of the shapes of clothes, heels, accessories, footwear, etc. stored in advance, Category determination processing means for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing means are included in any category of clothes, bag, accessory, footwear, etc .;
Detail recognition processing means for recognizing the shape and size, color, material, etc. of these details in the category of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means;
The detailed data such as the shape and size, color, and material of the details recognized by the detail recognition processing means are associated with the template data such as the shape and size of the details stored in advance and the color, Detail determination processing means for determining whether the shape and size, color, material, etc. of the details recognized by the detail recognition processing means match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, bags, accessories, footwear, and the like determined by the category determination processing means and detail determination processing means, and template data such as the shapes and dimensions of these details, colors, and materials Processing means;
Template data synthesis processing means for synthesizing the template data extracted by the template data extraction processing means;
Cropping processing means for cropping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing means for performing morphing processing for matching image data of clothing, heels, accessories, footwear, etc. clipped by the clipping processing means with the shape of the template data synthesized by the template data synthesis processing means;
First image data pasting processing means for pasting image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means to template data synthesized by the template data synthesizing means;
Second image data pasting processing means for further pasting image data of clothes, heels, accessories, footwear, etc. pasted by the first image data pasting processing means on the model image;
A dress-up simulation server characterized by comprising:
端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理手段と、
当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理手段と、
当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理手段により認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理手段と、
当該カテゴリ判断処理手段により判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理手段と、
当該細部認識処理手段により認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理手段により認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理手段と、
当該カテゴリ判断処理手段及び細部判断処理手段により判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理手段と、
当該テンプレートデータ抽出処理手段により抽出されたテンプレートデータを合成するテンプレートデータ合成処理手段と、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理手段と、
当該切り抜き処理手段により切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理手段と、
当該モーフィング処理手段によりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理手段により合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理手段と、
当該第1の画像データ貼り付け処理手段により貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理手段と、
当該第2の画像データ貼り付け処理手段により生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示手段と、
を備えてなることを特徴とする着せ替えシミュレーション用の衣服等の画像データの自動生成システム。 In a system for automatically generating image data such as clothes for simulation of dress-up comprising a server for dress-up simulation connected to a communication network and one or a plurality of terminal devices connectable to the communication network,
When there is a simulation program delivery request from the terminal device to the dress-up simulation server, the dress-up simulation program delivery processing means for the dress-up simulation server to deliver the dress-up simulation program to the terminal device;
When the dress-up simulation program is started on the terminal device and the user drags and drops image data such as a photograph of clothes onto a model image for dress-up simulation,
Shape recognition processing means for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data, such as photographs, from images including clothes, bags, accessories, footwear, etc.,
Corresponding the shape data of clothes, heels, accessories, footwear, etc. recognized by the shape recognition processing means with the template data of the shapes of clothes, heels, accessories, footwear, etc. stored in advance, Category determination processing means for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing means are included in any category of clothes, bag, accessory, footwear, etc .;
Detail recognition processing means for recognizing the shape and size, color, material, etc. of these details in the category of clothes, shoes, accessories, footwear, etc. determined by the category determination processing means;
Correspondence between the detailed data such as the shape and size, color, material, etc. of these details recognized by the detail recognition processing means and the template data such as the shape shape, size, color, material, etc. stored in advance. Detail determination processing means for determining whether the shape and size, color, material, etc. of the details recognized by the detail recognition processing means match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, bags, accessories, footwear, and the like determined by the category determination processing means and detail determination processing means, and template data such as the shapes and dimensions of these details, colors, and materials Processing means;
Template data synthesis processing means for synthesizing the template data extracted by the template data extraction processing means;
Cropping processing means for cropping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing means for performing morphing processing for matching image data of clothing, heels, accessories, footwear, etc. clipped by the clipping processing means with the shape of the template data synthesized by the template data synthesis processing means;
First image data pasting processing means for pasting image data of clothes, bags, accessories, footwear, etc. morphed by the morphing processing means to template data synthesized by the template data synthesizing means;
Second image data pasting processing means for further pasting image data of clothes, heels, accessories, footwear, etc. pasted by the first image data pasting processing means on the model image;
Dress-up model image display means for displaying the image data generated by the second image data pasting processing means as a model image of the terminal device;
A system for automatically generating image data such as clothes for simulation of changing clothes, comprising:
端末装置から着せ替えシミュレーション用サーバに対しシミュレーションプログラム配信要求があった場合に、着せ替えシミュレーション用サーバが端末装置に着せ替えシミュレーションプログラムを配信する着せ替えシミュレーションプログラム配信処理ステップと、
当該着せ替えシミュレーションプログラムが端末装置で起動し、利用者が衣服の写真等の画像データを着せ替えシミュレーションを行うモデル画像にドラッグアンドドロップした場合に、
衣服、鞄、アクセサリ、履物等を含む写真等の画像データから、当該写真等の画像データに表示された衣服、鞄、アクセサリ、履物等の形状を認識する形状認識処理ステップと、
当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等の形状データと、予め保存蓄積されている衣服、鞄、アクセサリ、履物等の形状のテンプレートデータとの対応付けを行い、当該形状認識処理ステップにより認識された衣服、鞄、アクセサリ、履物等が、衣服、鞄、アクセサリ、履物等のいずれのカテゴリに含まれるか否かを判断するカテゴリ判断処理ステップと、
当該カテゴリ判断処理ステップにより判断処理された衣服、靴、アクセサリ、履物等のカテゴリ内において、更に、これらの細部の形状及び寸法、色彩、素材等を認識する細部認識処理ステップと、
当該細部認識処理ステップにより認識されたこれらの細部の形状及び寸法、色彩、素材等の細部データと、予め保存蓄積されている細部の形状及び寸法、色彩、素材等のテンプレートデータとの対応付けを行い、当該細部認識処理ステップにより認識された細部の形状及び寸法、色彩、素材等がいずれのテンプレートデータに合致又は近似するか否かを判断する細部判断処理ステップと、
当該カテゴリ判断処理ステップ及び細部判断処理ステップにより判断された衣服、鞄、アクセサリ、履物等の形状のテンプレートデータ及びこれらの細部の形状及び寸法、色彩、素材等のテンプレートデータを抽出処理するテンプレートデータ抽出処理ステップと、
当該テンプレートデータ抽出処理ステップにより抽出されたテンプレートデータを合成するテンプレートデータ合成処理ステップと、
当該衣服、鞄、アクセサリ、履物等を含む写真等の画像データから衣服、鞄、アクセサリ、履物等の画像データのみを切り抜き処理する切り抜き処理ステップと、
当該切り抜き処理ステップにより切り抜かれた衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成処理されたテンプレートデータの形状に合致させるモーフィング処理を行うモーフィング処理ステップと、
当該モーフィング処理ステップによりモーフィング処理された衣服、鞄、アクセサリ、履物等の画像データを、前記テンプレートデータ合成処理ステップにより合成されたテンプレートデータに貼りつけ処理する第1の画像データ貼り付け処理ステップと、
当該第1の画像データ貼り付け処理ステップにより貼りつけ処理された衣服、鞄、アクセサリ、履物等の画像データを、更に、モデル画像へ貼りつ処理する第2の画像データ貼り付け処理ステップと、
当該第2の画像データ貼り付け処理ステップにより生成された画像データを端末装置のモデル画像として表示する着せ替えモデル画像表示ステップと、
を備えてなることを特徴とする着せ替えシミュレーション用の衣服等の画像データの自動生成方法。 A method for automatically generating image data such as clothes for simulation for dressing comprising a server for dressing simulation connected to a communication network and one or a plurality of terminal devices connectable to the communication network,
When there is a simulation program delivery request from the terminal device to the dress-up simulation server, the dress-up simulation server delivers the dress-up simulation program to the terminal device;
When the dress-up simulation program is started on the terminal device and the user drags and drops image data such as a photograph of clothes onto a model image for dress-up simulation,
A shape recognition processing step for recognizing the shape of clothes, bags, accessories, footwear, etc. displayed in the image data of the photos, etc. from image data, such as photos including clothes, bags, accessories, footwear, etc .;
The shape data of the clothing, bag, accessory, footwear, etc. recognized by the shape recognition processing step is associated with the template data of the shape of the clothing, bag, accessory, footwear, etc. stored and stored in advance, and the shape A category determination processing step for determining whether the clothing, bag, accessory, footwear, etc. recognized by the recognition processing step are included in any category of clothing, bag, accessory, footwear, etc .;
In the category of clothing, shoes, accessories, footwear, etc. determined by the category determination processing step, further, a detail recognition processing step for recognizing the shape and size, color, material, etc. of these details;
Correspondence between detailed data such as shape and size, color, material, etc. of these details recognized by the detail recognition processing step and template data such as detailed shape, size, color, material, etc. stored and stored in advance. A detail determination processing step for determining whether the shape and size of the detail, the color, the material, and the like recognized by the detail recognition processing step match or approximate any template data;
Template data extraction for extracting template data of shapes such as clothes, heels, accessories, footwear, etc. determined by the category determination processing step and detail determination processing step, and template data such as shapes and dimensions, colors, materials, etc. of these details Processing steps;
A template data synthesis processing step for synthesizing the template data extracted by the template data extraction processing step;
A clipping process step of clipping only image data of clothes, bags, accessories, footwear, etc. from image data such as photographs including the clothes, bags, accessories, footwear, etc .;
Morphing processing step for performing morphing processing for matching the image data of clothes, heels, accessories, footwear, etc. cut out by the cutting processing step with the shape of the template data combined by the template data combining processing step;
A first image data pasting process step for pasting image data of clothes, bags, accessories, footwear, etc. morphed in the morphing process step to the template data synthesized in the template data synthesis process step;
A second image data pasting process step for further pasting the image data of the clothing, bag, accessory, footwear, etc. pasted by the first image data pasting processing step on the model image;
Dress-up model image display step for displaying the image data generated by the second image data pasting processing step as a model image of the terminal device;
A method for automatically generating image data of clothes for simulation of dressing, characterized by comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011058243A JP2012194782A (en) | 2011-03-16 | 2011-03-16 | Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011058243A JP2012194782A (en) | 2011-03-16 | 2011-03-16 | Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012194782A true JP2012194782A (en) | 2012-10-11 |
Family
ID=47086614
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011058243A Withdrawn JP2012194782A (en) | 2011-03-16 | 2011-03-16 | Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012194782A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018029969A (en) * | 2016-08-26 | 2018-03-01 | 株式会社コロプラ | Information processing method, and program for allowing computer to execute the information processing method |
US10878229B2 (en) | 2016-05-26 | 2020-12-29 | Rakuten, Inc. | Shape discrimination device, shape discrimination method and shape discrimination program |
JP2023001185A (en) * | 2017-06-16 | 2023-01-04 | マーカブル インコーポレイテッド | Image processing system |
-
2011
- 2011-03-16 JP JP2011058243A patent/JP2012194782A/en not_active Withdrawn
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10878229B2 (en) | 2016-05-26 | 2020-12-29 | Rakuten, Inc. | Shape discrimination device, shape discrimination method and shape discrimination program |
JP2018029969A (en) * | 2016-08-26 | 2018-03-01 | 株式会社コロプラ | Information processing method, and program for allowing computer to execute the information processing method |
JP2023001185A (en) * | 2017-06-16 | 2023-01-04 | マーカブル インコーポレイテッド | Image processing system |
JP7493829B2 (en) | 2017-06-16 | 2024-06-03 | マーカブル インコーポレイテッド | Image Processing System |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11232512B2 (en) | Method and device for combining an avatar image with a portion of a user's image | |
CN110021061B (en) | Collocation model construction method, clothing recommendation method, device, medium and terminal | |
CN111681070B (en) | Online commodity purchasing method, purchasing device, storage device and purchasing equipment | |
US10963939B1 (en) | Computer vision based style profiles | |
CN106462979B (en) | Fashion preference analysis | |
US20240202786A1 (en) | Image/text-based design creating device and method | |
US20200342320A1 (en) | Non-binary gender filter | |
WO2018165239A1 (en) | Methods and systems for customized garment and outfit design generation | |
CN107924532A (en) | Method and apparatus for the description for providing dress form | |
JP6242768B2 (en) | Virtual try-on device, virtual try-on method, and program | |
JP6320237B2 (en) | Virtual try-on device, virtual try-on method, and program | |
WO2019120031A1 (en) | Method, device, storage medium, and mobile terminal for making recommendation about clothing matching | |
JP6338966B2 (en) | Virtual try-on device, virtual try-on system, virtual try-on method, and program | |
KR102115574B1 (en) | Method, device and program for customizing object design | |
JP4935275B2 (en) | Information providing system and information providing method, etc. | |
GB2501473A (en) | Image based clothing search and virtual fitting | |
JP2012194782A (en) | Server for outfit simulation, system for automatically creating image data of clothes or the like for outfit simulation, and method for automatically creating image data of clothes or the like for outfit simulation | |
CN110084675A (en) | Commodity selling method, the network terminal and the device with store function on a kind of line | |
CN110084676A (en) | Method of Commodity Recommendation, the network terminal and the device with store function on a kind of line | |
JP2003186965A (en) | Apparel selection supporting system and method | |
JP2015179431A (en) | Retrieval device, retrieval method, and program | |
WO2022081745A1 (en) | Real-time rendering of 3d wearable articles on human bodies for camera-supported computing devices | |
KR20200122179A (en) | apparatus and method for generating interior designs based on images and text | |
KR20200122177A (en) | apparatus and method for generating game contents components designs based on images and text | |
KR20200122178A (en) | apparatus and method for generating movie contents components designs based on images and text |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20140603 |