WO2015021796A1 - 一种制作虚拟试衣模特图像的方法和装置 - Google Patents

一种制作虚拟试衣模特图像的方法和装置 Download PDF

Info

Publication number
WO2015021796A1
WO2015021796A1 PCT/CN2014/077188 CN2014077188W WO2015021796A1 WO 2015021796 A1 WO2015021796 A1 WO 2015021796A1 CN 2014077188 W CN2014077188 W CN 2014077188W WO 2015021796 A1 WO2015021796 A1 WO 2015021796A1
Authority
WO
WIPO (PCT)
Prior art keywords
avatar
range
circle
reference image
image
Prior art date
Application number
PCT/CN2014/077188
Other languages
English (en)
French (fr)
Inventor
赵刚
Original Assignee
北京京东尚科信息技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 北京京东尚科信息技术有限公司 filed Critical 北京京东尚科信息技术有限公司
Priority to US14/912,109 priority Critical patent/US20160196662A1/en
Priority to AU2014308419A priority patent/AU2014308419B2/en
Priority to JP2016533787A priority patent/JP6168675B2/ja
Priority to RU2016109205A priority patent/RU2632165C2/ru
Priority to GB1602704.7A priority patent/GB2534046B/en
Publication of WO2015021796A1 publication Critical patent/WO2015021796A1/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0621—Item configuration or customization
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/162—Segmentation; Edge detection involving graph-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/42—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
    • G06V10/422—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation for representing the structure of the pattern or shape of an object therefor
    • G06V10/426—Graphical representations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20112—Image segmentation details
    • G06T2207/20132—Image cropping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation

Definitions

  • the present invention relates to a method and apparatus for making a virtual fitting model image. Background technique
  • Virtual fitting is the use of computer technology to allow virtual models to replace the real users to try on the clothes sold online.
  • the effect of the virtual models to try on them is to form a reference for users to purchase online clothing, which is convenient for users to purchase suitable clothing.
  • the current virtual fitting scheme mainly utilizes a virtual fitting model in the gallery, and the user selects a virtual fitting model and clothes so that the garment can be selected by the effect of the model wearing the garment. Summary of the invention
  • the invention provides a method and a device for making a virtual fitting model image, which helps to make the fitting effect of the virtual fitting model closer to the fitting effect of the user himself.
  • a method of making a virtual fitting model image comprises: extracting an avatar in a reference image; synthesizing an avatar in the reference image with a model body region in the virtual fitting model image to obtain a complete portrait.
  • the step of extracting an avatar in the reference image includes: detecting an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and setting two circles centering on a center position of the avatar, The diameter of the first circle is close to the diameter of the avatar, and the diameter of the second circle is close to 1.5 times the diameter of the avatar; determined using the GrabCut algorithm a range of avatars in the reference image, wherein the first circle is internally set as a foreground, and the first circle and the second circle are set as possible foregrounds, the second The outer circle is set as a background; an image of the avatar range is extracted from the reference image as an avatar in the reference image.
  • the step of extracting an avatar in the reference image includes: detecting an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and setting two circles with a center position of the avatar as a center, The diameter of the first circle is close to the diameter of the avatar, and the diameter of the second circle is close to 1.5 times the diameter of the avatar; the avatar range in the reference image is obtained using a GrabCut algorithm, wherein the first circle The interior is set to the foreground, the first circle and the second circle are set as possible foregrounds, and the second circle is externally set as the background; receiving an instruction for adjusting the avatar range And adjusting the avatar range according to the instruction; determining, by using the GrabCut algorithm, an accurate avatar range in the adjusted avatar range, wherein the adjusted avatar range edge curve is internally set to foreground, and the external setting is And extracting an image of the precise avatar range from the reference image as an avatar in the reference image.
  • the method further includes: in the reference image Setting a plurality of control points on an edge of the avatar range; the instruction is used to adjust a position of the control point; and the step of adjusting the avatar range according to the instruction comprises: locating the control point according to the instruction Make adjustments and determine the adjusted avatar range based on the adjusted control point position.
  • the step of synthesizing the avatar in the reference image with the model body region in the virtual fitting model image includes: determining a central axis of the avatar in the reference image; and avatar and virtualizing the reference image
  • the body regions of the model in the fitting model image are stitched together and the central axis is in line with the central axis of the body region of the model.
  • an apparatus for making a virtual fitting model image is provided Set.
  • the device for making a virtual fitting model image includes: an extracting module for extracting an avatar in a reference image; a synthesizing module, configured to synthesize an avatar in the reference image with a model body region in the virtual fitting model image To get a complete portrait.
  • the extracting module is further configured to: detect an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and set two circles, a first circle, centering on a center position of the avatar The diameter of the second circle is close to 1.5 times the diameter of the avatar; the avatar range in the reference image is determined using a GrabCut algorithm, wherein the first circle is internally set to a foreground, a foreground between the first circle and the second circle is set as a possible foreground, and an outer portion of the second circle is set as a background; an image of the avatar range is extracted from the reference image as An avatar in the reference image.
  • the extracting module is further configured to: detect an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and set two circles, a first circle, with a center position of the avatar as a center The diameter of the second circle is close to 1.5 times the diameter of the avatar; the avatar range in the reference image is obtained using a GrabCut algorithm, wherein the first circle is internally set to a foreground, the first circle and the second circle are set as possible foregrounds, and the second circle is externally set as a background; receiving an instruction for adjusting the avatar range and according to the instruction Adjusting the avatar range; determining an accurate avatar range in the adjusted avatar range by using the GrabCut algorithm, wherein the adjusted avatar range has an interior curve set to the foreground and an external setting as the background; Extracting an image of the precise avatar range from the reference image as an avatar in the reference image.
  • the extracting module is further configured to: set a plurality of control points at an edge of the avatar range in the reference image; adjust a position of the control point according to the instruction, and according to the adjusted control point The position determines the adjusted avatar range.
  • the synthesizing module is further configured to: determine a central axis of the avatar in the reference image; splicing an avatar in the reference image with a model body region in the virtual fitting model image, and splicing The axis is in line with the central axis of the body region of the model.
  • the user's avatar and the body area of the virtual fitting model are combined to obtain a new virtual fitting model, and when the virtual dummy fitting model is used for virtual fitting, the face and skin color are consistent with the user. Therefore, compared with the virtual fitting model in the gallery, the fitting effect of the virtual fitting model with the user's avatar is closer to the fitting effect of the user himself.
  • applying the GrabCut algorithm to the step of avatar extraction helps to obtain the user avatar as accurate as possible; considering the synthetic effect when synthesizing the user avatar with the body region of the virtual fitting model, The new virtual fitting model has a better visual effect.
  • FIG. 1 is a schematic diagram of a preferred process for extracting avatars in a reference image in accordance with an embodiment of the present invention
  • FIG. 3 is a schematic illustration of setting a circle in an image containing a user's avatar, in accordance with an embodiment of the present invention
  • FIG. 4 is a schematic diagram of obtaining a range of avatars in a reference image using the GrabCut algorithm according to an embodiment of the present invention
  • FIG. 5 is a schematic diagram of a user-adjusted avatar range according to an embodiment of the present invention
  • FIG. 6 is a schematic diagram of an accurate avatar range according to an embodiment of the present invention
  • FIG. 7 is a schematic diagram of an image in which an accurate avatar range is extracted, in accordance with an embodiment of the present invention.
  • FIG. 8 is a schematic diagram of a synthesized virtual fitting model according to an embodiment of the present invention
  • FIG. 9 is a schematic diagram showing a basic structure of an apparatus for producing a virtual fitting model image according to an embodiment of the present invention. detailed description
  • a reference image is provided to a server in an e-commerce system by a user through a terminal device, such as a personal computer, where the reference image has a user's avatar, which is generally a front photo of the user, and the server according to the Referring to the image and the virtual fitting model image in the gallery, a virtual fitting model having a user's avatar is obtained, in which the server first extracts the avatar in the reference image, and then the avatar in the reference image and the virtual fitting model image The model body area is synthesized to get a complete portrait.
  • FIG. 1 is a schematic diagram of a preferred flow of extracting an avatar in a reference image in accordance with an embodiment of the present invention. As shown in FIG.
  • the server may perform the following steps when extracting an avatar from a reference image provided by the user: Step S 1 1 : Detecting an avatar in the reference image to determine an avatar diameter and a center position of the avatar. This step can be implemented by using existing face detection (or facial recognition, face recognition, portrait recognition, etc.) techniques.
  • the central position of the avatar is generally portrait
  • the tip of the nose can also be the centroid of the face area.
  • the avatar area is also determined.
  • the reference image can be appropriately cut to center the avatar.
  • FIG. 2 is an image in which the user's avatar is centered according to an embodiment of the present invention, wherein the user avatar 21 is in the center position in the image 20.
  • Step S12 Two circles are set with the center position of the avatar obtained in step S1 1 as a center, the diameter of the first circle is close to the diameter of the avatar, and the diameter of the second circle is close to 1.5 times the diameter of the avatar. These two circles are used to provide parameters to the GrabCut algorithm in step S13, and the diameter can be appropriately adjusted according to actual conditions.
  • FIG. 3 is a schematic diagram of setting a circle in an image including a user's avatar, in which an image 31 is provided with a circle 31 and a circle 32, wherein the diameter of the circle 31 is close. At the diameter of the head 21, the diameter of the circle 32 is close to 1.5 times the diameter of the head 21.
  • Step S13 Obtain a range of avatars in the reference image using the GrabCut algorithm.
  • the circle 31 is internally set to the foreground
  • the circle 31 and the circle 32 are set as possible foregrounds
  • the circle 32 is externally set as the background.
  • the edge of the avatar range obtained after the algorithm is completed may refer to FIG. 4.
  • FIG. 4 is a schematic diagram of obtaining a range of avatars in a reference image using the GrabCut algorithm according to an embodiment of the present invention. As shown in FIG. 4, in the image 40, the curve 41 is the edge of the user's avatar 21.
  • Step S14 receiving an instruction for adjusting the avatar range and adjusting the avatar range according to the instruction. This command is issued by the user by operating the terminal device.
  • the server can provide some control points at the edge of the avatar range for the user to use. By dragging these control points with the mouse, the edge shape on both sides of the control point can be adjusted.
  • FIG. 4 when setting the control point, it is preferable to facilitate the user to adjust various parts of the edge of the avatar. Therefore, it is possible to first make several strips, for example, 8 rays, from the point A near the center in the avatar range, and the adjacent ray angle is close. Or, the intersection of the ray and the edge of the user's avatar 21, curve 41, is the control point.
  • FIG. 5 is a schematic diagram of a user-adjusted avatar range according to an embodiment of the present invention, where In the image 50, the edge of the user-adjusted avatar range is the curve 51.
  • Step S15 Determine the exact avatar range in the adjusted avatar range by using the GrabCut algorithm. This calculation is to further refine the avatar range.
  • the parameters of the GrabCut algorithm are set, the inside of the edge curve 51 of the adjusted avatar range is set to the foreground, and the outside of the curve 51 is set to the background.
  • the exact avatar range obtained after the calculation is as shown in FIG. 6.
  • FIG. 6 is a schematic diagram of a user-adjusted avatar range according to an embodiment of the present invention, where In the image 50, the edge of the user-adjusted avatar range is the curve 51.
  • FIG. 6 is a schematic diagram of the precise avatar range according to an embodiment of the present invention, wherein the edge of the avatar range in the image 60 is the curve 61.
  • Step S16 extracting an image of the precise avatar range from the reference image as an avatar in the reference image.
  • FIG. 7 is a schematic diagram of an image in which an accurate avatar range is extracted, according to an embodiment of the present invention.
  • step S13 if the color difference between the foreground (user avatar) and the background is large in the photo provided by the user, a fairly accurate avatar can be obtained in step S13, and steps S14 and S15 are not needed at this time.
  • the image in the avatar range of S 13 may be extracted in step S16.
  • the user's avatar needs to be combined with the model body area in the virtual fitting model image.
  • the user's avatar is aligned with the body of the model in the virtual fitting model image.
  • FIG. 8 is a schematic diagram of the synthesized virtual fitting model according to an embodiment of the present invention, wherein the image 80 has The fitting model 81, its avatar 81 1 is the user's avatar.
  • 9 is a schematic diagram showing the basic structure of an apparatus for producing a virtual fitting model image according to an embodiment of the present invention. As shown in FIG.
  • the apparatus 90 for producing a virtual fitting model image mainly includes an extraction module 91 and a synthesis module 92.
  • the extraction module 91 is configured to extract an avatar in the reference image;
  • the synthesis module 92 is configured to synthesize the avatar in the reference image with the model body region in the virtual fitting model image to obtain a complete portrait.
  • the extraction module 91 is further configured to: detect an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and set two circles centered on the center position of the avatar, the diameter of the first circle is close to the avatar diameter, and the second The diameter of the circle is close to 1.5 times the diameter of the avatar; the GrabCut algorithm is used to determine the avatar range in the reference image, where the first circle is internally set to the foreground, and the first circle and the second circle are set to possible The foreground, the second circle is set to the background; the image of the avatar range is extracted from the reference image as the avatar in the reference image.
  • the extraction module 91 is further configured to: detect an avatar in the reference image to determine an avatar diameter and a center position of the avatar; and set two circles with a center of the avatar as a center, the diameter of the first circle is close to the diametric diameter, and the second The diameter of the circle is close to 1.5 times the diameter of the avatar; use the GrabCut algorithm to obtain the avatar range in the reference image, where the first circle is internally set to the foreground, and the first circle and the second circle are set to possible The foreground of the second circle is set as the background; receiving an instruction for adjusting the avatar range and adjusting the avatar range according to the instruction; using the GrabCut algorithm to determine the precise avatar range in the adjusted avatar range, wherein, The inner edge curve of the adjusted avatar range is set to the foreground, and the external is set to the background; the image of the precise avatar range is extracted from the reference image as the avatar in the reference image.
  • the extraction module 91 is further configured to: set a plurality of control points at an edge of the avatar range in the reference image; adjust the position of the control point according to the instruction, and determine the adjusted avatar range according to the adjusted position of the control point.
  • the synthesis module 92 can also be configured to: determine a central axis of an avatar in the reference image; The avatar in the image is spliced with the body area of the model in the virtual fitting model image, and the central axis is in line with the central axis of the body region of the model.
  • the user's avatar and the body area of the virtual fitting model are combined to obtain a new virtual fitting model, and when the virtual dummy fitting model is used for virtual fitting, the face, the skin color, and the like are all related to the user.
  • the fitting effect of the virtual fitting model with the user's avatar is closer to the fitting effect of the user than the virtual fitting model in the gallery.
  • applying the GrabCut algorithm to the step of avatar extraction helps to obtain the user avatar as accurate as possible; considering the synthetic effect when synthesizing the user avatar with the body region of the virtual fitting model, The new virtual fitting model has a better visual effect.
  • the object of the present invention can also be achieved by merely providing a program product comprising program code for implementing the method or apparatus. That is to say, such a program product also constitutes the present invention, and a storage medium storing such a program product also constitutes the present invention.
  • the storage medium may be any well-known storage medium or any storage medium developed in the future.
  • various components or steps may be decomposed and/or recombined. These decompositions and/or recombinations should be considered as equivalents to the invention. Also, the steps of performing the above-described series of processing may naturally be performed in chronological order in the order illustrated, but need not necessarily be performed in chronological order.

Abstract

公开了一种制作虚拟试衣模特图像的方法和装置，有助于使虚拟试衣模特的试衣效果更接近用户本人的试衣效果。该方法包括：提取参考图像中的头像；将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区域合成，从而得到完整的人像。根据公开的技术方案，将用户头像与虚拟试衣模特的身体区域合成得到新的虚拟试衣模特，使用该新的虚拟试衣模特进行虚拟试衣时，脸型、肤色等都与用户本人一致，从而与图库中的虚拟试衣模特相比，具有用户头像的虚拟试衣模特的试衣效果更接近用户本人的试衣效果。

Description

一种制作虚拟试衣模特图像的方法和装置 技术领域
本发明涉及一种制作虚拟试衣模特图像的方法和装置。 背景技术
虚拟试衣是指利用计算机技术让虚拟模特代替真实用户试穿网上 出售的服装， 通过虚拟模特试穿呈现的效果对用户选购网上服装形成 参考， 便于用户购买到合适的服装。 目前的虚拟试衣方案主要利用图库中的虚拟试衣模特， 由用户选 择虚拟试衣模特和衣服， 从而可以通过该模特穿着该衣服的效果来挑 选服装。 发明内容
本发明提供一种制作虚拟试衣模特图像的方法和装置， 有助于使 虚拟试衣模特的试衣效果更接近用户本人的试衣效果。 为实现上述目的， 根据本发明的一个方面， 提供了一种制作虚拟 试衣模特图像的方法。 本发明的制作虚拟试衣模特图像的方法包括： 提取参考图像中的 头像； 将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区 域合成， 从而得到完整的人像。 可选地， 所述提取参考图像中的头像的步骤包括： 对所述参考图 像中的头像进行检测以确定头像直径和头像的中心位置； 以所述头像 的中心位置为中心设置两个圆， 第一个圆的直径接近于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法确定 所述参考图像中的头像范围， 其中， 所述第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为可能的前景， 所述第二个圆 外部设定为背景； 从所述参考图像中提取所述头像范围的图像作为所 述参考图像中的头像。 可选地， 所述提取参考图像中的头像的步骤包括： 对所述参考图 像中的头像进行检测以确定头像直径和头像的中心位置； 以所述头像 的中心位置为圆心设置两个圆， 第一个圆的直径接近于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法获得 所述参考图像中的头像范围， 其中， 所述第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为可能的前景， 所述第二个圆 外部设定为背景； 接收用于调整所述头像范围的指令并根据该指令对 该头像范围做出调整；使用 GrabCut算法确定调整后的头像范围中的精 确头像范围， 其中， 所述调整后的头像范围的边缘曲线的内部设定为 前景， 外部设定为背景； 从所述参考图像中提取所述精确头像范围的 图像作为所述参考图像中的头像。 可选地， 所述使用 GrabCut算法获得所述参考图像中的头像范围 的步骤之后、 所述接收用于调整所述头像范围的指令的步骤之前， 该 方法还包括： 在所述参考图像中的头像范围的边缘设置多个控制点； 所述指令用于调整所述控制点的位置； 所述根据该指令对该头像范围 做出调整的步骤包括： 根据所述指令对所述控制点的位置进行调整并 根据调整后的控制点的位置确定调整后的头像范围。 可选地， 将所述参考图像中的头像与虚拟试衣模特图像中的模特 身体区域合成的步骤包括： 确定所述参考图像中的头像的中轴线； 将 所述参考图像中的头像与虚拟试衣模特图像中的模特身体区域拼接， 并使所述中轴线与所述模特身体区域的中轴线在一条直线上。 根据本发明的另一方面， 提供了一种制作虚拟试衣模特图像的装 置。 本发明的制作虚拟试衣模特图像的装置包括： 提取模块， 用于提 取参考图像中的头像； 合成模块， 用于将所述参考图像中的头像与虚 拟试衣模特图像中的模特身体区域合成， 从而得到完整的人像。 可选地， 所述提取模块还用于： 对所述参考图像中的头像进行检 测以确定头像直径和头像的中心位置； 以所述头像的中心位置为中心 设置两个圆， 第一个圆的直径接近于所述头像直径， 第二个圆的直径 接近于所述头像直径的 1.5倍； 使用 GrabCut算法确定所述参考图像中 的头像范围， 其中， 所述第一个圆内部设定为前景， 所述第一个圆和 所述第二个圆之间设定为可能的前景， 所述第二个圆外部设定为背景; 从所述参考图像中提取所述头像范围的图像作为所述参考图像中的头 像。 可选地， 所述提取模块还用于： 对所述参考图像中的头像进行检 测以确定头像直径和头像的中心位置； 以所述头像的中心位置为圆心 设置两个圆， 第一个圆的直径接近于所述头像直径， 第二个圆的直径 接近于所述头像直径的 1.5倍； 使用 GrabCut算法获得所述参考图像中 的头像范围， 其中， 所述第一个圆内部设定为前景， 所述第一个圆和 所述第二个圆之间设定为可能的前景， 所述第二个圆外部设定为背景; 接收用于调整所述头像范围的指令并根据该指令对该头像范围做出调 整；使用 GrabCut算法确定调整后的头像范围中的精确头像范围，其中， 所述调整后的头像范围的边缘曲线的内部设定为前景， 外部设定为背 景； 从所述参考图像中提取所述精确头像范围的图像作为所述参考图 像中的头像。 可选地， 所述提取模块还用于： 在所述参考图像中的头像范围的 边缘设置多个控制点； 根据所述指令对所述控制点的位置进行调整并 根据调整后的控制点的位置确定调整后的头像范围。 可选地， 所述合成模块还用于： 确定所述参考图像中的头像的中 轴线； 将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区 域拼接， 并使所述中轴线与所述模特身体区域的中轴线在一条直线上。 根据本发明的技术方案， 将用户头像与虚拟试衣模特的身体区域 合成得到新的虚拟试衣模特， 使用该新的虚拟试衣模特进行虚拟试衣 时， 脸型、 肤色等都与用户本人一致， 从而与图库中的虚拟试衣模特 相比， 具有用户头像的虚拟试衣模特的试衣效果更接近用户本人的试 衣效果。另外本发明实施例中，将 GrabCut算法应用到头像提取的步骤 中， 有助于得到尽可能精确的用户头像； 在将用户头像与虚拟试衣模 特的身体区域合成时对合成效果加以考虑， 使得到的新的虚拟试衣模 特具有更好的视觉效果。 附图说明
附图用于更好地理解本发明， 不构成对本发明的不当限定。 其中： 图 1 是根据本发明实施例的提取参考图像中的头像的一种优选流 程的示意图；
图 2是根据本发明实施例的用户头像居中的图像；
图 3是根据本发明实施例的在包含用户头像的图像中设置圆的示 意图；
图 4是根据本发明实施例的使用 GrabCut算法获得参考图像中的 头像范围的示意图；
图 5是根据本发明实施例的用户调整后的头像范围的示意图； 图 6是根据本发明实施例的精确头像范围的示意图；
图 7 是根据本发明实施例的提取了精确头像范围的图像的示意 图；
图 8是根据本发明实施例的合成后的虚拟试衣模特的示意图； 图 9是根据本发明实施例的制作虚拟试衣模特图像的装置的基本 结构的示意图。 具体实施方式
以下结合附图对本发明的示范性实施例做出说明， 其中包括本发 明实施例的各种细节以助于理解， 应当将它们认为仅仅是示范性的。 因此， 本领域普通技术人员应当认识到， 可以对这里描述的实施例做 出各种改变和修改， 而不会背离本发明的范围和精神。 同样， 为了清 楚和简明， 以下的描述中省略了对公知功能和结构的描述。 在本发明实施例中， 由用户通过终端设备例如个人计算机， 向电 子商务系统中的服务器提供参考图像， 该参考图像中有用户的头像， 一般来说是用户的正面照片， 由该服务器根据该参考图像以及图库中 的虚拟试衣模特图像， 得到具有用户头像的虚拟试衣模特， 在该处理 中， 服务器首先提取参考图像中的头像， 然后将参考图像中的头像与 虚拟试衣模特图像中的模特身体区域合成， 从而得到完整的人像。 该 完整的人像因为具有用户的头像， 因此作为虚拟试衣模特时， 脸型、 肤色等都与用户本人一致， 从而与图库中的虚拟试衣模特相比， 具有 用户头像的虚拟试衣模特的试衣效果更接近用户本人的试衣效果。 为了使具有用户头像的虚拟试衣模特具有更好的视觉效果， 本实 施例中的方案中， 采取了相关措施使头像提取的精度更高， 并提高了 用户头像与虚拟试衣模特身体合成时的效果。 以下对本实施例的具体 技术方案做出说明。 图 1 是根据本发明实施例的提取参考图像中的头像的一种优选流 程的示意图。 如图 1 所示， 服务器在从用户提供的参考图像中提取头 像时可按如下步骤： 步骤 S 1 1 : 对参考图像中的头像进行检测以确定头像直径和头像 的中心位置。 本步骤可以采用现有的人脸检测 （或称面部识别、 人脸 识别、 人像识别等） 技术来实现。 头像的中心位置一般来说是人像的 鼻尖位置， 也可以是人脸区域的形心。 在确定出头像直径和头像的中 心位置后， 头像区域也随之确定。 此时可以对参考图像作适当剪裁， 使头像居中， 如图 2所示， 图 2是根据本发明实施例的用户头像居中 的图像， 其中用户头像 21在图像 20中处于居中位置。 步骤 S12: 以步骤 S 1 1 中得到的头像的中心位置为圆心设置两个 圆， 第一个圆的直径接近于头像直径， 第二个圆的直径接近于头像直 径的 1.5倍。 这两个圆是用来向步骤 S13中的 GrabCut算法提供参数， 直径可根据实际情况适当调整。 可参考图 3， 图 3是根据本发明实施例 的在包含用户头像的图像中设置圆的示意图， 其中图像 30中， 在用户 头像 21上设置了圆 31和圆 32，其中圆 31的直径接近于头像 21直径， 圆 32直径接近于头像 21直径的 1.5倍。 步骤 S13 : 使用 GrabCut算法获得参考图像中的头像范围。 在应 用 GrabCut算法时， 圆 31 内部设定为前景， 圆 31和圆 32之间设定为 可能的前景， 圆 32外部设定为背景。 算法完成之后得到的头像范围的 边缘可参考图 4， 图 4是根据本发明实施例的使用 GrabCut算法获得参 考图像中的头像范围的示意图。 如图 4所示， 图像 40中， 曲线 41是 用户头像 21的边缘。 步骤 S 14 : 接收用于调整头像范围的指令并根据该指令对该头像 范围做出调整。 该指令是用户通过操作终端设备而发出。 因为由用户 操作， 因此用户可以对自己的头像作一些取舍， 比如适当选择连接在 头部的脖子的长度。 服务器可以在头像范围的边缘提供一些控制点以 供用户使用， 用户用鼠标拖动这些控制点， 就可以调整控制点两侧的 边缘形状。 参考图 4， 设置控制点时最好是便于用户调整头像边缘的各 个部分， 因此可以先在头像范围内靠近中心的位置 A点起向外做若干 条例如 8条射线， 相邻射线夹角接近或相等， 射线与用户头像 21的边 缘即曲线 41的交点即为控制点。 用户调整头像范围后的状态可参考图 5， 图 5是根据本发明实施例的用户调整后的头像范围的示意图， 其中 图像 50中， 用户调整后的头像范围的边缘是曲线 51。 步骤 S15 : 使用 GrabCut算法确定调整后的头像范围中的精确头 像范围。本次计算是进一步使头像范围精确化。在设定 GrabCut算法的 参数时， 调整后的头像范围的边缘曲线 51的内部设定为前景， 曲线 51 的外部设定为背景。 计算后得到的精确头像范围如图 6所示， 图 6是 根据本发明实施例的精确头像范围的示意图， 其中图像 60内的头像范 围的边缘是曲线 61。 步骤 S 16 : 从参考图像中提取精确头像范围的图像作为参考图像 中的头像。 如图 7所示， 图 7是根据本发明实施例的提取了精确头像 范围的图像的示意图。 图 7中的图像 70内， 基于图 6中的精确头像范 围， 去除了图 6 中的精确头像范围以外的背景， 从而得到精确的头像 71。 需要说明的是， 如果在用户提供的照片中， 前景 （用户头像） 与 背景的色彩差异较大， 那么在步骤 S 13中就可以得到相当精确的头像， 此时无需步骤 S14和 S15， 直接在步骤 S 16中提取 S 13的头像范围内 的图像即可。 在得到用户头像之后， 需将用户头像与虚拟试衣模特图像中的模 特身体区域进行合成。 为了提高合成之后完整人像的视觉效果， 在本 实施例中， 将用户头像与虚拟试衣模特图像中的模特身体进行对齐。 具体做法是先确定参考图像中的头像的中轴线， 可以在步骤 S 1 1 中的 人脸识别过程中同时确定该中轴线； 然后在参考图像中的头像与虚拟 试衣模特图像中的模特身体区域拼接时， 使该中轴线与模特身体区域 的中轴线在一条直线上， 如图 8所示， 图 8是根据本发明实施例的合 成后的虚拟试衣模特的示意图， 其中图像 80内有试衣模特 81， 它的头 像 81 1是用户的头像。 图 9是根据本发明实施例的制作虚拟试衣模特图像的装置的基本 结构的示意图。 如图 9所示， 制作虚拟试衣模特图像的装置 90主要包 括提取模块 91和合成模块 92。 提取模块 91用于提取参考图像中的头 像； 合成模块 92用于将参考图像中的头像与虚拟试衣模特图像中的模 特身体区域合成， 从而得到完整的人像。 提取模块 91还可用于：对参考图像中的头像进行检测以确定头像 直径和头像的中心位置； 以头像的中心位置为中心设置两个圆， 第一 个圆的直径接近于头像直径， 第二个圆的直径接近于头像直径的 1.5 倍； 使用 GrabCut算法确定参考图像中的头像范围， 其中， 第一个圆内 部设定为前景， 第一个圆和第二个圆之间设定为可能的前景， 第二个 圆外部设定为背景； 从参考图像中提取头像范围的图像作为参考图像 中的头像。 提取模块 91还可用于：对参考图像中的头像进行检测以确定头像 直径和头像的中心位置； 以头像的中心位置为圆心设置两个圆， 第一 个圆的直径接近于头像直径， 第二个圆的直径接近于头像直径的 1.5 倍； 使用 GrabCut算法获得参考图像中的头像范围， 其中， 第一个圆内 部设定为前景， 第一个圆和第二个圆之间设定为可能的前景， 第二个 圆外部设定为背景； 接收用于调整头像范围的指令并根据该指令对该 头像范围做出调整；使用 GrabCut算法确定调整后的头像范围中的精确 头像范围， 其中， 调整后的头像范围的边缘曲线的内部设定为前景， 外部设定为背景； 从参考图像中提取精确头像范围的图像作为参考图 像中的头像。 提取模块 91还可用于：在参考图像中的头像范围的边缘设置多个 控制点； 根据指令对控制点的位置进行调整并根据调整后的控制点的 位置确定调整后的头像范围。 合成模块 92还可用于： 确定参考图像中的头像的中轴线； 将参考 图像中的头像与虚拟试衣模特图像中的模特身体区域拼接， 并使中轴 线与模特身体区域的中轴线在一条直线上。 根据本发明实施例的技术方案， 将用户头像与虚拟试衣模特的身 体区域合成得到新的虚拟试衣模特， 使用该新的虚拟试衣模特进行虚 拟试衣时， 脸型、 肤色等都与用户本人一致， 从而与图库中的虚拟试 衣模特相比， 具有用户头像的虚拟试衣模特的试衣效果更接近用户本 人的试衣效果。另外本发明实施例中，将 GrabCut算法应用到头像提取 的步骤中， 有助于得到尽可能精确的用户头像； 在将用户头像与虚拟 试衣模特的身体区域合成时对合成效果加以考虑， 使得到的新的虚拟 试衣模特具有更好的视觉效果。 以上结合具体实施例描述了本发明的基本原理， 但是， 需要指出 的是， 对本领域的普通技术人员而言， 能够理解本发明的方法和设备 的全部或者任何步骤或者部件， 可以在任何计算装置 （包括处理器、 存储介质等） 或者计算装置的网络中， 以硬件、 固件、 软件或者它们 的组合加以实现， 这是本领域普通技术人员在阅读了本发明的说明的 情况下运用他们的基本编程技能就能实现的。 因此， 本发明的目的还可以通过在任何计算装置上运行一个程序 或者一组程序来实现。 所述计算装置可以是公知的通用装置。 因此， 本发明的目的也可以仅仅通过提供包含实现所述方法或者装置的程序 代码的程序产品来实现。 也就是说， 这样的程序产品也构成本发明， 并且存储有这样的程序产品的存储介质也构成本发明。 显然， 所述存 储介质可以是任何公知的存储介质或者将来开发出的任何存储介质。 还需要指出的是， 在本发明的装置和方法中， 显然， 各部件或各 步骤是可以分解和 /或重新组合的。 这些分解和 /或重新组合应视为本发 明的等效方案。 并且， 执行上述系列处理的步骤可以自然地按照说明 的顺序按时间顺序执行， 但是并不需要一定按照时间顺序执行。 某些 步骤可以并行或彼此独立地执行。 上述具体实施方式， 并不构成对本发明保护范围的限制。 本领域 技术人员应该明白的是， 取决于设计要求和其他因素， 可以发生各种 各样的修改、 组合、 子组合和替代。 任何在本发明的精神和原则之内 所作的修改、 等同替换和改进等， 均应包含在本发明保护范围之内。

Claims

权 利 要 求 书
1. 一种制作虚拟试衣模特图像的方法， 其特征在于， 包括： 提取参考图像中的头像；
将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区域 成， 从而得到完整的人像。
2. 根据权利要求 1所述的方法， 其特征在于， 所述提取参考图像 中的头像的步骤包括：
对所述参考图像中的头像进行检测以确定头像直径和头像的中心 位置；
以所述头像的中心位置为中心设置两个圆， 第一个圆的直径接近 于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法确定所述参考图像中的头像范围， 其中， 所述 第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为 可能的前景， 所述第二个圆外部设定为背景；
从所述参考图像中提取所述头像范围的图像作为所述参考图像中 的头像。
3. 根据权利要求 1所述的方法， 其特征在于， 所述提取参考图像 中的头像的步骤包括：
对所述参考图像中的头像进行检测以确定头像直径和头像的中心 位置；
以所述头像的中心位置为圆心设置两个圆， 第一个圆的直径接近 于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法获得所述参考图像中的头像范围， 其中， 所述 第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为 可能的前景， 所述第二个圆外部设定为背景；
接收用于调整所述头像范围的指令并根据该指令对该头像范围做 出调整； 使用 GrabCut算法确定调整后的头像范围中的精确头像范围， 其 中， 所述调整后的头像范围的边缘曲线的内部设定为前景， 外部设定 为背景；
从所述参考图像中提取所述精确头像范围的图像作为所述参考图 像中的头像。
4. 根据权利要求 3所述的方法， 其特征在于，
所述使用 GrabCut算法获得所述参考图像中的头像范围的步骤之 后、 所述接收用于调整所述头像范围的指令的步骤之前， 该方法还包 括： 在所述参考图像中的头像范围的边缘设置多个控制点；
所述指令用于调整所述控制点的位置；
所述根据该指令对该头像范围做出调整的步骤包括： 根据所述指 令对所述控制点的位置进行调整并根据调整后的控制点的位置确定调 整后的头像范围。
5. 根据权利要求 1至 4中任一项所述的方法， 其特征在于， 将所 述参考图像中的头像与虚拟试衣模特图像中的模特身体区域合成的步 骤包括：
确定所述参考图像中的头像的中轴线；
将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区域 拼接， 并使所述中轴线与所述模特身体区域的中轴线在一条直线上。
6. 一种制作虚拟试衣模特图像的装置， 其特征在于， 包括： 提取模块， 用于提取参考图像中的头像；
合成模块， 用于将所述参考图像中的头像与虚拟试衣模特图像中 的模特身体区域合成， 从而得到完整的人像。
7. 根据权利要求 6所述的装置， 其特征在于， 所述提取模块还用 于：
对所述参考图像中的头像进行检测以确定头像直径和头像的中心 位置；
以所述头像的中心位置为中心设置两个圆， 第一个圆的直径接近 于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法确定所述参考图像中的头像范围， 其中， 所述 第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为 可能的前景， 所述第二个圆外部设定为背景；
从所述参考图像中提取所述头像范围的图像作为所述参考图像中 的头像。
8. 根据权利要求 6所述的装置， 其特征在于， 所述提取模块还用 于：
对所述参考图像中的头像进行检测以确定头像直径和头像的中心 位置；
以所述头像的中心位置为圆心设置两个圆， 第一个圆的直径接近 于所述头像直径， 第二个圆的直径接近于所述头像直径的 1.5倍； 使用 GrabCut算法获得所述参考图像中的头像范围， 其中， 所述 第一个圆内部设定为前景， 所述第一个圆和所述第二个圆之间设定为 可能的前景， 所述第二个圆外部设定为背景；
接收用于调整所述头像范围的指令并根据该指令对该头像范围做 出调整；
使用 GrabCut算法确定调整后的头像范围中的精确头像范围， 其 中， 所述调整后的头像范围的边缘曲线的内部设定为前景， 外部设定 为背景；
从所述参考图像中提取所述精确头像范围的图像作为所述参考图 像中的头像。
9. 根据权利要求 8所述的装置， 其特征在于， 所述提取模块还用 于： 在所述参考图像中的头像范围的边缘设置多个控制点； 根据所述 指令对所述控制点的位置进行调整并根据调整后的控制点的位置确定 调整后的头像范围。
10. 根据权利要求 6至 9 中任一项所述的装置， 其特征在于， 所 述合成模块还用于：
确定所述参考图像中的头像的中轴线；
将所述参考图像中的头像与虚拟试衣模特图像中的模特身体区域 拼接， 并使所述中轴线与所述模特身体区域的中轴线在一条直线上。
PCT/CN2014/077188 2013-08-16 2014-05-09 一种制作虚拟试衣模特图像的方法和装置 WO2015021796A1 (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US14/912,109 US20160196662A1 (en) 2013-08-16 2014-05-09 Method and device for manufacturing virtual fitting model image
AU2014308419A AU2014308419B2 (en) 2013-08-16 2014-05-09 Method and device for manufacturing virtual fitting model image
JP2016533787A JP6168675B2 (ja) 2013-08-16 2014-05-09 仮想試着モデル画像を生成するための方法及びデバイス
RU2016109205A RU2632165C2 (ru) 2013-08-16 2014-05-09 Способ и устройство для создания изображения модели для виртуальной примерки
GB1602704.7A GB2534046B (en) 2013-08-16 2014-05-09 Method and device for manufacturing virtual fitting model image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201310359012.9A CN103489107B (zh) 2013-08-16 2013-08-16 一种制作虚拟试衣模特图像的方法和装置
CN201310359012.9 2013-08-16

Publications (1)

Publication Number Publication Date
WO2015021796A1 true WO2015021796A1 (zh) 2015-02-19

Family

ID=49829309

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2014/077188 WO2015021796A1 (zh) 2013-08-16 2014-05-09 一种制作虚拟试衣模特图像的方法和装置

Country Status (9)

Country Link
US (1) US20160196662A1 (zh)
JP (1) JP6168675B2 (zh)
CN (1) CN103489107B (zh)
AU (1) AU2014308419B2 (zh)
GB (1) GB2534046B (zh)
HK (1) HK1192042A1 (zh)
RU (1) RU2632165C2 (zh)
TW (1) TWI602137B (zh)
WO (1) WO2015021796A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108876936A (zh) * 2018-07-27 2018-11-23 京东方科技集团股份有限公司 虚拟显示方法、装置、电子设备及计算机可读存储介质

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103489107B (zh) * 2013-08-16 2015-11-25 北京京东尚科信息技术有限公司 一种制作虚拟试衣模特图像的方法和装置
CN104408702B (zh) * 2014-12-03 2018-11-23 浩云星空信息技术（北京）有限公司 一种图像处理方法及装置
CN105279737A (zh) * 2015-07-10 2016-01-27 深圳市美贝壳科技有限公司 一种生成人物照片素材的装置及方法
KR102279063B1 (ko) * 2016-03-31 2021-07-20 삼성전자주식회사 이미지 합성 방법 및 그 전자장치
CN107612869A (zh) * 2016-07-11 2018-01-19 中兴通讯股份有限公司 图像处理方法及装置
CN108629824B (zh) * 2018-04-28 2020-07-31 京东数字科技控股有限公司 图像生成方法、装置、电子设备及计算机可读介质
CN108961130B (zh) * 2018-06-27 2021-09-24 华北理工大学 一种用于图书馆图书的安全借还方法和装置
CN110456960B (zh) * 2019-05-09 2021-10-01 华为技术有限公司 图像处理方法、装置及设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8077931B1 (en) * 2006-07-14 2011-12-13 Chatman Andrew S Method and apparatus for determining facial characteristics
CN102298797A (zh) * 2011-08-31 2011-12-28 深圳市美丽同盟科技有限公司 三维虚拟试衣的方法、装置及系统
CN102402641A (zh) * 2010-09-14 2012-04-04 盛乐信息技术（上海）有限公司 一种基于网络的三维虚拟试衣系统及方法
US20120095589A1 (en) * 2010-10-15 2012-04-19 Arkady Vapnik System and method for 3d shape measurements and for virtual fitting room internet service
CN102456213A (zh) * 2010-10-20 2012-05-16 上海无戒空间信息技术有限公司 照片处理方法
CN102842089A (zh) * 2012-07-18 2012-12-26 上海交通大学 基于3d真实人体模型及服装模型的网络虚拟试衣系统
CN103489107A (zh) * 2013-08-16 2014-01-01 北京京东尚科信息技术有限公司 一种制作虚拟试衣模特图像的方法和装置

Family Cites Families (127)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5345313A (en) * 1992-02-25 1994-09-06 Imageware Software, Inc Image editing system for taking a background and inserting part of an image therein
US5577179A (en) * 1992-02-25 1996-11-19 Imageware Software, Inc. Image editing system
US7859551B2 (en) * 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
US6351265B1 (en) * 1993-10-15 2002-02-26 Personalized Online Photo Llc Method and apparatus for producing an electronic image
US5623587A (en) * 1993-10-15 1997-04-22 Kideo Productions, Inc. Method and apparatus for producing an electronic image
US5680528A (en) * 1994-05-24 1997-10-21 Korszun; Henry A. Digital dressing room
US5937081A (en) * 1996-04-10 1999-08-10 O'brill; Michael R. Image composition system and method of using same
US6016148A (en) * 1997-06-06 2000-01-18 Digital Equipment Corporation Automated mapping of facial images to animation wireframes topologies
JPH11154240A (ja) * 1997-11-20 1999-06-08 Nintendo Co Ltd 取込み画像を用いて画像を作成するための画像作成装置
JPH11213139A (ja) * 1998-01-30 1999-08-06 Shima Seiki Mfg Ltd 試着シミュレーションシステム
JP2000251074A (ja) * 1999-03-02 2000-09-14 Fujitsu Ltd 画像生成処理方法およびその装置
US7092569B1 (en) * 1999-07-29 2006-08-15 Fuji Photo Film Co., Ltd. Method and device for extracting specified image subjects
US6807290B2 (en) * 2000-03-09 2004-10-19 Microsoft Corporation Rapid computer modeling of faces for animation
JP2001344481A (ja) * 2000-06-02 2001-12-14 Nec Personal System Ltd インターネットブティックシステム、その販売方法、及びそのプログラムを記録した記録媒体
US20050162419A1 (en) * 2002-03-26 2005-07-28 Kim So W. System and method for 3-dimension simulation of glasses
CN1313979C (zh) * 2002-05-03 2007-05-02 三星电子株式会社 产生三维漫画的装置和方法
US6919892B1 (en) * 2002-08-14 2005-07-19 Avaworks, Incorporated Photo realistic talking head creation system and method
JP2004178163A (ja) * 2002-11-26 2004-06-24 Matsushita Electric Ind Co Ltd 画像処理方法及びその装置
ES2211357B1 (es) * 2002-12-31 2005-10-16 Reyes Infografica, S.L. Metodo asistido por ordenador para diseñar prendas de vestir.
JP4218348B2 (ja) * 2003-01-17 2009-02-04 オムロン株式会社 撮影装置
US20040152512A1 (en) * 2003-02-05 2004-08-05 Collodi David J. Video game with customizable character appearance
JP4277534B2 (ja) * 2003-02-12 2009-06-10 オムロン株式会社 画像編集装置および画像編集方法
JP4345622B2 (ja) * 2003-11-05 2009-10-14 オムロン株式会社 瞳色推定装置
NZ530738A (en) * 2004-01-21 2006-11-30 Stellure Ltd Methods and systems for compositing images
US7430339B2 (en) * 2004-08-09 2008-09-30 Microsoft Corporation Border matting by dynamic programming
WO2006034256A2 (en) * 2004-09-17 2006-03-30 Cyberextruder.Com, Inc. System, method, and apparatus for generating a three-dimensional representation from one or more two-dimensional images
US7486808B2 (en) * 2004-09-21 2009-02-03 Fujifilm Corporation Image processing device, image processing method and image processing program
JP4328286B2 (ja) * 2004-12-14 2009-09-09 本田技研工業株式会社 顔領域推定装置、顔領域推定方法及び顔領域推定プログラム
WO2006089140A2 (en) * 2005-02-15 2006-08-24 Cuvid Technologies Method and apparatus for producing re-customizable multi-media
FR2884008A1 (fr) * 2005-03-31 2006-10-06 France Telecom Systeme et procede de localisation de points d'interet dans une image d'objet mettant en oeuvre un reseau de neurones
US8948461B1 (en) * 2005-04-29 2015-02-03 Hewlett-Packard Development Company, L.P. Method and system for estimating the three dimensional position of an object in a three dimensional physical space
US9492750B2 (en) * 2005-07-29 2016-11-15 Pamela Leslie Barber Digital imaging method and apparatus
GB2431717A (en) * 2005-10-31 2007-05-02 Sony Uk Ltd Scene analysis
US8660319B2 (en) * 2006-05-05 2014-02-25 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
JP4699298B2 (ja) * 2006-06-28 2011-06-08 富士フイルム株式会社 人体領域抽出方法および装置並びにプログラム
JP4905931B2 (ja) * 2006-07-04 2012-03-28 富士フイルム株式会社 人体領域抽出方法および装置並びにプログラム
JP2008022240A (ja) * 2006-07-12 2008-01-31 Fujifilm Corp 撮影装置，画像処理装置、及び画像ファイル生成方法，画像処理方法、並びに画像処理プログラム
JP2008033654A (ja) * 2006-07-28 2008-02-14 Noritsu Koki Co Ltd 写真画像判別方法、写真画像判別プログラム、及び、写真画像処理装置
JP2008033656A (ja) * 2006-07-28 2008-02-14 Noritsu Koki Co Ltd 写真画像処理装置
US20080136820A1 (en) * 2006-10-20 2008-06-12 Microsoft Corporation Progressive cut: interactive object segmentation
CN101183450A (zh) * 2006-11-14 2008-05-21 朱滨 虚拟服装真人试穿系统及其构建方法
US7941002B2 (en) * 2006-12-01 2011-05-10 Hewlett-Packard Development Company, L.P. Apparatus and methods of producing photorealistic image thumbnails
JP4315215B2 (ja) * 2007-05-18 2009-08-19 カシオ計算機株式会社 撮像装置、及び顔検出方法、顔検出制御プログラム
EP2162864A1 (en) * 2007-05-31 2010-03-17 Depth Analysis Pty.Ltd. Systems and methods for applying a 3d scan of a physical target object to a virtual environment
US8726194B2 (en) * 2007-07-27 2014-05-13 Qualcomm Incorporated Item selection using enhanced control
US9131140B2 (en) * 2007-08-10 2015-09-08 Canon Kabushiki Kaisha Image pickup apparatus and image pickup method
US8437514B2 (en) * 2007-10-02 2013-05-07 Microsoft Corporation Cartoon face generation
JP2009128996A (ja) * 2007-11-20 2009-06-11 Fujifilm Corp 体形モデル作成装置及び体形モデル作成方法
US8682029B2 (en) * 2007-12-14 2014-03-25 Flashfoto, Inc. Rule-based segmentation for objects with frontal view in color images
JP4891270B2 (ja) * 2008-01-22 2012-03-07 キヤノン株式会社 画像編集装置、画像編集方法及びプログラム
WO2009101153A2 (en) * 2008-02-13 2009-08-20 Ubisoft Entertainment S.A. Live-action image capture
US8290279B2 (en) * 2008-02-25 2012-10-16 WaniB Method, a system, and a computer program product for processing images
JP5141317B2 (ja) * 2008-03-14 2013-02-13 オムロン株式会社 対象画像検出デバイス、制御プログラム、および該プログラムを記録した記録媒体、ならびに対象画像検出デバイスを備えた電子機器
US20090234716A1 (en) * 2008-03-17 2009-09-17 Photometria, Inc. Method of monetizing online personal beauty product selections
US20130215116A1 (en) * 2008-03-21 2013-08-22 Dressbot, Inc. System and Method for Collaborative Shopping, Business and Entertainment
US10872322B2 (en) * 2008-03-21 2020-12-22 Dressbot, Inc. System and method for collaborative shopping, business and entertainment
JP4407761B2 (ja) * 2008-03-24 2010-02-03 東洋紡績株式会社 衣服シミュレーション装置、衣服シミュレーションプログラム、及び衣服シミュレーション方法
US8331685B2 (en) * 2008-05-28 2012-12-11 Apple Inc. Defining a border for an image
US8548251B2 (en) * 2008-05-28 2013-10-01 Apple Inc. Defining a border for an image
WO2010022351A2 (en) * 2008-08-22 2010-02-25 University Of Virginia Patent Foundation System and method for low bandwidth image transmission
US8385609B2 (en) * 2008-10-21 2013-02-26 Flashfoto, Inc. Image segmentation
JP2010147808A (ja) * 2008-12-18 2010-07-01 Olympus Imaging Corp 撮像装置および撮像装置における画像処理方法
US8175376B2 (en) * 2009-03-09 2012-05-08 Xerox Corporation Framework for image thumbnailing based on visual similarity
US9020298B2 (en) * 2009-04-15 2015-04-28 Microsoft Technology Licensing, Llc Automated image cropping to include particular subjects
US8885977B2 (en) * 2009-04-30 2014-11-11 Apple Inc. Automatically extending a boundary for an image to fully divide the image
JP2011091571A (ja) * 2009-10-21 2011-05-06 Olympus Imaging Corp 動画像作成装置及び動画像作成方法
KR100967379B1 (ko) * 2009-11-04 2010-07-05 (주)올라웍스 그래프 컷의 초기값을 설정하는 방법, 단말 장치, 및 컴퓨터 판독 가능한 기록 매체
US8416277B2 (en) * 2009-12-10 2013-04-09 Apple Inc. Face detection as a metric to stabilize video during video chat session
CN102142041A (zh) * 2010-01-29 2011-08-03 上海欧业信息科技有限公司 个性化服装设计系统
US8787663B2 (en) * 2010-03-01 2014-07-22 Primesense Ltd. Tracking body parts by combined color image and depth processing
WO2011152841A1 (en) * 2010-06-01 2011-12-08 Hewlett-Packard Development Company, L.P. Replacement of a person or object in an image
US10843078B2 (en) * 2010-06-07 2020-11-24 Affectiva, Inc. Affect usage within a gaming context
EP2503513A1 (en) * 2010-06-11 2012-09-26 Altron Corporation Character generation system, character generation method, and program
WO2012030869A2 (en) * 2010-08-30 2012-03-08 Apple Inc. Multi-image face-based image processing
JP5750253B2 (ja) * 2010-09-28 2015-07-15 任天堂株式会社 画像生成プログラム、撮像装置、撮像システム、及び画像生成方法
JP5738569B2 (ja) * 2010-10-15 2015-06-24 任天堂株式会社 画像処理プログラム、装置、システムおよび方法
JP5827007B2 (ja) * 2010-10-15 2015-12-02 任天堂株式会社 ゲームプログラム、画像処理装置、画像処理システム、および画像処理方法
US8726161B2 (en) * 2010-10-19 2014-05-13 Apple Inc. Visual presentation composition
US20120136755A1 (en) * 2010-11-29 2012-05-31 Yang Jin Seok System and Method for Providing Virtual Fitting Experience
US8760464B2 (en) * 2011-02-16 2014-06-24 Apple Inc. Shape masks
CN102859525A (zh) * 2011-02-24 2013-01-02 松下电器产业株式会社 图像处理装置以及图像处理方法
US9013489B2 (en) * 2011-06-06 2015-04-21 Microsoft Technology Licensing, Llc Generation of avatar reflecting player appearance
US9153031B2 (en) * 2011-06-22 2015-10-06 Microsoft Technology Licensing, Llc Modifying video regions using mobile device input
JP2013029930A (ja) * 2011-07-27 2013-02-07 Univ Of Tokyo 画像処理装置
US8798362B2 (en) * 2011-08-15 2014-08-05 Hewlett-Packard Development Company, L.P. Clothing search in images
US20130054425A1 (en) * 2011-08-29 2013-02-28 Francesco Alexander Portelos Web-based system permitting a customer to shop online for clothes with their own picture
CN102982581B (zh) * 2011-09-05 2017-04-05 北京三星通信技术研究有限公司 基于图像的虚拟试穿系统和方法
US20130108170A1 (en) * 2011-10-28 2013-05-02 Raymond William Ptucha Image Recomposition From Face Detection And Facial Features
US20130108167A1 (en) * 2011-10-28 2013-05-02 Raymond William Ptucha Image Recomposition From Face Detection And Facial Features
US20130108171A1 (en) * 2011-10-28 2013-05-02 Raymond William Ptucha Image Recomposition From Face Detection And Facial Features
US20130108168A1 (en) * 2011-10-28 2013-05-02 Raymond William Ptucha Image Recomposition From Face Detection And Facial Features
US20130108166A1 (en) * 2011-10-28 2013-05-02 Eastman Kodak Company Image Recomposition From Face Detection And Facial Features
US8811747B2 (en) * 2011-10-28 2014-08-19 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US8938100B2 (en) * 2011-10-28 2015-01-20 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
WO2013127418A1 (en) * 2012-02-27 2013-09-06 Eth Zurich Method and system for image processing in video conferencing for gaze correction
CN102750535B (zh) * 2012-04-01 2014-03-19 北京京东世纪贸易有限公司 自动提取图像前景的方法和系统
US9147207B2 (en) * 2012-07-09 2015-09-29 Stylewhile Oy System and method for generating image data for on-line shopping
RU2504009C1 (ru) * 2012-07-10 2014-01-10 Общество С Ограниченной Ответственностью "Дрессформер" Способ обеспечения удаленной примерки и/или выбора одежды
WO2014024362A1 (ja) * 2012-08-06 2014-02-13 株式会社ニコン 電子機器、方法およびプログラム
JP5928757B2 (ja) * 2012-11-06 2016-06-01 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
US9390627B1 (en) * 2012-11-14 2016-07-12 Smart Information Flow Technologies, LLC Stimulus recognition training and detection methods
KR101732898B1 (ko) * 2012-11-26 2017-05-08 삼성전자주식회사 영상 처리 장치 및 방법
US20140201023A1 (en) * 2013-01-11 2014-07-17 Xiaofan Tang System and Method for Virtual Fitting and Consumer Interaction
US9378586B2 (en) * 2013-02-21 2016-06-28 Seoul National University Industry Foundation Method of smart grading based on parameterized draft
JP6002058B2 (ja) * 2013-02-22 2016-10-05 株式会社東芝 画像処理装置、方法、及びプログラム
CN110009635B (zh) * 2013-03-13 2023-04-28 Fdna公司 用于在对象可能受医学状况影响时进行鉴别的系统、方法和计算机可读介质
US9603437B2 (en) * 2013-04-08 2017-03-28 Panasonic Intellectual Property Corporation Of America Image processing device, image processing method, and program, capable of virtual reproduction of makeup application state
US9460518B2 (en) * 2013-04-17 2016-10-04 Yahoo! Inc. Visual clothing retrieval
US8983152B2 (en) * 2013-05-14 2015-03-17 Google Inc. Image masks for face-related selection and processing in images
US9589357B2 (en) * 2013-06-04 2017-03-07 Intel Corporation Avatar-based video encoding
CN103456032B (zh) * 2013-08-19 2015-10-07 北京京东尚科信息技术有限公司 一种处理虚拟试衣模特图像的方法和装置
CA2921938C (en) * 2013-08-22 2016-12-20 Bespoke, Inc. Method and system to create custom, user-specific eyewear
JP6132719B2 (ja) * 2013-09-18 2017-05-24 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
JP6341646B2 (ja) * 2013-10-17 2018-06-13 セーレン株式会社 試着支援装置及び方法
JP6287047B2 (ja) * 2013-10-22 2018-03-07 富士通株式会社 画像処理装置、画像処理方法および画像処理プログラム
US9129191B2 (en) * 2013-12-16 2015-09-08 Adobe Systems Incorporated Semantic object selection
WO2015103620A1 (en) * 2014-01-06 2015-07-09 Andrea Aliverti Systems and methods to automatically determine garment fit
CN103927724B (zh) * 2014-04-30 2016-05-18 北京京东尚科信息技术有限公司 一种处理上衣图像的方法和装置
US9760935B2 (en) * 2014-05-20 2017-09-12 Modiface Inc. Method, system and computer program product for generating recommendations for products and treatments
CN104468578B (zh) * 2014-12-10 2017-12-26 怀效宁 一种无线通讯的优先通讯系统和通讯方法
US20150363660A1 (en) * 2014-06-12 2015-12-17 Asap54.Com Ltd System for automated segmentation of images through layout classification
US9818048B2 (en) * 2015-01-19 2017-11-14 Ebay Inc. Fine-grained categorization
US20160253549A1 (en) * 2015-02-27 2016-09-01 Leo Ramic Estimating personal information from facial features
CN106156692B (zh) * 2015-03-25 2019-12-13 阿里巴巴集团控股有限公司 一种用于人脸边缘特征点定位的方法及装置
US9443316B1 (en) * 2015-07-21 2016-09-13 Sony Corporation Semi-automatic image segmentation
CN105520724A (zh) * 2016-02-26 2016-04-27 严定远 一种测量人体心跳速率和呼吸频率的方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8077931B1 (en) * 2006-07-14 2011-12-13 Chatman Andrew S Method and apparatus for determining facial characteristics
CN102402641A (zh) * 2010-09-14 2012-04-04 盛乐信息技术（上海）有限公司 一种基于网络的三维虚拟试衣系统及方法
US20120095589A1 (en) * 2010-10-15 2012-04-19 Arkady Vapnik System and method for 3d shape measurements and for virtual fitting room internet service
CN102456213A (zh) * 2010-10-20 2012-05-16 上海无戒空间信息技术有限公司 照片处理方法
CN102298797A (zh) * 2011-08-31 2011-12-28 深圳市美丽同盟科技有限公司 三维虚拟试衣的方法、装置及系统
CN102842089A (zh) * 2012-07-18 2012-12-26 上海交通大学 基于3d真实人体模型及服装模型的网络虚拟试衣系统
CN103489107A (zh) * 2013-08-16 2014-01-01 北京京东尚科信息技术有限公司 一种制作虚拟试衣模特图像的方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108876936A (zh) * 2018-07-27 2018-11-23 京东方科技集团股份有限公司 虚拟显示方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
US20160196662A1 (en) 2016-07-07
JP2016530624A (ja) 2016-09-29
GB201602704D0 (en) 2016-03-30
JP6168675B2 (ja) 2017-07-26
CN103489107B (zh) 2015-11-25
CN103489107A (zh) 2014-01-01
TWI602137B (zh) 2017-10-11
AU2014308419A1 (en) 2016-04-07
TW201508679A (zh) 2015-03-01
AU2014308419B2 (en) 2017-08-10
GB2534046A (en) 2016-07-13
GB2534046B (en) 2017-05-10
HK1192042A1 (zh) 2014-08-08
RU2632165C2 (ru) 2017-10-02
RU2016109205A (ru) 2017-09-20

Similar Documents

Publication Publication Date Title
TWI602137B (zh) 製作虛擬試衣模特兒圖像的方法和裝置
US11749025B2 (en) Eye pose identification using eye features
TW202044202A (zh) 建立臉部模型的方法、裝置、電腦可讀儲存介質及電子設備
TWI554951B (zh) 實現虛擬試戴的方法和裝置
US9348950B2 (en) Perceptually guided capture and stylization of 3D human figures
KR101896137B1 (ko) 플레이어의 모습을 반영한 아바타의 생성 기법
WO2019019828A1 (zh) 目标对象的遮挡检测方法及装置、电子设备及存储介质
CN110688948B (zh) 视频中人脸性别变换方法、装置、电子设备和存储介质
EP3726471A1 (en) Augmented reality method and device
US10255703B2 (en) Original image generation system
TWI763205B (zh) 關鍵點檢測的方法和裝置、電子設備及記錄媒體
CN107615337A (zh) 一种三维头发建模方法及装置
CN103927161A (zh) 实况视频的实时照片修饰
CN104866807B (zh) 一种人脸定位方法及系统
US20200394828A1 (en) Image object pose synchronization
WO2018149350A1 (zh) 一种非面部roi识别方法及装置
WO2017152848A1 (zh) 人物面部模型的编辑方法及装置
KR20140123399A (ko) 사용자 영상의 신체 부위를 검출하는 장치 및 방법
TWI709914B (zh) 人臉識別方法及裝置
CN113486695A (zh) 一种化妆镜的妆容辅助方法及化妆镜
CN114067086A (zh) 一种图像处理方法、装置及其相关设备和存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14835949

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016533787

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2014835949

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: IDP00201600951

Country of ref document: ID

WWE Wipo information: entry into national phase

Ref document number: 14912109

Country of ref document: US

ENP Entry into the national phase

Ref document number: 201602704

Country of ref document: GB

Kind code of ref document: A

Free format text: PCT FILING DATE = 20140509

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2016109205

Country of ref document: RU

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2014308419

Country of ref document: AU

Date of ref document: 20140509

Kind code of ref document: A