WO2004079652A1 - Virtual try-on display apparatus, virtual try-on display method, virtual try-on display program, and computer readable recording medium in which that program has been recorded - Google Patents

Virtual try-on display apparatus, virtual try-on display method, virtual try-on display program, and computer readable recording medium in which that program has been recorded Download PDF

Info

Publication number
WO2004079652A1
WO2004079652A1 PCT/JP2004/002644 JP2004002644W WO2004079652A1 WO 2004079652 A1 WO2004079652 A1 WO 2004079652A1 JP 2004002644 W JP2004002644 W JP 2004002644W WO 2004079652 A1 WO2004079652 A1 WO 2004079652A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
clothing
human body
mask
read
Prior art date
Application number
PCT/JP2004/002644
Other languages
French (fr)
Japanese (ja)
Inventor
Akinori Suzuki
Original Assignee
Digital Fashion Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Digital Fashion Ltd. filed Critical Digital Fashion Ltd.
Publication of WO2004079652A1 publication Critical patent/WO2004079652A1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/16Cloth

Definitions

  • Virtual fitting display device virtual fitting display method, virtual fitting display program, and computer readable recording medium storing the program
  • the present invention provides a virtual try-on display device, a virtual try-on display method, a virtual try-on display program, and a computer-readable recording of the program, which display a virtual try-on state by combining a clothes image with a human body image.
  • a virtual try-on display device a virtual try-on display method, a virtual try-on display program, and a computer-readable recording of the program, which display a virtual try-on state by combining a clothes image with a human body image.
  • FIG. 20 is a diagram illustrating an example of a combined image obtained by combining a human body image, a first clothing image, and a second clothing image in a case where conventional processing is performed.
  • a human body image representing the human body M a first clothing image representing the first clothing U, and a second clothing image representing the second clothing J are combined, a composite image G G4 is created.
  • the first clothes representing clothes to be tried on the human body are further replaced by the first clothes.
  • the second garment is larger than the second garment representing the garment to be tried on, the first garment, which is actually covered by the second garment and should not be seen, protrudes from the second garment and is displayed.
  • a human body M, a first garment U such as a shirt to be tried on the human body, and a second garment J to be tried on the shirt such as a knitted shirt are overlapped.
  • the sleeve, torso, and hem (the hatched portion in the figure) of the first garment U are displayed so as to protrude from the second garment J. Therefore, the first clothes and Trying on the second and second clothes virtually will give a very uncomfortable feeling.
  • the present invention has been made to solve the above-described problem, and can display a virtual fitting state in a case where clothes images representing a plurality of clothes are superimposed on a human body image representing a human body without a sense of discomfort. It is an object of the present invention to provide a virtual fitting display device, a virtual fitting display method, a virtual fitting display program, and a computer-readable recording medium storing the program.
  • the virtual fitting display device is a virtual fitting display device that displays a virtual fitting state by synthesizing a two-dimensional clothing image with a two-dimensional human body image, wherein the clothing image is the human body.
  • Mask image creating means for creating a mask image by superimposing the first clothing image read from the storage means on the human body image read from the storage means.
  • a mask created by the mask image creating means Masking means for masking using an image; drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed; Image display means for displaying the drawn image created by the drawn image creating means.
  • a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
  • the storage unit stores a plurality of types of second clothing images
  • the mask image creation unit calculates a logical product of an overlapping area of the plurality of types of second clothing images.
  • the mask image is created by calculating the logical sum of the overlapping area of the image created by the calculation and the human body image, and the masking means reads the first clothes read from the storage means.
  • the mask image is obtained by calculating the logical sum of the overlapping area of the human body image and the image created by obtaining the logical product of the overlapping areas of the plurality of types of second clothing images. Is created, a mask image is used to mask an image obtained by superimposing the first clothing image on the human body image, and a drawing image obtained by superimposing the masked image and the first second clothing image is obtained. The created drawing image is displayed. Therefore, since the first clothing image is masked by the mask image including the human body image while including all of the multiple types of second clothing images, the second clothing image of one of the multiple types of second clothing images is masked.
  • the first clothing image can be displayed without protruding from the second clothing image.
  • the clothing image is virtually further above the second clothing image.
  • the storage means stores a plurality of types of third clothing images
  • the mask image creation means includes a logic of an overlapping area of the plurality of types of third clothing images.
  • a mask image is created by calculating a logical sum of an image created by obtaining a product and an overlapping area of the human body image, and the masking unit reads the second clothing image read from the storage unit.
  • the step creates a drawn image in which the image masked by the masking means and the third clothing image read from the storage means are overlapped, and the image display means creates the drawn image by the drawn image creating means It is preferable to display the rendered drawing image.
  • the third clothing image is virtually tried on further than the second clothing image, the logical product of the overlapping regions of the plurality of types of third clothing images is obtained.
  • a mask image is created by calculating the logical sum of the created image and the overlapping region of the human body image, and the image obtained by superimposing the second clothing image on the human body image is masked using a mask image.
  • a drawing image is created by superimposing the masked image and the first third clothing image, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including the human body image while including all of the multiple types of third clothing images, one of the multiple types of third clothing images is included. Even if the third clothing image is combined with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
  • the storage means may store a point at which a line that equally divides a circle centered on a human body into predetermined angles based on the center point and a circular arc of the circle intersect.
  • a plurality of the human body images photographed from a plurality of viewpoints, and the first clothing image and the second clothing image are stored.
  • the mask image creating unit is read from the storage unit.
  • the masked image is masked using the mask image created by the mask image creating unit, and the drawn image creating unit reads the image masked by the masking unit and the image read from the storage unit. It is preferable that a drawing image is created by superimposing the human body image and a second clothing image viewed from the same viewpoint, and the image display means displays the drawing image created by the drawing image creation means.
  • a point at which a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point as a reference and the arc of the circle intersect is used as a viewpoint, and shooting is performed from the same viewpoint.
  • a mask image is created by superimposing the plurality of created human body images and the second clothing image, and masking is performed using the mask image on the image obtained by superimposing the first clothing image on the human body image.
  • a drawing image is created by superimposing the masked image and the second image, and the created drawing image is displayed.
  • the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on is changed to 2 It can be displayed three-dimensionally using a two-dimensional image, and the fitting state viewed from multiple viewpoints can be confirmed.
  • the virtual fitting display device further includes a mask image correction accepting unit that accepts a modification of the mask image created by the mask image creating unit according to the outer shape of the first clothing image, and the masking unit.
  • a mask image correction accepting unit that accepts a modification of the mask image created by the mask image creating unit according to the outer shape of the first clothing image
  • the masking unit Preferably, the drawing image created by the drawing image creation unit is masked using the mask image modified by the mask image modification receiving unit.
  • the virtual fitting display method according to the present invention is a virtual fitting display method for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image.
  • the computer is configured to read the human body image read from the storage unit that stores the human body image, the first clothing image, and the second clothing image, and the second clothing read from the storage unit.
  • the mask image creation step A masking step of masking using the mask image created in the step, and the computer superimposes the image masked in the masking step and the second clothing image read from the storage means. It is characterized by including a drawing image creation step of creating a drawing image, and an image display step of displaying the drawing image created by the computer in the drawing image creation step.
  • a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
  • a virtual fitting display program is a virtual fitting display program for displaying a virtual fitting state by synthesizing a two-dimensional clothing image with a two-dimensional human body image, wherein the clothing image includes: A 2D first clothing image virtually tried on on the human body image, and a 2D second clothing image virtually tried on the first clothing image, Storage means for storing the human body image, the first clothing image, and the second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means.
  • Mask image creating means for creating a mask image in which the first clothing image is read from the storage means.
  • Masking means for masking the image superimposed on the human body image by using the mask image created by the mask image creating means; an image masked by the masking means; Drawing image creation means for creating a drawing image in which the second clothing image read from the means is superimposed, and a computer as an image display means for displaying the drawing image created by the drawing image creation means It is characterized by the function of
  • a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
  • a computer-readable recording medium recording a virtual fitting display program is a virtual fitting for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image.
  • a computer-readable recording medium recording a display program wherein the clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a first clothing image of the first clothing image.
  • a computer functioning as a drawing image creating means for creating a drawing image in which the second clothing image read from the means is superimposed, and an image display means for displaying the drawing image created by the drawing image creating means. It is characterized by having
  • the first clothing image to be virtually tried on on the human body image is the human body image.
  • the image superimposed on the image is masked using a mask image in which the human body image and the second clothing image are superimposed, and a drawing image is created in which the masked image and the second clothing image are superimposed.
  • the created drawing image is displayed, so that even if the first clothing image is larger than the second clothing image, the first clothing image can be displayed without protruding from the second clothing image. This makes it possible to display the fitting state virtually tried on without any discomfort.
  • FIG. 1 is a block diagram showing the configuration of the virtual fitting display device according to the first embodiment of the present invention.
  • FIG. 2 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the first embodiment.
  • FIG. 3 is a diagram illustrating an example of a human body image stored in the human body image storage unit.
  • FIG. 4 is a diagram illustrating an example of the first clothing image stored in the clothing image storage unit.
  • FIG. 5 shows an example of another first clothing image stored in the clothing image storage unit.
  • FIG. 6 is a diagram illustrating an example of the second clothing image stored in the clothing image storage unit.
  • FIG. 7 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the first embodiment shown in FIG.
  • FIG. 8 is a diagram illustrating an example of a mask image.
  • FIG. 9 is a diagram showing an example of a combined image obtained by combining the first clothing image shown in FIG. 4 with the human body image shown in FIG.
  • FIG. 10 is a diagram showing an example of a combined image obtained by combining the human body image shown in FIG. 3 with the first clothing image shown in FIG. 4 and the second clothing image shown in FIG.
  • FIG. 11 is a diagram showing an example of a drawing image in which the second clothing image shown in FIG. 6 is combined with the composite image obtained by masking the composite image shown in FIG. 9 using the mask image shown in FIG.
  • FIG. 12 shows a main function profile of the virtual fitting display device shown in FIG. 1 in the second embodiment.
  • FIG. 13 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the second embodiment shown in FIG.
  • FIG. 14 is a diagram showing an example of a combined image obtained by combining the first clothing image shown in FIG. 5 with the human body image shown in FIG.
  • FIG. 15 is a diagram illustrating an example of a drawing image obtained by combining the first clothing image and the second clothing image with the human body image and masking the mask using the mask image illustrated in FIG. 10.
  • FIG. 16 is a diagram illustrating an example of a corrected mask image.
  • FIG. 17 is a diagram illustrating an example of a drawn image obtained by masking a combined image in which a human body image and a first clothing image are combined using the mask image illustrated in FIG. 16.
  • FIG. 18 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the third embodiment.
  • FIG. 19 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the third embodiment shown in FIG.
  • FIG. 20 is a diagram showing an example of a display screen displayed when a conventional process is performed.
  • FIG. 1 is a block diagram showing the configuration of the virtual fitting display device according to the first embodiment of the present invention.
  • the virtual fitting display device shown in Fig. 1 is composed of a personal computer, etc., and has an input device 1, ROM (read only memory) 2, CPU (central processing unit) 3, RAM (random access memory) 4, external A storage device 5, a display device 6, and a recording medium drive device 7 are provided.
  • Each block is connected to an internal bus, and various data and the like are input and output between the blocks via the bus, and various processes are executed under the control of the CPU 3.
  • the input device 1 includes a keyboard, a mouse, and the like, and is used by an operator to input operation commands and the like.
  • ROM 2 stores a system program and the like in advance.
  • the external storage device 5 is composed of a hard disk drive or the like, and It stores a dress display program and the like.
  • the CPU 3 reads a virtual fitting display program and the like from the external storage device 5 and executes a virtual fitting display process and the like described later to control the operation of each block.
  • the RAM 4 is used as a work area of the CPU 3 and the like.
  • the display device 6 is composed of a CRT (cathode ray tube) or a liquid crystal display device, and displays various screens under the control of the CPU 3.
  • the virtual fitting display program and the like may be recorded on a computer-readable recording medium 8 composed of a CD-ROM, a flexible disk, and the like.
  • a virtual fitting display program and the like read from the recording medium 8 using the recording medium drive 7 composed of a CD-ROM drive, a flexible disk drive, and the like are installed in the external storage device 5.
  • the virtual fitting display program or the like is stored in another computer or the like connected via a network, the virtual fitting display program or the like may be downloaded from the computer or the like via the network.
  • FIG. 2 is a block diagram of main functions of the virtual fitting display device shown in FIG. 1 in the first embodiment.
  • the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40.
  • the program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, and a display control unit 26.
  • the storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35.
  • the operation unit 10 includes the input device 1 and the like, and is used by an operator of the virtual fitting display device to input various operation commands.
  • the program execution unit 20 includes a CPU 3 and the like.
  • the CPU 3 and the like execute a virtual fitting display program and the like stored in the external storage device 5 to thereby provide a viewpoint information reception unit 21 and a mask image creation unit 2.
  • the storage unit 30 includes an external storage device 5 and the like, and stores a human body image storage unit 31, a clothing image storage unit 32, and a mask image storage. It functions as the section 33, the composite image storage section 34, and the drawing image storage section 35.
  • the human body image storage unit 31 previously stores a human body image of a human body as a fitting object such as a mannequin.
  • FIG. 3 is a diagram illustrating an example of the human body image MG stored in the human body image storage unit 31.
  • the human body image storage unit 31 stores a human body image MG as shown in FIG. 3 as image data.
  • the human body image MG is a two-dimensional image created in advance.
  • the human body image storage unit 31 stores a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point and a point at which the arc of the circle intersects.
  • the human body image MG viewed from a point is stored as image data.
  • image data For example, 16 human body images MG viewed from 16 viewpoints in which a circle centered on the human body is divided every 22.5 degrees are recorded.
  • the human body image MG may be image data obtained by directly photographing a person trying on using a digital camera or the like.
  • image data of the human body image MG may be obtained by capturing a photograph with a scanner or the like.
  • the clothing image storage unit 32 stores the image data of the first clothing image that is virtually tried on on the human body image, and the clothing data that is virtually tried on further on the first clothing image, and is located outside the human body.
  • the image data of the second clothing image to be virtually tried on is stored in advance.
  • the first clothing image is image data relating to a plurality of different types of first clothing
  • the clothing image storage unit 32 stores image data relating to a plurality of types of first clothing.
  • the second clothing image is image data relating to a plurality of different types of second clothing
  • the clothing image storage unit 32 stores image data relating to a plurality of types of second clothing.
  • FIG. 4 is a diagram illustrating an example of the first clothing image TG stored in the clothing image storage unit 32.
  • FIG. 5 is a diagram illustrating another first clothing image TG stored in the clothing image storage unit 32.
  • FIG. 6 is a diagram illustrating an example of an image SG, and FIG. 6 is a diagram illustrating an example of a second clothing image JK stored in the clothing image storage unit 32.
  • the clothing image storage unit 32 stores the first clothing images TG and SG as shown in FIGS. 4 and 5 as image data, and stores the second clothing image JK as shown in FIG. 6 as image data. are doing.
  • the first clothing image TG, SG and the second clothing image JK are two-dimensional images.
  • the clothing image storage unit 32 stores a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point and a point at which a circle intersects the arc of the circle.
  • Clothing seen from Stores image data of clothes for example, stores a 16-point image viewed from 16 viewpoints, which is a circle centered on the human body divided by 22.5 degrees, for each type. ing.
  • the first garment and the second garment are, for example, garments that are virtually tried on on the upper body of the human body, the first garment is, for example, a T-shirt or a button shirt, and the second garment is, for example, For example, a jacket or the like.
  • the first clothing image TG shown in FIG. 4 is a first clothing image representing Tsh
  • the first clothing image SG shown in FIG. 5 is a first clothing image representing a sweater
  • the second clothing image JK shown in FIG. 6 is a second clothing image representing a jacket. Note that the first clothing image TG, SG and the second clothing image JK are obtained by directly photographing the person wearing the clothing using a digital camera or the like, and processing the captured image to perform image processing. It is also possible to create a clothes image composed of only clothes except objects, and use the created clothes image as image data.
  • the human body image, the first clothing image, and the second clothing image store 16 pieces of image data for clothing images of the same type, respectively.
  • the present invention is not particularly limited thereto.For example, 12 image data obtained by dividing the surrounding 360 degrees by 30 degrees may be used, and 4 image data obtained by dividing the surrounding 360 degrees by 90 degrees. May be used, or 36 image data obtained by dividing the surrounding 360 degrees at every 10 degrees may be used.
  • the human body image, the first clothing image, and the second clothing image may use only one image viewed from a predetermined direction instead of an image viewed from a plurality of viewpoints.
  • the viewpoint information reception unit 21 receives the virtual fitting state of the clothes on the human body from which direction among the multiple viewpoints, and from which of the multiple viewpoints the clothing body is reached. Is displayed as the viewpoint information.
  • a line that is equally divided into 22.5 degrees with respect to the center point of a circle centered on the human body that has virtually tried on clothes intersects the arc of the circle
  • the viewpoint information reception unit 21 makes a virtual fitting of the clothing on the human body. It accepts from which of the 16 viewpoints the state is viewed, and accepts, as viewpoint information, from which of the 16 viewpoints the virtual fitting state of the clothes on the human body is displayed.
  • the information is input using the mouse or keypad of the operation unit 10.
  • the mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the second clothing image read from the clothing image storage unit 32 are superimposed.
  • the mask image MASK-S applied to the first clothing image is an image created by calculating the logical product of the overlapping regions of the plurality of types of second clothing images, and the logic of the overlapping region with the human body image. It is created by calculating the sum, and is expressed by the following equation (1).
  • MASK_S (JK1 ⁇ JK2 ⁇ JK3 ⁇ ) UBODY ⁇ ⁇ ⁇ ⁇ (1)
  • MASK-S represents a mask image applied to the first clothes image
  • JK1, JK2 and JK3 each represent a second clothing image
  • BOD Y represents a human body image
  • represents a logical product (AND)
  • U represents a logical sum (OR).
  • the mask image MASK-S is an image that includes all of a plurality of types of second clothing images and also includes a human body image.
  • the mask image MASK-S converts the image obtained by superimposing a plurality of types of second clothing images and a human body image into "0" and "1", and delineates the area to be transmitted through black (" 0 ") or white (" 1 ").
  • a region to be transmitted is represented by black, and other background regions are represented by white. That is, the mask image creating unit 22 is created by calculating the logical sum of the image created by calculating the logical product of the overlapping areas of the plurality of types of second clothing images and the human body image.
  • a black-and-white image representing the image in black and the background in white is created as a mask image MASK_S, and the created mask image MASK-S is stored in the mask image storage unit 33.
  • the mask image storage unit 33 stores the mask image MASK-S created by the mask image creation unit 22.
  • the composite image creation unit 23 creates a composite image in which the first clothing image read from the clothing image storage unit 32 is superimposed on the human body image read from the human body image storage unit 31. At this time, the composite image creating unit 23 reads the human body image and the first clothing image based on the viewpoint information received by the viewpoint information receiving unit 21. In other words, when displaying the fitting state viewed from the front, an image of the human body viewed from the front and an image of the first clothing viewed from the front are read out, and a composite image is created by superimposing the read out images. . In addition, The composite image creating section 23 creates a composite image by combining the first clothing image on the human body image. The composite image storage unit 34 stores a composite image in which the human body image created by the composite image creation unit 23 and the first clothing image are superimposed.
  • the masking unit 24 reads out the composite image created by the composite image creation unit 23 and stored in the composite image storage unit 34, and is created by the mask image creation unit 22 and stored in the mask image storage unit 33.
  • the read mask image is read out, and the masked image is used to mask the composite image obtained by superimposing the first clothing image on the human body image.
  • the image masked by the masking section 24 is stored again in the composite image storage section 34.
  • the drawing image creation unit 25 reads out a combined image of the first clothing image and the human body image masked by the mask image from the combined image storage unit 34 and stores the second clothing image in the clothing image storage unit 3 2
  • the drawing image is created by combining the synthesized image and the second clothing image, and the created drawn image is stored in the drawn image storage unit 35.
  • the drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
  • the display control unit 26 controls to output the drawn image stored in the drawn image storage unit 35 to the display unit 40.
  • the display unit 40 includes a display device 6 and displays a drawn image output from the drawn image storage unit 35.
  • the human body image storage section 31 and the clothing image storage section 32 correspond to storage means
  • the mask image creation section 22 corresponds to mask image creation means
  • the masking section 24 corresponds to masking means.
  • the drawing image creation unit 25 corresponds to a composite image creation unit
  • the display control unit 26 and the display unit 40 correspond to a display unit.
  • FIG. 7 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the first embodiment shown in FIG. 8 to 11 are diagrams for explaining the virtual fitting display processing according to the first embodiment.
  • the viewpoint information receiving unit 21 receives the viewpoint information input by the user using the operation unit 10.
  • the viewpoint information is information for displaying a fitting state from a predetermined viewpoint among a plurality of viewpoints.
  • the center of a circle whose center is a human body on which clothes are virtually tried on is considered. 22.5 degrees equally from point
  • the view point is the point at which the line dividing the circle intersects with the arc of the circle. 16
  • the human body image, the first clothing image, and the second clothing image viewed from each of the 16 directions are stored in the storage unit 30. Is remembered. 'Therefore, the viewpoint information accepting unit 21 accepts which viewpoint among the viewpoints 16 to display the image viewed from.
  • step S2 the mask image creation unit 22 reads the human body image based on the viewpoint information from the human body image storage unit 31 and reads the second clothing image based on the viewpoint information from the clothing image storage unit 32, The region representing the human body in the human body image read from the human body image storage unit 31 and the region representing the second clothing in the second clothing image read from the clothing image storage unit 32 A black and white two-color mask image is created by making the superimposed area black and the area representing the human body in the human body image and the background area other than the area representing the second clothing in the second clothing image white. I do.
  • step S3 the mask image creation unit 22 stores the mask image created in step S2 in the mask image storage unit 33.
  • FIG. 8 is a diagram illustrating an example of the mask image MASK_S.
  • the mask image MAS K_S represents the overlapping region in which the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are superimposed, and the background area is black. This is an image in which is represented by white.
  • the overlapping region where the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are overlapped is represented by hatching, but originally represented in black. Is done. Therefore, the outer shape of the mask image MASK-1S is formed by the outer shape of the second clothing image JK and the outer shape of the human body image MG.
  • step S4 the composite image creating unit 23 reads out the human body image based on the viewpoint information from the human body image storage unit 31 and performs the first reading based on the viewpoint information from the clothing image storage unit 32.
  • the clothing image is read, and a first clothing image read from the clothing image storage unit 32 is superimposed on the human body image read from the human body image storage unit 31 to create a composite image.
  • step S5 the composite image creation unit 23 in step S4 stores the created composite image in the composite image storage unit 34.
  • FIG. 9 is a diagram showing an example of a synthesized image GG1 obtained by combining the first clothing image TG shown in FIG. 4 with the human body image MG shown in FIG. 3, and
  • FIG. 10 is a diagram showing the human body image MG shown in FIG.
  • the composite image G obtained by combining the first clothing image TG shown in Fig. 4 and the second clothing image JK shown in Fig. 6
  • FIG. 6 is a diagram illustrating an example of G2.
  • a synthesized image GG2 shown in FIG. 10 is created.
  • the first clothing image TG and the second clothing image JK are superimposed on the human body image MG
  • the first clothing image of the first clothing image is larger than the second clothing image of the second clothing image JK.
  • a portion of the first garment may be displayed so as to protrude from the second garment.
  • the sleeve portion A of the first garment is displayed so as to protrude from the second garment. Therefore, a mask image is created, and the composite image GG1 is masked with the mask image to remove the protruding portion.
  • step S6 the masking section 24 reads out the composite image from the composite image storage section 34, reads the mask image MA SK —S from the mask image storage section 33, and reads the composite image storage section 3.
  • the combined image read from 4 is masked using the mask image MA SK-S read from the mask image storage unit 33.
  • the black area of the mask image MA SK-S that is, the area representing the human body and the second clothing in the mask image MA SK-S is transparent, so if the mask image is overlaid on the composite image, The area other than the area representing the human body and the second garment will be covered and the first garment protruding from the second garment will be removed.
  • the masking section 24 stores the composite image masked in step S6 in the composite image storage section 34.
  • step S8 the drawing image creation unit 25 reads the composite image from the composite image storage unit 34, reads the second clothing image from the clothing image storage unit 32, and reads the second clothing image from the composite image storage unit 34.
  • the drawing image is created by superimposing the second synthesized image read from the clothing image storage unit 32 on the output synthesized image and synthesizing the second synthesized image.
  • step S9 the drawing image creation unit 25 stores the drawing image created in step S8 in the drawing image storage unit 35.
  • FIG. 11 shows an example of a drawing image BG1 in which the composite image GG1 shown in Fig. 9 is masked using the mask image MASK-S shown in Fig. 8 and the second clothing image shown in Fig. 6 is composited.
  • FIG. 11 the drawing image BG 1 is a composite image obtained by combining the first clothing image TG and the human body image MG, and the human body image MG and the second clothing image J Since masking is performed using the mask image created with K, the outer shape becomes the outer shape of the human body and the second clothing, and the first clothing is synthesized without protruding from the second clothing.
  • step S10 the display control unit 26 reads the drawn image BG1 from the drawn image storage unit 35, and outputs the drawn image BG1 read from the drawn image storage unit 35 to the display unit 40. .
  • the display section 40 displays the drawn image BG1 output from the display control section 26. Therefore, the composite image GG1 shown in FIG. 9 in which the first clothing image TG is superimposed on the human body image MG is used as the mask image MASK-S shown in FIG. 8 created from the human body image MG and the second clothing image JK. By masking with, the sleeve portion A of the first garment protruding from the second garment is removed, and the fitting state can be displayed without feeling uncomfortable.
  • the human body image MG and the second clothing image JK are superimposed on the image in which the first clothing image TG virtually tried on on the human body image MG is superimposed on the human body image MG.
  • Mask image MA SK-S a composite image is created by superimposing the masked image and the second clothing image JK, and the created composite image is displayed. Even when the clothing image TG is larger than the second clothing image JK, the first clothing image TG can be displayed from the second clothing image JK without protruding, and the fitting state virtually tried on can be displayed without discomfort. Can be displayed.
  • a mask image MA SK-S is created by calculating a logical sum of an overlapping region of an overlapping region of a plurality of types of second clothing images and an overlapping region of the human body image MG.
  • the mask image MA SK-S is used to mask the image obtained by superimposing the first clothing image TG on the human body image MG, and the masked image is superimposed on the second clothing image JK.
  • the created composite image is created, and the created composite image is displayed. Therefore, the first clothing image TG is masked by the mask image MA SK-S including the human body image MG while including all of the multiple types of second clothing images.
  • the mask image creation unit 22 includes all of the plurality of types of second clothing images and a human body image. Since the mask image including the image is created, the created mask image can be used for synthesizing all the second clothing images.
  • a mask image MASK_S is created by superimposing the human body image MG and the second clothing image JK, and a mask image MASK-S is created for the image in which the first clothing image TG is superimposed on the human body image MG. Used and masked ..
  • a composite image is created by superimposing the masked image and the second image JK, and the created composite image is displayed.
  • the first clothing image TG can be displayed without protruding from the second clothing image JK, and virtually.
  • the fitting state of the fitting is displayed three-dimensionally using a two-dimensional image, and the fitting state from multiple viewpoints can be confirmed.
  • the virtual fitting display device realizes a display of a fitting state without any uncomfortable feeling by receiving a correction of a mask image created automatically.
  • FIG. 12 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the second embodiment.
  • the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40.
  • the program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction. Includes reception section 27.
  • the storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35. Since the virtual fitting display device according to the second embodiment shown in FIG. 12 has almost the same configuration as the virtual fitting display device shown in FIG. 2, only different configurations will be described below.
  • the mask image correction receiving unit 27 receives the correction of the mask image by the operation unit 10 and corrects the mask image created by the mask image creating unit 22 according to the outer shape of the first clothing image.
  • the mask image created in the first embodiment MASK—S ' is created by adding a shape SS to MA S K__S to eliminate discomfort. This can be expressed by the following equation (2).
  • MASK—S ' MASK_S US S- ⁇ ⁇ ⁇ (2)
  • MASK-S ′ represents a corrected mask image
  • MASK-S is a mask image composed of a human body image and a second clothing image automatically created by the mask image creating section 22.
  • SS represents an image that is newly added to eliminate the discomfort of the mask image MASK-S
  • U represents a logical sum (OR).
  • the mask image correction receiving unit 27 stores the corrected mask image in the mask image storage unit 33.
  • the mask image correction receiving unit 27 corresponds to a mask image correction receiving unit.
  • FIG. 13 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the second embodiment shown in FIG.
  • FIGS. 14 to 17 are diagrams for explaining the virtual fitting display processing in the second embodiment.
  • step S21 and step S22 shown in FIG. 13 is the same as the processing of step S1 and step S2 shown in the flow chart of FIG. 7, and a description thereof will be omitted.
  • step S25 the composite image creating section 23 creates a composite image in which the human body image MG shown in FIG. 3 and the first clothing image SG shown in FIG. 5 are superimposed.
  • FIG. 14 is a diagram showing an example of a synthesized image GG3 obtained by synthesizing the first clothing image SG shown in FIG. 5 on the human body image MG shown in FIG. 3, and
  • FIG. 9 is a diagram showing an example of a drawn image BG2 obtained by combining a clothing image SG and a second clothing image JK and masking the mask image using a mask image MASK-S shown in FIG.
  • FIG. 14 is created.
  • FIG. 14 When the first clothing image SG and the second clothing image JK are superimposed on the human body image MG and synthesized, and masked using the mask image MASK-S created by the mask image creating unit 22, FIG. The drawing image BG2 shown in FIG. 15 is created.
  • the first clothing image SG The wrist cuff B is also masked. This is the mask image MASK ⁇ This is because the region through which S penetrates is composed of a region representing the human body in the human body image and a region representing the second clothing in the second clothing image.
  • the mask image is modified as follows.
  • step S23 the mask image correction receiving unit 27 receives correction of the mask image created in step S22.
  • the user corrects the mask image created by the mask image creation unit 22 using the operation unit 10 according to the outer shape of the first garment.
  • FIG. 16 is a diagram showing an example of the corrected mask image MASH_S '.
  • the modified mask image MA S K—S ′ has a shape S S added to the external shape of the mask image MA S K—S shown in FIG. Note that in FIG.
  • step S 24 mask image correction receiving section 27 stores the corrected mask image in mask image storage section 33.
  • step S25 to step S31 shown in FIG. 13 is the same as the processing from step S4 to step S10 shown in the flowchart of FIG.
  • Fig. 17 shows a drawing image BG3 in which the combined image obtained by combining the human body image MG and the first clothing image SG is masked using the mask image shown in Fig. 16 and the second clothing image JK is combined. It is a figure showing an example. As shown in FIG. 17, a combined image obtained by superimposing the first clothing image SG on the human body image MG and combining the masked image with the modified mask image MASK-S ′ shown in FIG. By combining the second clothing image JK shown in FIG. 6, the cuff portion B in the first clothing image SG can be displayed without discomfort.
  • the mask image MAS K_S created by the mask image creation unit 22 is modified according to the outer shape of the first clothing image SG, and the mask image MAS K_S is modified by the composite image creation unit 23.
  • the composite image created by the masking is masked using the mask image MA SK-S 'corrected by the mask image correction receiving unit 27, so that the fitting state that is virtually tried on is displayed without further discomfort. In addition to being able to do this, it is possible to reproduce the state of the actual fitting in a realistic manner.
  • the mask image is corrected manually by the user, but is corrected using the automatically created mask image, so that the mask image is created in a shorter time than when the mask image is manually created from scratch.
  • a mask image can be created.
  • the clothing image storage unit 32 stores a two-dimensional third clothing image virtually tried on further than the second clothing image, and a human body image and the first clothing image are stored. The image, the second clothing image, and the third clothing image are combined, and the combined image is displayed.
  • FIG. 18 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the third embodiment.
  • the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40.
  • the program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction. Includes reception section 27.
  • the storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35. Note that the virtual fitting display device according to the second embodiment shown in FIG. 18 has almost the same configuration as the virtual fitting display device shown in FIG. 2, and therefore only different configurations will be described below.
  • the clothing image storage unit 32 stores the image data of the first clothing image that is virtually tried on on the human body image, and the first clothing image that is virtually tried on further than the first clothing image.
  • the image data of the third clothing image and the image data of the third clothing image to be virtually tried on are further stored in advance on the second clothing image.
  • the third clothing image is image data relating to a plurality of different types of third clothing, and the clothing image storage unit 32 stores image data relating to a plurality of types of third clothing.
  • the third clothing image is a two-dimensional image.
  • the clothing image storage unit 32 includes a line that equally divides the circle centered on the human body into predetermined angles based on the center point, and a circle of the circle. Stores image data of clothes viewed from each viewpoint with a point where the arc intersects. For example, a circle centered on the human body is divided into 22.5 degrees and viewed from 16 viewpoints. The image data is stored for each type.
  • the third clothing is, for example, clothing that is virtually tried on on the upper body of the human body, such as a coat.
  • the mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the third clothing image read from the clothing image storage unit 32 are superimposed.
  • the mask image MASK-J applied to the second clothing image is an image created by calculating a logical product of overlapping regions of a plurality of types of third clothing images, and the human body image. It is created by calculating the logical sum of the overlapping areas, and is expressed by the following equation (3).
  • MASK—J (CT1 ⁇ 2 ⁇ 3 ⁇ ) UBODY- ⁇ ⁇ ⁇ (3)
  • MASK-J represents a mask image applied to the second clothing image
  • CT1, CT2 , CT 3 represent the third clothing image
  • BOD Y represents the human body image
  • represents the logical product (AND)
  • U represents the logical sum (OR).
  • the mask image MASK-J is an image that includes all of a plurality of types of third clothing images and also includes a human body image. Also, the mask image MASK — J converts the image obtained by superimposing a plurality of types of third clothing images and the human body image into “0” and “1”, and deciphers the area to be transmitted through black (“ 0 ") or white (" 1 "). In the mask image MASK-J in the present embodiment, the region to be transmitted is represented by black, and the other background is represented by white.
  • the mask image creation unit 22 calculates the logical sum of the overlapping area of the overlapping area of the plurality of types of third clothing images and the image created by calculating the logical sum of the overlapping area of the human body image. Is represented as black and a black-and-white image representing the background as white is created as a mask image MASK-J, and the created mask image MASK-J is stored in the mask image storage unit 33.
  • the mask image storage unit 33 stores the mask image MASK_J created by the mask image creating unit 22.
  • the composite image creation unit 23 converts the second clothing image read from the clothing image storage unit 32 into the human body image read from the composite image storage unit 31, the first clothing image, and the mask image MA SK-1S. A composite image is created by superimposing the composite image on the composite image.
  • the image creating unit 23 reads out the second clothing image based on the viewpoint information received by the viewpoint information receiving unit 21. That is, when displaying the fitting state viewed from the front, an image of the second clothing viewed from the front is read, and a composite image is created by superimposing the read images.
  • the composite image creating unit 23 creates a composite image by synthesizing the second clothing image on the composite image.
  • the composite image storage unit 34 stores a composite image in which the second clothing image created by the composite image creation unit 23 and the composite image are superimposed. '
  • the masking section 24 is created by the combined image creation section 23, and the combined image stored in the combined image storage section 34 is created by the mask image creation section 22 and stored in the mask image storage section 33. Masking is performed using the mask image.
  • the image masked by the masking unit 24 is stored again in the composite image storage unit 34.
  • the drawing image creation unit 25 reads out a composite image of the first clothing image, the second clothing image, and the human body image masked by the mask image from the composite image storage unit 34, and reads the third clothing image. Is read from the clothing image storage unit 32, a drawing image is created by combining the composite image with the third clothing image, and the created drawing image is stored in the drawing image storage unit 35.
  • the drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
  • FIG. 19 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the third embodiment shown in FIG. Note that the processing up to step S41 and step S47 shown in FIG. 19 is the same as the processing up to step S1 and step S7 shown in the flowchart of FIG.
  • step S48 the mask image creation unit 22 reads the human body image based on the viewpoint information from the human body image storage unit 31 and reads the third clothing image based on the viewpoint information from the clothing image storage unit 32.
  • the black-and-white two-color mask is obtained by making the overlapping area where the image is overlapped black and the area representing the background other than the area representing the human body in the human body image and the area representing the third clothing in the third clothing image white. Create an image.
  • step S49 the mask image creating section 22 converts the mask image created in step S48 into a mask image. The image is stored in the image storage unit 33.
  • step S50 the composite image creation unit 23 reads out the composite image obtained by combining the human body image, the first clothing image, and the mask image MA SK-S from the composite image storage unit 34, and stores the clothing image in the clothing image storage unit.
  • the second clothing image read from the human body image storage unit 31 is superimposed on the composite image read from the human body image composite image storage unit 34 by reading the second clothing image based on the viewpoint information from 32. Create a combined image.
  • step S51 the composite image creation unit 23 stores the composite image created in step S50 in the composite image storage unit 34.
  • step S52 the masking unit 24 reads the composite image from the composite image storage unit 34, reads the mask image MA SK-J from the mask image storage unit 33, and reads the mask image MA SK-J from the composite image storage unit 34.
  • the read composite image is masked using the mask image MA SK-J read from the mask image storage unit 33.
  • the black region of the mask image MA SK-J that is, the region representing the human body and the third clothing in the mask image MA SK-J is transparent, so if the mask image is overlaid on the composite image, The area other than the area of the human body and the third garment will be covered, and the second garment protruding from the third garment will be removed.
  • step S53 the masking section 24 stores the composite image masked in step S52 in the composite image storage section 34.
  • step S54 the drawn image creating unit 25 reads the synthesized image from the synthesized image storage unit 34, reads the third clothing image from the clothing image storage unit 32, and reads the third clothing image from the synthesized image storage unit 34.
  • the drawing image is created by superimposing the third clothing image read from the clothing image storage unit 32 on the read composite image and combining the third clothing image.
  • step S55 the drawing image creation unit 25 stores the drawing image created in step S54 in the drawing image storage unit 35.
  • step S56 the display control unit 26 reads the drawn image from the drawn image storage unit 35, and outputs the drawn image read from the drawn image storage unit 35 to the display unit 40.
  • the display unit 40 displays the drawing image output from the display control unit 26. Therefore, masking a composite image obtained by superimposing the first clothing image and the second clothing image on the human body image using a mask image created from the human body image and the third clothing image. As a result, the second garment protruding from the third garment is removed, and the fitting state can be displayed without feeling uncomfortable.
  • the third clothing image CT is virtually tried on further than the second clothing image JK
  • the logical product of the overlapping regions of the plurality of types of third clothing images is obtained.
  • the mask image MASK_J is created by calculating the logical sum of the created image and the overlapping area of the human body image MG, and the second clothing image JK is superimposed on the human body image MG.
  • the mask image MASK-J is used for masking, a composite image is created by superimposing the masked image and the first third clothing image CT, and the generated composite image is displayed. Therefore, the second clothing image JK is masked by the mask image MA SK—J including the human body image MG while including all of the multiple types of third clothing images.
  • a face image of a person may be captured by a digital camera or the like, stored in advance, and pasted to a region corresponding to the face portion of the mannequin to be used as the human body image MG. That is, the storage unit 30 stores the face image of the person photographed in advance, and the composite image creation unit 23 stores the first clothing image TG, SG and the second clothing image read from the storage unit 30.
  • the image JK is superimposed on the human body image MG read from the storage unit 30, and the composite image obtained by superimposing the face image read from the storage unit 30 on an area corresponding to the face portion of the human body image MG.
  • Create since a composite image is created by superimposing a face image of a person taken in advance on a face image of a human body image, a virtual fitting state can be confirmed using the face image of the desired person. .
  • the present embodiment has been described using a human body as an object to be tried on, the present invention is not particularly limited thereto.
  • an animal such as a dog or a cat may be used, or a fictional character such as an animation. It may be.
  • a virtual fitting display device, a virtual fitting display method, a virtual fitting display program, and a computer-readable recording medium storing the program according to the present invention are obtained by superimposing a clothing image representing a plurality of clothes on a human body image representing a human body.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Analysis (AREA)

Abstract

In a virtual try-on display apparatus that combines a two-dimensional image of a human body with a two-dimensional image of clothes to display a virtual try-on state, a storing part (30) stores an image of a human body and first and second images of clothes. A mask image producing part (22) produces a mask image in which the second image of clothes is superimposed on the human body image. A masking part (24) uses the mask image to mask the image in which the first image of clothes is superimposed on the human body image. A portrayal image producing part (25) produces a portrayal image in which the second clothes image is superimposed on the masked image. A display part (40) displays the portrayal image.

Description

明 細 書 仮想試着表示装置、 仮想試着表示方法、 仮想試着表示プログラム及び同プロダラ ムを記録したコンピュー夕読み取り可能な記録媒体 技術分野  Description Virtual fitting display device, virtual fitting display method, virtual fitting display program, and computer readable recording medium storing the program
本発明は、 人体画像に衣服画像を合成することによつて仮想的な試着状態を表示 する仮想試着表示装置、 仮想試着表示方法、 仮想試着表示プログラム及び同プログ ラムを記録したコンピュ一夕読み取り可能な記録媒体に関するものである。 背景技術  The present invention provides a virtual try-on display device, a virtual try-on display method, a virtual try-on display program, and a computer-readable recording of the program, which display a virtual try-on state by combining a clothes image with a human body image. Related to a simple recording medium. Background art
従来より、 ァバレル業界では、 衣服などのファッション商品の販売等を目的とし て、 コンピュータ上でモデルとなる人体画像とユーザが所望する衣服画像とを重ね 合わせて合成画像としてモニタ上に表示することによつて衣服の仮想的な試着状態 のシミュレーションが行われている。 この従来技術は、 例えば、 特開平 1 1一 2 0 3 3 4 7号公報に開示されている。  Conventionally, in the apparel industry, for the purpose of selling fashion items such as clothes, a human body image as a model on a computer and a clothes image desired by a user are superimposed and displayed on a monitor as a composite image. Therefore, a simulation of a virtual fitting state of clothes is being performed. This prior art is disclosed, for example, in Japanese Patent Application Laid-Open No. H11-203347.
図 2 0は、 従来の処理を行った場合における人体画像と第 1の衣服画像と第 2の 衣服画像とを合成した合成画像の一例を示す図である。 人体 Mを表す人体画像と、 第 1の衣服 Uを表す第 1の衣服画像と、 第 2の衣服 Jを表す第 2の衣服画像とを合 成した場合、 合成画像 G G 4が作成される。  FIG. 20 is a diagram illustrating an example of a combined image obtained by combining a human body image, a first clothing image, and a second clothing image in a case where conventional processing is performed. When a human body image representing the human body M, a first clothing image representing the first clothing U, and a second clothing image representing the second clothing J are combined, a composite image G G4 is created.
ところで、 上記のようにして合成画像を作成することで仮想的な試着状態のシミ ユレ一シヨンを行う場合、 人体の上に試着される衣服を表す第 1の衣服が、 第 1の 衣服のさらに上に試着される衣服を表す第 2の衣服よりも大きいとき、 実際には第 2の衣服に覆われて見えないはずの第 1の衣服が第 2の衣服からはみ出して表示さ れてしまう。  By the way, in the case of performing a simulated fitting in a virtual fitting state by creating a composite image as described above, the first clothes representing clothes to be tried on the human body are further replaced by the first clothes. When the second garment is larger than the second garment representing the garment to be tried on, the first garment, which is actually covered by the second garment and should not be seen, protrudes from the second garment and is displayed.
図 2 0に示すように、 人体 Mと、 人体の上に試着される例えばシャツ等の第 1の 衣服 Uと, シャツの上に試着される例えばニットシャツ等の第 2の衣服 Jとを重ね 合わせて表示した場合、 第 1の衣服 Uの袖部分、 胴部分及び裾部分 (図中の斜線部 分) 等が第 2の衣服 Jからはみ出して表示される。 そのため、 人体に第 1の衣服及 び第 2の衣服を仮想的に試着した試着状態が非常に違和感のあるものとなってしま う。 As shown in FIG. 20, a human body M, a first garment U such as a shirt to be tried on the human body, and a second garment J to be tried on the shirt such as a knitted shirt are overlapped. When displayed together, the sleeve, torso, and hem (the hatched portion in the figure) of the first garment U are displayed so as to protrude from the second garment J. Therefore, the first clothes and Trying on the second and second clothes virtually will give a very uncomfortable feeling.
このような問題を解決するために、 従来では全ての衣服の組み合わせに関して手 作業ではみ出し部分を除去する等の修正を加えていた。 しかしながら-. 手作業によ る修正は、 非常に手間のかかる作業であり、 試着状態をシミュレーションする衣服 の数が増えると、 その組み合わせの数も膨大なものとなり、 修正しなければならな い合成画像の数も膨大なものとなってしまい、 手作業による修正を行うことは困難 となる。  In order to solve such a problem, conventionally, for all combinations of clothes, corrections such as manually removing a protruding portion were added. However, manual correction is a very time-consuming task. If the number of clothes that simulate the fitting state increases, the number of combinations increases, and synthesis must be corrected. The number of images will be enormous, making manual corrections difficult.
また、 2次元画像でこのような合成画像を作成する場合、 試着状態が 3 6 0度ど の方向からでもわかるようにするため、 例えば 2 2 . 5度毎に分割された 1 6方向 の各視点から撮影された 1 6の画像を全ての衣服画像に関してあらかじめ用意して いる。 そのため、 試着状態のシミュレーションに使用する衣服画像の数がさらに膨 大なものとなり、 手作業による修正を行うことはより困難となる。 発明の開示  Also, when creating such a composite image with a two-dimensional image, in order to be able to recognize the fitting state from any direction of 360 degrees, for example, each of the 16 directions divided every 22.5 degrees is used. 16 images taken from the viewpoint are prepared in advance for all clothing images. As a result, the number of clothing images used for the simulation of the fitting state is further increased, and it is more difficult to perform manual correction. Disclosure of the invention
本発明は、 上記の問題を解決するためになされたもので、 人体を表す人体画像に 複数の衣服を表す衣服画像を重ね合わせた場合の仮想的な試着状態を違和感なく表 示することができる仮想試着表示装置、 仮想試着表示方法、 仮想試着表示プロダラ ム及び同プログラムを記録したコンピュータ読み取り可能な記録媒体を提供するこ とを目的とするものである。  The present invention has been made to solve the above-described problem, and can display a virtual fitting state in a case where clothes images representing a plurality of clothes are superimposed on a human body image representing a human body without a sense of discomfort. It is an object of the present invention to provide a virtual fitting display device, a virtual fitting display method, a virtual fitting display program, and a computer-readable recording medium storing the program.
本発明に係る仮想試着表示装置は、 2次元の人体画像に 2次元の衣服画像を合成 することによって仮想的な試着状態を表示する仮想試着表示装置であって、 前記衣 服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画像と、 前 記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを含み、 前 記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する記憶手段と、 前記記 憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された第 2の衣 服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、 前記記憶手 段から読み出された第 1の衣服画像を前記記憶手段から読み出された前記人体画像 に重ね合わせた画像に対して、 前記マスク画像作成手段によつて作成されたマスク 画像を用いてマスキングするマスキング手段と、 前記マスキング手段によってマス キングされた画像と、 前記記憶手段から読み出された第 2の衣服画像とを重ね合わ せた描画画像を作成する描画画像作成手段と、 前記描画画像作成手段によって作成 された描画画像を表示する画像表示手段とを備えることを特徴としている。 The virtual fitting display device according to the present invention is a virtual fitting display device that displays a virtual fitting state by synthesizing a two-dimensional clothing image with a two-dimensional human body image, wherein the clothing image is the human body. A two-dimensional first clothing image virtually tried on on the image, and a two-dimensional second clothing image virtually tried on the first clothing image; Storage means for storing a human body image, a first clothing image, and a second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means. Mask image creating means for creating a mask image by superimposing the first clothing image read from the storage means on the human body image read from the storage means. A mask created by the mask image creating means; Masking means for masking using an image; drawing image creation means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed; Image display means for displaying the drawn image created by the drawn image creating means.
この構成によれば、 人体画像の上に仮想的に試着される第 1の衣服画像が人体画 像に重ね合わされた画像に対して、 人体画像と第 2の衣服画像とが重ね合わされた マスク画像を用いてマスキングされ、 マスキングされた画像と第 2の衣服画像とを 重ね合わせた描画画像が作成され、 作成された描画画像が表示されるので、 第 1の 衣服画像が第 2の衣服画像よりも大きい場合でも、 第 2の衣服画像から第 1の衣服 画像をはみ出させずに表示することができ、 仮想的に試着した試着状態を違和感な く表示することができる。  According to this configuration, a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
また、 上記の仮想試着表示装置において、 前記記憶手段は、 複数種類の第 2の衣 服画像を記憶し、 前記マスク画像作成手段は、 複数種類の第 2の衣服画像の重なり 領域の論理積を求めることによつて作成された画像と、 前記人体画像との重なり領 域の論理和を求めることによってマスク画像を作成し、 前記マスキング手段は、 前 記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み出された前記 人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によつて作成され たマスク画像を用いてマスキングし、 前記描画画像作成手段は、 前記マスキング手 段によってマスキングされた画像と、 前記記憶手段から読み出された 1の第 2の衣 服画像とを重ね合わせた描画画像を作成し、 前記画像表示手段は、 前記描画画像作 成手段によって作成された描画画像を表示することが好ましい。  In the virtual fitting display device, the storage unit stores a plurality of types of second clothing images, and the mask image creation unit calculates a logical product of an overlapping area of the plurality of types of second clothing images. The mask image is created by calculating the logical sum of the overlapping area of the image created by the calculation and the human body image, and the masking means reads the first clothes read from the storage means. Masking an image obtained by superimposing an image on the human body image read from the storage unit using a mask image created by the mask image creating unit; Creating a drawn image in which the image masked by the means and the first second clothing image read from the storage means are superimposed, and the image display means comprises: It is preferable to display the drawn image created by the image the image creation means.
この構成によれば、 複数種類の第 2の衣服画像の重なり領域の論理積を求めるこ とによつて作成された画像と、 人体画像との重なり領域の論理和を求めることによ つてマスク画像が作成され、 第 1の衣服画像を人体画像に重ね合わせた画像に対し てマスク画像が用いられてマスキングされ、 マスキングされた画像と 1の第 2の衣 服画像とを重ね合わせた描画画像が作成され、 作成された描画画像が表示される。 したがって、 複数種類の第 2の衣服画像を全て含むとともに、 人体画像を含むマス ク画像によって、 第 1の衣服画像がマスキングされるので、 複数種類の第 2の衣服 画像のうちの 1の第 2の衣服画像を第 1の衣服画像と人体画像とに合成したとして も、 第 1の衣服画像が第 2の衣服画像からはみ出すことなく表示することができる また、 上記の仮想試着表示装置において、 前記衣服画像は、 前記第 2の衣服画像 のさらに上に仮想的に試着される 2次元の第 3の衣服画像を含み 前記記憶手段は 、 複数種類の第 3の衣服画像を記憶し、 前記マスク画像作成手段は、 複数種類の第 3の衣服画像の重なり領域の論理積を求めることによって作成された画像と、 前記 人体画像との重なり領域の論理和を求めることによってマスク画像を作成し、 前記 マスキング手段は、 前記記憶手段から読み出された第 2の衣服画像を前記記憶手段 から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成 手段によって作成されたマスク画像を用いてマスキングし、 前記描画画像作成手段 は、 前記マスキング手段によってマスキングされた画像と、 前記記憶手段から読み 出された第 3の衣服画像とを重ね合わせた描画画像を作成し、 前記画像表示手段は 、 前記描画画像作成手段によって作成された描画画像を表示することが好ましい。 この構成によれば、 第 2の衣服画像のさらに上に第 3の衣服画像が仮想的に試着 される場合、 複数種類の第 3の衣服画像の重なり領域の論理積を求めることによつ て作成された画像と、 人体画像との重なり領域の論理和を求めることによってマス ク画像が作成され、 第 2の衣服画像を人体画像に重ね合わせた画像に対してマスク 画像が用いられてマスキングされ、 'マスキングされた画像と 1の第 3の衣服画像と を重ね合わせた描画画像が作成され、 作成された描画画像が表示される。 したがつ て、 複数種類の第 3の衣服画像を全て含むとともに、 人体画像を含むマスク画像に よって、 第 2の衣服画像がマスキングされるので、 複数種類の第 3の衣服画像のう ちの 1の第 3の衣服画像を第 2の衣服画像と人体画像とに合成したとしても、 第 2 の衣服画像が第 3の衣服画像からはみ出すことなく表示することができる。 According to this configuration, the mask image is obtained by calculating the logical sum of the overlapping area of the human body image and the image created by obtaining the logical product of the overlapping areas of the plurality of types of second clothing images. Is created, a mask image is used to mask an image obtained by superimposing the first clothing image on the human body image, and a drawing image obtained by superimposing the masked image and the first second clothing image is obtained. The created drawing image is displayed. Therefore, since the first clothing image is masked by the mask image including the human body image while including all of the multiple types of second clothing images, the second clothing image of one of the multiple types of second clothing images is masked. Of the first clothing image and the human body image Also, the first clothing image can be displayed without protruding from the second clothing image.In the virtual fitting display device, the clothing image is virtually further above the second clothing image. The storage means stores a plurality of types of third clothing images, and the mask image creation means includes a logic of an overlapping area of the plurality of types of third clothing images. A mask image is created by calculating a logical sum of an image created by obtaining a product and an overlapping area of the human body image, and the masking unit reads the second clothing image read from the storage unit. Masking an image superimposed on the human body image read from the storage unit using a mask image created by the mask image creating unit; The step creates a drawn image in which the image masked by the masking means and the third clothing image read from the storage means are overlapped, and the image display means creates the drawn image by the drawn image creating means It is preferable to display the rendered drawing image. According to this configuration, when the third clothing image is virtually tried on further than the second clothing image, the logical product of the overlapping regions of the plurality of types of third clothing images is obtained. A mask image is created by calculating the logical sum of the created image and the overlapping region of the human body image, and the image obtained by superimposing the second clothing image on the human body image is masked using a mask image. A drawing image is created by superimposing the masked image and the first third clothing image, and the created drawing image is displayed. Therefore, since the second clothing image is masked by the mask image including the human body image while including all of the multiple types of third clothing images, one of the multiple types of third clothing images is included. Even if the third clothing image is combined with the second clothing image and the human body image, the second clothing image can be displayed without protruding from the third clothing image.
また、 上記の仮想試着表示装置において、 前記記憶手段は、 人体を中心点とする 円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、 当該円の円弧 とが交わる点を視点とする複数の視点から撮影された複数の前記人体画像、 前記第 1の衣服画像及び前記第 2の衣服画像を記憶しており、 前記マスク画像作成手段は 、 前記記憶手段から読み出された特定の視点から見た前記人体画像と、 前記記憶手 段から読み出された前記人体画像と同一の視点から見た第 2の衣服画像とを重ね合 わせたマスク画像を作成し、 前記マスキング手段は、 前記記憶手段から読み出され た前記人体画像と同一の視点から見た第 1の衣服画像を前記記憶手段から読み出さ れた前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によつて 作成されたマスク画像を用いてマスキングし、 前記描画画像作成手段は 前記マス キング手段によってマスキングされた画像と、 前記記憶手段から読み出された前記 人体画像と同一の視点から見た第 2の衣服画像とを重ね合わせた描画画像を作成し 、 前記画像表示手段は、 前記描画画像作成手段によって作成された描画画像を表示 することが好ましい。 In the virtual fitting display device, the storage means may store a point at which a line that equally divides a circle centered on a human body into predetermined angles based on the center point and a circular arc of the circle intersect. A plurality of the human body images photographed from a plurality of viewpoints, and the first clothing image and the second clothing image are stored.The mask image creating unit is read from the storage unit. The human body image viewed from a specific viewpoint and a second clothing image viewed from the same viewpoint as the human body image read from the storage means. Creating a mask image in which the first clothing image viewed from the same viewpoint as the human body image read from the storage means is superimposed on the human body image read from the storage means. The masked image is masked using the mask image created by the mask image creating unit, and the drawn image creating unit reads the image masked by the masking unit and the image read from the storage unit. It is preferable that a drawing image is created by superimposing the human body image and a second clothing image viewed from the same viewpoint, and the image display means displays the drawing image created by the drawing image creation means.
この構成によれば、 人体を中心点とする円の当該中心点を基準とする所定の角度 ずつに均等に分割する線と、 当該円の円弧とが交わる点を視点とし、 それぞれ同一 視点において撮影又は作成された複数の人体画像と第 2の衣服画像とを重ね合わせ たマスク画像が作成され、 第 1の衣服画像を人体画像に重ね合わせた画像に対して、 マスク画像が用いられてマスキングされ、 マスキングされた画像と第 2の画像とを 重ねあわせた描画画像が作成され、 作成された描画画像が表示される。 したがって、 第 1の衣服画像が第 2の衣服画像よりも大きい場合でも、 第 2の衣服画像から第 1 の衣服画像をはみ出させずに表示することができ、 仮想的に試着した試着状態を 2 次元の画像を用いて 3次元的に表示することができ、 複数の視点から見た試着状態 を確認することができる。  According to this configuration, a point at which a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point as a reference and the arc of the circle intersect is used as a viewpoint, and shooting is performed from the same viewpoint. Alternatively, a mask image is created by superimposing the plurality of created human body images and the second clothing image, and masking is performed using the mask image on the image obtained by superimposing the first clothing image on the human body image. Then, a drawing image is created by superimposing the masked image and the second image, and the created drawing image is displayed. Therefore, even if the first clothing image is larger than the second clothing image, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on is changed to 2 It can be displayed three-dimensionally using a two-dimensional image, and the fitting state viewed from multiple viewpoints can be confirmed.
また、 上記の仮想試着表示装置において、 前記マスク画像作成手段によって作成 されたマスク画像の前記第 1の衣服画像の外形形状に応じた修正を受け付けるマス ク画像修正受付手段をさらに備え、 前記マスキング手段は、 前記描画画像作成手段 によって作成された描画画像を、 マスク画像修正受付手段によって修正されたマス ク画像を用いてマスキングすることが好ましい。  The virtual fitting display device further includes a mask image correction accepting unit that accepts a modification of the mask image created by the mask image creating unit according to the outer shape of the first clothing image, and the masking unit. Preferably, the drawing image created by the drawing image creation unit is masked using the mask image modified by the mask image modification receiving unit.
この構成によれば、 ユーザによるマスク画像作成手段によって作成されたマスク 画像の第 1の衣服画像の外形形状に応じた修正が受け付けられ、 描画画像作成手段 によって作成された描画画像が、 マスク画像修正受付手段によつて修正されたマス ク画像を用いてマスキングされるため、 仮想的に試着した試着状態をさらに違和感 なく表示することができるとともに、 実際に試着した状態をリアルに再現すること ができる。 本発明に係る仮想試着表示方法は、 2次元の人体画像に 2次元の衣服画像を合成 することによつて仮想的な試着状態を表示する仮想試着表示方法であつて、 前記衣 服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画像と、 前 記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを含み、 コ ンピュ一夕が、 前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する記 憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された第 2の衣 服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステップと、 コンビ ユー夕が、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み 出された前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成ステップ において作成されたマスク画像を用いてマスキングするマスキングステップと、 コ ンピュー夕が、 前記マスキングステップにおいてマスキングされた画像と、 前記記 憶手段から読み出された第 2の衣服画像とを重ね合わせた描画画像を作成する描画 画像作成ステップと、 コンピュータが、 前記描画画像作成ステップにおいて作成さ れた描画画像を表示する画像表示ステップとを含むことを特徴としている。 According to this configuration, the correction according to the outer shape of the first clothing image of the mask image created by the mask image creating means by the user is accepted, and the drawing image created by the drawing image creating means is changed to the mask image correction. Since the masking is performed using the mask image corrected by the receiving means, the fitting state virtually tried on can be displayed without further discomfort, and the actual fitting state can be realistically reproduced. . The virtual fitting display method according to the present invention is a virtual fitting display method for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image. A two-dimensional first clothing image virtually tried on on the human body image, and a two-dimensional second clothing image virtually tried on the first clothing image, The computer is configured to read the human body image read from the storage unit that stores the human body image, the first clothing image, and the second clothing image, and the second clothing read from the storage unit. A mask image creating step of creating a mask image by superimposing a clothes image, wherein the combination superimposes the first clothes image read from the storage means on the human body image read from the storage means. For the combined image, the mask image creation step A masking step of masking using the mask image created in the step, and the computer superimposes the image masked in the masking step and the second clothing image read from the storage means. It is characterized by including a drawing image creation step of creating a drawing image, and an image display step of displaying the drawing image created by the computer in the drawing image creation step.
この構成によれば、 人体画像の上に仮想的に試着される第 1の衣服画像が人体画 像に重ね合わされた画像に対して、 人体画像と第 2の衣服画像とが重ね合わされた マスク画像を用いてマスキングされ、 マスキングされた画像と第 2の衣服画像とを 重ね合わせた描画画像が作成され、 作成された描画画像が表示されるので、 第 1の 衣服画像が第 2の衣服画像よりも大きい場合でも、 第 2の衣服画像から第 1の衣服 画像をはみ出させずに表示することができ、 仮想的に試着した試着状態を違和感な く表示することができる。  According to this configuration, a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
本発明に係る仮想試着表示プログラムは、 2次元の人体画像に 2次元の衣服画像 を合成することによって仮想的な試着状態を表示するための仮想試着表示プログラ ムであって、 前記衣服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画像と、 前記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣 服画像とを含み、 前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する 記憶手段と、 前記記憶手段から読み出された前記人体画像と、 前記記憶手段から読 み出された第 2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成 手段と、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み出 された前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によつ て作成されたマスク画像を用いてマスキングするマスキング手段と、 前記マスキン グ手段によってマスキングされた画像と、 前記記憶手段から読み出された第 2の衣 服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、 前記描画画像作 成手段によつて作成された描画画像を表示する画像表示手段としてコンピュータを 機能させることを特徴としている。 A virtual fitting display program according to the present invention is a virtual fitting display program for displaying a virtual fitting state by synthesizing a two-dimensional clothing image with a two-dimensional human body image, wherein the clothing image includes: A 2D first clothing image virtually tried on on the human body image, and a 2D second clothing image virtually tried on the first clothing image, Storage means for storing the human body image, the first clothing image, and the second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means. Mask image creating means for creating a mask image in which the first clothing image is read from the storage means. Masking means for masking the image superimposed on the human body image by using the mask image created by the mask image creating means; an image masked by the masking means; Drawing image creation means for creating a drawing image in which the second clothing image read from the means is superimposed, and a computer as an image display means for displaying the drawing image created by the drawing image creation means It is characterized by the function of
この構成によれば、 人体画像の上に仮想的に試着される第 1の衣服画像が人体画 像に重ね合わされた画像に対して、 人体画像と第 2の衣服画像とが重ね合わされた マスク画像を用いてマスキングされ、 マスキングされた画像と第 2の衣服画像とを 重ね合わせた描画画像が作成され、 作成された描画画像が表示されるので、 第 1の 衣服画像が第 2の衣服画像よりも大きい場合でも、 第 2の衣服画像から第 1の衣服 画像をはみ出させずに表示することができ、 仮想的に試着した試着状態を違和感な く表示することができる。  According to this configuration, a mask image in which the human body image and the second clothing image are superimposed on the image in which the first clothing image virtually tried on the human body image is superimposed on the human body image A drawing image is created by superimposing the masked image and the second clothing image, and the created drawing image is displayed, so that the first clothing image is compared to the second clothing image. Even when the size is large, the first clothing image can be displayed without protruding from the second clothing image, and the fitting state virtually tried on can be displayed without a sense of discomfort.
本発明に係る仮想試着表示プログラムを記録したコンピュータ読み取り可能な記 録媒体は、 2次元の人体画像に 2次元の衣服画像を合成することによつて仮想的な 試着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取 り可能な記録媒体であって、 前記衣服画像は、 前記人体画像の上に仮想的に試着さ れる 2次元の第 1の衣服画像と、 前記第 1の衣服画像の上に仮想的に試着される 2 次元の第 2の衣服画像とを含み、 前記人体画像、 第 1の衣服画像及び第 2の衣服服 画像を記憶する記憶手段と、 前記記憶手段から読み出された前記人体画像と、 前記 記憶手段から読み出された第 2の衣服画像とを重ね合わせたマスク画像を作成する マスク画像作成手段と、 前記記憶手段から読み出された第 1の衣服画像を前記記憶 手段から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画像 作成手段によって作成されたマスク画像を用いてマスキングするマスキング手段と 、 前記マスキング手段によってマスキングされた画像と、 前記記憶手段から読み出 された第 2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、 前記描画画像作成手段によつて作成された描画画像を表示する画像表示手段として コンピュータを機能させることを特徴としている。  A computer-readable recording medium recording a virtual fitting display program according to the present invention is a virtual fitting for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image. A computer-readable recording medium recording a display program, wherein the clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a first clothing image of the first clothing image. Storage means for storing the human body image, the first clothing image, and the second clothing image, the storage means including a two-dimensional second clothing image virtually tried on, and read out from the storage means. Creating a mask image by superimposing the human body image and the second clothing image read from the storage means, and the first clothing image read from the storage means. Record Masking means for masking the image superimposed on the human body image read from the means using the mask image created by the mask image creating means; an image masked by the masking means; and the storage A computer functioning as a drawing image creating means for creating a drawing image in which the second clothing image read from the means is superimposed, and an image display means for displaying the drawing image created by the drawing image creating means. It is characterized by having
この構成によれば、 人体画像の上に仮想的に試着される第 1の衣服画像が人体画 像に重ね合わされた画像に対して、 人体画像と第 2の衣服画像とが重ね合わされた マスク画像を用いてマスキングされ、 マスキングされた画像と第 2の衣服画像とを 重ね合わせた描画画像が作成され、 作成された描画画像が表示されるので、 第 1の 衣服画像が第 2の衣服画像よりも大きい場合でも、 第 2の衣服画像から第 1の衣服 画像をはみ出させずに表示することができ、 仮想的に試着した試着状態を違和感な く表示することができる。 According to this configuration, the first clothing image to be virtually tried on on the human body image is the human body image. The image superimposed on the image is masked using a mask image in which the human body image and the second clothing image are superimposed, and a drawing image is created in which the masked image and the second clothing image are superimposed. And the created drawing image is displayed, so that even if the first clothing image is larger than the second clothing image, the first clothing image can be displayed without protruding from the second clothing image. This makes it possible to display the fitting state virtually tried on without any discomfort.
本発明の目的、 特徴、 局面、 及び利点は、 以下の詳細な説明と添付図面とによつ て、 より明白となる。 図面の簡単な説明  The objects, features, aspects and advantages of the present invention will become more apparent from the following detailed description and the accompanying drawings. BRIEF DESCRIPTION OF THE FIGURES
図 1は、 本発明の第 1の実施形態による仮想試着表示装置の構成を示すプロック 図である。  FIG. 1 is a block diagram showing the configuration of the virtual fitting display device according to the first embodiment of the present invention.
図 2は、 第 1の実施形態における図 1に示す仮想試着表示装置の主要機能プロッ ク図である。  FIG. 2 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the first embodiment.
図 3は、 人体画像記憶部に記憶されている人体画像の一例を示す図である。  FIG. 3 is a diagram illustrating an example of a human body image stored in the human body image storage unit.
図 4は、 衣服画像記憶部に記憶されている第 1の衣服画像の一例を示す図である。 図 5は、 衣服画像記憶部に記憶されている他の第 1の衣服画像の一例を示す図で める。  FIG. 4 is a diagram illustrating an example of the first clothing image stored in the clothing image storage unit. FIG. 5 shows an example of another first clothing image stored in the clothing image storage unit.
図 6は、 衣服画像記憶部に記憶されている第 2の衣服画像の一例を示す図である。 図 7は、 図 2に示す第 1の実施形態における仮想試着表示装置による仮想試着表 示処理を説明するためのフローチャートである。  FIG. 6 is a diagram illustrating an example of the second clothing image stored in the clothing image storage unit. FIG. 7 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the first embodiment shown in FIG.
図 8は、 マスク画像の一例を示す図である。  FIG. 8 is a diagram illustrating an example of a mask image.
図 9は、 図 3に示す人体画像に図 4に示す第 1の衣服画像を合成した合成画像の 一例を示す図である。  FIG. 9 is a diagram showing an example of a combined image obtained by combining the first clothing image shown in FIG. 4 with the human body image shown in FIG.
図 1 0は、 図 3に示す人体画像に図 4に示す第 1の衣服画像及び図 6に示す第 2 の衣服画像を合成した合成画像の一例を示す図である。  FIG. 10 is a diagram showing an example of a combined image obtained by combining the human body image shown in FIG. 3 with the first clothing image shown in FIG. 4 and the second clothing image shown in FIG.
図 1 1は、 図 9に示す合成画像を図 8に示すマスク画像を用いてマスキングした 合成画像に図 6に示す第 2の衣服画像を合成した描画画像の一例を示す図である。 図 1 2は、 第 2の実施形態における図 1に示す仮想試着表示装置の主要機能プロ ック図である。 FIG. 11 is a diagram showing an example of a drawing image in which the second clothing image shown in FIG. 6 is combined with the composite image obtained by masking the composite image shown in FIG. 9 using the mask image shown in FIG. FIG. 12 shows a main function profile of the virtual fitting display device shown in FIG. 1 in the second embodiment. FIG.
図 1 3は、 図 1 2に示す第 2の実施形態における仮想試着表示装置による仮想試 着表示処理を説明するためのフローチャートである。  FIG. 13 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the second embodiment shown in FIG.
図 1 4は、 図 3に示す人体画像に図 5に示す第 1の衣服画像を合成した合成画像 の一例を示す図である。  FIG. 14 is a diagram showing an example of a combined image obtained by combining the first clothing image shown in FIG. 5 with the human body image shown in FIG.
図 1 5は、 人体画像に第 1の衣服画像及び第 2の衣服画像を合成し、 図 1 0に示 すマスク画像を用いてマスキングした描画画像の一例を示す図である。  FIG. 15 is a diagram illustrating an example of a drawing image obtained by combining the first clothing image and the second clothing image with the human body image and masking the mask using the mask image illustrated in FIG. 10.
図 1 6は、 修正されたマスク画像の一例を示す図である。  FIG. 16 is a diagram illustrating an example of a corrected mask image.
図 1 7は、 人体画像と第 1の衣服画像とが合成された合成画像を図 1 6に示すマ スク画像を用いてマスキングした描画画像の一例を示す図である。  FIG. 17 is a diagram illustrating an example of a drawn image obtained by masking a combined image in which a human body image and a first clothing image are combined using the mask image illustrated in FIG. 16.
図 1 8は、 第 3の実施形態における図 1に示す仮想試着表示装置の主要機能プロ ック図である。  FIG. 18 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the third embodiment.
図 1 9は、 図 1 8に示す第 3の実施形態における仮想試着表示装置による仮想試 着表示処理を説明するためのフローチャートである。  FIG. 19 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the third embodiment shown in FIG.
図 2 0は、 従来の処理を行った場合に表示される表示画面の一例を示す図である。 発明を実施するための最良の形態  FIG. 20 is a diagram showing an example of a display screen displayed when a conventional process is performed. BEST MODE FOR CARRYING OUT THE INVENTION
以下、 本発明の好ましい実施の形態について、 図面を参照しながら説明する。  Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.
(第 1の実施形態)  (First Embodiment)
図 1は、 本発明の第 1の実施形態による仮想試着表示装置の構成を示すプロック 図である。 図 1に示す仮想試着表示装置は、 パーソナルコンピュータ等から構成さ れ、 入力装置 1、 R OM (リードオンリメモリ) 2、 C P U (中央演算処理装置) 3、 R AM (ランダムアクセスメモリ) 4、 外部記憶装置 5、 表示装置 6及び記録 媒体駆動装置 7を備える。 各ブロックは内部のバスに接続され、 このバスを介して 種々のデータ等が各ブロック間で入出力され、 C P U 3の制御の下、 種々の処理が 実行される。  FIG. 1 is a block diagram showing the configuration of the virtual fitting display device according to the first embodiment of the present invention. The virtual fitting display device shown in Fig. 1 is composed of a personal computer, etc., and has an input device 1, ROM (read only memory) 2, CPU (central processing unit) 3, RAM (random access memory) 4, external A storage device 5, a display device 6, and a recording medium drive device 7 are provided. Each block is connected to an internal bus, and various data and the like are input and output between the blocks via the bus, and various processes are executed under the control of the CPU 3.
入力装置 1は、 キーボード、 マウス等から構成され、 オペレー夕が操作指令等を 入力するために用いられる。 R OM 2には、 システムプログラム等が予め記憶され る。 外部記憶装置 5は、 ハードディスクドライブ等から構成され、 後述する仮想試 着表示プログラム等を記憶している。 C P U 3は、 外部記憶装置 5から仮想試着表 示プログラム等を読み出し、 後述する仮想試着表示処理等を実行して各プロックの 動作を制御する。 R AM 4は、 C P U 3の作業領域等として用いられる。 表示装置 6は、 C R T (陰極線管) 又は液晶表示装置等から構成され、 C P U 3の制御の下、 種々の画面を表示する。 The input device 1 includes a keyboard, a mouse, and the like, and is used by an operator to input operation commands and the like. ROM 2 stores a system program and the like in advance. The external storage device 5 is composed of a hard disk drive or the like, and It stores a dress display program and the like. The CPU 3 reads a virtual fitting display program and the like from the external storage device 5 and executes a virtual fitting display process and the like described later to control the operation of each block. The RAM 4 is used as a work area of the CPU 3 and the like. The display device 6 is composed of a CRT (cathode ray tube) or a liquid crystal display device, and displays various screens under the control of the CPU 3.
なお、 仮想試着表示プ口グラム等は、 C D - R OM, フレキシブルディスク等か ら構成されるコンピュータ読み出し可能な記録媒体 8に記録するようにしてもよい。 この場合、 C D— R OMドライブ、 フレキシブルディスクドライブ等から構成され る記録媒体駆動装置 7を用いて記録媒体 8から読み出された仮想試着表示プログラ ム等が外部記憶装置 5にインストールされる。 また、 仮想試着表示プログラム等が ネットワークを介して接続されている他のコンピュータ等に記憶されている場合、 当該コンピュータ等からネットワークを介して仮想試着表示プログラム等をダウン ロードするようにしてもよい。  The virtual fitting display program and the like may be recorded on a computer-readable recording medium 8 composed of a CD-ROM, a flexible disk, and the like. In this case, a virtual fitting display program and the like read from the recording medium 8 using the recording medium drive 7 composed of a CD-ROM drive, a flexible disk drive, and the like are installed in the external storage device 5. When the virtual fitting display program or the like is stored in another computer or the like connected via a network, the virtual fitting display program or the like may be downloaded from the computer or the like via the network.
次に、 上記のように構成された仮想試着表示装置の主要な機能について説明する。 図 2は、 第 1の実施形態における図 1に示す仮想試着表示装置の主要機能プロック 図である。  Next, main functions of the virtual fitting display device configured as described above will be described. FIG. 2 is a block diagram of main functions of the virtual fitting display device shown in FIG. 1 in the first embodiment.
図 2に示すように、 仮想試着表示装置は、 機能的には、 操作部 1 0、 プログラム 実行部 2 0、 記憶部 3 0及び表示部 4 0を備える。 プログラム実行部 2 0は、 視点 情報受付部 2 1、 マスク画像作成部 2 2、 合成画像作成部 2 3、 マスキング部 2 4、 描画画像作成部 2 5及び表示制御部 2 6を含む。 記憶部 3 0は、 人体画像記憶部 3 1、 衣服画像記憶部 3 2、 マスク画像記憶部 3 3、 合成画像記憶部 3 4及び描画画 像記憶部 3 5を含む。  As shown in FIG. 2, the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, and a display control unit 26. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35.
操作部 1 0は、 入力装置 1等から構成され、 仮想試着表示装置のオペレータが 種々の操作指令を入力するために使用される。  The operation unit 10 includes the input device 1 and the like, and is used by an operator of the virtual fitting display device to input various operation commands.
プログラム実行部 2 0は、 C P U 3等から構成され、 C P U 3等が外部記憶装置 5に記憶されている仮想試着表示プログラム等を実行することによって、 視点情報 受付部 2 1 , マスク画像作成部 2 2、 合成画像作成部 2 3、 マスキング部 2 4、 描 画画像作成部 2 5及び表示制御部 2 6として機能する。 記憶部 3 0は、 外部記憶装 匱 5等から構成され、 人体画像記憶部 3 1、 衣服画像記憶部 3 2、 マスク画像記憶 部 3 3、 合成画像記憶部 3 4及び描画画像記憶部 3 5として機能する。 The program execution unit 20 includes a CPU 3 and the like. The CPU 3 and the like execute a virtual fitting display program and the like stored in the external storage device 5 to thereby provide a viewpoint information reception unit 21 and a mask image creation unit 2. 2. Functions as a composite image creating section 23, a masking section 24, a drawing image creating section 25, and a display control section 26. The storage unit 30 includes an external storage device 5 and the like, and stores a human body image storage unit 31, a clothing image storage unit 32, and a mask image storage. It functions as the section 33, the composite image storage section 34, and the drawing image storage section 35.
人体画像記憶部 3 1は、 マネキンなどの試着対象物である人体の人体画像をあら かじめ記憶する。 図 3は、 人体画像記憶部 3 1に記憶されている人体画像 MGの一 例を示す図である。 人体画像記憶部 3 1は、 図 3に示すような人体画像 M Gを画像 データとして記憶している。 人体画像 M Gは、 あらかじめ作成された 2次元画像で ある。 人体画像記憶部 3 1は、 人体を中心点とする円の当該中心点を基準とする所 定の角度ずつに均等に分割する線と、 当該円の円弧とが交わる点を視点とする各視 点から見た人体画像 MGを画像データとして記憶しており、 例えば、 人体を中心点 とする円を 2 2 . 5度ごとに区切った 1 6の視点から見た 1 6の人体画像 MGを記 憶する。 なお、 人体画像 MGは、 例えばデジタルカメラ等を用いて試着する人物を 直接撮影した画像データを用いてもよい。 また、 スキャナ等によって写真を取り込 むことによつて人体画像 M Gの画像データを得てもよい。  The human body image storage unit 31 previously stores a human body image of a human body as a fitting object such as a mannequin. FIG. 3 is a diagram illustrating an example of the human body image MG stored in the human body image storage unit 31. The human body image storage unit 31 stores a human body image MG as shown in FIG. 3 as image data. The human body image MG is a two-dimensional image created in advance. The human body image storage unit 31 stores a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point and a point at which the arc of the circle intersects. The human body image MG viewed from a point is stored as image data.For example, 16 human body images MG viewed from 16 viewpoints in which a circle centered on the human body is divided every 22.5 degrees are recorded. Remember It should be noted that the human body image MG may be image data obtained by directly photographing a person trying on using a digital camera or the like. Alternatively, image data of the human body image MG may be obtained by capturing a photograph with a scanner or the like.
衣服画像記憶部 3 2は、 人体画像の上に仮想的に試着される第 1の衣服画像の画 像データと、 第 1の衣服画像のさらに上に仮想的に試着され、 人体の最も外側に仮 想的に試着される第 2 の衣服画像の画像データとをあらかじめ記憶する。 第 1の衣 服画像は、 種類が異なる複数種類の第 1の衣服に関する画像データであり、 衣服画 像記憶部 3 2は、 複数種類の第 1の衣服に関する画像データを記憶している。 同様 に、 第 2の衣服画像は、 種類が異なる複数種類の第 2の衣服に関する画像データで あり、 衣服画像記憶部 3 2は、 複数種類の第 2の衣服に関する画像データを記憶し ている。  The clothing image storage unit 32 stores the image data of the first clothing image that is virtually tried on on the human body image, and the clothing data that is virtually tried on further on the first clothing image, and is located outside the human body. The image data of the second clothing image to be virtually tried on is stored in advance. The first clothing image is image data relating to a plurality of different types of first clothing, and the clothing image storage unit 32 stores image data relating to a plurality of types of first clothing. Similarly, the second clothing image is image data relating to a plurality of different types of second clothing, and the clothing image storage unit 32 stores image data relating to a plurality of types of second clothing.
図 4は、 衣服画像記憶部 3 2に記憶されている第 1の衣服画像 T Gの一例を示す 図であり、 図 5は、 衣服画像記憶部 3 2に記憶されている他の第 1の衣服画像 S G の一例を示す図であり、 図 6は、 衣服画像記憶部 3 2に記憶されている第 2の衣服 画像 J Kの一例を示す図である。 衣服画像記憶部 3 2は、 図 4及び図 5に示すよう な第 1の衣服画像 T G, S Gを画像データとして記憶するとともに、 図 6に示すよ うな第 2の衣服画像 J Kを画像データとして記憶している。  FIG. 4 is a diagram illustrating an example of the first clothing image TG stored in the clothing image storage unit 32. FIG. 5 is a diagram illustrating another first clothing image TG stored in the clothing image storage unit 32. FIG. 6 is a diagram illustrating an example of an image SG, and FIG. 6 is a diagram illustrating an example of a second clothing image JK stored in the clothing image storage unit 32. The clothing image storage unit 32 stores the first clothing images TG and SG as shown in FIGS. 4 and 5 as image data, and stores the second clothing image JK as shown in FIG. 6 as image data. are doing.
第 1の衣服画像 T G , S G及び第 2の衣服画像 J Kは 2次元画像である。 衣服画 像記憶部 3 2は、 人体を中心点とする円の当該中心点を基準とする所定の角度ずつ に均等に分割する線と、 当該円の円弧とが交わる点を視点とする各視点から見た衣 服の画像データを記憶しており、 例えば、 人体を中心点とする円を 2 2 . 5度ごと に区切った 1 6の視点から見た 1 6の画像デ一夕を 1種類ごとに記憶している。 第 1の衣服及び第 2の衣服は、 例えば人体の上半身に仮想的に試着される衣服であり、 第 1の衣服としては、 例えば Tシャツやボタンシャツ等であり、 第 2の衣服として は、 例えばジャケット等である。 The first clothing image TG, SG and the second clothing image JK are two-dimensional images. The clothing image storage unit 32 stores a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point and a point at which a circle intersects the arc of the circle. Clothing seen from Stores image data of clothes, for example, stores a 16-point image viewed from 16 viewpoints, which is a circle centered on the human body divided by 22.5 degrees, for each type. ing. The first garment and the second garment are, for example, garments that are virtually tried on on the upper body of the human body, the first garment is, for example, a T-shirt or a button shirt, and the second garment is, for example, For example, a jacket or the like.
図 4に示す第 1の衣服画像 T Gは、 Tシャッを表す第 1の衣服画像であり、 図 5 に示す第 1の衣服画像 S Gは、 セーターを表す第 1の衣服画像である。 図 6に示す 第 2の衣服画像 J Kは、 ジャケットを表す第 2の衣服画像である。 なお、 第 1の衣 服画像 T G, S G及び第 2の衣服画像 J Kは、 例えばデジタルカメラ等を用いて衣 服を着用した人物を直接撮影し、 撮影された画像を画像処理することによって、 人 物を除く衣服のみで構成される衣服画像を作成し、 作成された衣服画像を画像デー タとして用いてもよい。  The first clothing image TG shown in FIG. 4 is a first clothing image representing Tsh, and the first clothing image SG shown in FIG. 5 is a first clothing image representing a sweater. The second clothing image JK shown in FIG. 6 is a second clothing image representing a jacket. Note that the first clothing image TG, SG and the second clothing image JK are obtained by directly photographing the person wearing the clothing using a digital camera or the like, and processing the captured image to perform image processing. It is also possible to create a clothes image composed of only clothes except objects, and use the created clothes image as image data.
なお、 本実施形態では、 人体画像、 第 1の衣服画像及び第 2の衣服画像は、 同一 の種類の衣服画像に対してそれぞれ 1 6の画像データが記憶されているとしたが、 本発明は特にこれに限定されず、 例えば周囲 3 6 0度を 3 0度ごとに区切った 1 2 の画像データをそれぞれ用いてもよく、 周囲 3 6 0度を 9 0度ごとに区切った 4の 画像データをそれぞれ用いてもよく、 また、 周囲 3 6 0度を 1 0度ごとに区切った 3 6の画像デ一夕をそれぞれ用いてもよい。 さらに、 人体画像、 第 1の衣服画像及 び第 2の衣服画像は、 複数の視点から見た画像ではなく、 所定の方向から見た 1の 画像のみを用いてもよい。  In the present embodiment, the human body image, the first clothing image, and the second clothing image store 16 pieces of image data for clothing images of the same type, respectively. However, the present invention is not particularly limited thereto.For example, 12 image data obtained by dividing the surrounding 360 degrees by 30 degrees may be used, and 4 image data obtained by dividing the surrounding 360 degrees by 90 degrees. May be used, or 36 image data obtained by dividing the surrounding 360 degrees at every 10 degrees may be used. Further, the human body image, the first clothing image, and the second clothing image may use only one image viewed from a predetermined direction instead of an image viewed from a plurality of viewpoints.
図 2に戻り、 視点情報受付部 2 1は、 衣服の人体への仮想的な試着状態を複数の 視点のうちのどの方向から見るかを受け付け、 複数の視点のうちどの視点から衣服 の人体への仮想的な試着状態を表示するかを視点情報として受け付ける。 本実施の 形態では、 衣服を仮想的に試着した人体を中心点とする円の当該中心点を基準とす る 2 2 . 5度ずつに均等に分割する線と、 当該円の円弧とが交わる点を視点とする 1 6の視点から見た人体画像、 第 1の衣服画像及び第 2の衣服画像が用意されてい るため、 視点情報受付部 2 1は、 衣服の人体への仮想的な試着状態を 1 6の視点の うちのどの方向から見るかを受け付け、 1 6の視点のうちのどの視点から衣服の人 体への仮想的な試着状態を表示するかを視点情報として受け付ける。 なお、 視点情 報は、 操作部 10のマウス又はキ一ポ一ドを用いて入力される。 Returning to Fig. 2, the viewpoint information reception unit 21 receives the virtual fitting state of the clothes on the human body from which direction among the multiple viewpoints, and from which of the multiple viewpoints the clothing body is reached. Is displayed as the viewpoint information. In the present embodiment, a line that is equally divided into 22.5 degrees with respect to the center point of a circle centered on the human body that has virtually tried on clothes intersects the arc of the circle Since the human body image, the first clothing image, and the second clothing image are prepared from the viewpoint from the point of view, the viewpoint information reception unit 21 makes a virtual fitting of the clothing on the human body. It accepts from which of the 16 viewpoints the state is viewed, and accepts, as viewpoint information, from which of the 16 viewpoints the virtual fitting state of the clothes on the human body is displayed. In addition, The information is input using the mouse or keypad of the operation unit 10.
マスク画像作成部 22は、 人体画像記憶部 31から読み出された人体画像と、 衣 服画像記憶部 32から読み出された第 2の衣服画像とを重ね合わせたマスク画像を 作成する。 ここで 第 1の衣服画像に適用されるマスク画像 MASK— Sは 複数 種類の第 2の衣服画像の重なり領域の論理積を求めることによって作成された画像 と、 前記人体画像との重なり領域の論理和を求めることによって作成され、 下記の (1) 式で表される。  The mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the second clothing image read from the clothing image storage unit 32 are superimposed. Here, the mask image MASK-S applied to the first clothing image is an image created by calculating the logical product of the overlapping regions of the plurality of types of second clothing images, and the logic of the overlapping region with the human body image. It is created by calculating the sum, and is expressed by the following equation (1).
MASK_S= (JK1 ΓΊ JK2 Π JK3 · · · ) UBODY · · · · (1) なお、 上記 (1) 式において、 MASK— Sは第 1の衣服画像に適用されるマス ク画像を表し、 JK1, JK2, J K 3はそれぞれ第 2の衣服画像を表し、 BOD Yは人体画像を表し、 门は論理積 (AND) を表し、 Uは論理和 (OR) を表して いる。  MASK_S = (JK1 ΓΊ JK2 Π JK3 ···) UBODY · · · · (1) In the above equation (1), MASK-S represents a mask image applied to the first clothes image, and JK1, JK2 and JK3 each represent a second clothing image, BOD Y represents a human body image, 门 represents a logical product (AND), and U represents a logical sum (OR).
上記 (1) 式に示すように、 マスク画像 MASK— Sは、 複数種類の第 2の衣服 画像を全て含むとともに、 人体画像を含む画像である。 また、 マスク画像 MASK — Sは、 複数種類の第 2の衣服画像と人体画像とを重ね合わせた画像を "0" と "1" とに 2値ィ匕し、 透過させたい領域を黒 ( "0" ) 又は白 ( "1" ) にする。 本実施形態におけるマスク画像 MAS K_Sでは、 透過させる領域を黒で表し、 そ れ以外の背景となる領域を白で表す。 すなわち、 マスク画像作成部 22は、 複数種 類の第 2の衣服画像の重なり領域の論理積を求めることによって作成される画像と、 人体画像との重なり領域の論理和を求めることによって作成される画像を黒で表し、 背景を白で表す白黒画像をマスク画像 MAS K_Sとして作成し、 作成されたマス ク画像 MASK— Sをマスク画像記憶部 33に記憶する。 マスク画像記憶部 33は、 マスク画像作成部 22によって作成されたマスク画像 MA S K— Sを記憶する。  As shown in the above equation (1), the mask image MASK-S is an image that includes all of a plurality of types of second clothing images and also includes a human body image. In addition, the mask image MASK-S converts the image obtained by superimposing a plurality of types of second clothing images and a human body image into "0" and "1", and delineates the area to be transmitted through black (" 0 ") or white (" 1 "). In the mask image MASK_S in the present embodiment, a region to be transmitted is represented by black, and other background regions are represented by white. That is, the mask image creating unit 22 is created by calculating the logical sum of the image created by calculating the logical product of the overlapping areas of the plurality of types of second clothing images and the human body image. A black-and-white image representing the image in black and the background in white is created as a mask image MASK_S, and the created mask image MASK-S is stored in the mask image storage unit 33. The mask image storage unit 33 stores the mask image MASK-S created by the mask image creation unit 22.
合成画像作成部 23は、 衣服画像記憶部 32から読み出された第 1の衣服画像を、 人体画像記憶部 31から読み出された人体画像に重ね合わせた合成画像を作成する。 この際、 合成画像作成部 23は、 視点情報受付部 21によって受け付けられた視点 情報に基づいて人体画像、 第 1の衣服画像を読み出す。 つまり、 正面から見た試着 状態を表示する場合、 人体を正面から見た画像、 第 1の衣服を正面から見た画像を それぞれ読み出し、 読み出された各画像を重ね合わせた合成画像を作成する。 なお、 合成画像作成部 2 3は、 人体画像の上に第 1の衣服画像を合成することで合成画像 を作成する。 合成画像記憶部 3 4は、 合成画像作成部 2 3によって作成された人体 画像と、 第 1の衣服画像とを重ね合わせた合成画像を記憶する。 The composite image creation unit 23 creates a composite image in which the first clothing image read from the clothing image storage unit 32 is superimposed on the human body image read from the human body image storage unit 31. At this time, the composite image creating unit 23 reads the human body image and the first clothing image based on the viewpoint information received by the viewpoint information receiving unit 21. In other words, when displaying the fitting state viewed from the front, an image of the human body viewed from the front and an image of the first clothing viewed from the front are read out, and a composite image is created by superimposing the read out images. . In addition, The composite image creating section 23 creates a composite image by combining the first clothing image on the human body image. The composite image storage unit 34 stores a composite image in which the human body image created by the composite image creation unit 23 and the first clothing image are superimposed.
マスキング部 2 4は 合成画像作成部 2 3によって作成され、 合成画像記憶部 3 4に記憶されている合成画像を読み出すとともに、 マスク画像作成部 2 2によって 作成され、 マスク画像記憶部 3 3に記憶されているマスク画像を読み出し、 人体画 像に第 1の衣服画像を重ね合わせた合成画像に対してマスク画像を用いてマスキン グする。 マスキング部 2 4によってマスキングされた画像は、 再び合成画像記憶部 3 4に記憶される。  The masking unit 24 reads out the composite image created by the composite image creation unit 23 and stored in the composite image storage unit 34, and is created by the mask image creation unit 22 and stored in the mask image storage unit 33. The read mask image is read out, and the masked image is used to mask the composite image obtained by superimposing the first clothing image on the human body image. The image masked by the masking section 24 is stored again in the composite image storage section 34.
描画画像作成部 2 5は、 マスク画像によってマスキングされた第 1の衣服画像と 人体画像との合成画像を合成画像記憶部 3 4から読み出すとともに、 第 2の衣服画 像を衣服画像記憶部 3 2から読み出し、 合成画像と第 2の衣服画像とを合成するこ とによって描画画像を作成し、 作成した描画画像を描画画像記憶部 3 5に記憶する。 描画画像記憶部 3 5は、 描画画像作成部 2 5によって作成された描画画像を記憶す る。  The drawing image creation unit 25 reads out a combined image of the first clothing image and the human body image masked by the mask image from the combined image storage unit 34 and stores the second clothing image in the clothing image storage unit 3 2 The drawing image is created by combining the synthesized image and the second clothing image, and the created drawn image is stored in the drawn image storage unit 35. The drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
表示制御部 2 6は、 描画画像記憶部 3 5に記憶されている描画画像を表示部 4 0 に出力するよう制御する。 表示部 4 0は、 表示装置 6から構成され、 描画画像記憶 部 3 5から出力される描画画像を表示する。  The display control unit 26 controls to output the drawn image stored in the drawn image storage unit 35 to the display unit 40. The display unit 40 includes a display device 6 and displays a drawn image output from the drawn image storage unit 35.
なお、 本実施形態において、 人体画像記憶部 3 1及び衣服画像記憶部 3 2が記憶 手段に相当し、 マスク画像作成部 2 2がマスク画像作成手段に相当し、 マスキング 部 2 4がマスキング手段に相当し、 描画画像作成部 2 5が合成画像作成手段に相当 し、 表示制御部 2 6及び表示部 4 0が表示手段に相当する。  In the present embodiment, the human body image storage section 31 and the clothing image storage section 32 correspond to storage means, the mask image creation section 22 corresponds to mask image creation means, and the masking section 24 corresponds to masking means. The drawing image creation unit 25 corresponds to a composite image creation unit, and the display control unit 26 and the display unit 40 correspond to a display unit.
図 7は、 図 2に示す第 1の実施形態における仮想試着表示装置による仮想試着表 示処理を説明するためのフローチャートである。 図 8〜図 1 1は、 第 1の実施形態 における仮想試着表示処理を説明するための図である。  FIG. 7 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the first embodiment shown in FIG. 8 to 11 are diagrams for explaining the virtual fitting display processing according to the first embodiment.
ステップ S 1において、 視点情報受付部 2 1は、 操作部 1 0を用いてユーザによ つて入力された視点情報を受け付ける。 視点情報は、 複数の視点のうちの所定の視 点からの試着状態を表示するための情報であり、 本実施形態では、 衣服が仮想的に 試着される人体を中心点とする円の当該中心点を基準とする 2 2 . 5度ずつに均等 に分割する線と、 当該円の円弧とが交わる点を視点とする 1 6方向の各視点から見 た 1 6の人体画像、 第 1の衣服画像及び第 2の衣服画像がそれぞれ記憶部 3 0に記 憶されている。 'したがって、 視点情報受付部 2 1は、 1 6の視点のうちのどの視点 から見た画像を表示するかを受け付ける。 In step S1, the viewpoint information receiving unit 21 receives the viewpoint information input by the user using the operation unit 10. The viewpoint information is information for displaying a fitting state from a predetermined viewpoint among a plurality of viewpoints. In the present embodiment, the center of a circle whose center is a human body on which clothes are virtually tried on is considered. 22.5 degrees equally from point The view point is the point at which the line dividing the circle intersects with the arc of the circle. 16 The human body image, the first clothing image, and the second clothing image viewed from each of the 16 directions are stored in the storage unit 30. Is remembered. 'Therefore, the viewpoint information accepting unit 21 accepts which viewpoint among the viewpoints 16 to display the image viewed from.
ステップ S 2において、 マスク画像作成部 2 2は、 人体画像記憶部 3 1から視点 情報に基づく人体画像を読み出すとともに、 衣服画像記憶部 3 2から視点情報に基 づく第 2の衣服画像を読み出し、 人体画像記憶部 3 1から読み出された人体画像の うちの人体を表す領域と、 衣服画像記憶部 3 2から読み出された第 2の衣服画像の うちの第 2の衣服を表す領域とを重ね合わせた領域を黒色にし、 人体画像の人体を 表す領域及び第 2の衣服画像の第 2の衣服を表す領域以外の背景を表す領域を白色 にすることで、 白黒 2色のマスク画像を作成する。 ステップ S 3において、 マスク 画像作成部 2 2は、 ステップ S 2で作成されたマスク画像をマスク画像記憶部 3 3 に記憶する。  In step S2, the mask image creation unit 22 reads the human body image based on the viewpoint information from the human body image storage unit 31 and reads the second clothing image based on the viewpoint information from the clothing image storage unit 32, The region representing the human body in the human body image read from the human body image storage unit 31 and the region representing the second clothing in the second clothing image read from the clothing image storage unit 32 A black and white two-color mask image is created by making the superimposed area black and the area representing the human body in the human body image and the background area other than the area representing the second clothing in the second clothing image white. I do. In step S3, the mask image creation unit 22 stores the mask image created in step S2 in the mask image storage unit 33.
図 8は、 マスク画像 MA S K_Sの一例を示す図である。 図 8に示すように、 マ スク画像 M A S K_Sは、 人体画像 M Gの人体を表す領域と第 2の衣服画像 J Kの 第 2の衣服を表す領域とを重ね合わせた重なり領域を黒色で表し、 背景を白色で表 した画像である。 なお、 図 8では、 人体画像 MGの人体を表す領域と第 2の衣服画 像 J Kの第 2の衣服を表す領域とを重ね合わせた重なり領域をハツチングによって 表しているが、 本来は黒色で表される。 そのため、 マスク画像 MA S K一 Sの外形 形状は、 第 2の衣服画像 J Kの外形形状と人体画像 M Gの外形形状とで形成される。 図 7に戻り、 ステップ S 4において、 合成画像作成部 2 3は、 人体画像記憶部 3 1から視点情報に基づく人体画像を読み出すとともに、 衣服画像記憶部 3 2から視 点情報に基づく第 1の衣服画像を読み出し、 衣服画像記憶部 3 2から読み出された 第 1の衣服画像を、 人体画像記憶部 3 1から読み出された人体画像に重ね合わせた 合成画像を作成する。 ステップ S 5において、 ステップ S 4で合成画像作成部 2 3 は、 作成した合成画像を合成画像記憶部 3 4に記憶する。  FIG. 8 is a diagram illustrating an example of the mask image MASK_S. As shown in FIG. 8, the mask image MAS K_S represents the overlapping region in which the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are superimposed, and the background area is black. This is an image in which is represented by white. Note that in FIG. 8, the overlapping region where the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are overlapped is represented by hatching, but originally represented in black. Is done. Therefore, the outer shape of the mask image MASK-1S is formed by the outer shape of the second clothing image JK and the outer shape of the human body image MG. Returning to FIG. 7, in step S4, the composite image creating unit 23 reads out the human body image based on the viewpoint information from the human body image storage unit 31 and performs the first reading based on the viewpoint information from the clothing image storage unit 32. The clothing image is read, and a first clothing image read from the clothing image storage unit 32 is superimposed on the human body image read from the human body image storage unit 31 to create a composite image. In step S5, the composite image creation unit 23 in step S4 stores the created composite image in the composite image storage unit 34.
図 9は、 図 3に示す人体画像 M Gに図 4に示す第 1の衣服画像 T Gを合成した合 成画像 G G 1の一例を示す図であり、 図 1 0は、 図 3に示す人体画像 M Gに図 4に 示す第 1の衣服画像 T G及び図 6に示す第 2の衣服画像 J Kを合成した合成画像 G G 2の一例を示す図である。 人体画像 MGに第 1の衣服画像 T Gを重ね合わせて合 成した場合、 図 9に示す合成画像 G G 1が作成される。 また、 人体画像 M Gに第 1 の衣服画像 T G及び第 2の衣服画像 J Kを重ね合わせて合成した場合、 図 1 0に示 す合成画像 G G 2が作成される。 人体画像 MGに第 1の衣服画像 T Gと第 2の衣服 画像 J Kとを重ね合わせる際に、 第 2の衣服画像の第 2の衣服よりも第 1の衣服画 像の第 1の衣服のほうが大きい場合、 第 1の衣服の一部分が第 2の衣服よりはみ出 して表示される場合がある。 図 1 0では、 第 1の衣服の袖部分 Aが第 2の衣服より はみ出して表示されている。 そこで、 マスク画像を作成し、 合成画像 G G 1をマス ク画像でマスキングすることによって、 はみ出す部分を除去する。 FIG. 9 is a diagram showing an example of a synthesized image GG1 obtained by combining the first clothing image TG shown in FIG. 4 with the human body image MG shown in FIG. 3, and FIG. 10 is a diagram showing the human body image MG shown in FIG. The composite image G obtained by combining the first clothing image TG shown in Fig. 4 and the second clothing image JK shown in Fig. 6 FIG. 6 is a diagram illustrating an example of G2. When the first clothing image TG is overlaid on the human body image MG and synthesized, a synthesized image GG1 shown in FIG. 9 is created. Also, when the first clothing image TG and the second clothing image JK are superimposed on the human body image MG and synthesized, a synthesized image GG2 shown in FIG. 10 is created. When the first clothing image TG and the second clothing image JK are superimposed on the human body image MG, the first clothing image of the first clothing image is larger than the second clothing image of the second clothing image JK. In such a case, a portion of the first garment may be displayed so as to protrude from the second garment. In FIG. 10, the sleeve portion A of the first garment is displayed so as to protrude from the second garment. Therefore, a mask image is created, and the composite image GG1 is masked with the mask image to remove the protruding portion.
図 7に戻り、 ステップ S 6において、 マスキング部 2 4は、 合成画像記憶部 3 4 から合成画像を読み出すとともに、 マスク画像記憶部 3 3からマスク画像 MA S K —Sを読み出し、 合成画像記憶部 3 4から読み出された合成画像をマスク画像記憶 部 3 3から読み出されたマスク画像 MA S K— Sを用いてマスキングする。 マスク 画像 MA S K— Sの黒色領域、 つまり、 マスク画像 MA S K— Sのうちの人体及び 第 2の衣服を表す領域は透過するため、 合成画像の上にマスク画像を重ねると、 合 成画像のうちの人体及び第 2の衣服を表す領域以外は覆い隠されることとなり、 第 2の衣服からはみ出した第 1の衣服は除去されることとなる。 ステップ S 7におい て、 マスキング部 2 4は、 ステップ S 6でマスキングされた合成画像を合成画像記 憶部 3 4に記憶する。  Returning to FIG. 7, in step S6, the masking section 24 reads out the composite image from the composite image storage section 34, reads the mask image MA SK —S from the mask image storage section 33, and reads the composite image storage section 3. The combined image read from 4 is masked using the mask image MA SK-S read from the mask image storage unit 33. The black area of the mask image MA SK-S, that is, the area representing the human body and the second clothing in the mask image MA SK-S is transparent, so if the mask image is overlaid on the composite image, The area other than the area representing the human body and the second garment will be covered and the first garment protruding from the second garment will be removed. In step S7, the masking section 24 stores the composite image masked in step S6 in the composite image storage section 34.
ステップ S 8において、 描画画像作成部 2 5は、 合成画像記憶部 3 4から合成画 像を読み出すとともに、 衣服画像記憶部 3 2から第 2の衣服画像を読み出し、 合成 画像記憶部 3 4から読み出された合成画像に、 衣服画像記憶部 3 2から読み出され た第 2の衣服画像を重ね合わせて合成することで描画画像を作成する。 ステップ S 9において、 描画画像作成部 2 5は、 ステップ S 8で作成された描画画像を描画画 像記憶部 3 5に記憶する。  In step S8, the drawing image creation unit 25 reads the composite image from the composite image storage unit 34, reads the second clothing image from the clothing image storage unit 32, and reads the second clothing image from the composite image storage unit 34. The drawing image is created by superimposing the second synthesized image read from the clothing image storage unit 32 on the output synthesized image and synthesizing the second synthesized image. In step S9, the drawing image creation unit 25 stores the drawing image created in step S8 in the drawing image storage unit 35.
図 1 1は、 図 9に示す合成画像 G G 1を図 8に示すマスク画像 MA S K— Sを用 いてマスキングした合成画像に図 6に示す第 2の衣服画像を合成した描画画像 B G 1の一例を示す図である。 図 1 1に示すように、 描画画像 B G 1は、 第 1の衣服画 像 T Gと人体画像 MGとを合成した合成画像が、 人体画像 MGと第 2の衣服画像 J Kとで作成されたマスク画像を用いてマスキングされているため、 外形形状が人体 及び第 2の衣服の外形形状となり、 第 2の衣服から第 1の衣服がはみ出すことなく 合成される。 Fig. 11 shows an example of a drawing image BG1 in which the composite image GG1 shown in Fig. 9 is masked using the mask image MASK-S shown in Fig. 8 and the second clothing image shown in Fig. 6 is composited. FIG. As shown in FIG. 11, the drawing image BG 1 is a composite image obtained by combining the first clothing image TG and the human body image MG, and the human body image MG and the second clothing image J Since masking is performed using the mask image created with K, the outer shape becomes the outer shape of the human body and the second clothing, and the first clothing is synthesized without protruding from the second clothing.
ステップ S 1 0において、 表示制御部 2 6は、 描画画像記憶部 3 5から描画画像 B G 1を読み出し、 描画画像記憶部 3 5から読み出された描画画像 B G 1を表示部 4 0に出力する。 表示部 4 0は、 表示制御部 2 6から出力された描画画像 B G 1を 表示する。 したがって、 人体画像 M Gに第 1の衣服画像 T Gを重ね合わせた図 9に 示す合成画像 G G 1を、 人体画像 M Gと第 2の衣服画像 J Kとから作成された図 8 に示すマスク画像 M A S K— Sを用いてマスキングすることによって、 第 2の衣服 からはみ出した第 1の衣服の袖部分 Aが除去され、 違和感なく試着状態を表示する ことができるようになる。  In step S10, the display control unit 26 reads the drawn image BG1 from the drawn image storage unit 35, and outputs the drawn image BG1 read from the drawn image storage unit 35 to the display unit 40. . The display section 40 displays the drawn image BG1 output from the display control section 26. Therefore, the composite image GG1 shown in FIG. 9 in which the first clothing image TG is superimposed on the human body image MG is used as the mask image MASK-S shown in FIG. 8 created from the human body image MG and the second clothing image JK. By masking with, the sleeve portion A of the first garment protruding from the second garment is removed, and the fitting state can be displayed without feeling uncomfortable.
このように、 人体画像 M Gの上に仮想的に試着される第 1の衣艮画像 T Gが人体 画像 M Gに重ね合わされた画像に対して、 人体画像 M Gと第 2の衣服画像 J Kとが 重ね合わされたマスク画像 MA S K— Sを用いてマスキングされ、 マスキングされ た画像と第 2の衣服画像 J Kとを重ね合わせた合成画像が作成され、 作成された合 成画像が表示されるので、 第 1の衣服画像 T Gが第 2の衣服画像 J Kよりも大きい 場合でも、 第 2の衣服画像 J Kから第 1の衣服画像 T Gをはみ出させずに表示する ことができ、 仮想的に試着した試着状態を違和感なく表示することができる。  Thus, the human body image MG and the second clothing image JK are superimposed on the image in which the first clothing image TG virtually tried on on the human body image MG is superimposed on the human body image MG. Mask image MA SK-S, a composite image is created by superimposing the masked image and the second clothing image JK, and the created composite image is displayed. Even when the clothing image TG is larger than the second clothing image JK, the first clothing image TG can be displayed from the second clothing image JK without protruding, and the fitting state virtually tried on can be displayed without discomfort. Can be displayed.
また、 複数種類の第 2の衣服画像の重なり領域の論理積を求めることによって作 成された画像と、 人体画像 M Gとの重なり領域の論理和を求めることによってマス ク画像 MA S K— Sが作成され、 第 1の衣服画像 T Gを人体画像 M Gに重ね合わせ た画像に対してマスク画像 MA S K— Sが用いられてマスキングされ、 マスキング された画像と 1の第 2の衣服画像 J Kとを重ね合わせた合成画像が作成され、 作成 された合成画像が表示される。 したがって、 複数種類の第 2の衣服画像を全て含む とともに、 人体画像 M Gを含むマスク画像 MA S K— Sによって、 第 1の衣服画像 T Gがマスキングされるので、 複数種類の第 2の衣服画像のうちの 1の第 2の衣服 画像 J Kを第 1の衣服画像 T Gと人体画像 M Gとに合成したとしても、 第 1の衣服 画像 T Gが第 2の衣服画像 J からはみ出すことなく表示することができる。 また 、 マスク画像作成部 2 2は、 複数種類の第 2の衣服画像を全て含むとともに人体画 像を含むマスク画像を作成するので、 作成されたマスク画像を全ての第 2の衣服画 像の合成に用いることができる。 In addition, a mask image MA SK-S is created by calculating a logical sum of an overlapping region of an overlapping region of a plurality of types of second clothing images and an overlapping region of the human body image MG. The mask image MA SK-S is used to mask the image obtained by superimposing the first clothing image TG on the human body image MG, and the masked image is superimposed on the second clothing image JK. The created composite image is created, and the created composite image is displayed. Therefore, the first clothing image TG is masked by the mask image MA SK-S including the human body image MG while including all of the multiple types of second clothing images. Even if the first second clothing image JK is combined with the first clothing image TG and the human body image MG, the first clothing image TG can be displayed without protruding from the second clothing image J. Also, the mask image creation unit 22 includes all of the plurality of types of second clothing images and a human body image. Since the mask image including the image is created, the created mask image can be used for synthesizing all the second clothing images.
さらに、 人体を中心点とする円の当該中心点を基準とする所定の角度ずつに均等 に分割する線と、 当該円の円弧とが交わる点を視点とし、 それぞれ同一視点におい て撮影又は作成された人体画像 M Gと第 2の衣服画像 J Kとを重ね合わせたマスク 画像 MA S K_Sが作成され、 第 1の衣服画像 T Gを人体画像 MGに重ね合わせた 画像に対して、 マスク画像 M A S K— Sが用いられてマスキングされ.. マスキング された画像と第 2の画像 J Kとを重ねあわせた合成画像が作成され、 作成された合 成画像が表示される。 したがつて、 第 1の衣服画像 T Gが第 2の衣服画像 J Kより も大きい場合でも、 第 2の衣服画像 J Kから第 1の衣服画像 T Gをはみ出させずに 表示することができ、 仮想的に試着した試着状態を 2次元の画像を用いて 3次元的 に表示することができ、 複数の視点から見た試着状態を確認することができる。  In addition, a point where a line that equally divides a circle centered on the human body at a predetermined angle with respect to the center point as a reference and the arc of the circle intersects as a viewpoint is taken or created from the same viewpoint. A mask image MASK_S is created by superimposing the human body image MG and the second clothing image JK, and a mask image MASK-S is created for the image in which the first clothing image TG is superimposed on the human body image MG. Used and masked .. A composite image is created by superimposing the masked image and the second image JK, and the created composite image is displayed. Therefore, even when the first clothing image TG is larger than the second clothing image JK, the first clothing image TG can be displayed without protruding from the second clothing image JK, and virtually. The fitting state of the fitting is displayed three-dimensionally using a two-dimensional image, and the fitting state from multiple viewpoints can be confirmed.
(第 2の実施形態)  (Second embodiment)
次に、 第 2の実施形態における仮想試着表示装置について説明する。 第 2の実施 形態における仮想試着表示装置は、 自動的に作成されたマスク画像の修正を受け付 けることによってさらに違和感のない試着状態の表示を実現する。  Next, a virtual fitting display device according to the second embodiment will be described. The virtual fitting display device according to the second embodiment realizes a display of a fitting state without any uncomfortable feeling by receiving a correction of a mask image created automatically.
図 1 2は、 第 2の実施形態における図 1に示す仮想試着表示装置の主要機能プロ ック図である。  FIG. 12 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the second embodiment.
図 1 2に示すように、 仮想試着表示装置は、 機能的には、 操作部 1 0、 プロダラ ム実行部 2 0、 記憶部 3 0及び表示部 4 0を備える。 プログラム実行部 2 0は、 視 点情報受付部 2 1、 マスク画像作成部 2 2、 合成画像作成部 2 3、 マスキング部 2 4、 描画画像作成部 2 5、 表示制御部 2 6及びマスク画像修正受付部 2 7を含む。 記憶部 3 0は、 人体画像記憶部 3 1、 衣服画像記憶部 3 2、 マスク画像記憶部 3 3、 合成画像記憶部 3 4及び描画画像記憶部 3 5を含む。 なお、 図 1 2に示す第 2の実 施形態における仮想試着表示装置は、 図 2に示す仮想試着表示装置とほぼ同じ構成 であるので、 異なる構成のみを以下に説明する。  As shown in FIG. 12, the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction. Includes reception section 27. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35. Since the virtual fitting display device according to the second embodiment shown in FIG. 12 has almost the same configuration as the virtual fitting display device shown in FIG. 2, only different configurations will be described below.
マスク画像修正受付部 2 7は、 操作部 1 0によるマスク画像の修正を受け付け、 マスク画像作成部 2 2によって作成されたマスク画像を、 第 1の衣服画像の外形形 状に応じて修正する。 具体的には、 第 1の実施形態において作成されたマスク画像 MA S K__Sに違和感を解消させるための形状 S Sを付加することで修正マスク画 像 MASK— S' を作成する。 このことは、 下記の (2) 式で表すことができる。 The mask image correction receiving unit 27 receives the correction of the mask image by the operation unit 10 and corrects the mask image created by the mask image creating unit 22 according to the outer shape of the first clothing image. Specifically, the mask image created in the first embodiment MASK—S 'is created by adding a shape SS to MA S K__S to eliminate discomfort. This can be expressed by the following equation (2).
MASK—S' =MASK_S US S - · · · (2)  MASK—S '= MASK_S US S-· · · (2)
なお、 上記 (2) 式において、 MASK— S' は修正後のマスク画像を表し、 M A S K— Sはマスク画像作成部 22において自動的に作成された人体画像及び第 2 の衣服画像からなるマスク画像を表し、 S Sはマスク画像 MASK— Sの違和感を 解消させるために新たに付カ卩される画像を表し、 Uは論理和 (OR) を表している。 マスク画像修正受付部 27は、 修正されたマスク画像をマスク画像記憶部 33に 記憶する。 なお、 本実施形態において、 マスク画像修正受付部 27がマスク画像修 正受付手段に相当する。  In the above equation (2), MASK-S ′ represents a corrected mask image, and MASK-S is a mask image composed of a human body image and a second clothing image automatically created by the mask image creating section 22. Where SS represents an image that is newly added to eliminate the discomfort of the mask image MASK-S, and U represents a logical sum (OR). The mask image correction receiving unit 27 stores the corrected mask image in the mask image storage unit 33. In the present embodiment, the mask image correction receiving unit 27 corresponds to a mask image correction receiving unit.
図 13は、 図 12に示す第 2の実施形態における仮想試着表示装置による仮想試 着表示処理を説明するためのフローチャートである。 図 14〜図 17は、 第 2の実 施形態における仮想試着表示処理を説明するための図である。  FIG. 13 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the second embodiment shown in FIG. FIGS. 14 to 17 are diagrams for explaining the virtual fitting display processing in the second embodiment.
なお、 図 13に示すステップ S 21及びステップ S 22の処理は、 図 7のフロー チャートに示すステップ S 1及びステップ S 2の処理と同じであるので説明を省略 する。  Note that the processing of step S21 and step S22 shown in FIG. 13 is the same as the processing of step S1 and step S2 shown in the flow chart of FIG. 7, and a description thereof will be omitted.
また、 ステップ S 25において、 合成画像作成部 23は、 図 3に示す人体画像 M Gと、 図 5に示す第 1の衣服画像 SGとを重ね合わせた合成画像を作成する。 図 1 4は、 図 3に示す人体画像 M Gに図 5に示す第 1の衣服画像 S Gを合成した合成画 像 GG 3の一例を示す図であり、 図 15は、 人体画像 MGに第 1の衣服画像 SG及 び第 2の衣服画像 J Kを合成し、 図 8に示すマスク画像 MASK— Sを用いてマス キングした描画画像 B G 2の一例を示す図である。 人体画像 MGに第 1の衣服画像 SGを重ね合わせて合成した場合、 図 14に示す合成画像 GG 3が作成される。 ま た、 人体画像 M Gに第 1の衣服画像 S G及び第 2の衣服画像 J Kを重ね合わせて合 成し、 マスク画像作成部 22によって作成されたマスク画像 MASK— Sを用いて マスキングした場合、 図 15に示す描画画像 BG2が作成される。 人体画像 MGに 第 1の衣服画像 S Gを重ね合わせて合成した合成画像を、 図 6に示すマスク画像 M A S K— Sを用いてマスキングした場合、 図 15に示すように、 第 1の衣服画像 S Gの手首の袖口部分 Bもマスキングされてしまう。 これは、 マスク画像 MASK ■ Sの透過する領域が人体画像の人体を表す領域と第 2の衣服画像の第 2の衣服を表 す領域とから構成されるためであり、 図 1 5に示すように、 第 2の衣服の袖口部分 が手首とはなれており、 且つ第 1の衣服が手首まである場合、 第 1の衣服の袖口部 分 Bの形状が人体に密着した形状となり 違和感のある試着状態となってしまう。 そこで、 以下のようにしてマスク画像を修正する。 Further, in step S25, the composite image creating section 23 creates a composite image in which the human body image MG shown in FIG. 3 and the first clothing image SG shown in FIG. 5 are superimposed. FIG. 14 is a diagram showing an example of a synthesized image GG3 obtained by synthesizing the first clothing image SG shown in FIG. 5 on the human body image MG shown in FIG. 3, and FIG. FIG. 9 is a diagram showing an example of a drawn image BG2 obtained by combining a clothing image SG and a second clothing image JK and masking the mask image using a mask image MASK-S shown in FIG. When the first clothing image SG is overlaid on the human body image MG and synthesized, a synthesized image GG3 shown in FIG. 14 is created. In addition, when the first clothing image SG and the second clothing image JK are superimposed on the human body image MG and synthesized, and masked using the mask image MASK-S created by the mask image creating unit 22, FIG. The drawing image BG2 shown in FIG. 15 is created. When the composite image obtained by superimposing the first clothing image SG on the human body image MG and combining it is masked using the mask image MASK-S shown in FIG. 6, as shown in FIG. 15, the first clothing image SG The wrist cuff B is also masked. This is the mask image MASK ■ This is because the region through which S penetrates is composed of a region representing the human body in the human body image and a region representing the second clothing in the second clothing image. As shown in FIG. If the cuff portion is separated from the wrist and the first garment extends to the wrist, the shape of the cuff portion B of the first garment is in close contact with the human body, resulting in an uncomfortable fitting state. Therefore, the mask image is modified as follows.
ステップ S 2 3において、 マスク画像修正受付部 2 7は、 ステップ S 2 2におい て作成されたマスク画像の修正を受け付ける。 ここで、 ユーザは、 マスク画像作成 部 2 2によつて作成されたマスク画像を、 操作部 1 0を用いて第 1の衣服の外形形 状に応じて修正する。 図 1 6は、 修正されたマスク画像 M A S K_S ' の一例を示 す図である。 図 1 6に示すように、 修正されたマスク画像 MA S K— S ' は、 図 8 に示すマスク画像 MA S K—Sの外形形状に違和感を解消させるための形状 S Sが 付加されている。 なお、 図 1 6では、 人体画像 MGの人体を表す領域と第 2の衣服 画像 J Kの第 2の衣服を表す領域とを重ね合わせた重なり領域をハッチングによつ て表し、 マスク画像 MA S K— Sの外形形状に違和感を解消させるための領域を斜 線によって表しているが、 本来はいずれも黒色で表される。 ステップ S 2 4におい て、 マスク画像修正受付部 2 7は、 修正したマスク画像をマスク画像記憶部 3 3に 記憶する。  In step S23, the mask image correction receiving unit 27 receives correction of the mask image created in step S22. Here, the user corrects the mask image created by the mask image creation unit 22 using the operation unit 10 according to the outer shape of the first garment. FIG. 16 is a diagram showing an example of the corrected mask image MASH_S '. As shown in FIG. 16, the modified mask image MA S K—S ′ has a shape S S added to the external shape of the mask image MA S K—S shown in FIG. Note that in FIG. 16, an overlapping region in which the region representing the human body of the human body image MG and the region representing the second clothing of the second clothing image JK are overlapped is shown by hatching, and the mask image MA SK- Areas for eliminating discomfort in the external shape of S are indicated by diagonal lines, but all are originally expressed in black. In step S 24, mask image correction receiving section 27 stores the corrected mask image in mask image storage section 33.
なお、 図 1 3に示すステップ S 2 5からステップ S 3 1までの処理は、 図 7のフ ローチャートに示すステップ S 4からステップ S 1 0までの処理と同じであるので 説明を省略する。  Note that the processing from step S25 to step S31 shown in FIG. 13 is the same as the processing from step S4 to step S10 shown in the flowchart of FIG.
図 1 7は、 人体画像 M Gと第 1の衣服画像 S Gとが合成された合成画像を図 1 6 に示すマスク画像を用いてマスキングし、 第 2の衣服画像 J Kを合成した描画画像 B G 3の一例を示す図である。 図 1 7に示すように、 人体画像 M Gに第 1の衣服画 像 S Gを重ね合わせて合成した合成画像を、 図 1 6に示す修正されたマスク画像 M A S K— S ' を用いてマスキングし、 図 6に示す第 2の衣服画像 J Kを合成するこ とによって、 第 1の衣服画像 S Gにおける袖口部分 Bを違和感なく表示することが できる。  Fig. 17 shows a drawing image BG3 in which the combined image obtained by combining the human body image MG and the first clothing image SG is masked using the mask image shown in Fig. 16 and the second clothing image JK is combined. It is a figure showing an example. As shown in FIG. 17, a combined image obtained by superimposing the first clothing image SG on the human body image MG and combining the masked image with the modified mask image MASK-S ′ shown in FIG. By combining the second clothing image JK shown in FIG. 6, the cuff portion B in the first clothing image SG can be displayed without discomfort.
このように、 マスク画像作成部 2 2によつて作成されたマスク画像 M A S K_S が、 第 1の衣服画像 S Gの外形形状に応じて修正され、 合成画像作成部 2 3によつ て作成された合成画像が、 マスク画像修正受付部 2 7によって修正されたマスク画 像 MA S K— S ' を用いてマスキングされるため、 仮想的に試着した試着状態をさ らに違和感なく表示することができるとともに、 実際に試着した状態をリアルに再 現することができる。 また、 マスク画像は、 ユーザの手作業によって修正されるが、 自動的に作成されたマスク画像を用いて修正されるため、 マスク画像を 1からユー ザの手作業によって作成するよりも短時間にマスク画像を作成することができる。 As described above, the mask image MAS K_S created by the mask image creation unit 22 is modified according to the outer shape of the first clothing image SG, and the mask image MAS K_S is modified by the composite image creation unit 23. The composite image created by the masking is masked using the mask image MA SK-S 'corrected by the mask image correction receiving unit 27, so that the fitting state that is virtually tried on is displayed without further discomfort. In addition to being able to do this, it is possible to reproduce the state of the actual fitting in a realistic manner. In addition, the mask image is corrected manually by the user, but is corrected using the automatically created mask image, so that the mask image is created in a shorter time than when the mask image is manually created from scratch. A mask image can be created.
(第 3の実施形態)  (Third embodiment)
次に、 第 3の実施形態について説明する。 第 3の実施形態では 衣服画像記憶部 3 2が、 第 2の衣服画像のさらに上に仮想的に試着される 2次元の第 3の衣服画像 を記憶しており、 人体画像と第 1の衣服画像と第 2の衣服画像と第 3の衣服画像と が合成され、 合成された画像が表示される。  Next, a third embodiment will be described. In the third embodiment, the clothing image storage unit 32 stores a two-dimensional third clothing image virtually tried on further than the second clothing image, and a human body image and the first clothing image are stored. The image, the second clothing image, and the third clothing image are combined, and the combined image is displayed.
図 1 8は、 第 3の実施形態における図 1に示す仮想試着表示装置の主要機能プロ ック図である。  FIG. 18 is a main function block diagram of the virtual fitting display device shown in FIG. 1 in the third embodiment.
図 1 8に示すように、 仮想試着表示装置は、 機能的には、 操作部 1 0、 プロダラ ム実行部 2 0、 記憶部 3 0及び表示部 4 0を備える。 プログラム実行部 2 0は、 視 点情報受付部 2 1、 マスク画像作成部 2 2、 合成画像作成部 2 3、 マスキング部 2 4、 描画画像作成部 2 5、 表示制御部 2 6及びマスク画像修正受付部 2 7を含む。 記憶部 3 0は、 人体画像記憶部 3 1、 衣服画像記憶部 3 2、 マスク画像記憶部 3 3、 合成画像記憶部 3 4及び描画画像記憶部 3 5を含む。 なお、 図 1 8に示す第 2の実 施形態における仮想試着表示装置は、 図 2に示す仮想試着表示装置とほぼ同じ構成 であるので、 異なる構成のみを以下に説明する。  As shown in FIG. 18, the virtual fitting display device functionally includes an operation unit 10, a program execution unit 20, a storage unit 30, and a display unit 40. The program execution unit 20 includes a viewpoint information reception unit 21, a mask image creation unit 22, a composite image creation unit 23, a masking unit 24, a drawing image creation unit 25, a display control unit 26, and a mask image correction. Includes reception section 27. The storage unit 30 includes a human body image storage unit 31, a clothing image storage unit 32, a mask image storage unit 33, a combined image storage unit 34, and a drawn image storage unit 35. Note that the virtual fitting display device according to the second embodiment shown in FIG. 18 has almost the same configuration as the virtual fitting display device shown in FIG. 2, and therefore only different configurations will be described below.
衣服画像記憶部 3 2は、 人体画像の上に仮想的に試着される第 1の衣服画像の画 像データと、 第 1の衣服画像のさらに上に仮想的に試着される第 1 の衣服画像の画 像データと、 第 2の衣服画像のさらに上に仮想的に試着される第 3の衣服画像の画 像データとをあらかじめ記憶する。 第 3の衣服画像は、 種類が異なる複数種類の第 3の衣服に関する画像データであり、 衣服画像記憶部 3 2は、 複数種類の第 3の衣 服に関する画像デ一夕を記憶している。  The clothing image storage unit 32 stores the image data of the first clothing image that is virtually tried on on the human body image, and the first clothing image that is virtually tried on further than the first clothing image. The image data of the third clothing image and the image data of the third clothing image to be virtually tried on are further stored in advance on the second clothing image. The third clothing image is image data relating to a plurality of different types of third clothing, and the clothing image storage unit 32 stores image data relating to a plurality of types of third clothing.
第 3の衣服画像は 2次元画像である。 衣服画像記憶部 3 2は、 人体を中心点とす る円の当該中心点を基準とする所定の角度ずつに均等に分割する線と、 当該円の円 弧とが交わる点を視点とする各視点から見た衣服の画像データを記憶しており、 例 えば、 人体を中心点とする円を 22. 5度ごとに区切った 16の視点から見た 16 の画像デ一夕を 1種類ごとに記憶している。 第 3の衣服は、 例えば人体の上半身に 仮想的に試着される衣服であり、 例えばコ一ト等である。 The third clothing image is a two-dimensional image. The clothing image storage unit 32 includes a line that equally divides the circle centered on the human body into predetermined angles based on the center point, and a circle of the circle. Stores image data of clothes viewed from each viewpoint with a point where the arc intersects. For example, a circle centered on the human body is divided into 22.5 degrees and viewed from 16 viewpoints. The image data is stored for each type. The third clothing is, for example, clothing that is virtually tried on on the upper body of the human body, such as a coat.
マスク画像作成部 22は、 人体画像記憶部 31から読み出された人体画像と、 衣 服画像記憶部 32から読み出された第 3の衣服画像とを重ね合わせたマスク画像を 作成する。 ここで、 第 2の衣服画像に適用されるマスク画像 MASK— Jは、 複数 種類の第 3の衣服画像の重なり領域の論理積を求めることによつて作成された画像 と、 前記人体画像との重なり領域の論理和を求めることによって作成され、 下記の (3) 式で表される。  The mask image creation unit 22 creates a mask image in which the human body image read from the human body image storage unit 31 and the third clothing image read from the clothing image storage unit 32 are superimposed. Here, the mask image MASK-J applied to the second clothing image is an image created by calculating a logical product of overlapping regions of a plurality of types of third clothing images, and the human body image. It is created by calculating the logical sum of the overlapping areas, and is expressed by the following equation (3).
MASK— J= (CT1 ΠΟΤ2ηθΤ3 · · ·) UBODY - · · · (3) なお、 上記 (3) 式において、 MASK— Jは第 2の衣服画像に適用されるマス ク画像を表し、 CT1, CT2, CT 3はそれぞれ第 3の衣服画像を表し、 BOD Yは人体画像を表し、 Πは論理積 (AND) を表し、 Uは論理和 (OR) を表して いる。  MASK—J = (CT1ΠΟΤ2ηθΤ3 ···) UBODY-· · · (3) In the above equation (3), MASK-J represents a mask image applied to the second clothing image, and CT1, CT2 , CT 3 represent the third clothing image, BOD Y represents the human body image, Π represents the logical product (AND), and U represents the logical sum (OR).
上記 (3) 式に示すように、 マスク画像 MASK— Jは、 複数種類の第 3の衣服 画像を全て含むとともに、 人体画像を含む画像である。 また、 マスク画像 MASK — Jは、 複数種類の第 3の衣服画像と人体画像とを重ね合わせた画像を "0" と "1" とに 2値ィ匕し、 透過させたい領域を黒 ( "0" ) 又は白 ( "1" ) にする。 本実施形態におけるマスク画像 MASK— Jでは、 透過させる領域を黒で表し、 そ れ以外の背景を白で表す。 すなわち、 マスク画像作成部 22は、 複数種類の第 3の 衣服画像の重なり領域の論理積を求めることによって作成される画像と、 人体画像 との重なり領域の論理和を求めることによって作成される画像を黒で表し、 背景を 白で表す白黒画像をマスク画像 MASK— Jとして作成し、 作成されたマスク画像 MASK— Jをマスク画像記憶部 33に記憶する。 マスク画像記憶部 33は、 マス ク画像作成部 22によつて作成されたマスク画像 M A S K_ Jを記憶する。  As shown in the above equation (3), the mask image MASK-J is an image that includes all of a plurality of types of third clothing images and also includes a human body image. Also, the mask image MASK — J converts the image obtained by superimposing a plurality of types of third clothing images and the human body image into “0” and “1”, and deciphers the area to be transmitted through black (“ 0 ") or white (" 1 "). In the mask image MASK-J in the present embodiment, the region to be transmitted is represented by black, and the other background is represented by white. That is, the mask image creation unit 22 calculates the logical sum of the overlapping area of the overlapping area of the plurality of types of third clothing images and the image created by calculating the logical sum of the overlapping area of the human body image. Is represented as black and a black-and-white image representing the background as white is created as a mask image MASK-J, and the created mask image MASK-J is stored in the mask image storage unit 33. The mask image storage unit 33 stores the mask image MASK_J created by the mask image creating unit 22.
合成画像作成部 23は、 衣服画像記憶部 32から読み出された第 2の衣服画像を、 合成画像記憶部 31から読み出された人体画像と第 1の衣服画像とマスク画像 MA SK一 Sとを合成した合成画像に重ね合わせた合成画像を作成する。 この際、 合成 画像作成部 2 3は、 視点情報受付部 2 1によって受け付けられた視点情報に基づい て第 2の衣服画像を読み出す。 つまり、 正面から見た試着状態を表示する場合、 第 2の衣服を正面から見た画像を読み出し、 読み出された画像を重ね合わせた合成画 像を作成する。 なお、 合成画像作成部 2 3は、 合成画像の上に第 2の衣服画像を合 成することで合成画像を作成する。 合成画像記憶部 3 4は、 合成画像作成部 2 3に よって作成された第 2の衣服画像と、 合成画像とを重ね合わせた合成画像を記憶す る。 ' The composite image creation unit 23 converts the second clothing image read from the clothing image storage unit 32 into the human body image read from the composite image storage unit 31, the first clothing image, and the mask image MA SK-1S. A composite image is created by superimposing the composite image on the composite image. At this time, The image creating unit 23 reads out the second clothing image based on the viewpoint information received by the viewpoint information receiving unit 21. That is, when displaying the fitting state viewed from the front, an image of the second clothing viewed from the front is read, and a composite image is created by superimposing the read images. Note that the composite image creating unit 23 creates a composite image by synthesizing the second clothing image on the composite image. The composite image storage unit 34 stores a composite image in which the second clothing image created by the composite image creation unit 23 and the composite image are superimposed. '
マスキング部 2 4は、 合成画像作成部 2 3によって作成され、 合成画像記憶部 3 4に記憶されている合成画像を、 マスク画像作成部 2 2によって作成され、 マスク 画像記憶部 3 3に記憶されているマスク画像を用いてマスキングする。 マスキング 部 2 4によってマスキングされた画像は、 再び合成画像記憶部 3 4に記憶される。 描画画像作成部 2 5は、 マスク画像によってマスキングされた第 1の衣服画像と 第 2の衣服画像と人体画像との合成画像を合成画像記憶部 3 4から読み出すととも に、 第 3の衣服画像を衣服画像記憶部 3 2から読み出し、 合成画像と第 3の衣服画 像とを合成することによって描画画像を作成し、 作成した描画画像を描画画像記憶 部 3 5に記憶する。 描画画像記憶部 3 5は、 描画画像作成部 2 5によって作成され た描画画像を記憶する。  The masking section 24 is created by the combined image creation section 23, and the combined image stored in the combined image storage section 34 is created by the mask image creation section 22 and stored in the mask image storage section 33. Masking is performed using the mask image. The image masked by the masking unit 24 is stored again in the composite image storage unit 34. The drawing image creation unit 25 reads out a composite image of the first clothing image, the second clothing image, and the human body image masked by the mask image from the composite image storage unit 34, and reads the third clothing image. Is read from the clothing image storage unit 32, a drawing image is created by combining the composite image with the third clothing image, and the created drawing image is stored in the drawing image storage unit 35. The drawing image storage unit 35 stores the drawing image created by the drawing image creation unit 25.
図 1 9は、 図 1 8に示す第 3の実施形態における仮想試着表示装置による仮想試 着表示処理を説明するためのフローチャートである。 なお、 図 1 9に示すステップ S 4 1及びステップ S 4 7までの処理は、 図 7のフローチャートに示すステップ S 1及びステップ S 7までの処理と同じであるので説明を省略する。  FIG. 19 is a flowchart for explaining virtual fitting display processing by the virtual fitting display apparatus according to the third embodiment shown in FIG. Note that the processing up to step S41 and step S47 shown in FIG. 19 is the same as the processing up to step S1 and step S7 shown in the flowchart of FIG.
ステップ S 4 8において、 マスク画像作成部 2 2は、 人体画像記憶部 3 1から視 点情報に基づく人体画像を読み出すとともに、 衣服画像記憶部 3 2から視点情報に 基づく第 3の衣服画像を読み出し、 人体画像記憶部 3 1から読み出された人体画像 のうちの人体を表す領域と、 衣服画像記憶部 3 2から読み出された第 3の衣服画像 のうちの第 3の衣服を表す領域とを重ね合わせた重なり領域を黒色にし、 人体画像 の人体を表す領域及び第 3の衣服画像の第 3の衣服を表す領域以外の背景を表す領 域を白色にすることで、 白黒 2色のマスク画像を作成する。 ステップ S 4 9におい て、 マスク画像作成部 2 2は、 ステップ S 4 8で作成されたマスク画像をマスク画 像記憶部 3 3に記憶する。 In step S48, the mask image creation unit 22 reads the human body image based on the viewpoint information from the human body image storage unit 31 and reads the third clothing image based on the viewpoint information from the clothing image storage unit 32. A region representing the human body in the human body image read from the human body image storage unit 31; and a region representing the third clothing in the third clothing image read from the clothing image storage unit 32. The black-and-white two-color mask is obtained by making the overlapping area where the image is overlapped black and the area representing the background other than the area representing the human body in the human body image and the area representing the third clothing in the third clothing image white. Create an image. In step S49, the mask image creating section 22 converts the mask image created in step S48 into a mask image. The image is stored in the image storage unit 33.
ステップ S 5 0において、 合成画像作成部 2 3は、 合成画像記憶部 3 4から人体 画像と第 1の衣服画像とマスク画像 MA S K— Sとを合成した合成画像を読み出す とともに、 衣服画像記憶部 3 2から視点情報に基づく第 2の衣服画像を読み出し、 人体画像記憶部 3 1から読み出された第 2の衣服画像を、 人体画像合成画像記憶部 3 4から読み出された合成画像に重ね合わせた合成画像を作成する。 ステップ S 5 1において、 合成画像作成部 2 3は、 ステップ S 5 0で作成した合成画像を合成画 像記憶部 3 4に記憶する。  In step S50, the composite image creation unit 23 reads out the composite image obtained by combining the human body image, the first clothing image, and the mask image MA SK-S from the composite image storage unit 34, and stores the clothing image in the clothing image storage unit. The second clothing image read from the human body image storage unit 31 is superimposed on the composite image read from the human body image composite image storage unit 34 by reading the second clothing image based on the viewpoint information from 32. Create a combined image. In step S51, the composite image creation unit 23 stores the composite image created in step S50 in the composite image storage unit 34.
ステップ S 5 2において、 マスキング部 2 4は、 合成画像記憶部 3 4から合成画 像を読み出すとともに、 マスク画像記憶部 3 3からマスク画像 MA S K— Jを読み 出し、 合成画像記憶部 3 4から読み出された合成画像をマスク画像記憶部 3 3から 読み出されたマスク画像 MA S K— Jを用いてマスキングする。 マスク画像 MA S K— Jの黒色領域、 つまり、 マスク画像 MA S K— Jのうちの人体及び第 3の衣服 を表す領域は透過するため、 合成画像の上にマスク画像を重ねると、 合成画像のう ちの人体及び第 3の衣服の領域以外は覆い隠されることとなり、 第 3の衣服からは み出した第 2の衣服は除去されることとなる。 ステップ S 5 3において、 マスキン グ部 2 4は、 ステップ S 5 2でマスキングされた合成画像を合成画像記憶部 3 4に 記憶する。  In step S52, the masking unit 24 reads the composite image from the composite image storage unit 34, reads the mask image MA SK-J from the mask image storage unit 33, and reads the mask image MA SK-J from the composite image storage unit 34. The read composite image is masked using the mask image MA SK-J read from the mask image storage unit 33. The black region of the mask image MA SK-J, that is, the region representing the human body and the third clothing in the mask image MA SK-J is transparent, so if the mask image is overlaid on the composite image, The area other than the area of the human body and the third garment will be covered, and the second garment protruding from the third garment will be removed. In step S53, the masking section 24 stores the composite image masked in step S52 in the composite image storage section 34.
ステップ S 5 4において、 描画画像作成部 2 5は、 合成画像記憶部 3 4から合成 画像を読み出すとともに、 衣服画像記憶部 3 2から第 3の衣服画像を読み出し、 合 成画像記憶部 3 4から読み出された合成画像に、 衣服画像記憶部 3 2から読み出さ. れた第 3の衣服画像を重ね合わせて合成することで描画画像を作成する。 ステップ S 5 5において、 描画画像作成部 2 5は、 ステップ S 5 4で作成された描画画像を 描画画像記憶部 3 5に記憶する。  In step S54, the drawn image creating unit 25 reads the synthesized image from the synthesized image storage unit 34, reads the third clothing image from the clothing image storage unit 32, and reads the third clothing image from the synthesized image storage unit 34. The drawing image is created by superimposing the third clothing image read from the clothing image storage unit 32 on the read composite image and combining the third clothing image. In step S55, the drawing image creation unit 25 stores the drawing image created in step S54 in the drawing image storage unit 35.
ステップ S 5 6において、 表示制御部 2 6は、 描画画像記憶部 3 5から描画画像 を読み出し、 描画画像記憶部 3 5から読み出された描画画像を表示部 4 0に出力す る。 表示部 4 0は、 表示制御部 2 6から出力された描画画像を表示する。 したがつ て、 人体画像に第 1の衣服画像と第 2の衣服画像とを重ね合わせた合成画像を、 人 体画像と第 3の衣服画像とから作成されたマスク画像を用いてマスキングすること によって、 第 3の衣服からはみ出した第 2の衣服が除去され、 違和感なく試着状態 を表示することができるようになる。 In step S56, the display control unit 26 reads the drawn image from the drawn image storage unit 35, and outputs the drawn image read from the drawn image storage unit 35 to the display unit 40. The display unit 40 displays the drawing image output from the display control unit 26. Therefore, masking a composite image obtained by superimposing the first clothing image and the second clothing image on the human body image using a mask image created from the human body image and the third clothing image. As a result, the second garment protruding from the third garment is removed, and the fitting state can be displayed without feeling uncomfortable.
このように、 第 2の衣服画像 J Kのさらに上に第 3の衣服画像 C Tが仮想的に試 着される場合、 複数種類の第 3の衣服画像の重なり領域の論理積を求めることによ つて作成された画像と、 人体画像 M Gとの重なり領域の論理和を求めることによつ てマスク画像 MA S K_ Jが作成され、 第 2の衣服画像 J Kを人体画像 M Gに重ね 合わせた画像に対してマスク画像 M A S K— Jが用いられてマスキングされ、 マス キングされた画像と 1の第 3の衣服画像 C Tとを重ね合わせた合成画像が作成され 、 作成された合成画像が表示される。 したがって、 複数種類の第 3の衣服画像を全 て含むとともに、 人体画像 MGを含むマスク画像 MA S K— Jによって、 第 2の衣 服画像 J Kがマスキングされるので、 複数種類の第 3の衣服画像のうちの 1の第 3 の衣服画像 C Tを第 2の衣服画像 J Kと人体画像 M Gとに合成したとしても、 第 2 の衣服画像 J Kが第 3の衣服画像 C Tからはみ出すことなく表示することができる なお、 本実施形態において、 デジタルカメラ等で人物の顔画像を取り込んで予め 記憶しておき、 マネキンの顔部分に相当する領域に貼り付けて人体画像 M Gとして 用いてもよい。 つまり、 記憶部 3 0は、 あらかじめ撮影された人物の顔画像を記憶 し、 合成画像作成部 2 3は、 記憶部 3 0から読み出された第 1の衣服画像 T G, S G及び第 2の衣服画像 J Kを、 記憶部 3 0から読み出された人体画像 MGに重ね合 わせるとともに、 人体画像 MGの顔部分に相当する領域に記憶部 3 0から読み出さ れた顔画像を重ね合わせた合成画像を作成する。 この場合、 あらかじめ撮影された 人物の顔画像が人体画像の顔画像に重ね合わされた合成画像が作成されるため、 所 望の人物の顔画像を用いて仮想的な試着状態を確認することができる。  In this way, when the third clothing image CT is virtually tried on further than the second clothing image JK, the logical product of the overlapping regions of the plurality of types of third clothing images is obtained. The mask image MASK_J is created by calculating the logical sum of the created image and the overlapping area of the human body image MG, and the second clothing image JK is superimposed on the human body image MG. The mask image MASK-J is used for masking, a composite image is created by superimposing the masked image and the first third clothing image CT, and the generated composite image is displayed. Therefore, the second clothing image JK is masked by the mask image MA SK—J including the human body image MG while including all of the multiple types of third clothing images. Even if the third clothing image CT of one of them is combined with the second clothing image JK and the human body image MG, the second clothing image JK can be displayed without protruding from the third clothing image CT. In the present embodiment, a face image of a person may be captured by a digital camera or the like, stored in advance, and pasted to a region corresponding to the face portion of the mannequin to be used as the human body image MG. That is, the storage unit 30 stores the face image of the person photographed in advance, and the composite image creation unit 23 stores the first clothing image TG, SG and the second clothing image read from the storage unit 30. The image JK is superimposed on the human body image MG read from the storage unit 30, and the composite image obtained by superimposing the face image read from the storage unit 30 on an area corresponding to the face portion of the human body image MG. Create In this case, since a composite image is created by superimposing a face image of a person taken in advance on a face image of a human body image, a virtual fitting state can be confirmed using the face image of the desired person. .
本実施形態では、 被試着対象物として人体を用いて説明したが、 本発明は特にこ れに限定されず、 例えば犬、 猫等の動物であってもよく、 また、 アニメーション等 の架空のキャラクタであってもよい。  Although the present embodiment has been described using a human body as an object to be tried on, the present invention is not particularly limited thereto. For example, an animal such as a dog or a cat may be used, or a fictional character such as an animation. It may be.
本発明は詳細に説明されたが、 上記した説明は、 全ての局面において、 例示であ つて、 本発明がそれに限定されるものではない。 例示されていない無数の変形例が、 この発明の範囲から外れることなく想定され得るものと解される。 産業上の利用可能性 Although the present invention has been described in detail, the above description is illustrative in all aspects and the present invention is not limited thereto. It is understood that innumerable modifications that are not illustrated can be assumed without departing from the scope of the present invention. Industrial applicability
本発明に係る仮想試着表示装置、 仮想試着表示方法、 仮想試着表示プログラム及 び同プログラムを記録したコンピュータ読み取り可能な記録媒体は 人体を表す人 体画像に複数の衣服を表す衣服画像を重ね合わせた場合の仮想的な試着状態を違和 感なく表示することができ、 人体画像に衣服画像を合成することによつて仮想的な 試着状態を表示する仮想試着表示装置、 仮想試着表示方法、 仮想試着表示プロダラ ム及び同プ口グラムを記録したコンピュータ読み取り可能な記録媒体等として有用 である。  A virtual fitting display device, a virtual fitting display method, a virtual fitting display program, and a computer-readable recording medium storing the program according to the present invention are obtained by superimposing a clothing image representing a plurality of clothes on a human body image representing a human body. A virtual fitting display device, a virtual fitting display method, and a virtual fitting display that display a virtual fitting state by combining a clothing image with a human body image. It is useful as a computer-readable recording medium that stores programs and programs.

Claims

請 求 の 範 囲 The scope of the claims
1 . 2次元の人体画像に 2次元の衣服画像を合成することによって仮想的な試 着状態を表示する仮想試着表示装置であつて.、 1. A virtual fitting display device that displays a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image.
前記衣服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画 像と、 前記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを 含み、  The clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a two-dimensional second clothing virtually trying on the first clothing image. Images and
前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する記憶手段と、 前記記憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された 第 2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み出された 前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によって作成 されたマスク画像を用いてマスキングするマスキング手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means. Mask image creating means for creating a mask image in which the first clothing image read from the storage means is overlapped with the human body image read from the storage means; Masking means for masking using the mask image created by the mask image creating means;
前記マスキング手段によってマスキングされた画像と、 前記記憶手段から読み出 された第 2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、 前記描画画像作成手段によつて作成された描画画像を表示する画像表示手段とを 備えることを特徴とする仮想試着表示装置。  A drawing image creation unit that creates a drawing image in which the image masked by the masking unit and the second clothing image read from the storage unit are superimposed; and a drawing image creation unit that creates the drawing image. A virtual fitting display device comprising: an image display means for displaying a drawn image.
2 . 前記記憶手段は、 複数種類の第 2の衣服画像を記憶し、  2. The storage means stores a plurality of types of second clothing images,
前記マスク画像作成手段は、 複数種類の第 2の衣服画像の重なり領^の論理積を 求めることによって作成された画像と、 前記人体画像との重なり領域の論理和を求 めることによってマスク画像を作成し、  The mask image creating means calculates a logical sum of an overlapping area of the overlapping area ^ of the plurality of types of second clothing images and an overlapping area of the human body image to obtain a mask image. To create
前記マスキング手段は、 前記記憶手段から読み出された第 1の衣服画像を前記記 憶手段から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画 像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is formed by the mask image forming means on an image obtained by superimposing the first clothing image read from the storage means on the human body image read from the storage means. Mask using the mask image,
前記描画画像作成手段は、 前記マスキング手段によってマスキングされた画像と 、 前記記憶手段から読み出された 1の第 2の衣服画像とを重ね合わせた描画画像を 作成し、  The drawing image creating means creates a drawing image in which the image masked by the masking means and the first second clothing image read from the storage means are superimposed,
前記画像表示手段は、 前記描画画像作成手段によって作成された描画画像を表示 することを特徴とする請求項 1記載の仮想試着表示装置。 2. The virtual fitting display device according to claim 1, wherein the image display means displays the drawn image created by the drawn image creating means.
3 . 前記衣服画像は、 前記第 2の衣服画像のさらに上に仮想的に試着される 2 次元の第 3の衣服画像を含み、 3. The clothing image includes a two-dimensional third clothing image virtually tried on further than the second clothing image,
前記記憶手段は、 複数種類の第 3の衣服画像を記憶し、  The storage means stores a plurality of types of third clothing images,
前記マスク画像作成手段は、 複数種類の第 3の衣服画像の重なり領域の論理積を 求めることによつて作成された画像と、 前記人体画像との重なり領域の論理和を求 めることによってマスク画像を作成し、  The mask image creating means may be configured to obtain a logical sum of an image created by obtaining a logical product of overlapping regions of a plurality of types of third clothing images and an overlapping region of the human body image, thereby obtaining a mask. Create an image,
前記マスキング手段は、 前記記憶手段から読み出された第 2の衣服画像を前記記 憶手段から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画 像作成手段によって作成されたマスク画像を用いてマスキングし、  The masking means is created by the mask image creating means on an image obtained by superimposing the second clothing image read from the storage means on the human body image read from the storage means. Mask using the mask image,
前記描画画像作成手段は、 前記マスキング手段によってマスキングされた画像と 、 前記記憶手段から読み出された第 3の衣服画像とを重ね合わせた描画画像を作成 し、  The drawing image creating means creates a drawing image in which an image masked by the masking means and a third clothing image read from the storage means are superimposed,
前記画像表示手段は、 前記描画画像作成手段によつて作成された描画画像を表示 することを特徴とする請求項 1記載の仮想試着表示装置。  2. The virtual fitting display device according to claim 1, wherein the image display means displays the drawn image created by the drawn image creating means.
4. 前記記憶手段は、 人体を中心点とする円の当該中心点を基準とする所定の 角度ずつに均等に分割する線と、 当該円の円弧とが交わる点を視点とする複数の視 点から撮影された複数の前記人体画像、 前記第 1の衣服画像及び前記第 2の衣服画 像を記憶しており、  4. The storage means comprises: a plurality of viewpoints each having a point of intersection of a line dividing a circle centered on a human body at a predetermined angle based on the center point and an arc of the circle as a viewpoint. A plurality of the human body images, the first clothing image and the second clothing image taken from
前記マスク画像作成手段は、 前記記憶手段から読み出された特定の視点から見た 前記人体画像と、 前記記憶手段から読み出された前記人体画像と同一の視点から見 た第 2の衣服画像とを重ね合わせたマスク画像を作成し、  The mask image creating means includes: the human body image read from the specific viewpoint read from the storage means; and a second clothing image viewed from the same viewpoint as the human body image read from the storage means. To create a mask image with
前記マスキング手段は、 前記記憶手段から読み出された前記人体画像と同一の視 点から見た第 1の衣服画像を、 前記記憶手段から読み出された前記人体画像に重ね 合わせた画像に対して、 前記マスク画像作成手段によって作成されたマスク画像を 用いてマスキングし、  The masking unit is configured to superimpose a first clothing image viewed from the same viewpoint as the human body image read from the storage unit on the human body image read from the storage unit. Masking using the mask image created by the mask image creating means,
前記描画画像作成手段は、 前記マスキング手段によってマスキングされた画像と 、 前記記憶手段から読み出された前記人体画像と同一の視点から見た第 2の衣服画 像とを重ね合わせた描画画像を作成し、  The drawing image creating means creates a drawing image in which an image masked by the masking means and a second clothing image viewed from the same viewpoint as the human body image read from the storage means are superimposed. And
前記画像表示手段は、 前記描画画像作成手段によって作成された描画画像を表示 することを特徴とする請求項 1記載の仮想試着表示装置。 The image display means displays a drawing image created by the drawing image creation means. 3. The virtual fitting display device according to claim 1, wherein:
5 . 前記マスク画像作成手段によって作成されたマスク画像の前記第 1の衣服 画像の外形形状に応じた修正を受け付けるマスク画像修正受付手段をさらに備え、 前記マスキング手段は、 前記記憶手段から読み出された第 1の衣服画像を前記記 憶手段から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画 像修正受付手段によって修正されたマスク画像を用いてマスキングすることを特徵 とする請求項 1記載の仮想試着表示装置。  5. The apparatus further includes a mask image correction accepting unit that accepts a modification of the mask image created by the mask image creating unit according to the outer shape of the first clothing image, wherein the masking unit is read from the storage unit. Masking an image obtained by superimposing the first clothing image on the human body image read from the storage means using the mask image corrected by the mask image correction receiving means. The virtual fitting display device according to claim 1.
6 . 2次元の人体画像に 2次元の衣服画像を合成することによつて仮想的な試 着状態を表示する仮想試着表示方法であつて、  6. A virtual fitting display method for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image,
前記衣服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画 像と、 前記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを 含み、  The clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a two-dimensional second clothing virtually trying on the first clothing image. Images and
コンピュータが、 前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶す る記憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された第 2 の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成ステツプと、 コンピュ一夕が、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段 から読み出された前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成 ステップにおいて作成されたマスク画像を用いてマスキングするマスキングステツ プと、  A computer configured to store the human body image read from the storage unit that stores the human body image, the first clothing image, and the second clothing image; and a second clothing image read from the storage unit. A mask image creation step of creating a mask image that is superimposed; and a computer, wherein the first clothing image read from the storage means is superimposed on the human body image read from the storage means. A masking step for masking using the mask image created in the mask image creating step;
コンピュータが、 前記マスキングステップにおいてマスキングされた画像と、 前 記記憶手段から読み出された第 2の衣服画像とを重ね合わせた描画画像を作成する 描画画像作成ステップと、  A computer generating a drawing image in which the image masked in the masking step is superimposed on the second clothing image read from the storage means;
コンピュータが、 前記描画画像作成ステップにおいて作成された描画画像を表示 する画 it¾示ステツプとを含むことを特徴とする仮想試着表示方法。  A virtual fitting display method, wherein the computer includes an image displaying step for displaying the drawn image created in the drawn image creating step.
7 . 2次元の人体画像に 2次元の衣服画像を合成することによって仮想的な試 着状態を表示するための仮想試着表示プログラムであって、  7. A virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional human body image with a two-dimensional clothing image,
前記衣服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画 像と、 前記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを 含み、 前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する記憶手段と、 前記記憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された 第 2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み出された 前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によって作成 されたマスク画像を用いてマスキングするマスキング手段と、 The clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a two-dimensional second clothing virtually trying on the first clothing image. Images and Storage means for storing the human body image, the first clothing image and the second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means. Mask image creating means for creating a mask image in which the first clothing image read from the storage means is overlapped with the human body image read from the storage means; Masking means for masking using the mask image created by the mask image creating means;
前記マスキング手段によってマスキングされた画像と、 前記記憶手段から読み出 された第 2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、 前記描画画像作成手段によつて作成された描画画像を表示する画像表示手段とし てコンピュータを機能させることを特徵とする伋想試着表示プログラム。  A drawing image creation unit that creates a drawing image in which the image masked by the masking unit and the second clothing image read from the storage unit are superimposed; and a drawing image creation unit that creates the drawing image. A conceptual fitting display program that causes a computer to function as image display means for displaying a drawn image.
8 . 2次元の人体画像に 2次元の衣服画像を合成することによつて仮想的な試 着状態を表示するための仮想試着表示プログラムを記録したコンピュータ読み取り 可能な記録媒体であって、  8. A computer-readable recording medium recording a virtual fitting display program for displaying a virtual fitting state by combining a two-dimensional clothing image with a two-dimensional clothing image,
前記衣服画像は、 前記人体画像の上に仮想的に試着される 2次元の第 1の衣服画 像と、 前記第 1の衣服画像の上に仮想的に試着される 2次元の第 2の衣服画像とを 含み、  The clothing image is a two-dimensional first clothing image virtually tried on on the human body image, and a two-dimensional second clothing virtually trying on the first clothing image. Images and
前記人体画像、 第 1の衣服画像及び第 2の衣服服画像を記憶する記憶手段と、 前記記憶手段から読み出された前記人体画像と、 前記記憶手段から読み出された 第 2の衣服画像とを重ね合わせたマスク画像を作成するマスク画像作成手段と、 前記記憶手段から読み出された第 1の衣服画像を前記記憶手段から読み出された 前記人体画像に重ね合わせた画像に対して、 前記マスク画像作成手段によって作成 されたマスク画像を用いてマスキングするマスキング手段と、  Storage means for storing the human body image, the first clothing image and the second clothing image; the human body image read from the storage means; and a second clothing image read from the storage means. Mask image creating means for creating a mask image in which the first clothing image read from the storage means is overlapped with the human body image read from the storage means; Masking means for masking using the mask image created by the mask image creating means;
前記マスキング手段によってマスキングされた画像と、 前記記憶手段から読み出 された第 2の衣服画像とを重ね合わせた描画画像を作成する描画画像作成手段と、 前記描画画像作成手段によって作成された描画画像を表示する画像表示手段とし てコンピュータを機能させることを特徴とする仮想試着表示プログラムを記録した コンピュータ読み取り可能な記録 ¾莱体。  A drawing image creating means for creating a drawing image in which the image masked by the masking means and the second clothing image read from the storage means are superimposed; a drawing image created by the drawing image creating means A computer-readable recording medium storing a virtual fitting display program, wherein the computer functions as an image display means for displaying an image.
PCT/JP2004/002644 2003-03-07 2004-03-03 Virtual try-on display apparatus, virtual try-on display method, virtual try-on display program, and computer readable recording medium in which that program has been recorded WO2004079652A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003061447A JP3742394B2 (en) 2003-03-07 2003-03-07 Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program
JP2003-061447 2003-03-07

Publications (1)

Publication Number Publication Date
WO2004079652A1 true WO2004079652A1 (en) 2004-09-16

Family

ID=32958959

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2004/002644 WO2004079652A1 (en) 2003-03-07 2004-03-03 Virtual try-on display apparatus, virtual try-on display method, virtual try-on display program, and computer readable recording medium in which that program has been recorded

Country Status (2)

Country Link
JP (1) JP3742394B2 (en)
WO (1) WO2004079652A1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366401A (en) * 2013-08-05 2013-10-23 上海趣搭网络科技有限公司 Quick display method for multi-level virtual clothes fitting
CN105096246A (en) * 2014-05-08 2015-11-25 腾讯科技(深圳)有限公司 Image synthesis method and system
WO2016086479A1 (en) * 2014-12-03 2016-06-09 浩云星空信息技术(北京)有限公司 Image processing method and device
US10521429B2 (en) 2015-06-09 2019-12-31 Microsoft Technology Licensing, Llc. Interactive graphical system for estimating body measurements
CN112242007A (en) * 2020-10-12 2021-01-19 新疆爱华盈通信息技术有限公司 Virtual fitting method

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5002795B2 (en) * 2007-02-28 2012-08-15 株式会社カプコン Program, image composition device, and virtual society construction device
JP2011129001A (en) * 2009-12-19 2011-06-30 Cocone Corp Avatar in virtual space and avatar creation system
JP5722603B2 (en) * 2010-12-03 2015-05-20 新日鉄住金ソリューションズ株式会社 Augmented reality presentation device, augmented reality presentation method and program
JP5786463B2 (en) 2011-06-01 2015-09-30 ソニー株式会社 Image processing apparatus, image processing method, and program
CN102982581B (en) * 2011-09-05 2017-04-05 北京三星通信技术研究有限公司 System for virtually trying and method based on image
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
US9483853B2 (en) * 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US20130314401A1 (en) 2012-05-23 2013-11-28 1-800 Contacts, Inc. Systems and methods for generating a 3-d model of a user for a virtual try-on product
JP6002058B2 (en) * 2013-02-22 2016-10-05 株式会社東芝 Image processing apparatus, method, and program
CN103324860A (en) * 2013-07-08 2013-09-25 刘优然 Intelligent integrated costume designing and fitting system
JP6352044B2 (en) * 2014-05-09 2018-07-04 セーレン株式会社 Layered image processing apparatus and method
JP2014179135A (en) * 2014-07-01 2014-09-25 Toshiba Corp Image processing system, method and program
JP6262105B2 (en) * 2014-09-04 2018-01-17 株式会社東芝 Image processing apparatus, image processing system, image processing method, and program
JP6008025B2 (en) * 2015-07-16 2016-10-19 ソニー株式会社 Image processing apparatus, image processing method, and program
KR102044348B1 (en) * 2017-11-09 2019-11-13 (주)코아시아 Apparatus system for virtual fitting cloth based on augmented reality
JP6631988B1 (en) * 2018-07-02 2020-01-15 株式会社ブルームスキーム Virtual fitting device, virtual fitting method, and virtual fitting program
JPWO2020230748A1 (en) 2019-05-11 2021-09-27 株式会社キテミル Image generators, methods, programs, and virtual fitting systems
JP7094342B2 (en) * 2020-10-22 2022-07-01 株式会社サイバーエージェント Image generation program, image generation device and image generation method
CN112258389B (en) * 2020-12-23 2021-11-02 北京沃东天骏信息技术有限公司 Virtual reloading method and related equipment

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102033A (en) * 1995-08-03 1997-04-15 Sanyo Electric Co Ltd Picture synthesis method
JP2001273410A (en) * 2000-08-28 2001-10-05 Taro Sato System and method for simulating fitting
JP2003263632A (en) * 2002-03-11 2003-09-19 Digital Fashion Ltd Virtual trying-on display device, virtual trying-on display method, virtual trying-on display program and computer-readable recording medium with its program recorded

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102033A (en) * 1995-08-03 1997-04-15 Sanyo Electric Co Ltd Picture synthesis method
JP2001273410A (en) * 2000-08-28 2001-10-05 Taro Sato System and method for simulating fitting
JP2003263632A (en) * 2002-03-11 2003-09-19 Digital Fashion Ltd Virtual trying-on display device, virtual trying-on display method, virtual trying-on display program and computer-readable recording medium with its program recorded

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ENDO ETSURO: "Adobe photoshop A to Z, Adobe photoshop nihongoban A to Z", 15 February 1993, 1ST EDITION KABUSHIKI KAISHA BNN, TOKYO-TO CHIYODA-KU KOJIMACHI 2-12 MITSURI KOJIMACHI BIRU 2F, ISBN: 4-89369-187-2, pages: 90 - 91, XP002986857 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366401A (en) * 2013-08-05 2013-10-23 上海趣搭网络科技有限公司 Quick display method for multi-level virtual clothes fitting
CN103366401B (en) * 2013-08-05 2016-08-17 上海趣搭网络科技有限公司 Quick display method for multi-level virtual clothes fitting
CN105096246A (en) * 2014-05-08 2015-11-25 腾讯科技(深圳)有限公司 Image synthesis method and system
CN105096246B (en) * 2014-05-08 2019-09-17 腾讯科技(深圳)有限公司 Image composition method and system
WO2016086479A1 (en) * 2014-12-03 2016-06-09 浩云星空信息技术(北京)有限公司 Image processing method and device
US10521429B2 (en) 2015-06-09 2019-12-31 Microsoft Technology Licensing, Llc. Interactive graphical system for estimating body measurements
CN112242007A (en) * 2020-10-12 2021-01-19 新疆爱华盈通信息技术有限公司 Virtual fitting method

Also Published As

Publication number Publication date
JP2004272530A (en) 2004-09-30
JP3742394B2 (en) 2006-02-01

Similar Documents

Publication Publication Date Title
JP3742394B2 (en) Virtual try-on display device, virtual try-on display method, virtual try-on display program, and computer-readable recording medium storing the program
JP4950834B2 (en) Image processing apparatus and image processing method
JP3725460B2 (en) Image processing apparatus, image processing method, recording medium, computer program, semiconductor device
JP3314704B2 (en) Method of synthesizing image showing fitting state and virtual fitting system using the method
JPWO2016151691A1 (en) Image processing apparatus, image processing system, image processing method, and program
JP2009211513A (en) Image processing apparatus and method therefor
KR101586010B1 (en) Apparatus and method for physical simulation of cloth for virtual fitting based on augmented reality
JPH10240908A (en) Video composing method
JP4189339B2 (en) Three-dimensional model generation method, generation apparatus, program, and recording medium
JPH09102033A (en) Picture synthesis method
JP2003263632A (en) Virtual trying-on display device, virtual trying-on display method, virtual trying-on display program and computer-readable recording medium with its program recorded
JP6501684B2 (en) Design equipment for apparel products
JP2007102478A (en) Image processor, image processing method, and semiconductor integrated circuit
JP2012120080A (en) Stereoscopic photography apparatus
JPH11328443A (en) System and method for generating three-dimensional panorama image and recording media therefor
JP4366165B2 (en) Image display apparatus and method, and storage medium
JP2002092626A (en) Image processor
JP2013084171A (en) Try-on image creation system and clothes image data
JP2004072677A (en) Device, method and program for compositing image and recording medium recording the program
JP2739447B2 (en) 3D image generator capable of expressing wrinkles
JPH11205585A (en) Production of private catalog and production system
JP6545847B2 (en) Image processing apparatus, image processing method and program
WO2024009721A1 (en) Image processing device, and image processing method
JPH05233781A (en) Stereo model preparation system utilizing moving image
JP2002056405A (en) Texture mapping processor

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
122 Ep: pct application non-entry in european phase