KR20070050284A - Construction method of database for vision-based recognition and evaluation method of vision-based recognition device - Google Patents
Construction method of database for vision-based recognition and evaluation method of vision-based recognition device Download PDFInfo
- Publication number
- KR20070050284A KR20070050284A KR1020050107670A KR20050107670A KR20070050284A KR 20070050284 A KR20070050284 A KR 20070050284A KR 1020050107670 A KR1020050107670 A KR 1020050107670A KR 20050107670 A KR20050107670 A KR 20050107670A KR 20070050284 A KR20070050284 A KR 20070050284A
- Authority
- KR
- South Korea
- Prior art keywords
- clothes
- vision
- database
- image data
- image
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/40—Data acquisition and logging
Abstract
본 발명은 비젼기반 인식을 위한 데이터베이스를 구축하는 방법과 비젼기반 인식기의 성능을 평가하는 방법에 관한 것이다. 보다 상세하게는 본 발명의 비젼기반 인식을 위한 데이터베이스를 구축하는 방법은 색상 또는 텍스처가 다른 옷의 영상 데이터를 서로 다른 조명에 대해 획득함으로써 비젼기반 인식을 위한 옷 영상의 데이터베이스를 구축하고, 비젼기반 인식기의 성능을 평가하는 방법은 비젼기반 인식기에 의해 획득된 옷의 영상정보를 구축된 옷 영상의 데이터베이스의 데이터와 비교함으로써 상기 비젼기반 인식기의 성능을 평가한다. 특히 비젼기반 인식기의 성능을 평가하는 방법에서는 상기 데이터베이스의 데이터를 이용해 인식성공률과 오인, 오판정수를 구함으로써 객관적인 성능 평가가 가능하다. The present invention relates to a method for constructing a database for vision-based recognition and a method for evaluating the performance of a vision-based recognizer. More specifically, the method for constructing a database for vision-based recognition according to the present invention constructs a database of clothes images for vision-based recognition by acquiring image data of clothes of different colors or textures for different lighting, The method of evaluating the performance of the recognizer evaluates the performance of the vision-based recognizer by comparing the image information of the clothes acquired by the vision-based recognizer with the data of the database of the constructed clothes image. In particular, in the method for evaluating the performance of a vision-based recognizer, an objective performance evaluation is possible by obtaining recognition success rates, misinterpretations, and misjudgment coefficients using the data of the database.
비젼기반 인식, 데이터베이스 구축, 성능평가 Vision based recognition, database construction, performance evaluation
Description
도 1a 및 도 1b는 특정의 색상과 텍스처를 갖는 옷에 대해 서로 다른 조명을 비추어 획득한 영상 데이터의 일 예를 나타낸 것이다. 1A and 1B illustrate an example of image data obtained by illuminating different lights on clothes having a specific color and texture.
도 2는 본 발명의 옷 영상의 데이터베이스 구축방법의 일 실시예에서 사용되는 조명의 스펙트럼 특성을 나타낸 것이다. Figure 2 shows the spectral characteristics of the illumination used in one embodiment of a method for building a database of clothes image of the present invention.
도 3은 본 발명의 비젼기반 인식기의 성능평가 방법의 일 실시예가 수행되는 과정을 나타낸 순서도이다. 3 is a flowchart illustrating a process of performing an embodiment of the performance evaluation method of the vision-based recognizer of the present invention.
도 4는 본 발명의 비젼기반 인식기의 성능평가 방법의 일 실시예에 의한 성능평가 결과의 일 예를 나타낸 것이다. Figure 4 shows an example of the performance evaluation results according to an embodiment of the performance evaluation method of the vision-based recognizer of the present invention.
본 발명은 비젼기반 인식을 위한 데이터베이스를 구축하는 방법과 비젼기반 인식기의 성능을 평가하는 방법에 관한 것으로, 보다 상세하게는 본 발명의 비젼기반 인식을 위한 데이터베이스를 구축하는 방법은 색상 또는 텍스처가 다른 옷의 영상 데이터를 서로 다른 조명에 대해 획득함으로써 비젼기반 인식을 위한 옷 영상의 데이터베이스를 구축하고, 비젼기반 인식기의 성능을 평가하는 방법은 비젼기반 인식기에 의해 획득된 옷의 영상정보를 구축된 옷 영상의 데이터베이스의 데이터와 비교함으로써 상기 비젼기반 인식기의 성능을 평가한다. The present invention relates to a method for constructing a database for vision-based recognition and a method for evaluating the performance of a vision-based recognizer. More specifically, the method for constructing a database for vision-based recognition of the present invention is different in color or texture. A method of constructing a database of clothes images for vision-based recognition by acquiring image data of clothes for different lightings, and evaluating the performance of the vision-based recognizer is a method in which image information of clothes acquired by the vision-based recognizer is constructed. The performance of the vision-based recognizer is evaluated by comparing it with data from a database of images.
지능형 서비스 로봇 등의 로봇장치나 감시카메라 등은 영상정보를 획득하여 상기 영상에서 사람 또는 사물을 인식한다. 특히 영상에서 사람을 찾고 추적하는 영상인식 방법 및 시스템의 개발이 활발히 이루어지고 있다. A robotic device such as an intelligent service robot or a surveillance camera acquires image information to recognize a person or an object in the image. In particular, the development of image recognition methods and systems for finding and tracking people in the image is actively being made.
사람을 인식하고 추적하기 위해서는 사람의 얼굴, 걸음새, 키 등의 정보가 사용되며, 특히 사람의 옷은 색과 모양에서 정형화가 가능한 특징이 있고, 획득된 영상으로부터 인식해내기도 쉬워 사람의 인식 및 추적에 유용하게 사용될 수 있다. In order to recognize and track a person, information such as a person's face, gait, height, etc. is used, and in particular, a person's clothes have a characteristic that can be formalized in color and shape, and it is easy to recognize from an acquired image. This can be useful for tracking.
이와 같은 이유로 최근 사람의 인식 및 추적을 위해서 옷의 영상정보를 이용하는 다양한 방법들이 제안되고 있다. 그러나 상기 여러 제안된 방법들은 옷의 영상정보를 이용하여 사람을 인식하는 성능을 객관적으로 평가하는 공통의 기준이 없어 그 성능을 비교하기가 어렵다. For this reason, various methods of using image information of clothes for the recognition and tracking of people have recently been proposed. However, the proposed methods do not have a common criterion for objectively evaluating the performance of recognizing a person using image information of clothes.
따라서 옷의 영상정보를 이용하여 사람을 인식하는 방법들의 성능을 객관적으로 비교할 수 있는 기준 또는 방법이 필요하다. Therefore, there is a need for a standard or method for objectively comparing the performance of methods of recognizing a person using image information of clothes.
본 발명의 목적은 옷의 영상정보를 이용하는 비젼기반 인식방법 및 비젼기반 인식기의 성능을 비교하는 방법에 이용될 수 있도록, 옷의 영상정보를 데이터베이스로 구축하는 방법을 제공하는 데 있다. It is an object of the present invention to provide a method of constructing image information of clothes into a database so that it can be used in a vision-based recognition method using image information of clothes and a method for comparing the performance of vision-based recognizers.
본 발명의 다른 목적은 옷의 영상정보를 이용하는 비젼기반 인식방법 및 비젼기반 인식기의 성능을 객관적인 기준에 따라 평가할 수 있는 방법을 제공하는 데 있다. Another object of the present invention is to provide a vision-based recognition method using image information of clothes and a method for evaluating the performance of the vision-based recognizer according to an objective criterion.
본 발명의 비젼(vision)기반 인식을 위한 옷 영상의 데이터베이스 구축 방법은 적어도 하나 이상의 색상 또는 텍스처가 서로 다른 옷에 대한 영상 데이터를 획득하여 저장하는 단계를 포함하며, 상기 각각의 옷에 대한 영상 데이터는 옷에 비추어지는 적어도 하나 이상의 서로 다른 조명 각각에 대해 획득되는 영상 데이터로 구성되는 것을 특징으로 한다. A method of constructing a database of clothes images for vision-based recognition according to the present invention includes obtaining and storing image data of clothes having at least one color or texture different from each other, and image data of each clothes. Is composed of image data obtained for each of at least one or more different lights shining on the clothes.
본 발명에서, 상기 각각의 옷에 대한 영상 데이터는 옷에 비추어지는 적어도 하나 이상의 서로 밝기 또는 스펙트럼 특성이 서로 다른 조명 각각에 대해 획득되는 영상 데이터로 구성되는 것이 바람직하다. In the present invention, the image data for each of the clothes is preferably composed of the image data obtained for each of the illumination at least one or more different brightness or spectral characteristics of the clothes reflected on the clothes.
본 발명의 비젼기반 인식기의 성능평가 방법은 적어도 하나 이상의 색상 또는 텍스처가 서로 다른 옷에 대한 영상 데이터를 획득하여 비젼기반 인식을 위한 옷 영상의 데이터베이스를 구축하는 단계; 비젼기반 인식기를 이용해 상기 옷 영상 의 데이터베이스에 영상 데이터가 저장되는 옷 중의 하나와 색상 및 텍스처가 같은 옷에 대해 영상정보를 획득하는 단계; 및 상기 비젼기반 인식기에 의해 획득된 영상정보와 상기 옷 영상의 데이터베이스의 영상 데이터를 비교하여 서로 같은 옷에 대한 영상인지 여부를 판정하는 단계를 포함한다. The performance evaluation method of the vision-based recognizer of the present invention comprises the steps of constructing a database of clothes images for vision-based recognition by acquiring image data for clothes having at least one color or texture different from each other; Acquiring image information about clothes having the same color and texture as one of clothes in which image data is stored in a database of clothes images using a vision-based recognizer; And comparing the image information acquired by the vision-based recognizer with the image data of the database of the garment image to determine whether the images are for the same garment.
본 발명에서, 상기 옷 영상의 데이터베이스를 구축하는 단계는 상기 각각의 옷에 대한 영상의 데이터베이스가 옷에 비추어지는 하나 이상의 서로 다른 조명, 특히 밝기 또는 스펙트럼 특성이 서로 다른 조명 각각에 대해 획득되는 영상 데이터로 구성되는 것이 바람직하다. In the present invention, the step of constructing a database of clothes images comprises image data obtained for each of one or more different lights, in particular brightness or spectral characteristics of which the database of images for each clothes is illuminated on the clothes. It is preferable that it consists of.
본 발명에서, 상기 비젼기반 인식기에 의해 획득된 영상정보와 옷 영상의 데이터베이스의 데이터를 비교하여 서로 같은 옷에 대한 영상인지 여부를 판정하는 단계는 상기 비젼기반 인식기에 의해 영상정보가 획득된 옷과 색상 및 텍스처가 같은 옷에 대한 영상 데이터 중에서 상기 비젼기반 인식기에 의해 획득된 영상정보와 같은 옷에 대한 것으로 판정되는 영상 데이터의 비(detection rate)를 측정하거나 또는 상기 비젼기반 인식기에 의해 영상정보가 획득된 옷과 색상 또는 텍스처가 다른 옷에 대한 영상 데이터 중에서 상기 비젼기반 인식기에 의해 획득된 영상정보와 같은 옷에 대한 것으로 판정되는 데이터의 수(false positive)를 측정하는 것이 바람직하다. In the present invention, the step of comparing the image information obtained by the vision-based recognizer and the data of the database of the clothes image to determine whether the image is the same for each other clothes and the image information obtained by the vision-based recognizer and Among the image data for clothes having the same color and texture, the detection rate of the image data determined to be for the same clothes as the image information obtained by the vision-based recognizer is measured or the image information is measured by the vision-based recognizer. It is preferable to measure the number of false positives among the image data for the clothes having different colors or textures from the acquired clothes, for the same clothes as the image information obtained by the vision-based recognizer.
이하, 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명하기로 한다. 하기의 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 한해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하며, 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 공지 기능 및 구성에 대한 상세한 설명은 생략한다. Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings. In adding reference numerals to components of the following drawings, it is determined that the same components have the same reference numerals as much as possible even if displayed on different drawings, and it is determined that they may unnecessarily obscure the subject matter of the present invention. Detailed descriptions of well-known functions and configurations will be omitted.
비젼(vision)기반 인식은 영상의 인식을 통해 사람 또는 사물과의 거리 또는 위치를 파악하는 것으로, 비젼기반 인식을 수행하는 인식기는 지능형 서비스 로봇 또는 감시카메라 등 다양한 장치에 영상 인식 수단으로서 구비되어 있다. Vision-based recognition identifies distances or locations from people or objects through image recognition, and a recognizer that performs vision-based recognition is provided as an image recognition means in various devices such as intelligent service robots or surveillance cameras. .
본 발명에서 비젼기반 인식은 옷에 대한 영상정보를 이용하여 이루어지는 것으로, 특정한 색상과 텍스처(무늬)를 갖는 옷을 인식하여 그로부터 그 옷을 착의한 특정의 사람을 인식, 추적하는 것을 특징으로 한다. In the present invention, vision-based recognition is performed by using image information on clothes, and it is characterized by recognizing and tracking a specific person wearing the clothes therefrom by recognizing clothes having a specific color and texture (pattern).
상기 비젼기반 인식은 특정한 색상과 텍스처를 갖는 적어도 하나 이상의 옷에 대한 영상 데이터를 미리 데이터베이스로 구축하여 둔 후, 비젼기반 인식기에서 포착한 영상정보에서 옷의 영상정보를 획득하여, 상기 옷의 영상정보가 상기 데이터베이스에 데이터가 저장된 옷 가운데 어느 것에 해당되는지를 판별해냄으로써 이루어진다. In the vision-based recognition, image data of at least one or more clothes having a specific color and texture are previously built into a database, and then image information of the clothes is acquired from the image information captured by the vision-based recognizer, thereby obtaining the image information of the clothes. Is determined by which of the clothes the data is stored in the database.
따라서 비젼기반 인식을 위해서는 미리 적어도 하나 이상의 옷에 대한 영상 데이터를 획득하여 데이터베이스를 구축해놓을 필요가 있다. 상기 적어도 하나 이상의 옷에 대한 영상 데이터는 옷의 색상과 텍스처에 따라 달라지는 것으로, 상기 데이터베이스의 일 예에서 상기 색상에는 RGB 색공간에서 표현 가능한 모든 색상이 해당하고, 상기 텍스처에는 세로무늬, 가로무늬, 십자무늬, 민무늬 및 비정형의 기 타 무늬들이 해당한다. Therefore, for vision-based recognition, it is necessary to build a database by acquiring image data of at least one or more clothes in advance. The image data of the at least one clothes is different depending on the color and texture of the clothes. In the example of the database, the colors correspond to all colors that can be expressed in the RGB color space, and the textures include vertical patterns, horizontal patterns, These include crisscross, folk and atypical other patterns.
상기 옷에 대한 영상 데이터는 옷의 색상과 텍스처 외에도 옷에 비치어지는 조명에 따라서도 달라질 수 있으며, 본 발명은 상기 조명에 따라 영상 데이터가 달라지는 점을 고려하여 비젼기반 인식을 위한 옷 영상의 데이터베이스에 조명에 따른 영상 데이터의 변화도 고려하도록 한다. In addition to the color and texture of the clothes, the image data of the clothes may vary depending on the lighting reflected on the clothes, and the present invention provides a database of clothes images for vision-based recognition in consideration of the fact that the image data varies according to the lighting. Consider changes in image data due to lighting.
상기 비젼기반 인식을 위한 본 발명의 옷 영상의 데이터베이스 구축 방법은 적어도 하나 이상의 색상 또는 텍스처(무늬)가 서로 다른 옷에 대한 영상 데이터를 획득하여 저장함으로써 수행되며, 상기 각각의 옷에 대한 영상 데이터는 옷에 비추어지는 적어도 하나 이상의 서로 다른 조명 각각에 대해 획득되는 영상 데이터로 구성되는 것을 특징으로 한다. The method for constructing a database of clothes images according to the present invention for the vision-based recognition is performed by acquiring and storing image data of clothes having different colors or textures (patterns) from each other. And image data obtained for each of at least one or more different lights shining on the clothes.
특히, 상기 각각의 옷에 비추어지는 조명은 밝기 또는 스펙트럼 특성을 다른 것을 사용하여 옷에 대한 영상 데이터를 획득하는 것이 바람직하다. In particular, it is preferable that the illumination to each of the clothes acquires image data about the clothes using different brightness or spectral characteristics.
도 1a 및 도 1b는 특정의 색상과 텍스처를 갖는 옷에 대해 서로 다른 조명을 비추어 획득한 영상 데이터의 일 예를 나타낸 것이다. 1A and 1B illustrate an example of image data obtained by illuminating different lights on clothes having a specific color and texture.
도 1a은 특정한 색상과 텍스처를 갖는 옷에 밝기가 서로 다른 조명을 비추어 획득한 영상 데이터를 나타낸 것으로, 일반 실내 환경에서 조명의 밝기를 400~800lux의 범위로 변화시키는 경우의 영상 데이터이다. FIG. 1A illustrates image data obtained by illuminating clothes having specific colors and textures with different brightness, and is image data when the brightness of a light is changed in a range of 400 to 800 lux in a general indoor environment.
도 1b는 특정 물체에 스펙트럼 특성이 다른 조명을 비추었을 경우에 영상 데이터가 달라지는 모습을 나타낸 것이다. 조명의 스펙트럼 특성이 달라지면 조명에 의해 비추어지는 주된 색이 달라져 옷의 영상 데이터가 달라진다. FIG. 1B illustrates a case in which image data differs when a specific object is illuminated with different spectral characteristics. If the spectral characteristics of the lights are different, the main color shined by the lights is changed, so the image data of the clothes is changed.
상기 도 1b에서는 스펙트럼 특성이 다른 조명으로 Sylvania 50MR16Q(12VDC), Solux 3500K(12VDC), Solux 3500K(12VCD)+Roscolux3202, Sylvania Warm White Fluorescent(110VAC), Philips Ultralume Fluorescent(110VAC)의 조명을 사용한 경우의 영상 데이터의 변화를 나타내었으며, 상기 조명의 스펙트럼 특성은 도 2에 나타나 있다. In FIG. 1B, the light having different spectral characteristics is used when Sylvania 50MR16Q (12VDC), Solux 3500K (12VDC), Solux 3500K (12VCD) + Roscolux3202, Sylvania Warm White Fluorescent (110VAC), or Philips Ultralume Fluorescent (110VAC) are used. Changes in the image data are shown, and the spectral characteristics of the illumination are shown in FIG. 2.
도 3은 본 발명의 비젼기반 인식기의 성능평가 방법의 일 실시예가 수행되는 과정을 나타낸 순서도이다. 3 is a flowchart illustrating a process of performing an embodiment of the performance evaluation method of the vision-based recognizer of the present invention.
도 3에서 비젼기반 인식기의 성능평가 방법은 적어도 하나 이상의 옷에 대해서 영상 데이터를 획득하여 비젼기반 인식을 위한 옷 영상의 데이터베이스를 구축하고(S302), 비젼기반 인식기를 이용해 특정의 옷에 대해 영상정보를 획득하며(S303), 이어서 상기 비젼기반 인식기에 의해 획득된 영상정보와 상기 옷 영상의 데이터베이스의 영상 데이터를 비교하여 서로 같은 옷에 대한 영상인지 여부를 판정하는 단계(S304)를 거쳐서 수행된다. In FIG. 3, the performance evaluation method of the vision-based recognizer acquires image data for at least one or more clothes, constructs a database of clothes images for vision-based recognition (S302), and uses the vision-based recognizer to generate image information. (S303), and then comparing the image information obtained by the vision-based recognizer with the image data of the database of the image of the clothes to determine whether the image of the same clothes with each other (S304).
상기 옷 영상의 데이터베이스를 구축하는 단계(S302)에서는 적어도 하나 이상의 옷에 대해서 영상 데이터를 획득하여 저장한다. 상기 적어도 하나 이상의 옷은 각각 특정의 색상과 텍스처를 갖는 것이며, 각각의 옷에 대해서 적어도 하나 이상의 서로 다른 조명을 비추었을 때의 영상 데이터를 획득한다. 따라서 특정한 색 상과 텍스처를 갖는 옷에 대해서 조명 조건을 달리한 경우의 수만큼의 영상 데이터가 저장된다. 특히 상기 조명 조건을 달리하는 것은 조명의 밝기 또는 조명의 스펙트럼 특성을 달리하는 것이 바람직하다. In building a database of the clothes image (S302), image data is acquired and stored for at least one or more clothes. Each of the at least one garment has a specific color and texture, and acquires image data when at least one or more different lights are illuminated for each garment. Therefore, as much image data as the number of cases in which lighting conditions are changed for clothes having a specific color and texture are stored. In particular, it is preferable to vary the illumination conditions by varying the brightness of the illumination or the spectral characteristics of the illumination.
상기 비젼기반 인식기를 이용해 특정의 옷에 대해 영상정보를 획득하는 단계(S303)에서는 상기 단계(S302)에서 구축된 데이터베이스에 포함되는 옷에 대해 영상정보를 획득하는 것이 바람직하다. In the step S303 of acquiring image information about a specific garment using the vision-based recognizer, it is preferable to acquire image information of the garment included in the database constructed in the step S302.
본 발명은 비젼기반 인식기의 성능을 평가하는 데 그 목적이 있는 것으로, 특히 상기 비젼기반 인식기에 의해 획득된 옷의 영상정보가 데이터베이스에 포함된 옷들 중 어느 것에 대한 영상정보인지를 판별하는 성능을 평가하는 데 그 목적이 있다. The present invention has an object of evaluating the performance of the vision-based recognizer, and in particular, the performance of determining whether the image information of the clothes obtained by the vision-based recognizer is the image information for any of the clothes included in the database Its purpose is to.
따라서 비젼기반 인식기로는 상기 데이터베이스에 영상 데이터가 저장되는 옷들 중의 하나와 색상 및 텍스처가 동일한 옷에 대해 영상정보를 획득하여, 그로부터 데이터베이스 가운데에서 그에 해당하는 옷을 정확히 판별해낼 수 있는지 여부를 판단하는 것이 바람직하며, 이 경우 비젼기반 인식기의 성능을 객관적으로 판단하는 것이 가능할 것이다. Therefore, the vision-based recognizer acquires image information about clothes having the same color and texture as one of the clothes whose image data is stored in the database, and determines whether the corresponding clothes can be accurately determined from the database. In this case, it will be possible to objectively determine the performance of the vision-based recognizer.
상기 비젼기반 인식기에 의해 획득된 영상정보와 옷 영상의 데이터베이스의 영상 데이터를 비교하여 서로 같은 옷에 대한 영상인지 여부를 판정하는 단계(S304)는 상기 단계(S303)에서 획득한 옷의 영상정보가 단계(S302)에서 구축된 데 이터베이스 가운데 어느 옷에 해당되는 것인가를 판정하는 단계이다. Comparing the image information acquired by the vision-based recognizer and the image data of the database of the image of the clothes to determine whether the image of the same clothes with each other (S304) is the image information of the clothes obtained in the step (S303) In step S302, it is a step of determining which clothes are among the databases constructed.
단계(S303)에서 옷에 대해서 영상정보가 획득된 경우, 단계(S304)에서는 데이터베이스의 영상 데이터를 각각 상기 단계(S303)에서 획득된 영상정보와 비교하여 일치 또는 불일치 여부를 판정한다. 즉, 데이터베이스의 각 영상 데이터는 단계(S303)에서 식별된 옷과 같은 색상 및 텍스처를 갖는 옷에 대한 영상 데이터인지 여부가 판정된다. When image information is obtained for clothes in step S303, in step S304, image data of the database is compared with the image information obtained in step S303, respectively, to determine whether there is a match or a mismatch. That is, it is determined whether each image data in the database is image data for clothes having the same color and texture as the clothes identified in step S303.
이때 상기 옷 영상의 데이터베이스에는 단계(S303)에서 식별된 옷과 같은 옷에 대해서 조명조건을 달리한 수만큼의 영상 데이터가 저장되어 있으며, 그 중 일부 또는 전부가 상기 식별된 옷과 같은 색상 및 텍스처의 옷에 대한 영상 데이터인 것으로 판정된다. 이들은 정확하게 판정되는 것으로, 상기 정확하게 판정되는 영상 데이터를 인식이 성공된 데이터라 한다. In this case, the database of the clothes image stores image data corresponding to the number of different lighting conditions for clothes such as the clothes identified in step S303, and some or all of them have the same color and texture as the clothes identified. It is determined that the image data is for the clothes of the. These are correctly determined, and the image data that is accurately determined is referred to as successful data.
상기 단계(S304)에서의 판정결과의 정확성이 곧 상기 비젼기반 인식기의 성능평가의 기준이 되며, 본 발명에서는 상기 비젼기반 인식기의 성능을 나타내는 지표로 인식성공률(detection rate)과 오판정수(false positive)의 두 가지를 제안한다. The accuracy of the determination result at step S304 is a criterion for performance evaluation of the vision-based recognizer. In the present invention, a detection rate and a false positive are used as indicators indicating the performance of the vision-based recognizer. ) Two suggestions.
detection rate는 단계(S303)에서 비젼기반 인식기가 특정의 색상과 텍스처를 갖는 옷을 식별하여 그 영상정보를 획득한 경우, 단계(S304)에서 데이터베이스의 영상 데이터 가운데 상기 식별된 옷과 같은 옷에 대한 데이터 중에서 올바른 결과로 판정되는 데이터의 비율을 나타내는 것이다. 즉, 특정한 색상 및 텍스처의 옷 에 대한 detection rate는 상기 특정한 옷에 대한 전체 영상 데이터의 개수에 대한 인식이 성공된 데이터의 개수의 비로 표현된다. When the vision-based recognizer identifies clothes having a specific color and texture in step S303 and acquires the image information, the detection rate is determined for the clothes such as the clothes identified in the image data of the database in step S304. It shows the ratio of the data judged as a correct result among the data. That is, the detection rate for the clothes of a specific color and texture is expressed as the ratio of the number of data for which the recognition of the total number of image data for the particular clothes is successful.
detection rate는 상기와 같이 데이터베이스에 저장되는 각 옷에 대해서 획득될 수도 있고, 데이터베이스에 저장된 모든 옷에 대해서도 획득될 수 있다. 데이터베이스의 옷 전체에 대해서 detection rate는 다음과 같이 구할 수 있다. The detection rate may be obtained for each clothes stored in the database as described above, or may be obtained for all clothes stored in the database. The detection rate for the entire garment in the database can be calculated as
상기 수식에서 M은 데이터베이스에 저장되는 옷의 종류 수이고, Ntotal(i)은 각 옷에 대한 영상 데이터의 개수이며, Nsuccess(i)는 상기 영상 데이터 중에서 인식이 성공된 데이터의 개수이다. In the above formula, M is the number of types of clothes stored in the database, N total (i) is the number of image data for each clothes, and N success (i) is the number of successful data recognition among the image data.
상기 false positive는 단계(S303)에서 비젼기반 인식기가 특정의 색상과 텍스처를 갖는 옷을 식별하여 그 영상정보를 획득한 경우, 단계(S304)에서 데이터베이스의 영상 데이터 가운데 상기 식별된 옷과 다른 옷에 대한 데이터 중에서 상기 식별된 옷과 같은 옷에 대한 것으로 판정되는 데이터의 수를 나타내는 것이다. When the false positive recognizes the clothes having a specific color and texture and acquires the image information in step S303, the false positive is applied to the clothes that are different from the identified clothes in the image data of the database in step S304. The number of data determined for the same clothes as the clothes identified above.
상기 false positive는 단계(S303)에서 식별된 옷과는 다른 옷에 대한 영상 데이터로 판정되어야 할 데이터가 잘못 판정되어, 식별된 옷과 같은 옷에 대한 영상 데이터로 판정되는 경우를 나타내는 것이다. 즉, 오판정의 개수를 나타내는 것으로, 상기 detection rate와는 반대되는 개념이다. The false positive indicates a case in which data to be determined as image data for clothes different from clothes identified in step S303 is erroneously determined, and is determined as image data for clothes such as the identified clothes. That is, it indicates the number of misjudgment and is a concept opposite to the detection rate.
도 4는 본 발명의 비젼기반 인식기의 성능평가 방법의 일 실시예에 의해 60종류의 옷에 대해 데이터베이스를 구축하여 detection rate와 false positive를 측정한 결과의 일 예를 나타낸 것이다. Figure 4 shows an example of the results of measuring the detection rate and false positive by building a database for 60 kinds of clothes according to an embodiment of the performance evaluation method of the vision-based recognizer of the present invention.
상기 측정된 detection rate와 false positive 측정값으로부터 사용된 비젼기반 인식기의 인식 성공 정도와 오인, 오판의 정도 등의 성능을 객관적으로 평가할 수 있다. From the measured detection rate and the false positive measurement value, the performance of the recognition based on the recognition success rate, the misunderstanding, and the misjudgment of the vision-based recognizer can be objectively evaluated.
상기와 같이, 본 발명의 바람직한 실시예를 참조하여 설명하였지만 해당 기술 분야의 숙련된 당업자라면 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. As described above, it has been described with reference to the preferred embodiment of the present invention, but those skilled in the art various modifications and changes of the present invention without departing from the spirit and scope of the present invention described in the claims below I can understand that you can.
상술한 바와 같이 본 발명에 의하면, 옷의 영상정보를 이용하는 비젼기반 인식방법 및 비젼기반 인식기의 성능 평가를 위한 옷 영상의 데이터베이스를 구축할 수 있고, 비젼기반 인식방법 및 비젼기반 인식기의 성능을 객관적인 기준에 따라 평가할 수 있다. As described above, according to the present invention, it is possible to construct a database of clothes images for the performance evaluation of the vision-based recognition method and the vision-based recognizer using the image information of the clothes, and to objectively evaluate the performance of the vision-based recognition method and the vision-based recognizer. Evaluation can be made according to criteria.
Claims (9)
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050107670A KR20070050284A (en) | 2005-11-10 | 2005-11-10 | Construction method of database for vision-based recognition and evaluation method of vision-based recognition device |
| US11/594,930 US7890522B2 (en) | 2005-11-10 | 2006-11-09 | Record media written with data structure for recognizing a user and method for recognizing a user |
| PCT/KR2006/004691 WO2007055525A1 (en) | 2005-11-10 | 2006-11-10 | Record media written with data structure for recognizing a user and method for recognizing a user |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050107670A KR20070050284A (en) | 2005-11-10 | 2005-11-10 | Construction method of database for vision-based recognition and evaluation method of vision-based recognition device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20070050284A true KR20070050284A (en) | 2007-05-15 |
Family
ID=38273931
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020050107670A KR20070050284A (en) | 2005-11-10 | 2005-11-10 | Construction method of database for vision-based recognition and evaluation method of vision-based recognition device |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20070050284A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112195611A (en) * | 2019-06-19 | 2021-01-08 | 青岛海尔洗衣机有限公司 | Clothes treatment equipment and control method thereof |
-
2005
- 2005-11-10 KR KR1020050107670A patent/KR20070050284A/en not_active Application Discontinuation
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112195611A (en) * | 2019-06-19 | 2021-01-08 | 青岛海尔洗衣机有限公司 | Clothes treatment equipment and control method thereof |
| CN112195611B (en) * | 2019-06-19 | 2023-04-21 | 青岛海尔洗衣机有限公司 | Clothes treatment equipment and control method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101550474B1 (en) | Method and device for finding and tracking pairs of eyes | |
| KR100698534B1 (en) | Landmark for location recognition of mobile robot and location recognition device and method using same | |
| US20200363341A1 (en) | Image detection scanning method for object surface defects and image detection scanning system thereof | |
| US9087258B2 (en) | Method for counting objects and apparatus using a plurality of sensors | |
| CN101836180B (en) | Detecting ambient light levels in a vision system | |
| JP6553624B2 (en) | Measurement equipment and system | |
| JP2005535016A (en) | Method and system for classifying objects in a scene | |
| JP2007206797A (en) | Image processing method and image processor | |
| US10210426B2 (en) | Position estimation of light source of a luminaire from light footprint | |
| CN110062502B (en) | Machine vision-based online residual life prediction and reliability evaluation method for LED lighting lamp | |
| RU2016138012A (en) | SYSTEM AND / OR METHOD OF RECOGNITION OF COATING FOR GLASS | |
| JP6601489B2 (en) | Imaging system, imaging apparatus, imaging method, and imaging program | |
| KR101679205B1 (en) | Device for detecting defect of device | |
| JP2005535015A (en) | How to chain edges in stereo images together | |
| TWI413925B (en) | Optical touch system, apparatus and method for calculating the position of an object | |
| JP2010509666A (en) | Image illumination detection | |
| JP2023041931A (en) | Evaluation device, evaluation method, and program | |
| US20140218477A1 (en) | Method and system for creating a three dimensional representation of an object | |
| TWI521410B (en) | Apparatus and method for acquiring object image of a pointer | |
| US10712146B2 (en) | Distance measuring system and method using thereof | |
| CN114152410A (en) | Visual light source detection system and detection method | |
| WO2021059858A1 (en) | Inspection method, program, and inspection system | |
| JP2012149946A (en) | Inspection device, inspection method and program | |
| KR20070050284A (en) | Construction method of database for vision-based recognition and evaluation method of vision-based recognition device | |
| JP5265338B2 (en) | Illuminant estimation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WITN | Withdrawal due to no request for examination |