KR101465933B1 - Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image - Google Patents

Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image Download PDF

Info

Publication number
KR101465933B1
KR101465933B1 KR20140036530A KR20140036530A KR101465933B1 KR 101465933 B1 KR101465933 B1 KR 101465933B1 KR 20140036530 A KR20140036530 A KR 20140036530A KR 20140036530 A KR20140036530 A KR 20140036530A KR 101465933 B1 KR101465933 B1 KR 101465933B1
Authority
KR
South Korea
Prior art keywords
image
color
temporary
detecting
ycbcgcr
Prior art date
Application number
KR20140036530A
Other languages
Korean (ko)
Inventor
홍광석
오병훈
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR20140036530A priority Critical patent/KR101465933B1/en
Application granted granted Critical
Publication of KR101465933B1 publication Critical patent/KR101465933B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Color Image Communication Systems (AREA)
  • Image Processing (AREA)

Abstract

A method (100) for detecting a color object from an image comprises the steps of: receiving, by an image processing apparatus, an input of a source image (110); normalizing, by the image processing apparatus, the source image into an RGB image (120); converting the normalized RGB image into a YCbCgCr image to generate a first temporary image with an object detected (130); converting the normalized RGB image into an HSV image to generate a second temporary image with the object detected (140); and combining the first and second temporary images to finally detect the object (150).

Description

영상에서 컬러 객체를 검출하는 방법, 영상에서 컬러 객체를 검출하는 장치 및 영상에서 복수의 컬러 객체를 검출하는 방법{DETECTING METHOD FOR COLOR OBJECT IN IMAGE, DETECTING APPARATUS FOR COLOR OBJECT IN IMAGE AND DETECTING METHOD FOR A PLURALITY OF COLOR OBJECT IN IMAGE}TECHNICAL FIELD [0001] The present invention relates to a method of detecting a color object in an image, a method of detecting a color object in an image, and a method of detecting a plurality of color objects in an image OF COLOR OBJECT IN IMAGE}

이하 설명하는 기술은 영상에서 컬러 객체를 검출하는 방법 및 장치에 관한 것이다.The techniques described below relate to a method and apparatus for detecting color objects in an image.

디지털 영상에서 객체를 검출하는 기법은 지능형 교통 시스템, 감시 카메라, 검출 객체와 컴퓨터 간 인터랙션(interaction) 등의 많은 응용분야에서 사용되고 있다. 또한, 고성능화된 다양한 스마트 기기의 등장으로 인하여 카메라를 통해 객체를 검출 및 인식하고, 인식된 객체를 이용하여 다양한 스마트 기기와의 인터랙션을 위한 연구가 활발히 진행되고 있다.Techniques for detecting objects in digital images have been used in many applications such as intelligent traffic systems, surveillance cameras, and interactions between detected objects and computers. In addition, due to the introduction of various smart devices with high performance, researches for detecting and recognizing objects through a camera and for interacting with various smart devices using recognized objects are being actively carried out.

한편, 영상에서 객체 검출을 위하여 컬러를 이용한 영상처리 알고리즘은 R(red), G(green), B(blue)의 3차원 색상정보에 의해 표현되는 특징 정보를 주로 활용한다. 컬러 정보가 사용되는 주된 이유는 그레이(Gray) 영상이나 이진 영상에 비해 상대적으로 많은 정보를 제공해주며, 쉽게 데이터의 추출이 가능하고, 영상 처리의 속도가 빠르기 때문이다.On the other hand, the image processing algorithm using color for object detection in the image mainly uses the feature information represented by the three-dimensional color information of R (red), G (green), and B (blue). The main reason that color information is used is that it provides relatively more information than gray or binary image, and it is possible to extract data easily and speed of image processing is fast.

한국공개특허 제2013-0121344호(2013.11.06)Korean Laid-Open Patent No. 2013-0121344 (2013.11.06) 한국공개특허 제2013-0064556호(2013.06.18)Korean Laid-Open Patent No. 2013-0064556 (2013.06.18)

검출 객체와 컴퓨터 간 인터랙션 시스템으로는 마이크로소프트의 키넥트와 소니의 플레이스테이션 무브 등이 있지만, 시스템의 비용이 높고 특정 애플리케이션에만 적용되는 문제점이 있다.Detection objects and computer-to-computer interaction systems include Microsoft's Kinect and Sony's PlayStation Move, but there are problems with high system cost and specific applications.

추가적인 장비 없이 카메라만을 이용하여 움직이는 객체를 획득하고, 추적하는 방법들이 많이 연구되고 있지만 복잡한 환경과 다양한 조명에서 다중 객체를 추적하고, 실시간으로 분석하기에 한계가 있다. 나아가 종래 다중 객체 인식 시스템은 객체 검출을 위하여 입력 영상 전체를 탐색기 때문에 많은 영상처리 시간을 소모해야만 하는 문제점이 있다.  Although there are a lot of methods to acquire and track moving objects using only cameras without additional equipment, there are limitations in tracking multiple objects in a complex environment and various lighting and analyzing them in real time. In addition, the conventional multi-object recognition system has a problem in that it requires a lot of image processing time because of searching the entire input image for object detection.

영상에서 컬러 객체 검출을 위한 종래의 YCbCr 모델은 영상에서 표현되는 RGB 3차원 색상 정보에 대하여 밝기 값을 제외한 B(blue)와 R(red)의 색차 정보만 추출하여 특정 색상에 최적화된 검출 및 인식을 수행하기 어려운 경우가 발생한다.Conventional YCbCr model for color object detection in image extracts only color difference information of B (blue) and R (red) except for brightness value for RGB three-dimensional color information expressed in image, It is difficult to carry out the operation.

이하 설명하는 기술은 소스 영상에 대한 YCbCgCr 영상 및 HSV 영상을 각각 이용하여 소스 영상에서 객체를 검출하고자 한다. YCbCgCr 영상은 YCbCr 컬러 모델에 G(green) 색차 정보를 추가하여 새로운 YCbCgCr 컬러 모델을 사용한 것이다.The technique described below is to detect an object in a source image using a YCbCgCr image and an HSV image for a source image, respectively. The YCbCgCr image uses a new YCbCgCr color model by adding G (green) color difference information to the YCbCr color model.

이하 설명하는 기술의 해결과제는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The solutions to the technical problems described below are not limited to those mentioned above, and other solutions not mentioned can be clearly understood by those skilled in the art from the following description.

영상에서 컬러 객체를 검출하는 방법은 영상 처리 장치가 소스 영상을 입력받는 단계, 소스 영상을 RGB 정규화하는 단계, 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상을 생성하는 단계, 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하는 단계 및 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출하는 단계를 포함한다.A method of detecting a color object in an image includes the steps of receiving a source image by an image processing apparatus, RGB normalizing a source image, converting a normalized RGB image into a YCbCgCr image, and generating a first temporary image Converting the normalized RGB image into an HSV image to generate a second temporary image in which the object is detected, and finally detecting the object by combining the first temporary image and the second temporary image.

정규화하는 단계는 영상 처리 장치가 소스 영상에서 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 정규화한다.In the normalizing step, the image processing apparatus normalizes the value of each component by dividing the value of each of the R, G, and B color components by the sum of the values of the three RGB components in the source image.

제1 임시 영상을 생성하는 단계는 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하는 단계, YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 임계값 이상인 객체를 추출하는 단계, 객체를 추출 상기 Cb, Cg 및 Cr 중 적어도 하나의 영상에 대한 이진화를 수행하는 단계 및 이진화를 수행한 영상이 복수인 경우 각 영상에 대한 결합을 수행하는 단계를 포함한다.The step of generating the first temporary image may include converting the normalized RGB image into a YCbCgCr image, extracting an object having a threshold value or more in each color difference channel of Cb, Cg, and Cr in the YCbCgCr image, extracting the object, And Cr; performing binarization on at least one of the images; and performing combining for each image when the binarized images are a plurality of images.

제2 임시 영상을 생성하는 단계는 정규화된 RGB 컬러 영상을 HSV 영상으로 변환하는 단계, HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하는 단계, HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하는 단계 및 S 채널에 추출한 영상 및 V 채널에서 추출한 영상을 결합하여 제2 임시 영상을 생성하는 단계를 포함한다.The step of generating the second temporary image may include converting the normalized RGB color image into an HSV image, extracting a pixel having a first threshold value or more and a pixel having a second threshold value or less in the S channel of the HSV image, A step of extracting a pixel having a reference threshold value or more from the channel and a step of generating a second temporary image by combining the image extracted from the S channel and the image extracted from the V channel.

영상에서 컬러 객체를 검출하는 장치는 소스 영상에 대한 YCbCgCr 영상 및 HSV 영상에서 각각 임계값을 이용하여 객체를 검출하고, 객체를 검출한 YCbCgCr 영상 및 HSV 영상을 결합하여 소스 영상에서 컬러 객체를 검출하는 소프트웨어를 저장하는 메모리 장치 및 소프트웨어를 이용하여 소스 영상에서 적어도 하나의 컬러 객체를 검출하는 연산 장치를 포함한다.An apparatus for detecting a color object in an image detects an object using a threshold value in a YCbCgCr image and an HSV image with respect to a source image, and detects a color object in a source image by combining an YCbCgCr image and an HSV image, And a computing device for detecting at least one color object in the source image using a memory device and software for storing the software.

연산 장치는 소프트웨어를 이용하여 소스 영상을 RGB 정규화하고, 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상 및 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하고, 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출한다.The arithmetic unit converts the normalized RGB image into a YCbCgCr image using the software to convert the first temporary image and the normalized RGB image into an HSV image, And finally detects the object by combining the first temporary image and the second temporary image.

연산 장치는 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하고, YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 기준 임계값 이상인 객체를 추출하고, 객체를 추출한 영상에 대한 이진화를 수행하여 제1 임시 영상을 생성한다.The arithmetic unit converts the normalized RGB image into a YCbCgCr image, extracts an object having a reference threshold value or more from each color difference channel of Cb, Cg, and Cr in the YCbCgCr image, binarizes the extracted image, .

연산 장치는 정규화된 RGB 컬러 영상을 HSV 영상으로 변환하고, HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하고, HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하고, S 채널에 추출한 영상 및 V 채널에서 추출한 영상을 결합하여 제2 임시 영상을 생성한다.The arithmetic unit converts the normalized RGB color image into an HSV image, extracts a pixel having a first threshold value or more and a pixel having a second threshold value or less in the S channel of the HSV image, And combines the image extracted from the S channel and the image extracted from the V channel to generate a second temporary image.

영상에서 복수의 컬러 객체를 검출하는 방법은 영상 처리 장치가 복수의 타겟 객체가 포함된 소스 영상을 입력받는 단계, 영상 처리 장치가 소스 영상의 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 소스 영상을 정규화하는 단계 및 영상 처리 장치가 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상 및 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하고, 제1 임시 영상 및 제2 임시 영상을 결합하여 타겟 객체를 검출하는 단계를 포함한다.There is provided a method of detecting a plurality of color objects in an image, the method comprising: receiving a source image including a plurality of target objects by the image processing apparatus; detecting, for each of the R color value, the G color value, and the B color value of the source image, Normalizing the source image by dividing the value of each component by the sum of the values of the three RGB components, and converting the normalized RGB image into a YCbCgCr image to convert the first temporary image and the normalized RGB image, HSV image to generate a second temporary image in which the object is detected, and detecting the target object by combining the first temporary image and the second temporary image.

이하 설명하는 기술은 YCbCgCr 영상 및 HSV 영상을 각각 이용하여 객체의 검출 효율이 좋고, 연산의 복잡도가 낮다. 따라서 이하 설명하는 기술은 휴대 단말과 같이 대중적인 장비를 이용하여 소스 영상에서 복수의 객체를 검출하는데 적합하다.The technique described below uses the YCbCgCr image and the HSV image, respectively, to detect objects efficiently and has a low computational complexity. Therefore, the technique described below is suitable for detecting a plurality of objects from a source image using popular equipment such as a mobile terminal.

이하 설명하는 기술의 효과는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the techniques described below are not limited to those mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the following description.

도 1은 영상에서 컬러 객체를 검출하는 방법에 대한 순서도의 예이다.
도 2는 영상에서 컬러 객체를 검출하는 방법에 대한 순서도의 다른 예이다.
도 3은 영상에서 컬러 객체를 검출하는 방법에 대한 과정의 일 예이다.
도 4는 영상에서 컬러 객체를 검출하는 장치에 대한 블록도의 예이다.
도 5는 영상에서 복수의 컬러 객체를 검출하는 방법에 대한 순서도의 예이다.
도 6은 영상에서 복수의 컬러 객체를 검출한 예를 도시한다.
1 is an example of a flowchart for a method of detecting a color object in an image.
2 is another example of a flowchart for a method of detecting a color object in an image.
3 is an example of a process for a method of detecting a color object in an image.
Figure 4 is an example of a block diagram for an apparatus for detecting color objects in an image.
5 is an example of a flowchart for a method of detecting a plurality of color objects in an image.
6 shows an example of detecting a plurality of color objects in an image.

이하 설명하는 기술은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 이하 설명하는 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 이하 설명하는 기술의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The following description is intended to illustrate and describe specific embodiments in the drawings, since various changes may be made and the embodiments may have various embodiments. However, it should be understood that the following description does not limit the specific embodiments, but includes all changes, equivalents, and alternatives falling within the spirit and scope of the following description.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 해당 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 단지 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 이하 설명하는 기술의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The terms first, second, A, B, etc., may be used to describe various components, but the components are not limited by the terms, but may be used to distinguish one component from another . For example, without departing from the scope of the following description, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

본 명세서에서 사용되는 용어에서 단수의 표현은 문맥상 명백하게 다르게 해석되지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함한다" 등의 용어는 설시된 특징, 개수, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 의미하는 것이지, 하나 또는 그 이상의 다른 특징들이나 개수, 단계 동작 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하지 않는 것으로 이해되어야 한다.As used herein, the singular " include "should be understood to include a plurality of representations unless the context clearly dictates otherwise, and the terms" comprises & , Parts or combinations thereof, and does not preclude the presence or addition of one or more other features, integers, steps, components, components, or combinations thereof.

도면에 대한 상세한 설명을 하기에 앞서, 본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능 별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다. 따라서, 본 명세서를 통해 설명되는 각 구성부들의 존재 여부는 기능적으로 해석되어야 할 것이며, 이러한 이유로 이하 설명하는 기술의 영상에서 컬러 객체를 검출하는 방법(100) 및 영상에서 컬러 객체를 검출하는 장치(500)에 따른 구성부들의 구성은 이하 설명하는 기술의 목적을 달성할 수 있는 한도 내에서 대응하는 도면과는 상이해질 수 있음을 명확히 밝혀둔다.Before describing the drawings in detail, it is to be clarified that the division of constituent parts in this specification is merely a division by main functions of each constituent part. That is, two or more constituent parts to be described below may be combined into one constituent part, or one constituent part may be divided into two or more functions according to functions that are more subdivided. In addition, each of the constituent units described below may additionally perform some or all of the functions of other constituent units in addition to the main functions of the constituent units themselves, and that some of the main functions, And may be carried out in a dedicated manner. Accordingly, the presence or absence of each component described in the present specification will be interpreted as a function. For this reason, a method 100 for detecting a color object in an image of a technique described below and an apparatus for detecting a color object in an image 500 can be different from the corresponding drawings within the scope of achieving the object of the following description.

또, 방법 또는 동작 방법을 수행함에 있어서, 상기 방법을 이루는 각 과정들은 문맥상 명백하게 특정 순서를 기재하지 않은 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 과정들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
Also, in performing a method or an operation method, each of the processes constituting the method may take place differently from the stated order unless clearly specified in the context. That is, each process may occur in the same order as described, may be performed substantially concurrently, or may be performed in the opposite order.

이하 설명하는 기술은 디지털 영상에서 특정한 컬러 객체를 검출하는 기법에 관한 것이다. 전술한 바와 같이 영상에서 객체를 검출하는 기법은 다양한 응용 분야에서 사용되고 있다. 이하 설명하는 기술은 특히 스마트폰에 내장되는 카메라, 스마트 TV에 내장되는 카메라 또는 컴퓨터에 연결되는 카메라(웹 캠) 등과 같은 비교적 간단하고 저렴한 장치를 이용하여 영상에서 객체를 빠르게 검출하기 위한 것이다. 이하 설명하는 기술은 복잡도가 낮은 객체 검출 방법을 사용하여 영상에서 복수의 객체를 검출하는데 유용하다. 이하 설명하는 영상에서 컬러 객체를 검출하는 방법(100) 및 영상에서 컬러 객체를 검출하는 장치(500)는 영상에서 하나의 객체를 검출할 수도 있고, 영상에서 복수의 다중 객체를 검출하는데 사용될 수도 있다.The technique described below relates to a technique for detecting a specific color object in a digital image. As described above, the technique of detecting an object in an image is used in various application fields. The technology described below is intended to quickly detect an object in an image using a relatively simple and inexpensive device such as a camera built in a smart phone, a camera built in a smart TV, or a camera (web cam) connected to a computer. The techniques described below are useful for detecting a plurality of objects in an image using a low complexity object detection method. A method 100 for detecting a color object in an image described below and an apparatus 500 for detecting a color object in an image may detect an object in an image or may detect a plurality of multiple objects in an image .

이하 설명하는 기술에서 주요한 특징은 종래의 YCbCr 컬러 모델에 G(green) 색차 정보를 추가하여 생성한 새로운 YCbCgCr 모델 및 HSV 모델을 동시에 이용한다는 점이다.
A major feature of the technique described below is that a new YCbCgCr model and HSV model generated by adding G (green) color difference information to a conventional YCbCr color model are simultaneously used.

이하에서는 도면을 참조하면서 영상에서 컬러 객체를 검출하는 방법(100) 및 영상에서 컬러 객체를 검출하는 장치(500)에 관하여 구체적으로 설명하겠다.Hereinafter, a method 100 for detecting a color object in an image and an apparatus 500 for detecting a color object in an image will be described in detail with reference to the drawings.

도 1은 영상에서 컬러 객체를 검출하는 방법(100)에 대한 순서도의 예이다. 영상에서 컬러 객체를 검출하는 방법(100)은 영상 처리 장치가 소스 영상을 입력받는 단계(110), 소스 영상을 RGB 정규화하는 단계(120), 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상을 생성하는 단계(130), 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하는 단계(140) 및 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출하는 단계(150)를 포함한다.Figure 1 is an example of a flowchart for a method 100 for detecting a color object in an image. A method 100 for detecting a color object in an image includes a step 110 of inputting a source image by an image processing apparatus, a step 120 of normalizing a source image to RGB, a step of converting a normalized RGB image into a YCbCgCr image, A step 130 of generating a first temporary image, a step 140 of converting a normalized RGB image into an HSV image to generate a second temporary image in which an object is detected, and a step 140 of combining the first temporary image and the second temporary image And finally detecting (150) the object.

영상에서 컬러 객체를 검출하는 방법(100)은 소스 영상에 대한 이미지 처리를 수행하여 각각 제1 임시 영상 및 제2 임시 영상을 생성하고, 생성된 2 개의 영상을 결합하여 최종적으로 객체를 검출하는 기법이다. A method 100 for detecting a color object in an image is a method for generating a first temporary image and a second temporary image by performing image processing on a source image and combining the generated two images to finally detect an object to be.

소스 영상은 영상 처리 장치의 영상 획득 장치를 통해 최초 입력되는 컬러 영상을 의미한다. 영상 처리 장치는 카메라를 통해 입력받는 영상, 메모리에 저장된 영상 또는 네트워크를 통해 수신하는 영상에서 특정 객체를 검출하는 장치를 의미한다. 영상 처리 장치는 카메라가 내장된 영상 장치, 컴퓨터 장치, 스마트폰과 같은 모바일 장치, 카메라가 내장된 스마트 TV 등을 포함한다. 영상 획득 장치는 외부 영상을 실시간으로 획득하는 카메라, 메모리에 저장된 영상을 획득하는 인터페이스 장치, 네트워크를 통해 영상 데이터를 입력받는 통신 모듈 등을 포함한다.The source image means a color image first input through an image acquisition device of the image processing apparatus. An image processing apparatus refers to a device that detects a specific object in an image received through a camera, an image stored in a memory, or an image received through a network. The image processing apparatus includes a video device with a built-in camera, a computer device, a mobile device such as a smart phone, and a smart TV with a built-in camera. The image acquisition device includes a camera that acquires an external image in real time, an interface device that acquires an image stored in the memory, and a communication module that receives image data through a network.

소스 영상을 입력받는 단계(110)는 카메라로부터 직접 영상을 입력받거나, 메모리에 저장된 영상을 불러오거나, 네트워크 등을 통해 수신되는 영상을 전달받는다.The step 110 of receiving the source image receives the image directly from the camera, retrieves the image stored in the memory, or receives the image received through the network or the like.

소스 영상을 RGB 정규화하는 단계(120)는 입력받은 RGB 컬러 영상을 정규화하는 과정이다. 입력으로 들어온 컬러 영상은 RGB 모델로 구성되어 있는데, 일반 RGB 컬러 모델은 조도 변화에 민감하여 정확한 연산을 수행하기 어렵기 때문에 r, g, b 각각의 성분 값을 세 성분 값의 합으로 나누어 주는 정규화 과정을 거친다. 정규화 과정은 아래의 수학식 1과 같다.
The RGB normalization of the source image 120 is a process of normalizing the input RGB color image. Since the input color image is composed of RGB models, since the general RGB color model is sensitive to the change in illumination and it is difficult to perform accurate calculation, it is difficult to perform the normal operation by dividing the component values of r, g and b by the sum of the three component values. Go through the process. The normalization process is shown in Equation 1 below.

Figure 112014029942500-pat00001
Figure 112014029942500-pat00001

상기 수식에서 R, G 및 B는 각각 정규화가 수행된 RGB 성분값이다.
In the above equation, R, G, and B are RGB component values that are normalized, respectively.

도 2는 영상에서 컬러 객체를 검출하는 방법(100)에 대한 순서도의 다른 예이다. 도 2는 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상을 생성하는 단계(130) 및 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하는 단계(140)를 보다 구체적으로 설명한다. 제1 임시 영상을 생성하는 단계(130) 및 제2 임시 영상을 생성하는 단계(140)는 순서에 관계없이 순차적으로 수행되거나, 병렬적으로 수행될 수 있다.
2 is another example of a flowchart for a method 100 for detecting a color object in an image. FIG. 2 illustrates a step 130 of transforming a normalized RGB image into a YCbCgCr image to generate a first temporary image in which an object is detected 130 and a second temporary image in which an object is detected by converting the normalized RGB image into an HSV image Step 140 will be described in more detail. The step 130 of generating the first temporary image and the step 140 of generating the second temporary image may be performed sequentially, or may be performed in parallel, irrespective of the order.

먼저 제1 임시 영상을 생성하는 단계(130)에 대해 설명한다. 정규화된 RGB 컬러 영상은 YCbCgCr 영상으로 변환된다(131). YCbCgCr 영상은 YCbCr 컬러 모델에 G(green) 색차 정보를 추가한 YCbCgCr 모델로 생성된다.First, a step 130 of generating a first temporary image will be described. The normalized RGB color image is converted into a YCbCgCr image (131). The YCbCgCr image is generated as a YCbCgCr model in which G (green) color difference information is added to the YCbCr color model.

RGB 컬러 모델에서 밝기 성분(Y)을 제외한 B(blue), G(green) 및 R(red) 각각에 대한 색차 정보 Cb, Cg 및 Cr을 추출하는 과정은 아래의 수학식 2 내지 수학식 4와 같다.
The process of extracting the chrominance information Cb, Cg and Cr for each of B (blue), G (green) and R (red) excluding the brightness component Y in the RGB color model is represented by the following Equations 2 to 4 same.

Figure 112014029942500-pat00002
Figure 112014029942500-pat00002

Figure 112014029942500-pat00003
Figure 112014029942500-pat00003

Figure 112014029942500-pat00004
Figure 112014029942500-pat00004

상기 수학식에서 R,G,B는 RGB 컬러 모델에서 정규화 과정이 수행된 r(red), g(green), b(blue)에 대한 각각의 성분 값을 나타낸다.
In the above equation, R, G, and B represent the respective component values for r (red), g (green), and b (blue) in which the normalization process is performed in the RGB color model.

위 수식으로부터 추출된 Cb, Cg, Cr 각각의 색차 채널에서 일정 임계치 값 이상의 픽셀(색이 진한 것)을 추출하는 것이 바람직하다(132). 예컨대, 150 이상인 값을 추출하여 사용할 수 있다. 그러나 임계값 설정은 시스템 성능, 검출하고자 하는 객체의 영상 정보, 영상이 획득되는 조도 등 다양한 환경 변수를 고려하여 변경될 수 있다. 제1 임시 영상을 생성하는 과정에서 사용하는 임계값을 YCbCgCr 임계값이라고 명명한다. YCbCgCr 임계값은 각 색차 채널에 따라 서로 다른 값이 사용될 수도 있다.It is preferable to extract a pixel (a color having a larger color) of a predetermined threshold value or more in the color difference channels of Cb, Cg, and Cr extracted from the above expression (132). For example, a value of 150 or more can be extracted and used. However, the threshold setting can be changed in consideration of various environmental variables such as system performance, image information of an object to be detected, illuminance at which an image is acquired, and the like. The threshold used in the process of generating the first temporary image is called the YCbCgCr threshold value. The YCbCgCr threshold value may be different depending on each chrominance channel.

이 과정에서 Cb, Cg, Cr의 색차 채널 중 특정 색차 정보의 최대값을 추출할 수도 있다. 예컨대, 추출하고자 하는 타겟 객체에 대한 색차 정보를 알고 있다면, 해당 객체를 더욱 잘 검출할 수 있는 특정 채널만을 이용할 수도 있을 것이다.
In this process, the maximum value of the specific color difference information among the color difference channels of Cb, Cg and Cr may be extracted. For example, if the chrominance information of the target object to be extracted is known, only a specific channel capable of detecting the corresponding object may be used.

이후 YCbCgCr 영상에서 특정 객체를 검출하기 위하여 YCbCgCr 영상에 대한 이진화를 수행하는 것이 바람직하다(133). 이진화를 통해 영상의 객체를 단순화하고, 객체 검출의 효율을 높일 수 있다. In order to detect a specific object in the YCbCgCr image, it is preferable to perform binarization on the YCbCgCr image (133). Binarization simplifies the object of the image and improves the efficiency of object detection.

각각의 색차 채널에서 임계치를 통한 해당 색상이 검출(132)되고 나면 이를 객체 영역으로 구분하고, 배경 대비 객체 영역에 대한 이진화 단계를 수행한다. 이진화 과정은 아래의 수학식 5와 같다.
After the corresponding color is detected (132) in each chrominance channel, it is divided into object regions, and a binarization step is performed on the object region with respect to the background. The binarization process is shown in Equation (5) below.

Figure 112014029942500-pat00005
Figure 112014029942500-pat00005

"Region of Object"는 영상에서 특정 객체가 위치하는 영역을 의미한다.

Figure 112014029942500-pat00006
는 이진화를 위한 임계치를 의미한다. 즉, Cg, Cg 및 Cr 각각에 대하여 추출한 색차 정보가
Figure 112014029942500-pat00007
이상인 경우는 255인 값(검은색)을 갖고,
Figure 112014029942500-pat00008
미만인 경우는 0인 값(흰색)을 갖게 된다. 이진화를 위한 임계치
Figure 112014029942500-pat00009
는 Cg, Cg 및 Cr을 추출하기 위해 사용하였던 제1 영상 임계치와는 다른 것이다.
"Region of Object" means an area where a specific object is located in the image.
Figure 112014029942500-pat00006
Denotes a threshold value for binarization. That is, the color difference information extracted for each of Cg, Cg, and Cr
Figure 112014029942500-pat00007
(Black) in a case where the number of pixels is equal to or larger than 255,
Figure 112014029942500-pat00008
(White), the value of 0 is obtained. Threshold for binarization
Figure 112014029942500-pat00009
Is different from the first image threshold used to extract Cg, Cg and Cr.

Cg, Cg 및 Cr 색차 채널의 영상을 모두 이진화한 후 결합하여 제1 임시 영상을 생성할 수도 있고, Cg, Cg 및 Cr 색차 채널 중 객체를 뚜렷하게 검출한 영상만을 이진화하여 제1 임시 영상을 생성할 수도 있을 것이다. 검출하고자 하는 타겟 객체에 대한 색차 정보를 미리 알고 있다면 특정 채널의 영상만을 이진화할 수 있다. The first temporal image may be generated by binarizing all the images of the Cg, Cg, and Cr chrominance channel, and the first temporal image may be generated by binarizing only the image of the Cg, Cg, and Cr chrominance channels, It might be. If the chrominance information of the target object to be detected is known in advance, only the image of the specific channel can be binarized.

나아가 각 색차 채널의 영상을 분석하여 이진화 대상을 선정하거나, 각 색차 채널의 영상을 이진화한 영상을 분석하여 이후 이진화 대상을 선정할 수도 있을 것이다. 다만 기본적으로는 3개의 색차 채널의 영상을 모두 이진화하여 결합하는 방식이 바람직할 수 있다.
Furthermore, the binarization target may be selected by analyzing the image of each chrominance channel or by analyzing the binarized image of each chrominance channel. However, basically, it is preferable that a method of binarizing all the images of three chrominance channels and combining them.

이진화 단계(150) 수행 후 관심 객체 영역의 보다 정확한 검출을 위하여 불필요한 객체 또는 노이즈 등을 제거하는 단계를 수행하는 것이 바람직하다(134). 예컨대, 아래의 수학식 6에 의한 침식연산(Dilation) 및 아래의 수학식 7에 의한 팽창연산(Erosion)을 수행할 수 있다.
After performing the binarization step 150, it is preferable to perform a step of removing unnecessary objects or noise or the like for more accurate detection of the object region of interest (134). For example, an erosion operation according to the following expression (6) and an expansion operation (Erosion) according to the following expression (7) can be performed.

Figure 112014029942500-pat00010
Figure 112014029942500-pat00010

침식연산은 A와 B를 화소의 집합이라고 가정했을 때, A

Figure 112014029942500-pat00011
B는 수학식 6과 같이 정의할 수 있다. 침식연산은 객체 내부의 돌출부는 감소하고 외부의 돌출부는 증가시켜서 물체 내부나 배경에서 발생한 구멍과 같은 공간을 채우거나 짧게 끊어진 영역을 연결하는데 주로 사용되며, 이진 영상에서 침식연산은 입력 화소가 균일한 곳에서는 변화가 없으나 흑백 화소가 같이 있는 영역에서 수행된다.
When the erosion operation assumes that A and B are a set of pixels, A
Figure 112014029942500-pat00011
B can be defined as shown in Equation (6). The erosion operation is mainly used to fill a space such as a hole formed in the inside of the object or the background or to connect a short-cut region by decreasing the protrusion inside the object and increasing the protrusion of the outside. In the binary image, But there is no change in the area where black and white pixels are present.

Figure 112014029942500-pat00012
Figure 112014029942500-pat00012

팽창연산은 A와 B를 화소의 집합이라고 가정했을 때, A

Figure 112014029942500-pat00013
B는 수학식 7과 같이 정의할 수 있다. 여기서
Figure 112014029942500-pat00014
는 형태소 B를 이동한 결과로, 이 중 A집합에 완전하게 포함되는
Figure 112014029942500-pat00015
의 집합이 침식으로 일어난 결과를 의미한다. 즉, B를 A위로 이동하면서 B가 완전하게 포함되는 장소를 찾은 뒤 각 장소에서 원점에 해당하는 점을 모아 만든 집합을 팽창연산이라 정의할 수 있다.
Assuming that A and B are a set of pixels,
Figure 112014029942500-pat00013
B can be defined as Equation (7). here
Figure 112014029942500-pat00014
Is the result of moving the morpheme B,
Figure 112014029942500-pat00015
The result of erosion. In other words, a set that is obtained by finding the place where B is completely contained while moving B over A and gathering the points corresponding to the origin in each place can be defined as an expansion operation.

YCbCgCr 컬러 모델로부터 각 색차 정보에 대하여 임계치 이상인 객체를 추출하고, 이진화 과정 및 노이즈 제거 과정을 거치면 소스 영상에 대한 제1 임시 영상이 마련될 수 있다. 제1 임시 영상을 생성하는 과정(130)은 소스 영상을 YCbCgCr 영상으로 변환하여 해당 영상에서 특정 객체를 검출하는 과정에 해당한다.
A first temporal image for the source image can be prepared by extracting an object having a threshold value or more from the YCbCgCr color model for each color difference information and performing a binarization process and a noise removal process. The first temporary image generation step 130 corresponds to a process of converting a source image into a YCbCgCr image and detecting a specific object in the image.

소스 영상을 이용하여 제2 임시 영상을 생성하는 과정(140)도 설명하도록 한다. 제2 임시 영상을 생성하는 단계(140)는 정규화된 RGB 컬러 영상을 HSV 영상으로 변환하는 단계(141), HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하는 단계(142), HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하는 단계(143) 및 S 채널에 추출한 영상 및 V 채널에서 추출한 영상을 결합하여 제2 임시 영상을 생성하는 단계(144)를 포함한다.A process 140 for generating a second temporary image using the source image will also be described. The step 140 of generating a second temporary image 140 includes converting a normalized RGB color image into an HSV image 141, extracting a pixel having a first threshold value or more and a pixel having a second threshold value or less in the S channel of the HSV image In operation 142, a step 143 extracts a pixel having a reference threshold value or more from the V channel of the HSV image and a step 144 generates a second temporary image by combining the image extracted from the S channel and the image extracted from the V channel. .

제2 임시 영상을 생성하는 과정(140)에서는 조명에 민감한 H 채널을 제외하고 S(Saturation) 채널 및 V(Value) 채널만을 사용하였다. 물론 경우에 따라 H 채널의 정보를 이용할 수도 있을 것이다. 도 2에서는 HSV에서 S 채널의 최대 영역 및 최소 영역을 추출(142)한다고 기재하였는데 이는 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하는 과정을 의미한다. S 채널에서 사용되는 제1 임계값 및 제2 임계값을 S 채널 임계값이라고 명명한다. V 채널에서는 특정 기준 임계값 이상인 최대 영역을 추출한다. V 채널에서 사용되는 임계값을 V 채널 임계값이라고 명명한다.In the process 140 of generating the second temporary image, only the S (Saturation) channel and the V (Value) channel are used except for the H-sensitive channel. Of course, the information of the H channel may be used in some cases. In FIG. 2, it is described that the maximum area and the minimum area of the S channel are extracted (142) in the HSV, which means a process of extracting a pixel having a first threshold value or more and a pixel having a second threshold value or less in the S channel. The first threshold value and the second threshold value used in the S channel are called an S channel threshold value. In the V-channel, a maximum area exceeding a specific reference threshold value is extracted. The threshold used in the V-channel is called the V-channel threshold.

전술한 YCbCgCr 임계값과 같이 S 채널 임계값 및 V 채널 임계값도 객체가 검출되는 환경 변수에 따라 달라질 수 있다. 예컨대, S 채널의 제1 임계값은 205, S 채널의 제2 임계값은 35, V 채널의 임계값은 190을 사용할 수 있다.Like the above-described YCbCgCr threshold value, the S-channel threshold value and the V-channel threshold value can also be changed according to the environment variable in which the object is detected. For example, the first threshold value of the S channel may be 205, the second threshold value of the S channel may be 35, and the threshold value of the V channel may be 190.

S 채널에 추출한 영상 및 V 채널에서 추출한 영상을 가산(AND) 연산하여 제2 임시 영상을 생성한다(144).
The second temporary image is generated by performing an AND operation on the image extracted from the S channel and the image extracted from the V channel (144).

이후 제1 임시 영상 및 제2 임시 영상을 결합(AND)한다(150). 제1 임시 영상을 통해 검출되는 객체와 제2 임시 영상을 통해 검출되는 객체를 조합하여 객체 검출 효과를 높이기 위한 것이다. 결합된 최종 영상을 기준으로 소스 영상에서 타겟 객체를 검출하게 된다.
Then, the first temporary image and the second temporary image are combined (AND) (150). An object detected through the first temporary image and an object detected through the second temporary image are combined to enhance the object detection effect. And the target object is detected from the source image based on the combined final image.

도 3은 영상에서 컬러 객체를 검출하는 방법에 대한 과정의 일 예이다.3 is an example of a process for a method of detecting a color object in an image.

(a) 과정은 배경화면과 마커를 부착한 손가락 영상을 입력받는 화면이고, (b) 과정은 입력된 영상을 RGB 정규화한 화면이다.(a) is a screen for receiving a background image and a finger image with a marker attached thereto, and (b) is a RGB normalized image of the input image.

(c) 과정은 정규화한 RGB 영상을 제1 임시 영상으로 변환하는 화면의 예이다. (c) 과정은 정규화한 RGB 영상을 YCbCgCr 영상으로 변환하는 과정(c-1), Cb, Cg 및 Cr 각 채널에서 일정한 임계값을 넘는 최대 영역을 추출하여(c-2) 이를 결합한 영상 또는 특정 채널의 영상을 이진화하는 과정(c-3) 및 이진화된 영상에서 노이즈를 제거하는 과정(c-4)을 포함할 수 있다.(c) is an example of a screen for converting a normalized RGB image into a first temporary image. (c), (c-1) converting the normalized RGB image into a YCbCgCr image, (c-2) extracting a maximum area exceeding a predetermined threshold value in each channel of Cb, Cg and Cr A process (c-3) of binarizing the image of the channel and a process (c-4) of removing noise from the binarized image.

(d) 과정은 정규화한 RGB 영상을 제2 임시 영상으로 변환하는 화면의 예이다. (d) 과정은 정규화한 RGB 영상을 HSV 영상으로 변환하는 과정(d-1), HSV 중 S 채널에서 최대 영역 및 최소 영역을 추출하는 과정(d-2), HSV 중 V 채널에서 최대 영역을 추출하는 과정(d-3) 및 S 채널 영상 및 V 채널 영상을 결합하는 과정(d-4)를 포함한다.(d) is an example of a screen for converting a normalized RGB image into a second temporary image. (d) is a process (d-1) of converting the normalized RGB image into an HSV image, (d-2) extracting a maximum area and a minimum area in the S channel among the HSVs, (D-3) of extracting the S-channel image and the V-channel image and (d-4) combining the S-channel image and the V-channel image.

(e) 과정은 최종적으로 제1 임시 영상 및 제2 임시 영상을 결합하는 과정이고, (f)는 제1 임시 영상 및 제2 임시 영상이 결합된 화면에서 객체를 검출하는 예이다.
(e) is a process of finally combining the first temporary image and the second temporary image, and (f) is an example of detecting an object on the screen in which the first temporary image and the second temporary image are combined.

도 4는 영상에서 컬러 객체를 검출하는 장치(500)에 대한 블록도의 예이다.4 is an example of a block diagram for an apparatus 500 for detecting a color object in an image.

영상에서 컬러 객체를 검출하는 장치(500)는 소스 영상을 입력받는 카메라(510), 소스 영상에 대한 YCbCgCr 영상 및 HSV 영상에서 각각 임계값을 이용하여 객체를 검출하고, 객체를 검출한 YCbCgCr 영상 및 HSV 영상을 결합하여 소스 영상에서 컬러 객체를 검출하는 소프트웨어를 저장하는 메모리 장치(520) 및 소프트웨어를 이용하여 소스 영상에서 적어도 하나의 컬러 객체를 검출하는 연산 장치(530)를 포함한다. An apparatus 500 for detecting a color object in an image detects an object using a threshold value in each of a camera 510 that receives a source image, a YCbCgCr image and a HSV image of a source image, a YCbCgCr image that detects an object, A memory device 520 for storing software that combines the HSV images to detect color objects in the source image, and a computing device 530 for detecting at least one color object in the source image using software.

도 4에서는 카메라를 통해 소스 영상을 입력받는 예를 도시한다. 영상에서 컬러 객체를 검출하는 장치(500)는 소스 영상에서 컬러 객체를 검출하기 위한 소프트웨어가 메모리 장치(520)에 저장된 형태이다. 영상에서 컬러 객체를 검출하는 장치(500)는 객체 검출을 위한 앱이 설치된 스마트폰과 같은 장치일 수도 있고, 객체 검출을 위한 임베디드 소프트웨어가 플래시 메모리 또는 ROM에 저장된 객체 검출 전용 장치일 수도 있다.FIG. 4 shows an example of receiving a source image through a camera. An apparatus 500 for detecting a color object in an image is a form in which software for detecting a color object in a source image is stored in a memory device 520. The device 500 for detecting a color object in an image may be a device such as a smart phone equipped with an app for object detection, or the embedded software for object detection may be an object detection only device stored in a flash memory or ROM.

객체 검출 소프트웨어(525)는 기본적으로 전술한 영상에서 컬러 객체를 검출하는 방법(100)을 수행하는 프로그램에 해당한다.The object detection software 525 basically corresponds to a program that performs a method 100 for detecting a color object in the above-described image.

연산 장치(530)는 메모리 장치(520)에 저장된 객체 검출 소프트웨어(525)를 구동하는 구성이다. 영상에서 컬러 객체를 검출하는 장치(500)는 카메라(510)에 입력된 소스 영상 및/또는 소스 영상에서 검출한 타겟 객체를 출력하는 디스플레이 장치(550)를 포함할 수 있다. 나아가 사용자로부터 타겟 객체에 대한 정보를 입력받는 인터페이스 장치(540)를 포함할 수도 있다. 사용자는 인터페이스 장치(540)를 통해 전술한 YCbCgCr 임계값, H 채널 임계값, V 채널 임계값 등을 입력할 수도 있다. 디스플레이 장치(550) 및 인터페이스 장치(540)는 컴퓨터 또는 모바일 단말 장치에서 사용되는 다양한 장치가 사용될 수 있다.The computing device 530 is a configuration for driving the object detection software 525 stored in the memory device 520. The apparatus 500 for detecting a color object in an image may include a display device 550 for outputting a source image input to the camera 510 and / or a target object detected from the source image. And an interface device 540 for receiving information about the target object from the user. The user may input the above-described YCbCgCr threshold value, H channel threshold value, V channel threshold value, and the like through the interface device 540. The display device 550 and the interface device 540 may be various devices used in a computer or a mobile terminal device.

연산 장치(530)는 소프트웨어를 이용하여 소스 영상을 RGB 정규화하고, 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상 및 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하고, 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출한다.The arithmetic operation unit 530 converts the normalized RGB image into a YCbCgCr image using the software to convert the first temporary image and the normalized RGB image into an HSV image, The second temporary image is generated, and the object is finally detected by combining the first temporary image and the second temporary image.

연산 장치(530)는 전술한 수학식 1과 같이 소스 영상의 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 소스 영상을 정규화한다.The arithmetic operation unit 530 normalizes the source image by dividing the value of each component by the sum of the values of the three RGB components for each of the R color value, the G color value, and the B color value of the source image, as shown in Equation (1) .

연산 장치(530)는 전술한 수학식 2 내지 수학식 4를 이용하여 정규화된 RGB 영상을 YCbCgCr 영상으로 변환한다. 이후 연산 장치(530)는 YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 기준 임계값 이상인 객체를 추출하고, 객체를 추출한 영상에 대한 이진화를 수행하여 제1 임시 영상을 생성한다.The arithmetic unit 530 converts the normalized RGB image into a YCbCgCr image using Equations (2) to (4). The arithmetic unit 530 then extracts an object having a reference threshold value or more in each of the chrominance channels Cb, Cg, and Cr in the YCbCgCr image, and binarizes the extracted image to generate a first temporary image.

연산 장치(530)는 정규화된 RGB 컬러 영상을 HSV 영상으로 변환하고, HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하고, HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하고, S 채널에 추출한 영상 및 V 채널에서 추출한 영상을 결합하여 제2 임시 영상을 생성한다.The arithmetic unit 530 converts the normalized RGB color image into an HSV image, extracts a pixel having a first threshold value or more and a pixel having a second threshold value or less in the S channel of the HSV image, And a second temporary image is generated by combining the image extracted from the S channel and the image extracted from the V channel.

연산 장치(530)는 최종적으로 제1 임시 영상 및 제2 임시 영상을 결합하여 타겟 객체를 검출한다.
The computing device 530 finally combines the first temporary image and the second temporary image to detect the target object.

도 5는 영상에서 복수의 컬러 객체를 검출하는 방법(200)에 대한 순서도의 예이다. 또한 도 6은 영상에서 복수의 컬러 객체를 검출한 예를 도시한다.5 is an example of a flowchart for a method 200 for detecting a plurality of color objects in an image. 6 shows an example in which a plurality of color objects are detected in an image.

영상에서 복수의 컬러 객체를 검출하는 방법(200)은 영상 처리 장치가 소스 영상을 입력받는 단계(210), 소스 영상에서 복수의 타겟 객체 영역을 선택하는 단계(220), 소스 영상을 RGB 정규화하는 단계(230), 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 타겟 객체가 검출된 제1 임시 영상을 생성하는 단계(240), 정규화된 RGB 영상을 HSV 영상으로 변환하여 타겟 객체가 검출된 제2 임시 영상을 생성하는 단계(250) 및 제1 임시 영상 및 제2 임시 영상을 결합하여 타겟 객체를 최종 검출하는 단계(260)를 포함한다.A method 200 for detecting a plurality of color objects in an image includes a step 210 of receiving a source image from an image processing apparatus, a step 220 of selecting a plurality of target object regions from a source image, A step 230 of transforming the normalized RGB image into a YCbCgCr image to generate a first temporary image in which a target object is detected 240, transforming the normalized RGB image into an HSV image, An image generating step 250 and a step 260 of combining the first temporary image and the second temporary image to finally detect the target object.

영상에서 복수의 컬러 객체를 검출하는 방법(200)은 전술한 영상에서 컬러 객체를 검출하는 방법(100)과 동일한 과정을 갖는다. 다만 소스 영상에서 복수의 객체를 검출할 수 있다는 점을 명확하게 설명하기 위한 것이다. 따라서 영상에서 컬러 객체를 검출하는 방법(100)에서 설명한 내용과 동일한 구성은 간략하게 설명하거나 설명을 생략한다. A method 200 for detecting a plurality of color objects in an image has the same process as the method 100 for detecting a color object in the image described above. However, it is intended to clearly show that a plurality of objects can be detected from a source image. Therefore, the same configuration as the method 100 for detecting a color object in an image will be briefly described or a description thereof will be omitted.

소스 영상에 존재하는 많은 객체 중에 사용자가 지정하는 특정한 객체를 검출한다. 검출 대상이 되는 객체를 타겟 객체라고 명명하였다. 210 단계에서 입력되는 소스 영상에는 많은 객체가 존재할 수 있다. 도 6을 살펴보면 5개의 손가락 끝에 서로 다른 색의 컬러 마커(marker)가 있다. 사용자는 입력되는 소스 영상에서 검출하고자 하는 컬러 객체인 타겟 객체를 선택할 수 있다. 정확하게 설명하면 소스 영상에서 타겟 객체가 위치한 영역을 선택하는 것이다(220).It detects a specific object specified by the user among many objects existing in the source image. The object to be detected is called the target object. There may be many objects in the source image input in operation 210. Referring to FIG. 6, there are color markers of different colors at five fingertips. The user can select a target object which is a color object to be detected from the input source image. To be more precise, the region in which the target object is located in the source image is selected (220).

사용자가 소스 영상에서 타겟 객체 영역을 선택하는 방식은 해당 타겟 객체 영역을 관심 영역으로 지정하는 방법을 사용할 수 있다. 예컨대, 이동 단말의 디스플레이 장치가 터치 패널이라면, 타겟 객체 영역을 터치하여 관심 영역으로 지정할 수 있다. 또는 사용자가 커서 등을 이용하여 복수의 타겟 객체 영역을 관심 영역으로 지정할 수도 있다. 나아가, 이미지 처리 기술을 이용하여 소스 영상에서 복수의 타겟 객체 영역을 추출할 수도 있을 것이다.A method of selecting a target object region from a source image by a user may use a method of designating the target object region as a region of interest. For example, if the display device of the mobile terminal is a touch panel, the target object area can be touched to designate the area as a region of interest. Alternatively, a user may designate a plurality of target object regions as a region of interest by using a cursor or the like. Furthermore, a plurality of target object regions may be extracted from the source image using an image processing technique.

이후 영상 처리 장치는 소스 영상을 RGB 정규화하고(230), 정규화된 RGB 영상을 YCbCgCr 변환하여 제1 임시 영상을 생성하고(240), 정규화된 RGB 영상을 HSV 변환하여 제2 임시 영상을 생성한다(250). 최종적으로 제1 임시 영상 및 제2 임시 영상을 결합하여 소스 영상에서 타게 객체를 검출하게 된다(260). 도 6은 5개의 컬러 타겟 객체를 검출한 예를 도시한다.
Thereafter, the image processing apparatus performs RGB normalization on the source image (230), YCbCgCr transforms the normalized RGB image to generate a first temporary image (240), and HSV-transforms the normalized RGB image to generate a second temporary image 250). Finally, the first temporary image and the second temporary image are combined to detect the target object in the source image (260). Fig. 6 shows an example of detecting five color target objects.

본 실시예 및 본 명세서에 첨부된 도면은 전술한 기술에 포함되는 기술적 사상의 일부를 명확하게 나타내고 있는 것에 불과하며, 전술한 기술의 명세서 및 도면에 포함된 기술적 사상의 범위 내에서 당업자가 용이하게 유추할 수 있는 변형 예와 구체적인 실시예는 모두 전술한 기술의 권리범위에 포함되는 것이 자명하다고 할 것이다.It should be noted that the present embodiment and the drawings attached hereto are only a part of the technical idea included in the above-described technology, and those skilled in the art will readily understand the technical ideas included in the above- It is to be understood that both variations and specific embodiments which can be deduced are included in the scope of the above-mentioned technical scope.

500 : 영상에서 컬러 객체를 검출하는 장치
510 : 카메라 520 : 메모리
525 : 객체 검출 소프트웨어 530 : 프로세서
540 : 인터페이스 장치 550 : 디스플레이 장치
500: a device for detecting a color object in an image
510: camera 520: memory
525: Object detection software 530:
540: Interface device 550: Display device

Claims (16)

영상 처리 장치가 영상에서 컬러 객체를 검출하는 방법에 있어서,
상기 영상 처리 장치가 소스 영상을 입력받는 단계;
상기 소스 영상을 RGB 정규화하는 단계;
상기 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하고, 상기 YCbCgCr 영상에서 객체를 검출한 제1 임시 영상을 생성하는 단계;
상기 정규화된 RGB 영상을 HSV 영상으로 변환하고, 상기 HSV 영상에서 객체를 검출한 제2 임시 영상을 생성하는 단계; 및
상기 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출하는 단계를 포함하되,
상기 제1 임시 영상을 생성하는 단계 및 상기 제2 임시 영상을 생성하는 단계는 순서에 관계없이 순차적으로 수행되거나, 병렬적으로 수행되는 영상에서 컬러 객체를 검출하는 방법.
A method of detecting a color object in an image by an image processing apparatus,
Receiving the source image from the image processing apparatus;
Performing RGB normalization on the source image;
Converting the normalized RGB image into a YCbCgCr image and generating a first temporary image in which an object is detected in the YCbCgCr image;
Converting the normalized RGB image into an HSV image and generating a second temporary image in which the object is detected in the HSV image; And
And finally detecting the object by combining the first temporary image and the second temporary image,
Wherein the step of generating the first temporary image and the step of generating the second temporary image are sequentially performed irrespective of the order, or a method of detecting a color object in an image performed in parallel.
제1항에 있어서,
상기 정규화하는 단계는
상기 영상 처리 장치가 상기 소스 영상에서 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 정규화하는 영상에서 컬러 객체를 검출하는 방법.
The method according to claim 1,
The normalizing step
Wherein the image processing apparatus normalizes the value of each component by the sum of the values of the three RGB components for each of the R color value, the G color value, and the B color value in the source image.
제1항에 있어서,
상기 제1 임시 영상을 생성하는 단계는
상기 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하는 단계;
상기 YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 임계값 이상인 객체를 추출하는 단계;
상기 객체를 추출 상기 Cb, Cg 및 Cr 중 적어도 하나의 영상에 대한 이진화를 수행하는 단계; 및
상기 이진화를 수행한 영상이 복수인 경우 각 영상에 대한 결합을 수행하는 단계를 포함하는 영상에서 컬러 객체를 검출하는 방법.
The method according to claim 1,
The step of generating the first temporary image
Converting the normalized RGB image into a YCbCgCr image;
Extracting an object having a threshold value or more in each color difference channel of Cb, Cg and Cr in the YCbCgCr image;
Extracting the object, performing binarization on at least one image of Cb, Cg, and Cr; And
And performing combining for each image when the binarized images are a plurality of images.
제3항에 있어서,
상기 변환하는 단계는
상기 영상 처리 장치가 상기 RGB 영상에서 B 색차 정보(Cb), G 색차 정보(Cg) 및 R 색차 정보(Cr)을 아래의 수식과 같이 추출하는 영상에서 컬러 객체를 검출하는 방법.
Figure 112014064005475-pat00016
,
Figure 112014064005475-pat00017
,
Figure 112014064005475-pat00018

(상기 수식에서 R, G 및 B는 각각 정규화가 수행된 RGB 성분값임)
The method of claim 3,
The converting step
Wherein the image processing apparatus extracts B color difference information (Cb), G color difference information (Cg), and R color difference information (Cr) from the RGB image as shown in the following equation.
Figure 112014064005475-pat00016
,
Figure 112014064005475-pat00017
,
Figure 112014064005475-pat00018

(R, G, and B in the above formula are the values of the RGB component subjected to the normalization, respectively)
제4항에 있어서,
임계값 이상인 객체를 추출하는 단계는
상기 Cb, Cg 및 Cr 값에 대하여 기준 임계값 이상인 것만을 추출하는 영상에서 컬러 객체를 검출하는 방법.
5. The method of claim 4,
The step of extracting an object having a threshold value or more
And extracting only the Cb, Cg, and Cr values that are greater than or equal to a reference threshold value.
제1항에 있어서,
상기 제2 임시 영상을 생성하는 단계는
상기 정규화된 RGB 영상을 HSV 영상으로 변환하는 단계;
상기 HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하는 단계;
상기 HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하는 단계; 및
상기 S 채널에 추출한 영상 및 상기 V 채널에서 추출한 영상을 결합하여 상기 제2 임시 영상을 생성하는 단계를 포함하는 영상에서 컬러 객체를 검출하는 방법.
The method according to claim 1,
The step of generating the second temporary image
Converting the normalized RGB image into an HSV image;
Extracting a pixel having a first threshold value or more and a pixel having a second threshold value or less in an S channel of the HSV image;
Extracting a pixel in the V channel of the HSV image that is greater than or equal to a reference threshold value; And
And combining the extracted image in the S channel and the extracted image in the V channel to generate the second temporary image.
소스 영상을 입력받는 카메라;
상기 소스 영상에 대한 YCbCgCr 영상 및 HSV 영상에서 각각 임계값을 이용하여 객체를 검출하고, 상기 객체를 검출한 YCbCgCr 영상 및 HSV 영상을 결합하여 상기 소스 영상에서 컬러 객체를 검출하는 소프트웨어를 저장하는 메모리 장치; 및
상기 소프트웨어를 이용하여 상기 소스 영상에서 적어도 하나의 컬러 객체를 검출하는 연산 장치를 포함하는 영상에서 컬러 객체를 검출하는 장치.
A camera for receiving a source image;
A memory device for storing software for detecting an object using a threshold value in a YCbCgCr image and an HSV image for the source image, and detecting a color object in the source image by combining the YCbCgCr image and the HSV image, ; And
And an arithmetic unit for detecting at least one color object in the source image using the software.
제7항에 있어서,
상기 연산 장치는
상기 소프트웨어를 이용하여 상기 소스 영상을 RGB 정규화하고,
상기 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하여 객체가 검출된 제1 임시 영상 및 상기 정규화된 RGB 영상을 HSV 영상으로 변환하여 객체가 검출된 제2 임시 영상을 생성하고, 상기 제1 임시 영상 및 제2 임시 영상을 결합하여 객체를 최종 검출하는 영상에서 컬러 객체를 검출하는 장치.
8. The method of claim 7,
The computing device
Performing RGB normalization on the source image using the software,
Converting the normalized RGB image into a YCbCgCr image and converting the first temporary image and the normalized RGB image into an HSV image by detecting the object to generate a second temporary image in which the object is detected, A device for detecting a color object in an image that finally detects an object by combining temporary images.
제8항에 있어서,
상기 연산 장치는
상기 소스 영상의 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 정규화하는 영상에서 컬러 객체를 검출하는 장치.
9. The method of claim 8,
The computing device
Wherein the color image is normalized by dividing a value of each component by the sum of values of three RGB components for each of the R color value, the G color value, and the B color value of the source image.
제8항에 있어서,
상기 연산 장치는
상기 정규화된 RGB 영상을 상기 YCbCgCr 영상으로 변환하고, 상기 YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 기준 임계값 이상인 객체를 추출하고, 상기 객체를 추출한 영상에 대한 이진화를 수행하여 상기 제1 임시 영상을 생성하는 영상에서 컬러 객체를 검출하는 장치.
9. The method of claim 8,
The computing device
Extracting a normalized RGB image into the YCbCgCr image, extracting an object having a reference threshold value or more in each color difference channel of Cb, Cg, and Cr in the YCbCgCr image, performing binarization on the extracted image, An apparatus for detecting a color object in an image generating a temporary image.
제10항에 있어서,
상기 연산 장치는
상기 RGB 영상에서 B 색차 정보(Cb), G 색차 정보(Cg) 및 R 색차 정보(Cr)에 대하여 아래의 수식을 이용하여 상기 RGB 영상을 상기 YCbCgCr 영상으로 변환하는 영상에서 컬러 객체를 검출하는 장치.
Figure 112014064005475-pat00019

Figure 112014064005475-pat00020

Figure 112014064005475-pat00021

(상기 수식에서 R, G 및 B는 각각 정규화가 수행된 RGB 성분값임)
11. The method of claim 10,
The computing device
A device for detecting a color object in an image for converting the RGB image into the YCbCgCr image using the following equation with respect to B color difference information Cb, G color difference information Cg, and R color difference information Cr in the RGB image, .
Figure 112014064005475-pat00019

Figure 112014064005475-pat00020

Figure 112014064005475-pat00021

(R, G, and B in the above formula are the values of the RGB component subjected to the normalization, respectively)
제8항에 있어서,
상기 연산 장치는
상기 정규화된 RGB 영상을 HSV 영상으로 변환하고, 상기 HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하고, 상기 HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하고, 상기 S 채널에 추출한 영상 및 상기 V 채널에서 추출한 영상을 결합하여 상기 제2 임시 영상을 생성하는 영상에서 컬러 객체를 검출하는 장치.
9. The method of claim 8,
The computing device
Extracting a pixel having a first threshold value or more and a pixel having a second threshold value or less from the S channel of the HSV image and extracting a pixel having a reference threshold value or more from the V channel of the HSV image; And combining the image extracted in the S channel and the image extracted in the V channel to generate the second temporary image.
영상 처리 장치가 영상에서 복수의 컬러 객체를 검출하는 방법에 있어서,
상기 영상 처리 장치가 복수의 타겟 객체가 포함된 소스 영상을 입력받는 단계;
상기 영상 처리 장치가 상기 소스 영상의 R 컬러값, G 컬러값 및 B 컬라값 각각에 대하여 각 성분의 값을 RGB 세 개의 성분의 값의 합으로 나누어 상기 소스 영상을 정규화하는 단계; 및
상기 영상 처리 장치가 상기 정규화된 RGB 영상을 YCbCgCr 영상으로 변환하고, 상기 YCbCgCr 영상에서 객체를 검출한 제1 임시 영상 및 상기 정규화된 RGB 영상을 HSV 영상으로 변환하고, 상기 HSV 영상에서 객체를 검출한 제2 임시 영상을 생성하고, 상기 제1 임시 영상 및 제2 임시 영상을 결합하여 상기 타겟 객체를 검출하는 단계를 포함하는 영상에서 복수의 컬러 객체를 검출하는 방법.
A method of detecting a plurality of color objects in an image by an image processing apparatus,
Receiving a source image including a plurality of target objects by the image processing apparatus;
Normalizing the source image by dividing the value of each component by the sum of the values of three RGB components for each of the R color value, the G color value, and the B color value of the source image; And
The image processing apparatus converts the normalized RGB image into a YCbCgCr image, converts the first temporary image and the normalized RGB image, which have detected the object in the YCbCgCr image, into an HSV image, and detects an object in the HSV image Generating a second temporary image, and combining the first temporary image and the second temporary image to detect the target object.
제13항에 있어서,
상기 검출하는 단계에서
상기 영상 처리 장치가 상기 정규화된 RGB 영상을 상기 YCbCgCr 영상으로 변환하고, 상기 YCbCgCr 영상에서 Cb, Cg 및 Cr 각각의 색차 채널에서 기준 임계값 이상인 객체를 추출하고, 상기 객체를 추출한 영상에 대한 이진화를 수행하여 상기 제1 임시 영상을 생성하는 영상에서 복수의 컬러 객체를 검출하는 방법.
14. The method of claim 13,
In the detecting step
The image processing apparatus converts the normalized RGB image into the YCbCgCr image, extracts an object having a reference threshold value or more from each of the color difference channels Cb, Cg, and Cr in the YCbCgCr image, and binarizes the extracted image And generating a first temporary image by performing a predetermined process on the detected first color image.
제13항에 있어서,
상기 검출하는 단계에서
상기 영상 처리 장치가 상기 정규화된 RGB 영상을 HSV 영상으로 변환하고, 상기 HSV 영상의 S 채널에서 제1 임계값 이상인 픽셀과 제2 임계값 이하인 픽셀을 추출하고, 상기 HSV 영상의 V 채널에서 기준 임계값 이상인 픽셀을 추출하고, 상기 S 채널에 추출한 영상 및 상기 V 채널에서 추출한 영상을 결합하여 상기 제2 임시 영상을 생성하는 영상에서 복수의 컬러 객체를 검출하는 방법.
14. The method of claim 13,
In the detecting step
Wherein the image processing apparatus converts the normalized RGB image into an HSV image, extracts a pixel having a first threshold value or more and a pixel less than a second threshold value in the S channel of the HSV image, And combining the image extracted in the S channel and the image extracted in the V channel to generate the second temporary image.
제13항에 있어서,
상기 타겟 객체를 검출하는 단계 전에 상기 영상 처리 장치가 상기 소스 영상에서 복수의 타겟 객체가 위치하는 타겟 객체 영역을 선택하는 정보를 입력받는 단계를 더 포함하고,
상기 타겟 객체를 검출하는 단계에서는 상기 선택된 타겟 객체 영역에 위치하는 객체만을 검출하는 영상에서 복수의 컬러 객체를 검출하는 방법.
14. The method of claim 13,
Further comprising receiving information for selecting a target object region in which a plurality of target objects are located in the source image, before the step of detecting the target object,
Wherein the detecting of the target object comprises detecting only the object located in the selected target object region.
KR20140036530A 2014-03-28 2014-03-28 Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image KR101465933B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20140036530A KR101465933B1 (en) 2014-03-28 2014-03-28 Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20140036530A KR101465933B1 (en) 2014-03-28 2014-03-28 Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020140084986A Division KR101465940B1 (en) 2014-07-08 2014-07-08 Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image

Publications (1)

Publication Number Publication Date
KR101465933B1 true KR101465933B1 (en) 2014-11-26

Family

ID=52291745

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20140036530A KR101465933B1 (en) 2014-03-28 2014-03-28 Detecting method for color object in image, detecting apparatus for color object in image and detecting method for a plurality of color object in image

Country Status (1)

Country Link
KR (1) KR101465933B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020101431A1 (en) * 2018-11-15 2020-05-22 주식회사 인트로메딕 Method for rendering three-dimensional image, image processing device using said method, image capturing device interworking with said image processing device, method for capturing image by said image capturing device, and system for rendering three-dimensional image

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010093266A (en) * 1999-01-27 2001-10-27 에를링 블로메, 타게 뢰브그렌 A portable multi-band communication device, and a method for determining a charge consumption thereof
JP2008271556A (en) 2007-04-17 2008-11-06 Toshiba Corp Image correction system and method
JP5257615B2 (en) 2009-06-04 2013-08-07 株式会社リコー Color conversion table generation apparatus, color conversion table generation method, and image processing apparatus
KR20130111021A (en) * 2012-03-30 2013-10-10 경북대학교 산학협력단 Device and method for processing image

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010093266A (en) * 1999-01-27 2001-10-27 에를링 블로메, 타게 뢰브그렌 A portable multi-band communication device, and a method for determining a charge consumption thereof
JP2008271556A (en) 2007-04-17 2008-11-06 Toshiba Corp Image correction system and method
JP5257615B2 (en) 2009-06-04 2013-08-07 株式会社リコー Color conversion table generation apparatus, color conversion table generation method, and image processing apparatus
KR20130111021A (en) * 2012-03-30 2013-10-10 경북대학교 산학협력단 Device and method for processing image

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020101431A1 (en) * 2018-11-15 2020-05-22 주식회사 인트로메딕 Method for rendering three-dimensional image, image processing device using said method, image capturing device interworking with said image processing device, method for capturing image by said image capturing device, and system for rendering three-dimensional image

Similar Documents

Publication Publication Date Title
Braham et al. Semantic background subtraction
Sanin et al. Shadow detection: A survey and comparative evaluation of recent methods
CN106254933B (en) Subtitle extraction method and device
US8792722B2 (en) Hand gesture detection
US8750573B2 (en) Hand gesture detection
WO2017092431A1 (en) Human hand detection method and device based on skin colour
US9639943B1 (en) Scanning of a handheld object for 3-dimensional reconstruction
US10620826B2 (en) Object selection based on region of interest fusion
KR100845969B1 (en) The Extraction method of moving object and the apparatus thereof
CN110084204B (en) Image processing method and device based on target object posture and electronic equipment
JP6157165B2 (en) Gaze detection device and imaging device
CN108563651B (en) Multi-video target searching method, device and equipment
JP6779688B2 (en) Image processing equipment, image processing method, computer program
CN112381104A (en) Image identification method and device, computer equipment and storage medium
CN113011403B (en) Gesture recognition method, system, medium and device
JP5887264B2 (en) Object recognition apparatus, method, program, and computer-readable medium storing the software
CN110858277A (en) Method and device for obtaining attitude classification model
KR101791603B1 (en) Detecting method for color object in image using noise and detecting system for light emitting apparatus using noise
JP2007052609A (en) Hand area detection device, hand area detection method and program
KR101344851B1 (en) Device and Method for Processing Image
KR101833943B1 (en) Method and system for extracting and searching highlight image
JP2017220098A (en) Image processing device, image processing method, image processing program and image recognition system
JP2016095701A (en) Image processor, image processing method, and program
CN111898463B (en) Smoke and fire detection and identification method and device, storage medium and electronic device
KR101517538B1 (en) Apparatus and method for detecting importance region using centroid weight mask map and storage medium recording program therefor

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171027

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180917

Year of fee payment: 5