KR20220138589A - Systme for recogniting label using infrared and cisible light camera and method thereof - Google Patents

Systme for recogniting label using infrared and cisible light camera and method thereof Download PDF

Info

Publication number
KR20220138589A
KR20220138589A KR1020210044424A KR20210044424A KR20220138589A KR 20220138589 A KR20220138589 A KR 20220138589A KR 1020210044424 A KR1020210044424 A KR 1020210044424A KR 20210044424 A KR20210044424 A KR 20210044424A KR 20220138589 A KR20220138589 A KR 20220138589A
Authority
KR
South Korea
Prior art keywords
label
conveyor
inspection object
wavelength
visible light
Prior art date
Application number
KR1020210044424A
Other languages
Korean (ko)
Other versions
KR102617048B1 (en
Inventor
김영덕
곽동훈
손국진
Original Assignee
재단법인대구경북과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 재단법인대구경북과학기술원 filed Critical 재단법인대구경북과학기술원
Priority to KR1020210044424A priority Critical patent/KR102617048B1/en
Publication of KR20220138589A publication Critical patent/KR20220138589A/en
Application granted granted Critical
Publication of KR102617048B1 publication Critical patent/KR102617048B1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65C—LABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C9/00—Details of labelling machines or apparatus
    • B65C9/40—Controls; Safety devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H04N5/2258—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65C—LABELLING OR TAGGING MACHINES, APPARATUS, OR PROCESSES
    • B65C9/00—Details of labelling machines or apparatus
    • B65C9/40—Controls; Safety devices
    • B65C2009/402—Controls; Safety devices for detecting properties or defects of labels
    • B65C2009/407—Controls; Safety devices for detecting properties or defects of labels after labelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

The present invention relates to a system and a method for recognizing a label using an infrared ray and visible light camera. According to the present invention, the label recognizing method using the label recognizing system comprises the steps of: moving an object to be inspected through a conveyor; scanning the moving conveyor using an IR camera installed with a gap on an upper side of the conveyor, and measuring the wavelength of reflected light; comparing the measured wavelength with the intrinsic wavelength of the pre-stored object to be inspected, and recognizing the object to be inspected; comparing the measured wavelength with the intrinsic wavelength of a pre-stored label and detecting a label attached to the object to be inspected; and if the label is detected, photographing the label attached to the object to be inspected using a visible light camera placed with a gap on the upper side of the conveyor. According to the present invention, as described above, the presence or absence of a label attached to various products including imported food, which is manually attached, and the attachment position of the label can be detected accurately, and the present invention can be applied to a conveyor in a factory to detect whether a label has been attached. Moreover, the recognizing and processing speed of the visible light camera can be improved by recognizing the presence or absence of an object using infrared rays and determining the photographing time of the visible light camera.

Description

적외선 및 가시광 카메라를 이용한 라벨 인식 시스템 및 그 방법{SYSTME FOR RECOGNITING LABEL USING INFRARED AND CISIBLE LIGHT CAMERA AND METHOD THEREOF}Label recognition system and method using infrared and visible light camera

본 발명은 적외선 및 가시광 카메라를 이용한 라벨 인식 시스템 및 그 방법에 관한 것으로, 수입 식품의 한글 표시라벨을 인식하고 촬영하기 위한 적외선 및 가시광 카메라를 이용한 라벨 인식 시스템 및 그 방법에 관한 것이다.The present invention relates to a label recognition system and method using an infrared and visible light camera, and to a label recognition system and method using an infrared and visible light camera for recognizing and photographing Korean labels on imported food.

일반적으로 수입 식품은 각국의 현지어로 표기되어 있으므로 식품위생법에 따라 내용물 정보를 한글로 표기하여 별도의 라벨을 부착하여 유통한다. In general, imported food is written in the local language of each country, so in accordance with the Food Sanitation Act, information on the contents is written in Korean and a separate label is attached and distributed.

그러나, 이러한 별도의 라벨링은 대부분 스티커 형태로 사람이 수작업으로 부착하는 경우가 많아서, 미부착 혹은 오기입된 라벨의 부착 등의 불량 부착이 종종 발생될 수 있다. However, since the separate labeling is mostly manually attached in the form of a sticker, poor attachment such as attachment of an unassembled or erroneously written label may often occur.

이러한 작업의 자동화를 위해, 머신 비전 장치를 이용하여 카메라를 통해 이상 부착 여부를 검사할 수 있으나, 라벨의 부착 작업을 대부분 사람이 수작업으로 수행하므로 특정인에 따라 부착 위치가 일치하지 않아 카메라를 이용하여 제품의 촬영 시점을 판단하기 어렵다는 문제점이 있다.For automation of these tasks, it is possible to check whether there is an abnormality through a camera using a machine vision device. However, since most people perform the attaching of labels manually, the attaching position does not match depending on a specific person, so it is possible to use a camera to There is a problem in that it is difficult to determine the shooting time of the product.

이러한 문제점을 해결하기 위해 적외선을 이용하여 정확한 시점에 라벨을 촬영할 수 있는 시스템이 필요하게 되었다.In order to solve this problem, a system capable of photographing a label at an accurate time using infrared rays is needed.

본 발명의 배경이 되는 기술은 한국공개특허 제10-2014-0128716호(2014.11.06. 공개)에 개시되어 있다.The technology that is the background of the present invention is disclosed in Korean Patent Application Laid-Open No. 10-2014-0128716 (published on November 6, 2014).

본 발명이 이루고자 하는 기술적 과제는 수입 식품의 한글 표시라벨을 인식하고 촬영하기 위한 적외선 및 가시광 카메라를 이용한 라벨 인식 시스템 및 그 방법을 제공하기 위한 것이다.An object of the present invention is to provide a label recognition system and method using infrared and visible light cameras for recognizing and photographing Korean label labels of imported foods.

이러한 기술적 과제를 이루기 위한 본 발명의 실시예에 따르면, 라벨 인식 시스템을 이용한 라벨 인식 방법에 있어서, 컨베이어를 통해 검사 대상물을 이동시키는 단계, 상기 컨베이어의 상측에 이격되어 설치된 IR 카메라를 이용하여 이동중인 상기 컨베이어를 스캔하여 반사되는 파장을 측정하는 단계, 상기 측정된 파장과 기 저장된 검사 대상물의 고유 파장을 비교하여 상기 검사 대상물을 인식하는 단계, 상기 측정된 파장과 기 저장된 라벨의 고유 파장을 비교하여 상기 검사 대상물에 부착된 라벨을 검출하는 단계, 그리고 상기 라벨이 검출되면 상기 컨베이어의 상측에 이격되어 위치하는 가시광 카메라를 이용하여 상기 검사 대상물에 부착된 라벨을 촬영하는 단계를 포함한다.According to an embodiment of the present invention for achieving this technical problem, in a label recognition method using a label recognition system, moving an inspection object through a conveyor, moving using an IR camera installed spaced apart from the upper side of the conveyor Measuring the reflected wavelength by scanning the conveyor, recognizing the inspection object by comparing the measured wavelength with the intrinsic wavelength of the pre-stored inspection object, comparing the measured wavelength and the intrinsic wavelength of the pre-stored label detecting a label attached to the object to be inspected; and when the label is detected, photographing the label attached to the object to be inspected using a visible light camera spaced apart from the upper side of the conveyor.

상기 검사 대상물을 인식하는 단계는, 상기 측정된 파장과 상기 검사 대상물의 고유 파장의 차이 값이 기준 값 이하이면 상기 컨베이어에 상기 검사 대상물이 존재하는 것으로 인식할 수 있다.In the recognizing of the inspection object, when a difference value between the measured wavelength and the intrinsic wavelength of the inspection object is less than or equal to a reference value, it may be recognized that the inspection object is present on the conveyor.

상기 라벨을 검출하는 단계는, 상기 측정된 파장과 상기 라벨의 고유 파장의 차이 값이 기준 값 이하이면 상기 검사 대상물에 상기 라벨이 부착된 것으로 판단할 수 있다.In the detecting of the label, if the difference between the measured wavelength and the intrinsic wavelength of the label is less than or equal to a reference value, it may be determined that the label is attached to the object to be inspected.

상기 검사 대상물에 부착된 라벨을 촬영하는 단계는, 상기 라벨이 검출된 시점으로부터 기준 시간이 경과한 시점에 상기 가시광 카메라의 하측에 위치하는 상기 검사 대상물을 촬영할 수 있다.The photographing of the label attached to the inspection object may include photographing the inspection object located below the visible light camera when a reference time elapses from the time when the label is detected.

상기 기준 시간은, 상기 컨베이어의 이동 방향에 대응되는 상기 라벨의 길이와 상기 컨베이어의 이동 속도에 따라 결정될 수 있다.The reference time may be determined according to the length of the label corresponding to the moving direction of the conveyor and the moving speed of the conveyor.

상기 검사 대상물에 부착된 라벨을 촬영하는 단계는, 상기 컨베이어를 통해 이동 중인 라벨이 상기 컨베이어 상의 가상의 영역에 포함되면 상기 가시광 카메라를 이용하여 상기 검사 대상물에 부착된 라벨을 촬영할 수 있다.In the step of photographing the label attached to the inspection object, when the label moving through the conveyor is included in the virtual area on the conveyor, the label attached to the inspection object may be photographed using the visible light camera.

상기 라벨이 검출되지 않으면 외부로 알람을 제공하는 단계를 더 포함할 수 있다.The method may further include providing an alarm to the outside if the label is not detected.

상기 IR 카메라와 상기 가시광 카메라는 일체화되어 설치될 수 있다.The IR camera and the visible light camera may be integrally installed.

본 발명의 다른 실시예에 따르면, 검사 대상물에 부착된 라벨을 인식하기 위한 라벨 인식 시스템에 있어서, 컨베이어의 상측에 이격되어 설치되며, 이동중인 상기 컨베이어를 스캔하여 반사되는 파장을 측정하는 IR 카메라, 상기 측정된 파장과 기 저장된 검사 대상물의 고유 파장을 비교하여 상기 검사 대상물을 인식하고, 상기 측정된 파장과 기 저장된 라벨의 고유 파장을 비교하여 상기 검사 대상물에 부착된 라벨을 검출하는 제어장치, 그리고 상기 컨베이어의 상측에 이격되어 설치되며, 상기 라벨이 검출되면 상기 검사 대상물에 부착된 라벨을 촬영하는 가시광 카메라를 포함한다.According to another embodiment of the present invention, in a label recognition system for recognizing a label attached to an object to be inspected, the IR camera is installed spaced apart from the upper side of the conveyor, and measures the reflected wavelength by scanning the moving conveyor; A control device for recognizing the inspection object by comparing the measured wavelength and the stored natural wavelength of the inspection object, and detecting a label attached to the inspection object by comparing the measured wavelength and the stored natural wavelength of the label, and It is installed spaced apart from the upper side of the conveyor, and includes a visible light camera for photographing the label attached to the inspection object when the label is detected.

이와 같이 본 발명에 따르면, 수작업으로 부착되는 수입 식품을 포함한 각종 제품의 라벨의 부착 유무 및 부착위치를 정확히 검출할 수 있으며, 공장 내 컨베이어에 적용하여 라벨의 부착 여부를 검출할 수 있다.As described above, according to the present invention, it is possible to accurately detect whether labels are attached and where they are attached to various products, including imported foods, which are manually attached, and it is possible to detect whether labels are attached by applying to a conveyor in a factory.

또한, 적외선을 이용하여 객체의 유무 및 위치를 인식하여 가시광 카메라의 촬영시점을 결정함으로써, 가시광 카메라의 인식 및 처리 속도를 향상시킬 수 있다.In addition, by recognizing the presence and location of an object using infrared rays to determine a photographing time of the visible light camera, the recognition and processing speed of the visible light camera can be improved.

도 1은 본 발명의 실시예에 따른 라벨 인식 시스템을 설명하기 위한 구성도이다.
도 2는 본 발명의 실시예에 따른 라벨 인식 시스템을 이용한 라벨 인식 방법을 설명하기 위한 순서도이다.
도 3은 도 2의 S210 단계를 설명하기 위한 도면이다.
도 4는 본 발명의 실시예에 따른 IR 카메라를 설명하기 위한 도면이다.
도 5는 본 발명의 실시예에 따른 물체별 적외선 파장별 반사율을 측정한 예시를 나타낸 도면이다.
도 6은 도 2의 S230 단계를 설명하기 위한 도면이다.
도 7a 및 도 7b은 도 2의 S240 단계를 설명하기 위한 도면이다.
도 8은 도 2의 S250 단계를 설명하기 위한 도면이다.
도 9는 본 발명의 실시예에 따른 가시광 카메라를 통해 촬영된 라벨의 예시도이다.
도 10은 본 발명의 실시예에 따른 가시광 카메라의 가상의 영역을 나타낸 예시도이다.1 is a configuration diagram for explaining a label recognition system according to an embodiment of the present invention.
2 is a flowchart illustrating a label recognition method using a label recognition system according to an embodiment of the present invention.
FIG. 3 is a diagram for explaining step S210 of FIG. 2 .
4 is a view for explaining an IR camera according to an embodiment of the present invention.
5 is a view showing an example of measuring the reflectance of each infrared wavelength for each object according to an embodiment of the present invention.
FIG. 6 is a diagram for explaining step S230 of FIG. 2 .
7A and 7B are diagrams for explaining step S240 of FIG. 2 .
FIG. 8 is a diagram for explaining step S250 of FIG. 2 .
9 is an exemplary view of a label photographed through a visible light camera according to an embodiment of the present invention.
10 is an exemplary diagram illustrating a virtual area of a visible light camera according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시 예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art can easily carry out the present invention. However, the present invention may be embodied in various different forms and is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part "includes" a certain component, it means that other components may be further included, rather than excluding other components, unless otherwise stated.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Then, with reference to the accompanying drawings, embodiments of the present invention will be described in detail so that those of ordinary skill in the art to which the present invention pertains can easily implement them.

도 1은 본 발명의 실시예에 따른 라벨 인식 시스템을 설명하기 위한 구성도이다.1 is a configuration diagram for explaining a label recognition system according to an embodiment of the present invention.

도 1에서 나타낸 것처럼, 본 발명의 실시예에 따른 라벨 인식 시스템(100)은 IR 카메라(110), 제어장치(120), 가시광 카메라(130) 및 알람장치(140)를 포함한다.As shown in FIG. 1 , the label recognition system 100 according to an embodiment of the present invention includes an IR camera 110 , a control device 120 , a visible light camera 130 , and an alarm device 140 .

먼저, 검사 대상물은 컨베이어 상에서 적재되어 이동되는 제품으로서, 평면형으로 구현될 수 있다. 또한, 본 발명의 실시예에 따른 검사 대상물은 금속, 플라스틱, 박스형태로 이루어지며, 라벨 인식 시스템(100)을 통해 상측면에 존재하는 라벨을 인식 및 촬영하기 위한 대상물을 나타낸다.First, the inspection object is a product that is loaded and moved on a conveyor, and may be implemented in a flat shape. In addition, the inspection object according to an embodiment of the present invention is made of metal, plastic, and box shape, and represents an object for recognizing and photographing a label present on the upper side through the label recognition system 100 .

IR 카메라(110)는 컨베이어의 상측에 이격되어 설치되며, 이동중인 컨베이어를 스캔하여 반사되는 파장을 측정한다.The IR camera 110 is installed to be spaced apart from the upper side of the conveyor, and measures the reflected wavelength by scanning the moving conveyor.

여기서, IR 카메라(110)는 발광부를 통해 적외선을 방사하고, 수광부를 통해 객체 표면에서 반사되는 적외선의 반사율 또는 반사되는 파장의 세기를 측정한다.Here, the IR camera 110 radiates infrared rays through the light emitting unit and measures the reflectance of infrared rays reflected from the object surface or the intensity of the reflected wavelength through the light receiving unit.

이때, 적외선 파장의 반사율 또는 반사되는 파장의 세기는 비닐, 종이 또는 고무와 같이 재질에 따라 변경된다.In this case, the reflectance of the infrared wavelength or the intensity of the reflected wavelength is changed according to a material such as vinyl, paper, or rubber.

다음으로, 제어장치(120)는 측정된 파장과 기 저장된 검사 대상물의 고유 파장을 비교하여 검사 대상물을 인식한다.Next, the control device 120 recognizes the inspection object by comparing the measured wavelength and the pre-stored natural wavelength of the inspection object.

여기서, 측정된 파장과 검사 대상물의 고유 파장의 차이 값이 기준 값 이하이면, 제어장치(120)는 컨베이어에 검사 대상물이 존재하는 것으로 인식한다.Here, when the difference value between the measured wavelength and the intrinsic wavelength of the object to be inspected is less than or equal to the reference value, the controller 120 recognizes that the object to be inspected is present on the conveyor.

또한, 제어장치(120)는 측정된 파장과 기 저장된 라벨의 고유 파장을 비교하여 검사 대상물에 부착된 라벨을 검출한다.In addition, the control device 120 detects the label attached to the test object by comparing the measured wavelength and the intrinsic wavelength of the pre-stored label.

즉, 측정된 파장과 라벨의 고유 파장의 차이 값이 기준 값 이하이면, 제어장치(120)는 검사 대상물에 라벨이 부착된 것으로 판단한다.That is, if the difference value between the measured wavelength and the intrinsic wavelength of the label is less than or equal to the reference value, the control device 120 determines that the label is attached to the object to be inspected.

다음으로, 가시광 카메라(130)는 컨베이어의 상측에 이격되어 설치되며, 라벨이 검출되면 검사 대상물에 부착된 라벨을 촬영한다.Next, the visible light camera 130 is installed to be spaced apart from the upper side of the conveyor, and when a label is detected, the label attached to the object to be inspected is photographed.

또한, 가시광 카메라(130)는 컨베이어를 통해 이동 중인 라벨이 컨베이어 상의 가상의 영역에 포함되면 검사 대상물에 부착된 라벨을 촬영한다.In addition, the visible light camera 130 photographs the label attached to the object to be inspected when the label moving through the conveyor is included in the virtual area on the conveyor.

이때, 가시광 카메라(130)는 미러리스, DSLR 및 필름 카메라와 같이 가시광 영역의 사진 또는 영상을 촬영할 수 있는 카메라를 의미한다.In this case, the visible light camera 130 refers to a camera capable of taking pictures or images in the visible light region, such as mirrorless, DSLR, and film cameras.

그리고, IR 카메라(110)와 가시광 카메라(130)는 일체화되어 설치된다.In addition, the IR camera 110 and the visible light camera 130 are integrally installed.

다음으로, 알람장치(140)는 라벨이 검출되지 않으면 제어장치(120)로부터 경고 메시지 또는 경고음을 발생시키는 제어신호를 입력받아 경고 메시지 또는 경고음을 발생시킨다.Next, the alarm device 140 generates a warning message or a warning sound by receiving a control signal for generating a warning message or a warning sound from the control device 120 when the label is not detected.

그리고, IR 카메라(110), 제어장치(120), 가시광 카메라(130) 및 알람장치(140)는 유선 또는 무선 네트워크를 통해 연동된다.In addition, the IR camera 110 , the control device 120 , the visible light camera 130 , and the alarm device 140 are linked through a wired or wireless network.

이하에서는 도 2 내지 도 10을 이용하여 본 발명의 실시예에 따른 라벨 인식 방법을 설명한다.Hereinafter, a label recognition method according to an embodiment of the present invention will be described with reference to FIGS. 2 to 10 .

도 2는 본 발명의 실시예에 따른 라벨 인식 시스템을 이용한 라벨 인식 방법을 설명하기 위한 순서도이다.2 is a flowchart illustrating a label recognition method using a label recognition system according to an embodiment of the present invention.

먼저, 제어장치(120)는 켄베이어의 동작을 제어하여 검사 대상물을 이동시킨다(S210).First, the control device 120 controls the operation of the conveyor to move the inspection object (S210).

다음으로, IR 카메라(110)는 이동중인 컨베이어를 스캔하여 반사되는 파장을 측정한다(S220).Next, the IR camera 110 scans the moving conveyor and measures the reflected wavelength (S220).

도 4는 본 발명의 실시예에 따른 IR 카메라를 설명하기 위한 도면이고, 도 5는 본 발명의 실시예에 따른 물체별 적외선 파장별 반사율을 측정한 예시를 나타낸 도면이다.FIG. 4 is a view for explaining an IR camera according to an embodiment of the present invention, and FIG. 5 is a view showing an example of measuring reflectance of each infrared wavelength for each object according to an embodiment of the present invention.

먼저, 도 4에서 나타낸 것처럼, IR 카메라(110)는 적외선을 송신하는 발광부와 반사되는 적외선을 수신하는 수광부를 포함한다.First, as shown in FIG. 4 , the IR camera 110 includes a light emitting unit for transmitting infrared rays and a light receiving unit for receiving reflected infrared rays.

이때, 도 5에서 나타낸 것처럼, 각각의 "물질 A" "물질 B" 및 "물질 C"는 각각의 Near-IR과 MID-IR영역에서 서로다른 반사율을 가진다.At this time, as shown in FIG. 5 , each of “Material A”, “Material B” and “Material C” has different reflectance in the Near-IR and MID-IR regions, respectively.

즉, 물질의 재질 또는 종류에 따라 서로다른 반사율을 가지며, 본 발명의 실시예에서는 IR 카메라(110)를 이용하여 컨베이어, 검사 대상물(10) 및 라벨(20)을 각각 인식한다.That is, they have different reflectances depending on the material or type of the material, and in the embodiment of the present invention, the conveyor, the inspection object 10 and the label 20 are respectively recognized by using the IR camera 110 .

다음으로, 제어장치(120)는 측정된 파장과 기 저장된 검사 대상물(10)의 고유 파장을 비교하여 검사 대상물을 인식여부를 판단한다(S230).Next, the control device 120 compares the measured wavelength with the intrinsic wavelength of the pre-stored test object 10 to determine whether the test object is recognized ( S230 ).

반면에, 측정된 파장과 검사 대상물의 고유 파장의 차이 값이 기준 값보다 큰 경우, 제어장치(120)는 컨베이어에 검사 대상물(10)이 존재하지 않는 것으로 판단한다.On the other hand, when the difference value between the measured wavelength and the intrinsic wavelength of the inspection object is greater than the reference value, the controller 120 determines that the inspection object 10 does not exist on the conveyor.

이때, 검사 대상물(10)의 고유 파장은 컨베이어를 통해 이동중인 검사 대상물에 대응되는 파장을 의미하며, 사용자 또는 라벨 인식 시스템(100)에 의해 기 저장된 값일 수 있다.In this case, the intrinsic wavelength of the inspection object 10 means a wavelength corresponding to the inspection object moving through the conveyor, and may be a value pre-stored by the user or the label recognition system 100 .

도 6은 도 2의 S230 단계를 설명하기 위한 도면이다.FIG. 6 is a diagram for explaining step S230 of FIG. 2 .

즉, 도 6에서 나타낸 것처럼, 측정된 파장과 검사 대상물(10)의 고유 파장의 차이 값이 기준 값 이하인 경우 제어장치(120)는 컨베이어에 검사 대상물이 존재하는 것으로 판단한다.That is, as shown in FIG. 6 , when the difference value between the measured wavelength and the intrinsic wavelength of the inspection object 10 is less than or equal to the reference value, the control device 120 determines that the inspection object is present on the conveyor.

다음으로, IR 카메라(110)는 이동중인 검사 대상물(10)을 스캔하여 반사되는 파장을 측정한다(S240).Next, the IR camera 110 scans the moving object 10 and measures the reflected wavelength ( S240 ).

그러면, 제어장치(120)는 측정된 파장과 기 저장된 라벨(20)의 고유 파장을 비교하여 검사 대상물에 부착된 라벨을 검출한다(S250).Then, the control device 120 detects the label attached to the test object by comparing the measured wavelength and the intrinsic wavelength of the pre-stored label 20 (S250).

도 7a 및 도 7b은 도 2의 S240 단계를 설명하기 위한 도면이다.7A and 7B are diagrams for explaining step S240 of FIG. 2 .

이때, 측정된 파장과 라벨(20)의 고유 파장의 차이 값이 기준 값 이하이면, 제어장치(120)는 검사 대상물(10)에 라벨(20)이 부착된 것으로 판단한다.At this time, if the difference value between the measured wavelength and the intrinsic wavelength of the label 20 is less than or equal to the reference value, the control device 120 determines that the label 20 is attached to the inspection object 10 .

즉, 도 7a에서 나타낸 것처럼, 제어장치(120)는 검사 대상물(10)에 라벨(20)이 부착되어 있는 것으로 판단한다.That is, as shown in FIG. 7A , the control device 120 determines that the label 20 is attached to the inspection object 10 .

반면에, 측정된 파장과 라벨의 고유 파장의 차이 값이 기준 값보다 크면, 제어장치(120)는 검사 대상물(10)에 라벨(20)이 부착된 것으로 판단한다.On the other hand, if the difference value between the measured wavelength and the intrinsic wavelength of the label is greater than the reference value, the control device 120 determines that the label 20 is attached to the inspection object 10 .

즉, 도 7b에서 나타낸 것처럼, 제어장치(120)는 검사 대상물(10)에 라벨(20)이 부착되어 있지 않는 것으로 판단한다.That is, as shown in FIG. 7B , the control device 120 determines that the label 20 is not attached to the inspection object 10 .

이때, 도 7a에서 나타낸 것처럼, 라벨(20)이 검출되면, 가시광 카메라(130)는 검사 대상물(10)에 부착된 라벨(20)을 촬영한다(S260).At this time, as shown in FIG. 7A , when the label 20 is detected, the visible light camera 130 photographs the label 20 attached to the inspection object 10 ( S260 ).

도 8은 도 2의 S250 단계를 설명하기 위한 도면이다.FIG. 8 is a diagram for explaining step S250 of FIG. 2 .

즉, 도 8에서 나타낸 것처럼, 가시광 카메라(130)는 라벨(20)이 검출된 시점으로부터 기준 시간이 경과한 시점에 가시광 카메라(130)의 하측에 위치하는 검사 대상물을 촬영한다.That is, as shown in FIG. 8 , the visible light camera 130 photographs the inspection object positioned below the visible light camera 130 when a reference time elapses from the time when the label 20 is detected.

또한, 기준 시간은 컨베이어의 이동 방향에 대응되는 라벨(20)의 길이와 컨베이어의 이동 속도에 따라 결정된다.In addition, the reference time is determined according to the length of the label 20 corresponding to the moving direction of the conveyor and the moving speed of the conveyor.

도 9는 본 발명의 실시예에 따른 가시광 카메라를 통해 촬영된 라벨의 예시도이다.9 is an exemplary view of a label photographed through a visible light camera according to an embodiment of the present invention.

즉, 결정된 기준 시간을 초과하여 경과하거나 초과하지 않은 시점에서 가시광 카메라(130)를 이용하여 라벨(20)을 촬영하는 경우, 가시광 카메라(130)는 도 9에서의 'b'및 'c'와 같이 촬영한다.That is, when the label 20 is photographed using the visible light camera 130 at a time point that exceeds or does not exceed the determined reference time, the visible light camera 130 is 'b' and 'c' in FIG. shoot together

반면에, 결정된 기준 시간이 경과한 시점에서 가시광 카메라(130)를 이용하여 라벨(20)을 촬영하는 경우, 가시광 카메라(130)는 도 9에서의 'a'와 같이 라벨(20)을 촬영한다.On the other hand, when the label 20 is photographed using the visible light camera 130 when the determined reference time has elapsed, the visible light camera 130 photographs the label 20 as shown in 'a' in FIG. 9 . .

도 10은 본 발명의 실시예에 따른 가시광 카메라의 가상 영역을 나타낸 예시도이다.10 is an exemplary view illustrating a virtual area of a visible light camera according to an embodiment of the present invention.

도 10에서 나타낸 것처럼, 가시광 카메라(130)의 가상 영역을 붉은색으로 나타내었다.As shown in FIG. 10 , the virtual region of the visible light camera 130 is shown in red.

또한, (x1, x2)와 (x2, y2)는 해당 가상 영역의 좌상단의 픽셀 값과 우상단의 픽셀값을 나타낸다.In addition, (x1, x2) and (x2, y2) represent the upper-left pixel value and the upper-right pixel value of the corresponding virtual area.

즉, 도 10에서 나타낸 것과 같이, 가시광 카메라(130)의 가상 영역으로 라벨이 위치하는 경우, 가시광 카메라(130)는 해당 라벨 사진을 촬영한다.That is, as shown in FIG. 10 , when a label is located in the virtual area of the visible light camera 130 , the visible light camera 130 takes a picture of the corresponding label.

반면에, 라벨이 검출되지 않으면, 알람장치(140)는 외부로 알람을 제공한다(S270).On the other hand, if the label is not detected, the alarm device 140 provides an alarm to the outside (S270).

즉, 도 7b에서 나타낸 것과 같이, 검사 대상물에 라벨이 없는 경우, 제어장치(120)는 해당 검사 대상물이 불량인 것으로 판단한다.That is, as shown in FIG. 7B , when there is no label on the inspection object, the control device 120 determines that the inspection object is defective.

그러면, 제어장치(120)는 경고 메시지 또는 경고음을 발생시키는 제어신호를 알람장치(140)에 제공한다.Then, the control device 120 provides a control signal for generating a warning message or a warning sound to the alarm device 140 .

또한, 제어장치(120)는 경고 메시지 또는 경고음을 발생시키는 제어신호를 알람장치(140)에 제공하는 동시에 해당 컨베이어의 동작을 정지시킨다.In addition, the control device 120 provides a control signal for generating a warning message or a warning sound to the alarm device 140 and simultaneously stops the operation of the corresponding conveyor.

본 발명의 실시예에서는 IR 카메라(110)가 라인스캔 방법을 이용하여 검사 대상물의 라벨을 인식하는 것으로 설명하였지만, IR 카메라(100)의 종류 및 규모에 따라 포인트 스캔과 같은 다양한 방법을 이용할 수 있다.In the embodiment of the present invention, the IR camera 110 has been described as recognizing the label of the object to be inspected using the line scan method, but various methods such as point scan may be used depending on the type and scale of the IR camera 100. .

이와 같이 본 발명의 실시예에 따르면, 수작업으로 부착되는 수입 식품을 포함한 각종 제품의 라벨의 부착 유무 및 부착위치를 정확히 검출할 수 있으며, 공장 내 컨베이어에 적용하여 라벨의 부착 여부를 검출할 수 있다.As described above, according to an embodiment of the present invention, it is possible to accurately detect the presence or absence of the label attachment and the attachment position of various products, including imported food, which are manually attached. .

또한, 적외선을 이용하여 객체의 유무 및 위치를 인식하여 가시광 카메라의 촬영시점을 결정함으로써, 가시광 카메라의 인식 및 처리 속도를 향상시킬 수 있다.In addition, by recognizing the presence and location of an object using infrared rays to determine a photographing time of the visible light camera, the recognition and processing speed of the visible light camera can be improved.

본 발명은 도면에 도시된 실시 예를 참고로 설명 되었으나 이는 예시적인 것이 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.Although the present invention has been described with reference to the embodiment shown in the drawings, which is merely exemplary, those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. Accordingly, the true technical protection scope of the present invention should be defined by the technical spirit of the appended claims.

10: 검사 대상물, 20: 라벨
100: 라벨 인식 시스템, 110: IR 카메라,
120: 제어장치, 130: 가시광 카메라,
140: 알람장치10: inspection object, 20: label
100: label recognition system, 110: IR camera,
120: control device, 130: visible light camera,
140: alarm device

Claims (16)

라벨 인식 시스템을 이용한 라벨 인식 방법에 있어서,
컨베이어를 통해 검사 대상물을 이동시키는 단계,
상기 컨베이어의 상측에 이격되어 설치된 IR 카메라를 이용하여 이동중인 상기 컨베이어를 스캔하여 반사되는 파장을 측정하는 단계,
상기 측정된 파장과 기 저장된 검사 대상물의 고유 파장을 비교하여 상기 검사 대상물을 인식하는 단계,
상기 측정된 파장과 기 저장된 라벨의 고유 파장을 비교하여 상기 검사 대상물에 부착된 라벨을 검출하는 단계, 그리고
상기 라벨이 검출되면 상기 컨베이어의 상측에 이격되어 위치하는 가시광 카메라를 이용하여 상기 검사 대상물에 부착된 라벨을 촬영하는 단계를 포함하는 라벨 인식 방법.In the label recognition method using the label recognition system,
moving the inspection object through the conveyor;
Measuring the reflected wavelength by scanning the moving conveyor using an IR camera installed spaced apart from the upper side of the conveyor;
Recognizing the test object by comparing the measured wavelength with the intrinsic wavelength of the pre-stored test object;
detecting the label attached to the test object by comparing the measured wavelength with the intrinsic wavelength of the pre-stored label, and
When the label is detected, the label recognition method comprising the step of photographing a label attached to the inspection object using a visible light camera spaced apart from the upper side of the conveyor. 제1항에 있어서,
상기 검사 대상물을 인식하는 단계는,
상기 측정된 파장과 상기 검사 대상물의 고유 파장의 차이 값이 기준 값 이하이면 상기 컨베이어에 상기 검사 대상물이 존재하는 것으로 인식하는 라벨 인식 방법.According to claim 1,
The step of recognizing the inspection object is,
A label recognition method for recognizing that the inspection object is present on the conveyor when the difference value between the measured wavelength and the intrinsic wavelength of the inspection object is less than or equal to a reference value. 제1항에 있어서,
상기 라벨을 검출하는 단계는,
상기 측정된 파장과 상기 라벨의 고유 파장의 차이 값이 기준 값 이하이면 상기 검사 대상물에 상기 라벨이 부착된 것으로 판단하는 라벨 인식 방법.According to claim 1,
The step of detecting the label comprises:
If the difference between the measured wavelength and the intrinsic wavelength of the label is less than or equal to a reference value, the label recognition method for determining that the label is attached to the inspection object. 제1항에 있어서,
상기 검사 대상물에 부착된 라벨을 촬영하는 단계는,
상기 라벨이 검출된 시점으로부터 기준 시간이 경과한 시점에 상기 가시광 카메라의 하측에 위치하는 상기 검사 대상물을 촬영하는 라벨 인식 방법.According to claim 1,
The step of photographing the label attached to the inspection object,
A label recognition method of photographing the inspection object located below the visible light camera when a reference time elapses from the time when the label is detected. 제4항에 있어서,
상기 기준 시간은,
상기 컨베이어의 이동 방향에 대응되는 상기 라벨의 길이와 상기 컨베이어의 이동 속도에 따라 결정되는 라벨 인식 방법.5. The method of claim 4,
The reference time is
A label recognition method determined according to the length of the label corresponding to the moving direction of the conveyor and the moving speed of the conveyor. 제1항에 있어서,
상기 검사 대상물에 부착된 라벨을 촬영하는 단계는,
상기 컨베이어를 통해 이동 중인 라벨이 상기 컨베이어 상의 가상의 영역에 포함되면 상기 가시광 카메라를 이용하여 상기 검사 대상물에 부착된 라벨을 촬영하는 라벨 인식 방법.The method of claim 1,
The step of photographing the label attached to the inspection object,
A label recognition method of photographing a label attached to the inspection object using the visible light camera when the label moving through the conveyor is included in a virtual area on the conveyor. 제1항에 있어서,
상기 라벨이 검출되지 않으면 외부로 알람을 제공하는 단계를 더 포함하는 라벨 인식 방법. According to claim 1,
Label recognition method further comprising the step of providing an alarm to the outside if the label is not detected. 제1항에 있어서,
상기 IR 카메라와 상기 가시광 카메라는 일체화되어 설치되는 라벨 인식 방법. According to claim 1,
A label recognition method in which the IR camera and the visible light camera are integrated and installed. 검사 대상물에 부착된 라벨을 인식하기 위한 라벨 인식 시스템에 있어서,
컨베이어의 상측에 이격되어 설치되며, 이동중인 상기 컨베이어를 스캔하여 반사되는 파장을 측정하는 IR 카메라,
상기 측정된 파장과 기 저장된 검사 대상물의 고유 파장을 비교하여 상기 검사 대상물을 인식하고, 상기 측정된 파장과 기 저장된 라벨의 고유 파장을 비교하여 상기 검사 대상물에 부착된 라벨을 검출하는 제어장치, 그리고
상기 컨베이어의 상측에 이격되어 설치되며, 상기 라벨이 검출되면 상기 검사 대상물에 부착된 라벨을 촬영하는 가시광 카메라를 포함하는 라벨 인식 시스템.In the label recognition system for recognizing a label attached to an inspection object,
An IR camera installed spaced apart from the upper side of the conveyor and measuring the reflected wavelength by scanning the moving conveyor;
A control device for recognizing the inspection object by comparing the measured wavelength and the stored natural wavelength of the inspection object, and detecting a label attached to the inspection object by comparing the measured wavelength and the stored natural wavelength of the label, and
A label recognition system comprising a visible light camera installed to be spaced apart from the upper side of the conveyor and photographing a label attached to the object to be inspected when the label is detected. 제9항에 있어서,
상기 제어장치는,
상기 측정된 파장과 상기 검사 대상물의 고유 파장의 차이 값이 기준 값 이하이면 상기 컨베이어에 상기 검사 대상물이 존재하는 것으로 인식하는 라벨 인식 시스템.10. The method of claim 9,
The control device is
A label recognition system for recognizing that the inspection object is present on the conveyor when a difference value between the measured wavelength and the intrinsic wavelength of the inspection object is less than or equal to a reference value. 제9항에 있어서,
상기 제어장치는,
상기 측정된 파장과 상기 라벨의 고유 파장의 차이 값이 기준 값 이하이면 상기 검사 대상물에 상기 라벨이 부착된 것으로 판단하는 라벨 인식 시스템.10. The method of claim 9,
The control device is
A label recognition system for determining that the label is attached to the inspection object when the difference value between the measured wavelength and the intrinsic wavelength of the label is less than or equal to a reference value. 제9항에 있어서,
상기 가시광 카메라는,
상기 라벨이 검출된 시점으로부터 기준 시간이 경과한 시점에 상기 가시광 카메라의 하측에 위치하는 상기 검사 대상물을 촬영하는 라벨 인식 시스템.10. The method of claim 9,
The visible light camera,
A label recognition system for photographing the inspection object located below the visible light camera when a reference time elapses from the time when the label is detected. 제12항에 있어서,
상기 기준 시간은,
상기 컨베이어의 이동 방향에 대응되는 상기 라벨의 길이와 상기 컨베이어의 이동 속도에 따라 결정되는 라벨 인식 시스템.13. The method of claim 12,
The reference time is
A label recognition system that is determined according to the length of the label corresponding to the moving direction of the conveyor and the moving speed of the conveyor. 제9항에 있어서,
상기 가시광 카메라는,
상기 컨베이어를 통해 이동 중인 라벨이 상기 컨베이어 상의 가상의 영역에 포함되면 상기 검사 대상물에 부착된 라벨을 촬영하는 라벨 인식 시스템.10. The method of claim 9,
The visible light camera,
A label recognition system for photographing a label attached to the inspection object when the label moving through the conveyor is included in a virtual area on the conveyor. 제9항에 있어서,
상기 라벨이 검출되지 않으면 외부로 알람을 제공하는 알람장치를 더 포함하는 라벨 인식 시스템. 10. The method of claim 9,
Label recognition system further comprising an alarm device for providing an alarm to the outside when the label is not detected. 제9항에 있어서,
상기 IR 카메라와 상기 가시광 카메라는 일체화되어 설치되는 라벨 인식 시스템. 10. The method of claim 9,
The IR camera and the visible light camera are integrated and installed label recognition system.
KR1020210044424A 2021-04-06 2021-04-06 Systme for recogniting label using infrared and cisible light camera and method thereof KR102617048B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210044424A KR102617048B1 (en) 2021-04-06 2021-04-06 Systme for recogniting label using infrared and cisible light camera and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210044424A KR102617048B1 (en) 2021-04-06 2021-04-06 Systme for recogniting label using infrared and cisible light camera and method thereof

Publications (2)

Publication Number Publication Date
KR20220138589A true KR20220138589A (en) 2022-10-13
KR102617048B1 KR102617048B1 (en) 2023-12-27

Family

ID=83599515

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210044424A KR102617048B1 (en) 2021-04-06 2021-04-06 Systme for recogniting label using infrared and cisible light camera and method thereof

Country Status (1)

Country Link
KR (1) KR102617048B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102505031B1 (en) * 2022-11-18 2023-03-02 주식회사 하이브비젼 device and method for classifying Disposable cup using images

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001158413A (en) * 1999-12-01 2001-06-12 Seiko Seiki Co Ltd Labeling device
JP2005119706A (en) * 2003-10-16 2005-05-12 Kirin Techno-System Corp Label inspection device
KR100843929B1 (en) * 2001-11-01 2008-07-03 주식회사 포스코 An apparatus for automatically monitoring the position of label
KR20140128716A (en) * 2013-04-29 2014-11-06 안종원 Lable inpecting apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001158413A (en) * 1999-12-01 2001-06-12 Seiko Seiki Co Ltd Labeling device
KR100843929B1 (en) * 2001-11-01 2008-07-03 주식회사 포스코 An apparatus for automatically monitoring the position of label
JP2005119706A (en) * 2003-10-16 2005-05-12 Kirin Techno-System Corp Label inspection device
KR20140128716A (en) * 2013-04-29 2014-11-06 안종원 Lable inpecting apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102505031B1 (en) * 2022-11-18 2023-03-02 주식회사 하이브비젼 device and method for classifying Disposable cup using images

Also Published As

Publication number Publication date
KR102617048B1 (en) 2023-12-27

Similar Documents

Publication Publication Date Title
US10984378B1 (en) Profiling pallets and goods in a warehouse environment
JP3484196B2 (en) Method and apparatus for sorting material parts
US8718319B2 (en) Method and system for optoelectronic detection and location of objects
US6310964B1 (en) Produce size recognition system
EP2528041B1 (en) Method and system for optoelectronic detection and location of objects
US20180172602A1 (en) System and method for inspecting containers using multiple radiation sources
US20230010402A1 (en) Cased goods inspection system and method
CN107085493A (en) The method of adjustment of touch control projection system and its touch-control sensitivity
US5970166A (en) System or method for identifying contents of a semi-opaque envelope
KR20220138589A (en) Systme for recogniting label using infrared and cisible light camera and method thereof
JP2022505986A (en) Methods and equipment for inspecting labels on food packs
JP2006153633A (en) Flaw determining device of matter to be inspected
JP2021003929A (en) Learning datum generation device and object detection device
JP2020034345A (en) Inspection system and inspection method
JP2002214157A (en) Flaw detecting method and device for plate-like body
US20210063850A1 (en) Imaging device, method for controlling imaging device, and system including imaging device
JP2006219178A (en) Inspecting apparatus and ptp packaging machine
US11878873B2 (en) Cased goods inspection and method therefor
JP2019120518A (en) Foreign substance detector and method for detecting foreign substance
KR20200087331A (en) Apparatus and method for inspecting steel products
US11743602B2 (en) Camera and method for detecting objects moved through a detection zone
JP2579674B2 (en) Label detection device
JP2014228466A (en) Inspection device and inspection method
JPH08320929A (en) Work detecting device
TW202346795A (en) Detection system

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant