KR20240039584A - 제품의 외관 검사 장치 및 방법 - Google Patents

제품의 외관 검사 장치 및 방법 Download PDF

Info

Publication number
KR20240039584A
KR20240039584A KR1020230099316A KR20230099316A KR20240039584A KR 20240039584 A KR20240039584 A KR 20240039584A KR 1020230099316 A KR1020230099316 A KR 1020230099316A KR 20230099316 A KR20230099316 A KR 20230099316A KR 20240039584 A KR20240039584 A KR 20240039584A
Authority
KR
South Korea
Prior art keywords
brightness
image
command
appearance
correction
Prior art date
Application number
KR1020230099316A
Other languages
English (en)
Inventor
전효승
김태영
Original Assignee
주식회사 엘지에너지솔루션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지에너지솔루션 filed Critical 주식회사 엘지에너지솔루션
Priority to PCT/KR2023/014038 priority Critical patent/WO2024063471A1/ko
Publication of KR20240039584A publication Critical patent/KR20240039584A/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/12Circuits of general importance; Signal processing
    • G01N2201/127Calibration; base line adjustment; drift compensation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30164Workpiece; Machine component

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biochemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

본 발명의 일 실시예에 따른 제품의 외관 검사 방법은 대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하는 단계; 전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계; 밝기 보정된 이미지로부터 불량 후보군을 추출하는 단계; 추출된 불량 후보군에 대해 이미지 후처리를 수행하는 단계; 및 후처리된 이미지로부터 대상 객체의 불량 여부를 판단하는 단계를 포함할 수 있다.

Description

제품의 외관 검사 장치 및 방법{APPARATUS AND METHOD FOR INSPECTING APPEARANCE OF PRODUCT}
본 발명은 제품의 외관 검사 장치 및 방법에 관한 것으로, 보다 구체적으로는 이미지 내 검사영역의 밝기를 조정하여 검사 이미지를 처리하는 제품의 외관 검사 장치 및 방법에 관한 것이다.
이차 전지는 방전 이후에도 충전을 통해 재사용이 가능한 전지로, 휴대용 전화기, 태블릿 PC, 청소기 등 소형 디바이스의 에너지원으로 활용될 수 있으며, 개인 이동 수단(Personal Mobility), 자동차, 스마트 그리드용 ESS(Energy Storage System) 등의 중대형 에너지원으로서도 활용되고 있다. 이차 전지는 시스템의 요구 조건에 따라 다수의 배터리 셀들이 직병렬로 연결된 배터리 모듈, 또는 배터리 모듈들이 직병렬로 연결된 배터리 팩 등의 어셈블리 형태로 사용된다.
배터리는 크게 전극 공정, 조립 공정, 화성(formation) 공정, 기타 공정을 포함한 과정을 거쳐 제조될 수 있으며, 제조되는 배터리 셀 또는 각 공정의 결과물에 대해서는 검사 장비를 통해 불량 점검이 이루어진다. 불량 점검 방법 중 많이 사용되는 기법으로 외관 검사를 들 수 있는데, 외관검사는 광학계를 이용해 제품의 영상을 취득하고 검출 알고리즘을 이용해 불량을 검출하는 방식으로 이루어질 수 있다.
그런데, 특정 검출 알고리즘을 확정한 후, 제품의 표면 색상이 변화하거나 조명의 수명 도래로 인한 조명의 변화 등의 원인으로 취득한 영상의 밝기가 원래 예상된 영상의 밝기와 비교해 차이가 발생할 수 있으며, 이 경우 기존에 설정한 알고리즘의 검출력에 문제가 발생한다.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은이미지내 검사영역의 밝기를 설정된 값으로 조정하여 검사 이미지를 처리하는 제품의 외관 검사 방법을제공하는 데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 상기 제품의 외관 검사 방법을 이용하는 외관 검사 장치를 제공하는 데 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 제품의 외관 검사 방법은 대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하는 단계; 전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계; 밝기 보정된 이미지로부터 불량 후보군을 추출하는 단계; 추출된 불량 후보군에 대해 이미지 후처리를 수행하는 단계; 및 후처리된 이미지로부터 대상 객체의 불량 여부를 판단하는 단계를 포함할 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는, 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하는 단계; 상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을 산출하는 단계; 및 상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하는 단계를 포함할 수 있다.
상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을 산출하는 단계는, 상기 타겟밝기를 상기 평균 밝기로 나누어 보정 이득값을 계산하는 단계를 포함할 수 있다.
상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하는 단계는, 각 픽셀의 원래 밝기에 상기 보정 이득값을 곱하여 각 픽셀별 밝기를 보정하는 단계를 포함할 수 있다.
또한, 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하는 단계는, 상기 검사 영역 내 픽셀의 개수 및 각 픽셀의 밝기를 기초로 상기 평균 밝기를 계산하는 단계를 포함할 수 있다.
여기서, 상기 타겟 밝기는 사용자에 의해 설정 가능하다.
한편, 상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 흑백 이미지로 변경하는 단계를 포함할 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는 또한, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 R 채널, G 채널, 및 B 채널로 분리하는 단계를 포함할 수도 있다.
따라서, 이 경우, 상기 평균 밝기를 산출하는 단계, 상기 보정 이득값을 산출하는 단계, 및 상기 각 픽셀별 밝기를 보정하는 단계는, 상기 R 채널, G 채널, 및 B 채널 각각에 대해 수행될 수 있다.
상기 다른 목적을 달성하기 위한 본 발명의 일 실시예에따른제품의 외관 검사 장치는, 적어도 하나의 프로세서; 상기 적어도 하나의 프로세서를 통해 실행되는 적어도 하나의 명령을 저장하는 메모리;를 포함할 수 있으며, 상기 적어도 하나의 명령은, 대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하도록 하는 명령; 전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령; 밝기 보정된 이미지로부터 불량 후보군을 추출하도록 하는 명령; 추출된 불량 후보군에 대해 이미지 후처리를 수행하도록 하는 명령; 및 후처리된 이미지로부터 대상 객체의 불량 여부를 판단하도록 하는 명령을 포함할 수 있다.
본 발명의 실시예에 따른 외관검사 장치는 대상 객체의 외관을 촬상하는촬상 장치(imaging device)와 연동하거나 이러한 촬상 장치(미도시)를 포함할 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령; 상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을산출도록 하는 명령; 및 상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령을 포함할 수 있다.
상기 보정 이득값을산출도록 하는 명령은, 상기 타겟밝기를 상기 평균 밝기로 나누어 보정 이득값을 계산하도록 하는 명령을 포함할 수 있다.
상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령은, 각 픽셀의 원래 밝기에 상기 보정 이득값을 곱하여 각 픽셀별 밝기를 보정하도록 하는 명령을 포함할 수 있다. 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령은, 상기 검사 영역 내 픽셀의 개수 및 각 픽셀의 밝기를 기초로 상기 평균 밝기를 계산하도록 하는 명령을 포함할 수 있다.
이때, 상기 타겟 밝기는 사용자에 의해 설정 가능하다.
한편, 상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 흑백 이미지로 변경하도록 하는 명령을 포함할 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 R 채널, G 채널, 및 B 채널로 분리하도록 하는 명령을 포함할 수 있다.
그에 따라, 상기 평균 밝기를 산출하도록 하는 명령, 상기 보정 이득값을 산출하도록 하는 명령, 및 상기 각 픽셀별 밝기를 보정하도록 하는 명령은, 상기 R 채널, G 채널, 및 B 채널 각각에 대해 수행될 수 있다.
상기와 같은 본 발명의 실시예에따르면검사대상 영역에 대한 평균 밝기를 계산하고 지정된 밝기로 보정한다는 점에서, 광학계 조명 상황이 변화되더라도 균일한 밝기의 이미지를 획득할 수 있다.
따라서, 제품의 불량 여부를 판단하기 위한 검사 정확도를 높일 수 있다.
도 1은 일반적인 외관 검사 방법의 동작 순서도이다.
도 2는 본 발명의 실시예에 따른 외관 검사 방법의 동작 순서도이다.
도 3은 본 발명의 실시예에 따른 밝기 보정의 상세 프로세스를 나타낸 도면이다.
도 4는 본 발명의 실시예에 따라 밝기 보정을 수행한 결과 이미지를 원래 이미지와 비교하여 나타낸 도면이다.
도 5는 본 발명의 실시예에 따른 외관 검사를 위해 제공되는 사용자 인터페이스 화면의 일 예이다.
도 6a 내지 6c는 본 발명의 실시예에 따라 밝기 보정을 수행한 이미지와 밝기 보정을 수행하지 않은 이미지를 이용한 외관 검사 결과를 비교한 그래프이다.
도 7은 본 발명의 실시예에 따라 다양한 조명 세기 및 다양한 보정 타겟밝기으로 측정 및 처리된 이미지들을 나타낸다.
도 8은 본 발명에 따른 밝기 보정을 수행하여 검출된 오염 크기와 현미경을 통한 검사 결과 사이의 검출 크기 편차를 나타낸 그래프이다.
도 9는 본 발명의 일 실시예에 따른 촬상 장치의 사시도이다.
도 10은 본 발명의 일 실시예에 따른 촬상 장치의 단면도다.
도 11a는 본 발명의 다른 실시예에 따른 촬상 장치의 외관을 나타낸 도면이다.
도 11b는 본 발명의 다른 실시예에 따른 촬상 장치의 멀티 채널 조명 구성도이다.
도 12는 본 발명의 실시예에 따른 외관 검사 장치의 블록 구성도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는 데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. "및/또는"이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기에서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 일반적인 외관 검사 방법의 동작 순서도이다.
부품 또는 제품에 대한 일반적인 외관 검사 방법은 크게 이미지 전처리(S11), 불량 후보군 추출(S12), 이미지 후처리(S13), 결함 판정 프로세스를 포함할 수 있다.
검사의 대상이 되는 부품/제품은 이미징 장치(촬영 장치), 즉 광학계를 통해 이미지 데이터로 획득될 수 있고, 하나의 이미지 내에 복수의 부품/제품 관련 하나 이상의 객체가 포함될 수 있다.
이미지 전처리 프로세스(S11)에서는 검사 전 대상 객체에 대한 이미지를 검사에 용이하도록 특징을 강조하는 과정이며 이진화, 정규화, 등의 방법이 이용될 수 있다. 이미지 전처리 프로세스에서는 또한 대상 객체에 대한 이미지의 밝기를 전반적으로 증폭하는 과정을 포함할 수 있다.
불량 후보군 추출 프로세스(S12)에서는 검출된 이미지 내에 포함된 복수의 객체들 중 불량인 것으로 의심되는 후보군을 추출하는데, 이미지 상으로 나타나는 잠재적인 불량 특징을 갖는 객체를 후보로 선정할 수 있다.
이미지 후처리 프로세스(S13)에서는 불량 후보군의 특징값을 추출하는데, 이때의 특징값은이미지 내에 포함된 객체의 밝기(intensity), 형상(shape), 텍스쳐(texture) 등과 관련된 값일 수 있다.
결함 판정 프로세스(S14)에서는 추출된 특징값을 분석해 해당 객체 관련 제품/부품에 결함 또는 불량이 발생하였는지 판단한다.
이상 설명한 일반적인 외관 검사 방법에서 이미지 전처리 과정에 포함된 밝기 보정은 이미지의 전반적인 밝기를 임의로 증폭하여 수행된다. 이러한 방법에따르면, 이미지의 밝기가 원하는 밝기로 균일하게 보정되지 않을 수 있으며, 따라서 밝기 보정 값을 이미지별로 다르게 조절해 주어야 한다.
결과적으로, 조명의 수명 도래로 인한 밝기 변경시 또는 셀 원자재의 일부 색상에 편차가 발생하는 경우, 종래의 방법에 따르면 검사 결과가 달라지고 양호한 검사 결과를 얻지 못하게 된다는 문제가 있다.
도 2는 본 발명의 실시예에 따른 외관 검사 방법의 동작 순서도이다.
본 발명 실시예에 따른 제품의 외관 검사 방법은 크게 이미지 전처리(S100), 밝기보정(S200), 불량 후보군 추출(S300), 이미지 후처리(S400), 불량 여부 판정(S500) 프로세스를 포함할 수 있다.
검사의 대상이 되는 부품/제품에 대한 이미지는이미징 장치(촬상 장치), 즉 광학계를 통해 획득할 수 있으며, 하나의 이미지 내에 복수의 부품/제품 관련 하나 이상의 객체가 포함될 수 있다.
이미지 전처리 프로세스(S100)는 검사 전 대상 객체에 대한 이미지를 검사에 용이하도록 특징을 강조하는 과정이며, 촬상 장치를 통해 획득한 이미지를 보정 또는 합성하는 과정을 통해 불량이 잘 식별될 수 있도록 변환하는 과정이다. 전처리 프로세스는, 이미지 합성, 이진화, 정규화, 블러(blur)처리, 스트레칭(stretching) 등의 방법이 이용될 수 있다.
여기서, 이미지 합성은 이후 살펴볼 멀티 채널 이미지를 이용해 이미지에 깊이감을 표현함으로써, 특히 덴트(Dent), 스크래치(scratch) 등의 불량 검출에 유용하게 활용될 수 있다. 이미지 합성 방법으로는 특히, Photometric Stereo 합성, Phase shift 합성 등이 활용될 수 있다.
또한, 이진화(binarization)는 이미지 내의 물체와 배경을 1과 0 두 값만으로 픽셀값을 재설정하는 프로세스로, 이진화를 통한 영상 보정을 통해 제품 외관 상의 불량이 잘 보이도록 변환할 수 있다. 또한, 정규화(normalization)는 영상에서 특정 부분에 몰려있는 픽셀값을 전체 영역으로 골고루 분포하도록 만드는 프로세스이다. 블러 처리는 스무딩(smoothing)이라고도 하며 거친 느낌의 영상을 부드럽게 만드는 용도로 사용되거나 영상에 존재하는 잡음의 영향을 제거하는 전처리 과정으로 사용될 수 있다. 또한, 왜곡된 영상의 상태를 보완하기 위한 전처리 방법으로 스트레칭이 사용될 수 있다.
본 발명에 따르면 전처리된 이미지에 대해 밝기 보정 프로세스(S200)가 적용될 수 있는데, 밝기보정 프로세스(S200)는 사용자의 필요에 따라 실행될 수 있다. 즉, 도 2를 참조하면, 밝기보정 프로세스가 ON으로 설정된 경우(S120의 예), 밝기 보정 프로세스(S200)가 수행될 수 있다. 밝기보정 프로세스(S200)에서는 검사대상 영역에 대한 평균 밝기를 계산하고 검사대상 영역을 지정된 밝기로 보정할 수 있다. 여기서, 검사대상 영역(ROI: Region of Interest)은 검사 이미지에서 실제 검사를 수행할 영역을 나타낸다.
한편, 컬러 이미지에 대해 본 발명에 따른 밝기 보정을 수행하는 프로세스는 2가지 형태로 구현 가능하다.
제1 방법은 컬러 이미지를 흑백 이미지로 변경, 즉 컬러를 그레이 이미지로 변경하고 타겟밝기(Target Intensity)를 설정하여 밝기를 보정하는 방법이다.
제2 방법은 컬러 이미지내 RGB 채널 별로 각각 타겟밝기를 설정하여 밝기를 보정하는 방법이다. 즉, 컬러 이미지의 R(Red) 채널, G(Green) 채널, B(Blue) 채널에 대해 각각 타겟밝기를 별도로 설정하고 밝기를 보정할 수 있다. 이 경우 각 채널에 대해 평균 밝기 계산, 이득 값 산출 및 각 픽셀의 보정된 밝기 값 계산 절차가 별도로 수행될 수 있다.
불량 후보군 추출 프로세스(S300)에서는 검출된 이미지 내에 포함된 복수의 객체들 중 불량인 것으로 의심되는 후보군을 추출하는데, 이미지 상으로 나타나는 잠재적인 불량 특징을 갖는 객체를 후보로 선정할 수 있다.
불량 후보군 추출 프로세스(S300)에서는 밝기 보정된 검사대상 영역(ROI) 내에서의 밝기 차이를 이용해 불량 후보군을 추출한다. 예를 들어, 그레이 스케일로 표현된 ROI 내 각 픽셀이 일정 임계치(threshold) 이상인지 아닌지를 판단하여 음영 영역 여부를 구분함으로써, 불량 후보군을 추출할 수 있다.
여기서, 임계치(threshold) 기법의 예로는 Adaptive, Dynamic, Polar, Local 등 다양한 기법이 사용될 수 있다.
이미지 후처리 프로세스(S400)는 불량 후보군의 특징값을 추출하는 과정으로, 추출된 불량 후보군의 밝기, 형상 크기와 같은 대표 특징을 정량적으로 산출한다. 즉, 불량 후보군의 특징값은 이미지 내에 포함된 객체의 밝기(intensity), 형상(shape), 텍스쳐(texture) 등과 관련된 값일 수 있다.
보다 구체적으로, 불량 후보군에 대한 특징값(feature)은 형태의 면적(area), 너비(width), 높이(height), 원형성(curcularity), 직각성(rectangularity), 직선성 팩터(struct factor) 등을 포함할 수 있다. 주로 불량에 대한 길이 또는 크기에 대해서는 불량 후보군의 크기를 최대 외접원의 외경으로 판정하거나 불량의 넓이를 이용하여 판정할 수 있다. 일반적으로, 이물 또는 오염은 주변부 대비 밝기가 어둡게 나타나는 특성을 가지므로, 이러한 특성을 이용해 해당 영역을 추출하고 그 어두운 영역의 크기와 넓이를 이용하여 최종적으로 불량인지 여부를 판정할 수 있다. 예를 들어, 스크래치나 쓸림 자국의 경우 직선 형태를 가지기 때문에, 직선형의 특징을 정량화하는 직선성 팩터(struct factor)를 사용하여 실오라기와 같은 이물과 구분할 수도 있다.
이후 이어지는 결함 판정 프로세스(S500)에서는 추출된 특징값을 분석하고 기 설정된 검출 기준에 따라 해당 객체 관련 제품/부품에 결함 또는 불량이 발생하였는지 판단한다.
도 3은 본 발명의 실시예에 따른 밝기 보정의 상세 프로세스를 나타낸 도면이다.
촬상된 이미지에서 검사대상 영역(ROI)을 추출하고, 추출된 검사대상 영역 내 픽셀들의 평균 밝기를 산출한다(S210). 검사대상 영역 내 픽셀들의 평균 밝기는 아래 수학식 1에 따라 계산될 수 있다.
수학식 1에서 는 검사영역 내 픽셀들의 평균 밝기를, 은 i번째 픽셀의 밝기를, : ROI 내의 Pixel 개수를 나타낸다.
검사대상 영역의 평균 밝기가 계산되면 타겟 밝기를 고려하여 보정 이득(gain) 값을 산출한다(S220). 보정 이득 값은 아래 수학식 2에 따라 산출될 수 있다. 여기서, 타겟 밝기은 사용자에 의해 사전에 미리 정의될 수 있다.
수학식 2에서, 는 밝기 보정 이득(Gain)을 나타내고, 은 보정타겟(Target) 밝기를 나타내며 사용자가 사전에 정의할 수 있고, 사용자 인터페이스를 통해 변경 설정할 수 있다.
이후, 각 픽셀의 원 밝기 값에 보정 이득값을 곱하여 각 픽셀에 대한 보정 밝기 값을 획득함으로써 이미지 밝기 보정을 수행할 수 있다(S230).
한편, 컬러 이미지 내 RGB 채널 별로 각각 보정 타겟밝기를 설정하여 밝기를 보정하는 경우에는 각 채널(R(Red) 채널, G(Green) 채널, B(Blue) 채널)에 대해, 상기 평균 밝기 계산 절차, 이득 값 산출 절차 및 각 픽셀의 보정된 밝기 값 계산 절차가 별도로 수행될 수 있다.
도 4는 본 발명의 실시예에 따라 밝기 보정을 수행한 결과 이미지를 원래 이미지와 비교하여 나타낸 도면이다.
본 발명에 따른 외관 검사의 대상은 원통형, 파우치형, 각형 등의 배터리, 특히, 다양한 규격의 원통형 배터리일 수 있다. 일 예로, 원통형 배터리는 전극 조립체, 전지 캔, 플레이트 모양을 가진 캡 및 단자를 포함할 수 있다. 원통형 배터리는 추가적으로 절연 가스켓, 집전판, 인슐레이터, 실링가스켓 등을 더 포함할 수도 있다.
도 4에 나타낸 이미지들은 실험을 위해, 원통형 배터리 시편의 상면에 오염 효과를 내기 위한 다양한 크기의 원형 패턴을 인쇄한 상태를촬상하여 획득하였다.
도 4에서 왼쪽 3개의 이미지는 본 발명에 따른 밝기 보정을 사용하지 않은 경우(즉, 밝기보정 모드 OFF)로 각기 다른 조명 밝기로, 즉 strobe time 200
Figure pat00009
, strobetime 400
Figure pat00010
, strobetime 600
Figure pat00011
로 촬상된 이미지들을 나타낸다. 오른쪽 3개의 이미지는 본 발명에 따른 밝기 보정을 사용한 경우(즉, 밝기보정 모드 ON)로 각기 다른 조명 밝기에서 촬상된 이미지를 나타낸다. 여기서, 스트로브 시간(strobe time)은 조명이 켜지는 시간을 나타내는 단위로 값이 커질수록 조명이 켜지는 시간이 증가함을 의미한다.
밝기보정 모드를 사용하지 않은 왼쪽 3개의 이미지는 strobe time 값과 촬상된 이미지의 밝기가 비례한다. 즉, 왼쪽 3개의 이미지는 밝기보정 모드를 사용하지 않았으므로 3개의 이미지 간에는 밝기 차이가 확연히 드러난다. 반면, 본 발명에 따라 밝기 보정을 수행한 오른쪽 3개의 이미지의 경우 밝기 차이는 나안으로 확인 불가능할 정도로 미미함을 알 수 있다.
도 5는 본 발명의 실시예에 따른 외관 검사를 위해 제공되는 사용자 인터페이스 화면의 일 예이다.
본 발명에 따른 외관 검사 장치는 검사 관련 세부사항을 설정할 수 있는 사용자 인터페이스를 제공할 수 있다. 검사 관련 세부사항은 검사 대상 객체/물체, 밝기 보정 여부, 밝기 보정 세기 등을 포함할 수 있따.
도 5의 사용자 인터페이스 화면에 나타난 외관 검사는 전지 캔의 오염 검사로, 밝기 보정 여부, 및 목표 세기(gray correction target intensity) 등의 항목을 사용자가 직접 설정할 수 있다.
도 6a 내지 6c는 본 발명의 실시예에 따라 밝기 보정을 수행한 이미지와 밝기 보정을 수행하지 않은 이미지를 이용한 외관 검사 결과를 비교한 그래프이다.
도 6a는 배터리의 상단면(upper plane)부에 대한 검사 결과를, 도 6b는 배터리의 하단면(upper plane)부에 대한 검사 결과를, 도 6c는 배터리의 측면(side)부에 대한 검사 결과를 나타낸다.
자동 밝기 보정을 수행하지 않은 경우(붉은색 그래프) 대비 자동 밝기 보정을 수행한 경우(그린색 그래프)의 측정 오차(단위: mm)가 3 가지 경우 모두에서 개선됨을 실험을 통해 확인하였으며, 평균적으로 60%의 개선 효과를 얻을 수 있었다.
도 7은 본 발명의 실시예에 따라 다양한 조명 세기 및 다양한 보정 타겟밝기으로 측정 및 처리된 이미지들을 나타낸다.
보다 구체적으로, 도 7은 실험을 위해 원통형 배터리의 상면에 임의로 설정 배치된 다양한 크기의 다수의 오염에 대한 이미지를 3가지 조명 세기(strobe time 200
Figure pat00012
, strobe time 400
Figure pat00013
, strobe time 600
Figure pat00014
), 및 서로 다른 보정 타겟밝기(보정 모드 OFF, 보정 타겟 64, 128, 192)를 적용한 경우의 결과 이미지를 나타낸다.
밝기보정 모드를 사용하지 않은 이미지들은 strobe time 값과 촬상된 이미지의 밝기가 비례한다. 본 발명에 따른 밝기 보정을 사용한 경우들에서는 보정 후의 이미지 밝기가 일정 범위 내로 조정되었음을 확인할 수 있다.
도 8은 본 발명에 따른 밝기 보정을 수행하여 검출된 오염 크기와 현미경을 통한 검사 결과 사이의 검출 크기 편차를 나타낸 그래프이다.
보다 구체적으로, 도 8은 실험을 위해 임의로 설정, 배치된 다수의 오염(오염 1 내지 25)에 대한 이미지에본 발명에 따른 밝기 보정을 수행하여 검출된 오염 크기와, 현미경을 통한 검사 결과 사이의 검출 크기 편차를 나타낸 그래프이다.
도 8의 예에서는 밝기 보정 기법 중 그레이 스케일을 이용한 밝기 보정을 사용한 경우를 나타낸다. 현미경을 통해 측정한 오염 크기 대비 밝기보정의 타겟 밝기를 각각 128, 64, 192로 설정한 경우의 오염크기의 편차를 나타낸 3개의 그래프를 도시한다. 도 8은 또한 비교예로서 밝기보정을 사용하지 않은 경우의 오염 크기 편차(Gray Correction OFF)를 나타내고 있다. 도 8의 그래프들을 비교하면, 밝기보정을 사용한 경우, 즉 그레이 보정을 사용한 경우(Gray Correction ON), 검출된 오염 크기의 편차 수준이 감소한 것을 알 수 있다. 또한, 타겟 밝기를 여러 값으로 설정하여 실험을 수행한 결과 64 내지 192 수준이 적절한 사용범위임을 확인할 수 있었다.
도 9는 본 발명의 일 실시예에 따른 촬상 장치의 사시도이고, 도 10은 본 발명의 일 실시예에 따른 촬상 장치의 단면도다.
도 9 및 10을 참고하면, 본 발명의 일 실시예에 따른 촬상 장치(200)는 하우징(210), 제1 조명(220), 제1 거울(231), 제2 거울(232), 카메라(240), 제3 거울(250), 제2 조명(260), 이송 수단(270) 및 반전 수단(280) 중 적어도 하나를 포함할 수 있다.
도 9의 예에서 하우징(210)은 배터리(10)의 측면 상에 배치되어, 적어도 배터리(10)의 제1 영역(A1)을 둘러싼다. 예컨대, 도 9에 도시된 바와 같이, 배터리(10)는 측면이 상부를 향하도록 누운 형태로 배치될 수 있으며, 하우징(210)은 배터리(10)의 상부에 배치될 수 있다. 하우징(210)의 형상은 특별히 제한되는 것은 아니나, 하우징(210)의 내면은 돔(dome) 형상을 가질 수 있다.
제1 조명(220)은 하우징(210)의 내면에 배치되며, 배터리(10)에 광을 조사한다. 도 10에서 제1 조명(220)은 하우징(210)의 내면 상에 돌출되어 배치된 것으로 도시하였으나, 제1 조명(220)은 하우징(210)의 내면에 매립되어 적어도 일부가 노출되도록 배치될 수도 있다. 제1 조명(220)은 구체적으로 배터리(10)의 측면에 광을 조사한다. 제1 조명(220)은 배터리(10)의 제1 영역(A1)의 전체 영역에 광을 조사할 수 있다. 전술한 바와 같이, 하우징(210)의 내면은 돔 형상을 가질 수 있으며, 하우징(210)의 내면에 배치된 제1 조명(220)은 전체적으로 둥근 형태로 배치되어 배터리(10)의 측면에 광을 조사할 수 있다.
제1 거울(231) 및 제2 거울(232)은 각각 배터리(10)의 제1 영역(A1) 중 일부를 반사하도록, 배터리(10)의 양 측부 각각에 배치될 수 있다. 도 10을 참고하면, 배터리(10)의 좌측부에는 제1 거울(231)이 배치되고, 배터리(10)의 우측부에는 제2 거울(232)이 기울어져 배치될 수 있다.
한편, 카메라(240)는 배터리(10)의 제1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상을 촬영한다. 즉, 카메라(240)는 배터리(10)의 제1 영역(A1)의 적어도 일부를 촬영한다. 이 때, 제1 거울(231) 또는 제2 거울(232)에 비친 제1 영역(A1)의 일부 영역은 제1 영역(A1) 중 제1 거울(231) 또는 제2 거울(232)이 존재하지 않는 경우 카메라(240)로 촬영될 수 없는 영역을 모두 포함한다. 따라서, 제1 거울(231) 및 제2 거울(232)이 존재함으로써, 카메라(240)로 촬영된 영상은 배터리(10)의 제1 영역(A1)의 전체 영역의 영상을 포함할 수 있다. 이를 통해, 본 발명에 따른 촬상 장치(200)는 배터리(10)의 측면의 절반 이상인 제1 영역(A1)의 전체 영역의 외관 영상을 한 번에 획득하여, 배터리(10)의 회전 및 굴림 없이 측면 검사를 실시할 수 있다.
한편, 카메라(240)가 배터리(10)의 제1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상을 직접 촬영하도록 배터리(10)의 측면(200S)과 마주하여 배치되지 않는 경우, 촬상 장치(200)는 제3 거울(250)을 더 포함할 수 있다. 이 때, 카메라(240)는 제3 거울(250)에 비친 상을 촬영함으로써, 1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상을 간접적으로 촬영한다. 즉, 카메라(240)는 제3 거울(250)에 비친 배터리(10)의 제1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상을 포함하는 상을 촬영한다.
제3 거울(250)은 배터리(10)의 측면(200S) 상에 기울어져 배치되어, 배터리(10)의 제1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상을 반사한다. 도면을 기준으로, 제3 거울(250)은 Y 방향(Y) 및 Z 방향(Z) 사이를 향하도록 기울어져 배치될 수 있다. 제3 거울(250)은 배터리(10)의 제1 영역(A1)의 적어도 일부, 제1 거울(231)에 비친 상 및 제2 거울(232)에 비친 상이 약 45°의 각도로 입사 및 반사되도록 배치되는 것일 수 있다. 이 때, 카메라(240)는 제3 거울(250)에 반사된 광과 마주하여 배치될 수 있음은 물론이다.
한편, 촬상 장치(200)는 제1 조명(220)에 더하여 제2 조명(260)을 포함할 수 있다. 제2 조명(260)은 제3 거울(250) 상에 배치되어, 배터리(10)에 광을 조사하며, 동축 조명일 수 있다.
또한, 배터리(10)가 하우징(210)을 통과하도록, 이송 수단(270)이 배터리(10)를 배터리(10)의 축 방향(X)으로 이송한다. 배터리(10)는 이송 수단(270)을 통해 이송되어, 하우징(210) 내의 검사 영역에 도달한 후 일정 시간 정지하여 카메라(240)로 촬영됨으로써, 배터리(10)의 측면 검사가 수행될 수 있다. 검사가 수행된 배터리(10)는 다시 이송 수단(270)을 통해 후속 공정으로 이송된다.
한편, 반전 수단(280)이 카메라(240)로 촬영된 배터리(10)를 뒤엎는다. 즉, 반전 수단(280)은 배터리(10)를 180°회전시킨 상태로 재배치한다. 도면을 기준으로 설명하면, 반전 수단(280)은 배터리(10)를 Z 방향(Z)으로 위 아래가 반전되도록 뒤엎을 수 있다. 따라서, 배터리(10)의 측면 검사가 수행되지 않은 반대 측면에 대해서도 전술한 촬상 장치(200)와 동일한 장치로 측면 검사가 수행될 수 있다. 검사 대상이 되는 제1 영역(A1)은 배터리(10)의 측면(200S)의 절반 이상이므로, 첫 번째 측면 검사 및 두 번째 측면 검사 시 검사 영역의 일부는 서로 중첩될 수 있다.
이 때, 배터리(10)의 측면 검사가 수행되지 않은 반대 측면에 대한 측면 검사는 공정의 원활한 흐름을 위해 별도의 촬상 장치(200)로 수행될 수 있다. 즉, 촬상 장치(200)는 각각 배터리(10)의 양 측면 각각을 검사하기 위한 한 쌍의 촬상 장치(200)를 포함할 수 있다. 다만, 비용 절감을 위해서 하나의 촬상 장치(200)로 배터리(10)의 양 측면 각각에 대한 측면 검사를 수행할 수도 있을 것이다.
한편, 일반적으로 원통형 전지의 측면 외관 검사 시, 전지를 360° 회전 또는 굴림시켜 영상을 획득해야 하며, 전지의 회전 또는 굴림 시 영상의 노이즈(noise)가 발생하여 영상의 품질 및 검사 장치의 검출력을 저하시키는 문제가 있다. 또한, 촬영 중심부에서 멀어질수록, 곡면으로 인한 그림자 등에 의해 결함의 시인성을 확보하기 어려운 문제가 있다.
본 발명의 일 실시예에 따른 촬상 장치(200)는 제1 거울(231) 및 제2 거울(232)을 포함함으로써, 배터리(10)의 측면(200S)의 절반 이상인 제1 영역(A1)에 대한 전체 영상을 한 번의 촬영을 통해 획득할 수 있다. 즉, 배터리(10) 일 측면 및 타 측면 각각에 대한 2회의 검사로 배터리(10)의 측면의 전체 영역에 대한 외관 검사가 가능하다. 뿐만 아니라, 검사 대상인 제1 영역(A1) 중 중심부와 먼 영역에서도 결함의 시인성을 충분히 확보할 수 있다. 이를 통해, 원통형 전지의 회전 및 굴림 없이 측면 외관 검사를 실시할 수 있는 촬상 장치를 제공할 수 있다. 또한, 영상의 노이즈를 방지하고, 영상의 품질 및 검사 장치의 검출력을 향상시킬 수 있는 촬상 장치를 제공할 수 있다.
한편, 도 9 및 10을 통해 설명한 실시예에 따른 촬상 장치는 배터리의 측면을 검사하는 데 적합한 구조로, 본 발명에 따른 촬상 장치의 일 예로서 제시되었다.
도 11a는 본 발명의 다른 실시예에 따른 촬상 장치의 외관을 나타낸 도면이고, 도 11b는 본 발명의 다른 실시예에 따른 촬상 장치의 멀티 채널 조명 구성도이다.
도 11a에 도시된 촬상 장치는 배터리 셀의 리벳부(rivet), 벤트부(vent) 등 배터리의 상면 및 하면에 대한 이미지를 획득하기에 적합한 구조로, 도 11b에 도시된 바와 같은 멀티 조명 장치를 이용해 다양한 조명 조건에서 다양한 이미지를 취득할 수 있다. 여기서, 멀티 조명 장치는 예를 들어, 돔(Doem) 조명, 로우 앵글(Low Angle) 조명, 동축(Coaxial) 조명, 링(Ring) 조명, 암시야(Dark Field) 조명을 포함할 수 있다. 이처럼, 본 발명에 따른 촬상 장치는 배터리의 상면 및 하면, 배터리의 측면 등 배터리 셀의 다양한 부분에 대한 이미지를 촬상하는 구조를 포함할 수 있다.
도 12는 본 발명의 실시예에 따른 외관 검사 장치의 블록 구성도이다.
본 발명의 실시예에 따른 외관 검사 장치(1000)는, 적어도 하나의 프로세서(1010), 상기 프로세서를 통해 실행되는 적어도 하나의 명령을 저장하는 메모리(1020) 및 네트워크와 연결되어 통신을 수행하는 송수신 장치(1030)를 포함할 수 있다.
여기서, 상기 적어도 하나의 명령은, 대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하도록 하는 명령; 전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령; 밝기 보정된 이미지로부터 불량 후보군을 추출하도록 하는 명령; 추출된 불량 후보군에 대해 이미지 후처리를 수행하도록 하는 명령; 및 후처리된 이미지로부터 대상 객체의 불량 여부를 판단하도록 하는 명령을 포함할 수 있다.
본 발명의 실시예에 따른 외관 검사 장치는 대상 객체의 외관을 촬상하는 촬상 장치(imaging device)와 연동하거나 이러한 촬상 장치를 포함할 수 있다. 본 발명에 따른 촬상 장치는 도 9, 10, 11a 및 11b에 도시된 장치와 동일 또는 유사한 형태로 제공될 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령; 상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을산출도록 하는 명령; 및 상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령을 포함할 수 있다.
상기 보정 이득값을 산출도록 하는 명령은, 상기 타겟밝기를 상기 평균 밝기로 나누어 보정 이득값을 계산하도록 하는 명령을 포함할 수 있다.
상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령은, 각 픽셀의 원래 밝기에 상기 보정 이득값을 곱하여 각 픽셀별 밝기를 보정하도록 하는 명령을 포함할 수 있다. 상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령은, 상기 검사 영역 내 픽셀의 개수 및 각 픽셀의 밝기를 기초로 상기 평균 밝기를 계산하도록 하는 명령을 포함할 수 있다.
이때, 상기 타겟 밝기는 사용자에 의해 설정 가능하다.
한편, 상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 흑백 이미지로 변경하도록 하는 명령을 포함할 수 있다.
상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은, 촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 R 채널, G 채널, 및 B 채널로 분리하도록 하는 명령을 포함할 수 있다.
그에 따라, 상기 평균 밝기를 산출하도록 하는 명령, 상기 보정 이득값을 산출하도록 하는 명령, 및 상기 각 픽셀별 밝기를 보정하도록 하는 명령은, 상기 R 채널, G 채널, 및 B 채널 각각에 대해 수행될 수 있다.
외관 검사 장치(1000)는 또한, 입력 인터페이스 장치(1040), 출력 인터페이스 장치(1050), 저장 장치(1060) 등을 더 포함할 수 있다. 외관 검사 장치(1000)에 포함된 각각의 구성 요소들은 버스(bus)(1070)에 의해 연결되어 서로 통신을 수행할 수 있다.
저장 장치(1060)는 촬상 장치가 촬상한 다수의 이미지, 이로부터 전처리된 이미지, 후처리된 이미지 등 본 발명에 따른 검사 방법 내 각 단계에서 생산되는 적어도 하나의 이미지를 저장할 수 있다. 저장 장치(1060)에 저장되어 있던 이미지는, 본 발명에 따른 검사 방법의 실행 중 필요한 경우 적어도 하나의 프로세서(1010)로 제공될 수 있따.
여기에서, 프로세서(1010)는 중앙처리장치(central processing unit, CPU), 그래픽 처리 장치(graphics processing unit, GPU), 또는 본 발명의 실시예들에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 메모리(또는 저장 장치)는 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리는 읽기 전용 메모리(read only memory, ROM) 및 랜덤 액세스 메모리(random access memory, RAM) 중에서 적어도 하나로 구성될 수 있다.
본 발명의 실시예에 따른 방법의 동작은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 프로그램 또는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산 방식으로 컴퓨터로 읽을 수 있는 프로그램 또는 코드가 저장되고 실행될 수 있다.
본 발명의 일부 측면들은 장치의 문맥에서 설명되었으나, 그것은 상응하는 방법에 따른 설명 또한 나타낼 수 있고, 여기에서 블록 또는 장치는 방법 단계 또는 방법 단계의 특징에 상응한다. 유사하게, 방법의 문맥에서 설명된 측면들은 또한 상응하는 블록 또는 아이템 또는 상응하는 장치의 특징으로 나타낼 수 있다. 방법 단계들의 몇몇 또는 전부는 예를 들어, 마이크로프로세서, 프로그램 가능한 컴퓨터 또는 전자 회로와 같은 하드웨어 장치에 의해(또는 이용하여) 수행될 수 있다. 몇몇의 실시예에서, 가장 중요한 방법 단계들의 하나 이상은 이와 같은 장치에 의해 수행될 수 있다.
이상 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
1000: 외관 검사 장치 1010: 프로세서
1020: 메모리 1040: 입력 인터페이스 장치
1050: 출력 인터페이스 장치 1060: 저장 장치

Claims (19)

  1. 대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하는 단계;
    전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계;
    밝기 보정된 이미지로부터 불량 후보군을 추출하는 단계;
    추출된 불량 후보군에 대해 이미지 후처리를 수행하는 단계; 및
    후처리된 이미지로부터 대상 객체의 불량 여부를 판단하는 단계를 포함하는, 제품의 외관 검사 방법.
  2. 청구항1에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는,
    상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하는 단계;
    상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을 산출하는 단계; 및
    상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하는 단계를 포함하는, 제품의 외관 검사 방법.
  3. 청구항 2에 있어서,
    상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을 산출하는 단계는,
    상기 타겟밝기를 상기 평균 밝기로 나누어 보정 이득값을 계산하는 단계를 포함하는, 제품의 외관 검사 방법.
  4. 청구항 2에 있어서,
    상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하는 단계는,
    각 픽셀의 원래 밝기에 상기 보정 이득값을 곱하여 각 픽셀별 밝기를 보정하는 단계를 포함하는, 제품의 외관 검사 방법.
  5. 청구항 2에 있어서,
    상기 타겟 밝기는 사용자에 의해 설정 가능한, 제품의 외관 검사 방법.
  6. 청구항2에 있어서,
    상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하는 단계는,
    상기 검사 영역 내 픽셀의 개수 및 각 픽셀의 밝기를 기초로 상기 평균 밝기를 계산하는 단계를 포함하는, 제품의 외관 검사 방법.
  7. 청구항2에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는,
    촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 흑백 이미지로 변경하는 단계를 포함하는, 제품의 외관 검사 방법.
  8. 청구항2에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하는 단계는,
    촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 R 채널, G 채널, 및 B 채널로 분리하는 단계를 포함하는, 제품의 외관 검사 방법.
  9. 청구항8에 있어서,
    상기 평균 밝기를 산출하는 단계, 상기 보정 이득값을 산출하는 단계, 및 상기 각 픽셀별 밝기를 보정하는 단계는, 상기 R 채널, G 채널, 및 B 채널 각각에 대해 수행되는, 제품의 외관 검사 방법.
  10. 적어도 하나의 프로세서;
    상기 적어도 하나의 프로세서를 통해 실행되는 적어도 하나의 명령을 저장하는 메모리를 포함하고,
    상기 적어도 하나의 명령은,
    대상 객체의 외관을 촬상한 이미지를 획득하여 전처리하도록 하는 명령;
    전처리된 이미지 내에서 검사대상 영역을 추출하고, 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령;
    밝기 보정된 이미지로부터 불량 후보군을 추출하도록 하는 명령;
    추출된 불량 후보군에 대해 이미지 후처리를 수행하도록 하는 명령;및
    후처리된 이미지로부터 대상 객체의 불량 여부를 판단하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  11. 청구항 10에 있어서,
    대상 객체의 외관을 촬상하는촬상 장치와 연동하거나 상기 촬상 장치를 포함하는, 제품의 외관 검사 장치.
  12. 청구항 10에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은,
    상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령;
    상기 산출된 평균 밝기 및 타겟밝기에 기초하여 보정 이득값을산출도록 하는 명령; 및
    상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  13. 청구항 12에 있어서,
    상기 보정 이득값을산출도록 하는 명령은,
    상기 타겟밝기를 상기 평균 밝기로 나누어 보정 이득값을 계산하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  14. 청구항 12에 있어서,
    상기 보정 이득값에 따라 각 픽셀별 밝기를 보정하도록 하는 명령은,
    각 픽셀의 원래 밝기에 상기 보정 이득값을 곱하여 각 픽셀별 밝기를 보정하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  15. 청구항 12에 있어서,
    상기 타겟 밝기는 사용자에 의해 설정 가능한, 제품의 외관 검사 장치.
  16. 청구항 12에 있어서,
    상기 추출된 검사 영역 내 픽셀들의 평균 밝기를 산출하도록 하는 명령은
    상기 검사 영역 내 픽셀의 개수 및 각 픽셀의 밝기를 기초로 상기 평균 밝기를 계산하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  17. 청구항 12에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은,
    촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 흑백 이미지로 변경하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  18. 청구항 12에 있어서,
    상기 추출된 검사대상 영역에 대한 밝기 보정을 수행하도록 하는 명령은,
    촬상한 컬러 이미지에 대해 밝기 보정을 적용하기 전, 컬러 이미지를 R 채널, G 채널, 및 B 채널로 분리하도록 하는 명령을 포함하는, 제품의 외관 검사 장치.
  19. 청구항 18에 있어서,
    상기 평균 밝기를 산출하도록 하는 명령, 상기 보정 이득값을 산출하도록 하는 명령, 및 상기 각 픽셀별 밝기를 보정하도록 하는 명령은, 상기 R 채널, G 채널, 및 B 채널 각각에 대해 수행되는, 제품의 외관 검사 장치.
KR1020230099316A 2022-09-19 2023-07-31 제품의 외관 검사 장치 및 방법 KR20240039584A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2023/014038 WO2024063471A1 (ko) 2022-09-19 2023-09-18 제품의 외관 검사 장치 및 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020220117571 2022-09-19
KR20220117571 2022-09-19

Publications (1)

Publication Number Publication Date
KR20240039584A true KR20240039584A (ko) 2024-03-26

Family

ID=90472951

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230099316A KR20240039584A (ko) 2022-09-19 2023-07-31 제품의 외관 검사 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20240039584A (ko)

Similar Documents

Publication Publication Date Title
CN108445007B (zh) 一种基于图像融合的检测方法及其检测装置
US7978903B2 (en) Defect detecting method and defect detecting device
JP4150390B2 (ja) 外観検査方法及び外観検査装置
US7561751B2 (en) Image processing method
WO2021102741A1 (zh) 一种免疫层析检测的图像分析方法以及系统
RU2636681C2 (ru) Расширенный анализ для основанной на изображении оценки износа поликлинового ремня
JP4244046B2 (ja) 画像処理方法および画像処理装置
KR100827906B1 (ko) 기판 검사 장치
US7668344B2 (en) Stain inspection method and apparatus
JP6623545B2 (ja) 検査システム、検査方法、プログラムおよび記憶媒体
KR20240039584A (ko) 제품의 외관 검사 장치 및 방법
JP2009080004A (ja) 検査装置
JP2005326323A (ja) 画質検査装置
CN105938088B (zh) 隐形眼镜的颜色瑕疵的检测方法及检测系统
WO2024063471A1 (ko) 제품의 외관 검사 장치 및 방법
JP2005140655A (ja) シミ欠陥の検出方法及びその検出装置
CN114359414A (zh) 镜头脏污识别方法、装置、计算机设备及存储介质
JP2001028059A (ja) 色ムラ検査方法及び装置
US20100254624A1 (en) Method of correcting image distortion
US10958899B2 (en) Evaluation of dynamic ranges of imaging devices
JP2008292398A (ja) 部品電極の浮き不良の検査方法および基板検査装置
JPH08327497A (ja) カラー液晶表示パネルの検査方法
JP6509146B2 (ja) 検査装置および検査方法
KR100249599B1 (ko) 광학적 불균일 검사장치 및 광학적 불균일 검사방법
JP5402182B2 (ja) 外観検査方法及び外観検査装置