KR102249836B1 - 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체 - Google Patents

투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체 Download PDF

Info

Publication number
KR102249836B1
KR102249836B1 KR1020190104345A KR20190104345A KR102249836B1 KR 102249836 B1 KR102249836 B1 KR 102249836B1 KR 1020190104345 A KR1020190104345 A KR 1020190104345A KR 20190104345 A KR20190104345 A KR 20190104345A KR 102249836 B1 KR102249836 B1 KR 102249836B1
Authority
KR
South Korea
Prior art keywords
inspection
area
region
interest
user
Prior art date
Application number
KR1020190104345A
Other languages
English (en)
Other versions
KR20210024767A (ko
Inventor
이석원
Original Assignee
레이디소프트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 레이디소프트 주식회사 filed Critical 레이디소프트 주식회사
Priority to KR1020190104345A priority Critical patent/KR102249836B1/ko
Priority to US17/604,692 priority patent/US20220215521A1/en
Priority to PCT/KR2020/010483 priority patent/WO2021029625A1/ko
Publication of KR20210024767A publication Critical patent/KR20210024767A/ko
Priority to KR1020210050811A priority patent/KR102415928B1/ko
Application granted granted Critical
Publication of KR102249836B1 publication Critical patent/KR102249836B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/06Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and measuring the absorption
    • G01N23/18Investigating the presence of flaws defects or foreign matter
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9501Semiconductor wafers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00Investigating materials by wave or particle radiation
    • G01N2223/10Different kinds of radiation or particles
    • G01N2223/101Different kinds of radiation or particles electromagnetic radiation
    • G01N2223/1016X-ray

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

본 발명은 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 이러한 방법을 실행시키기 위한 명령어들이 저장된 컴퓨터 판독 가능한 저장매체에 관한 것으로, 구체적으로는 전자회로기판이 실장된 전자부품 또는 산업용 부품에 대한 투과영상들이 존재할 때에 이들 투과영상들을 대상으로 사용자가 다양한 검사를 수행할 수 있도록 함으로써 다양한 상황 또는 대상체에 따라 사용자가 쉽게 결함 검사를 할 수 있게 한 비파괴검사 기능 제공 방법 및 이러한 방법을 실행시키기 위한 명령어들이 저장된 컴퓨터 판독 가능한 저장 매체에 관한 것이다.

Description

투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체{Method for non-destructive inspection based on image and Computer-readable storage medium}
본 발명은 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 사용자 인터페이스에 관한 것으로, 구체적으로는 전자회로기판이 실장된 전자부품 또는 산업용 부품에 대한 투과영상들이 존재할 때에 이들 투과영상들을 대상으로 사용자가 다양한 검사를 수행할 수 있도록 함으로써 다양한 상황 또는 대상체에 따라 사용자가 쉽게 결함 검사를 할 수 있게 한 비파괴검사 기능 제공 방법 및 이러한 방법을 실행시키기 위한 명령어들이 저장된 컴퓨터 판독 가능한 저장 매체에 관한 것이다.
전자회로기판이 실장된 전자부품 또는 다양한 산업용 부품을 효과적으로 검사하기 위해, 특히 부품의 내부 상태를 검사하기 위해 종래로부터 엑스레이 등과 같은 투과 영상을 이용한 검사 기술이 존재하여 왔으며, 최근까지도 이러한 검사 기술에 대한 수요는 지속적으로 증가하고 있다.
한편, 전자부품 또는 산업용 부품의 대표적인 예로 BGA(Ball Grid Array), LGA(Land Grid Array), QFP(Quad Flat Package), QFN(Quad Flat Non-lead Package) 등을 꼽을 수 있는데, 이들 전자 부품을 검사하기 위해서는 다수의 검사 대상체를 자동으로 인식하고 내부 보이드(void), 솔더 면적, 위치 기반 결함 등을 효과적으로 검사할 수 있는 기술이 필수라 할 것이다.
다른 한편, 엑스레이 단층이미지를 이용하여 물체 내부를 3차원 상에서 검사하고는 하는 수요도 증가하고 있지만, 각종 아티펙트 (링아티펙트, 빔하드닝, 스캐터링, 콘빔, 커핑아티펙트 등)로 인하여 실제 검사는 검사자가 살펴보고자 하는 방향의 단면이미지에서 검사영역을 직접 설정하여 검사를 수행하는 수준에 그치고 있다.
이에 현재는2차원 투과영상 및 엑스레이 단층이미지를 이용한 검사 모두 검사영역을 효율적으로 설정하고 산업에서 요구되는 검사요소를 모두 만족시키는 검사방법 개발이 필요한 실정이다.
본 발명은 이와 같은 문제점에 착안하여 도출된 것으로, 이상에서 살핀 기술적 문제점을 해소시킬 수 있음은 물론, 본 기술분야에서 통상의 지식을 가진 자가 용이하게 발명할 수 없는 추가적인 기술요소들을 제공하기 위해 발명되었다.
대한민국 등록특허공보 제10-1962076호(2019.03.19.)
본 발명은 2차원 투과영상 또는 임의 대상체를 촬영한 단층영상들을 기초로 비파괴검사 기능을 가능한 환경을 제공하기 위한 것이며, 검사자로 하여금 살피고자 하는 영역을 세밀하게, 그리고 상황에 따라 다양한 검사 파라미터 및 검사방식을 선택할 수 있게 함으로써 종래에 비해 신속하고 정확한 결함 검출이 이루어질 수 있게 하는 것을 목적으로 한다.
특히 본 발명은 복잡한 구조로 이루어져 있거나 두께가 일정하지 않는 등 종래 방식으로는 결함을 쉽게 판별할 수 없는 대상체에 대해서도 검사자가 사전에 설정해 둔 파라미터들 내지 템플릿에 따라 정확하게 결함을 식별해 낼 수 있도록 하는 것을 목적으로 한다.
한편, 본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
위와 같은 문제점을 해결하기 위하여, 본 발명에 따른 비파괴검사 기능을 제공하는 방법은, 디스플레이를 가지는 비파괴검사 장치에서: 검사용 템플릿 생성 메뉴에 대한 사용자 입력이 수신되면, 복수의 아이콘들을 포함하는 제1 사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계; 상기 제1사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계; 및 수신되는 상기 사용자 입력에 따라 검사용 템플릿을 생성 및 설정하는 단계;를 포함한다.
또한, 상기 비파괴검사 기능을 제공하는 방법에 있어서 상기 복수의 아이콘들은, 템플릿 생성 아이콘, 및 템플릿 저장 아이콘을 포함하고, 검사 방식 아이콘, 또는 관심영역 지정 아이콘 중 적어도 하나의 것을 포함할 수 있다.
또한, 상기 비파괴검사 기능을 제공하는 방법에 있어서 상기 제1 사용자 인터페이스는, 복수 개의 검사 파라미터들에 대한 설정을 위한 검사 파라미터 입력영역을 더 포함하는 것을 특징으로 할 수 있으며, 이 때 상기 파라미터 입력영역에는, 사용자로부터의 탭 선택 입력에 따라 프리프로세싱 파라미터들, 세그멘테이션 파라미터들, 또는 이밸류에이션 파라미터들을 설정할 수 있는 파라미터 입력창이 표시되는 것을 특징으로 할 수 있다.
또한, 상기 비파괴검사 기능을 제공하는 방법에 있어서 상기 검사 방식 아이콘에는, 지정된 관심영역 내 결함을 식별하는 제1검사 방식을 선택하기 위한 제1검사 방식 아이콘; 지정된 관심영역 내 비정형 오브젝트 영역을 추출하고, 해당 비정형 오브젝트 영역 내 결함을 식별하는 제2검사 방식을 선택하기 위한 제2검사 방식 아이콘; 또는 지정된 관심영역 내 포함된 서브관심영역 - 상기 서브관심영역의 형상은 기 설정된 것임 - 을 확정하고, 상기 서브관심영역 내 결함을 식별하는 제3검사 방식을 선택하기 위한 제3검사 방식 아이콘;중 적어도 어느 하나가 포함될 수 있다.
또한, 상기 비파괴검사 기능을 제공하는 방법에 있어서 상기 관심영역 지정 아이콘에 대한 사용자로부터의 선택 입력이 수신되면, 메인 영역 내에서 상기 사용자의 입력에 따라 지정되는 적어도 4개의 점에 의해 형성되는 관심영역을 설정하는 것을 특징으로 할 수 있다. 또한 사용자 조작에 의해 움직이는 입력 포인터가 상기 관심영역 내 오브젝트 영역 또는 결함영역 상에 위치할 때, 상기 오브젝트 영역 또는 결함영역에 대한 영역정보를 표시하는 것을 특징으로 할 수 있다. 나아가, 사용자 조작에 의해 움직이는 입력 포인터가 상기 관심영역 내 오브젝트 영역 또는 결함영역 상에 위치할 때, 상기 오브젝트 영역 또는 결함영역을 타 영역과 구분하기 위한 외곽선을 더 표시하는 것을 특징으로 할 수 있다.
또한, 상기 비파괴검사 기능을 제공하는 방법에 있어서 자동 검사 메뉴에 대한 사용자 입력이 수신되면, 복수의 아이콘들 및 현재 검사 상태창을 포함하는 제2사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계; 상기 제2사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계; 및 수신되는 상기 사용자 입력에 따라 복수의 대상 이미지들에 대하여 결함 검사를 실시하는 단계;를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 컴퓨터 판독 가능한 저장 매체는 비파괴검사 기능을 제공하는 방법을 수행하기 위한 명령어들을 저장하되, 상기 비파괴검사 기능을 제공하는 방법은, 디스플레이를 가지는 비파괴검사 장치에서: 검사용 템플릿 생성 메뉴에 대한 사용자 입력이 수신되면, 복수의 아이콘들을 포함하는 제1 사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계; 상기 제1사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계; 및 수신되는 상기 사용자 입력에 따라 검사용 템플릿을 생성 및 설정하는 단계;를 포함할 수 있다.
본 발명에 따르면 검사자로 하여금 비파괴검사를 위한 다양한 파라미터, 템플릿을 세밀하게 설정할 수 있는 환경을 제공하며, 또한 대상체 또는 상황에 따라 적절한 검사방식을 선택하여 비파괴검사를 수행할 수 있게 하는 효과가 있다.
또한 본 발명에 따르면 복잡한 구조의 대상체라 하더라도 2차원 투과영상 존재시 신속하고 정확한 결함 검출이 가능해지는 효과가 있다.
또한 본 발명에 따르면 기존에 결함 검출이 어려웠던 단층영상에 대해서도 오류 없이 정확하게 결함을 식별할 수 있게 되는 효과가 있다.
도 1은 일반적인 비파괴검사의 과정 및 비파괴검사에 필요한 장치를 간략히 도시한 것이다.
도 2는 본 발명에 따라 제공되는 비파괴검사 기능의 실행 방법을 순서에 따라 도시한 것이다.
도 3은 제1 사용자 인터페이스의 표시 모습을 도시한 것이다.
도 4는 제1 사용자 인터페이스 상에서 마스킹 영역을 설정하는 모습을 도시한 것이다.
도 5는 비파괴검사 실행을 위해 검사 실행 아이콘을 클릭하였을 때 나타나는 제1 사용자 인터페이스에서의 모습을 도시한 것이다.
도 6및 도 7은 사용자가 포인터를 이동시켜 대상 이미지의 임의점에 위치시켰을 때에 표시되는 제1 사용자 인터페이스에서의 모습을 도시한 것이다.
도 8은 제1 검사방식에 따라 비파괴검사가 실행된 대상이미지의 일 실시예를 도시한 것이다.
도 9는 제2 검사방식에 따라 비파괴검사가 실행된 대상이미지의 일 실시예를 도시한 것이다.
도 10은 제3 검사방식에 따라 비파괴검사가 실행된 대상이미지의 일 실시예를 도시한 것이다.
도 11은 제2 사용자 인터페이스가 표시된 모습을 도시한 것이다.
본 발명의 목적과 기술적 구성 및 그에 따른 작용 효과에 관한 자세한 사항은 본 발명의 명세서에 첨부된 도면에 의거한 이하의 상세한 설명에 의해 보다 명확하게 이해될 것이다. 첨부된 도면을 참조하여 본 발명에 따른 실시예를 상세하게 설명한다.
본 명세서에서 개시되는 실시예들은 본 발명의 범위를 한정하는 것으로 해석되거나 이용되지 않아야 할 것이다. 이 분야의 통상의 기술자에게 본 명세서의 실시예를 포함한 설명은 다양한 응용을 갖는다는 것이 당연하다. 따라서, 본 발명의 상세한 설명에 기재된 임의의 실시예들은 본 발명을 보다 잘 설명하기 위한 예시적인 것이며 본 발명의 범위가 실시예들로 한정되는 것을 의도하지 않는다.
도면에 표시되고 아래에 설명되는 기능 블록들은 가능한 구현의 예들일 뿐이다. 다른 구현들에서는 상세한 설명의 사상 및 범위를 벗어나지 않는 범위에서 다른 기능 블록들이 사용될 수 있다. 또한, 본 발명의 하나 이상의 기능 블록이 개별 블록들로 표시되지만, 본 발명의 기능 블록들 중 하나 이상은 동일 기능을 실행하는 다양한 하드웨어 및 소프트웨어 구성들의 조합일 수 있다.
또한, 어떤 구성요소들을 포함한다는 표현은 “개방형”의 표현으로서 해당 구성요소들이 존재하는 것을 단순히 지칭할 뿐이며, 추가적인 구성요소들을 배제하는 것으로 이해되어서는 안 된다.
나아가 어떤 구성요소가 다른 구성요소에 “연결되어” 있다거나 “접속되어” 있다고 언급될 때에는, 그 다른 구성요소에 직접적으로 연결 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 한다.
본격적인 설명에 앞서 우선 투과영상 기반의 비파괴검사 기능이 어떤 시스템 및 과정을 통해 제공되는지 도 1과 도 2를 참조하여 살펴보기로 한다.
먼저 도 1은 투과영상 기반의 비파괴검사를 위한 개략적인 구성들을 도시한 것이다. 비파괴검사란, 회로 등의 대상체를 파괴시키지 않고 내부의 상태를 검사하는 방법을 일컬으며, 그 방법으로는 방사선투과검사, 초음파 탐상법, 자기 탐상법, 전자유도 검사법 등이 있다. 일반적으로 회로 등의 대상체는 전체에 걸쳐서 질이 균일하고 완전무결한 것은 아니기 때문에 해당 대상체가 요구되는 조건을 충분히 만족하는지 검사해서 결함을 발견할 필요가 있는데, 본 발명은 바로 이러한 결함을 찾는 과정에 대한 것이다. 도 1을 참조할 때, 비파괴검사는 투과영상에 대한 이미지들을 분석하는 것을 전제로 하며, 따라서 본 발명이 활용되기 위하여서는 반드시 대상체에 대한 투과영상이 필요하다. 이 때 대상체란 결함이 있는지 여부를 식별할 대상을 의미하며, 이러한 대상체의 종류에는 전자부품들 또는 산업부품들, 예를 들어 회로기판, 미세 파이프, 패널 등과 같은 것들이 포함될 수 있다. 또한 투과영상의 생성은 앞서 언급한 방사선투과검사, 초음파 탐상법, 자기 탐상법, 전자유도 검사법 등 기존에 존재하던 다양한 방식에 따라 이루어질 수 있으나, 다만 본 상세한 설명에서는 발명의 이해를 돕기 위하여 엑스레이 장치(50)를 이용하여 대상체에 대한 투과영상이 생성되었음을 전제로 설명하기로 한다.
투과영상(들)이 생성된 이후, 상기 투과영상들은 컴퓨터가 판독할 수 있는 형태의 이미지로 변환된 후 본 발명에 따른 비파괴검사 장치(100)로 전송된다. 이 때, 컴퓨터로 판독할 수 있는 형태의 이미지를 본 상세한 설명에서는 대상 이미지(들)라 칭하기로 한다.
상기 비파괴검사 장치(100)와 관련하여, 해당 구성은 장치의 측면에서 볼 때 중앙처리유닛(CPU)과 메모리를 구비하고 있는 것을 전제로 한다. 중앙처리유닛은 컨트롤러(controller), 마이크로 컨트롤러(microcontroller), 마이크로 프로세서(microprocessor), 마이크로 컴퓨터(microcomputer) 등으로도 불릴 수 있다. 또한 중앙처리유닛은 하드웨어(hardware) 또는 펌웨어(firmware), 소프트웨어, 또는 이들의 결합에 의해 구현될 수 있는데, 하드웨어를 이용하여 구현하는 경우에는 ASIC(application specific integrated circuit) 또는 DSP(digital signal processor), DSPD(digital signal processing device), PLD(programmable logic device), FPGA(field programmable gate array) 등으로, 펌웨어나 소프트웨어를 이용하여 구현하는 경우에는 위와 같은 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등을 포함하도록 펌웨어나 소프트웨어가 구성될 수 있다. 또한, 메모리는 ROM(Read Only Memory), RAM(Random Access Memory), EPROM(Erasable Programmable Read Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), 플래쉬(flash) 메모리, SRAM(Static RAM), HDD(Hard Disk Drive), SSD(Solid State Drive) 등으로 구현될 수 있다. 또한, 상기 비파괴검사 장치(100)는 중앙처리유닛 및 메모리 외에도 외부 단말기 또는 외부 로컬 서버와 데이터를 송수신 하기 위한 통신장치를 더 포함할 수 있다.
또한, 상기 비파괴검사 장치(100)는 디스플레이를 구비할 것을 요한다. 즉, 본 발명에 따라 비파괴검사 기능을 제공하기 위해서는 사용자에게 인터페이스들을 표시할 수 있는 수단이 필요하며, 이러한 디스플레이에는 종류를 가리지 않고 사용자에게 시각적으로 인터페이스를 표시할 수 있다면 모든 장치가 디스플레이의 한 종류가 될 수 있다.
한편, 상기 비파괴검사 장치(100)를 기능적인 측면에서 살펴볼 때, 상기 장치는 앞서 설명한 하드웨어들을 이용하여 복수의 대상 이미지(들)에 대한 이미지 처리를 수행할 수 있으며, 이 과정에서 사용자로 하여금 다양한 입력을 할 수 있도록 사용자 인터페이스, 즉 사용자가 임의의 기능을 실행시킬 수 있도록 입력이 가능한 사용자 인터페이스를 제공할 수 있다. 즉, 위 비파괴검사 장치(100)는 복수의 대상 이미지(들)를 대상으로 다양한 검사방식을 수행함으로써 검사자에게 대상체 또는 복수의 대상체들에 대한 검사 결과를 제공할 수 있다. 비파괴검사 장치(100)가 구체적으로 비파괴검사 기능을 제공하는 과정에 대해서는 아래 이어지는 도면들을 참조하여 설명하기로 한다.
도 2는 본 발명에 따라 제공되는 비파괴검사 기능이 사용자에 의해 실행된다고 가정하였을 때, 해당 비파괴검사가 진행되는 과정을 순서에 따라 개략적으로 도시한 것이다.
도 2에 따를 때, 가장 먼저 수행되는 단계는 대상체에 대한 투과영상을 촬영하는 단계(S101)이며, 본 단계는 엑스레이 장치(50)에 의해 수행될 수 있다. 엑스레이 장치(50)는 전술한 비파괴검사 장치(100)와 네트워크로 연결된 것일 수 있으며, 상기 비파괴검사 장치(100)를 조작하는 검사자의 입력에 따라 특정 대상체에 대한 엑스레이 촬영을 수행할 수 있다. 한편, 상기 엑스레이 장치(50)에 의해 촬영이 완료된 후에는 대상체에 대한 투과영상이 생성될 수 있으며, 이는 비파괴검사 장치(100)로 대상 이미지(들)의 포맷으로 변환된 뒤 전달되어 다음 단계를 진행토록 할 수 있다. 이 때, 투과영상들은 그 자체로 이미 컴퓨터 판독 가능한 것이어서 별도 대상 이미지(들)로 변환될 필요가 없을 수도 있으며, 이러한 경우 상기 투과 영상은 대상 이미지와 동일한 것으로 취급될 수 있다.
투과 영상 촬영 단계(S101) 이후, 비파괴검사 장치(100) 상에서는 상기 검사자의 입력을 받아 검사용 템플릿 설정이 이루어질 수 있다. (S102) 검사용 템플릿이란, 임의의 대상 이미지 내에서 결함을 효과적으로 식별해 내기 위해 검사자에 의해 입력된 복수 파라미터 값들의 집합으로 이해될 수 있다. 검사용 템플릿은 검사자가 상기 비파괴검사 장치(100)와 연결된 입력장치들(키보드, 마우스 등)을 통해 입력한 파라미터 값들을 기반으로 설정될 수 있으며, 이러한 파라미터들의 종류에는 검사도구, 검사용도, 관심영역 위치, 관심영역 형상, 관심영역 크기, 전처리 방식, 추출 방식, 결함 판정 기준 등이 포함될 수 있고, 나아가 대상 이미지의 정렬 및 보정, 대상 이미지의 위치, 회전, 확대배율, 1픽셀당 실제 크기 변환 비율 등이 더 포함될 수 있다. 한편, 상기 S102 단계는 본 상세한 설명에서 후술하게 될 제1 사용자 인터페이스를 통하여 사용자가 다양한 파라미터들을 입력하는 과정들을 포함할 수 있다. 제1 사용자 인터페이스에 대해서는 이어지는 도면에서부터 더 상세히 설명하기로 한다.
다시 도 2로 돌아와, S102단계 이후, 비파괴검사 장치(100)는 대상체에 대한 대상 이미지(들)를 로드(S103)하여 본격적인 결함 식별을 준비하며, 대상 이미지(들)가 로드 된 후에는 비파괴검사 수행 및 결과리포트 생성(S104)을 수행하고, 마지막으로 위 생성된 결과리포트를 검사자가 볼 수 있도록 화면에 출력시킨다. (S105)
이하에서는 도 3 내지 도 7을 참조하여, 본 발명에 따른 비파괴검사 기능을 제공하는 방법 중 특히 제1 사용자 인터페이스에 대해 자세히 살펴보기로 한다. 참고로 제1 사용자 인터페이스는 앞서 도 2에서 본 S102단계에서의 검사용 템플릿을 신규로 생성하기 위한 메뉴들을 포함하는 것이다.
본 발명에 따른 비파괴검사 기능을 제공하는 방법은, 기본적으로 디스플레이를 가지는 비파괴검사 장치 상에서 제1 사용자 인터페이스가 표시된 상태를 전제로 하며, 검사용 템플릿 생성을 원하는 사용자에 의해 검사용 템플릿 생성 메뉴가 선택되었을 때, 복수의 아이콘들을 포함하는 제1 사용자 인터페이스를 표시하는 단계, 상기 제1 사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계, 수신되는 사용자 입력에 따라 검사용 템플릿을 생성 및 설정하는 단계를 포함한다.
도 3에는 제1 사용자 인터페이스의 모습을 도시한 것으로, 여기에는 검사용 템플릿을 편집하는 데에 있어 필요한 이미지와 마커(marker)들이 표시되는 메인 영역(100), 그리고 사용자가 검사용 템플릿을 생성하기 위해 필요한 복수 개의 아이콘들이 포함되어 있다. 참고로, 아래 설명되는 아이콘들의 배치 위치, 도면에서 보이는 아이콘 모양 등은 모두 발명의 이해를 돕기 위해 하나의 실시예로 설명 및 도시된 것이며, 이들 배치 및 모양은 다양하게 변경될 수 있음을 이해한다.
도 3을 참조할 때, 먼저 제1 사용자 인터페이스의 가장 좌측에는 사용자 인터페이스의 종류를 변경할 수 있는 아이콘들이 표시될 수 있다. 즉, 도면부호 200 내에는 자동 검사 실행 모드(ADR), 검사 리뷰 모드(Review), 검사용 템플릿 편집 모드(Template)에 대응되는 아이콘들이 표시될 수 있으며, 각각의 아이콘들은 사용자로부터의 선택 입력이 있을 시 각각 다른 사용자 인터페이스의 형태로 화면 상에 표시될 수 있다. 도 3은 검사용 템플릿 편집(Template) 아이콘이 클릭된 상태로, 해당 아이콘에 대응되는 제1 사용자 인터페이스가 표시된 상태를 도시한 것이다. 한편, 사용자에 의해 선택 입력이 있었던 아이콘 주변에는 선택 입력이 없었던 아이콘과 다른 색깔이 배경으로 표시되어 사용자에게 어떤 아이콘이 선택 중인지를 인식시킬 수 있다.
또한, 상기 제1 사용자 인터페이스의 좌측 하단에는 설정 아이콘(Setting)이 배치될 수 있으며, 사용자에 의해 설정 아이콘이 클릭된 경우 언어 설정, 검사도구 설정을 위한 메뉴가 표시될 수 있다. 이 때, 검사도구 설정을 위한 메뉴 중에는 관심영역을 지정하고자 할 때에 드래그 된 선의 색깔, 선의 두께, 드래그 된 선 또는 드래그에 의해 설정된 영역의 투명도 등을 변경할 수 있는 메뉴가 포함될 수 있다.
한편, 제1 사용자 인터페이스 내에는 사용자가 검사용 템플릿을 생성 및 편집하는 데에 필요한 기능들을 아이콘화 한 것이 그룹별로 표시될 수 있는데, 예를 들어 도면부호 300 및 350과 같이 검사용 템플릿을 신규로 생성하고 저장하기 위한 아이콘들을 포함하는 템플릿 도구군, 그리고 도면부호 400, 450과 같이 임의의 검사용 템플릿에 대하여 다양한 설정을 할 수 있는 기능들이 아이콘화 되어 그룹으로 표시된 검사 도구군이 표시될 수 있다. 또한, 상기 제1 사용자 인터페이스에는 도면부호 500에서와 같이 파라미터들을 설정할 수 있는 영역(파라미터 입력 영역)이 더 포함될 수 있다. 이하에서는 상기 템플릿 도구군, 그리고 검사 도구군에 포함되는 각 아이콘들에 대해 살펴본다.
먼저 템플릿 도구군을 살펴볼 때, 해당 도구군에는 대상 이미지를 불러오기 위한 대상 이미지 임포트 아이콘(Img. Import), 비파괴검사의 결과 영상을 캡쳐하고 이를 임의의 이미지 포맷으로 저장하기 위한 캡쳐 아이콘(Capture), 비파괴검사의 결과를 리뷰 모드에서 읽을 수 있는 파일 형태(바람직하게는 XML)로 저장하기 위한 결과 저장 아이콘(Save Result), 새로운 검사용 템플릿을 생성 및 편집하기 위한 아이콘(New), 기 저장되어 있던 검사용 템플릿 또는 검사용 템플릿의 컴포넌트(상기 컴포넌트는 바람직하게는 XML 파일로 생성되어 있는 것임)를 불러오기 위한 아이콘(Import), 검사용 템플릿의 기준 이미지를 변경하기 위한 이미지 변경 아이콘(Img. Change), 현재 편집 중인 검사용 템플릿을 기준으로 간략히 자동 검사 모드를 간이 실행시켜 자동 검사 가능여부를 확인해 보는 시뮬레이터 아이콘(Simulator), 편집이 완료된 검사용 템플릿을 저장하는 저장 아이콘(Save), 비파괴검사 수행 시 대상 이미지들을 자동으로 정렬할지 여부를 결정하기 위한 정렬 아이콘(Alignment), 편집 중 현재의 설정 상태에서 대상 이미지에 대한 비파괴검사를 실시하는 검사 아이콘(Inspect), 현재 편집 중인 검사도구의 설정들을 유지한 채 검사 결과만을 초기화 하는 클리어 아이콘(Clear), 검사도구 설정 및 검사 결과를 모두 초기화 하는 리셋 아이콘(Reset), 또는 이미지의 픽셀 단위를 임의로 변경(바람직하게는 실측 SI단위로 변경)할 수 있는 캘리브레이션 아이콘(Calibration)이 포함될 수 있다. 한편, 상기 시뮬레이터 아이콘과 관련하여, 사용자에 의해 시뮬레이터 아이콘이 선택(클릭)된 경우, 비파괴검사 장치 상에서는 사용자로 하여금 대상 폴더를 지정할 수 있도록 안내창을 표시할 수 있으며, 임의의 대상 폴더가 선택된 경우 현재 편집 중인 검사용 템플릿의 설정들을 기준으로 선택된 폴더 내 이미지 전체를 검사하도록 할 수 있다. 이 때, 검사결과는 저장되지 않을 수 있다. 또한, 상기 정렬 아이콘과 관련하여, 사용자에 의해 상기 정렬 아이콘이 선택(클릭)된 경우 비파괴검사 장치는 사용자에게 자동 정렬 사용여부를 묻는 항목, 정렬 기준을 대상 이미지 전체로 할 것인지 아니면 사용자가 정의한 영역만으로 한정할 것인지를 묻는 항목, 그 외 정렬에 필요한 항목들(예: 정렬 후 검사용 템플릿의 기준이 되는 대상 이미지와 검사 대상이 되는 대상 이미지의 각 픽셀 밀도 차의 총 합을 계산하여 그 값이 기준값 이하이면 검사를 진행하고 초과하면 정렬 에러로 판정할 수 있도록 하기 위한 값)이 별도의 안내창을 통해 사용자에게 표시될 수 있다.
다른 한편, 상기 제1 사용자 인터페이스 내에는 포인터(바람직하게는 마우스 포인터)의 위치값을 (x,y)좌표값으로 나타내고, 해당 포인터가 위치한 점에서의 픽셀 밝기값을 표시하는 포인터 정보(310)가 더 표시될 수 있다. 본 발명에 따른 사용자 인터페이스 상에서는 포인터의 위치가 변경될 때마다 상기 포인터 정보(310)를 실시간으로 사용자에게 제공할 수 있으므로, 대상 이미지 내에 미세한 밝기값 차이가 있어 사람이 육안으로 식별하기 어려운 정도의 영역(예: 투과 영상 상에서는 임의의 부품이 중첩되었을 때 중첩에 의해 이미지 내에서 표시되는 색깔이 달라질 수 있는데, 중첩되는 부품이 매우 얇은 것인 경우 미세한 색깔 차이가 발생할 수 있음)이 존재한다 하더라도 사용자로서는 위 포인터 정보(310)를 확인해 가면서 검사용 템플릿의 각종 파라미터를 입력하거나 관심 영역들을 지정할 수 있게 된다.
다시 도 3을 참조할 때, 화면의 우측에는 검사 도구군(400, 450) 및 파라미터 입력 영역(500)이 표시될 수 있다.
도면부호 400은 사용자가 검사 방식을 선택할 수 있도록 하기 위해 제시된 아이콘들로, 여기에는 제1 검사방식(void; 관심영역이 지정되었을 때 해당 관심영역 내에서의 결함 여부를 검사), 제2 검사방식(NGA; 검사를 하고자 하는 대상 이미지들이 임의 대상체에 대한 단층 이미지들인 경우 관심영역 내 비정형 오브젝트를 탐지해 내고 그 내부의 결함을 검사), 또는 제3 검사방식(GA; 고정적인 패턴을 가진 오브젝트들을 인식하고, 그 오브젝트들 내부 또는 오브젝트들 간의 비교를 통한 결함 검사)을 선택할 수 있는 아이콘들이 포함될 수 있다. 제1 검사방식 내지 제3 검사방식에 대해서는 뒤에서 설명하게 될 도 8 내지 도 10에 대한 설명에서 더 자세히 언급하기로 한다.
한편, 상기 제1 검사방식 내지 제3 검사방식 중 어느 하나를 선택한 경우, 세부 검사방식을 선택할 수 있는 메뉴(Inspection Method)가 더 표시될 수 있다. 예를 들어, 제1 검사방식이 선택되었다고 가정할 때, 상기 도면부호 400의 아이콘들 하단에는 기본 검사 방식(Original Inspection Method; 사용자에 의해 지정된 관심영역을 오브젝트로 인식하고 해당 관심영역 내지 오브젝트 내 결함을 찾는 방식), 마스킹 영역 지정 방식(Masking Region for Inspection; 관심영역 내에서 독립적으로 별도의 마스킹 영역을 지정하고, 마스킹 영역에 대해서는 별도의 전처리 파라미터, 세그멘테이션 파라미터가 설정 가능하며, 마스킹 영역을 고려하여 관심영역 내에서 결함을 찾는 방식), 마스킹 영역 배제 방식(Masking Region for Exclusion; 관심영역 중 검사를 배제시키기 위한 마스킹 영역을 지정하고, 배제된 영역 외의 관심영역에 대해서만 결함을 찾는 방식) 중 어느 하나를 선택할 수 있도록 메뉴가 표시될 수 있다. 참고로 도면 4는 도 3의 메인 영역 내 표시되어 있는 대상 이미지 상에 마스킹 영역(Mask)을 더 지정해 둔 실시예를 나타낸 것이다. 위 설명에서도 잠시 언급하였으나, 본 발명에 따른 인터페이스 상에서 지정되는 마스킹 영역은 두 가지로 정의될 수 있는데, 하나는 대상 이미지 내에서 회로 등의 구성들이 중첩된 영역을 구별하고, 해당 중첩된 영역 내에서의 결함을 식별해 내기 위한 파라미터들을 개별적으로 설정 가능한 영역으로서의 마스킹 영역으로 정의될 수 있고, 다른 하나는 결함 검사를 배제시키기 위하여 정의될 수도 있다. 도 4를 참조할 때, 마스킹 영역(Mask)은 관심영역(ROI)을 지정할 때와 유사하게 사용자가 임의의 점 4개를 포함하는 영역을 드래깅 입력을 통하여 지정할 수 있으며, 또는 사용자로 하여금 복수 개의 임의 점들을 정하게 함으로써 해당 점들에 의해 정의되는 내부 다각형 형상도 마스킹 영역(Mask)으로 지정되도록 할 수 있다.
한편, 검사 방식을 선택할 수 있는 아이콘(400) 밑으로는 관심영역을 지정함에 있어 관심영역을 사각형으로 지정할 것인지 아니면 다각형으로 지정할 것인지를 정하기 위한 아이콘들(450)이 더 제공될 수 있다. 도 1의 메인 영역(100)에는 대상 이미지(Img) 내에 관심영역(ROI)이 지정되어 있는 모습이 도시되어 있는데, 해당 관심영역(ROI)은 사각형(Rectangle) 아이콘을 클릭하여 사용자가 직접 지정한 영역을 도시한 것이다.
도 5는 앞서 도 3에서 언급한 검사 아이콘(Inspect)을 클릭하였을 때, 메인 영역 내 대상 이미지에 대하여 검사가 이루어진 모습을 도시한 것이다. 검사 아이콘(Inspection)을 클릭한 후, 도 1과 비교할 때 대상 이미지 내에서는 가장 먼저 관심영역(ROI)을 지정하는 사각형의 선 색깔이 바뀜으로써 사용자에게 검사가 실행되었음을 표시할 수 있으며, 또한 검사에 의해 식별된 오브젝트 영역들에서는 해당 오브젝트 영역들을 식별하기 위한 외곽선이 표시되어 사용자로 하여금 어느 영역이 오브젝트 영역으로 분별되었는지 표시할 수 있다. 참고로, 앞서에서도 잠시 언급하였지만 검사 아이콘(Inspect)을 클릭하였을 때 검사의 대상이 되는 대상 이미지는 현재 검사용 템플릿을 생성 및 편집함에 있어 메인 영역 상에 표시되고 있는 기준 이미지이며, 상기 검사 아이콘(Inspect) 클릭에 의한 검사는 바람직하게는 상기 기준 이미지를 대상으로 1회성으로 이루어진 것일 수 있다. 즉, 제1 사용자 인터페이스 상에서의 검사 아이콘(Inspect)은 기준 이미지 상에서 사용자 자신이 지정한 관심영역 또는 사용자 자신이 설정한 파라미터들을 기초로 비파괴검사가 적절하게 이루어지는지를 확인하기 위한 용도의 것일 수 있다.
도 6은 도 5에서의 메인 영역 상에서 사용자가 포인터(1001)를 오브젝트 영역 내에 위치시켰을 때 표시되는 영역정보(1002)를 도시한 것으로, 본 발명에서의 제1 사용자 인터페이스에서는 사용자가 자신이 보고자 하는 영역 상에 포인터(1001)를 위치시켰을 대 도 6과 같이 해당 영역의 사이즈 정보(바람직하게는 픽셀의 크기 또는 픽셀의 개수로 표시되는 사이즈 정보), 그리고 해당 오브젝트 영역 내에서 식별된 결함의 개수 또는 결함의 영역비율(오브젝트 영역 중 결함이 차지하는 영역 비율) 등의 영역 정보가 표시될 수 있다. 또한, 상기 포인터(1001)가 어느 영역 상에 위치하는지에 따라 그 위치를 포함하는 영역은 해당 영역을 구분시키기 위해 다른 색깔의 외곽선으로 표시될 수 있다. 도 6에서는 오브젝트 영역의 외곽으로 청색의 선이 둘러싸인 모습이 도시되어 있다.
한편, 도 7은 오브젝트 영역 내 결함 위에 포인터(100)가 위치하였을 때 해당 결함 영역을 구분시키기 위해 다른 색깔의 외곽선(1003)이 표시된 모습을 도시한 것이다.
이처럼, 제1 사용자 인터페이스 상에서는 검사가 이루어진 후 메인 영역 상에서 사용자가 포인터(1001)를 어느 점에 위치시키는지에 따라 해당 영역에 대한 정보가 제공될 수 있고, 또한 해당 영역을 구분시키기 위한 외곽선 표시가 별도로 이루어질 수 있다.
이하에서는 도 8 내지 도 10을 참조하여 앞서 설명을 미루어 왔던 제1 검사방식 내지 제3 검사방식, 그리고 각각의 검사방식이 선택되었을 때 파라미터 입력 영역(도면부호 500)에서 어떤 종류의 파라미터들이 설정될 수 있는지에 대해 설명하기로 한다.
<제1검사방식>
먼저 제1검사방식은 단일의 관심영역, 또는 복수의 관심영역들이 존재할 때 해당 영역들 내에 결함 존재 여부를 반복적으로 식별하기 위한 것으로, 예를 들어 대량으로 제조되는 회로기판들에 대하여 촬영된 대상 이미지들, 즉 동일한 구성의 회로도 설계 및 동일한 설계에 따라 생산된 회로기판들을 대량으로 촬영한 각각의 대상 이미지들에 대하여 반복적으로 결함이 있는지 여부를 식별하는 방식이다.
대상체에 대한 투과 영상은 이미 존재함을 전제로, 제1검사방식은 가장 먼저 비파괴검사 장치(100)가 사용자로부터의 입력을 수신하여 검사용 템플릿을 설정하는 것으로부터 시작될 수 있다. 제1검사방식에서의 검사용 템플릿 설정은, 주로는 사용자가 대상체의 어떤 영역들에 대해 검사를 진행할 것인지에 대한, 소위 관심영역(Region of Interest)을 지정하고, 해당 영역에서 이루어지게 될 결함 검사를 어떻게 진행할 것인지에 대한 각종 파라미터들을 설정하는 것으로도 이해될 수 있다. 이 때 관심영역(ROI)이란, 검사자가 결함이 있는지 여부를 식별하고자 하는 영역을 일컫는 것으로, 예를 들어 하나의 회로기판이 온전히 하나의 대상 이미지로 촬영된 경우 해당 대상 이미지 내에는 굳이 결함을 살펴 볼 필요가 없는 영역(예: 소자가 구비되어 있지 않은 기판 영역), 그리고 반드시 결함을 살펴볼 필요가 있는 영역이 존재할 수 있는데, 본 단계에서는 결함 검사가 필요한 영역을 미리 설정해 둠으로써 이미지 처리 속도 및 작업의 효율성을 높이고자 한 것이다.
한편, 제1 검사방식이 선택되었을 때, 사용자는 파라미터 입력 영역(도 3의 도면부호 500) 내에서 다양한 파라미터 값들을 입력할 수 있다. 설정될 수 있는 파라미터들을 살펴볼 때, 먼저 이미지 전처리와 관련된 파라미터들(프리프로세싱 파라미터들; 편의상 제1그룹 파라미터들이라 칭한다)로는 대상 이미지를 스무딩(smoothing)처리하는 횟수 및 커널 사이즈의 픽셀 값, 대상 이미지 내에서 주변부 밝기 값을 보정할지 여부에 대한 값, 관심영역 내에서 유의미한 픽셀값을 가지는 영역(오브젝트 영역)의 대략적인 크기, 관심영역 내 오브젝트 영역이 주변부 대비 밝은지 또는 어두운지에 대한 값, 관심영역 내에서 찾고자 하는 오브젝트 영역이 각 픽셀의 인텐시티 값(intensity value) 기준으로 어느 범위에 속하는지에 대한 값 등이 포함될 수 있다. 이미지 전처리와 관련된 위 파라미터들은 결함 검사를 위해 로드 된 대상 이미지에 대하여 검사자가 설정한 관심영역 내로부터 찾고자 하는 서브 관심영역 또는 오브젝트 영역을 더 정확하게 찾아내기 위해 해당 대상 이미지를 본격적인 결함 식별 이전 다양한 방식으로 전처리 하는 데에 필요한 값들을 설정해 둔 것이다. 또한, 사용자가 설정할 수 있는 파라미터들 중에는 사용자가 지정한 관심영역 내에서 오브젝트 영역 또는 결함 영역을 어떻게 식별해 낼 것인지에 대한 파라미터들(세그멘테이션 파라미터들; 편의상 제2그룹 파라미터들이라 칭한다)도 포함될 수 있다. 이러한 제2그룹 파라미터들의 종류에는 오브젝트 영역이나 결함 영역을 식별해 내기 위해 또는 서브 관심영역을 정의할 때에 기준값이 될 수 있는 임계값(threshold value), 오브젝트 영역 또는 서브 관심영역으로 인식하기 위해 필요한 최소면적값(Minimum Area), 서브 관심영역의 형상, 복수 개의 서브 관심영역들이 정의 및 나열 될 때에 나열된 서브 관심영역들의 행(Row) 개수 및 간격, 열(Column) 개수 및 간격 등이 포함될 수 있다.
위 파라미터들 중 임계값은, 검사자가 지정한 관심영역 내에서 오브젝트 영역이 존재하는지 여부, 오브젝트 영역 내 결함이 존재하는지 여부 를 판별하기 위하 기준이 되는 값이며, 임계값은 임의 픽셀의 밝기값을 나타내는 인텐시티 값(intensity value)일 수 있으며, 또는 설계자의 의도에 따라 그레이값(Gray value) 또는 RGB값일 수 있다. 본 상세한 설명 전반에서는 특별히 다른 언급이 없는 이상, 발명의 이해를 돕기 위해 임계값이 픽셀의 밝기값을 나타내는 인텐시티 값인 것을 전제로 설명하기로 한다. 한편, 상기 임계값은 검사자로부터 직접 고정된(fixed) 임계값을 수신함으로써 해당 값을 기준으로 각종 결함 또는 그 밖의 유의미한 영역을 식별해 내도록 할 수도 있겠으나, 이와 달리 검사자로부터 '자동 임계값' 선택입력을 수신한 경우에는 자동 임계값을 기준으로 결함 또는 유의미한 영역을 식별해 내도록 할 수도 있다. 자동 임계값을 기준으로 검사를 수행하는 경우에는 이미지 밝기값 분포(distribution)를 기준으로 본 발명에 따른 비파괴검사 장치(100)가 임의로 선택한 임계값에 따라 검사가 수행된다. 또한, 상기 임계값은 결함 영역 또는 오브젝트 영역을 식별하는 데에 있어서 임의의 범위를 정할 때에 활용되는 기준값이 될 수도 있는데, 예를 들어 대상 이미지 내 각 픽셀들의 밝기값이 상기 임계값을 기준으로 일정 범위 내에서의 차이값을 가질 때에 해당 픽셀들을 결함 영역 또는 오브젝트 영역으로 식별하도록 할 수도 있다.
또 다른 한편, 상기 파라미터들 중 서브 관심영역의 형상과 관련하여, 향후 검사 수행에 의해 검사자가 지정한 관심영역 내에서 오브젝트 영역이 식별된 경우, 해당 오브젝트 영역의 좌표들을 기준으로 찾은 중심값(X축, Y축 좌표들을 각 축별로 모두 더한 후 평균을 냄에 따라 얻어지는 좌표) 또는 오브젝트 영역 내 좌표들이 갖는 인텐시티 값을 기준으로 찾은 중심점을 기준으로는 서브 관심영역이 정의될 수 있는데, 위 서브 관심영역의 형상은 위 제2그룹 파라미터 입력시 검사자에 의해 함께 입력됨으로써 결정될 수 있다. 서브 관심영역의 형상에는 예를 들어 [외곽선], [원형], [사각형]이 포함될 수 있으며, [외곽선] 선택시에는 상기 임계값을 기준으로 식별된 오브젝트 영역을 따라 서브 관심영역이 그 모양 그대로 정의될 것이며, [원형]이나 [사각형] 선택시에는 앞서 언급한 중심값 또는 중심점을 기준으로 원형 또는 사각형으로 정의될 것이다. 원형, 사각형으로 서브 관심영역을 정의하고자 할 때에는 사용자로부터 지름(Diameter), 또는 너비/높이(width/height) 값을 더 입력 받을 수 있다.
다른 한편, 설정될 수 있는 파라미터들 중에는 식별된 오브젝트 영역에 대한 양불 판정 조건 파라미터들(이밸류에이션 파라미터들; 편의상 제3그룹 파라미터들이라 칭한다)이 더 포함될 수 있다. 예를 들어, 서로 다른 서브 관심영역 내에 존재하여야 할 오브젝트 영역이 상호 연결되어 있다면 쇼트 회로(short circuit)으로 판정할 것을 파라미터 입력을 통해 설정할 수 있으며, 또한 임의의 서브 관심영역 내 닿지 않은 채로 존재하여야 할 오브젝트 영역이 서브 관심영역의 경계와 닿아 있다면 이 역시 불량으로 판정할 것을 파라미터 입력을 통해 설정할 수 있다. 또한, 복수 개의 오브젝트들이 식별되었을 때 상대면적 기반으로 소납불량 또는 과납불량으로 판단할 것인지 여부에 대해서도 파라미터 입력을 통해 설정할 수 있다.
도 8은 제1 검사방식에 따라 임의의 대상 이미지에 대하여 검사가 이루어진 것을 전제로, 해당 대상 이미지 상에서의 각종 영역들과 결함 영역, 임계값들 등에 대한 이해를 돕기 위한 도면이다.
도 8의 (a)는 사용자가 설정한 검사용 템플릿을 기초로 비파괴검사 장치(100)가 대상 이미지 내에서 3개의 관심영역들을 A1, A2, A3으로 인식한 모습을 도시한 것이다. (참고로, 본 실시예에서는 사용자가 A1, A2, A3를 관심영역으로 지정한 것을 전제로 설명할 것이다. 다만, 위 A1, A2, A3는 사용자가 임의로 지정한 관심영역 내에서 비파괴검사 장치에 의해 오브젝트 영역으로 식별된 것일 수 있다.) 위 관심영역들은, 예를 들어 회로기판 중 서로 다른 물질로 도포층이 형성된 영역들이어서 검사자가 직접 관심영역으로 지정한 것일 수 있다. 참고로 상기 관심영역들은 위 대상 이미지 내에서 임의로 설정된 좌표계 또는 픽셀의 위치를 기초로 하여 설정될 수 있다.
한편, 상기 검사용 템플릿을 생성 및 편집하는 과정에서는 관심영역들이 지정될 때에 해당 관심영역 고유의 임계값, 즉 향후 해당 관심영역 내에 결함이 존재하는지 여부를 판별하기 위해 기준이 되는 임계값이 더 설정될 수 있음에 대해 설명하였다. 도 8의 (a)에서는 이러한 임계값이 g1, g2, g3으로 표시되어 있으며, 상기 임계값들은 바람직하게는 각 관심영역 중 임의 픽셀의 밝기값을 나타내는 인텐시티 값(intensity value)일 수 있으며, 또는 설계자의 의도에 따라 그레이값(Gray value) 또는 RGB값일 수 있다. 이 때, 언급된 임계값은 반드시 위에 언급된 것들로 한정되는 것은 아니며, 컴퓨터가 판독할 수 있는 값이고 각 픽셀을 구별할 수 있는 한 그 종류의 제한은 없다 할 것이다. 위 임계값들의 활용과 관련하여, 위 임계값들은 상기 비파괴검사 장치(100)가 각 관심영역들 내에서 상기 임계값과 비교하여 기 설정된 범위를 초과한 임계값을 가지는 영역을 결함으로 정의 또는 식별해 내는 데에 활용될 수 있다. 예를 들어, A1 관심영역에서의 임계값이 g1이라 할 때, g1 대비 -10% 내지 10%의 범위를 초과하는 값을 가지는 픽셀들이 존재하는 경우 해당 픽셀들의 집합을 결함영역으로 식별해 낼 수 있다. 또는 상기 A1 관심영역에서의 임계값이 g1이라 할 때, g1 대비 상이한 값을 가지는 픽셀들을 모두 결함영역으로 식별해 내도록 구현할 수도 있다.
한편, 도 8의 (b)는 마스킹 영역을 더 포함할 때의 결함 식별 단계를 설명하기 위한 도면이다. 앞서에서는 사용자에 의해 마스킹 영역도 지정될 수 있음을 설명하였다. 마스킹 영역이란 예를 들어 회로기판 위의 동일 층에 존재하는 영역임에도 불구하고 일부 영역은 해당 회로기판 위로 장애물이 있어 투과영상 생성시 장애물이 없는 영역 대비 더 어두운 임계값을 가질 수 있는데, 마스킹 영역은 바로 이렇게 동일한 관심영역 내 영역 중에서도 장애물 등의 존재로 인해 임계값이 달라지는 영역을 의미한다. 관련하여, 도 8의 (b)에는 관심영역 A4, 그리고 해당 관심영역 내에 존재하는 2개의 마스킹 영역인 M1, M2가 도시되어 있다. 마스킹 영역들은 각 마스킹 영역들 고유의 임계값을 가질 수 있는데, 도 8의 (b)에서도 볼 수 있듯 각 마스킹 영역들에는 gm1, gm2 와 같이 고유의 임계값이 설정될 수 있다. 마스킹 영역의 고유 임계값들의 활용과 관련하여, 상기 A4 영역 내에서는 임계값 g4와 대비하여 기 설정된 범위를 초과한 픽셀들에 대해 결함으로 인식하여 D4로 정의하였다면, 마스킹 영역 M1, 관심 영역 A4, 마스킹 영역 M2에 걸쳐 존재하는 결함 D5에 대해서는 각각 gm1, g3, gm2를 기준으로 결함 영역을 식별해 낸 후 각 영역 내에서의 결함 영역들 연결관계를 보아 하나의 결함으로 인식하도록 구현할 수 있다. 만일 도 8의 (b)와 달리 결함이 M1, M2 영역의 내측에만 존재할 뿐 마스킹 영역 이외의 영역에서는 연결성 있는 결함이 존재하지 않는 경우에는 당연히 각 결함들을 별개의 것으로 인식할 것이다.
한편, 위 도 8의 실시예에서는 관심영역들 내에서의 픽셀값을 곧바로 임계값과 비교함으로써 결함 여부를 판단하는 실시예에 대해서만 설명하였으나, 결함은 다음과 같은 방법으로도 식별될 수 있다. 즉, 상기 비파괴검사 장치(100)는 비파괴검사를 수행함에 있어, 각 관심영역 내에서 적어도 하나 이상의 오브젝트 영역을 추출하고, 해당 오브젝트 영역 내에서 결함 후보 영역을 식별해 내기 위하여 이미지 처리를 할 수 있으며, 이미지 처리를 한 후 결함 후보 영역들을 식별하고, 나아가 결함으로 확정하는 과정을 거쳐 최종적으로 제1 검사방식에 따라 비파괴검사를 수행할 수 있다. 오브젝트 영역이란, 각 관심영역 내에서 유사한 값을 가지는 픽셀들의 집합들로 이루어진 영역으로 정의될 수 있으며, 바람직하게는 폐곡선 내부의 임의 면적을 가지는 영역으로 정의될 수 있다. 예를 들어, 도 8의 (a)를 기준으로 할 때, A1 관심영역에는 결과적으로 총 3개의 결함영역, 그리고 결함영역을 제외한 A1관심영역이 존재할 수 있는데, 오브젝트 영역을 추출하는 단계에서는 결함영역, 정상영역으로 구별되기에 앞서 우선적으로 폐곡선 내부에 유사한 값을 가지는 픽셀들의 집합들의 영역을 각각의 오브젝트 영역으로 식별해 내는 것이다. 결함 후보를 식별해 내는 과정은, 앞서 추출한 오브젝트 영역들 중 결함으로 판정되어야 할 후보들을 식별해 내는 과정으로, 본 과정에서는 사전에 검사용 템플릿을 설정하는 단계에서 각 영역들 마다 설정하였던 파라미터들이 활용될 수 있다. 예를 들어, 각 오브젝트 영역들 중 임계값이 기 설정된 범위를 초과하는 값의 픽셀들이 다수 포함되어 있다면 해당 오브젝트 영역은 결함후보로 분류될 것이며, 그렇지 않은 오브젝트 영역은 결함후보에서 제외될 수 있다. 마지막으로 결함후보들을 결함으로 확정하는 과정에서는 해당 결함후보들에 대하여 2차 요건을 만족시키는 결함후보에 대하여 결함으로 확정하고, 만일 2차 요건을 만족시키지 못하는 결함후보가 있다면 해당 결함후보는 결함이 아닌 것으로 판정한다.
<제2검사방식>
제2검사방식은 어느 대상체에 대해 단층촬영이 이루어졌을 때 복수 개의 단층 이미지들을 대상으로 결함 여부를 식별하기 위한 것으로, 예를 들어 임의의 부피를 가지는 대상체 내부에 결함이 존재하는지 여부를 보기 위해 단층촬영을 실시하여 복수 개의 단층 이미지들이 생성되었을 경우 위 단층 이미지들을 순서대로 이미지 처리 함으로써 각 단층 이미지마다의 결함 여부를 판별하는 검사방식이다.
제2검사방식은 가장 먼저 비파괴검사 장치(100)가 사용자로부터의 입력을 수신하여 검사용 템플릿을 설정하는 단계로부터 시작될 수 있다. 제2검사방식에서의 검사용 템플릿 생성 및 편집은, 검사자가 임의의 관심영역을 드래깅 등을 통해 지정함으로써 검사용 템플릿이 생성되었음을 전제로, 오브젝트 영역 또는 위 오브젝트 영역을 포함하는 서브 관심영역을 어떻게 식별해 내거나 정의할 지에 대한 파라미터 값들을 수신 및 저장하는 과정들로 이루어질 수 있다. 참고로, 제2검사방식에서의 관심영역은, 특히 복수의 단층 이미지들이 모두 서로 다른 형상의 오브젝트 영역을 가질 것임을 고려할 때, 그리고 각 단층 이미지들의 정렬이 항상 정확하게 이루어질 수 없는 사정 등을 고려할 때, 검사자가 보고자 하는 오브젝트 영역이 항상 포함되는 영역을 의미하는 것으로 이해될 수 있다.
제2 검사방식을 선택하였을 때 사용자가 직접 설정할 수 있는 파라미터들 중에는 많은 부분이 제1 검사방식에서의 파라미터들과 중복될 수 있으나, 그럼에도 다시 한번 정리하면 다음과 같다.
전처리와 관련된 파라미터들(프리프로세싱 파라미터들; 편의상 제1그룹 파라미터들이라 칭한다)로는 대상 이미지를 스무딩(smoothing)처리하는 횟수 및 커널 사이즈의 픽셀 값, 오브젝트 영역 자체에 대한 스무딩 횟수 및 커널 사이즈 픽셀 값, 대상 이미지 내에서 주변부 밝기 값을 보정할지 여부에 대한 값, 오브젝트 영역 내에서 결함 영역을 검출하기 위해 주변부 밝기 값을 보정할지 여부에 대한 값, 오브젝트 영역 또는 결함 영역의 대략적인 크기, 관심영역 내 오브젝트 영역이 주변부 대비 밝은지 또는 어두운지에 대한 값, 관심영역 내에서 찾고자 하는 오브젝트 영역이 각 픽셀의 인텐시티 값(intensity value) 기준으로 어느 범위에 속하는지에 대한 값, 인텐시티 값 기준으로 오브젝트 영역 내에서의 결함(void) 영역 검출 범위 등이 포함될 수 있다.
또한, 설정될 수 있는 파라미터들 중에는 관심 영역 내에서 오브젝트 영역 또는 결함 영역을 어떻게 식별해 낼 것인지에 대한 파라미터들(세그멘테이션 파라미터들; 편의상 제2그룹 파라미터들이라 칭한다)도 포함될 수 있다. 이러한 파라미터들의 종류에는 오브젝트 영역을 식별해 내기 위한 임계값, 결함 영역을 식별해 내기 위한 임계값, 오브젝트 영역으로 인식하기 위한 최소 면적, 결함 영역으로 인식하기 위한 최소/최대 면적 등이 포함될 수 있다. 한편, 상기 오브젝트 영역을 식별해 내기 위한 임계값 또는 결함 영역을 식별해 내기 위한 임계값은 제1검사방식에서 언급했던 것과 유사하게 고정된 임계값 또는 자동 임계값으로 설정될 수도 있다.
다른 한편, 설정될 수 있는 파라미터들 중에는 식별된 결함 영역에 대한 양불 판정 조건 파라미터들(이밸류에이션 파라미터들; 편의상 제3그룹 파라미터들이라 칭한다)이 더 포함될 수 있다. 여기에는 예를 들어, 정상 범주에 들어가는 오브젝트 영역의 총 면적 및 오브젝트 영역의 개수, 정상 범주에 들어가는 최소/최대 결함 영역의 면적, 정상 범주에 들어가는 결함 영역의 총면적의 최소값/최대값, 정상 범주에 들어가는 결함의 개수, 면적, 크기 등이 포함될 수 있다.
도 9의 (a), (b), (c)는 각각 어떤 대상체를 단층 촬영한 단층 이미지들, 즉 대상 이미지들을 도시한 것으로, 이 때 관심영역은 오브젝트 영역의 최외곽 부분을 모두 포괄할 후 있는 영역인 점선 사각형 영역으로 설정되어 있음을 확인할 수 있다.
이미지 전처리 후, 상기 비파괴검사 장치(100)는 각 단층 이미지, 즉 대상 이미지의 오브젝트 영역을 추출해 낸다. 제2검사방식에서의 오브젝트 영역은 앞서 제1검사방식에서와 같이 각 관심영역 내에서 유사한 값을 가지는 픽셀들의 집합들로 이루어진 영역으로 정의될 수 있으며, 바람직하게는 폐곡선 내부의 임의 면적을 가지는 영역으로 정의될 수 있다. 도 9의 (a) 내지 (c)에는 각각의 오브젝트 영역들이 O1 내지 O7으로 표시되어 있음을 확인할 수 있다. 즉, 제2검사방식에서의 오브젝트 영역은 관심영역 내에서 유의미한 부분으로 인식되어야 할 영역들을 밝기값 또는 인텐시티 값을 기준으로 식별해 낸 것을 의미하며, 이러한 오브젝트 영역 추출은 각 단층 이미지들(대상 이미지들)이 모두 다른 형상의 유의미한 영역을 포함하고 있다는 점에서, 다시 말해 단층 이미지(대상 이미지)들은 모두 비정형의 오브젝트 영역을 포함하게 된다는 점에서 반드시 각 단층 이미지(대상 이미지)별로 결함 검사가 수행되어야 함을 이해한다.
오브젝트 영역을 추출하는 과정에서는 앞서 검사용 템플릿 내에서 설정되었던 임계값이 활용될 수 있으며, 예를 들어 각 픽셀들의 값을 서로 비교해 가면서 그 차이가 기 설정된 범위 이내의 것인 경우, 즉 상호 픽셀값이 유사한 것으로 판단된 경우에는 하나의 영역으로 취급하고, 그렇지 않은 경우에는 서로 다른 영역으로 취급함으로써 오브젝트 영역을 추출할 수 있다.
한편, 관심영역 내에서 오브젝트 영역이 추출된 후, 비파괴검사 장치는 각 오브젝트 영역에 대한 전처리를 수행할 수 있고, 전처리 수행 후에는 결함을 식별해 내는 단계를 진행할 수 있다. 오브젝트 영역 내에서 결함을 식별해 내는 단계는 앞서 제1검사방식에서 살펴본 것과 같이 각 오브젝트 영역의 임계값으로부터 기 설정된 범위를 초과하는 값을 가지는 픽셀들을 결함으로 식별해 내는 방식을 활용할 수 있으며, 또는 제1검사방식에서 설명한 것과 같이 결함후보를 식별해 낸 후 그로부터 결함을 확정하는 방식도 활용할 수 있다. 오브젝트 영역 내에서 결함을 식별해 내는 방식은 제1검사방식의 그것과 유사하므로 여기서는 자세한 설명을 생략하기로 한다. 참고로 도 9의 (a)에는 O1오브젝트 영역 내에 D1, D2의 결함이, O2오브젝트 영역 내에는 D3, D4의 결함이, O3오브젝트 영역 내에는 D5, D6 결함이 존재하는 예시를 도시한 것이다.
<제3검사방식>
제3검사방식은 하나의 대상 이미지 내에 유사한 형상을 가지는 다수의 오브젝트들이 존재할 때 상대면적 기반의 연산을 수행함으로써 위 오브젝트들 중 결함이 있는 것을 식별해 내기 위한 것이다.
제3검사방식에서의 검사용 템플릿 설정 과정은 앞서 설명한 제1검사방식에서의 검사용 템플릿 설정 과정과 유사하다. 즉, 제3 검사방식에 있어서도 제1그룹 파라미터들, 제2그룹 파라미터들, 및 제3그룹 파라미터들에 대해 각각 검사자로부터 입력을 받아 검사용 템플릿을 설정할 수 있다.
참고로, 제3 검사방식에서는 관심영역 내에서 서브 관심영역들을 식별해 내기 위해, 해당 서브 관심영역을 어떻게 정의할 것인지에 대한 파라미터들을 입력할 수 있다. 서브 관심영역이란, 관심영역 내에 특히 검사자가 살펴보고자 하는 영역을 의미하는 것으로, 제3검사방식에서의 대상 이미지 내에는 유사한 형상을 가지는 오브젝트들이 다수 배열되어 있음에 기인하여 각 오브젝트들이 위치된 곳을 중심으로 개별 관심영역이 설정된 것을 의미한다. 한편, 경우에 따라 대상 이미지 내에는 매우 많은 개수의 오브젝트들이 포함되어 있을 수 있는데, 이 때 사용자로 하여금 개별 오브젝트들의 서브 관심영역을 지정 및 설정하게 하는 것은 매우 번거로운 작업이 될 수 있는 바, 본 발명에 따른 비파괴검사 장치(100)는 우선적으로 사용자로부터 서브 관심영역을 어떻게 정의할 것인지에 대한 입력을 수신함으로써 우선적으로 서브 관심영역을 정의하고, 비파괴검사 장치(100)가 앞서의 서브 관심영역에 대한 정의를 참조하여 앞으로 분별해 내고자 하는 서브 관심영역의 형상을 정의하며, 그 후 정의된 서브 관심영역의 형상을 참조하여 관심영역 내에서 서브 관심영역들을 식별 및 확정하도록 구현할 수 있다.
예를 들어, 검사용 템플릿 편집 시 사용자는 서브 관심영역의 형상을 [외곽선], [원형], [사각형] 등으로 선택할 수 있으며, 만일 [사각형]으로 선택을 하였다면 상기 서브 관심영역의 형상은 [사각형]을 기본으로 가질 수 있다. 또한, 서브 관심영역을 식별 및 확정하는 단계는, 우선적으로 비파괴검사 장치(100)가 관심영역 내에서 오브젝트 영역을 식별해 낸 후, 각 오브젝트 영역들의 좌표들을 기준으로 찾은 각 오브젝트 영역들의 중심값(X축, Y축 좌표들을 각 축별로 모두 더한 후 평균을 냄에 따라 얻어지는 좌표), 또는 오브젝트 영역들 내 좌표들이 갖는 인텐시티 값을 기준으로 연산한 중심점(좌표 및 인텐시티를 고려한 중심점)을 획득하는 단계가 포함될 수 있으며, 중심값 또는 중심점이 획득된 이후 해당 일점을 중심으로 앞서 검사자에 의해 설정된 형상의 규격(지름, 너비/높이 등)에 따른 서브 관심영역들이 생성 및 확정될 수 있다. 위 과정에서 연산에 활용되는 모든 값들은 사용자가 파라미터 입력 영역(500)을 통해 입력한 것일 수 있다.
이하에서는 도 10을 참조하여 제3검사방식에 대해 더 살펴보기로 한다. 예를 들어 대상체(회로기판) 상에 다수 개의 솔더(solder)들이 존재한다고 가정할 때, 관심영역 내에는 도 10에서와 같이 다수 개의 원형 영역이 존재할 수 있는데, 비파괴검사 장치(100)는 각각의 원형 영역들을 우선적으로 오브젝트 영역들로 식별해 낸 후, 각각의 오브젝트 영역들에 대해 중심값 또는 중심점을 연산하고, 연산된 중심값 또는 중심점을 기준으로 앞서 검사자에 의해 설정된 형상, 즉 [사각형]의 서브 관심영역을 생성 및 확정할 수 있다. 실제 검사 대상이 되는 대상 이미지에서는 각각의 솔더(solder)들이 반드시 도 10에서와 같은 완벽한 원형으로만 이루어지지 않을 수 있는데, 이로 인해 생성되는 서브 관심영역 역시 반드시 동일한 크기로만 이루어지지는 않을 수 있으며, 나아가 도 10에서와 같이 서브 관심영역들의 정렬상태, 즉 서브 관심영역들 간 간격이 정확하게 일치하지 않을 수도 있다.
한편, 대상 이미지 내에서 복수 개의 서브 관심영역들이 확정된 후, 비파괴검사 장치(100)는 각각의 서브 관심영역들 내에서 결함 영역을 식별해 낼 수 있다. 제3검사방식에서 결함을 식별하는 방식은 앞선 제1, 제2검사방식과는 일부 상이하며, 구체적으로는 각 서브 관심영역 내 오브젝트 영역, 또는 오브젝트 영역 내 결함 영역 간의 상대면적을 기반으로 결함을 식별한다. 제3 검사방식에 있어서 각 서브 관심영역 내 결함을 식별하는 과정은, 서브 관심영역(들) 내 결함 영역을 추출하는 단계, 오브젝트 영역들의 평균면적 또는 결함 영역의 평균면적 중 적어도 하나를 연산하는 단계, 그리고 상기 평균면적 대비 오브젝트 영역 또는 결함 영역의 면적 비율이 기 설정범위를 초과하는 오브젝트 영역을 가지는 서브 관심영역을 결함으로 식별하는 단계를 포함할 수 있다.
먼저 서브 관심영역(들) 내의 오브젝트 영역으로부터 결함 영역을 추출하는 단계는 상기 오브젝트 영역들 내에서도 유사한 값을 가지는 픽셀들의 집합들로 이루어진 영역으로 정의될 수 있으며, 바람직하게는 폐곡선 내부의 임의 면적을 가지는 영역으로 정의될 수 있다. 도 10에는 서브 관심영역 내에 오브젝트 영역들이 On의 기호로 표시되어 있으며, 일부 오브젝트 영역들 내에는 결함 영역들이 dn의 기호로 표시되어 있다.
다음으로, 추출된 오브젝트 영역들의 평균면적 또는 각 오브젝트 영역들 내 결함 영역의 평균면적 중 적어도 하나를 연산하는 단계에 있어, 연산되는 평균면적은 향후 복수의 오브젝트 영역들이 소납/과납의 결함을 가지는 것인지 여부를 판별하는 데에 활용되는 값, 즉 기준값이다. 이러한 기준값을 연산함에 있어서는 일반적으로 모든 오브젝트 영역들 또는 결함 영역의 면적을 모두 합산한 후 오브젝트 영역들의 개수 또는 결함 영역들의 개수로 나눔으로써 구할 수 있겠으나, 위 오브젝트 영역들 또는 결함 영역들 중에는 아주 중대한 결함이 있어 매우 큰 면적값을 가지는 것 또는 매우 작은 값을 가지거나 아예 아무런 면적값도 가지지 않는 것도 존재할 수 있는바, 본 단계에서는 상기 오브젝트 영역들 또는 결함 영역들의 면적을 각각 구하고 내림차순 또는 오름차순으로 정렬시킨 후 임의의 값, 예를 들어 중앙값(나열된 오브젝트 면적값들 중 중앙에 존재하는 값)과 가장 큰 차이가 나는 면적값을 가지는 오브젝트 영역들을 상기 평균면적 연산에서 배제시키는 것을 하나의 특징으로 할 수 있다. 예를 들어, 도 10을 참조할 때, 대상 이미지 내에는 총 9개의 오브젝트 영역들(O1 내지 O9)이 존재하는데, 이 중 평균면적을 연산할 시에는 가장 큰 면적을 가지는 O3 오브젝트 영역과 가장 작은 면적을 가지는 O7 오브젝트 영역은 배제를 시킬 수 있는 것이다. 이렇게 평균면적 연산 시 중앙값과 가장 큰 차이가 나는 오브젝트 영역을 배제시키는 것은 향후 결함 식별 시 기준이 될 평균면적, 즉 기준값의 신뢰성을 높이기 위한 것이다. 참고로, 평균면적 연산시 배제되는 오브젝트 영역들은 편의상 배제후보들이라 칭하기로 한다. 한편, 위 실시예에서는 [중앙값]을 기준으로 각 오브젝트 영역의 면적이 대비되는 실시예를 언급하였으나, 반드시 이에 한정되는 것은 아님을 이해한다. 즉, 비파괴검사 장치(100)로서는 검사자가 설정한 검사용 템플릿에 따라, 혹은 검사자의 직접 입력에 따라 평균면적 연산시 배제되어야 할 오브젝트 영역들 또는 결함 영역들을 결정할 수 있다. 예를 들어 내림차순으로 보았을 때 상위 3% 내에 포함되는 오브젝트 영역들 또는 결함 영역들의 면적값, 오름차순으로 보았을 때 상위 2%에 포함되는 면적값을 배제한 채 평균면적을 연산하도록 구현할 수 있거나, 또는 각 영역들의 면적 분포로 보아 일정 수준(개수) 이상의 분포값을 가지는 영역들에 대하여서만 평균면적 연산에 이용하도록 구현할 수도 있거나, 또는 오름차순, 내림차순으로 보았을 때 정해진 개수만큼의 영역들은 배제시킨 채 평균면적 연산을 하도록 구현할 수도 있다.
한편, 비파괴검사 장치(100)는 상기 오브젝트 영역들의 평균면적 또는 결함 영역들의 평균면적과 각 오브젝트 영역들 또는 결함 영역들의 면적을 비교하여 기 설정된 범위를 초과한 오브젝트 영역들에 대해서는 결함이 존재하는 것으로 식별한다. 이 때, 해당 단계에서는 당연히 앞서 평균면적 연산시 배제되었던 오브젝트 영역들을 결함으로 식별할 것이며, 그 외에 상기 평균면적 대비 차이가 큰 값을 가지는 오브젝트 영역들을 결함으로 식별해 낼 것이다.
도 10을 참조하여 하나의 실시예를 살펴볼 때, 비파괴검사 장치(100)는 오브젝트 영역들의 평균면적을 연산하고자 할 때에 O3(가장 큰 면적을 가지는 오브젝트 영역)과 O7(가장 작은 면적을 가지는 오브젝트 영역)의 면적값은 제외한 채 O1, O2, O4 내지 O6, O8, O9의 면적값에 대한 평균면적을 연산할 수 있으며, 평균면적이 연산된 후에는 해당 값을 각 오브젝트 영역들(O1 내지 O9)과 비교하여 소납 불량/과납 결함을 판단할 수 있다. 다른 한편, 상기 평균면적 연산시에는 결함 영역(D1, D2)이 더 고려될 수 있으며, 결함 판단시 각 오브젝트 영역 내에 결함 영역이 얼마나 큰 비중을 차지하는지에 대한 판단도 함께 이루어질 수 있다. 즉, 어느 임의의 오브젝트 영역은 평균면적 대비 정상범위에 속하는 것으로 판단될 수 있으나, 동시에 그 내부에 존재하는 결함 영역의 비중이 기 설정된 값(예: 60%)를 초과하여 결함으로 판단될 수도 있다.
이상 제1 검사방식 내지 제3 검사방식에 대하여 살펴보았다.
도 11은 본 발명에 따른 제2 사용자 인터페이스의 표시 모습을 나타낸 것이다. 제2 사용자 인터페이스는 사용자가 자동 검사 메뉴, 즉 도 11에서 화면 좌측의 아이콘(도면부호 200 내 ADR 아이콘)을 클릭하였을 때 표시되는 것으로, 해당 인터페이스에는 자동 검사 실행에 있어 필요한 복수 개의 아이콘들(도면부호 202), 현재 검사 진행 상태(도면부호 203), 그리고 결과(도면부호 204)가 표시될 수 있다.
자동 검사 실행에 있어 필요한 복수개의 아이콘들(202)에는, 자동 검사를 실행 또는 정지시키기 위한 아이콘(Start of Stop), 자동 검사용 매크로 설정을 위한 아이콘(Setting), 검사 리스트를 초기화 하기 위한 아이콘(Clear All), 검사 통계를 초기화 하기 위한 아이콘(Reset Stat)이 포함될 수 있다.
또한, 현재 검사 진행 상태(203)를 나타내는 영역에는 현재 자동 검사 모드가 활성화 된 상태임을 알리기 위해 "Inspecting"이라는 문자가 표시될 수 있으며, 반대로 "Stop"이라는 문자는 자동 검사 모드가 비활성화 된 상태임을 알리기 위해 표시될 수 있다.
한편, 결과(204)를 표시하는 영역에는 현재 검사 결과가 정상인 개수(OK), 불량인 개수(NG), 정렬 에러 등을 포함하는 에러의 개수(Error)가 표시될 수 있으며, 그 아래에는 자동 검사 모드에 의해 검사가 수행된 이미지들의 리스트가 표시될 수 있다.
이상 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 이러한 방법을 실행시키기 위한 저장 매체에 대해 살펴보았다. 한편, 본 발명은 상술한 특정의 실시예 및 응용예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 구별되어 이해되어서는 안 될 것이다.
50 X-ray 장치
100 비파괴검사 장치

Claims (10)

  1. 비파괴검사 기능을 제공하는 방법으로서,
    디스플레이를 가지는 비파괴검사 장치에서:
    검사용 템플릿 생성 메뉴에 대한 사용자 입력이 수신되면,
    복수의 아이콘들을 포함하는 제1 사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계;
    상기 제1사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계; 및
    수신되는 상기 사용자 입력에 따라 검사용 템플릿을 생성 및 설정하는 단계;
    를 포함하고,
    상기 제1 사용자 인터페이스는, 복수 개의 검사 파라미터들에 대한 설정을 위한 검사 파라미터 입력영역을 더 포함하며,
    상기 복수의 아이콘들은 관심영역 지정 아이콘을 포함하고,
    상기 검사용 템플릿을 생성 및 설정하는 단계는,
    상기 관심영역 지정 아이콘에 대한 사용자로부터의 선택 입력이 수신되면, 메인 영역 내에서 상기 사용자의 선택 입력에 따라 지정되는 관심영역을 설정하는 단계를 포함하고,
    상기 검사 파라미터들은, 상기 관심영역 내에서의 결함을 식별하기 위한 결함 판정 기준을 포함하는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  2. 제1항에 있어서,
    상기 복수의 아이콘들은,
    템플릿 생성 아이콘, 템플릿 저장 아이콘, 및 검사 방식 아이콘을 더 포함하는,
    비파괴검사 기능을 제공하는 방법.
  3. 제2항에 있어서,
    상기 제1 사용자 인터페이스는,
    복수 개의 검사 파라미터들에 대한 설정을 위한 검사 파라미터 입력영역을 더 포함하는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  4. 제3항에 있어서,
    상기 파라미터 입력영역에는,
    사용자로부터의 탭 선택 입력에 따라
    프리프로세싱 파라미터들, 세그멘테이션 파라미터들, 또는 이밸류에이션 파라미터들을 설정할 수 있는 파라미터 입력창이 표시되는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  5. 제2항에 있어서,
    상기 검사 방식 아이콘에는,
    지정된 관심영역 내 결함을 식별하는 제1검사 방식을 선택하기 위한 제1검사 방식 아이콘;
    지정된 관심영역 내 비정형 오브젝트 영역을 추출하고, 해당 비정형 오브젝트 영역 내 결함을 식별하는 제2검사 방식을 선택하기 위한 제2검사 방식 아이콘; 또는
    지정된 관심영역 내 포함된 서브관심영역 - 상기 서브관심영역의 형상은 기 설정된 것임 - 을 확정하고, 상기 서브관심영역 내 결함을 식별하는 제3검사 방식을 선택하기 위한 제3검사 방식 아이콘;
    중 적어도 어느 하나가 포함되는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  6. 제1항에 있어서,
    상기 사용자의 선택 입력에 따라 지정되는 관심영역을 설정하는 단계는,
    메인 영역 내에서 상기 사용자의 입력에 따라 지정되는 적어도 4개의 점에 의해 형성되는 관심영역을 설정하는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  7. 제5항에 있어서,
    사용자 조작에 의해 움직이는 입력 포인터가 상기 관심영역 내 오브젝트 영역 또는 결함영역 상에 위치할 때,
    상기 오브젝트 영역 또는 결함영역에 대한 영역정보를 표시하는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  8. 제5항에 있어서,
    사용자 조작에 의해 움직이는 입력 포인터가 상기 관심영역 내 오브젝트 영역 또는 결함영역 상에 위치할 때,
    상기 오브젝트 영역 또는 결함영역을 타 영역과 구분하기 위한 외곽선을 더 표시하는 것을 특징으로 하는,
    비파괴검사 기능을 제공하는 방법.
  9. 제1항에 있어서,
    자동 검사 메뉴에 대한 사용자 입력이 수신되면,
    복수의 아이콘들 및 현재 검사 상태창을 포함하는 제2사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계;
    상기 제2사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계;

    수신되는 상기 사용자 입력에 따라 복수의 대상 이미지들에 대하여 결함 검사를 실시하는 단계;
    를 포함하는,
    비파괴검사 기능을 제공하는 방법.
  10. 비파괴검사 기능을 제공하는 방법을 수행하기 위한 명령어들이 저장된 컴퓨터 판독 가능한 저장 매체에 있어서,
    상기 비파괴검사 기능을 제공하는 방법은,
    디스플레이를 가지는 비파괴검사 장치에서:
    검사용 템플릿 생성 메뉴에 대한 사용자 입력이 수신되면,
    복수의 아이콘들을 포함하는 제1 사용자 인터페이스를 상기 비파괴검사 장치 상에 표시하는 단계;
    상기 제1사용자 인터페이스가 표시된 상태에서 사용자 입력을 수신하는 단계; 및
    수신되는 상기 사용자 입력에 따라 검사용 템플릿을 생성 및 설정하는 단계;
    를 포함하고,
    상기 제1 사용자 인터페이스는, 복수 개의 검사 파라미터들에 대한 설정을 위한 검사 파라미터 입력영역을 더 포함하며,
    상기 복수의 아이콘들은 관심영역 지정 아이콘을 포함하고,
    상기 검사용 템플릿을 생성 및 설정하는 단계는,
    상기 관심영역 지정 아이콘에 대한 사용자로부터의 선택 입력이 수신되면, 메인 영역 내에서 상기 사용자의 선택 입력에 따라 지정되는 관심영역을 설정하는 단계를 포함하고,
    상기 검사 파라미터들은, 상기 관심영역 내에서의 결함을 식별하기 위한 결함 판정 기준을 포함하는 것을 특징으로 하는,
    컴퓨터 판독 가능한 저장 매체.
KR1020190104345A 2019-08-09 2019-08-26 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체 KR102249836B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020190104345A KR102249836B1 (ko) 2019-08-26 2019-08-26 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체
US17/604,692 US20220215521A1 (en) 2019-08-09 2020-08-07 Transmission image-based non-destructive inspecting method, method of providing non-destructive inspection function, and device therefor
PCT/KR2020/010483 WO2021029625A1 (ko) 2019-08-09 2020-08-07 투과영상 기반의 비파괴검사 방법, 비파괴검사 기능을 제공하는 방법 및 이를 위한 장치
KR1020210050811A KR102415928B1 (ko) 2019-08-26 2021-04-20 투과영상 기반의 비파괴검사 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190104345A KR102249836B1 (ko) 2019-08-26 2019-08-26 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020210050811A Division KR102415928B1 (ko) 2019-08-26 2021-04-20 투과영상 기반의 비파괴검사 방법

Publications (2)

Publication Number Publication Date
KR20210024767A KR20210024767A (ko) 2021-03-08
KR102249836B1 true KR102249836B1 (ko) 2021-05-10

Family

ID=75184951

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190104345A KR102249836B1 (ko) 2019-08-09 2019-08-26 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체

Country Status (1)

Country Link
KR (1) KR102249836B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220111214A (ko) 2021-02-01 2022-08-09 주식회사 동일비전 인공지능 기반 제품 결함 검사 방법, 장치 및 컴퓨터 프로그램
KR20230081911A (ko) 2021-11-30 2023-06-08 (주)자비스 선택적 인공 지능 엔진 기반 대상체 비파괴 검사 방법, 장치 및 시스템
KR20230081913A (ko) 2021-11-30 2023-06-08 (주)자비스 3차원 처리 기반 대상체 비파괴 검사 방법, 장치 및 시스템
KR20230081910A (ko) 2021-11-30 2023-06-08 (주)자비스 인공 지능 기반 대상체 앙상블 비파괴 검사 방법, 장치 및 시스템

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102390004B1 (ko) * 2021-09-16 2022-04-25 라이트브라더스 주식회사 스케일 변화량 분석 기반의 자전거 비파괴 검사 장치, 방법, 및 컴퓨터 판독 가능한 기록 매체
CN114356189B (zh) * 2021-12-16 2024-08-30 苏州镁伽科技有限公司 待检测面板图像的编辑方法、装置、电子设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013246162A (ja) 2012-05-30 2013-12-09 Hitachi High-Technologies Corp 欠陥検査方法および欠陥検査装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004226127A (ja) * 2003-01-20 2004-08-12 On Denshi Kk 基板検査方法
KR101654825B1 (ko) * 2014-07-08 2016-09-22 (주)자비스 기판의 밀집 검사 부위의 엑스레이 검사 방법
KR101717768B1 (ko) * 2015-06-17 2017-03-27 주식회사 쓰리디산업영상 부품 결함 검사 방법 및 그 장치
KR101962076B1 (ko) 2018-10-16 2019-03-26 (주)레이나 자동차 브레이크 부품용 초음파 검사장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013246162A (ja) 2012-05-30 2013-12-09 Hitachi High-Technologies Corp 欠陥検査方法および欠陥検査装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220111214A (ko) 2021-02-01 2022-08-09 주식회사 동일비전 인공지능 기반 제품 결함 검사 방법, 장치 및 컴퓨터 프로그램
KR20230081911A (ko) 2021-11-30 2023-06-08 (주)자비스 선택적 인공 지능 엔진 기반 대상체 비파괴 검사 방법, 장치 및 시스템
KR20230081913A (ko) 2021-11-30 2023-06-08 (주)자비스 3차원 처리 기반 대상체 비파괴 검사 방법, 장치 및 시스템
KR20230081910A (ko) 2021-11-30 2023-06-08 (주)자비스 인공 지능 기반 대상체 앙상블 비파괴 검사 방법, 장치 및 시스템
KR20230143598A (ko) 2021-11-30 2023-10-12 (주)자비스 대상체의 비파괴 검사를 위한 3d 영상 처리 방법 및 장치
KR20230160754A (ko) 2021-11-30 2023-11-24 (주)자비스 학습 모델을 이용한 결함 검사 수행 장치, 방법, 시스템 및 프로그램

Also Published As

Publication number Publication date
KR20210024767A (ko) 2021-03-08

Similar Documents

Publication Publication Date Title
KR102249836B1 (ko) 투과영상 기반의 비파괴검사 기능을 제공하기 위한 방법 및 컴퓨터 판독 가능한 저장 매체
JP6078234B2 (ja) 荷電粒子線装置
JP6134366B2 (ja) 画像処理装置およびコンピュータプログラム
US6289117B1 (en) Analysis of an image of a pattern of discrete objects
US20220215521A1 (en) Transmission image-based non-destructive inspecting method, method of providing non-destructive inspection function, and device therefor
US20140037188A1 (en) Defect review method and apparatus
JP5707291B2 (ja) 画像分類支援を行う荷電粒子線装置
JP2007225531A (ja) 欠陥観察方法及びその装置
JP5647999B2 (ja) パターンマッチング装置、検査システム、及びコンピュータプログラム
KR102075872B1 (ko) 투과영상 기반의 비파괴검사 방법 및 이를 위한 장치
CN107507182B (zh) 一种基于x射线图像的bga焊球提取方法
US6141009A (en) Interface for model definition
KR102415928B1 (ko) 투과영상 기반의 비파괴검사 방법
KR102616867B1 (ko) 비파괴검사 방법
KR102000938B1 (ko) 영역 지정에 따른 지능형 판정 기준의 자동 설정 방법 및 그에 의한 스마트 학습 방식의 엑스레이 검사 방법
KR101521620B1 (ko) 다이 영상 분할 방법
JP2014095961A (ja) 画像分析支援装置及び方法
WO2023100474A1 (ja) システム、画像処理方法およびプログラム
WO2023136030A1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
WO2024116675A1 (ja) 画像処理装置および画像処理方法
JP7390851B2 (ja) 欠陥分類装置、欠陥分類プログラム
WO2022181746A1 (ja) 画像表示装置、画像表示方法及びプログラム
KR20150093959A (ko) 영역 지정에 따른 지능형 판정 기준의 자동 설정 방법 및 그에 의한 스마트 학습 방식의 엑스레이 검사 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant