KR100998716B1 - 현미경 영상정보 자동화 시스템 처리방법 - Google Patents

현미경 영상정보 자동화 시스템 처리방법 Download PDF

Info

Publication number
KR100998716B1
KR100998716B1 KR1020090028271A KR20090028271A KR100998716B1 KR 100998716 B1 KR100998716 B1 KR 100998716B1 KR 1020090028271 A KR1020090028271 A KR 1020090028271A KR 20090028271 A KR20090028271 A KR 20090028271A KR 100998716 B1 KR100998716 B1 KR 100998716B1
Authority
KR
South Korea
Prior art keywords
image
axis
matrix
transfer
variable
Prior art date
Application number
KR1020090028271A
Other languages
English (en)
Other versions
KR20100109806A (ko
Inventor
최명수
김건희
Original Assignee
한국기초과학지원연구원
(주)코모코엔지니어링
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국기초과학지원연구원, (주)코모코엔지니어링 filed Critical 한국기초과학지원연구원
Priority to KR1020090028271A priority Critical patent/KR100998716B1/ko
Publication of KR20100109806A publication Critical patent/KR20100109806A/ko
Application granted granted Critical
Publication of KR100998716B1 publication Critical patent/KR100998716B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/20Processor architectures; Processor configuration, e.g. pipelining
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • G06T2207/10061Microscopic image from scanning electron microscope
    • HELECTRICITY
    • H02GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02PCONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
    • H02P8/00Arrangements for controlling dynamo-electric motors of the kind having motors rotating step by step
    • H02P8/40Special adaptations for controlling two or more stepping motors

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Theoretical Computer Science (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

본 발명은 현미경 영상정보 자동화 시스템 처리방법에 관한 것으로서, 더욱 상세하게는 종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있으며 카메라를 통해 획득된 영상의 이미징 처리를 동시에 처리할 수 있는 현미경 영상정보 자동화 시스템 처리방법에 관한 것이다.
본 발명인 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계와;
상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하는 제5단계와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제6단계와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제7단계와;
상기 수집된 영상을 영상처리부로 전송하는 제8단계와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제9단계와;
Z축 이송전과 이송후의 영상을 영상처리부에 의해 비교연산처리부로 전송하는 제10단계와;
비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 제11단계와;
상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제12단계와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제13단계와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제14단계와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제15단계와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제16단계;를 포함하여 이루어지는 것을 특징으로 한다.
본 발명을 통해 종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있도록 함으로써, 작업 조건만 입력하면 오토 포커싱 및 영상 촬영 및 이미지 처리를 프로그램에 의해 손쉽게 처리할 수 있어 현미경을 통한 관찰시 소요되는 시간 및 비용을 최소화시킬 수 있게 된다.
현미경, 영상처리, 오토 포커싱, 스테이지, 카메라.

Description

현미경 영상정보 자동화 시스템 처리방법{microscope image transaction method.}
본 발명은 현미경 영상정보 자동화 시스템 처리방법에 관한 것으로서, 더욱 상세하게는 종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있으며 카메라를 통해 획득된 영상의 이미징 처리를 동시에 처리할 수 있는 현미경 영상정보 자동화 시스템 처리방법에 관한 것이다.
종래의 현미경은 Camera를 적용할 수 없을 경우에는 작업자가 손으로 직접 포커싱을 맞추는 작업을 수행하게 되어 현미경을 통해 목적물을 관찰할 경우에 현미경의 관찰 위치를 변경할 경우에는 다시 작업자가 손으로 직접 포커싱을 맞추는 번거로운 작업을 수행할 수밖에 없어서 이에 따른 불필요한 시간을 요구할 수 밖에 없었다.
또한, 현미경에 카메라가 적용된 장비일지라도 LENS부가 Z축 방향으로 이동 하는 방식으로 구성되어 있었다.
상기한 바와 같이 종래의 기술들은 포커싱을 수동으로 조작하거나 Z축 이동만으로 포커싱을 맞추어야 하므로 필요에 따라 어레이 플레이트를 관찰한다면 X,Y축 이동은 불가능하게 되므로 작업자가 현미경을 관찰하고자 하는 위치로 이동시킨 후 Z축을 포커싱하는 번거로움을 제공할 수 밖에 없었다.
한편, 종래의 기술들은 영상확인과 Imaging를 동시에 진행하는 것이 불가능하므로 영상만 확인하거나 이미지 캡쳐만 가능하였다.
따라서, 어레이 플레이트의 배열이 맞추어지면 이미지 캡쳐하여 데이터를 생성하여야 하므로 상기와 같이 칸 수가 많은 어레이 플레이트 목적물을 일일히 위치를 이동시키고, 배율을 맞추고 이미지 캡쳐하는 과정을 모두 수동으로 조작할 수 밖에 없어서 칸 수가 많은 목적물을 관찰할 경우에는 상당한 시간 및 인내력을 필요로 할 수 밖에 없었다.
따라서 본 발명은 상기와 같은 종래 기술의 문제점을 감안하여 제안된 것으로서, 본 발명의 목적은 종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있도록 하는데 있다.
본 발명의 다른 목적은 현미경에 카메라를 구성하여 영상확인과 Imaging 처리를 동시에 수행할 수 있도록 하는데 있다.
본 발명의 또 다른 목적은 작업조건에 따라 오토 포커싱 및 영상 처리와 이미징 처리를 전자동으로 수행할 수 있으며, 필요에 따라 포커싱을 작업자가 직접 수행하고 영상 처리 및 이미징 처리를 자동으로 수행할 수 있도록 하는데 있다.
본 발명이 해결하고자 하는 과제를 달성하기 위하여,
본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계와;
상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하는 제5단계와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제6단계와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제7단계와;
상기 수집된 영상을 영상처리부로 전송하는 제8단계와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제9단계와;
Z축 이송전과 이송후의 영상을 영상처리부에 의해 비교연산처리부로 전송하는 제10단계와;
비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 제11단계와;
상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제12단계와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제13단계와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제14단계와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제15단계와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제16단계;를 포함하여 이루어지는 것을 특징으로 한다.
이상의 구성 및 작용을 지니는 본 발명에 따른 현미경 영상정보 자동화 시스템 처리방법은,
종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있도록 함으로써, 작업 조건만 입력하면 오토 포커싱 및 영상 촬영 및 이미지 처리를 프로그램에 의해 손쉽게 처리할 수 있어 현미경을 통한 관찰시 소요되는 시간 및 비용을 최소화시킬 수 있게 된다.
또한, 현미경에 카메라를 구성하여 영상확인과 Imaging 처리를 동시에 수행할 수 있게 되어 칸 수가 많은 목적물을 관찰할 경우에 소요되는 시간을 단축시킬 수 있게 된다.
또한, 프로그램에 입력된 작업조건에 따라 오토 포커싱 및 영상 처리와 이미징 처리를 전자동으로 수행할 수 있으며, 필요에 따라 포커싱을 작업자가 직접 수 행하고 영상 처리 및 이미징 처리를 자동으로 수행할 수 있도록 함으로써, 작업자로 하여금 사용상의 편의성을 제공하게 된다.
상기 과제를 달성하기 위한 본 발명인 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S100)와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계(S101)와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S102)와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S103)와;
상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하는 제5단계(S104)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제6단계(S105)와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제7단계(S106)와;
상기 수집된 영상을 영상처리부로 전송하는 제8단계(S107)와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제9단계(S108)와;
Z축 이송전과 이송후의 영상을 영상처리부에 의해 비교연산처리부로 전송하는 제10단계(S109)와;
비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 제11단계(S110)와;
상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제12단계(S111)와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제13단계(S112)와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제14단계(S113)와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제15단계(S114)와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제16단계(S115);를 포함하여 이루어지는 것을 특징으로 한다.
이때, 상기 제15단계(S114)에서,
Z 행렬변수와 일치하지 않을 경우에,
입력된 Z 행렬변수값과 현재 Z 행렬변수값의 오차만큼 Z축 피치 변수 펄스를 Z축드라이버로 전송하는 제17단계(S120)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제18단계(S121)와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제19단계(S122)와;
상기 수집된 영상을 영상처리부로 전송하는 제20단계(S123);를 수행하는 것을 특징으로 한다.
이때, 상기 제20단계(S123) 이후에,
제12단계(S111);로 피드백하여 Z 행렬변수가 일치할 때까지 반복하는 것을 특징으로 한다.
이때, 상기 제16단계(S115)에서,
X, Y 행렬 변수와 일치하지 않을 경우에,
입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제21단계(S130)와;
X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제22단계(S131)와;
오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제23단계(S132)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제24단계(S133);를 수행하는 것을 특징으로 한다.
이때, 부가적인 양상에 따라 상기 제16단계(S115)에서,
X, Y 행렬 변수와 일치하지 않을 경우에,
입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제21단계(S130)와;
X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제22단계(S131)와;
오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제23단계(S132)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제24단계(S133);를 수행하되,
상기 제24단계(S133) 이후에 제4단계(S103)로 피드백하는 것을 특징으로 한다.
한편, 본 발명의 다른 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S200)와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계(S201)와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S202)와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S203)와;
상기 촬영된 영상을 영상처리부로 전송하는 제5단계(S204)와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제6단계(S205)와;
작업자의 조작에 의해 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제7단계(S206)와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제8단계(S207)와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제9단계(S208)와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제10단계(S209)와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제11단계(S210);를 포함하여 이루어지는 것을 특징으로 한다.
이때, 상기 제10단계(S209)에서,
Z 행렬변수와 일치하지 않을 경우에,
입력된 Z 행렬변수값과 현재 Z 행렬변수값의 오차만큼 Z축 피치 변수 펄스를 Z축드라이버로 전송하는 제12단계(S220)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제13단계(S221)와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제14단계(S222)와;
상기 수집된 영상을 영상처리부로 전송하는 제15단계(S223);를 수행하는 것을 특징으로 한다.
이때, 상기 제15단계(S223) 이후에,
제7단계(S206);로 피드백하여 Z 행렬변수가 일치할 때까지 반복하는 것을 특징으로 한다.
이때, 상기 제11단계(S210)에서,
X, Y 행렬 변수와 일치하지 않을 경우에,
입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제16단계(S230)와;
X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제17단계(S231)와;
오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제18단계(S232)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제19단계(S233);를 수행하는 것을 특징으로 한다.
이때, 부가적인 양상에 따라 상기 제11단계(S210)에서,
X, Y 행렬 변수와 일치하지 않을 경우에,
입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제16단계(S230)와;
X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제17단계(S231)와;
오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제18단계(S232)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제19단계(S233);를 수행하되,
상기 제19단계(S233) 이후에 제4단계(S203)로 피드백하는 것을 특징으로 한다.
또한, 본 발명인 현미경 영상정보 자동화 시스템 처리방법은,
이미징 처리 및 오토 포커싱을 동시에 수행할 수 있는 것을 특징으로 한다.
이하, 본 발명에 의한 현미경 영상정보 자동화 시스템 처리방법의 실시예를 통해 상세히 설명하도록 한다.
도 1은 본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법을 처리하는 시스템의 전체 구성도이다.
도 1에 도시한 바와 같이, 본 발명인 현미경 영상정보 자동화 시스템 처리방법을 수행하기 위한 시스템은,
목표물의 영상을 획득하는 카메라(100)와;
상기 카메라로부터 영상을 입력받아 영상처리부로 전송하는 영상입력처리부(210)와,
조작자가 행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력하는 조건입력부(220)와,
상기 조건입력부에 의해 작업 조건이 입력되면 해당 작업 조건을 비교연산처리부로 전송하는 외부신호처리부(230)와,
상기 외부신호처리부에 의해 전송된 작업조건에 따라 모션컨트롤부에 오토 포커싱을 수행하도록 이송 펄스 발생신호를 전송하며, X,Y,Z축드라이버에서 이송 후 전송하는 이송 결과 신호를 수신받으면 카메라에 영상 촬영 신호를 전송하는 오토포커싱프로세스부(240)와,
상기 오토포커싱프로세스부에서 처리한 포커싱이 정확히 되었는지를 판단하며, 외부신호처리부에 의해 전송된 작업조건을 대기시키되, 상기 판단 결과와 작업 조건이 일치하는지를 다시 비교하는 비교연산처리부(250)와,
상기 영상입력처리부로부터 전송받은 영상을 영상캡쳐부 및 영상출력처리부로 전송하는 영상처리부(260)와,
상기 비교연산처리부에 의해 비교 연산되어 만족된 영상을 캡쳐하는 영상캡쳐부(270)와,
상기 영상캡쳐부에 의해 캡쳐된 이미지를 저장하는 저장부(280)와,
상기 영상처리부로부터 전송받은 영상 및 비교연산처리부에 의해 비교 연산 되어 만족된 영상을 출력화하기 위한 과정을 수행하는 영상출력처리부(290)와,
상기 영상출력처리부에서 수행한 영상을 출력하는 영상출력부(295)를 포함하여 구성되는 오토포커싱단말기(200)와;
각축들의 스테핑 모터를 구동하기 위한 펄스를 발생시키고 모션제어를 행하는 모션컨트롤부(310)와,
X축에 장착된 Stepping Motor의 전압, 전류를 증폭시켜 정회전, 역회전, Stop, Sleeping의 동작을 수행하도록 하기 위한 X축드라이버(320)와,
Y축에 장착된 Stepping Motor의 전압, 전류를 증폭시켜 정회전, 역회전, Stop, Sleeping의 동작을 수행하도록 하기 위한 Y축드라이버(330)와,
Z축에 장착된 Stepping Motor의 전압, 전류를 증폭시켜 정회전, 역회전, Stop, Sleeping의 동작을 수행하도록 하기 위한 Z축드라이버(340)와,
Stepping Motor를 포함하여 구성되되, 상기 X축드라이버에 의해 출력되는 값에 따라 X축 방향으로 이동시키는 X축이동수단(350)과,
Stepping Motor를 포함하여 구성되되, 상기 Y축드라이버에 의해 출력되는 값에 따라 Y축 방향으로 이동시키는 Y축이동수단(360)과,
Stepping Motor를 포함하여 구성되되, 상기 Z축드라이버에 의해 출력되는 값에 따라 Z축 방향으로 이동시키는 Z축이동수단(370)으로 구성되는 각축스테이지이동수단(300);을 포함하여 구성된다.
구체적으로 설명하자면, 상기 비교연산처리부(250)는 상기 오토포커싱프로세스부에서 처리한 포커싱이 정확히 되었는지를 판단하게 되는데, 예를 들어 작업 실 행시 입력 펄스만큼 Z축이 이송하면서 수집한 영상을 비교하는 것이다.
즉, 오토 포커싱은 CONTRAST 값을 측정하여 비교하므로 Z축이 이송하면서 수집한 영상 중 CONTRAST의 PEAK값이 가장 선명하고 정확한 값을 비교하여 찾아내는 것이다.
상기 영상출력처리부(290)에서 영상을 출력화하기 위한 과정을 수행하는 것은 Z축이 펄스만큼 이송하면서 수집한 영상을 영상처리부로 보내서 출력할 수 있도록 하는 기능을 의미하는 것이다.
상기 모션컨트롤부(310)는 각축들의 스테핑 모터를 구동하기 위한 펄스를 발생시키는 기능 및 모션제어를 담당한다.
즉, 오토 포커싱 시에는 피치 변수 펄스만큼 Z축이 이송하여 영상을 수집하는 과정에서 발생한 Contrast값을 측정하여 비교하는 과정에서 Peak값을 찾아서 오토포커싱을 완료하는 것이다.
이때, 펄스 발생 및 모션제어를 상기 모션컨트롤부에서 수행하는 것이다.
종래에 사용하고 있는 수동형 현미경에 카메라와 각축스테이지이동수단을 구성하고, Motion & Imaging & Auto Focusing Program을 장착한 오토포커싱단말기을 구성함으로써 고정도, 고정밀 제어가 가능하면서 수동형 현미경을 적은 비용으로 자동화함으로써 생산성과 작업자의 근무 환경을 향상시킬 수 있게 된다.
상기 영상캡쳐부 혹은 영상출력처리부로 전송된 영상은 영상 Capture되어 저장부에 저장되거나 영상출력부로 처리되어 가시적으로 확인이 가능하다.
상기 조건입력부에서 조작자가 행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미 지 저장 경로의 작업 조건을 입력하면 이를 기준으로 본 발명의 시스템이 처리하게 된다.
이때, 행렬 변수는 최초 작업조건 입력시 입력하는 X,Y,Z 축(Axis)의 위치를 결정하는데 대입되는 변수 값이다.
행렬 변수 비교 단계인(S114, S115)에서 현재 값과 일치하는지를 비교하게 된다.
예를 들어 설명하자면, 현재 X,Y,Z축의 위치 값, 현재 값과 최초 입력 값을 비교하는 것이며, 구체적인 예를 들자면, 최초 X값과 Y값을 4를 입력했다고 가정하면 X4, Y4가 되는 것이며, 현재 값이 상기 입력 값과 동일한지 비교하게 되는 것이다.
즉, 현재 축이 위치하고 있는 값이 최초 입력했던 값에 만족하는지 비교하는 과정이며, 영상끼리 비교를 해서 값을 만족시키는 것이 아니고 입력값에 만족할 때까지 만족시키는 것이다.
부연 설명하자면,
행렬변수 = X0, X1.....Xn
Y0, Y1.....Yn
Z0, Z1.....Zn 이다.
한편, Pitch 변수는 최초 작업조건 입력 시 입력하는 X,Y,Z축의 Pitch Pulse 전송에 사용하는 변수 값이다.
Pitch Pulse 전송단계인(S120, S130)에서 입력된 Pulse만큼 전송하여 각 축 들을 이동시키게 된다.
예를 들어 설명하자면, 피치를 입력하면 입력된 피치만큼 움직이게 되며, 표본 어레이 플레이트의 배열 간격이 플레이트마다 각각 다르므로 피치값을 입력하게 프로그래밍하게 된다.
구체적인 예를 들자면, X,Y,Z축의 피치값을 3으로 설정했다면 피치값이 3이 되므로 한 번 이동 시마다 3mm씩 움직이게 되는 것이다.
부연 설명하자면,
Pitch 변수 = X_pitch
Y_pitch
Z_pitch 이다.
한편, Capture 횟수 변수는 최초 작업조건 입력 시 입력하는 Capture 반복 횟수이다.
즉, 몇 번을 Capture할 것인가 하는 변수 값으로서 제14단계(S113)의 조건식에서 사용된다.
구체적으로 설명하자면,
Capture 횟수 변수 = C 이다.
상기 본 발명의 방법을 수행하기 위한 시스템을 하기의 방법을 절차에 따라 상세하게 설명하도록 하겠다.
도 2는 본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법의 흐름도이다.
도 2에 도시한 바와 같이, 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S100)와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계(S101)와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S102)와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S103)와;
상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하는 제5단계(S104)와;
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제6단계(S105)와;
Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제7단계(S106)와;
상기 수집된 영상을 영상처리부로 전송하는 제8단계(S107)와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제9단계(S108)와;
Z축 이송전과 이송후의 영상을 영상처리부에 의해 비교연산처리부로 전송하는 제10단계(S109)와;
비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 제11단계(S110)와;
상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제12단계(S111)와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제13단계(S112)와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제14단계(S113)와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제15단계(S114)와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제16단계(S115);를 포함하여 이루어지는 것을 특징으로 한다.
구체적으로 설명하자면, 오토포커싱단말기에 탑재된 본 발명의 방법을 수행하는 프로그램을 실행하게 되면, 작업자가 조건입력부에 의해 디스플레이된 행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받게(S100) 된다.
상기 조건입력부에 의해 작업 조건이 입력되면 해당 작업 조건을 외부신호처리부(230)에 의해 비교연산처리부로 전송하게 된다.
또한, 표본 어레이 플레이트를 현미경에 장착(S101)하게 된다.
상기 표본 어레이 플레이트란 도 4에 도시한 바와 같이 적어도 한 개 이상의 칸 수를 가지고 있는 목표물을 의미하게 된다.
상기 단계를 거친 후 어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀(S102)시키게 된다.
상기 영점복귀란 도 4에 도시한 바와 같이 X0, Y0라고 표시된 영점으로 복귀한다는 것이며, 예를 들면 잉크젯 프린터의 카트리지가 좌우로 이동하며 프린트를 하다가 전원코드를 뽑아버리면 카트리지가 중간에 위치한 상태로 멈추다가 다시 전원을 넣으면 카트리지가 자동으로 본래의 제 위치로 이동하는데 이런 동작을 영점복귀라고 한다.
상기 작업 조건 입력 및 영점복귀작업이 완료되면 작업을 실행하게 되는데, 이때 Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영(S103)하게 되며, 상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하게 된다.
이송 펄스는 피치변수에 의하여 발생을 하게 되는데, 피치변수를 입력하게 되면 입력된 값만큼 모션컨트롤부에서 펄스를 발생시키게 된다.
즉, 행렬변수는 X,Y,Z의 위치 값이며, X3,Y2,Z3 이라는 행렬변수 값을 입력하면 X3,Y2,Z3 이라는 값에 맞는 어레이 플레이트의 위치로 위치하게 되며, 피치 변수 값은 피치 값을 의미하며 어레이 플레이트의 배열 간 피치값이 각각 다르므로 플레이트에 따라 피치값을 바꾸어 입력하게 되는 것이다.
상기 Z축드라이버에서 수신된 이송 펄스만큼 Z축이동수단(370)의 Stepping Motor가 회전하여 Z축이 이송(S105)되어지면, Z축을 이송한 후 Z축드라이버에서 이송 완료 신호를 오토포커싱프로세스부로 전송하게 되며 전송받은 오토포커싱프로세스부에서는 카메라에 촬영 신호를 전송하여 카메라로부터 획득된 영상을 영상입력처리부에서 수집(S106)하게 되며, 상기 수집된 영상을 영상처리부로 전송(S107)하여 영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리(S108)하게 된다.
이때, 상기 영상출력처리부는 영상 출력을 처리하는 기능을 담당한다.
즉, 영상처리부에서 영상 캡쳐와 영상 출력을 구분하는 기능을 수행한다면 영상출력처리부는 영상 출력할 신호를 영상처리부에서 수신받아 영상출력부에 표시하는 중간처리 역할을 수행하는 것이다.
이때, 상기 Z축 이송전과 이송 후의 영상을 영상처리부에 의해 비교연산처리부로 전송(S109)하게 된다.
상기 전송된 영상을 비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교(S110)하게 되는데, 구체적으로는 Contrast의 피크값을 비교하는 것이지만, 하기에 설명하고 있는 Z 행렬변수는 Z의 행렬값 즉, 위치값을 비교하는 것이다.
이때, 오토 포커싱이 정확히 수행되지 않을 경우에는 Z축 이송 펄스를 전송하는 제5단계로 피드백되어진다.
상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐(S111)하게 되며, 상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장(S112)하게 되는 것이다.
또한, 비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교(S113)하게 되어 캡쳐 횟수가 일치하면 다음 단계를 진행하게 되며 일치하지 않을 경우에는 제 12단계로 피드백되어 영상 캡쳐를 다시 실행하게 되는 것이다.
따라서, 캡쳐 횟수가 일치하면 비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교(S114)하게 된다.
예를 들어 설명하자면, 최초 행렬변수 입력 시 Z값에 해당하는 값과 현재 Z축 작업 위치를 비교한다.
예를 들어 Z축의 입력값이 4이고 현재값이 2일때 Z=4값을 만족하면 완료하고 완료하지 못하면 피드백하여 만족할 때까지 반복하게 되는 것이다.
상기 기술은 당업자들이라면 누구나 쉽게 이해할 수 있으므로 이에 대한 구체적인 설명은 생략하도록 한다.
이때, Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교(S115)하게 된다.
한편, 상기 제15단계(S114)에서 Z 행렬변수와 일치하지 않을 경우에 입력된 Z 행렬변수값과 현재 Z 행렬변수값의 오차만큼 Z축 피치 변수 펄스를 Z축드라이버로 전송(S120)하게 된다.
즉, 오차만큼의 횟수를 피드백하여 반복하게 되는 것이며, 예를 들어 행렬 값이 Z4이고, 현재값이 Z2이면 피드백하여 Z=4가 될 때까지 2회 과정을 더 반복하 게 되는 것이다.
Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송(S121)되게 되며, Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집(S122)하게 되며, 상기 수집된 영상을 영상처리부로 전송(S123)하게 되며, 이후에 제12단계(S111)로 피드백하여 Z 행렬변수가 일치할 때까지 반복하게 되는 것이다.
한편, 상기 제16단계(S115)에서 X, Y 행렬 변수와 일치하지 않을 경우에 입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송(S130)하게 된다.
X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송(S131)되며, 오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송(S132)하게 되며, Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송(S133)하게 되며, 이후에 제4단계(S103)로 피드백하게 되는 것이다.
즉, Z0 위치로 이송은 작업이 모두 끝난 후 다음 피치의 기본이 되는 영점으로 이동하는 것이다.
시작 단계에도 원점 복귀 작업이 있지만 그 과정은 전체적인 원점 복귀이고, 여기서의 원점이동은 좌표 이동시마다 각 피치의 원점에 이동해야 한다.
예를 들어 Z축의 행렬변수가 3이고 피치가 2 일때 행렬변수 이동 좌표는 Z0, Z1, Z2가 된다.
Z0점에서 Z축이 이동하면서 영상을 촬영하다가 1.4mm부분에서 오토포커싱이 완료되었다고 가정할 때, Z축은 Z1의 원점(각 좌표의 시작점)으로 이동하게 된다.
Z1에서도 이동촬영 중 오토포커싱이 완료되었다면 자동으로 Z2의 원점으로 이동한다.
즉, 다음 이동할 좌표의 시작점으로 이동하는 것이다.
도 3은 본 발명의 다른 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법의 흐름도이다.
도 3에 도시한 바와 같이, 현미경 영상정보 자동화 시스템 처리방법은,
현미경 영상정보 처리방법에 있어서,
행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S200)와;
표본 어레이 플레이트를 현미경에 장착하는 제2단계(S201)와;
어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S202)와;
Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S203)와;
촬영된 영상을 영상처리부로 전송하는 제5단계(S204)와;
영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제6단계(S205)와;
작업자의 조작에 의해 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제7단계(S206)와;
상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제8단계(S207)와;
비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제9단계(S208)와;
비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제10단계(S209)와;
Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제11단계(S210);를 포함하여 이루어지는 것을 특징으로 한다.
상기 단계들은 본 발명의 일실시예와 동일한 과정을 거치게 되며, 차이점은 Z축 이송전과 이송 후의 영상을 영상처리부에 의해 비교연산처리부로 전송(S109)하는 단계 및 상기 전송된 영상을 비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 단계를 생략하는 것이다.
이는 필요에 따라 포커싱을 작업자가 직접 수행하고 Z 행렬변수 및 X, Y 행렬 변수를 비교하여 영상 처리 및 이미징 처리를 자동으로 수행하도록 하기 위한 것이다.
도 5는 일반적인 각축들의 이동수단을 구체적으로 나타낸 도면이다.
일반적인 각축스테이지이동수단(300)은,
Stepping Motor를 포함하여 구성되되, 상기 X축드라이버에 의해 출력되는 값 에 따라 X축 방향으로 이동시키는 X축이동수단(350)과,
Stepping Motor를 포함하여 구성되되, 상기 Y축드라이버에 의해 출력되는 값에 따라 Y축 방향으로 이동시키는 Y축이동수단(360)과,
Stepping Motor를 포함하여 구성되되, 상기 Z축드라이버에 의해 출력되는 값에 따라 Z축 방향으로 이동시키는 Z축이동수단(370)으로 구성되게 된다.
상기 이동수단 중 도 5에 도시한 바와 같이 Y축이동수단(360)의 구성 및 동작 원리를 간단하게 설명하도록 하겠다.
상기 Y축이동수단(360)은 Stepping Motor(361)의 회전에 의해 Ball Screw(363)가 회전하면서 Stage Plate(365)에 체결된 Nut Screw(364)가 직선운동 함으로 Stage Plate가 구동하는 구조를 가지고 있다.
상기와 같이 간단히 설명하고 있지만, 이러한 구조 및 동작 원리는 이미 당업자들이라면 알려진 기술이므로 이에 대한 상세한 설명은 생략하도록 한다.
상기 Stepping Motor는 Pulse 전력 즉, 이송 펄스에 대응하여 회전하는 구동 원리를 가지고 있으며 Stepping Motor가 회전하기 위해서는 상기와 같이 각축의 모터 드라이버들과 모션컨트롤부가 필요하게 된다.
즉, 상기 오토 포커싱이 완료되지 않았거나, 작업 조건이 만족되지 않을 경우에 X축드라이버, Y축드라이버, Z축드라이버를 오토 포커싱이 완료될 때까지 혹은 작업 조건을 만족할 때까지 컨트롤하기 위한 모션컨트롤부(310)는 Stepping Motor를 회전시키기 위한 Pulse 신호를 발생시키는 기능을 수행하는데 예를 들어 Stepping Motor의 운전, 정지, 정회전, 역회전, 가속, 감속 등의 구동을 Control하 는 것이다.
상기 모션컨트롤부는 오토포커싱단말기와 연동되며 오토포커싱단말기에서 Motion 입력 값 즉, 이송 펄스발생신호를 입력하면, 모션컨트롤부에서 입력값에 준하는 Pulse 신호를 발생시키고 Motor Driver로 신호를 전송한다.
Y축드라이버를 예를 들어 설명하도록 하겠다.
즉, Y축드라이버에서 Stepping Motor를 조작하면 입력한 Pulse만큼 Stepping Motor가 회전하게 된다.
Stepping Motor가 회전하게 되면 Motor Shaft(미도시)와 Coupling(362)으로 체결되어 있는 Ball Screw(363)도 함께 회전하게 되며, Ball Screw가 회전하면 Ball Screw에 체결되어 있는 Nut Screw(364)가 Ball Screw의 나사선을 따라서 직진 운동하게 되고, Nut Screw에 체결되어 있는 Stage Plate도 함께 직진 운동함으로서, Stage가 구동되게 된다.
한편, X Axis와 Y Axis는 Axis 방향만 다를 뿐이고 Z Axis 역시 같은 구조이나 Ball Screw와 Stepping Motor 등 구동 기기를 수직으로 세워서 Z Axis로 운동하게 하는 구조이다.
따라서, 상기 Y 축을 예를 들어 설명하였지만 나머지 X, Z축도 상기 Y축의 구성 요소 및 동작 원리가 동일하므로 구체적인 설명은 생략하도록 한다.
또한, Cross Roller Guide(366)는 Stage Plate 하단에 위치하며, Stage Plate가 이동 시 일종의 Rail 역할을 한다고 보면 되겠다.
상기와 같은 각축스테이지이동수단은 이미 당업자들에게 널리 알려진 기술이 므로 상기한 간단한 동작 원리 및 구성 요소를 통해 쉽게 구현이 가능할 것이다.
이상에서와 같은 내용의 본 발명이 속하는 기술분야의 당업자는 본 발명의 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시된 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구 범위의 의미 및 범위 그리고 그 등가 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
본 발명인 현미경 영상정보 자동화 시스템 처리방법은,
종래의 현미경을 이용하여 저렴한 비용으로 작업자가 입력한 작업 조건에 따라 각축스테이지를 이동시켜 포커싱을 자동으로 처리할 수 있도록 함으로써, 작업 조건만 입력하면 오토 포커싱 및 영상 촬영 및 이미지 처리를 프로그램에 의해 손쉽게 처리할 수 있어 현미경을 통한 관찰시 소요되는 시간 및 비용을 최소화시킬 수 있게 되어 현미경 응용 분야에 널리 활용할 수 있게 될 것이다.
도 1은 본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법을 처리하는 시스템의 전체 구성도이다.
도 2는 본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법의 흐름도이다.
도 3은 본 발명의 다른 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법의 흐름도이다.
도 4는 본 발명의 일실시예에 따른 현미경 영상정보 자동화 시스템 처리방법의 표본 어레이 플레이트 예를 간략하게 나타낸 도면이다.
도 5는 일반적인 각축들의 이동수단을 구체적으로 나타낸 도면이다.
* 도면의 주요 부분에 대한 부호의 설명 *
100 : 카메라
200 : 오토포커싱단말기
210 : 영상입력처리부
220 : 조건입력부
230 : 외부신호처리부
240 : 오토포커싱프로세스부
250 : 비교연산처리부
260 : 영상처리부
270 : 영상캡쳐부
280 : 저장부
290 : 영상출력처리부
295 : 영상출력부
300 : 각축스테이지이동수단
310 : 모션컨트롤부
320 : X축드라이버
330 : Y축드라이버
340 : Z축드라이버
350 : X축이동수단
360 : Y축이동수단
370 : Z축이동수단

Claims (11)

  1. 현미경 영상정보 처리방법에 있어서,
    행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S100)와;
    표본 어레이 플레이트를 현미경에 장착하는 제2단계(S101)와;
    어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S102)와;
    Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S103)와;
    상기 작업 조건 입력값 만큼 모션컨트롤부에 의해 발생시킨 이송 펄스를 Z축드라이버로 전송하는 제5단계(S104)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제6단계(S105)와;
    Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제7단계(S106)와;
    상기 수집된 영상을 영상처리부로 전송하는 제8단계(S107)와;
    영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제9단계(S108)와;
    Z축 이송전과 이송후의 영상을 영상처리부에 의해 비교연산처리부로 전송하 는 제10단계(S109)와;
    비교연산처리부에서 오토 포커싱이 정확히 되었는지를 비교하는 제11단계(S110)와;
    상기 비교 후 오토 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제12단계(S111)와;
    상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제13단계(S112)와;
    비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제14단계(S113)와;
    비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제15단계(S114)와;
    Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제16단계(S115);를 포함하여 이루어지는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  2. 제 1항에 있어서,
    상기 제15단계(S114)에서,
    Z 행렬변수와 일치하지 않을 경우에,
    입력된 Z 행렬변수값과 현재 Z 행렬변수값의 오차만큼 Z축 피치 변수 펄스를 Z축드라이버로 전송하는 제17단계(S120)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제18단계(S121)와;
    Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제19단계(S122)와;
    상기 수집된 영상을 영상처리부로 전송하는 제20단계(S123);를 수행하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  3. 제 2항에 있어서,
    상기 제20단계(S123) 이후에,
    제12단계(S111);로 피드백하여 Z 행렬변수가 일치할 때까지 반복하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  4. 제 1항에 있어서,
    상기 제16단계(S115)에서,
    X, Y 행렬 변수와 일치하지 않을 경우에,
    입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제21단계(S130)와;
    X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제22단계(S131)와;
    오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제23단계(S132)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제24단계(S133);를 수행하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  5. 제 1항에 있어서,
    상기 제16단계(S115)에서,
    X, Y 행렬 변수와 일치하지 않을 경우에,
    입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제21단계(S130)와;
    X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제22단계(S131)와;
    오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제23단계(S132)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제24단계(S133);를 수행하되,
    상기 제24단계(S133) 이후에 제4단계(S103)로 피드백하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  6. 현미경 영상정보 처리방법에 있어서,
    행렬 변수, 피치 변수, 캡쳐 횟수 변수, 이미지 저장 경로의 작업 조건을 입력받는 제1단계(S200)와;
    표본 어레이 플레이트를 현미경에 장착하는 제2단계(S201)와;
    어레이의 정확한 측정을 위하여 표본 어레이 플레이트의 측정 위치를 X0, Y0, Z0의 영점으로 복귀시키는 제3단계(S202)와;
    Z축을 이송하기 전에 카메라로 장착한 표본 어레이 플레이트의 영상을 촬영하는 제4단계(S203)와;
    촬영된 영상을 영상처리부로 전송하는 제5단계(S204)와;
    영상처리부에서 처리된 영상을 영상출력부를 통해 출력되도록 영상을 처리하는 제6단계(S205)와;
    작업자의 조작에 의해 포커싱이 완료된 영상을 영상캡쳐부에 의해 캡쳐하는 제7단계(S206)와;
    상기 작업 조건을 참조하여 해당 이미지 저장 경로에 영상처리부의 처리에 의하여 저장하는 제8단계(S207)와;
    비교연산처리부에 의해 입력된 작업 조건의 캡쳐 횟수 변수와 캡쳐 횟수가 일치하는지를 비교하는 제9단계(S208)와;
    비교연산처리부에 의해 입력된 작업 조건 중 Z 행렬변수와 일치하는지를 비교하는 제10단계(S209)와;
    Z 행렬변수가 일치하는 경우에 비교연산처리부에 의해 입력된 작업 조건의 X, Y 행렬 변수와 Z축 이송후의 X, Y 행렬 변수와 일치하는지를 비교하는 제11단계(S210);를 포함하여 이루어지는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  7. 제 6항에 있어서,
    상기 제10단계(S209)에서,
    Z 행렬변수와 일치하지 않을 경우에,
    입력된 Z 행렬변수값과 현재 Z 행렬변수값의 오차만큼 Z축 피치 변수 펄스를 Z축드라이버로 전송하는 제12단계(S220)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 이송되는 제13단계(S221)와;
    Z축을 이송한 후 카메라로부터 획득된 영상을 영상입력처리부에서 수집하는 제14단계(S222)와;
    상기 수집된 영상을 영상처리부로 전송하는 제15단계(S223);를 수행하는 것 을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  8. 제 7항에 있어서,
    상기 제15단계(S223) 이후에,
    제7단계(S206);로 피드백하여 Z 행렬변수가 일치할 때까지 반복하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  9. 제 6항에 있어서,
    상기 제11단계(S210)에서,
    X, Y 행렬 변수와 일치하지 않을 경우에,
    입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제16단계(S230)와;
    X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제17단계(S231)와;
    오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제18단계(S232)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제19단계(S233);를 수행하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  10. 제 6항에 있어서,
    상기 제11단계(S210)에서,
    X, Y 행렬 변수와 일치하지 않을 경우에,
    입력된 X, Y 행렬변수값과 현재 Z축 이송후의 X, Y 행렬 변수값의 오차만큼 X, Y축 피치 변수 펄스를 X, Y축드라이버로 전송하는 제16단계(S230)와;
    X, Y축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 X, Y축이 이송되는 제17단계(S231)와;
    오토포커싱프로세스부에 의해 Z0에 해당하는 이송 펄스를 Z축드라이버로 전송하는 제18단계(S232)와;
    Z축드라이버에서 수신된 이송 펄스만큼 Stepping Motor가 회전하여 Z축이 Z0 위치로 이송되는 제19단계(S233);를 수행하되,
    상기 제19단계(S233) 이후에 제4단계(S203)로 피드백하는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
  11. 제 1항에 있어서,
    상기 현미경 영상정보 자동화 시스템 처리방법을 통해,
    이미징 처리 및 오토 포커싱을 동시에 수행할 수 있는 것을 특징으로 하는 현미경 영상정보 자동화 시스템 처리방법.
KR1020090028271A 2009-04-01 2009-04-01 현미경 영상정보 자동화 시스템 처리방법 KR100998716B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090028271A KR100998716B1 (ko) 2009-04-01 2009-04-01 현미경 영상정보 자동화 시스템 처리방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090028271A KR100998716B1 (ko) 2009-04-01 2009-04-01 현미경 영상정보 자동화 시스템 처리방법

Publications (2)

Publication Number Publication Date
KR20100109806A KR20100109806A (ko) 2010-10-11
KR100998716B1 true KR100998716B1 (ko) 2010-12-07

Family

ID=43130698

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090028271A KR100998716B1 (ko) 2009-04-01 2009-04-01 현미경 영상정보 자동화 시스템 처리방법

Country Status (1)

Country Link
KR (1) KR100998716B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11326778A (ja) 1998-03-19 1999-11-26 Olympus Optical Co Ltd 顕微鏡画像観察装置
JP2004191846A (ja) 2002-12-13 2004-07-08 Olympus Corp レーザ走査型顕微鏡

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11326778A (ja) 1998-03-19 1999-11-26 Olympus Optical Co Ltd 顕微鏡画像観察装置
JP2004191846A (ja) 2002-12-13 2004-07-08 Olympus Corp レーザ走査型顕微鏡

Also Published As

Publication number Publication date
KR20100109806A (ko) 2010-10-11

Similar Documents

Publication Publication Date Title
US9830694B2 (en) Multi-level image focus using a tunable lens in a machine vision inspection system
US9930243B2 (en) Variable focal length imaging system
US9740190B2 (en) Method for programming a three-dimensional workpiece scan path for a metrology system
JP6717692B2 (ja) 倍率調整可能光学システムにおける可変焦点距離レンズの適応的な動作周波数の調整方法
EP2813803B1 (en) Machine vision inspection system and method for performing high-speed focus height measurement operations
JP6239232B2 (ja) 高性能エッジフォーカスツール
US20080019683A1 (en) Multi-region autofocus tool and mode
EP1607194B1 (en) Robot system comprising a plurality of robots provided with means for calibrating their relative position
US9223306B2 (en) System and method utilizing an editing initialization block in a part program editing environment in a machine vision system
US20100158343A1 (en) System and method for fast approximate focus
US8619374B2 (en) Lens control apparatus and interchangeable lens including lens control apparatus
JP2005201824A (ja) 計測装置
US10812701B2 (en) High-speed tag lens assisted 3D metrology and extended depth-of-field imaging
CN103676406A (zh) 光学设备和照相机系统
US20190091866A1 (en) Robot controller for executing calibration, measurement system and calibration method
CN107921643B (zh) 机器人系统
JPH07286820A (ja) 3次元視覚センサを用いた位置計測方法及び位置ずれ補正方法
CN113840695B (zh) 标定检验组件、机器人系统、检验方法和标定方法
KR100998716B1 (ko) 현미경 영상정보 자동화 시스템 처리방법
CN114785959A (zh) 荧光显微镜的自动聚焦方法、装置、存储介质及电子设备
CN113902721A (zh) 一种工件位置的调整方法、控制处理装置及调整系统
KR20210070702A (ko) 이미지 처리장치 및 이미지 처리방법
CN115361483A (zh) 飞拍系统
JP2020003560A (ja) 位置決めシステム、制御方法およびプログラム
CN100489639C (zh) 图像模糊校正装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131106

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20141031

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151030

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee