KR20060121330A - A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision - Google Patents
A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision Download PDFInfo
- Publication number
- KR20060121330A KR20060121330A KR1020050043414A KR20050043414A KR20060121330A KR 20060121330 A KR20060121330 A KR 20060121330A KR 1020050043414 A KR1020050043414 A KR 1020050043414A KR 20050043414 A KR20050043414 A KR 20050043414A KR 20060121330 A KR20060121330 A KR 20060121330A
- Authority
- KR
- South Korea
- Prior art keywords
- camera
- keypad
- pressure
- post
- vision
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B23/00—Testing or monitoring of control systems or parts thereof
- G05B23/02—Electric testing or monitoring
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/13—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on liquid crystals, e.g. single liquid crystal display cells
- G02F1/1303—Apparatus specially adapted to the manufacture of LCDs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Nonlinear Science (AREA)
- General Physics & Mathematics (AREA)
- Manufacturing & Machinery (AREA)
- Chemical & Material Sciences (AREA)
- Crystallography & Structural Chemistry (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Automation & Control Theory (AREA)
- Liquid Crystal (AREA)
Abstract
Description
도 1은 종래 이동통신 단말기의 키패드 자동검사 장치의 블럭도1 is a block diagram of a keypad automatic inspection device of a conventional mobile communication terminal
도 2는 본 발명의 사시도2 is a perspective view of the present invention
도 3은 본 발명의 전체적인 검사 프로세서3 is a general inspection processor of the present invention.
도 4는 본 발명의 키패드 압력검사 프로세서4 is a keypad pressure test processor of the present invention
도 5는 본 발명에서 검사하는 키패드의 압력과 대비되는 키패드 압력 특성곡선5 is a keypad pressure characteristic curve compared with the pressure of the keypad examined in the present invention
도 6은 본 발명의 영상검사 프로세서6 is an image inspection processor of the present invention
※ 도면의 주요부분에 대한 부호의 설명※ Explanation of code for main part of drawing
101. 제품 111. 키패드101.
115. 화상 디스플레이 121. 제어부115.
131. 핸들러 141. 카메라131.
1. 테이블 2. 압력검출부1. Table 2. Pressure detector
3. 카메라 거치 게이트 4. X축 이송부3. Camera Mounting
5. Y축 이송부 6. Z축 이송부5. Y-
7. 고정용 지그 8. 카메라7. Fixing
9. 거치대 10. 키패드9.
11. 탐침11. Probe
본 발명은 화상 디스플레이와 키패드를 갖는 전기제품의 자동 검사장치에 관한 것으로, 보다 상세하게는 화상 디스플레이와 키패드를 갖는 제품 예컨대 휴대폰, 노트북 컴퓨터, PDA, 스마트폰 등 제품군의 키패드의 작동에 따라 화상 디스플레이부에 나타나는 반응과 키에 작용하는 압력 및 키스트로크 등을 최종적으로 검사할 수 있게 하는 장치에 관한 것이다.The present invention relates to an automatic inspection device for an electric product having an image display and a keypad, and more particularly, to an image display according to the operation of a keypad of a product having an image display and a keypad such as a mobile phone, a notebook computer, a PDA, a smartphone, and the like. The present invention relates to a device for finally inspecting reactions and negative pressures, keystrokes, and the like that occur in a negative portion.
화상 디스플레이와 키패드를 갖는 제품 특히 휴대폰은 인터넷 게임 및 DMB등 여흥 목적의 사용량 증가로 키패드의 터치 압력과 이에 반응하는 액정화면의 품질이 구매 여부 결정의 중요 요소 중 하나가 되었으며, 또한 컴펙트한 제품 사이즈와 복잡한 디자인으로 인해 조립과정에서 불량품이 발생할 가능성이 높아지고 있으므 로 출하 직전에 제품의 완성검사를 통하여 외관 및 작동상태를 검사하며 이러한 검사를 자동으로 행하기 위한 장치로 종래에는 도 1에 도시된 것과 같이 제품(101)의 키패드(111)를 눌러주는 핸들러(131)와 화상 디스플레이(115)에 나타나는 화상을 촬영하는 카메라(141)와 카메라를 통하여 입력되는 데이터를 저장된 데이터와 비교하여 불량 유무를 판단하는 제어부(121)와 제품의 위치를 감지하는 위치센서와 제품을 운반하는 운반대를 구비한 이동통신 단말기의 키패드 자동검사장치가 우리나라 공개특허 2002-0019714호로 공지된 바 있었다.In the case of products with image display and keypad, especially mobile phones, the increased use of entertainment for internet games and DMB, the touch pressure of the keypad and the quality of the LCD screen responding to it have become one of the important factors in deciding whether to purchase or not. Due to the complex design and the possibility of defective products in the assembling process is increasing, the inspection of the appearance and operation state through the completion inspection of the product immediately before shipment, and the device for automatically performing such inspection as shown in Figure 1 As described above, the
그러나 상기와 같은 검사장치는 기계장치를 통하여 입력되는 키패드의 신호에 대한 반응상태를 확인하는 것이므로 모듈상태에서의 검사와 크게 차이가 없어 조립과정에서의 불량을 가려낼 수 있는 것 이외에는 큰 효용성을 가질 수 없었고, 키패드의 동작 유무 위주의 검사로는 키패드의 터치 압력이나 압력변화 특성 및 키스트로크 등에 대한 구체적인 데이터를 얻을 수 없어 최종단계에서 검사라고 하기에는 부족함이 있었다.However, the inspection device as described above is to check the response state of the signal of the keypad input through the mechanical device, so there is no significant difference from the inspection in the module state, so it has great utility except that it can screen out defects in the assembly process. In addition, the inspection focused on the operation of the keypad could not obtain specific data on the touch pressure, the pressure change characteristic of the keypad, the keystroke, etc., and thus it was insufficient to be called the inspection at the final stage.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로, 키패드 작동에 따라 디스플레이부에 반응하는 화상을 인식하면서 키패드의 터치 압력 및 변화특성과 키스트로크를 측정할 수 있게 하는 자동검사장치를 제공하는 것을 목적으로 한다.The present invention has been made to solve the above problems, to provide an automatic inspection device that can measure the touch pressure and change characteristics of the keypad and the keystroke while recognizing the image in response to the display unit according to the operation of the keypad. For the purpose of
본 발명의 또 다른 목적은 키보드 터치부를 X, Y, Z축 방향으로 신속하게 이 송을 가능하게 하여 다수의 제품을 동시에 검사 가능하게 하여 작업성을 향상하게 하는 데 있다.Still another object of the present invention is to improve the workability by enabling the rapid movement of the keyboard touch unit in the X, Y, and Z-axis directions so that multiple products can be inspected at the same time.
상기한 목적을 달성하기 위한 본 발명 '로봇과 비전을 이용한 광의의 포스트 PC 제품군의 키패드 및 컬러 액정화면 영상 검사 시스템'은 키패드를 터치하는 탐침과, 탐침의 압력을 검출하는 로드셀(Load cell)을 구비한 압력 검출부와, 압력 검출부를 X, Y, Z축 상으로 각각 이송하는 X축, Y축 및 Z축 이송부와, 디스플레이부에 반응하는 화상을 인식하는 카메라와, 카메라를 X축 상으로 이송하고 선회할 수 있게 하는 카메라 이송부와, 검사할 제품을 거치할 지그로 구성된다.In order to achieve the above object, the present invention 'a keypad and a color liquid crystal display image inspection system of a wide range of post PC products using robots and vision' includes a probe for touching the keypad and a load cell for detecting the pressure of the probe. A pressure detector, an X-axis, Y-axis, and Z-axis transfer unit for transferring the pressure detector to the X, Y, and Z axes, a camera for recognizing an image responsive to the display unit, and a camera to the X axis. It consists of a camera conveying unit that enables to turn and turn, and a jig to mount the product to be inspected.
이하에서 본 발명의 바람직한 실시 예에 대하여 첨부한 도면을 참조하여 상세하게 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 2는 본 발명의 사시도이며, 도 3은 본 발명의 전체적인 검사 프로세서 이고, 도 4는 본 발명의 키패드 압력검사 프로세서이고, 도 5는 본 발명에서 검사하는 키패드의 압력과 대비하는 키패드 압력 특성곡선이며, 도 6은 본 발명의 영상 검사 프로세서이다.Figure 2 is a perspective view of the present invention, Figure 3 is the overall inspection processor of the present invention, Figure 4 is a keypad pressure test processor of the present invention, Figure 5 is a keypad pressure characteristic curve compared with the pressure of the keypad to be tested in the
도 2에 도시된 바와 같이 본 발명은 테이블(1) 상에 카메라 거치 게이트(3)와 압력 검출부(2)를 X, Y, Z축 상으로 이송하는 이송부(4, 5, 6)와 검사할 제품을 세팅하는 고정용 지그(7)와 컴퓨터가 내장된 제어시스템(도면 미도시)으로 구성되어 있다.As shown in FIG. 2, the present invention examines the
카메라 거치 게이트(3)는 테이블(1) 상면과 일정거리를 이격하여 구비되며 카메라(8)를 선회 가능하게 장착한 거치대(9)는 카메라 거치 게이트(3)의 상부 게이트를 따라 전ㆍ후 이송이 가능하게 구성된다.The
X, Y, Z축 이송부(4, 5, 6)는 테이블(1) 상면에 고정된 X축 이송부(4)를 중심으로 X축과 직각방향으로 이송이 가능한 Y축 이송부(5)가 탑재되며, Y축 이송부(5)의 일측단부에는 Y축과 수직방향으로 이송이 가능한 Z축 이송부(6)가 결합되어 있고, Z축 이송부(6)의 일측면에는 키패드(10)를 터치하는 탐침(11)과 탐침(11)에 작용하는 압력을 검출하는 로드셀(도면 미도시)를 내장한 압력 검출부(2)가 장착된다.X, Y, Z-axis feeder (4, 5, 6) is equipped with a Y-axis feeder (5) that can be transported in a direction perpendicular to the X-axis with respect to the X-axis feeder (4) fixed to the upper surface of the table (1) One side end of the Y-axis feeder (5) is coupled to the Z-axis feeder (6) that can be transferred in the vertical direction and the Y-axis, and a probe for touching the keypad (10) on one side of the Z-axis feeder (6) 11) and a
또한, 테이블(1)의 상면에는 검사할 제품을 세팅하는 고정용 지그(7)가 구비되어 있다.In addition, a
이하에서 본 발명의 동작을 설명한다.The operation of the present invention will be described below.
고정용 지그(7)에 제품이 투입되어 세팅되면 카메라(8)로 제품의 유무를 판별하고 제품의 특징점을 찾아 기준 위치에 대한 위치 옵션 값을 계산한다.When the product is put and set in the fixing jig (7), the presence or absence of the product is determined by the camera (8), the feature point of the product is found, and the position option value for the reference position is calculated.
계산되어진 위치 옵션 값을 이용하여 미리 입력된 키패드 위치 값을 보정하고, 키패드(10)의 압력과 이에 반응하여 디스플레이 되는 영상의 품질을 검사한다.By using the calculated position option value, the keypad input value is corrected in advance, and the pressure of the
터치압력 검사를 위한 시스템은 X - Y축의 이동으로 검사하고자 하는 목표키의 좌표로 이동하고 목표키의 상부에서 Z축을 하강시키면서 로드셀로 압력을 검출한다.The system for the touch pressure inspection moves to the coordinates of the target key to be examined by the movement of the X-Y axis, and detects the pressure with the load cell while lowering the Z axis from the upper portion of the target key.
로드셀은 압력을 전압신호로 출력하고, 출력된 신호는 증폭기와 A/D 컨버터 를 거쳐 제어기에 입력된다.The load cell outputs the pressure as a voltage signal, and the output signal is input to the controller through an amplifier and an A / D converter.
제어기에서는 소프트 웨어 필터링을 거쳐 압력을 0.1g 단위로 분석한다.The controller analyzes the pressure in 0.1g increments through software filtering.
컬러 액정화면의 영상을 획득하고 분석하기 위한 시스템은 렌즈, 접사링 및 카메라로 구성되어 있다.The system for acquiring and analyzing the image of the color LCD screen is composed of a lens, a macro ring and a camera.
키패드 각각의 버튼에 대한 영상을 선처리(Preprocessing)하여 참고 패턴을 생성하고 데이터베이스 파일로 저장한다.Preprocessing the image for each button of the keypad to generate a reference pattern and to save it as a database file.
키패드의 압력이 설정된 값에 도달하는 순간 영상을 획득, 처리한 후 참고 패턴의 이미지와 비교ㆍ분석하여 각 값에 대한 영상의 불량 유무를 검사한다.As soon as the pressure of the keypad reaches the set value, the image is acquired and processed, and then compared and analyzed with the image of the reference pattern to check whether the image is defective.
불량 유무의 조건은 키패드 허용압력범위, 허용압력 범위 내에서 이동거리 및 패턴 매칭정도의 교집합으로 결정된다.The condition of defectiveness is determined by the intersection of the keypad allowable pressure range, travel distance and pattern matching degree within the allowable pressure range.
문자 인식방법은 투-클래스-클래스 피케이션(Two Classes Classification)을 이용하여 문자를 인식하고 문자와 숫자의 위치를 바탕으로 해서 각 위치에서 투-클래스-클래스 피케이션을 행한다.The character recognition method recognizes characters using Two Classes Classification and performs two-class-class features at each position based on the positions of letters and numbers.
이 방법을 적용함으로써 노이즈와 자연조명과 인공조명에 의하여 발생되는 문자와 숫자의 소실을 막는다.By applying this method, it prevents the loss of letters and numbers caused by noise, natural light and artificial light.
클래시파이된 결과를 데이터 베이스에 미리 생성한 결과와 루츠민 스퀘어(Root Mean Square)방법으로 비교하여 유사성을 결정하여 문자와 숫자를 인식한다.The classified result is compared with the result generated in the database in advance using the Roots Mean Square method to determine the similarity and recognize letters and numbers.
그리고 픽셀단위로 유사성을 비교하기 때문에 글자체의 변화와 상관없이 인식이 가능하며 만약 에러율이 참고 패턴과 비교하여 5% 이하로 얻어질 경우 정상문자로 인식한다.And because the similarity is compared in pixel unit, it can be recognized regardless of the change of font. If the error rate is less than 5% compared to the reference pattern, it is recognized as normal character.
이상에서 설명한 바와 같이 본 발명은 휴대폰과 같은 화상 디스플레이와 키패드를 갖는 다양한 종류의 전기제품군에 대하여 제품출하 단계에서 키패드의 작동에 따라 화상 디스플레이에 나타나는 반응과 키에 작용하는 압력 및 키 스트로크등을 자동으로 동시에 검사할 수 있게 하여 불량품이 혼입되어 출하되는 것을 방지하게 할 수 있다.As described above, the present invention automatically responds to various types of electrical appliances having an image display and a keypad, such as a mobile phone, in response to the operation of the keypad in the product release stage, and the pressure and key stroke acting on the keys. In addition, the inspection can be performed at the same time to prevent the defective products from being mixed and shipped.
Claims (1)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020050043414A KR20060121330A (en) | 2005-05-24 | 2005-05-24 | A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020050043414A KR20060121330A (en) | 2005-05-24 | 2005-05-24 | A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20060121330A true KR20060121330A (en) | 2006-11-29 |
Family
ID=37707079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020050043414A KR20060121330A (en) | 2005-05-24 | 2005-05-24 | A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20060121330A (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013122586A2 (en) * | 2012-02-15 | 2013-08-22 | Intel Corporation | Automated perceptual quality assessment of touch screen devices |
KR20130111699A (en) * | 2012-04-02 | 2013-10-11 | 엘지전자 주식회사 | Apparatus and method for analyzing an output of mobile terminal |
US8823794B2 (en) | 2011-06-30 | 2014-09-02 | Intel Corporation | Measuring device user experience through display outputs |
US9298312B2 (en) | 2011-06-30 | 2016-03-29 | Intel Corporation | Automated perceptual quality assessment of touchscreen devices |
CN110861853A (en) * | 2019-11-29 | 2020-03-06 | 三峡大学 | Intelligent garbage classification method combining vision and touch |
CN110967376A (en) * | 2019-12-13 | 2020-04-07 | 上海吉埃姆智能设备有限公司 | Welding quality detection system |
-
2005
- 2005-05-24 KR KR1020050043414A patent/KR20060121330A/en active IP Right Grant
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8823794B2 (en) | 2011-06-30 | 2014-09-02 | Intel Corporation | Measuring device user experience through display outputs |
US9298312B2 (en) | 2011-06-30 | 2016-03-29 | Intel Corporation | Automated perceptual quality assessment of touchscreen devices |
WO2013122586A2 (en) * | 2012-02-15 | 2013-08-22 | Intel Corporation | Automated perceptual quality assessment of touch screen devices |
WO2013122586A3 (en) * | 2012-02-15 | 2013-10-17 | Intel Corporation | Automated perceptual quality assessment of touch screen devices |
CN104115097A (en) * | 2012-02-15 | 2014-10-22 | 英特尔公司 | Automated perceptual quality assessment of touch screen devices |
KR20130111699A (en) * | 2012-04-02 | 2013-10-11 | 엘지전자 주식회사 | Apparatus and method for analyzing an output of mobile terminal |
CN110861853A (en) * | 2019-11-29 | 2020-03-06 | 三峡大学 | Intelligent garbage classification method combining vision and touch |
CN110967376A (en) * | 2019-12-13 | 2020-04-07 | 上海吉埃姆智能设备有限公司 | Welding quality detection system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI689875B (en) | Defect inspection and classification apparatus and training apparatus using deep learning system | |
KR20060121330A (en) | A keyped and a color liquid crystal screen image inspection system of a post pc robot and goods's of wide range which uses the vision | |
CN102253048B (en) | Machine vision detection method and system for detection of various products | |
CN1323369C (en) | Image recognition apparatus and image recognition method, and teaching apparatus and teaching method of the image recognition apparatus | |
JP2009290852A (en) | Function checking apparatus for equipment and device | |
Li et al. | System design for PCB defects detection based on AOI technology | |
CN103134807A (en) | System and method for identifying defects in a material | |
US20080016406A1 (en) | Testing system for portable electronic devices and method of using the same | |
CN112651966A (en) | Printed circuit board micro-defect detection method based on ACYOLOV4_ CSP | |
CN103135855A (en) | Optical touch device and touch image processing method | |
CN104390982A (en) | Test method for SMT first article inspection | |
JP4479877B2 (en) | Defect inspection method by image recognition | |
CN208254781U (en) | A kind of button touch feeling automatic testing equipment | |
KR101160911B1 (en) | Apparatus of testing pad | |
CN204666534U (en) | Optical mirror slip detection system | |
CN111389750A (en) | Vision measurement system and measurement method | |
CN207866209U (en) | Full needle detection device | |
CN116245808A (en) | Workpiece defect detection method and device, electronic equipment and storage medium | |
CN1904812A (en) | Touch pen usable for display screen of common computer | |
CN116342540A (en) | Packaging film defect detection method, device, equipment and storage medium | |
TWM587276U (en) | Inspection system | |
CN101697103A (en) | Touch panel linearity test device and method | |
CN102340572A (en) | Method and equipment for carrying out black box test on mobile phone mainboard | |
CN114235688A (en) | Thread and thread visual detection system and method for mobile phone frame | |
CN102262456A (en) | Information input device and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
N231 | Notification of change of applicant | ||
NORF | Unpaid initial registration fee |