KR20120072503A - Method for removing line cross phenomenon of touch screen display device - Google Patents

Method for removing line cross phenomenon of touch screen display device Download PDF

Info

Publication number
KR20120072503A
KR20120072503A KR1020100134273A KR20100134273A KR20120072503A KR 20120072503 A KR20120072503 A KR 20120072503A KR 1020100134273 A KR1020100134273 A KR 1020100134273A KR 20100134273 A KR20100134273 A KR 20100134273A KR 20120072503 A KR20120072503 A KR 20120072503A
Authority
KR
South Korea
Prior art keywords
tracking
touch point
touch
frame period
straight line
Prior art date
Application number
KR1020100134273A
Other languages
Korean (ko)
Other versions
KR101715856B1 (en
Inventor
송시철
오준석
최석원
Original Assignee
엘지디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지디스플레이 주식회사 filed Critical 엘지디스플레이 주식회사
Priority to KR1020100134273A priority Critical patent/KR101715856B1/en
Publication of KR20120072503A publication Critical patent/KR20120072503A/en
Application granted granted Critical
Publication of KR101715856B1 publication Critical patent/KR101715856B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04103Manufacturing, i.e. details related to manufacturing processes specially suited for touch sensitive devices

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

PURPOSE: A line cross removing method of an infrared ray touch screen display device is provided to prevent intersection of two straight lines by switching a tracking ID of two touch points. CONSTITUTION: A tracking ID of two touch points is confirmed in a previous frame period(S1). The tracking ID of two touch points is confirmed by being recognized as touch in current frame section(S2). The touch points of the tracking ID are connected(S3). If two lines are crossed, a tracking ID of the two touch points is switched(S5). If two lines are not crossed, the tracking ID is maintained(S6).

Description

적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법{METHOD FOR REMOVING LINE CROSS PHENOMENON OF TOUCH SCREEN DISPLAY DEVICE}Line cross removal method of infrared touch screen display device {METHOD FOR REMOVING LINE CROSS PHENOMENON OF TOUCH SCREEN DISPLAY DEVICE}

본 발명은 적외선 방식 터치스크린 표시장치에 관한 것으로, 특히 라인 크로스를 제거할 수 있는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법에 대한 것이다.The present invention relates to an infrared touch screen display device, and more particularly, to a method for removing line crosses of an infrared touch screen display device capable of removing line crosses.

일반적으로 터치스크린(Touch Screen) 표시장치는 각종 디스플레이를 이용하는 정보통신기기와 사용자 간의 인터페이스를 구성하는 여러 방식 중의 하나로서, 사용자가 손이나 펜으로 화면을 직접 접촉함으로써 기기와 인터페이스할 수 있는 입력장치이다.In general, a touch screen display device is one of various methods for configuring an interface between a user and an information communication device using various displays, and an input device that allows a user to interface with the device by directly touching the screen with a hand or a pen. to be.

터치스크린 표시장치는 표시부에 표시되어 있는 버튼을 손가락으로 접촉하는 것만으로 대화적, 직감적으로 조작함으로써 남녀노소 누구나 쉽게 사용할 수 있는 입력장치이기 때문에, 현재 은행이나 관공서의 발급 장치, 각종 의료장비, 관광 및 주요 기관의 안내, 교통안내 등 많은 분야에서 적용되고 있다.The touch screen display device is an input device that can be easily used by both men and women by interactively and intuitively by simply touching a button displayed on the display unit with a finger. Therefore, a device for issuing banks and government offices, various medical equipment, tourism And it is applied in many fields such as guidance of major organizations, traffic guidance.

이러한 터치스크린 표시장치는 인식하는 방법에 따라, 저항막 방식(Resistive Type), 정전 용량 방식(Capacitive Type), 초음파 방식(Ultrasonic Wave Type), 적외선 방식(Infrared Type) 등이 있다.The touch screen display device may include a resistive type, a capacitive type, an ultrasonic wave type, an infrared type, or the like according to a method of recognizing.

상술한 각 방식의 이점은 각기 상이하지만, 근래에는 터치면이 받는 압력을 최소화하고, 배치의 편리성으로 적외선 방식의 터치스크린 표시장치가 주목되고 있다.Although the advantages of the above-described methods are different from each other, in recent years, an infrared touch screen display apparatus has been focused for minimizing pressure applied to the touch surface and for ease of arrangement.

그러나, 종래의 적외선 방식 터치스크린 표시장치는 다수의 터치지점들에 대한 좌표 판단시 실상과 허상을 정확하게 구분하지 못하기 때문에, 허상의 좌표를 실상의 좌표로 잘못 인식하는 문제점을 갖고 있다. 이로 인해, 두 개의 직선들을 동시에 그릴 때 이 두 개의 직선들이 서로 교차하는 라인 크로스 현상이 나타날 수 있다.However, the conventional infrared touch screen display device has a problem of incorrectly recognizing the coordinates of the virtual image as the actual coordinates because it cannot accurately distinguish between the real image and the virtual image when determining coordinates of a plurality of touch points. As a result, when drawing two straight lines simultaneously, a line cross phenomenon in which the two straight lines cross each other may appear.

도 1은 종래의 적외선 방식 터치스크린 표시장치에서 발생되는 라인 크로스 현상을 나타낸 도면이고, 도 2는 도 1의 A부를 확대한 도면이다.FIG. 1 is a diagram illustrating a line cross phenomenon occurring in a conventional infrared touch screen display, and FIG. 2 is an enlarged view of part A of FIG. 1.

도 1 및 도 2에 도시된 바와 같이, 두 개의 교차하지 않는 직선들을 그리고자 하는 사용자의 의도와 달리 표시부에는 두 개의 직선들(L1, L2)이 서로 교차하는 상태로 나타나 있음을 알 수 있다.As shown in FIG. 1 and FIG. 2, it can be seen that, unlike the user's intention to draw two non-intersecting straight lines, the two straight lines L1 and L2 cross each other on the display unit.

본 발명은 상술된 문제점을 해결하기 위하여 안출된 것으로, 라인 크로스 현상을 제거할 수 있는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법을 제공하는데 그 목적이 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problem, and an object thereof is to provide a method for removing a line cross of an infrared touch screen display device capable of eliminating a line cross phenomenon.

상술된 목적을 달성하기 위한 본 발명에 따른 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법은, 이전 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인하는 A단계; 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인하는 B단계; 서로 다른 프레임 기간에 발생된 동일 트랙킹 아이디의 터치지점들을 직선으로 연결하는 C단계; 두 개의 직선들이 교차하는지를 판단하는 D단계; 및, 두 개의 직선들이 교차할 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 서로 맞바꾸고, 두 개의 직선들이 교차하지 않을 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 그대로 유지하는 E단계를 포함함을 특징으로 한다.According to an aspect of the present invention, there is provided a method for removing a line cross of an infrared touch screen display device, the method including: checking a tracking ID of each of two touch points recognized as touches in a previous frame period; Checking a tracking ID of each of the two touch points recognized as touches in the current frame period; Step C of connecting touch points of the same tracking ID generated in different frame periods in a straight line; Determining whether two straight lines cross each other; And when the two straight lines cross each other, the tracking IDs of the two touch points recognized as touches in the current frame period are exchanged with each other. If the two straight lines do not intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are changed. Characterized in that the step E to maintain the tracking ID as it is.

상기 이전 프레임 기간의 두 개의 터치지점들은 트랙킹 아이디 1번을 부여받은 제 1 터치지점과 트랙킹 아이디 2번을 부여받은 제 2 터치지점으로 구분되며; 그리고, 상기 현재 프레임 기간의 두 개의 터치지점들은 트랙킹 아이디 1번을 부여받은 제 3 터치지점과 트랙킹 아이디 2번을 부여받은 제 4 터치지점으로 구분됨을 특징으로 한다.The two touch points of the previous frame period are divided into a first touch point assigned with tracking ID 1 and a second touch point assigned with tracking ID 2; The two touch points of the current frame period are divided into a third touch point assigned with tracking ID 1 and a fourth touch point assigned with tracking ID 2.

상기 D단계는, 상기 제 1 터치지점과 제 3 터치지점을 서로 연결하는 제 1 직선을 생성하는 단계; 상기 제 1 직선에 대한 제 1 직선방정식에 상기 제 2 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 1 값을 산출하는 단계; 상기 제 1 직선방정식에 상기 제 4 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 2 값을 산출하는 단계; 상기 제 2 터치지점과 제 4 터치지점을 서로 연결하는 제 2 직선을 생성하는 단계; 상기 제 2 직선에 대한 제 2 직선방정식에 상기 제 1 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 3 값을 산출하는 단계; 상기 제 2 직선방정식에 상기 제 3 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 4 값을 산출하는 단계; 및, 상기 제 1 값과 제 2 값을 곱한 값이 0보다 작고, 상기 제 3 값과 제 4 값을 곱한 값이 0보다 작은 조건일 때 상기 제 1 직선과 제 2 직선이 서로 교차하는 것으로 판단하고, 상술된 조건이 만족되지 않을 때 상기 제 1 직선과 제 2 직선이 교차하지 않는 것으로 판단하는 단계를 포함함을 특징으로 한다.The step D may include generating a first straight line connecting the first touch point and the third touch point to each other; Calculating a first value by substituting an x-axis coordinate value and a y-axis coordinate value of the second touch point into a first linear equation with respect to the first straight line; Calculating a second value by substituting the x-axis coordinate value and the y-axis coordinate value of the fourth touch point into the first linear equation; Generating a second straight line connecting the second touch point and the fourth touch point to each other; Calculating a third value by substituting an x-axis coordinate value and a y-axis coordinate value of the first touch point into a second linear equation with respect to the second straight line; Calculating a fourth value by substituting the x-axis coordinate value and the y-axis coordinate value of the third touch point into the second linear equation; And determining that the first and second straight lines cross each other when the first product is multiplied by the second value is less than 0, and the third product is multiplied by the fourth value is less than zero. And determining that the first straight line and the second straight line do not intersect when the above-described condition is not satisfied.

상기 E단계는, 상기 제 1 직선과 제 2 직선이 서로 교차할 경우 제 3 터치지점의 트랙킹 아이디를 2번으로 변경하고 제 4 터치지점의 트랙킹 아이디를 1번으로 변경하며, 상기 제 1 직선과 제 2 직선이 교차하지 않을 경우 제 3 터치지점의 트랙킹 아이디를 1번으로 유지하고 제 4 터치지점의 트랙킹 아이디를 2번으로 유지하는 단계인 것을 특징으로 한다.In step E, when the first straight line and the second straight line cross each other, the tracking ID of the third touch point is changed to No. 2 and the tracking ID of the fourth touch point is changed to No. 1, and If the second straight line does not intersect, the tracking ID of the third touch point is maintained at 1 and the tracking ID of the fourth touch point is maintained at 2.

상기 이전 프레임 기간은 n번째(n은 자연수) 프레임 기간이고, 상기 현재 프레임은 n+m번째(m은 자연수) 프레임 기간인 것을 특징으로 한다.The previous frame period is an nth (n is a natural number) frame period, and the current frame is an n + mth (m is a natural number) frame period.

본 발명에 따른 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법은 다음과 같은 효과를 갖는다.The line cross removing method of the infrared touch screen display device according to the present invention has the following effects.

본 발명에 따르면, 두 직선들의 교차할 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 서로 맞바꿈으로써 두 직선들이 교차하는 것을 방지할 수 있다. 따라서, 라인 크로스 현상을 제거할 수 있다.According to the present invention, when the two straight lines intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are swapped with each other to prevent the two straight lines from crossing each other. Therefore, the line cross phenomenon can be eliminated.

도 1은 종래의 적외선 방식 터치스크린 표시장치에서 발생되는 라인 크로스 현상을 나타낸 도면
도 2는 도 1의 A부를 확대한 도면
도 3은 본 발명의 실시예에 따른 터치스크린 표시장치를 나타낸 도면
도 4는 본 발명의 실시예에 따른 라인 크로스 제거방법을 나타낸 순서도
도 5는 도 4의 S4단계를 세분화하여 나타낸 순서도
도 6은 교차조건수식1 및 교차조건수식2를 이용하여 두 직선들의 교차여부를 판단하는 방법을 설명하기 위한 도면
도 7은 라인 크로스 제거전과 라인 크로스 제거후의 형태를 나타낸 도면
1 is a diagram illustrating a line cross phenomenon occurring in a conventional infrared touch screen display device.
2 is an enlarged view of a portion A of FIG. 1;
3 illustrates a touch screen display device according to an exemplary embodiment of the present invention.
4 is a flowchart illustrating a method of removing a line cross according to an exemplary embodiment of the present invention.
FIG. 5 is a flow chart showing the subdivision of step S4 of FIG.
FIG. 6 is a view for explaining a method of determining whether two straight lines intersect each other using the cross condition equation 1 and the cross condition equation 2. FIG.
7 is a view showing the form before and after the line cross removal;

도 3은 본 발명의 실시예에 따른 터치스크린 표시장치를 나타낸 도면이다.3 is a diagram illustrating a touch screen display device according to an exemplary embodiment of the present invention.

본 발명의 실시예에 따른 터치스크린 표시장치는, 도 1에 도시된 바와 같이, 터치스크린패널(TP), 제 1 내지 제 3 적외선 카메라(CAM1 내지 CAM3) 및 재귀 반사판(SR)을 포함한다.As shown in FIG. 1, the touch screen display device according to an exemplary embodiment of the present invention includes a touch screen panel TP, first to third infrared cameras CAM1 to CAM3, and a retroreflective plate SR.

제 1 내지 제 3 적외선 카메라는 터치스크린패널(TP)의 세 모서리에 위치한다.The first to third infrared cameras are located at three corners of the touch screen panel TP.

재귀 반사판(SR)은 터치스크린패널(TP)의 네 면에 위치한다. 이 재귀 반사판(SR)은 다수의 프리즘들이 적층되어 형성된 재귀 반사층(retro-reflecting layer)으로 구성된다. The retroreflective plate SR is positioned on four sides of the touch screen panel TP. The retroreflective plate SR is composed of a retro-reflecting layer formed by stacking a plurality of prisms.

각 적외선 카메라(CAM1 내지 CAM3)는 적외선 광을 출사하는 적외선 LED(light emitting diode)와, 입사된 광을 집광하는 대물렌즈와, 상기 대물렌즈에 의해 집광된 광을 감지하는 포토 센서와, 그리고 대물렌즈의 전면 또는 후면에 위치한 광학필터를 포함한다. 입사된 광은, 광학필터, 대물렌즈를 거쳐 포토 센서로 입사된다. 그리고, 적외선 LED는 광을 재귀 반사판(SR)쪽으로 출사시키는 역할을 담당한다. 포토 센서의 해상도는 수평 방향으로 500픽셀 이상(수평 방향으로500개 이상의 화소 상의 위치를 검출할 수 있도록)의 해상도를 가질 수 있다. Each of the infrared cameras CAM1 to CAM3 includes an infrared light emitting diode (LED) for emitting infrared light, an objective lens for collecting incident light, a photo sensor for sensing light collected by the objective lens, and an objective It includes an optical filter located on the front or rear of the lens. The incident light is incident on the photo sensor through the optical filter and the objective lens. In addition, the infrared LED serves to emit light toward the retroreflective plate SR. The resolution of the photo sensor may have a resolution of at least 500 pixels in the horizontal direction (to detect a position on at least 500 pixels in the horizontal direction).

각 적외선 카메라(CAM1 내지 CAM3)는 각각 최소 2면에서 재귀 반사되어 오는 광을 제공받고, 또한 자신이 위치한 모서리부와 대각선 방향으로 마주보는 다른 모서리부의 적외선 카메라로부터 출사된 적외선 광을 감지하는 기능을 한다. Each of the infrared cameras CAM1 to CAM3 is provided with light that is retroreflected from at least two planes, and also detects infrared light emitted from the infrared camera at the other corner facing the corner where it is located. do.

또한, 터치스크린패널(TP)의 표시부(DP)에 터치가 있을 경우 재귀 반사판(SR)에서 반사된 반사광 또는 접촉된 물체(손이나 펜 등의 입력 수단)의 터치 지점에서의 광이 차단되게 되는데, 각 적외선 카메라는 이러한 광이 차단되는 지점을 감지한다.In addition, when there is a touch on the display unit DP of the touch screen panel TP, the reflected light reflected from the retroreflective plate SR or light at the touch point of a contacted object (an input means such as a hand or a pen) is blocked. Each infrared camera detects the point where such light is blocked.

이러한 적외선 카메라들(CAM1 내지 CAM3)은 제어부에 연결되는 바, 이 제어부는 이 적외선 카메라들(CAM1 내지 CAM3)로부터 감지된 광에 대한 광신호를 분석하여 터치 위치에 대한 좌표를 산출한다.The infrared cameras CAM1 to CAM3 are connected to the controller, and the controller calculates coordinates for the touch position by analyzing an optical signal for light detected by the infrared cameras CAM1 to CAM3.

이 제어부는 제 1 적외선 카메라(CAM1)로부터 제공된 광신호와 제 2 적외선 카메라(CAM2)로부터 제공된 광신호를 삼각측량법으로 분석하고, 제 2 적외선 카메라(CAM2)로부터 제공된 광신호와 제 3 적외선 카메라(CAM3)로부터 제공된 광신호를 삼각측량법으로 분석하여 터치지점들의 개수, 터치지점들의 각 좌표 및 이 터치지점들 각각에 대한 트랙킹 아이디를 산출한다.The controller analyzes the optical signal provided from the first infrared camera CAM1 and the optical signal provided from the second infrared camera CAM2 by triangulation, and the optical signal provided from the second infrared camera CAM2 and the third infrared camera ( The optical signal provided from CAM3 is analyzed by triangulation to calculate the number of touch points, each coordinate of the touch points, and a tracking ID for each of the touch points.

터치지점들의 개수는 터치스크린패널(TP)의 표시부(DP)에 터치된 터치지점들의 수를 의미한다. 터치지점들의 각 좌표는 이 터치지점들 각각의 x축 좌표값 및 y축 좌표값을 의미한다. 트랙킹 아이디는 다수의 터치지점들 중 어느 것이 시간적으로 먼저 터치되었는지를 나타낸다. 즉, 동시에 두 지점을 터치한다고 할 때, 실제로 이 두 지점들은 정확하게 동일한 시점에 터치되지 않으며, 미묘한 시간차를 두고 터치된다. 예를 들어, 도 3에서의 왼쪽의 터치지점(TP1)이 오른쪽의 터치지점(TP2)보다 시간적으로 먼저 발생된 경우, 제어부는 왼쪽의 터치지점(TP1)에 트랙킹 아이디 1번을 부여하고, 오른쪽의 터치지점(TP2)에 트랙킹 아이디 2번을 부여한다.The number of touch points refers to the number of touch points touched on the display unit DP of the touch screen panel TP. Each coordinate of the touch points means an x-axis coordinate value and a y-axis coordinate value of each of the touch points. The tracking ID indicates which of the plurality of touch points has been touched first in time. In other words, when two points are touched at the same time, they are not touched at exactly the same point in time, but are touched with a subtle time difference. For example, when the touch point TP1 on the left side of FIG. 3 occurs earlier in time than the touch point TP2 on the right side, the controller gives tracking ID 1 to the touch point TP1 on the left side and the right side. Give tracking ID 2 to the touch point TP2.

사용자가 그림판에서 두 개의 선들을 그리기 위해 표시부(DP)에 두 개의 손가락을 터치한 상태에서 아래쪽으로 이동하게 되면 이 표시부(DP)에는 다수의 불연속적인 터치지점들이 순차적으로 발생하게 되는 바, 제어부는 이러한 터치지점들을 연속된 하나의 선으로 인식하게 된다. 즉, 제어부는 시간적으로 먼저 터치된 터치지점과 이에 선으로 연결된 다수의 터치지점들에게 동일한 트랙킹 아이디를 부여하고, 그리고 후에 터치된 터치지점과 이에 선으로 연결된 다수의 터치지점들에게 동일한 트랙킹 아이디를 부여함으로써 두 개의 직선이 발생되도록 한다.When the user moves downward while touching two fingers on the display unit DP to draw two lines on the paint plate, a plurality of discontinuous touch points are sequentially generated on the display unit DP. These touch points are recognized as one continuous line. That is, the controller assigns the same tracking ID to the touch point touched first and the plurality of touch points connected to the line in time, and then applies the same tracking ID to the touch point touched and the touch points connected to the line. This gives two straight lines.

그러나, 상술된 바와 같이, 터치지점들의 좌표를 판단하는 제어부의 알고리즘의 한계로 인해 허상과 실상의 구분이 모호해질 경우 허상의 좌표가 실상의 좌표로 오인식될 수 있다. 이와 같은 경우 두 개의 직선이 교차하는 문제점이 발생된다. 즉, 사용자가 의도한 것은 두 개의 직선이지만, 제어부의 오인식으로 인해 두 개의 직선이 교차하는 형태로 나타나게 된다.However, as described above, when the distinction between the virtual image and the real image becomes ambiguous due to the limitation of the algorithm of the controller that determines the coordinates of the touch points, the virtual image coordinates may be misrecognized as the actual coordinates. In this case, a problem arises where two straight lines intersect. That is, the user intends to have two straight lines, but due to the misperception of the controller, the two straight lines appear to cross each other.

본 발명에서는 다음과 같은 알고리즘을 이용하여 두 개의 직선이 교차하는 라인 크로스 현상을 제거한다.In the present invention, the line cross phenomenon in which two straight lines intersect is removed by using the following algorithm.

도 4는 본 발명의 실시예에 따른 라인 크로스 제거방법을 나타낸 순서도이다.4 is a flowchart illustrating a method of removing a line cross according to an exemplary embodiment of the present invention.

먼저, S1단계에 도시된 바와 같이, 이전 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인한다.First, as shown in step S1, the tracking ID of each of the two touch points recognized as touches in the previous frame period is checked.

이어서, S2단계에 도시된 바와 같이, 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인한다.Subsequently, as shown in step S2, the tracking ID of each of the two touch points recognized as touches in the current frame period is checked.

다음으로, S3단계에 도시된 바와 같이, 서로 다른 프레임 기간에 발생된 동일 트랙킹 아이디의 터치지점들을 직선으로 연결한다. 즉, 이전 프레임 기간의 어느 하나의 터치지점과 현재 프레임 기간의 어느 하나의 터치지점을 직선으로 연결한다. 이때, 이 두 개의 터치지점들은 서로 동일한 트랙킹 아이디를 갖는 것이어야 한다. 마찬가지 방식으로, 이전 프레임 기간의 다른 하나의 터치지점과 현재 프레임 기간의 다른 하나의 터치지점을 직선으로 연결한다. 역시 이 두 터치지점들도 동일한 트랙킹 아이디를 갖는 것이어야 한다.Next, as shown in step S3, touch points of the same tracking ID generated in different frame periods are connected in a straight line. That is, one touch point of the previous frame period and one touch point of the current frame period are connected in a straight line. At this time, these two touch points should have the same tracking ID. In the same way, the other touch point of the previous frame period and the other touch point of the current frame period are connected in a straight line. Again, these two touch points must also have the same tracking ID.

이후, S4단계에 도시된 바와 같이, 두 개의 직선들이 교차하는지를 판단한다. 즉, 동일 트랙킹 아이디를 갖는 터치지점들을 연결한 두 개의 직선들이 서로 교차하는지 그렇지 않은지를 판단한다.Then, as shown in step S4, it is determined whether two straight lines cross. That is, it is determined whether two straight lines connecting touch points having the same tracking ID intersect each other.

이어서, S5단계에 도시된 바와 같이, 두 개의 직선들이 교차할 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 서로 맞바꾼다. 즉, 현재 프레임 기간의 어느 하나의 터치지점의 트랙킹 아이디와 이 현재 프레임 기간의 다른 하나의 터치지점의 트랙킹 아이디를 서로 맞바꾼다. 이에 따라, 현재 프레임 기간의 어느 하나의 터치지점의 트랙킹 아이디는 다른 터치지점의 트랙킹 아이디로 변환되며, 다른 터치지점의 트랙킹 아이디는 어느 하나의 터치지점의 트랙킹 아이디로 변환된다.Subsequently, as shown in step S5, when two straight lines intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are exchanged with each other. That is, the tracking ID of one touch point of the current frame period and the tracking ID of the other touch point of the current frame period are swapped with each other. Accordingly, the tracking ID of one touch point of the current frame period is converted to the tracking ID of another touch point, and the tracking ID of the other touch point is converted to the tracking ID of one touch point.

한편, S6단계에 도시된 바와 같이, 두 개의 직선들이 교차하지 않을 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 그대로 유지한다.Meanwhile, as shown in step S6, if two straight lines do not intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are maintained as they are.

이후, S7단계에 도시된 바와 같이, S5단계 또는 S6단계를 통해 파악된 현재 프레임 기간의 터치지점들의 개수, 이들 터치지점들 각각의 트랙킹 아이디, 그리고 이 터치지점들 각각에 대한 좌표를 오퍼레이팅 시스템으로 전송한다. 즉, 제어부는 현재 프레임 기간에서의 터치지점들에 대한 상술된 정보를 최종적으로 산출하고, 이 산출된 정보를 오퍼레이팅 시스템으로 전송한다.Then, as shown in step S7, the number of touch points of the current frame period, the tracking ID of each of these touch points, and the coordinates of each of the touch points identified through the step S5 or S6 to the operating system send. That is, the controller finally calculates the above-mentioned information about the touch points in the current frame period, and transmits the calculated information to the operating system.

여기서, S4단계에서 두 직선들의 교차 여부를 판단함에 있어서, 두 개의 교차조건수식을 이용할 수 있다.Here, in determining whether the two straight lines cross at step S4, two cross condition equations may be used.

도 5는 도 4의 S4단계를 세분화하여 나타낸 순서도이다.FIG. 5 is a flow chart showing the subdivision of step S4 of FIG. 4.

도 5에 도시된 바와 같이, S4단계는 S4-1단계 및 S4-2단계를 포함한다.As shown in FIG. 5, step S4 includes steps S4-1 and S4-2.

S4-1단계에서는 교차조건수식1을 근거로 일차적으로 두 개의 직선들이 교차하는지를 판단한다.In step S4-1, it is determined whether two straight lines intersect based on the cross condition equation (1).

S4-2단계에서는 교차조건수식2를 근거로 최종적으로 두 개의 직선들이 교차하는지를 판단한다.In step S4-2, it is determined whether two lines intersect finally based on the cross-conditioning equation 2.

교차조건수식1 및 교차조건수식2에 따른 조건들이 모두 만족될 때, 제어부는 두 개의 직선들이 교차하는 것으로 판단한다.When the conditions according to the cross condition equation 1 and the cross condition equation 2 are satisfied, the controller determines that the two straight lines intersect.

반면, 교차조건수식1 및 교차조건수식2에 따른 조건들 중 어느 하나라도 만족되지 않을 때, 제어부는 두 개의 직선들이 교차하지 않는 것으로 판단한다.On the other hand, when any one of the conditions according to the cross condition equation 1 and the cross condition equation 2 is not satisfied, the controller determines that the two straight lines do not intersect.

이 교차조건수식1 및 교차조건수직2를 이용하여 두 직선들의 교차여부를 판단하는 방법을 구체적인 예를 들어 상세히 설명하면 다음과 같다.A method of determining whether two straight lines intersect using the cross condition equation 1 and the cross condition vertical 2 will be described in detail with reference to the following.

도 6은 교차조건수식1 및 교차조건수식2를 이용하여 두 직선들의 교차여부를 판단하는 방법을 설명하기 위한 도면이다.FIG. 6 is a diagram for describing a method of determining whether two straight lines intersect each other using the cross condition equation 1 and the cross condition equation 2. FIG.

도 6에 도시된 바와 같이, 이전 프레임 기간((n-1)th Frame)의 두 개의 터치지점들은 트랙킹 아이디 1번(TID1)을 부여받은 제 1 터치지점(P1)과 트랙킹 아이디 2번(TID2)을 부여받은 제 2 터치지점(P2)으로 구분된다.As shown in FIG. 6, two touch points of the previous frame period (n-1) th Frame are the first touch point P1 and tracking ID number 2 (TID2) to which tracking ID 1 (TID1) has been assigned. ) Is divided into a second touch point P2.

마찬가지로, 현재 프레임 기간(n-th Frame)의 두 개의 터치지점들은 트랙킹 아이디 1번(TID1)을 부여받은 제 3 터치지점(P3)과 트랙킹 아이디 2번(TID2)을 부여받은 제 4 터치지점(P4)으로 구분된다.Similarly, the two touch points of the current frame period (n-th frame) are the third touch point P3 granted with tracking ID 1 (TID1) and the fourth touch point assigned with tracking ID 2 (TID2). P4).

먼저, 도 6의 (a)에 도시된 바와 같이, 제 1 터치지점(P1)과 제 3 터치지점(P3)을 서로 연결하는 제 1 직선(f1(x,y))을 생성한다.First, as shown in (a) of FIG. 6, a first straight line f1 (x, y) connecting the first touch point P1 and the third touch point P3 to each other is generated.

이후, 이 제 1 직선(f1(x,y))에 대한 제 1 직선방정식(a1*x+b1*y+c1)에 제 2 터치지점(P2)의 x축 좌표값 및 y축 좌표값을 대입하여 제 1 값을 산출한다. 여기서, a1, b1 및 c1은 모두 상수이다.Subsequently, the x-axis coordinate value and the y-axis coordinate value of the second touch point P2 are input to the first linear equation (a1 * x + b1 * y + c1) of the first straight line f1 (x, y). Substitution is performed to calculate the first value. Here, a1, b1 and c1 are all constants.

이어서, 이 제 1 직선방정식에 제 4 터치지점(P4)의 x축 좌표값 및 y축 좌표값을 대입하여 제 2 값을 산출한다.Subsequently, the second value is calculated by substituting the x-axis coordinate value and the y-axis coordinate value of the fourth touch point P4 into this first linear equation.

이후, 이 제 1 값과 제 2 값을 곱한 값(교차조건수식1)이 0보다 작을 때 일차적으로 이 두 직선들이 교차하는 것으로 판단하고, 다음의 조건을 더 살핀다.Subsequently, when the value obtained by multiplying the first value and the second value (Crossing Equation 1) is less than 0, it is determined that these two straight lines cross each other, and the following condition is further examined.

즉, 도 6의 (b)에 도시된 바와 같이, 제 2 터치지점(P2)과 제 4 터치지점(P4)을 서로 연결하는 제 2 직선(f2(x,y))을 생성한다.That is, as shown in (b) of FIG. 6, a second straight line f2 (x, y) connecting the second touch point P2 and the fourth touch point P4 to each other is generated.

이후, 이 제 2 직선(f2(x,y))에 대한 제 2 직선방정식(a2*x+b2*y+c2)에 상기 제 1 터치지점(P1)의 x축 좌표값 및 y축 좌표값을 대입하여 제 3 값을 산출한다. 여기서, a2, b2 및 c2는 모두 상수이다.Then, the x-axis coordinate value and the y-axis coordinate value of the first touch point P1 in the second linear equation (a2 * x + b2 * y + c2) for the second straight line f2 (x, y). Is substituted to calculate the third value. Here, a2, b2 and c2 are all constants.

다음으로, 이 제 2 직선방정식에 제 3 터치지점(P3)의 x축 좌표값 및 y축 좌표값을 대입하여 제 4 값을 산출한다.Next, the fourth value is calculated by substituting the x-axis coordinate value and the y-axis coordinate value of the third touch point P3 into the second linear equation.

이후, 이 제 3 값과 제 4 값을 곱한 값(교차조건수식2)이 0보다 작을 때 최종적으로 이 두 직선들이 교차하는 것으로 판단한다.Subsequently, when the value obtained by multiplying the third value and the fourth value (intersection conditional expression 2) is less than zero, it is finally determined that these two straight lines cross each other.

도 7은 라인 크로스 제거전과 라인 크로스 제거후의 형태를 나타낸 도면이다.Fig. 7 is a diagram showing the form before and after the line cross removal.

도 7의 (a)는 본 발명에 따른 라인 크로스 제거 알고리즘이 적용되지 않은 상태를 나타낸 것으로서, 두 직선들이 서로 교차하고 있음을 알 수 있다.7 (a) shows a state in which the line cross elimination algorithm according to the present invention is not applied, and it can be seen that two straight lines cross each other.

그러나, 본 발명에 따른 라인 크로스 제거 알고리즘이 적용되면, 도 7의 (b)에 도시된 바와 같이, 두 직선들이 교차하지 않도록 보정됨을 알 수 있다.However, when the line cross elimination algorithm according to the present invention is applied, it can be seen that the two straight lines are corrected so as not to intersect as shown in FIG.

즉, 본 발명에 따르면, 제 1 직선(f1(x,y))과 제 2 직선(f2(x,y))이 서로 교차할 경우, 제어부는 제 3 터치지점(P3)의 트랙킹 아이디를 1번(TID1)에서 2번(TID2)으로 변경하고 제 4 터치지점(P4)의 트랙킹 아이디를 2번(TID2)에서 1번(TID1)으로 변경함으로써, 도 7의 (b)에 도시된 바와 같이, 두 직선들이 서로 교차하지 않도록 할 수 있다. That is, according to the present invention, when the first straight line f1 (x, y) and the second straight line f2 (x, y) cross each other, the controller determines a tracking ID of the third touch point P3 by 1. By changing the number TID1 to the number 2 (TID2) and changing the tracking ID of the fourth touch point P4 from the number 2 (TID2) to the number 1 (TID1), as shown in FIG. We can ensure that the two straight lines do not intersect each other.

한편, 상술된 이전 프레임 기간((n-1)th Frame)은 n번째(n은 자연수) 프레임 기간이고, 현재 프레임(n-th Frame)은 n+m번째(m은 자연수) 프레임 기간이다. 예를 들어, 이전 프레임 기간은 첫 번째 프레임 기간이고, 현재 프레임 기간은 첫 번째 프레임 기간의 바로 다음 기간인 두 번째 프레임 기간이 될 수 있다.On the other hand, the previous frame period ((n-1) th Frame) is the nth (n is a natural number) frame period, and the current frame (n-th Frame) is the n + mth (m is a natural number) frame period. For example, the previous frame period may be a first frame period, and the current frame period may be a second frame period, which is a period immediately following the first frame period.

이상에서 설명한 본 발명은 상술한 실시예 및 첨부된 도면에 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the general inventive concept as defined by the appended claims and their equivalents. Will be clear to those who have knowledge of.

S1 내지 S7: 단계S1 to S7: step

Claims (5)

이전 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인하는 A단계;
현재 프레임 기간에 터치로 인식된 두 개의 터치지점들 각각의 트랙킹 아이디를 확인하는 B단계;
서로 다른 프레임 기간에 발생된 동일 트랙킹 아이디의 터치지점들을 직선으로 연결하는 C단계;
두 개의 직선들이 교차하는지를 판단하는 D단계; 및,
두 개의 직선들이 교차할 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 서로 맞바꾸고, 두 개의 직선들이 교차하지 않을 경우 현재 프레임 기간에 터치로 인식된 두 개의 터치지점들의 트랙킹 아이디를 그대로 유지하는 E단계를 포함함을 특징으로 하는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법.
Checking a tracking ID of each of the two touch points recognized as touches in the previous frame period;
Checking a tracking ID of each of the two touch points recognized as touches in the current frame period;
Step C of connecting touch points of the same tracking ID generated in different frame periods in a straight line;
Determining whether two straight lines cross each other; And,
If the two straight lines intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are exchanged with each other. If the two straight lines do not intersect, the tracking IDs of the two touch points recognized as touches in the current frame period are interchanged. Method of removing the line cross of the infrared touch screen display device comprising the step of maintaining the same.
제 1 항에 있어서,
상기 이전 프레임 기간의 두 개의 터치지점들은 트랙킹 아이디 1번을 부여받은 제 1 터치지점과 트랙킹 아이디 2번을 부여받은 제 2 터치지점으로 구분되며; 그리고,
상기 현재 프레임 기간의 두 개의 터치지점들은 트랙킹 아이디 1번을 부여받은 제 3 터치지점과 트랙킹 아이디 2번을 부여받은 제 4 터치지점으로 구분됨을 특징으로 하는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법.
The method of claim 1,
The two touch points of the previous frame period are divided into a first touch point assigned with tracking ID 1 and a second touch point assigned with tracking ID 2; And,
The two touch points of the current frame period are divided into a third touch point granted with tracking ID 1 and a fourth touch point assigned with tracking ID 2, and the method of removing the line cross of the infrared touch screen display device. .
제 2 항에 있어서,
상기 D단계는,
상기 제 1 터치지점과 제 3 터치지점을 서로 연결하는 제 1 직선을 생성하는 단계;
상기 제 1 직선에 대한 제 1 직선방정식에 상기 제 2 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 1 값을 산출하는 단계;
상기 제 1 직선방정식에 상기 제 4 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 2 값을 산출하는 단계;
상기 제 2 터치지점과 제 4 터치지점을 서로 연결하는 제 2 직선을 생성하는 단계;
상기 제 2 직선에 대한 제 2 직선방정식에 상기 제 1 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 3 값을 산출하는 단계;
상기 제 2 직선방정식에 상기 제 3 터치지점의 x축 좌표값 및 y축 좌표값을 대입하여 제 4 값을 산출하는 단계; 및,
상기 제 1 값과 제 2 값을 곱한 값이 0보다 작고, 상기 제 3 값과 제 4 값을 곱한 값이 0보다 작은 조건일 때 상기 제 1 직선과 제 2 직선이 서로 교차하는 것으로 판단하고, 상술된 조건이 만족되지 않을 때 상기 제 1 직선과 제 2 직선이 교차하지 않는 것으로 판단하는 단계를 포함함을 특징으로 하는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법.
The method of claim 2,
The step D,
Generating a first straight line connecting the first touch point and the third touch point to each other;
Calculating a first value by substituting an x-axis coordinate value and a y-axis coordinate value of the second touch point into a first linear equation with respect to the first straight line;
Calculating a second value by substituting the x-axis coordinate value and the y-axis coordinate value of the fourth touch point into the first linear equation;
Generating a second straight line connecting the second touch point and the fourth touch point to each other;
Calculating a third value by substituting an x-axis coordinate value and a y-axis coordinate value of the first touch point into a second linear equation with respect to the second straight line;
Calculating a fourth value by substituting the x-axis coordinate value and the y-axis coordinate value of the third touch point into the second linear equation; And,
The first straight line and the second straight line are determined to intersect with each other when the first product is multiplied by the second value is less than zero, and the third product is multiplied by the fourth value is less than zero. And determining that the first and second straight lines do not intersect when the above condition is not satisfied.
제 3 항에 있어서,
상기 E단계는,
상기 제 1 직선과 제 2 직선이 서로 교차할 경우 제 3 터치지점의 트랙킹 아이디를 2번으로 변경하고 제 4 터치지점의 트랙킹 아이디를 1번으로 변경하며, 상기 제 1 직선과 제 2 직선이 교차하지 않을 경우 제 3 터치지점의 트랙킹 아이디를 1번으로 유지하고 제 4 터치지점의 트랙킹 아이디를 2번으로 유지하는 단계인 것을 특징으로 하는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법.
The method of claim 3, wherein
The step E,
When the first straight line and the second straight line cross each other, the tracking ID of the third touch point is changed to No. 2 and the tracking ID of the fourth touch point is changed to No. 1, and the first and second straight lines intersect. Otherwise, the tracking ID of the third touch point is maintained at number 1 and the tracking ID of the fourth touch point is maintained at number 2.
제 1 항에 있어서,
상기 이전 프레임 기간은 n번째(n은 자연수) 프레임 기간이고, 상기 현재 프레임은 n+m번째(m은 자연수) 프레임 기간인 것을 특징으로 하는 적외선 방식 터치스크린 표시장치의 라인 크로스 제거방법.
The method of claim 1,
And the previous frame period is an nth (n is a natural number) frame period, and the current frame is an n + mth (m is a natural number) frame period.
KR1020100134273A 2010-12-24 2010-12-24 Method for removing line cross phenomenon of touch screen display device KR101715856B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100134273A KR101715856B1 (en) 2010-12-24 2010-12-24 Method for removing line cross phenomenon of touch screen display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100134273A KR101715856B1 (en) 2010-12-24 2010-12-24 Method for removing line cross phenomenon of touch screen display device

Publications (2)

Publication Number Publication Date
KR20120072503A true KR20120072503A (en) 2012-07-04
KR101715856B1 KR101715856B1 (en) 2017-03-14

Family

ID=46707178

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100134273A KR101715856B1 (en) 2010-12-24 2010-12-24 Method for removing line cross phenomenon of touch screen display device

Country Status (1)

Country Link
KR (1) KR101715856B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007533044A (en) * 2004-05-06 2007-11-15 アプル・コンピュータ・インコーポレーテッド Multipoint touch screen
KR20120072502A (en) * 2010-12-24 2012-07-04 엘지디스플레이 주식회사 Infrared light touch screen display device and method for determining touch point of the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007533044A (en) * 2004-05-06 2007-11-15 アプル・コンピュータ・インコーポレーテッド Multipoint touch screen
KR20120072502A (en) * 2010-12-24 2012-07-04 엘지디스플레이 주식회사 Infrared light touch screen display device and method for determining touch point of the same

Also Published As

Publication number Publication date
KR101715856B1 (en) 2017-03-14

Similar Documents

Publication Publication Date Title
TWI690842B (en) Method and apparatus of interactive display based on gesture recognition
US9927881B2 (en) Hand tracker for device with display
TWI412975B (en) Gesture recognition method and interactive system using the same
US20110261016A1 (en) Optical touch screen system and method for recognizing a relative distance of objects
JP5308359B2 (en) Optical touch control system and method
US20080244468A1 (en) Gesture Recognition Interface System with Vertical Display
EP2353069A2 (en) Stereo optical sensors for resolving multi-touch in a touch detection system
TW201214243A (en) Optical touch system and object detection method therefor
KR101756664B1 (en) Infrared light touch screen display device and method for determining touch point of the same
WO2011046541A1 (en) Display with an optical sensor
CN101566898B (en) Positioning device of electronic display system and method
KR101575063B1 (en) multi-user recognition multi-touch interface apparatus and method using depth-camera
US20150035779A1 (en) Gesture recognition method, apparatus and device, computer program product therefor
KR101018397B1 (en) Infrared rays touch screen apparatus for removing false image generated in multi touch
KR102158613B1 (en) Method of space touch detecting and display device performing the same
TWI463375B (en) Optical touch panel system, optical sensing module, and operation method thereof
US10551934B2 (en) Gesture recognition method, apparatus and device, computer program product therefor
KR20120072503A (en) Method for removing line cross phenomenon of touch screen display device
CN202443449U (en) Photographic multi-point touch system
KR20200039983A (en) Space touch detecting device and display device having the same
TWM399375U (en) Display touch screen system
IT201900007040A1 (en) System for detecting interactions with a surface
TWI534688B (en) Optical touch panel system, optical sensing module, and operation method thereof
EP3059664A1 (en) A method for controlling a device by gestures and a system for controlling a device by gestures
CN102221941A (en) Frame-type multi-point position and touch monitoring and controlling system and method based on optical sensing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant