KR101347383B1 - Augmented input device for touch screen and electronic apparatus using the same - Google Patents

Augmented input device for touch screen and electronic apparatus using the same Download PDF

Info

Publication number
KR101347383B1
KR101347383B1 KR1020110096521A KR20110096521A KR101347383B1 KR 101347383 B1 KR101347383 B1 KR 101347383B1 KR 1020110096521 A KR1020110096521 A KR 1020110096521A KR 20110096521 A KR20110096521 A KR 20110096521A KR 101347383 B1 KR101347383 B1 KR 101347383B1
Authority
KR
South Korea
Prior art keywords
touch screen
pad
input
touch
output
Prior art date
Application number
KR1020110096521A
Other languages
Korean (ko)
Other versions
KR20130032741A (en
Inventor
김재정
이호원
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020110096521A priority Critical patent/KR101347383B1/en
Publication of KR20130032741A publication Critical patent/KR20130032741A/en
Application granted granted Critical
Publication of KR101347383B1 publication Critical patent/KR101347383B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/039Accessories therefor, e.g. mouse pads
    • G06F3/0393Accessories for touch pads or touch screens, e.g. mechanical guides added to touch screens for drawing straight lines, hard keys overlaying touch screens or touch pads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 터치 스크린용 보조 입력장치 및 이를 이용하는 전자기기에 관한 것으로,
상기 터치 스크린용 보조 입력 장치는 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드; 상기 터치 스크린상에 부착되는 적어도 하나의 출력패드; 및 상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드에 인가된 인체 정전용량이 상기 출력패드를 통해 상기 터치 스크린으로 출력되도록 하는 신호라인을 포함하며, 사용자가 상기 입력패드와 상기 터치 스크린을 멀티 터치하여 줌인 또는 줌아웃 동작을 수행하도록 한다.
The present invention relates to an auxiliary input device for a touch screen and an electronic device using the same.
The auxiliary input device for the touch screen may include at least one input pad attached to an external area of the touch screen; At least one output pad attached to the touch screen; And a 1: 1 connection between the input pad and the output pad, and a 1: 1 connection between the input pad and the output pad so that human body capacitance applied to the input pad is transferred to the touch screen through the output pad. And a signal line configured to be output, and allows a user to multi-touch the input pad and the touch screen to perform a zoom in or zoom out operation.

Figure R1020110096521
Figure R1020110096521

Description

터치 스크린용 보조 입력장치 및 이를 이용하는 전자기기{AUGMENTED INPUT DEVICE FOR TOUCH SCREEN AND ELECTRONIC APPARATUS USING THE SAME}AUGMENTED INPUT DEVICE FOR TOUCH SCREEN AND ELECTRONIC APPARATUS USING THE SAME}

본 발명은 터치 스크린 기술에 관한 것으로, 한손으로 멀티 터치 동작을 수행할 수 있도록 하는 터치 스크린용 보조 입력장치 및 이를 이용하는 전자기기에 관한 것이다. The present invention relates to a touch screen technology, and more particularly, to an auxiliary input device for a touch screen for performing a multi-touch operation with one hand and an electronic device using the same.

스마트 폰, 태블릿 PC 등과 같은 전자기기는 휴대폰과 개인휴대단말기(personal digital assistant; PDA)의 장점을 결합한 것으로, 휴대폰 기능에 일정관리, 팩스 송/수신 및 인터넷 접속 등의 데이터 통신 기능을 통합시킨 것이다.  Electronic devices such as smartphones and tablet PCs combine the advantages of mobile phones and personal digital assistants (PDAs), integrating data communication functions such as calendaring, fax transmission / reception and Internet access into mobile phone functions. .

이러한 전자기기는 사용자에 의해 항상 휴대되는 제품 특성을 가지므로, 장치 크기를 최소화하기 위해 터치 스크린(또는 터치 패널)을 구비하고, 이를 통해 데이터 디스플레이 동작과 데이터 입력 동작을 동시에 수행하도록 한다. Since the electronic device has a product characteristic that is always carried by the user, the electronic device includes a touch screen (or touch panel) to minimize the size of the device, thereby simultaneously performing a data display operation and a data input operation.

스마트 폰에 구비되는 터치 스크린은 구현 원리와 동작 방법에 따라 다양한 방식(저항막/광학/정전용량/초음파/압력 등)으로 구분될 수 있는데, 이전에는 저항막 방식이 주류였으나 애플의 아이폰, 아이패드 등이 등장한 이후에는 정전용량 방식이 주로 사용되고 있다. 정전용량 방식은 터치 스크린의 표면에 전류가 흐를 수 있는 물질(전도체)이 닿을 경우, 그 전류가 전도체를 통해 빠져나가는 정도를 측정하여 입력한 위치를 판단하여 입력 처리하는 방식이다. The touch screen included in a smart phone can be classified into various methods (resistive film / optical / capacitance / ultrasound / pressure) according to the implementation principle and operation method. Since the appearance of pads and the like, the capacitive method is mainly used. In the capacitive method, when a material (conductor) capable of flowing current comes into contact with the surface of the touch screen, the input position is determined by measuring the degree of the current passing through the conductor and determining the input position.

한편, 통신 기술의 발달에 의해 전자기기를 통해 한꺼번에 제공가능한 데이터량이 증가하고 있는 데 반해, 전자 기기에 구비되는 터치 스크린의 크기는 한정되어 있다. On the other hand, while the amount of data that can be provided at one time through electronic devices has increased due to the development of communication technology, the size of the touch screen provided in the electronic device is limited.

즉, 현재의 전자기기는 인터넷 웹 페이지에 직접 링크하고, 이를 한정된 크기를 가지는 터치 스크린를 통해 사용자에게 보여주고 있다. 그 결과, 전자기기에 구비되는 터치 스크린은 자신을 통해 디스플레이되는 객체들의 크기를 줄여, 한 화면을 통해 제공되는 데이터량을 증가시켜 주고 있다. That is, current electronic devices directly link to Internet web pages, and present them to users through a touch screen having a limited size. As a result, the touch screen provided in the electronic device reduces the size of objects displayed through the self, thereby increasing the amount of data provided through one screen.

이에 현재 스마트폰과 같은 전자기기에서는 멀티 터치 기술, 즉 두 손가락을 터치 스크린에 터치하고 두 손가락의 간격을 벌리거나 좁히면서, 터치 스크린상에 디스플레이된 사진이나 글자를 확대 또는 축소해주는 기술을 사용하고 있다. At present, electronic devices such as smartphones use multi-touch technology, that is, a technique of touching or touching two fingers on the touch screen, and spreading or narrowing the distance between two fingers, to enlarge or reduce pictures or letters displayed on the touch screen. have.

그러나 이와 같은 기존의 멀티 터치 기술은 양손 모두를 사용해야 하는 단점을 가진다. 즉, 한손으로는 전자기기를 지지하고, 나머지 한손으로는 손가락 간격을 조정해야지만 터치 스크린의 화면을 줌인 또는 줌아웃 할 수 있다는 단점이 있다. However, such a conventional multi-touch technology has a disadvantage of using both hands. That is, although one hand supports the electronic device and the other hand has to adjust the finger spacing, the touch screen can be zoomed in or out.

이에 본 발명에서는 한손으로 멀티 터치 동작을 수행할 수 있도록 하는 터치 스크린용 보조 입력장치 및 이를 이용하는 전자기기를 제공하고자 한다. Accordingly, an aspect of the present invention is to provide an auxiliary input device for a touch screen and an electronic device using the same, capable of performing a multi-touch operation with one hand.

상기 과제를 해결하기 위한 수단으로서, 본 발명의 일 실시 형태에 따른 정전용량 방식의 터치 스크린을 구비하는 전자기기에 적용되는 터치 스크린용 보조 입력장치는, 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드; 상기 터치 스크린상에 부착되는 적어도 하나의 출력패드; 및 상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드에 인가된 인체 정전용량이 상기 출력패드를 통해 상기 터치 스크린으로 출력되도록 하는 신호라인을 포함하며, 사용자가 상기 입력패드와 상기 터치 스크린을 멀티 터치하여 줌인 또는 줌아웃 동작을 수행하도록 한다. As a means for solving the above problems, an auxiliary input device for a touch screen applied to an electronic device having a capacitive touch screen according to an embodiment of the present invention, at least one attached to an external region of the touch screen An input pad; At least one output pad attached to the touch screen; And a 1: 1 connection between the input pad and the output pad, and a 1: 1 connection between the input pad and the output pad so that human body capacitance applied to the input pad is transferred to the touch screen through the output pad. And a signal line configured to be output, and allows a user to multi-touch the input pad and the touch screen to perform a zoom in or zoom out operation.

상기 출력패드는 접착 패드 형태로 구현되는 것을 특징으로 한다. The output pad is characterized in that it is implemented in the form of an adhesive pad.

상기 출력패드가 다수개인 경우, 다수개의 출력패드는 상기 터치 스크린상에서 일렬 배치되는 것을 특징으로 한다. When there are a plurality of output pads, the plurality of output pads may be arranged in a line on the touch screen.

상기 입력패드가 다수개인 경우, 다수개의 입력패드는 상기 터치 스크린의 외부 영역에서 일렬 배치되는 것을 특징으로 한다. When there are a plurality of input pads, the plurality of input pads may be arranged in line in an external area of the touch screen.

상기 입력패드가 다수개인 경우, 다수개의 입력패드는 동심 형태의 다층 레이어 구조를 가지는 것을 특징으로 한다.
When there are a plurality of input pads, the plurality of input pads may have a concentric multilayer structure.

상기 과제를 해결하기 위한 수단으로서, 본 발명의 다른 실시 형태에 따른 전자 기기는, 멀티 터치 기준점과 사용자 터치 지점을 검출하고, 상기 멀티 터치 기준점과 사용자 터치 지점간 거리를 검출 및 통보하는 터치 스크린; 상기 터치 스크린상에 부착되는 적어도 하나의 출력패드와, 상기 출력패드에 1:1 연결되며 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드를 구비하여, 사용자가 상기 입력패드를 터치하면 상기 입력패드에 1:1 연결된 출력패드의 부착지점이 상기 멀티 터치 기준점이 되도록 하는 터치 스크린용 보조 입력장치; 및 상기 멀티 터치 기준점과 사용자 터치 지점간 거리 변화 패턴에 따라 상기 터치 스크린의 화면을 줌인 또는 줌아웃하는 제어부를 포함할 수 있다. As a means for solving the above problems, an electronic device according to another embodiment of the present invention, a touch screen for detecting a multi-touch reference point and the user touch point, and detects and notifies the distance between the multi-touch reference point and the user touch point; At least one output pad attached to the touch screen, and at least one input pad 1: 1 connected to the output pad and attached to an external area of the touch screen, wherein the user touches the input pad. An auxiliary input device for a touch screen such that the attachment point of the output pad 1: 1 connected to the input pad is the multi-touch reference point; And a controller configured to zoom in or zoom out the screen of the touch screen according to a change pattern of distance between the multi-touch reference point and the user touch point.

상기 터치 스크린용 보조 입력장치는 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드; 상기 터치 스크린상에 부착되는 적어도 하나의 출력패드; 및 상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드에 인가된 인체 정전용량이 상기 출력패드를 통해 상기 터치 스크린으로 출력되도록 하는 신호라인을 포함하는 것을 특징으로 한다. The auxiliary input device for the touch screen may include at least one input pad attached to an external area of the touch screen; At least one output pad attached to the touch screen; And a signal line connecting 1: 1 between the input pad and the output pad to output the human capacitance applied to the input pad to the touch screen through the output pad.

상기 출력패드는 접착 패드 형태로 구현되는 것을 특징으로 한다. The output pad is characterized in that it is implemented in the form of an adhesive pad.

상기 출력패드가 다수개인 경우, 다수개의 출력패드는 상기 터치 스크린상에서 일렬 배치되는 것을 특징으로 한다. When there are a plurality of output pads, the plurality of output pads may be arranged in a line on the touch screen.

상기 입력패드가 다수개인 경우, 다수개의 입력패드는 상기 터치 스크린의 외부 영역에서 일렬 배치되는 것을 특징으로 한다. When there are a plurality of input pads, the plurality of input pads may be arranged in line in an external area of the touch screen.

상기 입력패드가 다수개인 경우, 다수개의 입력패드는 동심 형태의 다층 레이어 구조를 가지는 것을 특징으로 한다.
When there are a plurality of input pads, the plurality of input pads may have a concentric multilayer structure.

본 발명의 터치 스크린용 보조 입력장치는 터치 스크린상에 부착되는 적어도 하나의 출력패드와, 상기 출력패드에 1:1 연결되며 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드를 구비하여, 사용자가 입력패드(Pi)에 손바닥 또는 한 손가락이 터치되도록 한손으로 전자기기를 지지하면서 또 다른 손가락 하나를 통해 터치 스크린(11)을 터치하고 드래그하는 동작을 통해 멀티 터치 동작을 용이하게 수행할 수 있음을 알 수 있다. The auxiliary input device for a touch screen of the present invention includes at least one output pad attached to the touch screen, and at least one input pad 1: 1 connected to the output pad and attached to an external area of the touch screen. The user can easily perform the multi-touch operation by touching and dragging the touch screen 11 with another finger while supporting the electronic device with one hand so that the palm or one finger is touched on the input pad Pi. It can be seen that.

즉, 사용자가 한손으로도 멀티 터치 동작을 수행할 수 있도록 함으로써, 사용자의 편이성을 극대화시켜 준다. That is, by allowing the user to perform a multi-touch operation with one hand, the user's convenience is maximized.

도1a 및 도1b는 본 발명의 제1 실시예에 따른 터치 스크린용 보조 입력장치를 구비하는 전자기기를 도시한 도면이다.
도2 a 내지 도2d 는 본 발명의 제1 실시예에 따른 터치 스크린용 보조 입력장치의 다양한 구현 방법을 설명하기 위한 도면이다.
도3은 도2c의 터치 스크린용 보조 입력장치를 멀티 터치 기준점 위치 가변 예를 도시한 도면이다.
도4는 본 발명의 일 실시예에 따른 터치 스크린용 보조 입력장치를 이용한 줌인/ 줌아웃 방법을 설명하기 위한 도면이다.
1A and 1B illustrate an electronic device including an auxiliary input device for a touch screen according to a first embodiment of the present invention.
2A to 2D are diagrams for describing various implementation methods of the auxiliary input device for a touch screen according to the first embodiment of the present invention.
FIG. 3 is a diagram illustrating an example of changing a multi-touch reference point position of the auxiliary input device for the touch screen of FIG. 2C.
4 is a diagram illustrating a zoom in / zoom out method using an auxiliary input device for a touch screen according to an embodiment of the present invention.

본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다. In order to fully understand the present invention, operational advantages of the present invention, and objects achieved by the practice of the present invention, reference should be made to the accompanying drawings and the accompanying drawings which illustrate preferred embodiments of the present invention.

이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로서, 본 발명을 상세히 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다. Hereinafter, the present invention will be described in detail with reference to the preferred embodiments of the present invention with reference to the accompanying drawings. However, the present invention can be implemented in various different forms, and is not limited to the embodiments described. In order to clearly describe the present invention, parts that are not related to the description are omitted, and the same reference numerals in the drawings denote the same members.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “...부”, “...기”, “모듈”, “블록” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
Throughout the specification, when an element is referred to as " including " an element, it does not exclude other elements unless specifically stated to the contrary. The terms "part", "unit", "module", "block", and the like described in the specification mean units for processing at least one function or operation, And a combination of software.

본 발명의 터치 스크린용 보조 입력장치는 한손으로 멀티 터치 기술을 구현할 수 있도록 하는 장치이다. 이를 위해, 본 발명에서는 터치 스크린 외부 영역에 부착되는 입력패드(Pi)와, 입력패드(Pi)에 연결되며 터치 스크린 상에 부착되는 출력패드(Po)를 구비하는 터치 스크린용 보조 입력장치를 제안하고, 사용자가 입력패드(Pi)에 손바닥 또는 한 손가락이 터치되도록 한손으로 전자기기를 지지하면서 또 다른 손가락 하나를 통해 터치 스크린(11)을 터치하고 드래그하는 동작을 통해, 기존의 멀티 터치 기술을 용이하게 구현할 수 있도록 한다.
The auxiliary input device for a touch screen according to the present invention is a device for implementing multi-touch technology with one hand. To this end, the present invention proposes an auxiliary input device for a touch screen including an input pad Pi attached to an external area of the touch screen and an output pad Po connected to the input pad Pi and attached to the touch screen. In addition, while the user supports the electronic device with one hand so that the palm or one finger is touched on the input pad Pi, the user touches and drags the touch screen 11 through another finger to perform the existing multi-touch technology. Make it easy to implement.

도1a 및 도1b는 본 발명의 제1 실시예에 따른 터치 스크린용 보조 입력장치를 구비하는 전자기기를 도시한 도면이다. 1A and 1B illustrate an electronic device including an auxiliary input device for a touch screen according to a first embodiment of the present invention.

도1a 및 도1b에 도시된 바와 같이, 상기 전자기기(10)는 사용자 인터페이스 수단으로 이용되는 정전용량 방식의 터치 스크린(11), 터치 스크린(11)을 지지하며 제어부(13)를 외부로부터 보호하는 외장 케이스(12), 및 터치 스크린용 보조 입력장치(20), 및 제어부(13) 등을 포함할 수 있다. As shown in FIGS. 1A and 1B, the electronic device 10 supports the capacitive touch screen 11 and the touch screen 11 used as user interface means, and protects the control unit 13 from the outside. And an external case 12, an auxiliary input device 20 for a touch screen, and a controller 13.

상기 터치 스크린용 보조 입력장치(20)는 터치 스크린(11)의 외부 영역(예를 들어, 전자기기(10)의 외장 케이스(12))에 부착되는 적어도 하나의 입력패드(Pi)와, 터치 스크린(11)상에 부착되는 적어도 하나의 출력패드 (Po)와, 입력패드(Pi)와 출력패드(Po)가 1:1 대응되도록 전기적으로 연결하는 적어도 하나의 신호라인(L)을 포함한다. The auxiliary input device 20 for the touch screen may include at least one input pad Pi attached to an external area of the touch screen 11 (for example, the external case 12 of the electronic device 10), and a touch. At least one output pad Po attached to the screen 11 and at least one signal line L electrically connecting the input pad Pi to the output pad Po in a 1: 1 correspondence. .

다만, 출력패드(Po)는 사용자의 필요에 따라 부착 위치가 자유롭게 조정될 수 있어야 한다. 이에 출력패드(Po)는 접착 패드 형태로 구현되는 것이 바람직하다. However, the output pad Po should be able to freely adjust the attachment position according to the needs of the user. The output pad (Po) is preferably implemented in the form of an adhesive pad.

그리고 출력패드(Po)의 접착 여부와 상관없이 사용자가 터치 스크린(11)에 디스플레이되는 각종 정보를 모두 볼 수 있어야 하므로, 출력패드(Po)는 ITO(idium Ti Oxide, 산화인듐주석)를 이용하여 투명 도체로 구현될 수도 있을 것이다. In addition, since the user should be able to see all the information displayed on the touch screen 11 regardless of whether the output pad Po is adhered, the output pad Po may be formed using ITO (idium Ti Oxide). It may be implemented as a transparent conductor.

더하여, 입력패드(Pi)는 출력패드(Po)와 동일 크기를 가질 수도 있으나, 사용자 터치 편이를 확보하기 위해 출력패드(Po) 보다 큰 영역 크기를 가질 수 있다. 예를 들어, 출력패드(Po) 는 터치 스크린(11)의 픽셀 크기 또는 터치 스크린(11)의 최소 디스플레이 단위에 상응하는 크기를 가지나, 입력패드(Pi)는 손가락 터치 면적보다 큰 영역 크기를 가져 사용자가 러프(rough)하게 터치 동작을 수행할 수 있도록 한다. In addition, the input pad Pi may have the same size as the output pad Po, but may have a larger area size than the output pad Po in order to secure a user's touch shift. For example, the output pad Po has a size corresponding to the pixel size of the touch screen 11 or the minimum display unit of the touch screen 11, but the input pad Pi has an area size larger than the finger touch area. Allows the user to perform a touch operation roughly.

또한, 입력패드(Pi)는 반드시 접착 패드 형태로 구현되거나 투명 도체로 구현될 필요(즉, 불투명 도체로 구현될 수도 있음)는 없으나, 장치 구현 조건에 따라 접착 패드 형태 및/또는 투명 도체로 구현될 수도 있을 것이다.
In addition, the input pad Pi does not necessarily need to be implemented in the form of an adhesive pad or in the form of a transparent conductor (ie, may be implemented in an opaque conductor), but may be implemented in the form of an adhesive pad and / or a transparent conductor according to the device implementation conditions. It could be.

이와 같이, 본 발명에서는 사용자가 전자 기기를 드는 동작을 수행하면서 용이하게 자신의 손바닥 또는 손가락을 터치할 수 있는 영역에 입력패드(Pi)을 배치시키고, 이에 연결되는 출력패드(Po)을 터치 스크린(11)상에 배치시킴으로써, 사용자가 전자 기기를 드는 동작을 수행하면서 이와 동시에 멀티 터치 기준점도 용이하게 설정할 수 있도록 하는 효과를 제공한다. 이때, 멀티 터치 기준점은 출력패드(Po)의 부착지점이 될 것이다. As described above, in the present invention, the input pad Pi is disposed in an area where the user can easily touch his or her palm or finger while performing an operation of lifting the electronic device, and the output pad Po connected thereto is touch screen. By placing on (11), it provides an effect that the user can easily set the multi-touch reference point at the same time while performing the operation of lifting the electronic device. In this case, the multi-touch reference point will be an attachment point of the output pad Po.

이러한 상태에서, 사용자가 또 다른 손가락을 추가적으로 터치 스크린(11)에 접촉하고 이의 위치를 가변하면, 터치 스크린(11)은 사용자가 두개의 지점에 손가락을 터치한 후 두개의 지점간 거리를 임의로 바꾸고 있다고 판단하고, 이의 거리를 획득하여 제어부(13)에 제공해준다. In this state, if the user additionally touches another finger on the touch screen 11 and changes its position, the touch screen 11 changes the distance between the two points after the user touches the finger at two points. If it is determined that the distance is obtained, the distance is obtained and provided to the controller 13.

그러면, 제어부(13)는 멀티 터치 기준점(즉, 출력패드(Po)의 부착지점)과 또 다른 손가락의 터치 지점간 거리 변화 패턴을 파악하고, 그를 기반으로 터치 스크린(11)의 화면을 줌인 또는 줌아웃한다.Then, the controller 13 detects a distance change pattern between the multi-touch reference point (that is, the attachment point of the output pad Po) and the touch point of another finger, and zooms in or displays the screen of the touch screen 11 based on the pattern. Zoom out.

즉, 멀티 터치 기준점과 또 다른 손가락의 터치 지점간 거리가 감소되면, 터치 스크린(11)의 화면을 줌아웃해주고, 멀티 터치 기준점과 또 다른 손가락의 터치 지점간 거리가 증가되면, 터치 스크린(11)의 화면을 줌 인해준다.
That is, when the distance between the multi-touch reference point and the touch point of another finger is reduced, the screen of the touch screen 11 is zoomed out, and when the distance between the multi-touch reference point and the touch point of another finger is increased, the touch screen 11 To zoom the screen.

그 결과, 본 발명의 터치 스크린용 보조 입력장치를 사용자는 한손으로 기존의 멀티 터치 동작을 수행할 수 있게 된다.
As a result, the user can perform the conventional multi-touch operation with one hand on the auxiliary input device for the touch screen of the present invention.

도2 a 내지 도2d 는 본 발명의 제1 실시예에 따른 터치 스크린용 보조 입력장치의 다양한 구현 방법을 설명하기 위한 도면이다. 2A to 2D are diagrams for describing various implementation methods of the auxiliary input device for a touch screen according to the first embodiment of the present invention.

도2 a 내지 도2d 을 참조하면, 본 발명의 따른 터치 스크린용 보조 입력장치는 입력패드(Pi)는 터치 스크린(11)의 외부 영역에 부착되는 범위내에서, 출력패드(Po)는 터치 스크린(11)상에 부착되는 범위내에서 그 구현형태가 다양하게 변화될 수 있음을 알 수 있다. 2A to 2D, in the auxiliary input device for a touch screen according to the present invention, the input pad Pi is attached to an external region of the touch screen 11, and the output pad Po is a touch screen. It can be seen that the implementation can be variously changed within the range attached to (11).

먼저, 도2a에 도시된 바와 같이, 하나의 입력패드(Pi)를 전자 기기(10)의 뒷면에 배치하여, 사용자가 전자 기기(10)를 잡을 때 사용자의 손바닥이나 손가락이 용이하게 접촉될 수 있도록 할 수 있다. 이에 사용자는 한손으로 전자 기기(10)를 들면서 손바닥이나 손가락을 입력패드(Pi)에 터치시켜, 출력패드(Po)의 부착지점을 멀티 터치 기준점으로 설정해줄 수 있다.
First, as illustrated in FIG. 2A, one input pad Pi is disposed on the back of the electronic device 10 so that the user's palm or finger may easily contact the user when the user holds the electronic device 10. You can do that. Accordingly, the user may set the attachment point of the output pad Po as a multi-touch reference point by touching the palm or finger with the input pad Pi while lifting the electronic device 10 with one hand.

반면, 터치 스크린용 보조 입력장치를 도2b와 도2c에 도시된 바와 같이 구현하여, 사용자가 터치 스크린(11)상에 터치된 손가락이 아닌 전자기기(10)의 외장 케이스(12)의 뒷면에 터치되는 손가락을 움직여 화면을 확대 또는 축소시켜 줄 수 있다. On the other hand, by implementing the auxiliary input device for the touch screen as shown in Figures 2b and 2c, the user is placed on the back of the outer case 12 of the electronic device 10, not the finger touched on the touch screen 11 You can zoom in or out on the screen by moving your finger.

도2b와 도2c의 따른 터치 스크린용 보조 입력장치는 동심 형태의 다층 레이어 구조로 구현되거나, 또는 일렬 배치 형태로 구현되는 다수의 입력패드(Pi1~Pi5), 일렬 배치 형태로 구현되는 다수의 출력패드(Po1~Po5), 서로 대응되는 입력패드와 출력패드를 전기적으로 연결시켜 주는 다수의 신호라인(L1~L5)로 구성될 수 있다.The auxiliary input device for the touch screen according to FIGS. 2B and 2C has a plurality of input pads Pi1 to Pi5 implemented in a concentric multi-layered structure, or arranged in a row arrangement, and a plurality of outputs implemented in a row arrangement. The pads Po1 to Po5, and a plurality of signal lines L1 to L5 electrically connecting the input pads and the output pads corresponding to each other.

터치 스크린용 보조 입력장치가 다수의 입력패드(Pi1~Pi5), 다수의 출력패드(Po1~Po5), 다수의 신호라인(L1~L5)로 구성되는 경우, 사용자는 도3에 도시된 바와 같이, 터치 스크린(11)상이 아닌 다수의 입력패드(Pi1~Pi5)상에서의 터치 위치를 임의로 가변함으로써, 멀티 터치 기준점의 위치를 가변시켜 줄 수 있다. 그 결과, 터치 스크린(11)상에 터치된 손가락이 고정된 상태에서도, 손가락 터치 지점과 멀티 터치 기준점간 간격이 변화될 수 있으며, 이에 따라 터치 스크린(11)의 화면이 줌인 또는 줌아웃됨을 알 수 있다.
When the auxiliary input device for the touch screen is composed of a plurality of input pads Pi1 to Pi5, a plurality of output pads Po1 to Po5, and a plurality of signal lines L1 to L5, the user is shown in FIG. The positions of the multi-touch reference points may be varied by arbitrarily changing the touch positions on the plurality of input pads Pi1 to Pi5 rather than the touch screen 11. As a result, even when the finger touched on the touch screen 11 is fixed, the distance between the finger touch point and the multi-touch reference point may change, and accordingly, the screen of the touch screen 11 may be zoomed in or out. have.

또한 도2d에 도시된 바와 같이, 하나의 입력패드(Pi), 출력패드(Po), 그리고 신호라인(L)을 구비하되, 입력패드(Pi)을 전자기기(10)의 뒷면이 아닌 앞면에 배치할 수도 있다.
Also, as shown in FIG. 2D, one input pad Pi, an output pad Po, and a signal line L may be provided, but the input pad Pi may be disposed on the front surface of the electronic device 10 instead of on the rear surface. You can also place it.

이상에서 살펴본 바와 같이, 본 발명의 터치 스크린용 보조 입력장치는 사용자의 편이를 위해, 입력패드(Pi)는 터치 스크린(11)의 외부 영역에 부착되는 범위내에서, 출력패드(Po)는 터치 스크린(11)상에 부착되는 범위내에서 그 구현형태가 다양하게 변화될 수 있음을 알 수 있다.
As described above, in the auxiliary input device for the touch screen of the present invention, for convenience of the user, the input pad Pi may be attached to an external region of the touch screen 11, and the output pad Po may be touched. It will be appreciated that the implementation may vary within the scope of attachment to the screen 11.

더하여, 본 발명의 터치 스크린용 보조 입력장치는 한손으로 멀티 터치 기술을 구현할 수 있도록 하는 장치이기는 하나, 사용자가 필요로 하는 경우 양손을 모두 사용하여 멀티 터치 기술을 구현할 수도 있음은 물론 당연하다.
In addition, although the auxiliary input device for the touch screen of the present invention is a device for implementing the multi-touch technology with one hand, it is a matter of course that the user may implement the multi-touch technology with both hands if necessary.

도4는 본 발명의 일 실시예에 따른 터치 스크린용 보조 입력장치를 이용한 줌인/ 줌아웃 방법을 설명하기 위한 도면이다. 도4에서는 설명의 편이를 위해 도2a에서와 같이 구현된 터치 스크린용 보조 입력장치를 일례로 들어 설명하기로 한다. 4 is a diagram illustrating a zoom in / zoom out method using an auxiliary input device for a touch screen according to an embodiment of the present invention. In FIG. 4, for convenience of description, an auxiliary input device for a touch screen implemented as in FIG. 2A will be described as an example.

먼저, 사용자는 1개의 입력패드(Pi)와 출력패드(Po)을 구비하는 터치 스크린용 보조 입력장치(20)를 준비하고, 상기 입력패드(Pi)는 전자기기(10)의 외장 케이스(12)의 뒷면(이하, 전자기기 뒷면)에 부착하고, 상기 출력패드(Po)는 터치 스크린(11)상에 부착한다. 이때, 출력패드(Po)의 부착지점은 차후 멀티 터치 기준점이 될 것이다.
First, a user prepares an auxiliary input device 20 for a touch screen having one input pad Pi and an output pad Po, and the input pad Pi is an external case 12 of the electronic device 10. ) And the output pad Po is attached to the touch screen 11. At this time, the attachment point of the output pad Po will be a multi-touch reference point later.

이후, 사용자가 멀티 기술을 사용하고자 하는 경우, 도4b에서와 같이 손바닥 또는 하나의 손가락을 전자기기 뒷면에 부착된 입력패드(Pi)에 터치하여, 출력패드(Po)의 부착지점을 멀티 터치 기준점으로 잡는다. Then, when the user wants to use the multi-technology, as shown in FIG. 4B, the palm or one finger touches the input pad Pi attached to the back of the electronic device, and the attachment point of the output pad Po is multi-touch reference point. Catch.

이러한 상태에서, 사용자가 또 다른 손가락을 터치 스크린(11)에 터치하고, 출력패드(Po)의 부착지점과 또 다른 손가락간의 거리를 점차로 넓혀 나가거나 좁혀 나가면, 전자 기기(10)의 제어부(13)는 이에 응답하여 터치 스크린(11)의 화면을 줌아웃 또는 줌인해준다.
In this state, when the user touches another finger on the touch screen 11 and gradually increases or decreases the distance between the attachment point of the output pad Po and another finger, the control unit 13 of the electronic device 10 In response thereto, zooms out or zooms in the screen of the touch screen 11.

이와 같이, 본 발명의 터치 스크린용 보조 입력장치를 이용하는 경우, 사용자는 입력패드(Pi)에 손바닥 또는 한 손가락이 터치되도록 한손으로 전자기기를 지지하면서 또 다른 손가락 하나를 통해 터치 스크린(11)을 터치하고 드래그하는 동작을 통해, 기존의 멀티 터치 기술을 용이하게 구현할 수 있음을 알 수 있다.
As described above, in the case of using the auxiliary input device for the touch screen of the present invention, the user supports the electronic device with one hand so that the palm or one finger is touched by the input pad Pi, while the user touches the touch screen 11 through another finger. By touching and dragging, it can be seen that the existing multi-touch technology can be easily implemented.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명이 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이와 균등하거나 또는 등가적인 변형 모두는 본 발명 사상의 범주에 속한다 할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, Modification is possible. Accordingly, the spirit of the present invention should be understood only in accordance with the following claims, and all of the equivalent or equivalent variations will fall within the scope of the present invention.

Claims (11)

정전용량 방식의 터치 스크린을 구비하는 전자기기에 적용되는 터치 스크린용 보조 입력장치에 있어서,
상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드;
상기 터치 스크린상에 부착되는 적어도 하나의 출력패드; 및
상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드에 인가된 인체 정전용량이 상기 출력패드를 통해 상기 터치 스크린으로 출력되도록 하는 신호라인을 포함하며,
사용자가 상기 입력패드와 상기 터치 스크린을 멀티 터치하여 줌인 또는 줌아웃 동작을 수행하도록 하며,
상기 출력패드가 다수개인 경우, 다수개의 출력패드는 상기 터치 스크린상에서 일렬 배치되는 것을 특징으로 하는 터치 스크린용 보조 입력장치.
In the auxiliary input device for a touch screen applied to an electronic device having a capacitive touch screen,
At least one input pad attached to an external area of the touch screen;
At least one output pad attached to the touch screen; And
A signal line for connecting the input pad and the output pad 1: 1 to output the human capacitance applied to the input pad to the touch screen through the output pad,
Allows a user to multi-touch the input pad and the touch screen to perform a zoom in or zoom out operation,
And a plurality of output pads, wherein the plurality of output pads are arranged in line on the touch screen.
제1항에 있어서, 상기 출력패드는
접착 패드 형태로 구현되는 것을 특징으로 하는 터치 스크린용 보조 입력장치.
The method of claim 1, wherein the output pad
Auxiliary input device for a touch screen, characterized in that implemented in the form of an adhesive pad.
삭제delete 제1항에 있어서,
상기 입력패드가 다수개인 경우, 다수개의 입력패드는 상기 터치 스크린의 외부 영역에서 일렬 배치되는 것을 특징으로 하는 터치 스크린용 보조 입력장치.
The method of claim 1,
And a plurality of input pads, wherein the plurality of input pads are arranged in line in an external area of the touch screen.
제1항에 있어서,
상기 입력패드가 다수개인 경우, 다수개의 입력패드는 동심 형태의 다층 레이어 구조를 가지는 것을 특징으로 하는 터치 스크린용 보조 입력장치.
The method of claim 1,
And a plurality of input pads, wherein the plurality of input pads have a concentric multilayer structure.
멀티 터치 기준점과 사용자 터치 지점을 검출하고, 상기 멀티 터치 기준점과 사용자 터치 지점간 거리를 검출 및 통보하는 터치 스크린;
상기 터치 스크린상에 부착되는 적어도 하나의 출력패드와, 상기 출력패드에 1:1 연결되며 상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드를 구비하여, 사용자가 상기 입력패드를 터치하면 상기 입력패드에 1:1 연결된 출력패드의 부착지점이 상기 멀티 터치 기준점이 되도록 하는 터치 스크린용 보조 입력장치; 및
상기 멀티 터치 기준점과 사용자 터치 지점간 거리 변화 패턴에 따라 상기 터치 스크린의 화면을 줌인 또는 줌아웃하는 제어부를 포함하며,
상기 입력패드가 다수개인 경우, 다수개의 입력패드는 상기 터치 스크린의 외부 영역에서 일렬 배치되는 것을 특징으로 하는 전자 기기.
A touch screen detecting a multi-touch reference point and a user touch point, and detecting and notifying a distance between the multi-touch reference point and the user touch point;
At least one output pad attached to the touch screen, and at least one input pad 1: 1 connected to the output pad and attached to an external area of the touch screen, wherein the user touches the input pad. An auxiliary input device for a touch screen such that the attachment point of the output pad 1: 1 connected to the input pad is the multi-touch reference point; And
And a controller configured to zoom in or zoom out the screen of the touch screen according to a distance change pattern between the multi-touch reference point and a user touch point.
And a plurality of input pads, the plurality of input pads are arranged in line in an external area of the touch screen.
청구항 7은(는) 설정등록료 납부시 포기되었습니다.Claim 7 has been abandoned due to the setting registration fee. 제6항에 있어서, 상기 터치 스크린용 보조 입력장치는
상기 터치 스크린의 외부 영역에 부착되는 적어도 하나의 입력패드;
상기 터치 스크린상에 부착되는 적어도 하나의 출력패드; 및
상기 입력패드와 상기 출력패드간을 1:1 연결하여, 상기 입력패드에 인가된 인체 정전용량이 상기 출력패드를 통해 상기 터치 스크린으로 출력되도록 하는 신호라인을 포함하는 것을 특징으로 하는 전자 기기.
The method of claim 6, wherein the auxiliary input device for the touch screen
At least one input pad attached to an external area of the touch screen;
At least one output pad attached to the touch screen; And
And a signal line connecting the input pad and the output pad 1: 1 so that the human capacitance applied to the input pad is output to the touch screen through the output pad.
청구항 8은(는) 설정등록료 납부시 포기되었습니다.Claim 8 was abandoned when the registration fee was paid. 제7항에 있어서, 상기 출력패드는
접착 패드 형태로 구현되는 것을 특징으로 하는 전자 기기.
The method of claim 7, wherein the output pad
Electronic device, characterized in that implemented in the form of an adhesive pad.
청구항 9은(는) 설정등록료 납부시 포기되었습니다.Claim 9 has been abandoned due to the setting registration fee. 제7항에 있어서,
상기 출력패드가 다수개인 경우, 다수개의 출력패드는 상기 터치 스크린상에서 일렬 배치되는 것을 특징으로 하는 전자 기기.
The method of claim 7, wherein
And a plurality of output pads are arranged in line on the touch screen.
삭제delete 청구항 11은(는) 설정등록료 납부시 포기되었습니다.Claim 11 was abandoned when the registration fee was paid. 제7항에 있어서,
상기 입력패드가 다수개인 경우, 다수개의 입력패드는 동심 형태의 다층 레이어 구조를 가지는 것을 특징으로 하는 전자 기기.
The method of claim 7, wherein
And a plurality of input pads, the plurality of input pads having a concentric multilayer structure.
KR1020110096521A 2011-09-23 2011-09-23 Augmented input device for touch screen and electronic apparatus using the same KR101347383B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110096521A KR101347383B1 (en) 2011-09-23 2011-09-23 Augmented input device for touch screen and electronic apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110096521A KR101347383B1 (en) 2011-09-23 2011-09-23 Augmented input device for touch screen and electronic apparatus using the same

Publications (2)

Publication Number Publication Date
KR20130032741A KR20130032741A (en) 2013-04-02
KR101347383B1 true KR101347383B1 (en) 2014-01-03

Family

ID=48435453

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110096521A KR101347383B1 (en) 2011-09-23 2011-09-23 Augmented input device for touch screen and electronic apparatus using the same

Country Status (1)

Country Link
KR (1) KR101347383B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101522395B1 (en) * 2013-05-24 2015-05-26 테크빌닷컴 주식회사 Training system for car maintenance

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080080732A (en) * 2007-03-02 2008-09-05 삼성전자주식회사 Display device and method of manufacturing the same
KR20110066266A (en) * 2009-12-11 2011-06-17 한국과학기술원 A method for controlling touch screen, a medium recoring the same, a control device for touch screen and mobile device using the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080080732A (en) * 2007-03-02 2008-09-05 삼성전자주식회사 Display device and method of manufacturing the same
KR20110066266A (en) * 2009-12-11 2011-06-17 한국과학기술원 A method for controlling touch screen, a medium recoring the same, a control device for touch screen and mobile device using the same

Also Published As

Publication number Publication date
KR20130032741A (en) 2013-04-02

Similar Documents

Publication Publication Date Title
KR101116442B1 (en) Apparatus, method and computer program product for manipulating a device using dual side input devices
JP6326001B2 (en) Underwater operation of the camera
US10268322B2 (en) Method for temporarily manipulating operation of object in accordance with touch pressure or touch area and terminal thereof
JP6577967B2 (en) Method of adjusting moving direction of display object and terminal
US9652070B2 (en) Integrating multiple different touch based inputs
ES2761198T3 (en) Eye interaction system
JP5759660B2 (en) Portable information terminal having touch screen and input method
US8149249B1 (en) Feedback during crossing of zoom levels
JP2017079079A (en) Menu operation method and menu operation device including touch input device conducting menu operation
JP5620440B2 (en) Display control apparatus, display control method, and program
US20140333545A1 (en) Portable device and control method thereof
TW200941314A (en) Touch sensor device and pointing coordinate determination method thereof
JP2010250465A (en) Information processing apparatus, information processing method, and program
AU2016202267B2 (en) Merged floating pixels in a touch screen
US20150033193A1 (en) Methods for modifying images and related aspects
KR20140067473A (en) Touchscreen device and screen zooming method thereof
US20120293436A1 (en) Apparatus, method, computer program and user interface
KR101347383B1 (en) Augmented input device for touch screen and electronic apparatus using the same
KR101348370B1 (en) variable display device and method for displaying thereof
CN104951221A (en) Touch operation response method and electronic device
KR101272401B1 (en) Augmented input device for touch screen and electronic apparatus using the same
CN101794194A (en) Method and device for simulation of input of right mouse button on touch screen
KR20110066545A (en) Method and terminal for displaying of image using touchscreen
TWI492135B (en) Driving and sensing method for single-layer mutual capacitive multi-touch screen
KR20130032598A (en) Apparatus and method for controlling display size in portable terminal

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161129

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee