KR20150102359A - Apparatus for setting up input using pressure-detectable user interface, and Method thereof - Google Patents

Apparatus for setting up input using pressure-detectable user interface, and Method thereof Download PDF

Info

Publication number
KR20150102359A
KR20150102359A KR1020140024134A KR20140024134A KR20150102359A KR 20150102359 A KR20150102359 A KR 20150102359A KR 1020140024134 A KR1020140024134 A KR 1020140024134A KR 20140024134 A KR20140024134 A KR 20140024134A KR 20150102359 A KR20150102359 A KR 20150102359A
Authority
KR
South Korea
Prior art keywords
pressure
input value
input
touch
setting
Prior art date
Application number
KR1020140024134A
Other languages
Korean (ko)
Other versions
KR101602374B1 (en
Inventor
김현석
최민영
서인경
우다해
유하늬
김민정
Original Assignee
성신여자대학교 산학협력단
주식회사 페퍼치즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성신여자대학교 산학협력단, 주식회사 페퍼치즈 filed Critical 성신여자대학교 산학협력단
Priority to KR1020140024134A priority Critical patent/KR101602374B1/en
Publication of KR20150102359A publication Critical patent/KR20150102359A/en
Application granted granted Critical
Publication of KR101602374B1 publication Critical patent/KR101602374B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04166Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

A method for setting an input value of a pressure-detectable user interface according to an embodiment of the present invention includes: a step of detecting touch and pressure by an object by an electrostatic capacity pressure method and operating an input mode based on a duration time of the touch; a step of altering an input value according to the size of the pressure in the case of the input mode operated; and a step of confirming whether or not the input value is set according to a pressure release time in the case of the pressure released, thereby setting a level of the input value according to the size of the pressure pressed from a fixed location with the touch of a single finger and easily controlling every function.

Description

압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법{Apparatus for setting up input using pressure-detectable user interface, and Method thereof}TECHNICAL FIELD [0001] The present invention relates to a pressure-detectable user interface,

본 발명은 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법에 관한 것으로, 더욱 상세하게는 터치시의 압력 가변량과 압력 해제 방법에 따라 입력값을 설정하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법에 관한 것이다. The present invention relates to an apparatus and method for setting an input value of a user interface capable of sensing pressure, and more particularly, to an apparatus and method for setting an input value of a user interface capable of pressure sensing, And to a setting apparatus and method.

현재 터치 감지 스크린을 이용한 많은 개인용 영업용 이동 모바일 디바이스들이 출시되고 있으며, 이와 같은 터치 감지 스크린들은 많은 널이 공지된 소자이고, 이를 이용한 기술들 많이 개발되고 있다. 사용자들은 편리함을 인하여 이와 같은 이동 모바일 다바이스들을 이용하여 자료를 입력하고 수집할 뿐만 아니라, 많은 애플리케이션에 대해 매우 매력적인 통합 방식으로 디바이스들을 이용한다.Currently, many personal mobile mobile devices for business use are being launched using touch-sensitive screens, and many such touch-sensitive screens are well known in the art, and a lot of technologies using them have been developed. For convenience, users not only enter and collect data using these mobile mobile devices, but also use devices in a very attractive and integrated manner for many applications.

초기의 대중적인 터치 감지 디스플레이 스크린들은 한 번에 하나의 터치 위치만을 신뢰성 있게 인식할 수 있었다. 다수의 동시 터치의 존재 시, 이러한 디스플레이 스크린들은 혼란스럽고 예측 불가능할 것이다. 현재, 많은 장치는 여러 개의 동시 터치를 신뢰성 있게 추적하고 사용자가 가하는 전체 압력을 측정할 수 있는 스크린들을 포함한다.Early popular touch-sensitive display screens reliably recognized only one touch location at a time. In the presence of multiple simultaneous touches, these display screens will be confusing and unpredictable. Currently, many devices reliably track multiple simultaneous touches and include screens that can measure the total pressure the user applies.

터치 감지 디스플레이 스크린들의 매력적인 양태들 중 하나는 이들이 적어도 일부 예들에서 더 전통적인 개인용 컴퓨터에서 발견되는 키보드 및 포인팅 장치(예로서, 마우스 또는 트랙볼) 양자를 대체할 수 있다는 것이다.One of the attractive aspects of the touch-sensitive display screens is that they can replace both keyboard and pointing devices (e.g., a mouse or trackball) found in more traditional personal computers in at least some instances.

이것은 키보드가 존재하더라도 너무 작아서 열 손가락 타이핑에 적합하지 않은 스마트폰들과 같은 매우 작은 장치들에 대해 스크린들이 특히 유용하게 한다.This makes the screens particularly useful for very small devices such as smart phones that are too small to be present for ten finger typing because the keyboard is present.

당연히, 터치 감지 스크린들에 대한 사용자 인터페이스 양식들의 개발은 고정 키보드 및 마우스에 의해 개척된 용도들을 따랐다. 사람들은 마우스를 이용하여 디스플레이 스크린 상의 커서를 제어하는 것으로부터 간단히 스크린을 터치하고 자료를 이동할 경우에도 드래그 앤 드롭으로 매우 쉽게 전이한다.Naturally, the development of user interface forms for touch-sensitive screens followed applications pioneered by fixed keyboards and mice. People use the mouse to control the cursor on the display screen, so they can easily touch the screen and transition very easily with drag-and-drop when moving data.

(특허문헌 1) KR2013-0073621 A(Patent Document 1) KR2013-0073621 A

(특허문헌 2) KR2013-0062611 A (Patent Document 2) KR2013-0062611 A

본 발명에서 해결하고자 하는 과제는 터치시의 압력 가변량과 압력 해제 방법에 따라 입력값을 설정하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법을 제공하는 것이다. An object of the present invention is to provide an apparatus and method for setting an input value of a user interface capable of sensing pressure to set an input value according to a pressure variable amount at the time of touch and a pressure release method.

본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법은 입력값 설정 방법에 있어서, 정전용량 압력 방식으로 물체에 의한 터치 및 압력을 감지하고, 상기 터치의 지속시간에 기초하여 입력모드를 작동시키는 단계; 상기 입력모드가 작동된 경우, 상기 압력의 크기에 따라 입력값을 가변하는 단계; 및 상기 압력의 해제 시, 압력 해제 시간에 따라 상기 입력값의 설정 여부를 확정하는 단계를 포함한다. A method of setting an input value of a user interface capable of sensing a pressure according to an embodiment of the present invention is a method of setting an input value, the method comprising: sensing a touch and pressure by an object using an electrostatic capacity pressure method; Operating an input mode; Varying an input value according to the magnitude of the pressure when the input mode is activated; And determining whether the input value is set according to the pressure release time when the pressure is released.

본 실시예에 있어서, 상기 입력모드 작동단계에서는, 상기 터치가 기설정된 기준시간범위 동안 지속되는 것이 가능하다. In this embodiment, in the input mode operation step, it is possible that the touch is continued for a predetermined reference time range.

본 실시예에 있어서, 상기 입력모드 작동단계에서는, 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 사용자에게 시각 또는 청각적으로 상기 입력모드의 작동 상태가 표시되는 것이 가능하다. In the present embodiment, in the input mode operation step, when the touch is continued for a predetermined reference time range, it is possible for the user to visually or audibly display the operation state of the input mode.

본 실시예에 있어서, 상기 입력값 가변단계에서는 상기 압력의 크기에 따라 입력값을 가변하는 경우, 사용자에게 시각 또는 청각적으로 상기 가변되는 입력값이 표시되는 것이 가능하다.  In this embodiment, when the input value is varied according to the magnitude of the pressure in the input value varying step, it is possible for the user to visually or audibly display the variable input value.

본 실시예에 있어서, 상기 설정 여부 확정단계에서는, 상기 압력 해제 시간이 기설정된 기준시간 보다 짧은 경우, 상기 압력의 해제 동작 시작 전 입력값이 최종값으로 확정되는 것이 가능하다. In the present embodiment, when the pressure release time is shorter than the preset reference time, the input value before the pressure release operation is determined as the final value in the setting confirmation step.

본 실시예에 있어서, 상기 설정 여부 확정단계에서는, 상기 압력 해제 시간이 기설정된 기준시간 보다 긴 경우에는 입력값이 취소되는 것이 가능하다. In this embodiment, when the pressure release time is longer than a preset reference time, the input value can be canceled.

본 실시예에 있어서, 상기 입력모드 변환단계는 입력값 수정 시, 기 설정된 입력값을 초기화하는 것이 가능하다. In the present embodiment, the input mode conversion step may initialize a predetermined input value when the input value is modified.

본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치는 입력값 설정 장치에 있어서, 정전용량 압력 방식의 디스플레이; 정전용량 압력 방식으로 상기 디스플레이 상의 물체에 의한 터치와, 상기 물체의 의하여 상기 디스플레이 상에 가해진 압력 및 상기 가해진 압력의 해제 시 압력 해제를 감지하는 터치/압력 감지부; 및 상기 터치의 지속시간에 기초하여 입력모드를 작동시키고, 상기 압력의 크기에 따라 입력값을 가변하고, 상기 압력의 해제 시 압력 해제 시간에 따라 상기 입력값의 설정 여부를 확정하는 입력설정부를 포함한다. According to another aspect of the present invention, there is provided an apparatus for setting an input value of a user interface capable of pressure sensing, the apparatus comprising: a display of an electrostatic capacity type; A touch / pressure sensing unit for sensing a touch by an object on the display in a capacitive pressure manner, a pressure applied on the display by the object, and a pressure release upon release of the applied pressure; And an input setting unit for activating the input mode based on the duration of the touch, varying the input value according to the magnitude of the pressure, and determining whether to set the input value according to the pressure release time when the pressure is released do.

본 실시예에 있어서, 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 사용자에게 시각 또는 청각적으로 상기 입력모드의 작동 상태를 표시하도록 상기 디스플레이를 제어하는 제어부를 더 포함하는 것이 가능하다. In the present embodiment, it is possible to further include a control unit for controlling the display to visually or audibly display the operating state of the input mode when the touch has continued for a predetermined reference time range.

본 실시예에 있어서, 상기 제어부는 상기 압력의 크기에 따라 입력값을 가변하는 경우, 사용자에게 시각 또는 청각적으로 상기 가변되는 입력값을 표시하도록 상기 디스플레이를 제어하는 것이 가능하다. In the present embodiment, when the input value is varied according to the magnitude of the pressure, the control unit may control the display to display the input value which is varied visually or audibly to the user.

본 실시예에 있어서, 상기 입력설정부는 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 상기 입력모드를 작동시키는 것이 가능하다. In the present embodiment, the input setting unit can operate the input mode when the touch is continued for a predetermined reference time range.

본 실시예에 있어서, 상기 입력설정부는 상기 압력 해제 시간이 기설정된 기준시간 보다 짧은 경우, 상기 압력의 해제 동작 시작 전 입력값을 최종값으로 확정하는 것이 가능하다. In this embodiment, when the pressure release time is shorter than a preset reference time, the input setting unit can determine the input value before the pressure release operation to the final value.

본 실시예에 있어서, 상기 입력설정부는 상기 압력 해제 시간이 기설정된 기준시간 보다 긴 경우에는 입력값을 취소하는 것이 가능하다. In the present embodiment, the input setting unit can cancel the input value when the pressure release time is longer than a preset reference time.

본 실시예에 있어서, 상기 입력설정부는 입력값 수정 시, 기 설정된 입력값을 초기화하는 것이 가능하다. In the present embodiment, the input setting unit can initialize a preset input value when the input value is modified.

본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법은 한 손가락만을 터치하여 움직이지 않고 고정된 위치에서 누르는 압력의 크기에 따라 입력값의 정도를 설정함으로써, 모든 기능을 간편하고 용이하게 조작할 수 있다. An apparatus and method for setting an input value of a user interface capable of sensing a pressure according to an embodiment of the present invention can set a degree of an input value according to a magnitude of a pressure applied at a fixed position without touching one finger, Can be easily and easily operated.

도 1은 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치의 블록도이고,
도 2는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 순서도이고,
도 3(a) 내지 (e)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 시 터치 감지 정도를 도식화한 것이고,
도 4(a) 내지 (d)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 적용 순서를 도식화한 것이고,
도 5(a) 및 (b)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 입력값 가변 및 설정 과정을 도시한 것이다.
1 is a block diagram of an input value setting device of a user interface capable of pressure sensing according to an embodiment of the present invention,
2 is a flowchart of a method of setting an input value of a user interface capable of pressure sensing according to an embodiment of the present invention,
3 (a) to 3 (e) are diagrams illustrating the degree of touch detection when setting an input value of a user interface capable of pressure sensing according to an embodiment of the present invention,
4 (a) to 4 (d) are diagrams illustrating a procedure of applying an input value setting method of a user interface capable of pressure sensing according to an embodiment of the present invention,
FIGS. 5A and 5B illustrate input value variable and setting process of a method of setting an input value of a user interface capable of pressure sensing according to an embodiment of the present invention.

이하의 실시예들은 본 발명의 구성 요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성 요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성 요소 또는 특징은 다른 구성 요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성 요소들 및/또는 특징들을 결합하여 본 발명의 실시예를 구성할 수도 있다. 본 발명의 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.The following embodiments are a combination of elements and features of the present invention in a predetermined form. Each component or characteristic may be considered optional unless otherwise expressly stated. Each component or feature may be implemented in a form that is not combined with other components or features. In addition, some of the elements and / or features may be combined to form an embodiment of the present invention. The order of the operations described in the embodiments of the present invention may be changed. Some configurations or features of certain embodiments may be included in other embodiments, or may be replaced with corresponding configurations or features of other embodiments.

본 발명의 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.Embodiments of the present invention may be implemented by various means. For example, embodiments of the present invention may be implemented by hardware, firmware, software, or a combination thereof.

하드웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 컨트롤러, 마이크로 컨트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.For a hardware implementation, the method according to embodiments of the present invention may be implemented in one or more application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs) , Field programmable gate arrays (FPGAs), processors, controllers, microcontrollers, microprocessors, and the like.

펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 이상에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 소프트웨어 코드는 메모리 유닛에 저장되어 프로세서에 의해 구동될 수 있다. 상기 메모리 유닛은 상기 프로세서 내부 또는 외부에 위치하여, 이미 공지된 다양한 수단에 의해 상기 프로세서와 데이터를 주고 받을 수 있다.In the case of an implementation by firmware or software, the method according to embodiments of the present invention may be implemented in the form of a module, a procedure or a function for performing the functions or operations described above. The software code can be stored in a memory unit and driven by the processor. The memory unit may be located inside or outside the processor, and may exchange data with the processor by various well-known means.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다. 또한, 어떤 부분이 어떤 구성 요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있다는 것을 의미한다.Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only a case directly connected but also a case where the part is electrically connected with another part in between. In addition, when a part includes an element, it means that the element may include other elements, not excluding other elements, unless specifically stated otherwise.

또한, 본 명세서에서 기재한 모듈(module)이란 용어는 특정한 기능이나 동작을 처리하는 하나의 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현할 수 있다.Also, the term module as used herein refers to a unit for processing a specific function or operation, which can be implemented by hardware, software, or a combination of hardware and software.

이하의 설명에서 사용되는 특정(特定) 용어들은 본 발명의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 본 발명의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.
It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are intended to provide further explanation of the invention, and are not intended to limit the scope of the invention.

본 발명의 실시예들에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법은 압력감지가 가능한 디스플레이를 구비한 전자장치들에 적용될 수 있다. 대표적인 개인용 전자 장치로는, 셀룰러 전화, 개인 휴대 단말기 또는 개인용 컴퓨터 등이 있다. 이들 개인용 단말기에 장착되는 디스플레이는 더욱더 사용자들에게 편이성을 제공하기 직관적이고 사용자 편이성이 높은 사용자 인터페이스(User Interface, UI)를 제공하고 있다. 디스플레이가 다양한 방식으로 터치를 인식하여 사용자가 간편하게 이들 전자 장치를 조작할 수 있는데, 압력으로만 터치를 감지하는 방식, 정전용량의 변화를 통하여 터치 여부만 감지하는 방식이 사용되었었다. An apparatus and method for setting an input value of a user interface capable of pressure sensing according to embodiments of the present invention can be applied to electronic devices having a display capable of pressure sensing. Representative personal electronic devices include cellular telephones, personal digital assistants, or personal computers. The displays mounted on these personal terminals are provided with an intuitive and user-friendly user interface (UI) to further provide convenience to users. The display recognizes the touch in various ways and the user can easily operate the electronic device by using the method of detecting the touch only by the pressure and the method of detecting the touch only by the change of the capacitance.

최근에는 디스플레이 상의 터치뿐만 아니라 터치시의 압력도 함께 감지할 수 있는 정전용량 압력 방식의 기술들이 개발되고 있다. 이와 같은 정전용량 압력 방식을 구현하는 디스플레이는 터치 시의 정전용량의 변화량에 기초하여 단순 터치뿐만 아니라 압력의 크기를 감지하는 방식과, 압력감지시에는 별도의 압력 감지센서를 이용하여 단순 터치뿐만 아니라 압력의 크기도 감지하는 방식 등이 개발되었다.In recent years, capacitive pressure-type technologies capable of sensing not only the touch on the display but also the pressure at the time of touch are being developed. The display that realizes the capacitive pressure method is not only a simple touch but also a method of sensing the magnitude of the pressure based on the variation of the capacitance at the time of touch and a simple touch using a pressure sensor And a method of detecting the magnitude of the pressure.

이하 본 발명의 실시예들에서는 정전용량의 변화량에 기초하여 단순 터치 및 압력의 크기를 감지할 수 있는 정전용량 압력 방식을 기초로 실시예들이 설명된다. Hereinafter, embodiments of the present invention will be described on the basis of a simple touch based on the amount of capacitance change and a capacitive pressure method capable of sensing the magnitude of the pressure.

도 1은 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치의 블록도이고, 도 2는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 순서도이고, 도 3(a) 내지 (e)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 시 터치 감지 정도를 도식화한 것이고, 도 4(a) 내지 (d)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 적용 순서를 도식화한 것이고, 도 5(a) 및 (b)는 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법의 입력값 가변 및 설정 과정을 도시한 것이다. FIG. 1 is a block diagram of an input value setting device of a user interface capable of pressure sensing according to an embodiment of the present invention. FIG. 2 is a flowchart illustrating an input value setting method of a user interface capable of pressure sensing according to an embodiment of the present invention. 3 (a) through 3 (e) are diagrams illustrating the degree of touch sensing when setting an input value of a pressure-sensitive user interface according to an embodiment of the present invention, and FIGS. 4 (a) 5A and 5B are diagrams illustrating an application sequence of an input value setting method of a user interface capable of pressure sensing according to an embodiment of the present invention. An input value variable of the input value setting method of the interface, and a setting procedure.

이하, 도 1 내지 도 2를 참조하여 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법을 상세히 설명한다. Hereinafter, an apparatus and method for setting an input value of a user interface capable of pressure sensing according to an embodiment of the present invention will be described in detail with reference to FIG. 1 and FIG.

도 1 내지 2를 참조하면, 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치(100)는 정전용량 압력 방식으로 터치 및 압력의 감지가 가능한 디스플레이(110), 디스플레이(110)를 통한 물체의 터치 및 가해진 압력을 감지하는 터치/압력감지부(120), 터치/압력감지부(120)가 감지한 압력의 변화량에 따라 입력값을 조절하여 최종값을 설정하는 입력설정부(130)를 포함하며, 터치/압력에 따라 입력모드가 작동하는지를 사용자에게 표시하도록 디스플레이(110)를 제어하는 제어부(140)를 더 포함하는 것이 바람직하다. Referring to FIGS. 1 and 2, an input value setting device 100 of a user interface capable of pressure sensing includes a display 110 capable of sensing touch and pressure by an electrostatic pressure type, A touch / pressure sensing unit 120 for sensing the applied pressure, and an input setting unit 130 for adjusting the input value according to the amount of change in pressure sensed by the touch / pressure sensing unit 120 to set the final value, And a control unit 140 for controlling the display 110 to display to the user whether the input mode is operated according to the touch / pressure.

정전용량식 또는 정전식으로 터치를 감지하는 방법은 손가락이 닿은 디스플레이나 스크린 상의 정전용량의 변화를 감지하여 그 감지 영역의 중심을 터치의 중심으로 인지한다. A method of sensing a touch by capacitive or electrostatic means detects the change of the capacitance on the display or the screen touching the finger and recognizes the center of the sensing area as the center of the touch.

본 발명자는 터치와 압력의 구분인식이 가능하고, 누르는 압력에 따라 입력값의 정도를 설정할 수 있다는 점에 착안하여 한 손가락을 터치하여 움직이지 않고 고정된 위치에서 모든 기능을 수행할 수 있는 사용자 인터페이스를 개발하게 되었다. The inventor of the present invention has developed a user interface capable of discriminating between touch and pressure and capable of setting the degree of an input value according to a pressing pressure, .

도 3(a) 내지 (d)를 참조하며, 정전 압력식 터치의 중심을 중점으로 하는 원을 터치의 포인트로 인식하고, 그 중점의 외곽에 터치 후 부가되는 압력의 강도만큼 큰 원을 테두리만 표시한다. 여기서, 정전용량의 변화량에 기초하여 압력을 산출하고, 산출된 압력에 의하여 감지된 터치를 P-터치라고 칭한다. 3 (a) to 3 (d), a circle centered on the center of the electrostatic pressure type touch is recognized as a point of touch, and a circle that is larger by the intensity of the pressure added after the touch Display. Here, the pressure is calculated on the basis of the change amount of the capacitance, and the touch sensed by the calculated pressure is called P-touch.

도 3(a)는 전혀 터치를 인식하지 않은 상태이고, (b)는 단지 정전식 터치만 감지된 상태이고, (c)는 정전식 터치 감지 후 압력이 가해져 P-터치도 감지되었으나 약한 압력으로 감지된 상태이고, (d)는 정전식 터치 및 P-터치가 모두 감지되었으나 높은 압력으로 감지된 상태를 도시하고 있다. P-터치의 압력범위가 일정값 이하인 경우에는 손가락 등의 물체가 디스플레이에 터치되지 않은 것으로 인식한다. FIG. 3 (a) shows a state in which no touch is recognized at all, FIG. 3 (b) shows a state in which only a capacitive touch is detected, (c) (D) shows a state in which both of the electrostatic touch and the P-touch are sensed but is sensed at a high pressure. When the pressure range of the P-touch is less than a predetermined value, it is recognized that an object such as a finger is not touched on the display.

이하, 도 4(a) 내지 도 5(b)를 참조하여, 본 발명의 일실시예에 따른 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치 및 방법을를 더욱 구체적으로 설명한다. Hereinafter, an apparatus and method for setting input values of a user interface capable of pressure sensing according to an embodiment of the present invention will be described in more detail with reference to FIGS. 4 (a) to 5 (b).

터치/압력감지부(120)는 정전용량 압력 방식의 디스플레이(110) 상에 물체가 터치되어 압력을 가하는 경우 상기 터치 및 압력을 감지하고(S110), 상기 터치의 지속시간에 기초하여 입력모드를 작동시킨다(S120). 즉, 사용자가 최초 터치에서 약간의 대기시간을 기다리면 입력값 설정하기 위한 입력모드가 활성된다.  The touch / pressure sensing unit 120 senses the touch and pressure when an object is touched and pressed on the display 110 of the capacitive pressure type (S110). Then, based on the duration of the touch, (S120). That is, when the user waits for a certain waiting time in the initial touch, the input mode for setting the input value is activated.

입력설정부(130)는 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 상기 입력모드를 작동시킨다. 본 실시예에서는, 도 4(b)에서 도시한 바와 같이 상기 기준시간범위를 05. ~ 1초로 설정하였다. The input setting unit 130 activates the input mode when the touch is continued for a predetermined reference time range. In this embodiment, as shown in Fig. 4 (b), the reference time range is set to 05.about.1 second.

제어부(140)는 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 사용자에게 시각 또는 청각적으로 상기 입력모드의 작동 상태를 표시하도록 상기 디스플레이를 제어하고, 또한 상기 압력의 크기에 따라 입력값을 가변하는 경우, 사용자에게 시각 또는 청각적으로 상기 가변되는 입력값을 표시하도록 상기 디스플레이를 제어하는 것이 가능하다. 도 4(c)를 참조하면, 4(b)에 도시된 터치 영역보다 더 넓은 영역에서 사용자가 압력을 가하고 있으며 가해진 압력이 가변하는 경우 그 가변 정도가 도시되어 있다. 즉, 사용자는 손가락을 떼지 않은 상태에서 원하는 정도의 값으로 압력을 가함으로써, 자유롭게 압력을 증가하거나 감소시킬 수 있다.The control unit 140 controls the display to visually or audibly indicate the operating state of the input mode when the touch is continued for a predetermined reference time range, It is possible to control the display to visually or audibly display the variable input value to the user. Referring to FIG. 4 (c), when the user applies pressure to a region wider than the touch region shown in FIG. 4 (b) and the applied pressure varies, the degree of variation is shown. That is, the user can freely increase or decrease the pressure by applying pressure to a desired value without releasing the finger.

도 5(b)에 도시된 바와 같이, 입력값 확정 단계에서도 입력설정부(130)는 상기 압력 해제 시간이 기설정된 기준시간 보다 짧은 경우, 상기 압력의 해제 동작 시작 전 입력값을 최종값으로 확정한다(S160). 그러나 입력설정부(130)는 상기 압력 해제 시간이 기설정된 기준시간 보다 긴 경우에는 입력값을 취소한다(S170). As shown in FIG. 5 (b), when the pressure release time is shorter than the predetermined reference time, the input setting unit 130 also determines the input value before the pressure release operation is finalized (S160). However, if the pressure release time is longer than the preset reference time, the input setting unit 130 cancels the input value (S170).

사용자가 손가락을 빠르게 떼면(Quick Release), 입력모드에서 빠져 나와 일반 모드가 된다. 사용자가 손가락을 천천히 떼면, 입력설정부(130)는 입력값을 0 또는 이전 설정값으로 확정한다. 그리고 입력모드는 일반모드, 즉 입력모드로 작동할 당시의 모드로 되돌아간다. When the user releases the finger quickly (Quick Release), the user exits the input mode and enters the normal mode. When the user slowly releases the finger, the input setting unit 130 sets the input value to 0 or a previous setting value. Then, the input mode returns to the normal mode, that is, the mode at the time of operation in the input mode.

더욱 상세히 설명하면, 압력으로 입력값을 설정하기 위해서는 손가락으로 누르는 힘의 변화를 인지하여 어느 정도의 압력으로 누르는지 계속 확인하여야 한다. 압력으로 입력값을 설정하다 확정하기 위해서 손가락을 떼면 압력이 줄어들어 어느 값으로 확정하려고 의도했는지 알 수 없게 된다. 따라서 빠르게 손가락을 떼면 압력이 급격히 줄어들어 0이 되게 되는데 이렇게 급격히 줄기 바로전 압력을 입력값으로 인지하도록 한다. More specifically, in order to set the input value by the pressure, it is necessary to recognize the change in the force applied by the finger and continuously check to what degree the pressure is applied. Setting the input with pressure When you release your finger to confirm, the pressure will decrease and you will not know which value you intend to confirm. Therefore, when the finger is released quickly, the pressure decreases sharply to become 0, so the pressure immediately before the stem is recognized as the input value.

입력설정부(130)는 입력값 수정 시, 기 설정된 입력값을 초기화하는 것이 바람직하다. 본 실시예에서는, 이미 설정한 입력값을 다시 수정하고 싶을 때 입력모드로 들어가게 되면 마지막으로 설정된 입력값을 기준으로 다시 설정할 수 있는 것이 아니라 초기부터 다시 압력의 크기에 따라 입력값을 설정을 하도록 했기 때문에, 매번 초기화 돼도 상관없는 입력값 설정에 사용하는 것이 바람직하다.
The input setting unit 130 preferably initializes a predetermined input value when the input value is modified. In this embodiment, when the input value is set to the input mode when it is desired to modify the input value that has already been set, the input value is set according to the pressure amount again from the beginning, Therefore, it is preferable to use it for setting an input value irrespective of initialization.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다. 또한, 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구항들을 결합하여 실시예를 구성하거나 출원 후의 보정에 의해 새로운 청구항으로 포함시킬 수 있다.It will be apparent to those skilled in the art that various modifications, substitutions and substitutions are possible, without departing from the scope and spirit of the invention as disclosed in the accompanying claims. will be. Therefore, the embodiments disclosed in the present invention and the accompanying drawings are intended to illustrate and not to limit the technical spirit of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments and the accompanying drawings . The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention. In addition, claims that do not have an explicit citation in the claims may be combined to form an embodiment or included in a new claim by amendment after the application.

110 : 디스플레이
120 : 터치/압력감지부
130 : 입력설정부
140 : 제어부
110: Display
120: touch / pressure sensing unit
130: Input setting unit
140:

Claims (14)

입력값 설정 방법에 있어서,
정전용량 압력 방식으로 물체에 의한 터치 및 압력을 감지하고, 상기 터치의 지속시간에 기초하여 입력모드를 작동시키는 단계;
상기 입력모드가 작동된 경우, 상기 압력의 크기에 따라 입력값을 가변하는 단계; 및
상기 압력의 해제 시, 압력 해제 시간에 따라 상기 입력값의 설정 여부를 확정하는 단계;
를 포함하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
In the input value setting method,
Sensing a touch and pressure by an object in a capacitive pressure manner, and operating an input mode based on the duration of the touch;
Varying an input value according to the magnitude of the pressure when the input mode is activated; And
Determining whether the input value is set according to the pressure release time when the pressure is released;
Wherein the pressure value of the pressure-sensitive user interface is set to a predetermined value.
제1항에 있어서,
상기 입력모드 작동단계에서는, 상기 터치가 기설정된 기준시간범위 동안 지속되는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
The method according to claim 1,
Wherein the touch operation is continued for a predetermined reference time range in the input mode operation step.
제2항에 있어서,
상기 입력모드 작동단계에서는, 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 사용자에게 시각 또는 청각적으로 상기 입력모드의 작동 상태가 표시되는 것으로 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
3. The method of claim 2,
Wherein the operation mode of the input mode is visually or audibly displayed when the touch is continued for a predetermined reference time range in the input mode operation step. Way.
제1항에 있어서,
상기 입력값 가변단계에서는, 상기 압력의 크기에 따라 입력값을 가변하는 경우, 사용자에게 시각 또는 청각적으로 상기 가변되는 입력값이 표시되는 것으로 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
The method according to claim 1,
Wherein the input value varying step displays the input value that varies visually or audibly to the user when the input value is varied according to the magnitude of the pressure. .
제1항에 있어서,
상기 설정 여부 확정단계에서는, 상기 압력 해제 시간이 기설정된 기준시간 보다 짧은 경우, 상기 압력의 해제 동작 시작 전 입력값이 최종값으로 확정되는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
The method according to claim 1,
Wherein when the pressure release time is shorter than a preset reference time, an input value before the start of the pressure release operation is determined as a final value in the setting confirmation step. .
제1항에 있어서,
상기 설정 여부 확정단계에서는, 상기 압력 해제 시간이 기설정된 기준시간 보다 긴 경우에는 입력값이 취소되는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
The method according to claim 1,
Wherein the input value is canceled when the pressure release time is longer than a preset reference time in the setting confirmation step.
제1항에 있어서,
상기 입력모드 변환단계는, 입력값 수정 시, 기 설정된 입력값을 초기화하는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 방법.
The method according to claim 1,
Wherein the input mode conversion step initializes a preset input value when an input value is modified.
입력값 설정 장치에 있어서,
정전용량 압력 방식의 디스플레이;
정전용량 압력 방식으로 상기 디스플레이 상의 물체에 의한 터치와, 상기 물체의 의하여 상기 디스플레이 상에 가해진 압력 및 상기 가해진 압력의 해제 시 압력 해제를 감지하는 터치/압력 감지부; 및
상기 터치의 지속시간에 기초하여 입력모드를 작동시키고, 상기 압력의 크기에 따라 입력값을 가변하고, 상기 압력의 해제 시 압력 해제 시간에 따라 상기 입력값의 설정 여부를 확정하는 입력설정부
를 포함하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
In the input value setting device,
A capacitive pressure display;
A touch / pressure sensing unit for sensing a touch by an object on the display in a capacitive pressure manner, a pressure applied on the display by the object, and a pressure release upon release of the applied pressure; And
An input setting unit for activating an input mode based on the duration of the touch, varying an input value according to the magnitude of the pressure, and determining whether to set the input value according to a pressure release time when releasing the pressure,
And an input value setting device of a pressure-sensitive user interface.
제8항에 있어서,
상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 사용자에게 시각 또는 청각적으로 상기 입력모드의 작동 상태를 표시하도록 상기 디스플레이를 제어하는 제어부를 더 포함하는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
9. The method of claim 8,
Further comprising a controller for controlling the display to visually or audibly display an operating state of the input mode when the touch has continued for a predetermined reference time range, Input value setting device.
제9항에 있어서,
상기 제어부는, 상기 압력의 크기에 따라 입력값을 가변하는 경우, 사용자에게 시각 또는 청각적으로 상기 가변되는 입력값을 표시하도록 상기 디스플레이를 제어하는 것으로 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
10. The method of claim 9,
Wherein the controller controls the display to visually or audibly display the variable input value when the input value is varied according to the magnitude of the pressure. Setting device.
제8항에 있어서,
상기 입력설정부는, 상기 터치가 기설정된 기준시간범위 동안 지속된 경우, 상기 입력모드를 작동시키는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
9. The method of claim 8,
Wherein the input setting unit activates the input mode when the touch is continued for a predetermined reference time range.
제8항에 있어서,
상기 입력설정부는, 상기 압력 해제 시간이 기설정된 기준시간 보다 짧은 경우, 상기 압력의 해제 동작 시작 전 입력값을 최종값으로 확정하는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
9. The method of claim 8,
Wherein the input setting unit determines an input value as a final value before starting the release operation of the pressure when the pressure release time is shorter than a predetermined reference time.
제8항에 있어서,
상기 입력설정부는, 상기 압력 해제 시간이 기설정된 기준시간 보다 긴 경우에는 입력값을 취소하는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
9. The method of claim 8,
Wherein the input setting unit cancels an input value when the pressure release time is longer than a preset reference time.
제8항에 있어서,
상기 입력설정부는, 입력값 수정 시, 기 설정된 입력값을 초기화하는 것을 특징으로 하는 압력감지가 가능한 사용자 인터페이스의 입력값 설정 장치.
9. The method of claim 8,
Wherein the input setting unit initializes a preset input value when the input value is modified.
KR1020140024134A 2014-02-28 2014-02-28 Apparatus for setting up input using pressure-detectable user interface, and Method thereof KR101602374B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140024134A KR101602374B1 (en) 2014-02-28 2014-02-28 Apparatus for setting up input using pressure-detectable user interface, and Method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140024134A KR101602374B1 (en) 2014-02-28 2014-02-28 Apparatus for setting up input using pressure-detectable user interface, and Method thereof

Publications (2)

Publication Number Publication Date
KR20150102359A true KR20150102359A (en) 2015-09-07
KR101602374B1 KR101602374B1 (en) 2016-03-10

Family

ID=54243141

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140024134A KR101602374B1 (en) 2014-02-28 2014-02-28 Apparatus for setting up input using pressure-detectable user interface, and Method thereof

Country Status (1)

Country Link
KR (1) KR101602374B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10671273B2 (en) 2016-07-04 2020-06-02 Samsung Electronics Co., Ltd Method for controlling user interface according to handwriting input and electronic device for implementing the same
US11327595B2 (en) 2016-09-05 2022-05-10 Samsung Electronics Co., Ltd. Electronic device and method for controlling motion

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130051097A (en) * 2011-11-09 2013-05-20 삼성전자주식회사 Providing method for touch functions and system, touch pen supporting the same
KR20140013868A (en) * 2012-07-26 2014-02-05 구글 인코포레이티드 Recognizing gesture on tactile input device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130051097A (en) * 2011-11-09 2013-05-20 삼성전자주식회사 Providing method for touch functions and system, touch pen supporting the same
KR20140013868A (en) * 2012-07-26 2014-02-05 구글 인코포레이티드 Recognizing gesture on tactile input device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10671273B2 (en) 2016-07-04 2020-06-02 Samsung Electronics Co., Ltd Method for controlling user interface according to handwriting input and electronic device for implementing the same
US11327595B2 (en) 2016-09-05 2022-05-10 Samsung Electronics Co., Ltd. Electronic device and method for controlling motion

Also Published As

Publication number Publication date
KR101602374B1 (en) 2016-03-10

Similar Documents

Publication Publication Date Title
KR102357866B1 (en) Recognizing gesture on tactile input device
KR101262624B1 (en) User inputs of a touch-sensitive device
TWI528228B (en) Touch-sensitive depressible button and method, computer readable storage medium, and computing system for the same
TWI608407B (en) Touch device and control method thereof
TWI478015B (en) Method for controlling electronic apparatus and apparatus and computer program product using the method
US9696849B1 (en) Method and system for trackpad input error mitigation
JP2010211399A (en) Information processor, threshold setting method, and its program
US9201587B2 (en) Portable device and operation method thereof
KR101833281B1 (en) Method and apparatus preventing malfunction of touchpad in electronic device
Ikematsu et al. LightTouch Gadgets: Extending Interactions on Capacitive Touchscreens by Converting Light Emission to Touch Inputs
KR101602374B1 (en) Apparatus for setting up input using pressure-detectable user interface, and Method thereof
US20150153925A1 (en) Method for operating gestures and method for calling cursor
US9696793B2 (en) Systems and methods for selectably suppressing computing input events triggered by variable pressure and variable displacement sensors
KR20140067861A (en) Method and apparatus for sliding objects across touch-screen display
KR20110075700A (en) Apparatus and method for touch interfacing by using z value
KR20150111651A (en) Control method of favorites mode and device including touch screen performing the same
WO2016070465A1 (en) Method and terminal for multi-event input
KR101468970B1 (en) Method and apparatus for sliding objects across a touch-screen display
KR101018459B1 (en) complex-type button device for touch sensing possibility
US20130300685A1 (en) Operation method of touch panel
KR101706909B1 (en) Finger Input Devices
TWI475469B (en) Portable electronic device with a touch-sensitive display and navigation device and method
KR20150102364A (en) Apparatus for controlling pressure-detectable User Interface based on a single touch, and Method thereof
US20130154967A1 (en) Electronic device and touch control method thereof
KR20120079929A (en) Method for inputting touch screen, device for the same, and user terminal comprising the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190218

Year of fee payment: 4