KR101496017B1 - Touch screen controlling method in mobile device, and mobile device threof - Google Patents

Touch screen controlling method in mobile device, and mobile device threof Download PDF

Info

Publication number
KR101496017B1
KR101496017B1 KR20130088836A KR20130088836A KR101496017B1 KR 101496017 B1 KR101496017 B1 KR 101496017B1 KR 20130088836 A KR20130088836 A KR 20130088836A KR 20130088836 A KR20130088836 A KR 20130088836A KR 101496017 B1 KR101496017 B1 KR 101496017B1
Authority
KR
South Korea
Prior art keywords
force
touch screen
state
vertical force
touch
Prior art date
Application number
KR20130088836A
Other languages
Korean (ko)
Other versions
KR20150014040A (en
Inventor
이기혁
허성국
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR20130088836A priority Critical patent/KR101496017B1/en
Publication of KR20150014040A publication Critical patent/KR20150014040A/en
Application granted granted Critical
Publication of KR101496017B1 publication Critical patent/KR101496017B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers

Abstract

본 발명의 실시예는 휴대 기기에서의 터치 스크린 제어 방법과 그 휴대 기기에 관한 것이다. 실시예에 따른 터치 스크린 제어 방법에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계; 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 단계; 수직 힘의 크기가 누름 임계값보다 큰 지점을 시작 좌표로 저장하는 단계; 수직 힘의 크기가 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장하는 단계; 및 시작 좌표 및 최종 좌표를 이용하여 힘 벡터를 계산하는 단계를 포함하는 터치 스크린 제어 방법이 제공될 수 있다.An embodiment of the present invention relates to a method of controlling a touch screen in a portable device and a portable device. A method of controlling a touch screen according to an exemplary embodiment of the present invention includes sensing and measuring a vertical force on a touch screen; Comparing the magnitude of the vertical force with a predetermined push threshold value; Storing a point at which a magnitude of the vertical force is greater than a push threshold as a start coordinate; Storing the moved last point as final coordinates while maintaining the magnitude of the vertical force greater than the push threshold; And calculating a force vector using the start coordinates and the final coordinates.

Figure R1020130088836
Figure R1020130088836

Description

휴대 기기에서의 터치 스크린 제어 방법 및 그 휴대 기기{TOUCH SCREEN CONTROLLING METHOD IN MOBILE DEVICE, AND MOBILE DEVICE THREOF}TECHNICAL FIELD [0001] The present invention relates to a touch screen control method for a mobile device,

본 발명의 실시예는 휴대 기기에서의 터치 스크린 제어 방법과 그 휴대 기기에 관한 것이다.An embodiment of the present invention relates to a method of controlling a touch screen in a portable device and a portable device.

휴대 기기의 성능 개선과 스마트폰 운영체제의 대중화에 의해 게임이나 악기 연주 등의 다양한 응용 프로그램들이 활발하게 개발되고 있으며, 많은 응용 프로그램에 대하여 유연한 입력을 제공하기 위한 터치 스크린이 많은 수의 휴대 기기에 탑재되고 있다. 또한, 터치 스크린 조작을 위한 펜을 꺼내는 불편함이 없도록 손가락을 이용하여 조작하도록 설계한 휴대 기기가 다수 개발되고 있다.Various application programs such as game and musical instrument playing are being actively developed due to the improvement of the performance of the mobile device and the popularization of the smartphone operating system, and a touch screen for providing flexible input for many application programs is mounted on a large number of mobile devices . In addition, many portable devices designed to operate with fingers so as to avoid the inconvenience of pulling out the pen for touch screen operation have been developed.

이와 같이, 손가락을 이용하여 조작하도록 설계된 휴대 기기의 경우 화면을 조작할 때 손가락과 화면이 닿는 위치에 대한 정보만을 얻고 활용할 수 있어 조작의 자유도가 제한되는 문제가 존재한다. 또한, 터치 제스처의 경우 동일한 움직임에 매핑될 수 있는 동작이 여러 개가 존재할 경우, 여러 손가락을 사용하는 등의 방법으로 구분해야 하나, 이런 방법으로 구분하는 것은 직관적이지 않아 사용자가 암기하는 데 있어 어려움이 있다.As described above, in the case of a portable device designed to be operated by a finger, information on the position where the finger touches the screen can be obtained and utilized when the screen is operated, thereby limiting the degree of freedom of operation. In addition, in the case of a touch gesture, when there are a plurality of motions that can be mapped to the same motion, it is necessary to use different fingers or the like, but it is not intuitive to distinguish in this way, have.

최근 터치 스크린 기반의 휴대 기기에서의 조작을 더 다양하게 하기 위하여 누르는 압력을 측정할 수 있는 터치 스크린(미국 특허 US20110084910 A1) 이나 터치 면적을 사용하려는 시도(Boring, S. 2012) 등이 활발하게 진행되고 있다.Recently, a touch screen (U.S. Patent No. US200110084910 A1) or an attempt to use a touch area (Boring, S. 2012) capable of measuring a pressing pressure has been actively performed in order to further manipulate a portable device based on a touch screen .

가속도 센서를 이용해 화면을 터치하는 힘을 추정하는 방법(Heo, S. & Lee, G., 2011b, 한국등록특허: 10-1173400), 터치 스크린의 주변에 압력 센서를 부착하여 수평 힘을 측정하고 사용하고자 하는 연구(Heo, S. & Lee, G., 2011a, 한국등록특허: 10-1177650)에 대해서도 발표되었다.(Heo, S. & Lee, G., 2011b, Korea Patent Registration No. 10-1173400), a method of measuring the horizontal force by attaching a pressure sensor to the periphery of the touch screen (Heo, S. & Lee, G., 2011a, Korean Patent Registration No. 10-1177650).

본 발명의 실시예는 기존 터치 스크린 장치의 입력 자유도를 높이기 위한 것으로, 터치 스크린의 표면을 통해 전달되는 수평 힘을 센서를 이용하여 측정하기 때문에 한 지점에서의 터치 힘만을 측정할 수 있다는 문제점을 해결하여 수평 힘을 압력 센서를 이용하여 측정하는 것이 아니라, 손가락으로 수평 힘을 가할 때 손가락이 변형되는 속성 때문에 발생하는 터치 지점의 이동 패턴을 활용하여 수평 힘을 추정함으로써 여러 터치 지점에서의 개별적인 수평 힘 추정을 가능하도록 하는 방법과 그 시스템을 제공하고자 한다.An embodiment of the present invention is to increase the degree of freedom of input of an existing touch screen device. Since the horizontal force transmitted through the surface of the touch screen is measured using a sensor, only a touch force at one point can be measured The horizontal force is estimated by utilizing the movement pattern of the touch point generated due to the property that the finger is deformed when the horizontal force is applied to the finger by using the horizontal force, And to provide a system and method for enabling estimation.

실시예에 따른 터치 스크린 제어 방법에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계; 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 단계; 및 수직 힘의 크기가 누름 임계값보다 작은 경우, 현재 상태를 터치됨 상태로 전이하고, 터치 조작을 수행하는 단계를 포함하는 터치 스크린 제어 방법이 제공될 수 있다.A method of controlling a touch screen according to an exemplary embodiment of the present invention includes sensing and measuring a vertical force on a touch screen; Comparing the magnitude of the vertical force with a predetermined push threshold value; And when the magnitude of the vertical force is smaller than the push threshold, transitioning the current state to the touch state and performing a touch operation may be provided.

일측에 있어서, 수직 힘의 크기가 누름 임계값보다 크거나 같은 경우, 현재 상태가 드래그 상태인지 판단하는 제1 판단 단계; 및 제1 판단의 결과 현재 상태가 드래그 상태인 경우, 드래그 조작을 수행하는 단계를 더 포함할 수 있다.A first judging step of judging whether the current state is the drag state, when the magnitude of the vertical force is greater than or equal to the push threshold value; And performing a drag operation when the current state is a drag state as a result of the first determination.

또 다른 측면에 있어서, 현재 상태가 드래그 상태가 아닌 경우, 현재 상태가 수평 힘 상태인지 판단하는 제2 판단 단계; 및 제2 판단의 결과 현재 상태가 수평 힘 상태인 경우, 수평 힘 조작을 수행하는 단계를 더 포함할 수 있다.In another aspect, a second determination step of determining whether a current state is a horizontal force state when the current state is not a drag state; And performing horizontal force manipulation when the current state is a horizontal force state as a result of the second determination.

또 다른 측면에 있어서, 현재 상태가 수평 힘 상태가 아닌 경우, 현재 상태가 눌러짐 상태인지 판단하는 제3 판단 단계; 및 제3 판단의 결과 현재 상태가 눌러짐 상태가 아닌 경우, 현재의 터치 지점을 시작점으로 저장하고, 현재 상태를 눌러짐 상태로 변경하는 단계를 더 포함할 수 있다.According to a further aspect, there is provided a method for controlling a vehicle, comprising: a third determination step of determining whether a current state is a pressed state when the current state is not a horizontal force state; And if the current state is not the pressed state as a result of the third determination, storing the current touch point as the starting point and changing the current state to the load state by pressing the current state.

또 다른 측면에 있어서, 제3 판단의 결과 현재 상태가 눌러짐 상태인 경우, 시작점으로부터의 이동 거리 및 거리 임계값을 비교하는 단계; 시작점으로부터의 이동 속도 및 속도 임계값을 비교하는 단계; 시작점으로부터의 이동 속도가 속도 임계값보다 작거나 같은 경우, 현재 상태를 수평 힘 상태로 변경하고, 수평 힘 조작을 수행하는 단계를 더 포함할 수 있다.In yet another aspect, there is provided a method comprising: comparing a distance traveled from a starting point and a distance threshold when a current state is a pressed state as a result of a third determination; Comparing the moving speed and the speed threshold from the starting point; Changing the current state to a horizontal force state and performing a horizontal force operation when the moving speed from the starting point is less than or equal to the speed threshold value.

또 다른 측면에 있어서, 시작점으로부터의 이동 속도가 속도 임계값보다 큰 경우, 현재 상태를 드래그 상태로 변경하고, 드래그 조작을 수행하는 단계를 더 포함할 수 있다.In another aspect, the method may further include changing the current state to the drag state and performing a drag operation when the movement speed from the start point is greater than the speed threshold value.

또 다른 측면에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는, 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하는 힘 추정 방법 및 수직 힘에 의한 터치 영역의 너비를 이용하는 힘 추정 방법 중 적어도 하나를 이용하여 수직 힘을 측정하는 단계를 포함할 수 있다.In yet another aspect, sensing and measuring the vertical force on the touch screen comprises at least one of a force estimation method using a plurality of force sensors included in the touch screen and a force estimation method using a width of the touch area with a vertical force And measuring the vertical force using the vertical force.

또 다른 측면에 있어서, 드래그 조작 및 수평 힘 조작 중, 수직 힘이 누름 임계값 이하가 되는 경우, 현재 상태를 상기 터치됨 상태로 변경하는 단계를 더 포함할 수 있다.In another aspect, the method may further include changing the current state to the touched state when the vertical force becomes equal to or less than the push threshold during the drag operation and the horizontal force operation.

실시예에 따른 터치 스크린 제어 방법에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계; 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 단계; 수직 힘의 크기가 누름 임계값보다 큰 지점을 시작 좌표로 저장하는 단계; 수직 힘의 크기가 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장하는 단계; 및 시작 좌표 및 최종 좌표를 이용하여 힘 벡터를 계산하는 단계를 포함하는 터치 스크린 제어 방법이 제공될 수 있다.A method of controlling a touch screen according to an exemplary embodiment of the present invention includes sensing and measuring a vertical force on a touch screen; Comparing the magnitude of the vertical force with a predetermined push threshold value; Storing a point at which a magnitude of the vertical force is greater than a push threshold as a start coordinate; Storing the moved last point as final coordinates while maintaining the magnitude of the vertical force greater than the push threshold; And calculating a force vector using the start coordinates and the final coordinates.

일측에 있어서, 힘 벡터를 이용하여 미리 정해진 처리를 수행하는 단계를 더 포함할 수 있다.In one aspect, the method may further include performing a predetermined process using the force vector.

또 다른 측면에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는, 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하여 수직 힘을 측정하는 단계를 포함할 수 있다.In another aspect, sensing and measuring the vertical force on the touch screen may include measuring a vertical force using a plurality of force sensors included in the touch screen.

또 다른 측면에 있어서, 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는, 수직 힘에 의한 터치 영역의 너비를 이용하여 수직 힘을 측정하는 단계를 포함할 수 있다.In another aspect, sensing and measuring the vertical force on the touch screen may include measuring the vertical force using the width of the touch region by the vertical force.

본 발명의 실시예를 통해 터치 스크린을 구비한 휴대 기기 등에서 터치 스크린을 마찰력으로 미는 힘을 측정할 수 있게 함으로써, 기존의 터치 스크린에서 터치 지점만을 측정할 수 있었던 것에 비해 터치 지점에 힘 벡터를 측정할 수 있으므로 입력의 자유도를 향상시킬 수 있는 효과가 나타난다.In the embodiment of the present invention, by measuring the pressing force of the touch screen with a friction force in a portable device having a touch screen or the like, only the touch point can be measured in the conventional touch screen, The degree of freedom of input can be improved.

이러한 특성은 3차원 컨텐츠의 조작 등 높은 자유도의 입력이 필요한 응용 프로그램에서 모드 전환이나 버튼의 추가 없이도 쉽게 3차원 컨텐츠를 조작하도록 할 수 있다.This characteristic allows an application program requiring a high degree of freedom input, such as manipulation of three-dimensional content, to easily manipulate three-dimensional content without mode switching or button addition.

또한, 여러 지점에서의 수평 힘을 사용할 수 있어 기존의 수평 힘 사용 제스처보다 더 다양한 제스처의 사용이 가능하다.In addition, horizontal forces at various points can be used, allowing the use of a wider range of gestures than conventional horizontal force using gestures.

본 발명은 터치 스크린에서 터치 제스처를 사용할 때, 동일한 위치 이동이 있는 터치 제스처는 동일한 동작에만 매핑할 수 있었던 기존의 터치 스크린과 달리, 동일한 위치 이동이라도 화면에 가한 힘에 따라 마찰력이 달라지고 이에 의하여 화면이 측면으로 밀리는 정도를 구분하여 다른 동작으로 사용할 수 있다. 즉, 힘을 조절해서 물체를 조작하는 것은 자연스러운 동작이므로, 본 발명을 활용하면 직관적인 방법으로 터치 제스처를 다양화할 수 있다.In the present invention, when a touch gesture is used in a touch screen, a touch gesture having the same position movement can be mapped only to the same operation. Unlike the conventional touch screen, the same force is applied to the screen, You can use different actions to differentiate the degree to which the screen is pushed to the side. That is, since it is a natural operation to operate an object by adjusting the force, the present invention can diversify the touch gesture in an intuitive manner.

이에 더불어, 수평 방향의 힘 측정을 위하여 터치 스크린 주위에 압력 센서를 추가할 필요가 없으므로 제품의 제작 단가를 줄일 수 있는 장점이 있다.In addition, there is no need to add a pressure sensor around the touch screen to measure force in the horizontal direction, which can reduce the manufacturing cost of the product.

도 1은 본 발명의 일실시예에 있어서, 터치 스크린 표면에 수평 힘을 가할 때 손가락이 기울어지는 현상을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 있어서, 터치 스크린을 제어하는 방법에 대해 설명하기 위한 흐름도이다.
도 3은 본 발명의 일실시예에 있어서, 터치 위치의 중심 이동을 도식화한 것이다.
도 4는 본 발명의 일실시예에 있어서, 수평 힘의 정도와 터치 지점의 이동에 따른 상태 다이어그램을 도시한 것이다.
도 5는 본 발명의 일실시예에 있어서, 상태를 구분하고 터치 이벤트를 처리하는 과정을 설명하기 위한 흐름도이다.
도 6과 도 7은 본 발명의 일실시예에 있어서, 수평 힘 조작 구분을 위한 누름 인식 방법의 실시예를 나타낸 도면이다.
도 8은 본 발명의 일실시예에 있어서, 누름 상태 인식 방법 중 터치 영역의 너비를 이용하는 방법을 설명하기 위한 도면이다.
도 9는 본 발명의 일실시예에 있어서, 수평 힘을 이용하여 객체를 조작하는 실시예를 설명하기 위한 도면이다.
도 10은 본 발명의 일실시예에 있어서, 수평 힘을 이용하여 지도를 이동시키는 실시예를 나타낸 도면이다.
도 11은 본 발명의 일실시예에 있어서, 싱글 및 멀티 터치에서의 수평 힘 시각화 방법에 대해 설명하기 위한 도면이다.
1 is a view for explaining a phenomenon in which a finger tilts when a horizontal force is applied to a surface of a touch screen in an embodiment of the present invention.
2 is a flowchart illustrating a method of controlling a touch screen according to an exemplary embodiment of the present invention.
FIG. 3 schematically illustrates movement of a center of a touch position in an embodiment of the present invention.
FIG. 4 illustrates a state diagram according to the degree of the horizontal force and the movement of the touch point in an embodiment of the present invention.
5 is a flowchart illustrating a process of classifying states and processing a touch event according to an exemplary embodiment of the present invention.
FIGS. 6 and 7 illustrate an embodiment of a push recognition method for horizontal force manipulation in an embodiment of the present invention.
8 is a diagram for explaining a method of using the width of the touch area in the pushing state recognizing method according to an embodiment of the present invention.
9 is a diagram for explaining an embodiment of operating an object using a horizontal force in an embodiment of the present invention.
10 is a view showing an embodiment in which a map is moved using a horizontal force in an embodiment of the present invention.
11 is a diagram for explaining a horizontal force visualization method in single and multi-touch in one embodiment of the present invention.

이하, 터치 스크린 제어 방법과 시스템에 대해서 첨부된 도면을 참조하여 자세히 설명하도록 한다.Hereinafter, the touch screen control method and system will be described in detail with reference to the accompanying drawings.

본 발명의 실시예는 휴대 기기 등의 터치 스크린을 수평으로 미는 힘을 추정하는 방법에 관한 것으로 자세하게는 손가락으로 조작하는 터치 스크린을 수직 및 수평 방향으로 밀 때의 힘을 터치 스크린 아래의 압력 센서 또는 터치 영역의 크기를 이용하여 추정하고 터치 스크린으로부터 얻어진 터치 좌표의 움직임과 조합하여 수평 힘을 추정하여 이를 이용하는 방법에 관한 것이다.The present invention relates to a method for estimating a force of horizontally pushing a touch screen of a portable device or the like. More specifically, a force applied when a touch screen operated by a finger is vertically and horizontally pressed is detected by a pressure sensor A method of estimating a horizontal force by using a size of a touch region and combining the movement of a touch coordinate obtained from a touch screen and using the estimated horizontal force.

도 1은 본 발명의 일실시예에 있어서, 터치 스크린 표면에 수평 힘을 가할 때 손가락이 기울어지는 현상을 설명하기 위한 도면이다.1 is a view for explaining a phenomenon in which a finger tilts when a horizontal force is applied to a surface of a touch screen in an embodiment of the present invention.

도시된 바와 같이, 수평 힘을 가하기 위해서는 손가락의 미끄러짐을 방지하기 위하여 수직 방향으로 누르는 힘이 베이스가 되어야 한다. 수직 힘을 가하면서 동시에 수평 힘을 가하는 것과 같은 방향으로 기울어지게 된다. 이 때문에 손가락과 터치 스크린의 표면이 닿은 영역의 중심은 수평 힘을 가하는 방향으로 이동하게 된다. 다시 설명하면, 수평 힘을 가하기 전의 터치 지점의 중심(101)에서 수평 힘을 가할 때의 터치 지점의 중심(102)로 터치 지점의 중심이 이동할 수 있다.As shown, in order to apply the horizontal force, the force pressing in the vertical direction must be the base in order to prevent slipping of the finger. It tilts in the same direction as applying horizontal force while simultaneously applying vertical force. Therefore, the center of the area where the finger touches the surface of the touch screen moves in the direction of applying the horizontal force. In other words, the center of the touch point can move to the center 102 of the touch point when the horizontal force is applied at the center 101 of the touch point before applying the horizontal force.

본 발명에서는 이를 이용하여 터치 위치의 중심 이동으로부터 수평 힘을 추정하는 방법을 제안한다. 이때, 터치 위치의 이동이 수평 힘을 가한 결과로 나타나는 것인지, 단순한 터치 위치의 이동인지를 구분하기 위해서 수직 힘을 이용할 수 있다. 수직 힘이 가해진 상황에서 발생한 터치 지점의 이동은 수평 힘에 의한 이동으로 가정하고 계산할 수 있다.In the present invention, a method of estimating the horizontal force from the center shift of the touch position is proposed. At this time, a vertical force can be used to distinguish whether the movement of the touch position is a result of applying a horizontal force or a simple movement of the touch position. The movement of the touch point that occurs in a situation where a vertical force is applied can be calculated assuming a movement by a horizontal force.

도 2는 본 발명의 일실시예에 있어서, 터치 스크린을 제어하는 방법에 대해 설명하기 위한 흐름도이다. 자세히는 터치 스크린에서 수평 힘을 감지하는 방법에 관한 것이다.2 is a flowchart illustrating a method of controlling a touch screen according to an exemplary embodiment of the present invention. More specifically, the present invention relates to a method of sensing a horizontal force on a touch screen.

단계(210)에서는 터치 스크린에서 수직 힘을 감지하고, 이를 측정할 수 있다. 이때, 터치 스크린에서 수직 힘을 감지하고 측정하는 방법으로 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하여 수직 힘을 측정하거나, 수직 힘에 의한 터치 영역의 너비를 이용하여 수직 힘을 측정할 수 있다.In step 210, a vertical force can be sensed on the touch screen and measured. In this case, the vertical force may be measured using a plurality of force sensors included in the touch screen, or the vertical force may be measured using the width of the touch area by the vertical force .

단계(220)에서는 수직 힘의 크기를 미리 정해진 누름 임계값과 비교할 수 있다. 누름 임계값은 미리 정해져 고정되어 있는 값이거나 사용자 마다 다르게 나타날 수 있는 터치 강도에 따라 사용자에 의해 설정되는 값이 될 수 있다.In step 220, the magnitude of the vertical force may be compared to a predetermined push threshold value. The threshold value to be pressed may be a predetermined fixed value or a value set by the user depending on the touch intensity which may be different for each user.

그리고 단계(230)에서는 수직 힘의 크기가 누름 임계값보다 큰 지점을 시작 좌표로 저장할 수 있다. 시작 좌표는 수직 힘이 가해진 지점에서 수평 힘이 가해질 때에 그 시작점 및 시작 점으로부터의 방향과 크기를 계산하기 위해 지정한다.In step 230, a point where the magnitude of the vertical force is greater than the push threshold value may be stored as the start coordinates. The starting coordinates are specified to calculate the direction and magnitude from the starting point and starting point when a horizontal force is applied at the point where the vertical force is applied.

단계(240)에서는 수직 힘의 크기가 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장할 수 있다.In step 240, the last point moved may be stored as final coordinates while the magnitude of the vertical force is maintained at a value larger than the push threshold value.

따라서, 단계(250)에서는 시작 좌표 및 최종 좌표를 이용하여 힘 벡터를 계산할 수 있다. 힘 벡터는 수평 힘의 크기와 방향에 대한 정보를 포함하는 것이다.Thus, in step 250, the force vector may be calculated using the starting coordinates and the final coordinates. The force vector contains information about the magnitude and direction of the horizontal force.

또한, 계산된 힘 벡터에 따라 미리 프로세스된 동작을 수행하는 단계를 더 포함할 수 있다. 실시예에 있어서, 수평 힘의 힘 벡터에 따라 화면을 이동하거나 줌 조절을 하는 등의 동작 수행이 가능하다.The method may further include performing a pre-processed operation according to the calculated force vector. In the embodiment, it is possible to perform an operation such as moving the screen or zooming according to the force vector of the horizontal force.

도 3은 본 발명의 일실시예에 있어서, 터치 위치의 중심 이동을 도식화한 것이다. 도 3에 도시된 바와 같은 터치 지점의 이동을 감지하여 도 2와 같은 수평 힘 감지 및 이에 따른 동작 방법을 수행할 수 있다.FIG. 3 schematically illustrates movement of a center of a touch position in an embodiment of the present invention. The movement of the touch point as shown in FIG. 3 may be sensed to detect the horizontal force as shown in FIG. 2 and to perform an operation method accordingly.

터치 스크린의 표면에 가해진 수직 힘의 크기가 누름 임계값을 넘는 시점에서의 터치 위치를 시작 좌표(x1, y1)으로 나타내고, 해당 시작 좌표에서의 수직 힘의 크기가 누름 임계값 이상으로 유지되는 상황에서 터치 위치가 최종 좌표(x2, y2)로 이동하였을 때, 이동한 위치를 이용하여 힘 벡터를 계산할 수 있다.The touch position at the time point when the magnitude of the vertical force applied to the surface of the touch screen exceeds the push threshold is represented by the start coordinates (x1, y1), and the magnitude of the vertical force at the start coordinates is maintained above the push threshold The force vector can be calculated using the moved position when the touch position moves to the final coordinates (x2, y2).

계산된 힘 벡터는 (x2 - x1, y2 - y1)으로 표현할 수 있다. 또한, 상기 설명한 바와 같이 누름 임계값은 힘 센서를 사용하는 방법 및 터치 영역의 너비를 이용하는 방법에 따라 각각 다르게 지정될 수 있으며, 사용자의 기호에 따라 다르게 설정될 수 있다.The calculated force vector can be expressed as (x2 - x1, y2 - y1). Also, as described above, the push threshold value can be differently set according to the method of using the force sensor and the method of using the width of the touch area, and can be set differently according to the preference of the user.

도 4는 본 발명의 일실시예에 있어서, 수평 힘의 정도와 터치 지점의 이동에 따른 상태 다이어그램을 도시한 것이다. 여기서, 터치됨과 눌러짐, 드래그 및 수평 힘 상태는 터치 수직 힘의 강도, 터치 이동 속도 등에 따라 결정될 수 있다.FIG. 4 illustrates a state diagram according to the degree of the horizontal force and the movement of the touch point in an embodiment of the present invention. Here, the touched state, the depressed state, the drag state, and the horizontal force state can be determined according to the intensity of the touch vertical force, the touch movement speed, and the like.

처음, 손가락이나 터치 펜 등이 터치 스크린의 표면을 터치하면 “터치 떨어짐” 상태에서 “터치됨” 상태로 변경할 수 있다. 여기서 수직 힘을 누름 임계값 이상으로 가하게 되면 “눌러짐” 상태로 변경될 수 있다. “눌러짐” 상태에서 터치 지점이 이동할 때, 터치 지점의 이동 속도가 미리 정해져 있는 속도 임계값보다 높으면 “드래그” 상태로 판단하여 변경되고, 터치 지점의 이동 속도가 속도 임계값보다 낮거나 같으면 “눌러짐” 상태에서 “수평 힘” 상태로 변경될 수 있다. 터치 지점이 이동할 때 수직 힘의 크기가 계속 누름 임계값 이상으로 유지될 경우에 대해서 상태 변경이 가능할 수 있다.When touching the surface of the touch screen with a finger or a touch pen for the first time, it is possible to change from the " touch drop " state to the " touched " Here, when the vertical force is applied to the push threshold or more, the state can be changed to the " pressed " state. When the movement speed of the touch point is higher than a predetermined speed threshold value, it is judged as a " drag " state and the movement speed of the touch point is lower or equal to the speed threshold value when the touch point moves in the "Quot; push " state to the " horizontal force " state. The state change may be possible when the magnitude of the vertical force is maintained above the continuation push threshold when the touch point is moved.

“드래그” 상태에서의 터치 지점 이동은 일반적인 터치 위치 이동과는 다른, 마찰력이 존재하는 상황에서의 터치 이동을 의미하는 것으로, 기존의 터치 조작에 추가적인 조작으로 사용될 수 있다. 예컨대, 선택 영역을 넓히거나 좁힐 수 있으며, 터치 스크린 화면에 선을 긋는 등의 동작 수행이 가능하다. 또한, “수평 힘” 상태에서의 터치 이동은 도 3의 설명에 기재된 바와 같이, 수평 힘 벡터로 변환하여 이용될 수 있다. 예컨대, 수평 힘 방향과 수평 힘 크기를 고려하여 터치 스크린의 디스플레이 화면을 이동시키는 등의 동작 수행이 가능하다.The movement of the touch point in the " drag " state means a movement of the touch in a situation where there is a friction force, which is different from the general touch position movement, and can be used as an additional operation to the existing touch operation. For example, the selection area can be widened or narrowed, and an operation such as drawing a line on the touch screen screen can be performed. Further, the touch movement in the " horizontal force " state can be used by converting to a horizontal force vector, as described in the description of FIG. For example, it is possible to perform operations such as moving the display screen of the touch screen in consideration of horizontal force direction and horizontal force magnitude.

“드래그” 혹은 “수평 힘” 상태 동작 중 수직 힘이 누름 임계값 이하로 떨어지게 되면 “눌러짐” 상태를 해제하여 “터치됨” 상태로 변경될 수 있으며, “터치됨” 상태에서 수직 힘을 가하지 않아 터치 스크린이 수직 힘을 감지하지 않으면 “터치 떨어짐” 상태로 변경될 수 있다.If the vertical force falls below the push threshold during the "drag" or "horizontal force" state operation, the "pressed" state can be released to the "touched" state, and the vertical force If the touch screen does not detect vertical force, it can be changed to the "Touch Drop" state.

도 5는 본 발명의 일실시예에 있어서, 상태를 구분하고 터치 이벤트를 처리하는 과정을 설명하기 위한 흐름도이다. 실시예에 따른 방법은 터치와 관련된 데이터가 취득되었을 때, 현재 상태를 구분하고 터치와 관련된 이벤트를 처리하는 과정을 설명하기 위한 것이며, 도 4를 통해 설명한 상태 변경 다이어그램의 내용을 포함하고 있다.5 is a flowchart illustrating a process of classifying states and processing a touch event according to an exemplary embodiment of the present invention. The method according to an embodiment of the present invention is for describing a process of classifying a current state and processing an event related to a touch when data related to the touch is acquired, and includes the contents of the state change diagram described with reference to FIG.

먼저, 터치 스크린에 수직 힘이 입력되었는지 감지할 수 있다(501). 다시 말해, 터치가 입력되었는지 확인할 수 있다. 그리고 터치가 감지되면 해당 터치의 수직 힘을 계산할 수 있다(502). 계산된 수직 힘을 미리 정해져 있는 누름 임계값과 비교하여(503) 수직 힘이 누름 임계값보다 작으면 현재 상태를 “터치됨” 상태로 변경시킬 수 있으며(504), 터치 조작을 수행할 수 있다(505).First, it can be detected whether a vertical force is input to the touch screen (501). In other words, it is possible to confirm that the touch is inputted. When the touch is detected, the vertical force of the touch can be calculated (502). If the calculated vertical force is compared with a predefined push threshold value (503) and the vertical force is less than the push threshold value, the current state can be changed to the " touched " state (504) (505).

만약, 수직 힘이 누름 임계값보다 큰 경우엔 현재 상태가 “드래그” 상태인지 확인할 수 있으며(506), “드래그” 상태가 맞을 경우에 터치 스크린에 입력되는 드래그 동작을 수행할 수 있다(507).If the vertical force is greater than the pushing threshold, it can be checked whether the current state is a " drag " state (506) and a drag operation input to the touch screen when the " .

현재 상태가 “드래그” 상태가 아닌 경우, 계속 현재 상태에 대해서 탐색할 수 있다. 따라서 현재 상태가 “수평 힘” 상태인지 판단할 수 있으며(508), “수평 힘” 상태가 맞는 경우엔 터치 스크린에 조작되는 수평 힘 동작을 수행할 수 있다(509).If the current state is not a "drag" state, the current state can be continuously searched. Thus, it can be determined whether the current state is a " horizontal force " state (508) and a horizontal force operation is performed on the touch screen (509) if the " horizontal force "

만약, 현재 상태가 “수평 힘” 상태가 아닌 경우, 현재 상태가 “눌러짐” 상태인지 확인할 수 있으며(510), “눌러짐” 상태가 아닌 경우는 현재 수직 힘이 입력된 터치 지점을 터치 시작 점으로 저장할 수 있으며(517), 현재 상태를 “눌러짐” 상태로 변경할 수 있다.If the current state is not the " horizontal force " state, it can be determined whether the current state is the " pressed " state (510). If not, (517), and the current state can be changed to the " pressed " state.

단계(510)에서 현재 상태가 “눌러짐” 상태로 판단된 경우엔 터치 시작점을 기준으로 터치 지점의 이동 거리를 미리 설정되어 있는 거리 임계값과 비교하고(511), 이동 거리가 거리 임계값보다 짧은 경우 아무런 동작 수행 없이 다시 터치 지점을 판단할 수 있으며, 이동 거리가 거리 임계값보다 긴 경우엔 다시 터치 지점의 이동 속도를 미리 정해져 있는 속도 임계값과 비교할 수 있다(512). 이동 속도에 따라 상태를 변경하고 동작을 수행할 수 있다.If it is determined in step 510 that the current state is the " pressed " state, the movement distance of the touch point is compared with a previously set distance threshold value based on the touch start point (step 511) If the movement distance is shorter than the distance threshold value, the movement speed of the touch point may be compared with the predetermined speed threshold value (512). The state can be changed according to the moving speed and the operation can be performed.

만약, 이동 속도가 속도 임계값보다 작은 경우는 터치 위치에서 수평 힘을 가하고 있는 “수평 힘” 상태로 현재 상태를 변경할 수 있으며(513), 터치 스크린에서 감지되는 수평 힘에 따라 동작을 수행할 수 있다(514). 또한, 이동 속도가 속도 임계값보다 큰 경우는 “드래그” 상태로 현재 상태를 변경하고(515) 터치 스크린에 조작되는 드래그 동작을 수행할 수 있다(516).If the moving speed is less than the speed threshold, the current state can be changed to a " horizontal force " state in which the horizontal force is applied at the touch position (513), and the operation can be performed according to the horizontal force sensed by the touch screen (514). Also, if the movement speed is greater than the speed threshold, the current state may be changed to a " drag " state (515) and a drag operation may be performed on the touch screen (516).

도 6 내지 도 7은 본 발명의 일실시예에 있어서, 수평 힘 조작 구분을 위한 누름 인식 방법의 실시예를 나타낸 도면이다. 자세하게는 수평 힘 조작의 구분을 위한 터치 스크린의 터치 상태 인식 방법 중 압력 센서를 이용하는 방법을 구현하기 위한 실시예를 설명하기 위한 것이다.6 to 7 are views showing an embodiment of a push recognition method for horizontal force manipulation according to an embodiment of the present invention. And more particularly to an embodiment for implementing a method of using a pressure sensor in a touch state recognition method of a touch screen for classifying a horizontal force operation.

태블릿 PC나 스마트 폰 등의 휴대 기기(600)의 터치 스크린(601) 하단에 수직 힘의 크기를 감지할 수 있는 힘 센서(602)를 부착하여 터치 스크린(601)을 수직으로 누르는 힘을 감지하고 그 힘의 크기를 추정할 수 있다.A force sensor 602 capable of detecting the magnitude of vertical force is attached to the lower end of the touch screen 601 of the portable device 600 such as a tablet PC or a smart phone to sense the force pressing the touch screen 601 vertically The magnitude of the force can be estimated.

터치 스크린(601)을 누르는 힘은 구비되어 있는 네 개의 힘 센서(602)로부터 측정된 힘을 모두 더하여 계산하는 방법을 이용할 수 있다.The force pressing the touch screen 601 can be calculated by adding all of the measured forces from the four force sensors 602 provided.

도 8은 본 발명의 일실시예에 있어서, 누름 상태 인식 방법 중 터치 영역의 너비를 이용하는 방법을 설명하기 위한 도면이다. 자세하게는 수평 힘 조작 구분을 위한 누름 상태 인식 방법 중, 터치 영역의 너비를 이용하는 방법의 개념을 설명하기 위한 것이다.8 is a diagram for explaining a method of using the width of the touch area in the pushing state recognizing method according to an embodiment of the present invention. Specifically, the present invention is intended to explain the concept of a method of using the width of the touch area among the pressing state recognition methods for horizontal force operation classification.

손가락으로 터치 스크린(601)의 표면에 수직 힘을 가할 때, 터치 스크린이 수평 힘을 강하게 감지할수록 피부 표면이 눌리는 현상으로 인해 접촉된 영역도 도 8에 도시된 바와 같이 커지게 된다. 이러한 현상을 이용하면, 터치 영역의 너비를 이용하여 수직 힘의 크기를 추정할 수 있다. 터치 영역의 너비는 광학식 터치 인식 방법 및 정전 용량 방법 등의 터치 인식 방법을 이용함으로써 추가적인 하드웨어 없이 획득할 수 있다. 따라서, 해당 방법을 이용하게 되면 기존의 터치 스크린에서도 수직 힘의 측정이 가능하다.When a vertical force is applied to the surface of the touch screen 601 with a finger, the contact area is also increased as shown in FIG. 8 due to a phenomenon in which the surface of the skin is pressed as the touch screen strongly senses the horizontal force. Using this phenomenon, the magnitude of the vertical force can be estimated using the width of the touch region. The width of the touch area can be obtained without additional hardware by using a touch recognition method such as an optical touch recognition method and a capacitance method. Therefore, using this method, it is possible to measure the vertical force even in the conventional touch screen.

도 9는 본 발명의 일실시예에 있어서, 수평 힘을 이용하여 객체를 조작하는 실시예를 설명하기 위한 도면이다.9 is a diagram for explaining an embodiment of operating an object using a horizontal force in an embodiment of the present invention.

도시된 그래픽 객체(900)가 크기 조절이 가능한 것이라면, 그래픽 객체(900)를 손가락을 이용하여 터치한 상태에서 도시된 화살표 방향으로 수평 힘을 가하면, 그래픽 객체(900)가 화살표 방향으로 커지는 실시예가 나타날 수 있다. 이때, 그래픽 객체(900)는 매 프레임마다 수평 힘의 크기에 비례하여 크기가 조절되거나 크기가 변하는 속도가 제어될 수 있다.If the illustrated graphic object 900 is scalable, an embodiment in which the graphic object 900 is enlarged in the direction of the arrow when a horizontal force is applied in the direction of the arrow shown with the finger touching the graphic object 900, . At this time, the graphic object 900 can be controlled in size or size at every frame in proportion to the magnitude of the horizontal force.

또 다른 수평 힘의 조절에 따른 실시예에 대한 것으로, 도 10은 본 발명의 일실시예에 있어서, 수평 힘을 이용하여 지도를 이동시키는 실시예를 설명하기 위한 도면이다.FIG. 10 is a view for explaining an embodiment in which a horizontal force is used to move a map in an embodiment according to another horizontal force adjustment. FIG.

지도 어플리케이션의 실행 중에 지도 화면(1000)에 수평 힘을 가할 때, 수평 힘의 방향 및 수평 힘의 크기를 나타내는 시각 피드백(1001)이 표시되어 사용자가 수평 힘을 시각적으로 인지할 수 있도록 도울 수 있다.When applying a horizontal force to the map screen 1000 during execution of the map application, a visual feedback 1001 indicating the direction of the horizontal force and the magnitude of the horizontal force is displayed to help the user visually recognize the horizontal force .

수평 힘이 가해질 때, 지도 화면(1000)은 매 프레임마다 수평 힘 벡터의 반대 방향으로 수평 힘의 크기게 비례하여 연속적으로 이동할 수 있으며 따라서 손가락을 여러 번 터치하고 이동하는 과정 없이도 지도 화면(1000)에 디스플레이되는 지도를 이동시킬 수 있다.When the horizontal force is applied, the map screen 1000 can move continuously in proportion to the magnitude of the horizontal force in the opposite direction of the horizontal force vector every frame, and thus, without touching and moving the finger several times, The map displayed on the display screen can be moved.

도 11은 본 발명의 일실시예에 있어서, 싱글 및 멀티 터치에서의 수평 힘 시각화 방법에 대해 설명하기 위한 도면이다. 그림 (a)는 싱글 터치에 대한 핸들 시각화에 관하나 것이며, 그림 (b)는 멀티 터치에 대한 핸들 시각화의 예를 도시한 것이다.11 is a diagram for explaining a horizontal force visualization method in single and multi-touch in one embodiment of the present invention. Figure (a) shows the handle visualization for the single touch. Figure (b) shows an example of the handle visualization for the multi-touch.

그림 (a)나 그림 (b)와 같이 수평 힘이 가해지는 손가락의 터치 지점에 시각 피드백(1001)을 제공하기 위한 핸들이 표시될 수 있는데 상세하게는, 손가락의 터치 지점이 핸들을 표시하는 원의 중심이 위치하도록 핸들이 표시될 수 있다.A handle for providing a visual feedback 1001 may be displayed at a touch point of a finger to which a horizontal force is applied, as shown in FIG. 8A or FIG. 8B. Specifically, The handle may be displayed so that the center of the handle is positioned.

원과 함께 그려진 화살표의 길이 L은 힘 벡터의 크기에 따라 비례적으로 나타낼 수 있다. 즉, 힘 벡터가 크면 L의 길이가 길게 나타나며 힘 벡터가 작으면 L의 길이 짧게 나타날 수 있다. 이때, 수평 힘으로 인한 벡터의 크기는 시각적으로 인지하기 어려울 정도로 작을 수 있기 때문에, 특정 배수로 확대하여 표시할 수도 있다.The length L of the arrow drawn with the circle can be expressed proportionally according to the magnitude of the force vector. That is, if the force vector is large, the length of L is long. If the force vector is small, the length of L may be short. At this time, since the magnitude of the vector due to the horizontal force may be small enough to be visually perceptible, it may be magnified and displayed at a specific multiple.

앞서 설명한 터치 스크린 제어 방법을 수행하기 위한 시스템으로 터치 스크린 제어 시스템이 제공될 수 있는데, 실시예에 따른 시스템(미도시)은 특히 수평 힘을 감지하고, 수평 힘에 관해 터치 스크린을 제어할 수 있으며, 측정부, 비교부, 제1 저장부, 제2 저장부 및 계산부를 포함하고, 처리부를 더 포함할 수 있다.A touch screen control system may be provided as a system for performing the above-described touch screen control method, wherein a system (not shown) according to an embodiment can detect the horizontal force in particular and control the touch screen with respect to the horizontal force A measuring unit, a comparing unit, a first storing unit, a second storing unit, and a calculating unit, and may further include a processing unit.

먼저, 측정부는 터치 스크린에서 수직 힘을 감지하고 측정할 수 있다. 이때, 수직 힘을 감지할 때에, 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하는 힘 추정 방법 및 수직 힘에 의한 터치 영역의 너비를 이용하는 힘 추정 방법 중 적어도 하나를 이용하여 수직 힘을 측정할 수 있다.First, the measuring unit can detect and measure the vertical force on the touch screen. At this time, when detecting the vertical force, the vertical force can be measured using at least one of a force estimation method using a plurality of force sensors included in the touch screen and a force estimation method using a width of a touch area with a vertical force .

그리고 비교부는 수직 힘의 크기를 미리 정해진 누름 임계값과 비교할 수 있다. 미리 정해진 누름 임계값 이상일 경우에 대해서 수평 힘 동작을 적용할 수 있다.And the comparator can compare the magnitude of the vertical force with a predetermined push threshold. A horizontal force operation can be applied for a case where it is equal to or greater than a predetermined pressing threshold value.

수평 힘 동작을 수행하기 위해서는 수평 힘의 크기와 방향을 측정할 수 있는데, 이를 위해 제1 저장부는 수직 힘의 크기가 누름 임계값보다 큰 지점을 시작 좌표로 저장하고, 제2 저장부는 수직 힘의 크기가 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장할 수 있다.In order to perform the horizontal force operation, the magnitude and the direction of the horizontal force can be measured. To this end, the first storage unit stores a position where the magnitude of the vertical force is larger than the pushing threshold as a start coordinate, While the size is maintained at a value larger than the push threshold, the final point moved can be stored as final coordinates.

따라서, 계산부는 시작 좌표 및 최종 좌표를 이용하여 힘 벡터를 계산할 수 있다. 힘 벡터는 수평 힘에 대한 것으로 그 크기와 방향에 따라서 미리 정해진 동작을 수행할 수 있고, 처리부에서 수평 힘 동작을 수행할 수 있다.Therefore, the calculation unit can calculate the force vector using the start coordinates and the final coordinates. The force vector is for a horizontal force and can perform a predetermined operation according to its magnitude and direction and can perform a horizontal force operation at the processing unit.

본 발명의 실시예를 통해 터치 스크린을 구비한 휴대 기기 등에서 터치 스크린을 마찰력으로 미는 힘을 측정할 수 있게 함으로써, 기존의 터치 스크린에서 터치 지점만을 측정할 수 있었던 것에 비해 터치 지점에 힘 벡터를 측정할 수 있으므로 입력의 자유도를 향상시킬 수 있는 효과가 나타난다.In the embodiment of the present invention, by measuring the pressing force of the touch screen with a friction force in a portable device having a touch screen or the like, only the touch point can be measured in the conventional touch screen, The degree of freedom of input can be improved.

또한, 여러 지점에서의 수평 힘을 사용할 수 있어 기존의 수평 힘 사용 제스처보다 더 다양한 제스처의 사용이 가능하다.In addition, horizontal forces at various points can be used, allowing the use of a wider range of gestures than conventional horizontal force using gestures.

이에 더불어, 수평 방향의 힘 측정을 위하여 터치 스크린 주위에 압력 센서를 추가할 필요가 없으므로 제품의 제작 단가를 줄일 수 있는 장점이 있다.In addition, there is no need to add a pressure sensor around the touch screen to measure force in the horizontal direction, which can reduce the manufacturing cost of the product.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

600: 휴대 기기
601: 터치 스크린
602: 힘 센서
600: Mobile device
601: Touch screen
602: force sensor

Claims (15)

터치 스크린 제어 방법에 있어서,
터치 스크린에서 수직 힘을 감지하고 측정하는 단계;
상기 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 단계;
상기 수직 힘의 크기가 상기 누름 임계값보다 작은 경우, 현재 상태를 터치됨 상태로 전이하고, 터치 조작을 수행하는 단계;
상기 수직 힘의 크기가 상기 누름 임계값보다 크거나 같은 경우, 상기 현재 상태가 드래그 상태인지 판단하는 제1 판단 단계; 및
상기 제1 판단의 결과 상기 현재 상태가 드래그 상태인 경우, 드래그 조작을 수행하는 단계
를 포함하는 터치 스크린 제어 방법.
A touch screen control method comprising:
Sensing and measuring a vertical force on a touch screen;
Comparing the magnitude of the vertical force with a predetermined push threshold value;
Transitioning the current state to the touch state and performing a touch operation when the magnitude of the vertical force is smaller than the push threshold value;
A first determining step of determining whether the current state is a drag state when the magnitude of the vertical force is greater than or equal to the push threshold value; And
When the current state is a drag state as a result of the first determination, performing a drag operation
Wherein the touch screen control method comprises the steps of:
삭제delete 제1항에 있어서,
상기 현재 상태가 드래그 상태가 아닌 경우, 상기 현재 상태가 수평 힘 상태인지 판단하는 제2 판단 단계; 및
상기 제2 판단의 결과 상기 현재 상태가 수평 힘 상태인 경우, 수평 힘 조작을 수행하는 단계
를 더 포함하는 터치 스크린 제어 방법.
The method according to claim 1,
Determining whether the current state is a horizontal force state when the current state is not the drag state; And
Performing a horizontal force operation when the current state is a horizontal force state as a result of the second determination,
Further comprising the steps of:
제3항에 있어서,
상기 현재 상태가 수평 힘 상태가 아닌 경우, 상기 현재 상태가 눌러짐 상태인지 판단하는 제3 판단 단계; 및
상기 제3 판단의 결과 상기 현재 상태가 눌러짐 상태가 아닌 경우, 현재의 터치 지점을 시작점으로 저장하고, 상기 현재 상태를 눌러짐 상태로 변경하는 단계
를 더 포함하는 터치 스크린 제어 방법.
The method of claim 3,
A third determination step of determining whether the current state is a pressed state when the current state is not a horizontal force state; And
Storing the current touch point as a start point and changing the current state to a load state when the current state is not a pressed state as a result of the third determination;
Further comprising the steps of:
제4항에 있어서,
상기 제3 판단의 결과 상기 현재 상태가 눌러짐 상태인 경우, 상기 시작점으로부터의 이동 거리 및 거리 임계값을 비교하는 단계;
상기 시작점으로부터의 이동 속도 및 속도 임계값을 비교하는 단계;
상기 시작점으로부터의 이동 속도가 상기 속도 임계값보다 작거나 같은 경우, 상기 현재 상태를 상기 수평 힘 상태로 변경하고, 상기 수평 힘 조작을 수행하는 단계
를 더 포함하는 터치 스크린 제어 방법.
5. The method of claim 4,
Comparing the moving distance from the starting point and the distance threshold value when the current state is the pressed state as a result of the third determination;
Comparing a moving speed and a speed threshold from the starting point;
Changing the current state to the horizontal force state when the moving speed from the starting point is less than or equal to the speed threshold value and performing the horizontal force operation
Further comprising the steps of:
제5항에 있어서,
상기 시작점으로부터의 이동 속도가 상기 속도 임계값보다 큰 경우, 상기 현재 상태를 상기 드래그 상태로 변경하고, 상기 드래그 조작을 수행하는 단계
를 더 포함하는 터치 스크린 제어 방법.
6. The method of claim 5,
Changing the current state to the drag state when the moving speed from the starting point is larger than the speed threshold value, and performing the drag operation
Further comprising the steps of:
제1항에 있어서,
상기 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는,
상기 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하는 힘 추정 방법 및 상기 수직 힘에 의한 터치 영역의 너비를 이용하는 힘 추정 방법 중 적어도 하나를 이용하여 상기 수직 힘을 측정하는 단계
를 포함하는 터치 스크린 제어 방법.
The method according to claim 1,
Wherein sensing and measuring the vertical force in the touch screen comprises:
Measuring the vertical force using at least one of a force estimation method using a plurality of force sensors included in the touch screen and a force estimation method using a width of a touch region by the vertical force
Wherein the touch screen control method comprises the steps of:
제3항에 있어서,
상기 드래그 조작 및 상기 수평 힘 조작 중, 상기 수직 힘이 상기 누름 임계값 이하가 되는 경우, 상기 현재 상태를 상기 터치됨 상태로 변경하는 단계
를 더 포함하는 터치 스크린 제어 방법.
The method of claim 3,
Changing the current state to the touched state when the vertical force is less than or equal to the push threshold during the drag operation and the horizontal force operation
Further comprising the steps of:
터치 스크린 제어 방법에 있어서,
터치 스크린에서 수직 힘을 감지하고 측정하는 단계;
상기 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 단계;
상기 수직 힘의 크기가 상기 누름 임계값보다 큰 지점을 시작 좌표로 저장하는 단계;
상기 수직 힘의 크기가 상기 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장하는 단계; 및
상기 시작 좌표 및 상기 최종 좌표를 이용하여 힘 벡터를 계산하는 단계
를 포함하는 터치 스크린 제어 방법.
A touch screen control method comprising:
Sensing and measuring a vertical force on a touch screen;
Comparing the magnitude of the vertical force with a predetermined push threshold value;
Storing a point where the magnitude of the vertical force is greater than the push threshold as a start coordinate;
Storing the moved final point as final coordinates while maintaining the magnitude of the vertical force greater than the push threshold value; And
Calculating a force vector using the starting coordinates and the final coordinates
Wherein the touch screen control method comprises the steps of:
제9항에 있어서,
상기 힘 벡터를 이용하여 미리 정해진 처리를 수행하는 단계
를 더 포함하는 터치 스크린 제어 방법.
10. The method of claim 9,
Performing a predetermined process using the force vector
Further comprising the steps of:
제9항에 있어서,
상기 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는,
상기 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하여 상기 수직 힘을 측정하는 단계
를 포함하는 터치 스크린 제어 방법.
10. The method of claim 9,
Wherein sensing and measuring the vertical force in the touch screen comprises:
Measuring the vertical force using a plurality of force sensors included in the touch screen
Wherein the touch screen control method comprises the steps of:
제9항에 있어서,
상기 터치 스크린에서 수직 힘을 감지하고 측정하는 단계는,
상기 수직 힘에 의한 터치 영역의 너비를 이용하여 상기 수직 힘을 측정하는 단계
를 포함하는 터치 스크린 제어 방법.
10. The method of claim 9,
Wherein sensing and measuring the vertical force in the touch screen comprises:
Measuring the vertical force using the width of the touch region by the vertical force
Wherein the touch screen control method comprises the steps of:
터치 스크린 제어 시스템에 있어서,
터치 스크린에서 수직 힘을 감지하고 측정하는 측정부;
상기 수직 힘의 크기를 미리 정해진 누름 임계값과 비교하는 비교부;
상기 수직 힘의 크기가 상기 누름 임계값보다 큰 지점을 시작 좌표로 저장하는 제1 저장부;
상기 수직 힘의 크기가 상기 누름 임계값보다 큰 값으로 유지되면서 이동한 최종 지점을 최종 좌표로 저장하는 제2 저장부; 및
상기 시작 좌표 및 상기 최종 좌표를 이용하여 힘 벡터를 계산하는 계산부
를 포함하는 터치 스크린 제어 시스템.
A touch screen control system comprising:
A measurement unit for sensing and measuring a vertical force on a touch screen;
A comparator for comparing the magnitude of the vertical force with a predetermined threshold pressure;
A first storage unit for storing, as start coordinates, a point where the magnitude of the vertical force is greater than the push threshold value;
A second storage unit for storing the moved final point as final coordinates while maintaining the magnitude of the vertical force larger than the pressing threshold value; And
A calculation unit for calculating a force vector using the start coordinates and the final coordinates,
The touch screen control system comprising:
제13항에 있어서,
상기 측정부는,
상기 터치 스크린에 포함되는 복수 개의 힘 센서를 이용하는 힘 추정 방법 및 상기 수직 힘에 의한 터치 영역의 너비를 이용하는 힘 추정 방법 중 적어도 하나를 이용하여 상기 수직 힘을 측정하는 것
을 특징으로 하는 터치 스크린 제어 시스템.
14. The method of claim 13,
Wherein the measuring unit comprises:
Measuring the vertical force using at least one of a force estimation method using a plurality of force sensors included in the touch screen and a force estimation method using a width of the touch area by the vertical force
Wherein the touch screen is a touch screen.
제13항에 있어서,
상기 힘 벡터를 이용하여 미리 정해진 처리를 수행하는 처리부
를 더 포함하는 터치 스크린 제어 시스템.
14. The method of claim 13,
A processing unit for performing predetermined processing using the force vector
The touch screen control system further comprising:
KR20130088836A 2013-07-26 2013-07-26 Touch screen controlling method in mobile device, and mobile device threof KR101496017B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130088836A KR101496017B1 (en) 2013-07-26 2013-07-26 Touch screen controlling method in mobile device, and mobile device threof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130088836A KR101496017B1 (en) 2013-07-26 2013-07-26 Touch screen controlling method in mobile device, and mobile device threof

Publications (2)

Publication Number Publication Date
KR20150014040A KR20150014040A (en) 2015-02-06
KR101496017B1 true KR101496017B1 (en) 2015-02-27

Family

ID=52570993

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130088836A KR101496017B1 (en) 2013-07-26 2013-07-26 Touch screen controlling method in mobile device, and mobile device threof

Country Status (1)

Country Link
KR (1) KR101496017B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109876430A (en) * 2015-12-03 2019-06-14 网易(杭州)网络有限公司 A kind of control method and device that game role is mobile

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100044770A (en) * 2009-07-21 2010-04-30 조근우 Touch screen and method for using multi input layer in touch screen

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100044770A (en) * 2009-07-21 2010-04-30 조근우 Touch screen and method for using multi input layer in touch screen

Also Published As

Publication number Publication date
KR20150014040A (en) 2015-02-06

Similar Documents

Publication Publication Date Title
JP6429981B2 (en) Classification of user input intent
US10606461B1 (en) Snapping a pointing-indicator to a scene boundary of a video
US10318146B2 (en) Control area for a touch screen
RU2635285C1 (en) Method and device for movement control on touch screen
EP2051160B1 (en) System having user interface using object selection and gestures
US9696882B2 (en) Operation processing method, operation processing device, and control method
JP2011014044A (en) Apparatus and method for controlling operation and computer program
CN102467344A (en) System and method for display proximity based control of a touch screen user interface
KR20120058996A (en) Apparatus and Method for Controlling Object
KR20130099186A (en) Display device, user interface method, and program
JP2013530587A5 (en)
US20170131882A1 (en) Information processing apparatus, information processing method, and computer program product
WO2014002316A1 (en) Operation device
JP6176907B2 (en) Information processing apparatus, control method therefor, and program
KR102198596B1 (en) Disambiguation of indirect input
KR101436585B1 (en) Method for providing user interface using one point touch, and apparatus therefor
JP6033061B2 (en) Input device and program
KR101496017B1 (en) Touch screen controlling method in mobile device, and mobile device threof
US9213459B2 (en) Electronic apparatus provided with resistive film type touch panel
KR101468970B1 (en) Method and apparatus for sliding objects across a touch-screen display
JP2015153197A (en) Pointing position deciding system
KR101436588B1 (en) Method for providing user interface using one point touch, and apparatus therefor
KR20100011336A (en) Information processing apparatus and method for moving image thereof
US20170285770A1 (en) Enhanced user interaction with a device
CN105867777B (en) Screen control method and device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180129

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee