KR20120100351A - Method for detecting touch strength using sound, device for the same, and user terminal for the same - Google Patents
Method for detecting touch strength using sound, device for the same, and user terminal for the same Download PDFInfo
- Publication number
- KR20120100351A KR20120100351A KR1020110019190A KR20110019190A KR20120100351A KR 20120100351 A KR20120100351 A KR 20120100351A KR 1020110019190 A KR1020110019190 A KR 1020110019190A KR 20110019190 A KR20110019190 A KR 20110019190A KR 20120100351 A KR20120100351 A KR 20120100351A
- Authority
- KR
- South Korea
- Prior art keywords
- sound
- touch
- touch screen
- stylus pen
- user terminal
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Position Input By Displaying (AREA)
Abstract
Description
본 발명은 소리를 이용한 터치세기 검출방법, 이를 위한 입력장치 및 사용자 단말에 관한 것으로, 보다 상세하게는 터치스크린의 종류와 관계없이 터치스크린과 입력수단과의 마찰에 의하여 발생하는 특정 주파수 영역을 갖는 소리로부터 터치스크린에 대한 사용자의 터치세기를 측정, 이를 인터렉션 명령에 활용할 수 있는 소리를 이용한 터치세기 검출방법, 이를 위한 입력장치 및 사용자 단말에 관한 것이다.The present invention relates to a touch intensity detection method using sound, an input device and a user terminal for the same, and more particularly, has a specific frequency region generated by friction between the touch screen and the input means regardless of the type of touch screen. The present invention relates to a method of detecting a touch intensity using a sound that can measure a user's touch intensity from a sound to a touch screen and use the same for an interaction command, and an input device and a user terminal for the same.
터치스크린이란 키보드를 사용하지 않고 화면(스크린)에 나타난 문자나 특정 위치에 사람의 손 또는 물체가 닿으면, 그 위치를 파악하여 저장된 소프트웨어에 의해 특정 처리를 할 수 있도록, 화면에서 직접 입력자료를 받을 수 있게 한 화면을 말하며, 휴대전화, 컴퓨터 등의 사용자 단말의 입력 스크린으로 널리 활용되고 있다. 터치스크린의 입력수단으로 사용자의 손가락이나 스타일러스 펜이 사용되고 있으며, 이중 스타일러스 펜은 손가락을 대처하는 수단으로 개발된 입력 수단이다. 도 1a 및 1b는 종래의 정전용량 방식의 터치스크린의 터치입력을 위하여 개발된 스타일러스 펜을 나타내는 사진이다. 종래 기술의 경우 터치스크린과 이러한 입력수단과의 접촉 세기를 검출하기 위해서는 별도의 압력센서를 터치스크린의 하단에 구비시켜야 하는데, 이로 인한 제조원가 상승, 화질 저하 등의 문제가 있다. 더 나아가, 빠른 응답속도를 갖는 정전용량의 경우 터치세기의 검출이 상대적으로 더 어렵다는 문제가 있다.A touch screen is a touch screen that allows a person to touch a character or a specific position on a screen (screen) without touching the keyboard, And is widely used as an input screen of a user terminal such as a cellular phone or a computer. A user's finger or a stylus pen is used as an input means of a touch screen, and a double stylus pen is an input means developed as a means for coping with a finger. 1A and 1B are photographs showing a stylus pen developed for touch input of a conventional capacitive touch screen. In the prior art, in order to detect the touch strength between the touch screen and the input means, a separate pressure sensor should be provided at the bottom of the touch screen, which causes problems such as manufacturing cost increase and image quality deterioration. Furthermore, there is a problem that detection of touch intensity is relatively more difficult in the case of a capacitance having a fast response speed.
따라서 본 발명이 해결하려는 과제는 압력센서 없이 터치스크린에 대한 터치세기를 효과적이고, 간편하게 검출할 수 있는, 소리를 이용한 소리를 이용한 터치세기 검출방법, 이를 위한 입력장치 및 사용자 단말을 제공하는 것이다.Accordingly, an object of the present invention is to provide a touch strength detection method using sound using sound, an input device, and a user terminal therefor, which can effectively and simply detect the touch intensity of a touch screen without a pressure sensor.
상기 과제를 해결하기 위하여, 본 발명은 소리를 이용한 터치세기 검출방법으로, 상기 방법은 터치스크린과 입력장치의 접촉에 따라 발생하는 소리를 이용하는 것을 특징으로 하는 터치세기 검출방법을 제공한다. In order to solve the above problems, the present invention provides a touch intensity detection method using a sound, the method provides a touch intensity detection method characterized in that using the sound generated according to the contact of the touch screen and the input device.
본 발명의 일 실시예에서 상기 소리는 터치스크린 상에서 상기 입력장치가 이동함에 따라 상기 입력장치가 터치스크린을 긁는 소리이며, 소정 주파수 이상의 특정 주파수 영역을 갖는 소리일 수 있다. In one embodiment of the present invention, the sound is a sound that the input device scratches the touch screen as the input device moves on the touch screen, and may be a sound having a specific frequency region over a predetermined frequency.
본 발명의 일 실시예에서 상기 방법은 상기 특정 주파수 영역의 소리의 진폭의 크기에 따라 터치세기를 검출한다. In one embodiment of the present invention, the method detects the touch intensity according to the magnitude of the amplitude of sound in the specific frequency region.
상기 과제를 해결하기 위하여, 본 발명은 또한 소리를 이용한 터치세기 검출방법으로, 상기 방법은 터치스크린에서의 입력수단에 의한 터치를 검출하는 단계; 상기 입력수단의 터치스크린 상에서의 이동에 따라 발생하는 소리를 제 1 검출하는 단계; 상기 제 1 검출된 소리 중 특정 주파수 영역 대의 소리를 제 2 검출하는 단계; 및 상기 제 2 검출된 소리 세기에 따라 터치 세기가 연산되는 단계를 포함하는 것을 특징으로 하는 터치세기 검출방법을 제공한다. In order to solve the above problems, the present invention also provides a touch intensity detection method using sound, the method comprising the steps of: detecting a touch by the input means on the touch screen; First detecting a sound generated by the movement of the input means on the touch screen; Second detecting a sound of a specific frequency range in the first detected sound; And calculating the touch intensity according to the second detected sound intensity.
본 발명의 일 실시예에서 상기 제 1 검출은 상기 입력수단에 구비된 소리검출수단에 의하여 수행된다. In one embodiment of the present invention, the first detection is performed by sound detection means provided in the input means.
본 발명의 일 실시예에서 상기 입력수단은 스타일러스 펜이며, 상기 소리검출수단은 상기 스타일러스 펜에 구비된 마이크이다. In one embodiment of the present invention, the input means is a stylus pen, and the sound detection means is a microphone provided in the stylus pen.
본 발명의 일 실시예에서 상기 특정 주파수 영역은 2,3000Hz 이상의 주파수 영역이며, 상기 터치 세기는 제 2 검출된 소리의 진폭 크기에 따라 결정된다. In one embodiment of the present invention, the specific frequency region is a frequency region of 2,3000 Hz or more, and the touch intensity is determined according to the amplitude of the second detected sound.
본 발명은 또한 상술한 터치세기 검출방법에 사용되는 터치스크린 입력수단을 제공하며, 상기 입력수단은 스타일러스 펜일 수 있다. The present invention also provides a touch screen input means used in the above-described touch intensity detection method, which may be a stylus pen.
본 발명은 또한 소리를 이용하여 터치세기를 검출하기 위한 스타일러스 펜으로, 상기 펜은 터치스크린과 접촉하는 접촉부(110); 상기 터치스크린와 상기 접촉부의 접촉에 따른 소리를 검출하는 소리검출수단(120); 및 상기 검출된 소리를 상기 터치스크린이 구비된 사용자 단말로 전송하기 위한 통신부(130)를 포함하는 것을 특징으로 하는 스타일러스 펜을 제공한다. The present invention also provides a stylus pen for detecting touch intensity using sound, the pen comprising: a
본 발명의 일 실시예에서 상기 소리검출수단(120)은 상기 스타일러스 펜 내부에 구비된 마이크이며, 상기 통신부(130)는 상기 사용자 단말에 연결된 유선 라인이다. In one embodiment of the present invention, the sound detecting means 120 is a microphone provided in the stylus pen, and the communication unit 130 is a wired line connected to the user terminal.
본 발명의 일 실시예에서 상기 접촉에 따른 소리는 상기 터치스크린과 상기 접촉부 사이의 긁힘에 의하여 발생하는 소리이다.In one embodiment of the present invention, the sound according to the contact is a sound generated by scratching between the touch screen and the contact portion.
본 발명은 또한 상술한 스타일러스 펜에 대응하는 사용자 단말로서, 상기 스타일러스 펜으로부터 전송되는 소리 중 특정 주파수 영역대의 소리로 필터링하는 필터링부(410); 및 상기 특정 주파수 영역대의 소리의 진폭에 따라 터치 세기를 연산하는 연산부(420)를 포함하는 것을 특징으로 하는 사용자 단말을 제공한다. 이때 상기 특정 주파수 영역은 2,3000Hz이상일 수 있다. The present invention also provides a user terminal corresponding to the above-described stylus pen, comprising: a
본 발명은 터치스크린과 입력수단과의 접촉 및 이동에 따라 발생하는 긁힘(스크래치) 소리를 터치 세기 측정을 위한 변수로 활용한다. 따라서, 터치스크린 종류와 관계없이 터치 세기의 검출이 가능하다. 더 나아가, 본 발명의 또 다른 일 실시예에서는 마이크와 같은 별도의 소리검출수단이 스타일러스 펜에 구비되며, 입력수단과 터치스크린의 접촉에 따라 발생하는 고유 주파수 영역의 소리가 마이크와 같은 소리검출수단에 의하여 검출, 터치 세기 결정 변수로 활용된다. 이로써 주변 소음에도 불구하고, 터치스크린과 입력수단의 접촉 소리에 따른 터치세기를 정확하게 추출할 수 있다.The present invention utilizes the sound of scratches (scratch) generated by the contact and movement of the touch screen and the input means as a variable for measuring the touch intensity. Therefore, the touch intensity can be detected regardless of the touch screen type. Furthermore, in another embodiment of the present invention, a separate sound detection means such as a microphone is provided in the stylus pen, and the sound in the natural frequency region generated by the contact between the input means and the touch screen is sound detection means such as a microphone. By detecting, it is utilized as a touch intensity determining variable. Thus, despite the ambient noise, it is possible to accurately extract the touch strength according to the touch sound of the touch screen and the input means.
도 1a 및 1b는 종래의 정전용량 방식의 터치스크린의 터치입력을 위하여 개발된 스타일러스 펜을 나타내는 사진이다.
도 2 및 3은 터치스크린과 접촉수단 사이의 긁힘이 없는 상황에서 검출된 소리이 주파수 분석 결과이다.
도 4 내지 6은 스타일러스 펜과 같은 입력수단으로 터치스크린을 각각 약하게, 중간 세기로, 세게 터치하였을 때 검출된 소리에 대한 그래프이다.
도 7은 본 발명의 일 실시예에 따른 터치스크린 입력방법의 단계도이다.
도 8 및 9는 본 발명의 일 실시예에 따른 입력수단인 스타일러스 펜 및 이를 이용하는 사용자 단말의 전체 구성을 나타내는 도면이다.
도 10 및 11은 검출된 터치 세기에 따라 스타일러스 펜(100)에 의하여 터치스크린 상에 표시되는 선의 굵기가 변화되는 명령의 예를 설명하는 도면이다.
도 12는 본 발명에 따른 터치스크린 입력방법에 사용되는 입력장치의 블록도이다.
도 13은 본 발명에 따른 터치스크린 입력방법에 사용되는 사용자 단말의 블록도이다. 1A and 1B are photographs showing a stylus pen developed for touch input of a conventional capacitive touch screen.
2 and 3 is a frequency analysis result of the sound detected in the absence of scratches between the touch screen and the contact means.
4 to 6 are graphs of sounds detected when the touch screen is touched lightly, medium strength, and hard with input means such as a stylus pen.
7 is a flowchart illustrating a touch screen input method according to an embodiment of the present invention.
8 and 9 are views showing the overall configuration of a stylus pen as an input means and a user terminal using the same according to an embodiment of the present invention.
10 and 11 are diagrams for explaining an example of a command for changing the thickness of a line displayed on the touch screen by the
12 is a block diagram of an input device used in the touch screen input method according to the present invention.
13 is a block diagram of a user terminal used in a touch screen input method according to the present invention.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 첨부 도면에 기재된 내용을 참조하여야만 한다. In order to fully understand the present invention, operational advantages of the present invention, and objects achieved by the practice of the present invention, reference should be made to the accompanying drawings and the accompanying drawings which illustrate preferred embodiments of the present invention.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로서, 본 발명을 상세히 설명한다. 그러나, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 설명하는 실시예에 한정되는 것이 아니다. 그리고, 본 발명을 명확하게 설명하기 위하여 설명과 관계없는 부분은 생략되며, 도면의 동일한 참조부호는 동일한 부재임을 나타낸다. Hereinafter, the present invention will be described in detail with reference to the preferred embodiments of the present invention with reference to the accompanying drawings. However, the present invention can be implemented in various different forms, and is not limited to the embodiments described. In order to clearly describe the present invention, parts that are not related to the description are omitted, and the same reference numerals in the drawings denote the same members.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “...부”, “...기”, “모듈”, “블록” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.Throughout the specification, when an element is referred to as " including " an element, it does not exclude other elements unless specifically stated to the contrary. The terms "part", "unit", "module", "block", and the like described in the specification mean units for processing at least one function or operation, And a combination of software.
본 발명은 상술한 바와 같이 터치스크린과 입력수단 사이의 접촉에 따라 발생하는 소리를 터치스크린 터치세기 검출 변수로 활용한다. 특히 본 발명자는 터치스크린과 특정 입력수단(예를 들면 스타일러스 펜)의 접촉에 따라 특정 주파수 영역의 소리가 발생하는 점을 발견하였다. 즉, 본 발명은 접촉수단과 터치스크린 사이의 마찰에 따른 긁힘(스크래치)시 소정 범위의 높은 주파수 영역의 소리가 발생하는 점을 터치세기 검출에 활용한다. As described above, the present invention utilizes the sound generated according to the contact between the touch screen and the input means as the touch screen touch intensity detection variable. In particular, the present inventors have found that a sound of a specific frequency range is generated by contact of a touch screen with a specific input means (for example, a stylus pen). That is, the present invention utilizes a point in which a sound of a high frequency region of a predetermined range is generated when a scratch (scratch) due to friction between the contact means and the touch screen is generated for touch strength detection.
도 2 및 3은 터치스크린과 접촉수단 사이의 긁힘이 없는 상황에서 검출된 소리의 분석 결과이다.2 and 3 are analysis results of the sound detected in the absence of scratches between the touch screen and the contact means.
도 2의 경우는 통상 상황에서의 소리에 대한 주파수 그래프이고, 도 3은 음악을 크게 틀어 놓은 상황에서의 소리에 대한 그래프이다.In the case of Figure 2 is a frequency graph of the sound in a normal situation, Figure 3 is a graph of the sound in a situation where the music is turned on loud.
도 2 및 3을 참조하면, 소리의 진폭(amplitude)은 차이가 있으나, 소리의 주파수 영역은 23,000Hz 이하인 것을 알 수 있다. 2 and 3, although the amplitude (amplitude) of the sound is different, it can be seen that the frequency range of the sound is 23,000 Hz or less.
하지만, 도 4 내지 6은 스타일러스 펜과 같은 입력수단으로 터치스크린을 각각 약하게, 중간 세기로, 세게 터치하였을 때 검출된 소리에 대한 그래프이다.However, FIGS. 4 to 6 are graphs of sounds detected when the touch screen is touched lightly, medium strength, and hard with an input means such as a stylus pen.
도 4 내지 6을 참조하면, 도 2 및 3과 유사하게 진폭의 차이가 발생하는 것을 알 수 있다. 하지만, 도 2 및 3과 달리, 약 23,000Hz 이상의 주파수 영역의 소리가 검출되는 것을 알 수 있다. 이것은 입력수단이 터치스크린을 긁음(스크래치)에 따라 특정 주파수 영역의 소리가 특이적으로 검출됨을 의미하며, 본 발명은 입력수단과 터치스크린의 접촉에 따라 발생하는 고유의 소리정보를 터치세기 검출을 위한 변수로 활용한다. 4 to 6, it can be seen that the difference in amplitude occurs similarly to FIGS. 2 and 3. However, unlike FIGS. 2 and 3, it can be seen that sound in the frequency domain of about 23,000 Hz or more is detected. This means that the sound of a specific frequency region is detected specifically as the input means scratches (scratches) the touch screen, and the present invention detects the touch strength by detecting the unique sound information generated by the contact of the input means with the touch screen. It is used as a variable for
도 7은 본 발명의 일 실시예에 따른 터치스크린에서의 터치세기 검출방법의 단계도이다.7 is a flowchart illustrating a method of detecting touch intensity in a touch screen according to an embodiment of the present invention.
도 7을 참조하면, 먼저 입력수단에 의한 터치스크린에서의 터치를 검출한다(S100). 단계 S100에서의 터치 검출 후 상기 입력수단의 터치스크린 상에서의 이동에 따라 발생하는 소리(즉, 긁힘 소리)를 제 1 검출하고(S110), 다시 상기 제1 검출된 소리 중 특정 주파수 영역 대의 소리를 제 2 검출한다(S120). 본 발명의 일 실시예에서 상기 소리 검출은 터치스크린에 구비된 사용자 단말 자체의 마이크나 또는 스타일러스 펜과 같은 입력수단 자체에 구비된 마이크일 수 있다. 만약 입력수단에 마이크가 구비된 경우, 검출된 소리는 다시 터치스크린이 구비된 사용자 단말로 유선 또는 무선 방식으로 전송될 수 있다. 예를 들면, 이어폰이나 마이크 단자에 스타일러스 펜을 유선 연결하고, 펜과 터치스크린과의 마찰에 따라 발생하는 소리는 상기 유선을 통하여 사용자 단말에 전송된다. Referring to FIG. 7, first, a touch on a touch screen by an input unit is detected (S100). After detecting the touch in step S100, a sound (that is, a scratching sound) generated by the movement on the touch screen of the input unit is first detected (S110), and the sound of a specific frequency range of the first detected sound is again detected. The second detection (S120). In one embodiment of the present invention, the sound detection may be a microphone of the user terminal itself provided in the touch screen or a microphone provided in the input means itself, such as a stylus pen. If the input means is provided with a microphone, the detected sound may be transmitted to the user terminal equipped with the touch screen in a wired or wireless manner. For example, a stylus pen is wired to an earphone or a microphone terminal, and a sound generated by friction between the pen and the touch screen is transmitted to the user terminal through the wire.
본 발명 따라 모든 주파수 영역의 제 1 소리로부터 필터링되는 제 2 소리의 주파수 영역은 상술한 바와 같이 소정 입력수단과 터치스크린의 스크래치에 의해서만 발생하는 특이 주파수 영역인 것이 바람직한데, 예를 들면, 본 발명의 일 실시예에서 상기 제 2 소리의 주파수 영역은 약 2,300Hz 이상이었다. According to the present invention, it is preferable that the frequency domain of the second sound filtered from the first sound of all frequency domains is a specific frequency domain generated only by the scratches of the predetermined input means and the touch screen as described above. In one embodiment, the frequency range of the second sound was about 2,300 Hz or more.
상기 제 2 검출된 소리 정보로부터 이후 터치 세기가 연산된다(S130). 예를 들면, 제 2 검출된 소리정보는 도 2 및 3에서 도시된 바와 같이 주파수와 진폭정보를 모두 포함하는데, 이 중 주파수는 검출되는 소리 종류를 선택하는 기준이 되고, 진폭은 그 크기에 따라 터치세기를 결정하는 기준이 된다. The touch intensity is then calculated from the second detected sound information (S130). For example, the second detected sound information includes both frequency and amplitude information, as shown in FIGS. 2 and 3, wherein the frequency is a reference for selecting the type of sound to be detected, and the amplitude is determined according to the magnitude thereof. It is a standard for determining touch intensity.
예를 들어, 소정 주파수 영역에서의 검출된 소리의 진폭이 큰 경우, 해당 소리를 발생시키는 터치는 강한 터치로 인식된다. 그 반대로 진폭이 작은 경우, 해당 소리를 발생시키는 터치는 약한 터치로 인식된다. For example, when the detected sound amplitude in the predetermined frequency region is large, the touch for generating the sound is recognized as a strong touch. On the contrary, when the amplitude is small, the touch for generating the sound is recognized as a weak touch.
이와 달리, 본 발명의 또 다른 일 실시예에서는 최소 진폭과 최대 진폭을 미리 정한 후, 그 사이에서 기정의된 단계별 진폭 범위에 소정 터치 세기를 미리 저장시켜, 실제 사용자의 터치에 따라 발생하는 소리의 진폭으로부터 터치 세기를 매칭시킬 수 있다. On the contrary, in another embodiment of the present invention, the minimum amplitude and the maximum amplitude are predetermined, and the predetermined touch intensity is pre-stored in a predetermined stepped amplitude range therebetween, so that the sound generated according to the touch of the actual user is generated. Touch intensity can be matched from amplitude.
이와 또 달리, 본 발명의 또 다른 일 실시예에서는 특정 주파수 영역의 소리를 필터링하는 대신 주파수, 진폭을 기본 변수로 하여, 소정의 소리 패턴을 미리 데이터베이스에 저장하고, 이후 실제 검출되는 소리 패턴을 이에 매칭시켜, 상기 데이터베이스에 저장된 터치세기를 입력 터치세기로 결정할 수 있다. Alternatively, in another embodiment of the present invention, instead of filtering the sound of a specific frequency region, a predetermined sound pattern is stored in a database in advance using a frequency and an amplitude as a basic variable, and then the actual sound pattern is detected. By matching, the touch strength stored in the database may be determined as the input touch intensity.
이하 도면을 이용하여 본 발명에 따른 터치스크린 입력장치를 보다 상세히 설명한다.Hereinafter, a touch screen input device according to the present invention will be described in detail with reference to the accompanying drawings.
도 8 및 9는 본 발명의 일 실시예에 따른 입력수단인 스타일러스 펜 및 이를 이용하는 사용자 단말의 전체 구성을 나타내는 도면이다.8 and 9 are views showing the overall configuration of a stylus pen as an input means and a user terminal using the same according to an embodiment of the present invention.
도 8을 참조하면, 본 발명에 따른 스타일러스 펜(100)은 휴대전화와 같은 사용자 단말(200)의 이어폰 단자 등에 유선 연결되며, 사용자 단말(200)에는 터치스크린(210)이 구비된다. 본 발명의 일 실시예에 따른 스타일러스 펜(100) 내부에는 스타일러스 펜(100)의 접촉부(110)와 터치스크린(210)의 접촉 및 긁힘에 따라 발생하는 소리를 검출하기 위한 소리검출수단(120)이 구비된다. 본 발명의 일 실시예에서 상기 소리검출수단(120)은 마이크이었으나, 본 발명의 범위는 이에 제한되지 않는다.Referring to FIG. 8, the
도 9를 참조하면, 상기 터치스크린(210)에 스타일러스 펜(100)이 접촉한 후, 이동하면서 특정 주파수 영역의 소리(즉, 긁힘 소리)가 발생하며, 이에 따라 터치 세기를 검출한다. Referring to FIG. 9, after the
도 10 및 11은 검출된 터치 세기에 따라 스타일러스 펜(100)에 의하여 터치스크린 상에 표시되는 선의 굵기가 변화되는 명령의 예를 설명하는 도면이다.10 and 11 are diagrams for explaining an example of a command for changing the thickness of a line displayed on the touch screen by the
센 힘으로 터치스크린 상에 스타일러스 펜(100)을 이동시킨 경우, 보다 큰 진폭을 가지는 특정 주파수 영역의 소리가 발생하며, 이는 스타일러스 펜(100)에 구비된 마이크 등과 같은 소리검출수단에 의하여 검출된다. 도 10에서는 상기 소리검출수단에 의하여 검출된 큰 진폭의 특정 주파수 소리에 따라 강한 터치 세기가 연산되고, 이에 따라 스타일러스 펜(100)의 이동 경로의 터치스크린 상에 굵은 굵기의 선이 표시된다. 반면, 보다 약한 힘으로 스타일러스 펜을 터치스크린(110)에 접촉, 이동시키는 경우, 적은 진폭의 소리가 검출되며, 이에 따라 약한 터치세기가 연산된다. 도 11에서는 약한 터치세기에 따라 선 굵기가 얇게 표시되는 예를 나타낸다. When the
본 발명에 따른 소리 기반 터치세기 검출방법은 별도의 압력센서를 모바일 기기 자체에 구비할 필요 없이 기존의 소리검출수단을 그대로 활용하여, 터치 세기를 검출할 수 있다. 특히, 본 발명은 외부 소음에 의한 오인식 가능성, 터치세기 검출에 있어서의 터치스크린 종류의 한계 등을 효과적으로 극복할 수 있는 새로운 방법을 제공한다. The sound-based touch intensity detection method according to the present invention can detect the touch intensity by utilizing the existing sound detection means without the need for a separate pressure sensor in the mobile device itself. In particular, the present invention provides a novel method that can effectively overcome the possibility of misrecognition by external noise, the limitation of the touch screen type in the detection of touch strength.
도 12는 본 발명에 따른 터치세기 검출 방법에 사용되는 입력장치의 블록도이다.12 is a block diagram of an input device used in the touch strength detection method according to the present invention.
도 12를 참조하면, 본 발명에 따른 터치스크린 입력장치(300)는 터치스크린과 물리적으로 터치되는 입력부(310)와 상기 터치스크린과의 터치에 따라 발생하는 소리를 검출하는 소리검출수단(320)을 포함한다. 또한 본 발명에 따른 입력장치는 상기 소리검출수단(320)에 의하여 검출된 소리를 사용자 단말에 전송하는 통신부(330)를 더 포함하는데, 본 발명에서 상기 통신부는 전자기기인 사용자 단말(예를 들면, 휴대전화)의 이어폰 또는 마이크 단자를 통하여 상기 소리를 유선방식으로 전송한다. Referring to FIG. 12, the touch
도 13은 본 발명에 따른 터치스크린 입력방법에 사용되는 사용자 단말의 블록도이다. 13 is a block diagram of a user terminal used in a touch screen input method according to the present invention.
도 13을 참조하면, 본 발명의 일 실시예에 따른 상기 사용자 단말(400)은 도 12의 입력장치로부터 전송되는 소리 중 특정 주파수 영역대의 소리로 필터링하는 필터링부(410)와, 상기 특정 주파수 영역대의 소리의 진폭에 따라 터치 세기를 연산하는 연산부(420)를 포함한다. 본 발명의 일 실시예에서 상기 사용자 단말(400)은 휴대용 전자기기, 예를 들면 휴대전화나 테이블 탑일 수 있으나, 본 발명의 범위는 이에 제한되지 않는다.Referring to FIG. 13, the
본 발명은 또한 도 12의 입력장치(300)와 이에 대응하는 도 13의 사용자 단말(400)을 포함하는 시스템을 제공한다. The present invention also provides a system including the
또한, 본 발명에 따른 터치스크린 입력방법 및 입력장치, 사용자 단말 및 시스템은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 기록매체의 예로는 ROM, RAM, 광학 디스크, 자기 테이프, 플로피 디스크, 하드 디스크, 비휘발성 메모리 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.In addition, the touch screen input method, the input device, the user terminal and the system according to the present invention can be embodied as computer readable codes on a computer readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the recording medium include ROM, RAM, optical disk, magnetic tape, floppy disk, hard disk, nonvolatile memory, and the like, and also include a carrier wave (for example, transmission through the Internet). The computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is evident that many alternatives, modifications and variations will be apparent to those skilled in the art.
따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다. Therefore, the true technical protection scope of the present invention will be defined by the technical spirit of the appended claims.
Claims (16)
터치스크린과 입력장치의 접촉에 따라 발생하는 소리를 이용하는 것을 특징으로 하는 터치세기 검출방법. Touch strength detection method using sound, the method
Touch strength detection method, characterized in that using the sound generated by the touch screen and the input device contact.
상기 소리는 터치스크린 상에서 상기 입력장치가 이동함에 따라 상기 입력장치가 터치스크린을 긁는 소리인 것을 특징으로 하는 터치세기 검출방법. The method of claim 1,
And the sound is a sound in which the input device scratches the touch screen as the input device moves on the touch screen.
상기 소리는 소정 주파수 이상의 특정 주파수 영역을 갖는 소리인 것을 특징으로 하는 터치세기 검출방법.The method of claim 1,
And the sound is a sound having a specific frequency region over a predetermined frequency.
상기 특정 주파수 영역의 소리의 진폭의 크기에 따라 터치세기를 검출하는 것을 특징으로 하는 터치세기 검출방법. The method of claim 3, wherein the method
Touch intensity detection method characterized in that to detect the touch intensity according to the magnitude of the amplitude of the sound in the specific frequency region.
터치스크린에서의 입력수단에 의한 터치를 검출하는 단계;
상기 입력수단의 터치스크린 상에서의 이동에 따라 발생하는 소리를 제 1 검출하는 단계;
다시 상기 제 1 검출된 소리 중 특정 주파수 영역 대의 소리를 제 2 검출하는 단계; 및
상기 제 2 검출된 소리 세기에 따라 터치 세기가 연산되는 단계를 포함하는 것을 특징으로 하는 터치세기 검출방법. Touch strength detection method using sound, the method
Detecting a touch by an input means on the touch screen;
First detecting a sound generated by the movement of the input means on the touch screen;
Again detecting a sound of a specific frequency band in the first detected sound; And
And a touch intensity is calculated according to the second detected sound intensity.
상기 제 1 검출은 상기 입력수단에 구비된 소리검출수단에 의하여 수행되는 것을 특징으로 하는 터치세기 검출방법. 6. The method of claim 5,
And the first detection is performed by sound detection means provided in the input means.
상기 입력수단은 스타일러스 펜이며, 상기 소리검출수단은 상기 스타일러스 펜에 구비된 마이크인 것을 특징으로 하는 터치세기 검출방법.6. The method of claim 5,
And the input means is a stylus pen, and the sound detection means is a microphone provided in the stylus pen.
상기 특정 주파수 영역은 2,3000Hz 이상의 주파수 영역인 것을 특징으로 하는 터치세기 검출방법.6. The method of claim 5,
And the specific frequency region is a frequency region of 2,3000 Hz or more.
상기 터치 세기는 제 2 검출된 소리의 진폭 크기에 따라 결정되는 것을 특징으로 하는 터치세기 검출방법.6. The method of claim 5,
And wherein the touch intensity is determined according to the amplitude of the second detected sound.
터치스크린과 접촉하는 접촉부(110);
상기 터치스크린와 상기 접촉부의 접촉에 따른 소리를 검출하는 소리검출수단(120); 및
상기 검출된 소리를 상기 터치스크린이 구비된 사용자 단말로 전송하기 위한 통신부(130)를 포함하는 것을 특징으로 하는 스타일러스 펜.A stylus pen for detecting touch intensity using sound, wherein the pen
A contact unit 110 in contact with the touch screen;
Sound detection means (120) for detecting sound according to contact of the touch screen with the contact portion; And
Stylus pen comprising a communication unit for transmitting the detected sound to the user terminal equipped with the touch screen.
상기 소리검출수단(120)은 상기 스타일러스 펜 내부에 구비된 마이크인 것을 특징으로 하는 스타일러스 펜.12. The method of claim 11,
The sound detecting means 120 is a stylus pen, characterized in that the microphone provided inside the stylus pen.
상기 통신부(130)는 상기 사용자 단말에 연결된 유선 라인인 것을 특징으로 하는 스타일러스 펜.13. The method of claim 12,
The communication unit 130 is a stylus pen, characterized in that the wired line connected to the user terminal.
상기 접촉에 따른 소리는 상기 터치스크린과 상기 접촉부 사이의 긁힘에 의하여 발생하는 소리인 것을 특징으로 하는 스타일러스 펜.12. The method of claim 11,
The sound according to the contact is a stylus pen, characterized in that the sound generated by the scratch between the touch screen and the contact portion.
상기 특정 주파수 영역대의 소리의 진폭에 따라 터치 세기를 연산하는 연산부(420)를 포함하는 것을 특징으로 하는 사용자 단말.15. A user terminal corresponding to a stylus pen according to any one of claims 11 to 14, comprising: a filtering unit (410) for filtering the sound transmitted from the stylus pen to a sound of a specific frequency band; And
And a computing unit (420) for calculating touch intensity according to the amplitude of sound in the specific frequency range.
상기 특정 주파수 영역은 2,3000Hz이상인 것을 특징으로 하는 사용자 단말.16. The method of claim 15,
The specific frequency region is a user terminal, characterized in that more than 23000Hz.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110019190A KR101220633B1 (en) | 2011-03-04 | 2011-03-04 | Method for detecting touch strength using sound, device for the same, and user terminal for the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110019190A KR101220633B1 (en) | 2011-03-04 | 2011-03-04 | Method for detecting touch strength using sound, device for the same, and user terminal for the same |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20120100351A true KR20120100351A (en) | 2012-09-12 |
| KR101220633B1 KR101220633B1 (en) | 2013-01-10 |
Family
ID=47110097
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020110019190A KR101220633B1 (en) | 2011-03-04 | 2011-03-04 | Method for detecting touch strength using sound, device for the same, and user terminal for the same |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101220633B1 (en) |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140123220A (en) * | 2013-04-12 | 2014-10-22 | 삼성디스플레이 주식회사 | Mobile device and method for operating the same |
| KR101458312B1 (en) * | 2013-06-20 | 2014-11-04 | 한국과학기술원 | Method for detecting touch strength using sound, and user terminal and touch strength sensing system using the same |
| US9696901B2 (en) | 2013-10-23 | 2017-07-04 | Hyundai Motor Company | Apparatus and method for recognizing touch of user terminal based on acoustic wave signal |
| US10282024B2 (en) | 2014-09-25 | 2019-05-07 | Qeexo, Co. | Classifying contacts or associations with a touch sensitive device |
| US10599251B2 (en) | 2014-09-11 | 2020-03-24 | Qeexo, Co. | Method and apparatus for differentiating touch screen users based on touch event analysis |
| US10642404B2 (en) | 2015-08-24 | 2020-05-05 | Qeexo, Co. | Touch sensitive device with multi-sensor stream synchronized data |
| KR20200088628A (en) * | 2019-01-15 | 2020-07-23 | 임성민 | Touch sound sensing pen-mouse and lecture system with using it |
| US10942603B2 (en) | 2019-05-06 | 2021-03-09 | Qeexo, Co. | Managing activity states of an application processor in relation to touch or hover interactions with a touch sensitive device |
| US10949029B2 (en) | 2013-03-25 | 2021-03-16 | Qeexo, Co. | Method and apparatus for classifying a touch event on a touchscreen as related to one of multiple function generating interaction layers |
| US11009989B2 (en) | 2018-08-21 | 2021-05-18 | Qeexo, Co. | Recognizing and rejecting unintentional touch events associated with a touch sensitive device |
| US11029785B2 (en) | 2014-09-24 | 2021-06-08 | Qeexo, Co. | Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns |
| US11175698B2 (en) | 2013-03-19 | 2021-11-16 | Qeexo, Co. | Methods and systems for processing touch inputs based on touch type and touch intensity |
| US11231815B2 (en) | 2019-06-28 | 2022-01-25 | Qeexo, Co. | Detecting object proximity using touch sensitive surface sensing and ultrasonic sensing |
| US11262864B2 (en) | 2013-03-25 | 2022-03-01 | Qeexo, Co. | Method and apparatus for classifying finger touch events |
| US11592423B2 (en) | 2020-01-29 | 2023-02-28 | Qeexo, Co. | Adaptive ultrasonic sensing techniques and systems to mitigate interference |
| US11619983B2 (en) | 2014-09-15 | 2023-04-04 | Qeexo, Co. | Method and apparatus for resolving touch screen ambiguities |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101898663B1 (en) | 2017-01-02 | 2018-09-13 | 경희대학교 산학협력단 | Apparatus method of extended input of portable device by using sound |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5870083A (en) * | 1996-10-04 | 1999-02-09 | International Business Machines Corporation | Breakaway touchscreen pointing device |
| JP3988476B2 (en) * | 2001-03-23 | 2007-10-10 | セイコーエプソン株式会社 | Coordinate input device and display device |
| KR20050029093A (en) * | 2003-09-19 | 2005-03-24 | 주식회사 벨웨이브 | Apparatus and method for operating adaptive portable terminal having different input and output events based on users personality |
-
2011
- 2011-03-04 KR KR1020110019190A patent/KR101220633B1/en active IP Right Grant
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11175698B2 (en) | 2013-03-19 | 2021-11-16 | Qeexo, Co. | Methods and systems for processing touch inputs based on touch type and touch intensity |
| US10949029B2 (en) | 2013-03-25 | 2021-03-16 | Qeexo, Co. | Method and apparatus for classifying a touch event on a touchscreen as related to one of multiple function generating interaction layers |
| US11262864B2 (en) | 2013-03-25 | 2022-03-01 | Qeexo, Co. | Method and apparatus for classifying finger touch events |
| KR20140123220A (en) * | 2013-04-12 | 2014-10-22 | 삼성디스플레이 주식회사 | Mobile device and method for operating the same |
| KR101458312B1 (en) * | 2013-06-20 | 2014-11-04 | 한국과학기술원 | Method for detecting touch strength using sound, and user terminal and touch strength sensing system using the same |
| US9696901B2 (en) | 2013-10-23 | 2017-07-04 | Hyundai Motor Company | Apparatus and method for recognizing touch of user terminal based on acoustic wave signal |
| US10599251B2 (en) | 2014-09-11 | 2020-03-24 | Qeexo, Co. | Method and apparatus for differentiating touch screen users based on touch event analysis |
| US11619983B2 (en) | 2014-09-15 | 2023-04-04 | Qeexo, Co. | Method and apparatus for resolving touch screen ambiguities |
| US11029785B2 (en) | 2014-09-24 | 2021-06-08 | Qeexo, Co. | Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns |
| US10282024B2 (en) | 2014-09-25 | 2019-05-07 | Qeexo, Co. | Classifying contacts or associations with a touch sensitive device |
| US10642404B2 (en) | 2015-08-24 | 2020-05-05 | Qeexo, Co. | Touch sensitive device with multi-sensor stream synchronized data |
| US11009989B2 (en) | 2018-08-21 | 2021-05-18 | Qeexo, Co. | Recognizing and rejecting unintentional touch events associated with a touch sensitive device |
| KR20200088628A (en) * | 2019-01-15 | 2020-07-23 | 임성민 | Touch sound sensing pen-mouse and lecture system with using it |
| US10942603B2 (en) | 2019-05-06 | 2021-03-09 | Qeexo, Co. | Managing activity states of an application processor in relation to touch or hover interactions with a touch sensitive device |
| US11231815B2 (en) | 2019-06-28 | 2022-01-25 | Qeexo, Co. | Detecting object proximity using touch sensitive surface sensing and ultrasonic sensing |
| US11543922B2 (en) | 2019-06-28 | 2023-01-03 | Qeexo, Co. | Detecting object proximity using touch sensitive surface sensing and ultrasonic sensing |
| US11592423B2 (en) | 2020-01-29 | 2023-02-28 | Qeexo, Co. | Adaptive ultrasonic sensing techniques and systems to mitigate interference |
Also Published As
| Publication number | Publication date |
|---|---|
| KR101220633B1 (en) | 2013-01-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101220633B1 (en) | Method for detecting touch strength using sound, device for the same, and user terminal for the same | |
| Wang et al. | Ubiquitous keyboard for small mobile devices: harnessing multipath fading for fine-grained keystroke localization | |
| US8432368B2 (en) | User interface methods and systems for providing force-sensitive input | |
| KR101995403B1 (en) | Stylus pen, electroinic device and method for processing input using it | |
| US10775932B2 (en) | Method, mobile terminal and non-transitory computer-readable storage medium for response control of touch screen | |
| US20130050133A1 (en) | Method and apparatus for precluding operations associated with accidental touch inputs | |
| US20100315366A1 (en) | Method for recognizing touch input in touch screen based device | |
| JP5280800B2 (en) | Portable device, operation detection method, and operation detection program | |
| US20160179239A1 (en) | Information processing apparatus, input method and program | |
| WO2018086382A1 (en) | Screen backlight control system and method for smart device | |
| KR20140131061A (en) | Method of operating touch screen and electronic device thereof | |
| AU2013206371B2 (en) | Method for improving touch recognition and electronic device thereof | |
| CN110276328B (en) | Fingerprint identification method and related product | |
| KR101340028B1 (en) | Method, device for sensing touch on user terminal, and user terminal comprising the same | |
| KR102185204B1 (en) | Electronic device with using an infrared sensor and operation method thereof | |
| JP6488081B2 (en) | Reduction of distraction caused by ambient noise using a terminal device with a display screen | |
| Lu et al. | Enable traditional laptops with virtual writing capability leveraging acoustic signals | |
| KR20110133086A (en) | Apparatus and method of interface for mobile device, and recording medium for the same | |
| KR20130140963A (en) | Method and apparatus for transmitting information using sound | |
| KR102078208B1 (en) | Apparatas and method for preventing touch of a wrong input in an electronic device | |
| JP2013258584A (en) | Information terminal device, and information control method and program | |
| JP2013206032A (en) | Terminal device, method for adjusting proximity sensor sensitivity, and program | |
| KR101316781B1 (en) | Device, systme for inputting touchscreen, and method for inputting touchscreen using the same | |
| Wang et al. | SonicGest: Ultrasonic Gesture Recognition System Combined with GAN on Smartphones | |
| KR20120134476A (en) | Method for displaying e-mail content using movement sensing device and apparatus therefof |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20160115 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20161227 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20180102 Year of fee payment: 6 |
|
| FPAY | Annual fee payment |
Payment date: 20181218 Year of fee payment: 7 |
|
| FPAY | Annual fee payment |
Payment date: 20200102 Year of fee payment: 8 |