KR102219385B1 - An user interface apparatus and method thereof - Google Patents

An user interface apparatus and method thereof Download PDF

Info

Publication number
KR102219385B1
KR102219385B1 KR1020180165477A KR20180165477A KR102219385B1 KR 102219385 B1 KR102219385 B1 KR 102219385B1 KR 1020180165477 A KR1020180165477 A KR 1020180165477A KR 20180165477 A KR20180165477 A KR 20180165477A KR 102219385 B1 KR102219385 B1 KR 102219385B1
Authority
KR
South Korea
Prior art keywords
user interface
interface device
user
touch
intention
Prior art date
Application number
KR1020180165477A
Other languages
Korean (ko)
Other versions
KR20200076398A (en
Inventor
이기혁
윤은혜
구지성
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020180165477A priority Critical patent/KR102219385B1/en
Publication of KR20200076398A publication Critical patent/KR20200076398A/en
Application granted granted Critical
Publication of KR102219385B1 publication Critical patent/KR102219385B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry

Abstract

사용자 인터페이스 장치의 동작 방법 및 이를 수행하는 장치들이 개시된다. 일 실시예에 따른 사용자 인터페이스 장치는 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하기 위한 브레이크 장치와, 상기 사용자 인터페이스 장치를 사용하는 사용자의 터치를 감지하는 센서와, 상기 사용자의 터치에 상응하는 상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 컨트롤러를 포함한다.Disclosed are a method of operating a user interface device and devices for performing the same. A user interface device according to an embodiment includes a brake device for adjusting a friction force of a bottom surface of the user interface device, a sensor for sensing a user's touch using the user interface device, and the user's touch And a controller that controls the operation of the brake device based on the user's intention to use it.

Description

사용자 인터페이스 장치 및 이의 동작 방법{AN USER INTERFACE APPARATUS AND METHOD THEREOF}User interface device and its operation method {AN USER INTERFACE APPARATUS AND METHOD THEREOF}

아래 실시예들은 사용자 인터페이스 장치 및 이의 동작 방법에 관한 것이다.The following embodiments relate to a user interface device and a method of operating the same.

최근에는 PC의 GUI(Graphical user interface)의 주 조작 장치로 마우스와 터치 패드가 사용되고 있다.Recently, a mouse and a touch pad are used as main operating devices of a graphical user interface (GUI) of a PC.

마우스는 높은 포인팅 성능을 가지는 장치로 대부분의 데스크탑 환경에 사용되는 장치이다. 기본적인 마우스는 빛을 기반으로 하여 2 차원 좌표축에서 장치의 이동거리를 정밀하게 센싱하는 마우스 센서와 좌, 우 클릭을 위한 2개의 버튼, 스크롤 휠과 대응하는 버튼이 탑재되어 2차원 공간에서 커서를 움직이고 선택하는 작업, 관련 메뉴를 부르는 기능, 스크롤링 등의 기능을 수행할 수 있게 한다.The mouse is a device with high pointing performance and is used in most desktop environments. The basic mouse is equipped with a mouse sensor that precisely senses the moving distance of the device in a two-dimensional coordinate axis based on light, two buttons for left and right clicks, and a button corresponding to a scroll wheel to move the cursor in a two-dimensional space. It enables you to perform functions such as selecting tasks, calling related menus, and scrolling.

터치 패드는 직관적이고 다양한 vocabulary를 가진 터치 제스처로 인해 마우스보다 다양한 추가 기능을 제공한다.The touchpad offers more features than the mouse due to its intuitive and vocabulary touch gestures.

시장에서는 2009년 말 애플이 멀티 터치 마우스인 매직 마우스를 최초로 선보였다. 또한, 지금까지 주요 마우스 제조 업체들은 터치 형 마우스를 출시하고 있다.In the market at the end of 2009, Apple introduced the first multi-touch mouse, the Magic Mouse. In addition, so far, major mouse manufacturers are releasing touch-type mice.

그러나, 현재 터치 마우스는 주로 single touch만을 이용하고 있으며, 터치 패드에서 사용하는 것과 같은 멀티 터치 제스처를 지원하는 장치가 많지 않다. 몇몇 터치 마우스들은 Window 7 이후의 운영 체제에서 제시한 멀티 터치 제스처를 완전히 지원하는 제스처 군을 구현하고 있다. 다만, 장치가 고정되지 못한 상태에서 멀티 터치 제스처가 수행될 수 없기에, 몇몇 터치 마우스들은 사용이 불편하다.However, the current touch mouse mainly uses only a single touch, and there are not many devices that support multi-touch gestures such as those used in a touch pad. Some touch mice implement a group of gestures that fully support the multi-touch gestures suggested by Windows 7 and later operating systems. However, since the multi-touch gesture cannot be performed while the device is not fixed, some touch mice are inconvenient to use.

실시예들은 사용자의 특정 터치를 감지하여 사용자의 사용 의도를 파악하는 기술을 제공할 수 있다.The embodiments may provide a technology for detecting a user's specific touch to determine the user's intention to use.

또한, 실시예들은 사용자의 사용 의도에 기초하여 사용자 인터페이스 장치의 위치를 고정 또는 고정 해제시키는 기술을 제공할 수 있다.In addition, embodiments may provide a technique of fixing or releasing a position of a user interface device based on a user's intention to use it.

이에, 실시예들은 터치 마우스의 사용성을 높여 터치 패드 및 마우스의 성능을 동시에 제공하고, 터치 패드에서와 같이 고정된 기기 위에서 사용자가 사용자의 손가락을 터치한 상태에서 멀티 터치 제스처를 자유 및 편리하게 사용가능하고, 장치를 움직이는 세밀한 포인팅 성능(또는 포인터 컨트롤(pointer control)) 및 장치를 움직이기 편한 자리로 재위치 시키는 클러칭(clutching) 동작을 보장하고, 터치 마우스의 시장 확장에 기여하는 기술을 제공할 수 있다.Accordingly, the embodiments increase the usability of the touch mouse to provide the performance of the touch pad and the mouse at the same time, and free and convenient use of multi-touch gestures while the user touches the user's finger on a fixed device as in a touch pad. It is possible and ensures detailed pointing performance (or pointer control) to move the device and the clutching operation to reposition the device to a comfortable position, and provides a technology that contributes to the market expansion of the touch mouse. can do.

일 실시예에 따른 사용자 인터페이스 장치는 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하기 위한 브레이크 장치와, 상기 사용자 인터페이스 장치를 사용하는 사용자의 터치를 감지하는 센서와, 상기 사용자의 터치에 상응하는 상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 컨트롤러를 포함한다.A user interface device according to an embodiment includes a brake device for adjusting a friction force of a bottom surface of the user interface device, a sensor for sensing a user's touch using the user interface device, and the user's touch And a controller that controls the operation of the brake device based on the user's intention to use it.

상기 컨트롤러는 상기 사용자 인터페이스 장치에 대한 터치 수, 측면 터치의 유무 및 후면 터치의 유무 중에서 적어도 하나에 기초하여 상기 사용자의 사용 의도를 결정하는 결정 모듈과, 상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 제어 모듈을 포함할 수 있다.The controller includes a determination module that determines the user's intention to use based on at least one of a number of touches to the user interface device, a side touch, and a rear touch, and the brake device based on the user's intention to use. It may include a control module that controls the operation of.

상기 결정 모듈은 상기 터치 수가 임계치 이하이거나 상기 측면 터치가 감지되지 않거나 상기 후면 터치가 감지되지 않는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것으로 결정할 수 있다.When the number of touches is less than or equal to a threshold, the side touch is not detected, or the rear touch is not detected, the determination module may determine the user's intention to operate a touch pad of the user interface device.

상기 결정 모듈은 상기 터치 수가 임계치를 초과하거나 상기 측면 터치가 감지되거나, 상기 후면 터치가 감지되는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것으로 결정할 수 있다.When the number of touches exceeds a threshold value, the side touch is sensed, or the rear touch is sensed, the determination module may determine the user's intention to manipulate the location of the user interface device.

상기 제어 모듈은 상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 높일 수 있다.When the user's intention to use is to manipulate the touch pad of the user interface device, the control module may control the brake device to increase the frictional force of the bottom surface of the user interface device.

상기 제어 모듈은 상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 낮출 수 있다.When the user's intention to use is to manipulate the position of the user interface device, the control module may control the brake device to lower the frictional force of the bottom surface of the user interface device.

상기 센서는 상기 사용자 인터페이스 장치의 상면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치의 상면을 터치하는 상면 터치를 감지하는 상면 터치 센서와, 상기 사용자 인터페이스 장치의 측면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치의 측면을 터치하는 측면 터치를 감지하는 측면 터치 센서와, 상기 사용자 인터페이스 장치의 후면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치를 감싸 상기 사용자 인터페이스 장치의 후면이 가려지는 후면 터치를 감지하는 후면 터치 센서 중에서 적어도 하나를 포함할 수 있다.The sensor is disposed on an upper surface of the user interface device, a top touch sensor that senses an upper surface touch when the user touches the upper surface of the user interface device, and is disposed on a side surface of the user interface device, so that the user A side touch sensor that senses a side touch that touches a side of the interface device, and is disposed on the rear surface of the user interface device, and the user surrounds the user interface device and detects a rear touch that covers the rear side of the user interface device. It may include at least one of the rear touch sensors.

상기 브레이크 장치는 와이어와, 상기 와이어의 일면에 접속되어, 상기 컨트롤러의 제어에 따라 상기 와이어의 길이를 조절하는 액추에이터와, 상기 와이어의 다른 일면에 접속되어, 상기 와이어의 길이에 대응하는 장력에 따라 상기 사용자 인터페이스 장치의 바닥 면과 지면간의 접촉 면적을 변화하는 브레이크 소자를 포함할 수 있다.The brake device is connected to a wire, an actuator that is connected to one side of the wire and adjusts the length of the wire under the control of the controller, and is connected to the other side of the wire, according to a tension corresponding to the length of the wire. It may include a brake element that changes the contact area between the bottom surface and the ground of the user interface device.

상기 브레이크 장치는 상기 컨트롤러의 제어에 따른 부력을 통해 상기 사용자 인터페이스 장치를 지면 또는 공중에 위치하게 하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 변화할 수 있다.The brake device may change the frictional force of the bottom surface of the user interface device by placing the user interface device on the ground or in the air through buoyancy under the control of the controller.

일 실시예에 따른 사용자 인터페이스 장치의 동작 방법은 상기 사용자 인터페이스 장치를 사용하는 사용자의 터치를 감지하는 단계와, 상기 사용자의 터치에 상응하는 상기 사용자의 사용 의도에 기초하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하기 위한 브레이크 장치의 동작을 제어하는 단계를 포함한다.A method of operating a user interface device according to an embodiment includes the steps of detecting a user's touch using the user interface device, and a bottom surface of the user interface device based on the user's intention to use the user's touch. And controlling the operation of the brake device to adjust the frictional force of the.

상기 감지하는 단계는 상기 사용자 인터페이스 장치의 상면에 배치된 상면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치의 상면을 터치하는 상면 터치를 감지하는 단계와, 상기 사용자 인터페이스 장치의 측면에 배치된 측면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치의 측면을 터치하는 측면 터치를 감지하는 단계와, 상기 사용자 인터페이스 장치의 후면에 배치된 후면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치를 감싸 상기 사용자 인터페이스 장치의 후면이 가려지는 후면 터치를 감지하는 단계 중에서 적어도 하나를 포함할 수 있다.The sensing may include detecting a top touch that the user touches an upper surface of the user interface device through a top touch sensor disposed on the upper surface of the user interface device, and a side touch disposed on a side surface of the user interface device. Sensing a side touch of the user touching a side surface of the user interface device through a sensor, and the user wrapping the user interface device through a rear touch sensor disposed on the rear surface of the user interface device. It may include at least one of the steps of detecting a back touch in which the back of the back is covered.

상기 제어하는 단계는 상기 사용자 인터페이스 장치에 대한 터치 수, 측면 터치의 유무 및 후면 터치의 유무 중에서 적어도 하나에 기초하여 상기 사용자의 사용 의도를 결정하는 단계와, 상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계를 포함할 수 있다.The controlling may include determining the user's intention to use the user based on at least one of the number of touches to the user interface device, the presence of a side touch, and the presence of a rear touch, and the brake based on the user's intention to use. It may include controlling the operation of the device.

상기 결정하는 단계는 상기 터치 수가 임계치 이하이거나 상기 측면 터치가 감지되지 않거나 상기 후면 터치가 감지되지 않는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것으로 결정하는 단계를 포함할 수 있다.The determining includes determining that the user's intention to use is to manipulate the touch pad of the user interface device when the number of touches is less than a threshold value, the side touch is not detected, or the rear touch is not detected. can do.

상기 결정하는 단계는 상기 터치 수가 임계치를 초과이거나 상기 측면 터치가 감지되거나 상기 후면 터치가 감지되는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것으로 결정할 수 있다.In the determining step, when the number of touches exceeds a threshold value, the side touch is detected, or the rear touch is detected, the user's intention to use may be determined to manipulate the location of the user interface device.

상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는 상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 변의 마찰력을 높이는 단계를 포함할 수 있다.In the controlling of the operation of the brake device based on the user's intention to use, when the user's intention to use is to manipulate the touch pad of the user interface device, the brake device is controlled to It may include the step of increasing the friction force of the floor side.

상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는 상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 낮추는 단계를 포함할 수 있다.The step of controlling the operation of the brake device based on the user's intention to use may include controlling the brake device to control the bottom of the user interface device, when the user's intention to use is to manipulate the position of the user interface device. It may include the step of lowering the friction force of the surface.

상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는 상기 사용자 인터페이스 장치의 바닥 면과 지면간의 접촉 면적이 변화되는 상기 브레이크 장치의 브레이크 소자를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하는 단계를 포함할 수 있다.The controlling of the operation of the brake device based on the user's intention to use may include controlling the brake element of the brake device in which the contact area between the bottom surface of the user interface device and the ground surface is changed, It may include the step of adjusting the friction force.

상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는 부력을 통해 상기 사용자 인터페이스 장치를 지면 또는 공중에 위치하게 하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 변화하는 단계를 포함할 수 있다.Controlling the operation of the brake device based on the user's intention to use may include changing the frictional force of the bottom surface of the user interface device by placing the user interface device on the ground or in the air through buoyancy. have.

도 1은 일 실시예에 따른 사용자 인터페이스 시스템의 개략적인 블록도를 나타낸다.
도 2는 도 1에 도시된 사용자 인터페이스 장치의 개략적인 블록도를 나타낸다.
도 3은 도 2에 도시된 센서의 개략적인 블록도를 나타낸다.
도 4는 도 3에 도시된 상면 터치 센서 및 측면 터치 센서를 설명하기 위한 일 예를 나타낸다.
도 5는 도 2에 도시된 컨트롤러의 개략적인 블록도를 나타낸다.
도 6a는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 일 예를 나타낸다.
도 6b는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 다른 예를 나타낸다.
도 6c는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 또 다른 예를 나타낸다.
도 6d는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 또 다른 예를 나타낸다.
도 7은 일 실시예에 따른 브레이크 장치의 개략적인 블록도를 나타낸다.
도 8a는 도 7에 도시된 브레이크 장치의 동작의 일 예를 나타낸다.
도 8b는 도 7에 도시된 브레이크 장치의 동작의 다른 예를 나타낸다.
도 9는 도 7에 도시된 브레이크 소자를 설명하기 위한 일 예를 나타낸다.
도 10a는 도 7에 도시된 브레이크 장치의 일 구현 예를 나타낸다.
도 10b는 도 7에 도시된 브레이크 장치의 다른 구현 예를 나타낸다.
도 11은 도 1에 도시된 사용자 인터페이스 장치의 동작을 설명하기 위한 순서도를 나타낸다.1 is a schematic block diagram of a user interface system according to an embodiment.
FIG. 2 is a schematic block diagram of a user interface device shown in FIG. 1.
3 shows a schematic block diagram of the sensor shown in FIG. 2.
FIG. 4 shows an example for explaining the top touch sensor and the side touch sensor shown in FIG. 3.
5 shows a schematic block diagram of the controller shown in FIG. 2.
6A shows an example of an operation in which the controller determines the user's intention to use.
6B shows another example of an operation in which the controller determines the user's intention to use.
6C shows another example of an operation in which the controller determines the user's intention to use.
6D shows another example of an operation in which the controller determines the user's intention to use.
7 is a schematic block diagram of a brake device according to an embodiment.
8A shows an example of an operation of the brake device illustrated in FIG. 7.
8B shows another example of an operation of the brake device shown in FIG. 7.
9 shows an example for describing the brake element shown in FIG. 7.
10A illustrates an example of an implementation of the brake device shown in FIG. 7.
10B shows another example of implementation of the brake device illustrated in FIG. 7.
11 is a flowchart illustrating an operation of the user interface device illustrated in FIG. 1.

이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.Hereinafter, exemplary embodiments will be described in detail with reference to the accompanying drawings. However, since various changes may be made to the embodiments, the scope of the rights of the patent application is not limited or limited by these embodiments. It should be understood that all changes, equivalents, or substitutes to the embodiments are included in the scope of the rights.

실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the examples are used for illustrative purposes only and should not be interpreted as limiting. Singular expressions include plural expressions unless the context clearly indicates otherwise. In the present specification, terms such as "comprise" or "have" are intended to designate the presence of features, numbers, steps, actions, components, parts, or combinations thereof described in the specification, but one or more other features. It is to be understood that the presence or addition of elements or numbers, steps, actions, components, parts, or combinations thereof, does not preclude in advance.

제1 또는 제2등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해서 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만, 예를 들어 실시예의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but the components should not be limited by terms. The terms are only for the purpose of distinguishing one component from other components, for example, without departing from the scope of rights according to the concept of the embodiment, the first component may be named as the second component, and similarly The second component may also be referred to as a first component.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the embodiment belongs. Terms as defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in this application. Does not.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, in the description with reference to the accompanying drawings, the same reference numerals are assigned to the same components regardless of the reference numerals, and redundant descriptions thereof will be omitted. In describing the embodiments, when it is determined that a detailed description of related known technologies may unnecessarily obscure the subject matter of the embodiments, the detailed description thereof will be omitted.

본 명세서에서의 모듈(module)은 본 명세서에서 설명되는 각 명칭에 따른 기능과 동작을 수행할 수 있는 하드웨어를 의미할 수도 있고, 특정 기능과 동작을 수행할 수 있는 컴퓨터 프로그램 코드를 의미할 수도 있고, 또는 특정 기능과 동작을 수행시킬 수 있는 컴퓨터 프로그램 코드가 탑재된 전자적 기록 매체, 예를 들어 프로세서 또는 마이크로 프로세서를 의미할 수 있다.In the present specification, a module may mean hardware capable of performing functions and operations according to each name described in the specification, or may mean a computer program code capable of performing specific functions and operations. Or, it may refer to an electronic recording medium, for example, a processor or a microprocessor in which a computer program code capable of performing a specific function and operation is mounted.

다시 말해, 모듈이란 본 발명의 기술적 사상을 수행하기 위한 하드웨어 및/또는 상기 하드웨어를 구동하기 위한 소프트웨어의 기능적 및/또는 구조적 결합을 의미할 수 있다.In other words, the module may mean a functional and/or structural combination of hardware for performing the technical idea of the present invention and/or software for driving the hardware.

도 1은 일 실시예에 따른 사용자 인터페이스 시스템의 개략적인 블록도를 나타낸다.1 is a schematic block diagram of a user interface system according to an embodiment.

도 1을 참고하면, 사용자 인터페이스 시스템(a user interface system; 10)은 전자 장치(an electronic apparatus; 100) 및 사용자 인터페이스 장치(a user interface appratus; 300)를 포함한다.Referring to FIG. 1, a user interface system 10 includes an electronic apparatus 100 and a user interface appratus 300.

전자 장치(100)는 사용자 인터페이스 장치(300)로부터 전송된 신호에 따라 동작하는 장치일 수 있다. 전자 장치(10)는 인터넷 통신망, 인트라넷, 근거리 통신망(LAN), 유 및 무선 LAN, Wi-Fi, LF, Xbee, Zigbee, Blue-Tooth 및 Beacon 등을 다양한 통신 체계를 통해 사용자 인터페이스 장치(300)와 통신을 수행할 수 있다.The electronic device 100 may be a device that operates according to a signal transmitted from the user interface device 300. The electronic device 10 includes an Internet communication network, an intranet, a local area network (LAN), a wired and wireless LAN, Wi-Fi, LF, Xbee, Zigbee, Blue-Tooth, and Beacon through various communication systems. And communication.

예를 들어, 전자 장치(100)는 PC(personal computer), 데이터 서버, 또는 휴대용 전자 장치 등 다양한 장치일 수 있다. 휴대용 전자 장치는 랩탑(laptop) 컴퓨터, 이동 전화기, 스마트 폰(smart phone), 태블릿(tablet) PC, 모바일 인터넷 디바이스(mobile internet device(MID)), PDA(personal digital assistant), EDA(enterprise digital assistant), 디지털 스틸 카메라(digital still camera), 디지털 비디오 카메라(digital video camera), PMP(portable multimedia player), PND(personal navigation device 또는 portable navigation device), 휴대용 게임 콘솔(handheld game console), e-북(e-book), 스마트 디바이스(smart device)으로 구현될 수 있다. 이때, 스마트 디바이스는 스마트 워치(smart watch) 또는 스마트 밴드(smart band)로 구현될 수 있다.For example, the electronic device 100 may be various devices such as a personal computer (PC), a data server, or a portable electronic device. Portable electronic devices include a laptop computer, a mobile phone, a smart phone, a tablet PC, a mobile internet device (MID), a personal digital assistant (PDA), an enterprise digital assistant (EDA). ), digital still camera, digital video camera, portable multimedia player (PMP), personal navigation device or portable navigation device (PND), handheld game console, e-book (e-book), can be implemented as a smart device (smart device). In this case, the smart device may be implemented as a smart watch or a smart band.

사용자 인터페이스 장치(300)는 사용자의 입력에 대응하는 신호를 전자 장치(100)로 전송하는 인터페이스 장치일 수 있다. 이때, 사용자의 입력은 사용자가 사용자 인터페이스 장치(300)를 터치하는 동작(또는 제스처)일 수 있다.The user interface device 300 may be an interface device that transmits a signal corresponding to a user's input to the electronic device 100. In this case, the user's input may be an operation (or gesture) in which the user touches the user interface device 300.

예를 들어, 사용자 인터페이스 장치(300)는 전자 장치(100)의 주변 기기로 사용되는 터치 패드(또는 터치 패널) 및 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 변화시키는 브레이크를 장착한 터치 마우스로써, 일반적인 마우스 및 터치 패드의 기능을 모두 포함한 장치일 수 있다. 이때, 일반적인 마우스는 마우스의 사용 경험에 따라 바닥 면이 미끄러지게 설계된 마우스일 수 있다. 일반적인 마우스는 터치 패드 위에서 수행하는 것과 같은 사용자 경험을 제공하지 못하여 활용 범위가 제한될 수 있다.For example, the user interface device 300 includes a touch pad (or touch panel) used as a peripheral device of the electronic device 100 and a touch mouse equipped with a brake that changes the frictional force of the bottom surface of the user interface device 300 As such, it may be a device including all functions of a general mouse and a touch pad. In this case, the general mouse may be a mouse whose floor surface is designed to slide according to the experience of using the mouse. A typical mouse may not provide a user experience such as that performed on a touch pad, and the range of application may be limited.

사용자 인터페이스 장치(300)는 사용자의 특정 터치 제스처를 감지하여 사용자의 사용 의도를 파악하고, 사용자의 사용 의도에 기초하여 사용자 인터페이스 장치(300)의 위치를 고정 또는 고정 해제시킬 수 있다.The user interface device 300 may detect a user's specific touch gesture to determine the user's intention to use, and fix or release the position of the user interface device 300 based on the user's intention to use.

사용자 인터페이스 장치(300)는 사용자의 특정 터치를 감지하여 사용자의 사용 의도를 파악하여 사용자 인터페이스 장치(300)의 위치를 고정 또는 고정 해제시킴으로써, 터치 마우스의 사용성을 높여 터치 패드 및 마우스의 성능을 동시에 제공할 수 있다.The user interface device 300 detects a user's specific touch, identifies the user's intention to use, and fixes or releases the position of the user interface device 300, thereby increasing the usability of the touch mouse and improving the performance of the touch pad and mouse at the same time. Can provide.

이때, 사용자 인터페이스 장치(300)는 사용자가 터치 패드에서와 같이 고정된 기기 위에서 사용자가 사용자의 손가락을 터치한 상태에서 멀티 터치 제스처를 자유롭고, 편리하게 사용가능하게 할 수 있다.In this case, the user interface device 300 may freely and conveniently use a multi-touch gesture while the user touches a user's finger on a fixed device such as a touch pad.

또한, 사용자 인터페이스 장치(300)는 장치를 움직이는 세밀한 포인팅 성능(또는 포인터 컨트롤(pointer control)) 및 장치를 움직이기 편한 자리로 재위치 시키는 클러칭(clutching) 동작을 보장하고, 터치 마우스의 시장 확장에 기여할 수 있다.In addition, the user interface device 300 guarantees a detailed pointing performance (or pointer control) that moves the device and a clutching operation to reposition the device to an easy-to-move position, and expands the market of the touch mouse. Can contribute to

도 2는 도 1에 도시된 사용자 인터페이스 장치의 개략적인 블록도를 나타낸다.FIG. 2 is a schematic block diagram of a user interface device shown in FIG. 1.

도 2를 참조하면, 사용자 인터페이스 장치(300)는 센서(a sensor; 310), 컨트롤러(a controller; 330) 및 브레이크 장치(a break apparatus; 350)을 포함한다.Referring to FIG. 2, the user interface device 300 includes a sensor 310, a controller 330, and a break apparatus 350.

센서(310)는 사용자 인터페이스 장치(300)를 사용하는 사용자의 터치를 감지하여 사용자 터치에 상응하는(또는 대응하는) 터치 신호를 컨트롤러(330)에 전송할 수 있다.The sensor 310 may sense a user's touch using the user interface device 300 and transmit a touch signal corresponding to (or corresponding to) the user's touch to the controller 330.

컨트롤러(330)는 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 조절하기 위해 사용자의 터치에 상응하는(또는 대응하는) 사용자의 사용 의도에 기초하여 브레이크 장치(350)의 동작을 제어할 수 있다. 이때, 사용자의 사용 의도는 사용자의 터치를 통해 사용자 인터페이스 장치(300)를 조작하기 위한 사용자의 기기 사용 의도일 수 있다.The controller 330 may control the operation of the brake device 350 based on the user's intention to use (or correspond to) the user's touch in order to adjust the friction force of the bottom surface of the user interface device 300. . In this case, the user's intention to use may be the user's intention to use the device to manipulate the user interface device 300 through the user's touch.

즉, 컨트롤러(330)는 브레이크 장치(350)의 동작을 제어하여 사용자의 사용 의도에 따라 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 조절함으로써, 사용자 인터페이스 장치(300)의 위치를 고정 또는 고정 해제할 수 있다.That is, the controller 330 controls the operation of the brake device 350 and adjusts the frictional force of the bottom surface of the user interface device 300 according to the user's intention, thereby fixing or fixing the position of the user interface device 300 Can be released.

브레이크 장치(350)는 사용자 인터페이스 장치(300)의 바닥 면에 배치되어, 컨트롤러(330)의 제어에 따라 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 조절할 수 있다. 예를 들어, 브레이크 장치(350)는 지면으로부터 사용자 인터페이스 장치(300)의 바닥 면을 단순하게 브레이크하거나, 사용자 인터페이스 장치(300)의 바닥 면과 지면간의 마찰 상수를 다양하게 변화하여 브레이크할 수 있다.The brake device 350 is disposed on the bottom surface of the user interface device 300, and according to the control of the controller 330, the friction force of the bottom surface of the user interface device 300 may be adjusted. For example, the brake device 350 may simply brake the bottom surface of the user interface device 300 from the ground or may brake by varying the friction constant between the bottom surface of the user interface device 300 and the ground. .

도 3은 도 2에 도시된 센서의 개략적인 블록도를 나타낸다.3 shows a schematic block diagram of the sensor shown in FIG. 2.

도 3을 참조하면, 센서(310)는 상면 터치 센서(a top surface touch sensor; 311) 및 측면 터치 센서(a side touch sensor; 313) 및 후면 터치 센서(a rear touch sencor; 315) 중에서 적어도 하나를 포함할 수 있다.3, the sensor 310 includes at least one of a top surface touch sensor 311, a side touch sensor 313, and a rear touch sensor 315. It may include.

상면 터치 센서(311)는 사용자 인터페이스 장치(300)의 상면에 배치되어, 사용자가 사용자 인터페이스 장치(300)의 상면을 터치하는 상면 터치를 감지할 수 있다.The upper surface touch sensor 311 is disposed on the upper surface of the user interface device 300, so that a user may sense an upper surface touch that touches the upper surface of the user interface device 300.

예를 들어, 상면 터치 센서(311)는 사용자 인터페이스 장치(300)의 터치 패드 내의 센서 및 터치 패드로 구현되어, 터치 패드를 조작하기(또는 사용하기) 위한 사용자의 상면 터치를 감지할 수 있다. 이때, 상면 터치는 사용자가 사용자 인터페이스 장치(300)의 터치 패드를 조작하기 위해 사용자가 사용자 인터페이스 장치(300)를 잡지 않고 사용자 인터페이스 장치(300)의 상면에서 자유롭게 움직이는 제스처일 수 있다. 터치 패드를 조작하기 위한 제스처는 pinch-to-zoom 동작과 같은 멀티 터치 제스처일 수 있다. 멀티 터치 제스처는 사용자가 사용자의 손목을 들고 사용자 인터페이스 장치(300)의 터치 패드를 사용하는 제스처일 수 있다.For example, the upper touch sensor 311 may be implemented as a sensor and a touch pad in the touch pad of the user interface device 300 to detect a user's upper touch to manipulate (or use) the touch pad. In this case, the upper surface touch may be a gesture that the user moves freely on the upper surface of the user interface device 300 without holding the user interface device 300 in order for the user to manipulate the touch pad of the user interface device 300. The gesture for manipulating the touch pad may be a multi-touch gesture such as a pinch-to-zoom operation. The multi-touch gesture may be a gesture in which a user raises a user's wrist and uses a touch pad of the user interface device 300.

즉, 상면 터치 센서(311)는 사용자가 사용자 인터페이스 장치(300)의 상면에서 움직이는 행위를 인식하여 사용자 인터페이스 장치(300)에 대한 사용자의 상면 터치를 감지할 수 있다.That is, the upper surface touch sensor 311 may detect the user's upper surface touch on the user interface device 300 by recognizing an action of the user moving on the upper surface of the user interface device 300.

측면 터치 센서(313)는 사용자 인터페이스 장치(300)의 측면에 배치되어, 사용자가 사용자 인터페이스 장치(300)의 측면을 터치하는 측면 터치를 감지할 수 있다.The side touch sensor 313 is disposed on the side of the user interface device 300 to detect a side touch when a user touches the side of the user interface device 300.

예를 들어, 측면 터치 센서(313)는 사용자 인터페이스 장치(300)와 구별되는 센서(예를 들어, 사용자 인터페이스 장치(300)의 내부 또는 외부에 구현된 별도의 센서)로 구현되어, 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 사용자의 측면 터치를 감지할 수 있다. 이때, 측면 터치는 사용자 인터페이스 장치(300)의 위치를 조작하기 위해 사용자가 사용자 인터페이스 장치(300)의 측면을 잡고 움직이는 제스처일 수 있다.For example, the side touch sensor 313 is implemented as a sensor distinct from the user interface device 300 (eg, a separate sensor implemented inside or outside the user interface device 300), and A user's side touch to manipulate the location of 300 may be detected. In this case, the side touch may be a gesture of a user holding and moving the side surface of the user interface device 300 in order to manipulate the position of the user interface device 300.

즉, 측면 터치 센서(313)는 사용자가 사용자 인터페이스 장치(300)의 측면을 잡고 움직이는 행위를 인식하여 사용자의 측면 터치를 감지할 수 있다.That is, the side touch sensor 313 may detect the user's side touch by recognizing the action of the user holding and moving the side of the user interface device 300.

후면 터치 센서(315)는 사용자 인터페이스 장치(300)의 후면에 배치되어, 사용자가 사용자 인터페이스 장치(300)를 감싸 사용자 인터페이스 장치(300)의 후면이 가려지는 사용자의 후면 터치를 감지할 수 있다.The rear touch sensor 315 is disposed on the rear surface of the user interface device 300, so that the user may sense the user's touch on the rear surface of the user interface apparatus 300 by covering the user interface apparatus 300.

예를 들어, 후면 터치 센서(315)는 사용자 인터페이스 장치(300)와 구별되는 센서(예를 들어, 사용자 인터페이스 장치(300)의 내부 또는 외부에 구현된 별도의 센서)로 구현되어, 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 사용자의 후면 터치를 감지할 수 있다. 이때, 후면 터치는 사용자 인터페이스 장치(300)의 위치를 조작하기 위해 사용자가 사용자의 손바닥으로 사용자 인터페이스 장치(300)를 감싸 사용자 인터페이스 장치(300)를 잡고 움직이는 제스처일 수 있다.For example, the rear touch sensor 315 is implemented as a sensor distinct from the user interface device 300 (eg, a separate sensor implemented inside or outside the user interface device 300), and The user's back touch to manipulate the position of 300 may be detected. In this case, the back touch may be a gesture that the user wraps around the user interface device 300 with the user's palm and moves while holding the user interface device 300 in order to manipulate the position of the user interface device 300.

즉, 후면 터치 센서(315)는 사용자가 사용자의 손바닥으로 사용자 인터페이스 장치(300)를 감싸고 움직이는 행위를 인식하여 사용자의 후면 터치를 감지할 수 있다.That is, the rear touch sensor 315 may detect the user's rear touch by recognizing the action of the user wrapping and moving the user interface device 300 with the user's palm.

상술한 바와 같이 상면 터치 센서(311), 측면 터치 센서(313) 및 후면 터치 센서(315)는 터치 센서로 구현되지만, 이에 한정하는 것은 아니다. 예를 들어, 상면 터치 센서(311), 측면 터치 센서(313) 및 후면 터치 센서(315)는 사용자의 직접적인 터치를 센싱하는 터치 센서가 아닌 근접 거리 센서(procimity sensor)로 구현되어 사용자 인터페이스 장치(300)를 사용하기 위해 사용자 인터페이스 장치(300)에 근접한 사용자의 손(또는 손가락)을 센싱할 수 있다.As described above, the upper touch sensor 311, the side touch sensor 313, and the rear touch sensor 315 are implemented as touch sensors, but are not limited thereto. For example, the upper touch sensor 311, the side touch sensor 313, and the rear touch sensor 315 are implemented as a proximity sensor instead of a touch sensor that senses a user's direct touch. In order to use 300), a user's hand (or finger) close to the user interface device 300 may be sensed.

도 4는 도 3에 도시된 상면 터치 센서 및 측면 터치 센서를 설명하기 위한 일 예를 나타낸다.FIG. 4 shows an example for describing an upper touch sensor and a side touch sensor shown in FIG. 3.

도 4를 참조하면, 사용자 인터페이스 장치(300)는 상면 터치 센서(311), 측면 터치 센서(313) 및 후면 터치 센서(315)를 포함할 수 있다.Referring to FIG. 4, the user interface device 300 may include an upper touch sensor 311, a side touch sensor 313, and a rear touch sensor 315.

상면 터치 센서(311)는 제1 위치에 배치된 제1 상면 터치 센서(311a), 제2 위치에 배치된 제2 상면 터치 센서(311b) 및 제3 위치에 배치된 제3 상면 터치 센서(311c)로 구성된 터치 패드일 수 있다.The upper touch sensor 311 includes a first upper touch sensor 311a disposed at a first position, a second upper touch sensor 311b disposed at a second position, and a third upper touch sensor 311c disposed at a third position. ) May be a touch pad.

상면 터치 센서(311)는 제1 상면 터치 센서 내지 제3 상면 터치 센서(311a 내지 311c) 각각을 통해 사용자의 상면 터치를 감지할 수 있다.The upper touch sensor 311 may sense a user's upper touch through the first to third upper touch sensors 311a to 311c, respectively.

측면 터치 센서(313)는 제4 위치에 배치된 제1 측면 터치 센서(313a) 및 제5 위치에 배치된 제2 측면 터치 센서(313b)로 구성된 센서일 수 있다.The side touch sensor 313 may be a sensor composed of a first side touch sensor 313a disposed at a fourth position and a second side touch sensor 313b disposed at a fifth position.

측면 터치 센서(313)는 제1 및 제2 측면 터치 센서(313a, 313b) 각각을 통해 사용자의 측면 터치를 감지할 수 있다.The side touch sensor 313 may sense a user's side touch through the first and second side touch sensors 313a and 313b, respectively.

후면 터치 센서(315)는 제6 위치에 배치된 단일 센서로 구현되어 사용자의 후면 터치를 감지할 수 있다.The rear touch sensor 315 may be implemented as a single sensor disposed at the sixth position to detect a user's rear touch.

제1 위치 내지 제6 위치는 사용자가 사용자 인터페이스 장치(300)를 그립하는 법에 따라 정해질 수 있다. 예를 들어, 제1 위치는 사용자의 검지(또는 집게 손가락)에 대응하는 위치이고, 제2 위치는 사용자의 중지(또는 가운뎃 손가락)에 대응하는 위치이고, 제3 위치는 사용자의 약지(약 손가락)에 대응하는 위치이고, 제4 위치는 사용자의 엄지(또는 엄지 손가락)에 대응하는 위치이고, 제5 위치는 사용자의 소지(또는 새끼 손가락)에 대응하는 위치이고, 제6 위치는 사용자의 손과 손목 사이의 손바닥에 대응하는 위치일 수 있다.The first to sixth positions may be determined according to how the user grips the user interface device 300. For example, the first position is a position corresponding to the user's index finger (or index finger), the second position is a position corresponding to the user's middle finger (or middle finger), and the third position is the user's ring finger (about finger). ), the fourth position is a position corresponding to the user's thumb (or thumb), the fifth position is a position corresponding to the user's possession (or little finger), and the sixth position is the user's hand It may be a position corresponding to the palm between the and the wrist.

도 4에 도시된 바와 같이, 상면 터치 센서(311)가 제1 상면 터치 센서 내지 제3 상면 터치 센서(311a 내지 311c)로 구성되고, 측면 터치 센서(313)가 제1 측면 터치 센서(313a) 및 제2 측면 터치 센서(313b)로 구성되고, 후면 터치 센서(315)가 단일 센서로 구현되지만, 반드시 이에 한정하는 것은 아니다. 상면 터치 센서(311)는 사용자 인터페이스 장치(300)의 상면의 다양한 위치에 배치되는 단일 또는 복수의 터치 패드 및/또는 센서로 구성되고, 측면 터치 센서(313)는 사용자 인터페이스 장치(300)의 측면의 다양한 위치에 배치되는 단일 또는 복수의 센서로 구성되고, 후면 터치 센서(315)는 사용자 인터페이스 장치(300)의 후면의 다양한 위치에 배치되는 단일 또는 복수의 센서로 구성될 수 있다.As shown in FIG. 4, the upper touch sensor 311 is composed of a first upper touch sensor to a third upper touch sensor 311a to 311c, and the side touch sensor 313 is a first side touch sensor 313a. And a second side touch sensor 313b, and the rear touch sensor 315 is implemented as a single sensor, but is not limited thereto. The upper touch sensor 311 is composed of a single or a plurality of touch pads and/or sensors disposed at various positions on the upper surface of the user interface device 300, and the side touch sensor 313 is a side surface of the user interface device 300 It is composed of a single or a plurality of sensors disposed at various positions of the, and the rear touch sensor 315 may be composed of a single or a plurality of sensors disposed at various positions of the rear of the user interface device 300.

도 5는 도 2에 도시된 컨트롤러의 개략적인 블록도를 나타낸다.5 shows a schematic block diagram of the controller shown in FIG. 2.

도 5를 참조하면, 컨트롤러(330)는 결정 모듈(a decision module; 331) 및 제어 모듈(a controll module; 333)을 포함할 수 있다.Referring to FIG. 5, the controller 330 may include a decision module 331 and a control module 333.

결정 모듈(311)은 센서(310)로부터 전송된 터치 신호에 기초하여 사용자 인터페이스 장치(300)에 대한 상면 터치, 측면 터치 및 후면 터치 중에서 적어도 하나의 터치 수 및/또는 터치 유무를 획득할 수 있다.The determination module 311 may obtain the number of touches and/or the presence or absence of at least one of the top touch, the side touch, and the rear touch for the user interface device 300 based on the touch signal transmitted from the sensor 310. .

결정 모듈(331)은 사용자 인터페이스 장치(300)에 대한 터치 수, 측면 터치의 유무 및 후면 터치의 유무 중에서 적어도 하나에 기초하여 사용자의 사용 의도를 결정할 수 있다. 이때, 터치 수는 터치가 감지되지 않다가 동시에 새롭게 감지되는 복수의 터치들의 총 터치 수일 수 있다. 복수의 터치들은 사용자가 사용자 인터페이스 장치(300)를 처음 터치하는 초기 터치일 수 있다.The determination module 331 may determine the user's intention to use based on at least one of the number of touches on the user interface device 300, the presence of side touches, and the presence of rear touches. In this case, the number of touches may be the total number of touches of a plurality of touches that are newly detected at the same time after a touch is not detected. The plurality of touches may be initial touches when the user first touches the user interface device 300.

터치 수가 임계치 이하이거나 측면 터치가 감지되지 않거나 후면 터치가 감지되지 않는 경우, 결정 모듈(331)은 사용자의 사용 의도를 사용자 인터페이스 장치(300)의 터치 패드를 조작하기 위한 것으로 결정할 수 있다. 이때, 임계치는 기 설정된 터치 수일 수 있다.When the number of touches is less than or equal to a threshold, a side touch is not detected, or a rear touch is not detected, the determination module 331 may determine the user's intention to operate the touch pad of the user interface device 300. In this case, the threshold value may be a preset number of touches.

터치 수가 임계치를 초과하거나 측면 터치가 감지되거나 후면 터치가 감지되는 경우, 결정 모듈(331)은 사용자의 사용 의도를 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것으로 결정할 수 있다.When the number of touches exceeds a threshold value, a side touch is detected, or a rear touch is detected, the determination module 331 may determine the user's intention to use the position of the user interface device 300.

제어 모듈(333)은 사용자의 사용 의도에 기초하여 브레이크 장치(350)의 동작을 제어할 수 있다.The control module 333 may control the operation of the brake device 350 based on the user's intention to use it.

예를 들어, 사용자의 사용 의도가 사용자 인터페이스 장치(300)의 터치 패드를 조작하기 위한 것인 경우, 제어 모듈(333)은 브레이크 장치(350)를 제어하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 높일 수 있다.For example, when the user's intention to use is to manipulate the touch pad of the user interface device 300, the control module 333 controls the brake device 350 to control the bottom surface of the user interface device 300. It can increase friction.

다른 예를 들어, 사용자의 사용 의도가 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것인 경우, 제어 모듈(333)은 브레이크 장치(350)를 제어하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 낮출 수 있다.For another example, when the user's intention to use is to manipulate the position of the user interface device 300, the control module 333 controls the brake device 350 to control the bottom surface of the user interface device 300. It can lower the friction force.

도 6a는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 일 예를 나타낸다.6A shows an example of an operation in which the controller determines the user's intention to use.

도 6a는 컨트롤러(330)가 측면 터치 및/또는 후면 터치에 기초하여 사용자의 의도를 결정하는 동작을 나타낸 것이다.6A illustrates an operation in which the controller 330 determines a user's intention based on a side touch and/or a rear touch.

결정 모듈(331)은 제1 측면 터치 센서(313a) 및/또는 후면 터치 센서(315)를 이용하여 사용자의 측면 터치의 유무 및/또는 후면 터치의 유무에 따라 사용자의 사용 의도를 결정할 수 있다.The determination module 331 may use the first side touch sensor 313a and/or the rear touch sensor 315 to determine the user's intention to use according to the presence or absence of the user's side touch and/or the presence of the rear touch.

먼저, 결정 모듈(331)은 제1 측면 터치 센서(313a)를 통해 사용자의 터치를 감지하여 사용자의 측면 터치의 유무를 판단하고, 후면 터치 센서(315)를 통해 사용자의 터치를 감지하여 사용자의 후면 터치의 유무를 판단할 수 있다.First, the determination module 331 detects the user's touch through the first side touch sensor 313a to determine the presence or absence of the user's side touch, and detects the user's touch through the rear touch sensor 315 It is possible to determine the presence or absence of a rear touch.

사용자가 사용자의 엄지로 사용자 인터페이스 장치(300)의 왼쪽 측면을 터치하는 경우, 결정 모듈(331)은 제1 측면 터치 센서(313a)를 통해 사용자의 엄지 터치를 감지하여 사용자의 측면 터치를 유로 판단할 수 있다.When the user touches the left side of the user interface device 300 with the user's thumb, the determination module 331 detects the user's thumb touch through the first side touch sensor 313a to determine the user's side touch as a flow path. can do.

사용자가 사용자의 엄지로 사용자 인터페이스 장치(300)의 왼쪽 측면을 터치하지 않은 경우, 결정 모듈(331)은 제1 측면 터치 센서(313a)를 통해 사용자의 엄지 터치를 감지하지 못하며 사용자의 측면 터치를 무로 판단할 수 있다.When the user does not touch the left side of the user interface device 300 with the user's thumb, the determination module 331 cannot detect the user's thumb touch through the first side touch sensor 313a and detects the user's side touch. It can be judged as nothing.

사용자가 사용자의 손바닥으로 사용자 인터페이스 장치(300)의 후면을 터치하는 경우, 결정 모듈(331)은 후면 터치 센서(315)를 통해 사용자의 손바닥 터치를 감지하여 사용자의 후면 터치를 유로 판단할 수 있다.When the user touches the rear surface of the user interface device 300 with the user's palm, the determination module 331 may detect the user's palm touch through the rear touch sensor 315 to determine the user's rear touch as a flow path. .

사용자가 사용자의 손바닥으로 사용자 인터페이스 장치(300)의 후면을 터치하지 않는 경우, 결정 모듈(331)은 후면 터치 센서(315)를 통해 사용자의 손바닥 터치를 감지하지 못하며 사용자의 후면 터치를 무로 판단할 수 있다.When the user does not touch the rear surface of the user interface device 300 with the user's palm, the determination module 331 cannot detect the user's palm touch through the rear touch sensor 315 and determines the user's rear touch as zero. I can.

이후에, 결정 모듈(331)은 사용자의 측면 터치의 유무 및/또는 후면 터치의 유무에 기초하여 사용자의 사용 의도를 결정할 수 있다.Thereafter, the determination module 331 may determine the user's intention to use based on the presence of the user's side touch and/or the presence of the rear touch.

사용자의 측면 터치가 유인 경우, 결정 모듈(331)은 사용자의 사용 의도를 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것으로 결정할 수 있다.When the user's side touch is incentive, the determination module 331 may determine the user's intention to use the user to manipulate the location of the user interface device 300.

이에, 제어 모듈(333)은 사용자가 사용자 인터페이스 장치(300)의 위치를 조작하게 하기 위해, 브레이크 장치(350)를 제어하여 지면으로부터 사용자 인터페이스 장치(300)의 바닥 면을 브레이크 하지 않음으로써, 사용자 인터페이스 장치(300)가 지면에 고정되지 않고 자유롭게 움직이게 할 수 있다.Accordingly, the control module 333 does not brake the bottom surface of the user interface device 300 from the ground by controlling the brake device 350 in order for the user to manipulate the position of the user interface device 300, The interface device 300 may be freely moved without being fixed to the ground.

사용자의 측면 터치가 무인 경우, 결정 모듈(331)은 사용자의 상면 터치를 더 고려하여 사용자의 사용 의도를 결정할 수 있다.When the user's side touch is unattended, the determination module 331 may further consider the user's upper surface touch to determine the user's intention to use.

사용자의 후면 터치가 유인 경우, 결정 모듈(331)은 사용자의 사용 의도를 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것으로 결정할 수 있다.When the user's back touch is attracted, the determination module 331 may determine the user's intention to use the user interface device 300 to manipulate the position of the user interface device 300.

이에, 제어 모듈(333)은 사용자가 사용자 인터페이스 장치(300)의 위치를 조작하게 하기 위해, 브레이크 장치(350)를 제어하여 지면으로부터 사용자 인터페이스 장치(300)의 바닥 면을 브레이크 하지 않음으로써, 사용자 인터페이스 장치(300)가 지면에 고정되지 않고 자유롭게 움직이게 할 수 있다.Accordingly, the control module 333 does not brake the bottom surface of the user interface device 300 from the ground by controlling the brake device 350 in order for the user to manipulate the position of the user interface device 300, The interface device 300 may be freely moved without being fixed to the ground.

사용자의 후면 터치가 무인 경우, 결정 모듈(331)은 사용자의 상면 터치를 더 고려하여 사용자의 사용 의도를 결정할 수 있다. 사용자의 상면 터치를 고려하여 사용자의 사용 의도를 결정하는 동작은 도 6b 내지 도 6d에서 상세하게 설명하도록 한다.When the user's back touch is unattended, the determination module 331 may further consider the user's upper surface touch to determine the user's intention to use. The operation of determining the user's intention to use in consideration of the user's upper surface touch will be described in detail with reference to FIGS. 6B to 6D.

상술한 바와 같이 사용자의 측면 터치 및/또는 후면 터치가 유인 경우, 결정 모듈(331)이 사용자의 사용 의도를 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것으로 결정하지만, 이에 한정하는 것은 아니다. 결정 모듈(331)은 사용자의 측면 터치 및/또는 후면 터치가 유인 경우에도 사용자의 상면 터치를 더 고려하여 사용자의 사용 의도를 결정할 수 있다.As described above, when the user's side touch and/or the rear touch are attracted, the determination module 331 determines that the user's intention to use is to manipulate the position of the user interface device 300, but is not limited thereto. The determination module 331 may further consider the user's upper surface touch to determine the user's intention to use even when the user's side touch and/or the rear touch are attracted.

도 6b 내지 도 6d는 컨트롤러가 사용자의 사용 의도를 결정하는 동작의 다른 예를 나타낸다.6B to 6D illustrate another example of an operation in which the controller determines the user's intention to use.

도 6b 내지 도 6d에서는 설명의 편의를 위해서 임계치를 2로 가정하도록 한다. 도 6b 내지 도 6d는 컨트롤러(330)가 상면 터치에 기초하여 사용자의 의도를 결정하는 동작을 나타낸 것이다.In FIGS. 6B to 6D, a threshold value of 2 is assumed for convenience of description. 6B to 6D illustrate an operation in which the controller 330 determines a user's intention based on a top touch.

결정 모듈(331)은 상면 터치 센서(311)를 이용하여 사용자의 상면 터치 수에 따라 사용자의 사용 의도를 결정할 수 있다.The determination module 331 may determine the user's intention to use according to the number of the user's upper surface touches using the upper surface touch sensor 311.

먼저, 결정 모듈(331)은 제1 내지 제3 상면 터치 센서(311a-311c)를 통해 사용자의 상면 터치를 감지하여 상면 터치의 상면 터치 수를 판단할 수 있다.First, the determination module 331 may detect the user's upper surface touch through the first to third upper surface touch sensors 311a-311c to determine the number of upper surface touches of the upper surface touch.

도 6b와 같이 사용자가 사용자의 검지로 사용자 인터페이스 장치(300)의 상면 왼쪽을 터치하는 경우, 결정 모듈(331)은 제1 상면 터치 센서(311a)를 통해 사용자의 검지 터치를 감지하여 상면 터치의 상면 터치 수를 1로 판단할 수 있다.6B, when the user touches the upper left side of the user interface device 300 with the user's index finger, the determination module 331 detects the user's index touch through the first upper surface touch sensor 311a, The number of touches on the top surface may be determined as 1.

도 6c와 같이 사용자가 사용자의 엄지 및 검지로 사용자 인터페이스 장치(300)의 상면 왼쪽 및 상면 중앙을 터치하는 경우, 결정 모듈(331)은 제1 및 제2 상면 터치 센서(311a, 311b)를 통해 사용자의 엄지 및 검지 터치를 감지하여 상면 터치의 상면 터치 수를 2로 판단할 수 있다.As shown in FIG. 6C, when the user touches the upper left and center of the upper surface of the user interface device 300 with the user's thumb and index finger, the determination module 331 is performed through the first and second upper touch sensors 311a and 311b. By detecting the user's thumb and index finger touch, the number of upper touches of the upper touch may be determined as two.

도 6d와 같이 사용자가 사용자의 검지, 중지 및 약지로 사용자 인터페이스 장치(300)의 상면 왼쪽, 상면 중앙 및 상면 오른쪽을 터치하는 경우, 결정 모듈(331)은 제1 내지 제3 상면 터치 센서(311a-311c)를 통해 사용자의 검지, 중지 및 약지 터치를 감지하여 상면 터치의 상면 터치 수를 3으로 판단할 수 있다.As shown in FIG. 6D, when a user touches the upper left, upper center, and upper right of the user interface device 300 with the user's index finger, middle finger, and ring finger, the determination module 331 includes first to third upper surface touch sensors 311a. -311c) by detecting the user's index finger, middle finger, and ring finger touch, and the number of upper touches of the upper touch may be determined as 3.

이후에, 결정 모듈(331)은 사용자의 상면 터치 수와 임계치를 비교하여 사용자의 사용 의도를 결정할 수 있다.Thereafter, the determination module 331 may determine the user's intention to use by comparing the number of touches on the upper surface of the user and a threshold value.

도 6b 및 도 6c와 같이 사용자의 상면 터치 수가 임계치 이하인 경우, 결정 모듈(331)은 사용자의 사용 의도가 터치 패드를 조작하기 위한 것으로 결정할 수 있다.6B and 6C, when the number of touches on the upper surface of the user is less than or equal to the threshold value, the determination module 331 may determine that the user's intention to use is to manipulate the touch pad.

이에, 제어 모듈(333)은 사용자가 터치 패드를 조작하게 하기 위해 브레이크 장치(350)를 제어하여 지면으로부터 사용자 인터페이스 장치(300)의 바닥 면을 브레이크함으로써, 사용자 인터페이스 장치(300)가 지면에 고정되게 할 수 있다.Accordingly, the control module 333 controls the brake device 350 to allow the user to manipulate the touch pad to brake the bottom surface of the user interface device 300 from the ground, thereby fixing the user interface device 300 to the ground. Can be made.

도 6d와 같이 사용자의 상면 터치 수가 임계치 초과인 경우, 결정 모듈(331)은 사용자의 사용 의도가 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것으로 결정할 수 있다.As shown in FIG. 6D, when the number of touches on the upper surface of the user exceeds the threshold value, the determination module 331 may determine that the user's intention to use is to manipulate the location of the user interface device 300.

이에, 제어 모듈(333)은 사용자가 사용자 인터페이스 장치(300)의 위치를 조작하게 하기 위해, 브레이크 장치(350)를 제어하여 지면으로부터 사용자 인터페이스 장치(300)의 바닥 면을 브레이크 하지 않음으로써, 사용자 인터페이스 장치(300)가 지면에 고정되지 않고 자유롭게 움직이게 할 수 있다.Accordingly, the control module 333 does not brake the bottom surface of the user interface device 300 from the ground by controlling the brake device 350 in order for the user to manipulate the position of the user interface device 300, The interface device 300 may be freely moved without being fixed to the ground.

도 7은 일 실시예에 따른 브레이크 장치의 개략적인 블록도를 나타내고, 도 8a는 도 7에 도시된 브레이크 장치의 동작의 일 예를 나타내고, 도 8b는 도 7에 도시된 브레이크 장치의 동작의 다른 예를 나타내고, 도 9는 도 7에 도시된 브레이크 소자를 설명하기 위한 일 예를 나타낸다.7 is a schematic block diagram of a brake device according to an embodiment, FIG. 8A shows an example of the operation of the brake device shown in FIG. 7, and FIG. 8B is another example of the operation of the brake device shown in FIG. 7. An example is shown, and FIG. 9 shows an example for describing the brake element illustrated in FIG. 7.

도 7 내지 도 9를 참조하면, 브레이크 장치(350)는 액추에이터(an actuator; 353) 및 브레이크 소자(a break element; 355)를 포함한다. 또한, 브레이크 장치(350)는 와이어(a wire; 351)를 더 포함할 수 있다.7 to 9, the brake device 350 includes an actuator 353 and a break element 355. In addition, the brake device 350 may further include a wire 351.

와이어(351)는 액추에이터(353)와 브레이크 소자(355)를 연결하는 선으로, 액추에이터(353)의 동작에 따라 길이가 변형될 수 있다.The wire 351 is a line connecting the actuator 353 and the brake element 355, and its length may be changed according to the operation of the actuator 353.

액추에이터(353)는 와이어(351)의 일면에 접속될 수 있다. 액추에이터(353)는 컨트롤러(330)의 제어에 따라 와이어(351)의 길이를 조절하여 브레이크 소자(355)를 지면에 접촉하게 하거나 비접촉하게 하는 선형 액추에이터(linear actuator)일 수 있다.The actuator 353 may be connected to one surface of the wire 351. The actuator 353 may be a linear actuator that adjusts the length of the wire 351 according to the control of the controller 330 to make the brake element 355 contact or non-contact the ground.

사용자의 사용 의도가 터치 패드를 조작하기 위한 것인 경우, 액추에이터(353)는 도 8a와 같이 와이어(351)의 길이를 길게 조절하여 브레이크 소자(355)를 당기지 않음으로써, 브레이크 소자(355)가 지면에 접촉하게 하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 높일 수 있다.When the user's intention is to operate the touch pad, the actuator 353 does not pull the brake element 355 by adjusting the length of the wire 351 as shown in FIG. 8A, so that the brake element 355 is By bringing it into contact with the ground, the frictional force of the bottom surface of the user interface device 300 may be increased.

이에, 사용자 인터페이스 장치(300)는 브레이크 소자(355)에 의해 지면에 고정되어 사용자가 사용자 인터페이스 장치(300)의 터치 패드를 자유롭게 사용하게 할 수 있다.Accordingly, the user interface device 300 is fixed to the ground by the brake element 355 so that the user can freely use the touch pad of the user interface device 300.

사용자의 사용 의도가 사용자 인터페이스 장치(300)의 위치를 조작하기 위한 것인 경우, 액추에이터(353)는 도 8b와 같이 와이어(351)의 길이를 짧게 조절하여 브레이크 소자(355)를 당김으로써, 브레이크 소자(355)가 지면에 접촉하지 않게 하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 낮출 수 있다.When the user's intention to use is to manipulate the position of the user interface device 300, the actuator 353 adjusts the length of the wire 351 to a short length as shown in FIG. 8B to pull the brake element 355, thereby making the brake The friction force of the bottom surface of the user interface device 300 may be reduced by preventing the element 355 from contacting the ground.

이에, 사용자 인터페이스 장치(300)는 브레이크 소자(355)가 지면에 비접촉하여 사용자가 사용자 인터페이스 장치(300)의 위치를 자유롭게 조작하게 할 수 있다.Accordingly, the user interface device 300 may allow the user to freely manipulate the position of the user interface device 300 because the brake element 355 is not in contact with the ground.

브레이크 소자(355)는 와이어(351)의 다른 일면에 접속될 수 있다.The brake element 355 may be connected to the other side of the wire 351.

브레이크 소자(355)는 와이어(351)의 길이에 대응하는 장력에 따라 사용자 인터페이스 장치(300)의 바닥 면과 지면간의 접촉 면적이 변화될 수 있다. 이때, 브레이크 소자(355)는 와이어(351)의 장력에 따라 사용자 인터페이스 장치(300)의 바닥 면의 질감(또는 마찰 상수)이 다양하게 변화되어 사용자 인터페이스 장치(300)의 바닥 면의 마찰력이 조절되는 탄성 소재로 구현될 수 있다.In the brake element 355, a contact area between the bottom surface of the user interface device 300 and the ground may be changed according to a tension corresponding to the length of the wire 351. At this time, in the brake element 355, the texture (or friction constant) of the bottom surface of the user interface device 300 is variously changed according to the tension of the wire 351, so that the friction force of the bottom surface of the user interface device 300 is adjusted. It can be implemented with an elastic material.

예를 들어, 브레이크 소자(355)는 도 8a의 A 및 도 8b의 B와 같이 지면에 접촉하는 브레이크 소자(355)의 접촉 부분이 도 9와 같이 구불구불하게 구현되어 와이어(351)의 길이에 대응하는 장력에 따라 브레이크 소자(355)와 지면 간의 접촉 면적을 다양하게 변화할 수 있다.For example, in the brake element 355, the contact portion of the brake element 355 in contact with the ground, as shown in FIG. 8A and FIG. 8B, is formed to be serpentine as shown in FIG. 9 so that the length of the wire 351 The contact area between the brake element 355 and the ground may be variously changed according to the corresponding tension.

이에, 사용자 인터페이스 장치(300)는 브레이크 소자(355)와 지면 간의 다양한 접촉 면적에 따른 질감(또는 마찰 상수)이 다양하게 변화되어 사용자 인터페이스 장치(300)의 바닥 면의 마찰력이 다양하게 변화(또는 조절)될 수 있다.Accordingly, the user interface device 300 has various changes in texture (or friction constant) according to various contact areas between the brake element 355 and the ground, so that the friction force of the bottom surface of the user interface device 300 varies (or Can be adjusted).

상술한 바와 같이 브레이크 장치(350)가 와이어(351), 액추에이터(353) 및 브레이크 소자(355)를 포함하지만, 이에 한정하는 것은 아니다. 브레이크 장치(350)는 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 조절하기 위해 다양한 방식(또는 방법)을 사용할 수 있다.As described above, the brake device 350 includes the wire 351, the actuator 353, and the brake element 355, but is not limited thereto. The brake device 350 may use various methods (or methods) to adjust the frictional force of the bottom surface of the user interface device 300.

일 예로, 브레이크 장치(350)는 컨트롤러(330)의 제어에 따른 부력을 통해 사용자 인터페이스 장치(300)를 지면에서 공중에 위치하게 하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 변화할 수 있다.For example, the brake device 350 may change the frictional force of the bottom surface of the user interface device 300 by placing the user interface device 300 in the air on the ground through buoyancy according to the control of the controller 330. .

다른 예로, 브레이크 장치(350)는 공기의 스퀴즈 필름 효과(squeeze film effect)와 같은 방식을 이용하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 줄일 수 있다.As another example, the brake device 350 may reduce frictional force on the bottom surface of the user interface device 300 by using a method such as a squeeze film effect of air.

도 10a는 도 7에 도시된 브레이크 장치의 일 구현 예를 나타내고, 도 10b는 도 7에 도시된 브레이크 장치의 다른 구현 예를 나타낸다.FIG. 10A shows an example of implementation of the brake device shown in FIG. 7, and FIG. 10B shows another example of implementation of the brake device shown in FIG. 7.

브레이크 장치(350)는 가장 간단하게 도 10a 및 도 10b와 같이 구현될 수 있다. 예를 들어, 브레이크 장치(350)는 도 10a 및 도 10b와 같이 와이어(351)를 이용하지 않고, 액추에이터(353)에 브레이크 소자(355)가 연결될 수 있다.The brake device 350 can most simply be implemented as shown in FIGS. 10A and 10B. For example, the brake device 350 may not use a wire 351 as shown in FIGS. 10A and 10B, and a brake element 355 may be connected to the actuator 353.

도 10a 및 도 10b와 같이 구현된 브레이크 장치(350)는 지면에 브레이크 소자(355)를 접촉하게 구동하거나 비접촉하게 구동 해제하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 변화할 수 있다. 이때, 액추에이터(353)는 서보 모터로 구현되고, 브레이크 소자(355)는 액추에이터(353)와 직접적으로 연결된 연결 소자의 바닥 부분에 구현될 수 있다. 브레이크 소자(355)의 소재는 고무와 같이 마찰 상수가 큰 물질일 수 있다.The brake device 350 implemented as shown in FIGS. 10A and 10B may change the frictional force of the bottom surface of the user interface device 300 by driving the brake element 355 in contact with the ground or releasing the drive in a non-contact manner. In this case, the actuator 353 may be implemented as a servo motor, and the brake element 355 may be implemented at the bottom of a connection element directly connected to the actuator 353. The material of the brake element 355 may be a material having a large frictional constant, such as rubber.

도 11은 도 1에 도시된 사용자 인터페이스 장치의 동작을 설명하기 위한 순서도를 나타낸다.11 is a flowchart illustrating an operation of the user interface device illustrated in FIG. 1.

도 11을 참조하면, 컨트롤러(330)는 사용자 인터페이스 장치(300)의 센서(310)를 통해 사용자 인터페이스 장치(300)에 대한 사용자의 상면 터치, 측면 터치 및/또는 후면 터치를 감지할 수 있다(1101).Referring to FIG. 11, the controller 330 may sense a user's upper surface touch, a side touch, and/or a rear touch of the user interface device 300 through the sensor 310 of the user interface device 300 ( 1101).

컨트롤러(330)는 사용자 인터페이스 장치(300)에 대한 터치 수 및/또는 터치 유무에 기초하여 사용자의 사용 의도를 결정할 수 있다(1103).The controller 330 may determine the user's intention to use based on the number of touches and/or the presence or absence of touches on the user interface device 300 (1103 ).

컨트롤러(330)는 사용자의 사용 의도에 기초하여 사용자 인터페이스 장치(300)의 바닥 면의 마찰력을 조절하기 위해 사용자 인터페이스 장치(300)의 바닥 면에 배치된 브레이크 장치(350)의 동작을 제어할 수 있다(1105).The controller 330 may control the operation of the brake device 350 disposed on the bottom surface of the user interface device 300 in order to adjust the frictional force of the bottom surface of the user interface device 300 based on the user's intention of use. There is (1105).

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be specially designed and configured for the embodiment, or may be known and usable to those skilled in computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks. -A hardware device specially configured to store and execute program instructions such as magneto-optical media, and ROM, RAM, flash memory, and the like. Examples of the program instructions include not only machine language codes such as those produced by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operation of the embodiment, and vice versa.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of these, configuring the processing unit to behave as desired or processed independently or collectively. You can command the device. Software and/or data may be interpreted by a processing device or to provide instructions or data to a processing device, of any type of machine, component, physical device, virtual equipment, computer storage medium or device. , Or may be permanently or temporarily embodyed in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored on one or more computer-readable recording media.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described by the limited drawings, a person of ordinary skill in the art can apply various technical modifications and variations based on the above. For example, the described techniques are performed in a different order from the described method, and/or components such as a system, structure, device, circuit, etc. described are combined or combined in a form different from the described method, or other components Alternatively, even if substituted or substituted by an equivalent, an appropriate result can be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.Therefore, other implementations, other embodiments and claims and equivalents fall within the scope of the following claims.

Claims (18)

사용자 인터페이스 장치에 있어서,
상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하기 위한 브레이크 장치;
상기 사용자 인터페이스 장치를 사용하는 사용자의 터치를 감지하는 센서;
상기 사용자의 터치에 상응하는 상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 컨트롤러
를 포함하고,
상기 컨트롤러는,
상기 사용자 인터페이스 장치에 대한 터치 수, 측면 터치의 유무 및 후면 터치의 유무 중에서 적어도 하나에 기초하여 상기 사용자의 사용 의도를 결정하는 결정 모듈; 및
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 제어 모듈
을 포함하는 사용자 인터페이스 장치.
In the user interface device,
A brake device for adjusting the friction force of the bottom surface of the user interface device;
A sensor that senses a user's touch using the user interface device;
A controller that controls the operation of the brake device based on the user's intention to use corresponding to the user's touch
Including,
The controller,
A determination module that determines the user's intention to use the user based on at least one of a number of touches to the user interface device, a side touch, and a back touch; And
Control module that controls the operation of the brake device based on the user's intention to use it
User interface device comprising a.
 삭제delete 제1항에 있어서,
상기 결정 모듈은,
상기 터치 수가 임계치 이하이거나 상기 측면 터치가 감지되지 않거나 상기 후면 터치가 감지되지 않는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것으로 결정하는 사용자 인터페이스 장치.
The method of claim 1,
The determination module,
When the number of touches is less than or equal to a threshold value, the side touch is not detected, or the rear touch is not detected, the user's intention to use is determined to operate a touch pad of the user interface device.
 제1항에 있어서,
상기 결정 모듈은,
상기 터치 수가 임계치를 초과하거나 상기 측면 터치가 감지되거나 상기 후면 터치가 감지되는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것으로 결정하는 사용자 인터페이스 장치.
The method of claim 1,
The determination module,
When the number of touches exceeds a threshold value, the side touch is sensed, or the rear touch is sensed, the user's intention to use is determined to be to manipulate the position of the user interface device.
 제1항에 있어서,
상기 제어 모듈은,
상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 높이는 사용자 인터페이스 장치.
The method of claim 1,
The control module,
When the user's intention is to manipulate a touch pad of the user interface device, the user interface device controls the brake device to increase frictional force on the bottom surface of the user interface device.
 제1항에 있어서,
상기 제어 모듈은,
상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 낮추는 사용자 인터페이스 장치.
The method of claim 1,
The control module,
When the user's intention to use the user interface device is to manipulate the position of the user interface device, the user interface device controls the brake device to lower the frictional force of the bottom surface of the user interface device.
 제1항에 있어서,
상기 센서는,
상기 사용자 인터페이스 장치의 상면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치의 상면을 터치하는 상면 터치를 감지하는 상면 터치 센서;
상기 사용자 인터페이스 장치의 측면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치의 측면을 터치하는 측면 터치를 감지하는 측면 터치 센서; 및
상기 사용자 인터페이스 장치의 후면에 배치되어, 상기 사용자가 상기 사용자 인터페이스 장치를 감싸 상기 사용자 인터페이스 장치의 후면이 가려지는 후면 터치를 감지하는 후면 터치 센서
중에서 적어도 하나를 포함하는 사용자 인터페이스 장치
The method of claim 1,
The sensor,
An upper surface touch sensor disposed on an upper surface of the user interface device and sensing an upper surface touch when the user touches the upper surface of the user interface device;
A side touch sensor disposed on a side surface of the user interface device to sense a side touch when the user touches a side surface of the user interface device; And
A rear touch sensor disposed on the rear surface of the user interface device and sensing a touch on the rear surface of the user interface device by the user surrounding the user interface device
User interface device including at least one of
 제1항에 있어서,
상기 브레이크 장치는,
와이어;
상기 와이어의 일면에 접속되어, 상기 컨트롤러의 제어에 따라 상기 와이어의 길이를 조절하는 액추에이터; 및
상기 와이어의 다른 일면에 접속되어, 상기 와이어의 길이에 대응하는 장력에 따라 상기 사용자 인터페이스 장치의 바닥 면과 지면간의 접촉 면적을 변화하는 브레이크 소자
를 포함하는 사용자 인터페이스 장치.
The method of claim 1,
The brake device,
wire;
An actuator connected to one side of the wire to adjust the length of the wire according to the control of the controller; And
A brake element connected to the other side of the wire and changing a contact area between the bottom surface of the user interface device and the ground according to a tension corresponding to the length of the wire
User interface device comprising a.
 제1항에 있어서,
상기 브레이크 장치는,
상기 컨트롤러의 제어에 따른 부력을 통해 상기 사용자 인터페이스 장치를 지면 또는 공중에 위치하게 하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 변화하는 사용자 인터페이스 장치.
The method of claim 1,
The brake device,
A user interface device for changing the frictional force of the bottom surface of the user interface device by placing the user interface device on the ground or in the air through buoyancy under the control of the controller.
 사용자 인터페이스 장치의 동작 방법에 있어서,
상기 사용자 인터페이스 장치를 사용하는 사용자의 터치를 감지하는 단계; 및
상기 사용자의 터치에 상응하는 상기 사용자의 사용 의도에 기초하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하기 위한 브레이크 장치의 동작을 제어하는 단계
를 포함하고,
상기 제어하는 단계는,
상기 사용자 인터페이스 장치에 대한 터치 수, 측면 터치의 유무 및 후면 터치의 유무 중에서 적어도 하나에 기초하여 상기 사용자의 사용 의도를 결정하는 단계; 및
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
In the method of operating a user interface device,
Sensing a user's touch using the user interface device; And
Controlling an operation of a brake device for adjusting a friction force of a bottom surface of the user interface device based on the user's intention to use corresponding to the user's touch
Including,
The controlling step,
Determining an intention to use the user based on at least one of a number of touches to the user interface device, a side touch, and a rear touch; And
Controlling the operation of the brake device based on the user's intention to use it
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 감지하는 단계는,
상기 사용자 인터페이스 장치의 상면에 배치된 상면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치의 상면을 터치하는 상면 터치를 감지하는 단계;
상기 사용자 인터페이스 장치의 측면에 배치된 측면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치의 측면을 터치하는 측면 터치를 감지하는 단계; 및
상기 사용자 인터페이스 장치의 후면에 배치된 후면 터치 센서를 통해 상기 사용자가 상기 사용자 인터페이스 장치를 감싸 상기 사용자 인터페이스 장치의 후면이 가려지는 후면 터치를 감지하는 단계
중에서 적어도 하나를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
The detecting step,
Sensing an upper surface touch of the user touching an upper surface of the user interface device through an upper surface touch sensor disposed on an upper surface of the user interface device;
Sensing a side touch of the user touching a side surface of the user interface device through a side touch sensor disposed on a side surface of the user interface device; And
Sensing a rear touch that covers the user interface device by the user through a rear touch sensor disposed on the rear surface of the user interface device and covers the rear surface of the user interface device
Operating method of a user interface device comprising at least one of.
 삭제delete 제10항에 있어서,
상기 결정하는 단계는,
상기 터치 수가 임계치 이하이거나 상기 측면 터치가 감지되지 않거나 상기 후면 터치가 감지되지 않는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것으로 결정하는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
The determining step,
When the number of touches is less than a threshold value, the side touch is not detected, or the rear touch is not detected, determining the user's intention to operate a touch pad of the user interface device
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 결정하는 단계는,
상기 터치 수가 임계치를 초과이거나 상기 측면 터치가 감지되거나 상기 후면 터치가 감지되는 경우, 상기 사용자의 사용 의도를 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것으로 결정하는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
The determining step,
When the number of touches exceeds a threshold value, the side touch is detected, or the rear touch is detected, determining the user's intention to use the position of the user interface device
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는,
상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 터치 패드를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 변의 마찰력을 높이는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
Controlling the operation of the brake device based on the user's intention to use,
When the user's intention to use is to manipulate the touch pad of the user interface device, controlling the brake device to increase the frictional force of the bottom side of the user interface device
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는,
상기 사용자의 사용 의도가 상기 사용자 인터페이스 장치의 위치를 조작하기 위한 것인 경우, 상기 브레이크 장치를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 낮추는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
Controlling the operation of the brake device based on the user's intention to use,
When the user's intention to use is to manipulate the position of the user interface device, controlling the brake device to lower the frictional force of the bottom surface of the user interface device
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는,
상기 사용자 인터페이스 장치의 바닥 면과 지면간의 접촉 면적이 변화되는 상기 브레이크 장치의 브레이크 소자를 제어하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 조절하는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.
The method of claim 10,
Controlling the operation of the brake device based on the user's intention to use,
Controlling a brake element of the brake device in which the contact area between the bottom surface of the user interface device and the ground is changed to adjust the friction force of the bottom surface of the user interface device
Operating method of a user interface device comprising a.
 제10항에 있어서,
상기 사용자의 사용 의도에 기초하여 상기 브레이크 장치의 동작을 제어하는 단계는,
부력을 통해 상기 사용자 인터페이스 장치를 지면 또는 공중에 위치하게 하여 상기 사용자 인터페이스 장치의 바닥 면의 마찰력을 변화하는 단계
를 포함하는 사용자 인터페이스 장치의 동작 방법.The method of claim 10,
Controlling the operation of the brake device based on the user's intention to use,
Changing the frictional force of the bottom surface of the user interface device by placing the user interface device on the ground or in the air through buoyancy
Operating method of a user interface device comprising a.
KR1020180165477A 2018-12-19 2018-12-19 An user interface apparatus and method thereof KR102219385B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180165477A KR102219385B1 (en) 2018-12-19 2018-12-19 An user interface apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180165477A KR102219385B1 (en) 2018-12-19 2018-12-19 An user interface apparatus and method thereof

Publications (2)

Publication Number Publication Date
KR20200076398A KR20200076398A (en) 2020-06-29
KR102219385B1 true KR102219385B1 (en) 2021-02-25

Family

ID=71401158

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180165477A KR102219385B1 (en) 2018-12-19 2018-12-19 An user interface apparatus and method thereof

Country Status (1)

Country Link
KR (1) KR102219385B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3158844B2 (en) * 1994-03-07 2001-04-23 富士電機株式会社 Method for manufacturing semiconductor device
KR101562931B1 (en) * 2014-08-14 2015-10-26 연세대학교 산학협력단 Input/output device responsive to user and method for controlling operation of the same

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07230355A (en) * 1994-02-18 1995-08-29 Kokusai Electric Co Ltd Mouse
JPH09282094A (en) * 1996-04-12 1997-10-31 Canon Inc Man-machine interface device and pointing device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3158844B2 (en) * 1994-03-07 2001-04-23 富士電機株式会社 Method for manufacturing semiconductor device
KR101562931B1 (en) * 2014-08-14 2015-10-26 연세대학교 산학협력단 Input/output device responsive to user and method for controlling operation of the same

Also Published As

Publication number Publication date
KR20200076398A (en) 2020-06-29

Similar Documents

Publication Publication Date Title
JP6814723B2 (en) Selective input signal rejection and correction
US10353570B1 (en) Thumb touch interface
US20180314400A1 (en) Pinch Gesture to Navigate Application Layers
US8373655B2 (en) Adaptive acceleration of mouse cursor
JP5731466B2 (en) Selective rejection of touch contact in the edge region of the touch surface
US10296091B2 (en) Contextual pressure sensing haptic responses
US9448714B2 (en) Touch and non touch based interaction of a user with a device
US20130057472A1 (en) Method and system for a wireless control device
US20150077352A1 (en) Multi-Touch Virtual Mouse
KR101156610B1 (en) Method for input controlling by using touch type, and computer-readable recording medium with controlling program using touch type
JP2009259079A (en) Touch board cursor control method
JP5837955B2 (en) Method for executing function of electronic device and electronic device
US20140055385A1 (en) Scaling of gesture based input
KR101154137B1 (en) User interface for controlling media using one finger gesture on touch pad
KR102219385B1 (en) An user interface apparatus and method thereof
US20100271300A1 (en) Multi-Touch Pad Control Method
KR20150056726A (en) Method, system and computer-readable recording medium for displaying and executing functions of portable device
EP3433713B1 (en) Selecting first digital input behavior based on presence of a second, concurrent, input
KR102378503B1 (en) Method and non-transitory computer-readable recording medium for inputting and outputting information using virtual mouse
TWI475469B (en) Portable electronic device with a touch-sensitive display and navigation device and method
KR100974910B1 (en) Method for controlling touch-sensing devices, and touch-sensing devices using the same
KR101898162B1 (en) Apparatus and method of providing additional function and feedback to other apparatus by using information of multiple sensor
KR20190023934A (en) Operating method and apparatus for handheld mouse

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right