WO2017039057A1 - 와치 타입 이동 단말기 및 그의 동작 방법 - Google Patents

와치 타입 이동 단말기 및 그의 동작 방법 Download PDF

Info

Publication number
WO2017039057A1
WO2017039057A1 PCT/KR2015/010567 KR2015010567W WO2017039057A1 WO 2017039057 A1 WO2017039057 A1 WO 2017039057A1 KR 2015010567 W KR2015010567 W KR 2015010567W WO 2017039057 A1 WO2017039057 A1 WO 2017039057A1
Authority
WO
WIPO (PCT)
Prior art keywords
mobile terminal
type mobile
watch type
touch screen
touch
Prior art date
Application number
PCT/KR2015/010567
Other languages
English (en)
French (fr)
Inventor
박지수
심홍조
손영호
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US15/755,990 priority Critical patent/US20180343023A1/en
Publication of WO2017039057A1 publication Critical patent/WO2017039057A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/3805—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving with built-in auxiliary receivers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • H04W76/14—Direct-mode setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

와치 타입 이동 단말기는, 터치스크린과 상기 터치스크린의 테두리를 둘러싼 베젤을 포함하며, 상기 터치스크린 상에서 상기 베젤로 드래그하는 제1동작이 입력되는 디스플레이부; 와 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작을 인식하는 센싱부; 및 상기 제1동작이 입력되면 상기 제2동작에 의하여 상기 와치 타입 이동 단말기가 제어되는 제스처 모드로 전환하는 제어부를 포함한다.

Description

와치 타입 이동 단말기 및 그의 동작 방법
본 발명은 사용자의 편의가 더욱 고려되어 단말기의 사용이 구현될 수 있도록 하는 와치 타입의 이동 단말기에 관한 것이다.
단말기는 이동 가능여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mounted terminal)로 나뉠 수 있다.
이동 단말기의 기능은 다양화 되고 있다. 예를 들면, 데이터와 음성통신, 카메라를 통한 사진촬영 및 비디오 촬영, 음성녹음, 스피커 시스템을 통한 음악파일 재생 그리고 디스플레이부에 이미지나 비디오를 출력하는 기능이 있다. 일부 단말기는 전자게임 플레이 기능이 추가되거나, 멀티미디어 플레이어 기능을 수행한다. 특히 최근의 이동 단말기는 방송과 비디오나 텔레비전 프로그램과 같은 시각적 컨텐츠를 제공하는 멀티캐스트 신호를 수신할 수 있다.
이동 단말기는 사용자가 주로 손에 쥐고 사용하는 차원을 넘어서, 신체에 착용할 수 있는 웨어러블 디바이스(wearable device)로 확장될 수 있다. 이러한 웨어러블 디바이스에는 와치 타입의 이동 단말기, 글래스 타입의 이동 단말기, HMD(head mounted display) 등이 있다.
이 중에서, 와치 타입의 이동 단말기는 사람들이 항상 차고 다니는 시계에 전자 기능, 통신 기능, 멀티 미디어 기능 등이 부가된 것으로서, 사람들에게 거부감을 주지 않아 향후 폭발적인 시장이 형성될 것으로 보인다.
이에 따라, 와치 타입의 이동 단말기에 대한 연구, 개발 및 상용화가 활발히 진행되고 있다.
본 발명은 터치영역 밖에서 손가락을 움직임으로써 터치영역에 의한 제약 없이 사용자입력을 수행할 수 있는 와치 타입 이동 단말기를 제공하는데 목적이 있다.
본 발명의 일 실시 예에 따른 와치 타입 이동 단말기는, 터치스크린과 상기 터치스크린의 테두리를 둘러싼 베젤을 포함하며, 상기 터치스크린 상에서 상기 베젤로 드래그하는 제1동작이 입력되는 디스플레이부; 와 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작을 인식하는 센싱부; 및 상기 제1동작이 입력되면 상기 제2동작에 의하여 상기 와치 타입 이동 단말기가 제어되는 제스처 모드로 전환하는 제어부를 포함할 수 있다.
본 발명의 일 실시예에 따른 와치 타입 이동 단말기의 동작 방법에 의하면, 터치스크린 상에서 베젤로 드래그하는 제1동작이 입력되는 단계; 와 상기 제1동작이 인식되면, 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작에 의하여 상기 와치 타입 이동 단말기가 제어되는 제스처 모드로 전환하는 단계를 포함한다.
본 발명의 실시 예에 따르면, 터치영역 밖에서 터치 없이 손가락을 움직임으로써 터치영역에 의한 제약 없이 사용자입력을 수행할 수 있다.
도 1은 본 발명과 관련된 와치 타입의 이동 단말기를 설명하기 위한 블록도이다.
도 2는 본 발명과 관련된 와치 타입의 이동 단말기의 일 예를 보인 사시도이다.
도 3a와 도 3b는 일반적인 와치 타입 이동 단말기에서의 터치 입력을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 와치 타입 이동 단말기의 동작 방법을 설명하기 위한 흐름도이다.
도 5a 내지 도 5c는 본 발명의 일 실시예에 의한 와치 타입 이동 단말기가 동작하는 3가지 입력모드로의 전환을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 의한 제스처 동작을 인식하는 과정을 설명하기 위한 도면이다.
도 7a와 도 7b는 본 발명의 일 실시예에 의한 와치 타입 이동 단말기에 안테나가 내장되는 구성을 도시한 도면이다.
도 8은 본 발명의 일 실시예에 의하여 RF 신호를 이용하여 사용자의 움직임을 인식하는 것을 설명하기 위한 도면이다.
도 9a 내지 도 9g는 본 발명의 일 실시예에 의한 제스처 동작을 도시한 도면이다.
도 10은 사용자가 본 발명의 일 실시예에 의한 제스처 동작을 입력하는 것을 도시한 도면이다.
도 11a와 도 11b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 와치 타입 이동 단말기를 제어하는 것을 설명하기 위한 도면이다.
도 12a 내지 도 12c는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 와치 타입 이동 단말기를 제어하는 것을 설명하기 위한 도면이다.
도 13a 내지 도 13d는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 지도 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 14a 내지 도 14c는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 갤러리 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 15a와 도 15b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 음악 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 16a와 도 16b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 주소록 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
도 1은 본 발명과 관련된 이동 단말기를 설명하기 위한 블록도이다.
상기 와치 타입의 이동 단말기(100)는 무선 통신부(110), 입력부(120), 센싱부(140), 출력부(150), 인터페이스부(160), 메모리(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 구성요소들은 와치 타입의 이동 단말기를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 와치 타입의 이동 단말기는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
보다 구체적으로, 상기 구성요소들 중 무선 통신부(110)는, 와치 타입의 이동 단말기(100)와 무선 통신 시스템 사이, 와치 타입의 이동 단말기(100)와 다른 와치 타입의 이동 단말기(100) 사이, 또는 와치 타입의 이동 단말기(100)와 외부서버 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 또한, 상기 무선 통신부(110)는, 와치 타입의 이동 단말기(100)를 하나 이상의 네트워크에 연결하는 하나 이상의 모듈을 포함할 수 있다.
이러한 무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114), 위치정보 모듈(115) 중 적어도 하나를 포함할 수 있다.
입력부(120)는, 영상 신호 입력을 위한 카메라(121) 또는 영상 입력부, 오디오 신호 입력을 위한 마이크로폰(microphone, 122), 또는 오디오 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부(123, 예를 들어, 터치키(touch key), 푸시키(mechanical key) 등)를 포함할 수 있다. 입력부(120)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.
센싱부(140)는 와치 타입의 이동 단말기 내 정보, 와치 타입의 이동 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(140)는 근접센서(141, proximity sensor), 조도 센서(142, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121 참조)), 마이크로폰(microphone, 122 참조), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 와치 타입의 이동 단말기는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. 디스플레이부(151)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 와치 타입의 이동 단말기(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(123)로써 기능함과 동시에, 와치 타입의 이동 단말기(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
인터페이스부(160)는 와치 타입의 이동 단말기(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(160)는, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 중 적어도 하나를 포함할 수 있다. 와치 타입의 이동 단말기(100)에서는, 상기 인터페이스부(160)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.
또한, 메모리(170)는 와치 타입의 이동 단말기(100)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(170)는 와치 타입의 이동 단말기(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 와치 타입의 이동 단말기(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 와치 타입의 이동 단말기(100)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 와치 타입의 이동 단말기(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(170)에 저장되고, 와치 타입의 이동 단말기(100) 상에 설치되어, 제어부(180)에 의하여 상기 와치 타입의 이동 단말기의 동작(또는 기능)을 수행하도록 구동될 수 있다.
제어부(180)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 와치 타입의 이동 단말기(100)의 전반적인 동작을 제어한다. 제어부(180)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(170)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다.
또한, 제어부(180)는 메모리(170)에 저장된 응용 프로그램을 구동하기 위하여, 도 1과 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(180)는 상기 응용 프로그램의 구동을 위하여, 와치 타입의 이동 단말기(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
전원공급부(190)는 제어부(180)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 와치 타입의 이동 단말기(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(190)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
상기 각 구성요소들 중 적어도 일부는, 이하에서 설명되는 다양한 실시 예들에 따른 와치 타입의 이동 단말기의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 와치 타입의 이동 단말기의 동작, 제어, 또는 제어방법은 상기 메모리(170)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 와치 타입의 이동 단말기 상에서 구현될 수 있다.
이하에서는, 위에서 살펴본 와치 타입의 이동 단말기(100)를 통하여 구현되는 다양한 실시 예들을 살펴보기에 앞서, 위에서 열거된 구성요소들에 대하여 도 1를 참조하여 보다 구체적으로 살펴본다.
먼저, 무선 통신부(110)에 대하여 살펴보면, 무선 통신부(110)의 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 적어도 두 개의 방송 채널들에 대한 동시 방송 수신 또는 방송 채널 스위칭을 위해 둘 이상의 상기 방송 수신 모듈이 상기 와치 타입의 이동 단말기(100)에 제공될 수 있다.
이동통신 모듈(112)은, 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다.
상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 모듈(113)은 무선 인터넷 기술들에 따른 통신망에서 무선 신호를 송수신하도록 이루어진다.
무선 인터넷 기술로는, 예를 들어 WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct, DLNA(Digital Living Network Alliance), WiBro(Wireless Broadband), WiMAX(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등이 있으며, 상기 무선 인터넷 모듈(113)은 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신하게 된다.
WiBro, HSDPA, HSUPA, GSM, CDMA, WCDMA, LTE, LTE-A 등에 의한 무선인터넷 접속은 이동통신망을 통해 이루어진다는 관점에서 본다면, 상기 이동통신망을 통해 무선인터넷 접속을 수행하는 상기 무선 인터넷 모듈(113)은 상기 이동통신 모듈(112)의 일종으로 이해될 수도 있다.
근거리 통신 모듈(114)은 근거리 통신(Short range communication)을 위한 것으로서, 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), Wi-Fi(Wireless-Fidelity), Wi-Fi Direct, Wireless USB(Wireless Universal Serial Bus) 기술 중 적어도 하나를 이용하여, 근거리 통신을 지원할 수 있다. 이러한, 근거리 통신 모듈(114)은, 근거리 무선 통신망(Wireless Area Networks)을 통해 이동 단말기(100)와 무선 통신 시스템 사이, 이동 단말기(100)와 다른 이동 단말기(100) 사이, 또는 이동 단말기(100)와 다른 이동 단말기(100, 또는 외부서버)가 위치한 네트워크 사이의 무선 통신을 지원할 수 있다. 상기 근거리 무선 통신망은 근거리 무선 개인 통신망(Wireless Personal Area Networks)일 수 있다.
근거리 통신 모듈(114)은, 와치 타입의 이동 단말기(100) 주변에 통신 가능한 다른 이동 단말기를 감지(또는 인식)할 수 있다. 나아가, 제어부(180)는 다른 이동 단말기가 본 발명에 따른 와치 타입의 이동 단말기(100)와 통신하도록 인증된 디바이스인 경우, 이동 단말기(100)에서 처리되는 데이터의 적어도 일부를, 상기 근거리 통신 모듈(114)을 통해 다른 이동 단말기로 송신할 수 있다. 따라서, 다른 이동 단말기의 사용자는, 이동 단말기(100)에서 처리되는 데이터를, 다른 이동 단말기를 통해 이용할 수 있다. 예를 들어, 이에 따르면 사용자는, 와치 타입의 이동 단말기(100)에 전화가 수신된 경우, 다른 이동 단말기를 통해 전화 통화를 수행하거나, 와치 타입의 이동 단말기(100)에 메시지가 수신된 경우, 다른 이동 단말기를 통해 상기 수신된 메시지를 확인하는 것이 가능하다.
위치정보 모듈(115)은 이동 단말기의 위치(또는 현재 위치)를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Positioning System) 모듈 또는 WiFi(Wireless Fidelity) 모듈이 있다. 예를 들어, 이동 단말기는 GPS모듈을 활용하면, GPS 위성에서 보내는 신호를 이용하여 이동 단말기의 위치를 획득할 수 있다. 다른 예로서, 이동 단말기는 Wi-Fi모듈을 활용하면, Wi-Fi모듈과 무선신호를 송신 또는 수신하는 무선 AP(Wireless Access Point)의 정보에 기반하여, 이동 단말기의 위치를 획득할 수 있다. 필요에 따라서, 위치정보모듈(115)은 치환 또는 부가적으로 이동 단말기의 위치에 관한 데이터를 얻기 위해 무선 통신부(110)의 다른 모듈 중 어느 기능을 수행할 수 있다. 위치정보모듈(115)은 이동 단말기의 위치(또는 현재 위치)를 획득하기 위해 이용되는 모듈로, 이동 단말기의 위치를 직접적으로 계산하거나 획득하는 모듈로 한정되지는 않는다.
다음으로, 입력부(120)는 영상 정보(또는 신호), 오디오 정보(또는 신호), 데이터, 또는 사용자로부터 입력되는 정보의 입력을 위한 것으로서, 영상 정보의 입력을 위하여, 와치 타입의 이동 단말기(100)는 하나 또는 복수의 카메라(121)를 구비할 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시되거나 메모리(170)에 저장될 수 있다. 한편, 와치 타입의 이동 단말기(100)에 구비되는 복수의 카메라(121)는 매트릭스 구조를 이루도록 배치될 수 있으며, 이와 같이 매트릭스 구조를 이루는 카메라(121)를 통하여, 와치 타입의 이동 단말기(100)에는 다양한 각도 또는 초점을 갖는 복수의 영상정보가 입력될 수 있다. 또한, 복수의 카메라(121)는 입체영상을 구현하기 위한 좌 영상 및 우 영상을 획득하도록, 스트레오 구조로 배치될 수 있다.
마이크로폰(122)은 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 와치 타입의 이동 단말기(100)에서 수행 중인 기능(또는 실행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다. 한편, 마이크로폰(122)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
사용자 입력부(123)는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 입력부(123)를 통해 정보가 입력되면, 제어부(180)는 입력된 정보에 대응되도록 와치 타입의 이동 단말기(100)의 동작을 제어할 수 있다. 이러한, 사용자 입력부(123)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 이동 단말기(100)의 전·후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다.
센싱부(140)는 와치 타입의 이동 단말기 내 정보, 와치 타입의 이동 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하고, 이에 대응하는 센싱 신호를 발생시킨다. 제어부(180)는 이러한 센싱 신호에 기초하여, 와치 타입의 이동 단말기(100)의 구동 또는 동작을 제어하거나, 와치 타입의 이동 단말기(100)에 설치된 응용 프로그램과 관련된 데이터 처리, 기능 또는 동작을 수행 할 수 있다. 센싱부(140)에 포함될 수 있는 다양한 센서 중 대표적인 센서들의 대하여, 보다 구체적으로 살펴본다.
먼저, 근접 센서(141)는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선 등을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 이러한 근접 센서(141)는 위에서 살펴본 터치 스크린에 의해 감싸지는 와치 타입의 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 근접 센서(141)가 배치될 수 있다.
근접 센서(141)의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전 용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 터치 스크린이 정전식인 경우에, 근접 센서(141)는 전도성을 갖는 물체의 근접에 따른 전계의 변화로 상기 물체의 근접을 검출하도록 구성될 수 있다. 이 경우 터치 스크린(또는 터치 센서) 자체가 근접 센서로 분류될 수 있다.
한편, 설명의 편의를 위해, 터치 스크린 상에 물체가 접촉되지 않으면서 근접되어 상기 물체가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 명명하고, 상기 터치 스크린 상에 물체가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 명명한다. 상기 터치 스크린 상에서 물체가 근접 터치 되는 위치라 함은, 상기 물체가 근접 터치될 때 상기 물체가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다. 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지할 수 있다. 한편, 제어부(180)는 위와 같이, 근접 센서(141)를 통해 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 데이터(또는 정보)를 처리하며, 나아가, 처리된 데이터에 대응하는 시각적인 정보를 터치 스크린상에 출력시킬 수 있다. 나아가, 제어부(180)는, 터치 스크린 상의 동일한 지점에 대한 터치가, 근접 터치인지 또는 접촉 터치인지에 따라, 서로 다른 동작 또는 데이터(또는 정보)가 처리되도록 와치 타입의 이동 단말기(100)를 제어할 수 있다.
터치 센서는 저항막 방식, 정전용량 방식, 적외선 방식, 초음파 방식, 자기장 방식 등 여러 가지 터치방식 중 적어도 하나를 이용하여 터치 스크린(또는 디스플레이부(151))에 가해지는 터치(또는 터치입력)을 감지한다.
일 예로서, 터치 센서는, 터치 스크린의 특정 부위에 가해진 압력 또는 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는, 터치 스크린 상에 터치를 가하는 터치 대상체가 터치 센서 상에 터치 되는 위치, 면적, 터치 시의 압력, 터치 시의 정전 용량 등을 검출할 수 있도록 구성될 수 있다. 여기에서, 터치 대상체는 상기 터치 센서에 터치를 인가하는 물체로서, 예를 들어, 손가락, 터치펜 또는 스타일러스 펜(Stylus pen), 포인터 등이 될 수 있다.
이와 같이, 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다. 여기에서, 터치 제어기는, 제어부(180)와 별도의 구성요소일 수 있고, 제어부(180) 자체일 수 있다.
한편, 제어부(180)는, 터치 스크린(또는 터치 스크린 이외에 구비된 터치키)을 터치하는, 터치 대상체의 종류에 따라 서로 다른 제어를 수행하거나, 동일한 제어를 수행할 수 있다. 터치 대상체의 종류에 따라 서로 다른 제어를 수행할지 또는 동일한 제어를 수행할 지는, 현재 와치 타입의 이동 단말기(100)의 동작상태 또는 실행 중인 응용 프로그램에 따라 결정될 수 있다.
한편, 위에서 살펴본 터치 센서 및 근접 센서는 독립적으로 또는 조합되어, 터치 스크린에 대한 숏(또는 탭) 터치(short touch), 롱 터치(long touch), 멀티 터치(multi touch), 드래그 터치(drag touch), 플리크 터치(flick touch), 핀치-인 터치(pinch-in touch), 핀치-아웃 터치(pinch-out 터치), 스와이프(swype) 터치, 호버링(hovering) 터치 등과 같은, 다양한 방식의 터치를 센싱할 수 있다.
초음파 센서는 초음파를 이용하여, 감지대상의 위치정보를 인식할 수 있다. 한편 제어부(180)는 광 센서와 복수의 초음파 센서로부터 감지되는 정보를 통해, 파동 발생원의 위치를 산출하는 것이 가능하다. 파동 발생원의 위치는, 광이 초음파보다 매우 빠른 성질, 즉, 광이 광 센서에 도달하는 시간이 초음파가 초음파 센서에 도달하는 시간보다 매우 빠름을 이용하여, 산출될 수 있다. 보다 구체적으로 광을 기준 신호로 초음파가 도달하는 시간과의 시간차를 이용하여 파동 발생원의 위치가 산출될 수 있다.
한편, 입력부(120)의 구성으로 살펴본, 카메라(121)는 카메라 센서(예를 들어, CCD, CMOS 등), 포토 센서(또는 이미지 센서) 및 레이저 센서 중 적어도 하나를 포함한다.
카메라(121)와 레이저 센서는 서로 조합되어, 3차원 입체영상에 대한 감지대상의 터치를 감지할 수 있다. 포토 센서는 디스플레이 소자에 적층될 수 있는데, 이러한 포토 센서는 터치 스크린에 근접한 감지대상의 움직임을 스캐닝 하도록 이루어진다. 보다 구체적으로, 포토 센서는 행/열에 Photo Diode와 TR(Transistor)를 실장하여 Photo Diode에 인가되는 빛의 양에 따라 변화되는 전기적 신호를 이용하여 포토 센서 위에 올려지는 내용물을 스캔 한다. 즉, 포토 센서는 빛의 변화량에 따른 감지대상의 좌표 계산을 수행하며, 이를 통하여 감지대상의 위치정보가 획득될 수 있다.
디스플레이부(151)는 와치 타입의 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 디스플레이부(151)는 와치 타입의 이동 단말기(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다.
음향 출력부(152)는 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(170)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력부(152)는 와치 타입의 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력부(152)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
햅틱 모듈(haptic module)(153)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(153)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 될 수 있다. 햅틱 모듈(153)에서 발생하는 진동의 세기와 패턴 등은 사용자의 선택 또는 제어부의 설정에 의해 제어될 수 있다. 예를 들어, 상기 햅틱 모듈(153)은 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.
햅틱 모듈(153)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(electrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.
햅틱 모듈(153)은 직접적인 접촉을 통해 촉각 효과를 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(153)은 이동 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.
광출력부(154)는 와치 타입의 이동 단말기(100)의 광원의 빛을 이용하여 이벤트 발생을 알리기 위한 신호를 출력한다. 와치 타입의 이동 단말기(100)에서 발생 되는 이벤트의 예로는 메시지 수신, 호 신호 수신, 부재중 전화, 알람, 일정 알림, 이메일 수신, 애플리케이션을 통한 정보 수신 등이 될 수 있다.
광출력부(154)가 출력하는 신호는 와치 타입의 이동 단말기가 전면이나 후면으로 단색이나 복수색의 빛을 발광함에 따라 구현된다. 상기 신호 출력은 와치 타입의 이동 단말기가 사용자의 이벤트 확인을 감지함에 의하여 종료될 수 있다.
인터페이스부(160)는 이동 단말기(100)에 연결되는 모든 외부 기기와의 통로 역할을 한다. 인터페이스부(160)는 외부 기기로부터 데이터를 송신 받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 송신되도록 한다. 예를 들어, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트(port), 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 등이 인터페이스부(160)에 포함될 수 있다.
한편, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(user identify module; UIM), 가입자 인증 모듈(subscriber identity module; SIM), 범용 사용자 인증 모듈(universal subscriber identity module; USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 상기 인터페이스부(160)를 통하여 단말기(100)와 연결될 수 있다.
또한, 상기 인터페이스부(160)는 이동 단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수 있다.
메모리(170)는 제어부(180)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 상기 메모리(170)는 상기 터치 스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리(170)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), SSD 타입(Solid State Disk type), SDD 타입(Silicon Disk Drive type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(170)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작될 수도 있다.
한편, 앞서 살펴본 것과 같이, 제어부(180)는 응용 프로그램과 관련된 동작과, 통상적으로 와치 타입의 이동 단말기(100)의 전반적인 동작을 제어한다. 예를 들어, 제어부(180)는 상기 와치 타입의 이동 단말기의 상태가 설정된 조건을 만족하면, 애플리케이션들에 대한 사용자의 제어 명령의 입력을 제한하는 잠금 상태를 실행하거나, 해제할 수 있다.
또한, 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등과 관련된 제어 및 처리를 수행하거나, 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다. 나아가 제어부(180)는 이하에서 설명되는 다양한 실시 예들을 본 발명에 따른 와치 타입의 이동 단말기(100) 상에서 구현하기 위하여, 위에서 살펴본 구성요소들을 중 어느 하나 또는 복수를 조합하여 제어할 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성요소들의 동작에 필요한 전원을 공급한다. 전원공급부(190)는 배터리를 포함하며, 배터리는 충전 가능하도록 이루어지는 내장형 배터리가 될 수 있으며, 충전 등을 위하여 단말기 바디에 착탈 가능하게 결합될 수 있다.
또한, 전원공급부(190)는 연결포트를 구비할 수 있으며, 연결포트는 배터리의 충전을 위하여 전원을 공급하는 외부 충전기가 전기적으로 연결되는 인터페이스(160)의 일 예로서 구성될 수 있다.
다른 예로서, 전원공급부(190)는 상기 연결포트를 이용하지 않고 무선방식으로 배터리를 충전하도록 이루어질 수 있다. 이 경우에, 전원공급부(190)는 외부의 무선 전력 송신장치로부터 자기 유도 현상에 기초한 유도 결합(Inductive Coupling) 방식이나 전자기적 공진 현상에 기초한 공진 결합(Magnetic Resonance Coupling) 방식 중 하나 이상을 이용하여 전력을 전달받을 수 있다.
다음으로, 본 발명에 따른 이동 단말기(100)를 통해 실시 가능한 통신 시스템에 대하여 살펴본다.
먼저, 통신 시스템은, 서로 다른 무선 인터페이스 및/또는 물리 계층을 이용할 수도 있다. 예를 들어, 통신 시스템에 의해 이용 가능한 무선 인터페이스에는, 주파수 분할 다중 접속(Frequency Division Multiple Access, FDMA), 시분할 다중 접속(Time Division Multiple Access, TDMA), 코드 분할 다중 접속(Code Division Multiple Access, CDMA), 범용 이동통신 시스템(Universal Mobile Telecommunications Systems, UMTS)(특히, LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced)), 이동통신 글로벌 시스템(Global System for Mobile Communications, GSM) 등이 포함될 수 있다.
이하에서는, 설명의 편의를 위하여, CDMA에 한정하여 설명하도록 한다. 그러나, 본 발명은, CDMA 무선 통신 시스템뿐만 아니라 OFDM(Orthogonal Frequency Division Multiplexing) 무선 통신 시스템을 포함한 모든 통신 시스템 적용될 수 있음은 자명하다.
CDMA 무선 통신 시스템은, 적어도 하나의 단말기(100), 적어도 하나의 기지국(Base Station, BS (Node B 혹은 Evolved Node B로 명칭 될 수도 있다.)), 적어도 하나의 기지국 제어부(Base Station Controllers, BSCs), 이동 스위칭 센터(Mobile Switching Center, MSC)를 포함할 수 있다. MSC는, 일반 전화 교환망(Public Switched Telephone Network, PSTN) 및 BSCs와 연결되도록 구성된다. BSCs는, 백홀 라인(backhaul line)을 통하여, BS와 짝을 이루어 연결될 수 있다. 백홀 라인은, E1/T1, ATM, IP, PPP, Frame Relay, HDSL, ADSL 또는 xDSL 중 적어도 하나에 따라서 구비될 수 있다. 따라서, 복수의 BSCs가 CDMA 무선 통신 시스템에 포함될 수 있다.
복수의 BS 각각은 적어도 하나의 섹터를 포함할 수 있고, 각각의 섹터는, 전방향성 안테나 또는 BS로부`터 방사상의 특정 방향을 가리키는 안테나를 포함할 수 있다. 또한, 각각의 섹터는, 다양한 형태의 안테나를 두 개 이상 포함할 수도 있다. 각각의 BS는, 복수의 주파수 할당을 지원하도록 구성될 수 있고, 복수의 주파수 할당은 각각 특정 스펙트럼(예를 들어, 1.25MHz, 5MHz 등)을 가질 수 있다.
섹터와 주파수 할당의 교차는, CDMA 채널이라고 불릴 수 있다. BS는, 기지국 송수신 하부 시스템(Base Station Transceiver Subsystem, BTSs)이라고 불릴 수 있다. 이러한 경우, 하나의 BSC 및 적어도 하나의 BS를 합하여 "기지국"이라고 칭할 수 있다. 기지국은, 또한 "셀 사이트"을 나타낼 수도 있다. 또는, 특정 BS에 대한 복수의 섹터들 각각은, 복수의 셀 사이트로 불릴 수도 있다.
방송 송신부(Broadcasting Transmitter, BT) 는, 시스템 내에서 동작하는 단말기들(100)에게 방송 신호를 송신한다. 도 1에 도시된 방송 수신 모듈(111)은, BT에 의해 송신되는 방송 신호를 수신하기 위해 단말기(100) 내에 구비된다.
뿐만 아니라, CDMA 무선 통신 시스템에는 이동 단말기(100)의 위치를 확인하기 위한, 위성 위치 확인 시스템(Global Positioning System, GPS)이 연계될 수 있다. 상기 위성은, 이동 단말기(100)의 위치를 파악하는 것을 돕는다. 유용한 위치 정보는, 두 개 이하 또는 이상의 위성들에 의해 획득될 수도 있다. 여기에서는, GPS 추적 기술뿐만 아니라 위치를 추적할 수 있는 모든 기술들을 이용하여 이동 단말기(100)의 위치가 추적될 수 있다. 또한, GPS 위성 중 적어도 하나는, 선택적으로 또는 추가로 위성 DMB 송신을 담당할 수도 있다.
이동 단말기에 구비된 위치정보 모듈(115)은 이동 단말기의 위치를 탐지, 연산 또는 식별하기 위한 것으로, 대표적인 예로는 GPS(Global Position System) 모듈 및 WiFi(Wireless Fidelity) 모듈을 포함할 수 있다. 필요에 따라서, 위치정보모듈(115)은 치환 또는 부가적으로 이동 단말기의 위치에 관한 데이터를 얻기 위해 무선 통신부(110)의 다른 모듈 중 어느 기능을 수행할 수 있다.
상기 GPS모듈(115)은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또 다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈(115)은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다. 다만, 실내와 같이 위성 신호의 음영 지대에서는 GPS 모듈을 이용하여 정확히 이동 단말기의 위치를 측정하는 것이 어렵다. 이에 따라, GPS 방식의 측위를 보상하기 위해, WPS (WiFi Positioning System)이 활용될 수 있다.
와이파이 위치추적 시스템(WPS: WiFi Positioning System)은 이동 단말기(100)에 구비된 WiFi모듈 및 상기 WiFi모듈과 무선신호를 송신 또는 수신하는 무선 AP(Wireless Access Point)를 이용하여, 이동 단말기(100)의 위치를 추적하는 기술로서, WiFi를 이용한 WLAN(Wireless Local Area Network)기반의 위치 측위 기술을 의미한다.
와이파이 위치추적 시스템은 와이파이 위치측위 서버, 이동 단말기(100), 상기 이동 단말기(100)와 접속된 무선 AP, 임의의 무선 AP정보가 저장된 데이터 베이스를 포함할 수 있다.
무선 AP와 접속 중인 이동 단말기(100)는 와이파이 위치 측위 서버로 위치정보 요청 메시지를 송신할 수 있다.
와이파이 위치측위 서버는 이동 단말기(100)의 위치정보 요청 메시지(또는 신호)에 근거하여, 이동 단말기(100)와 접속된 무선 AP의 정보를 추출한다. 상기 이동 단말기(100)와 접속된 무선 AP의 정보는 이동 단말기(100)를 통해 상기 와이파이 위치측위 서버로 송신되거나, 무선 AP에서 와이파이 위치측위 서버로 송신될 수 있다.
상기 이동 단말기(100)의 위치정보 요청 메시지에 근거하여, 추출되는 무선 AP의 정보는 MAC Address, SSID(Service Set IDentification), RSSI(Received Signal Strength Indicator), RSRP(Reference Signal Received Power), RSRQ(Reference Signal Received Quality), 채널정보, Privacy, Network Type, 신호세기(Signal Strength) 및 노이즈 세기(Noise Strength)중 적어도 하나일 수 있다.
와이파이 위치측위 서버는 위와 같이, 이동 단말기(100)와 접속된 무선 AP의 정보를 수신하여, 미리 구축된 데이터베이스로부터 이동 단말기가 접속 중인 무선 AP와 대응되는 무선 AP 정보를 추출할 수 있다. 이때, 상기 데이터 베이스에 저장되는 임의의 무선 AP 들의 정보는 MAC Address, SSID, 채널정보, Privacy, Network Type, 무선 AP의 위경도 좌표, 무선 AP가 위치한 건물명, 층수, 실내 상세 위치정보(GPS 좌표 이용가능), AP소유자의 주소, 전화번호 등의 정보일 수 있다. 이때, 측위 과정에서 이동형 AP나 불법 MAC 주소를 이용하여 제공되는 무선 AP를 측위 과정에서 제거하기 위해, 와이파이 위치측위 서버는 RSSI 가 높은 순서대로 소정 개수의 무선 AP 정보만을 추출할 수도 있다.
이후, 와이파이 위치측위 서버는 데이터 베이스로부터 추출된 적어도 하나의 무선 AP 정보를 이용하여 이동 단말기(100)의 위치정보를 추출(또는 분석)할 수 있다. 포함된 정보와 상기 수신된 무선 AP 정보를 비교하여, 상기 이동 단말기(100)의 위치정보를 추출(또는 분석)한다.
이동 단말기(100)의 위치정보를 추출(또는 분석)하기 위한 방법으로, Cell-ID 방식, 핑거 프린트 방식, 삼각 측량 방식 및 랜드마크 방식 등이 활용될 수 있다.
Cell-ID 방식은 이동 단말기가 수집한 주변의 무선 AP 정보 중 신호 세기가 가장 강한 무선 AP의 위치를 이동 단말기의 위치로 결정하는 방법이다. 구현이 단순하고 별도의 비용이 들지 않으며 위치 정보를 신속히 얻을 수 있다는 장점이 있지만 무선 AP의 설치 밀도가 낮으면 측위 정밀도가 떨어진다는 단점이 있다.
핑거프린트 방식은 서비스 지역에서 참조위치를 선정하여 신호 세기 정보를 수집하고, 수집한 정보를 바탕으로 이동 단말기에서 송신하는 신호 세기 정보를 통해 위치를 추정하는 방법이다. 핑거프린트 방식을 이용하기 위해서는, 사전에 미리 전파 특성을 데이터베이스화할 필요가 있다.
삼각 측량 방식은 적어도 세 개의 무선 AP의 좌표와 이동 단말기 사이의 거리를 기초로 이동 단말기의 위치를 연산하는 방법이다. 이동 단말기와 무선 AP사이의 거리를 측정하기 위해, 신호 세기를 거리 정보로 변환하거나, 무선 신호가 전달되는 시간(Time of Arrival, ToA), 신호가 전달되는 시간 차이(Time Difference of Arrival, TDoA), 신호가 전달되는 각도(Angle of Arrival, AoA) 등을 이용할 수 있다.
랜드마크 방식은 위치를 알고 있는 랜드마크 발신기를 이용하여 이동 단말기의 위치를 측정하는 방법이다.
열거된 방법 이외에도 다양한 알고리즘이 이동 단말기의 위치정보를 추출(또는 분석)하기 위한 방법으로 활용될 수 있다.
이렇게 추출된 와치 타입 이동 단말기(100)의 위치정보는 상기 와이파이 위치측위 서버를 통해 와치 타입 이동 단말기(100)로 송신됨으로써, 와치 타입 이동 단말기(100)는 위치정보를 획득할 수 있다.
와치 타입 이동 단말기(100)는 적어도 하나의 무선 AP 에 접속됨으로써, 위치 정보를 획득할 수 있다. 이때, 와치 타입 이동 단말기(100)의 위치 정보를 획득하기 위해 요구되는 무선 AP의 개수는 와치 타입 이동 단말기(100)가 위치한 무선 통신환경에 따라 다양하게 변경될 수 있다.
한편, 이하에서 다양한 실시 예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
도 2는 본 발명과 관련된 와치 타입의 이동 단말기의 일 예를 보인 사시도이다.
도 2에 도시된 와치 타입의 이동 단말기(100)는 도 1에 도시된 모든 구성요소들을 포함할 수 있다.
도 2에 도시된 와치 타입의 이동 단말기(100)의 터치 스크린(151)은 원 형상을 가질 수 있으나, 이에 한정될 필요는 없고, 타원 형상, 사각 형상을 가질 수도 있다. 본 발명의 터치 스크린(151)의 형상은 사용자에게 시각적으로 좋은 이미지를 줄 수 있으며 사용자의 터치 스크린(151)의 조작에 도움이 될 수 있는 어떠한 형상이라도 상관없다.
도 2를 참조하면, 와치 타입의 이동 단말기(100)는 디스플레이부(251)를 구비하는 본체(201) 및 본체(201)에 연결되어 손목에 착용 가능하도록 구성되는 밴드(202)를 포함한다. 디스플레이부(251)는 도 1의 터치 스크린(151)에 대응될 수 있다.
본체(201)는 외관을 형성하는 케이스를 포함한다. 도시된 바와 같이, 케이스는 각종 전자부품들을 수용하는 내부 공간을 마련하는 제1 케이스(201a) 및 제2 케이스(201b)를 포함할 수 있다. 다만, 본 발명은 이에 한정되는 것은 아니고, 하나의 케이스가 상기 내부 공간을 마련하도록 구성되어 유니 바디의 와치 타입의 이동 단말기(100)가 구현될 수도 있다.
와치 타입의 이동 단말기(100)는 무선 통신이 가능하도록 구성되며, 본체(201)에는 무선 통신을 위한 안테나가 설치될 수 있다. 한편, 안테나는 케이스를 이용하여 그 성능을 확장시킬 수 있다. 예를 들어, 도전성 재질을 포함하는 케이스가 안테나와 전기적으로 연결되어 그라운드 영역 또는 방사 영역을 확장시키도록 구성될 수 있다.
본체(201)의 전면에는 디스플레이부(251)가 배치되어 정보를 출력할 수 있으며, 디스플레이부(251)에는 터치센서가 구비되어 터치 스크린으로 구현될 수 있다. 도시된 바와 같이, 디스플레이부(251)의 윈도우(251a)는 제1 케이스(201a)에 장착되어 제1 케이스(201a)와 함께 단말기 바디의 전면을 형성할 수 있다.
본체(201)에는 음향 출력부(252), 카메라(221), 마이크로폰(222), 사용자 입력부(223) 등이 구비될 수 있다. 디스플레이부(251)가 터치 스크린으로 구현되는 경우, 사용자 입력부(223)로 기능할 수 있으며, 이에 따라 본체(201)에 별도의 키가 구비되지 않을 수 있다. 사용자 입력부(223)의 기능은 도 1에서 설명된 사용자 입력부(123)의 기능에 대응될 수 있다.
밴드(202)는 손목에 착용되어 손목을 감싸도록 이루어지며, 착용이 용이하도록 플렉서블 재질로 형성될 수 있다. 그러한 예로서, 밴드(202)는 가죽, 고무, 실리콘, 합성수지 재질 등으로 형성될 수 있다. 또한, 밴드(202)는 본체(201)에 착탈 가능하게 구성되어, 사용자가 취향에 따라 다양한 형태의 밴드로 교체 가능하게 구성될 수 있다.
한편, 밴드(202)는 안테나의 성능을 확장시키는 데에 이용될 수 있다. 예를 들어, 밴드에는 안테나와 전기적으로 연결되어 그라운드 영역을 확장시키는 그라운드 확장부(미도시)가 내장될 수 있다.
밴드(202)에는 파스너(fastener; 202a)가 구비될 수 있다. 파스너(202a)는 버클(buckle), 스냅핏(snap-fit)이 가능한 후크(hook) 구조, 또는 벨크로(velcro; 상표명) 등에 의하여 구현될 수 있으며, 신축성이 있는 구간 또는 재질을 포함할 수 있다. 본 도면에서는, 파스너(202a)가 버클 형태로 구현된 예를 제시하고 있다.
도 3a와 도 3b는 일반적인 와치 타입 이동 단말기에서의 터치 입력을 설명하기 위한 도면이다.
디스플레이부(251)는 터치 스크린으로 구현되어, 와치 타입 이동 단말기(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI, GUI 정보를 표시할 수 있다. 이 경우, 사용자는 상기 UI 또는 GUI에의 터치 입력에 의하여, 와치 타입 이동 단말기(100)를 제어할 수 있다.
와치 타입 이동 단말기(100)는 손목에 착용하는 기기의 특성상, 디스플레이부(251)의 크기에 제약을 받는다. 일반적으로 디스플레이부(251)는 작게 구현되며, 이에 따라 상기 디스플레이부(251)에 표시되는 UI 및 GUI 역시 작게 표시된다.
따라서, 사용자가 손가락으로 디스플레이부(251)를 터치하는 경우, 도 3a에 도시된 바와 같이, 손가락이 디스플레이부(251)의 상당 부분을 가리게 된다. 이로 인해, 사용자는 의도하지 않은 UI 또는 GUI를 잘못 터치하거나, 크기가 작은 UI 또는 GUI를 터치하는데 어려움을 겪을 수 있다.
이러한 문제점 때문에, 디스플레이부(251)는 UI 및 GUI를 일정 크기 이상으로 표시한다. UI 및 GUI의 크기가 커질수록, 디스플레이부(251)에 표시되는 UI 및 GUI의 수는 줄어든다. 도 3b를 참조하면, 디스플레이부(251)에는 단 3줄의 GUI 리스트만이 표시된다.
이와 같이, 디스플레이부(251)의 크기가 작은 와치 타입 이동 단말기(100)에서는 기존의 터치 입력 방식으로 기기를 제어하는데 많은 불편함이 존재한다. 따라서, 기존의 터치 입력 방식이 아닌 새로운 입력 방식이 요구된다.
도 4는 본 발명의 일 실시 예에 따른 와치 타입 이동 단말기의 동작 방법을 설명하기 위한 흐름도이다.
와치 타입 이동 단말기(100)의 디스플레이부(251)는. 사용자로부터 터치스크린 상에서 베젤로 드래그하는 제1동작을 입력 받는다(S401).
제1동작은 본 발명에서 정의되는 제스처 모드로 전환하는 제스처 모드 활성화 동작일 수 있다.
일 실시예에 의하면, 제스처 모드 활성화 동작은 터치스크린 상에서 베젤쪽으로 손가락을 드래그하는 동작일 수 있다. 이를 위해, 디스플레이부(251)는 터치스크린으로 구현될 수 있으며, 상기 디스플레이부(251)가 장착되는 윈도우(251a)는 베젤로 구현될 수 있다. 한편, 상기 베젤은 터치스크린의 테두리를 감싸며 터치스크린과 일체로 구성될 수 있고, 이 경우 디스플레이부(251)는 터치스크린과 베젤을 포함하는 것으로 볼 수 있다.
또한, 다른 실시예에 의하면, 제스처 모드 활성화 동작은 소정 시간 내에 터치스크린을 소정 거리만큼 벗어나는 동작으로 정의될 수도 있다.
한편, 본 발명의 또 다른 실시예에 의하면, 제스처 모드 활성화 동작은 상기 실시예에서 설명한 것과 다르게 정의될 수 있다. 사용자가 의도적으로 입력할 수 있고 다른 동작들과 구분하여 인식될 수 있는 일정한 형태의 동작에 해당하는 한, 본 발명의 다른 실시예에 의한 제스처 모드 활성화 동작으로 정의될 수 있을 것이다. 제스처 모드 활성화 동작에 대해서는 도 5c에 대한 설명에서 후술한다.
와치 타입 이동 단말기(100)의 제어부(180)는 상기 제1동작을 인식한다(S402). 이를 위해, 제어부(180)는 터치스크린에 입력되는 터치 동작 및 드래그 동작을 인식할 수 있도록 터치스크린을 구동하고, 제1동작이 디스플레이부(251)에 입력되는 경우 이를 인식할 수 있다.
제1동작이 인식되면, 와치 타입 이동 단말기(100)의 제어부(180)는 사용자가 와치 타입 이동 단말기(100)로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작에 의하여 상기 와치 타입 이동 단말기(100)가 제어되는 제스처 모드로 전환한다(S403).
제2동작은 제스처 동작일 수 있다. 상기 제스처 동작은, 제스처 모드에서 와치 타입 이동 단말기(100)를 제어할 수 있는 일정한 유형의 동작으로 정의된다.
일 실시예에 의하면, 제스처 동작은 와치 타입 이동 단말기(100)로부터 소정 거리만큼 이격되어 사용자가 터치스크린을 터치하지 않고 엄지손가락과 검지손가락을 움직이는 동작일 수 있다. 구체적으로, 상기 제스처 동작은, 엄지손가락으로 검지손가락을 좌우 방향 또는 상하 방향으로 문지르거나, 엄지손가락으로 검지손가락을 수평면에서 또는 수직면에서 회전하면서 문지르는 동작일 수 있다.
제스처 동작에 대해서는 도 9a 내지 도 9g에 대한 설명에서 상세히 후술한다.
이 경우, 상기 제스처 동작은 센싱부(140)에 의하여 인식될 수 있다. 일실시예에 의하면, 센싱부(140)는 사용자의 손가락을 향해 RF 신호를 전송한 후 손가락에 반사되어 되돌아오는 상기 RF 신호의 패턴을 분석하여 제스처 동작을 인식할 수 있다. 센싱부(140)가 제스처 동작을 인식하는 과정에 대해서는 도 6에 대한 설명에서 후술한다.
한편, 제스처 모드 활성화 동작이 입력되어 와치 타입 이동 단말기(100)의 입력 모드가 제스처 모드로 전환되면, 제어부(180)는 사용자의 제스처 동작에 따라 와치 타입 이동 단말기(100)의 제어를 수행한다.
일 실시예에 의하면, 제어부(180)는 만일 제스처 동작이 엄지손가락으로 검지손가락을 좌우 방향 또는 상하 방향으로 문지르거나, 수평면에서 또는 수직면에서 회전하면서 문지르는 동작인 경우, 상기 제스처 동작에 대응하여 재생시점 조절, 재생볼륨크기 조절, 줌 인/아웃, 페이지 넘김 등을 제어하는 상기 제어 동작을 수행할 수 있다
다른 실시예에 의하면, 제어부(180)는 제스처 모드로 전환하는 경우 디스플레이부(251)에 표시되는 컨텐츠 리스트의 수를 증가시킬 수 있다.
또 다른 실시예에 의하면, 제어부(180)는 제스처 모드로 전환하는 경우 만일 동영상 또는 음악 어플리케이션 중 어느 하나가 실행되면 재생시점을 조절하는 프로그래스바(progress bar) 및 재생볼륨크기를 조절하는 볼륨바 중 적어도 하나 이상을 디스플레이부(251)에 표시할 수 있다.
한편, 제어부(180)는 제스처 모드로 전환하는 경우, 터치스크린에 터치 동작이 입력될 때까지 상기 제스처 모드를 유지할 수 있다.
도 5a 내지 도 5c는 본 발명의 일 실시예에 의한 와치 타입 이동 단말기가 동작하는 3가지 입력모드로의 전환을 설명하기 위한 도면이다.
본 발명의 일 실시예에 의한 와치 타입 이동 단말기(100)는 3가지 입력모드로 동작할 수 있다. 이를 위해, 3가지 입력모드, 즉 터치 모드와 드래그 모드 및 제스처 모드로의 전환이 다음과 같이 정의된다.
도 5a는 터치 모드로의 전환을 도시한다. 만일, 사용자가 손가락을 터치스크린에 접촉(또는 클릭)하면, 와치 타입 이동 단말기(100)는 소정 영역 내에 불규칙한 패턴을 가지고 동시에 접촉되는 다수의 접촉점들(501, 502, 503, 504)을 인식할 수 있다. 이 경우, 와치 타입 이동 단말기(100)는 사용자가 터치 동작을 입력한 것으로 인식하고, 터치 모드로 전환한다.
도 5b는 드래그 모드로의 전환을 도시한다. 만일, 사용자가 손가락을 터치스크린상에서 드래그하면, 와치 타입 이동 단말기(100)는 일정한 궤적을 그리며 순차적으로 접촉되는 다수의 접촉점들(511, 521, 531, 541)을 인식할 수 있다. 이 경우, 와치 타입 이동 단말기(100)는 사용자가 드래그 동작을 입력하였다고 인식하고, 드래그 모드로 전환한다.
도 5c는 제스처 모드로의 전환을 도시한다. 만일, 사용자가 손가락을 터치스크린(251)상에서 터치스크린(251)을 벗어나도록 베젤(251a)쪽으로 드래그하면, 와치 타입 이동 단말기(100)는 순차적으로 접촉되어 일정한 궤적을 그리며 터치스크린(251)에서 베젤(251a)로 이동하는 다수의 접촉점들(551, 561, 571)을 인식할 수 있다. 이 경우, 와치 타입 이동 단말기는 터치스크린(251)에 위치한 접촉점들(551, 561)만을 인식하며, 베젤(251a)에 위치한 접촉점(571)은 인식할 수 없다. 그러나, 상기 일정한 궤적이 터치스크린(251)과 베젤(251a)의 경계까지 계속된다면, 와치 타입 이동 단말기(100)는 사용자가 제스처 모드 활성화 동작을 입력한 것으로 인식하고, 제스처 모드로 전환한다.
일 실시예에 의하면, 터치동작의 입력시간과 이동거리를 기준으로 터치 모드와 드래그 모드 및 제스처 모드 중 어느 하나로 전환할 수 있다. 예를 들어, 터치 동작이 180ms시간 내에 2mm미만의 이동거리 변화량을 가진다면 터치(또는 클릭) 의도가 있는 것으로 간주하여 터치 모드로 전환하고, 180ms시간 내에 2mm이상의 이동거리 변화량을 가진다면 드래그(또는 flick) 의도가 있는 것으로 간주하여 드래그 모드로 전환할 수 있다. 또한, 터치 동작이 180ms시간 내에 터치스크린과 베젤과의 경계부분을 5mm이상 넘어가도록 이동하면, 제스처 모드 활성화 의도가 있는 것으로 간주하여 제스처 모드로 전환할 수 있다.
도 6은 본 발명의 일 실시예에 의한 제스처 동작을 인식하는 과정을 설명하기 위한 도면이다.
센싱부(140)는 대상 물체를 향해 전파, 즉 Radio Frequency (RF) 신호를 보내고, 반사되어 되돌아온 전파 신호를 수신한다. 이 경우, 센싱부(140)는 방사된 Tx 신호가 대상 물체에 반사된 후 되돌아오는 Rx 신호의 패턴을 분석하고, 이에 의하여 대상 물체가 어떤 형태이며 어디에 있는지 감지할 수 있다.
본 발명에서 정의되는 제스처 동작은 레이더 인식 기술에 의하여 인식될 수 있다. 이를 위해, 본 발명에서는 초소형의 레이더 칩(621)이 센싱부(140)에 내장되며, 내장된 레이더 칩(621)이 사용자의 손가락까지의 거리를 인식해 미세한 손의 움직임을 인식한다.
도 6을 참조하면, 센싱부(140)는 레이더 칩(621), Tx 부(622), Rx 부(623), 어플리케이션 프로세서(624), clock(625) 및 PMIC(626)를 포함할 수 있다.
레이더 칩(621)은 RF 신호를 생성 및 증폭하여 Tx 부(622)를 통하여 송신하고, Rx 부(623)를 통하여 수신된 RF 신호에 대해 노이즈 필터링 및 디지털 데이터로 변환한 후 어플리케이션 프로세서(624)에 전송한다.
이를 위해, 레이더 칩(621)과 어플리케이션 프로세서(624)는 SPI 통신을 수행할 수 있다. SPI(Serial Peripheral Interface) 통신은 칩(IC)들간에 데이터를 주고받기 위한 통신 방법으로, 칩과 같은 소형 주변 장치 간에 데이터를 주고 받는 통신 방식이다.
어플리케이션 프로세서(624)는 machine learning 기법을 통해 특정 제스처를 추출하고 이에 기초하여 어떤 제스처에 해당하는지 판단한다. 즉, 안테나의 모양과 방향에 따라 제스처에 의한 RF 패턴은 다르게 나오므로, 특정 제스처에 대한 big data를 기반으로 한 Machine learning 기법을 통해 특정 제스처를 정의할 수 있다.
Tx 부(622)는 레이더 칩(621)이 생성한 RF 신호를 대상 물체를 향하여 송신한다.
Rx 부(623)는 대상 물체로부터 반사된 RF 신호를 수신한다.
clock(625)은 레이더 칩(621)으로부터 clock enable 신호를 수신하는 경우, 레이더 칩(621)에 clock 신호를 공급한다.
PMIC(626)는 전력 관리 칩(Power Management IC: PMIC)으로 상기 레이더 칩(621)에 전력을 공급한다.
본 발명의 일 실시예에 의한 와치 타입 이동 단말기(100)가 동작하는 3가지 입력모드, 즉 터치 모드와 드래그 모드 및 제스처 모드 각각에서 상기 구성 요소들은 다음과 같이 동작한다.
터치 모드에서는, 소모 전류를 최소화하기 레이더 칩(621)은 shut down 된다. 따라서, 레이더 칩(621)에는 전력 공급이 되지 않는다. 이 경우, 어플리케이션 프로세서(624)와 레이더 칩(621) 간의 SPI 통신은 inactivation 상태가 되고, 이에 따라 clock(625)과 RF 신호 모두 disable 상태가 된다.
드래그 모드에서는, 제스처 모드로 전환하는 경우 빠르게 동작하기 위한 준비 단계로서 레이더 칩(621)은 ready 상태를 유지한다. 따라서, 레이더 칩(621)에는 전력 공급이 이루어진다. 이 경우, 어플리케이션 프로세서(624)와 레이더 칩(621) 간의 SPI 통신은 activation 상태가 되고, 이에 따라 clock(625)은 enable 상태가 된다. 그러나, RF 신호에 의한 인식을 수행하지 않으므로, RF 신호는 disable 상태가 된다.
제스처 모드에서는, 제스처 동작을 인식하기 위하여 레이더 칩(621)은 enable 상태를 유지한다. 따라서, 레이더 칩(621)에는 전력 공급이 이루어진다. 이 경우, 어플리케이션 프로세서(624)와 레이더 칩(621) 간의 SPI 통신은 activation 상태가 되고, 이에 따라 clock(625)은 enable 상태가 된다. RF 신호에 의한 인식을 수행하므로, RF 신호는 역시 enable 상태가 된다.
도 7a와 도 7b는 본 발명의 일 실시예에 의한 와치 타입 이동 단말기에 안테나가 내장되는 구성을 도시한 도면이다.
와치 타입 이동 단말기(100)는 디스플레이부(251)를 구비하는 본체 및 본체에 연결되어 손목에 착용 가능하도록 구성되는 스트랩으로 구성된다. 이러한 와치 타입 이동 단말기(100)는 무선 통신을 수행할 수 있으며, 이를 위해 RF 신호를 송수신하는 안테나를 포함할 수 있다. 구체적으로, 상기 안테나는 와치 타입 이동 단말기의 상단 스트랩 또는 하단 스트랩에 내장될 수 있다.
도 7a을 참조하면, 본체 상단 부분과 상단 스트랩을 연결한 a 부분을 확대한 A 부분이 도시되어 있다. A 부분을 참조하면, 안테나(710)는 상단 스트랩에 내장되어 있다.
도 7b을 참조하면, 본체 하단 부분과 하단 스트랩을 연결한 b 부분을 확대한 B 부분이 도시되어 있다. B 부분을 참조하면, 안테나(720)는 하단 스트랩에 내장된다.
도 8은 본 발명의 일 실시예에 의하여 RF 신호를 이용하여 사용자의 움직임을 인식하는 것을 설명하기 위한 도면이다.
본 발명에서는 사용자의 움직임 또는 제스처 동작을 인식하기 위해 RF 스펙트럼을 사용한다. 구체적으로, 대상 물체를 향해 RF 신호를 보내고 반사되어 되돌아온 전파 신호를 수신하여, 방사된 RF 신호가 대상 물체에 반사된 후 되돌아오는 RF 신호의 패턴을 분석한다.
도 8을 참조하면, 특정 대상(810)의 움직임 또는 제스처를 인식하기 위하여, 기기(800)에서 Tx 신호를 송신한다. 상기 Tx 신호가 특정 대상(810)에 반사되어 되돌아오면, 기기(800)는 수신되는 Rx 신호에 포함되는 반사패턴(820)으로부터 움직임 또는 제스처를 추출한다.
RF 신호에 기초한 움직임 인식은 5Ghz to 60Ghz의 주파수 domain을 사용하며, 160~180도의 시야각(Field of View: FOV)을 가진다. 이러한 RF를 사용한 움직임 인식은 10mm 두께의 플라스틱 및 20mm 두께의 천 밑에서도 동작가능하며, 손동작이 겹치는 것도 인식할 수 있다. 따라서, RF를 이용한 움직임 인식은 기존의 IR 방식의 움직임 인식과는 다르게 미세 제어가 가능하다.
도 9a 내지 도 9g는 본 발명의 일 실시예에 의한 제스처 동작을 도시한 도면이다.
본 발명의 일 실시예에 의한 제스처 동작은, 와치 타입 이동 단말기(100)로부터 소정 거리만큼 이격되어 사용자가 터치스크린을 터치하지 않고 엄지손가락과 검지손가락을 움직이는 동작일 수 있다. 구체적으로, 제스처 동작은 엄지손가락으로 검지손가락을 좌우 방향 또는 상하 방향으로 문지르거나, 엄지 손가락으로 검지손가락을 수평면에서 또는 수직면에서 회전하면서 문지르는 동작일 수 있다.
도 9a를 참조하면, 사용자는 엄지손가락과 검지손가락을 맞닿은 상태에서, 엄지손가락으로 검지손가락을 좌우로 문지른다. 좌우로 이동하는 엄지손가락의 움직임에 대응하여, 시간 측면의 제어를 할 수 있다. 구체적으로. 동영상 또는 음악의 재생진행상태를 나타내는 프로그래스바(progress bar)를 앞뒤로 이동시킬 수 있다. 예를 들어, 엄지손가락을 우로 움직이면 동영상 또는 음악의 재생 시점이 미래로 이동하고 엄지손가락을 좌로 움직이면 동영상 또는 음악의 재생 시점이 과거로 이동한다.
도 9b를 참조하면, 사용자는 엄지손가락과 검지손가락을 맞닿은 상태에서, 엄지손가락으로 검지손가락을 상하로 문지른다. 상하로 이동하는 엄지손가락의 움직임에 대응하여, 정량적 측면의 제어를 할 수 있다. 구체적으로. 동영상 또는 음악의 재생볼륨 크기를 나타내는 볼륨바(volume bar)를 상하로 이동시킬 수 있다. 예를 들어, 엄지손가락을 위로 움직이면 재생볼륨이 높아지고 엄지손가락을 아래로 움직이면 재생볼륨은 낮아진다.
도 9c를 참조하면, 사용자는 엄지손가락과 검지손가락을 맞닿은 상태에서, 엄지손가락으로 검지손가락을 튕길 수 있다. 튕겨져 나가는 엄지손가락의 움직임에 대응하여, 어플리케이션을 종료하거나 어플리케이션을 선택하거나 어플리케이션에 진입할 수 있다.
도 9d를 참조하면, 사용자는 엄지손가락과 검지손가락을 떨어뜨린 상태에서 엄지손가락과 검지손가락 각각을 상하로 움직여 두 손가락간의 거리를 조절할 수 있다. 변화하는 두 손가락간의 거리에 대응하여, 정량적 측면의 제어를 할 수 있다. 구체적으로. 동영상 또는 음악의 재생볼륨 크기를 나타내는 볼륨바(volume bar)를 상하로 이동시킬 수 있다. 예를 들어, 두 손가락간의 거리가 커지면 볼륨이 높아지고 두 손가락간의 거리가 좁아지면 볼륨이 낮아질 수 있다.
도 9e를 참조하면, 사용자는 엄지손가락과 검지손가락을 떨어뜨린 상태에서 엄지손가락과 검지손가락 각각을 좌우로 움직여 두 손가락간의 거리를 조절할 수 있다. 변화하는 두 손가락간의 거리에 대응하여, 배율적 측면의 제어를 할 수 있다. 구체적으로, 지도의 배율 또는 화면표시배율을 제어할 수 있다. 예를 들어, 두 손가락 간의 거리가 커지면 지도의 배율이 확대되거나 화면이 줌인 되고 두 손가락간의 거리가 좁아지면 지도의 배율이 축소되거나 화면이 줌 아웃 될 수 있다.
도 9f를 참조하면, 사용자는 엄지손가락과 검지손가락을 맞닿은 상태에서 엄지손가락으로 검지손가락의 수평 방향에 원형을 그린다. 수평 방향에 원형으로 그려지는 움직임에 대응하여, 주기적으로 반복되는 동작을 제어할 수 있다. 예를 들어, 시계 방향으로 원형을 그려 시계 바늘을 움직이거나 페이지를 넘길 수 있다.
도 9g를 참조하면, 사용자는 엄지손가락과 검지손가락을 맞닿은 상태에서 엄지손가락으로 검지손가락의 수직 방향에 원형을 그린다. 수직 방향에 원형으로 그려지는 움직임에 대응하여, 어플리케이션의 우선 순위를 제어할 수 있다. 예를 들어, 상하로 원형을 그리는 동작에 따라 디스플레이 화면에 표시되는 GUI 들 중 가장 최상위에 표시되는 GUI가 변화할 수 있다.
이러한 제스처 동작들에 의하면, 터치영역 외에서 와치 타입 이동 단말기(100)를 손쉽게 제어하는 것이 가능하다. 또한, 기존의 작은 디스플레이 화면 영역을 벗어나 넓은 영역에서 손가락을 움직임으로써 화면크기의 제약 없는 세 제어가 가능하다.
도 10은 사용자가 본 발명의 일 실시예에 의한 제스처 동작을 입력하는 것을 도시한 도면이다.
사용자는 와치 타입 이동 단말기(100)로부터 소정 거리만큼 이격되어 엄지손가락과 검지손가락을 움직이는 동작을 취한다. 구체적으로, 도 10에 도시된 바와 같이, 엄지손가락으로 검지손가락을 좌우 방향(X)으로 문지르거나, 엄지손가락으로 검지손가락을 상하 방향(Y)으로 문지르거나, 엄지손가락을 검지손가락에 대고 사선 방향(Z)으로 비스듬히 튕길 수 있다. 상기 제스처 동작들은 볼륨 노브를 조작하거나 슬라이더를 움직이고, 손 움직임을 인식해 가상 도구를 조작하는 것에 가까운 형태를 구현할 수 있다. 이에 의하여, 사용자는 와치 타입 이동 단말기(100)를 일일이 터치하지 않고도 허공에 손동작을 취하는 동작만으로도 상기 워치 타입 이동 단말기(100)를 제어할 수 있다.
기존의 터치 입력 방식에 있어서, 터치 입력은 터치 영역, 즉 디스플레이 영역 내로 제한된다. 따라서, 디스플레이의 크기가 작은 기기에서는 터치를 통하여 기기를 제어하는 것이 쉽지 않고, 미세 조절이 요구되는 프로그래스바는 표시되지 않는다.
본 발명의 일 실시예에 의한 제스처 모드에서는 터치 영역에의 터치 없이 와치 타입 이동 단말기(100)를 제어할 수 있다. 즉, 터치 영역에 제한되지 않고 터치 영역 밖의 넓은 영역에서 제스처 동작을 입력할 수 있다. 이 경우, 작은 터치 영역을 가리지 않고 제어가 가능하며, 터치 영역의 작은 크기로 인하여 발생될 수 있는 오작동의 확률도 줄어든다. 나아가, 넓은 영역에서 제한 없이 제스처 동작을 입력할 수 있으므로 미세 제어가 가능하다.
도 11a와 도 11b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 와치 타입 이동 단말기를 제어하는 것을 설명하기 위한 도면이다.
도 11a는 터치 모드 또는 드래그 모드로 동작하는 경우를 가정한다. 이 경우, 사용자가 터치 동작 또는 드래그 동작을 손쉽게 할 수 있도록, 터치스크린(251)에 표시되는 GUI 개수나 표시되는 내용이 제한되어 있다. 예를 들어, 도 11a를 참조하면, 전화번호 리스트 중 단 2줄만이 표시된다.
이 경우, 사용자가 터치스크린(251) 상에서 검지손가락을 터치스크린(251)을 벗어나도록 베젤 방향으로 드래그함으로써 제스처 모드 활성화 동작을 입력하면, 와치 타입 이동 단말기(100)는 제스처 모드로 전환된다.
제스처 모드에서, 사용자는 터치스크린을 터치하지 않고 허공에 손가락으로 움직임을 취하여 와치 타입 이동 단말기(100)를 제어한다. 따라서, 사용자의 터치 조작의 용이성을 위하여 요구되던 GUI의 크기나 개수에 대한 제약이 없다. 또한, 손가락의 미세한 움직임까지 인식할 수 있어 미세 제어가 가능하므로, 더 많은 GUI들 또는 리스트 목록들을 터치스크린 상에 표시할 수 있다. 도 11a 에서는 2줄의 전화번호부 리스트만이 표시되지만, 도 11b의 제스처 모드 에서는 6줄의 전화번호부 리스트가 표시된다.
한편, 도 11b에 도시된 바와 같이, 사용자는 엄지손가락으로 검지손가락을 상하 방향으로 문지르는 동작을 취함으로써, 전화번호부 리스트를 스크롤 할 수 있다. 구체적으로, 엄지손가락을 위로 문지르면 리스트가 스크롤 업(scroll up) 되어 하단의 리스트들이 보여지고, 엄지손가락을 아래로 문지르면 리스트가 스크롤 다운(scroll down)되어 상단의 리스트들이 보여진다.
도 12a 내지 도 12c는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 와치 타입 이동 단말기를 제어하는 것을 설명하기 위한 도면이다.
도 12a는 터치 모드 또는 드래그 모드로 동작하는 경우를 가정하며, 도 12b 및 도 12c는 제스처 모드로 동작하는 경우를 가정한다.
이 경우, 화면 크기가 작아 사용자가 터치 동작 또는 드래그 동작을 통한 미세 조절이 힘들기 때문에, 프로그래스바(progress bar)나 볼륨바(volume bar) 등의 상태바는 표시되지 않는다. 예를 들어, 도 12a를 참조하면, 재생/정지, 빨리감기 및 되감기에 대한 GUI 만이 표시될 뿐, 상태바는 표시되지 않는다.
만일, 사용자가 터치스크린(251)상에서 검지손가락을 터치스크린(251)을 벗어나도록 베젤(251a) 방향으로 드래그함으로써 제스처 모드 활성화 동작을 입력하면, 와치 타입 이동 단말기(100)는 제스처 모드로 전환된다.
제스처 모드에서는, 손가락의 움직임을 통한 미세 조절이 가능하다. 즉, 사용자는 터치 영역 밖에서 입력 영역에 대한 제한 없이 손가락을 손쉽게 움직일 수 있으므로, 미세 조절을 위하여 다양한 단계가 포함되는 상태바를 조절하는 것이 가능하다. 따라서, 프로그래스바나 볼륨바가 터치스크린(251) 상에 표시된다.
도 12a에서는 터치스크린(251)에 재생/정지, 빨리감기 및 되감기에 대한 GUI 만이 표시되지만, 도 12b의 터치스크린(251)에는 프로그래스 바(11)가 표시되고, 도 12c의 터치스크린(251)에는 볼륨바(12)가 표시된다.
도 12b에 도시된 바와 같이, 사용자는 엄지손가락으로 검지손가락을 좌우방향으로 문지르는 동작을 취함으로써, 프로그래스바(11)를 앞뒤로 이동시킬 수 있다. 구체적으로, 엄지손가락을 우측 방향으로 문지르면 프로그래스바(11)가 뒤로 이동하여 음악의 재생 시점이 뒤로 이동하고, 엄지손가락을 좌측 방향으로 문지르면 프로그래스바(11)가 앞으로 이동하여 재생 시점이 앞으로 이동한다.
또한, 도 12c에 도시된 바와 같이, 사용자는 엄지손가락으로 검지손가락을 상하방향으로 문지르는 동작을 취함으로써, 볼륨바(12)를 상하로 이동시킬 수 있다. 구체적으로, 엄지손가락을 위쪽 방향으로 문지르면 볼륨바(12)가 높아져 재생 볼륨이 높아지고, 엄지손가락을 아래쪽 방향으로 문지르면 볼륨바(12)가 낮아져 재생 볼륨이 낮아진다.
도 13a 내지 도 13d는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 지도 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 13a 내지 도 13d에서는 사용자가 와치 타입 이동 단말기(100)의 터치스크린상에서 지도 어플리케이션을 실행하는 경우를 가정한다.
일반적인 이동 단말기에서 지도 어플리케이션을 실행하는 경우, 디스플레이 화면이 크기 때문에 출발지와 목적지를 한눈에 볼 수 있어 편리하다. 이 경우, 교통 수단 등의 이동 수단에 대한 정보도 함께 표시할 수 있어 사용자의 편리성이 증대된다. 그러나, 와치 타입 이동 단말기(100)의 경우, 작은 디스플레이 화면으로 인하여 출발지와 목적지가 한 화면에 표시되지 않으며, 사용자가 지도를 줌 인 또는 줌 아웃 하거나 지도를 이동하는 동작을 수행하는 것이 쉽지 않다.
도 13a는 터치 모드 또는 드래그 모드로 동작하는 경우이다. 좌측에 도시된 바와 같이, 터치 시 손가락이 터치 스크린 화면의 상당 부분을 가리게 되어, 지도상에서 터치 동작을 통하여 목적지, 출발지 및 도착지 등을 정확하게 찾는 것이 어렵다.
우측에 도시된 바와 같이 지도를 줌 인(Zoom in) 또는 줌 아웃(Zoom out) 하는 동작도 작은 화면 크기로 인하여 어려우며, 때때로 줌 인 또는 줌 아웃 시 지도 화면이 올라가거나 내려가는 등의 오동작이 발생할 수 있다.
도 13b는 제스처 모드로 동작하는 경우이다. 사용자는 엄지손가락으로 검지손가락을 좌우 방향(X)으로 또는 상하 방향(Y)으로 문지르는 동작을 취함으로써, 지도 어플리케이션을 손쉽게 제어할 수 있다. 구체적으로, 검지손가락을 좌우 방향(X)으로 문지르는 동작을 취함으로써 표시되는 정보의 페이지를 이동할 수 있다. 검지손가락을 상하 방향(Y)으로 문지르는 동작을 취함으로써 화면상의 지도를 줌 인 하거나 줌 아웃 시킬 수 있다.
도 13c는 제스처 모드로 동작하는 경우이다. 도 13c를 참조하면, 사용자는 엄지손가락으로 검지손가락을 아래로 문지르는 동작을 취하여 지도를 줌인 시킨다. 사용자가 상기 동작을 여러 번 반복할수록, 점점 해당 장소(목적지, 출발지 및 도착지)에 가까이 다가가게 되어 해당 장소가 확대되어 표시된다.
사용자가 엄지손가락으로 검지손가락을 아래로 문지르는 동작을 한번 취하면, 맨 왼쪽 지도 화면(21)이 표시된다. 지도가 줌인 될수록 사용자는 해당 장소에 대한 좀더 자세한 지도를 볼 수 있다.
지도가 최대한 줌인 될때까지 사용자가 검지손가락을 아래로 문지르는 동작을 max 번 취하면, 가운데 지도 화면(22)과 같이 최대한 확대된 지도가 표시된다.
최대로 줌인 된 상태에서 사용자가 검지손가락을 아래로 문지르는 동작을 한번 더 취하면, 맨 오른쪽 지도 화면(23)과 같이 해당 장소에 대한 상세한 설명이 추가된 지도가 표시된다. 이 경우, 상기 상세한 설명은 여러 페이지에 걸쳐 계속될 수 있는데, 상기 설명에 대한 페이지를 제어하는 과정은 도 13d를 참조하여 설명한다.
도 13d를 참조하면, 사용자는 엄지손가락으로 검지손가락을 좌우로 문지르는 동작을 취하여 상세한 설명의 페이지를 좌우 스크롤로 넘겨볼 수 있다. 사용자가 상기 동작을 여러 번 반복할수록, 점점 페이지가 뒤로 스크롤되어 맨 마지막 페이지가 표시되거나 점점 페이지가 앞으로 스크롤되어 맨 첫 페이지가 표시될 수 있다.
사용자가 엄지손가락으로 검지손가락을 우측으로 문지르는 동작을 한번 취하면, 맨 왼쪽에 도시된 것과 같이 상세한 설명의 첫 페이지(24)가 표시된다. 만일 사용자가 우측으로 문지르는 동작을 반복하면 상세한 설명의 뒷 페이지로 스크롤 되어 넘어가고, 좌측으로 문지르는 동작을 반복하면 상세한 설명의 앞 페이지로 스크롤 되어 넘어간다.
상세한 설명의 마지막 페이지(25)가 표시될 때까지 사용자가 검지손가락을 우측으로 문지르는 동작을 max 번 취하면, 가운데에 도시된 것과 같이 상세한 설명의 마지막 페이지(25)가 표시된다.
상세한 설명의 마지막 페이지가 표시된 상태에서 사용자가 검지손가락을 좌측으로 문지르는 동작을 한번 더 취하면, 맨 오른쪽에 도시된 것과 같이 상세한 설명의 첫 번째 페이지(26)로 되돌아간다.
한편, 도 13d 도시된 페이지에서 만일 사용자가 엄지손가락으로 검지손가락을 위로 문지르는 동작을 취하여 화면을 줌 아웃 시키면, 상세한 설명이 표시된 화면에서 다시 지도가 표시된 화면으로 되돌아갈 수 있다.
도 14a 내지 도 14c는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 갤러리 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 14a 내지 도 14c에서는 제스처 모드로 동작하는 경우를 가정한다.
이동 단말의 경우 한 화면에 많은 수의 GUI들이 표시될 수 있다. 이 경우, 사용자는 제어 대상인 GUI들을 한눈에 볼 수 있어 편리하다.
반면, 와치 타입 이동 단말기(100)는 화면 크기에 대한 제약 때문에 이동 단말에 비하여 상대적으로 적은 수의 GUI 만을 표시할 수 있다. 따라서, 와치 타입 이동 단말기(100)에서는 보다 효율적으로 GUI 들을 표시하고 제어할 수 있는 방법이 요구된다.
일 실시예에 의하면, 와치 타입 이동 단말기(100)는 다수의 GUI들을 터치스크린(251) 화면에 표시하되, GUI가 표시되는 위치에 따라 GUI의 크기를 다르게 표시할 수 있다.
도 14a를 참조하면, 표시되는 GUI들의 크기가 각각 다르다. 구체적으로, 화면 중앙에 위치하는 GUI는 크게 표시되고 화면 중앙에서 멀리 위치할수록 GUI는 작게 표시된다. 이 경우, 사용자는 엄지손가락으로 검지손가락을 좌우 방향(X)으로 또는 상하 방향(Y)으로 문지르는 동작을 취함으로써, 갤러리 어플리케이션을 손쉽게 제어할 수 있다. 구체적으로, 검지손가락을 좌우 방향(X)으로 문지르는 동작을 취함으로써 표시되는 정보의 페이지를 넘길 수 있다. 또한, 검지손가락을 상하 방향(Y)으로 문지르는 동작을 취함으로써 갤러리 어플리케이션을 줌 인 또는 줌 아웃 할 수 있다.
도 14b의 맨 왼쪽에 도시된 도면을 참조하면, 화면 중앙에 갤러리 어플리케이션에 대응하는 GUI(41)가 표시된다. 갤러리 어플리케이션을 실행하고자 하는 경우, 사용자는 엄지손가락으로 검지손가락을 아래로 문지르는 동작을 취하여 해당 GUI(41)을 줌 인 시킨다. 사용자가 상기 동작을 반복할수록, 갤러리 어플리케이션은 점점 확대되어 표시된다.
갤러리 어플리케이션이 선택될 때까지 사용자가 검지손가락을 아래로 문지르는 동작을 max 번 취하면, 도 14b의 가운데에 도시된 도면과 같이 갤러리 어플리케이션에 대응하는 GUI(42)가 선택된다. 이 경우, 다른 어플리케이션에 대응하는 GUI는 사라지고 오직 갤러리 어플리케이션에 대응하는 GUI(42)만이 화면에 확대되어 표시될 수 있다.
갤러리 어플리케이션이 선택된 상태에서 사용자가 검지손가락을 아래로 문지르는 동작을 한번 더 취하면, 갤러리 어플리케이션이 실행되어 상기 갤러리 어플리케이션의 메인 화면이 표시된다. 도 14b의 맨 오른쪽에 도시된 도면을 참조하면, 갤러리 어플리케이션의 메인 화면, 즉 여러 사진 폴더들에 대한 요약이 표시된다.
한편, 갤러리 어플리케이션을 실행하는 경우 선택된 사진에 대한 상세한 정보를 표시 및 제어할 수 있는데, 이에 대해서는 도 14c를 참조하여 설명한다.
도 14c에 도시된 바와 같이, 사용자는 엄지손가락으로 검지손가락을 좌우로 문지르는 동작을 취하여 사진에 대한 상세한 설명 페이지를 좌우 스크롤 하여 넘겨볼 수 있다. 사용자가 상기 동작을 여러 번 반복할수록, 점점 페이지가 뒤로 스크롤되어 맨 마지막 페이지가 표시되거나 점점 페이지가 앞으로 스크롤되어 맨 첫 페이지가 표시될 수 있다.
사용자가 엄지손가락으로 검지손가락을 우측으로 문지르는 동작을 한번 취하면, 맨 왼쪽에 도시된 것과 같이 상세한 설명의 첫 페이지(43)가 화면에 표시된다. 만일 사용자가 우측으로 문지르는 동작을 반복하면 상세한 설명의 뒷 페이지로 스크롤 되어 넘어가고, 좌측으로 문지르는 동작을 반복하면 상세한 설명의 앞 페이지로 스크롤 되어 넘어간다.
마지막 페이지가 표시될 때까지 사용자가 검지손가락을 우측으로 문지르는 동작을 max 번 취하면, 가운데에 도시된 것과 같이 상세한 설명의 마지막 페이지(44)가 표시된다.
이 상태에서, 사용자가 엄지손가락으로 검지손가락을 좌측으로 문지르는 동작을 한번 더 취하면, 맨 오른쪽에 도시된 것과 같이 상세한 설명의 첫 페이지(45)로 되돌아간다.
한편, 도 14c에 도시된 화면들에서 만일 사용자가 엄지손가락으로 검지손가락을 위로 문지르는 동작을 취하여 갤러리 어플리케이션을 줌 아웃 시키면, 상세한 설명이 사라지고 사진이 표시된 메인 화면으로 되돌아갈 수 있다.
도 15a와 도 15b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 음악 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 15a와 도 15b에서는 제스처 모드로 동작하는 경우를 가정한다.
터치 모드 또는 드래그 모드에서는 화면 크기 및 터치 동작에 의한 제약 때문에, 프로그래스바(progress bar)나 볼륨바(volume bar) 등의 상태바가 표시되지 않는다.
그러나, 제스처 모드에서는, 사용자가 터치 영역 밖에서 손가락의 움직임에 의하여 터치스크린(251) 상에 표시되는 프로그래스바나 볼륨바 및 슬라이더를 조절함으로써 재생속도 및 볼륨의 미세조절을 손쉽게 할 수 있다.
도 15a를 참조하면, 터치스크린(251) 화면에 프로그래스바(51, 52, 53)가 표시된다. 프로그래스바(51, 52, 53)는 전체 재생 시간 중 어느 부분을 재생하고 있는지를 나타낸다. 이 경우, 사용자는 엄지손가락으로 검지손가락을 좌우 방향으로 문지르는 동작을 취함으로써, 프로그래스바(51, 52, 53)를 앞뒤로 이동시킬 수 있다.
도 15a의 맨 왼쪽에 도시된 터치스크린(251) 화면 밖에서 사용자가 엄지 손가락으로 검지손가락을 우측 방향으로 문지르면, 프로그래스바(51)는 뒤로 이동한다. 구체적으로, 엄지손가락을 우측 방향으로 문지르면 가운데 도시된 터치스크린 화면과 같이 프로그래스바(52)가 뒤로 이동하여 음악의 재생 시점이 뒤로 이동하고, 엄지손가락을 좌측 방향으로 문지르면 맨 오른쪽에 도시된 터치스크린 화면과 같이 프로그래스바(53)가 앞으로 이동하여 재생 시점이 앞으로 이동한다.
도 15b를 참조하면, 터치스크린(251) 화면에 볼륨바(54, 55, 56)가 표시된다. 볼륨바(54, 55, 56)는 전체 재생 볼륨 중 어느 단계의 볼륨으로 재생하고 있는지를 나타낸다. 이 경우, 사용자는 엄지손가락으로 검지손가락을 상하 방향으로 문지르는 동작을 취함으로써, 볼륨바(54, 55, 56)를 상하로 이동시킬 수 있다.
도 15b의 맨 왼쪽에 도시된 터치스크린(251) 화면 밖에서 사용자가 엄지 손가락으로 검지손가락을 아래 방향으로 문지르면, 볼륨바(54)는 아래로 이동한다. 구체적으로, 엄지손가락을 아래 방향으로 문지르면 가운데 도시된 터치스크린 화면과 같이 프로그래스바(55)가 낮아져 재생 볼륨이 낮아지고, 엄지손가락을 위쪽 방향으로 문지르면 맨 오른쪽에 도시된 터치스크린 화면과 같이 프로그래스바(56)가 높아져 재생 볼륨이 높아진다.
도 16a와 도 16b는 본 발명의 일 실시예에 의한 제스처 동작에 의하여 주소록 어플리케이션을 제어하는 과정을 설명하기 위한 도면이다.
도 16a를 참조하면, 사용자는 엄지손가락으로 검지손가락을 상하로 문지르는 동작을 취하여 주소록 페이지를 상하 스크롤로 넘겨볼 수 있다. 사용자가 상기 동작을 여러 번 반복할수록, 점점 페이지가 뒤로 스크롤되어 맨 마지막 페이지가 표시되거나 점점 페이지가 앞으로 스크롤되어 맨 첫 페이지가 표시될 수 있다.
사용자가 엄지손가락으로 검지손가락을 아래쪽으로 문지르는 동작을 한번 취하면, 가운데에 도시된 화면과 같이 화면이 스크롤다운 되어 상단에 위치한 리스트들이 표시된다.
여기서, 만일 사용자가 엄지손가락으로 검지손가락을 위쪽으로 문지르는 동작을 한번 취하면, 맨 오른쪽의 터치스크린 화면과 같이 화면이 스크롤 업 되어 하단에 위치한 리스트들이 표시된다.
한편, 사용자는 도 16a에 도시된 주소록 리스트에서 엄지손가락으로 검지손가락을 우측 또는 좌측 방향으로 문지르는 제스처 동작을 취함으로써 주소록 리스트를 줌 인 하거나 줌 아웃 할 수 있다. 구체적으로, 주소록 리스트를 줌 인 하는 경우, 선택된 리스트에 대한 상세 정보가 표시되고, 선택된 리스트에서 줌 아웃을 하는 경우 주소록 리스트로 되돌아갈 수 있다.
도 16b를 참조하면, 사용자가 주소록 리스트 들 중에서 elly를 선택한 후 엄지손가락으로 검지손가락을 우측으로 문지르는 동작을 취하면, 선택된 주소가 줌 인 되어 이에 대한 상세한 정보가 표시된다. 만일 사용자가 상세한 정보가 표시된 상태에서 엄지손가락으로 검지손가락을 좌측으로 문지르는 동작을 취하면, 상세한 정보가 줌 아웃 되어 해당 주소가 표시된 페이지로 되돌아간다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (18)

  1. 와치 타입 이동 단말기에 있어서,
    터치스크린과 상기 터치스크린의 테두리를 둘러싼 베젤을 포함하며, 상기 터치스크린 상에서 상기 베젤로 드래그하는 제1동작이 입력되는 디스플레이부;
    사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작을 인식하는 센싱부; 및
    상기 제1동작이 입력되면 상기 제2동작에 의하여 상기 와치 타입 이동 단말기가 제어되는 제스처 모드로 전환하는 제어부를 포함하는 와치 타입 이동 단말기.
  2. 제1항에 있어서,
    상기 제2동작은, 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 상기 터치스크린을 터치하지 않고 엄지손가락과 검지손가락을 움직이는 동작인 와치 타입 이동 단말기.
  3. 제1항에 있어서,
    상기 제1동작은, 소정 시간 내에 상기 터치스크린을 소정 거리만큼 벗어나게 드래그하는 동작인 와치 타입 이동 단말기.
  4. 제1항에 있어서,
    상기 제어부는, 상기 제스처 모드로 전환하는 경우 상기 터치스크린에 터치 동작이 입력될 때까지 상기 제스처 모드를 유지하는 와치 타입 이동 단말기.
  5. 제1항에 있어서,
    상기 제어부는, 상기 제스처 모드로 전환하는 경우 상기 터치스크린에 표시되는 컨텐츠 리스트의 수를 증가시키는 와치 타입 이동 단말기.
  6. 제1항에 있어서,
    상기 제어부는, 상기 제스처 모드로 전환하는 경우 만일 동영상 또는 음악 어플리케이션 중 어느 하나가 실행되면 재생시점을 조절하는 프로그래스바(progress bar) 및 재생볼륨크기를 조절하는 볼륨바 중 적어도 하나 이상을 표시하는 와치 타입 이동 단말기.
  7. 제1항에 있어서,
    상기 센싱부는, RF 신호를 전송하고 상기 손가락에 반사되어 되돌아오는 상기 RF 신호의 패턴을 분석하여 상기 제2동작을 인식하는 와치 타입 이동 단말기.
  8. 제1항에 있어서,
    상기 제어부는, 상기 제2동작에 대응하여 상기 와치 타입 이동 단말기를 제어하는 제어 동작을 수행하는 와치 타입 이동 단말기.
  9. 제8항에 있어서,
    상기 제2동작은, 엄지손가락으로 검지손가락을 좌우 방향으로 문지르는 동작, 엄지손가락으로 검지손가락을 상하 방향으로 문지르는 동작, 엄지손가락으로 검지손가락을 수평면에서 회전하면서 문지르는 동작 및 엄지손가락으로 검지손가락을 수직면에서 회전하면서 문지르는 동작 중 적어도 하나 이상을 포함하고,
    상기 제어부는, 상기 제2동작에 대응하여 재생시점 조절, 재생볼륨크기 조절, 줌 인/아웃 및 페이지 넘김 중 적어도 하나 이상에 대한 상기 제어 동작을 수행하는 와치 타입 이동 단말기.
  10. 와치 타입 이동 단말기의 동작 방법에 있어서,
    터치스크린 상에서 베젤로 드래그하는 제1동작이 입력되는 단계; 와
    상기 제1동작이 인식되면, 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 손가락을 움직이는 제2동작에 의하여 상기 와치 타입 이동 단말기가 제어되는 제스처 모드로 전환하는 단계를 포함하는 와치 타입 이동 단말기의 동작 방법.
  11. 제10항에 있어서,
    상기 제2동작은, 사용자가 상기 와치 타입 이동 단말기로부터 소정 거리만큼 이격되어 상기 터치스크린을 터치하지 않고 엄지손가락과 검지손가락을 움직이는 동작인 와치 타입 이동 단말기의 동작 방법.
  12. 제10항에 있어서,
    상기 제1동작은, 소정 시간 내에 상기 터치스크린을 소정 거리만큼 벗어나게 드래그하는 동작인 와치 타입 이동 단말기의 동작 방법.
  13. 제10항에 있어서,
    상기 제스처 모드로 전환하는 경우 상기 터치스크린에 터치 동작이 입력될 때까지 상기 제스처 모드를 유지하는 와치 타입 이동 단말기의 동작 방법.
  14. 제10항에 있어서,
    상기 제스처 모드로 전환하는 경우 상기 터치스크린에 표시되는 컨텐츠 리스트의 수를 증가시키는 와치 타입 이동 단말기의 동작 방법.
  15. 제10항에 있어서,
    상기 제스처 모드로 전환하는 경우 만일 동영상 또는 음악 어플리케이션 중 어느 하나가 실행되면 재생시점을 조절하는 프로그래스바(progress bar) 및 재생볼륨크기를 조절하는 볼륨바 중 적어도 하나 이상을 표시하는 와치 타입 이동 단말기의 동작 방법.
  16. 제10항에 있어서,
    RF 신호를 전송하고 상기 손가락에 반사되어 되돌아오는 상기 RF 신호의 패턴을 분석하여 상기 제2동작을 인식하는 와치 타입 이동 단말기의 동작 방법.
  17. 제10항에 있어서,
    상기 제2동작에 대응하여 상기 와치 타입 이동 단말기를 제어하는 제어 동작을 수행하는 와치 타입 이동 단말기의 동작 방법.
  18. 제17항에 있어서,
    상기 제2동작은, 엄지손가락으로 검지손가락을 좌우 방향으로 문지르는 동작, 엄지손가락으로 검지손가락을 상하 방향으로 문지르는 동작, 엄지손가락으로 검지손가락을 수평면에서 회전하면서 문지르는 동작 및 엄지손가락으로 검지손가락을 수직면에서 회전하면서 문지르는 동작 중 적어도 하나 이상을 포함하고,
    상기 제어부는, 상기 제2동작에 대응하여 재생시점 조절, 재생볼륨크기 조절, 줌 인/아웃 및 페이지 넘김 중 적어도 하나 이상에 대한 상기 제어 동작을 수행하는 와치 타입 이동 단말기의 동작 방법.
PCT/KR2015/010567 2015-08-28 2015-10-06 와치 타입 이동 단말기 및 그의 동작 방법 WO2017039057A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/755,990 US20180343023A1 (en) 2015-08-28 2015-10-06 Watch type mobile terminal and operating method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0122160 2015-08-28
KR1020150122160A KR20170025570A (ko) 2015-08-28 2015-08-28 와치 타입 이동 단말기 및 그의 동작 방법

Publications (1)

Publication Number Publication Date
WO2017039057A1 true WO2017039057A1 (ko) 2017-03-09

Family

ID=58187825

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/010567 WO2017039057A1 (ko) 2015-08-28 2015-10-06 와치 타입 이동 단말기 및 그의 동작 방법

Country Status (3)

Country Link
US (1) US20180343023A1 (ko)
KR (1) KR20170025570A (ko)
WO (1) WO2017039057A1 (ko)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
EP4327731A3 (en) 2015-08-20 2024-05-15 Apple Inc. Exercise-based watch face
US10719232B2 (en) * 2016-06-08 2020-07-21 Qualcomm Incorporated Providing virtual buttons in a handheld device
US10637986B2 (en) 2016-06-10 2020-04-28 Apple Inc. Displaying and updating a set of application views
TWI636744B (zh) * 2017-01-18 2018-10-01 杏泓科技服務有限公司 Drainable wireless charging device
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
US10261595B1 (en) * 2017-05-19 2019-04-16 Facebook Technologies, Llc High resolution tracking and response to hand gestures through three dimensions
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US10635895B2 (en) 2018-06-27 2020-04-28 Facebook Technologies, Llc Gesture-based casting and manipulation of virtual content in artificial-reality environments
US11416077B2 (en) * 2018-07-19 2022-08-16 Infineon Technologies Ag Gesture detection system and method using a radar sensor
CN109885174A (zh) * 2019-02-28 2019-06-14 努比亚技术有限公司 手势操控方法、装置、移动终端及存储介质
JP6921338B2 (ja) 2019-05-06 2021-08-18 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 電子デバイスの制限された動作
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US10601467B1 (en) * 2019-06-13 2020-03-24 Nxp B.V. Near-field wireless device
EP3991067A1 (en) 2019-06-26 2022-05-04 Google LLC Radar-based authentication status feedback
CN110321056A (zh) * 2019-07-15 2019-10-11 深圳传音控股股份有限公司 基于终端的控件移动方法、手机和存储介质
US11868537B2 (en) 2019-07-26 2024-01-09 Google Llc Robust radar-based gesture-recognition by user equipment
KR20220005081A (ko) 2019-07-26 2022-01-12 구글 엘엘씨 Imu 및 레이더를 기반으로 한 상태 감소
US11385722B2 (en) * 2019-07-26 2022-07-12 Google Llc Robust radar-based gesture-recognition by user equipment
EP4004686A1 (en) 2019-07-26 2022-06-01 Google LLC Authentication management through imu and radar
KR20210015489A (ko) * 2019-08-02 2021-02-10 삼성전자주식회사 휠 입력을 처리하는 전자 장치 및 이의 동작 방법
EP3982240A4 (en) 2019-08-05 2022-07-20 Samsung Electronics Co., Ltd. CONTROL METHOD BASED ON A TOUCH INPUT AND ASSOCIATED ELECTRONIC DEVICE
CN113892072A (zh) 2019-08-30 2022-01-04 谷歌有限责任公司 用于暂停的雷达姿势的视觉指示器
CN112753005B (zh) 2019-08-30 2024-03-01 谷歌有限责任公司 移动设备的输入方法
US11467672B2 (en) 2019-08-30 2022-10-11 Google Llc Context-sensitive control of radar-based gesture-recognition
US10852905B1 (en) 2019-09-09 2020-12-01 Apple Inc. Techniques for managing display usage
CN115485646A (zh) * 2020-03-26 2022-12-16 华为技术有限公司 电容传感器、电子设备以及电子设备的控制方法
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
DK202070625A1 (en) 2020-05-11 2022-01-04 Apple Inc User interfaces related to time
US11526256B2 (en) 2020-05-11 2022-12-13 Apple Inc. User interfaces for managing user interface sharing
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US20220197393A1 (en) * 2020-12-22 2022-06-23 Snap Inc. Gesture control on an eyewear device
US11782577B2 (en) 2020-12-22 2023-10-10 Snap Inc. Media content player on an eyewear device
US11797162B2 (en) 2020-12-22 2023-10-24 Snap Inc. 3D painting on an eyewear device
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100289740A1 (en) * 2009-05-18 2010-11-18 Bong Soo Kim Touchless control of an electronic device
KR20110078008A (ko) * 2009-12-30 2011-07-07 엘지전자 주식회사 원형 디스플레이부를 구비한 이동 통신 단말기의 데이터 제어 방법 및 이를 적용한 이동 통신 단말기
KR20130038785A (ko) * 2011-10-10 2013-04-18 한국과학기술원 베젤을 이용한 터치스크린 제어방법
KR20140144412A (ko) * 2013-06-11 2014-12-19 삼성전자주식회사 제스처 기반 통신 서비스 수행 방법 및 장치
KR20150025445A (ko) * 2013-08-29 2015-03-10 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9772751B2 (en) * 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
ATE467305T1 (de) * 2007-12-21 2010-05-15 Ericsson Telefon Ab L M Tragbare elektronische vorrichtung und verfahren zur steuerung einer benutzerschnittstelle davon
JP4816765B2 (ja) * 2009-06-03 2011-11-16 カシオ計算機株式会社 電波受信装置
US20120268485A1 (en) * 2011-04-22 2012-10-25 Panasonic Corporation Visualization of Query Results in Relation to a Map
US9335872B2 (en) * 2012-10-01 2016-05-10 Stmicroelectronics Asia Pacific Pte Ltd Hybrid stylus for use in touch screen applications
US9983779B2 (en) * 2013-02-07 2018-05-29 Samsung Electronics Co., Ltd. Method of displaying menu based on depth information and space gesture of user
CN104035706B (zh) * 2013-03-08 2017-07-28 宏达国际电子股份有限公司 显示方法以及电子装置
US9395917B2 (en) * 2013-03-24 2016-07-19 Sergey Mavrody Electronic display with a virtual bezel
US9612736B2 (en) * 2013-07-17 2017-04-04 Korea Advanced Institute Of Science And Technology User interface method and apparatus using successive touches
US9785123B2 (en) * 2014-09-26 2017-10-10 Intel Corporation Digital analog display with rotating bezel
US10852700B2 (en) * 2015-04-12 2020-12-01 Andrey Abramov Wearable smart watch with a control-ring and a user feedback mechanism

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100289740A1 (en) * 2009-05-18 2010-11-18 Bong Soo Kim Touchless control of an electronic device
KR20110078008A (ko) * 2009-12-30 2011-07-07 엘지전자 주식회사 원형 디스플레이부를 구비한 이동 통신 단말기의 데이터 제어 방법 및 이를 적용한 이동 통신 단말기
KR20130038785A (ko) * 2011-10-10 2013-04-18 한국과학기술원 베젤을 이용한 터치스크린 제어방법
KR20140144412A (ko) * 2013-06-11 2014-12-19 삼성전자주식회사 제스처 기반 통신 서비스 수행 방법 및 장치
KR20150025445A (ko) * 2013-08-29 2015-03-10 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법

Also Published As

Publication number Publication date
KR20170025570A (ko) 2017-03-08
US20180343023A1 (en) 2018-11-29

Similar Documents

Publication Publication Date Title
WO2017039057A1 (ko) 와치 타입 이동 단말기 및 그의 동작 방법
WO2018034396A1 (ko) 이동 단말기 및 그의 동작 방법
WO2016208802A1 (ko) 와치 타입 이동 단말기 및 그의 동작 방법
WO2017043686A1 (ko) 이동 단말기 및 그의 동작 방법
WO2016208803A1 (en) Deformable display device and operating method thereof
WO2017073811A1 (ko) 이동 단말기 및 그의 동작 방법
WO2016035921A1 (ko) 이동 단말기 및 그것의 제어방법
WO2017022931A1 (ko) 이동단말기 및 그 제어방법
WO2016182108A1 (ko) 이동단말기 및 그 제어방법
WO2017018603A1 (ko) 이동 단말기 및 이의 제어방법
WO2017039103A1 (ko) 이동 단말기 및 그의 제어 방법
WO2017039063A1 (en) Smart cup and control method thereof
WO2016190478A1 (ko) 와치 타입의 이동 단말기 및 그의 동작 방법
WO2015194723A1 (ko) 이동단말기 및 그 제어방법
WO2017007090A1 (en) Display device and method of controlling therefor
WO2016178465A1 (en) Mobile terminal
WO2016190479A1 (ko) 변형 가능한 디스플레이 장치 및 그의 동작 방법
WO2015194694A1 (ko) 이동 단말기
WO2017026554A1 (ko) 이동 단말기
WO2018044015A1 (ko) 공항용 로봇, 그의 서비스 제공 방법을 수행하는 프로그램이 기록된 기록 매체, 및 그와 연결되는 이동 단말기
WO2018097421A2 (ko) 이동 단말기 및 그의 동작 방법
WO2017022872A1 (ko) 헤드 마운티드 디스플레이 및 그 제어방법
WO2016098939A1 (ko) 이동 단말기 및 그의 동작 방법
WO2016068394A1 (ko) 이동 단말기 및 이의 제어방법
WO2016140393A1 (ko) 이동 단말기 및 그의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15903118

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 15755990

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 15903118

Country of ref document: EP

Kind code of ref document: A1