KR101737829B1 - 휴대 단말기의 모션 입력 장치 및 그의 운용 방법 - Google Patents

휴대 단말기의 모션 입력 장치 및 그의 운용 방법 Download PDF

Info

Publication number
KR101737829B1
KR101737829B1 KR1020090023500A KR20090023500A KR101737829B1 KR 101737829 B1 KR101737829 B1 KR 101737829B1 KR 1020090023500 A KR1020090023500 A KR 1020090023500A KR 20090023500 A KR20090023500 A KR 20090023500A KR 101737829 B1 KR101737829 B1 KR 101737829B1
Authority
KR
South Korea
Prior art keywords
signal
motion
input
scenario
sensor
Prior art date
Application number
KR1020090023500A
Other languages
English (en)
Other versions
KR20100052378A (ko
Inventor
이재면
홍현수
김진용
김경화
신승우
반지혜
오정엽
이명로
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US12/615,733 priority Critical patent/US8866734B2/en
Publication of KR20100052378A publication Critical patent/KR20100052378A/ko
Priority to US14/516,853 priority patent/US9626519B2/en
Priority to US15/467,060 priority patent/US10261603B2/en
Application granted granted Critical
Publication of KR101737829B1 publication Critical patent/KR101737829B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/604—Tools and structures for managing or administering access control systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1636—Sensing arrangement for detection of a tap gesture on the housing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/3827—Portable transceivers
    • H04B1/3833—Hand-held transceivers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly

Abstract

본 발명은 휴대 단말기의 모션 입력 장치 및 그의 운용 방법에 관한 것이다.
이러한 본 발명은 적어도 하나의 센서를 포함하는 센서부를 마련하고, 센서부로부터 수집되는 센서 신호를 기반으로 모션 신호를 생성하고, 생성된 적어도 하나의 모션 신호들에 대응하는 입력 시나리오를 작성한 뒤, 작성된 입력 시나리오 대응한 기 설정된 입력 신호를 기반으로 현재 실행되는 휴대 단말기의 응용 프로그램을 제어하는 구성을 개시한다.
모션, 센서, 시나리오

Description

휴대 단말기의 모션 입력 장치 및 그의 운용 방법{Motion Input Device For Portable Device And Operation Method using the same}
본 발명은 휴대 단말기의 모션 입력 장치 및 그의 운용 방법에 관한 것으로, 특히 다양한 모션을 수집하고, 수집된 모션을 기반으로 단말기의 특정 기능을 수행할 수 있도록 지원하는 휴대 단말기의 모션 입력 장치 및 그의 운용 방법에 관한 것이다.
최근 들어, 휴대 단말기는 이동성을 기반으로 폭넓은 사용이 이루어지고 있다. 특히, 휴대 단말기 중에 이동하면서도 음성 통화가 가능한 이동통신 단말기는 전체 국민의 85% 이상이 사용하고 있을 정도로 그 인기가 매우 높은 휴대 단말기이다. 한편, 이동통신 단말기는 화자 간의 통화 정보를 송수신하는 기능을 주요 기능으로 하면서도 다른 다양한 기능들을 가질 수 있다. 예를 들어, 종래 휴대 단말기는 파일 재생 기능에 대응하는 MP3 기능을 가지기도 하고, 영상을 수집할 수 있는 디지털 카메라에 대응하는 영상 수집 기능을 가지기도 한다. 또한, 종래 휴대 단말기의 경우, 모바일 게임이나 아케이드 게임 등을 수행할 수 있는 기능 등을 지원하고 있다.
한편, 종래 휴대 단말기는 입력 신호 생성 방식으로 터치 이벤트를 생성에 따라 휴대 단말기를 제어하는 터치스크린 방식, 키 입력에 따라 휴대 단말기를 제어하는 키패드 방식 등이 적용되고 있다. 이러한 터치스크린 및 키패드 적용방식에 따라 사용자는 휴대 단말기 동작을 보다 유연하고 빠르게 제어할 수 있게 되었다. 그러나 이러한 입력 신호 생성 방식은 섬세한 터치나 섬세한 클릭 동작이 필요하다. 즉, 종래 입력 신호 생성 방식은 사용자가 특정 상황 예를 들면 키패드에 마련된 특정 키를 정확하게 누를 수 없거나, 터치스크린에 출력된 터치 영역을 정확하게 터치할 수 없는 경우, 사용자가 원하는 입력 신호를 올바르게 생성할 수 없다. 이러한 문제점은 휴대 단말기의 소형화에 따라 더욱더 큰 문제점으로 인식되고 있는 추세이다.
따라서 본 발명의 목적은 사용자의 모션을 인식하여 적절한 입력 신호로 변환한 후, 단말기에서 수행되고 있는 프로그램에 적용할 수 있도록 하는 휴대 단말기의 모션 입력 장치 및 그의 운용 방법을 제공함에 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 모션 입력 장치는, 센서 신호를 수집하는 센서부; 상기 센서 신호를 기반으로 휴대 단말기의 동작에 대응하는 모션 신호를 생성하는 동작 인식부; 상기 적어도 하나의 모션 신호를 기반으로 입력 시나리오를 생성하는 시나리오 작성부; 시나리오 데이터 베이스에서 상기 입력 시나리오와 동일한 기준 시나리오를 검출하고, 상기 기준 시나리오에 대응하는 입력 신호를 생성하는 시나리오 매핑부;를 포함하는 것을 특징으로 한다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 모션 입력 장치 운용 방법은, 휴대 단말기에 배치된 센서부로부터 센서 신호를 수집하는 센서 신호 수집 과정; 상기 센서 신호를 기반으로 상기 휴대 단말기의 동작에 대응하는 모션 신호를 생성하는 모션 신호 생성 과정; 상기 적어도 하나의 모션 신호를 기반으로 입력 시나리오를 생성하는 입력 시나리오 생성 과정; 시나리오 데이터 베이스에서 상기 입력 시나리오와 동일한 기준 시나리오를 검출하는 시나리오 검출 과정; 상기 기준 시나리오에 대응하는 입력 신호를 생성하는 과정;을 포함하 는 것을 특징으로 한다.
본 발명의 실시 예에 따른 휴대 단말기의 모션 입력 장치 및 그의 운용 방법에 따르면, 휴대 단말기 사용자는 다양한 모션을 이용하여 휴대 단말기의 특정 기능을 적절히 운용할 수 있다.
이하, 본 발명에 따른 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명의 실시 예에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
이하 설명에서, "신호"는 센서에서 발생하는 시그널을 의미하며, "센서 신호"는 센서에서 발생하는 "신호"를 센서 검출부가 검출하여 제어부의 동작 인식부 에 전달하는 시그널을 의미할 수 있다. 그리고 "모션 신호"는 센서 검출부로부터 수신된 센서 신호들을 통하여 휴대 단말기가 어떠한 동작을 수행하였는가를 나타내는 시그널이 될 수 있다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 개략적인 구성을 블록도로 나타낸 도면이다.
상기 도 1을 참조하면, 본 발명의 휴대 단말기(100)는 무선주파수부(110), 오디오 처리부(120), 센서부(130), 센서 검출부(140), 표시부(150), 저장부(170) 및 제어부(160)의 구성을 포함한다.
이와 같은 구성을 가지는 본 발명의 휴대 단말기는 사용자 입력에 따라 모션 입력 장치를 활성화하고, 입력되는 복수의 모션 동작을 기반으로 입력 시나리오를 작성한다. 그리고 휴대 단말기는 입력 시나리오와 기 저장된 시나리오 데이터 베이스에 매칭되는 기준 시나리오와 비교하여 동일한 기준 시나리오를 검출한다. 이후, 휴대 단말기는 기준 시나리오에 매핑되어 있는 입력 신호를 생성하고, 상기 생성된 입력 신호를 현재 실행되고 있는 단말기의 응용 프로그램에 적용하여 운용하도록 지원한다. 이하 각 구성에 대하여 보다 상세히 설명하기로 한다.
상기 무선주파수부(110)는 상기 제어부(160)의 제어에 따라 통화 기능에 필요한 음성 신호 및 데이터 통신에 필요한 데이터를 송신 및 수신한다. 이러한 신호 송수신을 위하여 상기 무선주파수부(110)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선 주파수 송신부와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 무선 주파수 수신부 등을 포함할 수 있다. 특히, 본 발명의 무선주파 수부(110)는 센서 검출부(140)에서 생성하는 센서 신호들을 기반으로 제어부가 생성한 모션 신호에 따라 다른 휴대 단말기와 통신 채널을 형성하거나, 다른 휴대 단말기와 형성된 통신 채널을 해제할 수 있다.
상기 오디오 처리부(120)는 상기 통화 시 송수신 되는 오디오 데이터를 재생하기 위한 스피커(SPK)와, 통화 시 사용자의 음성 또는 기타 오디오 신호를 수집하기 위한 마이크(MIC)를 포함한다. 특히, 본 발명의 오디오 처리부(120)는 센서 검출부(140)에서 생성하는 센서 신호를 기반으로 제어부(160)가 생성한 모션 신호에 따라 통신 채널이 형성되어 오디오 신호가 전달되거나, 상기 모션 신호에 따라 특정 오디오 파일이 재생되는 경우, 해당 오디오 신호를 스피커(SPK)를 통하여 출력하도록 제어할 수 있다. 상기 통신 채널 형성 시, 오디오 처리부(120)의 마이크(MIC)는 오디오 신호를 수집하여 제어부(160) 제어에 따라 상기 통신 채널을 통하여 다른 휴대 단말기에 전송할 수 있다.
상기 센서부(130)는 다양한 센서들을 포함한다. 여기서 다양한 센서는 가속도 센서, 자이로 센서, 압력 센서, 진동 센서 등을 포함한다. 이러한 다양한 센서는 제어부(160) 제어에 따라 공급되는 전원을 바탕으로 동작하며, 휴대 단말기(100)의 움직임 또는 휴대 단말기(100)에 전해지는 압력 등에 따라 특정 신호를 생성한다. 상기 센서부는 다양한 센서들이 생성한 특정 신호를 센서 검출부(140)에 전달할 수 있다. 기타, 본 발명의 센서부(130)는 추가적인 센서 예를 들면 지자기 센서, 광센서, 포토 센서 등을 포함할 수 있다.
상기 센서 검출부(140)는 다양한 센서를 모니터링하여 어떠한 센서에서 신호 를 발생하는지를 확인할 수 있다. 이에 따라, 센서 검출부(140)는 신호를 발생한 센서의 종류에 대한 정보와, 해당 센서로부터 전달되는 신호 값을 제어부(160)에 전달할 수 있다. 이를 보다 상세히 설명하면, 센서 검출부(140)는 휴대 단말기(100)의 케이스 내측에 상기 가속도 센서가 배치되는 경우, 휴대 단말기(100)의 흔들림이나 스냅 등에 따라 발생하는 신호를 검출할 수 있다. 여기서, 센서 검출부(140)는 흔들림과 스냅을 휴대 단말기 움직임에 따라 발생하는 주파수의 변화를 통하여 구분할 수 있다. 즉, 센서 검출부(140)는 휴대 단말기(100) 움직임에 따라 발생하는 주파수의 진폭 변화 곡선이 완만하며 다수가 발생하는 경우 흔들림으로 구분하고, 주파수의 진폭 변화 곡선이 첨예하고 일회성으로 발생하는 경우 스냅으로 구분할 수 있다. 그리고 센서 검출부(140)는 자이로 센서를 이용하여 상기 휴대 단말기(100)의 기울이기 등 방향의 변화에 해당하는 신호를 검출할 수 있다. 또한 센서 검출부(140)는 진동 센서를 이용하여 상기 휴대 단말기(100)의 흔들림이나, 외부 충격에 따라 케이스에서 발생하는 진동 등에 해당하는 신호를 검출할 수 있다. 그리고 상기 센서 검출부(140)는 압력 센서를 이용하여 외부에서 상기 휴대 단말기(100) 케이스에 가해지는 압력에 따라 발생하는 신호를 검출할 수 있다. 즉, 센서 검출부(140)는 압력 센서를 이용하여 사용자가 휴대 단말기(100)를 잡고 있는지, 잡은 상태에서 얼마만큼의 힘을 가하고 있는지 등에 따른 신호를 검출할 수 있다. 이때 센서 검출부(140)는 근접 센서를 이용하여 사용자가 휴대 단말기 외관을 잡고 있는지에 대해서 검출할 수 도 있다. 상기 센서 검출부(140)는 각 센서들로부터 검출되는 신호들을 각각의 센서 신호로서 제어부(160)에 전달할 수 있 다.
상기 표시부(150)는 휴대 단말기의 기능에 따라 활성화되는 화면을 출력한다. 예를 들어 상기 표시부(150)는 부팅 화면, 대기 화면, 메뉴 화면, 통화 화면 등을 출력할 수 있다. 이러한 표시부(150)는 LCD(Liquid Crystal Display)가 적용될 수 있으며, 이 경우 표시부(150)는 LCD 제어부, 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. 상기 LCD를 터치스크린 방식으로 구현하는 경우, 표시부(150) 화면은 입력부로 동작될 수 있다. 특히, 본 발명의 표시부(150)는 단말기 사용자 요청에 따라 특정 응용 프로그램 활성화에 따른 화면을 출력할 수 있다. 이때, 표시부(150)는 현재 실행되는 응용 프로그램을 제어할 수 있는 기준 시나리오와 입력 신호를 각각 매핑한 메뉴 항목 또는 기준 시나리오 메뉴 항목을 매핑한 입력 신호 테이블을 출력할 수 있다. 입력 신호 테이블은 사용자가 별도의 모션 신호를 입력하는 경우, 응용 프로그램 화면에 오버랩 되어 표시되거나, 별도의 팝업창을 통하여 출력될 수 있다. 한편 입력 신호 테이블은 별도의 팝업창으로 출력 또는 화면에 오버랩 되지 않고 응용 프로그램 활성화를 위한 키에 대응하는 이미지 출력 시, 해당 이미지에 추가되어 표시될 수 있다. 예를 들어, 표시부(150)는 적어도 하나의 메뉴 항목을 출력할 수 있고, 해당 메뉴 항목을 실행하기 위한 적어도 하나의 기준 시나리오가 기 설정된 텍스트, 이미지 또는 아이콘의 조합 등을 메뉴 항목과 함께 출력할 수 있다.
상기 저장부(170)는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프로그램을 비롯하여, 모션 입력 장치 운용을 위한 응용 프로그램, 모션 입력 장치 지원을 위한 데이터베이스, 사용자 데이터 등을 저장한다. 한편, 상기 저장부(170)는 모션 입력 장치 운용 시 수집되는 모션 신호들을 임시 저장하는 버퍼링하는 기능을 담당할 수 있다. 이러한 상기 저장부(170)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
상기 프로그램 영역은 휴대 단말기(100)를 부팅시키는 운영체제(OS, Operating System), 모션 입력 장치에 포함된 센서부 운용을 위한 응용 프로그램, 휴대 단말기(100)의 기타 옵션(options) 기능 예컨대, 소리 재생 기능, 이미지 또는 동영상 재생 기능 등에 필요한 응용 프로그램 등을 저장한다. 특히, 본 발명의 프로그램 영역은 모션 입력 장치 지원 응용 프로그램은 센서부(130)에 포함된 각 센서를 운용하기 위한 응용 프로그램, 센서로부터 입력되는 신호를 수집하여 입력 시나리오를 작성하는 프로그램, 작성된 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오를 비교하여 그에 대응하는 입력 신호를 생성하는 프로그램, 생성된 입력 신호에 따라 특정 기능을 수행하기 위한 응용 프로그램 등을 저장할 수 있다.
상기 데이터 영역은 휴대 단말기(100)의 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 상기 휴대 단말기(100)가 제공하는 다양한 옵션 기능과 관련한 사용자 데이터들 예컨대, 동영상과, 폰 북 데이터와, 오디오 데이터 및 해당 컨텐츠 또는 사용자 데이터들에 대응하는 정보들 등을 저장할 수 있다. 또한, 상기 데이터 영역은 상술한 입력 신호 테이블을 저장하고, 모션 입력 장치 운용 시, 제어부(160) 제어에 따라 제어부(160)에 로드 한다. 이를 위하여 상기 데이터 영역은 시나리오 데이터베이스를 저장할 수 있다. 시나리오 데이터베이스는 응용 프로그램 별로 작성된 입력 신호 테이블이며, 입력 신호 테이블은 앞서 설명한 바와 같이, 응용 프로그램 별로 기준 시나리오와 입력 신호를 매핑한 테이블이다.
상기 제어부(160)는 휴대 단말기(100)의 전원 공급 및 각 장치들의 활성화와, 각 장치들 간에 송수신되는 신호 흐름을 제어한다. 특히, 본 발명의 제어부(160)는 사용자의 모션 UI(User Interface) 활성화 모드 요청에 따라 센서부(130)와 센서 검출부(140)에 전원 공급을 제어하고, 센서부(130)가 생성하는 신호를 바탕으로 센서 검출부(140)가 생성하는 센서 신호를 기반으로 생성되는 모션 신호를 이용하여 입력 시나리오를 작성한다. 여기서 입력 시나리오는 적어도 하나의 모션 신호를 기반으로 생성된다. 한편, 제어부(160)는 사용자가 모션 UI 활성화 모드를 선택하는 경우, 현재 수행되고 있는 휴대 단말기의 응용 프로그램에 대응하는 입력 신호 테이블을 시나리오 데이터베이스에서 선택하여 로드 한다. 그리고 제어부(160)는 작성된 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오들과 비교하여 동일한 기준 시나리오를 검출한다. 이후 제어부(160)는 검출된 기준 시나리오에 대응하는 입력 신호를 생성하고, 해당 입력 신호를 현재 수행되는 응용 프로그램에 적용하도록 제어할 수 있다.
이를 위하여 본 발명의 제어부(160)는 도 2에 도시된 바와 같이, 동작 인식부(161), 모션 신호 분류부(162), 시나리오 작성부(163), 시나리오 매핑부(164) 및 기능 수행부(165)를 포함할 수 있다.
상기 동작 인식부(161)는 상기 센서 검출부(140)로부터 전달되는 센서 신호 를 기반으로 휴대 단말기(100)가 어떠한 동작을 수행하였는지를 인식하는 구성이다. 이러한 동작 인식부(161)는 상기 센서 검출부(140)에서 전달된 센서 신호를 수집하고, 수집된 센서 신호가 어떠한 모션 신호에 해당하는지를 구분한다. 즉, 상기 동작 인식부(161)는 센서 검출부(140)에서 발생하는 센서 신호를 기반으로 모션 신호 예를 들어 두드리기, 흔들기, 스내핑(Snapping), 기울이기, 잡기, 무 동작 상태 놓기 등을 생성할 수 있다. 이를 보다 상세히 설명하면, 사용자가 휴대 단말기(100)의 케이스를 두드릴 경우 센서 검출부(140)는 센서부(130)에 포함된 진동 센서 및 압력 센서 중 적어도 하나로 부터 신호를 수신하고, 이를 기반으로 특정 센서에서 특정 신호가 발생한 것에 대응하는 센서 신호를 생성하여 이를 동작 인식부(161)에 전달한다. 그러면 상기 동작 인식부(161)는 상기 센서 신호를 기준으로 두드리기 모션 신호를 생성할 수 있다. 또한 상기 동작 인식부(161)는 사용자가 휴대 단말기(100)를 흔드는 경우 센서부(130)의 가속도 센서 및 진동 센서 중 적어도 하나로부터 신호를 수신한 센서 검출부(140)가 전달한 센서 신호를 이용하여 흔들기 또는 스내핑에 대응하는 모션 신호를 생성할 수 있다. 이때, 센서 검출부(140)는 휴대 단말기의 흔드는 동작에 따라 발생하는 진동 파형과 스내핑 하는 동작에 따라 발생하는 진동 파형 등을 상기 동작 인식부(161)에 각각 다르게 전달하는데 상기 동작 인식부(161)는 이러한 센서 신호를 기반으로 흔들기 또는 스내핑 모션 신호를 구분하여 생성할 수 있다. 덧붙여 상기 동작 인식부(161)는 상기 센서 검출부(140)가 검출한 자이로 센서의 센서 신호에 따라 기울이기 모션 신호를 생성하고, 상기 센서 검출부(140)가 검출한 압력 센서의 센서 신호에 따라 잡기 모 션 신호를 생성할 수 있다. 그리고 상기 동작 인식부(161)는 상기 센서 검출부(140)가 전달하는 센서 신호를 기반으로 문지르기 등에 해당하는 모션 신호를 생성할 수 있다. 이와 같이 동작 인식부(161)는 한 종류의 센서 신호를 기반으로 다수개의 모션 신호를 검출할 수 있으며, 다수개의 센서 신호를 기반으로 하나의 모션 신호를 검출할 수 도 있다. 상기 동작 인식부(161)에서 생성된 각 모션 신호는 제어부(160)에 전달되어 입력 시나리오를 작성하는 기본 요소가 된다.
상기 모션 신호 분류부(162)는 상기 동작 인식부(161)로부터 실시간으로 전달되는 모션 신호들을 분류하는 작업을 수행한다. 즉, 상기 모션 신호 분류부(162)는 상기 동작 인식부(161)로부터 전달되는 두드리기 모션 신호, 흔들기 모션 신호, 스내핑 모션 신호, 기울이기 모션 신호, 잡기 모션 신호, 무 동작 모션 신호, 문지르기 모션 신호 등을 각각 구분하여 순차적으로 분류하고, 각 분류된 모션 신호들을 시나리오 작성부(163)에 전달한다.
상기 시나리오 작성부(163)는 상기 동작 인식부(161)로부터 수신된 모션 신호들을 기반으로 입력 시나리오를 작성한다. 예를 들어 시나리오 작성부(163)는 동작 인식부(161)로부터 기 설정된 제1 시간 동안 모션 신호가 입력되지 않는 제1 무 동작 모션 신호가 입력되면 입력 시나리오 작성을 위한 초기화 과정을 수행하며, 다음으로 두드리기 모션 신호, 흔들기 모션 신호, 스내핑 모션 신호, 기울이기 모션 신호, 잡기 모션 신호 중 적어도 하나가 입력되는 경우, 해당 모션 신호를 순차적으로 조합한다. 이후, 시나리오 작성부(163)는 하나의 입력 시나리오를 종료하는 모션 신호 예를 들면 기 설정된 제2 시간 동안 모션 신호가 입력되지 않는 제2 무 동작 모션 신호가 입력되면, 이전에 조합된 모션 신호들의 조합을 하나의 입력 시나리오로 판단할 수 있다. 여기서, 시나리오 작성부(163)는 입력되는 각 모션 신호 사이에 기 설정된 제3 시간 동안 무 동작 모션 신호가 입력되면 이전 입력된 모션 신호와 다음 입력된 모션 신호를 각각 구분할 수 있다. 한편, 시나리오 작성부(163)는 입력되는 모션 신호들이 복수개가 동시에 입력되는 경우 시점 기준으로 하나의 모션 신호로 인식할 수 도 있다. 즉, 시나리오 작성부(163)는 기 설정된 일정 이상의 힘으로 휴대 단말기(100)에 압력을 가하는 잡기 모션 신호와 휴대 단말기(100)를 흔들어서 발생하는 흔들기 모션 신호가 동 시간대에 입력되는 경우, 잡기 모션 신호와 흔들기 모션 신호를 하나의 모션 신호로서 판단할 수 도 있다. 또한 시나리오 작성부(163)는 동시에 발생하는 각각의 모션 신호를 분리해서 인식하여 입력 시나리오를 작성할 수 도 있다. 이러한 시나리오 작성부(163)는 작성된 입력 시나리오를 시나리오 매핑부(164)에 전달한다.
상기 시나리오 매핑부(164)는 시나리오 작성부(163)가 전달한 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오와 비교하고, 해당 입력 신호를 생성한다. 여기서, 시나리오 매핑부(164)는 저장부(170)에 기 저장된 시나리오 데이터 베이스 중 현재 실행되고 있는 응용 프로그램에 해당하는 입력 신호 테이블을 로드 한다. 그리고 시나리오 매핑부(164)는 입력 시나리오에 대응하는 입력 신호를 기능 수행부(165)에 전달한다. 예를 들어 입력 신호 테이블은 다음 표 1과 같은 정보를 포함할 수 있다
상기 기능 수행부(165)는 시나리오 매핑부(164)로부터 전달받은 입력 신호를 기반으로 현재 수행되고 있는 응용 프로그램을 운용하는 구성이다. 예를 들어, 기능 수행부(165)는 현재 오디오 파일을 재생하고 있고, 시나리오 매핑부(164)로부터 "잠시 멈춤"에 해당하는 입력 신호를 수신한 경우, 현재 재생되고 있는 오디오 파일의 재생을 잠시 멈추도록 제어할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 모션 입력 장치를 포함하는 휴대 단말기는 사용자 요청에 따라 모션 입력 장치를 활성화하고, 입력되는 모션 신호에 대응하는 입력 신호를 생성하고, 해당 입력 신호를 현재 수행되는 응용 프로그램에 적용하도록 제어할 수 있다.
도 3은 본 발명의 실시 예에 따른 모션 입력 장치의 운용 방법을 설명하기 위한 순서도이다.
상기 도 3을 참조하면, 본 발명의 모션 입력 방법은 먼저, 휴대 단말기가 사용자 요청에 따라 S101 단계에서 모션 UI 모드를 활성화하는 경우, 휴대 단말기는 모션 입력 장치 구동을 위한 초기화 과정을 수행한다. 예를 들어, 모션 UI 모드 전환을 위한 핫키 또는 메뉴 항목이 설정되어 있는 경우, 사용자는 해당 핫키를 활성화하거나 메뉴 항목을 선택할 수 있다. 그러면, 휴대 단말기는 모션 UI 모드 지원을 위한 센서부 및 센서 검출부에 전원을 공급하도록 제어한다. 전원을 공급받은 센서부는 휴대 단말기가 포함하고 있는 다양한 센서 예를 들면, 가속도 센서, 진동 센서, 압력 센서, 자이로 센서 등 각 센서들에게 전원을 공급하여 초기화 과정을 수행한다. 한편, 센서 검출부는 각 센서부에서 신호가 발생하면, 이를 수집하여 센서의 종류에 발생한 신호 값을 기반으로 센서 신호를 생성하고, 이를 동작 인식부에 제공한다.
그러면, 휴대 단말기의 동작 인식부는 S103 단계에서 수신된 센서 신호를 기반으로 모션 신호를 생성한다. 즉, 동작 인식부는 각 센서부에서 검출된 센서 신호를 기반으로 휴대 단말기가 어떠한 동작을 하고 있는지에 해당하는 모션 신호, 예를 들면, 두드리기 모션 신호, 흔들기 모션 신호, 스내핑 모션 신호, 기울이기 모션 신호, 잡기 모션 신호, 무 동작 모션 신호 등을 생성한다.
그러면, 시나리오 작성부는 S105 단계에서 동작 인식부로부터 모션 신호를 수집하고 S107 단계에서 입력 시나리오를 작성한다. 그리고 시나리오 작성부는 S109 단계에서 현재 작성되고 있는 입력 시나리오의 완성 여부를 확인하고, 미완성인 경우, S103 단계로 복귀할 수 있다. 이를 보다 상세히 설명하면, 시나리오 작성부는 전달되는 모션 신호 중 하나의 입력 시나리오 완성을 지시하는 모션 신호 예를 들면 기 설정된 시간 동안 무 동작 모션 신호가 전달되는 경우, 이전에 입력된 모션 신호들을 조합하여 입력 시나리오를 완성할 수 있다. 입력 시나리오 완성 과정에서 시나리오 작성부는 시간 흐름에 따라 순차적으로 입력되는 모션 신호 예를 들면, 잡기 모션 신호가 입력된 후, 흔들기 모션 신호가 입력되고, 기 설정된 시간 동안 무 동작 모션 신호가 입력되면, 순차적으로 입력된 잡기 모션 신호와 흔들기 모션 신호를 포함하는 하나의 입력 시나리오를 생성할 수 있다. 또한, 시나리오 작성부는 잡기 모션 신호와 흔들기 모션 신호가 동시에 입력된 후, 기 설정된 시간 동안 무 동작 모션 신호가 입력되면, 상기 동시에 입력된 잡기 모션 신호와 흔들기 모션 신호를 포함하는 하나의 입력 시나리오를 생성할 수 있다. 그리고 시 나리오 작성부는 하나의 모션 신호가 입력된 이후, 기 설정된 시간 동안 무 동작 모션 신호가 입력되면, 상기 하나의 모션 신호와 무 동작 모션 신호를 포함하는 하나의 입력 시나리오를 생성할 수 있다. 즉, 시나리오 작성부는 모션 신호의 종류와 숫자에 관계없이 기 설정된 조건에 따라 입력된 모션 신호들을 이용하여 입력 시나리오를 작성한다.
한편, 입력 시나리오가 작성되면, 휴대 단말기는 S111 단계에서 작성된 입력 시나리오가 시나리오 데이터베이스에 저장된 기준 시나리오들 중 대응되는 기준 시나리오가 있는지 검사한다. 이를 위하여 휴대 단말기는 현재 실행되고 있는 응용 프로그램 예를 들면, 대기 화면 응용 프로그램, 파일 재생 응용 프로그램, 통화 프로그램, 카메라 응용 프로그램 등을 확인한다. 그리고 휴대 단말기는 시나리오 데이터베이스에서 해당 응용 프로그램에 대응하는 입력 신호 테이블을 읽어 와서, 상기 입력 시나리오에 대응하는 기준 시나리오가 있는지 확인할 수 있다.
휴대 단말기는 S113 단계에서 입력 시나리오에 대응하는 기준 시나리오가 존재하는지 여부를 확인하고, 없는 경우, S117 단계로 분기하여 입력 오류 출력을 수행하거나, 입력 시나리오를 무시할 수 있다. 한편, 휴대 단말기는 S113 단계에서 입력 시나리오에 대응하는 기준 시나리오가 존재하는 경우, S115 단계로 분기하여 기능 수행을 지원한다. 즉, 휴대 단말기는 입력 신호 테이블을 확인하여, 입력 시나리오에 대응하는 입력 신호를 생성하도록 제어한다. 그리고 이 입력 신호를 현재 수행되고 있는 응용 프로그램에 적용하도록 제어한다.
이후, 휴대 단말기는 S119 단계로 분기하여 휴대 단말기의 종료 여부 또는 모션 UI 모드 지원 유지 여부를 확인한 이후, 계속 진행할 경우, S101 단계로 분기하여 이후 과정을 반복적으로 수행하도록 제어할 수 있다.
상술한 본 발명의 모션 입력 장치 기반 휴대 단말기 운용에 따른 화면 인터페이스의 일예를 도 4를 참조하여 설명하기로 한다.
상기 도 4를 참조하면, 휴대 단말기 사용자는 휴대 단말기의 일측에 마련된 모션 UI 모드 전환 키 또는 메뉴 항목을 활성화한다. 휴대 단말기가 터치스크린으로 구현된 경우, 휴대 단말기는 도 4의 401에서와 같이 모션 UI 모드 전환 키에 대응하는 이미지 또는 아이콘을 터치스크린 영역 상에 상시 출력 또는 화면 활성화 시 출력하도록 제어할 수 있다. 이에 따라, 사용자는 해당 모션 UI 모드 전환 키를 터치하거나, 클릭할 수 있다. 휴대 단말기는 터치스크린에서 모션 UI 모드로 전환된 이후에는 현재 모션 UI 모드 진원 상태임을 알리기 위하여 해당 전환 키가 출력되지 않도록 제어할 수 있다.
그러면, 휴대 단말기는 도 4의 403에서와 같이, 메뉴 항목을 스크린 상에 출력할 수 있다. 각 메뉴 항목을 휴대 단말기가 지원 가능한 응용 프로그램들의 리스트가 될 수 있다. 한편, 각 메뉴 항목들에는 각 메뉴 항목을 모션 신호에 따라 선택 및 활성화할 수 있도록 기준 시나리오가 텍스트나, 이미지 또는 아이콘 조합 등으로 출력될 수 있다. 이를 보다 상세히 설명하면, 휴대 단말기 표시부는 다수개의 응용 프로그램 리스트 예를 들면, 통화 항목, 파일 재생 항목, 카메라 항목, 인터넷 항목 등을 출력할 수 있다. 이때, 휴대 단말기 표시부는 각 항목 실행을 위한 기준 시나리오를 해당 항목이 출력된 영역 또는 해당 항목과 연관되어 있는 영역에 출력할 수 있다. 이에 따라 휴대 단말기 사용자는 통화 항목은 잡기 및 흔들기 모션 신호를 포함하는 기준 시나리오에 의해 수행됨을 알 수 있다. 또한, 파일 재생 항목은 잡기 및 스내핑 모션 신호를 포함하는 기준 시나리오, 카메라 항목은 잡기 및 왼쪽 기울이기 모션 신호를 포함하는 기준 시나리오, 인터넷 항목은 잡기 및 오른쪽 기울이기 모션 신호를 포함하는 기준 시나리오에 의해 각각 수행될 수 있다.
한편, 휴대 단말기는 슬립(Sleep) 상태에서 타 휴대 단말기로부터 통화 채널 형성을 위한 통화 콜이 수신되면, 도 5의 501에 도시된 바와 같은 화면을 출력할 수 있다. 즉, 휴대 단말기 표시부는 타 휴대 단말기가 폰북에 저장되어 있는 번호인 경우, 해당 번호에 대응하는 저장 정보를 표시부에 출력하는 한편, 통화 받기를 위하여 사용자가 취해야 할 기준 시나리오 즉, 잡기 및 흔들기 모션 신호를 포함하는 기준 시나리오 정보를 표시부에 출력할 수 있다. 이 기준 시나리오는 사용자 설정에 따라 출력되지 않을 수 있다. 이때, 휴대 단말기 내부 동작에 대하여 설명하면, 휴대 단말기는 통화 콜이 수신되면, 통화 프로그램을 활성화하도록 제어하는 한편, 통화 프로그램에 대응하는 입력 신호 테이블을 시나리오 데이터베이스에서 검출하여 로드 한다. 그리고 휴대 단말기는 사용자 설정에 따라 통화 받기를 위한 기준 시나리오 정보를 표시부에 출력하도록 제어할 수 있다. 이때, 휴대 단말기는 통화 받기뿐만 아니라, 통화 거부, 전원 오프 등에 대응하는 기준 시나리오 정보 예를 들면, 통화 거부를 위하여 잡기 및 스내핑 모션 신호를 포함하는 기준 시나리오 정보를, 전원 오프를 위하여 잡기 및 기울이기 모션 신호를 포함하는 기준 시나 리오 정보를 표시부에 출력하도록 제어할 수 있다. 그리고 사용자가 입력하는 모션 신호를 기반으로 입력 시나리오를 작성하고, 작성된 입력 시나리오에 따른 휴대 단말기 동작 제어를 수행한다. 사용자가 잡기 및 흔들기를 수행한 경우, 휴대 단말기는 통화 콜에 따른 통화 채널을 형성하여 통화를 지원한다. 이때, 휴대 단말기는 도 5의 503에 도시된 바와 같이 통화 끊기에 해당하는 기준 시나리오 예를 들면 잡기 및 흔들기 모션 신호를 나타내는 텍스트나 이미지 또는 아이콘을 화면에 출력할 수 있다. 여기서, 휴대 단말기는 각 기준 시나리오 정보를 표시하는 경우, 설정된 파라미터 정보도 함께 표시할 수 있다. 예를 들어 설명에서, 입력 신호 테이블에서 통화 받기가 표 1에 나타낸 바와 같이 각 모션 신호에 대한 파라미터를 포함할 수 있다.
[표 1]
기준 시나리오(통화받기) 파라미터1 파라미터2
잡기 10(세기) 200(간격)
흔들기 3(횟수) 300(시간)
상기 표 1을 참조하면, 통화 받기를 위하여 사용자는 200ms 동안 10의 세기로 휴대 단말기 외관에 힘을 제공하여야 하며, 휴대 단말기를 300ms 이내에 3회 동안 흔들어야 한다. 이 경우, 휴대 단말기는 통화받기에 대응하는 잡기 모션 신호와 흔들기 모션 신호를 생성하고, 그에 따라 통화 받기를 수행하도록 제어할 수 있다. 그리고 휴대 단말기는 표시부에 기준 시나리오 정보를 표시할 경우, 받기 부분에서 잡기(2초) 및 흔들기(3회)와 같이 표시할 수 있을 것이다.
이상에서는 본 발명의 모션 입력 장치를 기반으로 하는 휴대 단말기의 운용 에 대하여 개략적인 설명과 간단한 실시 예를 설명하였으나, 본 발명이 상술한 실시 예에 한정되는 것은 아니다. 즉, 본 발명은 모션 입력 장치로부터 입력되는 센서 신호를 기반으로 기 설정된 동작에 대응하는 모션 신호들을 생성하고, 입력된 모션 신호들을 설정된 조건에 따라 입력 시나리오로 변환한 이 후, 현재 수행되고 있는 휴대 단말기의 응용 프로그램에 적용하도록 하는 발명으로 이해되어야 할 것이다.
도 6은 본 발명의 확장 테이블 적용을 설명하기 위한 도면이다.
상기 도 6을 참조하면, 본 발명의 휴대 단말기의 제어부는 동작 인식부(161), 모션신호 분류부(162), 시나리오 작성부(163), 시나리오 매핑부(164), 버퍼(167), 시나리오 확장부(169) 및 기능 수행부(165)를 포함할 수 있다. 여기서, 상기 동작 인식부(161), 모션신호 분류부(162), 시나리오 작성부(163)는 도 2에 도시된 구성과 동일한 역할 및 기능을 수행함으로 그에 관한 상세한 설명은 생략하기로 한다.
상기 시나리오 매핑부(164)는 시나리오 작성부(163)가 전달한 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오와 비교하고, 해당 입력 신호를 생성한다. 여기서, 시나리오 매핑부(164)는 저장부(170)에 기 저장된 시나리오 데이터베이스 중 현재 실행되고 있는 응용 프로그램에 해당하는 입력 신호 테이블을 로드 한다. 그리고 시나리오 매핑부(164)는 입력 시나리오에 대응하는 입력 신호를 기능 수행부(165)에 전달한다. 또한, 상기 시나리오 매핑부(164)는 제어부(160) 제어에 따라 시나리오 확장부(169)가 전달하는 확장 테이블(173)을 기반으로 시나리 오 작성부(163)가 전달한 입력 시나리오에 대응하는 입력 신호를 생성할 수 있다.
상기 버퍼(167)는 상기 저장부(170)로부터 입력 신호 테이블을 임시 저장하였다가 제어부(160)의 제어에 따라 시나리오 매핑부(164)에 전달할 수 있다. 이 과정에서, 상기 버퍼(167)는 시나리오 확장부(169)에 상기 입력 신호 테이블을 제공할 수 있으며, 시나리오 확장부(169)가 상기 입력 신호 테이블의 내용을 변경하여 확장 테이블을 생성하는 경우, 상기 확장 테이블을 임시 저장하고, 임시 저장된 확장 테이블을 시나리오 매핑부(164)에 전달할 수 있다.
휴대 단말기의 특정 응용 프로그램 활성화됨에 따라 제어부(160)로부터 해당 응용 프로그램에 대응하는 입력 신호 테이블이 저장부(170)로부터 버퍼(167)에 로딩될 경우, 상기 시나리오 확장부(169)는 상기 버퍼(167)에 저장된 입력 신호 테이블을 편집할 수 있는 기능을 제공한다. 한편, 휴대 단말기의 사용자 제어 즉, 사용자가 확장 테이블 생성을 목적으로 별도의 응용 프로그램에 대응하는 입력 신호 테이블을 검색하는 경우, 검색된 해당 입력 신호 테이블이 버퍼(167)에 저장될 수 있으며, 이에 따라 시나리오 확장부(169)는 상기 버퍼(167)에 저장된 입력 신호 테이블을 편집하기 위한 기능을 특정 응용 프로그램에 독립적으로 제공할 수 도 있다.
상기 시나리오 확장부(169)는 휴대 단말기 사용자의 요청에 따라 저장부에 저장되어 있는 입력 신호 테이블을 읽어 오고, 해당 입력 신호 테이블에 정의된 파라미터 값들을 추가, 정정 및 변경하여 확장 테이블(173)을 생성함으로써, 사용자가 원하는 입력 신호를 생성할 수 있도록 지원하는 구성이다. 상기 시나리오 확장 부(169)는 외부 입력에 따라 기 저장된 입력 신호 테이블 또는 확장 테이블(173)을 수신하여 저장부에 저장하고, 이를 기반으로 입력 신호 테이블 또는 확장 테이블의 파라미터 값을 변경하거나, 파라미터의 종류를 조정할 수 있다. 이를 보다 상세히 설명하면, 휴대 단말기 사용자는 외부 연결 예를 들면 무선주파수부 또는 직렬 통신 등을 통하여 서버에 접속하거나 PC에 접속하여 확장 테이블(173)을 휴대 단말기의 저장부에 저장할 수 있다. 이에 따라, 제어부는 특정 응용 프로그램이 활성화되는 경우, 해당 응용 프로그램을 위한 확장 테이블(173)이 저장부에 저장되어 있는지 여부를 확인할 수 있다. 저장부에 해당 확장 테이블(173)이 존재하는 경우, 상기 제어부(160)는 저장된 확장 테이블(173)을 상기 응용 프로그램 활성화에 따라 상기 시나리오 매핑부(164)에 로드하여 입력 시나리오와 비교되는 기준으로 이용할 수 있도록 지원한다. 한편, 상기 제어부(160)는 확장 테이블 입력 툴을 제공할 수 있다. 이를 위하여 휴대 단말기 사용자는 시나리오 확장부(169)를 기반으로 하는 확장 테이블 입력 툴을 이용할 수 있는 메뉴 항목을 제공하고, 사용자 요청에 따라 상기 확장 테이블 입력 툴을 활성화하도록 제어할 수 있다.
표 1은 확장 테이블의 일예를 나타낸 것이다. 아래 설명에서 기본 동작 ID는 입력 신호 테이블을 기준으로 기준 시나리오에 대응하는 정보이다.
[표 2]
기본 동작 ID 파라미터1 파라미터2 파라미터3 ...
두드리기 ...
스냅/흔들기 ...
... ... ... ... ...
기준 시나리오에 대응하는 기본 동작 순서의 한 행에는 하나의 기본 동작을 인식할 수도 있고, 동시에 여러 개의 기본 동작을 인식할 수 있도록 설계될 수 있다. 예를 들어, 스냅 동작의 파라미터의 주기(duration)와 세기를 달리할 경우, 여러 개의 패턴이 발생할 수 있다. 본 발명의 휴대 단말기는 이런 다양한 패턴을 이용하여 각 응용 프로그램마다 독립적인 동작 패턴 인식 기능을 지원할 수 있다. 예를 들어, 음악 재생 응용 프로그램에서 앞으로 감기 또는 뒤로 감기는 약한 스냅을 적용하고, 메시지 서비스 응용 프로그램에서는 강한 스냅을 적용할 수 있다. 여기서, 약한 스냅과 강한 스냅의 기준은 설계자가 정하는 일정 문턱 값을 기준으로 정의될 수 있다. 문턱 값의 기준은 휴대 단말기 설계자의 의도 또는 응용 프로그램 설계자의 의도에 따라 달라질 수 있다. 또한, 본 발명의 휴대 단말기는 동일한 동작이라 하더라도 사용자마다 세기와 주기 등의 차이가 발생할 수 있으므로, 사용자는 확장 테이블 입력 툴을 이용하여 파라미터 값을 세팅하도록 지원할 수 있다.
표 3은 확장 테이블에 정의된 시나리오의 일예를 나타낸 것이다.
[표 3]
파라미터1 파라미터2 파라미터3 파라미터4
1 2(횟수) 200(간격) 4(세기) 10(timeout)
2 3(횟수,스냅) 2(세기,스냅) 30(시간,흔들기) 5(세기,흔들기)
상기 시나리오 확장부(169)에서 첫 번째 파라미터 테이블을 시나리오 매핑부(164)에 제공할 경우, 시나리오 매핑부(164)는 표 4에 나타낸 바와 같은 테이블을 기준으로 동작 인식을 수행할 수 있다.
[표 4]
시나리오 1 파라미터1 파라미터2 파라미터3 파라미터4
두드리기 2(횟수) 200(간격) 4(세기) 10(timeout)
스냅/흔들기 3(횟수,스냅) 2(세기,스냅) 30(시간,흔들기) 5(세기,흔들기)
상기 표 4에 나타낸 바와 같은 동작 인식을 대기하는 중에, timeout이 있는 경우 휴대 단말기는 timeout 시간이 지나면 모션 동작을 초기화할 수 있으며, timeout이 정의되지 않은 경우, 계속 대기할 수 있다.
표 5는 복수의 동작에 따른 시나리오의 일예를 나타낸 것이다.
[표 5]
시나리오1 파라미터1 파라미터2 파라미터3
flip top to bottom 1 sec(표시부가 위로 향하는 시간 45 deg/sec(뒤집는 속도) 10 deg(뒤집어진 후 수평각도)
표 5에 나타낸 바와 같이, "flip top to bottom" 동작을 인식하는 동작 순서의 경우에도 파라미터 값들을 변경함으로써, 확장 테이블을 생성할 수 있다. 예를 들어, 파라미터3을 30 deg(degree)로 정정하였을 경우, 상기 사니리오1의 허용 범위를 변경함으로써, 사용자가 원하는 기준 시나리오 구성이 가능하다.
상술한 바와 같이 휴대 단말기에 저장되어 있는 입력 신호 테이블을 사용자가 임의적으로 변경할 수 있도록, 본 발명의 휴대 단말기는 확장 테이블 입력 툴을 제공한다.
상기 확장 테이블 입력 툴은 도 7에 도시된 바와 같이, 저장부에 저장된 입력 신호 테이블을 기반으로, 해당 파라미터 값을 변경하거나, 추가함으로써, 새로운 확장 테이블을 생성할 수 있도록 지원할 수 있다. 이를 보다 상세히 설명하면, 확장 테이블 입력 툴(200)은 응용 프로그램 선택 영역(210), 테이블 영역(220), 저장 영역(230), 취소 영역(240)을 포함할 수 있다.
상기 응용 프로그램 선택 영역(210)은 휴대 단말기가 지원하는 다양한 응용 프로그램 중 사용자가 확장 테이블을 적용하고자 하는 응용 프로그램을 선택하는 영역이다. 상기 응용 프로그램 선택에 따라 상기 테이블 영역(220)의 기본 동작 ID, 파라미터 및 파라미터 값들이 상이하게 표시될 수 있다. 상기 기본 동작 ID는 기준 시나리오에 대응하는 정보이다.
상기 테이블 영역(220)은 기본 동작 ID 영역(221), 파라미터 표시 및 추가 영역(223), 파라미터 값 표시 및 추가 영역(225)을 포함한다. 기본 동작 ID 영역(221)은 입력 신호를 나타내는 영역이다. 즉, 응용 프로그램 선택 영역(210)에서 선택된 응용 프로그램을 수행하기 위해 필요한 입력 신호들을 선택할 수 있는 영역이다. 파라미터 표시 및 추가 영역(223)은 상기 기본 동작 ID 영역(221)에서 선택된 특정 기본 동작에 해당하는 파라미터들이 있는지를 나타내며, 상기 파라미터를 사용자가 추가할 수 있는 영역을 포함한다. 상기 파라미터 값 표시 및 추가 영역(225)은 상기 파라미터들에 할당되어 있는 값을 표시하는 영역이며, 해당 파라미터들의 값을 사용자가 입력부를 이용하여 조정할 수 있는 영역이다.
상기 저장 영역(230)은 상기 기본 동작 ID 영역(221)에 파라미터를 추가 또는 변경하거나, 파라미터 값을 추가 또는 변경한 이후, 해당 확장 테이블을 저장하기 위한 영역이다. 그리고 상기 취소 영역(240)은 확장 테이블 입력 과정을 취소할 수 있는 영역이다.
도 8은 본 발명의 실시 예에 따른 확장 테이블 적용에 따른 모션 입력 장치 운용 방법을 설명하기 위한 순서도이다.
상기 도 8을 참조하면, 본 발명의 운용 방법은 먼저, 휴대 단말기가 사용자 요청에 따라 S201 단계에서 모션 UI 모드를 활성화하는 경우, 휴대 단말기는 모션 입력 장치 구동을 위한 초기화 과정을 수행한다. 이후, 휴대 단말기의 동작 인식부는 S203 단계에서 수신된 센서 신호를 기반으로 모션 신호를 생성한다. 그러면, 시나리오 작성부는 S205 단계에서 동작 인식부로부터 모션 신호를 수집하고 S207 단계에서 입력 시나리오를 작성한다. 그리고 시나리오 작성부는 S209 단계에서 현재 작성되고 있는 입력 시나리오의 완성 여부를 확인하고, 미완성인 경우, S203 단계 이전으로 분기하여 이후 과정을 반복 수행할 수 있다.
한편, 입력 시나리오가 작성되면, 휴대 단말기는 S210 단계에서 확장 테이블 적용 여부를 확인한다. 이를 위하여 휴대 단말기는 특정 응용 프로그램에 적용할 확장 테이블이 존재하는지 여부를 확인할 수 있다. 확장 테이블은 상기 입력 신호 테이블과 함께 저장될 수 있으며, 외부로부터 수신되거나, 확장 테이블 입력 툴에 의하여 생성될 수 있다. 즉, 휴대 단말기는 무선주파수부를 이용하여 상기 확장 테이블을 제공하는 특정 서버에 접속하여 해당 확장 테이블을 수신할 수 있다. 또한 상기 휴대 단말기는 무선주파수부를 이용하여 타 휴대 단말기와 통신 채널을 형성하고, 타 휴대 단말기로부터 해당 확장 테이블을 수신할 수 있다. 이러한 확장 테이블은 응용 프로그램 식별자를 포함할 수 있으며, 이에 따라, 휴대 단말기는 확장 테이블에 포함된 응용 프로그램 식별자를 확인함으로써 현재 수행되고 있는 응용 프로그램을 위한 확장 테이블이 존재하는지 여부를 확인할 수 있다. 또한, 휴대 단말기는 확장 테이블을 생성할 수 있는 확장 테이블 입력 툴을 제공할 수 있 고, 휴대 단말기 사용자는 상기 확장 테이블 입력 툴을 이용하여 현재 수행되고 있는 응용 프로그램에 대한 입력 신호 테이블의 파라미터 및 파라미터 값들을 변경하여 확장 테이블을 생성할 수 있다. 확장 테이블 생성 후, 저장하는 과정에서 휴대 단말기는 상기 응용 프로그램 식별자를 확장 테이블에 기재할 수 있다. 그리고 S210 단계에서 휴대 단말기는 확장 테이블을 적용할 것인지 여부를 묻는 선택창을 출력할 수 있다. 휴대 단말기 사용자는 상기 선택창을 통하여 확장 테이블 적용 여부를 결정할 수 있다. S210 단계에서 확장 테이블이 존재하고, 디폴트로 확장 테이블을 적용하도록 설정되어 있거나, 사용자가 확장 테이블을 사용하기 위한 입력 신호를 생성하는 경우, 휴대 단말기는 S211 단계로 진입하여 현재 응용 프로그램에 대한 확장 테이블을 읽어올 수 있다. 이 과정에서, 휴대 단말기는 응용 프로그램에 링크되어 있는 입력 신호 테이블을 확장 테이블로 변경하는 과정을 수행함으로써, 별도의 루틴을 설계하지 않고, 확장 테이블을 적용하도록 지원할 수 있다.
한편, S210 단계에서 확장 테이블을 적용하지 않을 경우, 휴대 단말기는 S212 단계로 진입하여 현재 수행되고 있는 응용 프로그램에 링크되어 있는 입력 신호 테이블을 기반으로 시나리오 검출 과정을 수행할 수 있다. 또한, 휴대 단말기는 확장 테이블을 적용하는 경우, S211 단계에서 입력 신호 테이블 대신 적용된 확장 테이블을 기반으로 시나리오 검출 과정을 수행할 수 있다. 즉, 휴대 단말기는 작성된 입력 시나리오가 시나리오 데이터 베이스에 저장된 입력 신호 테이블의 기준 시나리오들 또는 확장 테이블의 기준 시나리오들 중 대응되는 기준 시나리오가 있는지 검사한다.
휴대 단말기는 S213 단계에서 입력 시나리오에 대응하는 기준 시나리오가 입력 신호 테이블 또는 확장 테이블에 존재하는지 여부를 확인하고, 없는 경우, S217 단계로 분기하여 입력 오류 출력을 수행하거나, 입력 시나리오를 무시할 수 있다. 한편, 휴대 단말기는 S213 단계에서 입력 시나리오에 대응하는 기준 시나리오가 입력 신호 테이블 또는 확장 테이블에 존재하는 경우, S215 단계로 분기하여 기능 수행을 지원한다.
이후, 휴대 단말기는 S219 단계로 분기하여 휴대 단말기의 종료 여부 또는 모션 UI 모드 지원 유지 여부를 확인한 이후, 계속 진행할 경우, S201 단계로 분기하여 이후 과정을 반복적으로 수행하도록 제어할 수 있다.
이상에서는 본 발명의 실시 예에 따른 모션 입력 장치 및 입력 방법에 대하여 설명하였다. 이하에서는 상술한 모션 입력 장치를 기반으로 휴대 단말기의 응용 사례에 대하여 살펴보기로 한다.
이하, 본 발명의 제1 응용 실시 예에서 터치 UI 또는 키패드 등을 기반으로 운영되는 휴대 단말기에서 흔들기 모션에 따라 현재 운용되고 있는 제1 기능 또는 제2 기능의 종료, 취소나 삭제 또는 재설정 등을 간단히 수행할 수 있도록 지원하는 휴대 단말기 및 그의 운용 방법을 설명하기로 한다.
이하 설명하는 본 발명의 휴대 단말기는 도 1 및 도 2에 도시된 단말기 구성과 유사한 구성을 가질 수 있다. 즉, 제1 응용 실시 예에서 휴대 단말기는 무선주파수부, 오디오 처리부, 센서부, 센서 검출부, 표시부, 저장부 및 제어부의 구성을 가질 수 있다. 그리고 본 발명의 제1 응용 실시 예에 따른 휴대 단말기는 상기 표 시부에 터치부가 포함된 터치스크린을 가질 수 있다.
상기 무선주파수부는 상기 제어부의 제어에 따라 통화 기능에 필요한 음성 신호 및 데이터 통신에 필요한 데이터를 송신 및 수신한다. 이러한 신호 송수신을 위하여 상기 무선주파수부는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선 주파수 송신부와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 무선 주파수 수신부 등을 포함할 수 있다. 특히, 본 발명의 무선주파수부는 제어부의 제어에 따라 다른 휴대 단말기와 통신 채널을 형성하고, 해당 통신 채널을 기반으로 음성 또는 화상 신호를 송수신 한다. 이때, 무선주파수부는 휴대 단말기에 물리력이 가해져 일정 방향 및 일정 각도를 가지며 흔들림에 의해 발생하는 흔들기(Shaking) 동작 신호에 따라 타 휴대 단말기 간에 형성된 통신 채널을 끊거나, 이미 시도되었다가 실패한 통신 채널 형성을 재설정할 수 있다.
상기 오디오 처리부는 상기 통화 시 송수신 되는 오디오 데이터를 재생하기 위한 스피커와, 통화 시 사용자의 음성 또는 기타 오디오 신호를 수집하기 위한 마이크를 포함한다. 특히, 본 발명의 오디오 처리부는 센서 검출부에서 생성하는 센서 신호를 기반으로 출력 중인 오디오 신호의 출력 중지를 제어하거나, 마이크의 오디오 신호 수집을 중단하도록 제어할 수 있다. 그리고 상기 오디오 처리부는 흔들기 동작 신호가 연속적으로 발생함에 따라 제1 기능 및 제2 기능 중 연속적으로 재설정, 취소, 삭제 및 종료 중 어느 하나를 수행하는 것을 소리 예를 들면 비프(Beep) 음 등으로 알람할 수 있다. 여기서, 휴대 단말기는 상기 소리 알람과 함께 또는 소리 알람을 대체할 수 있는 진동 알람을 수행하기 위하여 진동 모듈을 더 포함할 수 있을 것이다.
상기 센서부는 다양한 센서들을 포함한다. 여기서 다양한 센서는 가속도 센서, 자이로 센서 등을 포함한다. 이러한 다양한 센서는 제어부 제어에 따라 공급되는 전원을 바탕으로 동작하며, 휴대 단말기의 움직임 등에 따라 특정 신호를 생성한다. 상기 센서부는 다양한 센서들이 생성한 특정 신호를 센서 검출부에 전달할 수 있다.
상기 센서 검출부는 센서부를 모니터링하여 센서부에서 발생한 신호를 확인할 수 있다. 이를 보다 상세히 설명하면, 센서 검출부는 가속도 센서 또는 자이로 센서에 의해 수집되는 센서 신호를 기반으로 휴대 단말기의 흔들기 동작을 구분하고, 해당 동작 신호를 제어부에 전달할 수 있다. 즉, 센서 검출부는 센서부로부터 입력되는 동작을 분석하는데, 예를 들어 휴대 단말기가 좌우로 흔들릴 경우 발생하는 동작의 진폭 또는 진폭의 변화, 주기 횟수 등을 분석하여, 현재 휴대 단말기가 기 설정된 흔들기 동작을 수행하고 있는지를 판단한다. 다시 말하여 사용자가 휴대 단말기를 좌우, 상하 또는 특정 방향으로 흔들 경우, 센서부는 흔들림에 따른 일정 주파수를 발생하게 되는데, 해당 주파수가 일정 진폭 또는 특정 진폭의 변화를 가지며 일회성 또는 반복적으로 발생하면서, 일정 시간 내에 설정된 횟수만큼 주기가 발생하는 경우 센서 검출부는 휴대 단말기가 특정 흔들기 동작 상태인 것을 판단할 수 있다.
상기 터치스크린은 표시부의 일측 또는 휴대 단말기의 일면에 터치부가 배치되어 형성될 수 있으며, 휴대 단말기의 입력부로서의 기능을 수행한다. 이를 위 해, 터치스크린은 사용자로부터 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 입력키 및 기능키들에 대응하는 이미지와 좌표 값을 설정하고, 터치 이벤트 발생 시, 해당 터치 이벤트를 제어부에 전달할 수 있다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이드 키 및 단축키 등을 포함할 수 있다. 또한 상기 터치스크린은 사용자 설정 및 휴대 단말기의 기능 제어와 관련한 키 신호를 생성하고 상기 제어부로 전달한다. 특히, 본 발명의 터치스크린은 휴대 단말기 운용을 위해 필요한 다양한 키 이미지를 표시부에 출력할 수 있으며, 사용자의 터치를 터치부를 이용하여 감지한 후, 표시부에 출력되고 있는 키 이미지와 매핑하여 터치된 키를 인식할 수 있다. 그리고 본 발명의 터치스크린은 풀 스크린으로 형성될 수 있다. 이러한 터치스크린은 저장부에 저장된 특정 파일을 선택하기 위한 터치 신호, 선택된 특정 파일을 이동시키는 드래그 신호, 파일 편집을 위해 필요한 입력 신호 등에 대응하는 터치 이벤트를 발생하여 제어부에 전달한다. 실질적으로, 터치스크린은 좌표 값에 대한 정보만을 제어부에 전달하면, 제어부는 터치스크린의 특정 좌표에 어떠한 이미지를 출력한 후, 사용자가 해당 좌표를 터치하는 경우, 설정된 이미지에 대응하는 기능을 수행하도록 제어하게 된다. 한편, 본 발명에서는 입력 신호 생성을 위하여 터치스크린에 대하여 설명하고 있으나, 상술한 터치스크린은 키입력 신호를 발생하는 키패드로 대체될 수 있다.
상기 표시부는 휴대 단말기의 기능에 따라 활성화되는 화면을 출력한다. 예를 들어 상기 표시부는 부팅 화면, 대기 화면, 메뉴 화면, 통화 화면 등을 출력할 수 있다. 이러한 표시부는 LCD(Liquid Crystal Display)가 적용될 수 있으며, 이 경우 표시부는 LCD 제어부, 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. 상기 LCD를 터치스크린 방식으로 구현하는 경우, 표시부 화면은 입력부로 동작될 수 있다. 특히, 본 발명의 표시부는 단말기 사용자 요청에 따라 특정 기능 활성화에 따른 화면을 출력할 수 있다. 이때, 표시부는 현재 실행되고 있는 기능에 따른 이벤트의 재설정, 삭제, 취소 및 종료에 해당하는 흔들기 동작 신호가 센서 검출부로부터 입력되면, 상기 기능을 재설정/삭제, 취소 및 종료하기 위한 팝업창을 출력할 수 있다.
상기 저장부는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프로그램을 비롯하여, 터치스크린 운용을 위한 터치 UI(User Interface) 운용 프로그램, 휴대 단말기의 흔들기 동작을 입력 신호로서 인식하기 위한 운용 프로그램, 사용자 데이터 등을 저장한다. 한편, 상기 저장부는 휴대 단말기 동작에 따라 수집되는 센서 신호들을 임시 저장하는 버퍼링하는 기능을 담당할 수 있다. 이러한 상기 저장부는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
상기 프로그램 영역은 휴대 단말기를 부팅시키는 운영체제(OS, Operating System), 터치 UI 운용 프로그램, 센서부 및 센서 검출부 지원을 위한 응용 프로그램, 휴대 단말기의 기타 옵션(options) 기능 예컨대, 소리 재생 기능, 이미지 또는 동영상 재생 기능 등에 필요한 응용 프로그램 등을 저장한다. 특히, 본 발명의 프로그램 영역은 센서부에 포함된 각 센서를 운용하기 위한 응용 프로그램, 센서부로부터 입력되는 신호를 기 설정된 흔들기 동작 신호로 인식할 수 있는 운용 프로그램 등을 저장할 수 있다.
상기 데이터 영역은 휴대 단말기의 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 상기 휴대 단말기가 제공하는 다양한 옵션 기능과 관련한 사용자 데이터들 예컨대, 동영상과, 폰 북 데이터와, 오디오 데이터 및 해당 컨텐츠 또는 사용자 데이터들에 대응하는 정보들 등을 저장할 수 있다. 또한, 상기 데이터 영역은 현재 실행되고 있는 응용 프로그램 실행에 따른 화면을 저장할 수 있고, 응용 프로그램 실행 중 휴대 단말기 동작에 따라 실행 중인 기능 재설정, 삭제, 취소 및 종료를 정의한 입력 신호 테이블 또는 확장 테이블을 저장한다. 즉, 상기 입력 신호 테이블 또는 확장 테이블은 메시지 작성 기능, 통화 서비스 기능, 메모 작성 기능, 음악 재생 기능, 계산기 기능, 컨버터 기능, 스톱워치 기능, 사전 기능, 근거리 무선 통신 모듈 기능, 카메라 기능, 타이머 기능, 검색 기능 등이 활성화된 상태에서 발생하는 동작에 따라 상기 기능 재설정, 삭제, 취소 및 종료를 수행할 수 있도록 정의한 기준 시나리오들을 저장한 테이블이 될 수 있다.
상기 제어부는 휴대 단말기의 전원 공급 및 각 장치들의 활성화와, 각 장치들 간에 송수신되는 신호 흐름을 제어한다. 특히, 본 발명의 제어부는 입력 신호 테이블 또는 확장 테이블을 기반으로 사용자의 휴대 단말기 동작 제어에 따라 발생하는 흔들기 동작 신호에 따라 현재 실행되고 있는 기능에 대한 종료, 삭제, 취소 또는 재설정을 제어할 수 있다.
상기 제어부는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기가 적절한 흔들기 동작 상태를 수행하고 있는지를 인식한다. 이러한 제어부는 상기 센서 검출부에서 전달된 센서 신호를 수집하고, 수집된 센서 신호가 1회의 흔들기 동작인지, 연속된 흔들기 동작인지를 구분할 수 있다. 즉, 제어부는 센서 검출부가 전달하는 흔들기 동작에 따른 주파수의 진폭 변화가 설정된 주기 및 설정된 진폭을 만족하는지를 검사할 수 있다. 예를 들면, 제어부는 흔들기 동작에 따른 주파수 파라미터 값을 축의 방향에 관계없고, 휴대 단말기의 최초 상태 및 동작 완료 후 정지 상태에 무관하도록 설정할 수 있다. 그리고 제어부는 일정한 시간 예를 들면 3초 이내에 진폭이 절대치 10 이상을 가지며 3회 이상 반복적으로 발생하는지를 검출할 수 있다. 이때, 제어부는 일정 시간에 대한 오차율을 1초 이상으로 설정할 수 있고, 절대치에 대한 값 또한 설계자의 의도 또는 사용자의 재설정에 따라 변경할 수 있도록 지원하는 것이 바람직하다. 그리고 제어부는 3회 이상 반복적으로 주파수가 발생하는 경우 이를 두 번 이상의 흔들기 동작으로 인식할 것인지, 3회 이상 발생하는 주파수를 무시할 것인지에 대한 설정을 가지는 것이 바람직하다. 즉, 제어부는 3초 이내 진폭 10 이상, 3회 이상 5회 이내 반복적으로 발생하는 주파수를 흔들기 동작으로 인식할 수 있고, 흔들기 동작이 인식된 경우, 다음 일정 시간 동안 발생하는 주파수를 연속적인 흔들기 동작으로 인식하거나 무시하도록 설정할 수 있다. 또한, 제어부는 상기 흔들기 동작에 따른 주파수의 파라미터 설정에 따라 흔들기 동작을 다수개의 양태로 인식할 수 있다. 즉, 진폭이 절대치 10 이상, 3초 이내에 3회 이상 5회 이내 반복 발생을 제1 흔들기 양태로 정의하는 경우, 제어부는 진폭이 절대치 20 이상, 3초 이내에 6회 이상 반복 발생을 제2 흔들기 양태로 정의할 수 있으며 진폭의 크기 및 시간 범위에 관계없이 1회 흔들기에 해당하는 진폭 발생을 제3 흔들기 양태로 정의할 수 있다.
한편, 제어부는 특정 기능이 활성화되어 있고, 제어부로부터 흔들기 동작 신호를 수신하게 되면, 저장부에 기 저장된 입력 신호 테이블 또는 확장 테이블을 로드하여, 현재 활성화된 기능이 리스트에 포함되어 있는지 여부를 확인한다. 그리고 제어부는 현재 활성화되어 있는 기능이 상기 입력 신호 테이블 또는 확장 테이블에 포함되어 있는 경우, 해당 테이블에 기반하여 설정된 동작 즉, 종료, 삭제, 취소 및 재설정 어느 하나의 동작을 수행하도록 제어한다. 이때, 제어부는 전달된 흔들기 동작 신호가 연속적으로 발생한 경우, 현재 수행되고 있는 기능에 대한 종료, 삭제, 취소 및 재설정을 연속적으로 수행하도록 제어할 수 있다. 제어부는 흔들기 동작 신호가 연속적으로 발생하여 삭제나 취소 및 재설정이 연속적으로 발생할 경우, 첫 번째 흔들기 동작 신호에 따른 기능을 수행한 이후, 두 번째 흔들기 동작 신호에 따른 기능을 수행할 때, 연속적인 기능 수행을 알람하기 위하여 알람을 수행하도록 제어할 수 있다. 즉, 제어부는 상기한 연속 동작 발생 시, 비프(Beep) 음과 같은 소리 알람을 수행하거나, 진동 알람 등을 수행하도록 제어할 수 있다. 또한 제어부는 제어부가 전달하는 흔들기 동작 신호 양태에 따라 동일한 단말기 기능에서 각기 다른 동작이 이루어지도록 제어할 수 도 있다. 요약하면, 제어부는 제1 일정 시간 내에 제1 진폭 또는 제1 진폭 변화를 가지며 제1 일정 횟수의 주기를 가지는 제1 흔들기 동작 신호, 연속적으로 발생하는 복수의 제1 흔들기 동작 신호, 제2 일정 시간 내에 제2 진폭 또는 제2 진폭 변화를 가지며 제2 일정 횟수의 주기를 가지는 제2 흔들기 동작 신호에 따라, 현재 수행되고 있는 제1 기능 또는 제1 기능에 연이어 수행되는 적어도 하나의 제2 기능을 각각 또는 전체 적으로 재설정, 취소, 삭제 및 종료하도록 제어할 수 있다.
이하 상술한 제1 응용 실시 예에서 설명한 휴대 단말기의 운용에 대하여 도면을 참조하여 보다 상세히 설명하기로 한다.
도 9는 메시지 작성 시 휴대 단말기 입력 장치 운용을 설명하기 위한 화면 예시도를 나타낸 도면이다.
상기 도 9를 참조하면, 사용자가 메뉴 중 메시지 작성 기능을 활성화하는 경우, 표시부는 31 화면에서와 같이 메시지 작성을 위한 메시지 작성창을 출력할 수 있다. 이때, 휴대 단말기는 터치스크린을 통하여 메시지 작성을 위한 키 맵을 표시부에 출력하도록 제어할 수 있다. 여기서, 본 발명은 터치스크린으로 한정되는 것은 아니며, 키패드를 마련하는 휴대 단말기의 경우, 별도의 키 맵을 출력은 발생하지 않을 수 있다.
이후, 사용자가 메시지 작성을 위하여 표시부에 출력된 키 맵을 터치하는 경우, 터치된 키입력에 따라 메시지가 작성된다. 이때, 표시부는 33 화면에서와 같이 키입력에 따라 메시지를 화면에 출력할 수 있다. 한편, 메시지 작성 시, 잘못된 문자를 작성할 수 있는데, 이를 발견한 사용자는 기 설정된 횟수 예를 들면 1회 흔들기를 수행할 수 있다. 그러면, 센서부는 휴대 단말기의 흔들기 동작에 따라 일정 진폭을 가지는 주파수를 발생시키고, 센서 검출부는 이를 검출하여 제어부에 전달할 수 있다. 제어부는 휴대 단말기가 1회 흔들기 동작을 수행하는 경우, 저장부에 저장된 입력 신호 테이블 또는 확장 테이블을 확인한다. 그리고 테이블에 기재되어 있는 바에 따라, 제어부는 현재 작성 중인 메시지를 전체 삭제하여 메 시지 작성을 위한 서비스 재설정을 수행하거나, 35 화면에서와 같이 스페이스 바가 출력되고 있는 지점 이전의 글자만 삭제하도록 제어할 수 있다. 이와 같이, 휴대 단말기 사용자는 메시지 작성 중에 잘못 작성된 글자를 별도의 삭제 키 또는 방향키 입력 후 삭제키를 입력하지 않고, 간단한 단말기 흔들기 동작에 따라 원하는 문자를 삭제하도록 제어할 수 있다. 한편, 메시지 작성 중에 설정된 제1 진폭의 크기, 제1 일정 기간, 제1 설정된 횟수의 주기 예를 들면 20의 진폭, 3초 이내, 6회 이상 주기에 대응하는 주파수 값에 따른 제2 흔들기 양태를 인식하는 경우, 제어부는 37 화면에서와 같이 이전에 작성된 글자 전체를 삭제하여 메시지 서비스를 재설정하도록 제어할 수 있다. 또한, 제어부는 테이블에 기초하여 메시지 작성 중에 제1 흔들기에 따라 삭제할 문자가 없는 경우 39 화면에서와 같이 메시지 작성 종료를 시키거나, 메시지 작성 종료 확인을 위한 팝업창을 출력하도록 제어할 수 있다. 그리고 제어부는 제1 흔들기 동작이 연속적으로 발생한 경우, 작성된 문자를 연속적으로 설정된 만큼 예를 들면 2글자 삭제를 하도록 제어하거나, 32 화면에서와 같이, 한 글자 삭제 후 연속 삭제 확인을 위한 팝업창을 출력하도록 제어할 수 있다. 상술한 바와 같이, 메시지 작성을 위한 제1 기능이 활성화되어 있고, 제1 기능 실행 이후 키입력에 따른 문자 입력에 대응하는 제2 기능이 동작하고 있을 경우, 제어부는 휴대 단말기 흔들기 동작에 따라 제2 기능의 취소 또는 삭제를 제어하고, 제2 기능이 없고 제1 기능 만 동작하고 있을 때 흔들기 동작이 발생하면, 제1 기능의 종료를 제어할 수 있다.
도 10은 본 발명의 휴대 단말기 입력 장치 운용에 따른 스톱워치 제어를 설 명하기 위한 화면 예시도이다. 설명에 앞서, 이하 설명에서, 제1 흔들기는 제1 진폭, 제1 일정 시간, 제1 횟수의 주기를 가지는 흔들기로 정의하며, 제2 흔들기는 제2 진폭, 제2 일정 시간, 제2 횟수의 주기를 가지는 흔들기로 정의하기로 한다.
상기 도 10을 참조하면, 사용자가 메뉴 중 스톱워치 기능을 활성화하는 경우, 표시부는 41 화면에서와 같이 스톱워치 운용을 위한 스톱워치 활성화 화면을 출력할 수 있다. 스톱워치 활성화 화면이 출력되면, 휴대 단말기 사용자는 키입력을 통하여 스톱워치를 동작 시켜 시간을 카운트할 수 있다. 이후, 휴대 단말기 사용자는 스톱 버튼을 활성화하여 1차 시간 정보를 획득할 수 있는데, 휴대 단말기는 이 1차 시간 정보를 저장부에 임시 저장하는 한편, 43 화면에서와 같이 일정 영역에 출력할 수 있다. 그리고 휴대 단말기 사용자는 스톱 버튼을 재 활성화하여 2차 시간 정보를 획득할 수 있고, 이에 따라 휴대 단말기는 2차 시간 정보를 저장부에 임시 저장하는 한편, 45 화면에서 같이 1차 시간 정보와 겹치지 않도록 일정 영역에 출력하도록 제어할 수 있다. 휴대 단말기 사용자는 동일한 과정을 반복 수행하여 다수개의 시간 정보를 획득할 수 있으며, 휴대 단말기는 다수개의 시간 정보를 표시부에 출력하도록 제어할 수 있을 것이다. 한편, 시간 정보 획득이 마무리되면, 휴대 단말기 사용자는 제1 흔들기 신호를 발생시키기 위하여 기 설정된 동작 예를 들면 한번 흔들기를 수행할 수 있고, 이에 따라 휴대 단말기는 직전에 저장된 시간 정보 예를 들면 2차 시간 정보를 취소 또는 삭제하도록 제어하여 47 화면에서와 같이 2차 시간 정보가 표시부에 출력되지 않도록 제어할 수 있다. 이때, 사용자는 제1 흔들기를 연속적으로 발생시킬 수 있으며, 휴대 단말기는 2차 시간 정보 및 1차 시간 정보를 연속적으로 삭제하거나, 49 화면에서와 같이 2차 시간 정보 삭제 후 연속 삭제 확인을 위한 팝업창을 출력하도록 제어할 수 있다.
한편, 사용자는 제2 흔들기 예를 들면 10의 진폭의 3초 이내에 3회 이상 5회 이하의 주기를 가지는 흔들기를 발생시킬 수 있는데, 휴대 단말기는 센서 검출부로부터 제2 흔들기에 해당하는 동작 신호가 발생하면, 저장부에 저장된 입력 신호 테이블 또는 확장 테이블에 기반하여 41 화면에서와 같이 1차 시간 정보 및 2차 시간 정보 전체 삭제 및 스톱워치 초기화를 위한 재설정에 해당하는 화면이 출력되도록 제어할 수 있다. 또한 설정에 따라 제2 흔들기가 발생할 경우, 휴대 단말기는 스톱워치에 해당하는 기능을 종료 시키거나, 42 화면에서와 같이 종료를 위한 팝업창을 출력하도록 제어할 수 있다. 화면상에 시간 정보의 출력 상태가 없으며, 타이머가 동작하지 않고 있는 초기 상태에서 제1 흔들기가 발생할 경우, 휴대 단말기는 스톱워치에 해당하는 기능을 종료 시키거나, 종료를 위한 팝업창을 42 화면에서와 같이 출력하도록 제어할 수 도 있을 것이다. 이상에서 설명한 바와 같이, 본 발명은 저장부에 저장된 입력 신호 테이블 또는 확장 테이블에 기반하여 스톱워치 제1 기능이 활성화되어 있는 상태에서 획득된 시간 정보들을 출력하는 제2 기능이 다수개가 출력되고 있을 때, 입력되는 흔들기 신호에 따라 제2 기능을 취소 또는 삭제하도록 제어하며, 제2 기능이 실행되고 있지 않는 상태이거나, 기 설정된 다른 양태의 흔들기 신호에 따라 제1 기능을 종료하도록 제어할 수 있다.
도 11은 본 발명의 휴대 단말기 입력 장치 운용에 따른 통화 과정을 설명하기 위한 화면 예시도이다.
상기 도 11을 참조하면, 사용자가 휴대 단말기 폴더 오픈 또는 슬라이드 업을 수행할 경우, 휴대 단말기는 51 화면에서와 같이 기 설정된 대기 화면을 출력하도록 제어할 수 있다.
다음으로, 사용자가 전화번호에 대응하는 숫자키 또는 타 휴대 단말기의 전화번호가 입력된 단축키 등을 입력하면, 휴대 단말기는 53 화면에서와 같이 해당 전화번호를 표시부에 출력한다. 이때, 휴대 단말기 사용자가 제1 진폭을 가지며, 제1 일정 시간 이내에 제1 횟수의 주기를 가지는 제1 흔들기를 수행하면, 휴대 단말기는 54 화면에서와 같이 입력된 전화번호의 뒷자리부터 한자리씩 삭제할 수 있다. 휴대 단말기는 제1 흔들기가 연속적으로 발생하는 경우, 연속적으로 입력된 전화번호의 뒷자리를 삭제하도록 제어하거나, 55 화면에서와 같이 최초 제1 흔들기에 따른 숫자 삭제 이후 연속 삭제를 확인하는 팝업창을 출력할 수 있다. 그리고 휴대 단말기 사용자가 53 화면 상태에서 제2 진폭을 가지며 제2 일정 시간 이내에 제2 횟수의 주기를 가지는 제2 흔들기를 수행하면, 휴대 단말기는 출력된 전화번호를 전체 삭제하여 통화 입력 재설정을 수행하도록 제어하고 51 화면으로 복귀할 수 있다.
이후 54 화면 상태에서 사용자가 통화 버튼을 활성화하면, 휴대 단말기는 해당 전화번호를 가지는 타 휴대 단말기와 통화 채널을 형성하기 위한 57 화면에서와 같은 통화호 송수신 과정을 표시부에 출력한다. 이때, 휴대 단말기 사용자가 제1 진폭을 가지며, 제1 일정 시간 이내에 제1 횟수의 주기를 가지는 제1 흔들기를 수행하면, 휴대 단말기는 통화호 송수신 과정을 취소하고, 54 화면 상태로 복귀할 수 있다.
한편, 사용자가 별도의 입력 동작 또는 키입력을 수행하지 않으면, 휴대 단말기는 타 휴대 단말기와 통화 채널을 형성하고, 그에 따라 59 화면에서와 같은 통화 수행 중 화면을 출력할 수 있다. 휴대 단말기 제어부는 음성 통화인 경우 타 휴대 단말기로부터 수신된 음성 신호를 스피커를 통하여 출력하도록 제어하는 한편, 마이크를 이용하여 오디오 신호를 수집하고, 이를 타 휴대 단말기에 전송하도록 제어한다. 이때, 휴대 단말기 사용자는 제1 흔들기를 수행할 수 있으며, 휴대 단말기는 제1 흔들기 발생에 따라 현재 형성된 통화 채널을 취소 또는 삭제하도록 제어하여 51 화면에서와 같이 기 설정된 대기화면을 출력할 수 있다.
이와 같이, 본 발명의 실시 예에 따른 통화 서비스 지원을 위한 휴대 단말기 입력 장치 운용 과정은 통화 서비스에 해당하는 기능을 진행하기 위하여 필요한 다양한 단계적 동작 기능 상태에서 취소나 삭제, 종료 및 재설정을 휴대 단말기의 흔들기 동작에 따라 수행할 수 있도록 지원한다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기 입력 장치는 터치 UI 또는 키패드 등을 기반으로 운영되는 휴대 단말기에서 흔들기 모션에 따라 현재 운용되고 있는 제1 기능 또는 제2 기능의 종료, 취소나 삭제 또는 재설정 등을 간단히 수행될 수 있도록 지원하며, 해당 과정 수행 시, 부적절한 종료, 취소나 삭제 또는 재설정이 발생하지 않도록 팝업창을 출력하도록 지원함으로써, 효과적인 단말기 제어를 수행할 수 있다. 여기서, 제1 기능은 특정 기능 예를 들면, 카메라 기능, 파일 재생 기능, 폰북 기능, 스톱워치 기능, 타이머 기능 등 휴대 단말기의 메 뉴 항목에 포함된 다양한 기능이 될 수 도 있고, 제2 기능은 상기 제1 기능이 수행된 상태에서 입력되는 키입력에 따라 수행되는 기능 예를 들면 문자 입력 기능, 이미지 수집 기능, 시간 정보 수집 기능 등이 될 수 있다. 그리고 제1 기능은 키입력에 따른 문자 출력 기능이 될 수 있으며, 제2 기능은 출력된 문자를 기반으로 수행되는 통화 연결 서비스 기능, 문자 또는 숫자 검색 기능, 메모 또는 스케줄 작성 기능 등 다양한 메뉴 기능이 될 수 있다.
도 12는 본 발명의 실시 예에 따른 휴대 단말기의 입력 방법을 설명하기 위한 순서도이다.
상기 도 12를 참조하면, 본 발명의 휴대 단말기의 입력 방법은 먼저, 휴대 단말기에 전원이 공급되며 제어부가 공급된 전원을 이용하여 부팅 과정을 수행하고, 기 설정된 대기화면을 S1101 단계에서 표시부에 출력하도록 제어한다.
대기화면이 출력된 이후, S1103 단계에서 단말기 이용 종료 여부를 확인하고, 계속하여 단말기를 이용하고자 할 경우, S1105 단계에서 사용자가 입력하는 키입력에 따른 제1 기능을 수행하도록 제어한다. 여기서, 제1 기능은 사용자가 입력하는 키입력에 따른 휴대 단말기 기능으로서, 키입력 기능이 될 수 있고 키입력에 따른 텍스트 또는 이미지 출력 기능도 될 수 있다. 키입력 기능 내에서도, 최초 입력되는 키입력이 제1 기능이 될 수 있고, 다음으로 입력되는 키입력은 제2 기능이 될 수 있다. 다시 말하여, 제1 기능은 특정 기능 예를 들면, 카메라 기능, 파일 재생 기능, 폰북 기능, 스톱워치 기능, 타이머 기능 등 휴대 단말기의 메뉴 항목에 포함된 다양한 기능이 될 수 도 있고, 제2 기능은 상기 제1 기능이 수행된 상 태에서 입력되는 키입력에 따라 수행되는 기능 예를 들면 문자 입력 기능, 이미지 수집 기능, 시간 정보 수집 기능 등이 될 수 있다. 그리고 제1 기능은 키입력에 따른 문자 출력 기능이 될 수 있으며, 제2 기능은 출력된 문자를 기반으로 수행되는 통화 연결 서비스 기능, 문자 또는 숫자 검색 기능, 메모 또는 스케줄 작성 기능 등 다양한 메뉴 기능이 될 수 있다.
다음으로, 휴대 단말기 제어부는 휴대 단말기에 물리력이 가해져 일정 방향 및 일정 각도를 가지며 흔들림에 의해 흔들기 동작 신호가 발생하는지 여부를 S1107 단계에서 확인한다. 이때, 흔들기 동작 신호가 발생하면 현재 수행되는 제1 기능을 종료시킴과 아울러 휴대 단말기 제어부는 S1101 단계로 분기할 수 있다.
S1107 단계에서 흔들기 동작 신호가 발생하지 않으면, 휴대 단말기는 사용자 입력에 따라 S1109 단계에서 다음 기능들 즉, 적어도 하나의 제2 기능을 수행하도록 제어한다. 여기서, 적어도 하나의 제2 기능은 제1 기능 이후에 이루어지는 휴대 단말기 기능으로서, 작게는 연속적인 키입력이나 문자 출력에서부터, 크게는 카메라 기능, 근거리 무선통신 기능 등이 될 수 도 있다.
이후, 휴대 단말기 제어부는 S1111 단계에서 흔들기 동작 신호가 발생하는지 재차 검사하며, 흔들기 동작 신호가 발생하지 않고, 키입력 등이 발생하면, 발생된 키입력에 따른 다음 기능들이 수행될 수 있도록 S1109 단계로 복귀할 수 있다.
한편, S1111 단계에서 흔들기 동작 신호가 발생한 경우, 휴대 단말기 제어부는 S1113 단계로 분기하여 마지막으로 수행된 기능을 종료 시킨다. 예를 들면, "1, 2, 3, 4"에 각각 해당하는 키입력 기능이 발생하였고, 4가 입력된 이후, 흔들 기 동작 신호가 발생하였다면, 마지막으로 입력된 "4"의 출력을 취소하거나 삭제할 수 있다.
그리고 휴대 단말기 제어부는 S1115 단계에서 제1 기능을 제외하고 모든 기능이 종료되었는지 여부를 확인하고, 다른 기능들이 아직 유지되고 있다면, S1109 단계로 분기하여, 현재 수행되고 있는 기능들을 유지하거나, 사용자가 새롭게 입력하는 키입력에 따른 추가적인 기능들을 수행되도록 제어할 수 있다.
그리고 S1115 단계에서 제1 기능을 제외하고 모든 기능이 종료되었다면, 휴대 단말기 제어부는 S1117 단계에서 흔들기 동작 신호가 발생하는지 검사하고, 흔들기 동작신호가 발생한 경우, 제1 기능을 종료시킴과 아울러 S1101 단계로 복귀할 수 있다. 한편, S1117 단계에서 흔들기 동작 신호가 발생하지 않으면 휴대 단말기 제어부는 S1109 단계로 복귀하여 제1 기능을 수행하도록 지원하면서, 사용자 입력에 따른 다른 기능들이 수행되도록 제어할 수 있다.
상술한 설명에서는 흔들기 동작의 양태를 하나의 양태로만 설정하여 설명하였으나, 앞서 설명한 바와 같이, 흔들기 동작의 양태를 다양한 양태로 구분하여 설정할 수 있다. 이에 따라, S1107 단계, S1111 단계 및 S1117 단계에서 현재 실행되고 있는 모든 기능들을 초기화하거나, 종료시키기 위한 흔들기 동작이 설정되어 있고, 해당 동작이 발생한다면, 휴대 단말기는 각 단계에서 S1101 단계로 바로 복귀하여 이후 과정을 반복적으로 수행할 수 도 있다.
이상에서 설명한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기 입력 방법은 키입력 및 터치 입력 중 적어도 하나로부터 발생하는 입력 신호에 따라 휴대 단말기 기능 중 제1 기능이 수행되었거나, 제1 기능 및 제1 기능 수행 중에 추가 기능들이 수행되고 있으면서, 휴대 단말기에 물리력이 가해져 기 설정된 제1 일정 시간 이내에, 제1 진폭 또는 제1 진폭 변화를 가지며, 제1 횟수의 주기를 갖는 흔들기 동작에 대응하는 동작 신호가 발생할 경우, 저장부에 저장된 입력 신호 테이블 또는 확장 테이블에 기반하여 상기 제1 기능 및 상기 추가 기능 중 적어도 하나를 재설정하거나 삭제, 취소 및 종료시키도록 제어한다. 이에 따라, 휴대 단말기 사용자는 어떠한 단말기 기능을 이용하고 있다 하더라도, 해당 기능의 재설정, 삭제, 취소 및 종료 중 어느 하나의 과정을 손쉽게 활성화할 수 있다.
이하, 본 발명의 제2 응용 실시 예에서 1회의 가속 운동에 따라 응용 프로그램의 운용에 대하여 설명하기로 한다.
본 발명의 제2 응용 실시 예에서의 휴대 단말기는 제1 응용 실시 예에서와 유사하게 무선주파수부, 오디오 처리부, 센서부, 센서 검출부, 터치부와 표시부를 가지는 터치스크린, 저장부 및 제어부의 구성을 가질 수 있다. 이하 설명에서, 상기 각 구성에 대한 설명 중 제1 응용 실시 예에서 설명한 부분과 중복되는 부분은 생략하기로 한다.
상기 무선주파수부는 제어부의 제어에 따라 다른 휴대 단말기와 통신 채널을 형성하고, 해당 통신 채널을 기반으로 음성 또는 화상 신호를 송수신 한다. 이때, 무선주파수부는 휴대 단말기에 물리력이 가해져 1회의 가속운동에 따라 생성된 신호를 기반으로 통신 채널이 이동되거나 변경 또는 종료될 수 있다.
상기 센서 검출부는 센서부를 모니터링하여 센서부에서 발생한 신호를 확인 할 수 있다. 이를 보다 상세히 설명하면, 센서 검출부는 가속도 센서 또는 자이로 센서에 의해 수집되는 센서 신호를 기반으로 휴대 단말기의 움직임을 구분하고, 해당 움직임 신호를 제어부에 전달할 수 있다. 즉, 센서 검출부는 센서부로부터 입력되는 움직임을 분석하는데, 예를 들어 휴대 단말기가 좌우로 움직일 경우 발생하는 가속도의 변화, 진폭 또는 진폭의 변화, 주기 횟수 등을 분석하여, 현재 휴대 단말기가 기 설정된 움직임을 수행하고 있는지를 판단한다.
본 발명의 제어부는 사용자의 휴대 단말기 1회의 가속운동 따라 발생하는 신호에 따라 현재 실행되고 있는 기능의 단계(Stepwise)이동을 제어할 수 있다. 상게 제어부는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기가 적절한 1회의 가속운동을 수행하고 있는지를 인식할 수 있다. 이러한 제어부는 상기 센서 검출부에서 전달된 센서 신호를 수집하고, 수집된 센서 신호가 1회의 가속운동인지, 연속된 가속운동인지를 구분할 수 있다. 즉, 제어부는 센서 검출부가 전달하는 1회의 가속운동에 따른 가속도 크기의 변화가 임계값 이상인지를 검사할 수 있다. 예를 들면, 제어부는 움직임에 따른 가속도변화 값이 특정 축의 어떤 방향인지 인식하도록 설정할 수 있다. 그리고 제어부는 1회의 가속운동 신호와 저장부부터 호출된 기 설정 입력 신호 테이블 및 확장 테이블로부터 추출된 기준 시나리오와 비교하여 일치하는 입력 시나리오 관련 신호를 응용프로그램으로 전달하는 역할을 한다. 이러한 제어부는 휴대 단말기의 가속운동에 따라 응용 프로그램에서 단계(Stepwise)이동을 하도록 제어할 수 있다. 이러한 제어부의 실시 예에 대하여 도면을 참조하여 보다 상세히 후술하기로 한다.
도 13은 본 발명의 실시 예에 따른 음악, 동영상 등의 컨텐츠 플레이어일 경우 다음, 이전 단계로 이동하는 기능을 수행하는 휴대 단말기 입력 장치 운용을 설명하기 위한 화면 예시를 나타낸 도면이다.
상기 도 13을 참조하면, 응용 프로그램이 음악, 동영상 등의 컨텐츠 플레이어일 경우, 휴대 단말기의 제어부는 응용프로그램이 음악, 동영상 등의 컨텐츠 플레이어임을 인지한 상태에서 저장부(170)로부터 음악, 동영상 등의 컨텐츠 플레이어 관련 기 설정 기준 시나리오가 저장되어 있는 입력 시나리오 테이블 또는 확장 테이블을 호출하고 센서 검출부로부터의 신호를 대기한다. 1회의 가속운동이 센서부에 의해 감지되었을 경우 센서검출부에서 1회의 가속운동 신호를 생성하고, 제어부는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기가 적절한 1회의 가속운동 상태를 수행하고 있는지를 인식한다. 이때, 제어부는 수집된 센서 신호가 1회의 가속운동인지를 구분할 수 있다. 즉, 제어부는 센서 검출부가 전달하는 1회의 가속운동에 따른 가속도의 변화가 임계값 이상인지를 검사할 수 있다. 이를 위해 제어부는 1회의 가속운동에 따른 가속도변화 값이 임계값 이상인지를 인식하도록 설정할 수 있다. 한편 제어부는 1회 가속 운동에 해당하는 신호를 수신하면, 저장부로부터 기 호출된 음악, 동영상 등의 컨텐츠 플레이어 관련 기 설정 기준 시나리오를 비교하여 일치하는 기준 시나리오를 응용 프로그램에 입력신호로 전달한다. 이 때, 응용 프로그램이 음악, 동영상 등의 컨텐츠 플레이어일 경우 기준 시나리오는 1회의 가속운동에 의한 다음, 이전 단계로 이동하는 기능을 정의한 정보를 포함할 수 있다.
제어부는 상술한 기준 시나리오에 대응하는 입력 시나리오가 센서 검출부로부터 전달된 신호로부터 판단되면, 음악 재생화면에서 제 1방향으로 1회의 가속운동에 의해 이전곡으로 이동하고, 그 다음화면에서 제 2방향으로 1회의 가속운동에 의해 다음곡으로 이동한다. 즉, 사용자가 단말기를 좌측 또는 우측으로 1회 흔들게 되면, 휴대 단말기는 센서부로부터 수신된 신호를 기반으로 단말기 좌측으로 이동한 상태에 대한 신호를 확인할 수 있다. 이때, 제어부는 단말기의 이동 시 속도 임계값을 미리 설정하여, 단말기가 일정 속도 이상으로 좌측 또는 우측으로 이동할 경우, 해당 이동 상태를 유효한 상태로 인식하고, 그에 따른 동작을 올바르게 인식할 수 있다. 제어부는 동작 인식이 결정되면, 도 3에 도시된 바와 같이, 해당 방향에 대하여 미리 결정된 컨텐츠 재생 제어를 수행하도록 제어한다. 즉, 상기 제어부는 좌측으로 1회 가속 운동이 발생하면, 현재 재생 중인 컨텐츠를 중심으로 이전에 재생되었던 곡으로 이동을 제어하며, 우측으로 1회 가속 운동이 발생하면, 현재 재생 중인 컨텐츠를 중심으로 다음곡으로 이동을 제어할 수 있다. 이를 위하여 제어부는 컨텐츠의 재생 목록을 저장부로부터 로딩하는 것이 바람직하다. 상술한 설명에서는 단말기를 좌측으로 이동하는 상태를 이전곡 선택으로, 단말기를 우측으로 이동하는 상태를 다음곡 선택으로 설명하였으나, 방향에 따른 곡 선태의 설정은 사용자 또는 설계자에 의하여 변경될 수 있을 것이다.
도 14는 본 발명의 실시 예에 따른 라디오, DMB등의 채널 플레이어일 경우 다음, 이전 채널로 이동하는 휴대단말기의 장치운용을 설명하기 위한 화면 예시 도를 나타낸 도면이다. 상세한 장치 운용 과정은 도 13에서 설명한 음악, 동영상 등 의 컨텐츠 플레이어와 유사하다. 즉, 제어부는 채널 가이드 등을 통하여 채널 리스트에 대한 정보를 미리 획득한 상태에서, 휴대 단말기의 1회 가속 운동을 감지하고, 해당 가속 운동의 방향에 대한 정보를 기반으로 채널 리스트 상에서 현재 채널을 중심으로 앞 채널 또는 뒤 채널을 선택하도록 제어할 수 있다.
도 15는 본 발명의 실시 예에 따른 2차원 GUI객체보기일 경우 하이라이트가 4자유도(상, 하, 좌, 우)로 이동하는 휴대단말기의 장치운용을 설명하기 위한 화면 예시 도를 나타낸 도면이다. 상세한 장치 운용 과정은 음악, 동영상 등의 컨텐츠 플레이어와 유사하다. 즉, 휴대 단말기는 사용자 요청에 따라 메뉴 화면 또는 컨텐츠 멀티 뷰 화면을 제공할 수 있는데, 이러한 화면은 객체별로 다수개의 선택 가능한 이미지들이 일정 배열을 가지며 배치된다. 이때, 사용자가 휴대 단말기를 1회의 가속 운동으로 상, 하, 좌, 우 방향 중 어느 하나의 방향으로 흔들게 되면, 휴대 단말기의 센서부는 해당 방향에 대한 정보를 제어부에 전달할 수 있다. 제어부는 특정 방향에 대하여 기 설정된 임계값 이상의 속도를 가지는 운동이 발생하면, 해당 운동 상태를 객체 지정을 위한 입력 신호 생성에 대응하는 신호로 판단할 수 있다. 그리고 제어부는 해당 신호 값을 판하면, 해당 신호에 따라 화면에 출력 중인 객체들을 지정하기 위한 하이라이트 박스 또는 체크 박스를 이동시키도록 제어할 수 있을 것이다. 상술한 설명에서, 센서부는 일정 방향으로 움직이기 이전에 특정 센서 예를 들면 자이로 센서 혹은 가속도 센서를 초기화하도록 제어하고, 해당 초기화 과정에서의 상태를 중심축으로 결정한 후, 가속도 운동에 대한 방향에 대한 정보를 제어부에 전달할 수 있다.
도 16은 본 발명의 실시 예에 따른 3차원 GUI객체보기일 경우 하이라이트가 6자유도(전, 후, 상, 하, 좌, 우)로 이동하는 휴대단말기의 장치운용을 설명하기 위한 화면 예시 도를 나타낸 도면이다. 이러한 3차원 GUI 객체보기에서 객체 선택은 도 15에서 설명한 바와 같이, 센서부에 마련된 센서의 초기화 과정 상태에서, 현재 상태를 중심축으로 결정하고, 해당 상태를 중심으로 특정 방향으로 기 설정된 임계값 이상의 1회 가속도 운동이 발생하면, 제어부는 해당 상태를 입력 신호 생성을 위한 동작으로 인식할 수 있다. 이때, 제어부는 현재 활성화되고 있는 3차원 객체를 고려하여 6방향에 대한 동작 상태를 결정하게 된다. 즉, 제어부는 현재 수행되고 있는 응용 프로그램의 특성에 따라 센서부로부터 전달되는 신호 값을 기준으로 휴대 단말기의 동작 상태를 다양하게 결정할 수 있다. 그리고 제어부는 현재 출력 중인 3차원 객체보기 상에서 신호 값에 따라 하이라이트 박스의 이동을 제어할 수 있다. 상술한 설명에서 특정 방향으로 가속 운동은 단말기의 회전 운동을 통한 특정 방향으로 가속 운동 및 직선 운동을 통한 특정 방향으로 가속 운동을 포함한다. 여기서, 제어부는 센서 검출부로부터 신호 값을 수신하면, 저장부에 저장된 입력 신호 테이블 또는 확장 테이블을 기반으로 기준 시나리오들을 준비하고, 센서 검출부로부터 수신된 신호 값에 대응하는 입력 시나리오와 상기 기준 시나리오를 비교하여 상술한 설명에서의 휴대 단말기 동작을 제어하기 위한 입력 신호를 생성하도록 제어할 수 있다.
이하, 본 발명의 제3 응용 실시 예에서 기울임 모션에 따른 휴대 단말기 및 그의 운용 방법을 설명하기로 한다.
본 발명의 제3 응용 실시 예에 따른 휴대 단말기의 구성의 상술한 도 1의 구성과 유사한 구성을 가질 수 있다. 즉, 상기 휴대 단말기는 무선주파수부, 오디오 처리부, 센서부, 센서 검출부, 표시부, 저장부 및 제어부의 구성을 포함한다. 이에 따라, 상기 도 1에서 설명된 구성과 중복되는 구성의 설명은 생략하기로 한다.
상기 센서부는 휴대 단말기의 기울임 동작에 따른 기울임 각도 신호를 생성한다. 상기 센서부는 기울임 각도 신호 생성을 위하여 추가적인 센서 예를 들면, 지자기 센서, 광센서, 포토 센서 등을 포함할 수 있다.
상기 센서 검출부는 휴대 단말기의 케이스 내측에 상기 가속도 센서가 배치되는 경우, 휴대 단말기의 기울임 동작에 따른 기울임 각도의 변화에 따라 발생하는 신호를 검출할 수 있다. 그리고 센서 검출부는 자이로 센서를 이용하여 상기 휴대 단말기의 기울임 동작 방향의 변화에 해당하는 신호를 검출할 수 있다. 상기 센서 검출부는 각 센서들로부터 검출되는 신호들을 각각의 센서 신호로서 제어부에 전달할 수 있다.
상기 표시부는 휴대 단말기의 사용자 요청에 따라 특정 응용 프로그램 활성화에 따른 화면을 출력할 수 있다. 이때, 표시부는 현재 실행되는 응용 프로그램을 제어할 수 있는 기준 시나리오와 입력 신호를 각각 매핑한 또는 기준 시나리오 메뉴 항목을 매핑한 입력 신호 테이블을 출력할 수 있다. 입력 신호 테이블은 사용자가 별도의 모션 신호를 입력하는 경우, 응용 프로그램 화면에 오버랩 되어 표시되거나, 별도의 팝업창을 통하여 출력될 수 있다. 한편 입력 신호 테이블은 별도의 팝업창으로 출력 또는 화면에 오버랩 되지 않고 응용 프로그램 활성화를 위한 키에 대응하는 이미지 출력 시, 해당 이미지에 추가되어 표시될 수 있다. 예를 들어, 표시부는 적어도 하나의 메뉴 항목을 출력할 수 있고, 해당 메뉴 항목을 실행하기 위한 적어도 하나의 기준 시나리오가 기 설정된 텍스트, 이미지 또는 아이콘의 조합 등을 메뉴 항목과 함께 출력할 수 있다.
상기 저장부는 기울임 동작 입력 장치 운용 시 수집되는 기울임 동작 신호들을 임시 저장 즉, 버퍼링하는 기능을 담당할 수 있다. 이러한 상기 저장부는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
상기 프로그램 영역은 기울임 동작 입력 장치 지원 응용 프로그램, 센서부에 포함된 각 센서를 운용하기 위한 응용 프로그램, 센서로부터 입력되는 신호를 수집하여 입력 시나리오를 작성하는 프로그램, 작성된 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오를 비교하여 그에 대응하는 입력 신호를 생성하는 프로그램, 생성된 입력 신호에 따라 특정 기능을 수행하기 위한 응용 프로그램 등을 저장할 수 있다.
상기 데이터 영역은 상술한 기울임 각도 입력 신호 테이블을 저장하고, 기울임 동작 입력 장치 운용 시, 제어부의 제어에 따라 제어부에 로드 한다. 이를 위하여 상기 데이터 영역은 시나리오 데이터 베이스를 저장할 수 있다. 시나리오 데이터 베이스는 응용 프로그램 별로 작성된 기울임 각도 입력 신호 테이블 또는 확장 테이블이며, 기울임 각도 입력 신호 테이블은 앞서 설명한 바와 같이, 응용 프로그램 별로 기준 시나리오와 기울임 각도 입력 신호를 매핑한 테이블이다.
상기 제어부는 센서부가 생성하는 신호를 바탕으로 센서 검출부가 생성하는 센서 신호를 기반으로 생성되는 기울임 동작의 기울임 각도 신호를 이용하여 입력 시나리오를 작성한다. 여기서 입력 시나리오는 적어도 하나의 기울임 각도 신호를 기반으로 생성된다. 한편, 제어부는 사용자가 기울임 동작 UI 활성화 모드를 선택하는 경우, 현재 수행되고 있는 휴대 단말기의 응용 프로그램에 대응하는 기울임 각도 입력 신호 테이블 또는 확장 테이블을 시나리오 데이터 베이스에서 선택하여 로드 한다. 그리고 제어부는 작성된 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오들과 비교하여 동일한 기준 시나리오를 검출한다. 이후 제어부는 검출된 기준 시나리오에 대응하는 입력 신호를 생성하고, 해당 입력 신호를 현재 수행되는 응용 프로그램에 적용하도록 제어할 수 있다.
이를 위하여 본 발명의 제어부(160)는 도 17에 도시된 바와 같이, 기울임 인식부(3161), 기울임 신호 분류부(3162), 시나리오 작성부(3163), 시나리오 매핑부(3164) 및 기능 수행부(3165)를 포함할 수 있다. 상세한 설명에 앞서, 도 17에는 도 6에서 설명한 시나리오 확장부가 추가될 수 있으며, 운용 또한 도 6에서 설명한 바와 같은 운용이 가능하다. 설명의 편의를 위하여 이하에서는 입력 신호 테이블을 기준으로 동작하는 것에 대하여 설명하기로 한다. 여기서, 상기 기울임 인식부(3161)는 동작 인식부의 특정 형태 즉, 동작 중 기울임을 인식하는 구성으로 설명하기 위하여 명칭을 부여하였으며, 기울임 신호 분류부 또한 모션 신호 중 기울임 신호에 특화된 형태를 설명하기 위하여 명칭을 새롭게 부여하기로 한다.
상기 기울임 인식부(3161)는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기가 어떠한 기울임 동작을 수행하였는지를 인식하는 구성이다. 이러한 기울임 인식부(3161)는 상기 센서 검출부에서 전달된 센서 신호를 수집하고, 수집된 센서 신호가 어떠한 기울임 신호에 해당하는지를 구분한다. 상기 기울임 신호는 상기 휴대 단말기의 기울임 시작 위치, 기울임 방향, 기울임 변화량을 포함하는 신호이다. 즉, 상기 기울임 인식부(3161)는 센서 검출부에서 발생하는 센서 신호를 기반으로 기울임의 시작위치, 기울임의 방향, 기울임의 변화량 등을 통해 기울임 각도 신호를 생성할 수 있다.
이를 보다 상세히 설명하면, 사용자가 휴대 단말기를 일정 방향으로 기울일 경우 센서 검출부는 센서부에 포함된 가속도 센서 및 자이로 센서 중 적어도 하나로부터 신호를 수신하고, 이를 기반으로 특정 센서에서 특정 신호가 발생한 것에 대응하는 센서 신호를 생성하여 이를 기울임 인식부(3161)에 전달한다. 그러면 상기 기울임 인식부(3161)는 상기 센서 신호를 기준으로 기울임 각도 신호를 생성할 수 있다. 이때, 센서 검출부는 휴대 단말기의 기울임은 동작에 따라 발생하는 진동 파형을 각도에 대응하여 상기 기울임 인식부(3161)에 각각 다르게 전달하는데, 상기 기울임 인식부(3161)는 이러한 센서 신호를 기반으로 기울임 각도 신호를 구분하여 생성할 수 있다. 상기 기울임 인식부(3161)에서 생성된 각 기울임 각도 신호는 제어부에 전달되어 입력 시나리오를 작성하는 기본 요소가 된다.
상기 기울임 신호 분류부(3162)는 상기 기울임 인식부(3161)로부터 실시간으로 전달되는 기울임 신호들을 분류하는 작업을 수행한다. 즉, 상기 기울임 신호 분류부(3162)는 상기 기울임 인식부(3161)로부터 전달되는 기울임 각도 신호를 각각 구분하여 순차적으로 분류하고, 각 분류된 기울임 각도 신호들을 시나리오 작성 부(3163)에 전달한다.
상기 시나리오 작성부(3163)는 상기 기울임 인식부(3161)로부터 수신된 기울임 각도 신호들을 기반으로 입력 시나리오를 작성한다. 예를 들어, 시나리오 작성부(3163)는 기울임 인식부(3161)로부터 기 설정된 제1 시간 동안 기울임 신호가 입력되지 않는 제1 무기울임 신호가 입력되면, 즉 초기 상태에서 입력 시나리오 작성을 위한 초기화 과정을 수행한다. 다음으로, 시나리오 작성부(3163)는 기울임 신호가 입력되는 경우, 해당 기울임의 시작위치, 기울임의 방향, 기울임의 변화량 등을 통해 생성된 기울임 각도 신호를 순차적으로 조합한다.
이후, 시나리오 작성부(3163)는 하나의 입력 시나리오를 종료하는 기울임 각도 신호 예를 들면, 기 설정된 제2 시간 동안 기울임 각도 신호가 입력되지 않는 제2 무 기울임 각도 신호가 입력되면, 이전에 조합된 기울임 각도 신호들의 조합을 하나의 입력 시나리오로 판단할 수 있다. 여기서, 시나리오 작성부(3163)는 입력되는 각 기울임 각도 신호 사이에 기 설정된 제3 시간 동안 무 기울임 각도 신호가 입력되면 이전 입력된 기울임 각도 신호와 다음 입력된 기울임 각도 신호를 각각 구분할 수 있다.
한편, 시나리오 작성부(3163)는 입력되는 기울임 각도 신호들이 복수개가 동시에 입력되는 경우 시점 기준으로 기울임 동작이 연속적으로 실행되고 있음을 인식할 수 도 있다. 또한 시나리오 작성부(3163)는 동시에 발생하는 각각의 기울임 각도 신호를 분리해서 인식하여 입력 시나리오를 작성할 수 도 있다. 이러한 시나리오 작성부(3163)는 작성된 입력 시나리오를 시나리오 매핑부(3164)에 전달한다.
상기 시나리오 매핑부(3164)는 시나리오 작성부(3163)가 전달한 입력 시나리오와 입력 신호 테이블에 기재된 기준 시나리오와 비교하고, 해당 입력 신호를 생성한다. 여기서, 시나리오 매핑부(3164)는 저장부(170)에 기 저장된 시나리오 데이터 베이스 중 현재 휴대 단말기에서 실행되고 있는 응용 프로그램에 해당하는 입력 신호 테이블을 로드 한다. 그리고 시나리오 매핑부(3164)는 입력 시나리오에 대응하는 입력 신호를 기능 수행부(3165)에 전달한다.
상기 기능 수행부(3165)는 시나리오 매핑부(3164)로부터 전달받은 입력 신호를 기반으로 현재 수행되고 있는 응용 프로그램을 운용하는 구성이다. 예를 들어, 기능 수행부(3165)는 현재 아이템들을 표시하는 아이콘들을 표시하고 있고, 시나리오 매핑부(3164)로부터 "아이템 정렬"에 해당하는 입력 신호를 수신한 경우, 현재 표시된 아이콘들을 일정 조건에 따라 정렬하여 표시하도록 제어할 수 있다.
이하 상술한 본 발명의 제3 응용 실시 예에 따른 휴대 단말기의 운용 방법에 대하여 도면을 참조하여 보다 상세히 설명하기로 한다.
도 18은 본 발명의 실시 예에 따른 기울임 동작 입력 장치의 운용 방법을 설명하기 위한 순서도이다.
상기 도 18을 참조하면, 본 발명의 모션 입력 방법은 먼저, 휴대 단말기가 사용자 요청에 따라 S3101 단계에서 기울임 동작 UI 모드를 활성화하는 경우, 휴대 단말기는 기울임 동작 입력 장치 구동을 위한 초기화 과정을 수행한다. 예를 들어, 기울임 동작 UI 모드 전환을 위한 핫키 또는 메뉴 항목이 설정되어 있는 경우, 사용자는 해당 핫키를 활성화하거나 메뉴 항목을 선택할 수 있다. 그러면, 휴대 단말기는 기울임 동작 UI 모드 지원을 위한 센서부 및 센서 검출부에 전원을 공급하도록 제어한다. 전원을 공급받은 센서부는 휴대 단말기가 포함하고 있는 다양한 센서 예를 들면, 가속도 센서, 자이로 센서 등 각 센서들에게 전원을 공급하여 초기화 과정을 수행한다. 한편, S3103 단계에서 센서 검출부는 센서부 즉, 상기한 각 센서에서 신호가 발생하면, 이를 수집하여 센서의 종류에 발생한 신호 값을 기반으로 센서 신호를 생성하고, 이를 기울임 인식부에 제공한다.
그러면, 제어부의 기울임 인식부는 S3105 단계에서 수신된 센서 신호를 기반으로 기울임 각도 신호를 생성한다. 즉, 기울임 인식부는 각 센서부에서 검출된 센서 신호를 기반으로 휴대 단말기가 어떠한 기울임 각도를 가지는지 판단하여 기울임 각도 신호를 생성한다.
그러면, 시나리오 작성부는 S3107 단계에서 기울임 인식부로부터 기울임 각도 신호를 수집하고 S3109 단계에서 입력 시나리오를 작성한다. 그리고 시나리오 작성부는 S3111 단계에서 현재 작성되고 있는 입력 시나리오의 완성 여부를 확인하고, 미완성인 경우, S3105 단계로 복귀할 수 있다.
이를 보다 상세히 설명하면, 시나리오 작성부는 전달되는 기울임 각도 신호가 하나의 입력 시나리오 완성을 지시하는 기울임 각도 신호 예를 들면, 기 설정된 시간 동안 무 기울임 신호가 전달되는 경우, 이전에 입력된 기울임 각도 신호들을 조합하여 입력 시나리오를 완성할 수 있다. 입력 시나리오 완성 과정에서 시나리오 작성부는 시간 흐름에 따라 순차적으로 입력되는 기울임 신호에 따른 하나의 입력 시나리오를 생성할 수 있다. 또한, 시나리오 작성부는 다방향의 기울임 각도 신호가 입력된 후, 기 설정된 시간 동안 무 기울임 신호가 입력되면, 상기 입력된 다방향의 기울임 각도 신호를 포함하는 하나의 입력 시나리오를 생성할 수 있다. 즉, 시나리오 작성부는 기울임 각도 신호의 종류에 관계없이 기 설정된 조건에 따라 입력된 기울임 각도 신호들을 이용하여 입력 시나리오를 작성한다.
한편, 입력 시나리오가 작성되면, 휴대 단말기는 S3113 단계에서 작성된 입력 시나리오가 시나리오 데이터 베이스에 저장된 기준 시나리오들 중 대응되는 기준 시나리오가 있는지 검사한다. 이를 위하여 휴대 단말기는 현재 실행되고 있는 응용 프로그램 예를 들면, 대기 화면 응용 프로그램, 파일 탐색 응용 프로그램, 이미지 응용 프로그램, 파일 공유 응용 프로그램 등을 확인한다. 그리고 휴대 단말기는 시나리오 데이터 베이스에서 해당 응용 프로그램에 대응하는 입력 신호 테이블을 읽어 와서, 상기 입력 시나리오에 대응하는 기준 시나리오가 있는지 확인할 수 있다.
다음으로, 휴대 단말기는 S3115 단계에서 입력 시나리오에 대응하는 기준 시나리오가 존재하는지 여부를 확인한다. 이때, 기준 시나리오가 없는 경우, S3119 단계로 분기하여 입력 오류 출력을 수행하거나, 입력 시나리오를 무시할 수 있다. 한편, 휴대 단말기는 S3115 단계에서 입력 시나리오에 대응하는 기준 시나리오가 존재하는 경우, S3117 단계로 분기하여 기능 수행을 지원한다. 즉, 휴대 단말기는 입력 신호 테이블을 확인하여, 입력 시나리오에 대응하는 입력 신호를 생성하도록 제어한다. 그리고 이 입력 신호를 현재 수행되고 있는 응용 프로그램에 적용하도록 제어한다.
이후, 휴대 단말기는 S3121 단계로 분기하여 휴대 단말기의 종료 여부 또는 기울임 동작 UI 모드 지원 유지 여부를 확인한 이후, 계속 진행할 경우, S3101 단계로 분기하여 이후 과정을 반복적으로 수행하도록 제어할 수 있다.
상술한 본 발명의 기울임 동작 입력 장치 기반 휴대 단말기의 운용에 따른 화면 인터페이스의 일예를 도 19를 참조하여 시점의 이동, 객체의 이동, 객체의 회전으로 구분하여 설명하기로 한다.
먼저, 도 19를 참조하여 시점의 이동에 대하여 설명하면, 휴대 단말기는 도 19의 401에서와 같이, 하위 항목 또는 일정 세부 항목을 포함하는 아이콘을 스크린 상에 출력할 수 있다. 상기 아이콘은 컨텐츠 파일이나 문서 파일이 될 수도 있고, 한 개 이상의 파일들을 포함하는 폴더일 수도 있다. 상기 표시된 아이콘을 선택 후 상기 휴대 단말기를 초기 상태에서 45도 각도 이상으로 오른쪽으로 기울일 경우, 상기 선택된 아이콘의 세부 항목 또는 하위 항목들이 표시된다. 예를 들어, 상기 아이콘이 이미지 파일일 경우 파일 선택 후 상기 휴대 단말기를 오른쪽으로 45도 각도 이상 기울이면 402와 같이 상기 이미지가 확대되어 표시되거나 403과 같이 상기 이미지의 세부 정보 등이 표시되는 등 상태가 변경되어 표시될 수 있다.
다시, 상기 휴대 단말기를 초기 상태로 변경 후, 왼쪽으로 45도 각도 이상 기울일 경우 상기 변경되어 표시된 이미지 또는 세부정보는 원래 이미지 파일로 변경되어 표시된다. 상기 아이콘이 하나 이상의 파일을 포함하는 폴더일 경우, 상기 아이콘 선택 후 휴대 단말기를 초기상태에서 45도 각도 이상으로 오른쪽으로 기울이면 상기 폴더에 포함된 하나 이상의 파일 목록을 아이콘 또는 텍스트 목록 형태 로 변경하여 표시할 수 있다.
다시, 상기 휴대 단말기를 초기 상태로 돌린 후 상기 휴대 단말기를 왼쪽으로 45도 각도 이상으로 기울이면 상기 변경되어 표시된 아이콘 또는 텍스트 목록을 초기 아이콘 상태로 변경하여 표시한다.
상기와 같이 기울임 각도를 인식하여 표시된 아이콘의 상태를 변경 할 때, 상기 기울임 각도에 따라 상태 변환 속도가 변경 가능하다. 즉, 상기 아이콘의 변경 동작이 휴대 단말기의 기울임이 45도 각도일 때의 변경 속도와 75도일 때의 변경 속도는 서로 다르게 설정될 수 있다.
다음으로, 도 20을 참조하여 객체의 이동에 대해 설명하면, 상기 휴대 단말기는 도 20의 501에서와 같이 아이템을 나타내는 아이콘 항목을 스크린 상에 출력할 수 있다. 각 아이콘 항목은 휴대 단말기가 지원 가능한 응용 프로그램들의 그룹이 될 수 있다.
한편, 각 아이콘 항목들에는 각 메뉴 항목을 기울임 신호에 따라 선택 및 활성화할 수 있도록 기준 시나리오가 텍스트나, 이미지 또는 아이콘 조합 등으로 출력될 수 있다. 사용자의 설정에 따라 일정 아이콘을 선택하거나 표시된 모든 아이콘들을 선택 후, 상기 휴대 단말기를 502와 같이 초기 상태에서 45도 각도 이상으로 왼쪽으로 기울이면 상기 선택된 하나 이상의 아이콘이 화면 왼쪽으로 일괄적으로 정렬되어 표시된다.
다시, 상기 휴대 단말기를 초기 상태로 돌린 후 오른쪽으로 45도 각도 이상으로 기울이면 503과 같이 상기 선택된 하나 이상의 아이콘이 화면 오른쪽으로 일 괄적으로 정렬되어 표시된다.
즉, 선택된 하나 이상의 아이콘들은 상기 휴대 단말기의 기울이는 방향과 각도에 대응하여 화면 일측에 정렬되어 표시될 수 있다. 상기 아이콘들이 좌우로 이동 중 상기 휴대 단말기를 기울임 이전 초기 상태로 돌리면 상기 이동 중인 아이콘들은 이동을 멈추고 해당 위치에 정지하여 표시될 수 있다.
다음으로, 도 21을 참조하여 객체의 이동에 대한 또 다른 실시 예를 설명하면, 도 21의 601 내지 603에서와 같이 상기 휴대 단말기가 무선 통신으로 다른 단말기와 연결된 상태에서, 사용자가 선택한 컨텐츠 또는 파일을 상기 휴대 단말기의 기울임을 인식하여 전송할 수 있다.
보다 상세하게 설명하면, 상기 무선 통신은 블루투스나 지그비 등 휴대 단말기들 간 상호 데이터 송수신이 가능한 통신 방법을 말한다. 먼저, 601과 같이 상호 데이터 송수신이 가능한 상태에서 파일을 선택하고 602와 같이 상기 휴대 단말기를 오른쪽 또는 왼쪽 방향으로 45도 각도 이상으로 기울이면 상기 선택된 파일들을 연결된 다른 휴대 단말기로 전송을 시작한다. 상기 전송 중 사용자가 전송을 더 이상 원하지 않는 경우 603과 같이 상기 휴대 단말기를 기울임 이전 초기상태로 돌리면 전송동작을 중지한다.
다음으로, 도 22를 참조하여 객체의 회전에 대해서 설명하면, 도 22의 701과 같이 휴대 단말기에서 일정 어플리케이션을 통해 특정 이미지 또는 문서 등의 컨텐츠를 표시하는 단계를 가진다. 이후, 휴대 단말기를 오른쪽 또는 왼쪽으로 일정각도 이상으로 기울이면 휴대 단말기의 기울임 각도를 인식하여 해당 각도에 맞추어 상기 표시된 컨텐츠를 정화면으로 표시되도록 회전한다.
좀 더 상세하게 설명하면 상기 휴대 단말기를 초기 상태에서 오른쪽으로 45도 각도로 기울이면 표시된 컨텐츠를 기울임 방향의 반대 방향의 45도 각도로 회전하여 표시한다. 즉, 상기 휴대 단말기가 기울임의 각도에 대응하여 표시된 컨텐츠를 반대방향으로 해당 각도만큼 회전함으로써 항상 정화면을 표시하도록 할 수 있다.
상기 실시 예에 따른 휴대 단말기는 각 기준 시나리오 정보를 표시할 수 있고, 그에 따라 설정된 파라미터 정보도 함께 표시할 수 있다. 예를 들어, 상기 설명에서, 입력 신호 테이블에서 객체의 이동에 대한 시나리오는 표 1에 나타낸 바와 같이 각 기울임 각도 신호에 대한 파라미터를 포함할 수 있다.
Figure 112009016635419-pat00001
상기 표 5를 참조하면, 객체의 이동에서 파일을 이동하기 위해서 사용자는 초기상태인 정방향으로부터 오른쪽 방향으로 45도 이상의 각도로 휴대 단말기를 기울이면 해당 동작이 실행되고 , 휴대 단말기를 파라미터 1에 따라 정방향으로부터 60도 이상 기울이면 더 빠른 속도로 파일 이동을 실행하게 된다. 이 경우, 휴대 단말기는 표시부에 기준 시나리오 정보를 표시할 수 있고, 이와 더불어 기울임 각도도 함께 표시할 수 있을 것이다.
이하, 본 발명의 제4 응용 실시 예에서 적어도 2회의 두드림을 감지하고 그에 따른 휴대 단말기 및 그의 운용 방법을 설명하기로 한다.
본 발명의 제4 응용 실시 예에서의 휴대 단말기는 도 1에서와 유사하게 무선주파수부, 오디오 처리부, 센서부, 센서 검출부, 표시부, 저장부 및 제어부의 구성을 포함한다. 그리고 본 발명의 휴대 단말기는 카메라를 더 포함할 수 있다. 이하 설명에서 상기 각 구성의 설명과 도 1에서의 설명이 서로 중복되는 내용은 생략하기로 한다.
이와 같은 구성을 가지는 본 발명의 휴대 단말기는 사용자 요청에 따라 휴대 단말기의 특정 기능을 지원하기 위한 특정 응용 프로그램을 활성화하는 과정에서, 적어도 2회 연속 두드림을 기반으로 그에 상응하는 신호를 생성한 후, 상기 생성된 신호를 현재 실행되고 있는 응용 프로그램을 제어하는데 적용하여 운용하도록 지원한다.
상기 무선주파수부는 제어부의 제어에 따라 다른 휴대 단말기와 통신 채널을 형성하고, 해당 통신 채널을 기반으로 음성 또는 화상 신호를 송수신 한다. 이때, 무선주파수부는 휴대 단말기에 적어도 2회 연속 두드림이 가해져 생성된 신호를 기반으로 통신 채널이 켜지거나 꺼질 수 있다.
상기 오디오 처리부는 휴대 단말기에 적어도 2회 연속 두드림이 가해져 생성된 신호를 기반으로 출력 중인 오디오 신호를 재생 또는 일시정지 하도록 제어할 수 있다.
상기 센서부는 제어부 제어에 따라 공급되는 전원을 바탕으로 작동하며, 휴대 단말기의 적어도 2회 연속 두드림 등에 따라 특정 신호를 생성한다. 상기 센서부는 생성한 특정 신호를 센서 검출부에 전달할 수 있다.
상기 센서 검출부는 가속도 센서 또는 자이로 센서 등에 의해 수집되는 센서 신호를 기반으로 휴대 단말기의 적어도 2회 연속 두드림을 구분하고, 해당 두드림 신호를 제어부에 전달할 수 있다. 즉, 센서 검출부는 센서부로부터 입력되는 적어도 2회 연속 두드림을 분석하는데, 예를 들어 휴대 단말기에 가해진 두드림의 세기가 소정 임계값 이상인지, 두드림 간의 시간 간격이 소정 시간 이내인지를 분석하여, 현재 휴대 단말기에 기 설정된 적어도 2회 연속 두드림이 입력되고 있는지를 판단한다.
상기 제어부는 사용자의 휴대 단말기 적어도 2회 연속 두드림 따라 발생하는 신호에 따라 현재 실행되고 있는 기능의 실행 또는 정지를 제어할 수 있다. 상기 제어부는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기가 적어도 2회 연속 두드림이 입력되었는지 인식할 수 있다. 즉, 제어부는 센서 검출부가 전달하는 적어도 2회 연속 두드림에 따른 가속도 크기의 변화가 임계값 이상인지를 검사할 수 있다. 예를 들면, 제어부는 적어도 2회 연속 두드림에 따른 가속도 크기 변화 값이 임계값 이상인지, 두드림의 간격이 기설정된 시간 내인지를 인식하도록 설정할 수 있다. 그리고 제어부는 적어도 2회 연속 두드림 신호와 저장부로부터 호출된 기 설정 동작 시나리오와 비교하여 일치하는 동작 시나리오와 관련 신호를 응용 프로그램으로 전달하는 역할을 수행한다. 본 발명의 휴대 단말기에 적어도 2회 연속 두드림이 입력되는 경우 휴대 단말기는 응용 프로그램의 실행 또는 정지 기능이 수행되도록 제어할 수 있다. 이하, 본 발명의 휴대 단말기 운용에 대하여 도면을 참조하여 보다 상세히 후술하기로 한다.
도 23은 본 발명의 실시 예에 따른 응용 프로그램이 정지 화상 촬영 모드일 경우 정지 화상 캡쳐기능을 수행하는 휴대 단말기 입력 장치 운용을 설명하기 위한 화면 예시를 나타낸 도면이다. 응용 프로그램이 정지 화상 촬영 모드일 경우, 제어부는 응용 프로그램이 정지 화상 촬영 모드임을 인지한 상태에서 저장부에서 정지 화상 촬영 모드와 관련된 기 설정 동작 시나리오를 호출하고 센서 검출부로부터 신호 수신을 대기한다. 도 23의 실시 예에서는 2회 연속 두드림이 정지 화상 캡쳐 기능과 매칭되어 저장부에 저장되었다고 가정한다. 2회 연속 두드림이 센서부에 의해 감지되었을 경우, 센서 검출부에서 적어도 2회 연속 두드림에 대한 센서 신호를 생성하고, 제어부는 상기 센서 검출부로부터 전달되는 센서 신호를 기반으로 휴대 단말기에 2회 연속 두드림이 입력되는지를 인식한다. 이러한 제어부는 상기 센서 검출부에서 전달된 센서 신호를 수집하고, 수집된 센서 신호가 2회 연속 두드림인지를 구분한다. 이때, 제어부는 센서 검출부가 전달하는 2회 연속 두드림에 따른 가속도의 변화가 임계값 이상인지를 검사할 수 있다. 예를 들면, 제어부는 2회 연속 두드림에 따른 가속도 변화 값이 임계값 이상인지, 두드림의 간격이 기 설정된 시간 내인지를 인식하도록 설정할 수 있다. 이후, 제어부는 해당 신호가 유효한 경우, 저장부에 저장된 정지 화상 촬영 모드와 관련된 기 설정 기준 시나리오를 비교하여 일치하는 기준 시나리오를 응용 프로그램에 입력 신호로 전달한다. 이 때, 응용 프로그램이 정지 화상 촬영 모드일 경우 저장부에는 2회 연속 두드림에 대한 기준 시나리오가 정지 화상 캡쳐 기능 수행으로 저장되어 있다. 특히, 정지 화상 캡쳐 기능의 경우 2회 연속 두드림이 인지된 후 자동으로 셀프 타이머(Self timer)를 작동하여 사진이 흔들리지 않도록 하기 위해, 상기 캡쳐기능은 상기 2번 연속 두드림 중 두 번째 두드림이 감지되고 기 설정된 시간 경과 후에 캡쳐 기능을 수행하도록 할 수 있다. 또한, 오디오 피드백을 위해 상기 기 설정된 시간 동안 경고음이 출력되도록 할 수 있다.
도 24는 본 발명의 실시 예에 따른 동화상촬영모드일 경우 동화상촬영의 시작과 정지를 수행하는 휴대 단말기 운용을 설명하기 위한 화면 예시를 나타낸 도면이다. 상세한 장치 운용 과정은 정지화상촬영모드와 동일하다. 도 24의 실시 예에서는 2회 연속 두드림이 동영상 촬영 시작 및 정지 기능과 매칭되어 저장부에 저장되었다고 가정한다. 동화상촬영모드의 경우 동화상의 정지를 2번 연속 두드림으로 하면 동화상이 흔들리고 두드림 소리가 녹음되는 문제점이 있다. 따라서 첫 번째 2번 연속 두드림의 두 번째 두드림 감지 이후의 프레임부터 동화상 인코딩(encoding)을 시작하고, 두 번째 2번 연속 두드림의 첫 두드림 감지 이전의 프레임까지 인코딩하도록 제어할 수 있다. 또한, 오디오 피드백을 위해 상기 첫 번째의 2회 연속 두드림과 상기 동화상 인코딩이 시작되는 시점 사이의 시간 및 상기 두 번째의 2회 연속 두드림과 상기 동화상 인코딩이 종료되는 시점 사이의 시간 동안 경고음을 출력하도록 할 수 있다.
도 25는 본 발명의 실시 예에 따른 응용 프로그램이 컨텐츠재생모드일 경우 2번 연속 두드림에 의해 재생 또는 일시 정지 기능을 수행하는 휴대 단말기 입력 장치 운용을 설명하기 위한 화면 예시를 나타낸 도면이다. 상세한 장치 운용 과정은 정지화상촬영모드와 동일하다.
도 26은 본 발명의 실시 예에 따른 응용 프로그램이 DMB 또는 라디오 등인 경우 2번 연속 두드림에 의해 채널 켜짐 또는 채널 꺼짐 기능을 수행하는 휴대 단말기 입력 장치 운용을 설명하기 위한 화면 예시를 나타낸 도면이다. 상세한 장치 운용 과정은 정지화상촬영모드와 동일하다.
이하, 본 발명의 제5 응용 실시 예에서 두드림 패턴에 따라 동작하는 휴대 단말기 및 그의 운용 방법에 대하여 설명하기로 한다.
본 발명의 제5 응용 실시 예에 따른 휴대 단말기 구성은 제4 응용 실시 예에서의 휴대 단말기 구성과 유사하게, 무선주파수부, 오디오 처리부, 센서부, 센서 검출부, 표시부, 카메라, 저장부 및 제어부의 구성을 포함한다. 그리고 본 발명의 휴대 단말기는 카메라로부터 입력되는 신호 처리를 위하여 영상 처리부를 더 포함할 수 있다. 상기 영상 처리부는 제어부의 구성으로 포함될 수 있다. 이하 설명에서 상기 각 구성의 설명과 도 1에서의 설명이 서로 중복되는 내용은 생략하기로 한다.
상기 저장부는 프로그램 영역, 데이터 영역들로 구성될 수 있다. 상기 프로그램 영역은 휴대 단말기의 일반적인 동작을 제어하기 위한 프로그램들 및 본 발명의 실시 예에 따라 두드림 감지 신호에 대응하여 해당 기능이 실행되도록 제어하는 프로그램을 저장할 수 있다. 또한 상기 데이터 영역은 상기 프로그램들을 수행하는 중에 발생되는 데이터들을 일시 저장하는 기능을 수행한다. 또한 상기 저장부는 본 발명의 실시 예에 따라 사용자에 의해 설정된 두드림 패턴 및 두드림 패턴에 따른 기능을 매칭한 시나리오 데이터 베이스를 저장한다.
다음으로, 제어부는 휴대 단말기의 전반적인 동작을 제어하는 기능을 수행한다. 또한 상기 제어부는 본 발명의 실시 예에 따라 두드림 감지 신호로부터 두드림 세기, 두드림 위치, 두드림 횟수, 두드림 인식 시간, 두드림 간의 시간 간격 정보, 두드림 전체 입력 시간, 두드림을 제외한 다른 모션과의 동작 연계 정보 중 적어도 하나를 판단하여 두드림 패턴을 판단하고, 두드림 패턴 및 두드림 패턴에 따른 기능을 매칭한 데이터 베이스를 참조하여 판단된 두드림 패턴에 대응되는 해당 기능을 수행하도록 휴대 단말기를 제어한다. 본 발명의 실시 예에 따른 제어부는 사용자로부터 두드림 동작이 입력되기 전, 센서부 및 센서 검출부를 활성화(activation)하는 기능을 수행한다. 센서부 및 센서 검출부는 휴대 단말기의 전원이 ON 상태에서 지속적으로 활성화상태를 유지할 수 있으며, 기본적으로 비활성화 상태를 유지하다가 특정 입력으로 활성화상태로 될 수 있다. 본 발명의 실시 예에 따르면, 사용자가 입력부를 이용하여 센서부 및 센서 검출부의 활성화 명령을 입력하면 제어부는 비활성화 상태의 센서부 및 센서 검출부를 활성화 상태로 전환한다. 또한 본 발명의 실시 예에 따르면, 휴대 단말기에 저장된 어플리케이션들 중 특정 어플리케이션 실행 시 제어부는 센서부 및 센서 검출부의 활성화 명령으로 인식하여, 비활성화 상태의 센서부 및 센서 검출부를 활성화 상태로 전환한다.
센서부 및 센서 검출부는 사용자가 휴대 단말기에 행하는 동작을 입력 받는 역할을 수행한다. 본 발명의 실시 예에 따른 센서부 및 센서 검출부는 하나 또는 그 이상의 센서로 구성될 수 있으며, 상기 센서로는 가속도 센서(acceleration sensor), 자이로 센서(gyro sensor), 지자기 센서(terrestrial magnetic sensor) 등이 사용될 수 있으며, 이 밖에 사용자 동작을 인식할 수 있는 모든 센서가 사용될 수 있다. 본 발명의 실시 예에 따른 센서부 및 센서 검출부는 사용자에 의한 두드림을 감지하며, 두드림 감지 신호를 생성하여 제어부로 출력한다. 본 발명의 실시 예에 따른 센서부 및 센서 검출부는 두드림(tapping)뿐만 아니라 스내핑(snapping), 흔들기(shaking), 기울이기(tilting)를 감지할 수 있으며, 해당 신호를 제어부로 출력하면, 제어부는 입력된 동작들을 연계하여 동작 패턴을 판단하고 이에 대응하는 기능을 수행할 수 있다.
카메라는 영상 데이터를 촬영하며, 촬영된 광 신호를 전기적 신호로 변환하는 카메라 센서와, 상기 카메라센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부를 구비한다. 여기서 상기 카메라 센서는 CCD센서라 가정하며, 상기 신호처리부는 DSP(Digital Signal Processor: DSP)로 구현할 수 있다. 또한 상기 카메라 센서 및 신호처리부는 일체형으로 구현할 수 있으며, 또한 분리하여 구현할 수도 있다.
영상처리부는 상기 카메라에서 출력되는 영상신호를 표시하기 위한 화면 데이터를 발생하는 기능을 수행한다. 상기 영상처리부는 상기 카메라에서 출력되는 영상신호를 프레임 단위로 처리하며, 상기 프레임 영상데이터를 상기 표시부의 특성 및 크기에 맞춰 출력한다. 또한 상기 영상처리부는 영상 코덱을 구비하며, 상기 표시부에 표시되는 프레임 영상데이터를 설정된 방식으로 압축하거나, 압축된 프레임 영상데이터를 원래의 프레임 영상데이터로 복원하는 기능을 수행한다. 여기서 상기 영상 코덱은 JPEG 코덱, MPEG4 코덱, Wavelet 코덱 등이 될 수 있다. 상기 영상처리부는 OSD(On Screen Display) 기능을 구비한다고 가정하며, 상기 제어부의 제어하여 표시되는 화면크기에 따라 온 스크린 표시데이터를 출력할 수 있다.
표시부는 상기 영상처리부(150)에서 출력되는 영상신호를 화면으로 표시하며, 상기 제어부에서 출력되는 사용자 데이터를 표시한다. 상기 표시부는 본 발명의 실시 예에 따라 두드림 패턴에 따른 특정 기능 수행 시 해당 화면을 표시할 수 있다.
입력부는 숫자 및 문자 정보를 입력하기 위한 키들 및 각종 기능들을 설정하기 위한 기능키들을 구비하되, 표시부가 터치스크린 방식으로 구현될 경우 표시부와 결합된 형태일 수 있다.
도 27은 본 발명의 실시 예에 따른 두드림 감지를 통한 휴대 단말기 동작 제어방법을 도시한 흐름도이다.
도 27을 참조하면, 먼저 S5210 단계에서 사용자가 두드림 패턴 및 두드림 패턴에 대응하는 기능을 설정한다. 이때, 휴대 단말기는 두드림 패턴 입력설정 메뉴를 제공하여 사용자로부터 두드림 패턴 입력과 패턴별 기능을 받을 수 있다. 두드림 패턴과 해당 기능의 설정 및 저장 과정은 도 28에 도시되어 있다. 여기서, 두드림 패턴은 두드림 세기, 두드림 위치, 두드림 횟수, 두드림 인식 시간, 두드림 간의 시간 간격 정보, 두드림 전체 입력 시간, 두드림을 제외한 다른 동작과의 동작 연계 정보 중 적어도 하나를 포함할 수 있다. 상기와 같이 입력된 두드림 패턴 및 패턴별 기능은 제어부를 통해 저장부에 데이터 베이스 형태로 저장되고, 두드림 패턴 수는 특정 기능 설계 시 임의 설정이 가능하다.
다음으로, S5220 단계에서 사용자에 의한 두드림 입력이 있는 지 판단한다. 사용자에 의한 두드림 입력이 있는 경우, S5230 단계에서 두드림 입력에 대응된 두드림 감지 신호로부터 두드림 패턴을 판단한다. 구체적으로, 본 발명의 일실시 예에 따른 휴대 단말은 입력되는 두드림에 대응되는 두드림 감지 신호를 제어부로 출력하고, 제어부는 두드림 감지 신호를 분석하여 두드림 패턴을 판단한다. 복수의 두드림 동작이 입력되는 경우, 제어부는 두드림 감지 신호를 모두 수신한 후, 사용자의 두드림 패턴을 판단하게 된다. 두드림 입력의 임계 시간이 설정되어 있는 경우, 사용자는 두드림 동작을 순차적으로 입력하고, 마지막 두드림 동작으로부터 임계 시간이 경과하면, 제어부는 두드림 입력이 완료되었다고 판단하고, 입력된 두드림에 대한 두드림 패턴을 판단하게 된다.
제어부는 두드림 패턴 판단 시, 두드림 세기, 두드림 위치, 두드림 횟수, 두드림 인식 시간, 두드림 간의 시간 간격 정보, 두드림 전체 입력 시간, 두드림을 제외한 다른 동작과의 동작 연계 정보 중 적어도 하나에 근거하여 두드림 패턴을 판단하게 된다. 도 29는 본 발명의 실시 예에 따른 휴대 단말기의 동작 방향 축을 나타내는 도면이다. 센서가 가속도 센서로 구성된다고 가정할 때, 사용자의 두드림 동작이 입력되면 휴대 단말기는 각 축의 가속도 변화량을 포함하는 동작 감지 신호를 생성하여 제어부로 송신하게 된다.
제어부는 수신한 모션 감지 신호를 이용하여 두드림 패턴을 판단하게 된다. 두드림 패턴에 대해서는 도 30 및 도 31에 구체적으로 도시되어 있다. 도 29에서 휴대 단말기의 측면에 두드림을 입력하면 휴대 단말기는 X축을 기준으로 한 가속도 변화가 발생한다. 도 30은 도 29의 휴대 단말기의 오른쪽 측면에 두드림을 두 번 입력한 경우의 가속도 변화를 나타내는 그래프이며, 도 31은 도 29의 휴대 단말기의 왼쪽 측면에 두드림을 두 번 입력한 경우의 가속도 변화를 나타내는 그래프에 해당한다.
제어부는 도 30 및 도 31에 도시된 그래프에서 ②및 ⑤ 위치의 가속도 값을 이용하여 두드림 세기를 판단한다. 또한 X, Y, Z 축의 가속도 변화량을 이용하여 두드림 위치를 추정하게 된다. 도 31은 도 30과 비교하여 가속도의 방향이 반대로 도시되어 있다. 이는 휴대 단말기의 두드림을 반대 방향으로 입력했기 때문에 나타나는 현상이다. 제어부는 가속도 방향을 판단하여 두드림 위치를 추정할 수 있다. 도 30 및 도 31에서는 X축을 기준으로 한 가속도 변화만을 도시하였지만, X, Y, Z 축을 기준으로 한 가속도 변화를 모두 판단한다면, 두드림 위치를 정확하게 추정할 수 있다.
또한 제어부는 가속도 변화 횟수를 이용하여 두드림 횟수를 판단한다. 도 30 및 도 31에서는 모두 두 번의 두드림 동작이 입력되었을 때의 가속도 변화 그래프를 나타낸다. 제어부는 ② 및 ⑤ 위치 사이의 시간을 측정하여 동작 간격을 판단할 수 있으며, ①과 ③ 및 ④와 ⑥을 이용하여 두드림 인식 시간을 측정할 수 있다. 또한 제어부는 ①과 ⑥을 이용하여 두드림 전체 입력 시간을 판단할 수 있다.
제어부는 두드림 동작뿐만 아니라 연속되어 입력되는 다른 동작들을 연계하여 판단할 수 있다. 예를 들어, 사용자가 두드림을 순차적으로 세 번 입력한 후, 흔들기(shaking)동작을 입력하는 경우에는 제어부는 상기 입력한 세 번의 두드림을 취소로 판단할 수 있다. 이어 사용자가 두드림을 입력하면, 제어부는 새로운 두드림 입력으로 판단하고 두드림 패턴을 판단하는 과정을 수행하게 된다.
제어부는 입력되는 두드림의 패턴을 판단한 후, S5240 단계에서 저장부에 저장된 두드림 패턴과 입력된 두드림 패턴을 비교한다. 패턴 비교는 저장부에 저장된 패턴 정보와 제어부가 판단한 패턴 정보를 비교함으로써 이루어진다. 상기 저장된 두드림 패턴은 시나리오 데이터 베이스에서 제공되거나, 외부로부터 입력된 확장 테이블로부터 제공될 수 있다. 예를 들어, 패턴 정보로서 두드림 횟수, 두드림 인식 시간, 두드림 간의 시간 간격 정보가 저장되어 있는 경우, 제어부는 상기 패턴 정보를 각각 비교한다. 또한 저장부에 두드림 패턴으로 특정 값이 저장되어 있는 경우에는 오차율을 고려하여 입력된 두드림 패턴과 저장된 두드림 패턴을 비교할 수 있다.
이후, S5250 단계에서 저장부에 저장된 시나리오 데이터 베이스로부터 상기 단계에서 판단된 두드림 패턴에 매칭된 기능을 검색한 후, S5260 단계에서 검색된 해당 기능을 수행한다. 본 발명의 실시 예에 있어서의 기능은 휴대 단말기에 저장된 어플리케이션에 해당할 수 있다. 본 발명의 실시 예에 따른 어플리케이션에는 휴대 단말기에서 실행되는 특정 프로그램이 포함될 수 있으며 배경 화면 표시 상태, 화면 오프 상태라도 동작 입력을 인식하도록 정의된 경우에는 본 발명의 어플리케이션에 해당할 수 있다. 여기서, 기능 수행 전에 사용자의 패턴 입력이 정확히 인식되었는지를 검증하도록 제어할 수도 있다. 예를 들어, 사용자가 특정 두드림 패턴에 따라 두드림을 입력하는 경우, 오차 범위를 초과하여 잘못 입력한 경우에는 제어부는 사용자가 의도한 기능과는 다른 기능을 실행할 수도 있다. 따라서 제어부는 기능을 실행하기 전, 실행할 기능을 미리 사용자에게 알려줌으로써, 사용자가 의도하지 않은 기능이 실행되는 것을 방지할 수 있다. 제어부는 표시부에 팝업(pop-up)창을 표시하여 실행할 기능을 미리 사용자에게 알려줄 수 있다.
도 28은 본 발명의 실시 예에 따른 두드림 패턴과 두드림 패턴에 대응하는 기능을 설정하는 과정을 나타내는 순서도이다.
사용자는 일반 메뉴 또는 사용자 설정 메뉴에 포함되어 있는 모션 패턴 설정 메뉴를 선택한다. 여기서 모션 패턴 설정 메뉴는 동작의 패턴을 설정할 수 있도록 지원하는 메뉴가 될 수 있다. 사용자가 S5310 단계에서 모션 패턴 설정 메뉴를 선택하면 제어부는 모션 패턴 설정 기능의 선택을 인식하고, 설정 기능을 수행하게 된다. 제어부는 5320 단계에서 표시부를 제어하여 두드림의 입력을 요구하는 메시지를 표시한다. 사용자는 두드림을 입력하면 제어부는 5330 단계에서 모션 감지 신호를 수신하여 두드림 동작이 입력되었음을 인식한다. 사용자가 두드림 동작의 입력을 종료하고 입력 완료키를 입력하면 제어부는 5340 단계에서 두드림 입력 과정을 종료한다. 본 발명의 실시 예에 따라 사용자가 적어도 하나의 두드림을 입력하고 최종 두드림 입력 후 설정된 시간이 경과되면 제어부는 자동으로 두드림 입력 과정을 종료할 수 있다. 본 발명의 실시 예에 따라 사용자가 적어도 하나의 두드림을 입력한 후 흔들기를 입력하여 입력된 두드림을 취소하고 다시 두드림을 입력할 수 있다.
제어부는 두드림 입력 과정을 종료한 후, 5350 단계에서 휴대 단말기에 저장된 적어도 하나의 기능 목록을 표시부에 표시한다. 본 발명의 실시 예에 따른 기능 목록에는 어플리케이션 목록이 포함될 수 있다. 본 발명에서 어플리케이션에는 휴대 단말기에서 실행되는 특정 프로그램이 포함될 수 있으며 배경 화면 표시 상태, 화면 오프 상태라도 동작 입력을 인식하도록 정의된 경우에는 본 발명의 어플리케이션에 해당할 수 있다.
사용자가 표시된 기능 목록 중 특정 기능을 선택하면 제어부는 5360 단계에서 기능 선택을 인식하고, 5330 단계에서 입력된 두드림 패턴과 5350 단계에서 선택된 기능을 매칭하여 저장부에 설정하여 저장한다.
도 32는 본 발명의 실시 예에 따른 숏 컷(shot cut)기능 관련 휴대 단말기의 동작 제어 과정을 나타내는 표시화면을 나타낸다.
도 32의 참조번호 610은 대기화면 상태에서 휴대 단말기의 오른쪽 측면에 세 번의 두드림 동작이 입력되는 이벤트를 나타낸다. 본 발명의 실시 예에 따라 참조번호 610은 표시 화면 오프 상태에서 두드림 동작이 입력되는 이벤트에 해당할 수도 있다. 본 발명의 실시 예에 있어서, 상기 두드림 동작이 입력되기 전 휴대 단말기의 오른쪽 측면의 세 번의 두드림 동작과 MP3 실행 기능을 매칭하여 저장하였다고 가정한다. 저장부에 저장되는 두드림 패턴에는 두드림 위치, 두드림 횟수뿐만 아니라 두드림 세기, 두드림 인식 시간, 두드림 간의 시간 간격 정보 등 역시 포함될 수 있다.
도 32의 참조번호 620은 MP3이 실행된 화면을 나타낸다. 대기 화면 또는 아이들(idle)상태에서 곧바로 어플리케이션을 실행하는 기능을 숏 컷(shot cut)기능이라고 하는데, 사용자는 특정 두드림 패턴과 MP3 실행 기능을 매칭하여 저장하고, 저장된 두드림 패턴을 입력하여 MP3을 숏 컷으로 실행시킬 수 있다.
도 33은 본 발명의 실시 예에 따른 패스워드 제어 기능과 관련된 휴대 단말기의 동작 제어 과정을 나타내는 표시화면을 나타낸다.
도 33의 참조번호 710은 터치스크린 잠금 상태에서 휴대 단말기의 오른쪽 측면에 한 번 두드림을 입력하고, 왼쪽 측면에 한 번 두드림을 입력한 이벤트를 나타낸다. 휴대 단말기는 4 방향(상,하,좌,우) 및 전면/후면의 두드림(탭)을 이용하여 스크린 언락(screen unlock) 또는 패스워드 설정/해제 기능을 수행할 수 있다. 보다 구체적으로, 사용자가 탭수, 탭간 간격에 특징을 둔 두드림 패턴(예,톡-톡-톡톡톡)으로 패스워드 기능을 설정하게 되면, 스크린 혹은 시스템의 락(lock)을 풀 때 별도로 키입력을 하지 않고 설정된 두드림 패턴으로 휴대 단말기를 두드리게 되면 입력된 두드림 패턴을 분석하여 기 입력된 두드림 패턴에 따라 언락(unlock) 기능이 자동으로 실행된다. 본 실시 예에서는 사용자가 오른쪽 측면의 한 번 두드림과 왼쪽 측면의 한 번 두드림을 스크린의 잠금 상태 해지 기능과 매칭하여 저장했다고 가정한다.
도 33의 참조번호 720은 스크린 잠금 기능이 해지되어 대기 화면 상태를 표시하는 화면을 나타낸다. 사용자가 저장된 두드림 패턴에 따라 두드림을 입력하면 스크린 잠금 기능이 해지되어 사용자는 스크린을 이용하여 명령을 입력할 수 있다.
도 34는 본 발명의 실시 예에 따른 게임(game) 기능과 관련된 휴대 단말기의 동작 제어 과정을 나타내는 표시화면을 나타낸다.
도 34의 참조번호 810은 휴대 단말기에 저장된 게임 어플리케이션이 실행된 화면을 나타낸다. 사용자는 게임을 시작하기 전, 모션 패턴 설정 메뉴를 통해 두드림 패턴과 게임 어플리케이션의 특정 기능을 매칭하여 저장한다. 예를 들어, 전쟁 시뮬레이션 게임의 경우 사용자는 오른쪽 측면의 한 번의 두드림은 오른쪽 무기 사용에, 왼쪽 측면의 한 번의 두드림은 왼쪽 무기 사용에, 두드림 위치에 무관하게 두 번의 두드림 동작은 폭탄 투척 기능에 각각 매칭하여 저장했다고 가정한다. 이후 사용자는 게임 어플리케이션을 실행하고 왼쪽 측면에 한 번의 두드림을 입력한다.
도 34의 참조번호 820은 오른쪽 무기가 사용된 화면을 나타낸다. 사용자가 오른쪽 측면에 한 번의 두드림을 입력하면 제어부는 입력된 두드림을 오른쪽 무기 사용으로 판단하게 된다. 사용자는 두드림 패턴을 미리 저장시켜, 두드림 동작을 통해 게임을 진행할 수 있다. 이는 사용자에게 감성적인 휴대 단말기 사용 효과를 가져다 줄 수 있다.
도 35는 본 발명의 실시 예에 따른 MP3 내부 기능과 관련된 휴대 단말기의 동작 제어 과정을 나타내는 표시화면에 해당한다.
도 35의 참조번호 910은 MP3이 실행되는 화면을 나타낸다. 사용자는 MP3기능을 실행시키기 전, 모션 패턴 설정 메뉴를 통해, 휴대 단말기 전면의 상부의 두 번의 두드림 입력을 MP3 기능 중 이퀄라이저(equalizer) 기능과 매칭하여 저장했다고 가정한다. 사용자가 MP3 기능이 실행된 상태에서 휴대 단말기 전면의 상부에 두 번의 두드림 동작을 입력하면, 이퀄라이저 모드가 전환된다.
도 35의 참조번호 920은 MP3의 이퀄라이저 모드가 전환된 화면을 나타낸다. 두드림을 입력하여 이퀄라이저 모드를 순차적으로 변경시킬 수 있다. 또한 발명의 실시 예에 따라 각각의 이퀄라이저 모드에 마다 두드림 패턴을 매칭하여 저장할 수 있다. 이 경우 두드림을 입력하여 특정 이퀄라이저 모드로 바로 전환시킬 수 있다.
도 36은 사운드 음원 믹싱(mixing)과 관련된 휴대 단말기의 동작 제어 과정을 나타내는 표시화면에 해당한다.
도 36의 참조번호 1010은 모션 패턴 설정 메뉴에 진입하여 동작 입력을 요구하는 표시화면을 나타낸다. 사용자는 일련의 두드림을 입력하게 된다. 여기서 사용자는 '톡톡톡-톡-톡'을 입력했다고 가정한다. 참조번호 1020은 두드림 패턴에 매칭되는 기능을 선택하는 화면에 해당한다. 참조번호 1020에는 복수의 어플리케이션 목록이 표시되며, 효과음 기능의 어플리케이션도 어플리케이션 목록에 포함된다. 사용자는 효과음을 설정하면, 제어부는 '톡톡톡-톡-톡'과 효과음 기능을 매칭하여 저장부에 설정한다. 참조번호 1030은 두드림 패턴과 어플리케이션이 매칭하여 설정되었음을 알리는 표시화면에 해당한다.
이후 사용자는 MP3 어플리케이션을 실행시킨다. 참조번호 1040은 MP3이 실행된 화면을 나타낸다. MP3 어플리케이션이 실행되면 제어부는 오디오 처리부를 제어하여 음성을 출력 시킨다. 사용자가 휴대 단말기의 오른쪽 측면에 한 번의 두드림을 입력하면, 제어부는 두드림 시점에서 '짝짝짝-짝-짝'의 효과음을 함께 오디오 처리부를 제어하여 출력 시킨다. 효과음은 '손벽음' 뿐만 아니라 '경적소리', '북소리' 등과 같은 효과음으로 설정될 수 있으며, 템포(tempo)는 사용자가 모션 패턴 설정 메뉴에서 입력한 두드림 패턴에 따라 설정된다. 참조번호 1050은 MP3음악과 효과음을 함께 출력하는 이벤트를 나타낸다. 효과음은 사용자가 두드림을 입력할 때마다 출력될 수 있으며, 두드림 입력 후 다시 두드림이 입력될 때까지 계속적으로 출력될 수 있다. 본 기능을 통해 사용자는 저장된 음악에 자신만의 효과음을 믹싱(mixing)하여 출력할 수 있다.
도 37은 본 발명의 실시 예에 따른 시나리오 기반 응용 프로그램 제어를 전체적으로 설명하기 위한 도면이다.
상기 도 37을 참조하면, 본 발명의 휴대 단말기는 먼저, 제1 과정에서 저장부(170)에 다양한 응용 프로그램 예를 들면 "A.app", "B.app", "C.app" 등이 저장되어 있을 수 있다. 이때, 휴대 단말기 사용자가 특정 응용 프로그램 예를 들면 "A.app"를 선택하게 되면, 제2 과정에서 휴대 단말기는 저장부(170)에 저장된 "A.app"를 제어부에 로딩하게 된다. 여기서, 상기 "A.app"는 사용자가 직접 선택하는 것으로 설명하였으나, 휴대 단말기에 기 설정되어 휴대 단말기 운용에 따라 자동으로 활성화되는 응용 프로그램 예를 들면, 대기화면 출력 프로그램, 메뉴 화면 출력 프로그램, 위젯 기능 출력 프로그램 등 다양한 응용 프로그램의 한 종류가 될 수 있을 것이다.
한편, 제2 과정에서 휴대 단말기는 "A.app"를 로딩하면서, "A.app"에 따른 응용 프로그램 제어 기능을 수행하기 위하여 시나리오 적용을 위한 기초 과정을 수행하도록 제어할 수 있다. 즉, 휴대 단말기는 제3 과정에서 저장부(170)에 저장되어 있는 시나리오 DB를 참조하게 되는데, 이때, 시나리오 DB에 포함된 다양한 입력 신호 테이블 중 "A.app"에 대응하는 입력 신호 테이블을 검색할 수 있다. 이를 위하여 상기 시나리오 DB는 저장부(170)에 저장된 다양한 응용 프로그램들 각각에 대응하는 입력 신호 테이블을 마련할 수 있으며, 해당 입력 신호 테이블이 없는 경우, 앞서 설명한 바와 같이 타 휴대 단말기 또는 특정 웹 서버로부터 다운로드 받을 수 있을 것이다. 상기 응용 프로그램별로 할당된 입력 신호 테이블은 도시된 바와 같이, 적어도 하나의 모션 신호와 각 모션 신호에 있어서의 파라미터 종류, 파라미터 값들에 대한 정보 및 해당 모션 신호를 통하여 응용 프로그램이 수행해야 할 명령어 정보를 가지는 적어도하나의 기준 시나리오를 포함하게 된다. 도시된 도면을 참조하면, 기준 시나리오에 기재된 A.1은 응용 프로그램이 수행해야 할 명령어 예를 들면, 현재 활성화되고 있는 응용 프로그램을 종료시키거나, 응용 프로그램의 특정 동작을 수행하도록 하는 명령어가 될 수 있다. 그리고 "Tap(a,b,c,d)"는 모션 신호에 해당하는 동작이 "Tap"이며, 해당 탭 동작의 파라미터 종류가 "a,b,c,d"의 4종류이고, 각 파라미터 값이 해당 알파벳에 대응하는 값일 경우, 유효한 값으로 인식하는 기준을 제공한다. 이와 유사하게, C.1은 "C.app" 응용 프로그램이 활성화될 때, 제어부 제어에 따라 로딩될 수 있으며, C.1은 "C.app" 응용 프로그램의 특정 동작을 제어할 수 있는 명령어에 해당하는 "Tilt(M,N)"은 기울기 동작 Tilt가 파라미터 M, N이 지시하는 값만큼 가지는 입력 시나리오가 발생할 경우, 해당 C.1 명령어를 적용하라는 지시로 간주할 수 있도록 기준을 제공한다. 각 입력 신호 테이블은 다양한 명령어들에 대하여 각각 다른 모션 신호들의 조합으로 이루어 질 수 있을 것이다.
휴대 단말기의 제어부는 시나리오 DB에서 해당 응용 프로그램 즉, "A.app"에 대응하는 입력 신호 테이블이 검색되면, 제4 과정에서 해당 입력 신호 테이블에 기재된 기준 시나리오들을 로딩하도록 제어할 수 있다.
한편, 휴대 단말기는 센서부(130)를 활성화하고, 휴대 단말기의 특정 동작에 따른 센서 신호를 생성할 수 있도록 제어할 수 있다. 이러한 준비가 완료된 상태에서, 휴대 단말기 사용자가 휴대 단말기에 대하여 특정 물리력을 가하거나 배치 또는 위치를 변화시키게 되면, 센서부(130)는 제5 과정에서 해당 물리력 등에 따른 센서 신호를 생성하고, 이를 제어부에 전달할 수 있다. 이때, 센서부(130)는 수신된 물리력에 따라 각 센서가 수집한 신호를 증폭기(Amp)를 이용하여 증폭하고 변환기(Analog/Digital)를 이용하여 디지털 신호로 변환할 수 있다. 결과적으로, 상기 센서부(130)는 제6 과정에서 각 센서에 따라 세기, 횟수, 지속시간, 방향, 간격 등의 다양한 파라미터에 해당하는 파라미터 값을 검출하여 디지털로 변환하고, 이를 제어부에 전달하게 된다. 예를 들면, 센서부(130)가 센서 신호 (1,1,1,1)의 값을 전달하였다고 가정하면, 센서부(130)가 전달한 센서 신호 (1,1,1,1)은 특정 파라미터들의 종류와 파라미터 값을 지시할 수 있다. 즉, 괄호 안에 숫자들이 배치된 각 위치는 특정 파라미터들의 종류를 지시할 수 있으며, 각 숫자들은 해당 파라미터에 대한 특정 값을 지시할 수 있다.
휴대 단말기의 제어부는 제6 과정에서 센서 신호를 수신하게 되면, 제7 과정에서 해당 파라미터들의 종류와 파라미터들의 값을 기준으로 어떠한 동작이 발생했는지를 판단하고, 이를 기반으로 제8 과정에서 입력 시나리오를 작성하도록 한다. 이를 위하여, 상기 휴대 단말기의 제어부는 적어도 하나의 모션 신호와 하나의 입력 시나리오 완성을 지시하는 모션 신호 예를 들면 무동작 상태 등으로 설정된 모션 신호가 입력되면 하나의 입력 시나리오를 작성할 수 있다.
입력 시나리오 작성이 완료되면, 제9 과정에서 휴대 단말기의 제어부는 제8 과정에서 작성된 입력 시나리오를 제4 과정에서 로딩된 적어도 하나의 기준 시나리오들과 비교하여 동일한 기준 시나리오가 존재하는지를 검출할 수 있다. 그리고 동일한 기준 시나리오가 검출되면, 휴대 단말기 제어부는 해당 기준 시나리오에 포함된 명령어 정보를 추출하고, 이를 기능 수행부에 전달할 수 있다. 기능 수행부는 제9 과정에서 전달된 명령어 정보를 기반으로 현재 수행되고 있는 응용 프로그램의 제어 예를 들면, 응용 프로그램을 종료시키거나, 응용 프로그램의 특정 기능을 수행하도록 제어할 수 있다.
한편, 상술한 설명에서는 전체 과정을 설명하기 위하여, 각 과정에 일련번호를 부여하였으나, 본 발명의 흐름이 상술한 일련번호의 순서대로 이루어지는 것은 아니다. 즉, 센서부(130)의 활성화 시점이나 기준 시나리오의 로딩 시점은 설명과 다르게 진행될 수 있다. 이에 따라, 본 발명은 특정 응용 프로그램 활성화 시점에 센서부(130)가 전달하는 센서 신호를 기반으로 생성되는 모션 신호와, 상기 적어도 하나의 모션 신호를 기반으로 작성되는 입력 시나리오 및 입력 시나리오에 매칭되는 기준 시나리오에 포함된 명령어를 기반으로 응용 프로그램 제어로 이해할 수 있을 것이다.
이상 본 발명을 몇 가지 바람직한 실시 예를 사용하여 설명하였으나, 이들 실시 예는 예시적인 것이며 한정적인 것이 아니다. 이와 같이, 본 발명이 속하는 기술분야에서 통상의 지식을 지닌 자라면 본 발명의 사상과 첨부된 특허청구범위에 제시된 권리범위에서 벗어나지 않으면서 균등론에 따라 다양한 변화와 수정을 가할 수 있음을 이해할 것이다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기 구성을 개략적으로 나타낸 도면,
도 2는 본 발명의 실시 예에 따른 제어부 구성을 보다 상세히 나타낸 도면,
도 3은 본 발명의 실시 예에 따른 모션 입력 장치 운용 방법을 설명하기 위한 순서도,
도 4는 본 발명의 실시 예에 따른 메뉴 항목 출력 시, 휴대 단말기의 화면 인터페이스 일예를 나타낸 도면,
도 5는 본 발명의 실시 예에 따른 응용 프로그램 실행 시, 휴대 단말기의 화면 인터페이스 다른 예를 나타낸 도면.
도 6은 본 발명의 다른 실시 예에 따른 제어부 구성을 보다 상세히 나타낸 도면,
도 7은 본 발명의 확장 테이블 입력 툴의 화면 구성의 일예를 나타낸 도면,
도 8은 본 발명의 확장 테이블 기반 모션 입력 장치 운용 방법을 설명하기 위한 순서도,
도 9 내지 도 12는 본 발명의 제1 응용 실시 예를 설명하기 위한 도면들,
도 13 내지 도 16은 본 발명의 제2 응용 실시 예를 설명하기 위한 도면들,
도 17 내지 도 22는 본 발명의 제3 응용 실시 예를 설명하기 위한 도면들,
도 23 내지 도 26은 본 발명의 제4 응용 실시 예를 설명하기 위한 도면들,
도 27 내지 도 36은 본 발명의 제5 응용 실시 예를 설명하기 위한 도면들.
도 37은 본 발명의 실시 예에 따른 동작 과정 설명을 위한 도면.

Claims (86)

  1. 휴대 단말기에서 현재 실행중인 응용 프로그램의 종류를 판단하는 과정;
    상기 판단된 응용 프로그램에 대응하는 적어도 하나의 기준 시나리오를 호출하는 과정;
    상기 휴대 단말기에 배치된 적어도 하나의 센서를 동작시키는 과정;
    센서 신호를 수집하는 센서 신호 수집 과정;
    상기 센서 신호를 기반으로 상기 휴대 단말기의 동작에 대응하는 모션 신호를 생성하는 모션 신호 생성 과정;
    적어도 하나의 상기 모션 신호를 기반으로 입력 시나리오를 생성하는 입력 시나리오 생성 과정;
    상기 입력 시나리오와 동일한 기준 시나리오를 검출하는 시나리오 검출 과정;
    상기 검출된 기준 시나리오에 대응하는 입력 신호를 생성하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  2. 제 1 항에 있어서,
    상기 기준 시나리오를 호출하는 과정은
    시나리오 데이터베이스에서 상기 휴대 단말기에서 실행되는 응용 프로그램별로 설정된 입력 신호 테이블을 검출하는 과정;
    상기 입력 신호 테이블 중 상기 입력 시나리오의 비교 기준이 되는 기준 시나리오를 검출하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  3. 제 1 항에 있어서,
    상기 센서 신호 수집 과정은
    가속도 변화에 따른 센서 신호, 방향 변화에 따른 센서 신호, 진동 변화에 따른 센서 신호, 압력 변화에 따른 센서 신호 중 적어도 하나의 센서 신호를 수집하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  4. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    수집된 상기 센서 신호 중 한 종류의 센서 신호를 기반으로 다수개의 모션 신호를 생성하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  5. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    수집된 상기 센서 신호들의 조합을 기반으로 하나의 모션 신호를 생성하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  6. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    상기 센서 신호를 기반으로 두드리기 모션 신호, 흔들기 모션 신호, 스내핑(Snapping) 모션 신호, 기울이기 모션 신호, 잡기 모션 신호, 무 동작 모션 신호 중 적어도 하나를 생성하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  7. 제 6 항에 있어서,
    상기 입력 시나리오 생성 과정은
    하나의 입력 시나리오 생성을 위한 초기화 과정;
    상기 초기화 이후 시나리오 완성을 나타내는 모션 신호 입력 이전에 순차적으로 입력되는 적어도 하나의 모션 신호 및 동시에 입력되는 복수개의 모션 신호들 중 적어도 하나와 상기 시나리오 완성을 나타내는 모션 신호 입력 중 적어도 하나를 이용하여 입력 시나리오를 작성하는 과정;
    상기 시나리오 완성을 나타내는 모션 신호 수신 시 상기 작성된 입력 시나리오를 하나의 입력 시나리오로 생성하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  8. 제 1 항에 있어서,
    상기 휴대 단말기의 메뉴 항목을 출력하는 과정;
    상기 메뉴 항목 실행을 위한 상기 기준 시나리오에 대응하는 적어도 하나의 모션 신호 조합들을 텍스트, 이미지, 아이콘 중 적어도 하나의 조합을 이용하여 출력하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  9. 제 1 항에 있어서,
    상기 휴대 단말기의 특정 응용 프로그램을 실행하는 과정;
    상기 특정 응용 프로그램 제어를 위한 상기 입력 신호에 대응하는 적어도 하나의 모션 신호 조합들에 해당하는 기준 시나리오를 텍스트, 이미지, 아이콘 중 적어도 하나의 조합을 이용하여 출력하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  10. 제 8 항 또는 제 9 항 중 어느 한 항에 있어서,
    상기 기준 시나리오 종류에 따라, 상기 모션 신호들의 횟수, 기간, 세기, 간격을 포함하는 파라미터 정보를 출력하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  11. 제 1 항에 있어서,
    센서 신호 기반의 입력 신호 생성을 지원하는 모션 유저 인터페이스 모드 전환을 위한 키 입력 또는 터치 이벤트 발생 과정;
    상기 키 입력 또는 터치 이벤트 발생에 따라 상기 휴대 단말기의 입력 모드를 모션 유저 인터페이스 모드로 전환하는 과정;을 더 포함하는 것을 특징으로 하 는 모션 입력 장치 운용 방법.
  12. 제 1 항에 있어서,
    상기 시나리오 검출 과정은
    상기 입력 시나리오와 다수개의 기준 시나리오를 포함하는 테이블을 비교하는 과정;
    상기 입력 시나리오와 동일한 기준 시나리오가 상기 테이블에 존재하는 경우, 해당 기준 시나리오를 검출하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  13. 제 1 항에 있어서,
    상기 기준 시나리오의 파라미터 종류 및 파라미터 값을 수정하여 확장 테이블을 생성하는 확장 테이블 생성 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  14. 제 13 항에 있어서,
    상기 확장 테이블 생성 과정은
    상기 기준 시나리오의 파라미터 종류 및 파라미터 값을 수정하기 위한 확장 테이블 입력 툴을 출력하는 과정;
    상기 확장 테이블 입력 툴을 기반으로 입력부로부터 입력되는 입력 신호에 따라 상기 기준 시나리오를 수정하는 과정;
    상기 수정된 기준 시나리오를 확장 테이블로 저장하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  15. 제 14 항에 있어서,
    상기 확장 테이블 입력 툴을 출력하는 과정은
    휴대 단말기가 지원하는 응용 프로그램 중 어느 하나를 선택할 수 있는 응용 프로그램 선택 영역을 출력하는 과정;
    편집 가능하며, 선택된 응용 프로그램에 할당된 기준 시나리오에 포함되는 파라미터 종류 및 파라미터 값을 출력하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  16. 제 1 항에 있어서,
    특정 기준 시나리오에 대하여 다양한 파라미터 종류 및 파라미터 값을 포함하는 확장 테이블을 타 단말기로부터 수신하는 과정;
    특정 응용 프로그램 활성화에 따라 상기 기준 시나리오 로딩 시, 상기 기준 시나리오를 상기 확장 테이블에 포함된 특정 기준 시나리오로 교체하도록 설정하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  17. 제 1 항에 있어서,
    상기 생성된 입력 신호에 따라 상기 휴대 단말기에서 현재 수행되는 응용 프로그램을 운용하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  18. 제 17 항에 있어서,
    상기 응용 프로그램을 운용하는 과정은
    키입력 및 터치 입력 중 적어도 하나로부터 발생하는 입력 신호에 따라 수행되는 휴대 단말기의 제1 기능 또는 상기 제1 기능이 수행되고 있는 상태에서 연이어 수행되는 적어도 하나의 제2 기능을 활성화하는 기능 활성화 과정;
    상기 기능 활성화 과정 중에 상기 휴대 단말기의 흔들림에 의해 일정 진폭 또는 진폭 변화, 일정 횟수의 주기를 가지는 흔들기 동작 신호가 발생하는 흔들기 동작 신호 발생 과정;
    상기 흔들기 동작 신호 발생 시 상기 제1 기능 및 상기 제2 기능 중 적어도 하나의 재설정, 취소, 삭제 및 종료 중 어느 하나의 동작을 수행하는 기능 수행 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  19. 제 18 항에 있어서,
    상기 흔들기 동작 신호 발생 과정은
    일정 시간 내에 제1 진폭 또는 제1 진폭 변화, 제1 횟수의 주기를 가지는 제1 흔들기 동작 신호 발생 과정;
    상기 제1 흔들기 동작 신호가 연속적으로 발생하여 복수의 제1 흔들기 동작신호가 발생하는 과정;
    일정 시간 내에 제2 진폭 또는 제2 진폭 변화, 제2 횟수의 주기를 가지는 제2 흔들기 동작 신호 발생 과정 중 어느 하나의 과정을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  20. 제 18 항에 있어서,
    상기 제1 기능은 키입력 신호에 따른 문자 출력 기능, 휴대 단말기의 메뉴 항목에 포함된 특정 메뉴 기능 중 어느 하나 이고,
    상기 제2 기능은 상기 출력된 문자를 기반으로 수행되는 메뉴 기능, 상기 특정 메뉴 기능 활성화 이후 입력되는 키입력 신호에 따라 수행되는 기능 중 어느 하나인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  21. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    특정 방향으로 1회의 가속운동을 감지하고, 그에 대응하는 모션 신호를 생성하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  22. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    특정 방향으로 1회의 가속 운동이 임계값 이상인 경우, 상기 가속 운동을 유효한 것으로 판단하고 모션 신호를 생성하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  23. 제 22 항에 있어서,
    상기 가속운동은
    회전운동, 직선운동 중 적어도 하나인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  24. 제 22 항에 있어서,
    상기 가속운동은 임의의 축을 가지는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  25. 제 22 항에 있어서,
    상기 모션 신호는 가속방향에 관한 정보를 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  26. 제 22 항에 있어서,
    상기 모션 신호를 기반으로 생성된 입력 시나리오를 이용하여 응용 프로그램에서의 단계(Stepwise)이동을 수행하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  27. 제 26 항에 있어서,
    상기 단계 이동을 수행하는 과정은
    상기 응용 프로그램이 컨텐츠 플레이어일 경우 다음, 이전 컨텐츠로 이동하는 과정;
    상기 응용 프로그램이 채널 플레이어인 경우 다음, 이전 채널로 이동하는 과정;
    상기 응용 프로그램이 2차원 GUI객체보기일 경우 하이라이트가 상, 하, 좌, 우로 이동하는 과정;
    상기 응용 프로그램이 3차원 GUI객체보기일 경우 하이라이트가 전, 후, 상, 하, 좌, 우 이동하는 과정; 중 어느 하나의 과정을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  28. 제 1 항에 있어서,
    상기 모션 신호 생성 과정은
    상기 휴대 단말기의 기울임에 대응하는 기울임 각도 신호를 생성하는 기울임 각도 신호 생성 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  29. 제 28 항에 있어서,
    상기 센서 신호 수집 과정은
    가속도 변화에 따른 센서 신호 및, 방향 변화에 따른 센서 신호 중 적어도 하나의 센서 신호를 수집하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  30. 제 29 항에 있어서,
    상기 기울임 각도 신호 생성 과정은
    수집된 상기 센서 신호 중 한 종류의 센서 신호를 기반으로 순차적인 기울임 각도 신호를 생성하는 과정;
    수집된 상기 센서 신호들의 조합을 기반으로 하나의 기울임 동작 신호를 생성하는 과정;
    상기 센서 신호를 기반으로 기울임 시작 위치, 기울임 방향, 기울임 변화량 신호 중 적어도 하나를 생성하는 과정; 중 어느 하나인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  31. 제 1 항에 있어서,
    상기 센서 신호 수집 과정은
    상기 휴대 단말기로의 적어도 2회 연속 두드림을 감지하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  32. 제 31 항에 있어서,
    상기 적어도 2회 연속 두드림은
    두드림 간격이 기 설정된 시간 이내이고, 상기 휴대 단말기 내의 설정된 영역을 각각 임계값 이상의 크기로 두드리는 동작에 해당하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  33. 제 31 항에 있어서,
    상기 입력 신호를 생성하는 과정은
    상기 적어도 2회 연속 두드림에 따라 생성된 입력 시나리오에 대응하는 입력 신호를 생성하는 과정이며,
    상기 입력 신호에 따라 응용 프로그램의 실행 또는 정지 기능 제어를 위한 기능 수행 과정을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  34. 제 33 항에 있어서,
    상기 기능 수행 과정은
    상기 응용 프로그램이 정지 화상 촬영 모드일 경우,
    정지 화상 캡쳐 기능을 수행함을 특징으로 하는 모션 입력 장치 운용 방법.
  35. 제 34 항에 있어서,
    상기 기능 수행 과정은
    상기 적어도 2회 연속 두드림 중 최종 두드림이 감지되고 설정된 시간 경과 후에 상기 정지 화상 캡쳐 기능을 수행함을 특징으로 하는 모션 입력 장치 운용 방법.
  36. 제 35 항에 있어서,
    상기 설정된 시간 동안 경고음을 출력하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  37. 제 33 항에 있어서,
    상기 기능 수행 과정은
    상기 응용 프로그램이 동화상촬영모드일 경우
    동화상 촬영의 시작 또는 정지 기능을 수행함을 특징으로 하는 모션 입력 장치 운용 방법.
  38. 제 37 항에 있어서,
    상기 기능 수행 과정은
    첫 번째의 적어도 2회 연속 두드림 중 최종 두드림이 감지된 이후의 프레임부터 동화상 인코딩(encoding)을 시작하고, 두 번째의 적어도 2회 연속 두드림 중 처음 두드림이 감지되기 이전 프레임까지 인코딩을 수행함을 특징으로 하는 모션 입력 장치 운용 방법.
  39. 제 38 항에 있어서,
    상기 기능 수행 과정은
    상기 첫 번째의 적어도 2회 연속 두드림과 상기 동화상 인코딩이 시작되는 시점 사이의 시간 및 상기 두 번째의 적어도 2회 연속 두드림과 상기 동화상 인코딩이 종료되는 시점 사이의 시간 동안 경고음을 출력하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  40. 제 33 항에 있어서,
    상기 기능 수행 과정은
    상기 응용 프로그램이 컨텐츠재생모드일 경우, 컨텐츠의 재생 또는 일시정지 기능을 수행하는 과정;
    상기 응용 프로그램이 DMB 또는 라디오인 경우, 상기 DMB 또는 라디오의 채널 켜짐 또는 채널 꺼짐 기능을 수행하는 과정;을 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  41. 제 1 항에 있어서,
    적어도 하나의 두드림 패턴 및 패턴별 기능을 설정 및 저장하는 두드림 패턴 설정 및 저장 과정;을 더 포함하고,
    상기 모션 신호 생성 과정은
    사용자로부터 적어도 하나의 두드림이 입력되면 상기 입력된 적어도 하나의 두드림에 대한 두드림 패턴을 판단하는 과정인 것을 특징으로 하는 모션 입력 장치 운용 방법.
  42. 제 41 항에 있어서,
    상기 두드림 패턴은,
    두드림 세기, 두드림 위치, 두드림 횟수, 두드림 간 시간 간격 정보, 두드림 전체 입력 시간, 두드림을 제외한 다른 모션과의 동작 연계 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  43. 제 41 항에 있어서,
    상기 두드림 패턴은,
    사용자에 의해 설정 가능한 수를 가지는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  44. 제 41 항에 있어서,
    상기 저장된 두드림 패턴에 대응하는 기능 중 상기 판단된 두드림 패턴에 대응된 기능을 검색하여 실행하는 과정을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  45. 제 41 항에 있어서,
    상기 두드림 패턴 판단 이전, 적어도 하나의 모션 센서를 활성화하는 센서 활성화 과정을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  46. 제 45 항에 있어서,
    상기 센서 활성화 과정은
    사용자로부터 특정키가 입력되면 상기 적어도 하나의 모션 센서를 활성화 하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  47. 제 41 항에 있어서,
    상기 판단된 두드림 패턴을 기반으로 그에 대응하는 기능을 수행하기 전, 상기 기능의 수행여부의 선택을 요구하는 메시지를 표시하는 과정;을 더 포함하는 것을 특징으로 하는 모션 입력 장치 운용 방법.
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 적어도 하나의 센서 신호를 수집하는 센서부;
    상기 센서 신호를 기반으로 휴대 단말기의 동작에 대응하는 모션 신호를 생성하는 동작 인식부;
    적어도 하나의 상기 모션 신호를 기반으로 입력 시나리오를 생성하는 시나리오 작성부;
    적어도 하나의 응용 프로그램을 저장하는 저장부;
    상기 휴대 단말기에서 현재 실행중인 응용 프로그램의 종류를 판단하고, 상기 판단된 응용 프로그램에 대응하는 적어도 하나의 기준 시나리오를 호출한 후, 상기 입력 시나리오와 동일한 기준 시나리오를 검출하며, 상기 검출된 기준 시나리오에 대응하는 입력 신호를 생성하는 시나리오 매핑부;를 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  54. 제 53 항에 있어서,
    상기 저장부는
    상기 응용 프로그램별로 상기 입력 시나리오의 비교 기준이 되는 기준 시나리오들을 포함하는 입력 신호 테이블;
    적어도 하나의 상기 입력 신호 테이블을 포함하는 시나리오 데이터베이스;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  55. 제 53 항에 있어서,
    상기 센서부는
    가속도 센서, 자이로 센서, 진동 센서, 압력 센서, 지자기 센서 중 적어도 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  56. 제 53 항에 있어서,
    상기 동작 인식부는
    수집된 상기 센서 신호 중 한 종류의 센서 신호를 기반으로 다수개의 모션 신호를 생성하거나, 상기 센서 신호들의 조합을 기반으로 하나의 모션 신호를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  57. 제 53 항에 있어서,
    상기 동작 인식부는
    상기 센서 신호를 기반으로 두드리기 모션 신호, 흔들기 모션 신호, 스내핑(Snapping) 모션 신호, 기울이기 모션 신호, 잡기 모션 신호, 무 동작 모션 신호 중 적어도 하나를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  58. 제 57 항에 있어서,
    상기 시나리오 작성부는
    하나의 입력 시나리오 생성을 위한 초기화 이후 시나리오 완성을 나타내는 모션 신호 입력 이전에 순차적으로 입력되는 적어도 하나의 모션 신호 및 동시에 입력되는 복수개의 모션 신호들 중 적어도 하나와 상기 시나리오 완성을 나타내는 모션 신호 중 적어도 하나를 이용하여 입력 시나리오를 작성하는 것을 특징으로 휴대 단말기의 모션 입력 장치.
  59. 제 53 항에 있어서,
    메뉴 항목을 출력하는 영역;
    상기 메뉴 항목 실행을 위한 상기 기준 시나리오에 대응하는 적어도 하나의 모션 신호 조합들을 텍스트, 이미지, 아이콘 중 적어도 하나의 조합을 이용하여 출력하는 영역;을 가지는 표시부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  60. 제 53 항에 있어서,
    상기 휴대 단말기의 특정 응용 프로그램 실행에 따른 화면 출력 영역;
    상기 특정 응용 프로그램 제어를 위한 상기 입력 신호에 대응하는 적어도 하나의 모션 신호 조합들에 해당하는 기준 시나리오를 텍스트, 이미지, 아이콘 중 적어도 하나의 조합으로 출력하는 영역;을 가지는 표시부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  61. 제 53 항에 있어서,
    상기 기준 시나리오 종류에 따라, 상기 모션 신호들의 횟수, 기간, 세기, 간격을 포함하는 파라미터 정보를 출력하는 표시부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  62. 제 53 항에 있어서,
    센서 신호 기반의 입력 신호 생성을 지원하는 모션 유저 인터페이스 모드 전환을 위한 키 입력을 생성하는 키 입력부; 및
    상기 키 입력에 대응하는 이미지와 해당 이미지 터치에 따른 터치 이벤트를 출력하는 터치스크린 중 적어도 하나를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  63. 제 62 항에 있어서,
    상기 터치스크린은
    상기 모션 유저 인터페이스 모드의 활성화 및 비활성화에 따라 상기 모션 유저 인터페이스 모드 변환을 위한 링크 이미지를 표시 및 삭제하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  64. 제 53 항에 있어서,
    상기 생성된 입력 신호에 따라 상기 휴대 단말기에서 현재 수행되는 응용 프로그램을 운용하는 기능 수행부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  65. 제 53 항에 있어서,
    상기 기준 시나리오의 파라미터 종류 및 파라미터 값을 수정하기 위한 확장 테이블 입력 툴을 출력하는 표시부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  66. 제 65 항에 있어서,
    상기 확장 테이블 입력 툴을 출력하는 표시부는
    상기 휴대 단말기가 지원하는 응용 프로그램 중 어느 하나를 선택할 수 있는 응용 프로그램 선택 영역;
    편집 가능하며, 선택된 응용 프로그램에 할당된 기준 시나리오에 포함되는 파라미터 종류 및 파라미터 값을 출력하는 영역;을 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  67. 제 53 항에 있어서,
    상기 저장부는
    상기 입력 신호에 따라 휴대 단말기의 제1 기능 또는 상기 제1 기능이 수행되고 있는 상태에서 수행되는 적어도 하나의 제2 기능 지원을 위한 응용 프로그램을 저장하며,
    상기 센서부는
    상기 제1 기능 및 제2 기능 중 적어도 하나의 기능이 활성화되는 중에 상기 휴대 단말기의 흔들림에 따른 흔들기 동작 신호를 검출하고,
    상기 동작 인식부는
    상기 흔들기 동작 신호가 일정 진폭 또는 진폭 변화, 일정 횟수의 주기를 가지는 흔들기 동작 신호인지 구분하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  68. 제 67 항에 있어서,
    상기 흔들기 동작 신호 발생 시 상기 제1 기능 및 상기 제2 기능 중 적어도 하나의 재설정, 취소, 삭제 및 종료 중 어느 하나의 동작을 수행하는 기능 수행부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  69. 제 53 항에 있어서,
    상기 동작 인식부는
    상기 휴대 단말기의 1회의 가속운동을 감지하여 그에 대응하는 모션 신호를 생성하며,
    상기 시나리오 작성부는
    상기 모션 신호를 기반으로 현재 수행되고 있는 응용 프로그램에 대한 입력 시나리오를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  70. 제 69 항에 있어서,
    상기 동작 인식부는
    기 설정된 가속 운동의 임계값에 따라 상기 1회의 가속운동의 유효 여부를 판단하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  71. 제 69 항에 있어서,
    상기 입력 시나리오를 기반으로 응용 프로그램에서의 단계 이동을 수행하도록 제어하는 기능 수행부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  72. 제 71 항에 있어서,
    상기 기능 수행부는
    상기 응용 프로그램이 컨텐츠 플레이어일 경우 다음, 이전 컨텐츠로 이동하도록 제어하며,
    상기 응용 프로그램이 채널 플레이어인 경우 다음, 이전 채널로 이동하도록 제어하고,
    상기 응용 프로그램이 2차원 GUI객체보기일 경우 하이라이트가 상, 하, 좌, 우로 이동하도록 제어하며,
    상기 응용 프로그램이 3차원 GUI객체보기일 경우 하이라이트가 전, 후, 상, 하, 좌, 우 이동하도록 제어하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  73. 제 53 항에 있어서,
    상기 동작 인식부는
    상기 센서 신호를 기반으로 휴대 단말기의 기울임 동작에 대응하는 기울임 각도 신호를 생성하며,
    상기 시나리오 작성부는
    적어도 하나의 상기 기울임 각도 신호를 기반으로 입력 시나리오를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  74. 제 73 항에 있어서,
    상기 동작 인식부는
    수집된 상기 센서 신호 중 한 종류의 센서 신호를 기반으로 하는 순차적인 기울임 각도 신호;
    수집된 상기 센서 신호들의 조합을 기반으로 하는 하나의 기울임 동작 신호;
    상기 센서 신호를 기반으로 기울임 시작 위치, 기울임 방향, 기울임 변화량 신호 중 적어도 하나를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  75. 제 53 항에 있어서,
    상기 동작 인식부는
    휴대 단말기의 적어도 2회 연속 두드림에 대응하는 신호를 생성하며,
    상기 시나리오 작성부는
    상기 생성된 신호를 기반으로 현재 수행되고 있는 응용 프로그램에 대한 입력 시나리오를 생성하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  76. 제 75 항에 있어서,
    상기 응용 프로그램이 정지 화상 촬영 모드일 경우, 상기 적어도 2회 연속 두드림 중 최종 두드림이 감지되고 설정된 시간 경과 후에 정지 화상 캡쳐 기능을 수행하도록 제어하며,
    상기 응용 프로그램이 동화상촬영모드일 경우, 첫 번째의 적어도 2회 연속 두드림 중 최종 두드림이 감지된 이후의 프레임부터 동화상 인코딩(encoding)을 시작하고, 두 번째의 적어도 2회 연속 두드림 중 처음 두드림이 감지되기 이전 프레임까지 인코딩을 수행하도록 제어하고,
    상기 응용 프로그램이 컨텐츠재생모드일 경우, 컨텐츠의 재생 또는 일시정지 기능을 수행하고, 상기 응용 프로그램이 DMB 또는 라디오인 경우, 상기 DMB 또는 라디오의 채널 켜짐 또는 채널 꺼짐 기능을 수행하도록 제어하는 기능 수행부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  77. 제 53 항에 있어서,
    상기 저장부는
    적어도 하나의 두드림 패턴과 상기 두드림 패턴에 대응하는 응용 프로그램 제어 기능을 저장하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  78. 제 77 항에 있어서,
    적어도 하나의 두드림이 입력되면, 상기 입력된 적어도 하나의 두드림에 대한 두드림 패턴을 판단하고, 상기 저장부에 저장된 적어도 하나의 두드림 패턴과 비교하여 상기 판단된 두드림 패턴에 대응하는 기능을 수행하도록 제어하는 기능 수행부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  79. 제 78 항에 있어서,
    상기 기능 수행부는
    상기 두드림 패턴 판단 이전, 적어도 하나의 모션 센서를 활성화 하도록 제어하거나, 사용자로부터 특정키가 입력되면 상기 적어도 하나의 모션 센서를 활성화 하도록 제어하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  80. 제 78 항에 있어서,
    상기 판단된 두드림 패턴을 기반으로 그에 대응하는 응용 프로그램 제어 기 능을 수행하기 전, 상기 응용 프로그램 제어 기능의 수행여부 선택을 요구하는 메시지를 출력하는 표시부;를 더 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  81. 제 77 항에 있어서,
    상기 두드림 패턴은
    두드림 세기, 두드림 위치, 두드림 횟수, 두드림 간 시간 간격 정보, 두드림 전체 입력 시간, 두드림을 제외한 다른 모션과의 동작 연계 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 모션 입력 장치.
  82. 삭제
  83. 삭제
  84. 삭제
  85. 삭제
  86. 삭제
KR1020090023500A 2008-11-10 2009-03-19 휴대 단말기의 모션 입력 장치 및 그의 운용 방법 KR101737829B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US12/615,733 US8866734B2 (en) 2008-11-10 2009-11-10 Motion input device for portable terminal and operation method using the same
US14/516,853 US9626519B2 (en) 2008-11-10 2014-10-17 Motion input device for portable terminal and operation method using the same
US15/467,060 US10261603B2 (en) 2008-11-10 2017-03-23 Motion input device for portable terminal and operation method using the same

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
KR20080111242 2008-11-10
KR1020080111242 2008-11-10
KR1020080112907 2008-11-13
KR20080112907 2008-11-13
KR1020080118088 2008-11-26
KR20080118088 2008-11-26
KR20080120057 2008-11-28
KR1020080120057 2008-11-28
KR20080120477 2008-12-01
KR20080120440 2008-12-01
KR1020080120440 2008-12-01
KR1020080120477 2008-12-01

Publications (2)

Publication Number Publication Date
KR20100052378A KR20100052378A (ko) 2010-05-19
KR101737829B1 true KR101737829B1 (ko) 2017-05-22

Family

ID=42277746

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090023500A KR101737829B1 (ko) 2008-11-10 2009-03-19 휴대 단말기의 모션 입력 장치 및 그의 운용 방법

Country Status (2)

Country Link
US (3) US8866734B2 (ko)
KR (1) KR101737829B1 (ko)

Families Citing this family (123)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8116831B2 (en) * 2007-11-29 2012-02-14 Motorola Mobility, Inc. Hand-held communication device with auxiliary input apparatus, and method
US8601526B2 (en) 2008-06-13 2013-12-03 United Video Properties, Inc. Systems and methods for displaying media content and media guidance information
US20090322761A1 (en) * 2008-06-26 2009-12-31 Anthony Phills Applications for mobile computing devices
CN101621859A (zh) * 2008-06-30 2010-01-06 鸿富锦精密工业（深圳）有限公司 便携式电子装置
US9014546B2 (en) 2009-09-23 2015-04-21 Rovi Guides, Inc. Systems and methods for automatically detecting users within detection regions of media devices
US20110084962A1 (en) * 2009-10-12 2011-04-14 Jong Hwan Kim Mobile terminal and image processing method therein
US9152318B2 (en) 2009-11-25 2015-10-06 Yahoo! Inc. Gallery application for content viewing
US10528221B2 (en) * 2009-12-31 2020-01-07 International Business Machines Corporation Gravity menus for hand-held devices
US20110164175A1 (en) * 2010-01-05 2011-07-07 Rovi Technologies Corporation Systems and methods for providing subtitles on a wireless communications device
KR101669618B1 (ko) * 2010-01-15 2016-10-26 삼성전자주식회사 디스플레이 장치 및 그 디스플레이 방법
KR101637939B1 (ko) * 2010-01-22 2016-07-20 삼성전자주식회사 이동통신 단말기의 동작 인식 장치 및 방법
JP2011186636A (ja) * 2010-03-05 2011-09-22 Sony Corp 情報処理装置および方法、並びにプログラム
US20110221664A1 (en) * 2010-03-11 2011-09-15 Microsoft Corporation View navigation on mobile device
US9134897B2 (en) * 2010-04-26 2015-09-15 Via Technologies, Inc. Electronic system and method for operating touch screen thereof
US20110287806A1 (en) * 2010-05-18 2011-11-24 Preetha Prasanna Vasudevan Motion-based tune composition on a mobile device
US20110300915A1 (en) * 2010-06-08 2011-12-08 Nokia Corporation Method, apparatus and computer program product for enabling partial functionality of a mobile terminal
KR101709504B1 (ko) * 2010-06-09 2017-02-24 엘지전자 주식회사 이동 단말기 및 이것의 리스트 관리 방법
WO2012002716A2 (ko) * 2010-06-29 2012-01-05 삼성에스디에스 주식회사 동작 감지 신호 기반의 컨텐츠 제공 시스템 및 방법 그리고 이에 사용되는 키오스크 장치 및 모바일 기기
KR101240747B1 (ko) * 2010-06-29 2013-03-11 삼성에스디에스 주식회사 동작 감지 신호 기반의 컨텐츠 제공 시스템 및 방법 그리고 이에 사용되는 키오스크 장치 및 모바일 기기
US10976784B2 (en) * 2010-07-01 2021-04-13 Cox Communications, Inc. Mobile device user interface change based on motion
KR20120005124A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 휴대용 단말기에서 움직임에 따른 동작을 수행하기 위한 장치 및 방법
JP5841714B2 (ja) 2010-07-27 2016-01-13 京セラ株式会社 触感呈示装置及び触感呈示装置の制御方法
JP5841713B2 (ja) 2010-07-27 2016-01-13 京セラ株式会社 触感呈示装置及び触感呈示装置の制御方法
JP5912235B2 (ja) 2010-07-27 2016-04-27 京セラ株式会社 触感呈示装置及び触感呈示装置の制御方法
US8478519B2 (en) 2010-08-30 2013-07-02 Google Inc. Providing results to parameterless search queries
US9164542B2 (en) * 2010-08-31 2015-10-20 Symbol Technologies, Llc Automated controls for sensor enabled user interface
US8429114B2 (en) * 2010-09-29 2013-04-23 Nokia Corporation Method and apparatus for providing low cost programmable pattern recognition
KR101231105B1 (ko) * 2010-10-08 2013-02-07 엔그램테크놀로지(주) 휴대기기의 ｕｉ를 위한 모션 센서 제어 시스템 및 그 방법
US10303357B2 (en) 2010-11-19 2019-05-28 TIVO SOLUTIONS lNC. Flick to send or display content
KR101932688B1 (ko) 2010-11-29 2018-12-28 삼성전자주식회사 휴대기기 및 이에 적용되는 ｕｉ 모드 제공 방법
WO2012078654A1 (en) * 2010-12-07 2012-06-14 Google Inc. Editing based on force-based physical cues
KR101858531B1 (ko) 2011-01-06 2018-05-17 삼성전자주식회사 모션에 의해 제어되는 디스플레이 장치 및 그 모션 제어 방법
KR101795574B1 (ko) 2011-01-06 2017-11-13 삼성전자주식회사 모션에 의해 제어되는 전자기기 및 그 제어 방법
TWI435263B (zh) * 2011-02-23 2014-04-21 Quanta Comp Inc 驗證方法及應用其之電腦系統
JP5866796B2 (ja) * 2011-05-12 2016-02-17 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
WO2012161237A1 (ja) * 2011-05-24 2012-11-29 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 情報処理装置およびその制御方法
KR101878141B1 (ko) * 2011-05-30 2018-07-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2011150872A2 (zh) 2011-06-10 2011-12-08 华为终端有限公司 一种触发方法及无线手持设备
US9841822B2 (en) * 2011-06-28 2017-12-12 Guangzhou Ucweb Computer Technology Co., Ltd. Method for operating mobile device using vibration sensor
KR101305355B1 (ko) * 2011-07-08 2013-09-06 성균관대학교산학협력단 시각장애인을 위한 모바일 기기 및 그 동작 방법
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
WO2013032187A1 (en) * 2011-09-01 2013-03-07 Samsung Electronics Co., Ltd. Mobile terminal for performing screen unlock based on motion and method thereof
KR101719994B1 (ko) 2011-09-07 2017-03-27 엘지전자 주식회사 이동단말기 및 그 제어방법
KR101398709B1 (ko) * 2011-09-09 2014-05-28 주식회사 팬택 사용자 모션을 이용한 다중 인터페이스 지원 단말 장치 및 방법
KR101380967B1 (ko) * 2011-09-09 2014-04-10 주식회사 팬택 애플리케이션 기능 실행을 위한 사용자 정의 패턴 설정 장치 및 방법
KR101766281B1 (ko) * 2011-10-17 2017-08-08 인포뱅크 주식회사 무선단말 및 그 무선단말의 정보처리 방법
KR101457116B1 (ko) * 2011-11-07 2014-11-04 삼성전자주식회사 음성 인식 및 모션 인식을 이용한 전자 장치 및 그의 제어 방법
US20130147850A1 (en) * 2011-12-08 2013-06-13 Motorola Solutions, Inc. Method and device for force sensing gesture recognition
WO2013089294A1 (ko) * 2011-12-15 2013-06-20 엘지전자 주식회사 햅틱 전송 방법 및 그 이동 단말기
CN102812427A (zh) * 2011-12-28 2012-12-05 华为技术有限公司 终端设备的解锁方法及终端设备
EP2815293B1 (en) 2012-02-14 2019-07-31 Koninklijke Philips N.V. Shock touch protection of a mobile device
FR2989484A1 (fr) * 2012-04-12 2013-10-18 Inst Mines Telecom Generation perfectionnee de commandes dans un equipement a ecran tactile
CN102750093B (zh) * 2012-06-11 2016-03-30 惠州Tcl移动通信有限公司 一种屏幕解锁的方法、系统及触摸屏终端
JP5966665B2 (ja) * 2012-06-26 2016-08-10 ソニー株式会社 情報処理装置、情報処理方法および記録媒体
KR101985507B1 (ko) * 2012-08-30 2019-06-03 엘지전자 주식회사 단말기 및 그 제어 방법
CN102945135A (zh) * 2012-10-24 2013-02-27 广东欧珀移动通信有限公司 一种输入字符的删除方法和装置
US9549323B2 (en) 2012-12-03 2017-01-17 Samsung Electronics Co., Ltd. Method and mobile terminal for controlling screen lock
JP6314834B2 (ja) * 2012-12-14 2018-04-25 日本電気株式会社 情報端末装置、情報端末制御方法及びプログラム
JP5994619B2 (ja) 2012-12-17 2016-09-21 ブラザー工業株式会社 通信装置、通信システム
KR101454473B1 (ko) * 2013-01-25 2014-10-24 김혁 휴대용 단말기, 그의 특정기능 실행 방법 및 그 방법을 기록한 기록매체
US9874999B2 (en) * 2013-02-07 2018-01-23 Lg Electronics Inc. Mobile terminal and method for operating same
US9282244B2 (en) 2013-03-14 2016-03-08 Microsoft Technology Licensing, Llc Camera non-touch switch
KR20140113119A (ko) * 2013-03-15 2014-09-24 엘지전자 주식회사 전자 기기 및 그 제어방법
US9066007B2 (en) 2013-04-26 2015-06-23 Skype Camera tap switch
US20140347326A1 (en) * 2013-05-21 2014-11-27 Samsung Electronics Co., Ltd. User input using hovering input
KR102193547B1 (ko) * 2013-05-22 2020-12-22 삼성전자주식회사 입력 장치, 디스플레이 장치 및 입력 장치 제어 방법
WO2014197354A1 (en) 2013-06-05 2014-12-11 Snakt, Inc. Methods and systems for creating, combining, and sharing time-constrained videos
KR101474467B1 (ko) * 2013-07-09 2014-12-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR102179056B1 (ko) * 2013-07-19 2020-11-16 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN103399694A (zh) * 2013-07-25 2013-11-20 深圳市金立通信设备有限公司 一种控制屏幕显示的方法和移动终端
KR20150016683A (ko) * 2013-08-05 2015-02-13 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR101444091B1 (ko) * 2013-08-06 2014-09-26 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN104346032B (zh) * 2013-08-09 2019-07-26 联想(北京)有限公司 一种信息处理方法及电子设备
KR101488193B1 (ko) * 2013-09-04 2015-01-30 에스케이 텔레콤주식회사 상황 인지 기반의 명령 수행 방법 및 장치
CN103472921A (zh) * 2013-09-22 2013-12-25 广东欧珀移动通信有限公司 一种控制移动终端中用户输入信息输出的方法及装置
KR102047498B1 (ko) * 2013-09-24 2019-11-21 삼성전자주식회사 노킹 입력에 기초하여 객체를 공유하는 시스템 및 방법
KR102077676B1 (ko) * 2013-11-20 2020-02-14 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US9111076B2 (en) * 2013-11-20 2015-08-18 Lg Electronics Inc. Mobile terminal and control method thereof
KR102131828B1 (ko) * 2013-12-03 2020-07-09 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
JP6024725B2 (ja) * 2014-01-17 2016-11-16 カシオ計算機株式会社 システム
US20150205379A1 (en) * 2014-01-20 2015-07-23 Apple Inc. Motion-Detected Tap Input
KR20150104302A (ko) * 2014-03-05 2015-09-15 삼성전자주식회사 전자 장치의 사용자 입력 검출 방법 및 그 전자 장치
US20150253946A1 (en) * 2014-03-10 2015-09-10 Verizon Patent And Licensing Inc. Method and apparatus for transferring files based on user interaction
JP6237363B2 (ja) * 2014-03-14 2017-11-29 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
US9575508B2 (en) * 2014-04-21 2017-02-21 Apple Inc. Impact and contactless gesture inputs for docking stations
KR102244856B1 (ko) * 2014-04-22 2021-04-27 삼성전자 주식회사 웨어러블 장치와의 사용자 인터랙션을 제공하는 방법 및 이를 수행하는 웨어러블 장치
US10365721B2 (en) * 2014-05-06 2019-07-30 Symbol Technologies, Llc Apparatus and method for performing a variable data capture process
JP6264198B2 (ja) * 2014-05-30 2018-01-24 京セラドキュメントソリューションズ株式会社 携帯端末、選択処理方法
US20150365395A1 (en) * 2014-06-17 2015-12-17 Whatagoober, Llc Social content integration
KR102304979B1 (ko) * 2014-06-19 2021-09-27 삼성전자주식회사 전자 장치 및 전자 장치에서 페어링 방법
KR102176365B1 (ko) * 2014-07-14 2020-11-09 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN105282375B (zh) * 2014-07-24 2019-12-31 钰立微电子股份有限公司 附着式立体扫描模块
KR102407623B1 (ko) * 2014-09-29 2022-06-10 삼성전자주식회사 사용자 단말 장치 및 이의 제어 방법
KR102347249B1 (ko) 2014-10-21 2022-01-04 삼성전자주식회사 외부 물체의 움직임과 연관된 이벤트에 응답하여 화면을 디스플레이하는 장치 및 방법
WO2016108308A1 (ko) * 2014-12-30 2016-07-07 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
CN104750356A (zh) * 2015-03-02 2015-07-01 深圳市金立通信设备有限公司 一种移动终端
CN104750412A (zh) * 2015-03-02 2015-07-01 深圳市金立通信设备有限公司 一种显示界面的操控方法
CN104866188A (zh) * 2015-03-02 2015-08-26 深圳市金立通信设备有限公司 一种显示界面的调整方法
KR20160135476A (ko) * 2015-05-18 2016-11-28 삼성전자주식회사 전자 장치 및 그의 카메라 제어 방법
KR102324659B1 (ko) * 2015-05-29 2021-11-10 엘지디스플레이 주식회사 지문센서 일체형 터치 스크린 장치와 그 구동방법
CN105072336A (zh) * 2015-07-31 2015-11-18 小米科技有限责任公司 调节拍摄功能的控制方法、装置和设备
WO2017030212A1 (ko) * 2015-08-18 2017-02-23 엘지전자(주) 이동 단말기 및 그 제어 방법
CN105159559A (zh) * 2015-08-28 2015-12-16 小米科技有限责任公司 移动终端控制的方法及移动终端
CN105162982A (zh) * 2015-09-17 2015-12-16 小米科技有限责任公司 接听扩展功能显示方法及装置
CN106598447A (zh) * 2015-10-19 2017-04-26 中兴通讯股份有限公司 字符的输出方法及装置
CN105472424A (zh) * 2015-11-23 2016-04-06 晨星半导体股份有限公司 终端设备及其遥控方法
KR20170084558A (ko) * 2016-01-12 2017-07-20 삼성전자주식회사 전자 장치 및 그의 동작 방법
CN105718180B (zh) * 2016-01-20 2019-06-14 Oppo广东移动通信有限公司 一种页面信息显示方式的调整方法及装置
CN105718165B (zh) * 2016-01-20 2019-02-12 Oppo广东移动通信有限公司 一种终端后台应用的启动方法及装置
US11176930B1 (en) 2016-03-28 2021-11-16 Amazon Technologies, Inc. Storing audio commands for time-delayed execution
CN106125912A (zh) * 2016-06-16 2016-11-16 深圳市金立通信设备有限公司 一种字符操作方法及终端
DE102016125044B4 (de) * 2016-12-20 2018-11-15 Infineon Technologies Ag Sensorsteuerung, Sensorsignalempfänger und Sensorsystem
CN106850956A (zh) * 2016-12-21 2017-06-13 珠海市魅族科技有限公司 信息删除方法和装置
US10940384B2 (en) * 2017-06-06 2021-03-09 Invensense, Inc. Inciting user action for motion sensor calibration
KR102379190B1 (ko) * 2017-08-29 2022-03-25 엘지디스플레이 주식회사 디스플레이 장치와 그 구동 방법 및 멀티 디스플레이 시스템
US11126258B2 (en) * 2017-10-14 2021-09-21 Qualcomm Incorporated Managing and mapping multi-sided touch
US11089446B2 (en) * 2018-01-11 2021-08-10 Htc Corporation Portable electronic device, operating method for the same, and non-transitory computer readable recording medium
KR101875425B1 (ko) * 2018-03-19 2018-07-09 이민영 증강현실을 이용한 골프 학습 시스템
GB2572437A (en) * 2018-03-29 2019-10-02 Francisca Jones Maria Display apparatus
KR102607788B1 (ko) * 2018-10-26 2023-11-30 삼성전자주식회사 외부 충격의 영향을 표시하는 방법 및 그 전자 장치
KR102607790B1 (ko) * 2018-11-15 2023-11-30 삼성전자주식회사 외부 충격을 감지하는 방법 및 그 전자 장치
WO2021261748A1 (ko) * 2020-06-24 2021-12-30 엘지전자 주식회사 슈즈 케어 장치 및 방법
KR20220079172A (ko) * 2020-12-04 2022-06-13 삼성전자주식회사 손 씻는 행동을 검출하는 방법 및 그 전자 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084329A (ja) 1999-09-16 2001-03-30 Casio Comput Co Ltd 携帯型情報処理装置およびそのプログラム記録媒体

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5767457A (en) * 1995-11-13 1998-06-16 Cirque Corporation Apparatus and method for audible feedback from input device
US6268857B1 (en) * 1997-08-29 2001-07-31 Xerox Corporation Computer user interface using a physical manipulatory grammar
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US7145454B2 (en) * 2004-01-26 2006-12-05 Nokia Corporation Method, apparatus and computer program product for intuitive energy management of a short-range communication transceiver associated with a mobile terminal
US7176888B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
JP2007286812A (ja) 2006-04-14 2007-11-01 Sony Corp 携帯型電子機器、ユーザインターフェイス制御方法、プログラム
KR101203749B1 (ko) 2006-06-05 2012-11-21 에스케이텔레콤 주식회사 핸드헬링 메시지 입력 방법과 이에 적용되는 단말기
KR100866917B1 (ko) 2006-08-23 2008-11-04 (주) 아모센스 입력장치 및 이를 이용한 이동 단말
US8125312B2 (en) * 2006-12-08 2012-02-28 Research In Motion Limited System and method for locking and unlocking access to an electronic device
US20090265671A1 (en) * 2008-04-21 2009-10-22 Invensense Mobile devices with motion gesture recognition
US8205157B2 (en) * 2008-03-04 2012-06-19 Apple Inc. Methods and graphical user interfaces for conducting searches on a portable multifunction device
US9513704B2 (en) * 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
KR100989624B1 (ko) 2008-09-18 2010-10-26 오광만 이동통신 단말기의 이모티콘 문자 입력 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084329A (ja) 1999-09-16 2001-03-30 Casio Comput Co Ltd 携帯型情報処理装置およびそのプログラム記録媒体

Also Published As

Publication number Publication date
US9626519B2 (en) 2017-04-18
US10261603B2 (en) 2019-04-16
US8866734B2 (en) 2014-10-21
KR20100052378A (ko) 2010-05-19
US20150040211A1 (en) 2015-02-05
US20110053641A1 (en) 2011-03-03
US20170192530A1 (en) 2017-07-06

Similar Documents

Publication Publication Date Title
KR101737829B1 (ko) 휴대 단말기의 모션 입력 장치 및 그의 운용 방법
US11875027B2 (en) Contextual user interface
CN104967900B (zh) 一种生成视频的方法和装置
US9495015B1 (en) Method and apparatus for utilizing motion user interface to determine command availability
KR101668138B1 (ko) 자동으로 동작 모드를 결정하는 이동 장치
RU2604990C2 (ru) Способ действия терминала на основе множественных вводов и поддерживающий его портативный терминал
US20160328134A1 (en) Method and Terminal for Playing Media
CN110740262A (zh) 背景音乐的添加方法、装置及电子设备
CN110740259A (zh) 视频处理方法及电子设备
EP4068754A1 (en) Video display method, electronic device and medium
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
KR20150144668A (ko) 이동 단말기 및 그 제어 방법
WO2018076380A1 (zh) 在电子设备中生成视频缩略图的方法及电子设备
CN108476339B (zh) 一种遥控方法和终端
KR101530546B1 (ko) 휴대 단말기의 입력 장치 및 방법
CN112068762A (zh) 应用程序的界面显示方法、装置、设备及介质
CN111190515A (zh) 快捷面板操作方法、设备及可读存储介质
CN110737784A (zh) 应用程序的控制方法及电子设备
KR20100086161A (ko) 바람 인식을 통한 동작 제어 장치 및 방법
EP4125274A1 (en) Method and apparatus for playing videos
CN108650554A (zh) 一种多媒体文件播放控制方法及移动终端
CN112492096A (zh) 一种视频播放控制方法、装置、电子设备及存储介质
TW202017627A (zh) 互動式遊戲系統
US11606454B2 (en) Methods and devices for precluding execution of functions associated with touch actuators
CN112333318B (zh) 按键功能的响应方法、装置及电子设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
AMND Amendment
AMND Amendment
J201 Request for trial against refusal decision
E902 Notification of reason for refusal