KR20110031797A - 휴대 단말기의 입력 장치 및 방법 - Google Patents

휴대 단말기의 입력 장치 및 방법 Download PDF

Info

Publication number
KR20110031797A
KR20110031797A KR1020090089202A KR20090089202A KR20110031797A KR 20110031797 A KR20110031797 A KR 20110031797A KR 1020090089202 A KR1020090089202 A KR 1020090089202A KR 20090089202 A KR20090089202 A KR 20090089202A KR 20110031797 A KR20110031797 A KR 20110031797A
Authority
KR
South Korea
Prior art keywords
state
pressure
squeeze
command
terminal
Prior art date
Application number
KR1020090089202A
Other languages
English (en)
Inventor
김진용
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090089202A priority Critical patent/KR20110031797A/ko
Priority to US12/854,413 priority patent/US20110069024A1/en
Priority to AU2010296260A priority patent/AU2010296260A1/en
Priority to PCT/KR2010/006134 priority patent/WO2011034310A2/en
Priority to CN2010800418050A priority patent/CN102498674A/zh
Priority to EP10817379A priority patent/EP2481159A2/en
Priority to JP2012529663A priority patent/JP2013505495A/ja
Publication of KR20110031797A publication Critical patent/KR20110031797A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems

Abstract

본 발명은 휴대 단말기의 입력 장치 및 방법에 관한 것이다.
이러한 본 발명은 휴대 단말기의 외관에 배치된 센서부에 가해지는 물리력이 기 설정된 압력 값 이하인 경우, 그립 상태로 판별하고, 상기 물리력이 기 설정된 압력 값 이상인 경우 스퀴즈 상태로 판별하며, 판별된 상태에 따른 명령어를 생성하여 현재 활성화되고 있는 응용 프로그램에 적용하는 장치 및 방법을 개시한다.
휴대 단말기, 그립, 스퀴즈, 음성 인식, 터치

Description

휴대 단말기의 입력 장치 및 방법{Input Device For Portable Device And Method including the same}
본 발명은 휴대 단말기에 관한 것으로, 특히 휴대 단말기 일측에 가해지는 압력에 따라 특정 입력 신호를 생성할 수 있도록 지원하며, 다른 입력 장치 예를 들면, 터치 입력 장치와 음성 인식 장치와의 연계를 통하여 보다 다양한 입력 신호를 생성할 수 있도록 지원하는 휴대 단말기의 입력 장치 및 방법에 관한 것이다.
휴대 단말기는 이동성을 기반으로 통화 기능을 지원하는 단말기로서, 그 이용의 편리성과 휴대의 용이성 등으로 인하여 매우 폭넓은 분야에서 이용되고 있다. 이러한 휴대 단말기는 사용자 기능 제공을 위하여 다양한 입력 방식을 제공하고 있다. 예를 들어, 종래 휴대 단말기는 터치 패널과 표시부를 포함하는 터치스크린을 제공함으로써, 사용자가 표시부에 출력되는 특정 이미지를 터치하는 동작을 터치 패널에서 처리하여, 해당 터치 이벤트를 생성하고, 이를 기반으로 사용자 기능에 대응하는 응용 프로그램을 제어하고 있다. 그러나 이러한 종래 휴대 단말기의 터치스크린 기능은 표시부를 확인할 수 있는 상태에서 사용 가능하며, 터치 패널에서 처리하는 터치 이벤트가 정교하지 못하여, 사용자가 요구하는 정확한 터치 이벤트 생성 및 적용이 어려운 실정이다. 또한, 터치스크린을 통하여 제공되는 입력 신호 생성 장치 및 방법은 터치스크린이 활성화된 상태에서 터치 패널에 터치를 제공하여야 하기 때문에 다양한 입력 신호 생성의 한계가 있다. 이에 보다 다양한 장치 및 방법을 이용한 입력 신호 생성 방식의 제안이 요구되고 있다.
따라서 본 발명의 목적은 휴대 단말기 일측에 가해지는 압력과 압력의 크기에 따라 다양한 입력 신호를 생성하고, 생성된 입력 신호를 기반으로 응용 프로그램을 운용함은 물론, 다른 기능들 예를 들면, 터치 기능과 음성 인식 기능과의 혼용을 통하여 보다 다양한 응용 프로그램 운용 방법을 지원할 수 있는 휴대 단말기의 입력 장치 및 방법을 제공함에 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 입력 장치는, 단말기에 가해지는 물리력에 따른 압력을 검출하는 센서부와; 상기 압력이 기 설정된 값 이하인 경우, 그립 상태로 판별하고, 이상인 경우 스퀴즈 상태로 판별한 후, 상기 그립 상태 또는 스퀴즈 상태에 따른 명령어를 생성하며, 생성된 명령어를 현재 활성화되고 있는 응용 프로그램에 적용하도록 제어하는 제어부와; 상기 응용 프로그램을 저장하는 저장부;를 포함하는 것을 특징으로 한다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 입력 방법은, 단말기에 가해지는 물리력에 따른 압력을 검출하는 과정과; 상기 압력이 기 설정된 값 이하인 경우, 그립 상태로 판별하고, 이상인 경우 스퀴즈 상태로 판별하는 판별 과정과; 상기 그립 상태 또는 스퀴즈 상태에 따른 명령어를 생성하는 과정과; 상기 생성된 명령어를 현재 활성화되고 있는 응용 프로그 램에 적용하는 적용 과정;을 포함하는 것을 특징으로 한다.
본 발명의 실시 예에 따른 휴대 단말기의 입력 장치 및 방법에 따르면, 센서가 배치된 휴대 단말기 일측에 가해지는 압력의 크기에 따라 다양한 입력 신호를 생성할 수 있도록 지원하며 다른 기능들 예를 들면, 터치 기능 및 음성 인식 기능을 혼용하여 보다 다양한 입력 신호를 생성할 수 있음으로 해서 휴대 단말기의 운용을 보다 편리하게 지원하며 사용자 기능을 보다 역동적으로 운용할 수 있다.
이하, 본 발명에 따른 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명의 실시 예에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.
이하 설명에서, 그립(Grip) 상태는 단말기 사용자가 센서부가 마련된 휴대 단말기 일측 예를 들면 외관을 기 설정된 압력 값 이하로 잡는 상태를 의미하며, 스퀴즈(Squeeze) 상태는 그립 상태에서 단말기 사용자가 기 설정된 압력 값 이상의 압력을 센서부에 제공하는 상태를 의미한다. 예를 들면, 그립 상태는 센서부에 기 설정된 압력 값이 1N 이하의 값을 제공하는 상태가 될 수 있으며, 스퀴즈 상태는 상기 그립 상태를 정의하는 압력 값보다 높은 상태의 압력 값 예를 들면, 1.5N, 2N, 3N 등의 압력이 제공되는 상태로 이해할 수 있을 것이다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기 구성을 개략적으로 나타낸 블록도이다.
상기 도 1을 참조하면, 본 발명의 휴대 단말기(100)는 무선주파수부(110), 입력부(120), 오디오 처리부(130), 터치스크린(140), 저장부(150), 센서부(170) 및 제어부(160)의 구성을 포함할 수 있다.
이러한 구성을 가지는 본 발명의 휴대 단말기(100)는 상기 센서부(170)에 가해지는 단말기 사용자의 압력에 따라 센서 신호를 생성하여 제어부(160)에 전달하고, 제어부(160)는 전달되는 센서 신호의 형태에 따라, 현재 활성화되고 있는 응용 프로그램에 적용될 명령어를 생성한다. 그리고 상기 휴대 단말기(100)는 생성된 명령어에 따라 상기 응용 프로그램을 운용하도록 제어한다. 또한, 상기 휴대 단말기(100)는 상기 센서 신호와 단말기의 다른 기능 예를 들면 터치 기능과 음성 인식 기능으로부터 생성된 터치 신호 및 음성 인식 신호를 혼합하여 새로운 명령어를 생성하고, 생성된 명령어를 기반으로 응용 프로그램을 운용하도록 제어할 수 있다. 여기서, 상기 센서부(170)는 사용자의 손 등으로부터 제공되는 압력을 기반으로 센서 신호를 생성할 수 있다. 이하 휴대 단말기(100)의 각 구성에 대하여 보다 상세히 설명하기로 한다.
상기 무선주파수부(110)는 음성 통화를 위한 통신 채널의 형성 및 영상 등의 데이터 전송을 위한 통신 채널 등을 제어부(160)의 제어 하에 수행한다. 즉, 무선주파수부(110)는 음성 통화 채널, 데이터 통신 채널 및 화상 통화 채널을 이동통신 시스템 간에 형성한다. 이를 위하여 상기 무선주파수부(110)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선주파수 송신부와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 무선주파수 수신부 등을 포함할 수 있다. 이러한 무선주파수부(110)는 센서부(170)로부터 생성된 센서 신호에 따라 활성화되는 응용 프로그램에 의하여 운용될 수 있다. 예를 들면, 센서부(170)가 마련된 휴대 단말기의 외관을 단말기 사용자가 파지(Grip)하는 경우, 무선주파수부(110)는 활성화되어 기 설정된 전화번호를 기반으로 통화 연결을 시도하도록 운영될 수 있다. 또한 통화 호 수신에 따라 무선주파수부(110)가 활성화된 상태에서 단말기 사용자가 휴대 단말기를 스퀴즈 상태로 변경 즉, 휴대 단말기를 일정 압력 이상으로 파지하는 경우, 무선주파수부(110)는 수신된 통화 호를 기반으로 통화 채널을 형성할 수 있다. 또한, 상기 무선주파수부(110)는 그립 상태 또는 스퀴즈 상태에 따라 생성되는 그립 센서 신호 또는 스퀴즈 센서 신호와 터치 패널(143)이 생성하는 터치 이벤트에 따라 제어부(160) 제어 하에 선택될 수 있으며, 그립 센서 신호 또는 스퀴즈 센서 신호와 음성 인식에 의한 음성 인식 신호를 기반으로 활성화될 수 도 있다. 즉, 상기 무선주파수부(110)는 그립 센서 신호, 스퀴즈 센서 신호, 터치 이벤트 및 음성 인식 신호 중 적어도 하나를 기반으로 활성화 및 비활성화될 수 있다.
상기 입력부(120)는 숫자 또는 문자 정보를 입력받고 각종 기능들을 설정하기 위한 다수의 입력키 및 기능키들을 포함한다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이드 키 및 단축키 등을 포함할 수 있다. 또한 상기 입력부(120)는 사용자 설정 및 휴대 단말기(100)의 기능 제어와 관련한 키 신호를 생성하고 상기 제어부(160)로 전달한다. 이러한 입력부(120)는 다수개의 키를 포함하는 쿼티 키패드, 3*4 키패드, 4*3 키패드 등으로 구현될 수 있다. 이러한 입력부(120)는 상기 휴대 단말기의 터치스크린(140)이 풀 터치스크린 형태로 지원되는 경우, 상기 터치스크린(140)에 출력되는 키패드 맵과 터치 패널(143)로 대체될 수 있다. 상기 입력부(120)에서 생성되는 입력 신호는 본 발명의 센서부(170)에서 생성되는 신호 즉, 그립 센서 신호 또는 스퀴즈 센서 신호와 혼용되어 현재 활성화되고 있는 응용 프로그램의 특정 기능 활성화를 위한 명령어 생성을 위한 신호로서 이용될 수 있다.
상기 오디오 처리부(130)는 상기 통화 시 송수신 되는 오디오 데이터를 재생하기 위한 스피커(SPK)와, 통화 시 사용자의 음성 또는 기타 오디오 신호를 수집하기 위한 마이크(MIC)를 포함한다. 상기 마이크(MIC)가 수집한 음성 신호는 음성 인식 기능 설정 여부에 따라 제어부(160)에서 음성 인식될 수 있다. 음성 인식된 음성 인식 신호는 본 발명의 센서부(170)에서 생성되는 그립 센서 신호 및 스퀴즈 센서 신호와 혼용되어 현재 활성화되고 있는 응용 프로그램의 특정 기능 활성화를 위한 명령어 생성을 위해 이용될 수 있다. 그리고 상기 스피커(SPK)는 제어부(160) 제어 하에 저장부(150)에 저장된 특정 음성 정보를 오디오 신호로서 출력할 수 있다. 예를 들어, 특정 사용자 기능을 설명하기 위한 음성 정보가 마련되어 있으며, 그립 센서 신호 또는 스퀴즈 센서 신호가 생성되는 경우, 상기 스피커(SPK)는 해당 센서 신호를 기반으로 운용될 수 있는 사용자 기능 설명을 위한 음성 정보를 오디오 신호로 변환하여 출력할 수 있다.
상기 터치스크린(140)은 표시 패널(141)과 터치 패널(143)을 포함한다. 이러한 터치스크린(140)은 표시 패널(141) 전면에 터치 패널(143)이 배치되는 구조를 가질 수 있다. 상기 터치스크린(140)의 크기는 터치 패널(143)의 크기로 결정될 수 있다.
상기 표시 패널(141)은 휴대 단말기(100)의 각종 메뉴를 비롯하여 사용자가 입력한 정보 또는 사용자에게 제공하는 정보를 표시한다. 즉, 표시 패널(141)은 휴대 단말기(100) 이용에 따른 다양한 화면 예를 들면, 대기화면, 메뉴 화면, 메시지 작성 화면, 통화 화면 등을 제공할 수 있다. 이러한 표시 패널(141)은 사용자 기능에 대응하는 아이콘이나 이미지 등을 출력할 수 도 있다. 예를 들어, 상기 휴대 단말기(100)가 위젯 기능과, 적어도 하나의 메뉴 기능을 제공하는 경우, 상기 표시 패널(141)은 위젯 기능에 대응하는 적어도 하나의 위젯 아이콘과, 상기 메뉴 기능에 대응하는 적어도 하나의 이미지 또는 아이콘 등을 출력할 수 있다. 한편, 상기 표시 패널(141)은 액정 표시 장치(Liquid Crystal Display), OLED(Organic Light Emitted Diode) 등으로 형성될 수 있다. 이러한 표시 패널(141)은 터치 패널(143) 의 크기에 비하여 작은 크기를 가질 수 있으며, 터치 패널(143) 아래에 배치될 수 있다. 특히, 본 발명의 표시 패널(141)은 그립 센서 신호 또는 스퀴즈 센서 신호에 따라 특정 기능이 적용되는 표시 영역이 구분될 수 있다. 이에 대한 설명은 후술하는 도면을 참조하여 보다 상세히 설명하기로 한다.
상기 터치 패널(143)은 상기 표시 패널(141)을 덮도록 배치되며 물체의 접촉 또는 물체의 접근 거리에 따라 터치 이벤트를 생성하고, 생성된 터치 이벤트를 제어부(160)에 전달할 수 있다. 이때, 터치 패널(143)은 터치 패널(143) 상에서 발생하는 터치 이벤트에 대하여 해당 위치 정보와 터치 이벤트의 종류에 대한 정보를 제어부(160)에 전달한다. 제어부(160)는 터치 패널(143)로부터 전달되는 터치 이벤트로부터 위치 정보와 터치 이벤트 종류를 확인하고, 해당 위치에 매핑된 표시 패널(141)에 출력된 특정 이미지를 확인한 이후, 이미지에 링크되어 있는 사용자 기능을 활성화하도록 제어할 수 있다. 특히, 본 발명의 터치 패널(143)에서 생성된 터치 이벤트는 센서부(170)에서 생성되는 그립 센서 신호 또는 스퀴즈 센서 신호 중 적어도 하나와 혼용되어 휴대 단말기 운용에 필요한 다양한 명령어 생성에 이용될 수 있다.
상기 저장부(150)는 본 발명의 실시 예에 따른 기능 동작에 필요한 응용 프로그램을 비롯하여, 상기 휴대 단말기가 터치스크린으로 형성되는 경우, 터치스크린 운용을 위한 키 맵이나 메뉴 맵 등을 저장할 수 있다. 여기서 키 맵 및 메뉴 맵은 각각 다양한 형태가 될 수 있다. 즉, 키 맵은 키보드 맵이나, 3*4 키 맵, 쿼티 키 맵 등이 될 수 있고, 현재 활성화되고 있는 응용 프로그램의 운용 제어를 위 한 제어키 맵이 될 수 도 있다. 또한, 메뉴 맵은 현재 활성화되고 있는 응용 프로그램 운용 제어를 위한 메뉴 맵이 될 수 도 있고, 휴대 단말기가 제공하는 다양한 메뉴를 항목으로 가지는 메뉴 맵이 될 수 도 있다. 이러한 상기 저장부(150)는 크게 프로그램 영역과 데이터 영역을 포함할 수 있다.
상기 프로그램 영역은 휴대 단말기(100)의 부팅 및 상술한 각 구성의 운용을 위한 운영체제(OS, Operating System), 다양한 파일을 재생하기 위한 응용 프로그램 예를 들면, 상기 휴대 단말기(100)의 기능 지원 여부에 따른 통화기능 지원을 위한 응용 프로그램, 인터넷 서버에 접속하기 위한 웹 브라우저, 기타 음원을 재생하기 위한 MP3 응용 프로그램, 사진 등을 재생하기 위한 이미지 출력 응용 프로그램, 동영상 재생 응용 프로그램 등을 저장할 수 있다. 특히, 본 발명의 프로그램 영역은 센서부 운용을 위한 센서 운용 프로그램, 터치 기능 지원을 위한 터치 운용 프로그램, 음성 인식 기능 지원을 위한 음성 인식 운용 프로그램, 각 운용 프로그램을 기반으로 처리되는 신호를 현재 활성화되고 있는 응용 프로그램에 적용하기 위한 UI(User Interface) 운용 프로그램을 포함할 수 있다. 상기 각 프로그램들은 휴대 단말기 활성화 시에 제어부(160)에 로드되어 각 기능 지원을 위한 처리 유닛으로서 동작할 수 있다. 이를 보다 상세히 설명하면, 상기 센서 운용 프로그램은 그립 UI 처리 모듈 및 스퀴즈 UI 처리 모듈을 포함하며, 센서부(170) 운용에 필요한 전원 공급과 센서부(170)에서 발생하는 센서 신호의 전달을 제어하는 루틴을 포함할 수 있다. 상기 터치 운용 프로그램은 터치 UI 처리 모듈을 포함하며, 현재 활성화되고 있는 응용 프로그램에 의하여 출력되고 있는 특정 이미지들과 터치 패 널과의 매핑 및 터치 패널 상에서 발생하는 터치 이벤트 인식 등을 처리할 수 있는 루틴을 포함할 수 있다. 상기 음성 인식 운용 프로그램은 보이스 UI 처리 모듈을 포함하며, 사용자 요청에 따라 마이크(MIC)가 수집한 음성을 기 저장된 음성 인식 데이터베이스를 기반으로 음성 인식하는 루틴을 포함할 수 있다. 상기 UI 처리 운용 프로그램은 UI 처리 모듈과 명령어 생성 모듈을 포함하며, UI 처리 모듈은 상술한 그립 UI 처리 모듈, 스퀴즈 UI 처리 모듈, 터치 UI 처리 모듈, 보이스 UI 처리 모듈들 활성화에 따라 발생하는 신호들을 명령어 생성부에 전달하는 루틴을 포함한다. 상기 명령어 생성 모듈은 UI 처리 모듈로부터 전달되는 신호를 명령어 테이블을 기반으로 특정 명령어로 변환한 후, 이를 응용 프로그램에 적용하는 루틴을 포함할 수 있다.
상기 데이터 영역은 휴대 단말기(100) 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 폰 북 정보, 다양한 컨텐츠들을 저장할 수 있다. 또한, 상기 데이터 영역은 터치스크린(140)을 통하여 입력되는 사용자 입력을 저장할 수 있다. 특히, 본 발명의 데이터 영역은 음성 인식된 단어들을 인식하기 위한 음성 인식 DB(Data Base)를 포함할 수 있으며, 수집되는 다양한 신호들을 특정 명령어로 변환하는 기준이 되는 명령어 테이블을 저장한다.
상기 센서부(170)는 휴대 단말기(100)의 일측에 형성되는 적어도 하나의 압전 센서 또는 피에조(Piezo) 센서로 구성된다. 예를 들면, 상기 센서부(170)는 휴대 단말기의 측면 중 터치스크린(140)의 전면을 기준으로 좌우측에 각각 배치되는 피에조 센서들의 집합이 될 수 있으며, 이때, 좌측 또는 우측에 각각 일정 개수씩 배치되어 단말기가 도 2에 도시된 바와 같이 사용자의 왼손 또는 오른손에 의하여 파지되는 경우, 각 손가락들이 놓이는 위치에 따라 발생하는 압력을 검출할 수 있다. 도면을 참조하면, 상기 센서부(170)는 오른손 또는 왼손 파지를 각각 검출할 수 있도록 좌측면에 일정 간격을 가지며 배치되는 4개의 피에조 센서, 우측면에 일정 간격을 가지며 배치되는 4개의 피에조 센서 그룹이 될 수 있을 것이다. 이에 따라, 상기 센서부(170)는 손가락들이 놓임에 의하여 발생하는 그립 상태를 검출할 수 있으며, 추후 단말기 사용자가 손가락들에 일정 이상의 힘을 가하는 경우 스퀴즈 상태를 검출할 수 있다. 상기 센서부(170)는 스퀴즈 상태에 있어서, 일정 이상의 힘에 대하여 단계적으로 검출할 수 있다. 예를 들어, 상기 센서부(170)는 손가락들 전체에 1N의 힘이 가해지는 경우, 제1 스퀴즈 상태를 검출할 수 있고, 손가락들 전체에 2N의 힘이 가해지는 경우, 제2 스퀴즈 상태를 검출할 수 있다. 실질적으로, 단말기 사용자가 정확하게 1N 또는 2N 등의 힘을 가할 수 없으므로, 상기 센서부(170)는 일정 범위 내에 포함되는 압력이 검출되는 경우, 해당 범위로 설정된 적어도 하나의 스퀴즈 상태를 검출할 수 있다. 상기 센서부(170)는 단말기 사용자가 가하는 힘에 의하여 그립 상태 및 적어도 하나의 스퀴즈 상태가 발생하게 되면, 해당 상태에 따른 그립 센서 신호 또는 적어도 하나의 스퀴즈 센서 신호를 생성하고, 이를 제어부(160)에 전달할 수 있다.
상기 제어부(160)는 상기 휴대 단말기(100)의 각 구성에 전원 공급을 제어하여 초기화 과정을 수행하도록 지원하며, 초기화 과정이 완료되면 각 구성에 대하여 본 발명의 그립 상태 및 스퀴즈 상태에 따른 응용 프로그램 운용을 제어하고, 그립 상태 또는 스퀴즈 상태로부터 발생하는 센서 신호와 터치 기능 및 음성 인식 기능으로부터 발생하는 신호들을 복합적으로 운용할 수 있도록 지원할 수 있다. 이를 위하여, 상기 제어부(160)는 도 3에 도시된 바와 같이, UI 처리부(200), 명령어 테이블(161), 명령어 생성부(163), 응용 프로그램(165)을 포함할 수 있다. 이러한 각 구성은 저장부(150)에 모듈이나 루틴 등의 형태로 저장되어 있다가 사용자의 요청 또는 단말기의 모드 설정에 따라 제어부(160)에 로드되어 해당 기능 지원을 수행하게 된다.
상기 응용 프로그램(165)은 단말기 사용자가 호출하는 사용자 기능에 대응하는 응용 프로그램으로서 예를 들면, 폰 북 기능, 카메라 기능, 통화 기능, 파일 재생 기능, 파일 검색 기능, 웹 접속 기능 등 각 기능에 따른 프로그램 중 적어도 하나에 해당할 수 있다. 이러한 응용 프로그램(165)은 입력부(120)로부터 입력되는 입력 신호, 터치스크린(140)으로부터 전달되는 터치 이벤트, 음성 인식 기능으로부터 생성된 음성 인식 신호 등에 따라 특정 기능이 수행되도록 제어하며, 특히, 단말기 사용자가 외관을 쥐는 형태에 따라 발생하는 그립 상태 또는 스퀴즈 상태에 따라 특정 기능을 수행할 수 있다. 또한, 상기 응용 프로그램(165)은 상기 센서 신호와 터치 이벤트 및 음성 인식 신호, 입력부(120)로부터의 입력 신호에 따른 복합적인 기능을 수행할 수 있다.
상기 명령어 테이블(161)은 저장부(150)에 저장되어 있는 상태에서 제어부(160) 요청에 따라 로드될 수 있으며, 제어부(160) 설계에 따라 저장부(150)에 저장된 상태를 유지하며, 명령어 생성부(163)에 의해 참조될 수 있다. 이러한 명 령어 테이블(161)은 그립 센서 신호, 스퀴즈 센서 신호, 터치 이벤트, 음성 인식 신호, 입력부(120)로부터의 입력 신호들이 각각 독립적으로, 또는 복합적으로 생성되는 경우, 그에 따라 현재 활성화되고 있는 응용 프로그램(165) 운용에 필요한 명령어를 생성할 수 있는 기준을 제공한다. 예를 들면, 상기 명령어 테이블(161)은 그립 센서 신호가 발생하는 경우, 터치 패널(143)이 락(Lock) 상태임을 알리도록 작성된 명령어, 스퀴즈 센서 신호가 발생하는 경우 락 상태를 언 락(Unlock) 상태로 변경되도록 작성된 명령어, 스퀴즈 센서 신호가 발생된 상태에서 터치 이벤트 또는 음성 인식 신호 입력에 따른 특정 기능 수행을 위해 작성된 명령어 등을 포함할 수 있다.
상기 명령어 생성부(163)는 상기 UI 처리부(200)가 전달하는 신호를 기준으로 명령어 테이블(161)을 참조하여 응용 프로그램(165)을 운용할 수 있도록 지원하는 특정 명령어를 생성하고, 생성된 명령어를 응용 프로그램(165)에 적용하도록 제어한다.
상기 UI 처리부(200)는 단말기 설정이나 사용자 요청에 따라 그립 UI 처리부(210), 스퀴즈 UI 처리부(220), 터치 UI 처리부(230), 보이스 UI 처리부(240) 중 적어도 하나를 저장부(150)에 저장된 운용 프로그램을 기반으로 구성한다. 그리고 상기 UI 처리부(200)는 각 처리부들을 단말기의 하드웨어 구성과 연결되도록 구성하고, 하드웨어 구성에서 발생하는 물리력 또는 오디오 신호를 일정 신호로 변경하여 명령어 생성부(163)에 전달할 수 있다.
이를 보다 상세히 설명하면, 그립 UI 처리부(210)와 스퀴즈 UI 처리부(220) 는 센서부(170)로부터 센서 신호가 전달되면, 기 설정된 기준을 참조하여 해당 센서 신호가 그립 상태를 지시하는지, 스퀴즈 상태를 지시하는지를 판단할 수 있으며, 스퀴즈 상태 중에서도 어떠한 단계에 해당하는지를 판단할 수 있다. 그리고 상기 그립 UI 처리부(210)와 스퀴즈 UI 처리부(220)는 각 판단에 따른 일정 신호를 생성하고, 이를 명령어 생성부(163)에 전달할 수 있다. 여기서 상기 UI 처리부(200)는 상기 각 처리부에서 동시에 또는 일정 시간 범위 이내에 발생하는 신호들을 하나의 명령어를 생성하기 위한 신호로서 판단할 수 있으며, 이를 명령어 생성부(163)에 전달할 수 있다. 그러면, 상기 명령어 생성부(163)는 UI 처리부(200)로부터 전달되는 신호 또는 신호들이 어떠한 명령어를 위한 신호인지를 명령어 테이블(161)을 기준으로 판단하고, 이를 기준으로 앞서 설명한 바와 같이 응용 프로그램(165) 운용을 제어할 수 있다.
상기 터치 UI 처리부(230)는 단말기 설정 및 사용자 요청에 따라 터치 패널(143)을 활성화하도록 제어하고, 터치 패널(143)로부터 발생하는 터치 이벤트를 기준으로, 터치 다운 이벤트, 터치 업 이벤트, 터치 드래그 이벤트, 플립 이벤트 등을 판별한다. 그리고 상기 터치 UI 처리부(230)는 상기 각 이벤트 발생을 명령어 생성부(163)에 전달할 수 있다. 이 과정에서 다른 UI 처리부에서 특정 신호가 발생하는 경우, 상기 터치 UI 처리부(230)가 전달하는 터치 이벤트는 UI 처리부(200)의 제어에 따라 다른 특정 신호와 함께 명령어 생성부(163)에 전달될 수 있다.
상기 보이스 UI 처리부(240)는 마이크(MIC)가 수집하는 음성을 저장부(150) 에 저장된 음성 인식 DB를 기반으로 음성 인식하도록 제어한다. 그리고 상기 보이스 UI 처리부(240)는 인식된 음성 인식 신호를 명령어 생성부(163)에 전달한다. 이러한 상기 보이스 UI 처리부(240)는 다양한 음성 인식 알고리즘을 운용할 수 있다. 예를 들어, 상기 보이스 UI 처리부(240)가 적용하는 음성 인식 알고리즘에서 마이크(MIC)가 수신한 음성 신호는 16KHz로 샘플링 되고, 16bit로 양자화하여 저장될 수 있다. 그리고 상기 양자화된 음성 데이터는 일정 값의 전달함수로 사전 강조되고 25ms의 해밍 윈도우를 곱하여 10ms씩 이동하면서 분석될 수 있다. 이를 통해 음성 특징 파라미터는 12차 LPC-MEL spectrum계수와 정규화 된 대수 에너지에 1차 및 2차의 차분 성분을 포함하여 총 39차의 특징 파라미터를 적용할 수 있다. 이러한 특징 파라미터가 적용되는 음성 인식 모델은 모델의 각 상태위치마다 음소결정트리를 생성하고, 학습 음성 데이터를 이용하여 SSS(Successive State Splitting : 이하 SSS)에 의해 문맥의존 음향모델의 상태열을 학습하는 방법을 적용할 수 있다. 이 방법은 상태분할을 수행하는데 속도가 빠르기 때문에 SSS에 의해 분할할 상태를 선택하여 분할하는 동시에 전체 분할 가능한 상태에 대해 상태분할을 수행하고 우도가 최대가 되는 상태를 선택할 수 있다. 그리고 상기 보이스 UI 처리부(240)에서 적용되는 음향 모델은 은닉 마르코프 망이 적용될 수 도 있다. 또한, 상기 보이스 UI 처리부(240)는 다양한 알고리즘을 기반으로 음성파를 주파수 분석하여 모음을 특징짓는 음역 또는 그것과 등가인 특징을 추출해서 분리하는 방법을 적용할 수 도 있다. 상기 보이스 UI 처리부(240)는 상술한 음성 인식 알고리즘뿐만 아니라, 다양한 음성 인식 알고리즘을 적용할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 센서부(170)에서 전달되는 센서 신호를 기반으로 그립 센서 신호와 스퀴즈 센서 신호를 생성하고, 해당 신호에 따라 휴대 단말기의 사용자 기능을 제어하도록 지원할 수 있다. 또한, 상기 휴대 단말기(100)는 그립 센서 신호와 스퀴즈 센서 신호 및 터치 이벤트와 음성 인식 신호를 각각 혼용하여 응용 프로그램 제어에 필요한 명령어를 생성할 수 있도록 지원함으로써, 단말기 사용자는 보다 다양한 운용 방식을 이용할 수 있다. 이하 상기 휴대 단말기의 다양한 운용에 따른 실시 예를 도면을 참조하여 보다 상세히 설명하기로 한다.
도 4는 본 발명의 제1 실시 예에 따른 휴대 단말기(100)의 운용을 설명하기 위한 도면이다.
상기 도 1 및 도 4를 참조하면, 상기 휴대 단말기(100)는 단말기 사용자가 휴대 단말기(100) 일측을 파지한 상태에서, 센서부(170)에 일정한 힘을 단계적으로 제공함에 따라, 표시 패널(141)에 출력되는 이미지 변화를 수행하는 것을 나타낸 도면이다. 이를 보다 상세히 설명하면, 단말기 사용자가 센서부(170)가 마련된 단말기 외관을 파지한 상태에서, 기 설정된 일정 범위의 힘을 제공하여 센서부(170)가 일정 압력 예를 들면, 1N 이상부터 2N 미만의 압력을 검출하는 경우, 휴대 단말기(100)는 401 화면에서와 같은 일정 크기의 이미지를 출력할 수 있다. 그리고 단말기 사용자가 이전에 제공되던 힘보다 더 큰 크기의 힘을 제공하여 센서부(170)가 검출하는 압력이 일정 압력 예를 들면, 2N 이상부터 3N 미만의 압력을 검출하는 경우, 상기 휴대 단말기(100)는 403 화면에서와 같이 401 화면에 출력된 이미지보다 큰 이미지를 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 401 화면에 출력된 이미지를 줌인(Zoom-in)하여 출력할 수 있다. 이후, 상기 단말기 사용자가 403 화면이 출력된 상태에서 제공되던 힘보다 더 큰 크기의 힘을 제공하여 센서부(170)가 검출하는 압력이 일정 압력 예를 들면, 3N 이상부터 4N 미만의 압력을 검출하는 경우, 상기 휴대 단말기(100)는 405 화면에서와 같이 403 화면에 출력된 이미지보다 큰 이미지를 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 403 화면에 출력된 이미지를 줌 인하여 405 화면과 같이 출력할 수 있다. 이와 같이, 상기 휴대 단말기(100)는 단말기 사용자가 제공하는 힘이 커짐에 따라 보다 큰 크기의 압력을 검출할 수 있으며, 그에 따라 표시 패널(141)에 출력되는 이미지의 줌인 기능을 단계적으로 진행시켜 출력할 수 있다.
여기서, 단말기 사용자가 제공하는 힘에 따른 압력을 검출하는 센서부(170)는 복수 개의 피에조 센서가 마련된 경우, 각 센서들의 평균값을 기준으로 압력 평가를 수행할 수 있다. 이를 보다 상세히 설명하면, 단말기 사용자가 단말기를 파지한 상태에서 각 손가락에 힘을 줄 때, 각 손가락에 포함된 근육과 뼈의 크기와 위치가 다르기 때문에 각 사용자가 각 손가락에 일정한 힘을 가하도록 지시하였다 할지라도, 각 손가락을 통하여 단말기 외관에 배치되는 복수 개의 센서 각각에 제공되는 힘의 크기는 상이할 수 있다. 따라서 휴대 단말기(100)는 특정 손가락으로부터 전달되는 힘의 크기만을 기준으로 압력을 평가하기 보다는 센서부(170) 전체에 제공되는 힘에 의해 발생하는 압력을 평균으로 계산하여 판단하는 것이 보다 바람직할 것이다.
도 5는 본 발명의 제2 실시 예에 따른 스퀴즈 기반 휴대 단말기(100)의 운용을 설명하기 위한 도면이다. 설명에 앞서, 도시된 휴대 단말기는 단말기 사용자가 일정 압력 예를 들면 4N 이상의 압력에 해당하는 힘을 단말기 일측에 마련된 센서부(170)에 지속적으로 작용하고 있는 것으로 가정하기로 한다.
상기 도 1 및 도 5를 참조하면, 상기 휴대 단말기(100)는 단말기 사용자가 단말기 외관을 파지한 상태에서, 단말기 외관에 배치된 센서부(170)에 앞서 설명한 바와 같은 4N 이상의 힘을 제공함에 따라, 표시 패널(141)에 일정 크기로 줌인 된 이미지를 출력하고, 이 상태에서 가해지는 힘의 크기가 감소됨에 따라 이미지를 줌 아웃(Zoom-Out) 하도록 제어하는 화면을 나타낼 수 있다. 이를 보다 상세히 설명하면, 단말기 사용자가 센서부(170)가 마련된 단말기 외관을 파지한 상태에서, 기 설정된 일정 범위의 힘을 단말기 외관에 마련된 센서부(170)에 제공하여 센서부(170)가 일정 압력 예를 들면, 4N 이상의 압력이 되는 경우, 휴대 단말기(100)는 501 화면에서와 같은 일정 크기의 이미지를 출력할 수 있다. 그리고 단말기 사용자가 이전에 제공되던 힘보다 작은 크기의 힘을 제공하여 센서부(170)가 검출하는 압력이 일정 압력 예를 들면, 3N 미만부터 2N 이상의 압력을 검출하는 경우, 상기 휴대 단말기(100)는 503 화면에서와 같이 501 화면에 출력된 이미지보다 작 이미지를 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 501 화면에 출력된 이미지를 줌 아웃(Zoom-out)하여 출력할 수 있다. 이후, 상기 단말기 사용자가 503 화면이 출력된 상태에서 제공되던 힘보다 더 작은 크기의 힘을 제공하여 센서부(170)가 검출하는 압력이 일정 압력 예를 들면, 2N 미만부터 1N 이상의 압력을 검출하는 경우, 상기 휴대 단말기(100)는 505 화면에서와 같이 503 화면에 출력된 이미지보다 작은 이미지를 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 503 화면에 출력된 이미지를 줌 아웃하여 출력할 수 있다. 이와 같이, 상기 휴대 단말기(100)는 단말기 사용자가 가하는 힘이 작아짐에 따라 보다 작은 크기의 압력을 검출할 수 있으며, 그에 따라 표시 패널(141)에 출력되는 이미지의 줌 아웃 기능을 단계적으로 진행시켜 출력할 수 있다.
한편, 상술한 설명에서는 일정 크기 이상의 압력이 가해져 특정 이미지가 줌인 되어 출력된 상태에서 압력이 작아짐에 따라 줌 인된 이미지가 줌 아웃 되는 것으로 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 즉, 상기 휴대 단말기(100)는 사용자가 일정 크기 이상의 압력을 가하는 동안 501 화면에 출력된 상태의 이미지를 유지하다가, 가해진 압력이 다시 작아짐에 따라 503 및 505 화면에서와 같이 이미지 크기 변화를 가지도록 출력할 수 도 있을 것이다.
도 6은 본 발명의 제3 실시 예에 따른 그립 및 스퀴즈 기반의 휴대 단말기 운용을 설명하기 위한 도면이다.
상기 도 1 및 도 6을 참조하면, 본 발명의 휴대 단말기(100)는 단말기 사용자가 휴대 단말기(100)를 파지하고, 메뉴 기능을 활성화함에 따라 601 화면에서와 같이 메뉴 화면을 출력할 수 있다. 이를 보다 상세히 설명하면, 상기 휴대 단말기(100)는 단말기 사용자가 센서부(170)가 마련된 휴대 단말기(100) 일측을 파지하는 경우, 가해지는 힘의 크기가 기 설정된 압력 값 이하인 경우 그립 상태를 검출할 수 있으며, 센서부(170)는 그립 상태에 따른 그립 센서 신호를 생성하여 제어 부(160)에 전달할 수 있다. 그러면, 제어부(160)는 수신된 그립 센서 신호를 기반으로 특정 기능을 수행할 수 있는 명령어를 생성할 수 있는데, 단말기 설정에 따라 메뉴 화면을 출력하도록 하는 명령어를 생성하고, 이를 기반으로 메뉴 화면을 출력할 수 있다. 또한, 별도의 설정이 없는 경우, 상기 제어부(160)는 입력부(120) 또는 터치스크린(140)으로부터 전달되는 입력 신호 또는 터치 이벤트에 따라 메뉴 기능에 대응하는 메뉴 화면을 출력할 수 도 있다.
이후, 단말기 사용자가 단말기 외관에 마련된 센서부(170)에 일정 크기 이상의 압력 즉, 그립 상태를 벗어나 스퀴즈 상태로 천이될 수 있는 크기의 압력을 제공하는 경우, 휴대 단말기(100)는 603 화면에서와 같이 601 화면에서 하이라이트 되고 있는 메뉴 항목인 "화면"의 서브 메뉴에 해당하는 화면을 출력할 수 있다. 그리고 상기 휴대 단말기(100)는 가해진 압력이 줄어들어 그립 상태에 해당하는 압력 상태로 천이되면, 603 화면에서 601 화면으로 복귀되도록 제어할 수 있다. 이상에서 설명한 바와 같이, 본 발명의 휴대 단말기(100)는 그립 센서 신호와 스퀴즈 센서 신호를 기반으로 메뉴의 깊이(Depth)를 변경할 수 있도록 지원할 수 있다.
또한, 본 발명의 휴대 단말기(100)는 601 화면을 일정 크기의 압력을 제공하는 스퀴즈 센서 신호가 발생하는 경우 출력할 수 있으며, 해당 압력이 증가하여 스퀴즈의 압력을 구분하는 단계가 변경되는 경우, 603 화면에서와 같은 서브 메뉴 화면을 출력하도록 제어할 수 도 있다. 이를 보다 상세히 설명하면, 상기 휴대 단말기(100)는 단말기 사용자가 단말기를 일정 크기 압력 이하로 파지하는 그립 상태에서는 대기 화면을 출력하도록 제어하다가, 일정 크기 이상 예를 들면, 1N 이상 2N 미만의 압력을 제공하는 제1 스퀴즈 상태로 변경되는 경우, 601 화면에서와 같이 기 설정된 메뉴 화면을 출력하도록 제어할 수 있다. 그리고 상기 휴대 단말기는 601 화면이 출력된 상태에서 이전보다 큰 크기의 압력 예를 들면, 2N 이상 3N 미만의 압력을 제공하는 제2 스퀴즈 상태로 변경되는 경우, 603 화면에서와 같이 601 화면에서 지시되고 있는 메뉴 항목의 서브 메뉴 항목을 출력할 수 있다. 이때, 601 화면에서 지시되고 있는 메뉴 항목의 서브 메뉴가 없는 경우, 상기 휴대 단말기(100)는 그에 대응하는 메시지 즉, 서브 메뉴 항목이 없을 지시하는 메시지를 음성이나, 텍스트 또는 진동 등으로 출력하도록 제어할 수 있다.
추가로, 상기 휴대 단말기(100)는 603 화면이 출력된 상태에서 특정 서브 메뉴 항목 예를 들면 "조명 설정"이 지시되고 있으며, 이전에 제공되던 압력보다 큰 압력 예를 들면, 3N 이상 4N 미만의 압력을 제공하는 제3 스퀴즈 상태로 변경되는 경우, 조명 설정의 서브 메뉴가 존재하는 경우, 해당 서브 메뉴를 출력하도록 제어할 수 있으며, 서브 메뉴가 존재하지 않는 경우, 조명 설정 기능 활성화에 따른 화면을 출력하도록 제어할 수 있다. 그리고 가해지는 압력이 작아져서 이전 스퀴즈 상태로 단계적으로 천이되는 경우, 상기 휴대 단말기(100)는 단계적으로 603 화면 및 601 화면을 출력할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 센서부(170)에 가해지는 압력의 변화에 따라 특정 화면을 출력하고, 특정 화면에 출력된 항목들 중 지시된 항목과 링크되어 있는 화면을 출력하거나 항목에 설정된 기능을 수행하도록 제어할 수 있으며, 해당 기능과 링크된 항목이 출력되고 있는 화면 또는 링크된 화면의 이전 화면으로의 변경도 지원할 수 있다.
도 7은 본 발명의 제4 실시 예에 따른 그립 및 스퀴즈 기반의 휴대 단말기 운용을 설명하기 위한 도면이다.
상기 도 1 및 도 7을 참조하면, 휴대 단말기(100)는 사용자 설정 또는 단말기 설정에 따라 대기 화면을 출력할 수 있으며, 대기 화면에는 사용자가 설정해 놓은 또는 디폴트로 설정되어 있는 다양한 아이콘들이 701 화면에서와 같이 출력될 수 있다. 이때, 701 화면에서 출력되고 있는 아이콘들은 각각 특정 기능을 수행할 수 있는 기능 아이콘이 될 수 있으며, 예를 들면, 게임 기능을 제공하는 게임 아이콘, 메시지 기능을 제공하는 메뉴 아이콘, 스케줄 기능을 제공하는 위젯 아이콘 등이 될 수 있다. 이러한 대기 화면은 휴대 단말기(100)에 전원이 공급된 이후 제공되거나, 슬립 상태에 있다가 특정 입력 신호 발생에 따라 제공될 수 있다. 특히, 본 발명의 휴대 단말기(100)는 사용자가 단말기 외관에 마련된 센서부(170)를 일정 크기 이하의 힘으로 파지함에 따라 발생하는 그립 상태로 천이되는 경우, 701 화면에서와 같은 대기 화면을 출력할 수 있다. 또한, 본 발명의 휴대 단말기(100)는 사용자가 단말기 외관에 마련된 센서부(170)를 일정 크기 이하의 힘으로 파지하여 단말기가 그립 상태를 취하다가, 일정 크기 이상의 힘으로 파지하여 단말기가 스퀴즈 상태로 천이하는 경우, 701 화면에서와 같은 대기 화면을 출력하도록 제어할 수 도 있다.
이후, 이전 그립 상태에서 사용자가 일정 크기 이상의 힘을 제공하여 스퀴즈 상태로 변경되거나, 이전에 일정 크기 이상의 힘에 의하여 제1 스퀴즈 상태를 취하 다가 더 큰 힘이 제공되어 제2 스퀴즈 상태로 변경되는 경우, 상기 휴대 단말기(100)는 703 화면에서와 같이, 대기 화면에 출력되고 있는 아이콘들의 기능에 관한 텍스트를 출력할 수 있다. 이를 보다 상세히 설명하면, 휴대 단말기(100)는 701 화면이 출력되고 있는 상태에서 이전에 제공되던 힘의 크기보다 큰 크기의 힘이 제공되어 센서부(170)가 이전보다 큰 크기의 압력을 검출하는 경우, 각 아이콘이 어떠한 기능을 제공하는지를 설명하는 매뉴얼을 텍스트나 정지 또는 동영상 이미지로 출력하도록 제어할 수 있다. 즉, 상기 휴대 단말기(100)는 게임 아이콘의 경우, 게임 아이콘을 기반으로 수행할 수 있는 게임 형태나 게임 방식에 관한 정보를 아이콘 이미지와 인접한 영역에 출력할 수 있다. 동일한 방식으로 상기 휴대 단말기(100)는 메시지 아이콘의 경우, 메시지를 수신한 개수나, 수신된 메시지 중 미확인한 개수, 수신된 메시지 중 스팸의 개수 등과 같은 정보를 메시지 아이콘이 출력된 영역과 인접한 영역에 출력할 수 있다. 그리고 상기 휴대 단말기(100)는 스케줄 아이콘의 경우, 오늘 날짜로 기록된 스케줄 정보를 아이콘이 출력된 영역과 인접한 영역에 출력할 수 있다. 한편, 휴대 단말기(100)의 센서부(170)에 제공되던 압력이 제거되는 경우, 상기 휴대 단말기(100)는 출력된 텍스트나 이미지를 화면에서 제거하도록 제어할 수 있다.
이상에서 설명한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 제공되는 압력의 변화에 따라 아이콘 정보를 화면 일측에 출력하도록 제어할 수 있다.
도 8은 본 발명의 제5 실시 예에 따른 그립 및 스퀴즈 기반의 휴대 단말기의 운용을 설명하기 위한 도면이다. 설명에 앞서, 이하에서 설명하는 휴대 단말기(100)는 표시 패널(141)을 중심으로 좌측에 4개의 센서가 일정 간격으로 배치된 상태이며, 단말기 사용자가 오른손으로 복수 개의 센서가 배치된 단말기 일측을 파지함에 따라 각 센서는 각 손가락과 접촉된 상태가 될 수 있다. 즉, 휴대 단말기(100)의 좌상측으로부터 좌하측으로 일정 간격을 가지는 배치된 4개의 센서는 단말기 사용자의 손가락 중 엄지손가락을 제외한 나머지 손가락들과 각각 대응될 수 있다. 사용자 측면에서 단말기 사용자의 4개 손가락(11, 12, 13, 14)은 좌측에 마련된 4개의 센서 각각에 해당하는 위치를 파지하게 된다.
상기 도 1 및 도 8을 참조하면, 단말기 사용자는 전술한 바와 같이 오른손으로 휴대 단말기(100) 일측을 파지할 수 있으며, 그에 따라 휴대 단말기(100)는 손가락 접촉에 따라 발생하는 압력을 검출하여 일정 크기 이하의 압력인 경우, 그립 상태임을 검출할 수 있다. 이후, 상기 휴대 단말기(100)는 입력부(120) 또는 터치스크린(140)을 통하여 생성된 입력 신호 또는 터치 이벤트에 따라 사용자 기능 예를 들면 801 화면에서와 같이 파일 검색을 위한 멀티 이미지 출력 기능을 수행할 수 있다. 멀티 이미지 출력 기능 수행에 따른 휴대 단말기(100)는 일정 개수 예를 들면, 12개의 멀티 이미지를 표시 패널(141)에 정렬하여 출력할 수 있다. 여기서, 상기 휴대 단말기(100)는 입력부(120) 또는 터치스크린(140)으로부터의 입력 신호 또는 터치 이벤트에 관계없이, 센서부(170)가 수집한 압력 분포에 따라 결정되는 그립 상태 또는 스퀴즈 상태에 따라 멀티 이미지 출력 기능을 수행할 수 도 있다. 이를 위하여, 상기 휴대 단말기(100)는 센서부(170)가 그립 상태 또는 스퀴즈 상태 를 지시하는 센서 신호를 출력하는 경우, 멀티 이미지 출력 기능이 수행되도록 하는 설정이 필요할 수 있다. 이 설정은 단말기 사용자가 터치스크린(140) 또는 입력부(120)를 이용하여 구성하거나, 단말기 설계자에 의하여 설계될 수 있을 것이다.
한편, 801 화면이 출력된 상태에서, 단말기 사용자가 이전에 제공되던 힘보다 큰 크기의 힘을 특정 부분에 제공하는 경우, 휴대 단말기(100)는 그에 따른 압력 분포를 검출할 수 있다. 이를 보다 상세히 설명하면, 단말기 사용자가 휴대 단말기(100) 외관을 오른손으로 파지함에 따라 엄지손가락을 제외한 검지손가락(11), 중지손가락(12), 약지손가락(13), 새끼손가락(14)은 각각 좌상측으로부터 좌하측까지 순서대로 배치될 수 있다. 한편, 휴대 단말기(100)에 마련된 센서부(170)는 각 손가락(11, 12, 13, 14)에 일대일 대응하는 4개의 센서를 포함할 수 있는데, 이 경우, 센서부(170)는 각 손가락(11, 12, 13, 14)에서 제공되는 물리력에 따라 일정 압력 및 압력 분포를 검출할 수 있다. 이러한 상태에서, 단말기 사용자가 특정 손가락 예를 들면, 검지손가락(11)에 가해지는 힘을 다른 손가락에 비하여 크게 제공하는 경우, 휴대 단말기(100)는 803 화면에서와 같이 상대적으로 큰 힘이 가해진 부분에 해당하는 표시 패널(141)의 영역을 다른 영역에 비하여 크게 표시하도록 제어할 수 있다. 즉, 상기 휴대 단말기(100)는 "A, B, C" 컨텐츠 이미지를 크게 표시하되, 다른 이미지 예를 들면, "D, E, F" 컨텐츠 이미지의 상부에 일정 부분이 오버랩 되도록 출력할 수 있다. 이 과정에서, 상기 휴대 단말기(100)는 "A, B, C" 컨텐츠 이미지를 제외한 나머지 "D, E, F, G, H, I, J, K, L" 컨텐츠 이미지의 크 기를 이전과 동일하게 유지하도록 제어할 수 있다. 이를 위하여, 상기 휴대 단말기(100)는 센서부(170)에 포함된 4개의 센서가 배치된 것을 기준으로 표시 패널(141)의 표시 영역을 각각 4개의 영역으로 구분하고, 구분된 각 영역을 4개의 센서 각각에 매핑할 수 있다. 이에 따라, 상기 휴대 단말기(100)는 4개의 센서 중 상대적으로 가장 큰 힘이 제공되는 센서에 매핑된 표시 영역을 다른 영역과 다르게 표현 예를 들면, 줌 인 기능을 제공하여 표현하도록 제어할 수 있다.
이후, 상기 휴대 단말기(100)는 특정 센서에 제공되던 힘이 작아짐에 따라 작아진 압력이 검출되면, 801 화면으로 화면이 복귀되도록 제어할 수 있을 것이다. 여기서, 상기 휴대 단말기(100)는 특정 센서에 가해지는 힘의 증가에 따라 특정 표시 영역을 다른 영역과 다른 기능이 수행되도록 제어하는 것으로 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 즉, 단말기 사용자는 4개의 센서에 배치된 손가락 중 검지손가락(11)과 중지손가락(12)에 다른 손가락에 비하여 큰 크기의 힘을 가할 수 있으며, 이 경우, 상기 휴대 단말기(100)는 검지손가락(11)과 중지손가락(12)이 배치된 영역에 위치한 센서에 할당된 표시 영역을 다른 표시 영역과 다른 기능 예를 들면, 표시 영역에 출력된 이미지를 크게 출력하는 줌인 기능이 수행되도록 제어할 수 도 있을 것이다.
상술한 설명에서는 상대적으로 큰 크기의 압력이 가해진 센서에 할당되는 표시 영역의 이미지 및 텍스트 중 적어도 하나를 줌 인하여 나머지 센서에 할당된 표시 영역의 이미지 및 텍스트에 비하여 크게 표시하는 것으로 설명하였으나, 본 발명의 휴대 단말기 입력 방법에서는 상대적으로 큰 크기의 압력이 가해진 센서에 할 당되는 표시 영역의 이미지 및 텍스트 중 적어도 하나를 줌 아웃 하여 나머지 센서에 할당된 표시 영역의 이미지 및 텍스트에 비하여 작게 표시할 수 도 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 표시 영역을 센서부(170)에 포함된 센서의 개수에 대응하도록 구분하고, 각 센서에 가해지는 힘에 의해 검출되는 압력 분포를 판단하고, 특정 압력이 발생하는 센서에 할당된 표시 영역에 출력되는 이미지나 텍스트를 특정 압력의 변화에 따라 다른 표시 영역이 비하여 크게 표시하는 줌 인 기능이 적용되도록 제어할 수 있다.
도 9는 본 발명의 제6 실시 예에 따른 그립 상태 및 스퀴즈 상태 기반의 휴대 단말기 운용을 설명하기 위한 도면이다. 설명에 앞서, 도 9에 도시된 휴대 단말기 또한 도 8에 도시된 휴대 단말기와 유사하게 좌측면에 일정 개수의 센서가 일정 간격을 가지며 배치된 것으로 가정하며, 단말기 사용자가 오른손을 이용하여 단말기를 파지하는 것으로 가정하기로 한다. 그러나 본 발명은 이에 한정되는 것은 아니며, 우측면에 일정 개수의 센서가 일정 간격을 가지며 배치될 수 있고, 또한 단말기 사용자가 왼손을 이용하여 단말기를 파지할 수 도 있다.
상기 도 1 및 도 9를 참조하면, 본 발명의 휴대 단말기(100)는 사용자 요청 등에 따라 특정 컨텐츠를 901 화면에서와 같이 표시 패널(141)에 출력할 수 있다. 즉, 휴대 단말기(100)는 사용자가 컨텐츠 검색을 수행하기 위한 입력 신호를 생성하는 경우, 그에 대응하여 기 설정된 포맷에 따라 특정 컨텐츠를 표시 패널(141)에 출력할 수 있다. 예를 들면, 휴대 단말기(100)는 4개의 컨텐츠를 표시 패널(141)의 상측에서부터 차례대로 정렬하여 출력할 수 있다. 이러한 컨텐츠 출력은 메뉴 기능 선택 또는 핫 키 입력에 따라 수행될 수 있으며, 또한 단말기 설정에 따라 휴대 단말기(100)가 그립 상태 또는 특정 단계의 압력이 제공되는 스퀴즈 상태를 취하는 경우, 수행될 수 도 있다. 이때, 단말기 사용자의 각 손가락(11, 12, 13, 14)은 4개의 컨텐츠가 출력된 표시 영역과 나란한 위치에 배치될 수 있으며, 휴대 단말기(100)의 센서부(170)에 포함되는 복수 개의 센서는 상기 손가락(11, 12, 13, 14)들이 배치된 위치에 설치되어 있을 수 있다.
이러한 상태에서, 단말기 사용자가 특정 손가락 예를 들면, 검지손가락(11)에 가해지는 힘을 다른 손가락에 비하여 크게 하도록 제어하는 경우, 휴대 단말기(100)는 좌측에 마련된 4개의 센서 중에 검지손가락(11)이 위치한 센서가 검출한 압력을 다른 센서가 검출한 압력보다 큰 압력으로 검출할 수 있다. 이에 따라, 상기 휴대 단말기(100)는 검지손가락(11)이 배치된 영역과 나란한 표시 영역에 할당된 컨텐츠를 다른 표시 영역에 할당된 컨텐츠들과 다르게 표시하도록 제어할 수 있다. 즉, 상기 휴대 단말기(100)는 검지손가락(11)이 배치된 영역에 해당하는 표시 영역에 출력된 "A" 컨텐츠의 이미지를 줌 인하여 크게 표시하도록 제어할 수 있다. 그리고 상기 휴대 단말기(100)는 "A" 컨텐츠 이미지를 크게 표시하는 동안 나머지 컨텐츠들 즉, "B, C, D" 컨텐츠들의 이미지를 이전 이미지보다 작게 표시하도록 제어할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 표시 영역에 출력되는 컨텐츠들의 변화를 센서에 작용하는 힘의 분포에 따라 변화하도록 제어함으로써, 컨텐츠들의 검색을 보다 용이하게 지원할 수 있다.
도 10은 본 발명의 제7 실시 예에 따른 그립, 스퀴즈, 터치, 보이스 기능에 따른 휴대 단말기 운용을 설명하기 위한 도면이다. 설명에 앞서, 휴대 단말기(100)는 일정 시간 동안 별도의 입력 신호가 발생하지 않거나 사용자의 요청에 의하여 슬립(Sleep) 상태에 있는 것으로 가정하기로 한다. 슬립 상태에서 휴대 단말기(100)는 전원 절약을 위하여 표시 패널(141)에 공급되는 전원을 차단시킬 수 있다.
상기 도 1 및 도 10을 참조하면, 슬립 상태에 있는 휴대 단말기(100)는 단말기 사용자가 단말기 외관을 파지하게 됨으로써 단말기 외관에 마련된 센서부(170)에 가해지는 힘을 검출할 수 있다. 이 과정에서 상기 센서부(170)는 외부에서 작용하는 힘에 반응하여 센서 신호를 생성하는 구조를 가질 수 있으며, 이에 따라, 상기 휴대 단말기(100)는 센서부(170)에 별도의 전원을 공급하지 않을 수 있다. 한편, 단말기 사용자가 일정 크기 이하의 힘을 단말기 외관에 작용시키는 경우, 센서부(170)는 전달되는 힘에 의한 발생하는 압력을 검출할 수 있고, 검출된 압력이 일정 크기 이하인 경우, 현재 상태를 그립 상태로 판단할 수 있다. 그러면 상기 휴대 단말기(100)는 1001 화면에서와 같이, 현재 활성화되고 있는 응용 프로그램에 의해 제공되는 화면을 표시 패널(141)에 출력하도록 제어할 수 있다. 예를 들어, 휴대 단말기(100)는 파일 재생 기능에 해당하는 응용 프로그램을 활성화하고 있는 상태에서, 기 설정된 시간 동안 별도의 입력 신호가 없는 경우, 슬립 상태로 천이될 수 있다. 이후, 상기 휴대 단말기(100)는 그립 상태에 해당하는 센서 신호가 센서부(170)로부터 전달되면, 슬립 상태로 천이되기 직전에 표시 패널(141)에 출력 되었던 이미지를 기반으로 화면을 재구성하거나, 현재 활성화되고 있는 응용 프로그램의 재생 시점에 대응하는 화면을 구성하여 출력하도록 제어할 수 있다. 이때, 상기 휴대 단말기(100)는 그립 상태에 대응하는 명령어를 기반으로 단말기를 운용할 수 있도록 지원한다. 즉, 상기 휴대 단말기(100)는 도시된 바와 같이, 파일 재생 기능에 대응하는 화면을 표시 패널(141)에 제공함으로써, 현재 어떠한 파일을 재생하고 있는지를 사용자에게 알려줄 수 있다. 또한 상기 휴대 단말기(100)는 현재 상태를 터치스크린(140)의 터치 패널(143) 또는 입력부(120)로부터 발생하는 터치 이벤트 또는 입력 신호를 응용 프로그램에 적용하지 않는 상태 즉, 락(Lock) 상태로 설정할 수 있다. 이러한 설정은 명령어 테이블(161)을 기준으로 운용될 수 있으며, 이를 위하여 명령어 테이블(161)에는 파일 재생 기능이 활성화된 상태에서 슬립 상태로 천이된 이후, 그립 상태에 해당하는 센서 신호가 발생하는 경우, 파일 재생 제어를 위한 신호 차단을 위한 락 상태 설정에 해당하는 명령어가 저장되어 있을 수 있다. 이러한 명령어는 사용자에 의하여 설계될 수 있으며, 또한 단말기 설계자에 의하여 단말기 제조 시 설계될 수 있다.
한편, 1001 화면에서와 같이 락 상태로 파일 재생 기능을 활성화하고 있는 휴대 단말기(100)는 파일 재생 기능에 따른 오디오 신호 출력을 유지할 수 있다. 이후, 단말기 사용자가 일정 크기 이상의 힘을 센서부(170)가 배치된 단말기 외관에 제공하는 경우, 상기 센서부(170)는 이전 그립 상태에서 스퀴즈 상태로 변경되는 것으로 판단할 수 있다. 그러면, 상기 휴대 단말기(100)는 명령어 테이블(161)을 참조하여 파일 재생 기능 활성화 중에 그립 상태에서 스퀴즈 상태로 천이하는 경우에 해당하는 명령어 즉, 락 상태를 해제하여 언 락(Unlock) 상태로 변경하는 명령어를 생성하고, 이를 기반으로 단말기 운용을 제어할 수 있다. 이에 따라, 상기 휴대 단말기(100)는 1003 화면에서와 같이 터치스크린(140)을 이용할 수 있는 상태가 될 수 있다. 또한 상기 휴대 단말기(100)는 1001 화면에서와 같은 락 상태에서 입력부(120)를 이용하여 파일 재생 기능에서 파일 재생 제어를 위한 입력 신호를 수신 처리할 수 있는 상태로 변경할 수 있다.
1003 화면에서와 같이 일정 크기 이상의 힘이 지속적으로 제공되어 스퀴즈 상태를 유지하고 있으며, 단말기 사용자가 파일 재생 제어를 위해 할당된 터치 패널(143) 영역 이외의 다른 영역 예를 들면, 활성화된 파일에 포함된 이미지를 출력하는 표시 패널(141) 영역에 대응하는 터치 패널(143) 영역에서 터치 이벤트가 발생하는 경우, 상기 휴대 단말기(100)는 1005 화면에서와 같이 터치스크린(140) 일측에 메뉴 화면을 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 스퀴즈 센서 신호와 특정한 터치 이벤트가 발생하는 경우, 이를 메뉴 화면 출력을 위한 명령어 생성을 위한 것으로 판단하고, 터치스크린(140) 일측에 그에 대응하는 메뉴 화면을 출력하도록 제어할 수 있다.
또한, 1003 화면에서와 같이 일정 크기 이상의 힘이 지속되어 스퀴즈 센서 신호를 생성하고 있으며, 보이스 입력에 해당하는 음성 인식 기능에 따른 음성 인식 신호가 생성되는 경우, 상기 휴대 단말기(100)는 1007 화면에서와 같이 메뉴 화면을 출력할 수 있다. 즉, 상기 휴대 단말기(100)는 스퀴즈 센서 신호와 특정 음성 인식 신호가 발생하는 경우, 이를 메뉴 화면 출력을 위한 명령어 생성으로 판단 하고, 명령어 생성 및 그에 따른 메뉴 화면 출력을 제어할 수 있다. 이를 위하여, 상기 휴대 단말기(100)는 현재 상태가 스퀴즈 상태인 경우, 음성 인식 기능 지원을 위한 마이크(MIC) 활성화 및 마이크(MIC)가 수집한 오디오 신호를 기반으로 음성 인식 기능이 운용되도록 제어할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기(100)는 그립 상태 및 스퀴즈 상태에 따른 단말기 운용을 제어할 수 있으며, 스퀴즈 상태에서 추가로 발생하는 터치 이벤트와 음성 인식 기능을 혼용하여 특정한 사용자 기능 수행을 지원할 수 있다. 상술한 설명에서는 스퀴즈 상태에서 터치 이벤트와 음성 인식 기능이 추가로 발생하는 것으로 설명하였으나, 그립 상태에서 터치 이벤트와 음성 인식 기능이 추가로 발생할 수 있다. 그러면, 상기 휴대 단말기(100)는 그립 상태와 터치 이벤트 또는 그립 상태와 음성 인식 기능에 따른 명령어 생성을 제어하고, 생성된 명령어를 기반으로 특정 사용자 기능을 지원하도록 제어할 수 도 있을 것이다.
이상에서는 본 발명의 실시 예에 따른 휴대 단말기의 입력 장치 및 운용에 따른 화면 인터페이스의 일예들을 설명하였다. 이하에서는 상술한 입력 장치를 기반으로 운용되는 휴대 단말기의 입력 방법에 대하여 도면을 참조하여 보다 상세히 설명하기로 한다.
도 11은 본 발명의 실시 예에 따른 휴대 단말기의 입력 방법을 설명하기 위한 순서도를 나타낸 도면이다.
상기 도 1 및 도 11을 참조하면, 본 발명의 휴대 단말기(100)는 전원이 공급되면, 공급된 전원을 기반으로 휴대 단말기(100)의 각 구성을 초기화하고, 초기화 된 상태가 완료되면, S101 단계에서 기 설정된 대기 화면을 표시 패널(141)에 출력하도록 제어할 수 있다. 이 과정에서, 상기 휴대 단말기(100)는 기 설정된 시간동안 사용되지 않음으로 인하여 슬립(Sleep) 상태로 천이되었다가, 활성화되는 경우에도 상술한 대기 화면을 표시 패널(141)에 출력하도록 제어할 수 있다. 그리고 상기 휴대 단말기(100)는 표시 패널(141)이 활성화되는 경우, 사용자 요청에 따라 터치 패널(143)을 활성화하여 사용자의 터치를 인식할 수 있는 준비를 완료할 수 있다.
다음으로, 휴대 단말기(100)는 S103 단계에서 사용자 요청에 따라 특정 응용 프로그램을 활성화하도록 제어한다. 즉, 상기 휴대 단말기(100)는 사용자가 입력부(120) 또는 터치스크린(140)을 기반으로 특정 사용자 기능을 활성화고자 하는 경우, 발생되는 입력 신호 또는 터치 이벤트에 따라 해당 사용자 기능 예를 들면, 파일 재생 기능, 파일 검색 기능, 카메라 기능, 웹 접속 기능, 통화 기능, 폰 북 기능, 스케줄 기능 등 다양한 기능 중 적어도 하나의 기능을 활성화하도록 제어할 수 있다.
이후, 상기 휴대 단말기(100)는 S105 단계에서 센서부(170) 활성화 여부를 확인할 수 있다. 즉, 단말기 사용자가 센서부(170)에 제공하는 힘의 크기에 따라 상기 휴대 단말기(100)는 그립 상태 또는 스퀴즈 상태를 기반으로 응용 프로그램을 제어할 것인지 여부를 확인할 수 있다. 실질적으로, S105 단계는 센서부(170)에 전원 공급을 결정하고, 전원 공급에 따른 하드웨어 초기화 과정이 될 수 있으나, 센서부(170)는 대기 화면이 출력되는 S101 단계 이전에 활성화되어 대기할 수 도 있다. 즉, 사용자 설정에 따라 상기 휴대 단말기(100)는 디폴트로 센서부(170)를 활성화하도록 제어할 수 있다. S105 단계에서 센서부를 활성화되지 않는 경우, 상기 휴대 단말기(100)는 S107 단계로 분기하여 단말기의 다른 입력 장치 구성 예를 들면, 입력부(120), 터치 패널(143), 음성 인시 기능을 위한 마이크(MIC) 등으로부터 전달되는 신호에 따른 사용자 기능을 수행하도록 제어할 수 있다.
한편, S105 단계에서 센서부(170) 활성화가 결정되면, 상기 휴대 단말기(100)는 S109 단계로 분기하여 센서부(170)를 활성화하고, S111 단계로 분기하여 현재 상태가 기 설정된 일정 크기 이하의 힘 제공에 따른 일정 크기 이하의 압력 검출에 의한 그립(Grip) 상태인지 여부를 확인할 수 있다. S111 상태에서 그립 상태가 아닌 경우, 상기 휴대 단말기(100)는 S107 단계로 분기하여 다른 입력 장치로부터 전달되는 신호에 따라 응용 프로그램 운용을 제어할 수 있다. 반면에, 단말기 사용자가 센서부(170)가 배치된 단말기 외관을 파지할 경우, 상기 휴대 단말기(100)는 S111 단계에서와 같이 그립 상태로 판단할 수 있으며, 이 경우, S113 단계로 분기하여 그립 상태에 따른 명령어 생성을 수행할 수 있다. 그리고 상기 휴대 단말기(100)는 생성된 명령어를 기반으로 단말기 운용을 제어할 수 있다. 이를 위하여 상기 휴대 단말기(100)는 저장부(150)에 저장된 명령어 테이블(161)을 참조할 수 있다.
다음으로, 상기 휴대 단말기(100)는 S115 단계에서 현재 상태가 스퀴즈 상태로 변경되는지 여부를 확인하고, 별도의 변경이 발생하지 않는 경우, S109 단계 이전으로 분기하여 이하 과정을 반복적으로 수행할 수 있다. 한편, S115 단계에서 상기 휴대 단말기(100)는 이전에 제공되던 힘보다 더 큰 크기의 힘이 제공됨에 따라 기 설정된 일정 크기 이상의 압력이 검출되는 경우, 그립 상태에서 스퀴즈 상태로 변경되는 것으로 판단할 수 있다. 이 경우, 상기 휴대 단말기(100)는 S116 단계로 분기하여 스퀴즈 상태에 따른 명령어를 명령어 테이블(161)을 참조하여 생성할 수 있다. 여기서, 상기 휴대 단말기(100)는 스퀴즈 상태 중에서 단계적으로 제공되는 힘 크기의 변화에 따라 압력이 단계적으로 변하는 경우, 스퀴즈 상태를 다수개의 스퀴즈 상태로 구분하여 판단할 수 있다. 그리고 상기 휴대 단말기(100)는 각 스퀴즈 상태에 따라 각기 다른 명령어를 생성하도록 제어하거나, 단계적으로 변화되는 스퀴즈 상태에 다른 특정 기능 예를 들면, 줌 인 기능 또는 줌 아웃 기능이 수행될 수 있도록 제어할 수 있다. 또한, 상기 휴대 단말기(100)는 앞서 설명한 바와 같이, 복수 개의 센서가 단말기 외관에 일정 위치에 각각 배치되고, 각각의 센서로부터 전달되는 압력 분포가 서로 상이한 경우, 상이한 압력 분포에 따른 명령어를 생성하고, 생성된 명령어를 기반으로 응용 프로그램 운용을 제어할 수 있다. 예를 들면, 상기 휴대 단말기(100)는 특정 위치에 센서에 가해지는 압력이 다른 위치에 가해지는 압력보다 큰 경우, 해당 위치에 매핑된 표시 패널(141) 상에서의 이미지나 텍스트의 변화를 다른 표시 패널(141) 상에서의 이미지나 텍스트와 다르게 변화하도록 제어할 수 있다.
한편, S115 단계에서 그립 상태에서 스퀴즈 상태로 변경되는 경우, 상기 휴대 단말기(100)는 S117 단계로 분기하여 추가적인 보이스 입력 또는 터치 입력이 발생하는지 여부를 확인할 수 있다. 이를 위하여 상기 휴대 단말기(100)는 마이 크(MIC)를 활성화하고 수집되는 오디오 신호를 음성 인식하도록 제어할 수 있으며, 터치 패널(143)이 활성화되어 있지 않은 경우, 터치 패널(143)을 활성화하도록 제어할 수 있다. 별도의 보이스 입력 또는 터치 입력이 발생하지 않는 경우, 상기 휴대 단말기(100)는 S116 단계로 분기할 수 있다.
S117 단계에서 보이스 입력 또는 터치 입력이 발생하는 경우, 상기 휴대 단말기(100)는 S119 단계로 분기하여, 스퀴즈 상태와 보이스 인식에 따른 명령어를 생성하거나, 스퀴즈 상태와 터치 이벤트에 따른 명령어를 생성하도록 제어할 수 있다. 이후, 상기 휴대 단말기(100)는 S121로 진입하여 S119 단계 또는 S116 단계에서 생성된 명령어를 응용 프로그램에 적용하도록 제어할 수 있다. 이후, 상기 휴대 단말기(100)는 S123 단계에서 응용 프로그램 종료 또는 단말기 종료 여부를 확인하고, 종료를 위한 입력 신호가 생성되지 않는 경우, S109 단계 이전으로 분기하여 이후 과정을 반복적으로 수행할 수 있다.
상술한 바와 같이, 본 발명의 실시 예에 따른 휴대 단말기의 입력 방법 및 장치는 그립 상태 또는 스퀴즈 상태를 기반으로 현재 활성화되고 있는 응용 프로그램에 적용될 명령어를 생성하도록 지원하는 한편, 다른 입력 장치들 예를 들면, 터치 패널과 음성 인식 기반의 입력 장치들로부터 생성된 신호들과 혼합하여 특정 명령어를 생성할 수 있도록 지원한다. 이에 따라, 본 발명의 휴대 단말기 입력 방법 및 장치는 휴대 단말기 운용에 필요한 명령어 생성을 보다 용이하게 신속하게 할 수 있도록 지원할 수 있으며, 보다 복합적인 다양한 명령어 생성을 지원할 수 있다.
이상 본 발명을 몇 가지 바람직한 실시 예를 사용하여 설명하였으나, 이들 실시 예는 예시적인 것이며 한정적인 것이 아니다. 이와 같이, 본 발명이 속하는 기술 분야에서 통상의 지식을 지닌 자라면 본 발명의 사상과 첨부된 특허청구범위에 제시된 권리범위에서 벗어나지 않으면서 균등론에 따라 다양한 변화와 수정을 가할 수 있음을 이해할 것이다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 구성을 개략적으로 나타낸 블록도,
도 2는 본 발명의 휴대 단말기를 파지한 상태를 개략적으로 나타낸 도면,
도 3은 본 발명의 제어부 구성을 보다 상세히 나타낸 도면,
도 4는 본 발명의 제1 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 5는 본 발명의 제2 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 6은 본 발명의 제3 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 7은 본 발명의 제4 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 8은 본 발명의 제5 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 9는 본 발명의 제6 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 10은 본 발명의 제7 실시 예에 따른 단말기 운용을 설명하기 위한 도면,
도 11은 본 발명의 실시 예에 따른 휴대 단말기의 입력 방법을 설명하기 위한 순서도.

Claims (24)

  1. 단말기에 가해지는 물리력에 따른 압력을 검출하는 과정과;
    상기 압력이 기 설정된 값 이하인 경우, 그립 상태로 판별하고, 상기 압력이 기 설정된 값 이상인 경우 스퀴즈 상태로 판별하는 판별 과정과;
    상기 그립 상태 및 스퀴즈 상태에 따른 명령어를 생성하는 과정과;
    상기 생성된 명령어를 현재 활성화되고 있는 응용 프로그램에 적용하는 적용 과정;을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  2. 제 1 항에 있어서,
    상기 판별 과정은
    상기 기 설정된 값 이상의 압력 크기를 일정 크기별로 구분하는 과정과;
    각 크기별로 복수 개의 스퀴즈 상태를 판별하는 과정;을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  3. 제 2 항에 있어서,
    상기 명령어를 생성하는 과정은
    상기 복수 개의 스퀴즈 상태별로 각기 다른 명령어를 생성하는 과정인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  4. 제 2 항에 있어서,
    상기 명령어를 생성하는 과정은
    상기 응용 프로그램 활성화에 따라 표시 패널에 출력되는 적어도 하나의 이미지 또는 텍스트를 상기 압력의 단계별 크기 변화에 따라 줌 인하여 출력하도록 설정된 명령어를 생성하는 과정과;
    상기 응용 프로그램 활성화에 따라 표시 패널에 출력되는 적어도 하나의 이미지 또는 텍스트를 상기 압력의 단계별 크기 변화에 따라 줌 아웃하여 출력하도록 설정된 명령어를 생성하는 과정;을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  5. 제 1 항에 있어서,
    상기 압력을 검출하는 과정은
    단말기 외관에 마련된 복수 개의 센서 각각에 힘이 가해지는 과정과;
    상기 복수 개의 센서 각각이 가해진 힘에 따른 압력을 검출하는 과정;을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  6. 제 5 항에 있어서,
    상기 판별 과정은
    상기 검출된 압력의 평균이 기 설정된 일정 값 이하인 경우 그립 상태로 판별하고, 상기 검출된 압력의 평균이 기 설정된 일정 값 이상인 경우 스퀴즈 상태로 판별하는 과정인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  7. 제 5 항에 있어서,
    상기 명령어를 생성하는 과정은
    상기 복수 개의 센서 각각으로부터 검출된 압력 분포에 따른 명령어를 생성하는 과정인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  8. 제 5 항에 있어서,
    상기 적용 과정은
    상기 응용 프로그램 활성화에 따라 출력되는 이미지 및 텍스트 중 적어도 하나를 상기 검출된 압력 분포 중 상대적으로 큰 압력이 가해진 센서에 할당된 표시 영역을 나머지 센서에 할당된 표시 영역과 다르게 표시하는 과정인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  9. 제 8 항에 있어서,
    상기 적용 과정은
    상기 상대적으로 큰 압력이 가해진 센서에 할당된 표시 영역의 이미지 및 텍스트 중 적어도 하나를 줌 인 하여 또는 줌 아웃 하여 상기 나머지 센서에 할당된 표시 영역의 이미지 및 텍스트 중 적어도 하나보다 크게 또는 작게 표시하는 과정인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  10. 제 1 항에 있어서,
    터치 패널에서 발생하는 터치 이벤트, 입력부로부터 발생하는 입력 신호, 마이크가 수집한 오디오 신호를 음성 인식한 음성 인식 신호 중 적어도 하나를 검출하는 과정;을 더 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  11. 제 10 항에 있어서,
    상기 명령어를 생성하는 과정은
    상기 검출된 터치 이벤트, 입력 신호 및 음성 인식 신호 중 적어도 하나와 상기 그립 상태에 따른 그립 센서 신호 및 스퀴즈 상태에 따른 스퀴즈 센서 신호 중 적어도 하나를 혼용하여 특정 명령어를 생성하는 과정;인 것을 특징으로 하는 휴대 단말기의 입력 방법.
  12. 제 10 항에 있어서,
    상기 명령어를 생성하는 과정은
    상기 그립 상태에서 추가적인 압력 발생으로 스퀴즈 상태로 변경되는 경우, 그에 대응하는 명령어를 생성하는 과정과;
    상기 스퀴즈 상태가 유지된 상태에서 상기 터치 이벤트, 상기 입력 신호, 상기 음성 인식 신호 중 적어도 하나가 발생하는 경우, 상기 스퀴즈 상태와 상기 터치 이벤트, 상기 스퀴즈 상태와 상기 입력 신호, 상기 스퀴즈 상태와 상기 음성 인 식 신호에 해당하는 적어도 하나의 명령어를 생성하는 과정; 중 적어도 하나의 과정을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 방법.
  13. 단말기에 가해지는 물리력에 따른 압력을 검출하는 센서부와;
    상기 압력이 기 설정된 값 이하인 경우, 그립 상태로 판별하고, 상기 압력이 기 설정된 값 이상인 경우 스퀴즈 상태로 판별한 후, 상기 그립 상태 및 스퀴즈 상태에 따른 명령어를 생성하며, 생성된 명령어를 현재 활성화되고 있는 응용 프로그램에 적용하도록 제어하는 제어부와;
    상기 응용 프로그램을 저장하는 저장부;를 포함하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  14. 제 13 항에 있어서,
    상기 제어부는
    상기 기 설정된 값 이상의 압력 검출 시, 검출된 압력의 크기를 일정 크기별로 구분하고, 각 크기별로 구분된 스퀴즈 상태에 따라 각기 다른 명령어를 생성하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  15. 제 14 항에 있어서,
    상기 압력의 크기 변화를 단계별로 구분하고, 각 단계에 따라 줌인 또는 줌아웃 된 이미지나 텍스트를 출력하는 표시 패널;을 더 포함하는 것을 특징으로 하 는 휴대 단말기의 입력 장치.
  16. 제 13 항에 있어서,
    상기 센서부는
    단말기 특정 위치에 각각 배치되어 가해지는 물리력에 따른 압력을 검출하는 복수 개의 센서들을 포함하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  17. 제 16 항에 있어서,
    상기 제어부는
    상기 복수 개의 센서들로부터 검출된 압력의 평균이 기 설정된 일정 값 이하인 경우 그립 상태로 판별하고, 상기 검출된 압력의 평균이 기 설정된 일정 값 이상인 경우 스퀴즈 상태로 판별하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  18. 제 16 항에 있어서,
    상기 제어부는
    상기 복수 개의 센서 각각으로부터 검출된 압력 분포에 따른 명령어를 생성하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  19. 제 16 항에 있어서,
    상기 응용 프로그램 활성화에 따라 적어도 하나의 이미지 또는 텍스트를 출 력하며 상기 각 센서들에 할당되는 복수 개의 표시 영역을 포함하는 표시 패널;을 더 포함하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  20. 제 19 항에 있어서,
    상기 표시 패널은
    상대적으로 큰 압력이 가해진 센서에 할당된 표시 영역에 출력된 이미지 및 텍스트 중 적어도 하나를 나머지 센서에 할당된 표시 영역에 출력된 이미지 및 텍스트 중 적어도 하나와 다르게 표시하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  21. 제 13 항 또는 제 16 항 중 어느 한 항에 있어서,
    상기 제어부는
    상기 그립 상태에서 추가적인 압력 발생으로 스퀴즈 상태로 변경되는 경우, 그에 대응하는 명령어를 생성하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  22. 제 13 항에 있어서,
    터치에 따른 터치 이벤트를 생성하는 터치 패널과;
    입력 신호를 발생하는 입력부와;
    음성 인식 신호를 위하여 오디오 신호를 수집하는 마이크; 중 적어도 하나를 더 포함하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  23. 제 22 항에 있어서,
    상기 제어부는
    상기 검출된 터치 이벤트, 입력 신호 및 음성 인식 신호 중 적어도 하나와 상기 그립 상태에 따른 그립 센서 신호 및 스퀴즈 상태에 따른 스퀴즈 센서 신호 중 적어도 하나를 혼용하여 특정 명령어를 생성하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
  24. 제 22 항에 있어서,
    상기 제어부는
    상기 스퀴즈 상태가 유지된 상태에서 상기 터치 이벤트, 상기 입력 신호, 상기 음성 인식 신호 중 적어도 하나가 발생하는 경우, 상기 스퀴즈 상태와 상기 터치 이벤트, 상기 스퀴즈 상태와 상기 입력 신호, 상기 스퀴즈 상태와 상기 음성 인식 신호에 해당하는 적어도 하나의 명령어를 생성하는 것을 특징으로 하는 휴대 단말기의 입력 장치.
KR1020090089202A 2009-09-21 2009-09-21 휴대 단말기의 입력 장치 및 방법 KR20110031797A (ko)

Priority Applications (7)

Application Number Priority Date Filing Date Title
KR1020090089202A KR20110031797A (ko) 2009-09-21 2009-09-21 휴대 단말기의 입력 장치 및 방법
US12/854,413 US20110069024A1 (en) 2009-09-21 2010-08-11 Input method and input device of portable terminal
AU2010296260A AU2010296260A1 (en) 2009-09-21 2010-09-09 Input method and input device of portable terminal
PCT/KR2010/006134 WO2011034310A2 (en) 2009-09-21 2010-09-09 Input method and input device of portable terminal
CN2010800418050A CN102498674A (zh) 2009-09-21 2010-09-09 便携式终端的输入方法和输入设备
EP10817379A EP2481159A2 (en) 2009-09-21 2010-09-09 Input method and input device of portable terminal
JP2012529663A JP2013505495A (ja) 2009-09-21 2010-09-09 携帯端末機の入力装置及び方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090089202A KR20110031797A (ko) 2009-09-21 2009-09-21 휴대 단말기의 입력 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20110031797A true KR20110031797A (ko) 2011-03-29

Family

ID=43756218

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090089202A KR20110031797A (ko) 2009-09-21 2009-09-21 휴대 단말기의 입력 장치 및 방법

Country Status (7)

Country Link
US (1) US20110069024A1 (ko)
EP (1) EP2481159A2 (ko)
JP (1) JP2013505495A (ko)
KR (1) KR20110031797A (ko)
CN (1) CN102498674A (ko)
AU (1) AU2010296260A1 (ko)
WO (1) WO2011034310A2 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140075409A (ko) * 2012-12-11 2014-06-19 엘지전자 주식회사 이동 단말기 및 이의제어방법
KR20140126020A (ko) * 2013-04-22 2014-10-30 삼성전자주식회사 사용자 기기 및 그 동작 방법
KR20190040053A (ko) * 2016-08-31 2019-04-16 후아웨이 테크놀러지 컴퍼니 리미티드 포스 터치 기반 통신 강화 방법 및 단말
KR20190102585A (ko) * 2018-02-26 2019-09-04 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US10466830B2 (en) 2016-09-09 2019-11-05 Samsung Electronics Co., Ltd Electronic device and method of controlling electronic device

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8587422B2 (en) 2010-03-31 2013-11-19 Tk Holdings, Inc. Occupant sensing system
US9007190B2 (en) 2010-03-31 2015-04-14 Tk Holdings Inc. Steering wheel sensors
US8725230B2 (en) 2010-04-02 2014-05-13 Tk Holdings Inc. Steering wheel with hand sensors
WO2012135373A2 (en) * 2011-04-01 2012-10-04 Analog Devices, Inc. A dedicated user interface controller for feedback responses
JP5753432B2 (ja) * 2011-04-18 2015-07-22 京セラ株式会社 携帯電子機器
US9063704B2 (en) * 2011-05-05 2015-06-23 Net Power And Light, Inc. Identifying gestures using multiple sensors
JP2013025664A (ja) * 2011-07-25 2013-02-04 Sony Corp 入力装置、入力方法及び制御システム
US20140204063A1 (en) * 2011-09-05 2014-07-24 Nec Casio Mobile Communications, Ltd. Portable Terminal Apparatus, Portable Terminal Control Method, And Program
JP5911961B2 (ja) 2011-09-30 2016-04-27 インテル コーポレイション 意図的でないタッチセンサへの接触を排除するモバイルデバイス
US20130120398A1 (en) * 2011-11-10 2013-05-16 Psion Inc. Input device and method for an electronic apparatus
US20140310636A1 (en) * 2011-11-11 2014-10-16 Nokia Corporation User interface method and apparatus for providing deformation-sensitive input
US8886546B2 (en) * 2011-12-19 2014-11-11 Verizon Patent And Licensing Inc. Voice application access
WO2013101220A1 (en) * 2011-12-30 2013-07-04 Intel Corporation Mobile device operation using grip intensity
KR101912409B1 (ko) * 2012-01-06 2018-10-26 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US20130257747A1 (en) * 2012-03-30 2013-10-03 David P. Rossing Touch-sensitive personalized display
WO2013154720A1 (en) 2012-04-13 2013-10-17 Tk Holdings Inc. Pressure sensor including a pressure sensitive material for use with control systems and methods of using the same
CN102662474B (zh) * 2012-04-17 2015-12-02 华为终端有限公司 控制终端的方法、装置和终端
KR102045511B1 (ko) * 2012-07-18 2019-11-15 삼성전자 주식회사 센서 허브를 포함하는 단말기 및 단말기의 제어 방법
CN103677594B (zh) * 2012-09-04 2018-04-27 中兴通讯股份有限公司 文本处理方法和装置
JP6260622B2 (ja) 2012-09-17 2018-01-17 ティーケー ホールディングス インク.Tk Holdings Inc. 単一層力センサ
US9432017B2 (en) * 2012-09-25 2016-08-30 Hewlett-Packard Development Company, L.P. Display with touch sensing system
US9152247B2 (en) * 2012-10-24 2015-10-06 Google Inc. Computing device with force-triggered non-visual responses
KR101885655B1 (ko) * 2012-10-29 2018-09-10 엘지전자 주식회사 이동 단말기
JP6089317B2 (ja) * 2013-01-24 2017-03-08 シャープ株式会社 電子機器、および電子機器操作制御プログラム
TWI482064B (zh) * 2013-03-25 2015-04-21 Wistron Corp 可攜式裝置與操作方法
US9575557B2 (en) * 2013-04-19 2017-02-21 Qualcomm Incorporated Grip force sensor array for one-handed and multimodal interaction on handheld devices and methods
US9625884B1 (en) * 2013-06-10 2017-04-18 Timothy Harris Ousley Apparatus for extending control and methods thereof
CN103500062A (zh) * 2013-09-17 2014-01-08 华为技术有限公司 一种终端、终端控制方法及装置
US20150077392A1 (en) * 2013-09-17 2015-03-19 Huawei Technologies Co., Ltd. Terminal, and terminal control method and apparatus
WO2015053249A1 (ja) * 2013-10-09 2015-04-16 株式会社村田製作所 入力装置及びプログラム
CN104063086A (zh) * 2013-11-05 2014-09-24 苏州天鸣信息科技有限公司 一种基于压力感测进入应用程序的行动装置及其方法
JP6485618B2 (ja) * 2013-11-11 2019-03-20 Tianma Japan株式会社 圧電シートならびにそれを用いたタッチパネルならびにそれらを用いた入出力装置
KR101653610B1 (ko) * 2013-11-21 2016-09-02 삼성전자주식회사 압력 변화에 기초한 영상 표시 방법, 영상 처리 장치, 방사선 촬영 장치 및 자기 공명 영상 장치
JP6619132B2 (ja) * 2014-08-28 2019-12-11 京セラ株式会社 携帯電子機器、制御方法、及び制御プログラム
US10386914B2 (en) 2014-09-19 2019-08-20 Huawei Technologies Co., Ltd. Method and apparatus for running application program
WO2016082215A1 (zh) * 2014-11-28 2016-06-02 华为技术有限公司 一种移动屏幕界面的方法及终端
CN104461322A (zh) * 2014-12-30 2015-03-25 中科创达软件股份有限公司 一种手持设备的用户界面显示方法及系统
KR20160088081A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 영상 촬영 기기의 햅틱 인터페이스 및 이의 제어 방법
US20160217681A1 (en) * 2015-01-23 2016-07-28 Honeywell International Inc. Method to invoke backup input operation
KR101577277B1 (ko) * 2015-02-04 2015-12-28 주식회사 하이딥 터치종류 판별방법 및 이를 수행하는 터치 입력 장치
AU2015390534B2 (en) 2015-04-10 2019-08-22 Honor Device Co., Ltd. Speech recognition method, speech wakeup apparatus, speech recognition apparatus, and terminal
US10372212B2 (en) 2015-05-29 2019-08-06 Google Llc Techniques for simulated physical interaction between users via their mobile computing devices
CN104932740B (zh) * 2015-06-02 2018-05-08 惠州Tcl移动通信有限公司 移动终端触摸屏激活的系统及其方法
CN105100476B (zh) * 2015-07-28 2019-10-15 努比亚技术有限公司 一种移动终端解锁装置和方法
CN105183330B (zh) * 2015-09-29 2019-03-05 努比亚技术有限公司 图像删除方法和装置
CN105872818A (zh) * 2015-11-25 2016-08-17 乐视网信息技术(北京)股份有限公司 一种发布视频评论的方法及系统
CN108463791B (zh) * 2016-01-12 2021-08-31 株式会社村田制作所 电子设备
CN107203304B (zh) * 2016-03-17 2020-02-07 中兴通讯股份有限公司 利用压力实现应用的功能界面的方法及装置
CN105976157A (zh) * 2016-04-25 2016-09-28 中兴通讯股份有限公司 任务的创建方法及装置
US10664092B2 (en) * 2016-09-09 2020-05-26 Htc Corporation Portable electronic device, operating method for the same, and non-transitory computer readable recording medium
US10095342B2 (en) 2016-11-14 2018-10-09 Google Llc Apparatus for sensing user input
CN106961521B (zh) * 2017-03-27 2020-08-25 联想(北京)有限公司 电子设备及其提醒生成方法
US10001808B1 (en) 2017-03-29 2018-06-19 Google Llc Mobile device accessory equipped to communicate with mobile device
US10013081B1 (en) 2017-04-04 2018-07-03 Google Llc Electronic circuit and method to account for strain gauge variation
US11250844B2 (en) * 2017-04-12 2022-02-15 Soundhound, Inc. Managing agent engagement in a man-machine dialog
US10635255B2 (en) 2017-04-18 2020-04-28 Google Llc Electronic device response to force-sensitive interface
US10514797B2 (en) 2017-04-18 2019-12-24 Google Llc Force-sensitive user input interface for an electronic device
KR102353487B1 (ko) * 2017-08-10 2022-01-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
CN107491089A (zh) * 2017-08-24 2017-12-19 深圳市高巨创新科技开发有限公司 一种无人机控制方法
US10824242B2 (en) * 2017-10-05 2020-11-03 Htc Corporation Method for operating electronic device, electronic device and computer-readable recording medium thereof
CN109462882A (zh) * 2018-09-03 2019-03-12 珠海格力电器股份有限公司 终端的控制方法、装置和终端
US11550394B2 (en) * 2018-11-08 2023-01-10 Goto Group, Inc. Force-based control for a mobile device having a non-linear surface
KR20210041785A (ko) * 2019-10-08 2021-04-16 삼성전자주식회사 키 구조, 키 입력 방법 및 이를 이용하는 전자 장치

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6624824B1 (en) * 1996-04-30 2003-09-23 Sun Microsystems, Inc. Tilt-scrolling on the sunpad
US6160540A (en) * 1998-01-12 2000-12-12 Xerox Company Zoomorphic computer user interface
US7098776B2 (en) * 2003-04-16 2006-08-29 Massachusetts Institute Of Technology Methods and apparatus for vibrotactile communication
JP2005142929A (ja) * 2003-11-07 2005-06-02 Sony Ericsson Mobilecommunications Japan Inc 携帯端末
JP2005175815A (ja) * 2003-12-10 2005-06-30 Sony Corp 触覚機能付入力装置および電子機器並びに電子機器の感触フィードバック入力方法
JP4444023B2 (ja) * 2004-06-30 2010-03-31 株式会社エヌ・ティ・ティ・ドコモ 携帯端末
FR2875024B1 (fr) * 2004-09-09 2007-06-08 Itt Mfg Enterprises Inc Dalle tactile comportant des moyens pour produire une impulsion mecanique en reponse a une action de commande, et agencement pour le montage de cette dalle
JP2006201984A (ja) * 2005-01-20 2006-08-03 Nec Corp 携帯情報端末及びそれに用いる文字入力方法
AU2006218381B8 (en) * 2005-03-04 2012-02-16 Apple Inc. Multi-functional hand-held device
US20070080940A1 (en) * 2005-10-07 2007-04-12 Sharp Kabushiki Kaisha Remote control system, and display device and electronic device using the remote control system
JP4587940B2 (ja) * 2005-11-11 2010-11-24 シャープ株式会社 遠隔制御システムおよび表示装置
US20080024454A1 (en) * 2006-07-31 2008-01-31 Paul Everest Three-dimensional touch pad input device
US8116831B2 (en) * 2007-11-29 2012-02-14 Motorola Mobility, Inc. Hand-held communication device with auxiliary input apparatus, and method
KR101475354B1 (ko) * 2007-12-28 2014-12-22 삼성전자주식회사 압력 센서가 내장된 휴대 단말기 및 그의 압력 측정 방법
KR20090084636A (ko) * 2008-02-01 2009-08-05 엘지전자 주식회사 복수의 압력 센서를 장착한 이동 단말기 및 그 제어 방법
JP4600548B2 (ja) * 2008-08-27 2010-12-15 ソニー株式会社 再生装置、再生方法、およびプログラム
US8749495B2 (en) * 2008-09-24 2014-06-10 Immersion Corporation Multiple actuation handheld device
US20100134424A1 (en) * 2008-12-02 2010-06-03 At&T Mobility Ii Llc Edge hand and finger presence and motion sensor
US20100302176A1 (en) * 2009-05-29 2010-12-02 Nokia Corporation Zoom-in functionality

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140075409A (ko) * 2012-12-11 2014-06-19 엘지전자 주식회사 이동 단말기 및 이의제어방법
KR20140126020A (ko) * 2013-04-22 2014-10-30 삼성전자주식회사 사용자 기기 및 그 동작 방법
US9836275B2 (en) 2013-04-22 2017-12-05 Samsung Electronics Co., Ltd. User device having a voice recognition function and an operation method thereof
KR20190040053A (ko) * 2016-08-31 2019-04-16 후아웨이 테크놀러지 컴퍼니 리미티드 포스 터치 기반 통신 강화 방법 및 단말
US10466830B2 (en) 2016-09-09 2019-11-05 Samsung Electronics Co., Ltd Electronic device and method of controlling electronic device
KR20190102585A (ko) * 2018-02-26 2019-09-04 엘지전자 주식회사 이동 단말기 및 그 제어 방법

Also Published As

Publication number Publication date
JP2013505495A (ja) 2013-02-14
WO2011034310A2 (en) 2011-03-24
EP2481159A2 (en) 2012-08-01
US20110069024A1 (en) 2011-03-24
AU2010296260A1 (en) 2012-04-12
CN102498674A (zh) 2012-06-13
WO2011034310A3 (en) 2011-08-25

Similar Documents

Publication Publication Date Title
KR20110031797A (ko) 휴대 단말기의 입력 장치 및 방법
EP2182452B1 (en) Mobile terminal and control method thereof
EP2778865B1 (en) Input control method and electronic device supporting the same
US9619025B2 (en) Method and system for operating a mobile device according to the rate of change of the touch area
EP3001414B1 (en) Method for executing voice command and electronic device
KR20100120958A (ko) 입력 신호 종류 별 사용자 기능 활성화 방법 및 이를 지원하는 휴대 단말기
US8560967B2 (en) Mobile terminal and method of providing information using the same
AU2011358860B2 (en) Operating method of terminal based on multiple inputs and portable terminal supporting the same
CN106453859B (zh) 一种语音控制方法及移动终端
KR101545881B1 (ko) 휴대 단말기의 입력 처리 장치 및 방법
KR20100124438A (ko) 휴대 단말기의 페이지 제공 방법 및 이를 지원하는 휴대 단말기
KR101650339B1 (ko) 휴대 단말기의 문자 입력 방법 및 이를 지원하는 휴대 단말기
US20150169551A1 (en) Apparatus and method for automatic translation
KR20100052378A (ko) 휴대 단말기의 모션 입력 장치 및 그의 운용 방법
RU2689430C1 (ru) Система и способ управления сенсорным экраном с помощью двух костяшек пальцев
CN103207726B (zh) 在便携式终端中提供快捷服务的装置和方法
CN108604160A (zh) 触摸屏手势识别的方法及装置
KR20140105340A (ko) 휴대 단말기의 멀티 태스킹 운용 방법 및 장치
CN111028867B (zh) 一种音频播放方法及电子设备
KR20100047718A (ko) 단말기 및 그 제어 방법
KR101766301B1 (ko) 전자기기에서 문자 입력 방법 및 장치
KR101521927B1 (ko) 단말기 및 그 제어 방법
KR20100099541A (ko) 휴대 단말기의 문자 입력 방법 및 장치
KR20050056737A (ko) 그래픽 유저 인터페이스를 이용한 메뉴 선택 기능을가지는 무선통신단말기 및 그 방법

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid