KR101509245B1 - 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법 - Google Patents

휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법 Download PDF

Info

Publication number
KR101509245B1
KR101509245B1 KR20080075111A KR20080075111A KR101509245B1 KR 101509245 B1 KR101509245 B1 KR 101509245B1 KR 20080075111 A KR20080075111 A KR 20080075111A KR 20080075111 A KR20080075111 A KR 20080075111A KR 101509245 B1 KR101509245 B1 KR 101509245B1
Authority
KR
South Korea
Prior art keywords
pattern
user
command
touch screen
input
Prior art date
Application number
KR20080075111A
Other languages
English (en)
Other versions
KR20100013539A (ko
Inventor
김남웅
김석순
김성은
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR20080075111A priority Critical patent/KR101509245B1/ko
Priority to US12/462,232 priority patent/US20100026642A1/en
Priority to JP2011521046A priority patent/JP5204305B2/ja
Priority to PCT/KR2009/004293 priority patent/WO2010013974A2/en
Priority to CN200980130364.9A priority patent/CN102112948B/zh
Publication of KR20100013539A publication Critical patent/KR20100013539A/ko
Application granted granted Critical
Publication of KR101509245B1 publication Critical patent/KR101509245B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 터치 스크린을 이용하는 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스 장치 및 방법에 관한 것이다. 본 발명은 터치 스크린을 통해 소정의 패턴 및 명령어를 입력하여 이에 대응하는 동작을 실행시키는 사용자 인터페이스 장치 및 방법이다. 사용자의 입장에서 원하는 기능을 추가하거나 수정하여 보다 자신에게 알맞은 사용자 인터페이스 환경을 만들어갈 수 있고, 다양한 어플리케이션(application) 적용이 가능하다.
터치 스크린, 패턴 인식, 사용자 인터페이스, 자이로 센서, 터치 패널

Description

휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스 장치 및 방법{USER INTERFACE APPARATUS AND METHOD FOR USING PATTERN RECOGNITION IN HANDY TERMINAL}
본 발명은 터치 스크린을 구비하는 휴대용 단말기에서 명령어 입력을 보다 효율적이고 간소화된 방식으로 구현하기 위해 패턴 인식 기술을 이용한 사용자 인터페이스 장치 및 방법에 관한 것이다.
디지털 휴대용 단말기의 사용이 대중화됨과 동시에 정보처리기로서의 고성능화가 이루어지면서 사용자 입력 정보를 처리하는 여러 다양한 방법들이 제안되고 있다. 이는 디지털 휴대용 단말에 있어 구현된 폰 북, 단문 메시지 작성, 전자 수첩 기능들을 사용자가 보다 용이하게 사용할 수 있도록 하기 위한 방법이다. 그러한 방법들 중 하나가 터치 스크린(또는 터치 패널)을 이용한 입력 방법이다. 터치 스크린 방식은 사용자 인터페이스의 편리성 때문에 휴대용 정보 단말기(PDA), 휴대폰이 복합된 스마트 폰, 인터넷 폰 등에서 폰 북, 스케줄러, 단문 메시지, 개인 정보 관리, 인터넷 접속, 전자 사전 등의 기능을 수행할 때 많이 사용되고 있다. 현재 터치 스크린을 이용하는 휴대용 단말기에서는 접촉식 정전 용량(Capacitive) 방 식 또는 저항막(Resistive) 방식을 가장 많이 사용하고 있다.
터치 스크린은 새로운 방식의 사용자 인터페이스 장치를 제공하고, 스타일러스 펜 또는 손가락이 눌러진 위치에 전압 또는 전류 신호를 발생함으로써 사용자가 지정하는 명령 또는 그래픽 정보를 입력하게 된다. 상기 터치 스크린 방식은 패턴 인식(Pattern Recognition) 기술과 이를 지원하는 소프트웨어의 개발에 따라 제안된 문자 인식 기능을 통해 구현될 수 있으며, 사용자가 원하는 정보를 펜이나 손과 같이 자연적으로 사용되는 입력수단을 통해 편리하게 입력할 수 있어 그 사용이 증가 되고 있다.
특히, 터치 스크린은 사용자가 스크린을 보면서 원하는 작업을 직접 수행할 수 있고, 누구나 쉽게 조작할 수 있기 때문에 GUI(Graphical User Interface) 환경하에서 가장 이상적인 입력 방법으로 평가받고 있다.
현재 터치 스크린상에서 문자와 도형을 인식할 수 있는 패턴 인식(Pattern Recognition)기술은 단순 스트로크(stroke) 기능을 이용하여 확인, 앞 페이지, 뒤 페이지, Del, Save, Load, Cancel등의 기능을 지원하고 있다. 또는 명령어들의 묶음을 이용하여 단축 명령을 구현하는 형태의 기술이다. 그러나 스트로크(stroke)를 이용한 기술은 제한된 명령어와 구현 방식에 있어서 한계를 지니고 있다. 즉 스트로크 기능의 모양을 일일이 기억해야 하며 사용자의 필요에 의한 추가 기능이 부족하다. 그리고 일련의 명령어들을 묶어서 사용하는 것은 사용자의 편의성을 떨어트린다. 따라서 터치 스크린을 이용하는 휴대용 단말기에서 사용자 인터페이스를 보다 효율적이고 간편하게 구현할 수 있는 방안이 절실히 요구된다.
본 발명은 전술한 종래 기술의 문제점을 해결하기 위한 것으로서, 휴대용 단말기에서 좀더 효율적이고 간편한 사용자 인터페이스를 위하여 터치 스크린에 패턴 인식 기술을 이용하여 명령어를 입력하고 실행하는 사용자 인터페이스 장치 및 방법을 제공한다.
또한 본 발명은 사용자의 편의성을 고려하여 패턴 인식을 이용한 명령을 단순화함으로써 실행 명령과 이동 명령 등으로 구분하고 각각에 맞는 명령어를 지정하는 사용자 인터페이스 장치 및 방법을 제공한다.
또한 본 발명은 터치 스크린상에 잘못된 내용이 입력된 경우 사용자가 간편하고 편리한 방법으로 삭제하거나 취소할 수 있는 사용자 인터페이스 장치 및 방법을 제공한다.
본 발명은 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 방법에 있어서, 사용자에 의해 상기 터치 스크린상에 그려진 소정의 패턴과 상기 소정의 패턴에 의해 정의되는 영역 내에 쓰인 소정의 명령어를 제공받는 과정과 상기 제공된 소정의 패턴 및 명령어가 유효한 패턴 및 명령어일 시, 상기 소정의 패턴 및 명령어의 조합에 대응하는 기능을 수행하는 과정을 포함하는 것을 특징으로 하는 사용자 인터페이스 방법을 제안한다.
또한, 본 발명은 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이 스 장치에 있어서,상기 터치 스크린을 구비하며, 상기 터치 스크린을 통해 소정의 패턴 또는 소정의 명령어를 입력받고 현재 입력 상태 및 동작 수행 결과를 출력하는 입/출력부와 상기 입/출력부를 통해 상기 터치 스크린상에 그려진 소정의 패턴과 상기 소정의 패턴에 의해 정의되는 영역 내에 쓰인 소정의 명령어를 제공받고, 상기 제공된 소정의 패턴 및 명령어가 유효한 패턴 및 명령어일 시, 상기 소정의 패턴 및 명령어의 조합에 대응하는 기능을 수행하기 위해 상기 휴대용 단말기의 동작을 제어하는 제어부를 포함하는 것을 특징으로 하는 사용자 인터페이스 장치를 제안한다.
또한, 본 발명은 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 방법에 있어서, 상기 터치 스크린을 통해 정보를 입력받는 과정과 상기 입력된 정보를 상기 터치 스크린상에 표시하는 과정과 사용자에 의한 상기 휴대용 단말기의 흔들림을 감지할 시, 상기 터치 스크린상에 표시된 정보를 삭제하는 과정을 포함하는 것을 특징으로 하는 사용자 인터페이스 방법을 제안한다.
본 발명은 차세대 이동 통신 단말기의 주요 기술로 사용될 햅틱(haptic)의 한 종류로서 사용자의 입장에서 폭넓은 명령어를 적용할 수 있으며 사용자의 편의에 따른 변경이 가능하다.
또한 사용자의 입장에서 원하는 기능을 추가하거나 수정하여 보다 자신에게 알맞는 사용자 인터페이스 환경을 만들어갈 수 있고, 정해진 사용자 인터페이스를 사용하지 않고도 필요에 의한 동적인 활용이 가능하다. 또한, 다양한 어플리케이션(application) 적용이 가능하다.
하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술 되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명은 터치 스크린을 이용하는 휴대용 단말기에서 명령어 입력을 보다 효율적이고 간소화된 방식으로 구현하기 위해 패턴 인식 기술을 이용한 사용자 인터페이스 장치 및 방법을 제안한다.
후술하는 본 발명의 상세한 설명에서는 이동통신 단말기를 전제로 설명하고 있지만, 터치 스크린을 사용하는 휴대용 단말기에도 본 발명에서 제안하는 장치 및 방법이 적용될 수 있음은 자명할 것이다.
이하 본 발명의 실시 예들을 첨부된 도면을 참조하여 상세히 설명한다.
도 1은 본 발명의 제 1 실시 예에 따른 휴대용 단말기의 구성을 도시하고 있다. 도 1을 참조하면, 상기 휴대용 단말기는 크게 제어부(101), 입/출력부(105), 메모리 부(113)로 구성된다. 상기 제어부(101)는 형상 인식기(103)를 포함할 수 있다. 상기 입/출력부(105)는 터치 패널(107), 표시부(109), 구동부(111)를 포함한다.
이하 설명에 있어서 상기 장치들의 동작에 대하여 본 발명의 내용과 관련 없는 부분은 생략한다.
먼저, 사용자는 이동 통신 단말기의 기능키(function key, hot key, 도 6 참조)를 통하여 패턴을 인식하는 사용자 인터페이스 모드로 한번에 진입할 수 있으며, 기존의 사용자 인터페이스와 연동하여 사용할 수 있다.
상기 패턴 인식 사용자 인터페이스 모드로 진입을 한 경우, 사용자는 상기 터치 패널(107)(또는 터치 스크린이라 칭함)을 통해 스타일러스 펜이나 손가락으로 소정의 패턴 및 소정의 명령어를 입력할 수 있다. 본 발명에서 명령 입력창으로 사용될 패턴은 도형 또는 심볼이 될 수 있고, 그 도형 및 심볼 안에 들어가는 내용이 명령어가 된다. 상기 명령어는 문자로 표현되는 것이 일반적이다.
상기 터치 패널(107)은 사용자로부터 상기 패턴을 입력받아 터치 패널 데이터를 출력한다. 여기서 상기 터치 패널 데이터는 상기 제어부(101)가 패턴을 인식함에 있어서 필요한 공간 좌표 데이터와 해당 문자의 획수를 나타내는 획 데이터의 자원으로 이루어진다.
상기 표시부(109)는 현재 터치 스크린상에 입력된 내용이나 본 발명에 의한 명령 실행 결과를 보여준다. 상기 구동부(111)는 상기 터치 패널(107)로부터 출력된 아날로그 신호를 디지털 형태의 터치 패널 데이터로 변환하여 상기 제어부(101)로 출력하는 동작을 수행한다. 또한 구동부(111)는 상기 제어부(101)로부터 출력된 디지털 신호를 아날로그 형태의 신호로 변환하여 상기 표시부(109)로 출력하는 동작을 수행하거나 현재 사용자가 터치 스크린에 입력한 내용을 사용자가 확인할 수 있도록 상기 표시부(109)에 전달하는 역할을 수행한다.
상기 제어부(101)는 사용자가 터치 스크린(또는 터치 패널)을 통해 입력하는 패턴 및 명령어를 인식하고 상기 메모리(113)에 등록되어 있는 동작을 수행하는 기능을 처리한다. 구체적으로, 사용자로부터 터치 패널(107)을 통해 명령 패턴이 입력되는 경우 상기 제어부(101)는 상기 구동부(111)로부터 디지털 형태의 터치 패널 데이터를 수신하게 된다.
상기 제어부(101)는 상기 수신된 터치 패널 데이터를 형상 인식기(103)로 제공하여 입력된 패턴 또는 명령어가 문자인지 심볼(도형) 인지를 인식한다.
상기 제어부(101) 내의 형상 인식기(103)는 사전에 프로그램 코드화된 패턴 인식 프로그램에 따라 상기 터치 패널(107)에 입력된 문자 또는 심볼의 정확한 좌표 데이터와 획 데이터를 계산하여 독출하고, 상기 독출된 데이터들을 상기 문자 또는 심볼로 인식하여 해당 문자 또는 심볼의 인식 동작을 수행하는 역할을 한다. 여기서, 상기 인식된 문자 또는 심볼은 메모리(113)에 코드(열)로 저장된다. 상기 형상 인식기(103)가 심볼(도형)을 인식하는 과정에서 발생하는 문자와의 구분은 도형의 크기를 이용하여 구분할 수 있다. 즉, 형상의 크기가 일정한 크기(size) 이상이 될 경우 문자가 아닌 명령어 입력창으로 사용될 도형 또는 심볼로 인식한다.
상기 제어부(101)는 상기 형상 인식기(103)로부터 출력된 패턴을 기설정된 메모리 부(113) 내에 저장된 패턴과 일치하는 패턴을 선택한 후 상기 패턴에 대응하는 동작 명령을 확인한다.
예를 들어, 본 발명의 실시 예에서는 명령어 입력창으로 사용될 도형으로 사각형과 마름모가 주요 패턴이 되며 그 도형 안에 들어가는 내용이 명령어가 된다. 상기 사각형은 실행 명령을 나타내며, 상기 마름모는 이동 명령을 나타내는 것으로 가정한다. 상기 명령어 입력창은 다른 도형이 될 수 있고 사용자가 기능 설정을 통하여 임의로 설정할 수도 있다.
따라서 터치 스크린을 통해 사용자가 스타일러스 펜으로 일정한 크기 이상의 사각형을 입력하는 경우, 상기 형상 인식기(103)는 상기 사각형이 문자가 아닌 도형임을 인식한다. 상기 형상 인식기(103)는 입력된 패턴에 대한 형상 정보를 상기 제어부(101)로 제공한다. 상기 제어부(101)는 상기 형상 인식기(103)로부터 제공받은 정보를 이용하여 상기 메모리 부(113)에 기설정되어 등록된 패턴과 일치하는지 여부를 판단한다.
사용자로부터 터치 패널(107)을 통해 입력된 패턴이 상기 메모리(113)에 등록된 유효한 패턴이 아닐 경우 동작하지 아니하고 새로운 패턴의 재입력이 요구된다. 그러나 상기 입력된 패턴이 유효한 패턴일 경우 상기 제어부(101)는 입력된 패턴에 대응되는 동작 명령을 확인한다. 상기에서 가정한 바와 같이, 본 발명에서는 명령 입력창으로 사각형이 입력되는 경우에 상기 제어부(101)는 상기 사각형을 실행 명령 창으로 인식하고, 명령 입력창으로 마름모가 입력되는 경우에는 상기 제어부(101)는 상기 마름모를 이동 명령 창으로 인식한다.
상기 메모리 부(113)는 초기에 기설정된 패턴 및 명령어를 저장하고 있거나, 사용자가 기능 등록시 새로운 패턴 및 명령어를 정의하고 필요한 기능 및 동작을 추가하여 저장할 수 있다.
하기 표 1은 본 발명의 실시 예를 설명하기 위한 메모리 테이블이다. 표 1은 상기 메모리 부(113)에 저장된 패턴 및 명령어의 일 예를 설명하고 있을 뿐이고, 사용자의 정의에 따라 언제든지 새로운 패턴, 명령어, 기능의 정의 및 추가 설정이 가능하다.
패턴
명령어
기능
Figure 112008055420716-pat00001
C Call sending(전화 연결)
S SMS(MMS) 전송
V 벨에서 진동으로 변경
B 진동에서 벨로 변경
X
.
.
전원 off
.
.
Figure 112008055420716-pat00002

.
.
V Vocabulary 메뉴로이동
P 폰 북 메뉴로 이동
A 알람 메뉴로 이동
M MP3 메뉴로 이동
C 카메라 메뉴로 이동
N 메모장 메뉴로 이동
CL 계산기 메뉴로 이동
S
.
.
설정창으로 이동
.
.
사용자는 터치 스크린(혹은 터치 패널)에 스타일러스 펜으로 명령 입력창(사각형, 마름모 등)을 입력한 후 상기 명령 입력창 안에 소정의 명령어를 입력한다. 상기 터치 패널(107)을 통해 입력된 터치 패널 데이터는 상기 구동부(111)를 통해 아날로그 신호에서 디지털 신호로 변환된 후 상기 제어부(101)로 제공된다. 상기 제어부(101) 내의 형상 인식기(103)는 상기 터치 패널 데이터를 제공받아 상기 입력된 명령어를 인식한다. 상기 형상 인식기(103)는 입력된 명령어에 대한 형상 정보를 상기 제어부(101)에 제공한다. 상기 제어부(101)는 상기 형상 인식기(103)로부터 제공받은 정보를 이용하여 상기 메모리(113)에 등록된 명령어와 일치하는지 여부를 판단한다. 사용자로부터 터치 패널(107)을 통해 입력된 명령어가 상기 메모리(101)에 등록된 유효한 명령어가 아닌 경우 동작하지 아니하고 오류메시지를 발생시킨다. 그러나 상기 입력된 명령어가 유효한 명령어일 경우, 상기 제어부(101)는 입력된 명령어에 대응하는 기능을 확인한다.
사용자에 의한 패턴 및 명령어의 입력이 완료되고, 사용자에 의한 실행 동작의 입력이 있는 경우 상기 제어부(101)는 상기 입력된 패턴 및 명령어에 대응하여 상기 메모리(113)에 등록된 기능을 수행한다.
본 발명의 실시 예에서 상기 터치스크린을 통해 상기 동작을 실행시키는 방법은 스타일러스 펜으로 상기 명령 입력창(패턴)과 명령어를 입력한 후 입력된 부분을 손가락으로 누르는 것이다. 이와 같이 명령어의 입력 동작과 상기 입력된 명령어를 실행시키는 동작은 입력 방식에 의해 구분할 수 있도록 한다. 즉 입력 도구에 의해 구분되는 눌림 면적에 의해 명령어 입력인지 명령어 실행인지를 구분할 수 있다.
그러나 동작을 실행시키는 다른 방법으로 스타일러스 펜 등으로 상기 입력된 부분을 두 번 두드리는 등의 방법들이 사용될 수 있다는 것은 당업자에게 자명하다.
본 발명의 터치 스크린은 저항막 방식의 터치 패드 센서 기술을 이용함으로써, 손가락에 의한 입력과 스타일러스 펜을 이용한 방식을 구분할 수 있다. 저항막 방식은 일정한 전압이 걸린 상판과 하판을 터치시 접촉위치에 전위차가 발생하고 이를 콘트롤러(controller)가 감지하여 터치된 부분을 감지하는 방식이다. 따라서 저항막 방식을 이용하는 터치 스크린상에서 터치시 접촉되는 면적에 따라 손가락에 의한 입력과 스타일러스 펜을 이용한 입력을 구분할 수 있다.
이처럼, 본 발명의 실시 예에 따른 휴대용 단말기를 사용함으로써 제한된 명령어와 구현 방식의 한계를 극복하고, 사용자 인터페이스를 보다 효율적이고 간소화된 방식으로 구현할 수 있다.
도 2는 본 발명의 제 2 실시 예에 따른 휴대용 단말기의 구성을 도시하고 있다.
도 2를 참조하면, 도 1에 도시된 제어부(201), 메모리 부(213), 입/출력 부(205)에 센서 부(215)를 더 추가함으로써 상기 터치 패널(또는 터치 스크린,207)에 입력된 내용을 지우거나 명령 입력창을 취소할 수 있는 사용자 인터페이스 장치를 제공한다.
본 발명에서는 상기 센서 부(215)로 자이로 센서를 이용하고 있으나 이와 유사한 기능을 하는 다른 센서 장치도 이용가능하다. 사용자가 터치 스크린상에 내용을 잘못 입력한 경우나 입력된 내용을 취소하고자 하는 경우, 사용자는 휴대용 단말기를 상하/좌우로 흔들어줌으로써 상기 터치스크린 상에 입력된 내용을 지우거나 취소할 수 있다.
상기 터치 스크린상에 내용 입력이 있은 후에, 사용자가 소정의 세기 이상으로 상기 휴대용 단말기를 흔들게 되면 상기 자이로 센서(215)는 상기 흔들림을 감지하여 전기적 신호를 발생시킨다. 상기 제어부(201)는 상기 자이로 센서(215)로부터 전기적 신호를 받아 전체 지우기 및 명령 입력창 취소를 수행한다.
상기 입/출력부(205)는 상기 제어부(201)로부터의 제어에 의해 현재 표시되고 있는 화면 전체를 지우거나 표시된 명령 입력창을 취소한다.
따라서 본 발명은 상기 터치스크린 상에 입력된 내용이나 명령 입력창 등이 잘못된 경우 별도의 복잡한 동작을 취하지 않고 휴대용 단말을 흔들어줌으로써 간편하게 삭제할 수 있는 사용자 인터페이스 장치를 제공한다.
도 3은 본 발명의 제 1 실시 예에 따른 사용자 인터페이스 방법을 설명하기 위한 제어 흐름을 보이고 있다. 이하에서 설명하는 사용자 인터페이스 방법은 상기 제어부에서 수행하는 것이 일반적이다.
도 3을 참조하면, 301단계에서 제어부는 사용자로부터 본 발명에 따른 기능 등록 요청이 있는지를 판단한다. 사용자로부터 기능 등록 요청이 없는 경우에는 305단계로 이동하여 사용자로부터 본 발명에 따른 기능 수행 요청이 있는지를 판단한다. 한편 사용자로부터 기능 등록 요청 및 기능 수행 요청이 없는 경우, 상기 제어부는 본 발명에 따른 절차를 종료한다.
만약 사용자로부터 기능 등록 요청이 있는 경우 303단계로 이동하여 기능 등록 서브루틴을 수행한다. 상기 기능 등록 서브루틴에 대해서는 하기에서 구체적으로 설명한다.
한편, 사용자로부터 기능 수행 요청이 없는 경우에는 상기 절차를 종료하게 된다. 그러나 사용자로부터 기능 수행 요청이 있는 경우에는 307단계로 이동하여 기능 수행 서브루틴을 수행하게 된다. 상기 기능 수행 서브루틴에 대해서는 하기에서 구체적으로 설명한다.
도 4는 도 3에서의 기능 등록 서브루틴에 따른 구체적인 제어 흐름을 보이고 있다.
도 4를 참조하면, 기능 등록 서브루틴의 401단계에서 제어부는 사용자로부터 명령 입력창으로 사용될 패턴의 설정 요청이 있는지를 판단한다. 사용자로부터 패턴의 설정 요청이 있는 경우 403단계로 이동한다. 상기 403단계에서 상기 제어부는 사용자가 설정하고자 하는 패턴을 입력받는다. 사용자가 입력하는 패턴은 미리 설정된 도형이나 심볼일 수도 있고, 사용자가 직접 터치스크린 상에 스타일러스 펜으로 패턴을 그려 임의로 설정할 수도 있다. 상기 패턴의 입력이 완료된 경우 상기 제어부는 405단계로 이동한다. 상기 405단계에서 상기 제어부는 상기 패턴에 대응하는 동작 명령 즉, 실행 명령이나 이동 명령 등이 입력되는지를 판단한다.
상기 동작 명령이 입력되지 않은 경우 상기 제어부는 상기 403단계로 이동하고, 입력이 완료된 경우에 상기 제어부는 407단계로 이동한다. 상기 패턴에 대응하는 동작 명령도 사용자가 미리 설정된 명령을 선택할 수 있거나 임의로 설정할 수 있다. 본 발명의 바람직한 실시 예에서 상기 패턴의 일 예로 사각형은 실행 명령창이고, 마름모는 이동 명령창으로 설명하고 있다.
상기 407단계에서 상기 제어부는 상기 패턴에 대응하는 동작 명령이 결정되면, 상기 입력된 패턴 및 동작 명령을 메모리에 등록한다. 상기 407단계가 완료되는 경우와 사용자로부터 상기 패턴의 설정 요청이 없는 경우 상기 제어부는 409단계로 이동한다.
상기 409단계에서 상기 제어부는 사용자로부터 상기 명령 입력창으로 사용될 패턴 안에 사용될 명령어의 설정 요청이 있는지를 판단한다. 만약 사용자로부터 명령어 설정 요청이 없는 경우 상기 제어부는 상기 기능 등록을 종료하게 된다. 그러나 사용자로부터 명령어 설정 요청이 존재하는 경우 상기 제어부는 411단계로 이동한다. 상기 411단계에서 상기 제어부는 사용자가 설정하고자 하는 명령어를 입력받는다. 상기 명령어는 미리 설정된 내용이 선택되거나 사용자가 새로운 명령어를 추가로 설정할 수도 있다. 상기 명령어의 입력이 완료된 경우 상기 제어부는 413단계로 이동한다.
상기 413단계에서 상기 제어부는 명령어에 대응하는 기능, 예를 들어 Call(또는 C) => 전화 연결, Voc(또는 V) => 사전 이동 등등이 입력되는지를 판단한다. 상기 제어부는 상기 기능이 입력되지 않은 경우 상기 411단계로 이동하고, 입력이 완료된 경우에는 415단계로 이동한다. 상기 명령어에 대응하는 기능도 사용자가 미리 설정된 기능들을 선택할 수 있거나 임의로 설정할 수 있다.
사용자에 의한 상기 명령어 및 기능의 입력이 완료되면, 상기 제어부는 415단계로 이동한다. 상기 415단계에서 상기 제어부는 사용자에 의해 입력된 명령어 및 이에 대응하는 기능을 상기 메모리에 등록한다. 상기 메모리에 등록이 완료되면 상기 기능 등록 서브루틴은 종료하게 된다.
도 5는 도 3에서의 기능 수행 서브루틴에 따른 구체적인 제어 흐름을 보이고 있다.
도 5를 참조하면, 기능 수행 서브루틴의 501단계에서 제어부는 사용자로부터 소정의 명령 패턴이 입력되는지를 판단한다. 사용자로부터 상기 명령 패턴의 입력이 있는 경우 상기 제어부는 503단계로 이동한다. 상기 503단계에서 상기 제어부는 형상 인식기를 통해 상기 입력된 패턴의 모양을 인식한다.
그 후 상기 제어부는 상기 505단계에서 입력된 패턴을 인식한 후 메모리에 등록된 패턴과 대비하여 유효한 패턴인지를 판단한다. 만약 유효한 패턴이 아닌 경우 상기 기능 수행을 종료하고, 새로운 명령 패턴의 입력이 요구된다. 그러나 유효한 패턴이 입력되는 경우 상기 제어부는 507단계로 이동한다.
상기 507단계에서 상기 제어부는 사용자로부터 패턴 안에 들어갈 명령어가 사용자에 의해 입력되는지를 판단한다. 상기 명령어의 입력이 완료되는 경우 상기 제어부는 509단계로 이동한다. 상기 509단계에서 상기 제어부는 상기 형상인식기를 통해 상기 입력된 명령어를 인식한다.
그 후 상기 제어부는 511단계에서 상기 인식된 명령어를 메모리에 등록된 명령어와 대비하여 상기 인식된 명령어가 유효한 명령어인지를 판단한다. 상기 인식된 명령어가 유효한 명령어가 아닐 경우 상기 제어부는 513단계로 이동한다. 상기 513단계에서 상기 제어부는 입력된 명령어가 유효하지 않다는 오류 메시지를 발생시킨다. 하지만, 상기 인식된 명령어가 유효한 명령어일 경우 상기 제어부는 515단계로 이동한다.
상기 515단계에서 상기 제어부는 사용자로부터 상기 입력된 패턴과 명령어를 실행시키는 동작이 입력되는지를 판단한다. 전술한 바와 같이, 상기 실행 동작은 터치 스크린상의 입력된 패턴 부분을 손가락을 누르거나 스타일러스 펜으로 스트로크(stroke)하는 등의 방법이 될 수 있다. 즉, 상기 실행 동작은 입력 동작과 차별화되는 어떠한 입력 형태에 의해서도 구현이 가능하다.
상기 제어부는 사용자로부터 상기 실행 동작에 대한 입력이 존재하는 경우 517단계로 이동한다.
상기 517단계에서 상기 제어부는 사용자로부터 입력된 패턴과 명령어에 대응하여 메모리에 등록된 기능 또는 동작을 수행하게 된다. 상기 517단계가 완료되면, 519단계에서 상기 제어부는 상기 기능 수행이 완료되는지를 판단하고, 상기 기능 수행이 완료되는 경우 기능 수행 서브루틴을 종료한다.
따라서, 본 발명에 따른 사용자 인터페이스 방법을 적용한 휴대용 단말기를 사용함으로써 제한된 명령어와 구현 방식의 한계를 극복하고, 사용자 인터페이스를 보다 효율적이고 간소화된 방식으로 구현할 수 있다.
또한 터치 스크린상에 가상의 계산기를 그려 활용할 수 있는 응용 등이 가능하여 사용자가 원하는 어플리케이션(application)을 제작할 수도 있다.
이하에서는 본 발명의 실시 예에 따른 동작 예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 6은 본 발명에 따라 사용자가 터치 스크린상에 명령을 입력하는 방식을 설명하고 있다.
도 6을 참조하면, 사용자가 터치스크린(601) 상에 소정의 패턴이나 명령어를 입력하는 방식은 손가락(finger)(605)을 이용하는 방식과 스타일러스 펜(603)을 이용하는 방식으로 구분할 수 있다. 이하에서 설명하는 동작 예에서는 사용자가 이용하고자 하는 패턴 및 명령어는 스타일러스 펜(603)으로 입력하고, 동작 실행은 상기 터치 스크린(601)상에 입력된 패턴 부분을 손가락(605)으로 눌러서 입력하는 방식을 사용한다.
다만, 전술한 바와 같이 상기 입력 방식은 손가락 또는 스타일러스 펜 중 어느 하나의 방식이 될 수 있음은 당업자에게 자명할 것이다. 또한 손가락 또는 스타일러스 펜 외의 다른 도구를 이용하여 입력하는 방식도 구현이 가능할 것이다.
도 6에 도시된 휴대용 단말기 하단의 기능 키(function key or hot key, 607)는 본 발명의 실시를 위해 패턴 인식 사용자 인터페이스 모드로 한번에 진입하기 위한 구성으로써 기존 사용자 인터페이스와 연동하여 사용할 수 있다.
도 7a와 도 7b는 본 발명에 따른 실행 명령(예_발신)을 수행하는 동작 예를 설명하고 있다.
도 7a와 도 7b를 참조하면, 사용자는 터치 스크린(701)상에 스타일러스 펜(703)으로 걸고자 하는 상대방의 전화 번호를 적는다. 그 후 사용자는 스타일러스 펜(703)으로 상기 터치 스크린(701)상의 여백에 실행 명령을 의미하는 패턴 즉 사각형 모양을 그린 후, 그 안에 명령어인 "CALL" 이나 그 약어인 "C"를 적는다.
상기 패턴 및 명령어의 입력이 완료되면, 사용자는 손가락(705)을 "CALL"이라 표시된 사각형 부분을 눌러서 발신 동작을 실행시킨다.
상기 예에서는 발신 동작만을 설명하고 있으나, SMS(MMS) 전송, 소리<->벨 변경, 전원 끔 등등의 실행 명령이 사용될 수 있고, 사용자의 정의에 의해 다른 기능들이 얼마든지 추가될 수 있다.
도 8a와 도 8b는 본 발명에 따른 이동 명령을 수행하는 동작 예를 설명하고 있다.
도 8a와 도 8b를 참조하면, 사용자는 터치 스크린(801)상에 스타일러스 펜(803)으로 마름모를 그린 후, 그 안에 이동하고자 하는 메뉴의 약어(예_VOC)를 적는다. 상기 마름모는 이동 명령을 의미하는 패턴이고, 상기 메뉴의 약어인 "VOC"는 명령어이다. 사용자는 손가락(805)을 사용하여 상기 마름모 부분을 누르면 영어 단어 검색창(809)으로 이동한다. 사용자가 상기 영어 검색창(809)에 스타일러스 펜(803)으로 원하는 영어 단어를 입력하고 손가락(805) 또는 스타일러스 펜(803)으로 확인 버튼(807)을 누르면 원하는 영어 단어를 검색한다.
상기 예에서는 영어 사전 메뉴로 이동하는 기능을 설명하고 있으나, 폰 북창으로 이동(P), 알람창으로 이동(A), MP3창으로 이동(M), 카메라 창으로 이동(C), 메모장으로 이동(N), 계산기 창으로 이동(CL), 설정 창 이동(S) 등의 이동 명령이 사용될 수 있고, 사용자의 정의에 의해 새로운 기능들이 추가될 수 있다.
도 9a와 도 9b는 본 발명에 따른 삭제 기능을 수행하는 예를 설명하고 있다.
도 9a와 도 9b를 참조하면, 사용자가 터치 스크린(901)상에 스타일러스 펜(903)으로 문자나 패턴 등을 잘못 입력한 경우 이동 통신 단말기를 상하/좌우/앞뒤로 흔들어 줌으로써 터치 스크린(901)상의 입력된 내용을 삭제한다. 사용자는 별도의 작업을 수행하지 않고 간편하게 이동 통신 단말기를 흔들어 줌으로써 상기 터치 스크린(901)상에 입력된 내용을 삭제할 수 있다.
도 10a와 도 10b와 도 10c는 본 발명에 따른 취소 기능을 수행하는 동작 예를 설명한다.
도 10a와 도 10b와 도 10c를 참조하면, 사용자가 터치 스크린(1001)상에 스타일러스 펜(1003)으로 명령 입력창(패턴)이나 명령어 등을 잘못 입력하였을 경우 전술한 삭제 기능을 사용할 수 있지만, 다른 방법에 의해 취소할 수도 있다.
사용자는 스타일러스 펜(1003)으로 터치 스크린(1001)상의 여백에 잘못 입력된 명령 실행 창을 다시 그리고 그 안에 "X"표시를 입력한다. 그 후 사용자가 상기 'X' 표시된 명령 실행 창을 손가락(1005)으로 눌러 실행시키면, 상기 잘못 입력된 명령 입력창은 취소된다. 상기 명령 입력창에 들어가는 소정의 표시는 "X" 표시뿐만 아니라 사용자가 임의로 설정할 수 있다.
한편 이상에서는 본 발명의 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되지 않으며, 후술 되는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
즉, 전술한 발명의 상세한 설명에서는 터치 스크린을 이용하는 이동 통신 단말기에서 패턴 인식 기술을 적용한 구현 예를 보이고 있다. 하지만, 본 발명은 유사한 기술적 배경 및 터치 스크린을 이용하는 여타의 휴대용 단말기에도 본 발명의 범위를 크게 벗어나지 아니하는 범위에서 적용 가능하며, 이는 본 발명의 기술 분야에서 숙련된 기술적 지식을 가진 자의 판단으로 가능할 것이다.
도 1은 본 발명에 따른 휴대용 단말기의 구성을 도시하고 있는 도면;
도 2는 본 발명에 따른 다른 실시 예에 따른 휴대용 단말기의 구성을 도시하고 있는 도면;
도 3은 본 발명에 따른 제어 흐름을 보이고 있는 도면;
도 4는 도 3에서의 기능 설정 서브루틴에 따른 제어 흐름을 보이고 있는 도면;
도 5는 도 3에서의 기능 수행 서브루틴에 따른 제어 흐름을 보이고 있는 도면;
도 6은 본 발명에서 사용자가 터치 스크린을 통해 입력하는 방식을 보이고 있는 도면;
도 7a와 도 7b는 본 발명에 따른 실행 명령의 동작 예를 보이고 있는 도면;
도 8과 도 8b는 본 발명에 따른 이동 명령의 동작 예를 보이고 있는 도면;
도 9와 도 9b는 본 발명에 따른 삭제 동작에 대한 예를 보이고 있는 도면;
도 10a와 도 10b와 도 10c는 본 발명에 따른 취소 동작에 대한 예를 보이고 있는 도면.

Claims (22)

  1. 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 방법에 있어서,
    사용자로부터 상기 터치 스크린 상에 그려지는 패턴을 수신함으로써, 명령어를 입력받기 위한 영역을 정의하는 과정과,
    상기 패턴이 유효한지 여부를 판단하는 과정과,
    상기 패턴이 유효한 경우, 상기 사용자로부터 상기 패턴에 의해 정의되는 상기 영역 내에 쓰여지는 특정 명령어를 수신하는 과정과,
    상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 수행하는 과정을 포함하는 사용자 인터페이스 방법.
  2. 제1항에 있어서,
    상기 패턴이 유효한지 여부를 판단하는 과정은,
    상기 패턴이 메모리에 등록되어 있는 경우, 상기 패턴을 유효한 것으로 결정하는 과정을 더 포함함을 특징으로 하는 사용자 인터페이스 방법.
  3. 삭제
  4. 제1항 또는 제2항에 있어서,
    상기 패턴 또는 상기 특정 명령어는 스타일러스 펜을 이용하여 상기 사용자로부터 입력됨을 특징으로 하는 사용자 인터페이스 방법.
  5. 삭제
  6. 제1항에 있어서,
    상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 수행하는 과정 이전에,
    상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 수행하기 위하여 상기 사용자로부터 상기 영역을 손가락으로 누르는 사용자 입력을 수신하는 과정을 더 포함함을 특징으로 하는 사용자 인터페이스 방법.
  7. 제1항에 있어서,
    상기 사용자로부터 상기 패턴 및 상기 특정 명령어를 수신하고, 상기 사용자로부터 상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 입력받아 메모리에 등록하는 과정을 더 포함함을 특징으로 하는 사용자 인터페이스 방법.
  8. 삭제
  9. 제1항에 있어서,
    상기 패턴 또는 상기 특정 명령어 중 적어도 하나가 입력된 후, 상기 사용자에 의해 상기 휴대용 단말기가 흔들릴 시, 상기 패턴 또는 상기 특정 명령어를 삭제하는 과정을 더 포함함을 특징으로 하는 사용자 인터페이스 방법.
  10. 제1항에 있어서,
    상기 패턴 또는 상기 특정 명령어 중 적어도 하나가 입력된 후, 상기 사용자에 의해 취소 요청에 대응하는 취소 패턴이 상기 터치 스크린 상에 입력될 시, 상기 패턴 또는 상기 특정 명령어를 취소하는 과정을 더 포함함을 특징으로 하는 사용자 인터페이스 방법.
  11. 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 장치에 있어서,
    상기 터치 스크린과,
    사용자로부터 상기 터치 스크린 상에 그려지는 패턴을 수신함으로써, 명령어를 입력받기 위한 영역을 정의하고, 상기 패턴이 유효한지 여부를 판단하고, 상기 패턴이 유효한 경우 상기 사용자로부터 상기 패턴에 의해 정의되는 상기 영역 내에 쓰여지는 특정 명령어를 수신하고, 상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 수행하는 제어부를 포함하는 사용자 인터페이스 장치.
  12. 제11항에 있어서,
    적어도 하나의 패턴을 저장하는 메모리부를 더 포함하고,
    상기 제어부는,
    상기 패턴이 상기 메모리부에 등록되어 있는 경우, 상기 패턴을 유효한 것으로 결정함을 특징으로 하는 사용자 인터페이스 장치.
  13. 삭제
  14. 제11항에 있어서,
    상기 패턴 또는 특정 명령어는 스타일러스 펜을 이용하여 입력됨을 특징으로 하는 사용자 인터페이스 장치.
  15. 삭제
  16. 제11항에 있어서, 상기 제어부는,
    상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 수행하기 위하여 상기 사용자로부터 상기 영역을 손가락으로 누르는 사용자 입력을 수신함을 특징으로 하는 사용자 인터페이스 장치.
  17. 제12항에 있어서, 상기 제어부는
    상기 터치 스크린을 통해 상기 사용자로부터 상기 패턴 및 상기 특정 명령어를 수신하고, 상기 사용자로부터 상기 패턴 및 상기 특정 명령어의 조합에 대응하는 기능을 입력받아 상기 메모리부에 등록함을 특징으로 하는 사용자 인터페이스 장치.
  18. 삭제
  19. 제11항에 있어서, 상기 제어부는,
    상기 패턴 또는 상기 특정 명령어 중 적어도 하나가 입력된 후, 상기 사용자에 의해 상기 휴대용 단말기가 흔들릴 시, 상기 패턴 또는 상기 특정 명령어를 삭제함을 특징으로 하는 사용자 인터페이스 장치.
  20. 제11항에 있어서, 상기 제어부는
    상기 패턴 또는 상기 명령어 중 적어도 하나가 입력된 후, 상기 사용자에 의해 취소 요청에 대응하는 취소 패턴이 상기 터치 스크린상에 입력될 시, 상기 패턴 또는 상기 특정 명령어를 취소하도록 제어함을 특징으로 하는 사용자 인터페이스 장치.
  21. 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 방법에 있어서,
    상기 터치 스크린을 통해 특정 정보를 입력받는 과정과,
    상기 특정 정보를 상기 터치 스크린 상에 표시하는 과정과,
    사용자에 의한 상기 휴대용 단말기의 흔들림을 감지할 시, 상기 특정 정보를 삭제하는 과정을 포함하는 사용자 인터페이스 방법.
  22. 터치 스크린을 구비하는 휴대용 단말기의 사용자 인터페이스 장치에 있어서,
    상기 터치 스크린을 통해 특정 정보를 입력받고, 상기 특정 정보를 상기 터치 스크린 상에 표시하는 입/출력부와,
    사용자에 의한 상기 휴대용 단말기의 흔들림을 감지하는 자이로 센서부와,
    상기 자이로 센서부에 의해 상기 휴대용 단말기의 흔들림이 감지될 시, 상기 특정 정보를 삭제하도록 상기 입/출력부를 제어하는 제어부를 포함하는 사용자 인터페이스 장치.
KR20080075111A 2008-07-31 2008-07-31 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법 KR101509245B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR20080075111A KR101509245B1 (ko) 2008-07-31 2008-07-31 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법
US12/462,232 US20100026642A1 (en) 2008-07-31 2009-07-30 User interface apparatus and method using pattern recognition in handy terminal
JP2011521046A JP5204305B2 (ja) 2008-07-31 2009-07-31 携帯用端末機におけるパターン認識を用いたユーザインターフェース装置及び方法
PCT/KR2009/004293 WO2010013974A2 (en) 2008-07-31 2009-07-31 User interface apparatus and method using pattern recognition in handy terminal
CN200980130364.9A CN102112948B (zh) 2008-07-31 2009-07-31 在便携终端中使用模式识别的用户界面装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20080075111A KR101509245B1 (ko) 2008-07-31 2008-07-31 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100013539A KR20100013539A (ko) 2010-02-10
KR101509245B1 true KR101509245B1 (ko) 2015-04-08

Family

ID=41607829

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20080075111A KR101509245B1 (ko) 2008-07-31 2008-07-31 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법

Country Status (5)

Country Link
US (1) US20100026642A1 (ko)
JP (1) JP5204305B2 (ko)
KR (1) KR101509245B1 (ko)
CN (1) CN102112948B (ko)
WO (1) WO2010013974A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101705219B1 (ko) * 2015-12-17 2017-02-09 (주)멜파스 3d터치를 이용한 스마트 단말기 동작 제어 방법 및 시스템

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8423916B2 (en) * 2008-11-20 2013-04-16 Canon Kabushiki Kaisha Information processing apparatus, processing method thereof, and computer-readable storage medium
US8289287B2 (en) 2008-12-30 2012-10-16 Nokia Corporation Method, apparatus and computer program product for providing a personalizable user interface
US8319736B2 (en) * 2009-01-19 2012-11-27 Microsoft Corporation Touch sensitive computing device and method
TW201133329A (en) * 2010-03-26 2011-10-01 Acer Inc Touch control electric apparatus and window operation method thereof
JP5459046B2 (ja) * 2010-04-27 2014-04-02 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム、並びに情報処理システム
US20110266980A1 (en) * 2010-04-30 2011-11-03 Research In Motion Limited Lighted Port
JP5367169B2 (ja) * 2010-06-18 2013-12-11 シャープ株式会社 情報端末装置およびこれを利用した個人認証方法
US9053562B1 (en) 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
KR101725388B1 (ko) * 2010-07-27 2017-04-10 엘지전자 주식회사 이동 단말기 및 그 제어방법
JP5651494B2 (ja) 2011-02-09 2015-01-14 日立マクセル株式会社 情報処理装置
KR101802759B1 (ko) * 2011-05-30 2017-11-29 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
KR101859099B1 (ko) * 2011-05-31 2018-06-28 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
CN103167076B (zh) * 2011-12-09 2016-09-14 晨星软件研发(深圳)有限公司 测试电子装置的功能的测试方法以及测试装置
TW201327334A (zh) * 2011-12-28 2013-07-01 Fih Hong Kong Ltd 觸控式電子裝置及其觸控方法
US20130189660A1 (en) * 2012-01-20 2013-07-25 Mark Mangum Methods and systems for assessing and developing the mental acuity and behavior of a person
CN104350459B (zh) * 2012-03-30 2017-08-04 诺基亚技术有限公司 用户接口、关联装置和方法
US20130302777A1 (en) * 2012-05-14 2013-11-14 Kidtellect Inc. Systems and methods of object recognition within a simulation
KR101395480B1 (ko) * 2012-06-01 2014-05-14 주식회사 팬택 필기 입력에 기초하여 어플리케이션을 실행하는 방법 및 그 단말
US20150370473A1 (en) * 2012-06-27 2015-12-24 Nokia Corporation Using a symbol recognition engine
KR20140008987A (ko) * 2012-07-13 2014-01-22 삼성전자주식회사 필기 이미지 인식을 이용한 어플리케이션 제어 방법 및 장치
KR20140008985A (ko) * 2012-07-13 2014-01-22 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 방법
CN102739873B (zh) * 2012-07-13 2017-01-18 上海触乐信息科技有限公司 便携式终端设备滑行操作辅助信息输入控制功能的系统及方法
KR102150289B1 (ko) * 2012-08-30 2020-09-01 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 이를 지원하는 방법
KR102043949B1 (ko) * 2012-12-05 2019-11-12 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
CN106980457A (zh) * 2012-12-24 2017-07-25 华为终端有限公司 触摸屏操作方法及触屏终端
WO2014106910A1 (ja) * 2013-01-04 2014-07-10 株式会社ユビキタスエンターテインメント 情報処理装置及び情報入力制御プログラム
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
KR102157270B1 (ko) * 2013-04-26 2020-10-23 삼성전자주식회사 펜을 이용하는 사용자 단말 장치 및 그 제어 방법
KR102203885B1 (ko) * 2013-04-26 2021-01-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
US9639199B2 (en) 2013-06-07 2017-05-02 Samsung Electronics Co., Ltd. Method and device for controlling a user interface
US9423890B2 (en) 2013-06-28 2016-08-23 Lenovo (Singapore) Pte. Ltd. Stylus lexicon sharing
KR20150007889A (ko) * 2013-07-12 2015-01-21 삼성전자주식회사 어플리케이션 운용 방법 및 그 전자 장치
KR102207443B1 (ko) * 2013-07-26 2021-01-26 삼성전자주식회사 그래픽 유저 인터페이스 제공 방법 및 장치
KR102214974B1 (ko) 2013-08-29 2021-02-10 삼성전자주식회사 잠금 화면 상에서 필기 형태의 사용자 입력과 관련된 기능을 실행하기 위한 장치 및 방법
KR20150039378A (ko) * 2013-10-02 2015-04-10 삼성메디슨 주식회사 의료 기기, 의료 기기의 리더기, 및 의료 기기의 제어 방법
US9965171B2 (en) 2013-12-12 2018-05-08 Samsung Electronics Co., Ltd. Dynamic application association with hand-written pattern
KR101564907B1 (ko) * 2014-01-09 2015-11-13 주식회사 투게더 터치 스크린용 식별 패턴 형성 장치 및 방법
KR20150086032A (ko) * 2014-01-17 2015-07-27 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN104866218A (zh) * 2014-02-25 2015-08-26 信利半导体有限公司 一种触控电子设备的控制方法
JP6129343B2 (ja) * 2014-07-10 2017-05-17 オリンパス株式会社 録音装置、及び録音装置の制御方法
JP6367031B2 (ja) * 2014-07-17 2018-08-01 公立大学法人首都大学東京 電子機器遠隔操作システム及びプログラム
US9965559B2 (en) * 2014-08-21 2018-05-08 Google Llc Providing automatic actions for mobile onscreen content
CN104317501B (zh) * 2014-10-27 2018-04-20 广州视睿电子科技有限公司 触摸书写状态下的操作指令输入方法和系统
KR20170017572A (ko) * 2015-08-07 2017-02-15 삼성전자주식회사 사용자 단말 장치 및 이의 제어 방법
US20180095653A1 (en) * 2015-08-14 2018-04-05 Martin Hasek Device, method and graphical user interface for handwritten interaction
CN105117126B (zh) * 2015-08-19 2019-03-08 联想(北京)有限公司 一种输入切换处理方法及装置
US10387034B2 (en) 2015-09-03 2019-08-20 Microsoft Technology Licensing, Llc Modifying captured stroke information into an actionable form
US10210383B2 (en) 2015-09-03 2019-02-19 Microsoft Technology Licensing, Llc Interacting with an assistant component based on captured stroke information
US10572497B2 (en) * 2015-10-05 2020-02-25 International Business Machines Corporation Parsing and executing commands on a user interface running two applications simultaneously for selecting an object in a first application and then executing an action in a second application to manipulate the selected object in the first application
JP6777004B2 (ja) * 2017-05-02 2020-10-28 京セラドキュメントソリューションズ株式会社 表示装置
KR102061941B1 (ko) * 2017-10-16 2020-02-11 강태호 지능형 단축 제어방법 및 이를 수행하는 전자장치
KR102568550B1 (ko) * 2018-08-29 2023-08-23 삼성전자주식회사 필기 입력을 이용하여 어플리케이션을 실행하는 전자 장치 및 그 제어 방법
JP7280682B2 (ja) * 2018-10-24 2023-05-24 東芝テック株式会社 サイン入力装置、決済端末、プログラム、サイン入力方法
WO2020107443A1 (zh) * 2018-11-30 2020-06-04 深圳市柔宇科技有限公司 书写装置的控制方法和书写装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060085850A (ko) * 2005-01-25 2006-07-28 엘지전자 주식회사 터치 스크린 패턴 인식 기반의 멀티미디어 기기제어방법과 장치

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5509114A (en) * 1993-12-30 1996-04-16 Xerox Corporation Method and apparatus for correcting and/or aborting command gestures in a gesture based input system
JP3378900B2 (ja) * 1996-06-25 2003-02-17 富士通株式会社 オブジェクト編集方法,オブジェクト編集システム及び記録媒体
IL119498A (en) * 1996-10-27 2003-02-12 Advanced Recognition Tech Application launching system
JP2000099222A (ja) * 1998-09-21 2000-04-07 Fuji Xerox Co Ltd 動的モデル変換装置
US8120625B2 (en) * 2000-07-17 2012-02-21 Microsoft Corporation Method and apparatus using multiple sensors in a device with a display
US20020141643A1 (en) * 2001-02-15 2002-10-03 Denny Jaeger Method for creating and operating control systems
JP2003140823A (ja) * 2001-11-08 2003-05-16 Sony Computer Entertainment Inc 情報入力デバイス及び情報処理プログラム
JP2003162687A (ja) * 2001-11-28 2003-06-06 Toshiba Corp 手書き文字入力装置、手書き文字認識プログラム
US6938222B2 (en) * 2002-02-08 2005-08-30 Microsoft Corporation Ink gestures
US7519918B2 (en) * 2002-05-30 2009-04-14 Intel Corporation Mobile virtual desktop
AU2002345285A1 (en) * 2002-07-11 2004-02-02 Nokia Corporation Method and device for automatically changing a digital content on a mobile device according to sensor data
US7295186B2 (en) * 2003-01-14 2007-11-13 Avago Technologies Ecbuip (Singapore) Pte Ltd Apparatus for controlling a screen pointer that distinguishes between ambient light and light from its light source
KR20040083788A (ko) * 2003-03-25 2004-10-06 삼성전자주식회사 제스쳐 커맨드를 이용하여 프로그램을 구동시킬 수 있는휴대용 단말기 및 이를 이용한 프로그램 구동 방법
US20040240739A1 (en) * 2003-05-30 2004-12-02 Lu Chang Pen gesture-based user interface
US7853193B2 (en) * 2004-03-17 2010-12-14 Leapfrog Enterprises, Inc. Method and device for audibly instructing a user to interact with a function
US20050212753A1 (en) * 2004-03-23 2005-09-29 Marvit David L Motion controlled remote controller
JP4172645B2 (ja) * 2004-03-31 2008-10-29 任天堂株式会社 入力位置との関係でゲームオブジェクトの動作を変化させるゲームプログラム
US8448083B1 (en) * 2004-04-16 2013-05-21 Apple Inc. Gesture control of multimedia editing applications
US20060262105A1 (en) * 2005-05-18 2006-11-23 Microsoft Corporation Pen-centric polyline drawing tool
WO2006137078A1 (en) * 2005-06-20 2006-12-28 Hewlett-Packard Development Company, L.P. Method, article, apparatus and computer system for inputting a graphical object
JP4741908B2 (ja) * 2005-09-08 2011-08-10 キヤノン株式会社 情報処理装置及び情報処理方法
KR100735663B1 (ko) * 2005-10-06 2007-07-04 삼성전자주식회사 이동통신 단말기에서 패널입력의 패턴인식을 이용한 명령일괄처리 방법
US8142287B2 (en) * 2005-10-11 2012-03-27 Zeemote Technology Inc. Universal controller for toys and games
US7636794B2 (en) * 2005-10-31 2009-12-22 Microsoft Corporation Distributed sensing techniques for mobile devices
US20070247422A1 (en) * 2006-03-30 2007-10-25 Xuuk, Inc. Interaction techniques for flexible displays
US20070230789A1 (en) * 2006-04-03 2007-10-04 Inventec Appliances Corp. Method of controlling an electronic device by handwriting
KR100679412B1 (ko) * 2006-05-11 2007-02-07 삼성전자주식회사 관성센서를 구비한 휴대단말의 알람기능 제어방법 및 장치
JP2008009668A (ja) * 2006-06-29 2008-01-17 Syn Sophia Inc タッチパネルの駆動方法及び入力方法
KR100797788B1 (ko) * 2006-09-04 2008-01-24 엘지전자 주식회사 이동통신 단말기 및 패턴인식을 통한 단축기능의 실행방법
KR100735662B1 (ko) * 2007-01-10 2007-07-04 삼성전자주식회사 이동통신 단말기에서 패턴을 정의하기 위한 방법
TWI339806B (en) * 2007-04-04 2011-04-01 Htc Corp Electronic device capable of executing commands therein and method for executing commands in the same
KR101447187B1 (ko) * 2007-12-05 2014-10-10 삼성전자주식회사 패턴 인식을 통한 모바일 기기의 잠금 해제 장치 및 방법
US8174503B2 (en) * 2008-05-17 2012-05-08 David H. Cain Touch-based authentication of a mobile device through user generated pattern creation
KR101559178B1 (ko) * 2009-04-08 2015-10-12 엘지전자 주식회사 명령어 입력 방법 및 이를 적용한 이동 통신 단말기

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060085850A (ko) * 2005-01-25 2006-07-28 엘지전자 주식회사 터치 스크린 패턴 인식 기반의 멀티미디어 기기제어방법과 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101705219B1 (ko) * 2015-12-17 2017-02-09 (주)멜파스 3d터치를 이용한 스마트 단말기 동작 제어 방법 및 시스템

Also Published As

Publication number Publication date
CN102112948A (zh) 2011-06-29
WO2010013974A2 (en) 2010-02-04
WO2010013974A3 (en) 2010-06-03
US20100026642A1 (en) 2010-02-04
CN102112948B (zh) 2015-04-29
JP5204305B2 (ja) 2013-06-05
JP2011529598A (ja) 2011-12-08
KR20100013539A (ko) 2010-02-10

Similar Documents

Publication Publication Date Title
KR101509245B1 (ko) 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법
KR100856203B1 (ko) 지문 인식 센서를 이용한 사용자 입력 장치 및 방법
FI115254B (fi) Kosketusnäytön käyttäminen osoitinvälineellä
JP4863211B2 (ja) 文字データ入力装置
JP2000278391A (ja) 背面手書き入力機能を有する携帯電話機
JP4979600B2 (ja) 携帯端末装置、及び表示制御方法
JP2004213269A (ja) 文字入力装置
JPWO2011013400A1 (ja) 携帯型表示装置およびその制御方法、プログラム
JP5739131B2 (ja) 携帯電子機器、携帯電子機器の制御方法及びプログラム
KR20140092134A (ko) 휴대 단말에서 햅틱 효과를 제공하는 방법 및 기계로 읽을 수 있는 저장 매체 및 휴대 단말
JPWO2009031214A1 (ja) 携帯端末装置、及び表示制御方法
KR20140093080A (ko) 입력 유닛에 햅틱 효과를 제공하는 휴대 단말 및 방법
JP2012238295A (ja) 手書き文字入力装置及び手書き文字入力方法
WO2010109294A1 (en) Method and apparatus for text input
CN114690887A (zh) 一种反馈方法以及相关设备
KR100713407B1 (ko) 펜 컴퓨팅 시스템에서의 펜 입력 방법 및 장치
CN114690889A (zh) 一种虚拟键盘的处理方法以及相关设备
CN114764304A (zh) 一种屏幕显示方法
JP2014016743A (ja) 情報処理装置、情報処理装置の制御方法、および情報処理装置の制御プログラム
JP7036862B2 (ja) 電子機器、制御方法、及びプログラム
EP2570892A1 (en) Electronic device and method of character entry
JP2003005902A (ja) 文字入力装置、情報処理装置、文字入力装置の制御方法、及び記憶媒体
JP2014140236A (ja) 文字データ入力装置
JP2015201038A (ja) 情報処理装置及び情報処理プログラム
JP2013033553A (ja) 文字データ入力装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20180227

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee