KR20050043560A - 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체 - Google Patents

가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체 Download PDF

Info

Publication number
KR20050043560A
KR20050043560A KR1020030078483A KR20030078483A KR20050043560A KR 20050043560 A KR20050043560 A KR 20050043560A KR 1020030078483 A KR1020030078483 A KR 1020030078483A KR 20030078483 A KR20030078483 A KR 20030078483A KR 20050043560 A KR20050043560 A KR 20050043560A
Authority
KR
South Korea
Prior art keywords
graffiti
screen
touch
user
display
Prior art date
Application number
KR1020030078483A
Other languages
English (en)
Other versions
KR100593982B1 (ko
Inventor
이승이
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020030078483A priority Critical patent/KR100593982B1/ko
Priority to US10/864,926 priority patent/US7956845B2/en
Priority to EP04016231.5A priority patent/EP1531387B1/en
Priority to CNB2004100544350A priority patent/CN1313909C/zh
Priority to IL163834A priority patent/IL163834A/en
Priority to JP2004298168A priority patent/JP4731873B2/ja
Publication of KR20050043560A publication Critical patent/KR20050043560A/ko
Application granted granted Critical
Publication of KR100593982B1 publication Critical patent/KR100593982B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 스크린에 정보를 디스플레이함과 아울러 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이 장치의 스크린의 일부 영역에 설정되는 가상 그래피티를 제공하기 위한 가상 그래피티 영역에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이한다. 또한 스크린에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분 인식하여 처리한다. 이에 따라 크기에 제약을 받는 휴대형 장치에서도 효과적으로 그래피티 기능을 구현하는 장치 및 방법과 그에 따른 기록매체를 제공한다.

Description

가상 그래피티를 제공하는 장치 및 방법과 그에 따른 기록매체{DEVICE AND METHOD FOR PROVIDING VIRTUAL GRAFFITI AND RECORDING MEDIUM THEREOF}
본 발명은 휴대형(hand held) 장치에 관한 것으로, 특히 스크린에 정보를 디스플레이함과 아울러 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린(touch screen) 디스플레이 장치를 이용하여 가상 그래피티(virtual graffiti)를 제공하는 장치에 관한 것이다.
통상적으로 PDA(Personal Digital Assistant), PDA 기능과 이동전화단말 기능이 복합된 스마트 폰(smart phone) 등의 휴대형 장치는 터치 패드(touch pad)를 이용하여 사용자 입력을 받는다. 특히 스마트 폰처럼 3×4 키 체계, 즉 0∼9의 숫자키들과 *, # 키로 이루어지는 키패드(key pad)를 바탕으로 사용자 입력을 받는 휴대형 장치에서는 터치 패드에 사용자가 문자를 직접 그려서 입력을 하게 하는 기능은 거의 필수적이다. 왜냐하면 키패드의 키 개수가 제한되어 있어 키패드의 키들만으로 모든 문자를 효과적으로 입력하게 하는 것이 매우 어렵기 때문이다. 이와 같이 문자 입력을 받을 수 있도록 휴대형 장치에 마련된 영역을 팜(Palm) OS(Operating System)의 경우에는 통상적으로 "그래피티(Graffiti)" 영역이라고 일컬어진다.
초창기의 PDA나 스마트 폰의 경우에는 그래피티 기능을 구현하기 위해 도 1 및 도 2에 보인 바와 같이 그래피티 영역을 터치 패드 상에 인쇄하여 제공하여 왔었다. 도 1은 터치 스크린 디스플레이 장치(100)의 일부 터치 스크린이 사용되는 터치 패드(102)에 그래피티 영역(108)이 인쇄된 경우를 보이고 있으며, 도 2는 그래피티 영역(208)이 인쇄된 터치 패드(202)가 터치 스크린 디스플레이 장치(200)와 물리적으로 분리되어 있는 경우를 보이고 있다. 도 1의 터치 스크린 디스플레이 장치(100)와 도 2의 터치 스크린 디스플레이 장치(200)는 통상적으로 이미지를 디스플레이하기 위한 LCD(Liquid Crystal Display) 패널 위에 사용자 입력을 위한 TSP(Touch-Sensitive Panel)가 덮여진 구조를 가지며, 각각의 스크린(104,204)에 정보를 디스플레이함과 아울러 스크린(104,204) 상의 터치에 따른 사용자 입력을 받는다. 스크린들(104,204)에는 각종 애플리케이션 실행에 따른 정보가 사용자가 볼 수 있도록 디스플레이되는데, 도 1,2에서는 각종 애플리케이션들을 실행시키기 위한 아이콘들(106,206)이 디스플레이되고 있는 예를 보였다. 도 1의 그래피티 영역(108)과 도 2의 그래피티 영역(208)은 그래피티 기능을 위해 사용되는 아이콘들(112,212)과 사용자가 스타일러스(stylus)를 사용한 터치 입력에 의해 그래피티를 입력하게 되는 그래피티 입력 상자(110,210)가 인쇄되어 있다.
한편 최근에는 그래피티 영역을 소프트웨어로서 도 3a와 같이 터치 스크린 디스플레이 장치의 스크린상에 이미지로 그려서 디스플레이하는 방식인 가상 그래피티를 선호하는 추세이다. 이렇게 소프트웨어로서 가상 그래피티를 구현하면 유연한 GUI(Graphic User Interface)를 제공할 수 있을 뿐만 아니라, 그래피티 기능을 사용하지 않을 때에는 도 3b와 같이 스크린에서 보이지 않도록 하여 스크린을 효율적으로 이용할 수 있다는 장점이 있다. 상기한 도 3a,3b는 터치 스크린 디스플레이 장치(300)의 스크린(302)상에 그래피티 영역(304)을 디스플레이하여 제공하는 것을 보인 것으로, 스크린(302)에는 상기한 도 1,2의 스크린들(104,204)과 마찬가지로 각종 애플리케이션들을 실행시키기 위한 아이콘들(306)이 디스플레이되고 있는 예를 보이고 있다. 또한 그래피티 영역(304)은 도 1,2의 그래피티 영역들(108,208)과 마찬가지로 그래피티 기능을 위해 사용되는 아이콘들(310)과 사용자가 스타일러스를 사용한 터치 입력에 의해 그래피티를 입력하게 되는 그래피티 입력 상자(308)가 디스플레이되고 있다.
하지만 그래피티 영역을 상기한 도 1, 2처럼 물리적으로 구현하는 방식이나 상기한 도 3a,3b처럼 소프트웨어적으로 구현을 하는 가상 그래피티 방식은 모두 그래피티 영역이 별도의 전용 공간을 차지한다. 이에 따라 제품의 소형화 및 경량화가 요구되는 휴대형 장치에 있어서 그래피티 영역이 차지하는 공간으로 인해 소형화 및 경량화가 제한되고 있다. 특히 폴더 타입(folder type) 스마트 폰처럼 가로:세로 크기 비율이 1:1인 스크린을 사용하는 휴대형 장치에서는 그래피티 기능을 적용하지 못하고 소형 키보드(keyboard)를 탑재하는 경우도 있었다.
따라서 본 발명은 크기에 제약을 받는 휴대형 장치에서도 효과적으로 그래피티 기능을 구현하는 장치 및 방법과 그에 따른 기록매체를 제공한다.
또한 본 발명은 가상 그래피티 영역을 제공하기 위한 별도의 공간을 필요로 하지 않는 장치 및 방법과 그에 따른 기록매체를 제공한다.
또한 본 발명은 1:1 비율의 스크린에서도 가상 그래피티를 제공할 수 있는 장치 및 방법과 그에 따른 기록매체를 제공한다.
본 발명은 스크린에 정보를 디스플레이함과 아울러 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이 장치의 스크린의 일부 영역에 설정되는 가상 그래피티를 제공하기 위한 가상 그래피티 영역에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이한다. 또한 스크린에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분 인식하여 처리한다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
본 발명의 실시예에 따라 가상 그래피티가 제공되는 것을 설명하기 위한 예시도인 도 4a 및 도 4b를 참조하면, 터치 스크린 디스플레이 장치(400)의 스크린(402) 상의 일부 영역이 가상 그래피티 영역(404)으로 설정되어 가상 그래피티를 제공하게 되는 것을 보인다. 본 발명의 실시예에 따라 가상 그래피티가 인에이블되면 도 4a에 보인 바와 같이 가상 그래피티 영역(404)에는 그래피티 스크린 이미지와 메인 스크린 이미지가 중첩되어 디스플레이되고, 가상 그래피티가 디스에이블되면 도 4b에 보인 바와 같이 메인 스크린 이미지만이 디스플레이된다. 여기서 메인 스크린 이미지는 전술한 도 1,2,3a,3b의 스크린들(104,204,302)상에 디스플레이되는 바와 같이 OS(Operating System)나 각종 애플리케이션의 실행에 따른 이미지를 의미하고, 그래피티 스크린 이미지는 전술한 도 3a의 그래피티 영역(304)에 디스플레이되는 바와 같이 가상 그래피티를 제공하기 위해 디스플레이되는 이미지를 의미한다. 다만 전술한 도 3a에서 그래피티 영역(304)은 가상 그래피티를 위한 전용 영역으로 사용되는데 반하여, 본 발명의 실시예에 따른 도 4a의 가상 그래피티 영역(404)은 스크린(402)의 일부 영역과 중첩된다. 이에 따라 도 4a는 스크린(402)상에 각종 애플리케이션들을 실행시키기 위한 아이콘들 중에 일부의 아이콘들(406)은 그대로 디스플레이되는 반면에, 일부의 아이콘들(412)은 그래피티 스크린 이미지와 중첩되어 디스플레이되는 것을 보이고 있다. 즉, 가상 그래피티 영역(404)에는 전술한 도 3a와 마찬가지로 그래피티 기능을 위해 사용되는 아이콘들(410)과 사용자가 스타일러스를 사용한 터치 입력에 의해 그래피티를 입력하게 되는 그래피티 입력 상자(408)가 메인 스크린 이미지와 중첩됨으로써 반투명하게 디스플레이되고 있다.
상기한 바와 같은 가상 그래피티를 제공하기 위한 장치의 블록구성도를 도 5로서 보였다. 도 5에서 터치 스크린 디스플레이 장치(500)는 상기한 도 4a,4b의 터치 스크린 디스플레이 장치(400)에 해당하는 장치로서 이미지를 디스플레이하기 위한 LCD(Liquid Crystal Display)(504)와, 사용자 입력을 위한 TSP(Touch-Sensitive Panel)(502)로 이루어지는 예를 보인다. 이러한 터치 스크린 디스플레이 장치(500)는 전술한 바와 같이 통상적으로 LCD(504)의 패널 위에 TSP(502)가 덮여진 구조를 가진다. 이에 따라 LCD(504)의 패널에 TSP(502)가 덮여져 제공되는 도 4a,4b에 보인 바와 같은 스크린(402)에 정보를 디스플레이함과 아울러 스크린(402) 상의 터치에 따른 사용자 입력을 받는다.
상기한 터치 스크린 디스플레이 장치(500)와 연결되는 제어부(506)는 상기한 도 4a의 가상 그래피티 영역(404)에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하며, 스크린(402)에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분 인식하여 처리한다. 이러한 제어부(506)는, A/D(Analog-to-Digital) 변환기(512)와 메모리(514)와 DMA(Direct Memory Access) 콘트롤러(522)와 LCD(Liquid Crystal Display) 콘트롤러(524)가 CPU(Central Processing Unit)(508)와 인터페이스를 위한 호스트 인터페이스(510)를 통해 CPU(508)에 연결되어 구성된다.
상기한 A/D 변환기(512)는 터치 스크린 디스플레이 장치(500)의 TSP(502)와 연결되어 스크린(402)에 대한 사용자의 터치에 따라 발생되는 아날로그의 사용자 입력 신호를 디지털 신호로 변환하여 호스트 인터페이스(510)를 통해 CPU(508)에 제공한다. 디스플레이 콘트롤러인 LCD 콘트롤러(524)는 터치 스크린 디스플레이 장치(500)의 LCD(504)와 연결됨과 아울러 DMA 콘트롤러(522)와 연결되어 DMA 콘트롤러(522)로부터 입력되는 비디오 데이터에 따라 LCD(504)를 구동하여 입력 비디오 데이터에 따른 이미지를 스크린(402)에 디스플레이시킨다.
그리고 메모리(514)는 제1,제2비디오 버퍼(516,518)와 그래피티 스크린 메모리(520)로 이루어지며, CPU(508)에 의해 비디오 데이터를 저장한다. 그래피티 스크린 메모리(520)에는 상기한 바와 같은 그래피티 스크린 이미지의 비디오 데이터가 저장된다. 제1비디오 버퍼(516)에는 스크린(402)상에 디스플레이하기 위한 상기한 바와 같은 메인 스크린 이미지의 비디오 데이터가 저장된다. 제2비디오 버퍼(518)에는 메인 스크린 이미지에 그래피티 스크린 이미지가 중첩된 비디오 데이터가 저장되는데, 중첩되는 영역은 메인 스크린 이미지 중에 일부, 즉 상기한 도 4a에 보인 바와 같이 가상 그래피티 영역(404)이다. 이처럼 제1,제2비디오 버퍼(516,518)에 저장되어 있는 각 비디오 데이터는 DMA 콘트롤러(522)가 CPU(508)의 제어에 따라 선택적으로 독출하여 LCD 콘트롤러(524)에 인가한다.
또한 CPU(508)는 A/D 변환기(512)로부터 입력되는 사용자 입력을 처리하고, 사용자 입력에 따라 제1,제2비디오 버퍼(516,518)의 비디오 데이터를 선택적으로 갱신하며, 사용자의 선택에 따른 가상 그래피티의 인에이블 여부에 따라 DMA 콘트롤러(522)의 선택적인 비디오 데이터 독출을 제어한다.
상기한 도 5과 같이 구성되는 장치에 있어서 CPU(508)의 디스플레이 업데이트 처리를 (600)∼(614)단계로 보인 도 6의 처리 흐름도와 도 7의 처리 예시도를 참조하여 본 발명의 실시예에 따라 가상 그래피티를 제공하기 위한 스크린(402)를 통한 디스플레이에 관하여 설명한다. CPU(508)는 통상적인 경우와 마찬가지로 미리 설정된 조건에 따라 도 6의 처리를 시작하여 (600)단계에서 스크린(402)에 대한 디스플레이의 필요 여부를 체크한다. 이러한 처리 시작 조건의 예를 들면, 스크린(402)상에 대한 사용자의 터치 입력이 있을 때, OS(Operating System) 타이머에 의한 주기적인 디스플레이 업데이트 시점이 되었을 때, 각종 애플리케이션 실행에 따른 디스플레이 업데이트가 이루어져야 할 때 등이 있다.
상기한 (600)단계에서 디스플레이 업데이트가 필요한 시점이라면, CPU(508)는 (602)단계에서 제1비디오 버퍼(516)를 도 7(a)와 같은 메인 스크린 이미지로 업데이트한다. 즉, 제1비디오 버퍼(516)에 OS(Operating System)나 현재 실행되는 애플리케이션에 따라 스크린(402)상에 디스플레이해야 할 이미지의 비디오 데이터를 저장하는 것이다. 이후 (604)단계에서 가상 그래피티가 인에이블되어 있는지 여부를 체크한다. 가상 그래피티의 인에이블 또는 디스에이블은 사용자에 의해 선택되는데, 사용자는 그래피티 입력을 하고자하는 경우에 가상 그래피티를 인에이블시키게 되고 그렇지 않으면 가상 그래피티를 디스에이블시키게 된다. 이처럼 사용자에 의한 가상 그래피티의 인에이블 또는 디스에이블의 선택은 전술한 도 3a,3b처럼 가상 그래피티를 사용하는 경우와 마찬가지 방식에 의해 이루어지도록 하면 된다.
상기한 (604)단계에서 체크 결과, 가상 그래피티가 인에이블된 경우라면 (606)단계로 진행하고, 가상 그래피티가 디스에이블된 경우라면 (614)단계로 진행한다. 상기한 (606)단계에서는 제1비디오 버퍼(516)에 저장되어 있는 도 7(a)와 같은 메인 스크린 이미지와 그래피티 스크린 메모리(520)에 저장되어 있는 도 7(b)와 같은 그래피티 스크린 이미지를 알파 브렌딩(alpha blending)에 의해 도 7(c)와 같이 중첩시켜 제2비디오 버퍼(518)에 저장함으로써 제2비디오 버퍼(518)를 업데이트한다. 이때 그래피티 스크린 메모리(520)에는 도 7(b)와 같은 그래피티 스크린 이미지가 비트맵 파일(bitmap file) 또는 데이터베이스(database)의 형태로 미리 저장되어 있게 된다. 이에 따라 그래피티 스크린 이미지를 사용자가 원하는 이미지로 교체할 수도 있으며, 그의 모양, 크기, 색상 등을 원하는대로 세팅하도록 할 수 있다. 이러한 세팅은 예를 들어 통상적인 이미지 세팅 방식과 마찬가지로 사용자 세팅창(setting window)을 통해 사용자가 원하는대로 변경할 수 있도록 제공하면 된다. 또한 사용자 세팅창을 통해 가상 그래피티 영역(404)의 위치나 투명도도 사용자가 원하는대로 세팅하도록 할 수도 있다. 이때 세팅되는 투명도에 따른 중첩 비율로 메인 스크린 이미지와 그래피티 스크린 이미지의 알파 브렌딩이 이루어지게 된다. 예를 들어, 사용자의 선택이나 디폴트(default)값에 의해 메인 스크린 이미지에 대한 그래피티 스크린 이미지의 투명도가 0.7로 정해진다면, 메인 스크린 이미지의 픽셀(pixel)값과 그래피티 스크린 이미지의 픽셀값이 7:3의 비율로 브렌딩된다.
상기한 바와 같이 제2비디오 버퍼(518)를 업데이트한 다음에는 (608)단계에서 스트로크 잉킹(stroke inking)의 필요 여부를 체크한다. 스트로크 잉킹은 사용자가 스크린(402)상에 대한 터치 입력에 의해 어떤 그래피티를 필기하는 경우, 그 필기에 따른 스트로크를 도 7(d)와 같이 가상 그래피티 영역(404)에 나타내기 위한 처리를 말한다. 이러한 스트로크 잉킹 처리의 여부, 색상, 투명도 등도 상기한 사용자 세팅창을 통해 사용자가 원하는대로 세팅하도록 할 수 있다. 만일 스트로크 잉킹 처리가 세팅되어 있고 사용자의 터치 입력에 의해 필기가 이루어진 경우라면, (610)단계에서 사용자의 필기에 따른 스트로크 잉킹 이미지를 생성하여 제2비디오 버퍼(518)에 저장한 후 (612)단계로 진행한다. 이에 따라 도 7(c)와 같이 메인 스크린 이미지와 그래피티 스크린 이미지가 중첩되어 있는 이미지에 도 7(d)와 같이 스트로크 잉킹 이미지가 중첩되게 된다. 도 7(d)는 사용자가 아라비아 숫자 '2'를 필기한 경우에, 스트로크 잉킹 이미지 '2'가 중첩된 것을 보인다. 이와 달리 스트로크 잉킹 처리가 세팅되어 있지 않거나 사용자에 의한 필기가 이루어지지 않은 경우라면, 상기한 (608)에서 바로 (612)단계로 진행한다.
상기한 (612)단계에서는 제2비디오 버퍼(518)에 저장되어 있는 비디오 데이터를 DMA 콘트롤러(522)를 제어하여 LCD 콘트롤러(524)로 전송하여 디스플레이 업데이트가 이루어지도록 한다. 이때 (610)단계의 스트로크 잉킹 처리를 거치지 않은 경우에는 메인 스크린 이미지와 그래피티 스크린 이미지가 중첩되어 있는 도 7(c)와 같은 이미지의 비디오 데이터가 DMA 콘트롤러(522)에 의해 LCD 콘트롤러(524)로 전송됨으로써 스크린(402)에는 도 7(c)와 같은 이미지가 디스플레이된다. 이와 달리 (610)단계의 스트로크 잉킹 처리가 이루어진 경우에는 메인 스크린 이미지와 그래피티 스크린 이미지가 중첩되어 있는 이미지에 또다시 스트로크 잉킹 이미지가 중첩된 도 7(d)와 같은 이미지의 비디오 데이터가 DMA 콘트롤러(522)에 의해 LCD 콘트롤러(524)로 전송됨으로써 스크린(402)에는 도 7(d)와 같은 이미지가 디스플레이된다.
또한 상기한 (604)단계에서 체크 결과, 가상 그래피티가 디스에이블된 경우에 진행되는 (614)단계에서는 제1비디오 버퍼(516)에 저장되어 있는 비디오 데이터를 DMA 콘트롤러(522)를 제어하여 LCD 콘트롤러(524)로 전송하여 디스플레이 업데이트가 이루어지도록 한다. 즉, 도 7(a)와 같이 메인 스크린 이미지만의 비디오 데이터가 DMA 콘트롤러(522)에 의해 LCD 콘트롤러(524)로 전송됨으로써 스크린(402)에는 도 7(a)와 같이 가상 그래피티가 보이지 않는 이미지가 디스플레이된다.
한편 상기한 바와 같이 가상 그래피티 영역(404)은 메인 스크린 이미지와 그래피티 이미지가 중첩되어 있게 되므로, 스크린(402) 중에 가상 그래피티 영역(404)에 대한 사용자의 터치 입력이 있는 경우에, CPU(508)는 사용자 입력이 애플리케이션을 실행시키고자 하는 입력인지 아니면 그래피티 입력인지를 구분되게 인식하여 처리해야 한다. 이를 위해 CPU(508)는 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분 인식하여 처리한다. 예를 들면, 사용자가 스타일러스로 스크린(402)을 터치한 후 터치 상태로 움직이지 않고 일정시간이 경과하면 애플리케이션 실행으로서 인식한다. 즉, 도 4(a)에서 메인 스크린 이미지와 그래피티 이미지가 중첩되어 있는 위치에 있는 애플리케이션 아이콘(412)을 사용자가 스타일러스로 터치한 후 스타일러스를 떼지도 않고 움직이지도 않은 상태로 일정시간이 경과하면 아이콘(412)에 대응하는 애플리케이션을 실행한다. 이는 도 4(a)의 예시와 달리 이미 어떤 애플리케이션이 실행되고 있는 상태에서도 마찬가지로서, 현재 실행되고 있는 애플리케이션에 따라 스크린(402)의 가상 그래피티 영역(404)에 디스플레이되고 있는 버튼(button)등에 대하여도 마찬가지이다. 상기한 바와 달리 사용자가 스타일러스로 스크린(402)을 터치한 후 터치 상태로 움직이거나 일정시간이 경과하기 전에 스타일러스를 떼면 그래피티 입력으로 인식한다. 즉, 도 4(a)에서 메인 스크린 이미지와 그래피티 이미지가 중첩되어 있는 위치에 있는 애플리케이션 아이콘(412)을 사용자가 스타일러스로 터치하였다 해도 터치 상태로 움직이거나 일정시간이 경과하기 전에 스타일러스를 떼면 아이콘(412)을 실행하지 않고, 그 대신에 그래피티 입력으로 인식한다. 이처럼 그래피티 입력으로 인식하는 경우는 다시 그래피티 입력 박스(412) 상의 터치와 그래피티 아이콘들(410)에 대한 터치의 2가지로 구분된다. 첫번째로는 사용자가 스타일러스로 그래피티 입력 박스(412) 내의 어떤 곳을 터치한 다음에 일정시간이 경과하기 전에 터치 상태로 움직이거나 떼게 되면 그래피티를 필기하는 것으로 인식하는 것이다. 두번째는 사용자가 스타일러스로 애플리케이션 아이콘과 그래피티 아이콘이 중첩되어 있는 곳이나 그래피티 아이콘만이 있는 곳을 터치한 다음에 일정시간이 경과하기 전에 터치 상태로 떼게 되면 해당하는 그래피티 아이콘을 실행한다.
상기한 바와 같이 CPU(508)가 사용자 터치 입력을 구분 인식하여 처리하는 예를 (700)∼(708)단계로 보인 도 8의 처리 흐름도를 참조하면, CPU(508)는 (700)단계에서 사용자의 터치 입력에 응답하여 (702)단계에서 터치 위치가 가상 그래피티 영역(404)인지 여부를 체크한다. 만일 가상 그래피티 영역(404)이 아니라면, 해당 터치 입력은 애플리케이션 실행 입력이므로 (706)단계로 진행하여 터치 입력에 대하여 애플리케이션 실행 입력으로 인식하여 처리한다. 이와 달리 터치 위치가 가상 그래피티 영역(404)이라면, 상기한 바와 같이 애플리케이션 실행 입력일 수도 있고 그래피티 입력일 수도 있다. 이에따라 (704)단계에서 고정 터치 시간이 일정시간 T을 초과하는지를 체크한다. 고정 터치 시간은 상기한 바와 같이 사용자가 스타일러스에 의해 스크린(402)을 터치한 후 스타일러스를 떼지도 않고 움직이지 않은 상태로 유지되는 시간을 의미한다. 만일 고정 터치 시간이 일정시간 T를 초과하면 상기한 바와 같이 애플리케이션 실행 입력이므로 (706)단계로 진행하여 터치 입력에 대하여 애플리케이션 실행 입력으로 인식하여 처리한다. 이와 달리 고정 터치 시간이 일정시간 T보다 짧으면, 상기한 바와 같이 그래피티 필기 입력이거나 그래피티 아이콘 실행 입력이므로, (708)단계로 진행하여 그래피티 입력으로 인식하여 처리한다. 이때 터치 위치가 그래피티 입력 박스(408) 내라면 그래피티 필기 입력으로 인식하여 처리하고, 그래피티 입력 박스(408)를 벗어난 위치라면, 해당하는 그래피티 아이콘(410)을 실행한다.
따라서 터치 스크린 디스플레이 장치의 스크린의 일부 영역에 가상 그래피티 영역이 설정되고, 이 가상 그래피티 영역에는 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하며, 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 입력과 그래피티 입력으로 구분 인식하여 처리하게 된다. 이에 따라 가상 그래피티 영역에서는 애플리케이션 및 가상 그래피티의 디스플레이와 그에 대한 터치 입력이 모두 액티브 상태로 있으면서 선택적으로 실행되어질 수 있으므로, 가상 그래피티 영역을 제공하기 위한 별도의 공간을 필요로 하지 않으면서도 가상 그래피티가 구현된다.
한편 상술한 본 발명의 설명에서는 구체적인 실시예에 관해 설명하였으나, 여러가지 변형이 본 발명의 범위내에서 이루어질 수 있다. 특히 본 발명의 실시예에 따른 방법은 CPU(Central Processing Unit)를 구비하며 스크린에 정보를 디스플레이함과 아울러 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이장치를 구비하는 장치에 구현하기 위한 실행 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체로도 제공될 수 있다. 이뿐만 아니라 스트로크 잉킹 처리를 하는 경우에, 스트로크가 배경색과 용이하게 구분되게 보이도록 스트로크의 색상과 투명도를 배경색에 따라 결정하도록 구현할 수도 있다. 따라서 본 발명의 범위는 설명된 실시예에 의하여 한정되는 것이 아니며 특허청구범위와 특허청구범위의 균등한 것에 의하여 정하여져야 한다.
상술한 바와 같이 본 발명은 터치 스크린 디스플레이 장치의 스크린의 일부 영역에 가상 그래피티 영역이 설정되고, 이 가상 그래피티 영역에는 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하며, 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 구분 인식하여 처리함으로써, 가상 그래피티 영역을 제공하기 위한 별도의 공간을 필요로 하지 않으면서도 가상 그래피티를 구현할 수 있는 이점이 있다. 이에 따라 크기에 제약을 받는 휴대형 장치에서도 효과적으로 그래피티 기능을 구현할 수 있게 되며 1:1 비율의 스크린에서도 가상 그래피티를 제공할 수 있게 된다.
도 1 및 도 2는 터치 패드 상에 인쇄에 의해 그래피티 영역이 제공되는 것을 보인 예시도,
도 3a 및 도 3b는 터치 스크린 디스플레이 장치의 스크린 상에 가상 그래피티가 제공되는 것을 설명하기 위한 예시도,
도 4a 및 도 4b는 본 발명의 실시예에 따라 터치 스크린 디스플레이 장치의 스크린 상에 가상 그래피티가 제공되는 것을 설명하기 위한 예시도,
도 5는 본 발명의 실시예에 따른 가상 그래피티를 제공하기 위한 장치의 블록구성도,
도 6은 본 발명의 실시예에 따른 디스플레이 업데이트 처리 흐름도,
도 7은 본 발명의 실시예에 따른 디스플레이 업데이트 처리 예시도,
도 8은 본 발명의 실시예에 따른 터치 입력 처리 흐름도.

Claims (24)

  1. 가상 그래피티를 제공하기 위한 장치에 있어서,
    스크린에 정보를 디스플레이함과 아울러 상기 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이 장치와,
    상기 터치 스크린 디스플레이 장치와 연결되며, 상기 스크린의 일부 영역에 설정되는 상기 가상 그래피티를 제공하기 위한 가상 그래피티 영역에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하며, 상기 스크린에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분 인식하여 처리하는 제어부를 구비함을 특징으로 하는 장치.
  2. 제1항에 있어서, 상기 제어부가, 상기 가상 그래피티를 사용자의 선택에 따라 인에이블 또는 디스에이블시킴을 특징으로 하는 장치.
  3. 제1항에 있어서, 상기 제어부가, 상기 가상 그래피티 영역의 위치, 모양, 투명도, 크기, 색상 중에 적어도 어느 한 가지 이상을 사용자의 선택에 따라 변경함을 특징으로 하는 장치.
  4. 제1항에 있어서, 상기 제어부가, 상기 가상 그래피티 영역에 대한 사용자의 터치 입력에 따른 스트로크를 상기 가상 그래피티 영역에 중첩시켜 디스플레이함을 특징으로 하는 장치.
  5. 제4항에 있어서, 상기 제어부가, 상기 스트로크가 배경색과 구분되게 보이도록 상기 스트로크의 색상과 투명도를 상기 배경색에 따라 결정함을 특징으로 하는 장치.
  6. 제1항에 있어서, 상기 제어부가,
    입력되는 비디오 데이터에 따른 이미지를 상기 스크린에 디스플레이시키는 디스플레이 콘트롤러와,
    상기 스크린에 대한 사용자의 터치에 따라 발생되는 아날로그의 사용자 입력 신호를 디지털 신호로 변환하는 A/D(Analog-to-Digital) 변환기와,
    상기 그래피티 스크린 이미지의 비디오 데이터를 저장하는 그래피티 스크린 메모리와, 상기 메인 스크린 이미지의 비디오 데이터를 저장하는 제1비디오 버퍼와, 상기 메인 스크린 이미지에 상기 그래피티 스크린 이미지가 중첩된 비디오 데이터를 저장하는 제2비디오 버퍼를 구비하는 메모리와,
    상기 제1,제2비디오 버퍼에 저장되어 있는 각 비디오 데이터를 선택적으로 독출하여 상기 디스플레이 콘트롤러에 인가하는 DMA(Direct Memory Access) 콘트롤러와,
    상기 A/D 변환기로부터 입력되는 사용자 입력을 처리하고, 상기 사용자 입력에 따라 상기 제1,제2비디오 버퍼의 비디오 데이터를 선택적으로 갱신하며, 상기 사용자의 선택에 따른 상기 가상 그래피티의 인에이블 여부에 따라 상기 DMA 콘트롤러의 선택적인 비디오 데이터 독출을 제어하는 CPU(Central Processing Unit)와,
    상기 디스플레이 콘트롤러와 상기 메모리와 상기 DMA 콘트롤러에 대한 상기 CPU의 인터페이스를 제공하는 호스트 인터페이스를 구비함을 특징으로 하는 장치.
  7. 제6항에 있어서, 상기 CPU가,
    상기 가상 그래피티가 인에이블된 경우에는 상기 제1비디오 버퍼를 업데이트시키고, 상기 그래피티 스크린 메모리의 그래피티 스크린 이미지를 상기 제1비디오 버퍼의 메인 스크린 이미지에 중첩시켜 상기 제2비디오 버퍼를 업데이트시킨 후, 상기 DMA 콘트롤러가 상기 제2비디오 버퍼의 비디오 데이터를 독출하여 상기 디스플레이 콘트롤러에 인가하도록 제어하고,
    상기 가상 그래피티가 디스에이블된 경우에는 상기 제1비디오 버퍼를 업데이트시킨 후, 상기 DMA 콘트롤러가 상기 제1비디오 버퍼의 비디오 데이터를 독출하여 상기 디스플레이 콘트롤러에 인가하도록 제어함을 특징으로 하는 장치.
  8. 제7항에 있어서, 상기 CPU가, 상기 가상 그래피티 영역의 위치, 모양, 투명도, 크기, 색상 중에 적어도 어느 한 가지 이상을 사용자의 선택에 따라 변경함을 특징으로 하는 장치.
  9. 제7항에 있어서, 상기 CPU가, 상기 가상 그래피티가 인에이블된 상태에서 상기 사용자의 터치 입력에 따른 스트로크 이미지를 나타내는 스트로크 잉킹 데이터를 상기 제2비디오 버퍼의 비디오 데이터에 중첩시킴을 특징으로 하는 장치.
  10. 제9항에 있어서, 상기 CPU가, 상기 스트로크가 배경색과 구분되게 보이도록 상기 스트로크의 색상과 투명도를 상기 배경색에 따라 결정함을 특징으로 하는 장치.
  11. 스크린에 정보를 디스플레이함과 아울러 상기 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이 장치를 이용하여 가상 그래피티를 제공하기 위한 방법에 있어서,
    상기 스크린의 일부 영역에 설정되는 상기 가상 그래피티를 제공하기 위한 가상 그래피티 영역에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하는 과정과,
    상기 가상 그래피티 영역에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분되게 인식하여 처리하는 과정을 구비함을 특징으로 하는 방법.
  12. 제11항에 있어서, 상기 가상 그래피티를 사용자의 선택에 따라 인에이블 또는 디스에이블시키는 과정을 더 구비함을 특징으로 하는 방법.
  13. 제11항에 있어서, 상기 가상 그래피티 영역의 위치, 모양, 투명도, 크기, 색상 중에 적어도 어느 한 가지 이상을 사용자의 선택에 따라 변경하는 과정을 더 구비함을 특징으로 하는 방법.
  14. 제11항에 있어서, 상기 디스플레이 과정이, 상기 가상 그래피티 영역에 대한 사용자의 터치 입력에 따른 스트로크를 상기 가상 그래피티 영역에 중첩시켜 디스플레이하는 과정을 더 포함함을 특징으로 하는 방법.
  15. 제14항에 있어서, 상기 디스플레이 과정이, 상기 스트로크가 배경색과 구분되게 보이도록 상기 스트로크의 색상과 투명도를 상기 배경색에 따라 결정하는 과정을 더 포함함을 특징으로 하는 방법.
  16. 제12항에 있어서, 상기 디스플레이 과정이,
    상기 가상 그래피티가 인에이블된 경우에는 상기 그래피티 스크린 이미지를 상기 메인 스크린 이미지에 중첩시킨 이미지에 의해 상기 스크린의 디스플레이를 업데이트시키는 제1디스플레이 업데이트 과정과,
    상기 가상 그래피티가 디스에이블된 경우에는 상기 메인 스크린 이미지에 의해 상기 스크린의 디스플레이를 업데이트시키는 제2디스플레이 업데이트 과정을 구비함을 특징으로 하는 방법.
  17. 제16항에 있어서, 상기 가상 그래피티 영역의 위치, 모양, 투명도, 크기, 색상 중에 적어도 어느 한 가지 이상을 사용자의 선택에 따라 변경하는 과정을 더 구비함을 특징으로 하는 방법.
  18. 제16항에 있어서, 상기 제1디스플레이 업데이트 과정이, 상기 사용자의 터치 입력에 따른 스트로크의 이미지를 나타내는 스트로크 잉킹 데이터를 상기 그래피티 스크린 이미지와 상기 메인 스크린 이미지가 중첩된 이미지에 중첩시켜 상기 스크린의 디스플레이를 업데이트시키는 과정을 더 포함함을 특징으로 하는 방법.
  19. 제18항에 있어서, 상기 제1디스플레이 업데이트 과정이, 상기 스트로크가 배경색과 구분되게 보이도록 상기 스트로크의 색상과 투명도를 상기 배경색에 따라 결정하는 과정을 더 포함함을 특징으로 하는 방법.
  20. CPU(Central Processing Unit)를 구비하며, 스크린에 정보를 디스플레이함과 아울러 상기 스크린 상의 터치에 따른 사용자 입력을 받기 위한 터치 스크린 디스플레이장치를 구비하는 장치에,
    상기 스크린의 일부 영역에 설정되는 상기 가상 그래피티를 제공하기 위한 가상 그래피티 영역에 그래피티 스크린 이미지를 메인 스크린 이미지에 중첩시켜 디스플레이하는 과정과,
    상기 가상 그래피티 영역에 대한 사용자의 터치 입력을 그 터치 위치 및/또는 터치 방식에 따라 애플리케이션 실행 입력과 그래피티 입력으로 구분되게 인식하여 처리하는 과정을 구비하는 방법을 구현하기 위한 실행 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
  21. 제20항에 있어서, 상기 디스플레이 과정이,
    상기 가상 그래피티가 인에이블된 경우에는 상기 그래피티 스크린 이미지를 상기 메인 스크린 이미지에 중첩시킨 이미지에 의해 상기 스크린의 디스플레이를 업데이트시키는 제1디스플레이 업데이트 과정과,
    상기 가상 그래피티 영역가 디스에이블된 경우에는 상기 메인 스크린 이미지에 의해 상기 스크린의 디스플레이를 업데이트시키는 제2디스플레이 업데이트 과정을 구비함을 특징으로 하는 컴퓨터로 읽을 수 있는 기록매체.
  22. 제21항에 있어서, 상기 가상 그래피티 영역의 위치, 모양, 투명도, 크기, 색상 중에 적어도 어느 한가지 이상을 사용자의 선택에 따라 변경하는 과정을 더 구비함을 특징으로 하는 컴퓨터로 읽을 수 있는 기록매체.
  23. 제21항에 있어서, 상기 제1디스플레이 업데이트 과정이, 상기 사용자의 터치 입력에 따른 스트로크의 이미지를 나타내는 스트로크 잉킹 데이터를 상기 그래피티 스크린 이미지와 상기 메인 스크린 이미지가 중첩된 이미지에 중첩시켜 상기 스크린의 디스플레이를 업데이트시키는 과정을 더 포함함을 특징으로 하는 컴퓨터로 읽을 수 있는 기록매체.
  24. 제23항에 있어서, 상기 제1디스플레이 업데이트 과정이, 상기 스트로크가 배경색과 구분되게 보이도록 상기 스트로크의 색상과 투명도를 상기 배경색에 따라 결정하는 과정을 더 포함함을 특징으로 하는 컴퓨터로 읽을 수 있는 기록매체.
KR1020030078483A 2003-11-06 2003-11-06 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체 KR100593982B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020030078483A KR100593982B1 (ko) 2003-11-06 2003-11-06 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체
US10/864,926 US7956845B2 (en) 2003-11-06 2004-06-10 Apparatus and method for providing virtual graffiti and recording medium for the same
EP04016231.5A EP1531387B1 (en) 2003-11-06 2004-07-09 Apparatus and method for providing virtual graffiti and recording medium for the same
CNB2004100544350A CN1313909C (zh) 2003-11-06 2004-07-22 提供虚拟手写的装置和方法及用于同样目的的记录介质
IL163834A IL163834A (en) 2003-11-06 2004-08-31 Apparatus and method for providing virtual graffiti and recording medium for the same
JP2004298168A JP4731873B2 (ja) 2003-11-06 2004-10-12 仮想グラフィティを提供する装置及び方法並びにそのための記録媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030078483A KR100593982B1 (ko) 2003-11-06 2003-11-06 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체

Publications (2)

Publication Number Publication Date
KR20050043560A true KR20050043560A (ko) 2005-05-11
KR100593982B1 KR100593982B1 (ko) 2006-06-30

Family

ID=36649913

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030078483A KR100593982B1 (ko) 2003-11-06 2003-11-06 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체

Country Status (6)

Country Link
US (1) US7956845B2 (ko)
EP (1) EP1531387B1 (ko)
JP (1) JP4731873B2 (ko)
KR (1) KR100593982B1 (ko)
CN (1) CN1313909C (ko)
IL (1) IL163834A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100133245A (ko) * 2009-06-11 2010-12-21 엘지전자 주식회사 휴대 단말기 및 그 제어방법
KR101371420B1 (ko) * 2006-12-28 2014-03-10 삼성전자주식회사 최상위 메뉴 간 직접 이동가능한 메뉴세트를 이용한 메뉴제공방법 및 이를 적용한 멀티미디어 기기
KR101397001B1 (ko) * 2007-09-03 2014-05-20 엘지전자 주식회사 통신 단말기 및 이것의 동작 제어 방법

Families Citing this family (139)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7469381B2 (en) * 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US9552141B2 (en) 2004-06-21 2017-01-24 Apple Inc. Methods and apparatuses for operating a data processing system
JP4731149B2 (ja) * 2004-10-06 2011-07-20 任天堂株式会社 情報処理装置および情報入力プログラム
JP4630644B2 (ja) * 2004-11-18 2011-02-09 理想科学工業株式会社 タッチパネルを備えた画像処理装置
EP1672483A1 (de) * 2004-12-20 2006-06-21 Siemens Aktiengesellschaft Erfassung von Daten in einem Datenverarbeitungssystem
KR101259476B1 (ko) * 2005-01-25 2013-05-06 보다폰 그룹 피엘씨 연계 동작 방법 및 통신 단말 장치
JP4628178B2 (ja) * 2005-05-16 2011-02-09 任天堂株式会社 情報処理装置および項目選択処理プログラム
KR100791377B1 (ko) * 2005-12-28 2008-01-07 삼성전자주식회사 사용자 인터페이스를 제공하는 모바일 장치 및 상기 사용자인터페이스를 이용한 기능 실행 방법
US8312372B2 (en) * 2006-02-10 2012-11-13 Microsoft Corporation Method for confirming touch input
CN101110005B (zh) * 2006-07-19 2012-03-28 鸿富锦精密工业（深圳）有限公司 自定义触摸板的电子装置及方法
US8243022B2 (en) * 2006-11-27 2012-08-14 Microsoft Corporation Federated virtual graffiti
US20080163119A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
US20080163053A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method to provide menu, using menu set and multimedia device using the same
US9575655B2 (en) * 2006-12-29 2017-02-21 Nokia Technologies Oy Transparent layer application
KR20080078291A (ko) 2007-02-23 2008-08-27 엘지전자 주식회사 브라우저 디스플레이 방법 및 이를 구현할 수 있는 단말기
KR20080068491A (ko) * 2007-01-19 2008-07-23 엘지전자 주식회사 터치 방식 정보 입력 단말기 및 그 방법
EP2133776B1 (en) * 2007-04-03 2015-06-10 Sharp Kabushiki Kaisha Mobile information terminal device and mobile telephone
US8111839B2 (en) * 2007-04-09 2012-02-07 Personics Holdings Inc. Always on headwear recording system
US20080278441A1 (en) * 2007-05-07 2008-11-13 Hewlett-Packard Development Company, L.P. User control in a playback mode
US8065624B2 (en) * 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
US8681108B2 (en) * 2007-07-30 2014-03-25 Kyocera Corporation Input apparatus
US7844229B2 (en) * 2007-09-21 2010-11-30 Motorola Mobility, Inc Mobile virtual and augmented reality system
US7853296B2 (en) * 2007-10-31 2010-12-14 Motorola Mobility, Inc. Mobile virtual and augmented reality system
US20100214111A1 (en) * 2007-12-21 2010-08-26 Motorola, Inc. Mobile virtual and augmented reality system
CN101533320B (zh) * 2008-03-10 2012-04-25 神基科技股份有限公司 触控显示装置区域影像的近接放大显示方法及其装置
US20090237328A1 (en) * 2008-03-20 2009-09-24 Motorola, Inc. Mobile virtual and augmented reality system
JP5067345B2 (ja) * 2008-10-30 2012-11-07 日本電気株式会社 携帯通信端末、携帯通信端末の制御方法、プログラム、及び記録媒体
US8350871B2 (en) * 2009-02-04 2013-01-08 Motorola Mobility Llc Method and apparatus for creating virtual graffiti in a mobile virtual and augmented reality system
US8564555B2 (en) 2009-04-30 2013-10-22 Synaptics Incorporated Operating a touch screen control system according to a plurality of rule sets
TWI460623B (zh) * 2009-07-14 2014-11-11 Htc Corp 觸控式電子裝置及其相關控制方法
JP5127792B2 (ja) * 2009-08-18 2013-01-23 キヤノン株式会社 情報処理装置、その制御方法、プログラム及び記録媒体
US20110060985A1 (en) * 2009-09-08 2011-03-10 ABJK Newco, Inc. System and Method for Collecting a Signature Using a Smart Device
TWI420379B (zh) * 2009-12-09 2013-12-21 Telepaq Technology Inc 觸控螢幕之選擇功能選單方法
JP4932010B2 (ja) * 2010-01-06 2012-05-16 株式会社スクウェア・エニックス ユーザインタフェース処理装置、ユーザインタフェース処理方法、およびユーザインタフェース処理プログラム
EP2355472B1 (en) * 2010-01-22 2020-03-04 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving handwriting animation message
EP2357220A1 (en) * 2010-02-10 2011-08-17 The Procter & Gamble Company Cleaning composition comprising amylase variants with high stability in the presence of a chelating agent
JP5237325B2 (ja) 2010-04-28 2013-07-17 株式会社スクウェア・エニックス ビデオゲーム処理装置、ビデオゲーム処理方法、およびビデオゲーム処理プログラム
US20110296333A1 (en) * 2010-05-25 2011-12-01 Bateman Steven S User interaction gestures with virtual keyboard
JP5466128B2 (ja) * 2010-10-14 2014-04-09 株式会社ソニー・コンピュータエンタテインメント 情報処理システム、情報処理方法、情報処理プログラム、情報処理プログラムを記憶したコンピュータ読み取り可能な記録媒体
USD667843S1 (en) 2010-10-20 2012-09-25 Apple Inc. Display screen or portion thereof with icon
EP3982242B1 (en) * 2010-12-20 2024-05-01 Apple Inc. Event recognition
US8988366B2 (en) * 2011-01-05 2015-03-24 Autodesk, Inc Multi-touch integrated desktop environment
US9600090B2 (en) 2011-01-05 2017-03-21 Autodesk, Inc. Multi-touch integrated desktop environment
US9612743B2 (en) 2011-01-05 2017-04-04 Autodesk, Inc. Multi-touch integrated desktop environment
KR20120086810A (ko) * 2011-01-27 2012-08-06 삼성전자주식회사 단말기 및 그 단말기에서 이미지 처리 방법
KR20130017241A (ko) 2011-08-10 2013-02-20 삼성전자주식회사 터치 스크린 단말기에서 입출력 방법 및 장치
KR101210282B1 (ko) 2011-12-16 2012-12-11 동국대학교 경주캠퍼스 산학협력단 위치기반 가상 낙서판 인터페이스 제공 시스템 및 방법
USD709087S1 (en) 2012-02-06 2014-07-15 Apple Inc. Display screen or portion thereof with icon
US9354748B2 (en) 2012-02-13 2016-05-31 Microsoft Technology Licensing, Llc Optical stylus interaction
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9134807B2 (en) 2012-03-02 2015-09-15 Microsoft Technology Licensing, Llc Pressure sensitive key normalization
US8873227B2 (en) 2012-03-02 2014-10-28 Microsoft Corporation Flexible hinge support layer
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
JP5893456B2 (ja) * 2012-03-19 2016-03-23 キヤノン株式会社 表示制御装置及びその制御方法、プログラム、並びに記憶媒体
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US8816989B2 (en) * 2012-05-22 2014-08-26 Lenovo (Singapore) Pte. Ltd. User interface navigation utilizing pressure-sensitive touch
US10031556B2 (en) 2012-06-08 2018-07-24 Microsoft Technology Licensing, Llc User experience adaptation
US9019615B2 (en) 2012-06-12 2015-04-28 Microsoft Technology Licensing, Llc Wide field-of-view virtual image projector
CN102841804B (zh) * 2012-06-27 2014-12-10 北京三星通信技术研究有限公司 同屏多前台任务处理方法及装置
KR101976177B1 (ko) * 2012-07-09 2019-05-08 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US8964379B2 (en) 2012-08-20 2015-02-24 Microsoft Corporation Switchable magnetic lock
US9558278B2 (en) 2012-09-11 2017-01-31 Apple Inc. Integrated content recommendation
US9218118B2 (en) 2012-09-11 2015-12-22 Apple Inc. Media player playlist management
US8786767B2 (en) 2012-11-02 2014-07-22 Microsoft Corporation Rapid synchronized lighting and shuttering
US9304549B2 (en) 2013-03-28 2016-04-05 Microsoft Technology Licensing, Llc Hinge mechanism for rotatable component attachment
CN103257828A (zh) * 2013-05-30 2013-08-21 无锡久源软件科技有限公司 一种可涂鸦式全屏滑动解锁方法
USD734774S1 (en) 2013-06-09 2015-07-21 Apple Inc. Display screen or portion thereof with graphical user interface
USD744529S1 (en) 2013-06-09 2015-12-01 Apple Inc. Display screen or portion thereof with icon
USD738905S1 (en) 2013-06-09 2015-09-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD755843S1 (en) 2013-06-10 2016-05-10 Apple Inc. Display screen or portion thereof with graphical user interface
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
USD746831S1 (en) 2013-09-10 2016-01-05 Apple Inc. Display screen or portion thereof with graphical user interface
USD733744S1 (en) 2013-10-21 2015-07-07 Apple Inc. Display screen or portion thereof with graphical user interface
USD743443S1 (en) 2013-10-22 2015-11-17 Apple Inc. Display screen or portion thereof with graphical user interface
USD711427S1 (en) 2013-10-22 2014-08-19 Apple Inc. Display screen or portion thereof with icon
US20150161822A1 (en) * 2013-12-11 2015-06-11 Adobe Systems Incorporated Location-Specific Digital Artwork Using Augmented Reality
USD765092S1 (en) 2014-03-03 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD766318S1 (en) 2014-03-07 2016-09-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
US10120420B2 (en) 2014-03-21 2018-11-06 Microsoft Technology Licensing, Llc Lockable display and techniques enabling use of lockable displays
WO2015178739A1 (en) * 2014-05-23 2015-11-26 Samsung Electronics Co., Ltd. Method and device for reproducing content
USD769892S1 (en) 2014-05-30 2016-10-25 Apple Inc. Display screen or portion thereof with graphical user interface
USD753678S1 (en) 2014-06-01 2016-04-12 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD755848S1 (en) 2014-06-01 2016-05-10 Apple Inc. Display screen or portion thereof with icon
KR20150139337A (ko) * 2014-06-03 2015-12-11 삼성전자주식회사 화상형성장치의 애플리케이션 실행을 조작하는 화면을 제공하는 방법 및 이를 이용하는 화상형성장치
US10324733B2 (en) 2014-07-30 2019-06-18 Microsoft Technology Licensing, Llc Shutdown notifications
USD772284S1 (en) 2014-09-01 2016-11-22 Apple Inc. Display screen or portion thereof with a set of graphical user interfaces
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device
US9447620B2 (en) 2014-09-30 2016-09-20 Microsoft Technology Licensing, Llc Hinge mechanism with multiple preset positions
USD783642S1 (en) 2014-10-16 2017-04-11 Apple Inc. Display screen or portion thereof with animated graphical user interface
US10296207B2 (en) 2014-12-23 2019-05-21 Lenovo (Singapore) Pte. Ltd. Capture of handwriting strokes
US20160202865A1 (en) 2015-01-08 2016-07-14 Apple Inc. Coordination of static backgrounds and rubberbanding
CN105635519B (zh) * 2015-06-15 2018-07-17 广州市动景计算机科技有限公司 视频处理方法、装置及系统
US9752361B2 (en) 2015-06-18 2017-09-05 Microsoft Technology Licensing, Llc Multistage hinge
US9864415B2 (en) 2015-06-30 2018-01-09 Microsoft Technology Licensing, Llc Multistage friction hinge
USD789957S1 (en) * 2015-07-10 2017-06-20 Capital One Services, Llc Display screen with graphical user interface
USD788161S1 (en) 2015-09-08 2017-05-30 Apple Inc. Display screen or portion thereof with graphical user interface
USD778941S1 (en) 2016-01-08 2017-02-14 Apple Inc. Display screen or portion thereof with graphical user interface
USD778942S1 (en) 2016-01-11 2017-02-14 Apple Inc. Display screen or portion thereof with graphical user interface
USD787556S1 (en) * 2016-04-01 2017-05-23 Google Inc. Display screen or portion thereof with icon
US10344797B2 (en) 2016-04-05 2019-07-09 Microsoft Technology Licensing, Llc Hinge with multiple preset positions
JP6150924B2 (ja) * 2016-05-02 2017-06-21 キヤノン株式会社 情報処理装置、その制御方法、プログラム及び記録媒体
JP6809068B2 (ja) * 2016-09-14 2021-01-06 富士ゼロックス株式会社 処理装置および画像形成装置
US10037057B2 (en) 2016-09-22 2018-07-31 Microsoft Technology Licensing, Llc Friction hinge
EP4386533A3 (en) 2016-09-27 2024-08-07 Bigfoot Biomedical, Inc. Personalizing preset meal sizes in insulin delivery system
USD836769S1 (en) 2016-12-12 2018-12-25 Bigfoot Biomedical, Inc. Insulin delivery controller
CA3037432A1 (en) 2016-12-12 2018-06-21 Bigfoot Biomedical, Inc. Alarms and alerts for medication delivery devices and related systems and methods
USD839294S1 (en) 2017-06-16 2019-01-29 Bigfoot Biomedical, Inc. Display screen with graphical user interface for closed-loop medication delivery
USD846594S1 (en) 2017-07-10 2019-04-23 Apple Inc. Display screen or portion thereof with icon
USD873284S1 (en) 2017-09-09 2020-01-21 Apple Inc. Electronic device with graphical user interface
USD851111S1 (en) 2017-09-09 2019-06-11 Apple Inc. Electronic device with graphical user interface
USD843442S1 (en) 2017-09-10 2019-03-19 Apple Inc. Type font
USD987669S1 (en) * 2017-09-11 2023-05-30 Apple Inc. Electronic device with graphical user interface
USD863343S1 (en) * 2017-09-27 2019-10-15 Bigfoot Biomedical, Inc. Display screen or portion thereof with graphical user interface associated with insulin delivery
USD846567S1 (en) 2017-10-06 2019-04-23 Apple Inc. Electronic device with graphical user interface
USD857033S1 (en) * 2017-11-07 2019-08-20 Apple Inc. Electronic device with graphical user interface
USD911355S1 (en) * 2018-03-29 2021-02-23 Bigfoot Biomedical, Inc. Display screen or portion thereof with graphical user interface
CN108509139B (zh) * 2018-03-30 2019-09-10 腾讯科技（深圳）有限公司 虚拟对象的移动控制方法、装置、电子装置及存储介质
USD916862S1 (en) 2018-05-10 2021-04-20 Wells Fargo Bank, N.A. Display screen or portion thereof with graphical user interface
US11079919B1 (en) 2018-05-10 2021-08-03 Wells Fargo Bank, N.A. Personal computing devices with improved graphical user interfaces
USD885426S1 (en) 2018-06-03 2020-05-26 Apple Inc. Electronic device with graphical user interface
USD879132S1 (en) 2018-06-03 2020-03-24 Apple Inc. Electronic device with graphical user interface
USD938968S1 (en) 2018-09-06 2021-12-21 Apple Inc. Electronic device with animated graphical user interface
USD883319S1 (en) 2018-10-29 2020-05-05 Apple Inc. Electronic device with graphical user interface
USD902221S1 (en) 2019-02-01 2020-11-17 Apple Inc. Electronic device with animated graphical user interface
USD900871S1 (en) 2019-02-04 2020-11-03 Apple Inc. Electronic device with animated graphical user interface
USD913315S1 (en) 2019-05-31 2021-03-16 Apple Inc. Electronic device with graphical user interface
USD924912S1 (en) 2019-09-09 2021-07-13 Apple Inc. Display screen or portion thereof with graphical user interface
JP2021140590A (ja) 2020-03-06 2021-09-16 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、記憶媒体
USD949184S1 (en) 2020-06-17 2022-04-19 Apple Inc. Display screen or portion thereof with graphical user interface
USD946018S1 (en) 2020-06-18 2022-03-15 Apple Inc. Display screen or portion thereof with graphical user interface
CN111901662A (zh) * 2020-08-05 2020-11-06 腾讯科技（深圳）有限公司 视频的扩展信息处理方法、设备和存储介质
USD976950S1 (en) * 2020-10-02 2023-01-31 Lutron Technology Company Llc Display screen or portion thereof with animated graphical user interface
CN115116399B (zh) * 2021-03-17 2024-10-11 元太科技工业股份有限公司 电子纸显示装置及其操作方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5450342A (en) * 1984-10-05 1995-09-12 Hitachi, Ltd. Memory device
JPH04162090A (ja) 1990-10-26 1992-06-05 Fuji Electric Co Ltd 表示装置
US5946406A (en) * 1991-06-17 1999-08-31 Microsoft Corporation Method and system for data entry of handwritten symbols
US5583542A (en) * 1992-05-26 1996-12-10 Apple Computer, Incorporated Method for deleting objects on a computer display
WO1994022069A1 (en) * 1993-03-19 1994-09-29 Dynapro Technologies Inc. Extended touch screen
JPH0844522A (ja) * 1994-07-27 1996-02-16 Suzuken:Kk 複数画面表示が可能な入力装置
JPH11249782A (ja) 1998-03-04 1999-09-17 Toshiba Corp 複数のウインドウを持つ端末装置、ウインドウ表示方法及びウインドウ表示制御プログラムを記録した記録媒体
US6130665A (en) * 1998-04-01 2000-10-10 Telefonaktiebolaget Lm Ericsson Touch screen handling
US6492978B1 (en) * 1998-05-29 2002-12-10 Ncr Corporation Keyscreen
JP2000123114A (ja) 1998-10-15 2000-04-28 Casio Comput Co Ltd 手書き文字入力装置及び記憶媒体
US7168048B1 (en) * 1999-03-24 2007-01-23 Microsoft Corporation Method and structure for implementing a layered object windows
US6727917B1 (en) * 2000-01-06 2004-04-27 Microsoft Corporation User interface for palm-sized computing devices and method and apparatus for displaying the same
US6791467B1 (en) * 2000-03-23 2004-09-14 Flextronics Semiconductor, Inc. Adaptive remote controller
JP3763389B2 (ja) * 2000-03-24 2006-04-05 シャープ株式会社 画像データ編集操作方法および情報処理装置
KR100380600B1 (ko) 2000-04-17 2003-04-21 (주)네이스텍 터치스크린을 갖는 단말기에서의 문자입력방법
US6956562B1 (en) * 2000-05-16 2005-10-18 Palmsource, Inc. Method for controlling a handheld computer by entering commands onto a displayed feature of the handheld computer
GB2367991A (en) * 2000-10-12 2002-04-17 Kubix Com Touch sensitive display screen
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US20030071850A1 (en) * 2001-10-12 2003-04-17 Microsoft Corporation In-place adaptive handwriting input method and system
US20030081016A1 (en) * 2001-10-31 2003-05-01 Genovation Inc. Personal digital assistant mouse
US6791529B2 (en) * 2001-12-13 2004-09-14 Koninklijke Philips Electronics N.V. UI with graphics-assisted voice control system
JP2003295996A (ja) * 2002-03-29 2003-10-17 Digital Electronics Corp 制御用表示装置
FI20020847A (fi) * 2002-05-03 2003-11-04 Nokia Corp Menetelmä ja laite valikkotoimintojen käyttämiseksi
US7567239B2 (en) * 2003-06-26 2009-07-28 Motorola, Inc. Method and system for message and note composition on small screen devices
US8527896B2 (en) * 2003-10-23 2013-09-03 Microsoft Corporation User interface menu with hovering icons

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101371420B1 (ko) * 2006-12-28 2014-03-10 삼성전자주식회사 최상위 메뉴 간 직접 이동가능한 메뉴세트를 이용한 메뉴제공방법 및 이를 적용한 멀티미디어 기기
KR101397001B1 (ko) * 2007-09-03 2014-05-20 엘지전자 주식회사 통신 단말기 및 이것의 동작 제어 방법
KR20100133245A (ko) * 2009-06-11 2010-12-21 엘지전자 주식회사 휴대 단말기 및 그 제어방법

Also Published As

Publication number Publication date
US20050099400A1 (en) 2005-05-12
JP2005141731A (ja) 2005-06-02
EP1531387B1 (en) 2019-01-09
CN1313909C (zh) 2007-05-02
IL163834A (en) 2010-04-15
JP4731873B2 (ja) 2011-07-27
IL163834A0 (en) 2005-12-18
KR100593982B1 (ko) 2006-06-30
US7956845B2 (en) 2011-06-07
EP1531387A3 (en) 2011-11-30
CN1614545A (zh) 2005-05-11
EP1531387A2 (en) 2005-05-18

Similar Documents

Publication Publication Date Title
KR100593982B1 (ko) 가상 그래피티를 제공하는 장치 및 방법과 그에 따른기록매체
US10671276B2 (en) Mobile terminal device and input device
KR100771626B1 (ko) 단말기 및 이를 위한 명령 입력 방법
US8739053B2 (en) Electronic device capable of transferring object between two display units and controlling method thereof
US10133396B2 (en) Virtual input device using second touch-enabled display
US9678659B2 (en) Text entry for a touch screen
KR100770936B1 (ko) 문자 입력 방법 및 이를 위한 이동통신단말기
CN108121457B (zh) 提供字符输入界面的方法和设备
KR20050019906A (ko) 정보 표시 입력 장치 및 정보 표시 입력 방법과, 정보처리 장치
JP5893456B2 (ja) 表示制御装置及びその制御方法、プログラム、並びに記憶媒体
CN114764304A (zh) 一种屏幕显示方法
CN104281318A (zh) 减少软键盘按压的显示延迟的方法和装置
JPWO2016181436A1 (ja) 画像出力制御方法、画像出力制御プログラム及び表示装置
JP2014016743A (ja) 情報処理装置、情報処理装置の制御方法、および情報処理装置の制御プログラム
KR20090049153A (ko) 터치스크린을 구비한 단말기 및 그 문자 입력 방법
JP7431301B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP7228964B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US12124695B2 (en) Mobile terminal device and input device
JP7517965B2 (ja) 電子機器、制御プログラム、および電子機器の制御方法
JP7504948B2 (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
JP2022181960A (ja) 情報処理装置、およびプログラム
KR20080047018A (ko) 기호 입력을 위한 표시창들이 가변되는 전자장치
JP2017162099A (ja) 情報処理装置、制御方法、及びプログラム
JP2005258601A (ja) 情報携帯端末
JP2014053746A (ja) 文字入力装置、文字入力装置の制御方法、制御プログラム、制御プログラムを記録したコンピュータ読み取り可能な記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130530

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140529

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150528

Year of fee payment: 10

LAPS Lapse due to unpaid annual fee