KR101663849B1 - 터치 감지형 컴퓨팅 장치 및 방법 - Google Patents

터치 감지형 컴퓨팅 장치 및 방법 Download PDF

Info

Publication number
KR101663849B1
KR101663849B1 KR1020117016518A KR20117016518A KR101663849B1 KR 101663849 B1 KR101663849 B1 KR 101663849B1 KR 1020117016518 A KR1020117016518 A KR 1020117016518A KR 20117016518 A KR20117016518 A KR 20117016518A KR 101663849 B1 KR101663849 B1 KR 101663849B1
Authority
KR
South Korea
Prior art keywords
journal
journal page
touch
pim
marking
Prior art date
Application number
KR1020117016518A
Other languages
English (en)
Other versions
KR20110113616A (ko
Inventor
조그 페트슈닉
조나단 리드 해리스
조수아 제이. 힌즈
사브리나 보러
Original Assignee
마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 filed Critical 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Publication of KR20110113616A publication Critical patent/KR20110113616A/ko
Application granted granted Critical
Publication of KR101663849B1 publication Critical patent/KR101663849B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

터치 감지형 컴퓨팅 시스템 및 방법이 제공된다. 터치 감지형 컴퓨팅 장치는 터치 입력을 수신하도록 구성된 터치 감지형 디스플레이를 포함할 수 있다. 제스처 인식 모듈은 터치 감지형 디스플레이에 연결될 수 있고, 터치 입력을 수신하도록 구성될 수 있다. 제스처 인식 모듈은 또한 터치 입력에 기초하여, 그리고 복수의 상이한 미리 정의된 제스처로부터 선택함으로써, 터치 입력에 대응하는 인식된 제스처를 결정하도록 구성될 수 있다. 또한, 터치 감지형 컴퓨팅 장치는 PIM 데이터베이스를 포함하는 개인 정보 관리(PIM) 모듈을 포함할 수 있다. PIM 모듈은 터치 감지형 디스플레이 상에 보여진 선택된 항목을 PIM 데이터베이스의 복수의 상이한 PIM 스키마 중 선택된 PIM 스키마에 적용하도록 구성될 수 있다. PIM 스키마들 중 선택된 PIM 스키마는 인식된 제스처에 기초하여 선택될 수 있다.

Description

터치 감지형 컴퓨팅 장치 및 방법{TOUCH SENSITIVE COMPUTING DEVICE AND METHOD}
컴퓨팅 장치를 위한 사용자 인터페이스들은 고정적(rigid)이고 복잡한 경우가 많다. 사용자는 작업을 수행하고, 생각을 기록하고, 정보를 조직화하고, 컨텐츠를 액세스하기 위해, 복수의 층을 네비게이트할 것을 요구받을 수 있다. 현재의 사용자 인터페이스는 전형적으로 단순한 아날로그 저널에서 이용가능한 사용의 용이성 및 유연성을 갖지 않는다. 그 결과, 사용자들은 일상 생활에서의 체계가 없는 쓰기, 스케치, 노트 필기 및 일정관리를 위하여 여전히 펜과 종이에 의존하는 경우가 많다. 또한, 사용자들은 예를 들어 정보를 컴퓨팅 장치에 입력하는 것에 의해, 정보를 종이 기반의 포맷으로부터 디지털 형태로 복사 및/또는 변환하는 데에 시간을 소비할 수 있다.
터치 감지형 컴퓨팅 시스템 및 방법이 제공된다. 터치 감지형 컴퓨팅 장치/시스템은 터치 입력을 인식하도록 구성된 터치 감지형 디스플레이를 포함할 수 있다. 제스처 인식 모듈은 터치 감지형 디스플레이에 연결될 수 있고, 터치 입력을 수신하도록 구성될 수 있다. 제스처 인식 모듈은 또한 터치 입력에 기초하여, 그리고 복수의 상이한 미리 정의된 제스처로부터 선택함으로써, 터치 입력에 대응하는 인식된 제스처를 결정하도록 구성될 수 있다. 또한, 터치 감지형 컴퓨팅 장치는 PIM 데이터베이스를 포함하는 개인 정보 관리(PIM) 모듈을 포함할 수 있다. PIM 모듈은 터치 감지형 디스플레이 상에 보여진 선택된 항목을 PIM 데이터베이스의 복수의 상이한 PIM 스키마 중 선택된 PIM 스키마에 적용하도록 구성될 수 있다. PIM 스키마들 중 선택된 PIM 스키마는 인식된 제스처에 기초하여 선택될 수 있다.
본 개요는 이하의 상세한 설명에서 더 설명되는 개념들 중 선택된 것들을 단순한 형태로 소개하기 위해 제공된 것이다. 본 개요는 청구되는 발명의 주제의 핵심적인 특징 또는 본질적인 특징을 식별하도록 의도된 것이 아니며, 청구되는 발명의 주제의 범위를 제한하기 위해 사용되도록 의도된 것도 아니다. 또한, 청구되는 발명의 주제는 본 명세서의 임의의 부분에서 언급된 문제점들 중 일부 또는 전부를 해결하는 구현들로만 한정되지 않는다.
도 1은 본 명세서에 따른 자유형 상호작용 아키텍처를 도시한 시스템도이다.
도 2는 도 1에 도시된 자유형 상호작용 아키텍처를 포함할 수 있는 컴퓨팅 장치의 개략도이다.
도 3은 도 2에 도시된 컴퓨팅 장치 상에 선택적으로 디스플레이될 수 있는 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지들을 도시한 개략도이다.
도 4는 본 명세서에 따른 예시적인 아키텍처 구조의 개략도이다.
도 5 내지 도 8은 컴퓨팅 장치 내의 터치 입력들을 수신하고 처리하기 위한 다양한 예시적인 방법들을 도시한 흐름도이다.
도 1은 컴퓨팅 장치(12)와 함께 사용될 수 있는 자유형 상호작용 아키텍처(freeform interaction architecture)(10)를 도시한 시스템도이다. 일부 예시들에서, 아키텍처(10)는 모듈들을 포함할 수 있다. 모듈들은 메모리(11) 내에 상주할 수 있는 소프트웨어 모듈들일 수 있다. 프로세서(15)는 소프트웨어 모듈들을 실행하도록 구성될 수 있다. 아키텍처(10)는 예를 들어 터치 감지형 디스플레이(14)의 표면(18) 상에서 터치 입력(16)을 수신하도록 구성될 수 있는 터치 감지형 디스플레이(14)를 이용할 수 있다. 그래픽 사용자 인터페이스(19)는 사용자가 컴퓨팅 장치(12)에 입력을 제공하는 것을 돕는 다양한 특징들(features)을 제공하도록, 및/또는 사용자에게 피드백 및 정보를 제공하도록 구성될 수 있다. 그래픽 사용자 인터페이스(19)는 GUI 모듈(21)을 통해 소프트웨어 모듈들과 연결될 수 있다.
터치 입력(16)은 여기에서 개략적으로 타원인 형상으로서 점선으로 나타나 있다. 제스처 인식 모듈(20)은 터치 감지형 디스플레이(14)에 연결될 수 있고, 터치 입력(16)을 수신하고, 터치 입력(16)에 기초하여, 그리고 복수의 미리 정의된 자유형(freeform) 제스처로부터 선택함으로써, 인식된 제스처(23)(역시, 개략적으로 타원인 형상으로서 점선으로 나타나 있음)를 결정하도록 구성될 수 있다. 제스처 인식 모듈(20)은 터치 입력 인식 모듈(22)의 일부로서 포함될 수 있다. 개인 정보 관리(PIM) 모듈(24)은 제스처 인식 모듈(20)에 연결될 수 있다. PIM 모듈(24)은 PIM 데이터베이스(26)를 포함할 수 있다. PIM 모듈(24)은 터치 감지형 디스플레이(14) 상에 보여진 선택된 항목(28)을 PIM 데이터베이스(26)의 복수의 상이한 PIM 스키마(30) 중 선택된 PIM 스키마에 적용하도록 구성될 수 있다. PIM 스키마들(30) 중의 선택된 PIM 스키마는 인식된 제스처(23)에 기초하여 선택될 수 있다. 일부 경우들에서, 선택된 항목(28)이 적용될 때, 그 선택된 항목(28)은 또한 대용량 저장소(36)에도 저장될 수 있다. 복수의 PIM 스키마(30)는 캘린더 항목(44), 작업 항목(46) 및 연락처 항목(48) 중 하나 이상을 포함할 수 있다. 다른 PIM 스키마들(50)이 포함될 수 있다. 선택된 항목(28)이 사용자에 의해 만들어진 마킹(markings)을 포함할 때와 같은 일부 경우들에서, 터치 입력(16)은 일반적으로 선택된 항목(28) 및 입력 장치(17)로 이루어진 제스처 둘다를 포함하는 것으로 고려될 수 있다. 이러한 도시된 예시에서, 터치 입력(16)은 선택된 항목(28)이 존재하게 된 이후에 이루어진 것으로서 고려될 수 있다. 또한, 선택된 항목(28)은 다양한 형태의 입력으로부터 온 것일 수 있음을 이해할 것이다.
캐릭터 인식 모듈(52)은 인식된 제스처(23)의 인식 시에, 터치 입력(16)과 함께 포함될 수 있는 영숫자 캐릭터들을 인식하도록 구성될 수 있다. 캐릭터 인식 모듈(52)은 또한 PIM 모듈(24)이 영숫자 캐릭터들을 검색가능한 항목으로서 PIM 데이터베이스(26)에 저장하게 하도록 구성될 수 있다. 캐릭터 인식 모듈(52)은 또한 영숫자 캐릭터들이 대용량 저장소(36) 내에 저장되게 하도록 구성될 수 있다.
일부 예시들에서, 터치 감지형 디스플레이(14)는 선택된 항목(28)을 터치 감지형 디스플레이(14) 상에서 저널 페이지 그래픽(31) 내에 디스플레이하도록 구성될 수 있다. 언급된 바와 같이, 선택된 항목(28)은 입력 장치(17)로 이루어진 이전의 터치 입력(16)의 결과일 수 있다. 펜, 스타일러스, 손가락 또는 그와 유사한 것과 같은 다양한 물체들이 입력 장치로서 기능할 수 있다. 입력은 예를 들어 펜 또는 연필로 종이에 더해질 수 있는 것은 무엇이든지 될 수 있고, 또는 그러한 것을 포함할 수 있다. 한정적인 것은 아니지만, 예를 들어, 그림, 낙서, 노트, 주소, 숫자들 및 그와 유사한 것의 마킹이 있다. 또한, 사진 또는 디지털 문서 및 그와 유사한 것과 같은 다른 항목들이 포함될 수 있다. 한정적인 것은 아니지만, 다른 항목들은 컴퓨팅 장치(12)에 입력되거나, 컴퓨팅 장치(12)에 의해 생성되거나, 대용량 저장소(36)로부터 검색된 것일 수 있다.
컴퓨팅 장치(12)는 선택된 항목(28)을, 마크업된 저널 페이지 그래픽(marked-up journal page graphic)으로서의 선택된 저널 페이지 그래픽(31)의 일부로서 디스플레이하도록 구성된 잉크 렌더링 모듈(32)을 포함할 수 있다. 또한, 잉크 렌더링 모듈(32)은 라인 종류, 라인 폭 및 라인 색상과 같은 선택가능한 선택안들을 사용자에게 제공할 수 있다.
데이터 보유 서브시스템은 터치 감지형 디스플레이(14)와 동작 가능하게 연결될 수 있고, 복수의 저널 페이지 그래픽을 보유하도록 구성될 수 있다. 복수의 저널 페이지 그래픽은 이하에 논의되는 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지 그래픽들(a plurality of hierarchically flat sequentially arranged journal page graphics)(70)일 수 있다. 아날로그 입력 모듈(34)은 데이터 보유 서브시스템 내에 포함될 수 있고, 마크업된 저널 페이지 그래픽이 대용량 저장소(36) 내에 저장되게 하도록 구성될 수 있다. 페이지 모듈(33)은 추가의 저널 페이지 그래픽(31)을 제공하고/거나 저널 페이지 그래픽(31)의 순서를 정할 수 있다.
컴퓨팅 장치(12)는 또한 터치 감지형 디스플레이(14) 및 데이터 보유 서브시스템에 동작 가능하게 연결된 에이징 모듈(aging module)(40)을 포함할 수 있다. 에이징 모듈은 종이 물성학(paper physics)이라고 칭해질 수 있는 것을 제공할 수 있다. 에이징 모듈(40)은 저널 페이지 그래픽(30) 각각을 종이 저널로부터의 종이 페이지로서 터치 감지형 디스플레이(14) 상에 디스플레이하도록 구성될 수 있다. 에이징 모듈(40)은 저널 페이지 그래픽(31)에 대한 에이징 특성들의 디스플레이를 선택적으로 제어하도록 구성될 수 있다. 에이징 특성들은 가변적으로 적용될 수 있다. 각 저널 페이지의 에이징 특성들은 그러한 저널 페이지의 에이지 및 그러한 저널 페이지에 연관된 사용량 중 적어도 하나의 기초할 수 있다. 일부 예시들에서, 선택된 저널 페이지 그래픽(31)은 선택된 저널 페이지 그래픽(31)의 생성으로부터의 경과 시간, 또는 저널 페이지 그래픽이 최초의 터치 입력(16)을 수신한 이후의 누적 지속시간 중 하나 또는 둘다에 따라 외관(appearance)을 변경하도록 구성될 수 있다. 클럭/캘린더 모듈(42)은 지속시간의 척도를 제공할 수 있다.
또한, 아키텍처(10)는 다양한 다른 애플리케이션들(50)을 실행하도록 구성될 수 있다. 다른 애플리케이션(50)은 다른 미리 정의된 제스처들의 인식 시에 실행될 수 있다. 다양한 다른 애플리케이션들(50)을 실행하기 위해, 또는 터치 감지형 디스플레이(14) 상의 하나 이상의 선택된 항목(28)을 설명된 것과 같은 복수의 상이한 PIM 스키마(30) 중 선택된 PIM 스키마에 적용하기 위해 제스처 인식을 이용하는 것에 더하여, 또는 그에 대한 대안으로서, 다양한 커맨드 버튼들(52)이 이용될 수 있다. 또한, 다양한 다른 애플리케이션들(50) 및/또는 상이한 PIM 스키마들(30)의 적용은 검색 모듈(54)을 이용할 수 있다. 검색 모듈(54)은 예를 들어 인터넷과 같은 컴퓨터 네트워크(56)에 연결되어 있거나 그에 연결가능한 것일 수 있다.
또한, 아키텍처(10)는 GPS 시스템(60)과 연결되어 있거나 그와 연결가능한 것일 수 있는 위치 모듈(58)을 포함할 수 있다. 특정한 터치 입력(16)이 이루어진 때 사용자가 위치되어 있는 특정 위치는 PIM 데이터베이스(26) 및/또는 대용량 저장소(36)에 저장될 수 있다. 그 다음, 입력이 이루어졌을 때의 컴퓨팅 장치(12)의 위치는 나중에, PIM 스키마(30) 내에 포함된 항목을 리콜하기 위해 이용될 수 있는 다양한 검색 기준의 일부로서 포함될 수 있다. 추가적으로 또는 대안적으로, PIM 스키마(30)의 일부이든 아니든 간에 임의의 특정 터치 입력(16)이 이루어진 곳의 위치는 특정한 저널 페이지 그래픽(31)의 위치를 찾기 위해 이용될 수 있다. 예를 들어, 사용자가 입력이 이루어졌을 때 자신이 있었던 곳(예를 들어, 여행중, 회의에서)은 기억할 수 있지만 특정 저널 페이지는 찾지 못하는 경우에는 이것이 유용할 수 있다. 이것은 기록을 했을 때 또는 무언가를 스케치했을 때 자신이 어디에 있었는지에 관한 사용자의 기억에 기초하여 큰 종이 저널 내의 특정한 한 페이지를 찾는 데에 있어서 사용자를 돕는 것과 유사할 수 있는데, 그렇지 않다면 사용자는 그 페이지를 찾기 위해 종이 저널의 대부분 또는 전부를 넘겨보아야 할 것이다. 특정한 저널 페이지를 찾기 위해 지리적 단서(geographic cue)를 이용하는 것에 더하여, 또는 그에 대한 대안으로서, 여기에 설명된 컴퓨팅 장치(12)의 사용자는 저널 페이지 그래픽(31)의 에이지 및/또는 개괄적 외관과 같은 다양한 다른 감각적 단서들(sensory cues)을 이용할 수 있다. 여기에 설명된 아키텍처(10), 컴퓨팅 장치(12) 및 방법들은 이러한 감각적 단서들을 제공하도록 구성될 수 있다.
도 2는 입력 장치(17)로부터의 아날로그 입력 및/또는 디지털 입력을 수신하고 저장하기 위해 이용될 수 있는 컴퓨팅 장치(12)의 개략도이다. 도 3은 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지(70)를 도시한 개략도이다. 컴퓨팅 장치(12)는 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지(70)를 터치 감지형 디스플레이(14) 상에 선택적으로 디스플레이하도록 구성된 사용자 인터페이스(19)를 포함할 수 있다. 하나의 저널 페이지 그래픽(31)이 도 2에 도시되어 있다. 사용자 인터페이스(19)는 터치 감지형 디스플레이(14)에 적용된 터치 입력(16)에 응답하여, 저널 페이지 그래픽들(31) 중 선택된 저널 페이지 그래픽 상의 선택된 항목(28)을 복수의 PIM 스키마(30) 중 선택된 PIM 스키마에 적용하도록 구성될 수 있다. 이것은 입력 장치(17)로 이루어진 미리 정의된 자유형 제스처를 인식된 제스처(23)로서 인식하면 발생할 수 있다. 컴퓨팅 장치(12)는 터치 감지형 디스플레이(14)에 적용된 각 터치 입력(16)에 대한 에이징 외관 특성을 제어하도록 구성된 에이징 모듈(40)(도 1)을 포함할 수 있다. 저널 페이지 그래픽들(31)의 각각은 종이 저널로부터의 종이 페이지로서 터치 감지형 디스플레이(14) 상에 나타나도록 구성될 수 있다. 에이징 모듈(40)은 선택된 저널 페이지 그래픽들(31)을, 미리 결정된 시간 조건들 및/또는 미리 결정된 사용 조건들에 따라 미리 결정된 그래픽 수정들(72)과 함께 추후에 1회 이상 다시 디스플레이하도록 구성될 수 있다. 미리 결정된 그래픽 수정들(72)은 저널링 경험을 증대시키기 위한 감각적 단서들로서, 그리고 논의된 바와 같이, 리콜에 대한 도움으로서 포함될 수 있다.
선택된 저널 페이지 그래픽(31)은 선택된 저널 페이지 그래픽의 생성으로부터의 경과 시간, 또는 저널 페이지 그래픽이 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지(70) 중에서 선택된 누적 지속시간 중 하나 또는 둘 다에 따라, 외관을 변경하도록, 즉 미리 결정된 그래픽 수정들(72)을 추가하도록 구성될 수 있다. 미리 결정된 시간 조건들은 저널 페이지 그래픽들 중 선택된 저널 페이지 그래픽의 최초 사용으로부터의 지속시간을 포함할 수 있고, 미리 결정된 사용 조건들은 저널 페이지 그래픽들 중 선택된 저널 페이지 그래픽에 의해 발생된 사용량을 포함할 수 있다.
사용 모듈(40)은 선택된 저널 페이지 그래픽(31)으로서의 누적 지속기간(cumulative duration), 및/또는 저널 페이지 그래픽이 저널 페이지 그래픽들(31) 중 선택된 저널 페이지 그래픽인 동안 컴퓨팅 장치에 행해진 아날로그 입력의 누적량에 따라, 누렇게 변하는 것(yellowing)과 같은 변색, 번짐(smudges), 구겨짐(crinkles), 주름(wrinkles), 찢어짐(rips), 번짐, 더러운 자국(soil marks) 및 접힘(folds) 중 하나 이상의 외관을 선택된 저널 페이지 그래픽(31)에 추가하도록 구성될 수 있다.
일부 경우들에서, 미리 정의된 자유형 제스처(23)를 인식한 때, 사용자 인터페이스(19)는 복수의 오버레이 네비게이션 툴 중 하나가 터치 감지형 디스플레이(14) 상에 디스플레이되어, 사용자가 그것의 존재(occurrence)를 확인함으로써, 컴퓨팅 장치(12)의 가능한 액션 및 반응을 네비게이트하는 것을 돕게 할 수 있다. 제스처 인식 모듈(20)은, 인식된 제스처(23)의 결정 시에, 제스처 인식 모듈(20)이 터치 감지형 디스플레이(14)로 하여금 선택된 항목을 복수의 PIM 스키마 중 선택된 PIM 스키마에 적용한 것의 확인(80)을 디스플레이하게 할 수 있도록 구성될 수 있다. 미리 선택된 시간(예를 들어, 1초) 이후에, 터치 감지형 디스플레이(14) 상에서 볼 수 있던 것 중에서 확인(80)은 사라질 수 있다. 확인(80)은 예를 들어 PIM 스키마에 대응하는 레이블을 구비하는 박스와 같은 다양한 형태를 취할 수 있다. 네비게이션 화살표(82)도 확인(80)과 함께 포함될 수 있다.
일부 경우들에서, 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지들(70)이 앞으로 가지거나 뒤로 가지거나, 또는 다르게 전방 및 후방으로 스크롤될 수 있다. 일부 경우들에서, 이는 위치(92)에서 화살표(90)으로 도시된 바와 같이, 사용자의 손가락 또는 다른 유형의 입력 장치를 위쪽 방향 또는 아래쪽 방향으로 움직임으로써 달성될 수 있다. 다른 활성화 기법들이 이용될 수 있다. 활성화 기법들은 페이지 스크롤 제스처라고 칭해질 수 있다.
도 2는 컴퓨팅 장치(12)의 우측(94) 상의 아날로그 입력 영역, 및 좌측(96) 상의 다양한 다른 특징들을 도시하고 있다. 이것은 예시적인 구성이다. 일부 경우들에서, 양측이 아날로그 입력을 위해 구성될 수 있다. 일부 경우들에서, 좌측(96)이 아날로그 입력을 위해 구성되고, 우측(94)은 다른 특징들을 디스플레이하도록 구성될 수 있다. 좌측(96)의 아날로그 입력은 왼손잡이인 사람이 선호하는 구성일 수 있고, 그 반대도 성립한다. 컴퓨팅 장치(12)는 좌측(96)과 우측(94) 사이에 스파인(spine)(98)을 포함할 수 있다. 컴퓨팅 장치(12)는 종이 저널과 마찬가지로 스파인에서 접힐 수 있는 것일 수도 있다. 예시적인 커맨드 버튼(52)이 스파인 상에 도시되어 있다.
도 2에 도시된 저널 구조의 좌측(96) 상의 다양한 다른 특징들은 여기에 상세하게 논의된 것들 이외의 다양한 다른 기능들을 가능하게 할 수 있다. 다양한 특징들은 예를 들어 선택가능한 아이콘들일 수 있고, 선택가능하게 보이게 될 수 있고, 스크롤가능할 수 있다. 도 4는 예시적인 아키텍처 구조(100)의 개략도이다. 아키텍처 구조(100)는 다양한 PIM 스키마(30), 다양한 다른 애플리케이션들(50) 또는 다른 스키마들을 가능하게 하기 위해 선택될 수 있는 아이콘들을 도시하고 있다. 또한, 각각 다양한 다수의 디스플레이가능한 저널 페이지 그래픽(31)을 포함하는 다양한 노트들은, 대응하는 아이콘들을 선택함으로써 선택될 수 있고, 이에 의해 그 선택된 공책은 터치 감지형 디스플레이(14) 상에서 보여지게 될 수 있다.
도 5는 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법(200)의 실시예를 도시한 흐름도이다. 방법(200)은 위에서 설명된 시스템들 및 방법들을 이용하여, 또는 다른 적합한 하드웨어 및 소프트웨어를 이용하여 구현될 수 있다. 방법(200)은 단계(202)에서, 터치 감지형 디스플레이에서 터치 입력을 수신하는 것을 포함할 수 있다. 터치 입력은 컴퓨팅 장치의 터치 감지형 디스플레이의 표면 상에 만들어진 입력 장치로부터 올 수 있다. 또한, 단계(204)에서, 방법은 표면 상에서 행해진 미리 결정된 제스처를, 터치 입력을 검색가능한 데이터베이스에 저장하기 위한 요청으로서 인식하는 것을 포함할 수 있다. 이것은 터치 입력에 기초하여, 그리고 복수의 상이한 미리 정의된 제스처로부터 선택함으로써, 터치 입력에 대응하는 인식된 제스처를 결정하는 것을 포함할 수 있다. 방법은 터치 감지형 디스플레이 상에 보여진 선택된 항목을 복수의 PIM 스키마 중 선택된 PIM 스키마에 적용하는 것을 포함할 수 있는데, PIM 스키마들 중 선택된 PIM 스키마는 인식된 제스처에 기초하여 선택될 수 있다. 또한, 단계(206)에서, 방법은 적어도, 미리 결정된 제스처를 인식하면, 터치 입력으로 만들어진 영숫자 캐릭터들을 인식하는 것을 포함할 수 있다. 또한, 단계(208)에서, 방법은 영숫자 캐릭터들을 작업 항목, 캘린더 항목 및 연락처 항목 중 하나 이상으로서 검색가능한 데이터베이스에 저장하는 것을 포함할 수 있다. 또한, 단계(210)에서, 방법은 저널 페이지 그래픽을, 종이 저널로부터의 종이 저널 페이지로서 보이도록 인터페이스 표면 상에 디스플레이하는 것을 포함할 수 있다. 또한, 단계(212)에서, 방법은 펜 스트로크 입력을 저널 페이지 그래픽 상의 시뮬레이트된 쓰기 도구 마킹으로서 저장하는 것을 포함할 수 있다. 또한, 단계(206)에서, 방법은 미리 선택된 에이징 및/또는 사용 기준에 따라 저널 페이지 그래픽의 외관을 수정하는 것을 더 포함할 수 있다.
도 6은 도 5에 도시된 방법(200)의 예시적인 변형을 도시한 흐름도이다. 방법(200)은 단계(216)에서, 인터페이스 표면 상의 입력 장치로부터 페이지 스크롤 제스처를 수신할 때, 추가의 저널 페이지 그래픽들을 선택적으로 디스플레이하는 것을 더 포함할 수 있다. 일부 경우들에서, 추가의 저널 페이지 그래픽들은 도 4에 도시된 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지(70)로부터의 것이다.
도 7은 도 5에 도시된 방법(200)의 다른 예시적인 변형을 도시한 흐름도이다. 외관을 수정하는 것(214, 도 5)은, 단계(218)에서, 저널 페이지 그래픽에 컬러를 더하여, 저널 페이지 그래픽이 최초의 터치 입력을 수신한 때로부터의 경과 시간에 따른 누렇게 변한 외관을 저널 페이지 그래픽에 제공하는 것을 포함할 수 있다.
도 8은 도 5에 도시된 방법(200)의 다른 예시적인 변형을 도시한 흐름도이다. 외관을 수정하는 것(214, 도 5)은 단계(220)에서, 저널 그래픽이 디스플레이된 누적 지속시간 및/또는 터치 감지형 디스플레이의 표면 상에서 수신된 터치 입력들의 누적 수에 따라, 구겨짐, 번짐, 주름, 찢어짐 및 오손(soiling) 중 하나 이상으로서 나타나는 그래픽 특징들을 저널 페이지 그래픽에 추가하는 것을 포함할 수 있다.
여기에 설명된 컴퓨팅 장치들은 여기에 설명된 프로그램들을 실행하도록 구성된 어떠한 적합한 컴퓨팅 장치라도 될 수 있음을 알 것이다. 예를 들어, 컴퓨팅 장치들은 메인프레임 컴퓨터, 개인용 컴퓨터, 랩탑 컴퓨터, PDA(portable data assistant), 컴퓨터 가능형 무선 전화기(computer-enabled wireless telephone), 네트워크화된 컴퓨팅 장치, 증강된 모바일 전화기 장치, 또는 다른 적합한 컴퓨팅 장치일 수 있으며, 인터넷과 같은 컴퓨터 네트워크를 통해 서로 접속될 수 있다. 이러한 컴퓨팅 장치들은 전형적으로 프로세서, 및 관련 휘발성 및 비휘발성 메모리를 포함하며, 휘발성 메모리의 부분들 및 프로세서를 이용하여 비휘발성 메모리 내에 저장된 프로그램들을 실행하도록 구성된다. 여기에서 이용될 때, "프로그램"이라는 용어는 여기에 설명된 하나 이상의 컴퓨팅 장치에 의해 실행되거나 이용될 수 있는 소프트웨어 또는 펌웨어 컴포넌트를 칭하며, 실행가능한 파일들, 데이터 파일들, 라이브러리들, 드라이버들, 스크립트들, 데이터베이스 레코드들 등의 각각 또는 그룹을 포괄하도록 의도된다. 컴퓨팅 장치에 의한 실행 시에 컴퓨팅 장치로 하여금 위에 설명된 방법들을 실행하게 하고 위에 설명된 시스템들의 동작을 유발하는 프로그램 명령어들이 저장되어 있는 컴퓨터 판독가능한 매체가 제공될 수 있음을 알 것이다.
본 발명의 범위는 앞의 설명에 의해서가 아니라 첨부된 청구항들에 의해 정의되므로, 여기에서의 실시예들은 제한적인 것이 아니라 예시적인 것이며, 따라서, 청구항들의 경계 및 한계 내에 드는 모든 변경들, 또는 그러한 경계 및 한계의 균등물은 청구항들에 의해 포괄되는 것으로 의도됨을 이해해야 한다.

Claims (19)

  1. 터치 감지형 컴퓨팅 장치에 있어서,
    터치 입력(16)을 수신하도록 구성된 터치 감지형 디스플레이;
    마킹(marking)이 상기 터치 감지형 디스플레이를 통해 디스플레이되도록 상기 마킹의 형태로 터치 입력을 수신하도록 구성된 터치 입력 인식 모듈;
    상기 터치 입력으로부터 복수의 미리 정의된 제스처들 중 인식되는 제스처를 인식하도록 구성된 제스처 인식 모듈;
    상기 인식되는 제스처의 인식 시에 상기 마킹으로부터 영숫자(alphanumeric) 캐릭터를 인식하도록 구성된 캐릭터 인식 모듈; 및
    개인 정보 관리(personal information management; PIM) 데이터베이스를 포함하는 PIM 모듈을
    포함하고,
    상기 PIM 모듈은 상기 PIM 데이터베이스의 복수의 상이한 PIM 스키마들 중 선택된 PIM 스키마에 상기 마킹을 적용하고, 상기 영숫자 캐릭터를 상기 복수의 상이한 PIM 스키마들 중 상기 선택된 스키마와 연관된 검색가능한 항목으로서 상기 PIM 데이터베이스에 저장하도록 구성되며, 상기 복수의 상이한 PIM 스키마들 중 상기 선택된 PIM 스키마는 상기 인식되는 제스처에 기초해서 선택되는 것인, 터치 감지형 컴퓨팅 장치.
  2. 제1항에 있어서,
    상기 터치 감지형 디스플레이에 동작 가능하게 연결되고, 복수의 계층적으로 평평(flat)하고 순차적으로 배열된 저널 페이지들을 보유하도록 구성된 데이터 보유 서브시스템(data-holding subsystem)을 더 포함하고,
    상기 터치 감지형 디스플레이는 상기 저널 페이지들을 선택적으로 디스플레이하도록 구성되며, 상기 마킹은 상기 복수의 저널 페이지들 중 하나의 저널 페이지에 그래픽적으로(graphically) 배치(dispose)되는 것인, 터치 감지형 컴퓨팅 장치.
  3. 제2항에 있어서,
    상기 터치 감지형 디스플레이 및 상기 데이터 보유 서브시스템에 동작 가능하게 연결되고, 상기 복수의 저널 페이지들에 대한 에이징 특성들(aging characteristics)의 디스플레이를 선택적으로 제어하도록 구성된 에이징 모듈을 더 포함하는, 터치 감지형 컴퓨팅 장치.
  4. 제3항에 있어서,
    상기 에이징 특성들은 상기 복수의 저널 페이지들에 가변적으로 적용되고, 누렇게 변함(yellowing), 번짐(smudges), 구겨짐(crinkles), 주름(wrinkles), 찢어짐(rips), 접힘(folds) 및 더러운 자국(soil marks)으로 이루어진 그룹으로부터 선택되는 것인, 터치 감지형 컴퓨팅 장치.
  5. 제3항에 있어서,
    상기 복수의 저널 페이지들 중 정해진 저널 페이지에 대하여, 상기 에이징 모듈은, 상기 정해진 저널 페이지의 에이지(age) 및 상기 정해진 저널 페이지와 연관된 사용량 중 적어도 하나에 기초하여 상기 정해진 저널 페이지의 에이징 특성들을 제어하도록 구성되는 것인, 터치 감지형 컴퓨팅 장치.
  6. 제1항에 있어서,
    선택된 저널 페이지 그래픽의 일부인 상기 마킹을 마크업(mark-up)된 저널 페이지 그래픽으로서 디스플레이하도록 구성된 잉크 렌더링 모듈, 및 상기 마크업된 저널 페이지 그래픽이 대용량 저장소 내에 저장되게 하도록 구성된 아날로그 입력 모듈을 더 포함하는, 터치 감지형 컴퓨팅 장치.
  7. 제1항에 있어서,
    상기 제스처 인식 모듈은, 상기 인식된 제스처의 결정 시에, 상기 제스처 인식 모듈이 상기 터치 감지형 디스플레이로 하여금 상기 마킹을 상기 복수의 PIM 스키마들 중 상기 선택된 PIM 스키마에 적용한 것의 확인(verification)을 디스플레이하게 하도록 구성되는 것인, 터치 감지형 컴퓨팅 장치.
  8. 제1항에 있어서,
    상기 복수의 PIM 스키마들은 캘린더 항목, 작업 항목 및 연락처 항목 중 하나 이상을 포함하는 것인, 터치 감지형 컴퓨팅 장치.
  9. 제1항에 있어서,
    사용자 인터페이스는 상기 마킹을 상기 복수의 PIM 스키마들 중 상기 선택된 스키마에 적용한 것의 확인을 디스플레이하도록 구성되는 것인, 터치 감지형 컴퓨팅 장치.
  10. 터치 감지형 컴퓨팅 장치에 있어서,
    복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지 그래픽들을 선택적으로 디스플레이하도록 구성된 터치 감지형 디스플레이;
    마킹이 상기 터치 감지형 디스플레이를 통해 상기 복수의 저널 페이지 그래픽들 중 선택된 저널 페이지 그래픽 상에 그래픽적으로 배치되도록, 상기 마킹의 형태로 터치 입력을 수신하도록 구성된 터치 입력 인식 모듈;
    상기 터치 입력으로부터 복수의 미리 정의된 제스처들 중 인식되는 제스처를 인식하도록 구성된 제스처 인식 모듈;
    상기 인식되는 제스처의 인식에 응답해서 상기 복수의 저널 페이지 그래픽들 중 상기 선택된 저널 페이지 그래픽으로부터의 상기 마킹을 복수의 PIM 스키마들 중 선택된 PIM 스키마에 적용하도록 구성된 사용자 인터페이스; 및
    미리 결정된 시간 조건 및 미리 결정된 사용 조건에 따라, 상기 저널 페이지 그래픽들 각각을 위한 에이징 외관 특성을 제어하도록 구성된 에이징 모듈을
    포함하는, 터치 감지형 컴퓨팅 장치.
  11. 제10항에 있어서,
    상기 마킹 내의 영숫자 캐릭터를 인식하고, 상기 영숫자 캐릭터를 대용량 저장소에 저장하도록 구성된 캐릭터 인식 모듈을 더 포함하는, 터치 감지형 컴퓨팅 장치.
  12. 제10항에 있어서,
    상기 복수의 PIM 스키마는 캘린더 스키마, 작업 스키마 및 연락처 스키마를 포함하는 것인, 터치 감지형 컴퓨팅 장치.
  13. 제10항에 있어서,
    상기 복수의 저널 페이지 그래픽들 중 상기 선택된 저널 페이지 그래픽에 대하여, 상기 미리 결정된 시간 조건은 상기 저널 페이지 그래픽들 중 상기 선택된 저널 페이지 그래픽의 최초 사용으로부터의 지속시간(duration)을 포함하고, 상기 미리 결정된 사용 조건은 상기 저널 페이지 그래픽들 중 상기 선택된 저널 페이지 그래픽에 의해 발생된 사용량을 포함하는 것인, 터치 감지형 컴퓨팅 장치.
  14. 제10항에 있어서,
    상기 에이징 외관 특성은 누렇게 변함, 번짐, 구겨짐, 주름, 찢어짐, 접힘 및 더러운 자국으로 이루어진 그룹으로부터 선택된 그래픽 저널 페이지 묘사(depiction)를 포함하는 것인, 터치 감지형 컴퓨팅 장치.
  15. 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법에 있어서,
    터치 감지형 디스플레이에서 마킹의 형태로 터치 입력을 수신하는 단계;
    상기 터치 입력으로부터 복수의 미리 정의된 제스처들 중에서 인식되는 제스처를 인식하는 단계; 및
    상기 마킹을 복수의 PIM 스키마들 중 선택된 PIM 스키마에 적용하는 단계를
    포함하고,
    상기 복수의 PIM 스키마들 중 상기 선택된 PIM 스키마는 상기 인식되는 제스처에 기초해서 선택되는 것인, 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법.
  16. 제15항에 있어서,
    저널 페이지 그래픽을, 종이 저널로부터의 종이 저널 페이지로서 보이도록 상기 터치 감지형 디스플레이 상에 저널 페이지 그래픽을 디스플레이하는 단계;
    상기 마킹을 상기 저널 페이지 그래픽 상의 시뮬레이트된 쓰기 도구(simulated writing implement) 마킹으로서 저장하는 단계; 및
    미리 선택된 에이징 및 사용 기준 중 적어도 하나에 따라 상기 저널 페이지 그래픽의 외관을 수정하는 단계를
    더 포함하는, 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법.
  17. 제16항에 있어서,
    인터페이스 표면 상의 입력 장치로부터 스크롤 페이지 제스처를 수신할 때, 추가적인 저널 페이지 그래픽을 선택적으로 디스플레이하는 단계를 더 포함하는, 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법.
  18. 제17항에 있어서,
    상기 추가적인 저널 페이지 그래픽은 복수의 계층적으로 평평하고 순차적으로 배열된 저널 페이지들로부터 유래한 것인, 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법.
  19. 제16항에 있어서,
    상기 외관을 수정하는 단계는, 상기 저널 페이지 그래픽이 디스플레이된 누적 지속시간 및 상기 디스플레이의 표면 상에서 수신된 터치 입력의 누적 수 중 적어도 하나에 따라, 구겨짐, 번짐, 주름, 찢어짐 및 오손(soiling) 중 하나 이상으로서 나타나는 그래픽 특징을 상기 저널 페이지 그래픽에 추가하는 단계를 포함하는 것인, 컴퓨팅 장치 내에서 터치 입력을 수신하고 처리하기 위한 방법.
KR1020117016518A 2009-01-19 2009-12-22 터치 감지형 컴퓨팅 장치 및 방법 KR101663849B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/356,045 2009-01-19
US12/356,045 US8319736B2 (en) 2009-01-19 2009-01-19 Touch sensitive computing device and method
PCT/US2009/069321 WO2010083012A2 (en) 2009-01-19 2009-12-22 Touch sensitive computing device and method

Publications (2)

Publication Number Publication Date
KR20110113616A KR20110113616A (ko) 2011-10-17
KR101663849B1 true KR101663849B1 (ko) 2016-10-07

Family

ID=42336548

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117016518A KR101663849B1 (ko) 2009-01-19 2009-12-22 터치 감지형 컴퓨팅 장치 및 방법

Country Status (7)

Country Link
US (1) US8319736B2 (ko)
EP (1) EP2380075B1 (ko)
JP (1) JP5377665B2 (ko)
KR (1) KR101663849B1 (ko)
CN (1) CN102282533B (ko)
RU (1) RU2011129799A (ko)
WO (1) WO2010083012A2 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US20080168478A1 (en) 2007-01-07 2008-07-10 Andrew Platzer Application Programming Interfaces for Scrolling
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US20140160030A1 (en) * 2009-02-09 2014-06-12 Cypress Semiconductor Corporation Sensor system and method for mapping and creating gestures
US9424578B2 (en) 2009-02-24 2016-08-23 Ebay Inc. System and method to provide gesture functions at a device
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US8566045B2 (en) * 2009-03-16 2013-10-22 Apple Inc. Event recognition
KR20120053430A (ko) * 2010-11-17 2012-05-25 삼성전자주식회사 휴대단말기의 이미지 효과 제공 장치 및 방법
US20120159373A1 (en) * 2010-12-15 2012-06-21 Verizon Patent And Licensing, Inc. System for and method of generating dog ear bookmarks on a touch screen device
JP2012216148A (ja) * 2011-04-01 2012-11-08 Sharp Corp 表示装置、表示方法、コンピュータプログラム及び記録媒体
KR101802759B1 (ko) * 2011-05-30 2017-11-29 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
US9720574B2 (en) 2012-03-19 2017-08-01 Microsoft Technology Licensing, Llc Personal notes on a calendar item
US10032135B2 (en) * 2012-03-19 2018-07-24 Microsoft Technology Licensing, Llc Modern calendar system including free form input electronic calendar surface
US9508056B2 (en) 2012-03-19 2016-11-29 Microsoft Technology Licensing, Llc Electronic note taking features including blank note triggers
CN103218075B (zh) * 2013-03-26 2016-12-28 深圳市金立通信设备有限公司 一种触控屏幕的触控监测方法及终端
JP6098295B2 (ja) * 2013-03-28 2017-03-22 富士通株式会社 表示プログラム、表示装置および表示方法
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
KR102186819B1 (ko) * 2013-08-27 2020-12-07 삼성전자주식회사 노트 기능을 지원하는 모바일 단말기 및 그의 제어 방법
US10942206B2 (en) * 2014-08-04 2021-03-09 Nokia Shanghai Bell Co., Ltd. Variable passive intermodulation load
US10372398B2 (en) 2017-04-04 2019-08-06 Microsoft Technology Licensing, Llc Foldable display device with interactable user interface surface on the external shell
US11182542B2 (en) * 2018-10-29 2021-11-23 Microsoft Technology Licensing, Llc Exposing annotations in a document

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020114516A1 (en) * 2000-12-12 2002-08-22 Eran Aharonson Handwriting data input device with multiple character sets

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69428675T2 (de) 1993-12-30 2002-05-08 Xerox Corp Apparat und Verfahren zur Unterstützung einer impliziten Strukturation von Freiform-Listen, Übersichten, Texten, Tabellen und Diagrammen in einem auf Handzeichen basierenden Eingabesystem und Editiersystem
US6064384A (en) * 1996-08-26 2000-05-16 E-Brook Systems Pte Ltd Computer user interface system and method having book image features
JPH10247988A (ja) * 1997-03-06 1998-09-14 Sharp Corp 通信機能付き情報処理装置
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6952803B1 (en) 1998-12-29 2005-10-04 Xerox Corporation Method and system for transcribing and editing using a structured freeform editor
JP2000222522A (ja) * 1999-02-04 2000-08-11 Matsushita Electric Ind Co Ltd 認識処理装置
US6335725B1 (en) * 1999-07-14 2002-01-01 Hewlett-Packard Company Method of partitioning a touch screen for data input
US6459442B1 (en) 1999-09-10 2002-10-01 Xerox Corporation System for applying application behaviors to freeform data
US6859909B1 (en) 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
GB2380583A (en) * 2001-10-04 2003-04-09 Ilam Samson Touch pad/screen for electronic equipment
US20030131059A1 (en) 2002-01-08 2003-07-10 International Business Machines Corporation Method, system, and program for providing information on scheduled events to wireless devices
US7137077B2 (en) 2002-07-30 2006-11-14 Microsoft Corporation Freeform encounter selection tool
US20040119762A1 (en) 2002-12-24 2004-06-24 Fuji Xerox Co., Ltd. Systems and methods for freeform pasting
US20040186729A1 (en) * 2003-03-11 2004-09-23 Samsung Electronics Co., Ltd. Apparatus for and method of inputting Korean vowels
US7262785B2 (en) 2003-08-21 2007-08-28 Microsoft Corporation Ink editing architecture
US7284192B2 (en) 2004-06-24 2007-10-16 Avaya Technology Corp. Architecture for ink annotations on web documents
JP3926353B2 (ja) * 2004-07-30 2007-06-06 東芝テック株式会社 商品販売データ処理装置
JP4137043B2 (ja) * 2004-10-29 2008-08-20 株式会社コナミデジタルエンタテインメント ゲームプログラム、ゲーム装置及びゲーム制御方法
JP2006260065A (ja) * 2005-03-16 2006-09-28 Fuji Xerox Co Ltd 文書閲覧装置及び文書閲覧プログラム
US8018431B1 (en) * 2006-03-29 2011-09-13 Amazon Technologies, Inc. Page turner for handheld electronic book reader device
US7864163B2 (en) * 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
KR100861353B1 (ko) 2006-09-11 2008-10-02 엘지전자 주식회사 복합기능을 구비한 네비게이션 시스템 및 그 동작방법
KR101335771B1 (ko) 2007-01-19 2013-12-02 엘지전자 주식회사 터치 스크린을 구비한 전자 기기 및 이를 이용한 정보 입력방법
US7475487B1 (en) * 2008-02-14 2009-01-13 Parchmint, Inc. Height recording album
KR101509245B1 (ko) * 2008-07-31 2015-04-08 삼성전자주식회사 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법
US20100162165A1 (en) * 2008-12-22 2010-06-24 Apple Inc. User Interface Tools

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020114516A1 (en) * 2000-12-12 2002-08-22 Eran Aharonson Handwriting data input device with multiple character sets

Also Published As

Publication number Publication date
EP2380075A4 (en) 2012-08-22
CN102282533A (zh) 2011-12-14
US20100182246A1 (en) 2010-07-22
JP5377665B2 (ja) 2013-12-25
KR20110113616A (ko) 2011-10-17
WO2010083012A2 (en) 2010-07-22
CN102282533B (zh) 2015-06-17
RU2011129799A (ru) 2013-01-27
US8319736B2 (en) 2012-11-27
EP2380075A2 (en) 2011-10-26
EP2380075B1 (en) 2020-06-10
WO2010083012A3 (en) 2010-10-14
JP2012515396A (ja) 2012-07-05

Similar Documents

Publication Publication Date Title
KR101663849B1 (ko) 터치 감지형 컴퓨팅 장치 및 방법
US8941600B2 (en) Apparatus for providing touch feedback for user input to a touch sensitive surface
US9400601B2 (en) Techniques for paging through digital content on touch screen devices
US5347295A (en) Control of a computer through a position-sensed stylus
US9037991B2 (en) Apparatus and method for digital content navigation
KR101566461B1 (ko) 전자책에서 사용자 주석들을 다루는 시스템 및 방법
US9323378B2 (en) Method and apparatus of electronic paper comprising a user interface
US20110216015A1 (en) Apparatus and method for directing operation of a software application via a touch-sensitive surface divided into regions associated with respective functions
US20130268858A1 (en) System and method for providing feedback associated with e-book in mobile device
CN101334706A (zh) 带自增长的文本输入窗
JPH08504987A (ja) ペン入力に基づく計算器
Liesaputra et al. Realistic electronic books
EP1236127A1 (en) System and method for annotating an electronic document independently of its content
Kristensson et al. Command strokes with and without preview: using pen gestures on keyboard for command selection
JP2012515396A5 (ko)
US9128590B2 (en) Contents display device and contents display method
JP2004355106A (ja) コンピュータのタッチインタフェース
JP2010026565A (ja) 表示装置及びプログラム
JP2004139501A (ja) 文書ブラウザ、文書ブラウズ方法および文書ブラウズ方法をコンピュータに実行させるためのプログラム
KR101562322B1 (ko) 전자문서에서 문제풀이 기능을 제공하는 방법
US8624837B1 (en) Methods and apparatus related to a scratch pad region of a computing device
JP2013178611A (ja) 電子端末および書籍閲覧プログラム
JP2010015489A (ja) 表示装置及びプログラム
JP4915536B2 (ja) 情報処理装置及び情報処理プログラム
JP6183111B2 (ja) 並べ替え装置及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right