KR20070048106A - 인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및시스템 - Google Patents

인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및시스템 Download PDF

Info

Publication number
KR20070048106A
KR20070048106A KR1020060029617A KR20060029617A KR20070048106A KR 20070048106 A KR20070048106 A KR 20070048106A KR 1020060029617 A KR1020060029617 A KR 1020060029617A KR 20060029617 A KR20060029617 A KR 20060029617A KR 20070048106 A KR20070048106 A KR 20070048106A
Authority
KR
South Korea
Prior art keywords
transaction
user
pen device
interactive pen
function
Prior art date
Application number
KR1020060029617A
Other languages
English (en)
Other versions
KR100815536B1 (ko
Inventor
제임스 마그그라프
Original Assignee
리이프프로그 엔터프라이시스, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 리이프프로그 엔터프라이시스, 인코포레이티드 filed Critical 리이프프로그 엔터프라이시스, 인코포레이티드
Publication of KR20070048106A publication Critical patent/KR20070048106A/ko
Application granted granted Critical
Publication of KR100815536B1 publication Critical patent/KR100815536B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G06F3/0321—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface by optically sensing the absolute position with respect to a regularly patterned surface forming a passive digitiser, e.g. pen optically detecting position indicative tags printed on a paper sheet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Position Input By Displaying (AREA)
  • Character Discrimination (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명의 실시예는 인식된 텍스트(text)를 사용하여 거래(transaction)를 수행하는 방법 및 시스템에 관한 것이다. 일 실시예에서, 전자적인 상호작용 펜 기기(electronic interactive pen device)는 기록 가능한 표면 상에 기록된 텍스트 열(text string)을 인식한다. 전자적인 상호작용 펜 기기의 기능은 그 후 자동으로 액세스된다. 상기 기능의 액세스에 응답하여, 거래 프로세스를 개시한다.
텍스트 열, 거래, 구매, 판매, 상호작용, 펜, 기록 가능한 표면, 음성 출력

Description

인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및 시스템 {METHOD AND SYSTEM FOR CONDUCTING A TRANSACTION USING RECOGNIZED TEXT}
도 1은 본 발명의 실시예를 구현할 수 있는 전자적인 상호작용 장치의 블록도이다.
도 2는 본 발명의 실시예를 구현할 수 있는 다른 전자적인 상호작용 장치의 블록도이다.
도 3은 본 발명의 일 실시예에 따른 마크의 패턴이 있는 전형적인 종이 시트를 나타낸 도면이다.
도 4는 본 발명의 일 실시에에 따른 전형적인 종이 시트 상의 마크 패턴의 확대도이다.
도 5는 본 발명의 일 실시예에 따른 사용자가 생성한 그래픽 요소 아이콘을 인식하기 위한 컴퓨터로 구현되는 프로세스의 단계를 나타낸 흐름도이다.
도 6은 본 발명의 실시예에 따른 전형적인 기록 가능한 표면을 나타낸 것이다.
도 7은 본 발명의 실시예에 따른 인식된 텍스트를 사용하여 거래를 수행하기 위한 컴퓨터로 구현되는 프로세스의 흐름도이다.
도 8a는 본 발명의 실시예에 따른 거래 시스템의 블록도이다.
도 8b는 본 발명의 실시예에 따른 사용자 계정을 생성하기 위한, 컴퓨터로 구현되는 방법의 흐름도이다.
도 9a 및 도 9b는 본 발명의 실시예에 따른 거래를 수행하기 위한, 컴퓨터로 구현되는 방법의 흐름도이다.
관련출원의 상호참조
본 출원은 대리인 사건번호 제020824-004610US호이고, 제임스 마그그라프(James Marggraff) 등이 2004년 3월 17에 "Scanning Appartus(스캐닝 장치)"라는 명칭으로 출원한 미국특허출원 제10/803,806호인, 공동출원 공동소유의 미국 특허출원의 일부계속출원으로, 그 내용 전부는 본 명세서 참조로서 통합된다.
본 출원은 대리인 사건번호 제020824-009500US호이고, 제임스 마그그라프(James Marggraff) 등이 2004년 6월 3에 "User Created Interactive Interface(사용자에 의해 생성되는 상호작용 인터페이스)"라는 명칭으로 출원한 미국특허출원 제10/861,243호인, 공동출원 공동소유의 미국 특허출원의 일부계속출원으로, 그 내용 전부는 본 명세서 참조로서 통합된다.
본 출원은 대리인 사건번호 제LEAP-P0313호이고, 제임스 마그그라프(James Marggraff) 등이 2005년 1월 12에 "A METHOD AND SYSTEM FOR IMPLEMENTING A USER INTERFACE FOR A DEVICE EMPLOYING WRITTEN GRAPHICAL ELEMENTS(기록된 그래픽 요 소를 사용하는 기기의 사용자 인터페이스를 구현하는 방법 및 시스템)"라는 명칭으로 출원한 미국특허출원 제11/034,491호인, 공동출원 공동소유의 미국 특허출원과 관련이 있으며, 그 내용 전부는 본 명세서 참조로서 통합된다.
본 출원은 대리인 사건번호 제LEAP-P0316호이고, 제임스 마그그라프(James Marggraff) 등이 2005년 1월 12에 "A METHOD AND SYSTEM FOR IMPLEMENTING A USER INTERFACE FOR A DEVICE THROUGH RECOGNIZED TEXT AND BOUNDED AREAS(텍스트와 경계 영역의 인식을 통해 기기의 사용자 인터페이스를 구현하는 방법 및 시스템)"라는 명칭으로 출원한 미국특허출원 제11/035,155호인, 공동출원 공동소유의 미국 특허출원과 관련 있으며, 그 내용 전부는 본 명세서 참조로서 통합된다.
본 출원은 대리인 사건번호 제LEAP-P0320호이고, 제임스 마그그라프(James Marggraff) 등이 2005년 1월 12에 "TERMINATION EVENTS(종료 이벤트)"라는 명칭으로 출원한 미국특허출원 제11/035,003호의 공동출원 공동소유의 미국 특허출원과 관련이 있으며, 그 내용 전부는 본 명세서 참조로서 통합된다.
본 발명에 따른 실시예들은 일반적으로 정보 저장 매체, 그리고 펜 기반 상호작용 기기를 사용하여 저장된 정보를 검색하고 사용하는 것에 관한 것이다.
지난 20년 동안, 데스크톱 컴퓨터 시스템, 랩톱 컴퓨터 시스템, 핸드헬드(handheld) 컴퓨터 시스템, 및 타블렛(tablet) 컴퓨터 시스템과 같은 개인용 컴퓨팅 기기의 사용은 엄청나게 증가하였다. 이러한 개인용 컴퓨팅 기기는 사용자에게 광범위한 상호작용 애플리케이션, 비지니스 유틸리티, 통신 기능(communication ability), 및 엔터테인먼트 기능(entertainment possibility)을 제공한다.
현재의 개인용 컴퓨팅 기기는 사용자 인터페이스를 통해 이러한 상호작용 애플리케이션에 대한 액세스를 제공한다. 일반적인 컴퓨팅 기기는 모니터나 디스플레이 스크린과 같은 디스플레이 기기를 사용하는 사용자에게 정보를 제공하고, 마우스, 키보드, 조이스틱 또는 스타일러스와 같은 입력 기기를 사용하여 사용자로부터 정보를 수신하는 온스크린 그래픽 인터페이스(on-screen graphical interface)를 구비한다.
컴퓨팅 시스템이 더 낫다고 해도, 문명 사회(literate society)에서 펜과 종이는 어디에서나 사용되고 있다. 현재의 컴퓨팅 기기의 그래픽 사용자 인터페이스는 많은 컴퓨팅 애플리케이션과의 효과적인 상호작용을 제공하며, 일반적인 온스크린 그래픽 사용자 인터페이스는 펜이나 연필 및 종이의 일반적인 사용을 흉내 내기 어렵다. 예를 들면, 데스크톱 및 랩톱 컴퓨터 시스템은 일반적으로 펜형(pen-like) 인터페이스를 구비하지 않는다. 또한, 컴퓨터의 입력은 전자적인 디스플레이 상에 표시되고, 종이나 물리적인 표면 상에 기록된 정보처럼 만지거나 접근할 수 없다.
끝으로, 종이 표면 상에 펜형 인터페이스로 그린 이미지와 기록물(writing)은 편의성, 영구성, 및 만질 수 있는 실체성(tangibility)이 있지만, 펜형 인터페이스를 사용하여 일단 기록하고 나면 종이 표면 상의 마킹의 재사용은 쉽게 허용되지 않는다.
넓게는, 본 명세서는 인식된 텍스트를 사용하여 거래를 수행하는 방법 및 시 스템을 개시한다.
일 실시예에서, 전자적인 상호작용 펜 기기는 기록 가능한 표면 상에 기록된 텍스트 열을 인식한다. 전자적인 상호작용 펜 기기의 기능은 그 후 자동으로 액세스된다. 상기 기능의 액세스에 응답하여, 거래 프로세스가 개시된다.
여기에 나타낸 실시예는 인식된 텍스트를 사용하여 거래를 수행하는 방법 및 시스템을 교시한다. 일 실시예에서, 전자적인 상호작용 펜 기기는 기록 가능한 표면 상에 기록된 텍스트 열을 인식한다. 전자적인 상호작용 펜 기기의 기능은 그 후 자동으로 액세스된다. 상기 기능의 액세스에 응답하여, 거래 프로세스가 자동으로 개시된다.
일 실시예에서, 기록 가능한 표면은 상호작용 기기에 대한 위치 정보를 제공하는 영구적으로 인쇄되고 부호화된 패턴의 위치 정보를 포함한다. 본 발명의 실시예에서, 기기는 펜 기반 (컴퓨팅) 시스템일 수 있다. 본 발명의 실시예에서, 펜 기반 시스템은 기록 가능한 표면 상에 기록된 텍스트 열을 인식하고 거래 프로세스가 개시되는, 상기 텍스트 열과 연관된 펜 기반 시스템의 기능을 자동으로 액세스한다. 상기 거래를 수행하기 위해, 상기 펜 기반 시스템은 구매자에 의해 사용되어 기록 가능한 표면과 인터페이스 한다. 펜 기반 시스템은 상기 거래 프로세스를 촉진시키기 위해 음성 프롬프트(audible prompt)를 생성할 수 있다. 상기 기능은 영속적으로 기록된 텍스트 열과 지속적으로 연관될 수 있다는 것을 알 수 있다. 일 실시예에서, 경계 영역(bounded region)은 텍스트 열을 둘러싸는 것으로 규정된 다. 상기 펜 기반 시스템에 의한 경계 영역 내의 임의의 지점의 선택은 텍스트 열의 선택을 나타내며, 기능과 연관되어 있다.
실시예에서, 거래를 할 것이라는 사용자의 지시를 받으면, 상호작용 기기는 거래 항목을 식별하는 거래 시퀀스(transation sequence)를 자동으로 개시한다. 본 발명의 실시예에서, 펜 기반 시스템은 그 후 거래 항목의 판매자(seller)를 확인하기 위해 인터넷을 통한 검색을 개시하여 사용자에게 적어도 하나의 거래 항목 판매자를 표시한다. 펜 기반 시스템은 또한 발송 옵션(shipping option), 구매 파라미터(purchasing parameter)(예를 들어, 최저 가격 찾기), 선호하는 상인(merchant) 등과 같은 거래 옵션(transaction option)을 표시할 수 있다. 본 발명의 실시예에서, 전자적인 상호작용 기기는 직접 또는 제3자 레지스트리 서비스(third party registy service)를 통해 소매상인(retailer)와 통신할 수 있다. 게다가, 본 발명의 실시예에서, 전자적인 상호작용 기기는 소매상인과 통신하는 전자 통신기기(예를 들어, 셀룰러폰, 무선 네트워크 허브 등)와 통신할 수 있도록 연결될 수 있다.
실시예에서, 거래는 또한 펜 기반 시스템의 메모리에 저장되어 있을 수 있는 예를 들어, 사용자의 성명, 주소, 지불 정보(예를 들어, 신용 카드 정보) 등을 포함하는 사용자의 계정을 액세스함으로써 촉진될 수 있다. 이와는 달리, 이 정보는 제3자 레지스트리 서비스의 사용자 계정에 저장될 수도 있다.
전형적인 거래에서, 사용자는 펜 기반 시스템을 이용하여 기록 가능한 표면 상에 텍스트 열(예를 들어, 단어 "Buy(사다)"을 기록하고 단어를 (예를 들어, 원으 로) 주위를 둘러싸서 단어 "Buy"가 특정 기능과 연관되어 있음을 펜 기반 시스템에게 나타낸다. 펜 기반 시스템은, 광학 문자 인식기술을 사용하여 선으로 둘러싸인 "Buy"를 기능의 호출과 연관된 기능의 액세스로서 인식한다. 일 실시예에서, 선으로 둘러싸인 단어 "Buy"는 펜 기반 시스템의 거래 처리 기능과 연관되어 있다. 그 후, 펜 기반 시스템은 사용자가 구매하고자 하는 것이 무엇인지를 묻는 음성 프롬프트(audible prompt)를 생성한다. 예를 들어, 펜 기반 시스템은 "무엇을 구매하시겠습니까?"라는 프롬프트를 생성할 수 있다. 그러면 사용자는 기록 가능한 표면에 항목의 명칭을 쓸 수 있다. 예를 들어, 사용자는 "War and Peace(전쟁과 평화)"라고 쓸 수 있다. 펜 기반 시스템은 텍스트열 "War and Peace"를 인식하고 그 주제에 기초한 인터넷 검색을 개시한다. 본 발명의 실시예에서, 펜 기반 시스템은 인터넷 검색을 개시하기 전에 정확한 항목이 식별되었는지를 확인하기 위해 음성 프롬프트를 생성할 수 있다는 것에 주의하여야 한다.
인터넷 검색의 결과가 반환되면, 펜 기반 시스템은 사용자에게 "War and Peace(전쟁과 평화), 레오 톨스토이의 소설, $10.95에 아마존닷컴에서 입수 가능. 이 품목의 구매를 원하면 단어 "Buy" 옆에 체크마크를 표시하세요.)"라는 음성 프롬프트를 생성할 수 있다. 사용자가 단어 "Buy" 옆에 체크마크를 표시하면, 펜 기반 시스템은 개별 사용자 계정(예를 들어, 지불 정보, 사용자 정보, 선호하는 발송 방법 등)을 액세스하여 그 품목에 대한 주문을 해당 판매자에게 신청한다.
실시예에서, 기록 가능한 표면은 펜 기반 시스템에 의해 판독 가능한, 위치 정보의 부호화된 정보를 포함할 수 있다. 본 발명의 실시예에서, 이것은 경계선이 있는 텍스트 열과 연관된 기능의 지속적인 이용의 제공을 용이하게 한다. 예를 들어, 후속하는 경계선이 있는 텍스트 열의 선택에서, 펜 기반 시스템은 텍스트 열 그 자체가 아니라 기록 가능한 표면 내의 부호화된 위치 정보를 판독할 수 있다.
실시예에서, 펜 기반 시스템은 개별 사용자 계정에서 고유하게 식별될 수 있다. 이 사용자 계정 정보는 소매상인과 함께, 또는 개별 사용자 계정의 제3자 레지스트리와 함께 펜 기반 시스템 자체에 저장될 수 있다. 전술한 바와 같이, 개별 사용자 계정은 또한 액세스될 때 거래 프로세스를 촉진시키는 정보, 예를 들어, 지불 정보(예를 들어, 신용 카드 정보), 사용자의 주소, 선호하는 발송 방법[예를 들어, 육상 우편(ground mail), 익일 배송, USP(United Parcel Service), 등]를 포함할 수 있다.
본 명세서의 통합되어 그 일부를 이루는 첨부 도면은 본 발명의 실시예들을 나타내며, 상세한 설명과 함께 본 발명의 원리를 설명하기 위해 사용된다.
다음의 본 발명의 상세한 설명에서, 본 발명의 완전한 이해를 제공하기 위해 수많은 구체적인 세부사항을 설명한다. 하지만, 본 발명에 대해 후술하는 상세한 설명에서는 수많은 구체적인 세부사항을 본 발명에 대한 완전한 이해를 제공하기 위해 설명한다. 하지만, 이 기술분야의 당업자는 이러한 구체적인 세부사항 없이 또는 그 등가물을 이용하여 본 발명을 실시할 수 있음을 알 것이다. 다른 경우에, 공지의 방법, 절차, 구성요소, 및 회로는 본 발명의 특징을 쓸데없이 불명료해지는 것을 피하기 위해 자세하게 설명하지 않는다.
다음의 상세한 설명의 일부는 절차, 단계, 논리 블록, 처리, 및 컴퓨터 메모 리에서 실행될 수 있는 데이터 비트에 관한 동작(operation)의 다른 심볼 표현에 관해 설명한다. 이들 설명 및 표현은 데이터 처리 기술의 당업자가 다른 기술분야의 당업자에게 자신의 연구 내용을 가장 효과적으로 전달하기 위해 사용하는 수단(means)이다. 절차, 컴퓨터에 의해 수행되는 단계, 논리 블록, 프로세스 등이 있으며, 일반적으로 원하는 결과를 도출하는 자기모순이 없는(self-consistent) 단계나 명령의 시퀀스로 생각된다. 단계들은 물리량의 물리적인 조작을 필요로 하는 것이다. 꼭 그런 것은 아니지만 대개, 이러한 물리량은 컴퓨터 시스템에서 저장, 전달, 결합, 비교, 및 조작을 할 수 있는 전기신호나 자기신호의 형태를 띤다. 때로는 일반적인 사용의 이유로 이들 신호를 비트(bit), 값(value), 요소(element), 심볼(symbol), 문자(character), 용어(term), 숫자(number) 등으로 나타내는 것이 대체로 편리하다는 것이 입증되었다.
하지만, 이러한 용어 모두 및 유사한 용어는 적당한 물리량과 관련될 것이고, 이러한 물리량에 부가된 편의상의 표지(lable)일 뿐이라는 것을 명심하여야 한다. 특별히 언급하지않는 한, 다음의 설명에서 명백한 바와 같이, 본 발명과 설명의 전체 걸쳐, 컴퓨터 시스템의 레지스터와 메모리 내에서 물리(전기)량으로 표현된 데이터를, 컴퓨터 시스템 메모리 또는 레지스터 또는 기타 그러한 정보 저장, 전송 또는 디스플레이 기기 내에서 물리량으로 유사하게 표현되는 다른 데이터로 변환하고 조작하는, 컴퓨터 시스템[예를 들어, 도 7, 도 9a 및 도 9b의 흐름도 700]이나 유사한 전자적인 컴퓨팅 기기의 작용(action) 및 프로세스를 나타내기 위해, "인식하는" 또는 "개시하는" 또는 "전달하는" 또는 "포함하는" 또는 "결합하 는" 또는 "액세스하는" 또는 "식별하는" 또는 "수신하는" 또는 "생성하는" 또는 "등록하는" 또는 "연관시키는" 또는 "저장하는" 등의 용어를 사용한다는 것을 알 수 있을 것이다.
도 1은 본 발명의 다른 실시예를 구현할 수 있는 전자적인 상호작용 기기(100)의 블록도이다. 일반적으로 전자적인 상호작용 기기(100)는 펜 형상이나 펜 기반 컴퓨터 시스템 또는 광학 기기, 또는 더욱 구체적으로는 광학 판독기, 광학 펜, 또는 디지털 펜을 가리킬 수 있다.
도 1의 실시예에서, 전자적인 상호작용 기기(100)는 하우징(62) 내부에 프로세서(32)를 포함한다. 일 실시예에서, 하우징(62)은 펜이나 필기 기구(utensil)의 형태를 가질 수 있다. 프로세서(32)는 전자적인 상호작용 기기(100)의 기능을 실행하기 위해 사용되는 정보와 명령을 처리하도록 동작 가능한데, 이에 대해서는 후술한다.
본 발명의 실시예에서, 전자적인 상호작용 기기(100)는 프로세서(32)에 연결되어 있는 오디오 출력 기기(36), 디스플레이 기기(40), 또는 오디오 출력 기기(36) 및 디스플레이 기기(40) 모두를 포함할 수 있다. 다른 실시예에서, 오디오 출력 기기(36) 및/또는 디스플레이 기기(40)는 선택적이거나 전자적인 상호작용 기기(100)와 물리적으로 별개이지만, 유선이나 무선 연결을 통해 전자적인 상호작용 기기(100)와 통신할 수 있다. 무선으로 통신하는 경우, 전자적인 상호작용 기기(100)는 송신기나 송수신기(33)를 포함할 수 있다. 오디오 출력 기기(36)는 스피터나 오디오 잭(예를 들어, 이어폰이나 헤드폰용)을 포함할 수 있다. 디스플레 이 기기(40)는 액정 디스플레이(LCD) 또는 어떤 다른 적당한 타입의 디스플레이일 수 있다.
도 1의 실시예에서, 전자적인 상호작용 기기(100)는 프로세서(32)에 연결되어 있고 전자적인 상호작용 기기(100)를 활성화시키고 제어하는 입력 버튼(38)을 포함할 수 있다. 예를 들어, 입력 버튼(38)은, 사용자가 정보를 입력하고 전자적인 상호작용 기기(100)에 명령하거나 전자적인 상호작용 기기(100)를 온(on) 또는 오프(off)할 수 있도록 해준다. 전자적인 상호작용 기기(100)는 또한 배터리와 같은 전원(34)을 포함할 수 있다.
전자적인 상호작용 기기(100)는 또한 프로세서(32)에 연결되어 있는 광원이나 광 방출기(44) 및 광 센서나 광 검출기(42)를 포함한다. 광 방출기(44)는 예를 들어, 발광 다이오드(LED)일 수 있으며, 광 검출기(42)는 예를 들어, 촬상소자(CCD) 또는 상보형 금속산화물반도체(CMOS) 이미저 어레이(imager array)일 수 있다. 광 방출기(44)는 표면(70) 또는 표면(70)의 일부분을 조사한다. 표면(70)에서 반사된 광은 광 검출기(42)에 의해 수광되고 기록된다.
일 실시예에서, 마킹의 패턴이 표면(70)에 인쇄되어 있다. 표면(70)은 종이 시트 도는 다른 타입의 표면과 같은, 마킹 패턴을 인쇄할 수 있는 임의의 적당한 표면일 수 있다. 광 방출기(44) 및 광 검출기(42)를 유지하고 있는 전자적인 상호작용 기기(100)의 단부(end)는, 표면(70)에 위치되거나 그 가까이에 위치된다. 전자적인 상호작용 기기(100)가 표면(70)에 대해 이동될 때, 광 방출기(44)와 광 검출기(42)에 의해 마킹 패턴이 판독되어 기록된다. 이하에서 더욱 자세하게 설명한 바와 같이, 일 실시예에서, 표면(70) 상의 마킹은 표면(70)에 대한 전자적인 상호작용 기기(100)의 위치를 결정하기 위해 사용되다(도 3 및 도 4 참조). 다른 실시예에서, 표면(70) 상의 마킹은 정보를 부호화하기 위해 사용된(도 5 및 도 6 참조). 표면(70)의 포착된 이미지는 전자적인 상호작용 기기(100)에 의해 분석되어(처리되어) 마킹을 복호화하여 부호화된 정보를 복원할 수 있다.
도 1의 전자적인 상호작용 기기(100)는 또한 프로세서(32)에 연결되어 있는 메모리 유닛(48)을 포함할 수 있다. 일 실시예에서, 메모리 유닛(48)은 메모리 카트리지나 메모리 카드로 구현된 탈착 가능한 메모리(removable memory)이다. 다른 실시예에서, 메모리 유닛(48)은 프로세서(32)를 위한 정보 및 명령어를 저장하는 임의 접근(휘발성) 메모리(RAM) 및 판독 전용(비휘발성) 메모리(ROM)를 포함한다.
도 1의 실시예에서, 전자적인 상호작용 기기(100)는 광 방출기(44) 및 광 검출기(42)가 있는 전자적인 상호작용 기기(100)의 단부와 동일한 단부에 위치된 기록 소자(52)를 포함한다. 기록 소자(52)는 펜, 연필, 마커, 스타일러스 등일 수 있으며, 접을 수 있거나(retractable) 접을 수 없다. 일정한 애플리케이션에서, 기록 소자(52)는 불필요하다. 다른 애플리케이션에서, 사용자는 표면(70) 상에 글자, 단어, 숫자, 심볼 등과 같은 문자(character)를 포함하는 마크를 만들기 위해 기록 소자(52)를 사용할 수 있다. 이 사용자가 생성한 마크(이하, 사용자 생성 마크)는 전자적인 상호작용 기기(100)에 의해 표면(70) 상의 위치에 따라 스캐닝(이미지화)되어 해석될 수 있다. 사용자 생성 마크의 위치는 표면(70) 상에 인쇄되어 있는 마크 패턴을 사용하여 결정될 수 있다(아래의 도 3 및 도 4에 관한 설명 참 조). 일 실시예에서, 사용자 생성 마크의 위치는 손으로 쓴 문자를 인식하는 광학 문자 인식(OCR) 기술을 사용하여 전자적인 상호작용 기기(100)에 의해 해석될 수 있다.
표면(70)은 종이 시트일 수 있지만, 종이 이외의 재료로 이루어지는 표면도 또한 사용될 수 있다. 표면(70)은 평판 디스플레이 스크린(예를 들어, LCD) 또는 전자적인 종이(예를 들어, 전자적인 잉크를 사용하는 재구성 가능한 종이)일 수 있다. 표면(70)은 평평하거나 평평하지 않을 수도 있다. 예를 들어, 표면(70)은 구면(surface of a globe)으로 구현될 수 있다. 또한, 표면(70)은 일반적인 종이의 페이지(예를 들어, 8.5×11 인치)보다 작거나 클 수 있다. 일반적으로, 표면(70)은 마킹(예를 들어, 글자, 숫자, 심볼 등)이 인쇄되거나 그렇지 않으면 배치될 수 있는 임의의 타입의 표면일 수 있다. 다르게는, 표면(70)은 전자적인 상호작용 기기(100)에 의한 표면에 대한 작용에 응답하여 표면의 특성이 변화하는 타입의 표면일 수 있다.
도 2는 본 발명의 실시예를 구현할 수 있는 다른 전자적인 상호작용 전자적인 상호작용 기기(200)의 블록도이다. 전자적인 상호작용 기기(200)는, 앞서 설명한 바와 같이, 프로세서(32), 전원(34), 오디오 출력 기기(36), 입력 버튼(38), 메모리 유닛(48), 광 검출기(42), 광 방출기(44), 및 기록 소자(52))를 포함한다. 하지만, 도 2의 실시예에서, 광 검출기(42), 광 방출기(44) 및 기록 소자(52)는 하우징(62) 내에 광학 기기(201)로서 구현되어 있으며, 프로세서(32), 전원(34), 오디오 출력 기기(36), 입력 버튼(38), 및 메모리 유닛(48)은 하우징(74) 내의 플랫 폼(202)으로 구현된다. 본 실시예에서, 광학 기기(201)는 케이블(102)에 의해 플랫폼(202)에 연결되어 있지만, 무선 접속을 대신 사용할 수 있다. 도 2에 도시된 소자는 전술한 것과는 다른 조합으로 광학 기기(201)와 플랫폼(202) 사이에 분포될 수 있다.
도 3은 본 발명의 일 실시예에 따른 마크의 패턴이 있는 종이 시트(15)를 나타낸 도면이다. 도 3의 실시예에서, 종이 시트(15)는 마크(18)의 패턴으로 구성되는 광학적으로 판독 가능한 위치 코드(17) 형태의 코딩 패턴(coding pattern)을 구비하고 있다. 도 3의 마크(18)는 분명하게 나타내기 위해 매우 크게 확대한 것이다. 실제로, 마크(18)는 사람의 시각체계로는 쉽게 인식할 수 없으며, 종이 시트(15) 위에 그레이스케일(grayscale)로 나타날 수 있다. 일 실시예에서, 마크(18)는 점으로 구현되지만, 본 발명은 이것으로 한정되지는 않는다.
도 4는 도 3의 위치 코드(17)의 확대된 부분(19)을 나타낸 것이다. 전자적인 상호작용 기기(100 또는 200)(도 1 또는 도 2)와 같은 광학 기기는, 위치 코드(17)의 영역의 이미지를 기록하기 위해 배치되어 있다. 일 실시예에서, 광학 기기는 래스터 포인트(raster point)(22)에서 교차하는 래스터 라인(21)들을 갖는 래스터의 형태로 기준 시스템에 마크(18)를 맞춘다. 각각의 마크(18)는 래스터 점(22)과 연관되어 있다. 예를 들어, 마크(23)는 래스터 포인트(24)와 연관되어 있다. 이미지/래스터 내의 마크의 경우, 마크와 연관된 래스터 포인트로부터의 마크의 변위(displacement)가 결정된다. 이 변위를 사용하여, 이미지/래스터 내의 패턴을 기준 시스템 내의 패턴과 비교한다. 기준 시스템 내의 각 패턴은 표면(70) 의 특정 위치와 연관되어 있다. 따라서, 이미지/래스터 내의 패턴과 기준 시스템 내의 각 패턴을 대조함으로써, 표면(70) 상의 패턴의 위치, 그리고 그에 따라 표면(70)에 대한 광학 기기의 위치를 결정할 수 있다. 추가적인 정보는, 미국특허 제6,502,756호, 미국특허출원 제10/179,966호(2002년 6월 26일 출원), WO 01/95559, WO 01/71473, WO 01/75723, WO 01/26032, WO 01/75780, WO 01/01670, WO 01/75773, WO 01 /71475, WO 01/73983, 및 WO 01/16691에서 제공받을 수 있으며, 이들 특허 및 특허출원의 내용 전부는 모든 목적으로 참조에 의해 본 명세서에 통합된다. 또한 미국특허출원 제60/456,053호(2003년 3월 18일 출원) 및 미국특허출원 제10/803,803호(2004년 3월 17일 출원)를 참조할 수 있으며, 이들 모두의 내용 전부는 모든 목적으로 참조에 의해 본 명세서에 통합된다.
다시 도 1를 참조하면, 표면(70) 상의 4개의 지점 또는 영역은 글자 A, B, C, D로 표시한다(이 글자들은 표면(70) 상에 인쇄되어 있지 않지만, 표면(70) 상의 지점을 나타내기 위해 사용된다는 것에 유의하여야 한다). 표면(70) 상에는 이와 같은 영역이 많이 있을 수 있다. 표면(70) 상의 각 영역과 연관된 것은 마크의 고유한 마크의 패턴이다. 일부 마크가 중첩되는 영역 사이에서 공유되더라도 영역 내의 마크의 패턴은 해당 영역에 대해 여전히 고유하기 때문에, 표면(70) 상의 영역들은 중첩될 수 있다.
도 1의 예에서, 기기(100)[구체적으로, 기록 소자(52)]를 사용하여, 사용자는 예를 들어, 표면(70) 상의 지점 A에서 원이 그려진 글자 "M"으로 이루어지는 문자를 생성할 수 있다(일반적으로 사용자는 표면(70) 상의 임의의 지점에 문자를 생 성할 수 있다). 사용자는 기기(100)로부터의 프롬프트(예를 들어, 음성 프롬프트)에 응답하여 그러한 문자를 생성할 수 있다. 사용자가 문자를 생성하는 경우, 기기(100)는 문자가 생성된 지점에 고유하게 존재하는 마킹의 패턴(예를 들어, 도 3의 도면부호 18)을 기록한다. 기기(100)는 막 생성된 문자와 마킹의 패턴을 연관시킨다. 기기(100)가 이어서 원이 그려진 문자 "M"에 위에 위치되면, 기기(100)는 그것과 관련된 마크의 패턴(예를 들어, 도면부호 18)을 인식하고, 원이 그려진 "M"과 연관시킴으로써 그 지점을 인식한다. 사실상, 기기(100)는 문자 자체를 인식하는 것이 아니라 문자가 위치되어 있는 지점에서의 마킹의 패턴을 사용하여 문자를 인식한다. 사용자가 생성한 그래픽 문자는 하나 이상의 글자나 완전한 단어를 포함할 수 있다는 것에 유의하여야 한다. 다시 말해, 본 발명의 실시예는, 사용자가 단어를 기록하는 지점에 고유하게 존재하는 마킹의 패턴을 기록할 수 있다.
일 실시예에서, 전술한 문자는 펜 기기(100)의 하나 이상의 커맨드와 관련되어 있는 "그래픽 요소(graphic element)"를 포함한다. 펜 기기(100)와 연관되어 있고 펜 기기(100)를 액세스하기 위해 사용되는 이러한 그래픽 요소는, 펜 기기(100)의 기능 또는 애플리케이션의 액세스와 관련되어 있지 않은 다른 문자, 마크 등과 구별하기 위해 이하 "그래픽 요소 아이콘(graphical element icon)"이라고 한다는 것에 유의하여야 한다. 방금 설명한 예에서, 사용자는 특정한 커맨드를 식별하는 그래픽 요소 아이콘을 생성(기록)할 수 있으며, 단순히 펜 기기(100)를 그래픽 요소 아이콘(예를 들어, 기록된 문자) 위에 위치시킴으로써 커맨드를 반복하여 호출할 수 있다. 일 실시예에서, 필기도구는 그래픽 문자 위에 위치한다. 다 시 말해, 사용자는 펜 기기(100)에 의해 커맨드가 호출될 때마다, 커맨드를 위한 문자를 쓰지 않아도 되며, 대신에 사용자는 커맨드를 위한 그래픽 요소 아이콘을 한번 쓰고, 그 커맨드를 동일한 기록된 그래픽 요소 아이콘을 사용하여 반복적으로 사용할 수 있다. 이것을 "지속성(persistence)"이라 하며, 이하에 더욱 상세하게 설명한다. 이것은 또한 사용자가 기록한 것은 아니지만 표면 상에 미리 인쇄된 그래픽 요소 아이콘에 대해서도 마찬가지이며, 그렇지만 펜 기기(100)로 선택 가능하다.
일 실시예에서, 그래픽 요소 아이콘은 글자나 숫자 주위를 둘러싸는 선이 있는 글자나 숫자를 포함할 수 있다. 글자나 숫자 주위를 둘러싸는 선은 원, 타원, 정사각형, 다각형 등일 수 있다. 이러한 그래픽 요소 아이콘은 일반적인 글자와 숫자 대신에 사용자가 선택할 수 있는 "버튼"처럼 보인다. 이런 종류의 그래픽 요소 아이콘을 생성함으로써, 사용자는 기능 아이콘과 같은 그래픽 요소 아이콘을, 펜 기기(100)에 의해 데이터로 취급될 수 있는 일반적인 글자 및 숫자와 시각적으로 구별할 수 있다. 또한, 이런 종류의 그래픽 요소 아이콘을 생성함으로써, 펜 기기(100)는 기능 또는 메뉴 항목 타입의 그래픽 요소를 비기능 또는 비메뉴 항목 타입의 그래픽 요소와 더 잘 구별할 수 있다. 예를 들어, 사용자는 상호작용 "메뉴" 그래픽 요소 아이콘을 생성하기 위해, 원으로 둘러싸인 글자 "M"을 "메뉴(menu)" 그래픽 요소 아이콘으로 생성할 수 있다.
펜 기기(100)는 내부의 글자 "M"과 중첩되는 원이나 정사각형을 단어 내의 글자 "M"과 구별하여 인식하도록 프로그램될 수 있다. 그래픽 요소 아이콘은 그것 에 인접하여 작은 "체크마크" 심볼을 포함한다. 이러한 기능 그래픽 요소를 인식하고 그들을 다른 비기능 그래픽 요소와 구별하기 위한 컴퓨터 코드는 펜 기기(100)의 메모리 유닛에 상주할 수 있다. 프로세서는 그래픽 요소 아이콘를 인식할 수 있고, 그래픽 요소 아이콘들의 위치를 식별할 수 있어, 펜 기기(100)는 그것과 관련된 여러 가지 기능, 동작 등을 수행할 수 있다. 이 실시예들에서, 메모리 유닛은 사용자에 의해 생성된 임의의 그래픽 요소를 그것의 표면 상의 위치와 상관 짓기 위한 컴퓨터 코드를 포함할 수 있다.
일반적인 용어인 "그래픽 요소"는 사용자에 의해 생성된 임의의 적당한 마킹을 포함할 수 있으며, 기기의 하나 이상의 기능에 액세스하기 위해 사용되는 기능적인 그래픽 요소를 가리키는 그래픽 요소 아이콘과 구별된다는 것에 유의하여야 한다.
전술한 바와 같이, 그래픽 요소 아이콘은 펜 기기(100)에 의해 생성될 수 있거나(예를 들어, 사용자가 그림) 이전에 존재할 수 있다(예를 들어, 종이 시트에 인쇄된 요소). 그래픽 요소 아이콘의 예로는 심볼, 글자 및/또는 숫자, 문자, 단어, 형상, 선 등과 같은 표시(indicia)를 포함하지만, 이것으로 한정되지는 않는다. 그래픽 요소는 규칙적이거나 비규칙적인 형상일 수 있다. 사용자가 기록/생성하는 그래픽 요소는 일반적으로 펜 기기(100)를 사용하여 생성된다.
도 5는 본 발명의 일 실시예에 따른 사용자가 생성한 그래픽 요소 아이콘을 인식하기 위한 컴퓨터로 구현되는 프로세스(550)의 단계들을 나타낸 흐름도이다.
프로세스(550)는, 본 발명의 일 실시예에 따른 기기[예를 들어, 펜 기 기(100)]가 그래픽 요소 아이콘 형태의 사용자 입력을 해석하여 요청한 기능성을 사용자에게 제공할 때, 기기에 의해 실행되는 사용자 인터페이스 프로세스의 기본적인 동작 단계들을 나타낸다. 프로세스(550)는 단계 551에서 시작되어, 펜 기기(100)의 컴퓨터로 구현되는 기능성(functionality)이 생성된(예를 들어, 사용자에 의해 생성된) 그래픽 요소 아이콘을 인식하다. 다르게는, 그래픽 요소 아이콘은 표면 상에 인쇄되어 있을 수 있으며, 펜 기기(100)는 그 위치를 알고 있을 수 있다. 단계 551에서, 사용자가 그래픽 요소 아이콘을 처음으로 기록하는 것이면, 펜 기기(100)는 광 센서와 프로세서를 사용하여 기록된 것에 대한 OCR(광학 문자 인식)을 수행하여 사용자가 기록한 그래픽 요소 아이콘을 식별한다. 일 실시예에서, 그래픽 요소 아이콘의 위치는 그 후 또한 기록된다. 단계 552에서, 일단 인식되면 그래픽 요소 아이콘에 관련된 기능을 액세스한다. 이 기능은, 예를 들어 사용자에 의한 후속하는 활성화를 위한 또는 특정 프로세스(예를 들어, 거래 개시)를 시작하기 위한, 미리 결정된 기능의 리스트(예를 들어, 메뉴 선택이나 서브메뉴 옵션)를 발표(예를 들어, 음성으로 표현)할 수 있는 메뉴 기능일 수 있다. 단계 553에서, 기능에 따른 기능에 따른 오디오 출력을 제공한다. 이 오디오 출력은, 예를 들어 선택 리스트 내에서의 사용자의 구체적인 선택이 무엇인지에 대한 발표이거나, 기기(100 또는 200)에 의해 개시될 프로세스 또는 이벤트가 무엇인지를 설명하는 것일 수 있다. 단계 554에서 기능은 지속적으로 그래픽 요소 아이콘과 연관되어 있어, 그래픽 요소 아이콘에 대한 후속하는 작용[예를 들어, 펜 기기(100)를 사용한 탭핑(tapping)]에 의한 기능에 대한 후속하는(예를 들어, 조금 나중의) 액 세스를 가능하게 한다. 예를 들어, 메뉴 기능의 경우, 리스트된 메뉴의 선택은 사용자가 조금 뒤에 메뉴 그래픽 요소 아이콘을 간단히 작동(예를 들어, 탭핑)시킴으로써 계속 액세스 될 수 있다.
복수의 상이한 그래픽 요소가 표면 상에 존재할 수 있으며, 그것의 선택은 예를 들어 애플리케이션 호출, 서브메뉴 옵션 호출과 같은 펜 기기(100)에 의해 실행될 다양한 기능을 제공할 수 있다는 것을 알 것이다.
이런 식으로, 본 발명의 실시예는 컴퓨터 시스템, 특히 예를 들어 펜 기기(100)를 포함하는 펜 기반 컴퓨터 시스템의 기능성을 항해하기(nevigtating) 위한 사용자 인터페이스 수단을 구현한다. 그래픽 요소 아이콘에 의해 구현될 때 사용자 인터페이스는 펜 기기(100) 내에서 실행되는 다수의 소프트웨어 애플리케이션을 호출하는 방법과 그것과 상호작용하는 방법을 또한 제공한다. 전술한 바와 같이, 펜 기기(100)로부터의 출력은 오디오 출력을 포함할 수 있으며, 사용자 인터페이스 수단은 사용자에게 펜 기기(100)의 애플리케이션 및 기능성과 "대화"할 수 있도록 해준다. 펜 기기(100)로부터의 출력은 또한 디스플레이 기기(40)에 의해 표시될 수 있는 시각적인(예를 들어, 텍스트) 출력을 포함할 수 있다. 다시 말해, 사용자 인터페이스는 사용자에게 사용자와 펜 기기(100)가 서로 상호작용하도록 해주는 그래픽 요소 아이콘과 같은 상호 간에 인식되는 항목을 생성할 수 있게 해준다. 전술한 바와 같이, 상호 간에 인식되는 항목은, 사용자가 표면 상에, 일반적으로 종이 시트 상에 그린 일반적으로 심볼 또는 마크 또는 아이콘이다.
상이한 그래픽 요소 아이콘은 상이한 의미를 가지며, 사용자와의 상호작용 방법도 상이하다. 일반적으로, 일정한 그래픽 요소 아이콘의 경우, 상호작용의 방법은 펜 기기의 상이한 컴퓨터로 구현되는 기능성을 호출할 것이다. 설명하면, 전술한 메뉴 예의 경우에, 메뉴 기능성은 사용자에게 그래픽 요소 아이콘과 관련된 기능 리스트를 반복할 수 있도록 해준다(예를 들어, 메뉴 그래픽 요소 아이콘 상의 탭(tap) 횟수는 기능 리스트를 반복한다). 펜 기기의 오디오는 탭이 이루어졌을 때 기능 또는 모드를 발표할 수 있다. 발표된 기능/모드 중 하나는 나중에 몇몇 추가적인 상호작용(예를 들어, 그래픽 요소 아이콘과 연관된 체크마크 그래픽 요소를 그리거나 이전에 그려놓은 체크마크 그래픽 요소의 선택)을 통해 사용자에 의해 선택될 수 있다. 일단 선택되면, 기능성 및 옵션, 그리고 또 특정의 선택된 기능의 서브메뉴는 그 후에 사용자에 의해 액세스될 수 있다. 다르게는, 음성으로 표현된 서브옵션 중 하나가 메뉴 그래픽 요소 아이콘 자체이면, 그것은 사용자가 표면 상에 그것을 표시(representation)하고 선택함으로써 선택될 수 있다.
다른 실시예에서, 그래픽 요소 아이콘의 인식은 구매 또는 다른 거래의 개시와 같은 프로세스를 개시한다. 이 실시예에서, 펜 기기로부터의 오디오 출력은 탭이 끝났을 때 거래의 타입을 발표할 수 있다. 그 후 발표된 거래 중 하나가 어떤 추가적인 상호작용(예를 들어, 그래픽 요소 아이콘과 연관된 체크마크 그래픽 소자를 그리거나 이전에 그려놓은 체크마크 그래픽 소자를 선택)을 통해 사용자에 의해 선택될 수 있다. 일단 선택되면, 거래를 완성하기 위한 추가적인 옵션, 서브메뉴, 및 명령이 사용자에 의해 액세스 될 수 있다.
도 6은 본 발명의 실시예에 따라 사용되는 기록 가능한 표면(600)의 일례를 나타낸 것이다. 본 발명의 실시예에서, 기록 가능한 표면(600)은 앞서 설명한 바와 같이 인쇄된 마크의 패턴이 포함되어 있는 종이 시트일 수 있다[예를 들어, 도 3의 시트(15)]. 도 6에서, 사용자는 기기(100 또는 200)를 사용하여 텍스트 열(601)(예를 들어, 단어 "Buy")을 기록하고, 도 1을 참조하여 전술한 바와 같이 텍스트 열을 선으로 둘러쌌다. 이렇게 하여, 사용자는 텍스트 열이 특정 기능과 연관되어 있다는 표시로서 기기(100 또는 200)에서 동작 가능한 광학 문자 인식(OCR) 시스템에 의해 인식될 수 있는 그래픽 요소 아이콘을 생성하였다. 본 발명의 실시예에서, 텍스트 열은 기록 가능한 표면(600)에 미리 인쇄되거나 기기(100 또는 200)의 사용자에 의해 기록될 수 있다는 것에 유의하여야 한다. 본 발명의 실시예에서, 그래픽 요소 아이콘(예를 들어, 도면부호 601)을 인식하면, 기기(100 또는 200)는 그것과 관련된 기능을 자동으로 액세스한다. 본 발명의 실시예에서, 텍스트 열(601)의 위치 정보[예를 들어, 기록 가능한 표면(600)의 마킹 패턴의 부호화된 것]는 기기(100 또는 200)에 의해 기록되고 그것과 연관된 기능과 함께 저장된다. 따라서, 이 기능을 계속적으로 호출하기 위해서, 사용자는 광 검출기(42)가 마킹의 패턴을 검출할 수 있도록 기기(100 또는 200)를 위치한다. 다시 말해, 후속하는 기록(writing)에 대한 선택과 관련하여, 기기(100 또는 200)는 기록을 식별하기 위해 텍스트 열 자체가 아니라 위치 정보를 판독한다.
본 발명의 실시예에서, 단어 "Buy"는 기기(100 또는 200)의 거래 처리 기능의 액세스를 개시한다. 일 실시예에서, 거래 기능이 액세스되면, 기기(100 또는 200)에 의해 [예를 들어, 오디오 출력 장치(36)를 사용하여] 음성 프롬프트를 생성 할 수 있으며, 음성 프롬프트는 사용자에게 거래 항목을 확인할 것을 요구한다. 예를 들어, 기기(100 또는 200)는 음성 프트, "무엇을 구매하시겠습니까?"를 생성할 수 있다. 응답으로, 사용자는 기기(100 또는 200)를 사용하여 기록 가능한 표면(600) 상에 제2 텍스트 열(602)[예를 들어, 제목 "War and Peace(전쟁과 평화)"]을 쓸 수 있다. 기기(100 또는 200)는 다시 OCR 시스템을 사용하여 사용자가 구매하고자 하는 항목을 인식한다. 일 실시예에서, 기기(100 또는 200)는 제목 "War and Peace"를 메모리 유닛(48)에 저장한다. 본 발명의 실시예에서, 기기(100 또는 200)는 그런 다음 검색(예를 들어, 인터넷 검색 엔진을 통한 검색)을 개시하여 사용자에 의해 확인된 항목을 찾고, 가능하면 그 항목의 판매자를 찾는다.
본 예에서, 인터넷 검색은 "War and Peace"가 Amazon.com®을 통해 판매되고 있다는 제1 결과를 반환할 수 있다. 본 예에서, 기기(100 또는 200)는 사용자에게 그 책을 판매하는 곳에서 입수할 수 있다는 알리는 다른 음성 프롬프트를 생성할 수 있다. 예를 들어, 기기(100 또는 200)는 "War and Peace(전쟁과 평화), 레오 톨스토이의 소설, $10.95에 아마존닷컴에서 입수 가능. 이 항목의 구매를 원하면 단어 'Buy' 또는 'War and Peace' 옆에 체크마크를 표시하세요."라는 음성 프롬프트를 생성할 수 있다. 사용자가 그 책을 해당 가격에 해당 판매자로부터 사기를 원하면, 사용자는 체크마크(예를 들어, 도면부호 603) 또는 다른 표시를 단어 "Buy" 옆에 둘 수 있다. 사용자가 그 책을 해당 가격 또는 해당 판매자로부터 사기를 원하지 않으면, 사용자는 기록 가능한 표면(600)에 임의의 마킹을 만들어 간단히 거절할 수 있다.
본 발명의 실시예에서, 일부 단어, 텍스트 열, 마크, 심볼, 또는 다른 그래픽 요소는 OCR을 사용하여 전혀 처리될 필요가 없다는 것에 유의하여야 한다. 예를 들어, 기기(100 또는 200)로부터의 음성 프롬프트에 응답하여 사용자에 의해 특정 단어, 그래픽 요소 등이 생성될 수 있으며, 펜 기기는 사용자에게 특정 단어 또는 심볼(예를 들어, 체크마크)를 기록할 것을 촉구하고, 이어서 사용자가 기록한 것의 위치 정보를 연관관계(예를 들어, 음성 프롬프트)와 함께 저장한다. 사용자에 의한 후속하는 해당 단어 또는 심볼의 선택은, 기록 가능한 표면(600)의 포함되어 있는 위치 정보에 의해 인식된다. 예를 들어, 기기(100 또는 200)는 "단어 'Dog(개)'을 쓰세요"라는 음성 프롬프트를 생성할 수 있다. 응답으로, 사용자는 단어 "Cat(고양이)"을 쓸 수 있다. 하지만, 기기(100 또는 200)는 사용자에 의해 생성된 단의 위치 정보를 저장할 것이다. 후속하는 단어 "Cat"의 사용자 선택으로, 기기(100 또는 200)는 그 위치 정보를 인식하고, 단어 "Cat"의 텍스트 열을 인식하는 것이 아니라 그 위치 정보의 의미를 단어 "Dog"과 연결시킨다. 이 기능성을 "프롬프트와 신뢰(prompt and believe)" 라고 한다.
본 발명의 실시예에서, 사용자가 쓰기를 촉구받은 단어의 기록을 끝냈을 때, 기기(100 또는 200)는 예를 들어, 움직임이 없는 것(inactivity)(예를 들어, 사용자가 더 이상 기록하지 않음)을 데이터 입력 종료 이벤트로서 인식함으로써 사용자가 기록을 종료하였다는 사실은 인식한다. 이런 식으로, "타임아웃(timeout)" 메커니즘을 데이터 입력의 끝을 인식하기 위해 사용할 수 있다. 다른 종료 이벤트는, 글자에 밑줄을 긋거나 글자를 원으로 둘러싸는 것일 수 있다. 종료 이벤트에 대한 추가적인 예는 공동 양도된 미국특허출원으로서, 대리인 사건 번호 제LEAP-P0320호이며, 제임스 마그그라프(James Marggraff) 등에 의해 발명의 명칭 "TERMINATION EVENTS"으로 2005년 1월 12일에 출원된, 출원번호 제11/035,003호에 기술되어 있으며, 그 기재내용 전부는 본 명세서에 통합된다.
본 발명의 실시예의 프롬프트 및 신뢰 특징은 사용자와 기기(100 또는 200) 사이에 상호 이해되는 의미를 가지는 그래픽 요소의 생성을 가능하게 한다. 중요한 것은, 사용자에 의해 생성되는 단어나 문자에 대해 OCR 처리가 수행되지 않는다는 것을 이해하여야 한다. 프롬프트 및 신뢰 기능을 사용하여 생성된 그래픽 요소는 다른 애플리케이션, 옵션, 메뉴, 기능 등의 레이블(label)과 연관될 수 있으며, 그것에 의해 (예를 들어, 탭핑에 의한) 프롬프트 및 신뢰 그래픽 요소의 선택은 상기한 것 중 어느 것을 호출할 수 있다. OCR 처리에 대한 요구를 감소시키는 것은 기기(100 또는 200)에 대한 계산 수요를 낮추고, 따라서 사용자 인터페이스의 응답성(responsiveness)을 향상시킨다.
본 발명의 실시예에서, 기기(100 또는 200)는 사용자가 텍스트 열 옆에 체크마크를 하도록 미리 정해진 기간 동안 기다릴 수 있다. 미리 정해진 기간 내에 사용자가 표시를 하지 않으면, 기기(100 또는 200)는 거래 옵션의 메뉴를 제공하는 것과 같은 추가적인 음성 프롬프트를 생성할 수 있다. 예를 들어, 기기(100 또는 200)는 음성 프롬프트, "이 항목에 대한 최저가를 찾고 싶으면, 단어 'Buy" 옆에 체크마크를 그리세요."를 생성할 수 있다. 본 발명의 실시예는, 선호하는 지불 방법, 선호하는 발송 발법, 선호하는 소매상인, 선호하는 발송 주소 등과 같은 다른 거래 옵션을 제공할 수 있다는 것에 유의하여야 한다.
또한 일부 거래 품목은 주문 옵션(예를 들어, 크기, 색상 등)을 제공할 수 있다는 것에도 유의하여야 한다. 따라서, 본 발명의 실시예에서, 기기(100 또는 200)는 "얼마나 많이 구매하시를 원하세요?", "어떤 색상을 원하세요?" "어떤 크기를 원하세요?"와 같은 추가적인 음성 프롬프트를 생성할 수 있다. 응답으로, 사용자는 구매하고자 하는 수량, 색상, 크기 등을 기록 가능한 표면(600) 상에 쓸 수 있다. 이 사용자 입력은 OCR을 사용하여 기기(100 또는 200)에 의해 인식될 것이다. 또한 본 발명의 실시예에서, 프롬프트는 기기(100 또는 200)에 의해 생성되는 음성 프롬프트 대신에 또는 이에 더해 디스플레이 기기(40)에 표시되는 시각적인 프롬프트도 포함할 수 있다는 것도 유의하여야 한다.
본 발명의 실시예에서, 사용자는 예를 들어 전술한 바와 같이 선으로 둘러싸인 그래픽 요소 아이콘(604)(예를 들어, 글자 Op)을 기록함으로써 옵션 메뉴를 액세스할 수 있다. 응답으로, 기기(100 또는 200)의 거래 기능은 제1 거래 옵션 카테고리(예를 들어, "가격으로 분류")의 음성 프롬프트를 생성할 수 있다. 사용자가 이 서브카테고리를 구성(configure)하기를 원하면, 사용자는 전술한 바와 같이 표시를 만들 수 있다. 사용자가 다른 옵션을 구성하기를 원하면, 사용자는 단지 다음 음성 프롬프트가 생성될 때까지 기다리거나, 그래픽 요소 아이콘(604)을 다시 탭핑할 수 있다. 본 발명의 실시예에서, 거래 기능에 대한 사용자 구성은 메모리에 저장되고 다음 트랙잭션이 수행될 때 나중에 액세스될 수 있다.
도 7은 본 발명의 실시예에 따른 인식된 텍스트를 사용하여 거래를 수행하기 위한 컴퓨터로 구현되는 프로세스(700)의 흐름도이다. 도 7의 단계 710에서, 전자적인 상호작용 펜 기기를 사용하여 기록 가능한 표면 상의 텍스트 열을 인식한다. 전술한 바와 같이, 본 발명의 실시예에서, 기기(100 또는 200)는 광 검출기를 사용하여 텍스트 열을 인식하고 프로세스(32)에 의해 실행되는 OCR 처리를 하기 위해 동작 가능하다.
도 7의 단계 720에서, 텍스트 열에 관련된 전자적인 상호작용 펜 기기의 기능을 자동으로 액세스한다. 도 5를 참조하여 앞서 설명한 바와 같이, 사용자 인터페이스는 그래픽 요소 아이콘에 의해 구현될 때 기기(100 또는 200) 내에서 실행되는 다수의 소프트웨어 애플리케이션을 호출하는 방법, 그리고 그것과 상호작용하는 방법을 또한 제공한다. 본 발명의 실시예에서, 텍스트 열 "Buy"의 인식에 응답하여 기기(100 또는 200)는 거래를 수행하기 위한 소프트웨어 기능을 자동으로 액세스한다. 본 발명의 실시예에서, "Purchase(구매하다)" 등의 다른 텍스트 열을 사용하여 거래 기능을 호출할 수도 있다는 것에 유의하여야 한다. 본 발명의 실시예에서, 모든 언어로 기록되는 복수의 유사한 의미를 갖는 텍스트 열[예를 들어, "Buy(사다)", "Purchase(구매하다)", "Shop(쇼핑하다)", "Obtain(취득하다)" 등]이 기기(100 또는 200)의 거래 기능을 호출할 수 있으며, 따라서 거래 기능을 호출하는, 사용자에게 더욱 친밀한 인터페이스를 제공할 수 있다.
도 7의 단계 730에서, 기능 액세스에 응답하여 거래 프로세스를 개시한다. 전술한 바와 같이, 거래 기능이 액세스되면, 거래 프로세스가 개시되어, 기기(100 또는 200)는 사용자와 상호작용하여 트랙잭션 항목과 사용자가 실행할 다른 옵션을 식별한다. 단계 730은 원격지의 서버나 네트워크과의 유선 또는 무선 통신을 활용할 수 있다.
도 8a는 본 발명의 실시예에 따른 거래 시스템(800)의 블록도이다. 도 8a에서, 기록 가능한 표면(예를 들어, 도면부호 600)이 전자적인 상호작용 시스템[예를 들어, 기기(100)]에 의해 스캐닝된다. 일 실시예에서, 기기(100)는 링크(802)를 통해 전자기기(820)(예를 들어, 셀룰러폰, WiFi 허브, 무선 네트워크 허브 등)와 통신할 수 있도록 연결되어 있고, 이번에는 링크(803)를 통해 인터넷(830)과 통신할 수 있도록 연결되어 있다. 다르게는, 소매상인(850)은 링크(806)를 통해 인터넷(830)과 직접 통신할 수 있도록 연결될 수 있다. 또, 인터넷 검색 엔진(860)은 링크(807)를 통해 인터넷(830)과 통신 가능하게 연결되어 있다.
본 발명의 실시예에서, 기기(100)를 사용하여 전술한 바와 같이 거래 프로세스를 개시하여기록 가능한 표면(600) 상에 기록된 텍스트 열을 인식할 수 있다. 응답으로, 기기(100 또는 200)의 거래 기능이 자동으로 호출된다. 일 실시예에서, 사용자는 구매할 거래 항목을 식별한다. 기기(100 또는 200)의는 그런 다음 예를 들어 인터넷 검색 엔진(860)을 사용하여 검색을 개시하여 거래 항목의 판매자를 식별한다. 본 실시예에서는 인터넷 검색 엔진을 사용하는 것을 설명하였으나, 본 발명의 다른 실시예에서는 이 기능이 예를 들어 레지스트리(registry)(840)에 의해 수행될 수 있다. 일 실시예에서, 거래를 수행할 판매자[예를 들어, 소매상인(850)]을 식별할 때,소매상인(850)나 레지스트리(840) 중 어느 하나와 인터넷(830)을 통한 통신이 개시된다. 그 후 거래[예를 들어, 인쇄된 매체(810)로부터 인식된 상품이나 서비스의 구매]을 개시하는 메시지가 전달된다.
일 실시예에서, 기기(100)는 예를 들어 송수신기(예: 셀룰러 통신기기 또는 기타 무선 통신기기)를 사용하여 인터넷(830)과 직접 통신한다. 다른 실시예에서, 기기(100)는 예를 들어 블루투스(Blutooth) 가능한 통신기기, 무선 LAN 통신기기 등을 사용하여 전자기기(820)와 직접 통신한다. 전자기기(820)는 예를 들어 인터넷(830)과 통신할 수 있도록 연결되어 있는 셀룰러폰, 무선 네트워크 허브일 수 있다.
본 발명의 실시예에서, 기기(100)는 거래 항목을 구매하기 위해 소매상인(850)과의 거래를 개시한다. 이것은 사용자 정보(예를 들어, 성명, 주소, 및 지불 정보)와 추가적인 거래 정보(예를 들어, 선호하는 배송 방법, 색상, 수향, 또는 거래 항목의 다른 파리마터)가 소매상인(850)에게 전달되는 일련의 불연속적인 통신을 포함한다. 일 실시예에서, 기기(100)는 사용자 성명 및 지불 정보와 같은 계정 정보는 물론 기기(100)의 고유 등록번호를 저장하는 데이터베이스를 포함할 수 있다. 본 발명의 실시예에서, 이 정보는 거래를 완결이 용이하도록 소매상인(850)에 의해 액세스될 수 있다.
본 발명의 다른 실시예에서, 거래는 제3 중개자(intermediary)[예를 들어, 레지스트리(840)]를 통해 수행될 수 있다. 본 발명의 실시예에서, 레지스트리(840)는 기기(100)의 각 사용자에 대한 서비스로서 유지되어 있는 복수의 사용자 계정(예를 들어, 도면부호 841)을 포함할 수 있다. 일 실시예에서, 각 기기(100)는 레지스트리(840)에 대한 기기를 식별하는 데 사용되는 고유 등록번호를 자신의 로컬 데이터베이스에 저장한다. 이 정보를 사용하여, 레지스트리(840)는 예를 들어 사용자 성명, 주소, 지불 정보 등과 같은 추가적인 사용자 계정 정보를 액세스할 수 있다 레지스트리(840)는 거래를 돕기 위해 이 정보를 소매상인(850)에 전달한다.
도 8b는 본 발명의 실시예에 따른 사용자 계정을 생성하기 위한 컴퓨터로 구현되는 방법(890)의 흐름도이다. 단계 891에서, 개별 사용자 계정에 전자적인 상호작용 기기를 고유하게 등록한다. 본 발명의 실시예에서, 각각의 상호작용 전자기기(예를 들어, 100 또는 200)은 고유 식별 번호를 저장한다. 본 발명의 실시예에서, 이 번호는 사용자가 일반적으로 액세스할 수 없는 숨겨진 장소(hidden location)에 저장될 수 있다. 또, 이 번호는 인증받지 않은 사용자가 어떤 번호인지를 결정할 수 없도록 암호화되거나 스크램블될 수 있다. 본 발명의 실시예에서, 고유 식별번호는 사용자 계정과 함께 사용되어 기기(100 또는 200)를 사용하여 수행되는 거래를 보안을 강화시킨다. 예를 들어, 인증받지 않은 사용자가 다른 사용자의 계정을 사용하여 거래의 개시를 시도하면, 소매상인 또는 제3 레지스트리는 진행하기 전에 제공된 기기(100 또는 200)의 고유 식별번호를 요구할 수 있다. 식별 번호가 제공되지 않으면, 이 시점에서 거래를 종결될 것이다.
단계 892에서, 지불 시스템을 개별 사용자 계정과 연관시킨다. 본 발명의 실시예에서, 기기(100 또는 200)를 사용하여 거래 항목의 구매를 용이하게 하기 위해 사용자의 신용 카드 번호, 은행 계정 또는 기타 지불 시스템을 사용자의 계정과 연관시킨다. 따라서, 거래를 완결하기 위해, 소매상인은 구매하는 상품 또는 서비 스에 대해 지불을 안전하게 하기 위해 이 지불 정보를 액세스할 것이다.
단계 893에서, 복수의 개별 사용자 계정을 포함하는 레지스트리에 개별 사용자 계정을 저장한다. 본 발명의 실시예에서, 사용자 계정은 사용 계정의 제3자 레지스트리(예를 들어, 도 8의 도면부호 840)에 저장될 수 있다. 하지만, 본 발명의 실시예에서는 이 시스템만으로 한정되는 것은 아니다. 본 발명의 다른 실시예에서, 사용자 계정은 기기(100 또는 200)에 저장되거나 소매상인(예를 들어, 도 8의 도면부호 850)과 함께 저장될 수 있다
도 9a 및 도 9b는 본 발명의 실시예에 따른 거래를 수행하기 위한 컴퓨터로 구현되는 프로세스(900)의 흐름도이다. 프로세스(900)는, 도 7을 참조하여 앞서 설명한 바와 같이 기기(100 또는 200)를 사용한 그래픽 요소 아이콘의 인식에 응답하여 자동으로 액세스되는 기능이라는 것을 알 수 있다. 도 9a의 단계 905에서, 어떤 항목을 구매할 것인지를 묻는 프롬프트를 생성한다. 본 발명의 실시예에서, 프롬프트는 음성 및/또는 시각적인 것일 수 있다. 일 실시예에서, 프롬프트는 전자 기기(820)를 통해 사용자에게 제공될 수 있다. 도 9a의 단계 910에서, 사용자 입력이 인식되었는지 여부를 결정한다. 예를 들어, 본 발명의 실시예에서, 사용자가 기록 가능한 표면(600)에 기록하면, 기기(100 또는 200)는 사용자가 기록한 것이 기기(100 또는 200)에 의해 정확하게 해석되었다는 것을 나타내기 위해 음성 및/또는 시각 프롬프트를 생성한다. 본 발명의 실시예에서, 텍스트 열이 기기(100 또는 200)에 의해 단어로 인식되지 않는 경우, OCR 처리는 텍스트 열의 각 글자를 읽을 수 있다.
도 9a의 단계 915에서, 메모리에 구매될 항목의 명칭을 저장하고 해당 항목에 대한 검색을 개시한다. 본 발명의 실시예에서, 인터넷 검색은 사용자에 의해 식별된 거래 항목의 명칭을 검색 파라미터로 사용한다. 또한, 본 발명의 실시예에서, 거래 항목의 명칭은 소매상인의 개별 웹사이트에서의 검색 파라미터로 사용된다. 예를 들어, 사용자가 "War and Peace(전쟁과 평화)"라는 책을 사고자 하면, 책 제목이 예를 들어 Amazon.com에서의 검색 파라미터로 사용된다.
도 9a의 단계 920에서, 사용자의 거래 기호(transaction preference)가 작성되어 있는지 여부를 판정한다. 예를 들어, 사용자가 선호하는 소매상인이 있는 것으로 기기(100 또는 200)를 구성하였다면, 검색으로부터 반환된 제1 결과는 해당 소매상인의 견적이 될 것이다. 사용자가 특정 소매상인과 거래하는 것을 선호한다고 표시하였으면, 그 특정 소매상인에 대한 검색 결과를 기기(100 또는 200)의 사용자에게 먼저 제공할 것이다. 따라서, 프로세스(900)는 단계 925에서 계속한다. 사용자는 기기(100 또는 200)로 다른 거래 파라미터를 또한 구성하였을 수 있다는 것을 알 것이다. 예들 들어, 사용자는 식별된 거래 항목에 대해 최저가에서 최고가 순으로 결과를 저장할 것을 표시하였을 수 있다.
도 9a의 단계 925에서, 저장된 사용자 기호가 기기(100 또는 200)의 사용자가 특정 소매상인을 선호한다는 것을 나타내면, 해당 소매상인으로부터의 검색 결과를 먼저 제시한다. 본 발명의 실시예에서, 프로세스(900)는 그런 다음 단계 935에서 계속한다.
도 9a의 단계 930에서, 사용자가 제시된 검색 결과에 따라 거래 항목을 구매 할 것인지 여부를 결정한다. 본 발명의 실시예에서, 사용자가 첫 번째 검색 결과가 만족스러운 것으로 표시하면(예를 들어, 기록 가능한 표면(600) 상에 체크마크나 다른 표시를 하면), 프로세스(900)는 단계 945에서 계속한다. 사용자로부터의 지시가 기기(100 또는 200)에 의해 검출되지 않으면, 프로세스(900)는 단계 940에서 계속한다.
도 9b의 단계 940에서, 사용자가 해당 소매상인이 제시하는 조건(term)에 따라서 거래 항목의 구매에 흥미가 없음을 표시하면, 검색의 다음 결과를 제시한다. 이 시점에서, 프로세스(900)는 단계 935로 돌아간다.
도 9b의 단계 945에서, 현재의 소매상인과의 구매를 수락한다는 사용자의 표시에 응답하여, 사용자 계정 정보를 액세스한다. 전술한 바와 같이, 본 발명의 실시예에서, 사용자 계정 정보는 상기 소매상인의 웹사이트에서 또는 사용자 계정의 제3자 레지스트리에서 기기(100 또는 200)에 저장될 수 있다. 따라서, 사용자가 구매 조건을 수락한다고 표시하면, 기기(100 또는 200)는 사용자 계정 정보를 액세스하고 그것을 인터넷(830)을 통해 소매상인에게 전송할 수 있다. 다른 실시예에서, 기기(100 또는 200)에 의해 사용자 성명 및 레지스트리(840)이나 소매상인(850) 측의 사용자 계정에 대한 패스워드가 전송되어 사용자 계정 정보의 액세스를 용이하게 한다. 본 발명의 실시예에서, 이것은 사용자에게 투명하게 수행될 수 있다.
도 9b의 단계 950에서, 거래를 완료한다. 전술한 바와 같이, 몇몇 거래에서 사용자로부터의 추가적인 입력이 필요할 수 있다. 예를 들어, 사용자는 거래 항 목에 적용하고자 하는 수량, 크기, 색상 또는 기타 옵션을 특정하여야 할 수 있다. 따라서, 본 발명의 실시예에서, 기기(100 또는 200)는 일련의 프롬프트(예를 들어, 음성 및/또는 시각저인 프롬프트)를 생성할 수 있다. 예를 들어, 기기(100 또는 200)는 다음과 같은 프롬프트를 생성할 수 있다:
"어떤 색상을 사고 싶으세요?"
"몇 개를 원하세요?"
"어떤 크기를 원하세요?"
이러한 프롬프트가 끝난 다음에 해당 카테고리 내에서 가능한 옵션의 리스트(예를 들어, 빨간색, 파랑색, 노란색, 녹색, 갈색, 검은색 등)가 제공된다. 본 발명의 실시예에서, 이 정보는 일련의 불연속적인 통신으로 전달될 수 있다. 또한 사용자가 기호를 표시하지 않았다면, 선호하는 발송 방법이 있는지를 묻는 프롬프트가 생성될 수 있다.
도 9b의 단계 955에서, 사용자가 다른 것을 구매하기를 원하는지 여부를 결정한다. 사용자가 다른 것을 구매하기를 원하면, 프로세스는 단계 905에서 계속한다. 사용자가 다른 것을 구매하기를 원하지 않으면, 프로세스(900)는 종료된다.
본 발명의 실시예는, 사용자가 펜 기반 컴퓨터 시스템과 거래를 수행할 수 있는 간단한 인터페이스를 제공할 수 있다. 또한 본 발명의 실시예는, 종래의 랩톱 컴퓨터보다 더욱 휴대가 간편하고, 일반적으로 예를 들어 셀룰러폰이나 핸드헬드 컴퓨터 시스템에서 발견되는 인터페이스보다 한층 사용자에게 친숙한 인터페이 스를 제공할 수 있다. 결과적으로, 본 발명의 실시예에서는 더욱 향상된 사용자 편의를 실현할 수 있다.
이상에서 본 발명의 실시예를 설명하였다. 본 발명은 특정한 실시예로 설명하였지만, 본 발명은 그러한 실시예로 한정되는 것으로 해석되어서는 안 되며, 이하의 특허청구범위에 따라 해석되어야 한다는 것을 알아야 한다.

Claims (28)

  1. 인식된 텍스트를 사용하여 거래를 수행하는 방법으로서,
    전자적인 상호작용 펜 기기 또는 광학 유닛 기기를 사용하여 기록 가능한 표면 상의 텍스트 열을 인식하는 단계;
    상기 텍스트 열과 관련된 상기 기기의 기능을 자동으로 액세스하는 단계; 및
    상기 기능의 액세스에 응답하여, 거래 프로세스(transaction process)를 개시하는 단계
    를 포함하는 거래 수행 방법.
  2. 제1항에 있어서,
    상기 기기는 상기 거래 프로세스를 개시하기 위해 사용되는 것을 특징으로 하는 거래 수행 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 기기에서 음성 출력을 제공하는 단계를 더 포함하며,
    상기 음성 출력은 상기 기능과 관련되어 있는 것을 특징으로 하는 거래 수행 방법.
  4. 제1항에 있어서,
    상기 전자적인 상호작용 펜 기기 또는 상기 광학 유닛 기기를 사용하여 구매될 트래잭션 항목을 식별하는 제2 텍스트 열을 인식하는 단계를 더 포함하는 거래 수행 방법.
  5. 제4항에 있어서,
    상기 트랙잭션 항목의 판매자를 식별하는 검색 프로세스를 실행하거나 개시하는 단계를 더 포함하고,
    인터넷을 사용하여 상기 거래 항목의 판매자를 식별하는 것을 특징으로 하는 거래 수행 방법.
  6. 제4항에 있어서,
    상기 전자적인 상호작용 펜 기기 또는 상기 광학 유닛 기기를 사용하여 상기 거래 항목을 구매하기 위한 상기 사용자로부터의 지시를 인식하는 단계; 및/또는
    상기 거래를 완료하기 전에 적어도 하나의 거래 옵션을 표시하는 단계; 및/또는
    상기 거래 항목의 음성 확인(audible confirmation)을 생성하는 단계
    를 더 포함하는 거래 수행 방법.
  7. 제1항에 있어서,
    상기 기록 가능한 표면은 인쇄된 위치 정보에 대한 부호화된 패턴을 포함하 는 거래 수행 방법.
  8. 제1항에 있어서,
    상기 텍스트 열을 둘러싸는 경계 영역을 생성하는 단계;
    상기 기능을 상기 경계 영역과 연관시키는 단계; 및
    상기 기능의 지속적인 이용을 가능하게 하기 위해 상기 기능과 상기 경계 영역의 연관관계를 저장하는 단계
    를 더 포함하는 거래 수행 방법.
  9. 제1항에 있어서,
    상기 기기를 개별 사용자 계정에 고유하게 등록하는 단계;
    지불 시스템을 상기 개별 사용자 계정과 연관시키는 단계;
    상기 거래 동안에 상기 개별 사용자 계정으로부터 정보를 전달하는 단계;
    상기 개별 사용자 계정을 복수의 개별 사용자 계정을 포함하는 레지스트리에 저장하는 단계; 및
    상기 개별 사용자 계정을 상기 기기의 메모리 소자에 저장하는 단계
    를 더 포함하는 거래 수행 방법.
  10. 전자적인 상호작용 펜 기기로 인식 가능한, 위치 정보가 포함되어 있는 부호화된 패턴을 포함하는 기록 가능한 표면;
    상기 기록 가능한 표면 상의 텍스트 열을 인식하고, 거래 프로세스를 개시하는 기능을 자동으로 액세스하기 위한 전자적인 상호작용 펜 기기; 및
    상기 거래 프로세스를 개시하는 메시지를 전달하기 위해 상기 전자적인 상호작용 펜 기기로 액세스할 수 있는 통신 네트워크
    를 포함하는 거래 시스템.
  11. 제10항에 있어서,
    상기 전자적인 상호작용 펜 기기는 또한 상기 기능에 관련된 음성 출력을 제공하는 것을 특징으로 하는 거래 시스템.
  12. 제10항에 있어서,
    상기 전자적인 상호작용 펜 기기는 구매될 거래 항목을 식별하는 제2 텍스트 열을 인식하는 것을 특징으로 하는 거래 시스템.
  13. 제12항에 있어서,
    상기 전자적인 상호작용 펜 기기는 또한 상기 거래 항목의 판매자를 식별하는 검색 프로세스를 개시하는 것을 포함하는 거래 시스템.
  14. 제13항에 있어서,
    상기 통신 네트워크는 무선 통신 네트워크를 포함하고,
    상기 전자적인 상호작용 펜 기기는 상기 무선 통신 네트워크를 통해 상기 인터넷에 액세스하여 상기 거래 항목의 판매자를 식별하는 것을 특징으로 하는 거래 시스템.
  15. 제12항에 있어서,
    상기 전자적인 상호작용 펜 기기는 상기 거래 항목을 구매하기 위한 상기 사용자의 지시를 인식하는 것을 특징으로 하는 거래 시스템.
  16. 제12항에 있어서,
    상기 전자적인 상호작용 펜 기기는 상기 거래를 완료하기 전에 적어도 하나의 트랙잭션 옵션을 표시하는 것을 특징으로 하는 거래 시스템.
  17. 제12항에 있어서,
    상기 전자적인 상호작용 펜 기기는 상기 거래 항목의 음성 확인(audible confirmation)을 생성하는 것을 특징으로 하는 거래 시스템.
  18. 제10항에 있어서,
    상기 기록 가능한 표면에는, 위치 정보의 부호화된 패턴이 내장되어 있는 것을 특징으로 하는 거래 시스템.
  19. 제10항에 있어서,
    상기 전자적인 상호작용 펜 기기는 상기 텍스트 열을 둘러싸는, 상기 기록 가능한 표면 상의 경계 영역을 생성하고, 상기 기능의 지속적인 이용을 가능하게 하기 위해 상기 기능과 상기 경계 영역의 연관관계를 저장하기 위해 사용되는 것을 특징으로 하는 거래 시스템.
  20. 제10항에 있어서,
    개별 사용자 계정을 더 포함하고,
    상기 전자적인 상호작용 펜 기기는 상기 개별 사용자 계정과 함께 고유하게 등록되며,
    상기 개별 사용자 계정은 상기 개별 사용자 계정과 관련되어 있는 지불 시스템을 포함하고,
    상기 통신 네트워크는 상기 개별 사용자 계정으로부터의 정보를 상기 거래 동안에 상기 거래 항목의 판매자에게 전달하는 것을 특징으로 하는 거래 시스템.
  21. 제20항에 있어서,
    상기 개별 사용자 계정은 복수의 개별 사용자 계정을 포함하는 레지스트리(rgistry)에 저장되어 있는 것을 특징으로 하는 거래 시스템.
  22. 제20항에 있어서,
    상기 개별 사용자 계정은 상기 전자적인 상호작용 펜 기기의 메모리 소자에 저장되어 있는 것을 특징으로 하는 거래 시스템.
  23. 기록 가능한 표면 상에 마킹을 하기 위한 필기 도구(writing tool);
    상기 기록 가능한 표면 상에 기록된 텍스트 열을 검출하기 위해 상기 기록 가능한 표면에 대한 상기 필기 도구의 위치를 검출하기 위한 광학 유닛(optical unit);
    상기 광학 유닛에 연결되어 있는 프로세서; 및
    상기 프로세서에 연결되어 있는 메모리
    를 포함하고,
    상기 메모리는, 실행될 때, 인식된 텍스트를 사용하여 거래를 수행하는 방법을 구현하는 명령어를 저장하며,
    상기 방법은 상기 제1항, 제4항, 및 제6항 내지 제9항 중 어느 한 항의 단계들을 포함하는 것을 특징으로 하는 상호작용 펜 기기.
  24. 제23항에 있어서,
    오디오 출력 기기를 더 포함하며,
    상기 방법은 상기 오디오 출력 기기로부터 음성을 출력하는 단계를 더 포함하고, 상기 음성 출력은 상기 기능과 관련이 있는 것을 특징으로 하는 상호작용 펜 기기.
  25. 제23항에 있어서,
    상기 프로세서에 연결되어 있는 무선 통신 기기를 더 포함하며,
    상기 검색 프로세서를 실행하는 단계는, 상기 개시에 응답하여 상기 무선 통신 기기를 사용하여 상기 상호작용 펜 기기를 상기 인터넷과 통신할 수 있도록 연결하는 것을 특징으로 하는 상호작용 펜 기기.
  26. 제23항에 있어서,
    상기 방법은 상기 음성 출력 기기를 사용하여 상기 거래 항목의 음성 확인을 생성하는 것을 특징으로 하는 상호작용 펜 기기.
  27. 제23항에 있어서,
    상기 광학 유닛은, 상기 기록 가능한 표면 상에 인쇄된 위치 정보의 부호화된 패턴의 인식을 인식하는 것을 더 포함하는 상호작용 펜 기기.
  28. 제8항 또는 제23항에 있어서,
    상기 방법은 상기 필기 도구 또는 상기 상호작용 펜 기기를 사용하여 상기 경계 영역을 생성하는 단계를 더 포함하는 상호작용 펜 기기.
KR1020060029617A 2005-11-03 2006-03-31 인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및시스템 KR100815536B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/267,786 US20060125805A1 (en) 2004-03-17 2005-11-03 Method and system for conducting a transaction using recognized text
US11/267,786 2005-11-03

Publications (2)

Publication Number Publication Date
KR20070048106A true KR20070048106A (ko) 2007-05-08
KR100815536B1 KR100815536B1 (ko) 2008-03-20

Family

ID=36577261

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060029617A KR100815536B1 (ko) 2005-11-03 2006-03-31 인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및시스템

Country Status (7)

Country Link
US (1) US20060125805A1 (ko)
EP (1) EP1783589A1 (ko)
JP (1) JP2007128486A (ko)
KR (1) KR100815536B1 (ko)
CN (1) CN1862590A (ko)
CA (1) CA2538948A1 (ko)
WO (1) WO2007055718A2 (ko)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7916124B1 (en) 2001-06-20 2011-03-29 Leapfrog Enterprises, Inc. Interactive apparatus using print media
US7133563B2 (en) 2002-10-31 2006-11-07 Microsoft Corporation Passive embedded interaction code
US7009594B2 (en) * 2002-10-31 2006-03-07 Microsoft Corporation Universal computing device
US7831933B2 (en) 2004-03-17 2010-11-09 Leapfrog Enterprises, Inc. Method and system for implementing a user interface for a device employing written graphical elements
US7853193B2 (en) * 2004-03-17 2010-12-14 Leapfrog Enterprises, Inc. Method and device for audibly instructing a user to interact with a function
US7826074B1 (en) 2005-02-25 2010-11-02 Microsoft Corporation Fast embedded interaction code printing with custom postscript commands
US7421439B2 (en) 2005-04-22 2008-09-02 Microsoft Corporation Global metadata embedding and decoding
US7400777B2 (en) 2005-05-25 2008-07-15 Microsoft Corporation Preprocessing for information pattern analysis
US7729539B2 (en) 2005-05-31 2010-06-01 Microsoft Corporation Fast error-correcting of embedded interaction codes
US7580576B2 (en) * 2005-06-02 2009-08-25 Microsoft Corporation Stroke localization and binding to electronic document
US7922099B1 (en) 2005-07-29 2011-04-12 Leapfrog Enterprises, Inc. System and method for associating content with an image bearing surface
US7817816B2 (en) 2005-08-17 2010-10-19 Microsoft Corporation Embedded interaction code enabled surface type identification
US7489819B2 (en) 2006-05-12 2009-02-10 Velosum, Inc. Systems and methods for handwritten digital pen lexical inference
US7502509B2 (en) 2006-05-12 2009-03-10 Velosum, Inc. Systems and methods for digital pen stroke correction
US8261967B1 (en) 2006-07-19 2012-09-11 Leapfrog Enterprises, Inc. Techniques for interactively coupling electronic content with printed media
KR20080097553A (ko) * 2007-05-02 2008-11-06 (주)멜파스 접촉 감지 패드를 이용하여 전자 기기의 절전 모드를해제하는 방법 및 장치
JP5451599B2 (ja) * 2007-05-29 2014-03-26 ライブスクライブ インコーポレイテッド マルチモーダルスマートペンのコンピューティングシステム
WO2008150916A1 (en) * 2007-05-29 2008-12-11 Livescribe, Inc. Enhanced audio recording for smart pen computing systems
WO2008150918A1 (en) * 2007-05-29 2008-12-11 Livescribe, Inc. Binaural recording for smart pen computing systems
WO2008150911A1 (en) * 2007-05-29 2008-12-11 Livescribe, Inc. Pen-based method for cyclical creation, transfer and enhancement of multi-modal information between paper and digital domains
US8374992B2 (en) * 2007-05-29 2013-02-12 Livescribe, Inc. Organization of user generated content captured by a smart pen computing system
WO2008150887A1 (en) 2007-05-29 2008-12-11 Livescribe, Inc. Self-addressing paper
US8638319B2 (en) 2007-05-29 2014-01-28 Livescribe Inc. Customer authoring tools for creating user-generated content for smart pen applications
US8265382B2 (en) * 2007-05-29 2012-09-11 Livescribe, Inc. Electronic annotation of documents with preexisting content
WO2008150924A1 (en) * 2007-05-29 2008-12-11 Livescribe, Inc. Animation of audio ink
US20090021495A1 (en) * 2007-05-29 2009-01-22 Edgecomb Tracy L Communicating audio and writing using a smart pen computing system
US8446297B2 (en) 2008-04-03 2013-05-21 Livescribe, Inc. Grouping variable media inputs to reflect a user session
US20090251441A1 (en) * 2008-04-03 2009-10-08 Livescribe, Inc. Multi-Modal Controller
US8944824B2 (en) * 2008-04-03 2015-02-03 Livescribe, Inc. Multi-modal learning system
US8149227B2 (en) * 2008-04-03 2012-04-03 Livescribe, Inc. Removing click and friction noise in a writing device
US20090251338A1 (en) * 2008-04-03 2009-10-08 Livescribe, Inc. Ink Tags In A Smart Pen Computing System
US9058067B2 (en) * 2008-04-03 2015-06-16 Livescribe Digital bookclip
US8446298B2 (en) * 2008-04-03 2013-05-21 Livescribe, Inc. Quick record function in a smart pen computing system
US7810730B2 (en) 2008-04-03 2010-10-12 Livescribe, Inc. Decoupled applications for printed materials
US20090251440A1 (en) * 2008-04-03 2009-10-08 Livescribe, Inc. Audio Bookmarking
US8300252B2 (en) * 2008-06-18 2012-10-30 Livescribe, Inc. Managing objects with varying and repeated printed positioning information
WO2010099224A1 (en) * 2009-02-24 2010-09-02 Adapx Inc. Systems and methods for reviewing digital pen data
WO2011008862A2 (en) * 2009-07-14 2011-01-20 Zoomii, Inc. Markup language-based authoring and runtime environment for interactive content platform
JP5649509B2 (ja) * 2011-05-10 2015-01-07 株式会社日立ソリューションズ 情報入力装置及び情報入力システム及び情報入力方法
PL3011415T3 (pl) * 2013-06-19 2019-05-31 Nokia Technologies Oy Wprowadzane elektroniczne trasowanie
US10506068B2 (en) * 2015-04-06 2019-12-10 Microsoft Technology Licensing, Llc Cloud-based cross-device digital pen pairing
US11061489B2 (en) * 2019-05-10 2021-07-13 Topoleg, Inc. Automating and reducing user input required for user session on writing and/or drawing system

Family Cites Families (90)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPQ131399A0 (en) * 1999-06-30 1999-07-22 Silverbrook Research Pty Ltd A method and apparatus (NPAGE02)
US3657812A (en) * 1970-09-28 1972-04-25 G & L Ind Inc Retractible tool holder
US3782734A (en) * 1971-03-15 1974-01-01 S Krainin Talking book, an educational toy with multi-position sound track and improved stylus transducer
NL7904469A (nl) * 1979-06-07 1980-12-09 Philips Nv Inrichting voor het lezen van een gedrukte kode en het daarvan omzetten in een audio-signaal.
US4686332A (en) * 1986-06-26 1987-08-11 International Business Machines Corporation Combined finger touch and stylus detection system for use on the viewing surface of a visual display device
US4318096A (en) * 1980-05-19 1982-03-02 Xerox Corporation Graphics pen for soft displays
US4337375A (en) * 1980-06-12 1982-06-29 Texas Instruments Incorporated Manually controllable data reading apparatus for speech synthesizers
US4464118A (en) * 1980-06-19 1984-08-07 Texas Instruments Incorporated Didactic device to improve penmanship and drawing skills
US4604065A (en) * 1982-10-25 1986-08-05 Price/Stern/Sloan Publishers, Inc. Teaching or amusement apparatus
US4604058A (en) * 1982-11-01 1986-08-05 Teledyne Industries, Inc. Dental appliance
US4627819A (en) * 1985-01-23 1986-12-09 Price/Stern/Sloan Publishers, Inc. Teaching or amusement apparatus
US4972496A (en) * 1986-07-25 1990-11-20 Grid Systems Corporation Handwritten keyboardless entry computer system
US4748318A (en) * 1986-10-22 1988-05-31 Bearden James D Wand for a hand-held combined light pen and bar code reader
US4793810A (en) * 1986-11-19 1988-12-27 Data Entry Systems, Inc. Interactive instructional apparatus and method
US5194852A (en) * 1986-12-01 1993-03-16 More Edward S Electro-optic slate for direct entry and display and/or storage of hand-entered textual and graphic information
US4787040A (en) * 1986-12-22 1988-11-22 International Business Machines Corporation Display system for automotive vehicle
GB8702728D0 (en) * 1987-02-06 1987-03-11 Price Stern Sloan Publishers Teaching & amusement apparatus
GB2207027B (en) * 1987-07-15 1992-01-08 Matsushita Electric Works Ltd Voice encoding and composing system
US4841387A (en) * 1987-12-15 1989-06-20 Rindfuss Diane J Arrangement for recording and indexing information
GB2214635B (en) * 1988-01-14 1992-06-10 Kwang Chien Fong Optical input device
US4924387A (en) * 1988-06-20 1990-05-08 Jeppesen John C Computerized court reporting system
US5007085A (en) * 1988-10-28 1991-04-09 International Business Machines Corporation Remotely sensed personal stylus
US5157384A (en) * 1989-04-28 1992-10-20 International Business Machines Corporation Advanced user interface
US5209665A (en) * 1989-10-12 1993-05-11 Sight & Sound Incorporated Interactive audio visual work
US5184003A (en) * 1989-12-04 1993-02-02 National Computer Systems, Inc. Scannable form having a control mark column with encoded data marks
JP2784825B2 (ja) * 1989-12-05 1998-08-06 ソニー株式会社 情報入力制御装置
US4991987A (en) * 1990-01-23 1991-02-12 Risdon Corporation Cosmetic container
US5059126A (en) * 1990-05-09 1991-10-22 Kimball Dan V Sound association and learning system
US5168147A (en) * 1990-07-31 1992-12-01 Xerox Corporation Binary image processing for decoding self-clocking glyph shape codes
US5128525A (en) * 1990-07-31 1992-07-07 Xerox Corporation Convolution filtering for decoding self-clocking glyph shape codes
JPH04121923A (ja) * 1990-09-12 1992-04-22 Sony Corp 電子機器のスイッチ構造
US5117071A (en) * 1990-10-31 1992-05-26 International Business Machines Corporation Stylus sensing system
GB9024526D0 (en) * 1990-11-12 1991-01-02 Eden Group Ltd Electronic display apparatus
US5260697A (en) * 1990-11-13 1993-11-09 Wang Laboratories, Inc. Computer with separate display plane and user interface processor
US5301243A (en) * 1990-12-21 1994-04-05 Francis Olschafskie Hand-held character-oriented scanner with external view area
JPH04274510A (ja) * 1991-02-28 1992-09-30 Casio Comput Co Ltd データ入力処理装置
JP3120085B2 (ja) * 1991-11-21 2000-12-25 株式会社セガ 電子装置及び情報担体
US5221833A (en) * 1991-12-27 1993-06-22 Xerox Corporation Methods and means for reducing bit error rates in reading self-clocking glyph codes
US5294792A (en) * 1991-12-31 1994-03-15 Texas Instruments Incorporated Writing tip position sensing and processing apparatus
US5314336A (en) * 1992-02-07 1994-05-24 Mark Diamond Toy and method providing audio output representative of message optically sensed by the toy
US5356296A (en) * 1992-07-08 1994-10-18 Harold D. Pierce Audio storybook
US5409381A (en) * 1992-12-31 1995-04-25 Sundberg Learning Systems, Inc. Educational display device and method
US5510606A (en) * 1993-03-16 1996-04-23 Worthington; Hall V. Data collection system including a portable data collection terminal with voice prompts
US5474457A (en) * 1993-06-09 1995-12-12 Bromley; Eric Interactive talking picture machine
US5413486A (en) * 1993-06-18 1995-05-09 Joshua Morris Publishing, Inc. Interactive book
US5572651A (en) * 1993-10-15 1996-11-05 Xerox Corporation Table-based user interface for retrieving and manipulating indices between data structures
JP3546337B2 (ja) * 1993-12-21 2004-07-28 ゼロックス コーポレイション 計算システム用ユーザ・インタフェース装置及びグラフィック・キーボード使用方法
US5561446A (en) * 1994-01-28 1996-10-01 Montlick; Terry F. Method and apparatus for wireless remote information retrieval and pen-based data entry
IL108566A0 (en) * 1994-02-04 1994-05-30 Baron Research & Dev Company L Handwriting input apparatus using more than one sensing technique
US5466158A (en) * 1994-02-14 1995-11-14 Smith, Iii; Jay Interactive book device
US5480306A (en) * 1994-03-16 1996-01-02 Liu; Chih-Yuan Language learning apparatus and method utilizing optical code as input medium
US5574519A (en) * 1994-05-03 1996-11-12 Eastman Kodak Company Talking photoalbum
JP2939119B2 (ja) * 1994-05-16 1999-08-25 シャープ株式会社 手書き文字入力表示装置および方法
US5760773A (en) * 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
US5520544A (en) * 1995-03-27 1996-05-28 Eastman Kodak Company Talking picture album
US6081261A (en) * 1995-11-01 2000-06-27 Ricoh Corporation Manual entry interactive paper and electronic document handling and processing system
TW394879B (en) * 1996-02-09 2000-06-21 Sega Enterprises Kk Graphics processing system and its data input device
US5889506A (en) * 1996-10-25 1999-03-30 Matsushita Electric Industrial Co., Ltd. Video user's environment
US6104387A (en) * 1997-05-14 2000-08-15 Virtual Ink Corporation Transcription system
US6518950B1 (en) * 1997-10-07 2003-02-11 Interval Research Corporation Methods and systems for providing human/computer interfaces
KR100276835B1 (ko) * 1997-11-06 2001-01-15 정선종 펜 인식 시스템과 그 제어 방법
US6456749B1 (en) * 1998-02-27 2002-09-24 Carnegie Mellon University Handheld apparatus for recognition of writing, for remote communication, and for user defined input templates
US6330976B1 (en) * 1998-04-01 2001-12-18 Xerox Corporation Marking medium area with encoded identifier for producing action through network
US7175079B1 (en) * 1999-05-25 2007-02-13 Silverbrook Research Pty Ltd Method and system for online purchasing
US7106888B1 (en) * 1999-05-25 2006-09-12 Silverbrook Research Pty Ltd Signature capture via interface surface
US7721948B1 (en) * 1999-05-25 2010-05-25 Silverbrook Research Pty Ltd Method and system for online payments
JP4785310B2 (ja) * 1999-05-28 2011-10-05 アノト アクティエボラーク 情報の記録に用いられる製品
JP4523746B2 (ja) * 1999-06-30 2010-08-11 シルバーブルック リサーチ ピーティワイ リミテッド バンキングの方法およびシステム
SE517445C2 (sv) * 1999-10-01 2002-06-04 Anoto Ab Positionsbestämning på en yta försedd med ett positionskodningsmönster
KR20010083437A (ko) * 2000-02-14 2001-09-01 박준수 웹 문서 분석, 문자인식 및 제스처 인식을 통한 자동 콜링서비스
US6992655B2 (en) * 2000-02-18 2006-01-31 Anoto Ab Input unit arrangement
SE0000949L (sv) * 2000-03-21 2001-09-22 Anoto Ab Positionsinformation
KR20010106754A (ko) * 2000-05-23 2001-12-07 이종운 전자펜을 이용한 온라인 서명확인 시스템
US20020023957A1 (en) * 2000-08-21 2002-02-28 A. John Michaelis Method and apparatus for providing audio/visual feedback to scanning pen users
JP4552308B2 (ja) * 2000-10-24 2010-09-29 パナソニック株式会社 超音波座標入力装置およびインタラクティブボード
US6798907B1 (en) * 2001-01-24 2004-09-28 Advanced Digital Systems, Inc. System, computer software product and method for transmitting and processing handwritten data
US7107533B2 (en) * 2001-04-09 2006-09-12 International Business Machines Corporation Electronic book with multimode I/O
MXPA03010264A (es) * 2001-05-11 2005-03-07 Shoot The Moon Products Ii Llc Sistema de lectura en libro interactivo que utiliza circuito de escudrinamiento de radiofrecuencia.
US6608618B2 (en) * 2001-06-20 2003-08-19 Leapfrog Enterprises, Inc. Interactive apparatus using print media
US7202861B2 (en) * 2001-06-25 2007-04-10 Anoto Ab Control of a unit provided with a processor
US6966495B2 (en) * 2001-06-26 2005-11-22 Anoto Ab Devices method and computer program for position determination
WO2003014867A2 (en) * 2001-08-03 2003-02-20 John Allen Ananian Personalized interactive digital catalog profiling
US20030095115A1 (en) * 2001-11-22 2003-05-22 Taylor Brian Stylus input device utilizing a permanent magnet
US7120385B2 (en) * 2002-02-06 2006-10-10 Leapfrog Enterprises, Inc. Write on interactive apparatus and method
US6915103B2 (en) * 2002-07-31 2005-07-05 Hewlett-Packard Development Company, L.P. System for enhancing books with special paper
US20040229195A1 (en) * 2003-03-18 2004-11-18 Leapfrog Enterprises, Inc. Scanning apparatus
EP1639441A1 (en) * 2003-07-01 2006-03-29 Nokia Corporation Method and device for operating a user-input area on an electronic display device
US7848573B2 (en) * 2003-12-03 2010-12-07 Microsoft Corporation Scaled text replacement of ink
US7558744B2 (en) * 2004-01-23 2009-07-07 Razumov Sergey N Multimedia terminal for product ordering
EP1569140A3 (en) * 2004-01-30 2006-10-25 Hewlett-Packard Development Company, L.P. Apparatus, methods and software for associating electronic and physical documents

Also Published As

Publication number Publication date
WO2007055718A2 (en) 2007-05-18
KR100815536B1 (ko) 2008-03-20
WO2007055718A3 (en) 2007-12-06
JP2007128486A (ja) 2007-05-24
CN1862590A (zh) 2006-11-15
EP1783589A1 (en) 2007-05-09
US20060125805A1 (en) 2006-06-15
CA2538948A1 (en) 2006-06-06

Similar Documents

Publication Publication Date Title
KR100815536B1 (ko) 인식된 텍스트를 사용하여 트랙잭션을 수행하는 방법 및시스템
KR100814052B1 (ko) 사용자 기록을 사용자 기록 가능 요소와 연관시키는 방법및 기기
KR100815534B1 (ko) 기록 가능한 표면 상의 대화형 요소와 대화할 수 있는사용자 인터페이스
US7853193B2 (en) Method and device for audibly instructing a user to interact with a function
KR100806240B1 (ko) 데이터 입력의 종료를 식별하는 시스템 및 방법
US6874683B2 (en) User programmable smart card interface system for an image album
KR100847851B1 (ko) 텍스트 및 경계 영역의 인식을 이용하는 장치 사용자인터페이스
US6958747B2 (en) Method for making a product
KR100918535B1 (ko) 노트패드
US7121462B2 (en) User programmable smart card interface system
KR20070047197A (ko) 컴퓨터로 구현되는 사용자 인터페이스
US6871782B2 (en) User programmable smart card interface system having an arbitrary mapping
WO2007136846A2 (en) Recording and playback of voice messages associated with a surface
TW200813798A (en) Device feature activation
US7562822B1 (en) Methods and devices for creating and processing content
AU5352799A (en) A user programmable smart card interface system
AU761218B2 (en) A user programmable smart card interface system for a photo album
Doyle Complete ICT for Cambridge IGCSE®
Doyle et al. Cambridge IGCSE Complete ICT: Student Book
WO2006076118A2 (en) Interactive device and method
JP2008217726A (ja) 印刷物による発注システム、携帯読取機器および発注方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]
LAPS Lapse due to unpaid annual fee