KR101098642B1 - 잉크 정정 패드 - Google Patents

잉크 정정 패드 Download PDF

Info

Publication number
KR101098642B1
KR101098642B1 KR1020057012021A KR20057012021A KR101098642B1 KR 101098642 B1 KR101098642 B1 KR 101098642B1 KR 1020057012021 A KR1020057012021 A KR 1020057012021A KR 20057012021 A KR20057012021 A KR 20057012021A KR 101098642 B1 KR101098642 B1 KR 101098642B1
Authority
KR
South Korea
Prior art keywords
delete delete
character
input
correction
correction interface
Prior art date
Application number
KR1020057012021A
Other languages
English (en)
Other versions
KR20060123028A (ko
Inventor
제프리 더블유. 페티로스
쇼나 줄리 데이비스
리로이 비. 켈리
아드리안 가사이드
도비아스즈 에이. 지에린스키
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20060123028A publication Critical patent/KR20060123028A/ko
Application granted granted Critical
Publication of KR101098642B1 publication Critical patent/KR101098642B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/987—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns with the intervention of an operator
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423—Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04807—Pen manipulated menu

Abstract

펜-기반의 컴퓨팅 시스템에서 텍스트를 편집하기 위한 사용자 인터페이스는 (a) 텍스트를 디스플레이하는 디스플레이 부분; 및 (b) 텍스트의 적어도 일부분에 대응하는 편집가능한 텍스트 부분을 디스플레이하는 정정 인터페이스를 포함한다. 정정 인터페이스는 스타일러스를 통해, 편집가능한 텍스트 부분을 한 문자씩 변경(예를 들어, 개별 문자를 추가, 삭제 또는 변경)할 수 있게 하는 입력을 수용한다. 정정 인터페이스는 또한, 편집가능한 텍스트 부분을 대체하는 대안(들)을 포함하는 "제안 리스트" 부분 및/또는 인터페이스를 통해 이용가능한 잠재적인 액션을 디스플레이하는 "태스크 리스트" 부분을 포함하거나, 그에 관련될 수 있다. 본 발명은 또한, 그러한 인터페이스를 활성화하고, 제공하고, 동작시키는 시스템, 방법 및 컴퓨터-판독가능 매체에 관련된다.
Figure R1020057012021
펜-기반, 사용자 인터페이스, 제안 리스트, 태스크 리스트

Description

잉크 정정 패드{INK CORRECTION PAD}
본 발명은 일반적으로, 전자 텍스트와 상호작용하기 위한 사용자 인터페이스에 관한 것이다. 본 발명의 몇몇 더 특정적인 양태는, 전자 텍스트를 변경 또는 편집하기 위한 펜-기반의 컴퓨팅 시스템 및/또는 다른 컴퓨팅 시스템에서 펜 또는 스타일러스 입력을 수용 및/또는 처리하기 위해 저장된 컴퓨터-실행가능 명령어들을 갖는 컴퓨터-판독가능 매체, 사용자 인터페이스, 시스템 및 방법에 관한 것이다.
일반적인 컴퓨터 시스템, 특히, 그래픽 사용자 인터페이스(GUI)를 사용하는 컴퓨터 시스템은 텍스트를 입력하기 위한 키보드, 및 사용자 인터페이스를 작동시키기 위한 하나 이상의 버튼을 갖는 마우스 등의 포인팅 장치와 같은 하나 이상의 별도의 입력 장치로부터 사용자 입력을 수용하기 위해 최적화된다. 그러한 GUI의 예로는 윈도우즈® 컴퓨터 오퍼레이팅 시스템(워싱턴 레드몬드 소재의 마이크로소프트사로부터 이용가능함)용 사용자 인터페이스가 있다. 보편적인 키보드 및 마우스 인터페이스는 문서, 스프레드시트, 데이터베이스 필드, 그림, 사진, 웹 페이지 등의 신속한 생성 및 변경을 제공한다.
그러나, 최근에, 태블릿 PC 등과 같은 펜-기반의 컴퓨팅 시스템이 인기가 높 아졌다. 펜-기반의 컴퓨팅 시스템에서는, 유리하게도, 전자 "펜" 또는 스타일러스를 이용한 사용자 입력(예를 들면, 종이에 펜 또는 연필로 기록하는 것과 유사함)이 도입되었다. 사실상, 적어도 몇몇 펜-기반의 컴퓨팅 시스템에서, 전자 펜 입력 장치를 사용하여 모든 사용자 입력이 입력 및 조작될 수 있고, 사용자 인터페이스는 전자 펜만을 사용하여 완전히 제어될 수 있다.
펜-기반의 컴퓨팅 시스템이 점차 대중화됨에 따라, 사용자는 점차 더 많은 전자 잉크 형식의 데이터를 입력한다. 많은 예에서, 사용자는 원본 전자 잉크 데이터를 기계-생성된 텍스트 예를 들면, 통상적인 워드 프로세싱 프로그램 및 다른 어플리케이션 프로그램에 의한 사용 및 조작에 적합한 텍스트로 변환하기를 원할 수 있다. 최근 몇년 동안, 핸드라이팅(handwriting)된 전자 잉크 텍스트를 기계-생성된 텍스트로 변환하기 위한 핸드라이팅 인식 기술이 개선되었지만, 이러한 유형의 인식기는 아직도 매우 에러가 잦으며, 특히, 핸드라이팅이 서툰 사용자, 비스듬이 쓰는 사용자, 및 쓰기 속도가 매우 빠른 사용자에게 있어서 그러하다. 따라서, 인식기에 의해 생성된 많은 기계-생성된 텍스트는 여전히 정정되고/정정되거나 사용자에 의해 변경 또는 편집될 필요가 있다.
또한, 컴퓨팅 시스템 및 그에 관련된 네트워크의 하나의 주요 장점은 복수의 사용자가 전자 문서에 액세스하고, 그것을 검토하고, 편집하고, 변경하거나 코멘트하는 능력에 있다. 따라서, 펜-기반의 컴퓨팅 시스템 사용자는 또한, 펜-기반의 컴퓨팅 시스템 및 그에 관련된 전자 펜을 이용하여 다수의 상이한 소스들로부터의 전자 파일 및 문서 내의 텍스트에 액세스하거나 그것을 검토하거나, 편집하거나, 변경하거나, 추가할 필요가 있다. 이러한 전자 파일 및 문서 모두가 전자 잉크 데이터 및/또는 핸드라이팅 인식 프로그램 또는 엔진으로부터 온 것은 아니다.
전자 펜 및 펜-기반의 컴퓨팅 시스템만을 이용하여 기계-생성된 텍스트를 편집, 변경 및/또는 정정하기 위한 적어도 몇몇 기존의 사용자 인터페이스는 사용하기 불편하고, 성가시고, 어려울 수 있다. 또한, 다수의 어플리케이션 프로그램 또는 문서 유형에서, 전자 문서 자체는 전자 펜만을 사용하여 변경 또는 편집될 수 없다. 전자 펜을 사용하여 펜-기반의 컴퓨팅 시스템 상에서 기계-생성된 텍스트 및 문서를 정정 또는 편집하는 데 있어서의 이러한 곤란성은 사용자 실패를 유발할 수 있으며, 이것은 펜-기반의 컴퓨팅 시스템의 사용 및 채용을 방해할 수 있다. 따라서, 본 기술분야에서는, 사용자가 펜-기반 컴퓨팅 시스템에 관련된 전자 잉크 및/또는 전자 펜을 이용하여 기계-생성된 텍스트를 신속하고, 용이하고, 효율적으로 액세스, 검토, 편집 및 변경하게 하는 개선된 정정 인터페이스가 필요하다.
<발명의 요약>
본 발명의 양태는 전자 텍스트와 상호작용하기 위한 사용자 인터페이스, 및 펜-기반의 컴퓨팅 시스템에서 펜 또는 스타일러스 입력을 사용하여 전자 텍스트를 변경하기 위한 시스템 및 방법에 관한 것이다. 그러한 사용자 인터페이스는 (a)원본 텍스트(예를 들어, 기계-생성된 텍스트)를 디스플레이하는 디스플레이 부분; 및 (b)원본 텍스트의 적어도 일부분에 대응하는 편집가능한 텍스트 부분을 디스플레이하는 정정 인터페이스를 포함할 수 있으며, 여기서, 정정 인터페이스는 스타일러스를 통해, 편집가능한 텍스트 부분을 개별 문자별로(즉, 한 문자씩) 변경할 수 있게 하는 입력을 수용한다. 정정 인터페이스는 또한, 편집가능한 텍스트로 대체하는 적어도 하나의 대안을 포함하는 "제안 리스트"(예를 들어, 통상적인 스펠링 검사 또는 핸드라이팅 인식 프로그램에 의해 제공되는 제안 리스트와 유사함) 부분, 및/또는 인터페이스를 통해 액세스가능하고/액세스가능하거나 사용가능한 하나 이상의 잠재적인 액션을 디스플레이하는 "태스크 리스트" 부분을 포함하거나 그것에 관련될 수 있다. 본 발명의 적어도 몇몇 양태에 따른 시스템 및 방법은 상술된 것과 같은 사용자 인터페이스를 활성화하고/활성화하거나 사용한다. 본 발명의 추가적 양태는 (a)상술된 것과 같은 사용자 인터페이스를 활성화하고/활성화하거나 제공하기 위해 및/또는 (b)상술된 것과 같은 시스템 및 방법을 포함하여 다양한 방법을 수행하고/수행하거나 다양한 시스템을 작동시키기 위해 저장된 컴퓨터 실행가능 명령어들을 포함하는 컴퓨터-판독가능 매체에 관한 것이다.
본 발명의 상술된 목적, 특징 및 장점과 그 이외의 목적, 특징 및 장점은 첨부된 도면과 함께 기술된 다음의 상세한 설명으로부터 더 쉽게 명백해지고 더 완전히 이해될 것이다.
도 1은 본 발명의 특정 양태가 구현될 수 있는 범용 디지털 컴퓨팅 환경의 개념도.
도 2는 본 발명의 특정 양태가 구현될 수 있는 펜-기반의 개인용 컴퓨팅(PC) 환경을 도시.
도 3a 및 3b는 본 발명의 임의의 예에서 제공되는 예시적인 정정 부분 내의 기계-생성된 텍스트로서 전자 잉크 데이터의 입력 및 그 사용가능성을 도시.
도 4a 내지 4g는 본 발명의 임의의 예에 따른 시스템 및 방법에서 제공되는 정정 부분에서 사용가능한 다양한 예시적인 편집 동작을 도시.
도 5는 본 발명에 따른 시스템 및 방법의 몇몇 예에서 제공되는 정정 부분에서 사용가능한 추가적 특징의 예를 도시.
도 6a 및 6b는 본 발명의 몇몇 예에서 제공되는 예시적인 정정 인터페이스 및 다양한 특징을 도시.
도 7a 및 7b는 본 발명의 몇몇 예에서 제공되는 또 다른 예시적인 정정 인터페이스 및 다양한 특징을 도시.
도 8은 본 발명의 몇몇 예에서 제공되는 또 다른 예시적인 정정 인터페이스 및 다양한 특징을 도시.
도 9a 및 9b는 본 발명의 몇몇 예에 따른 정정 인터페이스의 또 다른 예시적인 구현을 도시.
도 10a 및 10b는 본 발명의 몇몇 예에 따른 정정 인터페이스의 또 다른 예시적인 구현을 도시.
첨부 도면들 중 하나 이상에 동일한 참조번호가 사용되는 경우, 그것은 다양한 상이한 도면들에서 동일하거나 유사한 부분, 특징 또는 단계를 의미하는 것으로 의도된다.
<상세한 설명>
상술된 바와 같이, 본 발명의 양태는 펜-기반의 컴퓨팅 시스템에서 전자 데이터를 처리하고 전자 텍스트와 상호작용하기 위한 사용자 인터페이스, 시스템, 방법 및 컴퓨터-판독가능 매체에 관한 것이다. 다음의 설명은 독자를 돕기 위해 하위-섹션들로 나뉘어 진다. 하위-섹션들로는, 용어; 본 발명의 다양한 양태에 대한 일반적 설명; 예시적인 하드웨어; 본 발명에 따른 예시적인 사용자 인터페이스, 시스템, 방법 및 컴퓨터-판독가능 매체; 및 결론이 있다.
Ⅰ. 용어
다음의 용어들은 본 명세서에서 사용되며, 달리 지정되거나 문맥으로부터 명백하지 않는 한, 이하에 제공된 의미를 갖는다.
"펜" - 전자 잉크를 입력하고/입력하거나 전자 문서 및/또는 컴퓨터 오퍼레이팅 시스템을 조작 또는 제어하는 데 유용한 임의의 유형의 사용자 입력 장치. "펜" 및 "스타일러스"라는 용어는 본 명세서에서 번갈아 사용된다.
"펜-다운 이벤트" - 펜이 디지타이저에 접촉할 때 개시되는 이벤트. 일반적으로, 펜-다운 이벤트는 펜이 디지타이저 평면을 떠날 때(본 명세서에서는 "펜-업 이벤트"라고 지칭함) 종료할 것이다.
"하버(hover)" - 펜이 이동하고 있는지의 여부에 관계없이, 디지타이저 평면에 가깝거나 인접하지만 평면에 접촉하지 않은 펜의 위치를 정하거나 알아내는 것. "하버" 액션을 구성하기 위해서는 특정 위치 또는 포지션에서 어떤 특정 기간 또는 움직임의 정지도 필요하지 않다. 예를 들어, "하버"는 사용자가 디지타이저 평면과의 접촉을 향해 연속적으로 펜을 움직이는 기간동안 일어날 수 있다.
"렌더" 또는 "렌더링된" 또는 "렌더링" - (텍스트, 그래픽 및/또는 전자 잉크를 포함한) 정보가 디스플레이되는 방법, 스크린 상에 프린트될지 또는 임의의 다른 방법으로 출력될지의 여부를 결정하는 프로세스.
"컴퓨터-판독가능 매체"는 컴퓨터 시스템 상에서 사용자에 의해 액세스될 수 있는 임의의 사용가능한 매체를 의미한다. 예를 들어, "컴퓨터-판독가능 매체"는 컴퓨터 저장 매체 및 통신 매체를 포함할 수 있지만, 이것으로 제한되는 것은 아니다. "컴퓨터 저장 매체"는 컴퓨터-판독가능한 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 포함한다. "컴퓨터 저장 매체"는 RAM, ROM, EEPROM, 플래시 메모리 또는 다른 메모리 기술; CD-ROM, DVD(digital versatile disk) 또는 다른 광 저장 장치; 자기 카세트, 자기 테이프, 자기 디스크 저장 장치 또는 다른 자기 저장 장치; 또는 요구된 정보를 저장하는 데 사용될 수 있고 컴퓨터에 의해 액세스될 수 있는 임의의 다른 매체를 포함하지만, 이것으로 제한되지 않는다. "통신 매체"는 일반적으로 반송파 또는 다른 전송 매커니즘과 같은 변조된 데이터 신호로 컴퓨터-판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터를 구현하며, 임의의 정보 전달 매체를 포함한다. "변조된 데이터 신호"라는 용어는 신호 내의 정보를 인코딩하는 방식으로 설정 또는 변경된 특징들 중 하나 이상을 갖는 신호를 의미한다. 예를 들어, 통신 매체는 유선 네트워크 또는 직접-유선 접속과 같은 유선 매체, 및 음향, RF, 적외선 및 다른 무선 매체와 같은 무선 매체를 포함하지만, 이것으로 제한되지 않는다. 상술된 것들의 조 합도 "컴퓨터-판독가능 매체"의 범주 내에 포함되어야 한다.
Ⅱ. 본 발명의 다양한 양태의 일반적 설명
본 발명의 양태는 펜-기반의 컴퓨팅 시스템에서 펜 입력을 이용하여 전자 텍스트를 편집하고/편집하거나 전자 텍스트와 상호작용하는 데 사용될 수 있는, 적절한 디스플레이 장치에 의해 디스플레이가능한 사용자 인터페이스에 관한 것이다. 그러한 인터페이스는 (a)원본 텍스트(예를 들어, 핸드라이팅 인식 엔진 또는 임의의 다른 소스에 의해 제공된 기계-생성된 텍스트)를 디스플레이하는 디스플레이 부분; 및 (b)원본 텍스트의 적어도 일부분에 대응하는 편집가능한 텍스트 부분을 디스플레이하는 정정 인터페이스를 포함할 수 있으며, 여기서, 정정 인터페이스는 펜을 통해, 편집가능한 텍스트 일부분 내의 텍스트를 개별 문자별로 변경할 수 있게 하는 입력을 수용한다. 몇몇 예에서, 본 발명의 적어도 몇몇 양태에 따른 사용자 인터페이스는 또한, 편집가능한 텍스트 부분을 대체하기 위해 펜을 이용하여 선택가능한 적어도 하나의 대안을 포함하는 "제안 리스트"(예를 들어, 통상적인 스펠링 검사, 핸드라이팅 인식 또는 음성 인식 프로그램에 의해 제공된 제안 리스트와 유사함) 부분을 포함할 수 있다. 본 발명에 따른 사용자 인터페이스의 또 다른 예는 "액션 아이템" 또는 "태스크 리스트" 부분, 예를 들어, 펜을 이용하여 선택가능한 적어도 하나의 액션 아이템 또는 태스크를 갖는 메뉴를 포함하는 부분을 포함할 수 있다. 본 발명의 적어도 몇몇 예에서, 제안 리스트 부분 및/또는 태스크 리스트 부분은 정정 인터페이스의 일부분으로서 포함될 수 있고, 정정 인터페이스에 첨부되거나 그것에 관련될 수 있고/있거나, 정정 인터페이스가 디스플레이되거나 사용 가능해지거나 액세스가능해질 때마다 적절한 시간 또는 위치에 나타날 수 있다.
본 발명의 적어도 몇몇 예에서, 정정 인터페이스는 선택적으로 제안 리스트 부분 및/또는 태스크 리스트 부분과 함께, 원본 텍스트의 적어도 임의의 일부분이 선택될 때, 예를 들어, "팝-업" 패널 또는 부분으로서 자동으로 나타날 것이며, 이러한 인터페이스 엘리먼트들은 본 발명을 벗어나지 않고서 디스플레이 상의 임의의 바람직하거나 적합한 위치(디스플레이 상에 나타나는 선택된 텍스트의 부분에 근접함)에서 나타날 수 있다. 추가적 또는 대안적으로, 정정 인터페이스 (및/또는 임의의 다른 관련 인터페이스 부분)는 (예를 들어, 메뉴 아이템을 활성화함으로써) 사용자에 의해 활성화될 때 나타날 수 있다.
본 발명의 적어도 몇몇 양태에 따라 제공된 정정 인터페이스를 통해 편집가능한 전자 또는 기계-생성된 텍스트는 임의의 적합한 소스로부터 획득될 수 있다. 예를 들어, 텍스트의 적어도 일부는 태블릿 PC와 같은 펜-기반의 컴퓨팅 시스템 상에서 사용자에 의해 작성된 핸드라이팅된 전자 잉크 입력을 인식한 핸드라이팅 인식 엔진에 의해 제공된 기계-생성된 텍스트일 수 있다. 또한, 편집될 기계-생성된 텍스트는 본 발명을 벗어나지 않고서, 키보드(하드 또는 소프트), 외부 소스로부터 다운로드된 음성 인식, 및/또는 다른 입력 장치 또는 메커니즘을 통해 입력될 수 있다. 또한, 편집될 기계-생성된 텍스트는 본 발명을 벗어나지 않고서, 워드 프로세싱 어플리케이션 프로그램, 스프레드시트, 웹 브라우저, 웹 페이지, 이메일 프로그램, 문서 관리 프로그램, 또는 본 발명을 벗어나지 않는 임의의 다른 바람직한 프로그램 또는 다른 소스와 같은 임의의 적합하거나 바람직한 어플리케이션 프로그 램에 위치되거나 그것을 통해 사용가능해질 수 있다.
상술된 바와 같이, 본 발명의 적어도 몇몇 예에 따른 사용자 인터페이스는 정정 인터페이스 또는 일부분이 전자 펜을 통해 정정 인터페이스 내의 편집가능한 텍스트 부분을 개별 문자별로 변경하는 입력을 수용하게 할 수 있다. 정정 인터페이스의 편집가능한 텍스트 부분 내의 텍스트를 편집하는 여러 방법이 본 발명에 따른 사용자 인터페이스에 사용가능할 수 있다. 예를 들어, 정정 인터페이스로의 적어도 몇몇 입력은 편집가능한 텍스트 부분 내에 존재하는 2개의 기존의 연속 문자들 사이에 적어도 하나의 추가 문자를 삽입할 수 있다. 또 다른 예로서, 정정 인터페이스로의 적어도 몇몇 입력은 편집가능한 텍스트 부분으로부터 기존 문자를 삭제할 수 있다. 또 다른 예로서, 정정 인터페이스로의 적어도 몇몇 입력은 편집가능한 텍스트 부분 내의 하나 이상의 기존 문자들을 변경할 수 있다. 본 발명의 적어도 몇몇 예에서, 편집가능한 텍스트 부분의 이러한 변경은 디스플레이 부분에 디스플레이된 원본 텍스트의 대응하는 변경을 트리거할 수 있다.
본 발명의 추가적인 양태는 일반적으로 상술된 사용자 인터페이스와 같이, 기계-생성된 텍스트를 편집 또는 변경하기 위한 사용자 인터페이스를 제공 및/또는 사용하기 위한 시스템 및 방법에 관한 것이다. 상술된 것과 같은 사용자 인터페이스를 호출 및/또는 활성화하기 위한 그러한 시스템 및 방법은 예를 들어, (a)(임의의 적합하거나 사용가능한 입력 장치 또는 엘리먼트를 통해) 정정 인터페이스를 요구하는 입력을 수신하는 것; 및 (b)입력에 응답하여 정정 인터페이스를 활성화하는 것을 포함할 수 있다. 그러한 사용자 인터페이스를 사용하기 위한 예시적인 시스 템 및 방법은 예를 들어, (a)원본 텍스트(예를 들어, 전자 잉크 텍스트, 기계-생성된 텍스트, 또는 컴퓨터 상의 다른 정보)의 적어도 일부분에서 선택하는 입력을 (임의의 유형의 입력 엘리먼트 또는 장치를 통해) 수신하는 것; 및 (b)이 입력에 응답하여 정정 인터페이스를 활성화하는 것을 포함할 수 있다. 본 발명에 따른 시스템 및 방법의 적어도 몇몇 예에서, 정정 인터페이스는 상술된 것과 같은 구조 및 기능을 가질 수 있다.
본 발명의 양태는 또한, 상술된 것과 같은 사용자 인터페이스를 제공 및 활성화할 뿐만 아니라, 그러한 인터페이스를 이용하여, 상술된 것과 같은 시스템 및 방법을 포함한 다양한 방법을 수행하고/수행하거나 다양한 시스템을 작동시키기 위해 저장된 컴퓨터-실행가능 명령어들을 포함하는 컴퓨터-판독가능 매체에 관한 것이다.
Ⅲ. 예시적인 하드웨어
도 1은 본 발명의 다양한 양태를 구현하는 데 사용될 수 있는 범용 디지털 컴퓨팅 환경의 개략도를 도시한다. 도 1에서, 컴퓨터(100)는 프로세싱 유닛(110), 시스템 메모리(120), 및 시스템 메모리(120)를 비롯한 다양한 시스템 컴포넌트들을 프로세싱 유닛(110)에 연결하는 시스템 버스(130)를 포함한다. 시스템 버스(130)는 메모리 버스 또는 메모리 제어기, 주변 장치 버스, 및 다양한 버스 아키텍처들 중 임의의 것을 사용한 로컬 버스를 포함한 몇몇 유형의 버스 구조들 중 임의의 것일 수 있다. 시스템 메모리(120)는 판독 전용 메모리(ROM)(140) 및 랜덤 액세스 메모리(RAM)(150)를 포함할 수 있다.
시작 동안 등에, 컴퓨터(100) 내의 엘리먼트들 간의 정보의 전송을 돕는 기본 루틴을 포함하는 기본 입/출력 시스템(160)(BIOS)은 ROM(140) 내에 저장된다. 컴퓨터(100)는 또한, 하드 디스크(도시되지 않음)로부터 판독하고 그것에 기록하기 위한 하드 디스크 드라이브(170), 및 분리형 자기 디스크(190)로부터 판독하고 그것에 기록하기 위한 자기 디스크 드라이브(180), 및 CD ROM 또는 다른 광 매체와 같은 분리형 광 디스크(192)로부터 판독하고 그곳에 기록하기 위한 광 디스크 드라이브(191)를 포함할 수 있다. 하드 디스크 드라이브(170), 자기 디스크 드라이브(180) 및 광 디스크 드라이브(191)는 각각, 하드 디스크 드라이브 인터페이스(192), 자기 디스크 드라이브 인터페이스(193) 및 광 디스크 드라이브 인터페이스(194)에 의해 시스템 버스(130)에 접속된다. 이러한 드라이브 및 그에 관련된 컴퓨터-판독가능 매체는 컴퓨터-판독가능 명령어, 데이터 구조, 프로그램 모듈 및 다른 데이터의 비휘발성 저장을 개인용 컴퓨터(100)에 제공한다. 본 기술분야에 숙련된 기술자는, 자기 카세트, 플래시 메모리 카드, 디지털 비디오 디스크, 베르누이 카트리지, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM) 등과 같은 컴퓨터에 의해 액세스되는 데이터를 저장할 수 있는 다른 유형의 컴퓨터-판독가능 매체도 예시적인 오퍼레이팅 환경에서 사용될 수 있음을 이해할 것이다.
오퍼레이팅 시스템(195), 하나 이상의 어플리케이션 프로그램(196), 다른 프로그램 모듈(197) 및 프로그램 데이터(198)를 포함한 다수의 프로그램 모듈은 하드 디스크 드라이브(170), 자기 디스크(190), 광 디스크(192), ROM(140) 또는 RAM(150) 상에 저장될 수 있다. 사용자는 키보드(101) 및 (마우스와 같은) 포인팅 장치(102)와 같은 입력 장치를 통해 컴퓨터(100)에 명령 및 정보를 입력할 수 있다. 다른 입력 장치(도시되지 않음)로는, 마이크로폰, 조이스틱, 게임 패드, 위성 접시, 스캐너 등이 있을 수 있다. 이러한 입력 장치 및 그 외의 입력 장치는 종종, 시스템 버스(130)에 연결되어 있는 직렬 포트 인터페이스(106)를 통해 프로세싱 유닛(110)에 접속되지만, 병렬 포트, 게임 포트 또는 USB(universal serial bus) 등과 같은 다른 인터페이스에 의해 접속될 수도 있다. 또한, 이러한 장치들은 적절한 인터페이스(도시되지 않음)를 통해 시스템 버스(130)에 직접적으로 연결될 수 있다.
모니터(107) 또는 다른 유형의 디스플레이 장치도 비디오 어댑터(108)와 같은 인터페이스를 통해 시스템 버스(130)에 접속될 수 있다. 모니터(107) 이외에, 개인용 컴퓨터는 일반적으로, 스피커 및 프린터와 같은 다른 주변 출력 장치(도시되지 않음)를 포함한다. 일 예에서, 프리핸드(freehand) 입력을 디지털식으로 캡처하기 위하여 펜 디지타이저(165) 및 이에 수반되는 펜 또는 스타일러스(166)가 제공된다. 도 1에는 펜 디지타이저(165)와 직렬 포트 인터페이스(106) 간의 접속이 도시되어 있지만, 실제로, 펜 디지타이저(165)는 프로세싱 유닛(110)에 직접적으로 연결될 수도 있고, 본 기술분야에 공지되어 있는 바와 같이, 병렬 포트 또는 또 다른 인터페이스 및 시스템 버스(130) 등을 통해 임의의 적합한 방식으로 프로세싱 유닛(110)에 연결될 수도 있다. 또한, 디지타이저(165)는 도 1에서 모니터(107)로부터 떨어져 있는 것으로 도시되어 있지만, 디지타이저(165)의 사용가능한 입력 영역은 모니터(107)의 디스플레이 영역과 동일 공간일 수 있다. 또한, 디지 타이저(165)는 모니터(107) 내에 통합될 수도 있고, 모니터(107)에 오버레이하거나 그것에 첨부된 별도의 장치로서 존재할 수도 있다.
컴퓨터(100)는 원격 컴퓨터(109)와 같은 하나 이상의 원격 컴퓨터로의 논리적 접속을 이용한 네트워크 환경에서 동작할 수 있다. 단순화를 위해 도 1에는 메모리 저장 장치(111)만이 도시되어 있지만, 원격 컴퓨터(109)는 서버, 라우터, 네트워크 PC, 피어 장치 또는 다른 공통 네트워크 노드일 수 있고, 일반적으로, 컴퓨터(100)에 관련하여 상술된 엘리먼트들 다수 또는 전부를 포함한다. 도 1에 도시된 논리적 접속은 근거리 네트워크(LAN)(112) 및 광역 네트워크(WAN)(113)를 포함한다. 그러한 네트워크 환경은 유선 및 무선 접속 둘 다를 사용하며 사무실, 기업형 컴퓨터 네트워크, 인트라넷 및 인터넷에서 흔한다.
LAN 네트워크 환경에서 사용될 때, 컴퓨터(100)는 네트워크 인터페이스 또는 어댑터(114)를 통해 근거리 네트워크(112)에 접속된다. WAN 네트워크 환경에서 사용될 때, 개인용 컴퓨터(100)는 일반적으로 모뎀(115), 또는 인터넷과 같은 광역 네트워크(113) 상에 통신 링크를 설정하기 위한 다른 수단을 포함한다. 컴퓨터(100)의 내부 또는 외부에 있을 수 있는 모뎀(115)은 직렬 포트 인터페이스(106)를 통해 시스템 버스(130)에 연결될 수 있다. 네트워크 환경에서, 개인용 컴퓨터(100)에 관해 도시된 프로그램 모듈, 또는 그 일부는 원격 메모리 저장 장치에 저장될 수 있다.
도시된 네트워크 접속은 예시적인 것이며, 컴퓨터들 간의 통신 링크를 설정하기 위한 다른 기술이 사용될 수 있음을 이해할 것이다. TCP/IP, 이더넷, FTP, HTTP, UDP 등과 같은 다양한 잘 알려진 프로토콜들 중 임의의 것이 존재한다고 가정되고, 시스템은 사용자-서버 구성에서 동작되어, 사용자가 웹-기반의 서버로부터 웹 페이지를 검색하게 할 수 있다. 웹 페이지 상의 데이터를 디스플레이 및 조작하는 데 다양한 통상적인 웹 브라우저들 중 임의의 것이 사용될 수 있다.
도 1의 환경은 하나의 예시적인 환경을 나타내고 있지만, 다른 컴퓨팅 환경도 사용될 수 있음을 이해할 것이다. 예를 들어, 본 발명의 하나 이상의 예는 도 1에 도시되고 상술된 모든 다양한 양태보다 더 적은 양태를 갖는 환경을 사용할 수 있고, 이러한 양태는 통상의 지식을 가진 자에게 명백한 여러 조합 및 하위조합으로 나타날 수 있다.
도 2는 본 발명의 여러 양태에 따라 사용될 수 있는 펜-기반의 개인용 컴퓨터(PC)(201)를 도시한다. 도 1의 시스템의 특징, 서브시스템 및 기능들 중 임의의 것 또는 전부는 도 2의 컴퓨터에 포함될 수 있다. 펜-기반의 개인용 컴퓨터 시스템(201)은 큰 디스플레이 평면(202), 예를 들어, 복수의 윈도우(203)가 디스플레이되는 액정 디스플레이(LCD) 스크린과 같은 디지타이징 평면 디스플레이를 포함한다. 스타일러스(204)를 이용하여, 사용자는 디지타이징 디스플레이 영역 상에서 선택, 하이라이트 및 기록할 수 있고, 이에 의해, 시스템에 전자 잉크 데이터를 입력할 수 있다. 적합한 디지타이징 디스플레이 평면의 예로는, Mutoh Co.(지금은 FinePoint Innovations Co.로서 알려짐)로부터 사용가능한 펜 디지타이저와 같은 전자자기 펜 디지타이저가 있다. 광 디지타이저와 같은 다른 유형의 펜 디지타이저도 사용될 수 있다. 펜-기반의 컴퓨팅 시스템(201)은 데이터를 조작하고, 텍스 트를 전자 잉크로서 입력하고, 스프레드시트, 워드 프로세싱 프로그램 등을 생성, 편집 및 변경하는 것과 같은 통상적인 컴퓨터 어플리케이션 태스크를 실행하기 위하여, 스타일러스(204)를 사용하여 생성된 제스처를 번역한다.
스타일러스(204)는 그 능력을 증대하는 버튼 또는 다른 특징을 갖출 수 있다. 일 예에서, 스타일러스(204)는, 한 종단은 라이팅 부분을 구성하고 다른 종단은 "지우개" 종단을 구성하는 "연필" 또는 "펜"으로서 구현될 수 있는데, 여기서, 지우개 종단은 디스플레이를 가로질러 이동될 때, 지워져야 할 디스플레이 상의 전자 잉크 부분을 나타낸다. 마우스, 트랙볼, 키보드 등과 같은 다른 유형의 입력 장치도 사용될 수 있다. 또한, 예를 들어, 터치-감지형 또는 접근-감지형 디스플레이 상에 디스플레이된 이미지의 일부분을 선택 또는 표시하기 위해 사용자 자신의 손가락이 입력 장치로서 사용될 수 있다. 따라서, 여기에 사용되는 "사용자 입력 장치"라는 용어는 광범위한 정의를 갖고 공지된 입력 장치에 대한 다수의 변형물을 포함하는 것으로 의도된다.
여러 예에서, 시스템은 오퍼레이팅 시스템 및/또는 어플리케이션 프로그램이 잉크 및/또는 다른 펜 액션 또는 이벤트를 캡처, 조작 및 저장하기 위해 사용할 수 있는 COM(component object model) 서비스 집합으로서 잉크 플랫폼을 제공한다. 잉크 플랫폼은 또한, XML(extensible markup language)과 같은 언어를 포함하는 마크업 언어를 포함할 수 있다. 잉크 플랫폼의 추가적인 예는 DCOM(distributed component object model) 구현을 사용할 수 있다. 그러나, 마이크로소프트 사의 Win32 프로그래밍 모델 및 .Net 프로그래밍 모델을 포함하는 또 다른 구현이 사용 될 수 있다. 이러한 플랫폼은 상업적으로 사용가능하며, 본 기술분야에 공지되어 있다.
완전한 성능의 펜-기반 컴퓨팅 시스템 또는 "태블릿 PC"(예를 들어, 변환가능한 랩탑 또는 "슬레이트" 유형의 태블릿 PC)를 사용하는 것 외에, 본 발명의 양태는 핸드-헬드 또는 팜-탑 컴퓨팅 시스템; 개인용 디지털 단말; 포캣 퍼스널 컴퓨터; 모바일 및 셀룰라 전화, 호출기 및 다른 통신 장치; 시계; 가전기기; 및 모니터 또는 다른 디스플레이 장치를 포함하는 임의의 다른 장치 또는 시스템과 같은, 전자 잉크로서 데이터를 수용하고/수용하거나 전자 펜 또는 스타일러스 입력을 수용, 처리 또는 디스플레이하는 다른 유형의 펜-기반의 컴퓨팅 시스템 및/또는 다른 장치, 및/또는 사용자에게 프린트되거나 도식으로 나타낸 정보를 제공하고/제공하거나 전자 펜 또는 스타일러스를 사용하는 입력을 허용하거나 또 다른 장치(예를 들어, 태블릿 PC에 의해 수집된 전자 잉크를 처리할 수 있는 통상적인 데스크탑 컴퓨터)에 의해 수집된 전자 잉크를 처리할 수 있는 디지타이저와 함께 사용될 수 있다.
이제, 본 발명은 남은 도면과 함께 설명될 것이며, 이것은 본 발명의 설명을 돕기 위해 본 발명의 다양한 예 및 정보를 나타낸다. 이 상세한 설명에 포함된 특정 도면 및 정보는 본 발명을 제한하는 것으로 해석되어서는 안된다.
Ⅳ. 본 발명에 따른 예시적인 사용자 인터페이스, 시스템, 방법 및 컴퓨터-판독가능 매체
상술된 바와 같이, 본 발명의 양태는 일반적으로, 펜-기반의 컴퓨팅 시스템, 및 입력 장치로서 펜을 사용하는 다른 컴퓨팅 시스템을 사용하여 전자 텍스트와 상호작용하고 그것을 처리하기 위한 사용자 인터페이스, 시스템 및 방법에 관한 것이다. 마우스(또는 임의의 다른 포인팅 장치) 및/또는 키보드를 포함하는 통상적인 컴퓨터 시스템에서, 기계-생성된 텍스트를 편집하는 것은 상대적으로 쉽고 빠르며, 그러한 시스템 및 방법은 사용자에게 매우 익숙하다. 그러나, 펜-기반의 컴퓨팅 시스템의 인기가 점점 증가하면서, 이러한 통상적인 하드웨어 기반의 편집 툴이 항상 사용자에게 사용가능하거나 사용자에 의해 선호되지는 않으며, 특히, 펜만을 이용하여 모든 데이터를 입력하고 컴퓨터의 사용자 인터페이스 및 오퍼레이팅 시스템을 완전히 제어하는 사용자에게 있어서 그러하다. 몇몇 예에서, 사용자는 소프트 키보드 및 펜을 호출 및 사용하여 텍스트를 편집할 수 있지만, 그렇게 하는 것은 특히, 대량의 텍스트가 검토 및 편집되어야 할 때 느리고 성가시고, 실망스러울 수 있다.
도 3a는 펜-기반의 컴퓨팅 시스템에서의 예시적인 핸드라이팅된 사용자 입력을 도시한다. 이 예에서, 사용자는 펜을 이용하여 펜-기반의 컴퓨팅 시스템의 디지타이저 스크린(300) 상에 "confection"이라는 단어를 썼고, 컴퓨터는 본 기술분야에 숙련된 기술자들에 의해 알려지고 이해되는 통상의 방식으로 이 정보를 전자 잉크로서 저장하였다. 전자 잉크 데이터는 ISF(ink serialized format)와 같은 본 기술분야에 공지된 통상적인 방식 및 포맷의 사용을 포함하여, 본 발명으로부터 벗어나지 않고서, 임의의 적합한 방식으로 수집되고, 임의의 적합한 포맷으로 저장될 수 있다.
임의의 적절한 때에, 전자 잉크 데이터가 수집되는 동안 또는 그 후에, 본 발명의 적어도 몇몇 예에 따른 시스템 및 방법은 본 기술분야에 알려진 바와 같이, 핸드라이팅된 입력 데이터에 대응하는 텍스트를 인식하려고 시도하는 핸드라이팅 인식 엔진에 이 데이터를 송신할 것이다. Windows XP Tablet PC Edition™ 오퍼레이팅 시스템(워싱턴, 레드몬드의 마이크로소프트사로부터 사용가능함)이 제공된 하나 이상의 핸드라이팅 인식기 또는 다른 공지의 또는 통상적인 핸드라이팅 인식기 중 하나 이상의 핸드라이팅 인식기와 같은 임의의 바람직한 핸드라이팅 인식기가 본 발명에 따른 시스템 및 방법으로 사용될 수 있다. 본 발명의 적어도 몇몇 예에 따른 시스템 및 방법은, 사용자가 소정의 시간 동안 및/또는 임의의 다른 적합하거나 바람직한 시간 또는 간격으로 잉크를 입력하는 것을 멈춘 후에, 데이터가 수집되는 대로, 선택적으로, 핸드라이팅 인식 엔진에 데이터를 자동으로 송신할 수 있다. 또 다른 대안으로서, 적어도 몇몇 예에서, 사용자는 사용가능한 핸드라이팅된 입력 중 몇몇 또는 전부를 선택한 후에, 예를 들어, 선택적으로, 펜을 이용하여 아이콘 및/또는 메뉴 아이템 상에 태핑(tapping)함으로써, 데이터를 핸드라이팅 인식 엔진에 송신하는 적절한 액션을 취할 수 있다. 핸드라이팅 인식은 핸드라이팅된 전자 잉크 텍스트를 기계-생성된 텍스트, 예를 들어, 통상적인 컴퓨터 오퍼레이팅 시스템에 의해 워드 프로세싱 프로그램, 스프레드시트, 웹 브라우저, 이메일 프로그램, 인스턴트 메시징 프로그램 등과 같은 통상적인 어플리케이션 프로그램에서 더 쉽게 사용가능한 텍스트로 변환하는 데 사용될 수 있다.
그러나, 핸드라이팅 인식 소프트웨어는 인식기 에러, 읽기 어려운 핸드라이 팅, 인식기의 사전의 부족 등과 같은 이유로, 원래의 핸드라이팅된 잉크 입력에 올바르게 대응하는 기계-생성된 텍스트를 항상 생성하지는 못한다. 그러한 예에서, 사용자는 원래의 필자의 의도를 올바르게 반영하도록, 핸드라이팅 인식기에 의해 생성된 기계-생성된 텍스트를 정정하기를 요구할 수 있다. 또한, 몇몇 예에서, 핸드 라이팅 인식 소프트웨어가 원래 핸드라이팅된 텍스트를 올바르게 인식했을 때에도, 사용자는 펜-기반의 컴퓨팅 시스템 상에서 펜을 이용하여 텍스트를 변경 또는 편집하기를 요구할 수 있다. 본 발명의 양태는 또한, 사용자가 펜 및 펜-기반의 컴퓨팅 시스템을 이용하여, 임의의 소스로부터의 기계-생성된 텍스트를 한 문자씩, 자유롭게 편집하게 한다.
따라서, 여러 이유로 인해, 사용자는 펜-기반의 컴퓨팅 시스템 상에서 실행되는 어플리케이션 프로그램에 존재하는 기계-생성된 텍스트를 변경 또는 편집하는 것을 요구할 수 있다. 이것은 본 발명의 적어도 몇몇 예에서, 편집 또는 변경될 하나 이상의 단어를 선택하고, 선택된 단어 또는 단어들에 대응하는 기계-생성된 텍스트가 개별적으로 또는 한 문자씩 편집 또는 변경될 수 있게 하는 "정정 부분" 또는 다른 정정 인터페이스를 호출하거나 요구함으로써 수행될 수 있다. 도 3a의 예로 돌아와서, 이 핸드라이팅된 텍스트는 핸드라이팅된 단어 "confection"을 인식하려고 시도한 통상적인 핸드라이팅 인식 소프트웨어에 송신되었지만, 그것이 단어 "confection"을 단어 "correction"으로 잘못 인식하였다고 가정하자. 사용자가 기계-생성된 텍스트 "correction"을 선택할 때(또는, 선택적으로 원본 잉크 텍스트가 선택될 때), 도 3b에 도시된 예시적인 정정 부분(310)과 같은 정정 인터페이스가 나타날 수 있다.
이러한 본 발명의 예에 따른 정정 부분(310)은 한 자씩 읽혀진 단어 "correction"을 포함하며(기계-생성된 텍스트는 핸드라이팅 인식 소프트웨어로부터 획득됨), 단어의 각각의 문자는 개별 문자 슬롯(312)에서 제공된다. 인접한 문자들 간에는 스페이스(314)가 유지되고, 이 예에서는, 빈 선단(leading end) 슬롯(316) 및 빈 꼬리단(tailing end) 슬롯(318)도 제공된다. 스크롤 화살표(320)는 이하에서 더 상세히 설명되는 바와 같이, 사용자가 편집 또는 변경될 기계-생성된 텍스트 내에서 문자에서 문자로 및/또는 단어에서 단어로 앞뒤 이동하게 한다. 스크롤 바(320)를 이용한 이동은 한 문자씩, 한 단어씩, 및/또는 임의의 다른 적합하거나 요구된 방식으로 일어날 수 있다.
도 4a 내지 4g는 예를 들어, 도 3b에 도시된 정정 부분(310)을 포함한 여러 정정 인터페이스와 함께 사용가능하거나 사용될 수 있는 잠재적인 변경, 정정 또는 편집 액션의 예를 도시한다. 도 4a에 도시되어 있는 바와 같이, 단어 "correction"은 정정 부분(310)에서 한 문자씩 읽혀진다. 그러나, 도 4a의 예에서, 사용자는 단어 내의 두 번째 "r" 문자를 선택했다. 이 선택 액션의 표시는 임의의 적합한 형태를 취할 수 있지만(또는, 요구되는 경우 어떤 표시도 제공되지 않을 수 있지만), 도시된 예에서, 선택은 선택된 문자의 색 변경(예를 들어, 도시된 예에서 약간 회색의 문자, 굵은 문자 등)에 의해 나타나고, 디스플레이는 이 선택된 문자에 관한 드롭-다운 메뉴가 사용가능한 표시자(402)를 포함한다.
선택은 본 발명으로부터 벗어나지 않고서, 임의의 적합하거나 바람직한 방식 으로, 또는 임의의 적합하거나 바람직한 액션의 결과로서 일어날 수 있다. 예를 들어, 본 발명에 따른 사용자 인터페이스, 시스템 및 방법의 몇몇 예에서, 디지타이저 또는 디스플레이 화면 상에서 펜을 터치하는 것("펜-다운 이벤트")은 (존재한다면) 접촉 위치에서의 특정 문자의 선택을 초래할 것이다{즉, 정정 부분(310)에서 문자 또는 문자 슬롯(312)이 차지한 "바운딩 박스" 내에서 펜이 디지타이저 화면에 접촉하면, 이 액션은 그 문자의 선택으로 귀결될 수 있음}. 본 발명에 따른 시스템 및 방법의 다른 예에서, 펜은 디지타이저의 평면 근처 또는 그 인근을 하버링하는 동안, 디지타이저에 의해 검출될 수 있다. 본 발명의 적어도 몇몇 예에서, 하버 이벤트{및 그 하버 위치에서의 대응하는 문자 또는 문자 슬롯(312)의 결과적 선택}는 사용자가 임의의 방식으로 정정 부분(310)과 상호작용하기 위해 디지타이저의 평면을 향해 펜을 이동시키는 시간 동안 일어나고 검출될 수 있다.
펜 하버 이벤트의 검출은 본 발명을 벗어나지 않고서, 본 기술분야에 숙련된 기술자들에게 공지된 통상의 방식을 포함한 임의의 적합한 방식으로 수행될 수 있다. 예를 들어, 펜-기반의 컴퓨팅 시스템과 함께 사용된 몇몇 펜은 "활성"이며, 본 명세서에서, 이것은 펜이 디지타이저 평면 근처에 위치할 때 디지타이저에 의해 전송되고/전송되거나 검출가능한 에너지 데이터 또는 다른 정보를 전송, 반영, 변경 또는 수정하는 것을 의미한다. 예를 들어, 펜은 디지타이저에 의해 발산된 에너지를 수신하고/수신하거나 디지타이저에 의해 전송 및/또는 감지된 자기 또는 전자계를 변경하여, 검출된 자계 또는 전계의 변경으로 인해 디지타이저 평면 근처의 펜의 존재가 디지타이저에 의해 감지될 수 있도록 하는 회로 또는 다른 구조를 포 함할 수 있다. 또 다른 예로서, 펜은 적어도 디지타이저 평면 근처에 위치될 때 디지타이저에 의해 검출될 수 있는 데이터, 전계 또는 자계, 또는 다른 에너지 또는 정보를 전송 또는 반영할 수 있다. 본 발명을 벗어나지 않고서, 펜이 디지타이저 평면 근처에 위치할 때 펜의 존재를 감지 또는 검출하는 임의의 적합하거나 바람직한 방법이 사용될 수 있다.
펜과 디지타이저 결합은 디지타이저 평면에 대한 가상의 임의의 적절한 위치에서 펜을 검출하게 하도록 설계될 수 있지만, 활성 펜들을 갖는 적어도 몇몇 통상적인 펜-기반의 컴퓨팅 시스템에서, 펜은 디지타이저 평면으로부터 대략 1/2 내지 2 인치에 있을 때 초기에 검출될 수 있고, 몇몇 예에서는, 디지타이저 평면으로부터 대략 1/2 내지 1인치일 때 검출될 수 있다. 그러한 시스템에서, 요구되는 경우, 문자 또는 문자 슬롯(또는, 이하에 더 상세히 설명되는 바와 같이, 단어)의 선택은, 펜이 정정 인터페이스에서 디지타이저 또는 디스플레이 스크린의 평면 위를 하버링할 때 이루어질 수 있고, 하버 액션 동안 펜 끝 바로 밑 또는 그에 인접하게 있는 문자 또는 문자 슬롯(또는 단어)이 선택된 문자 또는 문자 슬롯(또는 단어)이 될 것이다{예를 들어, 한 문자 또는 문자 슬롯(또는 단어)의 바운딩 박스에 대해 하버 액션이 일어나면, 그 문자 또는 문자 슬롯(또는 단어)이 선택될 것임}.
기계-생성된 텍스트에 대한 변경은 도 4a에 도시된 예시적인 정정 부분(310)을 이용하여 여러 방법으로 이루어 질 수 있다. 예를 들어, 도 4b에서 보여주는 바와 같이, 사용자는 요구된 새로운 문자(이 도시된 예에서는 글자 "f")를 원래 문자 또는 문자 슬롯(312)(이 예에서는 두 번째 글자 "r") 상에서 또는 그 근처에서 전자 잉크로 단순히 기록함으로써, 펜을 이용하여 기계-생성된 텍스트 내의 문자를 변경할 수 있다. 이 새로운 전자 잉크 문자는 핸드라이팅 인식 엔진에 송신될 것이고, 새로 핸드라이팅된 문자에 대응하는 새로운 기계-생성된 문자는 원래의 기계-생성된 문자를 대체할 것이다. 선택적으로, 요구되는 경우, 새로 기록된 문자의 좌측 및/또는 우측으로 하나 이상의 문자 또는 단어에 관련된 기계-생성된 텍스트 및/또는 원래 잉크도 인식기에 송신되어, 예를 들어, (인식기에 관련된 사전을 더 잘 사용하게 함으로써) 새로 기록된 문자에 대한 더 많은 문맥을 제공하고, 더 정확한 인식에 조력할 수 있다. 본 발명의 적어도 몇몇 예에서, 핸드라이팅 인식 소프트웨어는 문자 슬롯(312) 내에 존재하는 원래 문자(원래 글자 "r")를 알 것이고, 새로운 기계-생성된 문자가 결정될 때 이 원래 문자를 선택하는 것을 회피할 것이다(즉, 원래 문자가 올바른 경우 사용자가 변경을 행하지 않는다는 가정하에서, 원래 글자 "r"을 새로운 글자 "r"로 대체하지 않을 것임). 그러나, 시스템 및 방법은 사용자가 (예를 들어, 복수의 연속 문자에 관련된 잉크 입력을 상대적으로 빠른 방식으로 기록함으로써) 단어 전체 또는 그 일부를 재기록하는 것으로 결정해야 하는 경우, 사용자가 단어 전체 또는 그 일부를 재기록한다는 가정하에서, 상술된 문자 인식 제한을 적용하지 않을 수 있다{몇몇 사용자들은 특히 정정 부분(310) 내의 몇몇 문자들이 변경될 필요가 있을 때, 이전에 올바르게 인식된 문자를 포함하여 정정 부분(310) 상에서 단어 전체 또는 그 일부를 신속하게 재기록할 것임}.
도 4b는 정정 부분(310)에 나타난 정정 또는 변경에 대한 실제 전자 잉크를 도시하지만, 이것이 요구사항은 아니다. 오히려, 디지타이저는 단순히 입력을 수 집하고, 문자 슬롯(312) 내의 전자 잉크를 실제로 렌더링하지 않고서 그것을 인식기에 송신할 수 있다. 또 다른 대안으로서, 잉크는 소정의 기간동안 및/또는 인식기가 제공한 새로 인식된 기계-생성된 문자에 의해 대체될 때까지 문자 슬롯(312)에 렌더링될 수 있다.
따라서, 도 4b에 도시된 변경이 행해진 상태에서, 이 예의 기계-생성된 텍스트는 이제, 도 4c에 도시된 바와 같이, 문자 스트링 "corfection"을 포함할 것이다. 도 4c에서 도시되는 바와 같이, 현재 변경이 진행됨에 따라, 이제, 사용자는 예를 들어, 펜-다운 이벤트 또는 상술된 하버 선택 액션을 통해 추가 변경을 위해 첫 번째 "r" 문자를 선택하였다. 다시, 이 선택은 이 문자의 색 변경, 및 이 문자 슬롯(312)에 관련된 드롭-다운 메뉴 표시자(402)의 출현에 의해 보여진다. 이 예에서, 사용자는 예시적인 드롭-다운 메뉴로부터 사용가능한 옵션을 사용하여 텍스트를 더 편집하는 것으로 결정하였다. 따라서, 사용자는 펜을 이용하여 드롭-다운 메뉴 표시자(402) 위를 터치하며, 이것은 전체 메뉴(404)가 나타나게 한다. 물론, 드롭-다운 메뉴(404)는 본 발명을 벗어나지 않고서, 임의의 요구된 방식으로 또는 임의의 요구된 액션의 결과로서 활성화될 수 있다.
이 예의 드롭-다운 메뉴(404)는 사용자가 원래 인식된 문자 대신에 기계-생성된 텍스트를 쓰기로 선택할 수 있는 여러 대안적인 문자 선택의 리스팅을 포함한다. 사용자는 (예를 들어, 요구된 대안 위에 펜을 터치하거나 또는 임의의 다른 적합한 방식으로) 메뉴(404)로부터 특정 문자(또는, 이용가능한 경우, 문자 스트링)를 선택할 수 있고, 이 선택된 대안에 대응하는 기계-생성된 텍스트는 원본 기 계-생성된 텍스트를 대체할 것이다. 도 4c에 도시된 예에서, 대안적인 문자 "n"은 사용자에 의해 {도 4c의 크로스 해칭(cross hatching)에 의해 나타난} 메뉴(404) 내의 글자 "n" 상에서 펜을 탭핑함으로써 선택되며, 이것은 궁극적으로, 도 4d에 도시되어 있는 바와 같이, 단어 "confection"을 산출한다.
도 4c에 도시되어 있는 바와 같이, 드롭-다운 메뉴(404)는 다른 대안적인 문자만을 포함할 필요는 없다. 오히려, 드롭-다운 메뉴(404)는 본 발명을 벗어나지 않고서, 구두점(punctuation) 및/또는 다른 그림 기호를 포함할 수 있다. 또한, 한 흔한 대안으로서, 드롭-다운 메뉴(404)는 원래 정정 부분(310)에 존재하는 것과 동일한 문자를 포함할 수 있지만, 원본 기계-생성된 문자로부터의 대소문자 변환(즉, 이 도시된 예에서는, 글자 "R") 및/또는 기계-생성된 텍스트 컨텐츠를 명확하게 하는{예를 들어, "0(제로)"으로부터 대문자 "O"를 구별하는 것 등} 묘사적인 텍스트를 갖는다. 또한, 드롭-다운 메뉴(404)는 또한, 사용자가 문자를 삭제하고, {선택적으로, 선긋기(inking) 인터페이스를 호출함으로써} 전자 잉크를 이용하여 문자를 재기록하고, 문자 전 또는 후에 스페이스를 삽입하는 것 등과 같은 선택된 문자에 관한 다양한 액션을 취하게 한다. 임의의 적합하거나 바람직한 문자, 기호 또는 액션은 본 발명을 벗어나지 않고서, 드롭-다운 메뉴(404)를 통해 이용가능해질 수 있다.
또한, 드롭-다운 메뉴(404)의 리스팅에 존재하는 문자, 기호, 액션 등은 본 발명을 벗어나지 않고서, 임의의 적합한 소스로부터 획득될 수 있다. 예를 들어, 드롭-다운 메뉴(404)는 문자가 처음 인식되었을 때 핸드라이팅 인식 엔진으로부터 획득된 문자 또는 기호의 리스트를 제공할 수 있다. 또 다른 예로서, 주어진 기계-생성된 문자가 인식기에 의해 제공될 때마다, 가능한 대안들의 소정의 리스트가 생성되거나 사용자에게 이용가능해질 수 있다{예를 들어, 인식기가 소문자 "l"을 인식할 때마다, 드롭 다운 메뉴(404)에 제공된 가능한 대안은 항상 대문자 "I" 및 감탄부호("!")를 포함할 수 있고, 그 반대로도 성립됨}. 또 다른 예로서, 드롭 다운 메뉴(404)가 활성화될 때마다, 모든 잠재적인 대안의 리스트가 제공되거나 각각의 문자에 대해 이용가능해질 수 있다.
도 4e는 본 발명의 적어도 몇몇 예에 따라 정정 부분(310)에서 텍스트를 편집하기 위한 추가적 프로시저를 도시한다. 이 도시된 예에서, 사용자는 (펜-다운 이벤트 또는 하버 액션으로) 글자 "f"를 선택하고, 그 선택된 문자에 대해 전자 잉크로 삭제 제스처(410)(예를 들어, 이 예에서는, "크로스-아웃" 또는 "스크래치-아웃" 제스처)를 기록하였다. 적어도 본 발명의 이 예에서, 이 액션은 문자 및 그 관련된 스페이스를 삭제한다(이것은 도 4f에 도시되어 있는 바와 같이, 기계-생성된 문자 스트링 "conection"에 귀착함). 대안적으로, 본 발명에 따른 임의의 시스템 및 방법에서 요구되는 경우, 삭제 제스처는 문자 슬롯(312)에 관련된 빈 스페이스를 남기고서, 문자만을 삭제할 수 있다.
본 발명의 적어도 몇몇 예에서, 선단 스페이스(316) 및/또는 꼬리단 스페이스(318)의 삭제는 특별히 처리될 수 있다. 특히, 요구되는 경우, 선단 스페이스(316) 또는 꼬리단 스페이스(318)의 삭제는 그 삭제된 스페이스에 의해 분리된 2개의 단어를 하나의 단어로 결합하는 데 사용될 수 있다.
삭제 제스처는 도 4e에 도시되어 있는 바와 같은 스크래치 아웃일수도 있고, 본 발명을 벗어나지 않는 임의의 다른 유형의 제스처일 수도 있다. 물론, 본 기술분야에 공지된 표준 편집 기능에 대응하는 제스처를 비롯한 다른 제스처들도 본 발명을 벗어나지 않고서, 임의의 적합하거나 요구된 기능을 수행하는 데 사용될 수 있다. 예를 들어, 제스처는 문자를 소문자에서 대문자 텍스트로, 및 그 반대로 변경하는 데 사용될 수 있다. 또 다른 예로서, 제스처는 2개의 연속 문자의 순서를 변경하거나 자리를 바꾸는 데 사용될 수 있다. 또 다른 예로서, 문자 슬롯(312)의 라인 바로 아래 및 2개의 문자 슬롯(312) 사이에 위치하는 상향 화살표 또는 캐럿(caret)은 빈 스페이스의 삽입을 나타내는 제스처로서 사용될 수 있다(나중에, 빈 스페이스는 필요하거나 요구될 때, 임의의 요구된 문자로 채워질 수 있음). 다른 제스처도 가능하다. 본 발명의 적어도 몇몇 예에서, 사용자는 사용자의 특정 편집 스타일로 인터페이스를 개인화하기 위해, 특정 제스처를 특정 함수, 액션, 문자 또는 기호에 대응하도록 지정 및/또는 생성할 수 있다.
도 4f는 본 발명의 이 예의 정정 부분(310)을 이용하여, 개별 문자별로 텍스트를 편집하는 또 다른 예시적인 방법을 도시한다. 이 예에서, 사용자는 단순히, 인접한 문자 슬롯들(312) 사이의 스페이스(314)에서 펜을 이용하여 요구된 문자를 기록함으로써 2개의 기존의 인접한 문자 사이에 새로운 문자를 삽입한다. 특별히 도시된 예에서, 사용자는 첫번째 "n"을 포함하는 문자 슬롯(312)과 글자 "e"를 포함하는 문자 슬롯(312) 사이의 스페이스(314)에서 전자 잉크로 글자 "v"를 기록했다. 기록하면, 새로운 잉크는 핸드라이팅 인식 엔진에 송신되고, 정정 부분(310) 내의 문자 스트링에 새로운 문자 슬롯(312)이 추가되고, 새로 인식된 기계-생성된 문자가 대응하는 기계-생성된 텍스트 내에 포함된다. 이 예에서, 결과하는 용어는 도 4g에 도시되어 있는 바와 같이, 단어 "convection"을 포함한다. 상술된 바와 같이, 요구되는 경우, 본 발명의 예에 따른 시스템 및 방법이 그렇게 할 수 있다 하더라도, 전자 잉크가 실제로 렌더링되는 것은 요구되지 않는다.
본 발명에 따른 시스템 및 방법의 적어도 몇몇 예에서, 사용자는 정정 인터페이스에서 2개의 인접한 문자 사이에{예를 들어, 인접한 문자 슬롯들(312) 간의 스페이스(314)에} 하나 이상의 문자를 쓸 수 있고, 이 액션은 시스템 및 방법에 의해, 새로운 문자 모두가 그 위치에서 단어 내에 삽입되는 삽입 액션으로서 해석될 수 있다. 몇몇 예에서, 복수의 문자는 정정 인터페이스 상의 2개의 기존의 문자 사이에서 전체 기록 액션이 일어날 때에만 삽입될 수 있다. 다른 예에서, 임의의 복수-문자 기록은 {예를 들어, 삽입 기록 일부가 스페이스(314)를 벗어나 문자 슬롯(312)에 중첩되더라도} 첫번째 기록된 문자에 대응하는 위치 또는 스페이스에서의 삽입으로서 처리될 수 있다. 본 발명을 벗어나지 않고서, 복수의 문자 삽입을 처리하는 임의의 다른 적합하거나 바람직한 방법이 사용될 수 있다.
물론, 도 3a 내지 도 4g와 함께 도시되고 설명된 예시적인 정정 인터페이스는 본 발명에 따른 정정 인터페이스의 적어도 몇몇 예에서 이용가능한 기능 및 액션의 예를 제공한다. 본 기술분야에 숙련된 기술자는 이 설명된 기능 또는 액션 모두가 본 발명에 따른 모든 사용자 인터페이스, 시스템 및 방법에서 요구되는 것은 아니며, 설명된 기능 또는 액션 모두가 모든 시간 및/또는 모든 상황에서 이용 가능할 필요는 없다는 것을 인식할 것이다. 오히려, 특별히 상술된 것, 및/또는 추가적 기능, 액션 및/또는 그 조합을 포함하여, 임의의 적합하거나 바람직한 정정 기능 및/또는 액션, 및/또는 그 조합이 본 발명을 벗어나지 않고서 정정 인터페이스를 통해 이용가능해질 수 있다.
도 3a 내지 도 4g의 예에서, 편집될 선택된 단어는 정정 부분(310)의 할당된 스페이스에 완전히 맞는다. 이것은 항상 참은 아닐 수 있다. 예를 들어, 도 5는 단어 "antidisestablishmentarianism"이 선택된 정정 부분(310)의 예를 도시한다. 이 예에서, 전체 단어는 정정 부분(310)에 맞지 않기 때문에, 그 일부분(이 예에서는, 문자 스트링 "blishmentari")이 디스플레이된다. 선택적으로, 이러한 유형의 긴 단어가 선택될 때, 정정 부분(310)은 초기에 선단의 빈 문자 슬롯(316)을 디스플레이할 수 있고, 정정 부분(310) 내의 이용가능한 슬롯(312)이 채워질 때까지 선택된 단어의 첫번째 문자(또는 복수의 단어 선택의 첫번째 단어)가 디스플레이될 것이다. 상술된 바와 같이, 사용자는 스크롤 버튼(320)을 이용하여 한 문자씩 네비게이트할 수 있다. 요구되는 경우, 스크롤 버튼(320)(또는 대안적으로, 추가 스크롤 버튼 또는 다른 메뉴 아이템)은 본 발명을 벗어나지 않고서, 사용자를 예를 들어, (하나 이상의 단어가 선택된 경우) 선택된 단어의 시작 및/또는 끝으로, 문서 또는 페이지의 시작 및/또는 끝 단어로, 단어에서 단어로 네비게이트시키기 위해 제공될 수 있다.
도 3a 내지 도 5와 함께 상술된 것과 같이, 정정 인터페이스 또는 그 일부는 전체적인 더 완전하고 다목적의 정정 인터페이스의 일부분을 구성할 수 있다. 도 6a는 본 발명의 추가적 양태에 따른 정정 인터페이스, 시스템 및 방법을 갖는 펜-기반의 컴퓨팅 시스템의 몇몇 예에서 나타날 수 있는 것으로서, 전자 잉크 입력을 포함하는 예시적인 디스플레이 스크린(600)을 도시한다. 이 예에서, 디스플레이(600)는 사용자의 전자 잉크 입력{라인(602 및 604)}을 포함하고, 이 전자 잉크 입력은 핸드라이팅 인식 엔진에 송신된 것이다. 인식된 결과는 각각 그들의 대응하는 잉크 입력 라인(602 및 604) 밑에 인접하게 위치한 기계-생성된 텍스트 라인(606 및 608)으로서 제공된다. 이 예에서, 핸드라이팅 인식 엔진은 몇몇 인식 에러를 생성하였다. 특히, 전자 잉크 입력 라인(602)("All together now.")은 "All to get her now."로서 잘못 인식되었다(라인 606 참조). 또한, 전자 잉크 입력 라인(604)("Samlple text. Sample text.")은 "Sample text. Simple text."로서 잘못 인식되었다(라인 608 참조).
이 인식기 에러로 인해(및/또는 임의의 다른 요구된 이유로 인해), 사용자는 이 어플리케이션 프로그램에서 텍스트를 편집하기로 결정할 수 있다. 이 예시적인 시스템 및 방법에 따라, 사용자는 기계-생성된 텍스트 및/또는 전자 잉크 텍스트에서 하나 이상의 단어를 선택함으로써 정정 또는 편집 프로시저를 개시 또는 활성화할 수 있다. 선택은 상술된 다양한 방식들 중 임의의 방식으로, (예를 들어, 하나 이상의 단어가 선택된 경우, 펜을 이용한 터치 및 드래그 액션을 통해) 예를 들어, 펜을 이용하여 선택될 단어(들) 상에서 터치하거나 탭핑함으로써, (예를 들어, 하나 이상의 단어가 선택되는 경우, 펜을 이용한 하버 및 드래그 액션을 통해) 펜을 이용하여 선택될 단어(들)에 대해 하버링함으로써, 및/또는 임의의 다른 적합하거 나 바람직한 방법으로 일어날 수 있다. 이 예에서, 사용자는 도 6a에서 해칭으로 도시된 기계-생성된 텍스트 단어 "get"(610)을 선택하였다.
이 예의 정정 프로시저의 개시는 정정 인터페이스(620)를 활성화하며, 이것은 도 6b에서 {전자 잉크 텍스트 라인(602) 및 대응하는 인식된 기계-생성된 텍스트 라인(606)을 계속해서 디스플레이하는} 디스플레이 부분(600)을 오버레이하는 패널로서 도시된다. 적어도 이 예의 정정 인터페이스(620)는 원래 선택된 기계-생성된 텍스트(610) 근처에 위치한다. 이 예의 정정 인터페이스(620)는 도 3a 내지 도 5와 함께 상술된 동작(예를 들어, 개별 문자 변경, 삭제 또는 추가; 스페이스 삭제 또는 추가 등)과 같이, 다양한 편집 동작을 지원할 수 있는 정정 부분(622)을 포함한다. 이 도시된 예에서, 선택된 단어(610)(이 예에서는, "get")는 정정 부분(622)의 중앙에 나타나고, 임의의 방식으로(도시된 예에서는, 굵은 글자체로서) 하이라이트되어 그것이 선택된 단어임을 나타낸다. 이 예에서 선택된 단어(610)는 비교적 짧기 때문에, 선택된 단어(610)를 가까이에서 에워싸는 문자 및 단어도 하이라이트되지 않는 방식으로(도시된 예에서는, 얇은 폰트 글자체로) 정정 부분(622)에 나타난다. 주목할만한 것은, 기계-생성된 텍스트 라인(606)이 디스플레이(600)에서 보일 수 있는 상태로 남아 있고, 선택된 단어(610)는 선택된 채로 남아 있다는 것이다. 사용자는 상술된 바와 같이, 요구 시에, 네비게이션 화살표를 이용하여 및/또는 임의의 다른 적합한 방식으로 한 문자씩 또는 한 단어씩 네비게이트할 수 있다. 대안적으로, 요구 시에, 선택된 단어(610)는 본 발명을 벗어나지 않고서 (선택적으로는, 선단의 빈 스페이스와 함께) 정정 부분(622)에서 첫 번째 단어로서 나타날 수 있다.
정정 부분(622) 외에, 이 예시적인 정정 인터페이스(620)는 "제안 리스트"(624)를 포함하고, 이 제한 리스트는 원래 인식기에 의해 제공된 단어를 대신할 수 있는 인식기에 의해 리턴된 여러 대안적인 단어(624a)를 포함한다. 도시된 예에서, 단어 "get"(610)이 선택되었지만, 인식기는 6개의 가능한 대안적 단어(624a), 즉, 단어 "Get(대문자로 됨), "got", "goat", "gel", "jet" 및 "jot"을 제안 리스트(624)에 제공하였다. 제안 리스트(624)가 인식기에 의해 리턴된 원본 단어를 대체할 올바른 기계-생성된 단어를 포함하면, 사용자는 (예를 들어, 펜을 이용하여 그 아이콘을 탭핑하거나 임의의 다른 적절한 방식으로) 제안 리스트(624)로부터 바람직한 단어(624a)를 선택할 수 있고, 본 발명의 이러한 예에 따른 시스템 및 방법은 원본의 인식된 기계-생성된 텍스트(610)를 삭제하고 그것을 제안 리스트(624)로부터의 새로 선택된 기계-생성된 텍스트(624a)로 대체할 것이다. 요구되는 경우, 이 선택이 이루어지면, 정정 인터페이스(620)는 닫혀지고, 새로 선택된 기계-생성된 텍스트(624a)는 기계-생성된 텍스트 라인(606)에서 나타날 것이다.
물론, 제안 리스트(624)에는 본 발명을 벗어나지 않고서, 임의의 개수의 대안들이 나타날 수 있다. 또한, 제안 리스트(624)는 정정 인터페이스(620)가 활성화될 때 자동적으로 나타날 수도 있고, 본 발명을 벗어나지 않고서 정정 인터페이스(620) 및/또는 정정 부분(622)으로부터 분리되어 별도로 활성화될 수 있다. 예를 들어, 요구되는 경우, 전체 제안 리스트(624) 및/또는 추가적인 잠재적 대안들은 팝업 디스플레이, 또는 사용자에 의해 활성화되는 다른 인터페이스 엘리먼트 상 에서 나타날 수 있다. 또한, 도시된 예에서는 개별 대안들(624a)이 개별 아이콘으로서 나타나지만, 본 발명을 벗어나지 않는 임의의 적합한 형식 또는 포맷의 다양한 대안들이 나타날 수 있다.
본 발명의 적어도 몇몇 예에서, 사용자가 정정 부분(622)을 통해 문자에 대한 개별 변경을 수행하면, 제안 리스트(624) 및 그 안에 리스트된 개별 대안들(624a)은 정정 부분(622)을 통한 사용자의 변경을 고려하고 그것에 의존하여 업데이트 및 변경될 수 있다. 또한, 라인(606 및/또는 608) 내의 기계-생성된 텍스트는 선택적으로, 사용자가 행한 변경이 입력 및 인식되자마자, 정정 부분(622)을 통해 사용자가 행한 변경에 대응하도록 변경될 수 있다. 또한, 본 발명의 적어도 몇몇 예에서, 개별 대안들(624a) 중 하나는 그 결과로서 생성되는 문자 스트링이 인식기의 사전에 존재하지 않더라도, 한 문자씩 인식기의 최상의 문자 결정에 대응할 수 있다. 이 특징은 특히, 원본 핸드라이팅이 인식기의 사전에 없는 텍스트(예를 들어, 외국어 단어, 머리글자, 약어 등)를 포함할 때 제안 리스트(624a)가 올바른 문자 스트링을 포함할 가능성을 증가시킨다. 본 발명의 또 다른 예에서, 이용가능한 대안들(624a) 중 하나는 단어의 대문자화된 버전과 대문자화되지 않은 버전 둘 다가 인식기의 사전에 나타나는 경우, 및/또는 단어의 대문자화된 버전과 대문자화되지 않은 버전 둘 다 인식기의 사전에 나타나지 않는 경우, 원본 기계-생성된 텍스트의 대소문자 변환일 수 있다.
본 발명의 이러한 예의 정정 인터페이스(620)는 "태스크 리스트" 섹션(626)도 포함하는데, 이것은 사용자가 정정 인터페이스(620)에서 선택된 단어 또는 단어 들에 관하여 취할 수 있는 다양한 잠재적인 태스크 또는 액션을 포함한다. 예를 들어, 도시된 예시적인 정정 인터페이스(620)에서, 태스크 리스트(626)는 액션 즉, "단어 삭제"{이것은 기계-생성된 텍스트 라인(606)으로부터 선택된 단어를 삭제함}; "단어를 사전에 추가"; "불어로서 인식"(이것은 사용자가 섹션에 포함된 개별 단어 또는 일련의 단어들에 대해 언어 및 관련 핸드라이팅 인식기를 지정하게 함); "독일어로서 인식" 및 "인식 개선"(이것은 특정 사용자의 습성 또는 쓰기 특징에 기초하여 인식기를 개별화하는 것을 도움)을 포함한다. 사용자는 액션에 관련된 위치에서 펜을 이용하여 디지타이저를 터치함으로써 임의의 요구된 액션을 선택할 수 있다. 물론, 예를 들어, 단어의 결합 또는 병합, 활자 변경 등을 포함하는 임의의 요구된 액션 또는 태스크도 본 발명을 벗어나지 않고서 태스크 리스트(626)의 일부로서 포함될 수 있다. 선택적으로, 본 발명의 적어도 몇몇 예에서, 언제라도 정정 인터페이스에서 단어가 정정될 때(선택적으로, 소정의 횟수만큼 동일한 정정이 이루어진 후, 및/또는 소정의 횟수만큼 동일한 단어 또는 문자 스트링이 입력된 후), 필요 시, 단어 또는 문자 스트링은 자동으로 사용자의 사전에 추가될 수 있다. 이러한 방식으로, 시스템은 자동적으로 사용자의 개별 쓰기 컨텐츠, 특징 및 스타일에 적응할 수 있고, 이에 의해, 미래의 인식 결과를 개선할 수 있다.
도 7a 및 7b는 본 발명의 또 다른 예에 따른 사용자 인터페이스의 다양한 추가적 특징을 도시한다. 이 도시된 예에서, 핸드라이팅된 텍스트 라인(602 및 604) 및 기계-생성된 텍스트 라인(606 및 608)은 도 6a 및 6b의 예에서와 같이 디스플레이(600) 상에 나타난다. 그러나, 이 예에서 기계-생성된 텍스트 또는 핸드라이팅 된 텍스트{도시된 예에서는, 선택된 기계-생성된 단어 "get"(610)}가 선택될 때, 적어도 초기에, 더 간결화된 정정 인터페이스(700)가 나타난다. 도시된 예에서, 간결화된 정정 인터페이스(700)는 제안 리스트(624)(예를 들어, 도 6b와 함께 상술된 제안 리스트와 같음) 및 간결화된 태스크 리스트(626a)를 포함한다.
요구되는 경우, 본 발명의 적어도 몇몇 예에서, 간결화된 정정 인터페이스(700)는 사용자가 제안 리스트(624) 또는 간결화된 태스크 리스트(626a)로부터 제안된 대안들 중 하나를 선택할 때까지, 또는 사용자가 {예를 들면, "닫기" 박스(704)에서 펜을 탭핑하고, 또 다른 액션을 개시하고, 정정 인터페이스(700) 외부에서 탭핑하는 등으로써} 임의의 적절한 방식으로 인터페이스를 닫을 때까지 디스플레이된 채로 남아있을 수 있다. 또 다른 대안으로서, 정정 인터페이스(700)는 더 이상의 사용자 입력이 수신되지 않고/않거나 사용자가 디스플레이(600)로부터 펜을 멀리 이동시킨 소정의 시간 후에 (선택적으로는, 소정의 임계 기간동안) 사라질 수 있다.
초기에 나타나는 제안 리스트(624) 및/또는 간결화된 태스크 리스트(626a)가 사용자에 의해 요구된 대안적 단어 및/또는 액션을 포함하지 않는 경우, 사용자는 더 완전한 정정 인터페이스를 활성화할 수 있다. 더 완전한 사용자 인터페이스의 활성은 본 발명을 벗어나지 않는 임의의 적합한 방식으로 일어날 수 있다. 예를 들어, 인터페이스는 펜을 이용하여 간결화된 태스크 리스트(626a)에 제공된 "more" 아이콘(706) 상에서 탭핑함으로써 활성화될 수 있다. "more" 아이콘(706)의 선택은 도 7a에서 그 아이콘(706) 상에 해칭함으로써 도시된다. 정정 인터페이스(도 6b의 620)와 같은 임의의 적합하거나 바람직한 정정 인터페이스는 도 7b에 도시된 바와 같이 나타날 수 있다. 또 다른 잠재적인 옵션 또는 대안으로서, 전체 정정 인터페이스(620)는 본 발명을 벗어나지 않고서, 더 이상의 사용자 입력이 수신되지 않는 경우, 예를 들어, 간결화된 정정 인터페이스(700)의 활성 후의 특정 기간 내에 자동으로 나타날 수 있다. 더 완전한 정정 인터페이스를 활성화하는 임의의 다른 바람직한 방식이 본 발명을 벗어나지 않고서 제공될 수 있다.
또 다른 잠재적인 대안 또는 옵션으로서, 도 7b의 인터페이스(620)로부터 예를 들어, 펜을 이용하여 "more" 아이콘(706)을 다시 탭핑함으로써 (여전히 더 크거나 더 완전한 정정 인터페이스와 같은) 추가적인 정정 대안이 활성화될 수 있다. 임의의 적합하거나 바람직한 태스크, 프로그램, 대안 또는 정정 옵션이 본 발명을 벗어나지 않고서, 간결화된 정정 인터페이스(700), 더 완전한 정정 인터페이스(620) 및/또는 임의의 추가적 정정 인터페이스로부터 활성화되고 이용가능해질 수 있다.
도 8은 본 발명의 적어도 몇몇 예에서 사용될 수 있는 또 다른 예시적인 정정 인터페이스(800)를 도시한다. 이 예시적인 인터페이스(800)는 특히, 인식된 단어가 너무 길어서 도 6b 및 7b에 도시된 한 문자씩의 정정 인터페이스(622) 내에 맞지 않는 상황에 유용하다. 이러한 유형의 긴 단어는 특히, 독일어, 노르웨이어 및 다른 스칸디나비아의 언어와 같은 몇몇 언어에서 흔하다. 이 예에서, 디스플레이 스크린(600)은 도 6a 내지 도 7b에 도시된 디스플레이(600)와 같이, 일반적으로 상술된 전자 잉크 라인(602 및 604) 및 그에 대응하는 인식된 기계-생성된 텍스트 라인(606 및 608)을 디스플레이한다{이 예에서, 두 번째 잉크 라인(604)은 정정 인터페이스(800)를 오버레이함으로써 완전히 감추어짐}. 정정 인터페이스(800)가 초기에 나타날 때(예를 들어, 사용자 선택에 의해 또는 임의의 다른 바람직한 방식으로 활성화될 때), 상이한 단어들의 수직으로 정렬된 리스트를 포함하는 제안 리스트(802)가 나타나고, 태스크 리스트(804)도 나타난다. 선택적으로, 요구되는 경우, {도 5에 도시된 정정 인터페이스(310), 및 도 6b 및 7b에 도시된 정정 인터페이스(622)와 같은} 한 문자씩의 정정 인터페이스는 임의의 적합한 방식으로, 예를 들어, 소정의 기간 후에 자동으로, 펜을 이용하여 "more" 아이콘(806)을 탭핑함으로써 정정 인터페이스(800)로부터 활성화될 수 있다. 또 다른 대안으로서, 본 발명을 벗어나지 않고서, 인터페이스(800)가 활성화될 때 요구되는 경우, 개별 문자 정정 인터페이스도 자동으로 나타날 수 있다.
도 9a 및 9b는 본 발명의 적어도 몇몇 예 및 양태에 따른 특징을 포함하는 또 다른 예시적인 정정 인터페이스를 디스플레이하는 디스플레이 스크린(600)을 도시한다. 이 예에서, 디스플레이 스크린(600)은 전자 잉크 정보를 디스플레이하고/디스플레이하거나 수용하는 선긋기 패널 또는 부분(902), 및 인식기에 의해 생성된 대응하는 기계-생성된 텍스트를 디스플레이하는 기계-생성된 텍스트 부분 또는 패널(904)을 포함한다. 도 6a 내지 8과 함께 상술된 예와 같이, 사용자는 예를 들어, 펜 탭 또는 하버 액션을 이용하여 잉크 또는 기계-생성된 단어를 선택함으로써, 인식된 텍스트에 정정을 수행할 수 있다. 도 9a의 도시된 예에서는, 해칭에 의해 표시된 바와 같이, 단어 "get"(906)이 선택된다.
본 발명에 따른 이 예시적인 시스템 및/또는 방법으로 단어를 선택하는 것은 도 9b에 도시되어 있는 바와 같이, 정정 인터페이스(900)가 나타나게 한다. 도시된 예의 정정 인터페이스(900)는 {한 문자씩의 정정 부분(908), 제안 부분(910) 및 태스크 부분(912)과 같은} 도 6b와 함께 상술된 정정 인터페이스(620)의 특징을 갖지만, 본 기술분야에 숙련된 기술자는 본 발명을 벗어나지 않고서, (상술된 다양한 속성, 특징 및 액션을 포함하여) 임의의 적합하거나 요구된 속성, 특징 및 액션을 포함하는 임의의 적합한 정정 인터페이스가 사용될 수 있음을 이해할 것이다.
주목할만한 것은, 이 도시된 예에서, 정정 인터페이스(900)는 선택된 단어(906)에 인접한 기계-생성된 텍스트 패널 또는 부분(904) 상의 오버레이로서 나타난다는 것이다. 물론, 정정 인터페이스(900)는 본 발명을 벗어나지 않는 디스플레이(660) 상의 임의의 적합하거나 바람직한 위치에서 나타날 수 있다. 또한, 정정 인터페이스(900)는 사용자가 전자 잉크 패널 또는 부분(902)에서 하나 이상의 전자 잉크 단어를 선택할 때 활성화될 수 있고, 그것은 본 발명을 벗어나지 않고서, 선택된 잉크 단어(들)에 인접하게 위치할 수 있다.
본 발명은 핸드라이팅 인식 엔진으로부터 획득된 전자 잉크 입력 및/또는 기계-생성된 텍스트와 함께 사용되는 것으로 제한되지 않는다. 오히려, 본 발명의 다양한 양태에 따른 정정 인터페이스는 예를 들어, 워드 프로세싱 프로그램, 웹 페이지 또는 웹 브라우저, 스프레드시트, 이메일 관리 프로그램, 문서 관리 프로그램, 음성 인식 프로그램 등으로부터 발생한 기계-생성된 텍스트를 포함하여, 임의의 원본 소스로부터의 기계-생성된 텍스트에 대해 펜-기반의 컴퓨팅 시스템을 이용 하여 변경, 편집 또는 정정을 수행하는 데 유용할 수 있다. 도 10a 및 10b는 그러한 시스템 및 방법의 예를 도시한다. 이 예에서, 워드 프로세싱 프로그램 또는 다른 어플리케이션 프로그램 내의 파일 또는 문서는 펜-기반의 컴퓨팅 시스템의 디스플레이(1000) 상에 디스플레이되는 기계-생성된 텍스트(1002)를 포함한다. 펜-기반의 컴퓨팅 시스템 상에서 텍스트(1002)를 검토하는 사용자는 텍스트(1002)의 일부를 변경하기를 원할 수 있지만, 사용자는 컴퓨터에 관련된 하드 또는 소프트 키보드에 액세스하지 않았을 수도 있고 그것을 이용하고 싶지 않을 수도 있다. 오히려, 사용자는 입력 장치로서 펜만을 이용하여 텍스트(1002)에 대한 영구적인 변경을 수행하기를 원할 수 있다.
도 10a 및 10b에 도시된 것과 같은 본 발명의 예에서, 사용자는 하나 이상의 단어{도 10a 및 10b에서 단어(1004)에 관련하여 해칭으로서 도시됨}를 선택함으로써 기계-생성된 텍스트(1002)에 대해 변경을 수행할 수 있다. 선택은 본 발명을 벗어나지 않고서, 요구된 단어 상의 펜 탭핑 또는 터치, 탭핑 및 드래그 액션, 하버 액션, 하버 및 드래그 액션, 또는 임의의 다른 적합하거나 바람직한 방식을 이용하여 성취될 수 있다. 선택은 일반적으로 상술된 방식으로 정정 인터페이스(1006)가 나타나게 한다. 도시된 예에서, 정정 인터페이스(1006)는 상술된 정정 인터페이스의 다양한 예들과 같이, 한 문자씩의 정정 패널 또는 부분(1008), 제안 패널 또는 부분(1010) 및 태스크 패널 또는 부분(1012)을 포함하지만, 본 기술분야에 숙련된 기술자는 인터페이스가 본 발명을 벗어나지 않는, 임의의 바람직하거나 적합한 속성, 기능 또는 액션을 포함할 수 있음을 인식할 것이다.
상술된 본 발명의 특정 예는 통상적인 영어 또는 다른 라틴어 기반의 단어 및 텍스트의 형태(예를 들어, 왼쪽에서 오른쪽으로 위에서 아래로 읽는 형태)로 전자 잉크 데이터 및 기계-생성된 텍스트를 처리하기 위해 최적화되지만, 본 발명은 그러한 유형의 언어, 및 그러한 유형의 전자 잉크 데이터와 기계-생성된 텍스트에 대한 사용으로 제한되지 않는다. 본 기술분야에 숙련된 기술자들은 본 발명의 양태가 본 발명을 벗어나지 않고서 임의의 방향으로 기록 또는 판독되는 임의의 언어의 핸드라이팅된 텍스트 또는 문자를 포함하여, 임의의 유형의 전자 잉크 데이터 및/또는 기계-생성된 오브젝트에 적용될 수 있다는 것을 인식할 것이다. 또한, 본 발명의 양태는 차트, 다이어그램, 그래프, 플로우차트 등 내의 데이터 및 엘리먼트; 음악 데이터 또는 기호; 수학 또는 과학 데이터 또는 기호; 그림 등과 같은 본 발명을 벗어나지 않은 다른 유형의 데이터 및 기계-생성된 오브젝트를 인식 및 처리하는 데 적용될 수 있다.
마지막으로, 본 발명은 또한, 정정 인터페이스를 제공하고, 다양한 방법을 수행하고, 및/또는 상술된 정정 인터페이스, 시스템 및/또는 방법을 포함한 다양한 시스템에서 사용되기 위해 저장된 컴퓨터-실행가능 명령어들을 포함하는 컴퓨터-판독가능 매체에 관한 것이다. 컴퓨터-판독가능 매체는 상술된 컴퓨터-판독가능 매체의 다양한 특정 예 상에 저장된 컴퓨터-실행가능 명령어들을 구성할 수 있다.
Ⅴ. 결론
본 발명의 다양한 예가 상술되었고, 본 기술분야에 통상의 지식을 가진자는 본 발명이 그 범주 내에서 이러한 예의 모든 조합 및 부분조합을 포함한다는 것을 이해할 것이다. 또한, 본 기술분야에 숙련된 기술자는 상술된 예는 단순히 본 발명의 다양한 양태를 예시하는 것임을 인식할 것이다. 첨부된 청구범위에 정의된 본 발명의 취지 및 범주를 벗어나지 않고서, 다양한 변경 및 수정이 이루어 질 수 있다.

Claims (53)

  1. 정정 인터페이스를 요구하는 입력을 수신하는 단계; 및
    상기 정정 인터페이스를 활성화하는 단계를 포함하고,
    상기 정정 인터페이스는 원본 텍스트의 적어도 일부에 대응하는 편집가능한 텍스트 부분을 디스플레이하고, 상기 정정 인터페이스는 스타일러스를 통해 상기 편집가능한 텍스트 부분을 개별 문자별로 변경할 수 있게 하는 입력을 수용하고, 상기 정정 인터페이스는 (a) 상기 편집가능한 텍스트 부분 내 존재하는 2개의 기존의 연속 문자 사이에 적어도 하나의 추가 문자를 삽입하는 입력을 수신하는 것에 의한 방식, (b) 상기 편집가능한 텍스트 부분으로부터 기존의 문자를 삭제하는 입력을 수신하는 것에 의한 방식, 및 (c) 상기 편집가능한 텍스트 부분 내의 기존의 문자를 변경하는 입력을 수신하는 것에 의한 방식으로, 상기 편집가능한 텍스트 부분을 변경할 수 있게 하는 입력을 수용하고,
    상기 정정 인터페이스는 (a) 상기 편집가능한 텍스트 부분을 포함하는 제1 부분, (b) 상기 원본 텍스트의 일부를 대체하기 위해 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 대안을 포함하는 제2 부분, 및 (c) 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 액션 아이템을 갖는 메뉴를 포함하는 제3 부분을 포함하는 방법.
  2. 제1항에 있어서,
    상기 원본 텍스트의 일부를 선택하는 입력을 수신하는 단계를 더 포함하는 방법.
  3. 제1항에 있어서,
    (a) 상기 적어도 하나의 추가 문자를 삽입하는 입력은, 사용자가 상기 스타일러스를 이용해, 상기 2개의 기존의 연속 문자 사이의 상기 정정 인터페이스에 대응하는 디지타이저의 영역 상에서 상기 적어도 하나의 추가 문자를 기록한 결과로서 수신되고;
    (b) 상기 기존의 문자를 삭제하는 입력은, 사용자가 상기 스타일러스를 이용해, 삭제될 기존의 문자와 연관된 메뉴로부터 삭제 액션을 선택하는 사용자의 결과로서, 또는 상기 스타일러스를 이용해, 삭제될 기존의 문자의 위치의 정정 인터페이스에 대응하는 디지타이저의 영역 상에서 삭제 제스처를 기록한 결과로서 수신되고;
    (c) 상기 기존의 문자를 변경하는 입력은, 사용자가 상기 스타일러스를 이용해, 변경될 기존의 문자의 위치의 정정 인터페이스에 대응하는 디지타이저의 영역 상에서, 요구되는 새로운 문자를 기록한 결과로서 수신되는, 방법.
  4. 삭제
  5. 방법을 수행하기 위한 컴퓨터 실행가능 명령어들을 기록한 컴퓨터 판독가능 기록 매체로서, 상기 방법은:
    정정 인터페이스를 요구하는 입력을 수신하는 단계; 및
    상기 정정 인터페이스를 활성화하는 단계를 수행하고,
    상기 정정 인터페이스는 원본 텍스트의 적어도 일부에 대응하는 편집가능한 텍스트 부분을 디스플레이하고, 상기 정정 인터페이스는 스타일러스를 통해 상기 편집가능한 텍스트 부분을 개별 문자별로 변경할 수 있게 하는 입력을 수용하고, 상기 정정 인터페이스는 (a) 상기 편집가능한 텍스트 부분 내 존재하는 2개의 기존의 연속 문자 사이에 적어도 하나의 추가 문자를 삽입하는 입력을 수신하는 것에 의한 방식, (b) 상기 편집가능한 텍스트 부분으로부터 기존의 문자를 삭제하는 입력을 수신하는 것에 의한 방식, 및 (c) 상기 편집가능한 텍스트 부분 내의 기존의 문자를 변경하는 입력을 수신하는 것에 의한 방식으로, 상기 편집가능한 텍스트 부분을 변경할 수 있게 하는 입력을 수용하고,
    상기 정정 인터페이스는 (a) 상기 편집가능한 텍스트 부분을 포함하는 제1 부분, (b) 상기 원본 텍스트의 일부를 대체하기 위해 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 대안을 포함하는 제2 부분, 및 (c) 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 액션 아이템을 갖는 메뉴를 포함하는 제3 부분을 포함하는 컴퓨터 판독가능 기록 매체.
  6. 제5항에 있어서, 상기 방법은 상기 원본 텍스트의 일부를 선택하는 입력을 수신하는 단계를 더 포함하는, 컴퓨터 판독가능 기록 매체.
  7. 제5항에 있어서, 상기 방법에서,
    (a) 상기 적어도 하나의 추가 문자를 삽입하는 입력은, 사용자가 상기 스타일러스를 이용해, 상기 2개의 기존의 연속 문자 사이의 상기 정정 인터페이스에 대응하는 디지타이저의 영역 상에서 상기 적어도 하나의 추가 문자를 기록한 결과로서 수신되고;
    (b) 상기 기존의 문자를 삭제하는 입력은, 사용자가 상기 스타일러스를 이용해, 삭제될 기존의 문자와 연관된 메뉴로부터 삭제 액션을 선택하는 사용자의 결과로서, 또는 상기 스타일러스를 이용해, 삭제될 기존의 문자의 위치의 정정 인터페이스에 대응하는 디지타이저의 영역 상에서 삭제 제스처를 기록한 결과로서 수신되고;
    (c) 상기 기존의 문자를 변경하는 입력은, 사용자가 상기 스타일러스를 이용해, 변경될 기존의 문자의 위치의 정정 인터페이스에 대응하는 디지타이저의 영역 상에서, 요구되는 새로운 문자를 기록한 결과로서 수신되는, 컴퓨터 판독가능 기록 매체.
  8. 삭제
  9. 정정 인터페이스의 활성화에 대한 요구를 수신하도록 구성된 입력 엘리먼트; 및
    상기 정정 인터페이스를 활성화하도록 프로그래밍 및 구성된 프로세서를 포함하고,
    상기 정정 인터페이스는 원본 텍스트의 적어도 일부에 대응하는 편집가능한 텍스트 부분을 디스플레이하고, 상기 정정 인터페이스는 스타일러스를 통해 상기 편집가능한 텍스트 부분을 개별 문자별로 변경할 수 있게 하는 입력을 수용하고, 상기 프로세서는 (a) 상기 편집가능한 텍스트 부분 내 존재하는 2개의 기존의 연속 문자 사이에 적어도 하나의 추가 문자를 삽입하는 입력을 수신하고, (b) 상기 편집가능한 텍스트 부분으로부터 기존의 문자를 삭제하는 입력을 수신하고, (c) 상기 편집가능한 텍스트 부분 내의 기존의 문자의 변경을 나타내는 입력을 수신하도록 더 프로그래밍 및 구성되고,
    상기 정정 인터페이스는, (a) 상기 편집가능한 텍스트 부분을 포함하는 제1 부분, (b) 상기 원본 텍스트의 일부를 대체하기 위해 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 대안을 포함하는 제2 부분, 및 (c) 상기 스타일러스를 이용하여 선택가능한 적어도 하나의 액션 아이템을 갖는 메뉴를 포함하는 제3 부분을 포함하는 시스템.
  10. 제9항에 있어서,
    (a) 상기 프로세서는, 상기 2개의 기존의 연속 문자 사이의 정정 인터페이스에 대응하는 디지타이저의 영역 상에, 상기 스타일러스를 이용해, 상기 적어도 하나의 추가 문자가 기록될 때, 상기 적어도 하나의 추가 문자에 대응하는 입력을 수신하고;
    (b) 상기 프로세서는, 삭제될 기존의 문자에 관련된 메뉴로부터 삭제 액션이 선택될 때, 또는 상기 삭제될 기존의 문자의 위치의 상기 정정 인터페이스에 대응하는 디지타이저의 영역 상에, 상기 스타일러스를 이용해, 삭제 제스처가 기록될 때, 상기 삭제될 기존의 문자를 나타내는 입력을 수신하고;
    (c) 상기 프로세서는, 변경될 기존의 문자의 위치의 상기 정정 인터페이스에 대응하는 디지타이저의 영역 상에, 상기 스타일러스를 이용해, 요구되는 새로운 문자가 기록될 때, 상기 변경될 기존의 문자를 나타내는 입력을 수신하는, 시스템.
  11. 제9항에 있어서,
    상기 정정 인터페이스에 의해 수용된 입력의 적어도 일부는 상기 원본 텍스트 내에서 대응하는 변경을 트리거(trigger)하는, 시스템.
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
  47. 삭제
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 삭제
KR1020057012021A 2003-11-10 2004-07-28 잉크 정정 패드 KR101098642B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/704,126 US6989822B2 (en) 2003-11-10 2003-11-10 Ink correction pad
US10/704,126 2003-11-10

Publications (2)

Publication Number Publication Date
KR20060123028A KR20060123028A (ko) 2006-12-01
KR101098642B1 true KR101098642B1 (ko) 2011-12-23

Family

ID=34552055

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020057012021A KR101098642B1 (ko) 2003-11-10 2004-07-28 잉크 정정 패드

Country Status (6)

Country Link
US (2) US6989822B2 (ko)
EP (1) EP1719109A2 (ko)
JP (1) JP4746555B2 (ko)
KR (1) KR101098642B1 (ko)
CN (1) CN100543835C (ko)
WO (1) WO2005047400A2 (ko)

Families Citing this family (84)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US7966078B2 (en) 1999-02-01 2011-06-21 Steven Hoffberg Network media appliance system and method
US7174042B1 (en) * 2002-06-28 2007-02-06 Microsoft Corporation System and method for automatically recognizing electronic handwriting in an electronic document and converting to text
US7079713B2 (en) * 2002-06-28 2006-07-18 Microsoft Corporation Method and system for displaying and linking ink objects with recognized text and objects
US7259752B1 (en) 2002-06-28 2007-08-21 Microsoft Corporation Method and system for editing electronic ink
US7188309B2 (en) 2002-06-28 2007-03-06 Microsoft Corporation Resolving document object collisions
US7751623B1 (en) 2002-06-28 2010-07-06 Microsoft Corporation Writing guide for a free-form document editor
US7185278B1 (en) 2002-06-28 2007-02-27 Microsoft Corporation Separating and moving document objects using the movement of a wiper bar
US7721226B2 (en) 2004-02-18 2010-05-18 Microsoft Corporation Glom widget
US7358965B2 (en) * 2004-02-18 2008-04-15 Microsoft Corporation Tapping to create writing
US7659890B2 (en) * 2004-03-19 2010-02-09 Microsoft Corporation Automatic height adjustment for electronic highlighter pens and mousing devices
US8321786B2 (en) * 2004-06-17 2012-11-27 Apple Inc. Routine and interface for correcting electronic text
WO2006090405A1 (en) * 2005-02-23 2006-08-31 Hewlett-Packard Development Company, L.P. A method and a system for correcting recognition errors in handwriting recognition
US7526737B2 (en) * 2005-11-14 2009-04-28 Microsoft Corporation Free form wiper
US20080143691A1 (en) * 2005-11-23 2008-06-19 Quiteso Technologies, Llc Systems and methods for enabling tablet PC/pen to paper space
EP2543971B8 (en) * 2005-12-08 2019-02-27 Conversant Wireless Licensing S.à r.l. A method for an electronic device
US20070152961A1 (en) * 2005-12-30 2007-07-05 Dunton Randy R User interface for a media device
US7786979B2 (en) * 2006-01-13 2010-08-31 Research In Motion Limited Handheld electronic device and method for disambiguation of text input and providing spelling substitution
JP4744317B2 (ja) * 2006-02-16 2011-08-10 富士通株式会社 単語検索装置、単語検索方法、及びコンピュータプログラム
JP5186484B2 (ja) * 2006-04-20 2013-04-17 ノキア コーポレイション 手書き操作を用いた電子デバイスへのデータ入力
US7661068B2 (en) * 2006-06-12 2010-02-09 Microsoft Corporation Extended eraser functions
JP2008003805A (ja) * 2006-06-21 2008-01-10 Brother Ind Ltd 印刷装置
KR100814909B1 (ko) * 2007-02-21 2008-03-19 에스케이 텔레콤주식회사 전자펜 시스템에서의 정확한 문자 입력 지원 방법과 이를위한 전자펜 시스템 및 이동통신 단말기
JP5303865B2 (ja) * 2007-05-23 2013-10-02 株式会社リコー 情報処理装置、及び、情報処理方法
US9024864B2 (en) 2007-06-12 2015-05-05 Intel Corporation User interface with software lensing for very long lists of content
US7821524B2 (en) * 2007-06-26 2010-10-26 Microsoft Corporation Adaptive contextual filtering
US10001920B2 (en) * 2007-12-20 2018-06-19 Microsoft Technology Licensing, Llc Symbol lists for grammar-driven data entry
US8255822B2 (en) * 2007-12-21 2012-08-28 Microsoft Corporation Incorporated handwriting input experience for textboxes
US8064702B2 (en) * 2007-12-21 2011-11-22 Microsoft Corporation Handwriting templates
US8116569B2 (en) * 2007-12-21 2012-02-14 Microsoft Corporation Inline handwriting recognition and correction
US20090189892A1 (en) * 2008-01-27 2009-07-30 Nitin Desai Methods and systems for detecting a dirty region within a frame encompassing three dimensional graphics
KR101513023B1 (ko) * 2008-03-25 2015-04-22 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
KR101012379B1 (ko) * 2008-03-25 2011-02-09 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
TWI375162B (en) 2008-05-02 2012-10-21 Hon Hai Prec Ind Co Ltd Character input method and electronic system utilizing the same
KR101521920B1 (ko) * 2008-08-29 2015-05-20 엘지전자 주식회사 이동 단말기 및 그의 음악재생 제어방법
US20100171754A1 (en) * 2009-01-07 2010-07-08 Microsoft Corporation Converting digital ink to shapes and text
US20100238195A1 (en) * 2009-02-24 2010-09-23 Adapx Inc. Systems and Methods for Reviewing Digital Pen Data
US20110035209A1 (en) * 2009-07-06 2011-02-10 Macfarlane Scott Entry of text and selections into computing devices
JP5407076B2 (ja) * 2009-07-31 2014-02-05 シャープ株式会社 電子機器、文字受付方法、および文字受付プログラム
KR101142270B1 (ko) * 2009-12-23 2012-05-07 주식회사 디오텍 문서 편집 기능을 갖는 필기 입력 장치 및 그 방법
US8782556B2 (en) * 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US20110307840A1 (en) * 2010-06-10 2011-12-15 Microsoft Corporation Erase, circle, prioritize and application tray gestures
JP5622270B2 (ja) * 2010-10-28 2014-11-12 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 入力表示制御装置、入力表示制御方法およびプログラム
JP5741079B2 (ja) * 2011-03-09 2015-07-01 セイコーエプソン株式会社 画像生成装置およびプロジェクター
US9746995B2 (en) * 2011-07-14 2017-08-29 Microsoft Technology Licensing, Llc Launcher for context based menus
US9582187B2 (en) * 2011-07-14 2017-02-28 Microsoft Technology Licensing, Llc Dynamic context based menus
US20130212515A1 (en) * 2012-02-13 2013-08-15 Syntellia, Inc. User interface for text input
KR20130034747A (ko) * 2011-09-29 2013-04-08 삼성전자주식회사 휴대 단말기의 사용자 인터페이스 제공 방법 및 장치
US8286104B1 (en) 2011-10-06 2012-10-09 Google Inc. Input method application for a touch-sensitive user interface
US9176666B2 (en) * 2011-12-23 2015-11-03 Symbol Technologies, Llc Method and device for a multi-touch based correction of a handwriting sentence system
KR20130080515A (ko) * 2012-01-05 2013-07-15 삼성전자주식회사 디스플레이 장치 및 그 디스플레이 장치에 표시된 문자 편집 방법.
US9280524B2 (en) * 2012-06-28 2016-03-08 Texas Instruments Incorporated Combining a handwritten marking with a rendered symbol to modify the rendered symbol
KR20140014510A (ko) * 2012-07-24 2014-02-06 삼성전자주식회사 음성 인식에 의하여 형성된 문자의 편집 방법 및 그 단말
KR102129374B1 (ko) * 2012-08-27 2020-07-02 삼성전자주식회사 사용자 인터페이스 제공 방법 및 기계로 읽을 수 있는 저장 매체 및 휴대 단말
KR102091710B1 (ko) * 2012-08-28 2020-04-14 삼성전자주식회사 좌표 측정 장치 및 그 제어 방법
WO2014041607A1 (ja) * 2012-09-11 2014-03-20 株式会社東芝 情報処理装置、情報処理方法およびプログラム
US8584049B1 (en) 2012-10-16 2013-11-12 Google Inc. Visual feedback deletion
KR102105101B1 (ko) 2012-11-07 2020-04-27 삼성전자주식회사 디스플레이 장치 및 이의 문자 수정 방법
US9147275B1 (en) 2012-11-19 2015-09-29 A9.Com, Inc. Approaches to text editing
US9043349B1 (en) 2012-11-29 2015-05-26 A9.Com, Inc. Image-based character recognition
JP2014115894A (ja) * 2012-12-11 2014-06-26 Canon Inc 表示装置
WO2014106911A1 (ja) * 2013-01-04 2014-07-10 株式会社ユビキタスエンターテインメント 情報処理装置及び情報更新プログラム
JP2014211701A (ja) * 2013-04-17 2014-11-13 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20150116283A1 (en) * 2013-10-24 2015-04-30 Livescribe Inc. Paper Strip Presentation Of Grouped Content
KR102240279B1 (ko) * 2014-04-21 2021-04-14 삼성전자주식회사 컨텐트 처리 방법 및 그 전자 장치
US9576348B2 (en) * 2014-11-14 2017-02-21 Adobe Systems Incorporated Facilitating text identification and editing in images
US10671795B2 (en) * 2014-12-23 2020-06-02 Lenovo (Singapore) Pte. Ltd. Handwriting preview window
US10037137B2 (en) * 2014-12-23 2018-07-31 Lenovo (Singapore) Pte. Ltd. Directing input of handwriting strokes
US10698597B2 (en) * 2014-12-23 2020-06-30 Lenovo (Singapore) Pte. Ltd. Reflow of handwriting content
CN107430486B (zh) * 2015-01-28 2020-05-05 摩托罗拉解决方案公司 用于输入手写字符的方法和装置
US10248640B2 (en) * 2015-02-05 2019-04-02 Microsoft Technology Licensing, Llc Input-mode-based text deletion
JPWO2016170691A1 (ja) * 2015-04-24 2018-02-01 富士通株式会社 入力処理プログラム、入力処理装置、入力処理方法、文字特定プログラム、文字特定装置、及び文字特定方法
CN107533647A (zh) * 2015-04-24 2018-01-02 富士通株式会社 输入控制程序、输入控制装置、输入控制方法、字符修正程序、字符修正装置以及字符修正方法
US9898841B2 (en) * 2015-06-29 2018-02-20 Microsoft Technology Licensing, Llc Synchronizing digital ink stroke rendering
JPWO2017029737A1 (ja) * 2015-08-19 2018-05-31 富士通株式会社 文字列選択方法、プログラム及び情報処理装置
US20170244768A1 (en) * 2016-02-19 2017-08-24 Microsoft Technology Licensing, Llc Participant-specific functions while interacting with a shared surface
US20170285932A1 (en) * 2016-03-29 2017-10-05 Microsoft Technology Licensing, Llc Ink Input for Browser Navigation
US10210141B2 (en) * 2016-05-09 2019-02-19 Adobe Systems Incorporated Stylizing text by replacing glyph with alternate glyph
KR102037179B1 (ko) * 2016-08-26 2019-10-28 스타십벤딩머신 주식회사 이미지 콘텐츠 생성 방법 및 장치
JP6416309B1 (ja) * 2017-04-12 2018-10-31 株式会社アドバンスト・メディア 端末装置及びプログラム
CN109032495B (zh) * 2018-08-15 2019-06-04 掌阅科技股份有限公司 内容输入方法、电子设备及计算机存储介质
US10783323B1 (en) * 2019-03-14 2020-09-22 Michael Garnet Hawkes Analysis system
CN111063223B (zh) * 2020-01-07 2022-02-08 杭州大拿科技股份有限公司 英语单词拼写练习方法及装置
US11886801B1 (en) * 2022-12-22 2024-01-30 Huawei Technologies Co., Ltd. System, method and device for multimodal text editing

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001014096A (ja) 1999-06-25 2001-01-19 Toshiba Corp ペン入力装置、及び同装置に於ける文字入力方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5550930A (en) * 1991-06-17 1996-08-27 Microsoft Corporation Method and system for training a handwriting recognizer at the time of misrecognition
US5666139A (en) * 1992-10-15 1997-09-09 Advanced Pen Technologies, Inc. Pen-based computer copy editing apparatus and method for manuscripts
US5710831A (en) * 1993-07-30 1998-01-20 Apple Computer, Inc. Method for correcting handwriting on a pen-based computer
US5778404A (en) * 1995-08-07 1998-07-07 Apple Computer, Inc. String inserter for pen-based computer systems and method for providing same
US5682439A (en) * 1995-08-07 1997-10-28 Apple Computer, Inc. Boxed input correction system and method for pen based computer systems
US6111985A (en) * 1997-06-06 2000-08-29 Microsoft Corporation Method and mechanism for providing partial results in full context handwriting recognition
CA2330133C (en) 1998-04-24 2008-11-18 Natural Input Solutions Inc. Pen based edit correction interface method and apparatus
JP3881837B2 (ja) * 2000-10-27 2007-02-14 シャープ株式会社 手書入力装置および方法、ならびに手書入力プログラムが記録されたコンピュータで読取可能な記録媒体
US6791537B1 (en) * 2001-07-06 2004-09-14 Mobigence, Inc. Display of ink for hand entered characters
US6661409B2 (en) * 2001-08-22 2003-12-09 Motorola, Inc. Automatically scrolling handwritten input user interface for personal digital assistants and the like
JP2003115032A (ja) * 2001-10-05 2003-04-18 Fujitsu Ltd 手書き文字入力装置及びそれを実現するプログラム
JP2003308480A (ja) * 2002-04-16 2003-10-31 Fujitsu Ltd オンライン手書き文字パターン認識編集装置及び方法並びに当該方法を実現するコンピュータ実行可能なプログラム
US6986106B2 (en) * 2002-05-13 2006-01-10 Microsoft Corporation Correction widget
US7002560B2 (en) * 2002-10-04 2006-02-21 Human Interface Technologies Inc. Method of combining data entry of handwritten symbols with displayed character data
US7098896B2 (en) * 2003-01-16 2006-08-29 Forword Input Inc. System and method for continuous stroke word-based text input

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001014096A (ja) 1999-06-25 2001-01-19 Toshiba Corp ペン入力装置、及び同装置に於ける文字入力方法

Also Published As

Publication number Publication date
KR20060123028A (ko) 2006-12-01
WO2005047400A3 (en) 2005-11-17
US20060007190A1 (en) 2006-01-12
JP4746555B2 (ja) 2011-08-10
WO2005047400A2 (en) 2005-05-26
CN1802689A (zh) 2006-07-12
US20050099406A1 (en) 2005-05-12
JP2007511003A (ja) 2007-04-26
EP1719109A2 (en) 2006-11-08
US7701449B2 (en) 2010-04-20
CN100543835C (zh) 2009-09-23
US6989822B2 (en) 2006-01-24

Similar Documents

Publication Publication Date Title
KR101098642B1 (ko) 잉크 정정 패드
KR101120850B1 (ko) 잉크의 스케일링된 텍스트로의 대체
KR101015291B1 (ko) 동적으로 확장하는 입력 패널로 사용자 입력을 추가하는방법
US8074184B2 (en) Modifying electronic documents with recognized content or other associated data
US7137076B2 (en) Correcting recognition results associated with user input
US9170731B2 (en) Insertion point bungee space tool
US7925987B2 (en) Entry and editing of electronic ink
CA2501118C (en) Method of combining data entry of handwritten symbols with displayed character data
US7336828B2 (en) Multiple handwriting recognition engine selection
KR101109191B1 (ko) 문자 연관 및 변환 방법 및 컴퓨터 판독가능 기록 매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141117

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151118

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20161123

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20171117

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20181115

Year of fee payment: 8