KR100721634B1 - 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및방법 - Google Patents

디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및방법 Download PDF

Info

Publication number
KR100721634B1
KR100721634B1 KR1020067027317A KR20067027317A KR100721634B1 KR 100721634 B1 KR100721634 B1 KR 100721634B1 KR 1020067027317 A KR1020067027317 A KR 1020067027317A KR 20067027317 A KR20067027317 A KR 20067027317A KR 100721634 B1 KR100721634 B1 KR 100721634B1
Authority
KR
South Korea
Prior art keywords
document
tool
screen
content
display
Prior art date
Application number
KR1020067027317A
Other languages
English (en)
Other versions
KR20070007213A (ko
Inventor
메이지드 안워
Original Assignee
픽셀 (리서치) 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=26244100&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR100721634(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Priority claimed from GBGB0009129.8A external-priority patent/GB0009129D0/en
Priority claimed from US09/703,502 external-priority patent/US7055095B1/en
Application filed by 픽셀 (리서치) 리미티드 filed Critical 픽셀 (리서치) 리미티드
Publication of KR20070007213A publication Critical patent/KR20070007213A/ko
Application granted granted Critical
Publication of KR100721634B1 publication Critical patent/KR100721634B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1208—Improving or facilitating administration, e.g. print management resulting in improved quality of the output result, e.g. print layout, colours, workflows, print preview
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1206—Improving or facilitating administration, e.g. print management resulting in increased flexibility in input data format or job format or job type
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1224—Client or server resources management
    • G06F3/1228—Printing driverless or using generic drivers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1244—Job translation or job parsing, e.g. page banding
    • G06F3/1245—Job translation or job parsing, e.g. page banding by conversion to intermediate or common format
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • G06F3/1256—User feedback, e.g. print preview, test print, proofing, pre-flight checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1292—Mobile client, e.g. wireless printing
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Position Input By Displaying (AREA)
  • Image Generation (AREA)
  • Digital Computer Display Output (AREA)
  • Document Processing Apparatus (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Facsimiles In General (AREA)
  • Camera Data Copying Or Recording (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)
  • Record Information Processing For Printing (AREA)

Abstract

본 발명은 메모리 내에 저장되고 프로세서에 의하여 실행되도록 적응된 시스템 코드를 포함하는 핸드헬드 컴퓨팅 장치를 포함하는 시스템이다. 시스템 코드는 접촉식 디스플레이 상에 디스플레이될 콘텐츠를 나타내는 입력 바이트 스트림을 프로세스할 수 있고, 콘텐츠의 내부 화상을 나타내는 콘텐츠 문서 파일을 생성할 수 있다. 툴 문서 파일은 또한 메모리에 저장될 수 있고 그래픽 툴을 나타내는 이미지를 제공하는 문서의 내부 화상을 제공할 수 있다. 툴 코드는 툴 문서와 연관될 수 있고, 툴 코드는 툴과 관련된 디스플레이 효과를 달성하는 방식으로 콘텐츠를 제공하는 콘텐츠의 내부 화상을 형성하기 위하여 콘텐츠 문서 파일을 프로세싱할 수 있다. 상기 장치는 또한 디스플레이 효과를 표현하는 방식으로 접촉식 디스플레이 상에 디스플레이하기 위한 스크린 문서를 생성하기 위하여 콘텐츠 문서 파일, 툴 문서 파일, 및 프로세싱된 내부 화상을 프로세싱하는 파싱 코드를 포함할 것이다.

Description

디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및 방법 {USER INTERFACES AND METHODS FOR MANIPULATING AND VIEWING DIGITAL DOCUMENTS}
도 1은 본 발명에 따른 하나의 시스템에 관한 기능 블록 다이어그램을 제공한다.
도 2는 도 1에 도시된 시스템과 같은 시스템에 의하여 생성된 툴(tool)의 한 가지 예시를 도시한다.
도 3은 여러 페이지를 가진 문서를 두루 네비게이팅하기 위한 여러 개의 썸네일 스케치를 나타내는 그래픽 사용자 인터페이스 툴을 도시한다.
도 4는 본 발명에 따른 그래픽 사용자 인터페이스 툴의 확대도를 도시하고, 상기 확대된 그래픽 사용자 인터페이스 툴은 확대된 영역 내에 부가적인 정보를 제공한다.
도 5는 반투명이고 적응가능하게 상당히 큰 눈금자(ruler) 그래픽 툴을 도시한다.
도 6은 투명한 물음표 표시의 그래픽 사용자 인터페이스 툴을 도시한다.
도 7은 그래픽 툴을 활성화 및 불활성화시키기 위한 사용자 인터페이스 메커니즘을 도시한다.
도 8a 및 도 8b는 디스플레이된 문서의 선택된 부분들을 시각적으로 강화하 기 위한 사용자 인터페이스 툴을 도시한다.
도 9는 본 발명에 따른 부가적인 사용자 인터페이스 툴을 도시한다.
도 10 및 도 11은 본 발명에 따른 텍스트 입력 툴을 도시한다.
도 12a 내지 도 12g는 핸드헬드 시스템에 명령을 제공하기 위한 스트로크 세트를 도시한다.
도 13a 내지 도 13b는 디스플레이되는 문서에 속도 특성을 적용함으로써 문서를 두루 스크롤링하기 위한 사용자 인터페이스 툴을 도시한다.
<도면의 주요부분에 대한 부호의 설명>
8 : 컴퓨터 프로세스 11 : 소스 문서
12 : 문서 에이전트 14 : 내부 화상 파일
15 : 메모리 버퍼 또는 파일 16 : 라이브러리
18 : 파서/렌더러 엔진 22 : 형상 프로세서
26 : 디스플레이 30 : 툴 문서 파일
본 명세서에서 설명되는 시스템 및 방법은 이전에 출원된 영국 특허 출원 제 0009129.8호 및 이전에 출원된 미국 특허 출원 제 09/703,502호와 관련되고, 이와 함께, 본 출원과 동일자로 출원되어 특허가 부여된 미국 특허 출원, 디지털 문서 프로세싱(Digital Document Procession)을 위한 시스템 및 방법과 관련되며, 상기 모든 출원은 발명자가 Majid Anwar이고, 그 내용은 참조로서 본 명세서에 결합된다.
본 명세서에서 설명되는 시스템 및 방법은 디지털 문서의 디스플레이를 조작하고 보기 위한 시스템 및 방법에 관한 것이다. 보다 상세하게는 사용자가 디스플레이, 예를 들어 컴퓨터, 이동 통신기(mobile communicator) 또는 전화와 같은 핸드헬드 전자 장치(hand held electronic device)의 디스플레이, 또는 접촉식 커맨더(tactile commander)와 관련된 디스플레이 장치상에 제시되는 디지털 문서를 조작하고 볼 수 있게 하는 사용자 인터페이스 시스템 및 방법에 관한 것이다.
오늘날, 사용자가 문서, 이메일, 비디오 프레젠테이션, 및 콘텐츠(content)의 다른 형태를 쉽게 볼 수 있게 하는 이동식 핸드헬드 컴퓨팅 장치를 만들려는 많은 노력이 행해지고 있다. 이러한 목표를 달성하기 위하여, 엔지니어들과 과학자들은 '디지털 문서 프로세싱 시스템 및 방법'이라는 명칭의 앞서 참조된 미국 특허 출원에 설명된 시스템을 포함하는 시스템을 개발하고 있고, 상기 미국 특허 출원의 내용은 여기에 참조로서 통합된다. 거기에 기술된 것처럼, 문서, 시청각 프레젠테이션, 또는 소정의 다른 유형의 콘텐츠와 같은 디지털 콘텐츠는 핸드헬드 장치, 이동 장치, 또는 소정의 다른 플랫폼상에서 동작하는 소프트웨어 시스템에 의하여 프로세싱되고, 소프트웨어 시스템에 의하여 프로세싱되고 조작될 수 있는 균일한 내부 화상으로 번역되어, 그 결과 상기 시스템에 의하여 서로 다른 유형의 콘텐츠의 디스플레이가 생성될 수 있고, 각 장치의 스크린 디스플레이 상에 제공될 수 있다.
따라서 이러한 시스템들은 Palm Pilot, Compaq Ipaq와 같은 다른 핸드헬드 및 이동 컴퓨팅 시스템 및 이동 전화와 마찬가지로 사용자에게 콘텐츠의 디스플레이를 제공할 수 있다. 그러나 이러한 핸드헬드 및 이동 시스템들은 전형적으로 작고 제한된 키보드, 통상적으로 휴대폰에 제시하는 키보드와 같은 단순한 입력 장치, 또는 팜 컴퓨팅 장치(Palm computing device)가 구비하는 터치 스크린과 같은 작은 터치 스크린 시스템에 제한된다. 따라서 이러한 시스템들이 사용자에게 매우 복잡한 콘텐츠를 제공할 수 있더라도, 이러한 시스템들은 사용자가 문서의 서로 다른 페이지를 넘기거나 문서의 서로 다른 부분들을 선택하는 것과 같이 그러한 콘텐츠의 디스플레이를 조작할 수 있게 하는 능력면에서는 제한적이다. 따라서 이러한 핸드헬드 및 휴대용 시스템이 매우 유용함에도 불구하고, 조작을 지원하고 이러한 장치들 상에 제공되는 콘텐츠를 보는 데 이용될 수 있는 사용자 인터페이스상에 부분적으로 기초해 보건대 이러한 핸드헬드 및 휴대용 시스템의 사용에는 한계가 있다.
결과적으로, 핸드헬드 또는 휴대용 장치에 의해 제공되는 콘텐츠를 조작하고 보는 것을 보다 용이하게 해 주는 개선된 사용자 인터페이스 툴을 제공하는 시스템 및 방법에 대한 당업계의 요구가 존재한다.
부가적으로, 콘텐츠가 그것의 원시(native) 애플리케이션 프로그램과 분리될 때, 콘텐츠의 조작을 가능하게 하는 사용자 인터페이스 툴(tools)에 대한 당업계의 요구가 존재한다.
본 명세서에서 설명되는 시스템 및 방법은 개선된 사용자 인터페이스 툴을 제공하고, 상기 사용자 인터페이스 툴은 사용자가 이동 장치 또는 핸드헬드 장치상에 제공되는 콘텐츠를 보다 용이하게 조작하고 볼 수 있게 한다. 특정한 하나의 실시예에서, 본 명세서에서 설명되는 시스템 및 방법은 촉감 사용자 인터페이스 경험(touch and feel user interface experience)을 제시하는 그래픽 사용자 인터페이스를 제공한다. 보다 상세하게는, 본 명세서에서 설명되는 시스템 및 방법은 문서에 대한 접촉식 컨트롤을 시뮬레이팅하기 위한 시스템을 구비한 핸드헬드 또는 이동 컴퓨터 장치를 포함하고, 상기 문서는 장치 그 자체에서 또는 원격 명령 또는 다른 유닛 상의 원격 디스플레이 또는 원격 명령을 통해 볼 수 있다. 이러한 시스템은 프로세서, 메모리, 및 접촉식 디스플레이(touch-sensitive display)(또는 원격 접촉식 컨트롤을 가진 디스플레이)를 수용하는 하우징, 및 메모리 내에 저장되어 프로세서에 의해 실행되는 시스템 코드를 포함할 수 있다. 시스템 코드는 문서의 디지털 화상(digital representation)을 생성하거나 제공할 수 있고, 디지털 화상은 데이터 콘텐츠와 문서의 페이지 레이아웃(page layout)을 나타내는 페이지 구조를 포함할 수 있다. 그리하여, 특정 애플리케이션에서, 렌더링된(rendered) 이미지는 문서의 레이아웃과 문서의 콘텐츠를 포함할 수 있고, 그에 의하여 문서가 물리적으로 보이는 대로의 이미지를 제공한다. 상기 시스템은 또한 접촉식 디스플레이 상에 디지털 화상으로 된 페이지 레이아웃의 적어도 일부를 렌더링하기 위한 파서(parser)와 렌더러(renderer)를 포함할 수 있는 렌더링 엔진을 포함할 수 있다. 스크린 모니터는 접촉식 스크린의 표면을 가로지른 이동을 검출하기 위하여 접촉식 스크린을 모니터링할 수 있고, 인터페이스 프로세스는 검출된 이동을 프로 세싱하여 디지털 화상의 페이지 구조를 변경하는 명령을 나타내는 모션(motion)을 검출할 수 있다. 네비게이션 모듈은 인터페이스 프로세스에 응답할 수 있고 페이지 레이아웃의 렌더링된 부분을 바꿀 수 있다. 이와 같이, 페이지 레이아웃의 렌더링된 부분을 변경함으로써, 상기 시스템은 사용자가 문서의 디지털 화상을 두루 네비게이팅할 수 있게 한다. 비록 본 발명의 시스템 및 방법은 예시의 목적으로 다른 애플리케이션에 그리고 다른 유형의 시스템에 사용될 때에도 적용가능성 및 가치를 갖지만, 본 발명은 상기 시스템이 핸드헬드 컴퓨팅 장치상에 제공되는 문서의 네비게이션을 도와주는 적용예를 참조하여 설명될 것이다.
보다 상세하게, 본 명세서에서 설명되는 시스템 및 방법은 그 중에서도 특히 문서에 대한 접촉식 컨트롤을 시뮬레이팅하기 위한 시스템을 구비한 컴퓨터 장치를 제공한다. 하나의 실시예에서, 이러한 시스템은 프로세서, 메모리 및 디스플레이; 상기 메모리 내에 저장되어 상기 프로세서에 의하여 실행되고, 데이터 콘텐츠(data content)를 포함하는 문서 및 상기 문서의 페이지 레이아웃(layout)을 표현하는 페이지 구조의 디지털 화상을 제공하는 시스템 코드; 상기 디스플레이 상에서 상기 디지털 화상의 페이지 레이아웃의 적어도 일부를 렌더링하기 위한 렌더링 엔진(rendering engine); 스크린을 모니터링하여 상기 디스플레이 상에 나타나는 이미지를 가로지른 객체의 이동(movement)을 검출하기 위한 스크린 모니터; 검출된 이동을 프로세싱하여 디지털 화상의 렌더링된 페이지 구조를 변경하는 명령을 나타내는 모션(motion)을 검출하는 인터페이스 프로세스; 및 인터페이스 프로세스에 응답하여 상기 페이지 레이아웃의 렌더링된 부분을 변경하는 네비게이션 모듈을 포함하 는데, 상기 페이지 레이아웃의 렌더링된 부분을 변경하는 것은 사용자로 하여금 상기 문서의 상기 디지털 화상을 두루 조종(navigate)할 수 있게 한다.
이러한 컴퓨터 장치는 접촉식 디스플레이를 포함할 수 있고, 상기 스크린 모니터가 상기 접촉식 디스플레이의 표면을 가로지른 이동을 검출하기 위하여 접촉식 스크린을 모니터링하며, 또한 상기 컴퓨터 장치는 상기 디스플레이의 스크린을 가로질러 이동하는 커서(cursor)를 표시할 수 있는 컴퓨터 디스플레이를 포함하고, 상기 스크린 모니터는 상기 디스플레이의 표면을 가로지른 상기 커서의 이동을 검출한다. 프로세서, 메모리, 스크린 모니터 및 디스플레이는 핸드헬드 컴퓨터, 전화기, 이동 데이터 단말기(mobile data terminal), 셋 톱 박스(set top box), 내장형 프로세서, 노트북 컴퓨터, 컴퓨터 워크스테이션, 프린터, 복사기, 팩시밀리를 포함하는 복수의 애플리케이션 및 장치에 유용한 데이터 프로세싱 플랫폼(data processing platform)으로서 구성될 수 있다.
특정의 선택적인 실시예에서, 컴퓨터 장치는 또한 상기 접촉식 디스플레이의 표면을 가로질러 검출되는 모션과 관련된 속도 벡터를 결정하기 위한 속도 검출기를 포함할 수 있고, 또한 디스플레이 내의 문서에 속도 특성(velocity characteristic)을 적용하기 위한 수단을 포함할 수 있다.
부가적으로, 이러한 컴퓨터 장치들은 문서 또는 문서들의 집합 및 다른 콘텐츠의 네비게이팅을 보다 용이하게 해주는 인터페이스 프로세스를 가질 수 있다. 이러한 인터페이스 프로세스는 문서의 코너(corner)를 그래픽적으로 표현하는 페이지 레이아웃의 일부를 제공하는 위치에서 접촉식 스크린의 표면을 가로지른 모션을 검출하기 위한 페이지 플립 검출기(page-flip detector)를 포함할 수 있다. 페이지 플립 검출기는 현재 렌더링된 페이지에 인접한 페이지를 나타내는, 또는 현재 렌더링된 페이지에 대해 선택된 인접성을 갖는 페이지 레이아웃의 일부를 렌더링할 수 있다. 유사하게, 상기 장치는 현재 렌더링된 페이지에 인접한 페이지의 일부를 표현하는, 또는 현재 렌더링된 페이지에 대해 선택된 인접성을 갖는 상기 페이지 레이아웃의 일부를 렌더링하기 위한 페이지 컬 검출기(page curl detector)를 포함할 수 있다. 부가적으로, 인터페이스 프로세스는 렌더링되어야 하는 상기 페이지 레이아웃의 일부를 선택하기 위한, 또는 문서의 디지털 화상의 데이터 콘텐츠를 변경하기 위한 명령을 나타내는 미리 정의된 이동을 검출하기 위한 제스처링 프로세스(gesturing process)를 포함할 수 있다. 부가하여, 인터페이스 제어는 디스플레이 상에 제공되는 문서의 투명성을 제어하기 위한 프로세스 및 문서의 선택된 부분의 투명성 특성을 제어하여 문서의 다른 부분들과 관련하여 상기 선택된 부분의 가시성(visibility)을 조절하기 위한 프로세스를 포함할 수 있다. 다른 인터페이스 프로세스는 확대 툴(magnifying tool), 눈금자(ruler), 텍스트 입력 커서(text entry cursor), 썸네일 네비게이션 열(thumbnail navigation column), 링크된 콘텐츠의 썸네일 뷰(thumbnail view) 및 질문 툴을 나타내는 툴을 포함하는 툴들을 제공할 수 있다.
다른 양상에서, 본 발명은 상황 감지 그래픽 인터페이스 툴(context sensitive graphical interface tool)을 구비한 컴퓨터 장치 및 관련 프로세스를 제공한다. 이러한 장치는 프로세서, 메모리, 및 접촉식 디스플레이; 상기 메모리 에 저장되고 콘텐츠의 내부 화상을 나타내는 콘텐츠 문서 파일(content document file); 상기 메모리에 저장되고, 그래픽 인터페이스 툴을 나타내는 이미지를 제공하는 문서의 내부 화상을 제공하는 툴 문서 파일; 상기 프로세서를 실행할 수 있고, 상기 툴 문서 파일과 관련되며, 상기 툴과 관련된 디스플레이 효과를 얻는 방식으로 렌더링될 때 상기 콘텐츠를 제공하는 상기 콘텐츠의 내부 화상을 형성하도록 상기 콘텐츠 문서 파일을 프로세싱할 수 있는 툴 코드; 상기 콘텐츠 문서 파일, 상기 툴 문서 파일 및 상기 프로세싱된 내부 화상을 프로세싱하여 디스플레이를 위한 스크린 문서를 생성하는 파싱 코드(parsing code); 및 사용자가 그래픽 인터페이스 툴의 이미지를 렌더링된 콘텐츠에 대해 선택된 문맥적인 관계(contextual relationship)로 배치할 수 있게 하고, 상기 툴 코드에 상기 선택된 위치와 관련된 상기 콘텐츠 문서 파일의 일부를 프로세싱하도록 지시하기 위하여 상기 프로세서 상에서 실행될 수 있는 인터페이스 코드를 포함할 수 있다.
상기 인터페이스 코드는 그래픽 인터페이스 툴과 렌더링된 콘텐츠 사이의 문맥적인 관계를 검출하기 위한 수단을 포함할 수 있다. 상기 문맥적인 관계는 애플리케이션에 따라 변화할 수 있고, 예를 들어 상기 그래픽 인터페이스 툴과 상기 렌더링된 콘텐츠의 상대적인 위치, 상기 그래픽 인터페이스 툴이 상기 렌더링된 콘텐츠에 작용하는 시간, 및 상기 렌더링된 콘텐츠의 상태를 포함하는 그룹으로부터 선택될 수 있다. 이러한 장치는 유연성이 있으며, 핸드헬드 컴퓨터, 전화기, 이동 데이터 단말기, 셋 톱 박스, 내장형 프로세서, 노트북 컴퓨터, 컴퓨터 워크스테이션, 프린터, 복사기, 및 팩시밀리, 그리고 또한 차량 내 시스템, 오디오 플레이어, 전자레인지, 냉장고, 및 세탁기와 같은 가정용 가전 제품을 포함하는(이에 한정되는 것은 아님) 서로 다른 형태 및 장치에 내장될 수 있다.
그러나 당업자는 콘텐츠가 표준 키보드 및 마우스와 같은 전형적인 입력 툴을 포함하는 종래의 컴퓨터 워크스테이션 상에 디스플레이되는 애플리케이션을 포함하는 다른 애플리케이션에 이러한 인터페이스 툴이 사용될 수 있음을 이해할 것이다. 부가적으로, 본 명세서에서 설명되는 시스템 및 방법은 또한 출력 장치로서 사용되는 내장형 시각 장치와 같은 내장형 디스플레이 시스템에 대한 인터페이스를 제공하기에 유용한 툴을 제공한다. 상기 내장형 디스플레이 시스템의 예는 휴대폰, 사용자가 복사 작업을 수행하기 위해 서로 다른 옵션을 선택할 수 있게 하고 또한 복사되는 문서의 이미지를 사용자에게 제시할 수 있는 시각적 터치 스크린 디스플레이를 구비한 복사기를 포함할 수 있다. 다른 예는 사용자가 입력되는 팩스의 표시를 볼 수 있도록 사용자에게 시각적인 디스플레이가 제공되는 팩스 기계를 포함할 수 있다. 본 명세서에서 설명되는 사용자 인터페이스 시스템 및 방법의 다른 실시예 및 적용예는 당업자에게 자명할 것이다.
보다 상세하게, 본 명세서에서 설명되는 시스템 및 방법은 사용자가 스크린 상에 디스플레이되는 콘텐츠를 조작할 수 있게 해 주는 사용자 인터페이스 툴을 제공한다. 특히, 본 명세서에서 설명되는 시스템 및 방법은 디스플레이 상에 제시되는 정보에 대한 추상화 계층(abstraction layer)을 형성하는 소프트웨어 시스템을 제공한다. 이러한 추상화 계층은 문서 객체를 포함하고, 문서 객체는 정보, 또는 스크린 상에 디스플레이되어야 하는 콘텐츠를 포함한다. 일 실시예에서, 스크린 상에 디스플레이되는 모든 정보는 하나의 문서로서 취급된다. 이와 같이, 최고 수준에서, 스크린의 전체 콘텐츠는 하나의 문서 객체로서 이해된다. 이러한 실시예에 부가하여, 문서 객체는 다른 문서 객체들을 포함할 수 있고, 각각의 문서 객체는 사용자에게 디스플레이되는 콘텐츠의 하위세트(subset)를 포함할 수 있다. 그리하여, 스크린 레벨에서, 디스플레이되는 모든 정보는 단일 문서로서 이해될 것이고, 웹 페이지, 스트리밍된 비디오(streamed video), 및 그래픽 아이콘과 같이 스크린 상에 나타나는 아이템은 각각 고수준 스크린 문서 객체 내에 포함된 문서 객체들로서 개별적으로 이해된다. 따라서 스크린상에 디스플레이되는 모든 콘텐츠는 하나의 문서로서 추상적으로 다루어지고, 이러한 패러다임은 디스플레이되는 콘텐츠가 텍스트의 페이지를 나타내는 정보이든 사용자 인터페이스 툴 또는 윈도우/데스크탑 퍼니쳐(window/desktop furniture)를 나타내는 정보이든 유효하다. 따라서 본 명세서에서 설명되는 사용자 인터페이스 시스템 및 방법은 사용자 인터페이스 툴 및 사용자가 스크린 디스플레이 상에 제공되는 문서 객체를 조작할 수 있게 하는 기능을 제공한다.
부가적으로, 본 명세서에서 설명되는 시스템 및 방법은, 하나의 실시예에서, 프로세서, 메모리, 및 접촉식 디스플레이를 수용하는 하우징을 포함하는 핸드헬드 컴퓨팅 장치를 제공한다. 부가하여, 컴퓨팅 장치는 메모리 내에 저장되고 프로세서에 의하여 실행되는 시스템 코드를 포함할 수 있다. 시스템 코드는 접촉식 디스플레이상에 디스플레이될 콘텐츠를 나타내는 입력 바이트 스트림(input byte stream)을 프로세싱할 수 있고, 콘텐츠의 내부 화상을 나타내는 콘텐츠 문서 파일 을 생성할 수 있다. 툴 문서 파일은 또한 메모리에 저장될 수 있고 그래픽 툴을 나타내는 이미지를 제공하는 문서의 내부 화상을 제공할 수 있다. 툴 코드는 툴 문서와 연관될 수 있고, 툴 코드는 툴과 관련된 디스플레이 효과를 달성하는 방식으로 콘텐츠를 제공하는 콘텐츠의 내부 화상을 생성하도록 콘텐츠 문서 파일을 프로세싱할 수 있다. 상기 툴 코드는 콘텐츠 문서 파일의 정보를 프로세싱하기 위한 스크립트 명령 세트를 포함할 수도 있다. 상기 컴퓨팅 장치는 또한 콘텐츠 문서 파일, 툴 문서 파일 및 프로세싱된 내부 화상을 프로세싱하여, 디스플레이 효과를 표현하는 방식으로 접촉식 디스플레이 상에 디스플레이하기 위한 스크린 문서를 생성하는 파싱 코드를 포함할 것이다. 상기 장치는 또한 복수의 스트로크를 검출하기 위한 제스처 스트로크 엔진을 포함할 수 있다.
전술한 본 발명의 목적과 이점 및 다른 목적과 이점이 첨부된 도면을 참조하여 이하의 부가적인 설명으로부터 보다 완전히 이해될 수 있다.
본 명세서에서 설명되는 시스템 및 방법은 컴퓨터 단말, 디스플레이 스크린, 프린터, 플로터(plotter), 또는 인간이 판독할 수 있는 정보의 시각적인 표현을 형성하기에 적절한 임의의 다른 출력 장치와 같은 관찰면(viewing surface) 상에 디스플레이되는 문서들을 조작하고 표시하기 위한 시스템 및 방법을 포함한다. 예시의 목적으로, 상기 시스템 및 방법은 특정한 예시적인 실시예를 참조하여 설명될 것이고, 터치 스크린 디스플레이를 포함하고 서로 다른 포맷으로 생성된 콘텐츠의 집적된 뷰(view)를 디스플레이할 수 있는 핸드헬드 컴퓨터 시스템을 포함한다. 특 히, 본 명세서에서 설명되는 시스템 및 방법은 그래픽 사용자 인터페이스 툴을 포함하고, 상기 인터페이스 툴은 스크린 상에 디스플레이되는 다른 콘텐츠와 함께 통합될 콘텐츠로서 표현될 수 있는 툴을 표현할 수 있다.
도 1은 본 발명에 따른 시스템(10)을 나타낸다. 상기 시스템(10)은 공통적으로 프로세서, 메모리 및 디스플레이를 포함하는 유형의 컴퓨터 장치의 기능 블록 다이어그램으로서 도시된다. 그러나 상기 시스템(10)은 또한 프로세서를 본 발명에 따른 시스템으로서 구성하기 위하여 프로세서상에서 실행할 수 있는 시스템 코드를 포함하는 소프트웨어 시스템으로서 전체적으로 또는 부분적으로 구현될 수 있다. 도시된 시스템(10)은 컴퓨터 프로세스(8), 복수의 소스 문서(11), 툴 문서 파일(30), 형상 프로세서(22) 및 비디오 디스플레이(26)를 포함한다. 컴퓨터 프로세스(8)는 복수의 문서 에이전트(document agents)(12), 일반적인 데이터 객체의 라이브러리(16), 내부 화상 파일(internal representation file)(14), 메모리 버퍼 또는 파일(15), 및 파서(parser)/렌더러(renderer) 엔진(18)을 포함한다.
도시된 실시예에서, 디스플레이(26)는 복수의 서로 다른 문서의 이미지를 나타낼 수 있다. 디스플레이(26) 상에 나타나는 각각의 표시(representative) 출력은 문서(document)라고 불리고, 각각의 도시된 문서들은 하나의 별개의 애플리케이션 프로그램, 예를 들어 워드(Word), 넷스케이프 네비게이터(Netscape Navigator), 리얼 플레이어(Real Player), 아도비(Adobe), 비지오(Visio) 및 다른 유형의 애플리케이션과 연관될 수 있다. 본 명세서에서 사용되는 '문서'라는 용어는 문서, 스트리밍 비디오, 웹 페이지, 및 컴퓨터 프로세서(8)에 의하여 프로세싱될 수 있고 디스플레이될 수 있는 임의의 다른 형태의 데이터를 포함하는 것으로 이해될 것이다.
컴퓨터 프로세스(8)는 하나의 출력 디스플레이를 생성하고 상기 디스플레이는 그 내부에 하나 이상의 문서를 포함한다. 디스플레이되는 문서의 집합은 애플리케이션 프로그램에 의하여 생성되는 콘텐츠를 표현하고 이러한 콘텐츠는 컴퓨터 프로세스(8)에 의하여 생성되는 프로그램 윈도우 내에 디스플레이된다. 컴퓨터 프로세스(8)를 위한 프로그램 윈도우는 또한 그래픽 사용자 인터페이스가 제공되고 사용자가 프로그램 윈도우에 나타나는 문서의 동작, 이 경우에는 디스플레이 동작을 제어할 수 있게 하는 툴을 나타내는 아이콘(icons) 세트를 포함할 수 있다.
도시된 실시예에서, 디스플레이(26)는 하나의, 집적된 디스플레이에 서로 다른 데이터 유형들을 나타내는 콘텐츠를 제공한다. 이것은 각각의 애플리케이션 프로그램이 그 자체의 디스플레이를 형성하게 하여, 그 결과 여러 개의 프로그램 윈도우를 포함하는 디스플레이 장치(26) 상에, 각 애플리케이션 프로그램에 대해 통상 하나의 프레젠테이션을 야기하는 종래의 접근법과 대조적이다. 부가적으로, 각각의 서로 다른 프로그램 윈도우의 유형은 그러한 윈도우에 디스플레이되는 내용을 조작하기 위한 사용자 인터페이스 툴의 서로 다른 세트를 포함한다. 이와 같이, 도 1에 도시된 시스템은 서로 다른 유형으로 되어 있는 문서들의 가시적인 이미지를 포함하는 집적된 디스플레이를 형성한다. 이것은 보통 브라우저(browser)에서 보이는 웹 페이지, 보통 뷰어(viewer)에서 보이는 워드 문서나 워드 프로세싱 문서, 보통 벡터 그래픽 판독기에서 보이는 PDF 문서, 보통 비디오 플레이어에서 보 이는 스트리밍(streaming) 비디오를 포함한다. 이와 같이, 도시된 시스템(10)은 이러한 문서들의 콘텐츠를 기본적인(underlying) 애플리케이션 프로그램과 구분하고, 스크린(26) 상의 디스플레이를 위하여 문서들을 제공한다.
사용자가 도시된 문서를 조작하게 하기 위하여, 도 1에 도시된 시스템(10)은 문서의 집합이 다수 페이지 텍스트 문서이든, 웹 사이트의 페이지이든 또는 비디오 프리젠테이션을 구성하는 일련의 시변(time varying) 이미지이든 문서의 집합을 두루 네비게이팅하기 위해 사용될 수 있는 툴 세트를 제공한다. 이러한 목적으로, 이하에서 더 상세히 설명되는 바와 같이, 상기 시스템(10)은 툴들을 표현하는 문서를 생성하고 상기 문서는 시스템(10)이 임의의 다른 유형의 문서를 디스플레이하는 것처럼 상기 시스템(10)에 의하여 디스플레이될 수 있다. 이와 같이 본 발명의 시스템(10)은 일관성 있는 사용자 인터페이스를 제공하고, 서로 다른 문서들을 디스플레이하고 제어하기 위하여 단지 한 세트의 툴에 대한 인식을 요구한다는 이점을 갖는다.
앞서 설명된 것처럼, 각각의 소스 문서(11)는 문서 에이전트(12)와 관련되고, 상기 문서 에이전트(12)는 입력된 문서를 소스 문서(11) 콘텐츠의 내부 화상으로 변환할 수 있다. 소스 문서(11)를 프로세싱하도록 적절한 문서 에이전트(12)를 식별하기 위하여, 도 1의 상기 시스템(10)은 애플리케이션 프로그램과 상기 시스템(10) 사이의 인터페이스를 제어하는 애플리케이션 디스패처(dispatcher)(미도시)를 포함한다. 하나의 실행에서, 외부 애플리케이션 프로그래밍 인터페이스(API)는 데이터를 전달하는 애플리케이션 디스패처와 통신하고, 적절한 문서 에이전트(12)를 호출하거나 또는 그렇지 않으면 애플리케이션 프로그램에 의하여 이루어진 요구(request)를 수행한다. 특정한 소스 문서(11)에 대해 적절한 문서 에이전트(12)를 선택하기 위하여, 애플리케이션 디스패처는 소스 문서(11)를 모든 로딩된 문서 에이전트(12)에 통지한다. 그 다음에 이러한 문서 에이전트(12)는 공개된 소스 문서(11)의 콘텐츠를 변환하는 것에 대한 특정한 적합성에 관련된 정보로 응답한다. 일단 문서 에이전트가 응답하면, 애플리케이션 디스패처는 문서 에이전트(12)를 선택하며 소스 문서(11)의 URI와 같은 포인터를 선택된 문서 에이전트(12)에 전달한다.
도 1에 도시된 것처럼, 문서 에이전트(12)는 내부 화상(14)을 생성하기 위하여 표준 객체 유형의 라이브러리(16)를 사용하고, 상기 내부 화상(14)은 문서 내부의 여러 가지 문서 객체의 특정한 인스턴스(instances) 속성을 정의하는 매개변수와 함께, 라이브러리(16)에 정의된 것처럼 문서 객체의 집합과 관련하여 소스 문서(11)의 콘텐츠를 기술한다. 내부 화상(14)에 사용되는 문서 객체 유형은 전형적으로 텍스트, 비트맵 그래픽 및 움직일 수 있거나 움직일 수 없는, 2차원 또는 3차원인 벡터 그래픽을 포함할 것이고, 비디오, 오디오 및 버튼과 아이콘과 같은 여러 가지 유형의 상호적인(interactive) 객체를 포함할 것이다. 벡터 그래픽 문서 객체는 규정된 필(fill)과 투명성(transparency)을 가진 포스트스크립트형(PostScript-like) 경로일 수 있다. 텍스트 문서 객체는 양식화된 텍스트의 영역을 선언할 수 있다.
일단 문서들이 문서 객체의 내부 화상으로 번역되면, 이러한 객체들은 파서/ 렌더러(18)에 전달된다. 파서/렌더러(18)는 문맥 특정(context-specific) 표현 또는 내부 화상(14)에 의하여 표현되는 문서의 "뷰"를 생성한다. 요구되는 뷰는 모든 문서들, 전체 문서 또는 하나 또는 소정의 문서의 부분들로 구성될 수 있다. 파서/렌더러(18)는 뷰 제어 입력을 수신하고 상기 뷰 제어 입력은 생성될 특정 문서 뷰의 보고 있는 문맥 및 임의의 관련된 일시적 매개변수를 정의한다. 예를 들어, 상기 시스템(10)은 문서 일부의 줌된(zoomed) 뷰를 생성한 다음에 상기 문서의 인접한 부분들을 디스플레이하기 위하여 줌된 뷰를 수평선회(pan)하거나 스크롤링하도록 요구될 수 있다. 뷰 제어 입력들은 내부 화상 중 어떤 부분들이 특정한 뷰에 대하여 요구되는지, 어떻게, 언제 그리고 얼마나 오래 뷰가 디스플레이되어야 하는지를 결정하기 위하여 파서/렌더러(18)에 의하여 해석된다.
문맥 특정 표현/뷰는 원시 특징(figures) 및 매개변수에 관하여 표현된다. 선택적으로, 예를 들어, 내부 화상(14) 콘텐츠의 업데이트를 트리거링(triggering)할 목적으로, 내부 화상(14)에 의하여 표현되는 소스 문서(11)가 시변 다수 프레임 애니메이션을 포함하는 경우에서처럼 파서/렌더러(18)와 내부 화상(14) 사이에 피드백 경로(42)가 존재할 수 있다.
각각의 소스 문서(11)는 텍스트 문서, 스프레드 시트 또는 소정의 다른 문서와 같은 문서의 디지털 화상을 제공한다. 문서 에이전트(12)는 그러한 문서의 내부 화상을 형성한다. 하나의 실시에서, 형성된 디지털 화상은 문서의 페이지 레이아웃(layout)을 설명하는 정보를 포함하고, 페이지 크기, 여백(margins)에 관한 정보 및 다른 페이지 레이아웃 정보를 포함한다. 디지털 화상은 또한 텍스트, 특징 과 같은 소스 문서 콘텐츠에 관한 정보, 및 문서에서 나타나는 다른 콘텐츠 정보를 포함한다. 페이지 구조 및 콘텐츠 정보를 식별하는 시스템을 포함하여 공지된 파일 구조를 다른 구조로 번역하기 위한 프로세스가 당업계에 알려져 있다. 이러한 동작을 수행하기 위한 임의의 적절한 기술은 본 발명의 범위에서 벗어나지 않으면서 실시될 수 있다.
파서/렌더러(18)로부터 나온 출력은 원시 특징에 관련하여 문서를 표현한다. 각각의 문서 객체에 대하여, 파서/렌더러(18)로부터 나온 화상은 적어도 물리적인, 직각의 경계 박스, 경계 박스에 의하여 제한되는 객체의 실제 형상, 객체의 데이터 콘텐츠, 및 객체의 투명성의 견지에서 객체를 정의한다. 형상 프로세서(22)는 원시 객체를 해석하고 그것을 목표(target) 출력 장치(26)에 적절한 출력 프레임 포맷; 예를 들어, 프린터용 도트 맵(dot-map), 플로터용 벡터 지시 세트, 또는 디스플레이 장치용 비트맵으로 변환한다. 출력 제어 입력(44)은 형상 프로세서(22)에 연결되고 특정 출력 장치(26)에 적절한 출력을 발생시키기 위하여 사용자 인터페이스 제어 신호를 전달할 수 있다. 그리하여, 파서/렌더러(18) 및 형상 프로세서(22)는 페이지 레이아웃의 부분들 및 페이지 콘텐츠를 디스플레이(26) 상에 렌더링하는 엔진으로서 작용할 수 있다.
부가적으로, 도 1은 툴 문서 파일(tool document file)(30)을 도시한다. 툴 문서 파일(30)은 이미지를 표현하는 정보를 저장하는 컴퓨터 데이터 파일일 수 있고, 여기서 이미지는 확대 글래스(magnifying glass), 커서, 눈금자와 같은 툴, 또는 임의의 다른 유형의 툴을 표현할 수 있다. 예시의 목적으로, 도 1에 도시된 상 기 시스템(10)은 이제 예시를 참조하여 설명될 것이고, 여기서 툴 문서 파일(30)은 확대 글래스의 그래픽 이미지를 표현하는 데이터를 포함한다. 확대 글래스 이미지는 각각의 이미지에 확대 글래스를 전달함으로써 사용자가 디스플레이(26) 상에 저장된 문서의 이미지를 확대하게 하는 기능과 연관될 것이다. 이하에서 더 상세히 설명될 것으로서, 확대 글래스는 중심 렌즈 부분을 포함할 수 있고, 확대 글래스의 렌즈 아래에 놓이는 문서의 부분들은 확대되어 사용자에게 나타나고 따라서 아래에 놓인 문서의 나머지와 관련하여 확대된 포맷으로 표현된다. 비록 이하의 예시는 주로 확대 글래스 툴과 관련하여 설명될 것이지만, 다른 유형의 툴이 본 명세서에서 설명되는 시스템 및 방법을 사용하여 제공될 수 있음이 당업자에게 자명하며 상기 모든 툴들은 본 발명의 범위 내에 있는 것으로 이해될 것이다. 이 점에서, 그리고 본 예시로부터 이해되는 바와 같이, 디스플레이를 기본 디스플레이의 함수로서 렌더링하여, 콘텐츠의 문맥(context) 응답 렌더링을 제공하기 위한 수단이 제공됨을 알 수 있을 것이다. 또한, 상기 렌더링 수단은 활성 상태에서 디스플레이 특징들 및 사용자 인터페이스 컨트롤을 렌더링하기 위한 수단을 포함할 수 있다.
도 2로 넘어가면, 확대 글래스 툴의 동작을 볼 수 있다. 특히, 도 2는 디스플레이(26)를 도시하고, 여기서 디스플레이(26)는 문서(44), 썸네일 문서(thumbnail document)(46), 확대 글래스 문서(48), 및 렌즈 문서(50)를 포함하는 복수의 하위 요소(sub elements)를 포함하는 스크린 문서(42)를 나타낸다. 디스플레이(26)는 하위 문서들(44~50)을 포함하는 하나의 집적된 문서로서 스크린(42)을 나타낸다. 스크린(42)을 형성하기 위하여 제공되는 콘텐츠는 하나 또는 복수의 소 스 문서(11)로부터 나올 수 있고 소스 문서의 콘텐츠는 문서(44) 및 썸네일 문서(46)로서 나타난다. 스크린 문서(42)는 또한 툴 문서 파일(30)에 의하여 제공되는 콘텐츠를 포함하고, 이러한 예에서 내부 화상 데이터 포맷에 따른 데이터를 포함하며, 여기서 데이터는 확대 글래스(48)의 이미지를 표현한다. 부가적으로, 툴 문서 파일(30)은 확대 글래스(48)의 렌즈 내부에 나타나는 확대된 문서(50)로 보이도록 상기 콘텐츠를 확대된 포맷으로 표현하기 위하여 스크린 문서(42)의 적절한 일부를 프로세싱함으로써 부가적인 문서를 형성하는 포탈(portal) 객체를 포함할 수 있다. 그리하여, 렌즈(50) 내부에 나타나는 문서는 아래에 놓인 문서로부터 유도되고, 따라서 이러한 유도된 문서는 확대 글래스 툴(48)이 사용되는 문맥에 따라 변한다. 따라서, 상기 툴에 대한 특정 행동은 툴 사용의 문맥에 의존하여 변화할 수 있다. 예를 들어, 확대 글래스 툴은 맵 데이터를 가진 콘텐츠 문서의 콘텐츠를 텍스트를 가진 콘텐츠 문서와 서로 다르게 프로세싱하는 툴 코드와 연관될 수 있다. 예를 들어, 맵을 사용하여, 확대 글래스 툴은 단지 확대 글래스에 의하여 형성된 뷰 내부에 도시되는 것처럼 태그붙은(tagged), 관련 문서 구조 내부의 핸들(handles)을 렌더링하기 위하여 연관된 콘텐츠 문서를 프로세싱할 수 있다. 그리하여 확대 글래스 툴(48) 내부에 나타나는 유도된 문서는 부가적인 정보, 예를 들어, 거리 명칭, 관광지, 공공 교통 기관 위치, 표시 또는 다른 정보를 포함할 수 있다. 이러한 동작에서, 확대 글래스 툴은 애플리케이션의 문맥에 응답하고, 상기 애플리케이션의 문맥은 맵에 관한 뷰의 렌더링이다. 다른 애플리케이션에서, 확대 글래스 툴은 텍스트 상에 사용되고, 툴의 행동은 텍스트의 색상 또는 양식(style)의 변화를 일으킬 수 있거나 또는 텍스트 편집 툴 및 사용자 인터페이스 제어, 예를 들어, 제어 버튼, 풀 다운 메뉴(pull down menus), 주석 정보, 텍스트 버블(text bubbles), 또는 다른 유형의 정보를 나타낼 수 있다.
따라서, 스크린 문서(42)는 소스 문서(11) 및 툴 문서 파일(30) 내부에 포함된 정보의 집적 및 집합이다. 툴 문서 파일(30)과 관련된 애플리케이션 프로그램은 확대된 뷰(50)를 형성하도록 적절한 콘텐츠를 프로세싱할 수 있다. 확대 툴(48) 및 연관된 소스 코드는 확대된 뷰(50)를 형성하기 위해 확대된 포맷으로 표현될 스크린 문서(42)의 해당 부분을 식별할 수 있다. 부가하여 툴 코드는 확대된 뷰(50)를 형성하고 스크린(26)의 확대된 영역의 디스플레이 효과를 달성하기 위해 확대 글래스(48)의 렌즈 영역 내부에 상기 확대된 뷰를 자르도록(clip) 선택된 콘텐츠를 프로세싱할 수 있다. 그리하여, 툴 문서 및 소스 문서(11)는 동일한 내부 화상으로 존재하고, 그리하여 스크린 문서(42)에 합병될 수 있으며, 파서/렌더러(18)에 의하여 렌더링될 수 있다.
하나의 실시예에서, 그래픽 툴(50)은 커서를 드래깅(dragging)함으로써 또는 접촉식 스크린(touch-sensitive screen)이 존재하는 경우에는 철필(stylus) 또는 소정의 다른 포인터를 디스플레이의 스크린을 가로질러 드래깅함으로써 화면 위에서 이동될 수 있다. 이러한 이동을 프로세싱하기 위하여, 디스플레이(26)는 스크린상에 표현되는 문서들의 이미지를 가로지른 커서, 철필 또는 소정의 다른 포인터의 이동을 검출하도록 디스플레이(26)의 스크린을 모니터링하기 위한 스크린 모니터링 프로세스를 포함할 수 있다. 상기 스크린 모니터링 프로세스는 당업계에 공 지되어 있고, 임의의 적절한 프로세스가 사용될 수 있다. 따라서, 모니터 프로세스는 문서(44)의 시각적인 표현에 관한 촉각 제어의 사용자 인식을 허용한다. 스크린 모니터 프로세스에 의하여 검출되는 이동은 인터페이스 프로세스에 전달될 수 있고, 인터페이스 프로세스는 검출된 동작을 프로세싱하여 공지된 명령을 표현하는 동작을 검출한다. 인터페이스 프로세스는 별개의 프로세스일 수도 있고 또는 스크린 모니터 프로세스의 일부일 수도 있고, 이러한 사항은 당업계에 알려져 있다. 인터페이스 모듈이 툴(50)을 이동시키라는 명령을 검출할 때, 네비게이션 모듈은 파서/렌더러(18)가 사용자에게 프레젠테이션하기 위한 새로운 디스플레이를 형성하도록 지시하는 입력 신호들을 형성할 수 있고, 디스플레이에 사용자가 원했던 대로 재위치된 툴(50)을 보여줄 것이다.
따라서, 도 1에 도시된 시스템은 그래픽 사용자 인터페이스 툴을 제공할 수 있고, 상기 인터페이스 툴은 복수의 하위 문서들을 포함하는 단일 문서를 표현하는 스크린 디스플레이로 통합될 수 있으며, 소정의 하위 문서들은 그래픽 툴 그 자체를 포함한다. 이러한 접근법의 능력은 사용자가 디스플레이 상의 문서를 조작하고 볼 수 있게 하고 도시된 문서에 대한 촉각적 제어를 시뮬레이팅할 수 있게 하는 신규한 그래픽 사용자 인터페이스 툴의 개발을 가능하게 한다. 이러한 시스템 및 방법들은 전통적인 입력 툴이 결여한 핸드헬드 및 휴대용 컴퓨팅 플랫폼상에 사용하기에 특히 적합하게 되어 있다. 본 명세서에서 설명되는 시스템 및 방법에 의하여 제공될 수 있는 부가적인 그래픽 사용자 인터페이스 툴은 도 3에 도시된 버블 썸네일 그래픽 툴(bubble thumbnail graphical tool)을 포함한다. 특히, 도 3은 스크 린 문서(52)를 포함하는 스크린 디스플레이(26)를 도시하고, 상기 스크린 문서(52)는 문서(44) 및 썸네일 문서(60~72)를 포함하는 복수의 하위 문서를 포함한다. 도 3에 도시된 것처럼, 문서(44)는 디스플레이(26)의 관찰 영역 대부분을 사용하는 큰 문서로서 표현될 수 있다. 이러한 실시예에서, 썸네일 문서(60~72)는 디스플레이(26)의 좌측에 인접한 위치에서 스크린 문서(52) 내부의 수직 열에 배치된다. 썸네일 문서(60~72)는 크기 면에서 다양하고 가장 큰 썸네일 문서(60)는 썸네일 문서의 수직 어레이 내부 중앙에 배치된다.
도 3에 의하여 부가적으로 도시된 것처럼, 수직 어레이의 문서가 중심 문서(60)로부터 떨어진 거리가 증가함에 따라, 문서의 크기는 줄어든다. 중심 문서로부터 떨어진 거리의 측정은 문서(44)로부터 페이지의 거리로 표현될 수도 있고, 또는 소정의 다른 거리 또는 차이 측정, 예를 들어 문서를 마지막으로 본 이래로 경과한 시간, 알파벳 순서의 차이, 또는 소정의 다른 특성으로 표현될 수 있다. 그리하여, 중심 문서(60)에 인접한 문서들(62 및 68)은 문서(60)보다 다소 더 작다. 부가하여 문서(62) 및 문서(68)에 각각 인접하고 문서(60)로부터 더 멀리 떨어진 문서(64) 및 문서(70)는 문서(62) 및 문서(68)보다 훨씬 더 작다. 문서 크기에서의 감소는 문서(66) 및 문서(72)까지 계속되고, 상기 각각의 문서들은 아주 더 작다. 썸네일 문서(60~72)의 어레이에 의하여 형성된 인상(impression)은 최대 문서인 문서(60)가 스크린 문서(52)의 가장 큰 관찰 영역 내부에 디스플레이되는 문서(44)를 표현하는 것으로 지시하기 위하여 사용된다. 문서(62에서 72까지)는 현재 관찰 페이지(viewing page)(60)로부터의 "거리"에 비례하여 더 작아진다. 따라서, 썸네일 문서(60~72)의 수직 열은 사용자가 디스플레이(26)의 큰 관찰 영역 내부에 나타날 문서를 선택하기 위해 사용할 수 있는 네비게이션 툴을 제공한다. 부가적으로, 사용자는 관찰 영역 내부에 나타날 새로운 문서를 선택하기 위하여 썸네일의 수직 어레이 내부의 문서를 선택할 수 있다. 예를 들어, 스크린 디스플레이(26)가 접촉식 스크린 디스플레이인 애플리케이션에서, 사용자는 문서(60~72)의 어레이 내부에 있는 각각의 썸네일 문서를 접촉함으로써 새로운 문서가 관찰 영역에 나타나도록 활성화할 수 있다. 사용자에게 키보드 또는 마우스가 제공되는 애플리케이션에서, 사용자는 사용자가 관찰 영역 내부에 나타나길 원하는 문서 어레이 내부의 문서들을 선택하기 위한 특정의 입력 장치를 사용할 수 있다. 선택적인 실시예에서, 사용자는 관심 있는 문서를 찾기 위하여 썸네일들을 두루 스크롤링할 수 있다. 선택적으로, 썸네일 문서 전체를 스크롤링하는 것은 문서(44)가 문서의 스크롤링에 따라 변화하게 할 수 있다. 택일적으로, 썸네일 문서의 스크롤링은 문서(44)의 임의의 변화와 독립적으로 발생할 수 있고, 문서(44)는 단지 새로운 썸네일 문서가 선택될 때 변화한다.
따라서, 본 명세서에서 설명되는 시스템 및 프로세스는 썸네일 이미지를 생성하기 위해 네비게이션 하는 동안 사용자를 대기(queuing)시키기 위하여 썸네일 이미지를 사용할 수 있고, 본 명세서에서 설명되는 시스템 및 프로세스는 당업계에 알려진 썸네일 생성기 프로세스(thumbnail generator processes)를 포함하여 임의의 적절한 썸네일 생성기 프로세스를 포함할 수 있고, 실제의(live), 또는 움직이는 썸네일을 생성하는 썸네일을 포함한다.
도 4는 본 명세서에서 설명되는 시스템 및 방법의 부가적인 실시예를 도시하고, 여기서 도 2에 이미 도시되었던 확대 툴은 툴 코드와 관련되어 있으며, 상기 툴 코드는 이전에 표현되지 않은 정보를 확대 글래스 객체의 렌즈 영역 내부에 나타나게 한다. 보다 상세하게, 도 4는 스크린 문서(42)를 포함하는 디스플레이(26)를 도시하고, 이러한 뷰에서 스크린 문서는 맵으로서 나타난다. 도 4는 렌즈 영역(50)을 포함하는 확대 글래스 툴(48)을 부가하여 도시한다. 도 4에 도시된 것처럼, 확대 툴(48)은 맵(42)의 일부 위에 배치된다. 앞서 언급된 것처럼, 확대 글래스(48)와 관련된 툴 코드는 스크린 문서(42)의 관련된 부분의 확대된 뷰를 나타낼 수 있다. 부가적으로 도 4에 도시된 것처럼, 확대된 부분(50)은 또한 부가적인 정보를 포함한다. 예를 들어, 도 4에 도시된 매핑(mapping) 애플리케이션에 있어서, 확대된 뷰(50)는 부가적인 매핑 정보, 예를 들어, 작은 도로(minor roads), 관심 위치, 또는 확대되는 콘텐츠와 관련된 다른 정보를 포함할 수 있다. 그러나 부가적으로 확대 글래스는 관찰 영역(50) 내부에 있는 정보, 또는 정보 일부의 색상을 변화시키거나, 또는 제어 버튼, 풀 다운 메뉴, 주석 정보, 텍스트 버블과 같은 사용자 인터페이스 정보, 또는 다른 유형의 정보를 나타내는 툴 코드와 관련될 수 있다. 따라서 툴에 대한 특정 행동은 툴 사용 상황에 따라 변화할 수 있다. 예를 들어, 앞서 언급된 것처럼, 확대 글래스 툴은 맵 데이터를 가진 콘텐츠 문서의 콘텐츠를 텍스트를 가진 콘텐츠 문서와 다르게 프로세싱하는 툴 코드와 관련될 수 있다. 이와 같이, 본 명세서에서 설명되는 시스템은 상황 감지(context sensitive) 툴 및 프로세스를 제공한다.
도 5 및 도 6은 본 명세서에서 설명되는 시스템 및 방법에 의하여 제공될 수 있는 그래픽 사용자 인터페이스 툴의 부가적인 실시예를 도시한다. 특히 도 5는 스크린 문서(42)를 포함하는 스크린(26)을 도시하고, 상기 스크린 문서(42)는 2개의 문서(80 및 81), 및 눈금자(82)를 포함한다. 2개의 문서(80 및 81)는 유사한 유형의 문서들을 표현하도록 의도되었고, 각각의 문서는 A4 종이와 같은 동일한 크기의 종이 상에 프린트되는 텍스트 문서이다. 그러나 문서(81) 프레젠테이션의 스케일이 문서(80)에 대한 프레젠테이션의 스케일보다 더 클 때, 도 5는 텍스트의 페이지로서 2개의 문서(80 및 81)를 도시하고, 여기서 하나의 페이지는 나머지 페이지보다 더 크다. 이와 같이, 문서들(80 및 81)은 서로 다른 스케일링 요소로 렌더링된 유사한 문서들이다. 도 5에 도시된 것처럼, 눈금자(82)는 각각의 문서의 스케일을 보여주는 움직이는 반투명 눈금자일 수 있고 아래에 놓인 객체의 스케일에 적응할 수 있다. 이것은 눈금자의 길이가 문서(80)에서 문서(81)로 이동함에 따라 크기가 증가하는 눈금자(82)의 스케일에 의해 표시된다. 도 5는 눈금자(82)의 스케일이 아래에 놓인 문서의 스케일에 비례하여 변화함을 도시한다. 이와 같이, 눈금자(82)는 콘텐츠의 프레젠테이션 스케일에 응답하여 눈금자의 스케일을 조절할 수 있는 상황 감지 사용자 인터페이스 툴을 제공한다. 도 6으로 넘어가면, 부가적인 사용자 인터페이스 툴, 움직이는 반투명 질문 표시(84)가 도시되고, 질문 표시(84)는 아래에 놓인 객체에 대한 주석을 디스플레이할 수 있으며, 도 6은 디스플레이(26)가 문서(80) 및 움직이는 반투명 질문 툴(84)을 포함하는 스크린 문서(42)를 포함함을 도시한다. 질문 툴(84)은 질문 툴의 이미지를 문서상에 드래깅함으로써, 또는 문서 위에 이미 배치된 질문 툴 아이콘을 선택함으로써 활성화될 때, 아래에 놓인 문서(80)의 주석을 표현하는 정보를 포함할 수 있는 텍스트(88)를 제공할 수 있다.
도 7a는 이용 가능한 사용자 인터페이스 툴을 사용자에게 보여주기 위한 한 가지 방법을 도시한다. 특히, 도 7a는 툴 버튼(90)을 포함하는 스크린(26)을 도시한다. 툴 버튼(90)은 확대 툴(48)의 그래픽 표현을 제공한다. 확대 툴(48)을 활성화하기 위하여, 사용자는 마우스, 키패드(keypad) 또는 터치 스크린을 사용하여 클릭할 수 있고, 확대경 툴 버튼으로부터 툴(48)의 이미지를 드래그할 수 있다. 툴 버튼(90)을 클릭함으로써, 시스템은 도 7a에 도시된 문서(48)의 이미지를 형성하기 위하여 툴 문서 파일로부터의 정보를 프로세싱할 수 있다. 도 7b는 사용자 인터페이스가 하나의 실시에서 사용자가 선택적으로 임의의 방향으로 확대 툴(48)을 스크린(26)에서 밀어내게 할 수 있음을 도시한다. 상기 툴을 스크린(26)에서 밀어냄으로써, 사용자는 툴(48)을 제거하고 아이콘 또는 툴 버튼(90)을 스크린에 복원한다.
도 8a 및 도 8b는 링크, 또는 다른 문서들에 대한 다른 유형의 포인터를 포함하는 문서, 또는 다른 콘텐츠를 볼 때 사용될 수 있는 유형의 부가적인 툴을 도시한다. 특히, 도 8은 툴을 도시하고 여기서, 문서(100)는 또 다른 문서에 대한 링크(102)를 포함한다. 이러한 문서들에 대하여, 본 명세서에서 설명되는 시스템 및 방법은 버튼, 스위치 또는 소정의 다른 컨트롤과 슬라이더 컨트롤(slider control)(104)을 제공할 수 있다. 도시된 슬라이더 컨트롤(104)은 문서(100)의 사 용자 인터페이스 뷰를 개선할 수 있고, 그 결과 상기 컨트롤(104)을 슬라이딩함으로써, 사용자는 문서 내부의 링크(102)의 중요도(prominence)를 제어할 수 있다. 이와 같이, 상기 툴(104)은 사용자가 문서(100)와 같은 문서 내부의 링크의 중요도를 조정하게 하고 그 결과 링크는 사용자에 의하여 보다 용이하게 식별될 수 있다. 도 8a 및 도 8b는 문서(100)가 도시된 강조된 텍스트(highlighted text)(108)와 같은 강조된 텍스트를 포함할 수 있음을 도시한다. 링크(102)를 사용할 때, 슬라이더 컨트롤(104)은 강조된 텍스트(108)가 그것의 투명성을 유지할 수 있게 하는 한편, 문서(100)의 나머지 부분들의 투명성은 슬라이더 컨트롤(104)이 사용자에 의하여 변화함에 따라 변화한다. 동작에서, 슬라이더 컨트롤(104)은 사용자가 링크(102) 또는 강조된 텍스트(108)를 구성하는 객체들 외에, 문서(100)를 구성하는 객체들의 투명성 또는 알파 특징을 조절할 수 있게 한다. 그러나 문서의 부분들을 약화하거나 강화하기 위한 다른 기술들이 실시될 수 있다.
도 9로 넘어가면, 부가적인 그래픽 사용자 인터페이스 툴이 제시되고, 여기서 문서(100)는 링크(102)를 포함한다. 게다가, 링크(102)는 움직이는 썸네일 문서(floating thumbnail document)(110)와 관련될 수 있다. 도 9에 도시된 것처럼, 컨트롤(112)이 사용자에게 제시될 수 있다. 컨트롤(112)을 활성화할 때, 문서(100) 내부의 링크(102)는 각각의 링크(102)와 관련된 페이지의 페이지 뷰를 표현하는 움직이는 썸네일과 관련될 수 있다. 부가적으로, 도 9는 하나의 선택적 실시에서 디스플레이가 판독 전 썸네일 문서(read ahead thumbnail documents)(114)의 집합을 더 포함할 수 있음을 도시한다. 썸네일 문서(114)는 문서(100) 내부의 링 크(102)와 관련되거나 또는 문서(100)가 다수 페이지 문서일 때 문서(100)의 다른 페이지들과 연관된 문서를 나타낼 수 있다.
도 10은 본 발명에 따른 그래픽 사용자 인터페이스 툴의 부가적인 실시예를 도시한다. 특히, 도 10은 디스플레이 상에 나타나는 문자 세트(122)를 가진 핸드헬드 컴퓨팅 장치(120)를 도시한다. 도 10에 부가하여 도시된 것처럼, 커서 윈도우(cursor window)(124)는 텍스트 디스플레이(122) 내부의 하나의 문자 위에 나타난다. 도시된 실시예에서, 커서 윈도우(124)는 현재 텍스트 위치 위를 떠다니는 연성의, 반투명 텍스트 입력 플레이트(text entry plate)를 제공한다. 플레이트는 이동하는 텍스트 위치에 따라 이동할 수 있고/또는 플레이트는 플레이트(124) 아래에 있는 텍스트의 이동을 조절하기 위하여 텍스트 그 자체가 좌측으로 스크롤링할 때 플레이트의 위치를 유지할 수 있다. 앞서 언급된 것처럼, 텍스트 플레이트 커서(124)는 도 1의 시스템(10)에 의하여 프로세싱된 툴 문서 파일(30)로부터 유발될 수 있다. 툴 문서 파일은 장치(120) 상에 나타나는 텍스트 플레이트(124)의 내부 화상을 포함할 수 있다. 하나의 실시예에서, 핸드헬드 장치(120)는 접촉식 스크린을 포함하고 상기 접촉식 스크린은 사용자가 텍스트 입력 플레이트(124) 내부의 스크린 상에 나타날 문자들을 형성하기 위하여 철필을 사용할 수 있게 한다. 상기 텍스트 입력을 허용하는 상기 시스템의 설계 및 개량은 당업계에 공지되어 있고, 임의의 적절한 시스템이 본 명세서에서 설명되는 시스템 및 방법에 채택될 수 있다. 동작에서, 사용자는 텍스트 입력 플레이트(124) 내에 나타날 문자들을 형성하기 위하여 철필을 상기 장치(120)의 스크린을 가로질러 이동시킬 수 있다. 이러한 동작은 도 11에 도시되어 있고, 여기서 일련의 텍스트 입력 절차(130~138)가 도시되어 있다.
특히, 도 11은 텍스트 입력 단계(130)를 도시하고, 여기서 커서 플레이트(124)는 상기 장치(120)의 디스플레이 상에 나타난다. 사용자는 커서(124)에 의해 정해지는 공간 내, 또는 또 다른 영역의 문자를 추적(trace)할 수 있고, 선택적으로, 텍스트 입력 커서(124)에 의해 정해지는 영역 내에 흔적이 나타날 수 있다. 사용자에 의해 입력되는 흔적들은 이러한 표시를 상기 예에서 문자 L과 같은 문자와 연관시키기 위하여 당업계에 공지된 유형의 문자 인식 시스템(character recognition system)에 의하여 프로세싱될 수 있다. 단계(132)에서 나타나는 것처럼, 일단 문자 인식이 완료되면, 인식된 문자 L은 디스플레이 상에 표현될 수 있고 커서가 움직일 수 있거나, 또는 텍스트가 스크롤링할 수 있다. 그러나 어느 경우든, 커서(124)는 더 많은 텍스트를 입력하기 위하여 사용자가 이용할 수 있게 된다. 그리하여, 단계(134)에서 도시되는 것처럼, 사용자는 단어가 형성될 때까지 텍스트를 입력할 수 있다. 단계(138)에서, 완전한 단어의 입력시, 사용자는 커서(124)를 이동시킬 수 있고 기록된 단어로부터 간격을 두고 떨어져 배치될 수 있게 하며, 텍스트 입력 커서(124) 내에 나타날 문자들의 추적을 다시 시작할 수 있다. 이와 같이, 도시된 커서(124)는 예를 들어 텍스트의 섹션을 문서 내부에 발생하는 텍스트의 기존 라인에 입력함으로써, 문서 내로 콘텐츠의 순서별 입력을 허용하는 툴을 제공한다. 다른 애플리케이션에서, 툴은 예를 들어 콘텐츠 삭제, 색상 변경 또는 다른 애플리케이션 수행에 의하여 이미지를 편집하도록 제공될 수 있다.
앞서 언급된 것처럼, 접촉식 디스플레이를 포함하는 시스템에 대하여 본 명세서에서 설명되는 시스템 및 방법은 사용자가 디스플레이 상의 마킹을 추적하기 위해 철필을 사용할 수 있도록 제공될 수 있고, 이러한 마킹들은 문자 입력을 가능하게 하는 시스템에 의하여 해석될 수 있다. 부가적으로, 제스처링 프로세스가 렌더링되어야 하는 페이지 레이아웃의 일부를 선택하기 위한 명령 또는 문서의 디지털 화상의 데이터 콘텐츠를 변경하기 위한 명령을 나타내는 미리 정의된 이동을 검출할 수 있다. 도 12a부터 도 12g까지는 사용자가 철필을 접촉식 스크린에서 이동시킴으로써 입력할 수 있는 일련의 대표적인 명령 스트로크(representative command strokes)를 도시한다. 도 12a부터 도 12g까지에 도시된 각각의 명령 스트로크는 사용자가 문서를 조작하고 보기 위해 사용할 수 있는 사용자 인터페이스 명령과 연관될 수 있다. 예를 들어, 도 12a는 스트로크를 도시하고, 여기서 사용자는 상기 시스템이 상기 시스템에 의해 제안된 동작(action)을 확인하는 명령과 관련될 수 있는 둥근 체크 마크를 형성한다. 유사하게, 도 12b는 디스플레이 상의 복수의 돌출부와 홈을 형성하는 스트로크를 도시하고 상기 스트로크는 콘텐츠를 디스플레이로부터 삭제하기 위한 명령과 관련될 수 있다. 도 12c는 원형의 시계 방향 스트로크를 도시하고 상기 스트로크는 문서가 홈 페이지 또는 다시 시작(start over)으로 복귀되게 하는 것과 관련될 수 있으며, 도 12d는 삭제, 지움(clear), 또는 명령 없음(no command)을 지시하는 대각선 방향의 직선 업스트로크(upstroke)를 도시한다. 도 12e는 문단 선택 명령을 지시하는 반시계 방향의 박스 스트로크(box stroke)를 도시하고, 도 12f 및 도 12g는 각각 다음 문서 또는 이전 문서로 이동하 라는 사용자의 요구를 지시하는 스트로크를 도시한다. 당업자는 본 명세서에서 설명되는 시스템 및 방법이 워드 문서, 웹 페이지, 스트리밍 미디어(streaming media), 및 다른 콘텐츠와 같은 서로 다른 유형의 문서로 작업하는 시스템 및 방법을 포함할 수 있고, 서로 다른 스트로크의 의미는 애플리케이션에 따라 변화할 수 있다. 예를 들어, 도 12c의 원형 시계 방향 회전은 웹 페이지를 나타내는 문서에 대하여 웹 페이지 문서와 관련된 웹 페이지로 복귀하라는 요구를 지시할 수 있다. 택일적으로, 스트리밍된 미디어 콘텐츠를 볼 때, 도 12c의 원형 시계 방향 스트로크의 사용은 다시 시작하라는 요구를 지시하여, 스트리밍된 비디오가 시작으로부터 멈추고 재시작하게 할 수 있다. 따라서, 도 12a 내지 도 12g에 도시된 스트로크 명령은 애플리케이션에 따라 서로 다른 의미를 가질 수 있음이 당업자에게 명백하다.
도 13a 및 도 13b는 관찰 영역 내에서 문서의 페이지 이동을 일으키도록 문서를 클릭 및 드래깅하기 위해 사용자에 의하여 사용될 수 있는 명령 스트로크를 도시한다. 도시된 실시예에서, 문서 드래깅 동작 동안, 속도 검출기 프로세스가 주기적으로, 예를 들어 매 백분의 일초마다 위치 판독을 시행한다. 이러한 위치 판독으로부터, 페이지 속도 결정이 행해질 수 있다. 페이지 속도 결정은 사용자 인터페이스가 문서들을 관찰 공간 전체에서 이동시키는 보다 자연스런 방법을 나타내게 하기 위하여 사용될 수 있다. 이러한 목적으로, 프로세스는 속도 결정을 이용하여 문서가 스크린을 가로질러 이동할 때 문서를 표현할 일련의 그림으로 문서를 재작성(redraw)하도록 파서/렌더러(18)에 지시할 수 있다. 예를 들어, 사용자 는 특정 속도로 문서를 드래깅할 수 있고 그 다음에 철필, 마우스 또는 다른 입력 장치를 문서로부터 해제할 수 있다. 선택적으로, 해제시 문서는 이동을 멈출 수 있다. 그러나 택일적인 실시에서, 페이지는 사용자가 문서 상에서 클릭하는 것과 같이 문서가 이동하는 것을 멈추게 하는 것을 지시할 때까지 정해진 방향으로 계속해서 이동할 수 있다. 다수 페이지 문서에 대하여, 속도 측정은 사용자가 스크린을 가로질러 문서의 한 페이지를 드래깅할 때 페이지 속도 세트에 의하여 결정되는 비율로 스크린을 가로질러 문서의 서로 다른 페이지들을 수평선회(panning)하기 위해 사용될 수 있다. 선택적으로, 속도는 제로 속도에 도달하고 페이지 스크롤링이 멈출 때까지 일정한 페이지 관성(inertia)에 의하여 감소할 수 있고; 페이지 패닝 동안 페이지 속도를 증가(축적)시키기 위하여 부가적인 속도 검출이 사용될 수 있어, 페이지 관성에 대한 이동이 급속한 순차적 드래그 동작들 사이에서 페이지가 원활하게 연속적으로 이동할 수 있게 한다.
부가적으로 그리고 선택적으로, 다른 사용자 인터페이스 프로세스들이 문서 위의 접촉식 컨트롤을 갖는 사용자 경험을 증진시키기 위하여 제공될 수 있다. 예를 들어, 사용자 인터페이스는 도 2의 문서(44)의 상부 우측 코너와 관련된 디스플레이의 위치에서 디스플레이(26) 상의 모션을 검출하기 위한 페이지 플립(page-flip) 검출기를 포함할 수 있다. 만약 페이지 플립 검출기, 또는 스크린 모니터가 문서(44)의 표면을 가로지른 브러싱 모션(brushing motion)을 검출한다면, 페이지 플립 검출기는 파서/렌더러(18)에 페이지를 "넘기도록" 지시하여, 다음 페이지, 장, 장면 또는 다른 섹션이 디스플레이되게 할 수 있다. 즉, 페이지 플립 검출기는 현재 렌더링된 부분에 인접한 레이아웃의 일부를 나타내는 페이지 레이아웃 부분을 렌더링하도록 동작하고, 상기 페이지 레이아웃의 렌더링된 부분은 현재 렌더링된 부분에 대하여 선택된 인접성을 가질 수 있다. 모션은 페이지를 뒤로 넘기는 방향이나 앞으로 넘기는 방향 어느 쪽에서든 검출될 수 있고, 페이지 플립 검출기는 상황 감지를 하여, 애플리케이션 및 콘텐츠의 유형에 적당한 새로운 디스플레이를 생성할 수 있다. 선택적으로, 인터페이스 프로세스는 문서(44)의 상부 우측 코너에서의 모션이 페이지 컬 검출기가 파서/렌더러(18)가 스크린(42) 또는 문서(44)를 재작성하도록 지시하게 할 수 있다는 점을 제외하고는 플립 검출기와 유사하게 동작할 수 있는 페이지 컬 검출기(page curl detector)를 포함할 수 있으며, 그 결과 문서(44)의 코너는 아래쪽으로 말려들어 가고 아래에 놓인 페이지의 일부(또는 현재 페이지에 대해 선택된 인접성을 갖는 다른 페이지)가 표현된다. 페이지 플립 검출기 및 페이지 컬 검출기 양자는 목적하는 효과를 달성하기 위하여 파서/렌더러(18)에 대한 명령을 생성할 수 있는 컴퓨터 프로세스일 수 있다. 부가적으로, 상기 인터페이스 프로세스는 미리 정의된 이동 및 상기 미리 정의된 이동의 속도 특성을 검출하기 위한 페이지 줌 검출기를 포함할 수 있다. 이 경우, 미리 정의된 이동은 속도 특성의 함수로서 디스플레이의 스케일을 변화시키기 위한 명령을 나타내며, 예를 들어 뷰를 줌 인/아웃 하기 위하여 페이지 줌 검출기(예를 들어 페이지 영역 위의 더블 클릭)에 상향/하향 이동이 수반될 수 있다. 이러한 기능은 유리하게 관성의 줌 특징(inertial zoom feature)을 제공하기 위하여 속도 검출기와 결합될 수 있다.
비록 도 1은 기능 블록 요소들로서 사용자 인터페이스 시스템(10)을 그래픽적으로 도시하였으나, 이러한 요소들은 본 발명에 따른 시스템으로서 데이터 프로세서를 구성하기 위하여 데이터 프로세서 플랫폼(platform) 상에서 실행될 수 있는 컴퓨터 프로그램 또는 컴퓨터 프로그램의 일부로서 구현될 수 있음이 당업자에게 자명하다. 게다가, 비록 도 1은 집적된 유닛으로서 시스템(10)을 도시하였지만, 이것은 단지 하나의 실시예에 불과하고 본 발명은 다수의 플랫폼에 걸쳐 분포된 컴퓨터 프로그램으로서 구현될 수 있음이 당업자에게 자명하다.
앞서 언급된 것처럼, 앞서 설명된 사용자 인터페이스 시스템은 데이터 프로세싱 시스템상에서 동작하는 소프트웨어 컴포넌트로서 구현될 수 있고, 유닉스(Unix) 워크스테이션과 같은 종래의 컴퓨팅 플랫폼과 마찬가지로, 핸드헬드 컴퓨팅 플랫폼을 포함한다. 이러한 실시예에서, 사용자 인터페이스 시스템은 C 언어 컴퓨터 프로그램, 또는 C++, 포트란, 자바 또는 베이직을 포함하는 임의의 고수준 언어로 작성된 컴퓨터 프로그램으로서 구현될 수 있다. 부가적으로, 플랫폼이 주로 마이크로프로세서, 마이크로컨트롤러 또는 DSP인 실시예에서, 사용자 인터페이스 시스템은 마이크로코드로 작성되거나 고수준 언어로 작성되고, 채용된 플랫폼 상에서 실행될 수 있는 마이크로코드로 컴파일링된 컴퓨터 프로그램으로서 구현될 수 있다. 상기 시스템의 개발은 당업자들에게 공지되어 있고, 상기 기술은 문헌, 예를 들어 TMS320 족(Family)을 가진 디지털 신호 프로세싱 애플리케이션(Digital Signal Processing Applications), 제 1, 제 2, 및 제 3 권, 텍사스 인스트루먼츠(Texas Instruments)(1990)를 포함한 문헌에 설명되어 있다. 부가적으로, 고수준 프로그래밍에 대한 일반적인 기술은 공지되어 있고, 예를 들어, Stephen G. Kochan의 C 프로그래밍(Programming in C), Hayden Publishing(1983)에 설명되어 있다. DSP가 콘트라스트, 에지 정의 및 휘도의 조절을 통한 이미지 향상과 같은 전처리 기능을 포함하여, 신호 프로세싱 기능을 구현하기에 특히 적당하다. DSP 및 마이크로컨트롤러 시스템에 대한 코드 개발은 당업계에 공지된 원리들로부터 수반된다.
부가적으로, 비록 도 1은 복수의 기능 블록 요소를 포함하는 컴퓨터 프로세스(8)를 그래픽적으로 도시하지만, 이러한 요소들은 본 발명에 따른 시스템으로서 데이터 프로세싱 플랫폼을 구성하기 위해 데이터 프로세싱 플랫폼 상에서 실행될 수 있는 컴퓨터 프로그램 또는 컴퓨터 프로그램 부분들로서 구현될 수 있다. 게다가, 도 1은 시스템(10)을 프로세스(8) 및 디스플레이 장치(26)의 집적된 유닛으로서 도시하지만, 이것은 단지 하나의 실시예에 불과하고, 본 명세서에서 설명되는 시스템은 문서 프로세싱 기능과 프로세스(8)의 사용자 인터페이스 기능을 디스플레이(26)에 의해 수행되는 문서 디스플레이 동작으로부터 분리하는 시스템 구조를 포함한 다른 구조 및 구성을 통하여 구현될 수 있음이 당업자에게 자명하다.
당업자는 통상의 실험을 사용하여 본 명세서에서 설명된 실시예 및 실시의 많은 균등물들을 알아낼 수 있다. 게다가, 본 발명의 시스템 및 프로세스는 폭넓은 애플리케이션을 갖고, 핸드헬드 컴퓨터, 전화기, 이동 데이터 단말기(mobile data terminals), 셋 톱 박스, 내장형 프로세서, 노트북 컴퓨터, 컴퓨터 워크 스테이션, 프린터, 복사기, 팩스 및 다른 시스템을 포함하는 장치들의 범위에서 사용될 수 있다. 부가적으로, 본 명세서에서 설명되는 시스템은 접촉식 스크린 및 패드, 마우스 입력 장치, 키보드 및 키패드, 썸휠(thumb wheel) 장치, 마우스, 트랙볼(trackball), 가상 현실 입력 시스템, 음성 제어 시스템, 안구 운동 제어 시스템(eye movement control systems), 및 임의의 다른 적절한 장치를 포함한, 임의의 적절한 인터페이스 장치로 실행될 수 있다. 이와 같이, 본 명세서에서 설명되는 시스템은 많은 이용예를 갖고, 서로 다른 문서 유형의 섬세한 조작을 제공하는 인터페이스 프로세스 및 시스템 세트를 제공하는 것을 포함하여 종래 기술을 뛰어넘는 이점들을 제공한다.
따라서, 본 발명은 본 명세서에 개시된 실시예에만 한정되는 것이 아니라, 이하의 청구범위로부터 이해되어야 하고, 이하의 청구범위는 법이 허용하는 한 넓게 해석되어야 한다.
본 발명에 따른 사용자 인터페이스 제공 방법에 의해, 핸드헬드 또는 휴대용 장치에 의해 제공되는 콘텐츠를 조작하고 보는 것을 보다 용이하게 할 수 있으며, 콘텐츠가 그것의 원시 애플리케이션 프로그램과 분리될 때, 콘텐츠의 조작을 가능하게 할 수 있다.

Claims (35)

  1. 사용자 인터페이스를 제공하는 방법으로서,
    ⅰ. 문서를 상기 문서 내의 객체들의 인스턴스 속성을 정의하는 매개변수 및 문서 객체들의 집합으로서 기술하는 상기 문서의 내부 화상을 가진 콘텐츠 문서 파일을 제공하는 단계;
    ⅱ. 사용자 인터페이스 기능을 수행하는 그래픽 툴을 나타내며, 동일한 객체 및 매개변수 기반 화상으로 표현되는 내부 화상을 갖는 툴 문서 파일을 제공하는 단계;
    ⅲ. 상기 툴 문서 파일과 관련된 툴 코드를 제공하는 단계;
    ⅳ. 상기 콘텐츠 문서 파일과 상기 툴 문서 파일의 집합인 디스플레이용 스크린 문서를 생성하는 단계;
    ⅴ. 상기 스크린 문서의 집합된 내부 화상을 파싱(parsing)하는 단계; 및
    ⅵ. 상기 스크린 문서를 렌더링하여, 상기 사용자 인터페이스 기능을 수행하는 상기 그래픽 툴과 상기 콘텐츠 문서를 통합한 단일 출력 디스플레이를 생성하는 단계를 포함하는, 사용자 인터페이스 제공 방법.
  2. 제 1 항에 있어서,
    상기 콘텐츠 문서 파일 제공 단계는 다수의 소스 문서를 나타내는 문서 파일을 제공하는 단계를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  3. 제 2 항에 있어서,
    상기 다수의 소스 문서는 서로 다른 데이터 포맷을 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  4. 제 1 항에 있어서,
    상기 툴 코드는 스크립트를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 툴 문서 파일은 사용자 인터페이스 제어 툴 또는 윈도우/데스크탑 퍼니쳐를 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  6. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 툴 문서 파일은 버튼, 아이콘, 풀 다운 메뉴, 스위치 및 슬라이더 컨트롤을 포함하는 그룹으로부터 선택된 상호적인 객체를 나타내는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  7. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 툴 문서 파일은 확대 글래스, 눈금자, 텍스트 입력 커서, 썸네일 네비게이션 컨트롤 및 질문 툴을 포함하는 그룹으로부터 선택된 그래픽 툴을 나타내는 정보를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  8. 제 1 항에 있어서,
    ⅰ. 상기 툴 문서 파일과 관련된 상기 툴 코드는 상기 콘텐츠 문서 파일 또는 상기 툴 문서 파일을 처리하여 상기 스크린 문서의 일부를 형성하는 유도된 문서를 생성할 수 있고;
    ⅱ. 상기 유도된 문서의 처리된 내부 화상은 상기 툴과 관련된 디스플레이 효과를 얻는 방식으로 상기 콘텐츠를 제시하며;
    ⅲ. 상기 디스플레이 효과는 렌더링된 스크린 문서로 표현되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  9. 제 8 항에 있어서,
    상기 유도된 문서의 처리된 내부 화상은 상기 그래픽 툴, 상기 콘텐츠 문서 파일, 및 상기 툴 문서 파일이 사용되는 애플리케이션 프로그램 사이의 문맥적인 관계에 따라 변화하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  10. 제 9 항에 있어서,
    상기 문맥적인 관계는 상기 그래픽 인터페이스 툴과 상기 렌더링된 콘텐츠의 상대적인 위치, 상기 그래픽 인터페이스 툴이 상기 렌더링된 콘텐츠에 작용하는 시간, 및 상기 렌더링된 콘텐츠의 상태를 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  11. 제 1 항에 있어서,
    ⅰ. 상기 스크린상에서 상기 그래픽 툴을 상기 렌더링된 문서 위의 선택된 위치로 이동시키는 수단을 제공하는 단계; 및
    ⅱ. 상기 콘텐츠 문서 파일 중 선택된 위치와 관련된 부분을 처리하도록 상기 툴 코드에 지시하는 단계를 더 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  12. 제 1 항에 있어서,
    상기 툴 코드 제공 단계는 문서의 내부 화상을 기술하는 매개변수 및 문서 객체를 변경함으로써 디스플레이 효과를 생성하기 위한 툴 코드를 제공하는 단계를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  13. 제 12 항에 있어서,
    상기 매개변수 및 문서 객체의 변경은 상기 내부 화상을 수정하여 상기 스크린 문서에 콘텐츠를 추가하는 것을 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  14. 제 1 항에 있어서,
    상기 스크린 문서의 렌더링은 원시 특징(figures) 및 매개변수에 관하여 표현되는 상기 스크린 문서의 뷰 생성을 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  15. 제 14 항에 있어서,
    상기 원시 특징은 경계 박스, 형상, 투명성 및 상기 특징의 데이터 콘텐츠에 관하여 정의되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  16. 제 1 항 또는 제 14 항에 있어서,
    상기 툴 코드 제공 단계는 상기 스크린 문서의 생성된 뷰를 처리하여, 상기 스크린 문서의 뷰를 구성하는 원시 특징의 매개변수를 변경함으로써 디스플레이 효과를 생성하는 툴 코드를 제공하는 단계를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  17. 제 16 항에 있어서,
    상기 원시 특징의 매개변수 변경은 본래 상기 스크린 문서 내의 선택된 특징의 색상, 스케일 및 투명성을 포함하는 그룹으로부터 선택된 매개변수들의 변경을 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  18. 제 16 항에 있어서,
    상기 스크린 문서의 생성된 뷰 처리는 상기 스크린 문서의 뷰 내의 선택된 특징들을 상기 툴 문서 파일과 관련된 자르기 영역으로 자르는 것을 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  19. 제 1 항에 있어서,
    상기 스크린 문서의 렌더링 단계는 보고 있는 문맥 및 관련 일시적 매개변수를 정의하는 뷰 제어 입력을 수신하여 상기 스크린 문서의 문맥 특정 뷰를 생성하는 단계를 포함하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  20. 제 19 항에 있어서,
    상기 문맥 특정 뷰는 상기 스크린 문서 내의 모든 문서 객체, 전체 문서 객체, 상기 스크린 문서 내의 하나 또는 소정의 문서 객체의 부분들을 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  21. 제 19 항에 있어서,
    상기 뷰 제어 입력은 상기 스크린 문서의 내부 화상의 어떤 부분들이 상기 문맥 특정 뷰에 필요한지를 결정하도록 해석되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  22. 제 19 항에 있어서,
    상기 뷰 제어 입력은 상기 뷰가 어떻게, 언제 그리고 얼마나 오래 디스플레이되어야 하는지를 결정하도록 해석되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  23. 제 1 항에 있어서,
    ⅰ. 상기 그래픽 툴은 사용자에 의해 활성화될 수 있는 툴 버튼으로 상기 디스플레이 상에 제시되고;
    ⅱ. 상기 사용자에 의한 툴 버튼의 활성화는 상기 툴 문서 파일이 처리되어 상기 디스플레이 내에 상기 그래픽 툴의 이미지를 생성하게 하는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  24. 제 23 항에 있어서,
    ⅰ. 상기 툴 문서 파일에 관련된 툴 코드는 상기 콘텐츠 문서 파일 또는 상기 툴 문서 파일을 처리하여 상기 스크린 문서의 일부를 형성하는 유도된 문서를 생성할 수 있고;
    ⅱ. 상기 유도된 문서의 처리된 내부 화상은 상기 툴과 관련된 디스플레이 효과를 얻는 방식으로 상기 콘텐츠를 제시하며;
    ⅲ. 상기 디스플레이 효과는 상기 사용자가 상기 툴 버튼을 활성화할 때 상 기 렌더링된 스크린 문서로 표현되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  25. 제 1 항에 있어서,
    상기 콘텐츠 문서 파일 및 상기 툴 문서 파일의 내부 화상의 객체들은 본래 텍스트 객체, 비트맵 그래픽 객체 및 벡터 그래픽 객체를 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  26. 제 25 항에 있어서,
    상기 객체는 움직이는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  27. 제 25 항에 있어서,
    상기 객체는 움직이지 않는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  28. 제 25 항에 있어서,
    상기 객체는 2차원인 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  29. 제 25 항에 있어서,
    상기 객체는 3차원인 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  30. 제 1 항에 있어서,
    상기 객체는 비디오 객체, 오디오 객체 및 상호적인 객체를 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  31. 제 1 항에 있어서,
    상기 객체는 버튼, 아이콘, 풀 다운 메뉴, 스위치 및 슬라이더 컨트롤을 포함하는 그룹으로부터 선택되는 것을 특징으로 하는 사용자 인터페이스 제공 방법.
  32. 프로세서, 메모리 및 디스플레이를 포함하며, 제 1 항 내지 제 4 항, 제 8 항 내지 제 15 항, 제 19 항 내지 제 31 항 중 어느 한 항에 따른 방법을 구현하도록 프로그래밍 한 컴퓨터 장치.
  33. 제 32 항에 있어서,
    상기 디스플레이는 접촉식 디스플레이를 포함하는 것을 특징으로 하는 컴퓨터 장치.
  34. 제 33 항에 있어서,
    상기 프로세서, 메모리 및 디스플레이는 핸드헬드 컴퓨터, 전화기, 이동 데이터 단말기, 셋톱 박스, 내장형 프로세서, 노트북 컴퓨터, 컴퓨터 워크스테이션, 프린터, 복사기, 팩시밀리, 차량 내 시스템, 가전 제품, 오디오 플레이어, 전자레인지, 세탁기, 냉장고를 포함하는 그룹으로부터 선택된 장치에 대한 데이터 프로세싱 플랫폼으로서 구성되는 것을 특징으로 하는 컴퓨터 장치.
  35. 제 32 항에 있어서,
    접촉식 스크린 및 패드, 마우스 입력 장치, 키보드 및 키패드, 조이스틱, 썸 휠 장치, 마우스, 트랙볼, 가상 현실 입력 시스템, 음성 제어 시스템, 안구 운동 제어 시스템을 포함하는 그룹으로부터 선택된 입력 장치를 더 포함하는 것을 특징으로 하는 컴퓨터 장치.
KR1020067027317A 2000-04-14 2001-04-17 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및방법 KR100721634B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
GBGB0009129.8A GB0009129D0 (en) 2000-04-14 2000-04-14 Digital document processing
GB0009129.8 2000-04-14
US09/703,502 2000-10-31
US09/703,502 US7055095B1 (en) 2000-04-14 2000-10-31 Systems and methods for digital document processing

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020027013685A Division KR100707651B1 (ko) 2000-04-14 2001-04-17 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및 방법

Publications (2)

Publication Number Publication Date
KR20070007213A KR20070007213A (ko) 2007-01-12
KR100721634B1 true KR100721634B1 (ko) 2007-05-23

Family

ID=26244100

Family Applications (9)

Application Number Title Priority Date Filing Date
KR1020067026622A KR100707579B1 (ko) 2000-04-14 2001-04-17 비디오 데이터의 프레임 생성 방법 및 시스템
KR1020077004359A KR100799019B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리
KR1020067027317A KR100721634B1 (ko) 2000-04-14 2001-04-17 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및방법
KR1020027013686A KR100743781B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리용 시스템 및 방법
KR1020027013679A KR100707645B1 (ko) 2000-04-14 2001-04-17 그래픽 데이터의 시각적 표현 생성 및 디지털 문서 처리 시스템 및 방법
KR1020027013684A KR100748802B1 (ko) 2000-04-14 2001-04-17 이미지를 랜더링하기 위한 방법, 그래픽 객체들을 처리하기 위한 시스템 및 컴퓨터 프로그램 저장 매체
KR1020027013682A KR100743797B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리
KR1020027013683A KR100727195B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리용 시스템 및 방법
KR1020027013685A KR100707651B1 (ko) 2000-04-14 2001-04-17 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및 방법

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020067026622A KR100707579B1 (ko) 2000-04-14 2001-04-17 비디오 데이터의 프레임 생성 방법 및 시스템
KR1020077004359A KR100799019B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리

Family Applications After (6)

Application Number Title Priority Date Filing Date
KR1020027013686A KR100743781B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리용 시스템 및 방법
KR1020027013679A KR100707645B1 (ko) 2000-04-14 2001-04-17 그래픽 데이터의 시각적 표현 생성 및 디지털 문서 처리 시스템 및 방법
KR1020027013684A KR100748802B1 (ko) 2000-04-14 2001-04-17 이미지를 랜더링하기 위한 방법, 그래픽 객체들을 처리하기 위한 시스템 및 컴퓨터 프로그램 저장 매체
KR1020027013682A KR100743797B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리
KR1020027013683A KR100727195B1 (ko) 2000-04-14 2001-04-17 디지털 문서 처리용 시스템 및 방법
KR1020027013685A KR100707651B1 (ko) 2000-04-14 2001-04-17 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및 방법

Country Status (11)

Country Link
US (6) US7009626B2 (ko)
EP (7) EP1272920A1 (ko)
JP (6) JP5265837B2 (ko)
KR (9) KR100707579B1 (ko)
CN (3) CN1848081B (ko)
AT (1) ATE291261T1 (ko)
AU (2) AU2001250497A1 (ko)
DE (1) DE60109434T2 (ko)
ES (1) ES2240451T3 (ko)
HK (4) HK1057117A1 (ko)
WO (2) WO2001080178A2 (ko)

Families Citing this family (274)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9722766D0 (en) 1997-10-28 1997-12-24 British Telecomm Portable computers
US6324511B1 (en) * 1998-10-01 2001-11-27 Mindmaker, Inc. Method of and apparatus for multi-modal information presentation to computer users with dyslexia, reading disabilities or visual impairment
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US7039863B1 (en) 1999-07-23 2006-05-02 Adobe Systems Incorporated Computer generation of documents using layout elements and content elements
US6456395B1 (en) * 1999-08-30 2002-09-24 Microsoft Corporation Method for separating colors of encapsulated postscript images
US7009626B2 (en) 2000-04-14 2006-03-07 Picsel Technologies Limited Systems and methods for generating visual representations of graphical data and digital document processing
US7210099B2 (en) * 2000-06-12 2007-04-24 Softview Llc Resolution independent vector display of internet content
US8006192B1 (en) 2000-10-04 2011-08-23 Apple Inc. Layered graphical user interface
CA2328795A1 (en) 2000-12-19 2002-06-19 Advanced Numerical Methods Ltd. Applications and performance enhancements for detail-in-context viewing technology
US8416266B2 (en) 2001-05-03 2013-04-09 Noregin Assetts N.V., L.L.C. Interacting with detail-in-context presentations
CA2345803A1 (en) 2001-05-03 2002-11-03 Idelix Software Inc. User interface elements for pliable display technology implementations
WO2002101534A1 (en) 2001-06-12 2002-12-19 Idelix Software Inc. Graphical user interface with zoom for detail-in-context presentations
US9760235B2 (en) 2001-06-12 2017-09-12 Callahan Cellular L.L.C. Lens-defined adjustment of displays
US7084886B2 (en) * 2002-07-16 2006-08-01 Idelix Software Inc. Using detail-in-context lenses for accurate digital image cropping and measurement
GB0124630D0 (en) * 2001-10-13 2001-12-05 Picsel Res Ltd "Systems and methods for generating visual representations of graphical data and digital document processing"
US8095879B2 (en) 2002-12-10 2012-01-10 Neonode Inc. User interface for mobile handheld computer unit
US9189467B1 (en) * 2001-11-07 2015-11-17 Apple Inc. Method and apparatus for annotating an electronic document
FR2831978B1 (fr) * 2001-11-07 2004-08-20 Neopost Ind Systeme de suivi statistique de produits postaux
CA2361341A1 (en) 2001-11-07 2003-05-07 Idelix Software Inc. Use of detail-in-context presentation on stereoscopically paired images
US6690387B2 (en) * 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US7843437B1 (en) * 2002-01-14 2010-11-30 Palm, Inc. Hand-held browser transcoding
FI116425B (fi) * 2002-01-18 2005-11-15 Nokia Corp Menetelmä ja laite laajan näppäimistön integroimiseksi pieneen laitteeseen
CA2370752A1 (en) 2002-02-05 2003-08-05 Idelix Software Inc. Fast rendering of pyramid lens distorted raster images
US7250939B2 (en) * 2002-03-19 2007-07-31 Aol Llc Display motion multiplier
US7096432B2 (en) * 2002-05-14 2006-08-22 Microsoft Corporation Write anywhere tool
US7293150B2 (en) * 2002-06-28 2007-11-06 Microsoft Corporation Method and system for creating and restoring an image file
US6873329B2 (en) * 2002-07-05 2005-03-29 Spatial Data Technologies, Inc. System and method for caching and rendering images
US8120624B2 (en) 2002-07-16 2012-02-21 Noregin Assets N.V. L.L.C. Detail-in-context lenses for digital image cropping, measurement and online maps
CA2393887A1 (en) * 2002-07-17 2004-01-17 Idelix Software Inc. Enhancements to user interface for detail-in-context data presentation
KR100594073B1 (ko) * 2002-09-17 2006-07-03 삼성전자주식회사 내장형 시스템의 디지털 영상 스케일링방법
CA2406131A1 (en) 2002-09-30 2004-03-30 Idelix Software Inc. A graphical user interface using detail-in-context folding
CA2449888A1 (en) 2003-11-17 2005-05-17 Idelix Software Inc. Navigating large images using detail-in-context fisheye rendering techniques
US7554530B2 (en) * 2002-12-23 2009-06-30 Nokia Corporation Touch screen user interface featuring stroke-based object selection and functional object activation
DE10310794B4 (de) * 2003-03-12 2012-10-18 Hewlett-Packard Development Co., L.P. Bedieneinrichtung und Kommunikationsgerät
US20040221243A1 (en) * 2003-04-30 2004-11-04 Twerdahl Timothy D Radial menu interface for handheld computing device
JP2005012764A (ja) * 2003-05-22 2005-01-13 Casio Comput Co Ltd データ通信装置、画像送信方法および画像送信プログラム
GB2404819A (en) * 2003-08-05 2005-02-09 Research In Motion Ltd Mobile communications device with integral optical navigation
CN1303512C (zh) * 2004-02-25 2007-03-07 英业达股份有限公司 具有触控操作演示文稿的电子装置及其方法
US7486302B2 (en) * 2004-04-14 2009-02-03 Noregin Assets N.V., L.L.C. Fisheye lens graphical user interfaces
US7549118B2 (en) * 2004-04-30 2009-06-16 Microsoft Corporation Methods and systems for defining documents with selectable and/or sequenceable parts
US8106927B2 (en) 2004-05-28 2012-01-31 Noregin Assets N.V., L.L.C. Graphical user interfaces and occlusion prevention for fisheye lenses with line segment foci
FI20045201A (fi) * 2004-05-31 2005-12-01 Nokia Corp Menetelmä ja järjestelmä kuvien katsomiseksi ja parantamiseksi
US9317945B2 (en) 2004-06-23 2016-04-19 Callahan Cellular L.L.C. Detail-in-context lenses for navigation
KR100469820B1 (ko) 2004-06-29 2005-02-03 엔에이치엔(주) 화면 갱신 방법 및 그 시스템
JP4262164B2 (ja) * 2004-08-06 2009-05-13 キヤノン株式会社 情報処理装置及びその制御方法、プログラム
US7434173B2 (en) * 2004-08-30 2008-10-07 Microsoft Corporation Scrolling web pages using direct interaction
US7714859B2 (en) 2004-09-03 2010-05-11 Shoemaker Garth B D Occlusion reduction and magnification for multidimensional data presentations
US7995078B2 (en) 2004-09-29 2011-08-09 Noregin Assets, N.V., L.L.C. Compound lenses for multi-source data presentation
KR100636181B1 (ko) 2004-10-01 2006-10-19 삼성전자주식회사 스캔 문서 삽입 방법 및 장치
US8184128B2 (en) 2004-10-27 2012-05-22 Hewlett-Packard Development Company, L. P. Data distribution system and method therefor
ATE383627T1 (de) * 2004-11-19 2008-01-15 Ericsson Telefon Ab L M Verfahren und vorrichtung zur erzeugung dreidimensionaler bilder
US20060121939A1 (en) 2004-12-03 2006-06-08 Picsel Research Limited Data processing devices and systems with enhanced user interfaces
US8819569B2 (en) * 2005-02-18 2014-08-26 Zumobi, Inc Single-handed approach for navigation of application tiles using panning and zooming
US7607020B2 (en) * 2005-03-01 2009-10-20 Adobe Systems Incorporated Communication with an external source application
US20090066641A1 (en) * 2005-03-10 2009-03-12 Motus Corporation Methods and Systems for Interpretation and Processing of Data Streams
US7995232B2 (en) * 2005-03-10 2011-08-09 Kabushiki Kaisha Toshiba Document file management apparatus, document file management method, and document file management program
KR100935680B1 (ko) * 2005-04-08 2010-01-08 월드피콤 가부시키가이샤.. 화면 정보의 편집 장치 및 방법과 프로그램, 기록 매체,정보처리 단말의 생산 방법
US8867575B2 (en) 2005-04-29 2014-10-21 Jasper Technologies, Inc. Method for enabling a wireless device for geographically preferential services
US8478238B2 (en) 2005-04-29 2013-07-02 Jasper Wireless, Inc. Global platform for managing subscriber identity modules
US8818331B2 (en) 2005-04-29 2014-08-26 Jasper Technologies, Inc. Method for enabling a wireless device for geographically preferential services
US9307397B2 (en) 2005-04-29 2016-04-05 Jasper Technologies, Inc. Method for enabling a wireless device with customer-specific services
US9167471B2 (en) 2009-05-07 2015-10-20 Jasper Technologies, Inc. System and method for responding to aggressive behavior associated with wireless devices
US8917611B2 (en) 2009-05-07 2014-12-23 Jasper Technologies, Inc. Core services platform for wireless voice, data and messaging network services
US8391161B1 (en) 2009-05-07 2013-03-05 Jasper Wireless, Inc. Virtual diagnostic system for wireless communications network systems
US9226151B2 (en) 2006-04-04 2015-12-29 Jasper Wireless, Inc. System and method for enabling a wireless device with customer-specific services
KR100681523B1 (ko) * 2005-06-24 2007-02-09 주식회사 시그마플러스 팝 월드 ｄｂ 구조에 있어서의 메트릭스 ｄｂ 구조 및 그구현방법
US7900158B2 (en) * 2005-08-04 2011-03-01 Microsoft Corporation Virtual magnifying glass with intuitive use enhancements
US7949955B2 (en) * 2005-08-04 2011-05-24 Microsoft Corporation Virtual magnifying glass system architecture
US7694234B2 (en) * 2005-08-04 2010-04-06 Microsoft Corporation Virtual magnifying glass with on-the fly control functionalities
US8026920B2 (en) * 2005-09-13 2011-09-27 Microsoft Corporation Extensible visual effects on active content in user interfaces
US8031206B2 (en) * 2005-10-12 2011-10-04 Noregin Assets N.V., L.L.C. Method and system for generating pyramid fisheye lens detail-in-context presentations
US7791776B2 (en) * 2005-10-28 2010-09-07 Hewlett-Packard Development Company, L.P. Spot color adjuster
KR100797393B1 (ko) * 2005-11-25 2008-01-28 한국전자통신연구원 벡터 그래픽을 이용한 지상파 ｄｍｂ 데이터 방송 서버 및그 방법과, 그에 따른 지상파 ｄｍｂ 수신 시스템 및 그방법
US7696985B2 (en) * 2005-11-30 2010-04-13 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Producing display control signals for handheld device display and remote display
US7705861B2 (en) * 2006-01-19 2010-04-27 Microsoft Corporation Snap to element analytical tool
ES2698264T3 (es) * 2006-02-10 2019-02-01 Freedom Scientific Inc Estilización y sustitución de texto sensible al contenido aplicable a todo el sistema
US7983473B2 (en) 2006-04-11 2011-07-19 Noregin Assets, N.V., L.L.C. Transparency adjustment of a presentation
US7907144B2 (en) * 2006-04-14 2011-03-15 Autodesk, Inc. Optimized tile-based image storage
KR20070113018A (ko) 2006-05-24 2007-11-28 엘지전자 주식회사 터치스크린 장치 및 그 실행방법
KR101269375B1 (ko) 2006-05-24 2013-05-29 엘지전자 주식회사 터치스크린 장치 및 이의 이미지 표시방법
US20090213086A1 (en) * 2006-04-19 2009-08-27 Ji Suk Chae Touch screen device and operating method thereof
KR20070113025A (ko) * 2006-05-24 2007-11-28 엘지전자 주식회사 터치스크린 장치 및 이의 작동방법
KR20070113022A (ko) * 2006-05-24 2007-11-28 엘지전자 주식회사 사용자 입력에 반응하는 터치스크린 장치 및 이의 작동방법
KR101327581B1 (ko) 2006-05-24 2013-11-12 엘지전자 주식회사 터치스크린 장치 및 이의 작동방법
TWI328185B (en) * 2006-04-19 2010-08-01 Lg Electronics Inc Touch screen device for potable terminal and method of displaying and selecting menus thereon
TW200805131A (en) * 2006-05-24 2008-01-16 Lg Electronics Inc Touch screen device and method of selecting files thereon
KR100834793B1 (ko) * 2006-07-13 2008-06-05 엠텍비젼 주식회사 본 애니메니션 그래픽 처리를 위한 변환 장치 및 이를포함한 그래픽 처리 장치
JP4827659B2 (ja) * 2006-08-25 2011-11-30 キヤノン株式会社 画像処理装置、画像処理方法、及びコンピュータプログラム
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US8736557B2 (en) 2006-09-11 2014-05-27 Apple Inc. Electronic device with image based browsers
US9128596B2 (en) * 2006-09-22 2015-09-08 Opera Software Asa Method and device for selecting and displaying a region of interest in an electronic document
US8490117B1 (en) 2006-10-23 2013-07-16 Adobe Systems Incorporated Bridging script engines
US8020089B1 (en) 2006-10-23 2011-09-13 Adobe Systems Incorporated Rendering hypertext markup language content
US7614003B2 (en) * 2006-10-23 2009-11-03 Adobe Systems Incorporated Rendering hypertext markup language content
US20080103913A1 (en) * 2006-10-26 2008-05-01 Circuit City Stores Inc. System and method for guided sales
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8151204B2 (en) * 2006-11-29 2012-04-03 Siemens Medical Solutions Usa, Inc. Document viewing and management system
US8185826B2 (en) * 2006-11-30 2012-05-22 Microsoft Corporation Rendering document views with supplemental information content
KR100803947B1 (ko) 2006-12-01 2008-02-15 주식회사 코아로직 오픈 벡터그래픽 응용 프로그램 인터페이스 변환 장치와방법, 모바일 단말기, 및 그 방법이 기록된 기록매체
US20080168478A1 (en) 2007-01-07 2008-07-10 Andrew Platzer Application Programming Interfaces for Scrolling
US7903115B2 (en) * 2007-01-07 2011-03-08 Apple Inc. Animations
US8813100B1 (en) 2007-01-07 2014-08-19 Apple Inc. Memory management
US20080168402A1 (en) * 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US7872652B2 (en) * 2007-01-07 2011-01-18 Apple Inc. Application programming interfaces for synchronization
US8656311B1 (en) 2007-01-07 2014-02-18 Apple Inc. Method and apparatus for compositing various types of content
US7844915B2 (en) * 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US8914786B2 (en) 2007-03-23 2014-12-16 Zumobi, Inc. Systems and methods for controlling application updates across a wireless interface
US20080278741A1 (en) * 2007-05-09 2008-11-13 Canon Kabushiki Kaisha Scope-based xps filter driver configuration to perform dynamic operations
US8185839B2 (en) 2007-06-09 2012-05-22 Apple Inc. Browsing or searching user interfaces and other aspects
US8201096B2 (en) 2007-06-09 2012-06-12 Apple Inc. Browsing or searching user interfaces and other aspects
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US9026938B2 (en) 2007-07-26 2015-05-05 Noregin Assets N.V., L.L.C. Dynamic detail-in-context user interface for application access and content access on electronic displays
KR101430445B1 (ko) * 2007-08-20 2014-08-14 엘지전자 주식회사 화면 크기 조절 기능을 갖는 단말기 및 이러한 기능을구현하는 프로그램을 기록한 매체
US8069404B2 (en) 2007-08-22 2011-11-29 Maya-Systems Inc. Method of managing expected documents and system providing same
US8601392B2 (en) 2007-08-22 2013-12-03 9224-5489 Quebec Inc. Timeline for presenting information
US20090073189A1 (en) * 2007-09-17 2009-03-19 Picsel (Research) Ltd. System and method for generating visual representations of graphical data and digital document processing
US20090079746A1 (en) * 2007-09-20 2009-03-26 Apple Inc. Switching between graphics sources to facilitate power management and/or security
US8127233B2 (en) * 2007-09-24 2012-02-28 Microsoft Corporation Remote user interface updates using difference and motion encoding
US8862986B2 (en) 2007-10-01 2014-10-14 Hewlett-Packard Development Company, L.P. Arranging graphic objects on a page with relative position based control
KR100907664B1 (ko) * 2007-10-10 2009-07-14 두산중공업(주) 원격 문서 편집 장치 및 방법
US9058337B2 (en) * 2007-10-22 2015-06-16 Apple Inc. Previewing user interfaces and other aspects
JP2009112356A (ja) * 2007-11-02 2009-05-28 Ge Medical Systems Global Technology Co Llc 超音波診断装置
US8584044B2 (en) * 2007-11-16 2013-11-12 Microsoft Corporation Localized thumbnail preview of related content during spatial browsing
US8438477B2 (en) * 2007-12-06 2013-05-07 International Business Machines Corporation Methods for deforming map widgets on the browser
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8677285B2 (en) 2008-02-01 2014-03-18 Wimm Labs, Inc. User interface of a small touch sensitive display for an electronic data and communication device
US7952596B2 (en) * 2008-02-11 2011-05-31 Sony Ericsson Mobile Communications Ab Electronic devices that pan/zoom displayed sub-area within video frames in response to movement therein
US8174502B2 (en) * 2008-03-04 2012-05-08 Apple Inc. Touch event processing for web pages
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US8416196B2 (en) 2008-03-04 2013-04-09 Apple Inc. Touch event model programming interface
CA2657835C (en) 2008-03-07 2017-09-19 Mathieu Audet Documents discrimination system and method thereof
US9558172B2 (en) * 2008-03-12 2017-01-31 Microsoft Technology Licensing, Llc Linking visual properties of charts to cells within tables
US20090254867A1 (en) * 2008-04-03 2009-10-08 Microsoft Corporation Zoom for annotatable margins
US20090307618A1 (en) * 2008-06-05 2009-12-10 Microsoft Corporation Annotate at multiple levels
WO2009154484A2 (en) * 2008-06-20 2009-12-23 Business Intelligence Solutions Safe B.V. Methods, apparatus and systems for data visualization and related applications
TW201017487A (en) * 2008-10-17 2010-05-01 Asustek Comp Inc Method for operating displayed page and electronic device
US8370346B2 (en) * 2008-12-10 2013-02-05 Microsoft Corporation Micro-browser viewers and searching
JP4745405B2 (ja) * 2009-01-26 2011-08-10 シャープ株式会社 印刷装置
JP2010191739A (ja) * 2009-02-19 2010-09-02 Fujitsu Ltd 文書表示装置、文書表示方法、及びこの方法を実行するコンピュータプログラム
US20100218135A1 (en) * 2009-02-26 2010-08-26 Thomas Stanton Brugler Cursor thumbnail displaying page layout
US8510665B2 (en) 2009-03-16 2013-08-13 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8566044B2 (en) * 2009-03-16 2013-10-22 Apple Inc. Event recognition
US9311112B2 (en) * 2009-03-16 2016-04-12 Apple Inc. Event recognition
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
KR101559178B1 (ko) * 2009-04-08 2015-10-12 엘지전자 주식회사 명령어 입력 방법 및 이를 적용한 이동 통신 단말기
US9258402B2 (en) * 2009-04-14 2016-02-09 Qualcomm Incorporated System and method for controlling mobile devices
US8897146B2 (en) 2009-05-07 2014-11-25 Jasper Technologies, Inc. Core services platform for wireless voice, data and messaging network services
US8375295B2 (en) 2009-05-21 2013-02-12 Sony Computer Entertainment Inc. Customization of GUI layout based on history of use
US9035887B1 (en) 2009-07-10 2015-05-19 Lexcycle, Inc Interactive user interface
US8347232B1 (en) * 2009-07-10 2013-01-01 Lexcycle, Inc Interactive user interface
JP2011048538A (ja) * 2009-08-26 2011-03-10 Access Co Ltd コンテキスト配置方法、コンテキスト配置プログラム、及び情報表示装置
KR101589179B1 (ko) 2009-08-31 2016-02-12 엘지전자 주식회사 스크린 리모컨 및 공간 리모컨에 의해 컨트롤되는 디지털 방송 수신기, 그리고 그 제어 방법
US9176962B2 (en) 2009-09-07 2015-11-03 Apple Inc. Digital media asset browsing with audio cues
JP5286225B2 (ja) * 2009-10-23 2013-09-11 京セラドキュメントソリューションズ株式会社 表示装置、表示制御プログラム、表示制御方法、電子機器、及び画像形成装置
CN102054283B (zh) * 2009-11-05 2016-01-20 齐营股份有限公司 数据组的相关值的图形表示方法及装置
US9047052B2 (en) * 2009-12-22 2015-06-02 At&T Intellectual Property I, L.P. Simplified control input to a mobile device
US8736561B2 (en) 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
US9235452B2 (en) * 2010-02-05 2016-01-12 Microsoft Technology Licensing, Llc Graphics remoting using augmentation data
US20110246875A1 (en) * 2010-04-02 2011-10-06 Symantec Corporation Digital whiteboard implementation
EP2558960A1 (en) 2010-04-12 2013-02-20 Google, Inc. Real-time collaboration in a hosted word processor
US20110252339A1 (en) 2010-04-12 2011-10-13 Google Inc. Collaborative Cursors in a Hosted Word Processor
US9092128B2 (en) 2010-05-21 2015-07-28 Apple Inc. Method and apparatus for managing visual information
US20110291964A1 (en) 2010-06-01 2011-12-01 Kno, Inc. Apparatus and Method for Gesture Control of a Dual Panel Electronic Device
US8826495B2 (en) 2010-06-01 2014-09-09 Intel Corporation Hinged dual panel electronic device
US10216408B2 (en) 2010-06-14 2019-02-26 Apple Inc. Devices and methods for identifying user interface objects based on view hierarchy
KR101694154B1 (ko) * 2010-06-29 2017-01-09 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
KR101032835B1 (ko) 2010-07-21 2011-05-06 서울대학교산학협력단 백터 그래픽스 기술에 있어서 스캔라인 기반의 랜더링 방법 및 그에 따른 장치
KR101747299B1 (ko) * 2010-09-10 2017-06-15 삼성전자주식회사 데이터 객체 디스플레이 방법 및 장치와 컴퓨터로 읽을 수 있는 저장 매체
JP5732218B2 (ja) * 2010-09-21 2015-06-10 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
EP2437151B1 (en) 2010-10-01 2020-07-08 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
KR101743632B1 (ko) 2010-10-01 2017-06-07 삼성전자주식회사 휴대용 단말기에서 전자책 페이지 넘김 장치 및 방법
US9678572B2 (en) 2010-10-01 2017-06-13 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
EP2437153A3 (en) * 2010-10-01 2016-10-05 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
US8797283B2 (en) 2010-11-22 2014-08-05 Sony Computer Entertainment America Llc Method and apparatus for performing user-defined macros
CN102023749A (zh) * 2010-12-02 2011-04-20 广东宝莱特医用科技股份有限公司 医疗设备触摸屏界面上列表型控件的区域拖动处理方法
US8907903B2 (en) 2011-01-13 2014-12-09 Sony Computer Entertainment America Llc Handing control of an object from one touch input to another touch input
US8700986B1 (en) 2011-03-18 2014-04-15 Google Inc. System and method for displaying a document containing footnotes
US8566708B1 (en) * 2011-01-13 2013-10-22 Google Inc. Merging electronic document redraws
US8510266B1 (en) 2011-03-03 2013-08-13 Google Inc. System and method for providing online data management services
CN103518195B (zh) * 2011-03-10 2016-09-28 J·瑞卡鲍格 用于基于矢量的表格字段文档的设备、系统和方法
US8314790B1 (en) * 2011-03-29 2012-11-20 Google Inc. Layer opacity adjustment for a three-dimensional object
US9298363B2 (en) 2011-04-11 2016-03-29 Apple Inc. Region activation for touch sensitive surface
US8677232B2 (en) * 2011-05-31 2014-03-18 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US8959423B2 (en) 2011-06-28 2015-02-17 International Business Machines Corporation Drill-through lens for generating different types of reports
US8959424B2 (en) * 2011-06-28 2015-02-17 International Business Machines Corporation Comparative and analytic lens for displaying a window with a first column for first data and a second column for comparison values of the first data and second data
US9619435B2 (en) * 2011-08-31 2017-04-11 Adobe Systems Incorporated Methods and apparatus for modifying typographic attributes
US8484561B1 (en) 2011-09-02 2013-07-09 Google Inc. System and method for updating an object instance based on instructions received from multiple devices
US9336137B2 (en) 2011-09-02 2016-05-10 Google Inc. System and method for performing data management in a collaborative development environment
US20130063735A1 (en) * 2011-09-12 2013-03-14 International Business Machines Corporation Selective print
US20130067366A1 (en) * 2011-09-14 2013-03-14 Microsoft Corporation Establishing content navigation direction based on directional user gestures
CA2790799C (en) 2011-09-25 2023-03-21 Mathieu Audet Method and apparatus of navigating information element axes
US9146665B2 (en) * 2011-09-30 2015-09-29 Paypal, Inc. Systems and methods for enhancing user interaction with displayed information
JP2013080412A (ja) * 2011-10-05 2013-05-02 Sony Corp 情報処理装置、情報処理方法、及びプログラム
CN106445445B (zh) * 2011-11-08 2022-06-03 苏州超擎图形软件科技发展有限公司 一种矢量数据的处理方法及装置
US8738706B1 (en) 2011-11-16 2014-05-27 Google Inc. Systems and methods for collaborative document editing
JP5810049B2 (ja) * 2011-12-08 2015-11-11 京セラドキュメントソリューションズ株式会社 画像形成装置及び画像形成システム
KR101899972B1 (ko) * 2011-12-21 2018-09-18 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
CA2862431A1 (en) * 2012-01-11 2013-07-18 Smart Technologies Ulc Method of displaying input during a collaboration session and interactive board employing same
US20130191781A1 (en) * 2012-01-20 2013-07-25 Microsoft Corporation Displaying and interacting with touch contextual user interface
US9928562B2 (en) 2012-01-20 2018-03-27 Microsoft Technology Licensing, Llc Touch mode and input type recognition
US9612739B2 (en) * 2012-02-02 2017-04-04 Microsoft Technology Licensing, Llc Low-latency touch-input device
US9747019B2 (en) * 2012-02-24 2017-08-29 Lg Electronics Inc. Mobile terminal and control method thereof
KR101308102B1 (ko) * 2012-02-24 2013-09-12 (주)유브릿지 휴대 단말 및 그 제어 방법
KR101711537B1 (ko) * 2012-02-24 2017-03-02 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
TW201341895A (zh) * 2012-04-06 2013-10-16 Kye Systems Corp 一種電子裝置及可產生３ｄ虛擬控制的觸控裝置
JP5828800B2 (ja) 2012-04-23 2015-12-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示装置、表示制御方法及びプログラム
US20130297520A1 (en) * 2012-05-02 2013-11-07 Mercer (US) Inc. Position Modeling Systems
US10019137B2 (en) 2012-05-09 2018-07-10 Qualcomm Incorporated Electronic document display
JP5395927B2 (ja) * 2012-05-11 2014-01-22 株式会社東芝 電子機器および手書き文書検索方法
US9449126B1 (en) * 2012-06-01 2016-09-20 Inkling Systems, Inc. System and method for displaying content according to a target format for presentation on a target presentation device
US9286276B2 (en) * 2012-06-11 2016-03-15 Google Inc. System and method of document embedding in collaborative editors
US9519693B2 (en) 2012-06-11 2016-12-13 9224-5489 Quebec Inc. Method and apparatus for displaying data element axes
US9646080B2 (en) 2012-06-12 2017-05-09 9224-5489 Quebec Inc. Multi-functions axis-based interface
KR101204039B1 (ko) * 2012-06-28 2012-11-23 (주) 사이냅소프트 문자열 추출 시스템 및 그 방법
EP2791773B1 (en) 2012-07-31 2020-11-18 Hewlett-Packard Development Company, L.P. Remote display area including input lenses each depicting a region of a graphical user interface
JP5620440B2 (ja) * 2012-08-09 2014-11-05 パナソニックインテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示制御装置、表示制御方法及びプログラム
CA2883849A1 (en) * 2012-09-05 2014-03-13 AI Squared Applying enhancements to visual content
KR101405822B1 (ko) 2012-09-18 2014-06-11 주식회사 인프라웨어 터치기반 편집 어플을 위한 시각적 편집보조 제공 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
US9979960B2 (en) 2012-10-01 2018-05-22 Microsoft Technology Licensing, Llc Frame packing and unpacking between frames of chroma sampling formats with different chroma resolutions
JP2014071854A (ja) * 2012-10-02 2014-04-21 Fuji Xerox Co Ltd 情報処理装置及びプログラム
US20140109012A1 (en) * 2012-10-16 2014-04-17 Microsoft Corporation Thumbnail and document map based navigation in a document
KR101425281B1 (ko) * 2012-11-23 2014-08-13 김영렬 온라인 반응퀴즈 게임 시스템 및 방법
JP2014106809A (ja) * 2012-11-28 2014-06-09 Konica Minolta Inc データ処理装置、コンテンツ表示方法およびブラウジングプログラム
US9904889B2 (en) * 2012-12-05 2018-02-27 Applied Brain Research Inc. Methods and systems for artificial cognition
US20140164893A1 (en) * 2012-12-12 2014-06-12 Sap Portals Israel Ltd Assisted portal navigation and crowd-based feedback
KR101416749B1 (ko) * 2012-12-13 2014-07-08 주식회사 케이티 Ｔｖ 재생 장치 및 방법
US11003351B2 (en) * 2012-12-26 2021-05-11 Gree, Inc. Display processing method and information device
US10956667B2 (en) 2013-01-07 2021-03-23 Google Llc Operational transformations proxy for thin clients
EP2752758A3 (en) * 2013-01-07 2016-10-26 LG Electronics Inc. Image display device and controlling method thereof
US9462037B2 (en) 2013-01-07 2016-10-04 Google Inc. Dynamically sizing chunks in a partially loaded spreadsheet model
US9311622B2 (en) 2013-01-15 2016-04-12 Google Inc. Resolving mutations in a partially-loaded spreadsheet model
DE102013201377A1 (de) * 2013-01-29 2014-07-31 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zum Verarbeiten von 3d-Bilddaten
US9519624B1 (en) 2013-02-05 2016-12-13 Inkling Systems, Inc. Displaying previews of content items for electronic works in a target rendering environment
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
CN104252451A (zh) * 2013-06-25 2014-12-31 上海能感物联网有限公司 汉语自然语文本遥控查询指路机信息的方法
US9846526B2 (en) * 2013-06-28 2017-12-19 Verizon and Redbox Digital Entertainment Services, LLC Multi-user collaboration tracking methods and systems
US9183681B2 (en) * 2013-07-31 2015-11-10 Bosch Automotive Service Solutions Inc. Diagnostic tool with parts ordering system
US8812989B1 (en) * 2013-08-26 2014-08-19 Google Inc. Displaying thumbnails
KR101502841B1 (ko) * 2013-08-28 2015-03-16 현대미디어 주식회사 비트맵 폰트 외곽선 처리 방법 및 이를 위한 컴퓨터로 판독가능한 기록매체
JP2015087911A (ja) * 2013-10-30 2015-05-07 株式会社東芝 電子機器、方法及びプログラム
US9818331B2 (en) * 2014-03-20 2017-11-14 Tronxyz Technology Co., Ltd. Image flipping processing method and system
US9471957B2 (en) 2014-03-28 2016-10-18 Smart Technologies Ulc Method for partitioning, managing and displaying a collaboration space and interactive input system employing same
US9827714B1 (en) 2014-05-16 2017-11-28 Google Llc Method and system for 3-D printing of 3-D object models in interactive content items
US10296163B2 (en) 2014-09-25 2019-05-21 Oracle International Corporation Electronic presentation repository and interface
KR101511589B1 (ko) * 2014-11-14 2015-04-13 (주) 로그인네트웍 스마트 룰러를 이용한 데이터 입력시스템
KR101511590B1 (ko) * 2014-11-17 2015-04-13 (주) 로그인네트웍 스마트 룰러상의 인식 존을 이용한 데이터 입력시스템
CN105719229B (zh) * 2014-12-19 2020-03-03 谷歌有限责任公司 一种基于指令流截取的应用程序透明化的分辨率控制
WO2016122663A1 (en) * 2015-01-30 2016-08-04 Hewlett-Packard Development Company, L.P. A physical document for navigation
US20160246466A1 (en) * 2015-02-23 2016-08-25 Nuance Communications, Inc. Transparent full-screen text entry interface
US20160328127A1 (en) * 2015-05-05 2016-11-10 Facebook, Inc. Methods and Systems for Viewing Embedded Videos
US10042532B2 (en) 2015-05-05 2018-08-07 Facebook, Inc. Methods and systems for viewing embedded content
US10685471B2 (en) 2015-05-11 2020-06-16 Facebook, Inc. Methods and systems for playing video while transitioning from a content-item preview to the content item
KR101658097B1 (ko) * 2015-06-02 2016-09-21 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US10691880B2 (en) * 2016-03-29 2020-06-23 Microsoft Technology Licensing, Llc Ink in an electronic document
CN106028172A (zh) * 2016-06-13 2016-10-12 百度在线网络技术（北京）有限公司 音/视频处理方法及装置
CN106254313B (zh) * 2016-07-15 2019-06-21 国云科技股份有限公司 一种通用的大数据采集字节流解析系统及其实现方法
US10368080B2 (en) 2016-10-21 2019-07-30 Microsoft Technology Licensing, Llc Selective upsampling or refresh of chroma sample values
KR101817532B1 (ko) * 2016-12-20 2018-01-11 주식회사안그라픽스 미디어 제작 시스템 및 그 방법
US11226734B1 (en) * 2016-12-30 2022-01-18 Dassault Systemes Solidworks Corporation Triggering multiple actions from a single gesture
US11980882B2 (en) * 2017-02-03 2024-05-14 Eppendorf Se Handheld fluid transfer apparatus, laboratory system comprising the handheld fluid transfer apparatus, and method for operating a handheld fluid transfer apparatus or the laboratory system
US10671266B2 (en) 2017-06-05 2020-06-02 9224-5489 Quebec Inc. Method and apparatus of aligning information element axes
CN109992751B (zh) * 2017-12-29 2023-12-01 珠海金山办公软件有限公司 表格对象的放大显示方法、装置、电子设备及存储介质
CN109992759B (zh) * 2017-12-29 2023-12-01 珠海金山办公软件有限公司 表格对象编辑方法、装置、电子设备及存储介质
US11157130B2 (en) * 2018-02-26 2021-10-26 Adobe Inc. Cursor-based resizing for copied image portions
US11876604B2 (en) * 2018-03-06 2024-01-16 Joshua Jensen System and method to manage streaming video content
IT201800003723A1 (it) * 2018-03-19 2019-09-19 Candy Spa Elettrodomestico con interfaccia utente
US20200204694A1 (en) * 2018-12-21 2020-06-25 Xerox Corporation Multi-part screen displaying document processing status alphanumerically and graphically
JP7442996B2 (ja) * 2019-08-19 2024-03-05 Ｌｉｎｅヤフー株式会社 情報表示プログラム、情報表示装置、情報表示方法および配信装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6038561A (en) * 1996-10-15 2000-03-14 Manning & Napier Information Services Management and analysis of document information text

Family Cites Families (148)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4455452A (en) * 1982-09-13 1984-06-19 Touch Activated Switch Arrays, Inc. Touch activated controller for generating X-Y output information
JPH0820864B2 (ja) * 1983-10-21 1996-03-04 キヤノン株式会社 表示制御方法
US4751740A (en) * 1984-12-10 1988-06-14 Wang Laboratories, Inc. Apparatus, method, and structure for translating a document having one structure into a document having another structure
US5083262A (en) 1986-04-28 1992-01-21 International Business Machines Corporation Language bindings for graphics functions to enable one application program to be used in different processing environments
US4839634A (en) * 1986-12-01 1989-06-13 More Edward S Electro-optic slate for input/output of hand-entered textual and graphic information
JPH01270171A (ja) * 1988-04-21 1989-10-27 Mitsubishi Electric Corp 図形処理装置
JPH038059A (ja) * 1989-04-17 1991-01-16 Ricoh Co Ltd 文書処理装置
US5252951A (en) * 1989-04-28 1993-10-12 International Business Machines Corporation Graphical user interface with gesture recognition in a multiapplication environment
US5119465A (en) * 1989-06-19 1992-06-02 Digital Equipment Corporation System for selectively converting plurality of source data structures through corresponding source intermediate structures, and target intermediate structures into selected target structure
US5327161A (en) * 1989-08-09 1994-07-05 Microtouch Systems, Inc. System and method for emulating a mouse input device with a touchpad input device
GB2240016A (en) 1990-01-15 1991-07-17 Philips Electronic Associated Texture memories store data at alternating levels of resolution
GB9005697D0 (en) * 1990-03-14 1990-05-09 Digital Equipment Int Data format conversion
US5369735A (en) * 1990-03-30 1994-11-29 New Microtime Inc. Method for controlling a 3D patch-driven special effects system
US5459823A (en) 1990-07-05 1995-10-17 Canon Kabushiki Kaisha Graphics engine for true colour 2D graphics
JPH0477875A (ja) * 1990-07-16 1992-03-11 Nippon Telegr & Teleph Corp <Ntt> 図形処理方式
JPH04246690A (ja) * 1990-08-29 1992-09-02 Xerox Corp 高品質のイメージを並みの解像度で表示する方法
JPH04262473A (ja) 1990-09-28 1992-09-17 Xerox Corp 多重ステッパーを用いた高速図形画像生成法
US5347295A (en) * 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
US5390320A (en) 1991-01-22 1995-02-14 Grumman Aerospace Corporation Automatically converting structured analysis tool database outputs into an integrated simulation model via transportable standardized metafile
KR100318330B1 (ko) * 1991-04-08 2002-04-22 가나이 쓰도무 감시장치
CA2062911A1 (en) 1991-05-17 1992-11-18 Stephen C. Gates Computer graphics system and method for auto-tresselating graphic objects
JPH0519743A (ja) * 1991-07-11 1993-01-29 Meidensha Corp スクロール表示方式
EP0529121A1 (en) 1991-08-24 1993-03-03 International Business Machines Corporation Graphics display tool
JPH0573544A (ja) * 1991-09-11 1993-03-26 Matsushita Electric Ind Co Ltd 文章編集装置
JP2827612B2 (ja) * 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
US5504891A (en) * 1991-10-17 1996-04-02 Ricoh Company, Ltd. Method and apparatus for format conversion of a hierarchically structured page description language document
JPH05207294A (ja) * 1992-01-30 1993-08-13 N T T Data Tsushin Kk 画像表示制御システム
JP3081051B2 (ja) * 1992-02-28 2000-08-28 キヤノン株式会社 画像処理装置および画像処理方法
JPH05282123A (ja) * 1992-03-31 1993-10-29 Toshiba Corp 表示制御装置および表示制御方法
JPH05324640A (ja) * 1992-05-20 1993-12-07 Canon Inc 文書処理装置
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
JPH0638561A (ja) * 1992-07-10 1994-02-10 Matsushita Electric Ind Co Ltd 静電型マイクロウォブルモータ
JPH06149531A (ja) 1992-11-11 1994-05-27 Ricoh Co Ltd スクロール制御装置
US5339433A (en) * 1992-11-19 1994-08-16 Borland International, Inc. Symbol browsing in an object-oriented development system
US5463725A (en) * 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
EP0609030B1 (en) * 1993-01-26 1999-06-09 Sun Microsystems, Inc. Method and apparatus for browsing information in a computer database
US5530865A (en) 1993-03-03 1996-06-25 Apple Computer, Inc. Method and apparatus for improved application program switching on a computer-controlled display system
GB2278524B (en) * 1993-05-28 1997-12-10 Nihon Unisys Ltd Method and apparatus for rendering visual images employing area calculation and blending of fractional pixel lists for anti-aliasing and transparency
JPH0736437A (ja) * 1993-06-29 1995-02-07 Toshiba Corp 画像データ処理装置
KR950006637A (ko) * 1993-08-03 1995-03-21 이헌조 문서 화상 처리 시스템의 문서 화일링 방법
US5528738A (en) * 1993-10-06 1996-06-18 Silicon Graphics, Inc. Method and apparatus for antialiasing raster scanned, polygonal shaped images
US5670984A (en) * 1993-10-26 1997-09-23 Xerox Corporation Image lens
JP2813728B2 (ja) 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム／パン機能付パーソナル通信機
DE69428675T2 (de) * 1993-12-30 2002-05-08 Xerox Corp Apparat und Verfahren zur Unterstützung einer impliziten Strukturation von Freiform-Listen, Übersichten, Texten, Tabellen und Diagrammen in einem auf Handzeichen basierenden Eingabesystem und Editiersystem
US6097371A (en) * 1996-01-02 2000-08-01 Microsoft Corporation System and method of adjusting display characteristics of a displayable data file using an ergonomic computer input device
US5911066A (en) 1994-02-22 1999-06-08 Microsoft Corporation Data transfer utilizing a single functionally independent data transfer mechanism
JPH07239850A (ja) * 1994-02-28 1995-09-12 Hitachi Ltd 構造化文書作成支援システム
US5982302A (en) * 1994-03-07 1999-11-09 Ure; Michael J. Touch-sensitive keyboard/mouse
JPH07319899A (ja) * 1994-05-23 1995-12-08 Hitachi Ltd ページめくり表示制御装置
US5848373A (en) * 1994-06-24 1998-12-08 Delorme Publishing Company Computer aided map location system
US6321158B1 (en) * 1994-06-24 2001-11-20 Delorme Publishing Company Integrated routing/mapping information
JPH08106358A (ja) * 1994-08-10 1996-04-23 Fujitsu Ltd タブレット機能付き液晶表示装置、アクティブマトリクス型液晶表示装置及びタブレット機能付き液晶表示装置の駆動方法
JPH0876926A (ja) * 1994-09-02 1996-03-22 Brother Ind Ltd 画像表示装置
JP3333642B2 (ja) * 1994-09-09 2002-10-15 アルパイン株式会社 地図描画方法
JPH0883267A (ja) * 1994-09-12 1996-03-26 Casio Comput Co Ltd 文書変換装置
US5966465A (en) 1994-09-21 1999-10-12 Ricoh Corporation Compression/decompression using reversible embedded wavelets
US5945979A (en) 1994-11-17 1999-08-31 International Business Machines Corporation Combined digital and analog cursor control
US5608874A (en) * 1994-12-02 1997-03-04 Autoentry Online, Inc. System and method for automatic data file format translation and transmission having advanced features
US5537630A (en) * 1994-12-05 1996-07-16 International Business Machines Corporation Method and system for specifying method parameters in a visual programming system
GB2336983B (en) * 1995-01-31 2000-01-19 Videologic Ltd Improvements relating to computer 3D rendering systems
US6025853A (en) * 1995-03-24 2000-02-15 3Dlabs Inc. Ltd. Integrated graphics subsystem with message-passing architecture
US5591945A (en) * 1995-04-19 1997-01-07 Elo Touchsystems, Inc. Acoustic touch position sensor using higher order horizontally polarized shear wave propagation
US5708828A (en) * 1995-05-25 1998-01-13 Reliant Data Systems System for converting data from input data environment using first format to output data environment using second format by executing the associations between their fields
JP3634447B2 (ja) 1995-07-14 2005-03-30 キヤノン株式会社 画像処理装置及び方法
US6008820A (en) * 1995-08-04 1999-12-28 Microsoft Corporation Processor for controlling the display of rendered image layers and method for controlling same
US5867166A (en) 1995-08-04 1999-02-02 Microsoft Corporation Method and system for generating images using Gsprites
JP3753263B2 (ja) 1995-08-23 2006-03-08 ヒューレット・パッカード・カンパニー 画像を処理する方法
US6173075B1 (en) * 1995-08-30 2001-01-09 Usanimation, Inc. Drawing pixmap to vector conversion
JP2000500887A (ja) * 1995-09-25 2000-01-25 アドビ システムズ インコーポレイテッド 電子文書への最適アクセス
US6061050A (en) * 1995-10-27 2000-05-09 Hewlett-Packard Company User interface device
US5856822A (en) * 1995-10-27 1999-01-05 02 Micro, Inc. Touch-pad digital computer pointing-device
US5874956A (en) 1995-11-13 1999-02-23 Platinum Technology Apparatus and method for three dimensional manipulation of point of view and object
US5825308A (en) * 1996-11-26 1998-10-20 Immersion Human Interface Corporation Force feedback interface having isotonic and isometric functionality
JPH09160482A (ja) * 1995-12-01 1997-06-20 Aqueous Res:Kk ナビゲーション装置
US5910805A (en) 1996-01-11 1999-06-08 Oclc Online Computer Library Center Method for displaying bitmap derived text at a display having limited pixel-to-pixel spacing resolution
JPH09231004A (ja) * 1996-02-23 1997-09-05 Yazaki Corp 情報処理装置
JPH09245035A (ja) 1996-03-12 1997-09-19 Toshiba Corp ドキュメント管理装置
WO1997034240A1 (en) 1996-03-15 1997-09-18 University Of Massachusetts Compact tree for storage and retrieval of structured hypermedia documents
KR0172581B1 (ko) 1996-04-02 1999-03-30 이진기 단계적 표현 가능형 폰트 그 변환 방법 및 렌더링 방법
US5754248A (en) * 1996-04-15 1998-05-19 Faroudja; Yves C. Universal video disc record and playback employing motion signals for high quality playback of non-film sources
US5754348A (en) 1996-05-14 1998-05-19 Planetweb, Inc. Method for context-preserving magnification of digital image regions
US5748185A (en) 1996-07-03 1998-05-05 Stratos Product Development Group Touchpad with scroll and pan regions
US5810680A (en) 1996-07-17 1998-09-22 Lawrence P. Lobb Computer aided game apparatus
JP3570100B2 (ja) * 1996-07-26 2004-09-29 富士ゼロックス株式会社 ページ記述展開装置及びページ記述展開方法
US5950002A (en) * 1996-08-13 1999-09-07 General Electric Company Learn mode script generation in a medical imaging system
US5909207A (en) * 1996-08-26 1999-06-01 E-Book Systems Pte Ltd Browsing system and method for computer information
AU727387B2 (en) 1996-08-28 2000-12-14 Via, Inc. Touch screen systems and methods
EP0925542B1 (en) 1996-09-09 2002-08-07 Design Intelligence, Inc. Automatic layout and formatting of content for a design in a medium
US5790114A (en) 1996-10-04 1998-08-04 Microtouch Systems, Inc. Electronic whiteboard with multi-functional user interface
US6199015B1 (en) * 1996-10-10 2001-03-06 Ames Maps, L.L.C. Map-based navigation system with overlays
US5943679A (en) * 1996-10-30 1999-08-24 Xerox Corporation Multi-page document viewer having a focus image and recursively nested images of varying resolutions less than the resolution of the focus image
JP3593827B2 (ja) 1996-11-26 2004-11-24 ソニー株式会社 画面のスクロール制御装置及びスクロール制御方法
JPH10171609A (ja) * 1996-12-05 1998-06-26 Internatl Business Mach Corp <Ibm> 文書の処理方法、処理装置、及び処理プログラムを格納する記憶媒体
US6545687B2 (en) * 1997-01-09 2003-04-08 Canon Kabushiki Kaisha Thumbnail manipulation using fast and aspect ratio zooming, compressing and scaling
JPH10222510A (ja) * 1997-02-07 1998-08-21 Hitachi Ltd 文書変換方法
WO1998037506A2 (en) 1997-02-10 1998-08-27 Logitech, Inc. Touch pad with scroll bar, command bar
JP3361951B2 (ja) 1997-02-25 2003-01-07 大日本スクリーン製造株式会社 印刷データ処理装置および方法
US5899988A (en) 1997-02-28 1999-05-04 Oracle Corporation Bitmapped indexing with high granularity locking
PL335521A1 (en) * 1997-03-13 2000-04-25 Ibm Kiosk and server connected to a computer network
FI115689B (fi) * 1997-05-21 2005-06-15 Nokia Corp Menetelmä ja järjestely matkaviestimen näytöllä esitettävän tiedon vierittämiseksi
JP3713696B2 (ja) * 1997-06-02 2005-11-09 ソニー株式会社 デジタルマップの拡大縮小表示方法、デジタルマップの拡大縮小表示装置、及びデジタルマップの拡大縮小表示プログラムを格納した格納媒体
US6285364B1 (en) 1997-06-03 2001-09-04 Cisco Technology, Inc. Method and apparatus for organizing and displaying internet and telephone information
US6091956A (en) * 1997-06-12 2000-07-18 Hollenberg; Dennis D. Situation information system
US6747680B1 (en) 1999-12-13 2004-06-08 Microsoft Corporation Speed-dependent automatic zooming interface
AU8693898A (en) * 1997-08-05 1999-03-01 Lutris Technologies, Inc. Method and apparatus for static and dynamic generation of information on a user interface
US6417848B1 (en) 1997-08-25 2002-07-09 Ati International Srl Pixel clustering for improved graphics throughput
JPH1185582A (ja) 1997-09-11 1999-03-30 Fuji Xerox Co Ltd データ処理装置
JPH1191187A (ja) * 1997-09-24 1999-04-06 Fuji Xerox Co Ltd ドキュメント編集システム
JPH11110391A (ja) * 1997-09-30 1999-04-23 Hitachi Ltd 文書管理方法
US6049390A (en) * 1997-11-05 2000-04-11 Barco Graphics Nv Compressed merging of raster images for high speed digital printing
US6377249B1 (en) * 1997-11-12 2002-04-23 Excel Tech Electronic light pen system
US6339434B1 (en) 1997-11-24 2002-01-15 Pixelworks Image scaling circuit for fixed pixed resolution display
JP3561131B2 (ja) * 1997-11-27 2004-09-02 アルパイン株式会社 地図スクロール方法
US6310610B1 (en) * 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US6128634A (en) * 1998-01-06 2000-10-03 Fuji Xerox Co., Ltd. Method and apparatus for facilitating skimming of text
US6034700A (en) 1998-01-23 2000-03-07 Xerox Corporation Efficient run-based anti-aliasing
EP1717679B1 (en) * 1998-01-26 2016-09-21 Apple Inc. Method for integrating manual input
US6252544B1 (en) * 1998-01-27 2001-06-26 Steven M. Hoffberg Mobile communication device
JPH11242539A (ja) * 1998-02-25 1999-09-07 Sharp Corp 表示装置
JP3895492B2 (ja) 1998-03-13 2007-03-22 株式会社リコー 画像処理装置、画像処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
US6857102B1 (en) 1998-04-07 2005-02-15 Fuji Xerox Co., Ltd. Document re-authoring systems and methods for providing device-independent access to the world wide web
US6211856B1 (en) 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
US6717573B1 (en) * 1998-06-23 2004-04-06 Immersion Corporation Low-cost haptic mouse implementations
JP3706740B2 (ja) * 1998-06-24 2005-10-19 ドリームテクノロジーズ株式会社 画像表示及びデータ読み込みのための装置及び方法
JP2000035961A (ja) * 1998-07-21 2000-02-02 Hitachi Ltd Ｓｇｍｌエディタおよびその使用方法
JP2000056895A (ja) 1998-08-11 2000-02-25 Fujitsu Ltd データ保存方法とデータ保存制御装置およびそのための記録媒体
WO2000011603A2 (en) 1998-08-20 2000-03-02 Apple Computer, Inc. Graphics processor with pipeline state storage and retrieval
US6732120B1 (en) * 1998-09-03 2004-05-04 Geojet Information Solutions Inc. System and method for processing and display of geographical data
US6336124B1 (en) * 1998-10-01 2002-01-01 Bcl Computers, Inc. Conversion data representing a document to other formats for manipulation and display
US6125391A (en) * 1998-10-16 2000-09-26 Commerce One, Inc. Market makers using documents for commerce in trading partner networks
EP1145218B1 (en) * 1998-11-09 2004-05-19 Broadcom Corporation Display system for blending graphics and video data
JP2000163444A (ja) * 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
JP2000222305A (ja) * 1999-02-03 2000-08-11 Nippon Telegr & Teleph Corp <Ntt> インターワークフロー管理方法とそのシステム及びインターワークフロー管理プログラムを記録した記録媒体
JP2000242390A (ja) * 1999-02-18 2000-09-08 Sony Corp 情報の表示方法及び、情報表示装置
JP2000250909A (ja) * 1999-03-02 2000-09-14 Fuji Xerox Co Ltd 構造化文書表示装置及び方法
US6323878B1 (en) 1999-03-03 2001-11-27 Sony Corporation System and method for providing zooming video capture
JP2000259315A (ja) * 1999-03-08 2000-09-22 Sharp Corp 表示データ切替え装置およびその制御方法
US6421063B1 (en) * 1999-04-09 2002-07-16 Hewlett-Packard Company Pixel zoom system and method for a computer graphics system
US6415227B1 (en) * 1999-04-21 2002-07-02 American Gnc Corporation Enhanced global positioning system and map navigation process
US6480201B1 (en) * 1999-08-24 2002-11-12 Microsoft Corporation Alpha regions
US20030050927A1 (en) * 2001-09-07 2003-03-13 Araha, Inc. System and method for location, understanding and assimilation of digital documents through abstract indicia
US6643652B2 (en) * 2000-01-14 2003-11-04 Saba Software, Inc. Method and apparatus for managing data exchange among systems in a network
US6430501B1 (en) * 2000-01-19 2002-08-06 Magellan Dis, Inc. Navigation system with route indicators
US6556188B1 (en) * 2000-02-25 2003-04-29 Ncr Corporation Three-dimensional check image viewer and a method of handling check images in an image-based check processing system
JP3701837B2 (ja) 2000-03-30 2005-10-05 ユニ・チャーム株式会社 不織布の製造方法および装置
US7009626B2 (en) 2000-04-14 2006-03-07 Picsel Technologies Limited Systems and methods for generating visual representations of graphical data and digital document processing
AT504141B1 (de) 2006-11-10 2008-03-15 Siemens Ag Oesterreich Verfahren zur vergabe von zugriffsrechten auf daten
JP5203655B2 (ja) * 2007-09-07 2013-06-05 キヤノン株式会社 コンテンツ表示装置及びその表示方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6038561A (en) * 1996-10-15 2000-03-14 Manning & Napier Information Services Management and analysis of document information text

Also Published As

Publication number Publication date
JP5265837B2 (ja) 2013-08-14
CN1430766A (zh) 2003-07-16
JP5306429B2 (ja) 2013-10-02
AU2001250497A1 (en) 2001-10-30
KR100707651B1 (ko) 2007-04-13
KR20030026927A (ko) 2003-04-03
CN1848081B (zh) 2010-05-26
JP4964386B2 (ja) 2012-06-27
EP2284682B1 (en) 2020-06-03
KR20030039328A (ko) 2003-05-17
EP2284681A2 (en) 2011-02-16
HK1057117A1 (en) 2004-03-12
WO2001079980A1 (en) 2001-10-25
CN1848081A (zh) 2006-10-18
KR100707645B1 (ko) 2007-04-13
JP2003531445A (ja) 2003-10-21
US7009626B2 (en) 2006-03-07
EP2284681A3 (en) 2013-04-03
HK1057278A1 (en) 2004-03-19
JP2012033190A (ja) 2012-02-16
WO2001080178A3 (en) 2002-01-31
US8358290B2 (en) 2013-01-22
EP2284682A3 (en) 2013-04-03
KR100727195B1 (ko) 2007-06-13
CN1426551A (zh) 2003-06-25
EP2012220A3 (en) 2009-09-02
EP1272920A1 (en) 2003-01-08
KR100799019B1 (ko) 2008-01-28
EP2284679A2 (en) 2011-02-16
HK1093795A1 (en) 2007-03-09
KR20030044907A (ko) 2003-06-09
AU5645901A (en) 2001-10-30
KR20070005028A (ko) 2007-01-09
EP2284680A3 (en) 2013-03-06
EP2284679B1 (en) 2019-11-27
JP5787775B2 (ja) 2015-09-30
ES2240451T3 (es) 2005-10-16
EP1272975A2 (en) 2003-01-08
DE60109434T2 (de) 2006-02-02
KR100743797B1 (ko) 2007-07-30
KR20020087974A (ko) 2002-11-23
CN1253831C (zh) 2006-04-26
US20090063960A1 (en) 2009-03-05
EP2284679A3 (en) 2013-04-10
KR100707579B1 (ko) 2007-04-13
ATE291261T1 (de) 2005-04-15
EP2012220A2 (en) 2009-01-07
KR100748802B1 (ko) 2007-08-13
US20100185975A1 (en) 2010-07-22
US20100185948A1 (en) 2010-07-22
EP1272975B1 (en) 2005-03-16
US20020011990A1 (en) 2002-01-31
EP2284682A2 (en) 2011-02-16
KR20070007213A (ko) 2007-01-12
JP2012059275A (ja) 2012-03-22
KR20030005277A (ko) 2003-01-17
US20010032221A1 (en) 2001-10-18
KR20030001415A (ko) 2003-01-06
US20100192062A1 (en) 2010-07-29
DE60109434D1 (de) 2005-04-21
US8593436B2 (en) 2013-11-26
KR20070035105A (ko) 2007-03-29
WO2001080178A2 (en) 2001-10-25
HK1100456A1 (en) 2007-09-21
JP2003531428A (ja) 2003-10-21
EP2284680A2 (en) 2011-02-16
KR100743781B1 (ko) 2007-07-30
CN1251056C (zh) 2006-04-12
JP2012094176A (ja) 2012-05-17
JP2012022695A (ja) 2012-02-02
US7450114B2 (en) 2008-11-11

Similar Documents

Publication Publication Date Title
KR100721634B1 (ko) 디지털 문서를 조작하고 보기 위한 사용자 인터페이스 및방법
US9778836B2 (en) User interface systems and methods for manipulating and viewing digital documents
JP3941292B2 (ja) ページ情報表示方法及び装置並びにページ情報表示用のプログラム又はデータを記憶した記憶媒体
JP4063246B2 (ja) ページ情報表示装置
US20090027421A1 (en) Computer system with a zooming capability and method
US9792268B2 (en) Zoomable web-based wall with natural user interface
US20070038955A1 (en) Pen-based computer system having first and second windows together with second window locator within first window
US20100077304A1 (en) Virtual Magnification with Interactive Panning
AU2010341690B2 (en) Extending view functionality of application
US20070006086A1 (en) Method of browsing application views, electronic device, graphical user interface and computer program product
JP5256755B2 (ja) 情報処理方法及び情報処理装置
US8520030B2 (en) On-screen marker to assist usability while scrolling
PARTNER User interface having movable sheet with click-through tools

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130429

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140429

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150429

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160428

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170427

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20180427

Year of fee payment: 12