JPH07500197A - プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシステム - Google Patents

プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシステム

Info

Publication number
JPH07500197A
JPH07500197A JP5500188A JP50018893A JPH07500197A JP H07500197 A JPH07500197 A JP H07500197A JP 5500188 A JP5500188 A JP 5500188A JP 50018893 A JP50018893 A JP 50018893A JP H07500197 A JPH07500197 A JP H07500197A
Authority
JP
Japan
Prior art keywords
user interface
user
instance
elements
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5500188A
Other languages
English (en)
Inventor
ヴァーテルニイ,ローリー・ジェイ
エリックソン,トーマス・ディ
マウントフォード,エス・ジョイ
トンプソン−ロールリッチ,ジョン・エイ
サロモン,ギッタ・ビイ
ウォン,イン・イン
ヴェノリア,ダニエル・エス
Original Assignee
アプル・コンピュータ・インコーポレーテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=24814641&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JPH07500197(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by アプル・コンピュータ・インコーポレーテッド filed Critical アプル・コンピュータ・インコーポレーテッド
Publication of JPH07500197A publication Critical patent/JPH07500197A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/26Devices for calling a subscriber
    • H04M1/27Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/27467Methods of retrieving data
    • H04M1/27475Methods of retrieving data using interactive graphical means or pictorial representations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/169Annotation, e.g. comment data or footnotes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45504Abstract machines for programme code execution, e.g. Java virtual machine [JVM], interpreters, emulators
    • G06F9/45508Runtime interpretation or emulation, e g. emulator loops, bytecode interpretation
    • G06F9/45512Command shells

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Programmable Controllers (AREA)
  • Communication Control (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるため要約のデータは記録されません。

Description

【発明の詳細な説明】 プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシ ステム発明の技術分野 本発明は、概して、コンビニ−タンステム内で、データの作成、修飾、発生等の ソフトウェア技術に関する。更に、詳述すれば、異なったユーザインターフェイ ス要素を収集するユーザインターフェイスシステムに関するもので、これら要素 の各々は、独特の識別/プログラムされた機能特性を有し、この特性によって、 各要素を利用して、コンピュータシステム内におけるドキエメント中のデー月こ 対して、マークを付けたり、見つけたり、発生させたり、更に処理したりできる 本願特許文書(明細書)の開示の一部分には、コピーライト(著作権)保護を主 張した対象が含まれている。本件の著作権者は、米国特許商標庁の特許ファイル 、即ち記録で見られるように、本件特許文書または特許開示物の複写による再生 に対しては、何ら異議を申立てないが、他のすべての権利を留保するものとすユ ーザインターフェイスとは、デバイス(装置)を制御するために探しているユー ザと、ソフトウェアおよび/または実際にこのデバイスを制御するハードウェア との間のギヤツブを橋渡しするものである。電話に対するユーザインターフェイ スは、−組のキーである。一般に、コンビ二一夕に対するユーザインターフェイ スは、このコンビ二一夕の中央処理ユニット(CPU)で動いているソフトウェ アプログラムであり、このCPUは所定のユーザ形式のコマンド(命令)に応答 する。
余りコンビ二一夕の教育を受けていないユーザ間でコンビ二一夕がボビニラーに なったり、広く利用されてきたので、ユーザインターフ晶イスの質がコンビエー タの開発において更に重要な事項となってきた。その理由は、これら多くのユー ザは、コンビ二一夕を動作させるのに必要なユーザ形式のコマンドの多(に不馴 れであったり、気楽に接することができないからである。コンピュータの動作を 簡単にするためのユーザインターフェイスの内、良く知られたものの一つとして 、米国、カリフォルニア州のアップルコンビ二−タ社によって販売されているマ ・1キント・1シ1コンビュータが存在している。
マyキントッシェコンピュータユーザインターフエイスは、そのユーザインター フェイスの基本として、デスクト・ツブに類似したものを採用している。コンピ ュータとは、マウスやトラックボールを使って通信しているが、ユーザは、コン ビュータ操作の制御のために、スクリーン上の所定のアイコンオブジェクトを選 択したり移かしている。このデスクト・1ブに類似したものとの呼称は以下の事 実によるものである。即ち、 (1)マIキントッシュコンピ二−タのスクリーンは、メニ二−バーヲ有スルデ スクトップの記録簿のようなものに見えることがあり、このメニューバーは記録 簿の頂部に横たわって存在し、この記録簿からユーザは様々な制御特徴を選択で きる。
(2)この記録簿の右下隅に、ゴミ箱アイコンが存在しておら、このアイコンを 用いてコンピュータからアイテム(項目)を移動するのに使用できる。
(3)プログラムによって作成された文書およびこのプログラムを、ページのア イコンイメージによって表し、このページアイコンを、ホルダのアイコンイメー ジ内に配置できると共に、記録簿上に配置して、オフィスにおける収納キャビネ ットのファイルのように、容易にアクセスしたり作成することができる事実によ るものである。これらアイコンをスクリーン上に、多数の異なった方法、例えば 、それらのタイプ、寸法、カラーで配列することができ、ユーザは、各アイコン と組合わされた表題バー中にリストアツブされたワードを調査して、これらファ ルに対して探査できるが、ユーザは特定のアイコンイメージ自身に対しては調査 できない。
また、マフキントノシーユーザインターフェイスの別のポビコラーな部分はウィ ンドウである。ユーザによってフロッピーディスクやハードディスクのアイコン を所定の方法で選択した場合に、ウィンドウ(矩形形状の箱であり、これによっ てユーザは、ドライブ中にストアされた情報を“見る”ことが可能となる)がコ ンビ二一夕のスクリーン上に現れることである。一般に、このウィンドウには、 多数のフォルタ、プログラム/ド牛エメント(文書)アイコン、ならびにドライ ブ中にストアした情報を表す他のイメージが包含されている。所定の方法で、フ ォルタアイコンがユーザによって選択された場合に、このフォルタは、このフォ ルタ内の情報を表す別のウィンドウを“開く”ようになる。前述したように、ド キュメント/プログラムアイコンをこのフォルタアイコン中に配置できるが、こ れの逆の配置はできない。更に、このアイコンをドキ1メント上に直接配置でき ない。
このようなアイコンイメージは、多くのユーザインターフェイスにとって重要な 特徴となる。その理由としては、これらアイコンイメージによって、ユーザにと って容易に理解できる形態で、異なったタイプのデータを表すために利用できる からである。しかし乍ら、これらアイコンは、それ自身と関連する機能を殆ど有 していなかった。その理由としては、一般に、これらアイコンは記憶した情報を 表す場合のみに使用されていたからで、この情報は、ユーザがかなり直接的にア クセス、即ち、アイコンを選択することによってのみアクセスされていたからで ある。しかし、あるアイコン状のイメージはそれと関連する機能を有している。
その例として、例えば、カリフォルニア州、マウンテンピコ−に所在するC11 ris社によって販売されたハイパーカード(Ilyper Card)ソフト ウェアアプリケージ璽ンによってボタン状のイメージがある。このハイパーカー ドアプリケ−ジーンによって、ユーザはカード状のイメージを持つことができる 。このカード状イメージはそのカードに関連した種々のイメージや特徴を有する 。
これらの特徴の1つとしては、ボタンであり、このボタンを、ある限定範囲内に おいて、ユーザによって創作することができると共に、ユーザによって規定され た特定の機能が与えられる。これらのスクリプトは、−HyperTilk”と 呼ばれ特殊な言葉を利用して、ユーザによって書くことができ、この言葉はl− イパーカードプログラムのみと一緒に利用できるものである。一般に、これらボ タンは、普通の話のためのみに使用する。即ち、矢印のイメージを用いて、一つ のカードから他方のカードへ、ユーザが選択している矢印に応答してバットが変 わるようにする。また、あるボタンは、ボタンが現れたカードの情報内容による 動作を実行するために利用される。即ち、多数の音符を表示したカード上のボタ ンによって、選択されたボタンに応じてこれらの音符を表す音を、コンビ二一夕 が発生させている。ボタンは、ハイパーカードアプリケ−7讐ン中の組合せられ たカードを観察しながら実行されるタスク(仕事)を表わすことに限定されてお り、ユーザによって指示されたように、後述のポイントを表わすものではない。
例えば、ユーザは“後でプリントすべき”ボタンを生成することはできなく、“ プリントすべき”ボタンを包含していたカード毎に、コンビ二一夕による後のプ リント作業を行うことができる。
機能的イメージの他のタイプのものとしては、Ashton−Tate社による Full Write Professionalワード処理アプリケ−シロン で使われている“ボストイツト”符号である。ドキュメントを記載中に、メニュ ーバーから“ノート(note)”オブン璽ンを選択することによって、小さな ウィンドウが、少ない量のテキストを入力できる範囲内で生成できる。ユーザー によって、このウィンドウが閉じられると、このウィンドウは、小さな汎用のシ ンボルに縮小され、これがドキュメントの左側マージンに現れるようになる。ペ ージ上の“ノートウィンドウの位置は、目で見ることができないコマンドの位置 に対応すると共にこれに基いてる。ユーザによってノートウィンドウが閉じられ た場合に、このVンボルを初期ドキュメントのテキスト中に入力する。“ノート ”シンボルは、テキスト中の目で見られないコマンドの位置を移動させずに、左 マーノンに沿って異なった位置まで移動させることができない。これら“ノート ”シンボルに、アイコンのような名称や、日付を付与することができ、これによ って、このノートの作成者を識別する。この結果として、これら/−トを異なっ たユーザに渡すことができると共に、識別の所定レベルを維持することができる 。しかし乍ら、各々のノートに付加された名称を簡単に特別に作ることができな い。その理由はこの名称は、Fu11writeアプリケ−7Wンを最初に走ら せた時に、利用した登録情報から取出しているからである。この名称は、“お好 み7メニユーを選択すると共に、新しい名称をタイプすることによって変更でき るが、このことは各ノートを別個に識別するためには所望の方法ではない。
また、このハイパーカードアプリケ−71ンによれば、ユーザーは特別なグラフ ィックイメージを用いて種々のカードおよび他のドキュメントを修飾することが できる。これらグラフィックイメージは、ハイパーカードアプリケーション中の カードから切出したり、別のカードまたは別のドキュメントを別のアプリケ−7 −7へ貼り付けることができる。しかし乍ら、これらイメージは、風変わりなビ ットマツプ式のデザインのみで、これらには、それに組合わされた機能性/相関 性が盛込まれていない。同様の概念が、カリフォルニア州サンラフ1エルのBr oderbound Software社によって、子供用に開発されたにId sflx作図アプリケージ響ンに利用されており、このアプリケーン蓄ンによっ て、異なった色彩の“スタンプ″(ビ1トマブブ式のグラフィックデザイン)の パレットが得られ、これらスタンプをユーザによって選択され、開いたドキュメ ント全体にしるされ(貼られ)、この結果、絵が強調される。スタンプをドキュ メンに適用した場合に、コンビエータからノイズが発生され、これによってこの アプリケーン1ンが更に、楽しくなるようになる。異なったスタンプの各々に対 して、同一のノイズが発生される。
実際上、一般に、これらノイズは、11dflxアプリケージ冒ンで実行される アクシ冒ン毎に、スタンプが選択されるか、またはラインが描かれるかによって 組合わされている。ユーザは、スタンプを利用した時に、このスタンプによって 作られるノイズを所望のものにプログラムできない。
同一タイプの機能と組合わされたアプリケージ首ンイメーノの最後の1つのタイ プのものとしては、マクロプログラムである。このマクロプログラムは、拡張カ ードセル(電子ドキュメント内の境界領域)に付与されることがある。Micr osoft社のExcelアプリケーン讐ンのような、拡張ジ−ドアブリケージ 冒ンによって、ユーザは、情報を人力できる範囲内のセルの列と行とを生成する ことができる。
個々のマクロプログラムを書込んで所定の演算を実行でき、この場合、拡張7− トのマクロプログラミング言語を利用すると共に、セルと組合せて実行てき、こ の結果、一連の演算が実行されると共に、演算結果が、そのセルが選ばれた時に 、このセル中に入力される。これらアイコン、セル、スタンプ、ボタンのみなら ず、他の既知のタイプのグラフィックイメージを用いて、コンピータシステム中 のドキュメント中のデータにマークを付けたり、データを見つけたり、データを 生成したり、更にデータを処理することはできない。
発明の概要 本発明の一好適実施例は、複数のユーザインターフェイス要素を有するユーザイ ンターフェイスシステムを具備することを特徴とするもので、これらユーザイノ ターフェイス要素によって、これと組合わされたコンピュータシステム中に記憶 されたドキュメント内でデータを生成したり、探索したり、組立てたり、処理す ることができる。一般に、各要素は、このデータと独特に関連した外観を有する か、またはこの要素により表現または実行されるように設計された機能に独特的 に関連した外観を有している。これら要素の最も簡単な形態としては、これら要 素を、ドキュメント中のデータにしるしを付けるだけに用いることである。しか し各要素をプログラムすることもでき、これによってコンビ誹−夕は、しるしを 付けられたデータと組合わせた成る機能、例えば、データをプリントしたり、デ ータを何処かへ送ったりするような機能を実行するようになる。ユーザは、要素 を用いて、ドキュメント内の特定のデータを選択できると共1こ、メモリ中にこ の要素と組合わされたデータを有することができる。ユーザはそれ自身の要素を 創作でき、ユーザ0身が望んだ相関性を保有するように要素をプログラムでき、 更に、現存の要素を変更できる。また、これら要素を一緒に合成して、複数の仕 事の組合わせを、簡単に1つの要素を作動させて実行することもできる。
図面の簡単な説明 図1は、本発明の一実施例によるユーザインターフェイス要素と関連して利用さ れるノート梨コンピュータの機能要素を示すブロックダイヤグラム。
図2は、図1のノート型コンピ−タの頂部平面図であり、本発明の一実施例によ るコンビエータの表示スクリーン上にユーザインターフェイス要素の集合を表す 図である。
図3は、図2の示したユーザ要素に追加して、表示スクリーン上に現れた追加の タイプのユーザインターフェイスを示す図である。
図43は、メイル要素の動作を表すと共に、この要素を、オペレーン謬ンの異な ったレベルにおいて、表示スクリーン上に如何にして表すかを表す図である。
図4bは、プリント要素の動作を表すと共に、この要素を、オペレーアwンの異 なったレベルにおいて、表示スクリーン上に、如何にして表すかを表す図である O図53および図5bは、読(処理のために、表示スクリーン上のデータをユー ザインターフェイス要素に付加するための2つの異なった技術を表す図である。
図68は、1個またはそれ以上のユーザインターフェイス要素と一緒に、表示ス クリーン上のデータのページをマーク(印しを付ける)する技術を表す図である 。
図6bは、1個またはそれ以上のユーザインターフェイス要素と一緒に、スクリ ーン上のデータの一部分にマークを付加する技術を表す図である。
図60は、1個またはそれ以上のユーザインターフェイス要素と一緒に、スクリ ーン上のデータのフォルタにラベル付けする技術を表す図である。
図7aは、コンビニ−タンステムにおいてユーザインターフェイスを見つける技 術を表す図である。
図7bは、図78に従って実行した探索動作の結果を表す図である。
図83は、探索動作を実行しないで、関連した要素のリストを作成するために利 用する一連のユーザインターフェイス要素を表す図である。
図8bは、図8aに示したユーザインターフェイス要素の一つによって実行され るリストオペレーンジンを表す図である。
図80は、ユーザインターフェイス要素のリストおよびこれに付加されたデータ を目録に載せる技術を示す図である。
図98は、ブリット要素の動作によって発生した対話ボックスの動作を表す図で ある。
図9bは、メイル要素の動作によって発生した対話ボックスの動作を表す図であ る。
図10aは、write−on it要素の動作および、この要素を動作させる ことによって発生した対話ボックスを表す図である。
図10bは、リンク要素の動作およびこの要素の動作によって発生させた対話ボ ックスを表す図である。
図11は、サウンド要素を動作させて発生させた対話ボックスの動作を表す図で ある。
図!2aは、table−of−contents要素の動作やこれの動作によ って発生された対話ボプクスを表す図である。
図IZbは、table−of−contentsリスト要素によって実行した 時のように、tabla−or−contentsリストオペレージ冒ンの動作 結果を表す図である。
図13a〜13dは、本発明の一実施例のユーザインターフェイス要素の動作を 説明するフローチャートである。
図14!は、ブランク要素の動作および、このブランク要素の動作によって発生 された要素作成対話ボックスを示す図である。
図14bは、図14aで示したような要素メーカーの変形例として、カッター要 素の動作を示す図である。
図14cは、図14gの要素作成対話ボックスの変形形態を表す図である。
図15gは、ミーティング要素の動作を表す図である。
図tsbは、図15aのミーティング要素の動作を更に表すと共に、単一のユー ザインターフェイス要素によって通常実行可能な機能より、更に複雑な機能を実 行するために、一連のユーザインターフェイス要素を合成する技術を表す図であ る。
図IScは、図151のミーティング要素に関連して合成された一連の要素を表 す図である。
図15dは、関係者要素の動作を表す図である。
好適実施例の詳細な説明 図1に示したようなノート型コンビュータ2のように、物理的に小型のコンピュ ータは、それの汎用動作のために、ユーザインターフェイスに極めて依存したも のとなる。コンビュータ2において、一般に、人力4は、タッチ式または、スタ イラス(多針)感応パネルであり、この人力4を介して、ユーザは情報を入力す ることができる。この場合、このコンビニ−タ2を種々の周辺機器を介するか、 または大型コンピュータに接続して追加情報を受信することもできる。プロセッ サは、極めて小型/簡易型のものから、極めて大型で複雑なものまでを含まれて いる。一般に、メモリ8は、動作させるアプリケーン習ンのタイプに適したもの であると共に、記憶すべき情報量に応じて、可能な限り小型なものであり、これ は、スペースや電力を節約するためである。通常、出力10は人カバネル4に接 続されたディスプレイスクリーンである。
ユーザインターフェイスは、あらゆるコンピュータシステムの重要な部分を占め ているが、キーボードや手書き認識を介してのテキストの入力を禁しているなど の入力デバイスに対する制限を有している、図1のコンビニ−タ2のような小型 コンビ二一夕においては、このユーザインターフェイスは特別な意味を持ってい る。それにもかかわらず、そのような小型コンビエータ用に設計されたインター フェイスおよびそれの要素を、入力デバイスに対する制限が無い、標準のデスク トップからメインフレームコンビ二一夕までの範囲の大型演算環境の下でも、容 易に利用できるようにする。従って、本発明の一実施例のユーザインターフ1イ ス要素は、例え、これらユーザインター7品イス要素が、本来、小型システムの 応用のために設計されたにも拘らず、小型および大型のコンビエータシステムの 両方のタイプのものに使うことを意図している。
本発明の一好適実施例においては、これらユーザインターフェース要素は、一般 に、図2では、コンビュータ2のディスプレイスクリーン14上に要素12とし て表されており、これら要素は奇抜なスタンプ状の外観を有している。この他に も多(の外観を利用できるが(例えば、これらのいくつかを図3に表示されてい る)、このスタンプ状の外観が好ましいものである。その理由としては、この外 観は、ユーザによってこれらインターフェイス要素の動作の一部分と容易に組合 わせることができるからである。例えば、ユーザは恐ら(、まえもって、ドキュ メントをマークするためのインクスタンプや、または手紙を郵送するための郵便 スタンプを利用したことがあるために、ユーザは、これら要素12をコンビュー タ2のディスプレイスクリーン14上に表示したドキュメントに適用すべきこと であることを理解するのに、殆ど問題が無い。前述した従来技術に関連して説明 したディスクトップに類似したもののように、本発明の一実施例のユーザインタ ーフェイス要素によって、スタンプに類似したものが創作され、これによって個 々のユーザインターフェイス要素のユーザに対する直観性が強調される。成る機 能を実行するためには、要素12を表示されたドキュメントに適用すべきである ことが、一旦ユーザに理解されれば、このユーザは、この機能を理解および利用 するために容易に移動することができる。
これら要素の集合が図2に図示されている。本例によれば、各要素は奇抜な外観 およびプログラムされた機能特性を有しており、この特性によって、この要素の 外観に独特な方法で、コンビュータ2内にストアしたドキュメント中のデータに マークを付したり、データを見つけたり、組立てたり、処理したりするためにこ の要素を利用できる。しかし乍ら、要素の独特(ユニーク)な外観と、それ自身 のプログラムされた機能とを組合わせる必要はなく、また、これら要素に何なる 外観を全(持たせる必要もない。即ち、これらの視覚的表現の代わりに、音声の 表示を行い、ディスプレイスクリーン14を見ることができないユーザとタイプ の異なった要素のフミコニケーシ冒ンを確立することも可能である。
図2において、ディスプレイスクリーン14の区分けした部分を、要素ウェル1 6として設計しており、このウェル16内で、多数の要素が表示されると共に、 ユーザによって利用できる。ユーザが、ディスプレイスクリーン14の残りの部 分に表示されたあらゆるタイプのドキュメントまたはイメージに関して、作成、 観察または編集を行う時に役立つ。この要素ウェル16を、ユーザによって拡大 して追加の要素を表示することもできる。これには、ウェル規制ライン18を選 択すると共に、このライン18をディスプレイスクリーン14の頂部に向かって 引張り上げることにより拡大でき、この結果、図示の要素12の第1ラインのレ ベルの下側に隠れていた追加の要素が現れるようになる。同様に、これら要素1 2の全部を、ウェル規制ライン18を選んでディスプレイスクリーン14の底部 まで下降させることにより隠すことができる。
本明細書に記載されているシステムは、タッチ感応式ディスプレイを有するノー ト型コンピュータのシステムであるので、対象をディスプレイ上で選択したり移 動させる動作は、ユーザの指で実行するものとしている。しかし乍ら、同じ動作 をマウスやトラックボールのようなスタイラス(ポインティング)デバイスで実 行することもできる。更に、本明細書において、ユーザが、ディスプレイ上でウ ェル規制ライン18のような対象を選択する場合には何時でも、この選択動作は 、多(の方法によって実行可能であるものとする。即ち、この対象を1回、2回 、または3回だけタッチ(接触)するか、対象を1回だけタッチし、次にいくつ かのジェスチュアコマンドを実行するか、または対象を1回だけタッチし、へ、 ダバーからメニューを引出すと共にコマンドを選択することにより選択できる。
要素ウェル16を、例えばApple Computer社より製造されている マツキントフシココンピュータシステムのような現在のコンピュータシステムに 実現するためには、ユーザはディスプレイウィンドウを作成するだけでよく、こ の技術については従来から良(知られている。即ち、このウィンドウには、カス タムIFDEF deferoe、 (ソフトウェア)を利用してその外観を変 形したものが設けられている。このカスタムウィンドウの機能を変形するには2 つの方法が存在している。即ち(1)。
タイトル(表m>バーが異なった形態で見えると共に働くので、ウェル規制ライ ン18のみが観察できる。(2)ウィンドウのサイズを変更する場合には、通常 、マメキントッシ品コンビュータで行われているように、ウィンドウのアウトラ インより、むしろ、このウィンドウのサイズを直接変化させる。このように従来 から周知の事項である、ウィンドウの生成および変形ならびに他のコンビーりに より発生した対象物の外観についての更に詳しい情報は、本明細書ではこれ以上 記載しないので、以下の文献を参照されたい。°^pple Computer 、 Inc、、 InsideMaeintosh−1Vols 1. II、  m、 IV(1985年)、^ddlson−Wesley出版社発行。
前述したように、各要素の外観は、その要素の特定のユニークな機能についての 意味を、ユーザに対して伝えるように設計しである。例えば、“実行要素”2゜ をウェル16から取出し、ディスプレイスクリーン14上に、ユーザは、自分自 身が実行することを思い出させる、例えば、手書き文章“火曜日までにアプリケ ージ1ンを完了”を表示する。または、ユーザはコンビュータ1oに対して、後 で実行すること、即ち、手書きの指示“今日から私宛のメールを再検討する”を 表示する。他の要素、例えば、“記憶要素” 22、“ミーティング要素″24 、“カレンダ要素″26、“メール要素″28、“プリント要素”30.”電話 要素”!!、および“Table of Contents(内容テーブル)要 素″34は、それぞれ特別な機能を有しており、ディスプレイ!4上にそれ自身 の特定の外観が割り当てられている。
これら要素22〜34の特殊な機能について、以下詳述するが、これら要素自身 は、多数の一般的な機能を保有しており、これら機能は、すべての要素に共通な ものである。即ち、(1)これら要素は視覚表現を有しており、これらの表現に よって絵図的なマーカーまたはラベルとして作用する。(2)これらの要素を特 定のデータに対して適用または組合わせることができる。(3)これらの要素を サーチ用のターゲットとして使用できる。更に、要素に対して、選択的に適用可 能な多数の機能が存在する、例えば、(1)これら要素は状態または動作を有す ると共にそれらを反映することができる。(2)これら要素によって将来、コン ピュータによって自動的に実行すべき動作を特定できる。(3)これら要素をユ ーザが選択権を有するような動作を部分的に特定することができ、これは、この 要素をドキュメントに適用するかまたは後に、動作仕様を完了する場合に完了す る。
(4)これら要素を移動させたり、他の対象と一緒に組立てたり、戻したりする ことができると共に、ユーザの希望に応じて、これらの外観および機能を何時で も変更できる。
図3で示したように、種々のタイプの要素および実際上、同一タイプの要素の外 観が際限なく存在している。例えば、′^dminlstritlon(管理) 要素″36のように、外観および機能の両項目で極めて簡単なものが存在し、こ の要素を利用して、コンピュータネットワーク上の管理者の限定したグループの みに配布すべき項目をマーク付けしている。同様に、図示の“メール要素″38 の外観を“メール要素”28の外観の場所に利用できると共に、図示の“実行要 素“40の外観を“実行要素″20の外観の位置に使用できる。これらの代わり に、例えば、メール要素28とメール要素38との両方のように異なった外観の 要素を用いて、類似はしているが、異なったタイプの機能を指定することもでき る。例えば、メール要素28をプログラムすることによって、メール(郵便)を 一つの人的グループに送ることができる一方、メール要素38をプログラムして メールを、別の人的グループに送ることもできる。
上述したユーザインターフェイス要素の全てを、要素として一般的に記載したが 、実際の要素は2つの異なった部分より構成されている。即ち、一方の部分は要 素ベース(基本)であり、他方の部分は要素インスタンスである。この要素ベー スはウェル1も中に存在している。ユーザによって、この要素ベース(基本)が 選択されると、要素インスタンスがこの要素ベースのビットマツプ式の複製物と して生成される。次に、このベースでない要素インスタンスをウェル16から取 出し、ディスプレイスクリーンのべ一2上に落下させる。この代わりに、ユーザ によって選択した後で、要素ベースをウェル16から移動することができると共 に、この要素ベースをドキュメントに適用する場合に、この要素インスタンスを 生成することもできる。このインスタンスが一旦、生成されると、ベースは、ウ ェル16内の以前の位置まで戻るようになる。これら要素ベース/インスタンス を利用するために、他に多(の技術が容易に開発できる。
要素ベースは、ユーザがコンピュータ2を購入した時にこのコンビコータにイン ストールされているソフトウェアと共に、予め供給されており、また、コンピュ ータ2上で走る、続いて購入したソフトウェアで供給され、要素12を創作して 特定化した売主によって供給され、更に、後述するように、ユーザによって創作 されるものでもある。これら要素ベースのいくつかは、そっくりそのままとする ことができ、これは、これらベースを複製すると共に、僅かに変形することによ って、新しい要素ベースを生成する。例えば、プロジェクト要素42は、本来、 単に”l’ro3ect□”として供給または創作されるが、次に、これをユー ザによって例えばProject T曹in Peaks−のような特別な要素 ベースを創作したい場合には、何時でもクローン化する。同様に、現存している 要素ベースをテンプレート(型取り工具)として利用でき、このテンプレートに よって、オリジナルとは外Ji動作も異なった他の要素ベースを創作することが できる。
多数の異なまたソースで発生させた要素ベースによって、多数のユニークで好適 であると共に、機能的な要素ベースおよび要素インスタンスを作成できる。例え ば、プロジェクト要素42は、斑点模様で矩形の境界を有し、皮製のインスタン スの外観を与えるように設計されている。また、他の興味ある要素としてはう1 ン二要素44とライトバルブ(電球)要素46がある。このう1シニ要素44を 単−的に用いて、ラッンユドキコメント(急用文書)としてコンビュータ作成に よるドキュメントにマーク付けするか、または、例えば実行要素40のような他 の要素と組合わせて、何かを通常に実行するかまたは迅速に実行するかを表す。
ライトバルブ要素46を同様に用いて、文書の外見を飾ることができ、例えば、 良いアイデアを表したい、何かを思い出したりするために利用する。本発明の明 細書において、“ドキュメント”には、その内部に表示されたデータを作成した り編集したりするための電子的に発生した、あらゆるイメージが含まれ、例えば 、テキストのページ、スプレッドシートページ、電子メールメツセージスクリー ン、ビデオイメージまたは写真、および図6cに表されたタイプのフォルタが含 まれるが、代表的なアイコンイメージがストアされた上述した従来例で説明した プログラム、フォルタ、ドキュメントアイコンのようなイメージを含まないもの とする。
また、図3には、コンフィデンシャル(秘密)要素48が含まれており、これを 用いて、ドキュメント番ごアクセスするのを制限している。例えば、ドキュメン トをこのコンフィデンシャル要素48でマークすると、パスワードを入力したユ ーザのみがこのドキュメントを読むことができる。図3に示した他の要素の使用 例としては、(ILsent(郵送済み)要素50でマークされたドキュメント によって、このドキュメントを、誰かに郵送した時の日付が自動的に付けられる 。(2)受信要素52でマークされたドキュメントによって、このドキュメント が誰かによって受信された時の日付が自動的に付けられる。(3)内部レポート 要素s4がマークされたドキュメントを会社または事務所内だけ↓こ配布するよ うに限定する。
(4)ドラフト要素56でマークされたドキュメントに対しては、各ページを横 切ってドラフトの文字のみがプリントされる。(5)リンク要素58でマークさ れたドキュメントを、イ也のドキュメントに自動的にリンクさせるか、または、 コンピュータ2のメモリ中の何れかに存在する他の要素にリンクさせる。
前に簡単に説明したように、要素インスタンスは、この要素ベースとは全く相違 しており、このベースからはそれのビットマツプ形態の外観が取出される。要素 インスタンスの各々には、1つまたはそれ以上の要素属性が設定されており、こ の属性によって、要素インスタンスを7ステムに対して識別するように援助する と共に、これら属性は、システム、要素ベースまたはユーザによって規定される 。システムによって規定された属性の例としては、この要素インスタンスの名前 、タイプ、この要素インスタンスを作成した日時がある。要素ベースによって規 定された属性の例としては、図3に示した要素50のメツセージ°5ent□” 内の空白および、この機能を実行するプログラムがある。ユーザによって規定さ れた属性の例には、“5ent ”や、電話番号、名前、または他の表記法を満 たすために用いられる名称−prlorlLy”が含まれている。これらの要素 属性を利用することによって、コンビコータ2は、データベースのメモリ中に要 素インスタンスをストアすることができ、次にこれらインスタンスによって、所 望の要素を見つけたり、検索するために質問することができる。要素インスタン スのあらゆるタイプのインスタンスを、コンピュータ2にストアされた他のデー タと組合わせることができる。以下に説明するように、要素インスタンスを、ド キュメントの全体ページまたは、スクリーン14に表示されたページの特定部分 と組合わせられる。
例えば、要素インスタンスを、メールメツセージ中の一枚のテキストまたは、ペ ージ上の走り書きした電話番号と組合わせることができる。
一般に、ユーザによって規定された要素の属性を、対話ボックスまたは属性シー トを利用して確立する。このことについては、図9a〜9bを参照し乍ら更に説 明する。各々のタイプの要素には、それ自身用の対話ボックスが設けられており 、所望に応じて、この要素と一緒に利用てきるように特に設計する。例えば、電 話要素32は、電話番号や人の名前等の多数のユーザによって規定可能な属性が 設けられている。これら要素が使用されていたコンピュータシステムに、キーボ ードや手書き認識能力が設定されていない場合には、この電話要素32用の対話 ボックスを以下のように設計して、数字、名前用のキーバッドおよびデータ入力 手段を包含させる。コンピュータ2で利用する要素のタイプに適切であるように 、他の属性を開発することもできる。これら種々のタイプの要素の追加の特徴や 要素属性については後述する。
即ち、要素インスタンスの追加の特徴は、コンピュータ2によって内部的に変形 することができ、これは予めストアされた要素属性情報に妨害を与えることなく 実行でき、要素は異なったレベルのオペレージ璽ンを通過するようになる。図4 aは、メール要素28がどのように動作するか、および、このメール要素28用 の要素インスタンスの外観が、それの種々のレベルのオペレージ璽ン中に、どの ように変化するかを表している。一番目がウェル16から引出され、ドキュメン ト上にマークされると、このメール要素28は図2と同様に見える。ユーザによ ってこのメールインスタンスについての属性情報が入力された後に、この要素イ ンスタンスの外観が変形される。更に、このメールインスタンスは、オペレージ 璽ンの状況に従って変化することが可能で、このオペレーン■ンにより変化が実 行される。
メール要素インスタンス60が変形され、これによってユーザは、自分がすでに ドキュメントに対して命令したことを知ることができ、このドキュメントに対し てインスタンス60カ付加されて誰かに送るようになっている。メール要素イン スタンス62により同一の機能が実行されるだけでなく、このメールを維れ宛に 郵送したかの属性情報も含まれている。このドキュメントを送った後に、この要 素インスタンスを再び、変形することによって、このドキュメントを、メール要 素インスタンス64、インスタンス66またはインスタンス68を利用して命令 したように送ったことを表す。要素インスタンスもまた変形することによって、 この要素の他の機能およびオペレージ冒ンを表すことができる。例えば、メール 要素28用の対話ボックスに、プリント要素属性が含まれており、更に、ユーザ がプリントしたコピーの番号を特定できる場合に、メール要素インスタンス70 をディスプレイスクリーン14上に表示する。同様に、メール要素28を以下の ようにプリント要素30と一緒に組合わせることも可能で、これによってプリン ト要素30の属性をメール要素28に対して与えられ、この結果としてメール要 素インスタンス70を創作することが可能となる。
同様に、図4bは、プリント要素30の動作および、種々のレベルのオペレージ 1ン実行中に、このプリント要素30用の要素インスタンスの外観がどのように 変化するかを表している。例えば、このプリントインスタンスの属性情報をユー ザが人力した後で、この要素インスタンスの外観が変形されてこの情報を反映す るようになる。このユーザによって、ドキュメント1枚に対して3枚のコピーを 必要と指示した場合に、プリント要素インスタンス72が生成されるようになる 。この変形は、プリント要素インスタンス74で示したように、プリントすべき コピーの枚数についての要素インスタンスの情報を含まずに、単にプリントすべ きドキュメントを反映したものである。このドキュメントをプリントした後で、 プリント要素30をプリント要素インスタンス76のように変形することによっ て、このドキュメントおよび恐らく数枚のコピーがプリントされていることを表 す。
前述したように、コンピュータ2にストアしたデータを要素インスタンスと一緒 に組合わせる能力は、多(の要素の重要な要素属性である。図5mおよび5bは 、ディスプレイスクリーン上のデータを要素に付加するための2つの異なうた技 術を表す。第1の技術は図5aに示されている。−11otlce″要素インス タンスのような要素インスタンスをウェル16から移動させると共に、ドキュメ ント■上にマークする。このインスタンスは、多数の手書きのノートから構成さ れ、次に、この要素インスタンスと一緒に組合わせるべきデータをインスタンス 78から発行されたフレーム(枠)ボックス82によって包囲するようにして、 このドキュメント■を探索する。このフレームボックス82内にデータを包囲し て、スクリーン14上のデータを選択する動作は、多くの公的に利用できる図面 および絵画ソフトウェアプログラムの選択ツールによって実行されるのと本質的 に同じ動作である。図5易においては、ユーザによって、”Ca11 Joy  immediately(直ぐにジ■イを呼べ)°のノート(注意書き)84を °NoLIea−要素インスタンス78に付与している。これは、言語−1ss ediately−の後にインスタンス78を配置し、次に、インスタンスフ8 をノート84を横切って言語”cill”の前まで引(、もし、このユーザがノ ート■の上に、別のノートを包囲させたいならば、要素インスタンス78をドキ ュメント@0の頂部まで単に引き続ければ良く、これによって追加のデータが含 まれるようになる。また、ユーザが所望のデータを全部包含した場合には、この ユーザはインスタンス84を釈放し、これによって、フレームボックス82が消 えると共に、インスタンスフ8はドキュメント80上のそれ自身の最終位置に留 まるようになる。インスタンスフ8が一旦釈放されると、フレームボックス82 は消失するが、包含されたデータを規定する要素属性をコンビュータ2のデータ ベースに入力するので、付加されたデータを見つけることができると共に表示さ れる。これは、最後に適切な質問を用いて収集された時に実行される。
図5bは、ドキュメント中でデータを要素インスタンスと関連づける第2の技術 を示す。この技術において、ライトバルブ要素インスタンス86(これの外観は 、その関連モードであることを表示するために反転している)を、ドキュメント I上にマークすると、−組のポインタ90が、インスタンス86の各側面上、お よび各コーナ上に現れ、これは指示インスタンス66がデータを包囲するために 移動させられることを示す。このインスタンス86がドキュメントIの左下購に マークされ、次にこのドキュメント■の右側へ上昇し乍ら移動して、このドキュ メントI上で現在存在している処まで上昇すると、フレームボックス94内にノ ート(注書)92を包囲するようになる。インスタンス86をその関連モードか ら釈放することによって、ポインタ90とフレームボックス94とがドキュメン ト88から消失されると共に、このインスタンス86がその標準外観に戻るよう になる。即ち、白のパックグランドに黒の要素とライトバルブ(電球)のアウト ラインを表す。
これら要素インスタンスを、図6aに示すように、コンビーり中のデータの全体 ページと、図6bに示すように、データのページ上のデータの識別可能部分と、 図6cに示すように、データの複数ページや他のタイプの情報を含んだ“フォル タ”と−緒に組合わせることもできる。図6aは、ディスプレイスクリーン14 上のデータの異なったページをこれら要素でマークする技術を開示しており、こ れによって各ページを、このページにマークを付けた要素と関連させている。マ ーク要素インスタンス96をページ98上の何れの所望の位置に配置できるが、 ページ98の上に配置することが好適である。この結果として、ページ98の後 のページ上のマーク要素インスタンス96の他の観察可能な部分によって証明さ れているように、このページ98を後で他のページで覆ってしまった場合に、こ れらマーク要素インスタンスは、いくらか観察できるようになる。図6mに示し たように、マーク要素インスタンス96のすべては全く同一の要素属性(すべて 1G”と番号付けされている)を有していたが、ユーザの希望によって他の異な った割当て番号にすることもでき、これによってこれら要素インスタンスを再に 識別可能となる。
図6bでは、コンビュータ2を使用してソフトウェアプログラムを走らせ、これ によってユーザは多数の写真100を観察することができ、これら写真1ooは ディスプレイスクリーン14上に表示されたフォト1〜フオト12とラベル付け られている。
このンナリオでは、ユーザは、各写真についての事項を思い出すため、ならびに ユーザロ身によって写真100を丁合いするために、要素ウェル16からの異な った要エアプログラムによって、これらの写真100と各写真によって占有され たディスプレイスクリーンのスペースとの間を区別できるので、ユーザは、単に 、この写真にマークを付けるインスタンスを写真にマークするだけでよい。それ によってマークを付けるために用いた要素を写真の情報に関連させることができ る。例えば、フォト3.4.6および9とラベル付けされた写真100は、ユー ザが思い出したい人々の写真が含まれており、そこで、このユーザは、参加者要 素インスタンス1゜2をこれらの写真に付ける。フォト7は、ユーザの日本への 最近の旅行に関する情報が含まれているので、これを日の出要素インスタンス1 04てマークする。また、フォト4には、ユーザの日本への訪問中の都市に関す る情報が含まれているので都市要素tOaでマークする。
図6cは、要素インスタンスを用いて、ディスプレイスクリーン上のデータのフ ォルタにマークを付すことを表す。コンビュータ2は、ディスプレイスクリーン 14内に表示されたフォルタ108のイメージを有している。このフォルタlO 8によって、これの前方に映し出されたノート110のようなデータを表示でき ると共に、このフォルタ108に関連づけられたマークの他の情報に対して記憶 (ストレージ)として作用することができる。この図6Cにおいて、フォルタ1 08は2つの要素インスタンスでマークされる。即ち、その一つはTwin W ash要素インスタンス112であり、これはユーザが作業しているプロジェク トに関連するもので、他は実行要素インスタンス40であり、これは、このフォ ルタ10a内の所定のドキュメントがこの実行要素インスタンス40によってマ ークされていることを表す。このような要素インスタンス付きのマーク用のフォ ルタの特徴は、有益なものであり、その理由としては、例えば7w1n Pea ks−インスタンス112のような要素インスタンスてフォルタに簡単にマーク 付けすることによって、”Tvln Pe5ks−インスタンス112を含むす べてのドキュメントをこのフォル110g内に集められることである。
前述したように、要素の種々の属性を用いて、コンピュータ2にストアされたデ ータを見つけ出せる。コンピュータ2の要素データベースに質問する1つの技術 は、図7Mに示したものであり、ここでは、記憶したインスタンスをフィルタ処 理して、ユーザの質問にマツチングするデータを見つけるフォルタツールが図示 されている。ディスプレイスクリーン14のウェル16中のFlndlil素1 14を選択して、このFlnd要素114のインスタンス118をディスプレイ スクリーン中に移動することによって、ユーザはスクリーン上にファインダツー ルボックス118を開くようにする。特定のデータを見つけるために、ユーザは ウェル16からその要素のインスタンス、例えば電話要素インスタンス120を 選択して、このインスタンスをファインダツールボックス118の質問ボックス 122の1つにいれるだけでよい。コンピュータ2のプロセッサ6を作用させて 、電話インスタンス120を含んだドキュメントまたはページのすべてを見つけ 出すまで、メモリ8のデータベースをフィルタ処理する。これは、メモリ8にス トアされたデータの代わりとして作用する。
この電話インスタンスをどのように利用したかに依存して、ユーザには、質問さ れた要素を含んだドキュメントまたはページの収集したもの、およびこの要素゛  に予め関連づけられたドキュメントからのデータが開示される。例えば、図7 bは、図71に従って実行した探索オペレーンロンの結果が表されおり、ここで は、質問された電話要素インスタンス120を含んでいる多数のページが見つか っている。更に、ユーザは、例えばページ126のようないくつかのページの上 に所定のノート124を関連づけているので、ノート124は、電話インスタン ス120に関連づけられていることを表すようにコンピュータ2によって強調さ れる。図7bにおいて、この電話イノスタンス120と関連づけられていないマ テリアルが灰色付けされる。例えば、ディスプレイスクリーン14からピクセル のラインを一つおきに除去することによって、灰色になり、この結果、この関連 づけられたマテリアルがユーザに目立って見えるようになる。ユーザは、このイ ンスタンスで特定のデータと組合わせていない場合には、強調されていない部分 を用いずに全体のページを表示している。
例えば、用語サーチセクンヲンのような追加の特徴が、このファインダツールボ ックス118に追加された場合には、更に高性能なフィルタ質問をコンピュータ 2によって実行することができる。しかし、この特徴の性能は、ユーザが認識し たテキストを入力するための能力を有しているかに大きく依存するものである。
コンピュータ2が、例えばキーボードを介して入力したテキスト文字を保有でき る場合には、このコンピュータによって、各質問した要素に関連づけられたデー タ内において、テキスト文字の組をマツチングさせるためのサーチを容易に実行 できる。このユーザによって、テキストをこのような状態で入力できない場合に は、ユーザはテキストをスクリーン14からコピーして、そのコピーしたテキス トを用語サーチセクションに貼り付けることができる。勿論、テキストが用語サ ーチセク/Wンにストアしたテキストに完全にマツチングさせるためのサーチが 行われた場合だけである。更に、ユーザによって追加の要素インスタンスを残り の質問ボックス122に配置することによって、図1mで示したファインダツー ルボックス118を利用して、階層的なサーチを実行できる。この結果として、 このコンピュータ2は、最初に、すべてのデータをフィルタ処理して、電話要素 インスタンス120と組合わされたデータを配置すると共に、次に、すべての質 問ボックス122が処理されてしまうまでこのデータをフィルタ処理して、次の 要素インスタンス等と関連づけられたデータを見つけるようになる。
図8aには、要素インスタンスを集める他の方法が図示されており、これには一 連のリスト要素12gが表され、これらリスト要素12を利用して、探索動作を 実行しないで、共通の属性と一緒にこれら要素のリストを生成することができる 。これらリスト要素は、ユーザに対して、データペース中にストアされた特定の タイプの要素のすべてを簡単に観察する手段を提供すると共に、このユーザに、 以下に説明するように、リストアツブされた要素の1つでマークされたページに 直接アクセスする機会が与えられる。図8bに示したように、このユーザがコン ピュータ2のディスプレイスクリーンのウェル16からLi5t Phone  (電話帳)要素13Gを選択した場合に、例えばインスタンス138のような電 話要素インスタンスおよび、ノート140のようなこのインスタンスに関連づけ られたノートのリストが生成される。
次に、ユーザによって、例えばノート142のようなリストアツブされたノート の1つを選択した場合、このノートは手書きのノー1セージ°tlany°s  business(453>908−9000°から構成されており、コンピュ ータ2によって、選択されたノート142とインスタンス+44とが現れたペー ジ134を表示するように自動的に処理するようになる。
図8bのノートのリスト136は、例えばアルファベット順に特定の順序でリス トアツブされていず、これは、コンピー−タロ身がテキストを受信できる能力に よって生じるものと思われ、このため、リスト136からこれらノートの目録を 作成する手段を設ける必要がある。図8cには、要素のリストおよびそれに付加 されたデータの目録を作成するような技術の1つが図示されている。これらイン スタンスおよびそれに組合わされたノートのリスト146を作成した後で、ユー ザはウェル16から電話帳要素148を選択すると共に、それのインスタンスを リスト146上で引(ようにする。次に、コンピュータ2はこのりスト146の 外観の変化について認識するので、電話帳ヘッダー150がリスト146の一番 上に現れると共に、アルファベットカタログ152がこのリスト146の右側に 現れるようになりた。このようにして形成した電話帳を利用して、このリストを アルファベット順に並べ変えるためには、ユーザは、単に、例えばノート154 じNe11 (80g>987−8976”)およびインスタンス15ものよう なノートとこれに組合わされたインスタンスを選択すると共に引くようにする。
更に、このノートを、アルファベットカタログ152の適当な文字、本例では文 字゛n゛に当てるようにする。このコンピュータ2はノート154とインスタン ス156を取るように処理し、これらを新しいリストに設置する。この場合、こ の文字−n−に予め配置された他のノートおよびインスタンスと一緒に配置する 。これらノートとインスタンスを適当な文字に配置した後で、ユーザは、この文 字をアルファベットカタログ152から選択することによって特定の文字の下で ストアされたノートをアクセスできる。
上記で特定したように、要素は、2つの基本的に異なった部分と、要素ベースと 、要素インスタンスとを有するように処理され、これの一方、即ち、インスタン スが他方、即ちベースから取出される。しかし、これら要素を、2つの異なった 機能的特性、アクティブ要素とパブ/イブ要素とを有するように特定化すること もできる。一般に、イア/イブ要素は、データをマークすると共に、関連付け、  し、更に、このマークされたまたは関連付けられたデータを後に配置するため だけに使用する。この場合、これらバッジイブ要素のいくつかを用いて極めて特 殊なユーザとの会話を必要としない機能を実行することが可能である。アクティ ブ要素は、これらと関連づけられたスクリプトまたはアクシ蓄ン(プログラムさ れた機能)を有し、これらは、′インスタンスを生成した時に対話ボックスを開 く“のように簡単なものであるか、または、“コンピュータを再度接続した場合 にこれらアクシ1ノを実行する”のように複雑なものである。
一般に、要素インスタンスが生成されると直ぐに、アクティブ要素によってそれ らの対話ボックスや属性ノートが開かれる。アクティブ要素の一例としては、プ リント要素30がある。ユーザによって、このプリント要素30のインスタンス でブリットすべきページをマークすると、属性シート、本例の場合、図91ノブ リント対話ボックス158がこのページ上に現れるようになる。次に、このユー ザは、次のような動作を行うことによってこの対話ボックス158と対話するよ うにする。即ち、マークされたページをプリントするプリンタを特定化したり、 プリントすべきコピ一枚数を設定したり、これら属性を承認したり、対話ボック ス15gをキャンセルするかどうかを決定することによって対話する。
メール要素28は、アクティブ要素でもある。メール要素28のインスタンスを ページ上にマークすると、図9bのメール対話ボックス160がこのページ上に 現れるようになる。ユーザはこの対話ボックスと対話して、このページを誰に送 るか、および誰にそれのカーボンコピー(−CC”)を渡すかを決定する。ユー ザがアドレスの名前を書き込むことができないと共に、何が書かれているか、コ ンビ二一夕が理解できない場合には、多数の予めコード化された名前およびアド レス情報が、 r。
1odexボタン!62を選択することによってユーザに対して利用できる。こ のrolodeXボタン162の選択によって、可能な名前のリストが現れるよ うになり、このリストからユーザが選択でき、これによって選択された名前が” 5ent Lo box−164またはCC; to box−166中に、ユ ーザがこのroloderボタン162を選択した時に選ばれたボックスに依存 して現れるようになる。
このアクティブ要素の他のタイプのものとしては、図10aの”vr口e−on −要素168である。ユーザによってページ上の”write−on it”要 素168のインスタンスにマークを付した時に、”write−on It”対 話ボックス170がこのページ上に現れる。次に、ユーザはこの”write− on it一対話ボックス170をあらゆる寸法に減縮することができると共に 、この対話ボックス170内で、ユーザが何を所望しているかのノートを記載す ることができる。この“vrlte−on lt一対話ボックス170を、ペー ジ上のあらゆる場所に移動させることができると共に、ユーザによって開いたま まにすることができるので、このボ・ノクスは、丁度、3M社の°Po5t−I t(商標)”ノートを、一枚の紙に貼布できるようなものに似て、このページの 余分な書込み領域として作用することができる。
図Jobのリック要素】72もまたアクティブ要素であり、これは図2のリンク 要素58と機能的には同じものであるが、外見のみが異なっている。リンク要素 1フ2のインスタンスをページ上にマークすると、リンク対話ボツクス1フ4が 現れるようになる。次に、リンク対話ボックス174がディスプレイスクリーン 14上に見えたままである一方、ユーザは、コンピュータ2の中にストアされた 情報の種々のページ上対してページ付けるe所望のページが配置されると、ユー ザは“this 98gXボタン176を選択して、リンク要素174のインス タンスを所望のページ上にマークすると共に、コノピユータ2を急速に立ち直ら せ、更に、このリンク要素1フ2のインスタンスが元々、付加されていた元のペ ージを表示するようにする。将来において、リンク(連結)されたページ間でジ ャンプするために、ユーザはリンク要素1フ2のインスタンスの選択のみ行う必 要がある。
更に複雑なアクティブ要素が図11のサウンド要素178である。一般に、この 要素を用いて、写真または何か他のイメージを、この要素のインスタンスと一緒 にマークすると共に関連付け、次に、サウンド対話ボックス180を利用して、 イメージの写真と関連付けている。例えば、ユーザが絵182をサウンド要素1 78のインスタンスに対して関連付けた場合に、少なくともこの絵162の一部 分がサウンド対話ボックス1110のフレーム184内に現れるようになる。次 に、このユーザは、記録ボタン1g4を用いて、コンビュータ2のレコーダを作 動させる。このレコーダ中に、ユーザはメモリ8中の記憶用の他のサウンドを記 録させるか、またはしゃべることができる。このような動作は、レコーダボタン 184を再度、選択するか、または記録時間の最大量が経過するまで実行される 。次に、ユーザは、再生ボタン186を選択することによって記録したサウンド を再生したり、消去ボタン1δ8を選択することによってこのサウンドを消去す ることができる。時間ヘッダ190は、このサウンドが何時に記録されたかを表 す。このサウンドが記録された後で、ユーザは、このサウンドを再生することが でき、この場合、対話ボックス180にアクセスする必要がなく、単に、元の絵 182に付加されたサウンド要素17Bのインスタンスを選択することによって 再生できる。この対話ボックス180を、サウンド要素178のインスタンスを 違った方法で選択することによって、何時でも再びアクセスすることが可能であ る。
図12aの°table−of−contents(内容のテーブル)°要素1 92のインスタンスをページ上にマークした時に、これによってコンビ5−夕2 がテーブルボックス194を開くようになり、このボックス内で、ユーザによっ て、マークしたページにストアされた情報に関する表題や、他のノート196を 書込むことができる。次に、このノート196を、インスタンスでマークされた ページのページ数に関する情報に則って、インスタンスと一緒に関連づけると共 に、メモリ8中にストアする。同じドキュメントの異なったページまたは、コン ビュータ2のノートブック内にこの+table−table−of−cont ents−要素192のリスト要素バージ璽ン用のインスタンスをマーク付けす ることによって、”tible−of−contents−リスト1911が表 示されるようになる。
このリスト198には、ユーザによって各テーブルボックス194中に予め入力 されたノート200の各々および、このノート200を入力した後に、コンビ島 −夕2によって関連付けられた対応のページ数が含まれている。
種々のタイプの要素の基本的な特徴および動作についてすでに説明してきたが、 図13a〜13dによりて、これら要素が、例えば図1のコンビュータ2のよう な、コンビ1−タンステム内でどのようにして動作するかを、一般的に表示する 。ここで、図133〜図Hdのフローチャートで説明されたプロセスは、ユーザ インターフェイスンステムの僅かな部分のみであると共に、相当程度に一般化さ れている。
これは、このフローチャート内で、すべての可能なタイプの要素の詳細なオペレ ーションを説明してしまうことによる混乱のレベルを下げるために一般化させて いる。しかし乍ら、これら種々の可能なタイプの要素の大部分が上述した図面を 膠照し乍ら詳述されているので、本明細書で開示されたものから何も喪失するも のではない。また、図11a〜13dに記載したプロセスを実行するために必要 なソフトウェアプログラムや、本明細書の何れかに記載されている種々のプロセ スの詳細な説明に加えて、本発明のユーザインターフェイス要素の種々の要素の イメージや、対話ボックスや、他の特徴部分を、例えば、C++のようなCプロ グラミング言語のバージ璽ンを利用して、当業者によって容易に形成することが できる。更に、本明細書中に記載されたソフトウェアプログラムされた機能の多 くは、例えば^SICのような特別な集積回路デバイスを用いて、ハードウェア 的に実行することも可能である。
ここで、図13aに関して、このプロセスは、要素ウェル16は、先行する動作 の結果として、オープン(開放)されているかどうかをチェックすることから開 始する(ブロック202)。このウェル16が未だ開いていなければ、次のブロ ック204で開くようになる。タッチ感応式ディスプレイパネルを有するノート 型のコンビコータでは、ユーザはウェル規制ライン18を選択すると共に、この ウェル16に対して所望の、または最大高さに達成するまで、このライン18を 上方へ移動してこのウェルをオープンする。
ウェル16が一旦開かれると、ユーザはこのウェル16の内容をサーチ(探索〉 して、ユーザの所望する機能を実行するのに必要な要素ベースを得るようにする (プロ1す206)。この所望の要素ベースがウェルに存在しなければ、ブロッ ク208へ進み、図13bのブロック210の現存しているベースのクローン( 複製)化を行なうか、または要素ベース作成ツールを利用して新しいベースを作 成する(ブロック212)。この要素ベース作成ツールの動作については、図1 4を参照し乍らあとでに説明する。ベースをクローン化できる場合には、ユーザ は、例えば、最初クローン用のベースを選択し、次に、利用可能なオペレーショ ンのメニューからクローンコマンドを選択することによって、ベースのクローン を作成するようにする。次に、このユーザは所望の属性を加えると共に、前述と 同様に、ベースの外観を変えることによってこのクローンを変形する(ブロック 214)。新しいベースをどのようにして作成したかに係わらず、一旦、この新 しいベースを作成すると、このベースをコンピュータ2によってウェル中に配置 するので、この新シいベースを利用して、インスタンスを生成することが可能と なる(ブロック212.214)。
次に、このシステムは、図13aに示したフローチャートのブロック216まで 戻り、この選択した要素のインスタンスを生成する(ブロック218)。
このブロック218で選択したベースのインスタンスを生成した後に、コンピュ ータ2は、このインスタンスをユーザによって作成した選択ポイントに、例えば ディスプレイスクリーン14に対して指を押圧することによって付加する。次に 、このインスタンスは、ユーザによって作成した選択ポイントをウェル16から 引出すと共に、この選択ポイントを移動させ、このページに落す(添付またはマ ークする)(プロIす220)。このページにマーク付けされると、コンビュー タ2によってメモリ8の要素データベース中にインスタンスについての識別情報 をストアする。次に、このユーザが落下したインスタンスを選択すると共に、関 連コマンド(ブロック222)を利用可能なオペレーションのメニュから選択す ると、関連づけたデータを例えばフレームボ・タンス82または94のようなフ レームボックスで包囲する(ブロック224)。この組合わせたデータに対して 、インスタンスの属性としてラベル付けすると共に、要素インスタンスデータベ ース中にストアする(ブロック226)。この時点において、即ち、データをこ のインスタンスに関連づけないように選択した時に(ブロック230) 、コン ピュータ2によって、選択したインスタンスがアクティブかどうかをチェックす る(図13cのブロック232)。
選択したインスタンスがアクティブなものであれば、コンビュータ2はディスプ レイスクリーン14上に対話ボックスをオープンしくブロック234) 、この ボックス内で、ユーザは種々の属性を入力できる。ユーザがこれら属性に対して OKを与えない場合(ブロック236)には、この対話ボックスをキャンセルし て、スクリーンから消去し、これらは、ユーザによって丁度入力したばかりの属 性であるからである(ブロック238)。他方、この選択したインスタンスがパ ッジイブなものであれば、即ち、ユーザがブロック234で入力したこれら属性 に対してOIを与えた場合には、システムによって規定された、または要素ベー スによって規定された属性に沿って許可された属性をメモリ8のデータベース中 にストアする(ブロック240)。これらインスタンス属性をストアした後で、 コンビュータ2は、インスタンスのプログラム済み機能が迅速または遅延してい るかどうか決定する(ブロック242)。機能性能を遅延させる場合(ブロック 244)には、このプログラム済み機能をメモリ8中に予じめ決められたトリが 一イベントが発生(ブロック248)するまで、ストアしく図13dのブロック 246) 、このイベントはコンビコータがプリンタに接続されるような事項で ある。この機能性能を直ぐに実行すべき場合(ブロック250)には、即ち、ブ ロック24Bのトリガーイベントが起ると、このプログラム済み機能が実行され ると共に、あらゆる関連した結果データをディスプレイスクリーン14上に表示 するようになる(ブロック252)。
次に、ユーザがインスタンスと一緒に他のオペレーションを実行するように所望 すると(ブロック254) 、この機能がブロック156で実行され、例えば、 ブロック248へ戻り、トリガーイベントが発生したかどうかを決定する。更に 、ユーザは、ページ上のインスタンスの位置を移したい場合、即ち、インスタン スをページから取り去りたい場合には、ユーザはこのようなオペレーションを現 在実行できる。
またこのユーザは、このインスタンスの属性を変更するために、このインスタン スや他のインスタンスを選択することが可能である。即ち、このユーザは探索オ ペレーションを実行してインスタンスとこれと組合わせたデータ等を配置できる 。
ユーザによって他のオペレーションの全部をこのインスタンスと一緒に実行する ことを完了した場合に、ウェル16が他のインスタンスに対して再度アクセスさ れるまで、このプロセスは終了する(ブロック258)。
図13bで説明したように、ユーザは、ブランク(空白)要素ベースとして現わ れた図141のベース作成要素ベース260を利用して、新しいベースを作成で きる。このベース260のインスタンスがページ上にマークされると、対話ボッ クス262がディスプレイスクリーン14上で開かれる。次に、ユーザは、この ベース作成ボックス264内でイメージを描き、ベース要素260の所望の外観 およびそれ自身の取り出したインスタンスを生成する。一旦、ユーザが、新しい ベース260によって、表示すべきイメージを決定すると、0【ボタン266を 押し、これによって、図示しないブランクスクリプトをスクリーン14上でオー ブンし、このスクリプト内でユーザはベース260の機能をコントロールするた めのブランクスクリプトを書くことができる。ユーザが完全に新しいプログラム を書くことを望んだ場合、即ち、他のベースに対して使用するイメージを簡単に 変更することを望んだ場合には、ユーザは他のベースからこのプログラムを簡単 にコピーすると共に、これを、ベース260に対するスクリプトウィンドウ内で 貼る。通常、コンピュータ2はテキストを入力または編集する手段を有していな いので、ユーザにとって、プログラム済みのフロッピィディスクやメモリカード から新しいスクリプトを取入れないか、または他のコンピュータとデータ接続を しないで新しいスクリプトを作成することは大変困難なことである。しかし、ユ ーザが使用を望むスクリプトラインが完全に共通なものであれば、ユーザは、予 じめ作成したスクリプトラインのリストを開くと共に、このリストからスクリプ トラインをコピーしてオーブンスクリプトウィンドウに貼ることができる。ユー ザによってテキストが入力および/または編集される場合には、通常、ユーザは 自分自身のスクリプトをこのオーブンスクリプトウィンドウ中に書込むことがで きる。全体として使用するコンピーりのタイプに適合し、これと−緒に要素が使 用される新しいスクリプト言語が好適なものであったとしても、本発明の要素を 、例えば、上述したハイパートーク言語のようなプログラム言語を利用してプロ グラムできる。
図14bには、ベース260を用いてフレームボックス内にデータを包囲し、表 示用のイメージを新しいベースによって生成する別の実施例技術が表わされてお り、これによれば、カッター要素ベース268が表示される。このカッターベー ス268を使用するために、ユーザはウェル16からベース268を選択して、 これのインスタンスを生成する。次に、このユーザはインスタンスをスクリーン 上のページの回りを移動させる。この移動は、ユーザが新しいベース用のイメー ジを使用したいページからイメージの中心にこのインスタンスが存在するまで行 われ、この中心地点において、ユーザはこのインスタンスをページ上に落し、こ れによってこのインスタンスが中心に存在しているイメージがコピーされると共 に、これが新しいベースおよび表示用のそれ自身のインスタンス中に貼られる。
このような処理方法をユーザが容易に実行できるために、ユーザは、要素力ブタ ベース268の空のインスタンスを介して、このインスタンスがそのページ上に 落ちるまで、その下のページを観察できるようにする。
図14eは、図14aのベース作成対話ボックス264の変形バーシーンを図示 する。ベース作成対話ボックス270において、ユーザは自分自身のテキストを 書くと共に、バックグランドの色を選択するためのオブシ1ンおよび/または、 新しいベース中に表示するパターンおよびこのページからイメージの代りにそれ のインスタンスを選抜するオプションを有している。最初に、ユーザは、テキス トボックス272中に、どのようなメツセージを望んでいるかを書込み、次に、 カラーボタン274からバックグランド用のカラーの1つを選択することおよび /またはパターンボタン276からパターンの1つを選択する。新たに作成した イメージを、下見ボックス278中で下見することができる。
別のタイプの要素、即ち合成要素のオペレーン謬ンを図ISmのミーティング要 素ベース280とそれのインスタンス272によって説明する。このミーティン グ要素を利用するために、最初、ユーザはディスプレイスクリーン14上のペー ジにインスタンス282でマークすると共に、例えば、′ミーティングを設定” の言葉のような所望のデータを包囲する。このインスタンス272を釈放した後 で、図151のウェル16中に、要素ベースの組を、図15bで示した要素ベー スの新しい組によって置換える。この新しい要素ベースの組は、インスタンス2 72に少し関連している。例えば、このインスタンス272がミーティングに関 連しているので、これら要素ベースの新しい組のすべては、同様に、ミーティン グに関連している。これら要素ベースには、カレンダ要素284、参加者要素1 02、電話要素32、会議室要素286、他のミーティング要素2801および 思索要素288が包含されてt)る。例え11図15eのカレンダインスタンス 290や参加者インスタンス292のような新しt1要素の各々を、ウェル16 から選択し、インスタンス2フ2の一方の側へ配置して、合成要素を生成する。
この合成要素のインスタンス2フ2は初期インスタンスを構成する。この初期イ ンスタンスに合成されたインスタンスの各々には、例えば、参加者要素インスタ ンス292用に図156の対話ボックス294から選択した種々の参加者の名前 のような所望の入力済み属性が設定されている。
このユーザによって、これら合成されたインスタンス用の属性を入力した場合に 、初+91インスタンスでないすべてのインスタンスが、初期インスタンスが選 択される次の時間まで、視界から隠されるようになる。この結果として、ユーザ +1、通常、単一のインスタンスで占有されるディスプレイの領域内で、ユーザ 11更1こオペレーア1ンを実行できると共に、更に多くの情報をストアできる 。これ:こ加えて、初期インスタンスの機能を実行することが開始されると、こ の初期インスタンスに合成された他のインスタンスによって階層順にそれらの機 能力(実行され図1〜図15を参照し乍ら本発明を説明すると共に、特定の実施 例↓こつ(1で強調してきたが、これら図面は説明目的のみのためで、決して本 発明を限定するために採用されたものでない。また、本発明の要素、プロセス、 およびプロセスステップの構成に対して、様々な変化および変形を、当業者であ れ↓f1実現でき、これは、上述した本発明の技術的思想の範囲内で実行される ものである。
浄書(内容に変更なし) FIG、 1 FIG、 4A FIG、 4B FIG、 6A FIG、 8A FIG、 8G FIG、 9A FIG、 9B FIG、 10A FIG、 10B FIG、11 FIG、 12A FIG、 12B 浄書(内容に変更なし) FIG、13A 浄書(内容に変更なし) FIG、 138 浄書(内容に変更なし) FIG、13C 、 浄書(内容に変更なし) FIG、13D FIG、 14A FIG、 148 FIG、 14G FIG、 15B 手続補正書 平成6年6月27日

Claims (1)

  1. 【特許請求の範囲】 1.プロセッサと、メモリと、ディスプレイと、これらプロセッサ、メモリ、デ ィスプレイと通信を行う対話型入力/出力システムとを有するコンピュータシス テムにおいて利用されると共に、このシステムによって動作するユーザインター フェイスシステムにおいて、 ユーザインターフェイス要素をユーザに識別させる手段と、前記ディスプレイ上 のドキュメント中表示されたデータにマークを付ける手段とを有するユーザイン ターフェイス要素と; 前記ユーザインターフェイス要素の識別手段を前記メモリ中に前記マークされた データの代わりとしてストアする手段と;前記メモリ中のデータの代わりのもの をサーチすることによって、このメモリ中のマークされたデータを探索する手段 と;前記マークされたデータを探索して、そのデータを前記ディスプレイに表示 する手段とを具備したことを特徴とするユーザインターフェイスシステム。 2.前記ユーザインターフェイスシステムに、前記マークしたデータに関連した オぺレーションの性能を前記コンピュータシステムによって制御するために前記 ユーザインターフェイス要素をプログラムする手段を更に設け、前記識別手段が 、前記ユーザインターフェイス要素をこのオペレーションに対して独特に関連さ せられていることを特徴とする請求項1記載のユーザインターフェイスシステム 。 3.前記データに前記ユーザインターフェイス要素をマークを付けて、前記オぺ レーションを前記コンピュータシステムによって自動的に実行することを特徴と する請求項2記載のユーザインターフェイスシステム。 4.前記オぺレーションの少なくとも一部分の実行を、前記対話型入力/出力シ ステムを介してユーザによって開始されるまで、前記コンピュータシステムによ って遅延させたことを特徴とする請求項2記載のユーザインターフェイスシステ ム。 5.前記オぺレーションの少なくとも一部分の実行を、予め決められたトリガー イぺントが発生するまで、前記コンピュータシステムによって遅延させたことを 特徴とする請求項2記載のユーザインターフェイスシステム。 6.前記マーク付け手段に、前記マーク付けされたデータを選択して、このマー ク付けされたデータに前記要素を組合わせる手段を設けたことを特徴とする請求 項1記載のユーザインターフェイスシステム。 7.前記識別手段に、前記要素の視覚表示を設け、前記選択手段にフレームボッ クスを設け、このフレームボックスを、前記ユーザにより、前記対話型入力/出 力手段を利用して、この視覚表示を前記ディスプレイを横切って移動させるよう にして、この視覚表示から認識するようにしたことを特徴とする請求項6記載の ユーザインターフェイスシステム。 8.前記記憶手段を更に作動させて、前記マーク付けられたデータを、前記デー タの代わりのものと組合わせて前記メモリ中にストア(記憶)させたことを特徴 とする請求項6記載のユーザインターフェイスシステム。 9.前記識別手段に、前記要素の視覚表示を設けたことを特徴とする請求項1記 載のユーザインターフェイスシステム。 l0.前記識別手段に、前記要素の聴覚表示を設けたことを特徴とする請求項1 記載のユーザインターフェイスシステム。 11.前記ユーザインターフェイスシステムに、複数のユーザインターフェイス 要素を更に設け、これらユーザインターフェイス要素のいくつかの要素は共通の 識別手段を有し、これらユーザインターフェイス要素のいくつかの要素は別個の 識別手段を有し; 前記探索手段に、前記共通の識別手段に対応したマーク付けされたデータのリス トを編集する手段を設け; 前記ディスプレイ手段に、このリストを前記共通の識別手段と一緒に前記ディス プレイ上に表示する手段を設けたことを特徴とする請求項1記載のユーザインタ ーフェイスシステム。 12.前記ユーザインターフェイスシステムに、前記リスト上のマーク付けされ たデータの目録を作成する手段を更に設けたことを特徴とする請求項11記載の ユーザインターフェイスシステム。 13.前記要素に、ぺースおよびインスタンスを更に設け、前記ユーザインター フェイスシステムと前記ぺースとを動作させて、共通の属性をこのインスタンス に与え、このインスタンスを前記ぺースから取出すと共に、動作させて前記ユー ザによって作成されたそれぞれ異なった属性を有するようにしたことを特徴とす る請求項1記載のユーザインターフェイスシステム。 14.前記インスタンスが前記ペースから最初に取出された場合には、これらペ ースおよびインスタンス用の前記識別手段が互いに同一であることを特徴とする 請求項13記載のユーザインターフェイスシステム。 15.前記ユーザインターフェイスシステムに、前記要素をプログラムして前記 マーク付けされたデータに関連したオぺレーションの実行を前記コンピュータシ ステムによって制御する手段を更に設け、前記識別手段を動作させて、前記要素 を前記オぺレーションに独特に関連させ、前記インスタンスを前記ぺースから取 出すのに続いて、このインスタンス用の識別手段を度形するように作動きせて、 前記オぺレーションの状態における変化を表したことを特徴とする請求項14記 載のユーザインターフェイスシステム。 16.前記コンピュータシステムによって、前記オぺレーションの少なくとも1 っの予め決められた部分が完了すると、前記インターフェイス用の識別手段を前 記ユーザインターフェイスシステムによって自動的に変形したことを特徴とする 請求項13記載のユーザインターフェイスシステム。 17.前記インスタンス用の識別手段を作動させて、このインスタンスを前記ぺ ースより取り出すのに続いて、前記ユーザによって変形させたことを特徴とすろ 請求項13記載のユーザインターフェイスシステム。 18.前記ディスプレイ手段に、前記マーク付けされたデータおよび前記識別手 段を、このマーク付けされたデータを、探索した後で、強調して前記ドキュメン トを表示する手段を設けたことを特徴とする請求項1記載のユーザインターフェ イスシステム。 19.前記ユーザインターフェイスシステムに、前記要素をプログラムして前記 マーク付けされたデータに関連したオぺレーションの実行を前記コンピュータシ ステムによって制御する手段を更に設け、前記識別手段を動作させて、前記要素 を前記オペレーションに独特的に関連させ、前記ユーザインターフェイスシステ ムに、複数個のユーザインターフェイス要素を設け、これらユーザにインターフ ェイス要素のいくっかの要素は共通の識別手段を有すると共に、いくつかのユー ザインターフェイス要素は別個の識別手段を有し、これら共通の識別手段を有す る前記要素を前記コンピュータシステムで実行すべき共通タイプのオペレーショ ンに対応し、別個の識別手段を有する前記要素を前記コンピュータシステムで実 行素ぺき異なったタイプのオぺレーションに対応したことを特徴とする請求項1 記載のユーザインターフェイスシステム。 20.前記ユーザインターフェイス要素の1つによるオぺレーションの実行によ って、これら要素の他の要素により、少なくとも1つの異なったタイプのオぺレ ーションを実行するように、前記要素を、互いに合成されるように動作したこと を特徴とする請求項19記載のユーザインターフェイスシステム。
JP5500188A 1991-05-15 1992-05-12 プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシステム Pending JPH07500197A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US700,729 1991-05-15
US07/700,729 US5202828A (en) 1991-05-15 1991-05-15 User interface system having programmable user interface elements
PCT/US1992/004045 WO1992021091A1 (en) 1991-05-15 1992-05-12 User interface system having programmable user interface elements

Publications (1)

Publication Number Publication Date
JPH07500197A true JPH07500197A (ja) 1995-01-05

Family

ID=24814641

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5500188A Pending JPH07500197A (ja) 1991-05-15 1992-05-12 プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシステム

Country Status (7)

Country Link
US (2) US5202828A (ja)
EP (2) EP0584269B1 (ja)
JP (1) JPH07500197A (ja)
AU (1) AU654019B2 (ja)
CA (1) CA2102910C (ja)
DE (1) DE69233142T2 (ja)
WO (1) WO1992021091A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10207872A (ja) * 1997-01-16 1998-08-07 Fuji Xerox Co Ltd 電子ファイル装置

Families Citing this family (482)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5442742A (en) * 1990-12-21 1995-08-15 Apple Computer, Inc. Method and apparatus for the manipulation of text on a computer display screen
US5898434A (en) * 1991-05-15 1999-04-27 Apple Computer, Inc. User interface system having programmable user interface elements
FR2693810B1 (fr) * 1991-06-03 1997-01-10 Apple Computer Systemes d'interfaces d'utilisateurs a acces direct a une zone secondaire d'affichage.
JPH0719202B2 (ja) * 1991-06-18 1995-03-06 財団法人パーソナル情報環境協会 情報処理装置における外見選択切替方式
JPH0522445A (ja) * 1991-07-17 1993-01-29 Nec Corp 無線呼出し方式
CA2067633C (en) * 1991-07-24 1996-10-01 Eric Jonathan Bauer Method and apparatus for accessing a computer-based file system
US5652880A (en) * 1991-09-11 1997-07-29 Corel Corporation Limited Apparatus and method for storing, retrieving and presenting objects with rich links
CA2052813C (en) * 1991-10-04 1999-02-23 Kenneth R. Greulich Desktop forms order system
JP3133801B2 (ja) * 1991-12-04 2001-02-13 キヤノン株式会社 画像通信方法及び装置
US5428729A (en) * 1991-12-20 1995-06-27 International Business Machines Corporation System and method for computer aided software engineering
US10361802B1 (en) 1999-02-01 2019-07-23 Blanding Hovenweep, Llc Adaptive pattern recognition based control system and method
US6400996B1 (en) 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
US6850252B1 (en) 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US5903454A (en) 1991-12-23 1999-05-11 Hoffberg; Linda Irene Human-factored interface corporating adaptive pattern recognition based controller apparatus
US6418424B1 (en) 1991-12-23 2002-07-09 Steven M. Hoffberg Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5519606A (en) * 1992-01-21 1996-05-21 Starfish Software, Inc. System and methods for appointment reconciliation
US5495581A (en) * 1992-02-25 1996-02-27 Tsai; Irving Method and apparatus for linking a document with associated reference information using pattern matching
US5838458A (en) * 1992-02-25 1998-11-17 Tsai; Irving Method and apparatus for linking designated portions of a received document image with an electronic address
US6678864B1 (en) 1992-02-25 2004-01-13 Irving Tsai Method and apparatus for linking designated portions of a received document image with an electronic address
JP3421359B2 (ja) * 1992-03-13 2003-06-30 三洋電機株式会社 電話メモ装置
US5282052A (en) * 1992-03-20 1994-01-25 Xerox Corporation Techniques for automatic form creation by combining partial operations
US5727174A (en) * 1992-03-23 1998-03-10 International Business Machines Corporation Graphical end-user interface for intelligent assistants
JP3566720B2 (ja) * 1992-04-30 2004-09-15 アプル・コンピュータ・インコーポレーテッド コンピュータ・システムにおいて情報を編成する方法と装置
CA2092632C (en) * 1992-05-26 2001-10-16 Richard E. Berry Display system with imbedded icons in a menu bar
KR100291372B1 (ko) * 1992-05-29 2001-06-01 이데이 노부유끼 전자 사전 장치
JPH06119393A (ja) * 1992-08-20 1994-04-28 Ricoh Co Ltd 電子ファイル装置
USD386487S (en) * 1992-08-27 1997-11-18 Apple Computer, Inc. Icon for a display screen
USD386485S (en) * 1992-08-27 1997-11-18 Apple Computer, Inc. Icon for a display screen
JP2525546B2 (ja) * 1992-09-08 1996-08-21 インターナショナル・ビジネス・マシーンズ・コーポレイション グラフィックリソ―ス・エディタ
USD386516S (en) * 1992-09-09 1997-11-18 Apple Computer, Inc. Icon for a display screen
JP3007232B2 (ja) * 1992-10-19 2000-02-07 富士通株式会社 描画処理装置及び方法
AU5451794A (en) * 1992-10-28 1994-05-24 Intellution, Inc. A dynamic graphical system configuration utility
US5579471A (en) * 1992-11-09 1996-11-26 International Business Machines Corporation Image query system and method
US5734915A (en) * 1992-11-25 1998-03-31 Eastman Kodak Company Method and apparatus for composing digital medical imagery
JP2800603B2 (ja) * 1992-12-01 1998-09-21 三菱電機株式会社 アイコンを用いた情報処理装置
US5515496A (en) * 1992-12-24 1996-05-07 Apple Computer, Inc. Computer system with direct manipulation interface and method of operating same
JPH06231186A (ja) * 1993-02-03 1994-08-19 Fujitsu Ltd 文書処理装置
US5596700A (en) * 1993-02-17 1997-01-21 International Business Machines Corporation System for annotating software windows
US5598524A (en) * 1993-03-03 1997-01-28 Apple Computer, Inc. Method and apparatus for improved manipulation of data between an application program and the files system on a computer-controlled display system
US5754178A (en) * 1993-03-03 1998-05-19 Apple Computer, Inc. Method and apparatus for improved feedback during manipulation of data on a computer controlled display system
US5696915A (en) * 1993-03-03 1997-12-09 Apple Computer, Inc. Method and apparatus for linking routines for different contexts
US6212577B1 (en) * 1993-03-03 2001-04-03 Apple Computer, Inc. Method and apparatus for improved interaction with an application program according to data types and actions performed by the application program
US5530865A (en) * 1993-03-03 1996-06-25 Apple Computer, Inc. Method and apparatus for improved application program switching on a computer-controlled display system
US5621878A (en) * 1993-03-03 1997-04-15 Apple Computer, Inc. Method and apparatus or manipulating data from a suspended application program on a computer-controlled display system
US6061058A (en) * 1993-03-03 2000-05-09 Apple Computer, Inc. Method and apparatus for transferring data by type according to data types available
GB2276520A (en) * 1993-03-23 1994-09-28 Us West Advanced Tech Inc Computer interface method and system
US5559942A (en) * 1993-05-10 1996-09-24 Apple Computer, Inc. Method and apparatus for providing a note for an application program
US5583984A (en) * 1993-06-11 1996-12-10 Apple Computer, Inc. Computer system with graphical user interface including automated enclosures
US5956030A (en) 1993-06-11 1999-09-21 Apple Computer, Inc. Computer system with graphical user interface including windows having an identifier within a control region on the display
US5544352A (en) * 1993-06-14 1996-08-06 Libertech, Inc. Method and apparatus for indexing, searching and displaying data
US5969705A (en) * 1993-06-28 1999-10-19 Apple Computer, Inc. Message protocol for controlling a user interface from an inactive application program
US5500929A (en) * 1993-08-30 1996-03-19 Taligent, Inc. System for browsing a network resource book with tabs attached to pages
US6594688B2 (en) * 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
US7185054B1 (en) 1993-10-01 2007-02-27 Collaboration Properties, Inc. Participant display and selection in video conference calls
US5689641A (en) * 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
US6181332B1 (en) * 1993-10-28 2001-01-30 International Business Machines Corporation Method and system for contextual presentation of a temporal based object on a data processing system
US6243071B1 (en) * 1993-11-03 2001-06-05 Apple Computer, Inc. Tool set for navigating through an electronic book
US5524201A (en) * 1993-11-03 1996-06-04 Apple Computer, Inc. Method of preparing an electronic book for a computer system
US6681029B1 (en) * 1993-11-18 2004-01-20 Digimarc Corporation Decoding steganographic messages embedded in media signals
US5414644A (en) * 1993-11-24 1995-05-09 Ethnographics, Inc. Repetitive event analysis system
US7861166B1 (en) * 1993-12-02 2010-12-28 Discovery Patent Holding, Llc Resizing document pages to fit available hardware screens
SE514994C2 (sv) * 1993-12-03 2001-05-28 Ericsson Telefon Ab L M Sätt och anordning för utvinning av data ur en grupp av data
US5542040A (en) * 1993-12-15 1996-07-30 International Business Machines Corporation Display of dynamic data as a notebook
CA2179523A1 (en) * 1993-12-23 1995-06-29 David A. Boulton Method and apparatus for implementing user feedback
US5423043A (en) * 1994-01-21 1995-06-06 International Business Machines Corporation Method and apparatus for creating and monitoring logical associations among desktop objects
US20060129944A1 (en) * 1994-01-27 2006-06-15 Berquist David T Software notes
MX9602952A (es) * 1994-01-27 1997-06-28 Minnesota Mining & Mfg Notas de software.
US5689666A (en) * 1994-01-27 1997-11-18 3M Method for handling obscured items on computer displays
DE69500885T2 (de) * 1994-03-21 1998-05-20 Object Technology Licensing Corp., Cupertino, Calif. Verfahren und vorrichtung zur verarbeitung eines dokuments
US5524238A (en) * 1994-03-23 1996-06-04 Breakout I/O Corporation User specific intelligent interface which intercepts and either replaces or passes commands to a data identity and the field accessed
US5680617A (en) * 1994-05-16 1997-10-21 Apple Computer, Inc. Computer-human interface which provides for user customization of object behavior
US5550559A (en) * 1994-05-23 1996-08-27 International Business Machines Corporation Method and apparatus for locating a point in a list
US5546528A (en) * 1994-06-23 1996-08-13 Adobe Systems Incorporated Method of displaying multiple sets of information in the same area of a computer screen
US5852436A (en) * 1994-06-30 1998-12-22 Microsoft Corporation Notes facility for receiving notes while the computer system is in a screen mode
JPH0816514A (ja) * 1994-07-01 1996-01-19 Hitachi Ltd 共同作業支援システム
US5737440A (en) * 1994-07-27 1998-04-07 Kunkler; Todd M. Method of detecting a mark on a oraphic icon
US5740271A (en) * 1994-07-27 1998-04-14 On-Track Management System Expenditure monitoring system
JP3611601B2 (ja) * 1994-09-01 2005-01-19 富士通株式会社 リスト処理システムとその方法
US5715445A (en) 1994-09-02 1998-02-03 Wolfe; Mark A. Document retrieval system employing a preloading procedure
US7467137B1 (en) 1994-09-02 2008-12-16 Wolfe Mark A System and method for information retrieval employing a preloading procedure
US6604103B1 (en) 1994-09-02 2003-08-05 Mark A. Wolfe System and method for information retrieval employing a preloading procedure
US7103594B1 (en) 1994-09-02 2006-09-05 Wolfe Mark A System and method for information retrieval employing a preloading procedure
US5548753A (en) * 1994-09-14 1996-08-20 Johnson Service Company Automatic electronic mail notification of database events
US6195095B1 (en) 1994-09-20 2001-02-27 International Business Machines Corporation Method and apparatus for displaying attributes of a computer work station on a graphical user interface
US5802361A (en) * 1994-09-30 1998-09-01 Apple Computer, Inc. Method and system for searching graphic images and videos
US5838906A (en) 1994-10-17 1998-11-17 The Regents Of The University Of California Distributed hypermedia method for automatically invoking external application providing interaction and display of embedded objects within a hypermedia document
US5752250A (en) * 1994-12-02 1998-05-12 Fujitsu Limited Instance updating method and apparatus therefor
US5852825A (en) * 1994-12-05 1998-12-22 Trimble Navigation Limited Form data message formatting method, program and system
JPH08166870A (ja) * 1994-12-14 1996-06-25 Canon Inc 情報処理装置
US5664128A (en) * 1995-02-23 1997-09-02 Apple Computer, Inc. Object storage apparatus for use with data sets in computer applications
US5835758A (en) * 1995-02-28 1998-11-10 Vidya Technologies, Inc. Method and system for respresenting and processing physical and conceptual entities
US5671378A (en) * 1995-03-31 1997-09-23 International Business Machines Corporation Method and system for sizing of graphical user interface objects for localization
JPH08292950A (ja) * 1995-04-20 1996-11-05 Fuji Xerox Co Ltd 文書処理装置
US5717940A (en) * 1995-04-28 1998-02-10 Ricoh Company, Ltd. Method of selecting a target document using features of an example page
US5929852A (en) 1995-05-05 1999-07-27 Apple Computer, Inc. Encapsulated network entity reference of a network component system
US5821932A (en) * 1995-05-18 1998-10-13 Sun Microsystems, Inc. Dynamic dialog box facility for graphical user interface for computer system video display
US6266808B1 (en) * 1995-06-05 2001-07-24 International Business Machines Corporation Computer program product for enabling the construction of dialogs for commands and templates
US7302638B1 (en) 1995-06-07 2007-11-27 Wolfe Mark A Efficiently displaying and researching information about the interrelationships between documents
US5870770A (en) * 1995-06-07 1999-02-09 Wolfe; Mark A. Document research system and method for displaying citing documents
US5742845A (en) 1995-06-22 1998-04-21 Datascape, Inc. System for extending present open network communication protocols to communicate with non-standard I/O devices directly coupled to an open network
US6408331B1 (en) 1995-07-27 2002-06-18 Digimarc Corporation Computer linking methods using encoded graphics
US6411725B1 (en) 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
US5745718A (en) * 1995-07-31 1998-04-28 International Business Machines Corporation Folder bar widget
DE69637146T2 (de) 1995-08-03 2008-02-28 Interval Research Corp., Palo Alto Rechner-interaktorsystem und verfahren zu seiner bereitstellung
US6940486B2 (en) 1995-08-03 2005-09-06 Vulcan Patents Llc Computerized interactor systems and methods for providing same
US5668964A (en) * 1995-08-24 1997-09-16 Wall Data Incorporated Graphical user interface for creating a new notebook with a dragged page
US5848356A (en) * 1995-10-02 1998-12-08 Motorola, Inc. Method for implementing icons in a radio communication device
US6279112B1 (en) 1996-10-29 2001-08-21 Open Market, Inc. Controlled transfer of information in computer networks
US5956486A (en) * 1995-12-20 1999-09-21 Hickman; Paul Lawrence Method and apparatus for monitoring multiple electronic mail systems
US5764226A (en) * 1995-12-29 1998-06-09 International Business Machine Corp. Reusable and modifiable data entry interface part
US5946647A (en) * 1996-02-01 1999-08-31 Apple Computer, Inc. System and method for performing an action on a structure in computer-generated data
WO1997034388A2 (en) * 1996-03-12 1997-09-18 Compuserve Incorporated System for developing user interface themes
US6091895A (en) * 1996-03-27 2000-07-18 International Business Machines Corporation Object oriented central maintenance for programs and scripts
US6113649A (en) * 1996-03-27 2000-09-05 International Business Machines Corporation Object representation of program and script components
US5963964A (en) * 1996-04-05 1999-10-05 Sun Microsystems, Inc. Method, apparatus and program product for updating visual bookmarks
US5991798A (en) * 1996-05-17 1999-11-23 Hitachi, Ltd. Package medium system having URL hyper-linked to data in removable storage
US6311197B2 (en) 1996-06-03 2001-10-30 Webtv Networks, Inc. Method for downloading a web page to a client for efficient display on a television screen
US5918013A (en) * 1996-06-03 1999-06-29 Webtv Networks, Inc. Method of transcoding documents in a network environment using a proxy server
US6957260B1 (en) 1996-06-03 2005-10-18 Microsoft Corporation Method of improving access to services provided by a plurality of remote service providers
US5996022A (en) 1996-06-03 1999-11-30 Webtv Networks, Inc. Transcoding data in a proxy computer prior to transmitting the audio data to a client
US6034689A (en) 1996-06-03 2000-03-07 Webtv Networks, Inc. Web browser allowing navigation between hypertext objects using remote control
US5862220A (en) * 1996-06-03 1999-01-19 Webtv Networks, Inc. Method and apparatus for using network address information to improve the performance of network transactions
US5896444A (en) 1996-06-03 1999-04-20 Webtv Networks, Inc. Method and apparatus for managing communications between a client and a server in a network
US5935207A (en) 1996-06-03 1999-08-10 Webtv Networks, Inc. Method and apparatus for providing remote site administrators with user hits on mirrored web sites
US6473099B1 (en) * 1996-06-03 2002-10-29 Webtv Networks, Inc. Automatically upgrading software over a satellite link
US5745909A (en) * 1996-07-09 1998-04-28 Webtv Networks, Inc. Method and apparatus for reducing flicker when displaying HTML images on a television monitor
US5862339A (en) * 1996-07-09 1999-01-19 Webtv Networks, Inc. Client connects to an internet access provider using algorithm downloaded from a central server based upon client's desired criteria after disconnected from the server
US5917488A (en) * 1996-08-21 1999-06-29 Apple Computer, Inc. System and method for displaying and manipulating image data sets
US6268851B1 (en) * 1996-09-30 2001-07-31 Trellix Corporation Hypermedia authoring and publishing system
US6006252A (en) 1996-10-08 1999-12-21 Wolfe; Mark A. System and method for communicating information relating to a network resource
US5838927A (en) * 1996-11-22 1998-11-17 Webtv Networks Method and apparatus for compressing a continuous, indistinct data stream
TW401548B (en) * 1996-12-20 2000-08-11 Sony Corp Method and apparatus for sending E-mail, method and apparatus for receiving E-mail, sending program supplying medium, receiving program supplying medium
US6604242B1 (en) * 1998-05-18 2003-08-05 Liberate Technologies Combining television broadcast and personalized/interactive information
US6760751B1 (en) 1996-12-20 2004-07-06 Sony Corporation Method and apparatus for automatic sending of E-mail and automatic sending control program supplying medium
US6209005B1 (en) * 1996-12-23 2001-03-27 Apple Computer, Inc. Method and apparatus for generating and linking documents to contacts in an organizer
US5931908A (en) * 1996-12-23 1999-08-03 The Walt Disney Corporation Visual object present within live programming as an actionable event for user selection of alternate programming wherein the actionable event is selected by human operator at a head end for distributed data and programming
US6256785B1 (en) * 1996-12-23 2001-07-03 Corporate Media Patners Method and system for providing interactive look-and-feel in a digital broadcast via an X-Y protocol
US6104802A (en) 1997-02-10 2000-08-15 Genesys Telecommunications Laboratories, Inc. In-band signaling for routing
US7031442B1 (en) 1997-02-10 2006-04-18 Genesys Telecommunications Laboratories, Inc. Methods and apparatus for personal routing in computer-simulated telephony
US6480600B1 (en) 1997-02-10 2002-11-12 Genesys Telecommunications Laboratories, Inc. Call and data correspondence in a call-in center employing virtual restructuring for computer telephony integrated functionality
US6785865B1 (en) 1997-03-06 2004-08-31 Microsoft Corporation Discoverability and navigation of hyperlinks via tabs
US5937416A (en) * 1997-03-25 1999-08-10 Bennethum Computer Systems Method for preserving data in an electronic document
US6084951A (en) * 1997-04-23 2000-07-04 Nortel Networks Corporation Iconized name list
US6326970B1 (en) 1997-05-16 2001-12-04 Liberate Technologies TV centric layout
US8626763B1 (en) 1997-05-22 2014-01-07 Google Inc. Server-side suggestion of preload operations
USD423483S (en) * 1997-06-18 2000-04-25 Apple Computer, Inc. Modal window for a computer display screen
USD419542S (en) * 1997-06-18 2000-01-25 Apple Computer, Inc. Utility window for a computer display screen
USD406122S (en) * 1997-06-18 1999-02-23 Apple Computer, Inc. Set of windows for a computer display screen
US7574649B1 (en) * 1997-08-14 2009-08-11 Keeboo Sarl Book metaphor for modifying and enforcing sequential navigation of documents
USRE43318E1 (en) 1997-08-28 2012-04-17 Flatworld Interactives, Llc User interface for removing an object from a display
JP3516122B2 (ja) * 1997-09-04 2004-04-05 富士通株式会社 記事投稿装置、記事関係情報管理装置、記事投稿システム、及び記録媒体
JPH1185706A (ja) * 1997-09-08 1999-03-30 Sharp Corp アプリケーションデータ生成方法および装置並びにアプリケーションデータ生成プログラムを記録した記録媒体
US6658623B1 (en) * 1997-09-15 2003-12-02 Fuji Xerox Co., Ltd. Displaying in a first document a selectable link to a second document based on a passive query
US6356922B1 (en) * 1997-09-15 2002-03-12 Fuji Xerox Co., Ltd. Method and system for suggesting related documents
US6711611B2 (en) 1998-09-11 2004-03-23 Genesis Telecommunications Laboratories, Inc. Method and apparatus for data-linking a mobile knowledge worker to home communication-center infrastructure
US6985943B2 (en) 1998-09-11 2006-01-10 Genesys Telecommunications Laboratories, Inc. Method and apparatus for extended management of state and interaction of a remote knowledge worker from a contact center
US6256638B1 (en) 1998-04-14 2001-07-03 Interval Research Corporation Printable interfaces and digital linkmarks
US6518950B1 (en) 1997-10-07 2003-02-11 Interval Research Corporation Methods and systems for providing human/computer interfaces
US6282206B1 (en) * 1997-10-09 2001-08-28 Interval Research Corporation Variable bandwidth communication systems and methods
US6956497B1 (en) 1997-10-09 2005-10-18 Vulcan Patents Llc Method and apparatus for sending presence messages
WO1999019823A2 (en) * 1997-10-10 1999-04-22 Interval Research Corporation Methods and systems for providing human/computer interfaces
US6816904B1 (en) * 1997-11-04 2004-11-09 Collaboration Properties, Inc. Networked video multimedia storage server environment
USRE46528E1 (en) 1997-11-14 2017-08-29 Genesys Telecommunications Laboratories, Inc. Implementation of call-center outbound dialing capability at a telephony network level
US7257604B1 (en) 1997-11-17 2007-08-14 Wolfe Mark A System and method for communicating information relating to a network resource
US6292813B1 (en) 1997-11-17 2001-09-18 Mark A. Wolfe System and method for communicating information relating to a network resource
US6623527B1 (en) * 1997-11-19 2003-09-23 International Business Machines Corporation Method for providing a document with a button for a network service
US6613100B2 (en) * 1997-11-26 2003-09-02 Intel Corporation Method and apparatus for displaying miniaturized graphical representations of documents for alternative viewing selection
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US6154752A (en) * 1998-02-13 2000-11-28 Lockheed Martin Corporation Chronological identification of hyper text links during back tracking
US7907598B2 (en) 1998-02-17 2011-03-15 Genesys Telecommunication Laboratories, Inc. Method for implementing and executing communication center routing strategies represented in extensible markup language
US7039857B2 (en) * 1998-09-11 2006-05-02 Genesys Telecommunications Laboratories, Inc. Method and apparatus for building multimedia applications using interactive multimedia viewers
US6332154B2 (en) 1998-09-11 2001-12-18 Genesys Telecommunications Laboratories, Inc. Method and apparatus for providing media-independent self-help modules within a multimedia communication-center customer interface
DE19811829A1 (de) * 1998-03-18 1999-09-30 Siemens Ag Verfahren zum Ermitteln und Verarbeiten von für den Aufbau einer Telefonverbindung in einem CTI-System relevanten Informationen und entsprechendes CTI-System
JPH11282658A (ja) * 1998-03-31 1999-10-15 Fujitsu Ltd 対話的ソフトウエア構築・駆動装置
US6356255B1 (en) * 1998-04-07 2002-03-12 Interval Research Corporation Methods and systems for providing programmable computerized interactors
USD424037S (en) * 1998-05-01 2000-05-02 Apple Computer, Inc. Window for a computer display screen
USD426525S (en) * 1998-05-01 2000-06-13 Apple Computer, Inc. Window for a computer display screen
USD431038S (en) * 1998-05-04 2000-09-19 Apple Computer, Inc. Window for a computer display screen
USD420341S (en) * 1998-05-04 2000-02-08 Apple Computer, Inc. Window for a computer display screen
USD426207S (en) * 1998-05-07 2000-06-06 Apple Computer, Inc. Window for a computer display screen
USD427607S (en) * 1998-05-07 2000-07-04 Apple Computer, Inc. Composite desktop on a computer display screen
US6327586B1 (en) * 1998-05-27 2001-12-04 Wisdombuilder, L.L.C. System method and computer program product to automate the management and analysis of heterogeneous data
JPH11342658A (ja) * 1998-05-29 1999-12-14 Toshiba Corp 印刷装置と印刷システム
US6243713B1 (en) * 1998-08-24 2001-06-05 Excalibur Technologies Corp. Multimedia document retrieval by application of multimedia queries to a unified index of multimedia data for a plurality of multimedia data types
US7155662B1 (en) * 1998-08-31 2006-12-26 Xerox Corporation Representing an entity as a document using a data source having active properties
USRE46153E1 (en) 1998-09-11 2016-09-20 Genesys Telecommunications Laboratories, Inc. Method and apparatus enabling voice-based management of state and interaction of a remote knowledge worker in a contact center environment
US6445834B1 (en) 1998-10-19 2002-09-03 Sony Corporation Modular image query system
US6256409B1 (en) 1998-10-19 2001-07-03 Sony Corporation Method for determining a correlation between images using multi-element image descriptors
US7165098B1 (en) 1998-11-10 2007-01-16 United Video Properties, Inc. On-line schedule system with personalization features
US6430405B1 (en) * 1998-12-07 2002-08-06 Motorola, Inc. Method for retrieval of stored telephone numbers in a radio communication device
US7328405B1 (en) * 1998-12-09 2008-02-05 Netscape Communications Corporation Smart browsing providers
USD424542S (en) * 1998-12-18 2000-05-09 Apple Computer, Inc. Composite desktop for a computer display screen
USD424038S (en) * 1998-12-18 2000-05-02 Apple Computer, Inc. Composite desktop for a computer display screen
US7353234B2 (en) 1998-12-30 2008-04-01 Aol Llc, A Delaware Limited Liability Company Customized user interface based on user record information
US7555721B2 (en) * 1998-12-30 2009-06-30 Aol Llc, A Delaware Limited Liability Company Customized user interface
USD424040S (en) * 1999-01-20 2000-05-02 Apple Computer, Inc. Window for a computer display screen
USD423486S (en) * 1999-01-20 2000-04-25 Apple Computer, Inc. Window for a computer display screen
USD426208S (en) * 1999-01-20 2000-06-06 Apple Computer, Inc. Window for a computer display screen
USD424039S (en) * 1999-01-20 2000-05-02 Apple Computer, Inc. Window for a computer display screen
USD426209S (en) * 1999-01-20 2000-06-06 Apple Computer, Inc. Window for a computer display screen
US7904187B2 (en) 1999-02-01 2011-03-08 Hoffberg Steven M Internet appliance system and method
USD433392S (en) * 1999-03-04 2000-11-07 Apple Computer, Inc. Window for a computer display screen
USD425038S (en) * 1999-03-04 2000-05-16 Apple Computer, Inc. Window for a computer display screen
US6224382B1 (en) * 1999-03-30 2001-05-01 Prosoft, Inc. Method and apparatus for developing computer screen layout
WO2000070838A2 (en) * 1999-05-14 2000-11-23 Pivia, Inc. Client-server independent intermediary mechanism
AU3712300A (en) 1999-06-11 2001-01-02 Liberate Technologies Hierarchical open security information delegation and acquisition
US6535229B1 (en) 1999-06-29 2003-03-18 International Business Machines Corporation Graphical user interface for selection of options within mutually exclusive subsets
US9607041B2 (en) * 1999-07-15 2017-03-28 Gula Consulting Limited Liability Company System and method for efficiently accessing internet resources
US7272637B1 (en) * 1999-07-15 2007-09-18 Himmelstein Richard B Communication system and method for efficiently accessing internet resources
EP1238348B1 (en) * 1999-07-15 2004-01-28 Richard B. Himmelstein Communication device for efficiently accessing internet resources
US6760884B1 (en) 1999-08-09 2004-07-06 Internal Research Corporation Interactive memory archive
US6674915B1 (en) 1999-10-07 2004-01-06 Sony Corporation Descriptors adjustment when using steerable pyramid to extract features for content based search
US6538660B1 (en) 1999-11-12 2003-03-25 International Business Machines Corporation Method, system, and program for superimposing data from different application programs
US7929978B2 (en) 1999-12-01 2011-04-19 Genesys Telecommunications Laboratories, Inc. Method and apparatus for providing enhanced communication capability for mobile devices on a virtual private network
WO2001049015A1 (en) * 1999-12-24 2001-07-05 Siemens Ltd A portable symbol
WO2001048633A1 (en) * 1999-12-24 2001-07-05 Telstra New Wave Pty Ltd A virtual token
US6421571B1 (en) * 2000-02-29 2002-07-16 Bently Nevada Corporation Industrial plant asset management system: apparatus and method
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US6633903B1 (en) 2000-03-23 2003-10-14 Monkeymedia, Inc. Method and article of manufacture for seamless integrated searching
AUPQ717700A0 (en) * 2000-04-28 2000-05-18 Canon Kabushiki Kaisha A method of annotating an image
US7111168B2 (en) * 2000-05-01 2006-09-19 Digimarc Corporation Digital watermarking systems
US7949564B1 (en) * 2000-05-31 2011-05-24 Western Digital Technologies, Inc. System and method of receiving advertisement content from advertisers and distributing the advertising content to a network of personal computers
US7712024B2 (en) 2000-06-06 2010-05-04 Microsoft Corporation Application program interfaces for semantically labeling strings and providing actions based on semantically labeled strings
US7770102B1 (en) 2000-06-06 2010-08-03 Microsoft Corporation Method and system for semantically labeling strings and providing actions based on semantically labeled strings
US7421645B2 (en) 2000-06-06 2008-09-02 Microsoft Corporation Method and system for providing electronic commerce actions based on semantically labeled strings
US7716163B2 (en) 2000-06-06 2010-05-11 Microsoft Corporation Method and system for defining semantic categories and actions
US7788602B2 (en) 2000-06-06 2010-08-31 Microsoft Corporation Method and system for providing restricted actions for recognized semantic categories
US7624356B1 (en) * 2000-06-21 2009-11-24 Microsoft Corporation Task-sensitive methods and systems for displaying command sets
DE10038836A1 (de) * 2000-08-04 2002-02-21 Deutsches Krebsforsch Verfahren und Messanordnung zur Bestimmung der Lage einer Rotationsachse eines Körpers sowie Verfahren zum Ausrichten eines Patiententisches
US6810149B1 (en) 2000-08-17 2004-10-26 Eastman Kodak Company Method and system for cataloging images
TW494323B (en) 2000-08-29 2002-07-11 Ibm System and method for locating on a physical document items referenced in another physical document
TW528967B (en) 2000-08-29 2003-04-21 Ibm System and method for locating on a physical document items referenced in an electronic document
JP4063486B2 (ja) * 2000-09-06 2008-03-19 日本電気株式会社 画像検索装置及び方法並びに画像検索プログラムを記録した記憶媒体
DE10110275A1 (de) * 2001-03-02 2002-09-19 Daimler Chrysler Ag Verfahren zur Kennzeichnung von gespeicherter Information
US7778816B2 (en) 2001-04-24 2010-08-17 Microsoft Corporation Method and system for applying input mode bias
US7260771B2 (en) * 2001-04-26 2007-08-21 Fuji Xerox Co., Ltd. Internet-based system for multimedia meeting minutes
JP2002335444A (ja) * 2001-05-08 2002-11-22 Canon Inc マルチ画面表示装置、マルチ画面表示方法、記録媒体、及びプログラム
JP3594187B2 (ja) * 2001-05-16 2004-11-24 ソニー株式会社 情報処理装置および方法、情報提供装置および方法、記録媒体、並びにプログラム
US7076527B2 (en) * 2001-06-14 2006-07-11 Apple Computer, Inc. Method and apparatus for filtering email
US7043560B2 (en) * 2001-06-19 2006-05-09 Nokia, Inc. Dynamic probing and reporting of bit rate information
US20040194021A1 (en) * 2001-09-14 2004-09-30 Fuji Xerox Co., Ltd. Systems and methods for sharing high value annotations
US7171468B2 (en) * 2001-11-10 2007-01-30 Kabushiki Kaisha Toshiba System and method for accessing a document management repository
WO2003042862A2 (en) * 2001-11-13 2003-05-22 International Business Machines Corporation System and method for selecting electronic documents from a physical document and for displaying said electronic documents over said physical document
US7246325B2 (en) 2001-12-20 2007-07-17 Nokia Corporation System and method for functional elements
US20030117378A1 (en) 2001-12-21 2003-06-26 International Business Machines Corporation Device and system for retrieving and displaying handwritten annotations
US20030135647A1 (en) * 2002-01-16 2003-07-17 International Business Machines Corporation Web browser control of telephone directories
US20030140091A1 (en) * 2002-01-16 2003-07-24 International Business Machines Corporation Telephone number capture from Web page
US20040205635A1 (en) * 2002-03-04 2004-10-14 Campagne Associates Displaying data base information as a document metaphor
US7444599B1 (en) 2002-03-14 2008-10-28 Apple Inc. Method and apparatus for controlling a display of a data processing system
US7117450B1 (en) * 2002-03-15 2006-10-03 Apple Computer, Inc. Method and apparatus for determining font attributes
US7170429B2 (en) * 2002-03-15 2007-01-30 Kabushiki Kaisha Toshiba Keypad indicating arrangement including virtual key
US7325194B2 (en) 2002-05-07 2008-01-29 Microsoft Corporation Method, system, and apparatus for converting numbers between measurement systems based upon semantically labeled strings
US7707496B1 (en) 2002-05-09 2010-04-27 Microsoft Corporation Method, system, and apparatus for converting dates between calendars and languages based upon semantically labeled strings
US7707024B2 (en) 2002-05-23 2010-04-27 Microsoft Corporation Method, system, and apparatus for converting currency values based upon semantically labeled strings
US7742048B1 (en) 2002-05-23 2010-06-22 Microsoft Corporation Method, system, and apparatus for converting numbers based upon semantically labeled strings
US7281245B2 (en) 2002-06-05 2007-10-09 Microsoft Corporation Mechanism for downloading software components from a remote source for use by a local software application
US7827546B1 (en) 2002-06-05 2010-11-02 Microsoft Corporation Mechanism for downloading software components from a remote source for use by a local software application
US7356537B2 (en) 2002-06-06 2008-04-08 Microsoft Corporation Providing contextually sensitive tools and help content in computer-generated documents
US8091018B2 (en) * 2002-06-13 2012-01-03 Microsoft Corporation Method and system for creating and implementing dynamic graphic media
US7716676B2 (en) 2002-06-25 2010-05-11 Microsoft Corporation System and method for issuing a message to a program
US7392479B2 (en) 2002-06-27 2008-06-24 Microsoft Corporation System and method for providing namespace related information
US7209915B1 (en) 2002-06-28 2007-04-24 Microsoft Corporation Method, system and apparatus for routing a query to one or more providers
US7739604B1 (en) 2002-09-25 2010-06-15 Apple Inc. Method and apparatus for managing windows
US7574407B2 (en) * 2002-10-10 2009-08-11 International Business Machines Corporation System and method for selecting, ordering and accessing copyrighted information from physical documents
US7783614B2 (en) 2003-02-13 2010-08-24 Microsoft Corporation Linking elements of a document to corresponding fields, queries and/or procedures in a database
US7793233B1 (en) * 2003-03-12 2010-09-07 Microsoft Corporation System and method for customizing note flags
US7454763B2 (en) * 2003-03-26 2008-11-18 Microsoft Corporation System and method for linking page content with a video media file and displaying the links
US7774799B1 (en) 2003-03-26 2010-08-10 Microsoft Corporation System and method for linking page content with a media file and displaying the links
US7913159B2 (en) 2003-03-28 2011-03-22 Microsoft Corporation System and method for real-time validation of structured data files
US7292186B2 (en) * 2003-04-23 2007-11-06 Csi Wireless Inc. Method and system for synchronizing multiple tracking devices for a geo-location system
US7711550B1 (en) 2003-04-29 2010-05-04 Microsoft Corporation Methods and system for recognizing names in a computer-generated document and for providing helpful actions associated with recognized names
US7558841B2 (en) 2003-05-14 2009-07-07 Microsoft Corporation Method, system, and computer-readable medium for communicating results to a data query in a computer network
US9715678B2 (en) 2003-06-26 2017-07-25 Microsoft Technology Licensing, Llc Side-by-side shared calendars
US7310779B2 (en) * 2003-06-26 2007-12-18 International Business Machines Corporation Method for creating and selecting active regions on physical documents
US7739588B2 (en) * 2003-06-27 2010-06-15 Microsoft Corporation Leveraging markup language data for semantically labeling text strings and data and for providing actions based on semantically labeled text strings and data
US7707255B2 (en) 2003-07-01 2010-04-27 Microsoft Corporation Automatic grouping of electronic mail
US7406660B1 (en) 2003-08-01 2008-07-29 Microsoft Corporation Mapping between structured data and a visual surface
US7373603B1 (en) 2003-09-18 2008-05-13 Microsoft Corporation Method and system for providing data reference information
US7418656B1 (en) * 2003-10-03 2008-08-26 Adobe Systems Incorporated Dynamic annotations for electronics documents
US7434157B2 (en) 2003-12-09 2008-10-07 Microsoft Corporation Programmable object model for namespace or schema library support in a software application
US7178102B1 (en) 2003-12-09 2007-02-13 Microsoft Corporation Representing latent data in an extensible markup language document
US7487515B1 (en) 2003-12-09 2009-02-03 Microsoft Corporation Programmable object model for extensible markup language schema validation
US7404195B1 (en) 2003-12-09 2008-07-22 Microsoft Corporation Programmable object model for extensible markup language markup in an application
JP2005202483A (ja) * 2004-01-13 2005-07-28 Sony Corp 情報処理装置および方法、並びにプログラム
US7614007B2 (en) * 2004-01-16 2009-11-03 International Business Machines Corporation Executing multiple file management operations
US7509573B1 (en) 2004-02-17 2009-03-24 Microsoft Corporation Anti-virus security information in an extensible markup language document
US20050182822A1 (en) * 2004-02-17 2005-08-18 Daniel Stuart W. Imaging device with memory device interface
US7948448B2 (en) 2004-04-01 2011-05-24 Polyvision Corporation Portable presentation system and methods for use therewith
US7834819B2 (en) 2004-04-01 2010-11-16 Polyvision Corporation Virtual flip chart method and apparatus
US9552141B2 (en) 2004-06-21 2017-01-24 Apple Inc. Methods and apparatuses for operating a data processing system
US9015621B2 (en) 2004-08-16 2015-04-21 Microsoft Technology Licensing, Llc Command user interface for displaying multiple sections of software functionality controls
US7703036B2 (en) 2004-08-16 2010-04-20 Microsoft Corporation User interface for displaying selectable software functionality controls that are relevant to a selected object
US7895531B2 (en) 2004-08-16 2011-02-22 Microsoft Corporation Floating command object
US8146016B2 (en) 2004-08-16 2012-03-27 Microsoft Corporation User interface for displaying a gallery of formatting options applicable to a selected object
US8255828B2 (en) 2004-08-16 2012-08-28 Microsoft Corporation Command user interface for displaying selectable software functionality controls
US20070118794A1 (en) * 2004-09-08 2007-05-24 Josef Hollander Shared annotation system and method
WO2006029259A2 (en) * 2004-09-08 2006-03-16 Sharedbook Ltd Creating an annotated web page
US7788589B2 (en) * 2004-09-30 2010-08-31 Microsoft Corporation Method and system for improved electronic task flagging and management
US7747966B2 (en) 2004-09-30 2010-06-29 Microsoft Corporation User interface for providing task management and calendar information
US7712049B2 (en) * 2004-09-30 2010-05-04 Microsoft Corporation Two-dimensional radial user interface for computer software applications
US8744852B1 (en) 2004-10-01 2014-06-03 Apple Inc. Spoken interfaces
US7895218B2 (en) 2004-11-09 2011-02-22 Veveo, Inc. Method and system for performing searches for television content using reduced text input
US20070162298A1 (en) * 2005-01-18 2007-07-12 Apple Computer, Inc. Systems and methods for presenting data items
US20070220441A1 (en) * 2005-01-18 2007-09-20 Apple Computer, Inc. Systems and methods for organizing data items
US20110208732A1 (en) 2010-02-24 2011-08-25 Apple Inc. Systems and methods for organizing data items
US7559028B2 (en) * 2005-01-24 2009-07-07 Oracle International Corporation Method and apparatus for user function variable processing system and prompt
US7698650B2 (en) * 2005-06-16 2010-04-13 Xerox Corporation Computerized action tool for managing print parameters, queuing actions and archiving actions for a document output management system
US7788266B2 (en) 2005-08-26 2010-08-31 Veveo, Inc. Method and system for processing ambiguous, multi-term search queries
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9542667B2 (en) 2005-09-09 2017-01-10 Microsoft Technology Licensing, Llc Navigating messages within a thread
US8627222B2 (en) 2005-09-12 2014-01-07 Microsoft Corporation Expanded search and find user interface
US7788590B2 (en) 2005-09-26 2010-08-31 Microsoft Corporation Lightweight reference user interface
US7992085B2 (en) 2005-09-26 2011-08-02 Microsoft Corporation Lightweight reference user interface
US7378540B2 (en) * 2005-10-21 2008-05-27 Catalytic Distillation Technologies Process for producing organic carbonates
US9008075B2 (en) 2005-12-22 2015-04-14 Genesys Telecommunications Laboratories, Inc. System and methods for improving interaction routing performance
US7747557B2 (en) * 2006-01-05 2010-06-29 Microsoft Corporation Application of metadata to documents and document objects via an operating system user interface
US7797638B2 (en) * 2006-01-05 2010-09-14 Microsoft Corporation Application of metadata to documents and document objects via a software application user interface
US20070186177A1 (en) * 2006-02-03 2007-08-09 Yahoo! Inc. Content navigation interfaces and associated methods
US20070186173A1 (en) * 2006-02-03 2007-08-09 Yahoo! Inc. Instant messenger alerts and organization systems
US9880702B2 (en) * 2006-02-03 2018-01-30 Yahoo Holdings, Inc. Content structures and content navigation interfaces
US7657526B2 (en) 2006-03-06 2010-02-02 Veveo, Inc. Methods and systems for selecting and presenting content based on activity level spikes associated with the content
US8055444B2 (en) 2006-04-04 2011-11-08 Yahoo! Inc. Content display and navigation interface
US20070245223A1 (en) * 2006-04-17 2007-10-18 Microsoft Corporation Synchronizing multimedia mobile notes
US20070245229A1 (en) * 2006-04-17 2007-10-18 Microsoft Corporation User experience for multimedia mobile note taking
US7461061B2 (en) 2006-04-20 2008-12-02 Veveo, Inc. User interface methods and systems for selecting and presenting content based on user navigation and selection actions associated with the content
US8387048B1 (en) 2006-04-25 2013-02-26 Parallels IP Holdings GmbH Seamless integration, migration and installation of non-native application into native operating system
US7987432B1 (en) * 2006-04-25 2011-07-26 Parallels Holdings, Ltd. Seamless integration and installation of non-native application into native operating system
US8117554B1 (en) 2006-04-25 2012-02-14 Parallels Holdings, Ltd. Seamless integration of non-native widgets and windows with dynamically scalable resolution into native operating system
US9727989B2 (en) 2006-06-01 2017-08-08 Microsoft Technology Licensing, Llc Modifying and formatting a chart using pictorially provided chart elements
US8594428B2 (en) * 2006-07-25 2013-11-26 Humaneyes Technologies Ltd. Interactive segmentation of images with single scribbles
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US9165040B1 (en) 2006-10-12 2015-10-20 Google Inc. Producing a ranking for pages using distances in a web-link graph
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7761785B2 (en) 2006-11-13 2010-07-20 Microsoft Corporation Providing resilient links
US7707518B2 (en) 2006-11-13 2010-04-27 Microsoft Corporation Linking information
US8060600B1 (en) * 2007-03-02 2011-11-15 Sprint Communications Company L.P. Network element management system
US20080222513A1 (en) * 2007-03-07 2008-09-11 Altep, Inc. Method and System for Rules-Based Tag Management in a Document Review System
US20080235597A1 (en) * 2007-03-19 2008-09-25 Mor Schlesinger Systems and methods of data integration for creating custom books
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
KR101382504B1 (ko) * 2007-05-21 2014-04-07 삼성전자주식회사 매크로 생성 장치 및 방법
US8201103B2 (en) 2007-06-29 2012-06-12 Microsoft Corporation Accessing an out-space user interface for a document editor program
US8484578B2 (en) 2007-06-29 2013-07-09 Microsoft Corporation Communication between a document editor in-space user interface and a document editor out-space user interface
US20090002386A1 (en) * 2007-06-29 2009-01-01 Apple Inc. Graphical Representation Creation Mechanism
US8762880B2 (en) 2007-06-29 2014-06-24 Microsoft Corporation Exposing non-authoring features through document status information in an out-space user interface
US8943539B2 (en) 2007-11-21 2015-01-27 Rovi Guides, Inc. Enabling a friend to remotely modify user data
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US9588781B2 (en) 2008-03-31 2017-03-07 Microsoft Technology Licensing, Llc Associating command surfaces with multiple active components
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US9665850B2 (en) 2008-06-20 2017-05-30 Microsoft Technology Licensing, Llc Synchronized conversation-centric message list and message reading pane
US8402096B2 (en) 2008-06-24 2013-03-19 Microsoft Corporation Automatic conversation techniques
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US9015631B2 (en) * 2008-08-07 2015-04-21 Dassault Systemes Animated icons to preview transformations related to 3D models
EP2340603B1 (en) * 2008-09-23 2020-04-08 Aerovironment inc. Predictive pulse width modulation for an open delta h-bridge driven high efficiency ironless permanent magnet machine
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US8510665B2 (en) 2009-03-16 2013-08-13 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US9046983B2 (en) 2009-05-12 2015-06-02 Microsoft Technology Licensing, Llc Hierarchically-organized control galleries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10463838B2 (en) * 2009-08-19 2019-11-05 Medline Industries, Inc Vascular access methods and devices
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
WO2011089450A2 (en) 2010-01-25 2011-07-28 Andrew Peter Nelson Jerram Apparatuses, methods and systems for a digital conversation management platform
US20110191330A1 (en) 2010-02-04 2011-08-04 Veveo, Inc. Method of and System for Enhanced Content Discovery Based on Network and Device Access Behavior
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8677232B2 (en) 2011-05-31 2014-03-18 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
USD722080S1 (en) 2011-10-12 2015-02-03 Sony Corporation Portion of display panel or screen with an icon
US9600169B2 (en) 2012-02-27 2017-03-21 Yahoo! Inc. Customizable gestures for mobile devices
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US8954890B2 (en) * 2012-04-12 2015-02-10 Supercell Oy System, method and graphical user interface for controlling a game
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9558278B2 (en) 2012-09-11 2017-01-31 Apple Inc. Integrated content recommendation
US9218118B2 (en) 2012-09-11 2015-12-22 Apple Inc. Media player playlist management
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR20140052628A (ko) * 2012-10-25 2014-05-07 삼성전자주식회사 데이터 관리를 위한 방법 및 그 방법을 처리하는 전자 장치
US9101840B2 (en) 2012-12-12 2015-08-11 Empire Technology Development Llc User assembly of lightweight user interface for games
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
AU2014278595B2 (en) 2013-06-13 2017-04-06 Apple Inc. System and method for emergency calls initiated by voice command
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
US10175845B2 (en) * 2013-10-16 2019-01-08 3M Innovative Properties Company Organizing digital notes on a user interface
USD711427S1 (en) * 2013-10-22 2014-08-19 Apple Inc. Display screen or portion thereof with icon
US9898451B2 (en) 2013-11-26 2018-02-20 Adobe Systems Incorporated Content adaptation based on selected reviewer comment
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US20160048492A1 (en) * 2014-06-29 2016-02-18 Emoji 3.0 LLC Platform for internet based graphical communication
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
USD762223S1 (en) * 2014-09-09 2016-07-26 Apple Inc. Display screen or portion thereof with animated graphical user interface
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
USD800758S1 (en) 2014-09-23 2017-10-24 Seasonal Specialties, Llc Computer display screen with graphical user interface for lighting
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
USD791784S1 (en) * 2015-02-20 2017-07-11 Google Inc. Portion of a display panel with a graphical user interface with icons
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
USD788809S1 (en) * 2015-06-22 2017-06-06 Gamblit Gaming, Llc Display screen for a graphical user interface
US10795545B2 (en) * 2015-07-16 2020-10-06 Steven Patrick Pascale Rapid response tabs/computer keyboard key
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10264213B1 (en) 2016-12-15 2019-04-16 Steelcase Inc. Content amplification system and method
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10268669B1 (en) * 2017-01-27 2019-04-23 John C. Allen Intelligent graphical word processing system and method
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10712900B2 (en) * 2018-06-06 2020-07-14 Sony Interactive Entertainment Inc. VR comfort zones used to inform an In-VR GUI editor

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4791556A (en) * 1984-08-29 1988-12-13 Vilkaitis John V Method for operating a computer which searches for operational symbols and executes functions corresponding to the operational symbols in response to user inputted signal
US4931783A (en) * 1988-07-26 1990-06-05 Apple Computer, Inc. Method and apparatus for removable menu window

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10207872A (ja) * 1997-01-16 1998-08-07 Fuji Xerox Co Ltd 電子ファイル装置

Also Published As

Publication number Publication date
EP1338976A3 (en) 2010-01-06
AU654019B2 (en) 1994-10-20
EP0584269A4 (en) 1997-05-02
DE69233142T2 (de) 2004-05-27
AU2007692A (en) 1992-12-30
CA2102910C (en) 2004-09-28
EP0584269B1 (en) 2003-07-30
EP0584269A1 (en) 1994-03-02
WO1992021091A1 (en) 1992-11-26
DE69233142D1 (de) 2003-09-04
US5341293A (en) 1994-08-23
US5202828A (en) 1993-04-13
EP1338976A2 (en) 2003-08-27
CA2102910A1 (en) 1992-11-16

Similar Documents

Publication Publication Date Title
JPH07500197A (ja) プログラマブルユーザインターフェイス要素を有するユーザインターフェイスシステム
US5898434A (en) User interface system having programmable user interface elements
US7392475B1 (en) Method and system for automatic insertion of context information into an application program module
US10366153B2 (en) System and method for customizing note flags
TWI234743B (en) Tool-tip for multimedia files
JPH08510345A (ja) 複合文書におけるコンピュータ/ヒューマンインタフェースシステム
JP2004199408A (ja) 文書処理方法、情報表示処理方法、情報表示処理システム、管理サーバ、クライアント端末、プログラム
WO2002023350A1 (fr) Technique d'affichage par superposition d'informations supplementaires sur un ecran d'affichage
JP2009093420A (ja) 情報処理装置及びプログラム
Batty Smartphone screenwriting: Creativity, technology, and screenplays-on-the-go
JPS59142628A (ja) メモ書きを作成・管理する文書作成機
Lowe Word 2010 All-in-one for Dummies
Johnson Brilliant Mac OS X Leopard
JPH11345187A (ja) 送信用電子メールアドレス生成方法及び送信用電子メールアドレス生成プログラムを記録した記録媒体
Johnson Brilliant Mac OS X Snow Leopard
Jacobs et al. Power OneNote
Beighley OS X Mavericks: Peachpit Learning Series
Thomas et al. Ubuntu Replacements for Windows Programs
Lowe Word 2003 All-in-one desk Reference for Dummies
Johnson Brilliant Microsoft Office 2007
Johnson Microsoft Windows Vista on Demand
Pomeranz PLOD: Keep Track of What You're Doing.
McFedries Switching to a Mac Portable Genius
Schwartz Microsoft Office 2010 for Windows: Visual QuickStart
Johnson Brilliant Windows 7

Legal Events

Date Code Title Description
A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20040318