JPH06502506A - 技術装置とのバリアブル・ダイアローグを実施する方法および装置 - Google Patents

技術装置とのバリアブル・ダイアローグを実施する方法および装置

Info

Publication number
JPH06502506A
JPH06502506A JP3512739A JP51273991A JPH06502506A JP H06502506 A JPH06502506 A JP H06502506A JP 3512739 A JP3512739 A JP 3512739A JP 51273991 A JP51273991 A JP 51273991A JP H06502506 A JPH06502506 A JP H06502506A
Authority
JP
Japan
Prior art keywords
input
dialogue
user
screen
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP3512739A
Other languages
English (en)
Other versions
JP3255912B2 (ja
Inventor
ガイザー,ゲオルク
Original Assignee
ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング filed Critical ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング
Publication of JPH06502506A publication Critical patent/JPH06502506A/ja
Application granted granted Critical
Publication of JP3255912B2 publication Critical patent/JP3255912B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/247Telephone sets including user guidance or feature selection means facilitating their use
    • H04M1/2477Telephone sets including user guidance or feature selection means facilitating their use for selecting a function from a menu display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/26Devices for calling a subscriber
    • H04M1/27Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/27467Methods of retrieving data
    • H04M1/27475Methods of retrieving data using interactive graphical means or pictorial representations

Abstract

(57)【要約】本公報は電子出願前の出願データであるため要約のデータは記録されません。

Description

【発明の詳細な説明】 技術装置とのバリアプル・ダイアローブを実施する方法および装置 本発明は、ユーザと、技術装置、例えば遠隔通信端末装置、車両のナビゲーショ ン装置またはビデオレコーダとのダイアローブを処理する方法および装置に関し 、これによりダイアローブの、ユーザの要求(例えば予備知識、練習)に対する 整合が可能になる。ダイアローブとしてここでは、ユーザと技術装置との間の相 互の情報交換をいう。ここでは、装置の機能が少なくとも数多くのユーザに対し て問題になるような広範かつ複雑な装置を対象としている。
従来の技術 ユーザにとって技術装置の使い易さは、ユーザと装置との間のダイアローブの形 態によって決められる。
技術装置のユーザは予備知識、能力、練習、好みなど種々の点において相異して いる。同一のユーザでも、異なった時点で装置を操作するとき、異なった反応を 示す。例えば熟練したユーザでも比較的長い休止期間の後では再び未熟なユーザ の状態に戻る可能性がある未熟なユーザが熟練したユーザとは別の形態のダイア ローブを必要とすることは知られている。更に基本的に、2つの大別できるユー ザに対するダイアローブ形態がどのようなものであるかわかっている。未熟なユ ーザは段階的なガイドを要求する(シリアル・ダイアローブ)。更に未熟なユー ザには大抵、装置の全体の機能およびそれにより解決される課題がどのようにな っているのかを伝えるべきである。これに対して熟練したユーザは、自分にはわ かっている全体の機能に早くアクセスしたい(パラレル・ダイアローブ)。従っ て未熟なユーザには、個人指導および補助機能が補足されているメニューダイア ローブが適当なダイアローブ形態であり、一方熟練したユーザは機能キーダイア ローブが一層ふされしい。
未熟なユーザの要求にも熟練したユーザの要求にも応える形式のダイアローブは ない。その結果として、ダイアローブは、固定したものではなくて、ダイアロー ブをユーザの要求に整合することによって、フレキシブルに構成すべきである。
ダイアローブを、ユーザの要求に整合する2つの方法が公知である:適応可能な ダイアローブおよび適応形ダイアローブである。適応可能なダイアローブでは、 ユーザは、独自の判断によってダイアローブの形態に影響を与えて、ダイアロー ブ形態を自分の要求に整合させるようにする。装置のスイッチインの際に有効に なるダイアローブのプリセット(“デフォルト”)は、支援的に作用することが できる。公知の方法は、ユーザが、例えば字体、文字サイズ、ウィンドウの寸法 を設定することができる所謂ユーザプロフィールである。これに対して適応形ダ イアローブではこのような整合は、ユーザとは無関係に自動的に行われる。後者 の整合形態に対する前提条件は、技術装置においてユーザに関する知識が使用可 能であることである。適応形ダイアローブの形態は研究の対象でありかつ以下に は考察しない。
マン・マシーン・ダイアローブの部分領域、情報のスクリーン上での表示に対し て、Furnasは1986年に魚眼組織によって適応可能な表示形態を提案し ている。魚眼組織の目的は、唯一の表示形態によって、スクリーン上での局所的 なディテールの表示とグローバルなコンテキストの表示との間に釣り合いのとれ た関係を見つけることである。極度の広角レンズ(“魚眼レンズ)に類似して、 観察の中心において(例えば瞬時的な固定点の回りにおいて)、沢山のディテー ル表示が存在するが、中心からの距離が増大するに従ってディテールの程度を低 下して表示することによって、周辺″領域”の表示も断念しない。
魚眼組織を式で表すために、Furnasは1986年に、2次元の情報構造の それぞれの要素の関連性(Relevanz)を決める関数を定義した。その場 合この関連性に基づいて、要素が指示されるかどうかが決定される。関連性は、 2つの成分、即ち先天的な重要さの評価と距離評価とから成っている。関連性関 数の加算式4式%: ただしR(x、y : xe、ye)は、瞬時の固定点が(Xs、Ym)である とき、点(x、y)の関連性の度合を指示する関連性関数である。W(x、y) は、点(x、y)の先天的な重要さでありかつD(x−x、。
V To)は、点(x、y)の重要さが固定点(X、。
yo)からの距離が増大するに従ってどのように低減するかを示すものである。
ここでは考察の中心を固定点によって表すことができる。同様距離評価は幾何学 的な距離のみならず、論理的な距離にも基づいても行うことができる。関連性の この定義は、オーディナル・スケール・レベルにのみ基づいた重要さの評価およ び距離評価を要求する。
光学指示部における表示に対しては、しきい値kが導入され、かつ R(x、y;χ。、Yo) >k (2)を満足する点のみが指示される。
次に魚眼原理をツリー構造に基づいて説明する。ツリー構造では、与えられた固 定点X、における距離評価値D(X、X6)はツリーにおけるXとX、との間の 距離d(x、xo)として生じる。先天的な重要さ評価値W(x)は、ツリー構 造の根Wからの距離−d(X、W)である。関連性関数として R(x ; xo)=−d(x、w)−d(x、xo)(3)が生じる。
しきい値にの選択によって、種々の大きさの魚眼表示が得られる。従ってしきい 値kによって、ツリー構造から選択される情報の範囲が影響を受ける。選択され た情報の範囲を以下、視野の大きさと称する。この選択は、先天的な重要さおよ び瞬時の固定点からの距離に依存して生じる。しきい値にの池に、固定点の選択 によって、情報提供の整合のための第2の方法が提供される。
確かに情報の魚眼組織によって、情報を適応可能に表示するための方法が提供さ れるが、表示の他に、ユーザによる情報の入力も含むダイアローブ全体を適応可 能に構成する方法はない。更に、別の重要な要求として、ユーザの徐々の変化、 例えば未熟な状態から熟練した状態への変化を支援するために、整合可能なダイ アローブの顕著な形態間で、突然の移行ではなくて、滑らかな少な(とも段階的 な移行が行われなければならないということがある。
発明の説明 本発明によれば、特定のダイアローブ形態間の段階的な移行を有する適応可能な ダイアローブの実現を可能にした方法およびこの方法を実施する装置が提案され る。本発明の基礎は、情報の表示に対する上述の″魚眼原理°である。
・技術装置の提供される機能は、ツリー構造として表示される。それ故に、ユー ザによって制御される方法および装置をダイアローブの整合のための発展させる ために、情報表示のために提案されている魚眼原理を使用することができる。ユ ーザは、整合のために2つの自由度を有している。即ち並列に提供されかつアク セス可能な機能の範囲(視野の広がり)および瞬時の関心の重心の位1f(固定 点)。固定点の位置は、利用の際に最も顛繁に生じる領域へのプリセットによっ て設定することができる。別の形式のプリセットは、固定点が指向している関数 のみを提供するために、しきい値にの出来るだけ高い値の選択である。このよう にして、未熟なユーザが考慮される。というのは未熟なユーザは非常に簡単なダ イアローブ形態しか実施できないからである。ユーザは自分の要求にダイアロー ブを後から整合するために、固定点に対する入力素子およびしきい値kに対する 入力素子を必要とする。
第1図には、適応可能なダイアローブ系がブロックにて示されている。スクリー ン1に、接触入力部2によって付勢することができる機能およびその接触領域が 表示される。ダイアローブ制御ユニット3は、表示すべき情報4および入力され た情報5を処理する。更に、この制御ユニットは、技術装置7との情報交換6を 制御する。ユーザは入力素子8を用いて、しきい値kを変化することによって視 野領域の相対的な大きさを指示し、これによりダイアローブ制御ユニット3によ って表示可能にされる機能の範囲を選択する。
発明の効果 ユーザは、自分の希望に相応して、並列に提供されかつアクセス可能な機能の広 がりを決定することができる。未熟なユーザにとって、ダイアローブの開始時に 、最も頻繁に必要となる基本機能をプリセットすることによって、装置の利用の 簡単化された第1歩が得られる。その先天的な重要さおよび瞬時の関心の重心か らのその距離に依存してfrWでない機能を消去することによって、ダイアロー ブの単純化が実現される。
機能の消去の別の利点は、未熟なユーザに当該ユーザがそれまで知らない、機能 の利用に対するコンセプトを伝えかつ当該ユーザをその利用の際に支援する情報 を指示するスペースが作られる点にある。ユーザが視野の大きさを段階的に高め ることによって付加的な機能を取り入れることができるようにしたことで、習熟 するに従ってユーザの側で発展が促進される。熟練したユーザは、大きな視野の 選択によって並列に提供される機能に任意にアクセスできるという利点を有する 。他方において習熟したユーザは、やり方を失念した場合再び視野を狭めかつ段 階的に拡張していくことができる。ユーザが装置の利用の開始時に見い出したい 固定点をユーザが決定することができる、最初の固定点を選択するための別個の 入力素子を設けることができる。確かにこのために、ユーザは装置にそのことを 申告することが必要である。
実施例 次に実施例として、電話とのダイアローブを説明する。第2a図には、ダイアロ ーブ・ツリーが示されている。固定の固定点として引き続き、外部での番号選択 が採用される。第2b図には距離評価が示されており、第2C図には重要さの評 価が示されている。第2d図には、そこから生じる関連性評価が示されている。
第2e図ないし第2g図には、しきい値に=−6゜−s、−ioの選択により生 じる魚眼表示が示されている。この魚眼表示の、適応可能なダイアローブへの変 換は、第38図ないし第3C図に示されている。第3a図ないし第3C図に示さ れた実施例による適応可能なダイアローブの実施に対する前提条件は、フレキシ ブルな表示部、例えばスクリーンであり、かつフレキシブルな入力、例えば接触 入力である。ラスク化された領域は入力素子、例えば接触スクリーンの接触領域 を表す。視野の大きさの変化に対する入力素子の記号として、′習熟度“が選択 された。これらダイアローブビュー間の切換は、この入力素子によって行われる 。入力装置別の実施例は、スクリーン上での瞬時の配置が指示されるプログラム 可能なキーである。固定点は、機能の選択によって決まってくる。装置の後の再 利用に対する特定の固定点の記憶は、別個の、示されていない入力素子によって 行うことができる。
文献 Furnas、 G、t、: Generalized Fishueye ViewsHuman Fact ors jn Cotxputing Systems−III、 Proc。
of the CHV86 Conference、 Boston、 M^、  USA、^pri113−17.1986.16−23゜ Fig、:L 電話 rig、 2a F3: Dienste F26二 N−Ta5teF4: 5peicher n F27 二 5−Ta5teF4: Nummer F’28: Numm erF6: Namen F29: O F’7: Kurz F30: KennzahlF8: Direkt F3 1: U−TasteFil: R41ckruf F34: Namenta steF12: Weitergabe F’35: T−Ta5teF21:  Nummer F36: NummerF14: Name F37: Nu mmerF15: Termin F38: KennzahlFIL6: 1 ntern F39: NummerF17: extern F40: Uh rzeitF18: Namentaste F41: 5−Ta5teF21 : ★14 F42: NummerF20: Ta5te F43: N−T a5teF21: 5−Taste F44: 5−Ta5teF21: Wh −Taste F45: 5l−Ta5teF21: R−Taste Fig、2a (Forts、) Ir1g、2b Fig、2c 電 話 番号 番号 内線 外線 番号 Fig、 2f 番号 rig、 2g 1)野 履 香 磐 告

Claims (1)

  1. 【特許請求の範囲】 1.指示部と入力素子を用いた入力部とを有する技術装置とのバリアブル・ダイ アローグの実施方法において、 1つまたは複数の多段の入力素子を用いた入力操作によって、並列に表示されか つアクセス可能な機能の広がりが設定可能であり、かつ 前記並列に提供される機能は、次式 R(x,y;x6,yo)=W(x,y)−D(x−Xo,y−yo)ただしR =関連性関数 Xo,yo=固定点の座標 W=点(x,y)における重要さ D=重要さの減少 に従って、所望の情報または技術装置の機能に依存している ことを特徴とするバリアブル・ダイアローグの実施方法。 2.指示部としてスクリーンを使用しかつ入力部として接触スクリーンを使用す る 請求項1記載のバリアブル・ダイアローグの実施方法。 3.指示部としてスクリーンを使用しかつ入力部としてプログラム可能なキーを 使用する 請求項1記載のバリアブル・ダイアローグの実施方4.ユーザは、1つの多段の 入力素子を用いて、視野の広がり、従って並列に提供される機能範囲の範囲を選 択することができる 請求項1から3までのいずれか1項記載のバリアブル・ダイアローグの実施方法 。 5.ユーザは、入力素子を用いて、該ユーザが装置の再利用の際に見い出したい 固定点を決定することができる 請求項1から4までのいずれか1項記載のバリアブル・ダイアローグの実施方法 。 6.スクリーンおよび入力素子を備えた、請求項1から5までのいずれか1項記 載の方法を実施するための装置において、 スクリーン上に表示すべき情報(4)およびスクリーン入力部(2)またはキー ボード装置に入力された情報(5)を処理しかつ技術装置(7)との情報交換を 制御するダイアローグ制御ユニット(3)が設けられており、かつ しきい値発生器を介してダイアローグの実施を範囲に応じて制御する入力素子( 8)が設けられていることを特徴とするバリアブル・ダイアローグを実施する装 置。
JP51273991A 1990-07-21 1991-07-18 技術装置とのバリアブル・ダイアローグを実施する方法および装置 Expired - Fee Related JP3255912B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE4023318A DE4023318A1 (de) 1990-07-21 1990-07-21 Verfahren zur durchfuehrung eines variablen dialogs mit technischen geraeten
DE4023318.9 1990-07-21
PCT/EP1991/001355 WO1992001983A1 (de) 1990-07-21 1991-07-18 Verfahren zur durchführung eines variablen dialogs mit technischen geräten

Publications (2)

Publication Number Publication Date
JPH06502506A true JPH06502506A (ja) 1994-03-17
JP3255912B2 JP3255912B2 (ja) 2002-02-12

Family

ID=6410813

Family Applications (1)

Application Number Title Priority Date Filing Date
JP51273991A Expired - Fee Related JP3255912B2 (ja) 1990-07-21 1991-07-18 技術装置とのバリアブル・ダイアローグを実施する方法および装置

Country Status (6)

Country Link
US (1) US5459488A (ja)
EP (1) EP0540570B1 (ja)
JP (1) JP3255912B2 (ja)
DE (2) DE4023318A1 (ja)
ES (1) ES2064114T3 (ja)
WO (1) WO1992001983A1 (ja)

Families Citing this family (163)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3488525B2 (ja) * 1994-12-13 2004-01-19 富士通株式会社 ヘルプ画面表示方法およびヘルプ画面表示装置
US5900863A (en) * 1995-03-16 1999-05-04 Kabushiki Kaisha Toshiba Method and apparatus for controlling computer without touching input device
EP0794647A1 (fr) * 1996-03-06 1997-09-10 Koninklijke Philips Electronics N.V. Téléphone à écran et procédé de gestion de menu d'un téléphone à écran
JP3755204B2 (ja) * 1996-09-20 2006-03-15 カシオ計算機株式会社 通信装置、通信制御方法及び通信システム
DE19752055B4 (de) * 1997-11-25 2005-10-13 Bayerische Motoren Werke Ag Vorrichtung mit einem Betätigungsglied und einer Bildschirmanzeige
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
US6326952B1 (en) 1998-04-24 2001-12-04 International Business Machines Corporation Method and apparatus for displaying and retrieving input on visual displays
US6185582B1 (en) 1998-06-17 2001-02-06 Xerox Corporation Spreadsheet view enhancement system
US6256649B1 (en) 1998-06-17 2001-07-03 Xerox Corporation Animated spreadsheet for dynamic display of constraint graphs
US6584479B2 (en) 1998-06-17 2003-06-24 Xerox Corporation Overlay presentation of textual and graphical annotations
US6230170B1 (en) 1998-06-17 2001-05-08 Xerox Corporation Spatial morphing of text to accommodate annotations
US6407755B1 (en) 1999-03-19 2002-06-18 Eastman Kodak Company Method for selectively or automatically matching the characteristics of a display to a language
GB2352858A (en) * 1999-07-29 2001-02-07 Ibm Television equipped with a touch sensitive display
DE19936257A1 (de) * 1999-07-31 2001-02-01 Georg Geiser Berührungssensitiver Mehrfachdrehknopf für adaptierbares Dialogverfahren
US6745328B1 (en) 1999-10-23 2004-06-01 Lockstream Corporation Encryption using a user-known and personally valuable key to deter key sharing
US6683954B1 (en) 1999-10-23 2004-01-27 Lockstream Corporation Key encryption using a client-unique additional key for fraud prevention
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6778992B1 (en) 1999-12-21 2004-08-17 Lockstream Corporation Flexible and hierarchical user interfaces defined using a data definition language
US6686938B1 (en) * 2000-01-05 2004-02-03 Apple Computer, Inc. Method and system for providing an embedded application toolbar
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
DE10049848A1 (de) * 2000-10-09 2002-04-11 Thomson Brandt Gmbh Gerät der Unterhaltungselektronik
CA2328795A1 (en) 2000-12-19 2002-06-19 Advanced Numerical Methods Ltd. Applications and performance enhancements for detail-in-context viewing technology
JP4581264B2 (ja) * 2001-02-20 2010-11-17 船井電機株式会社 デジタル/アナログ放送受信装置
WO2002071679A2 (en) * 2001-03-02 2002-09-12 Lockstream Corporation Theft resistant graphics
US8416266B2 (en) 2001-05-03 2013-04-09 Noregin Assetts N.V., L.L.C. Interacting with detail-in-context presentations
CA2345803A1 (en) 2001-05-03 2002-11-03 Idelix Software Inc. User interface elements for pliable display technology implementations
US7213214B2 (en) 2001-06-12 2007-05-01 Idelix Software Inc. Graphical user interface with zoom for detail-in-context presentations
US9760235B2 (en) 2001-06-12 2017-09-12 Callahan Cellular L.L.C. Lens-defined adjustment of displays
US7084886B2 (en) 2002-07-16 2006-08-01 Idelix Software Inc. Using detail-in-context lenses for accurate digital image cropping and measurement
CA2361341A1 (en) 2001-11-07 2003-05-07 Idelix Software Inc. Use of detail-in-context presentation on stereoscopically paired images
CA2370752A1 (en) 2002-02-05 2003-08-05 Idelix Software Inc. Fast rendering of pyramid lens distorted raster images
US8120624B2 (en) 2002-07-16 2012-02-21 Noregin Assets N.V. L.L.C. Detail-in-context lenses for digital image cropping, measurement and online maps
CA2393887A1 (en) 2002-07-17 2004-01-17 Idelix Software Inc. Enhancements to user interface for detail-in-context data presentation
CA2406131A1 (en) 2002-09-30 2004-03-30 Idelix Software Inc. A graphical user interface using detail-in-context folding
CA2449888A1 (en) 2003-11-17 2005-05-17 Idelix Software Inc. Navigating large images using detail-in-context fisheye rendering techniques
CA2411898A1 (en) 2002-11-15 2004-05-15 Idelix Software Inc. A method and system for controlling access to detail-in-context presentations
FR2861206B1 (fr) * 2003-10-16 2006-11-24 Michel Rissons Procede et dispositif d'adaptation automatique d'affichage
US7486302B2 (en) * 2004-04-14 2009-02-03 Noregin Assets N.V., L.L.C. Fisheye lens graphical user interfaces
US8106927B2 (en) 2004-05-28 2012-01-31 Noregin Assets N.V., L.L.C. Graphical user interfaces and occlusion prevention for fisheye lenses with line segment foci
US9317945B2 (en) 2004-06-23 2016-04-19 Callahan Cellular L.L.C. Detail-in-context lenses for navigation
US7714859B2 (en) 2004-09-03 2010-05-11 Shoemaker Garth B D Occlusion reduction and magnification for multidimensional data presentations
US7995078B2 (en) 2004-09-29 2011-08-09 Noregin Assets, N.V., L.L.C. Compound lenses for multi-source data presentation
US8744852B1 (en) 2004-10-01 2014-06-03 Apple Inc. Spoken interfaces
US20060109242A1 (en) * 2004-11-19 2006-05-25 Simpkins Daniel S User interface for impaired users
US7580036B2 (en) 2005-04-13 2009-08-25 Catherine Montagnese Detail-in-context terrain displacement algorithm with optimizations
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8031206B2 (en) 2005-10-12 2011-10-04 Noregin Assets N.V., L.L.C. Method and system for generating pyramid fisheye lens detail-in-context presentations
US7983473B2 (en) 2006-04-11 2011-07-19 Noregin Assets, N.V., L.L.C. Transparency adjustment of a presentation
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8570278B2 (en) 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7856605B2 (en) 2006-10-26 2010-12-21 Apple Inc. Method, system, and graphical user interface for positioning an insertion marker in a touch screen display
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9026938B2 (en) 2007-07-26 2015-05-05 Noregin Assets N.V., L.L.C. Dynamic detail-in-context user interface for application access and content access on electronic displays
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
CA2740401C (en) * 2008-09-23 2014-11-18 Aerovironment, Inc. Predictive pulse width modulation for an open delta h-bridge driven high efficiency ironless permanent magnet machine
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US8255830B2 (en) 2009-03-16 2012-08-28 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
WO2011017747A1 (en) * 2009-08-11 2011-02-17 Someones Group Intellectual Property Holdings Pty Ltd Navigating a network of options
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
WO2011089450A2 (en) 2010-01-25 2011-07-28 Andrew Peter Nelson Jerram Apparatuses, methods and systems for a digital conversation management platform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8677232B2 (en) 2011-05-31 2014-03-18 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144949A2 (en) 2013-03-15 2014-09-18 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3008641A1 (en) 2013-06-09 2016-04-20 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
CN106471570B (zh) 2014-05-30 2019-10-01 苹果公司 多命令单一话语输入方法
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4763117A (en) * 1983-03-23 1988-08-09 Tektronix, Inc. Measurement instruments with multiple operation levels
DE3806293A1 (de) * 1988-02-27 1989-09-07 Standard Elektrik Lorenz Ag Verfahren und schaltungsanordnung zur benutzerfuehrung eines endgeraetes der nachrichten- oder datentechnik

Also Published As

Publication number Publication date
DE59103295D1 (de) 1994-11-24
DE4023318A1 (de) 1992-02-20
EP0540570A1 (de) 1993-05-12
JP3255912B2 (ja) 2002-02-12
WO1992001983A1 (de) 1992-02-06
US5459488A (en) 1995-10-17
EP0540570B1 (de) 1994-10-19
ES2064114T3 (es) 1995-01-16

Similar Documents

Publication Publication Date Title
JPH06502506A (ja) 技術装置とのバリアブル・ダイアローグを実施する方法および装置
KR100923973B1 (ko) 장치에 디지털 비쥬얼 콘텐츠를 보여주기 위한 시스템 및방법
EP2284798B1 (en) Method and apparatus for virtual object based image processing
US20150346952A1 (en) Control center refinements
KR100761809B1 (ko) 휴대 단말기 및 휴대 단말기의 대기화면 표시 방법
DE202008018005U1 (de) Anwendungsmenü-Benutzerschnittstelle
WO2006014332A2 (en) Method and system for more precisely linking metadata and digital images
CN106774937A (zh) 一种增强现实技术中的图像交互方法及其装置
CN112114722B (zh) 一种悬浮窗控制方法和系统
TWI292551B (en) Spotlight cursor
CN109731329A (zh) 一种针对游戏中虚拟组件的放置位置的确定方法和装置
CN108133124B (zh) 一种用于应用程序获取系统权限方法及设备
US6054996A (en) Data processing system and method for controlling a view of a realistic object in a display device
CN110377220B (zh) 一种指令响应方法、装置、存储介质及电子设备
US20200389755A1 (en) An apparatus and associated methods for presentation of captured spatial audio content
CN115640092A (zh) 界面显示方法、装置、电子设备和可读存储介质
US6304276B1 (en) Data processing device and data processing method
US9530183B1 (en) Elastic navigation for fixed layout content
CN110603516B (zh) 计算机图形用户界面的个性化可感知性设置
JPH03198119A (ja) 情報処理装置
JPS5820437B2 (ja) 図形の拡大表示処理方式
JPH052224B2 (ja)
JP2005216170A (ja) 携帯端末装置および情報処理装置の入力処理方法
CN114077463A (zh) 一种输入法界面显示方法、装置和电子设备
US20190286304A1 (en) System and Method for Controlling the Graphic User Interface Elements

Legal Events

Date Code Title Description
R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071130

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081130

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees