JP4733895B2 - ハンドヘルド式装置用のハンド−イヤユーザインターフェース - Google Patents

ハンドヘルド式装置用のハンド−イヤユーザインターフェース Download PDF

Info

Publication number
JP4733895B2
JP4733895B2 JP2001545939A JP2001545939A JP4733895B2 JP 4733895 B2 JP4733895 B2 JP 4733895B2 JP 2001545939 A JP2001545939 A JP 2001545939A JP 2001545939 A JP2001545939 A JP 2001545939A JP 4733895 B2 JP4733895 B2 JP 4733895B2
Authority
JP
Japan
Prior art keywords
user
options
feedback
auditory feedback
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001545939A
Other languages
English (en)
Other versions
JP2003517674A (ja
Inventor
ブルサイス，ウィレム
シュテイン，ユージーン
クサノ，ミエコ
ランバーン，ロバート
ホルツハウザー，リサ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2003517674A publication Critical patent/JP2003517674A/ja
Application granted granted Critical
Publication of JP4733895B2 publication Critical patent/JP4733895B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/02—Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/26—Devices for calling a subscriber
    • H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/27467—Methods of retrieving data
    • H04M1/2747—Scrolling on a display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/56—Arrangements for indicating or recording the called number at the calling subscriber's set
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/23—Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof
    • H04M1/233—Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof including a pointing device, e.g. roller key, track ball, rocker switch or joystick
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/56—Details of telephonic subscriber devices including a user help function

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Description

【０００１】
［発明の属する技術分野］
本発明は、特に、移動式電話機、ポケットベル並びに他の移動式通信装置、パームトップコンピュータ並びにパーソナルデジタルアシスタント（ＰＤＡ）、遠隔制御器、音楽のような予め記録された情報コンテンツを再生する装置等のような情報処理装置用のユーザインターフェースに関する。本発明は特に、ユーザが機器又は装置との相互作用に注意を払うことに関し制約を受ける環境において使用されるハンドヘルド式装置及び機器に関する。
【０００２】
［従来の技術］
現行のハンドヘルド式装置と相互作用する際に、ユーザは一般的に、例えば、装置のメニュからのオプションを選択するために装置のユーザインターフェースを観ることが必要となる。例えば、一般的な移動式電話機、ＰＤＡ、又は遠隔制御器は、所望の英数字を入力する又はメニュオプションを選択するために適当な一連のキー又はアイコンを選択する際に、ユーザがキーボード又はタッチスクリーンを観ることを要求する。このことは、特に、例えば、ユーザが運転中である場合、何か他のものに集中していなければならない場合、又は十分な光のない環境で動作する場合に非常に望ましくない。更に、視覚障害を有するユーザはこのような機器と適当に相互作用することから除外されてしまう。
【０００３】
［発明の概要］
本発明は、１つの手のみを使用し、且つ、装置を見ることなくメニュからオプションを選択することを可能にするハンドヘルド式装置を提供する。この為に、本発明の情報処理装置は、ユーザが装置と相互作用することを可能にするユーザインターフェースを含む。
【０００４】
ユーザインターフェースは、ユーザがオプションの組をナビゲートすることを可能にするナビゲート入力と、ユーザがナビゲートしている際に、オプションのうちの選択可能な各オプションについてユーザに聴覚フィードバックを供給するフィードバック出力と、フィードバックに基づいてユーザが現在のオプションを選択することを可能にする有効化入力とを含む。
【０００５】
移動式電話機のような本発明の情報処理装置のハンドヘルドバージョンは、オプションの段階的な又は循環性のアレイをユーザが走査することを可能にする指動輪又は別のステップスルー構成要素を有することが好適である。各オプションは、指動輪を１ノッチ分上に又は下に回転させると再生される各オーディオ出力によって表される。これによってユーザが１つの手で、装置を観ることなくオプションを選択することが可能となる。これは更に、パーソナライズされた名簿から電話をかけるために数字を入力するためのキーパッドが必要でなくなるので、従来の移動式電話機のフォームファクタよりも小さいフォームファクタを可能にする。
【０００６】
本願に参考文書として組込まれる特許文書を以下に示す。
−「PDA HAS WIRELESS MODEM FOR REMOTE CONTROL VIA THE INTERNET」についてJoost Kemink及びRichard Sagarに対し１９９９年１０月２７日に出願された米国出願番号０９／４２７，８２１。この文書は、インターネット及びローカルホームサーバを介しＣＥ装置の遠隔制御を可能にするよう無線モデムと組合されるＰＤＡに関する。
−「INTERNET-BASED SERVICE FOR UPDATING A PROGRAMMABLE CONTROL DEVICE」についてJoost Keminkに対し１９９９年５月１３日に出願された米国出願番号０９／４３４，１５５。この文書は、プログラマブル制御装置を更新するためのインターネットに基づいたサービスに関する。インターネットサイトは、グラフィックユーザインターフェース（ＧＵＩ）としてプログラマブル制御装置にダウンロードすることが可能な電気製品に依存する制御及び特徴オプション情報へのリンクを有する。ユーザインターフェースは、ユーザが容易にターゲット電気製品を特定するようサイトに設けられ、その後、そのターゲット電気製品に対し利用可能であるインターフェース及び制御情報を選択的にダウンロードする。インターネットサイトは更に、ユーザの制御可能な機器の在庫に基づいてインターフェースを供給するシステムインテグレータ、便利であると思った構成及びマクロを共有するホビイスト（hobbyist）等のような構成及びマクロの他のプロバイダへのリンクも含む。
−「CUSTOMIZED UPGRADING OF INTERNET-ENABLED DEVICES BASED ON USER-PROFILE」についてAdrian Turner、Simon Pearce、David Eves、及びAllan Timmsに対し１９９８年９月２５日に出願された米国出願番号０９／１６０，４９０、及び、「UPGRADING OF SYNERGETIC ASPECTS OF HOME NETWORKS」についてEugene Shteynに対し１９９８年１１月１０日に出願された米国出願番号０９／１８９，５３５は共に、ネットワークによって可能にされる消費者電子装置の特定のエンドユーザのユーザプロファイルと、この種類の装置の新しい技術的特徴のデータベースと維持するサーバシステムに関する。プロファイルと新しい技術特徴との間にマッチがあり、ユーザが更新又はセールオファーを受信することを希望すると、ユーザはネットワークから特徴を得るようオプションが知らされる。ユーザに、ユーザの装置の使用法の更なる可能性又は拡張を伝えるために装置の一部の間で相乗効果が検出される。
【０００７】
本発明を、添付図面を参照し例示的に説明する。
【０００８】
図面を通し、同じ符号は同様の又は対応する特徴を示す。
【０００９】
［発明の実施の形態］
図１は本発明の移動式電話機１００を示すブロック図である。電話機１００は、ユーザが電話機１００と相互作用することを可能にするユーザインターフェース（ＵＩ）１０２と、電話機の無線通信機能を行う通信部１０４とを含む。通信部１０４は周知であり、従ってここでは詳細に説明しない。ＵＩ１０２は、ユーザがメモリ１０８に格納されるオプションの組をナビゲートすることを可能にするナビゲート入力１０６を有する。オプションには、例えば、通常の電話機キーパッド上にあるような数字、パーソナライズ化された名簿に配置される名前が含まれ、以下により詳細に説明される。ＵＩ１０２は、ユーザがナビゲート入力１０６を操作する際にオプションが示されると聴覚フィードバックを与えるフィードバック出力１１０を有する。ＵＩ１０２は、更に、ユーザが聴覚フィードバックの際にオプションを有効にすることを可能にする有効化入力１１２を有する。特定のオプションを有効にすることによって、その特定のオプションがバッファ１１４に格納される。バッファのコンテンツは、通信部１０４用の入力データとして作用する。ナビゲート入力及び有効化入力はプロセッサ１１６に接続される。プロセッサ１１６は、適当な変換器（図示せず）を介し入力１０６及び１１２から入力信号を受信する。回転式の入力装置の例は、例えば、本願に参考文書として組み込まれる米国特許第５，７０３，６６１号を参照されたい。多くの他の実施例が従来において既知である。プロセッサ１１６は、入力信号に基づいてメモリ１０８、フィードバック出力１１０、及びバッファ１１４に制御信号を供給する。
【００１０】
本実施例では、ナビゲート入力１０６は、以下に説明される段階的走査及び循環的な走査を有するデシジョントリーが組合され、段階的な方法、循環的な方法、又はより洗練された方法でオプションを走査するようユーザが前後に回転させることが可能である指動輪又は他の回転式の構成要素を有する。有効化入力１１２は、本実施例では１つのキーを含む。別の実施例では、入力１０６は、例えば、１つの方向でオプションを走査するよう１つの方向に押され、もう１つの方向でオプションを走査するようもう１つの方向に押されるトグルスイッチを含む。入力１０６及び１１２は、単一の構成要素に組合されることも可能である。例えば、入力１０６の指動輪は、ユーザが指動輪を有効化入力としても使用することが可能となるようバネ要素に対抗して装置１００内に滑り込むよう取り付けられることが可能である。
【００１１】
電話機１００の動作は以下に示す通りである。ユーザは、発呼するために入力情報を入力するよう電話機１００をオンにする。ＵＩ１０２は、ユーザが様々な方法のうちの少なくとも１つの方法で入力情報を選択することを可能にすると仮定する。
【００１２】
第１の方法では、ユーザは以下のように電話番号をその数字から選択する。ユーザが指動輪１０６を回転させると、プロセッサ１１６は、選択可能なオプションとして数字「０」、「１」、…、及び「９」を表すメモリ１０８内のデータを循環して走査する。ユーザが指動輪１０６を素早く回転させると、フィードバック出力１１０は、現在のオプションから次のオプションに行く際に可聴のクリックを供給する。ユーザが指動輪１０６をゆっくりと回転させると、フィードバック出力１１０は、現在のオプションから次のオプションに行く際に合成された又は予め記録された音声出力を供給し、これもメモリ１０８に格納される。例えば、ユーザは、データ「７」を表す現在の位置から次の位置へ１ノッチ分前進するよう指動輪を回転させると、「８」と発せられる言葉を聴く。「クリック」は早送り又は高速巻き戻しを可能にする一方で、音声出力は現在利用可能であるオプションを識別する。ユーザは、所望の番号を識別すると有効化キー１１２を押す。プロセッサ１１６は次に、有効にされたオプションに関連付けられるデータをバッファ１１４に格納する。プロセッサは次に、次の番号の走査の為に開始点、例えば「０」をリセットすることが好適である。一度ユーザが、所望の電話番号を構成する全ての番号を入力すると、ユーザは有効化キー１１２を、例えば素早く連続で２回押すことが好適である。これによって、バッファ１１４のコンテンツがフィードバック出力１１０によって繰り返される。ユーザが選択された番号列を有効化キー１１２によって有効にすると、バッファ１１４内のデータは通信部１０４に転送され、上述のように選択された電話番号に対し電話をかける。従って、ユーザは電話機１００を動作させるために１つの手のみを必要とし、ＵＩ１０２を観る必要がない。
【００１３】
第２の方法では、メモリ１０８は名前のオーディオファイルを格納し、オーディオファイルは、名前に関連付けられる電話を掛ける相手方の電話番号を表すデータに関連付けられる。名前及びオーディオファイルは予めユーザによって入力される。例えば、電話機１００は発呼及び受呼のための動作モードと、メモリ１０８をプログラミングするためのプログラミングモードとを有する。
【００１４】
電話機１００のプログラミングモードでは、ＵＩ１０２は、好適には電話機１００の通信部１０４内に収容されるマイクロホン１１８を使用し、プロセッサ１１６を介してメモリ１０８内に音声データを格納するよう入力する。音声データは、ユーザが電話機１００から頻繁に電話をかけたい人の名前又は電話を掛ける相手の他の識別名を表す。例えば、入力されるべき音声データは「家」、「家にいる母」、「母の携帯電話機」、「秘書」、「Kandinsky」、「Gigi」、「Caius」、「Svetlana」、及び「フィリップス社特許部」である。
【００１５】
電話機１００は、オーディオファイルを表し、メモリ１０８内に格納されるべきデータを形成するためのサンプラ（図示せず）及び符号器（図示せず）を含む。電話機１００は更に、メモリ１０８から検索した際にフィードバック出力１１０を介してオーディオファイルを再生するための復号器（図示せず）を含む。フィードバック出力１１０は、電話機１００の通信部１０４内に収容されるスピーカ１２０を使用することが好適である。
【００１６】
ユーザが電話機１００をプログラミングモードにしたと仮定する。ユーザは、有効化キー１１２を保持する間に、マイクロホン１１８に向かって「家」と話す。アナログ信号はサンプリング且つ符号化され、符号化されたデータはオーディオファイル「家」としてメモリ１０８内に格納される。次にプロセッサ１１６は、メモリ１０８が電話を掛ける相手である「家」に関連付けられる電話番号を格納することができるよう準備を整える。ユーザは、キーパッドを介し電話番号を形成する数字を電話機１００に入力することを促される。入力されたデータはバッファ１１４内に格納され、番号はディスプレイ１２４に表示される。番号が正しければ、ユーザはキー１１２を介し番号を有効にし、その番号は「家」に関連付けられてメモリ１０８内に格納される。ユーザはキー１１２を放して再びキー１１２を押し、同様の方法で「家にいる母」という表現を入力する。
【００１７】
次に、プログラミングモードは、オーディオファイルを特定の順序で並べるオプションをユーザに与える。この順序は、以下に説明されるように、指動輪１０６によって後からナビゲートすることに関連する。次にユーザは、指動輪１０６を上下に回転させることによって、「家にいる母」に「家」よりも上の又は下の順位を割当てるオプションを有する。ユーザが指動輪１０６をどちらか一方の方向に１ノッチ分回転させると、既に格納されるオーディオファイルがフィードバック出力１１０によって再生され、この例では、ファイル「家」が再生される。ユーザは例えば、或るアルファベットの順序が頭の中にあり、「家にいる母」に対し下の順位を選択する。プロセッサ１１６は、格納されるべきファイルの順位が最後に再生されたファイルのランクよりも上に又は下となるよう配置を制御し、且つ、指動輪１０６の回転方向に依存して制御する。従って、ユーザは、指動輪１０６が１ノッチ分下に回転され、ファイル「家」が再生された後に、有効化キー１１２を押す。
【００１８】
次の入力は、「家」と「家にいる母」との間に配置されるべき「母の携帯電話機」である。ユーザは指動輪１０６を下に回転し、格納されたファイルが連続して再生される。ファイル「家」が再生された後、ユーザはキー１１２を押し、オーディオファイル「母の携帯電話機」が、「家」よりも下の順位で、且つ、「家にいる母」の順位よりも上に格納される。最終的に、メモリ１０８はオーディオファイル及び関連付けられる電話番号をユーザによって決められる特定の順序で格納する。
【００１９】
ユーザがプログラミングモードから出、ニックネームで選択する動作モードとなると、ユーザは指動輪１０６を高速で上下に回転し、ユーザは、循環的な方法で通る各選択可能なオプション（ニックネーム）に対する可聴クリックを聴く。ユーザが指動輪１０６をゆっくりと回転させると、指動輪１０６の回転方向に応じて下から上に、又は上から下に割当てられる順位に従う順序で指動輪の各ノッチに対し１つのオーディオファイルが再生される。このような方法によってユーザは、ユーザが電話をかけたい所望の相手を選択することが可能となる。ユーザは所望のニックネームを見つけると、キー１１２を押し、制御器１１６に、関連付けられる電話番号の数字を表すデータをメモリ１０８から直接的に通信部１０４へ転送させ、電話をダイアルする処理を開始させる。確認の為に、バッファ１１４にバッファリングする必要がなくなる。
【００２０】
この方法の変形として、使用頻度に応じて番号の動的な再順序付けがある。発呼の為に動作モードを作動させた後、ユーザは、回転方向に応じて下がる順序又は上がる順序で指動輪をノッチ毎に回転させることによって最も頻繁に使用されるオーディオファイルを得る。これによって選択処理が短くなる。再順序付けは、例えばソフトウェアによって実行される。例えば、第１のソフトウェアモジュールは、決定された選択を一定の時間の間記録（log）し、第２のソフトウェアモジュールは、各メニュオプションに対する選択回数を計算し、第３のソフトウェアモジュールは選択回数に従ってオプションを配置し、そして第４のソフトウェアモジュールが、再順序付けされたオプションを指動輪１０６を介する入力にリンクする動的ルックアップテーブルを形成する。
【００２１】
もう１つの変形では、数字に基づくナビゲーションとニックネームに基づくナビゲーションが単一のデシジョンツリーのブランチを形成する。例えば、オプションの最初の組において数字「０」乃至「９」は、サイン「ニックネーム」に結び付けられ、それによってユーザは、その数字又はそのニックネームによって電話番号を循環的な方法によって選択することが可能となる。ユーザが選択した数字を有効にすると、第１の方法によって説明されたように処理が進む。ユーザが「ニックネーム」を有効にすると、処理は上述された第２の方法に切替わる。
【００２２】
更なる変形では、数字に基づくナビゲーションが、頻繁に使用される動作に基づくナビゲーションと組合される。例えば、オプションの最初の組において数字「０」乃至「９」は、例えば、「前を消去」オプションと「全てを消去」オプションに結び付けられる。このようなタイプのナビゲーションは、段階的なクリックスルー方法で行われると非常に効率がよく、各方向における指動輪１０６の回転の物理的な制限と組合されることが好適である。所望の動作に到達するためには、ユーザは、セレクタの範囲の始まり又は終わりに向けてセレクタを早送りすることが可能である。物理的な制限に到達すると、ユーザは所望のオプションをより高い正確さで選択する。
【００２３】
尚、従来の移動式電話機のキーパッドは、電話機のフォームファクタを大きい度合いで決定する。つまり、キーパッドを収容するために必要とされる空間が比較的大きいということである。本発明のナビゲーション及び有効化処理によって、電話機が小さい寸法を有することを可能にし、従来の移動式電話機とは異なる形状を有することを可能にする。このコンテキストにおいて、「GRAPHICAL USER INTERFACE TOUCH SCREEN WITH AUTO ZOOM FEATURE」についてSung Choi及びJan van Eeに対し１９９８年４月１７日に出願された米国出願番号０９／０６２，３４６号（代理人文書ＰＨＡ２３，３８７）を参照されたい。これは本願に参考文書として組込まれる。キーパッド１２２は、電話機１００の他の要素に対し選択的に着脱可能なモジュールとして形成されることが可能である。オーディオファイルを格納することを可能にするサンプラ及び符号器も同様に、メモリ１０８をプログラミング又は再プログラミングする際に使用される着脱可能なモジュールとして形成されることが可能である。
【００２４】
図２は、本発明のノートブック型コンピュータ又はＰＤＡ２００を示すブロック図である。ＰＤＡ２００は、ソフトウェアによって制御される幾つかの機能を有する。例えば、ＰＤＡ２００は、ユーザが電子メールを送受信することを可能にする要素２０２を有する。本発明のＰＤＡでは、ユーザはオーディオファイルを添付して電子メールを送受信することが可能にされる。オーディオファイルは、インターネットを介しユーザがアドレスに送信する又は送信者から受信することを所望するコンテンツ情報を含む。オーディオファイルは、単純な電子メールのテキスト文、又はテキスト添付に対する代替又は補助となる。オーディオファイルはユーザ又は送信者からの記録された音声入力、適当に符号化且つ圧縮された情報コンテンツを含む。
【００２５】
ＰＤＡは、インターネットと通信するための無線モデム２０６を有する通信部２０４を含む。モデム２０４は例えば、Minstrel又はRicochetである。Novatel Wirelessによって市販されるMinstrelは、ユーザがウェブをブラウズすることと電子メールを受信すること等を可能にするＰＤＡ用の２方向モデムである。より一般的には、Minstrel又はRicochetのような無線モデムは、ハンドヘルド式装置２００に、（スループット、レイテンシ、及び到達範囲の制限内における）通信のためにインターネットを使用する任意のタイプのアプリケーションに使用することが可能であるＩＰアドレスを与える。
【００２６】
Minstrelは、セルラサービスプロバイダによって支援されるＣＤＰＤ（Cellular Digital Packet Data）と称される技術を使用する。ウェブサーフィングは、１９．２−ｋｂｐｓのＣＤＰＤ速度処理能力に制限される。MetricomからのRicochetは、２８．８Ｋ−ｂｐｓの範囲内の早い接続レートを有するが、３つの大都市の中心（サンフランシスコ湾岸地域、シアトル、及びワシントン）のみで支援される。
【００２７】
ＰＤＡ２００は、図１を参照して説明した移動式電話機１００の「ニックネーム」と「電話番号」のための変換テーブルと同様の構成を有し、メモリ１０８内に格納される「ニックネーム」と「電子メールアドレス」を結ぶ変換テーブルを有する。変換テーブルは、ユーザによってプログラムされるか、又は、例えば、ユーザの会社のシステムアドミニストレータによって予め決められる。電子メールを送信するためには、ユーザは指動輪１０６を回転して「ニックネーム」の中をナビゲートする。選択を有効にすると、選択された記録されているニックネームに対応する電子メールアドレスを挿入することによってＰＤＡは電子メールヘッダを作成する。ヘッダを作成する前に、又は作成する後に、ユーザはマイクロホンに向かって話し、送られるべきコンテンツ情報を作成する。音声はサンプラ２０８によってサンプリング且つ符号化され、符号化されたデータは電子メールに添付される。オーディオサンプラ及び符号器はこの技術において既知であるので、詳細に説明しない。電子メールにオーディオファイルを添付すること又は含むことはこの技術において既知であるので詳細に説明しない。
【００２８】
上記がうまく良好に終了すると、ユーザは、例えばキー（図示せず）を押すことによって電子メールを送信する。例えば、制御器１１６内の電子メール作成プログラムは、ユーザの名前及び／又は電子メールの題をマイクロホン１１８に対し述べることを促すために、プロンプト音を供給可能であることが好適である。これらの入力によって作成されるデータは、電子メールの或るフィールドに記憶され、それにより受信者は、送信者のフィールド又は題のデータフィールドをオーディオとして聴くことにより、送信者及び／又は題のリストの中をブラウズすることが可能となる。テキスト形式にされる電子メールに対し同様の機能が周知であるが、これはここでは詳細に説明する必要はない。尚、通信はオーディオファイルの中に含まれ、オーディオファイルのコンテンツは再現する際にユーザによって解釈されるべきであるので、ＰＤＡ２００又はサーバ（図示せず）上に音声認識ソフトウェアは必要としない。
【００２９】
電話機１００と同様に、ＰＤＡ２００も指動輪１０６及び有効化ボタン１１２を使用してナビゲートされるべきブランチに分岐されるメニュを有することが好適である。例えば、ユーザは「家」、「会社」、「友達」等のカテゴリに従って「ニックネーム」ファイルを体系付ける。ナビゲーションモードでは、ＰＤＡ２００は、プログラミングモードにおいてユーザによって入力されたカテゴリの名前を音声によってユーザに返す。ナビゲーションの際にカテゴリを有効にすると、指動輪１０６を回転させることによって、ＰＤＡは、有効にされたカテゴリにリストにされる電話を掛ける相手の名前が、プログラムされた順序で音声で与えられる。このようなツリー状の検索ストラテジーを実行するために任意のレベルのネスティングが実施可能である。
【００３０】
尚、本発明をネットワークに基づくアーキテクチャにおいて実施すると、オーディオファイル並びにニックネーム、及び／又は、電話番号並びにニックネームはユーザアクセスの為にサーバに記憶され、また、アクセスはインターネット接続を介するインターネットサービスを使用することが可能である。クライアントは携帯可能な装置である必要はないが、その代わり、デスクトップＰＣ又は卓上電話機のような固定の装置であり得る。しかし、ハンドヘルド式で、必要なものが完備された装置は特に、上述されたような人間工学が含まれるので興味深い。
【００３１】
図３は、予め記録されたオーディオコンテンツを再生するための装置３００を示す。装置３００は、ユーザが、例えば、記録可能又はリライト可能な光学ディスクを有するメモリ３０２、大きい半導体メモリ、又は機械的な衝撃からの影響を最小にするよう小さいフォームファクタを有するハードディスクドライブ内に音楽ファイルを記憶することが可能なハンドヘルド式のジュークボックスを含む。記憶されたオーディオの再生は、例えば従来の方法によって再生部３０４によって実現される。再生部３０４は、記憶されたオーディオを再現するための処理ボード３０６、スピーカ３０８、及び、好適にはこの技術において周知であり、ＧＵＩ（図示せず）による視覚的なフィードバックのためにプログラムされたトラックにラベル付けをすることを可能にする編集／プログラミング機能（図示せず）を有する。尚、ＧＵＩは、装置のライブラリを設定するためには好適ではあるが、装置３００の動作的な使用の際には必要ではない。従って、ＧＵＩモジュールは着脱可能に形成されることが可能である。
【００３２】
ジュークボックスの技術に関しては、例えば、「VIRTUAL JUKBOX」についてPieter van der Meulenに対し１９９９年６月４日に出願された米国出願番号０９／３２６，５０６を参照されたい。これは本願に参考文書として組込まれる。この文書は、記録物のコレクション用に与えられ、そのコレクションはその材料が記録される物理的な媒体に依存しない、コレクション管理システム、又はバーチャルジュークボックスに関する。
【００３３】
このシステムは、格納媒体及び再生装置を含むネットワークの一部を形成し、コレクションの分類分け、アーカイビング、及び検索に使用することが容易なシステムを提供する。好適な実施例では、コレクション管理システムは消費者電子（ＣＥ）装置、又は、パーソナル或いはホームコンピュータ（ＰＣ）上に具備され、コレクションは、ＣＥ装置又はＰＣに関連付けられる１つ以上のハードドライブに格納される記録物を含む。コレクション管理システムは、ジャンル、作者等の各選択に基づいて１つ以上の格納装置から再生するよう記録物の検索を容易にするユーザインターフェースを含む。関連付けられるディスク動作システムによって記録物を、ハードディスクドライブ又は他の大容量格納装置に格納することによって、ドライブ上の各記録物に対し迅速なアクセスが可能であり、且つ、新しい材料がコレクションに加えられるとシステムに追加のドライブを加えることが可能である。
【００３４】
ユーザはメモリ３０２内に複数のオーディオトラックを格納し、メモリ３０２は再生部３０４に収容されると仮定する。再生処理ボード３０６は、格納される各トラックの最初の部分のみを再生するイントロ再生モードを有する。このようなイントロモードは、例えば、マイクロソフト社の「CD Player」ソフトアプリケーション、バージョン４．０から公知である。導入部分又は導入部分の一部は、その一部が持ってこられるトラックを識別するラベルと共に、ＵＩ１０２のメモリ１０８内に格納される。
【００３５】
指動輪１０６をゆっくりと回転させると、メモリ１０８内に格納されるトラックの導入部分又はトラックの一部は、トラックをナビゲートする際の聴覚フィードバックとしてフィードバック部１１０及びスピーカ１２０を介し再生される。このようにナビゲートする間に、再生されるイントロに関連付けられるラベルはバッファ１１４内に格納される。ユーザがキー１１２によって選択を有効にすると、ラベルは再生部３０４に戻され、上記のように選択されるトラックの全体が再生される。指動輪１０６を素早く回転させると、ユーザは選択可能なトラック又はファイルフォルダの段階的な又は循環的なメニュに沿って進んでいることを確認するよう可聴クリックを聴く。
【００３６】
或いは、指動輪１０６をゆっくりと回転させると、完全なオーディオファイルのうちの当該のファイルは、指動輪１０６が次のノッチに到着するまで再生され、次のノッチの到着すると、次のファイルの再生が開始する。この実施例では、オプションの間をナビゲートする間の瞬時の再生が達成される。
【００３７】
代替及び補助として、装置３００は、例えば、オーディオファイル用の収納場所として機能するスレーブ装置３００に対しマスタとして作用するＰＣを介しウェブからコンテンツをダウンロードすることが可能であるシステム内の構成要素として形成されることが可能である。装置３００及び装置２００の組み合わせを独立型の機能とすることが可能であり、特にその組み合わせが、例えば、指動輪１０６及び有効化キー１１２を使用してダウンロードするための選択をユーザに可能にするよう音声フィードバックを供給する特定のウェブサイトにアクセスすることが可能であるときに可能である。プログラミング又はダウンロードモードにあるときは、これらのユーザ入力は、ディスプレイ上の再現されるグラフィカル表示を介しウェブをブラウズする際のキーボード又はマウスの制御キーと同様に、オーディオファイルのリストをナビゲートするブラウザの一部として機能する。アドレス指定されるウェブサーバは、聴覚的にブラウズ可能であるページで情報を提供することが好適である。
【００３８】
尚、電話機１００、ＰＤＡ２００、及び音楽装置３００の幾つかの機能も、ネットワークに基づいたシステムを使用して実施することが可能である。例えば、電話機１００は、インターネット上のサーバに接触することが可能である。名前、数字或いは電子メールアドレス、及びナビゲートする際の聴覚フィードバック用のオーディオファイルを、図１及び図２に示される電話機又はＰＤＡ自体に格納する代わりに、それらはサーバに格納される。従って、サーバは、アドレスリスト及びそれらの圧縮されたニックネームオーディオファイルに対し実質的に制限のない格納容量を有するハンドヘルド式装置の拡張部となる。電話機又はＰＤＡは、指動輪１０６を回転させてサーバ上でリストにされるオプションをナビゲートし、ツリー状のブランチである選択の最終の選択を有効にする。有効にされる最終結果は、装置のローカル機能を可能にするよう使用される。
【００３９】
本発明の統合されるネットワークに基づく実施例のもう１つの変形は、音声メールシステムである。このシステムは（移動している）ユーザが、サーバに格納される音声メールを検索しナビゲートすることを可能にする。例えば、ユーザが電話機１００を使用して音声メールシステムの番号をダイアルすると、選択可能なアイテム及びオプションの組が音声メッセージアクセスシステムに関連付けられて作動する。
【００４０】
呼び出し側のＩＤ特徴及びパスワードによってユーザがサーバ上のユーザのメールボックスへのアクセスが与えられたと仮定する。パスワードは、例えば、ユーザが予め選択された表現を話すことによって入力される。サーバ上のアプリケーションは次に、話された表現、及び好適には、周波数スペクトルといったユーザの音声識別特性が、このユーザに対し記憶されるテンプレートと一致するかどうか決定する。ユーザがメールボックスへのアクセスを受け取ると、ユーザは、例えば、予め記録された音声による「こちらは＜登録されたユーザネーム＞のメールボックスです」によってサーバから確認を受け取る。
【００４１】
次にシステムは、「次へ」、「前へ」、「保存する」、及び「削除」を含むオプションのリストを利用可能にする。各オプションは、従来の音声メールサービスと同様に、電話機１００内において、英数字の組み合わせを表すパルスシーケンスに対しマップされる。パルスシーケンスは有効化キー１１２を押すことによってサーバに送信される。サーバ側で受信されると、パルスシーケンスは選択されたオプションを作動させる。聴覚フィードバックは、送信者の名前とメッセージの題の指示を含むことが好適である。
【００４２】
ユーザがメッセージの選択を確認すると、フルテキストが再生される。選択オプションのマッピングは、ユーザによって手動で、或いは、特殊化された構成ツール又は電話機１００の構成を設定するサービスとしてサービスプロバイダによってプログラムされることが可能である。このコンテキストにおいて、例えば、「INTERNET-BASED SERVICE FOR UPDATING A PROGRAMMABLE CONTROL DEVICE」についてJoost Keminkに対し１９９９年５月１３日に出願された米国出願番号０９／３１１，１２８を参照されたい。この文書は、本願に参考文書として組込まれる。この文書は、プログラマブル制御装置を更新するためのインターネットに基づくサービスに関する。インターネットサイトは、電気製品に依存する制御及び特徴オプション情報へのリンクを含み、それはグラフィックユーザインターフェース（ＧＵＩ）としてプログラマブル制御装置にダウンロードすることが可能である。ユーザインターフェースはユーザがターゲット電気製品を容易に特定することが可能となるようサイトにおいて与えられ、その後、そのターゲット電気製品に対し利用可能であるインターフェース及び制御情報を選択的にダウンロードする。
【００４３】
本発明のもう１つの実施例は、一般的なプログラマブル遠隔制御装置を考慮する。この装置は、例えば「０」乃至「９」の英数字の組用のハードキー、例えば「ＴＶ」、「ＶＣＲ」等の装置選択キーの組、及び「チャンネルアップ／ダウン」、「音量アップ／ダウン」、「再生」、「早送り」、「選択」等の動作キーの組、更に、図１乃至３を参照し説明した指動輪１０６及び有効化キー１１２を有する。装置選択キーの組は、頻繁に使用される消費者電気製品の少ない数に制限されるべきである。英数字キー及び動作キーは、装置選択キーの組が可能にするよりも大きい数の装置及びマクロへのアクセスをユーザに可能にし、それには、「ＤＶＤプレーヤ」、「ベッドルームマクロ（Bedroom macro）」、「タイムワープ（Time-warp）記録」（ＴｉＶｏボックスにおいて）等が含まれる。
【００４４】
追加の装置のためのキーは、指動輪１０６によってナビゲートすることが可能であるようプログラムされ、そこからキー１１２によって選択することが可能である。関連付けられる聴覚フィードバックは、ユーザの音声を記録する、ウェブから小さいオーディオファイルをダウンロードする、又はユーザのＰＣによってプログラムされ聴覚再現される。ユーザが指動輪１０６をゆっくりと回転させると、オーディオファイルが再生され、キー１１２によって選択を有効にすることによって、ユーザが追加の装置又はマクロの組に関連付けられる命令の組をナビゲートすることが可能となる。遠隔装置も様々な命令に対しキーがマップされ、それによりユーザは、例えば、ＩＲ、又は、遠隔装置と追加の装置とを媒介するＰＣ或いはセットトップボックス上の制御アプリケーションを介し追加の装置を制御することが可能にされる。追加の装置用の制御コードは、遠隔装置にデフォルトの処置として記憶させるか、又は、ウェブ、又は、別の機器或いは装置からダウンロードすることが可能である。遠隔装置の構成は、例えば、構成ソフトウェアアプリケーションによって行うことが可能である。
【００４５】
図４は、本発明を説明するフローチャートである。ステップ４０２において、指動輪１０６を介しユーザ入力が受け取られる。ステップ４０４において指動輪１０６の現在の位置が決められ、ステップ４０６においてその位置が選択可能なオプションにマップされる。ステップ４０８において、オプションは一時的に選択され、ステップ４１０においてユーザに聴覚フィードバックが与えられる。ステップ４１２において、ユーザが選択をキー１１２によって有効にすると、オプションはステップ４１４で処理される。オプションが有効にされず、ユーザが指動輪１０６を更に１ノッチ分進めると、処理はステップ４０２に戻る。
【００４６】
本発明は、特定の人間工学的利点を示すためにハンドヘルド式の装置のコンテキストにおいて特に説明した。本発明は、ハンドヘルド式装置以外の装置に対しても特定の利点を有することを理解するものとする。例えば、ユーザインターフェースは、ＡＴＭ又は自動販売機、例えば、ナビゲーション及び有効化入力がハンドルに収容され、自動車ナビゲーションシステムを動作させる自動車適用、工業機械などにも使用することが可能である。本発明は、聴覚フィードバックに基づいてメニュオプションを選択することが可能となるので安全性が重要である状況下で動作するユーザに対し有益である。
【００４７】
指動輪及びトグルスイッチが上述において特別な例として示される。他のユーザによって制御可能である入力構成要素も、特定の適用に応じて実施可能である。例えば、基本的に２つの方向（上下）にスクロールすることを可能にするスイッチ又はホイールがある。指及び手によって動作可能であるジョイスティック又はトラックボールは、例えば、コンパスの４又は８の主な方向のように２つ以上の方向にスクロールすることを可能にする。例えば、２次元ジョイスティックと共の多次元オプション空間は、例えば、武器又は火力兵器を選択する（これは、ビデオゲームではよくあることである）ビデオゲームにおいて好都合である。
【００４８】
選択的にスピーカ１２０は、有線又は無線イヤホンでもよい。イヤホンを使用することにより騒々しい環境又は聴覚フィードバックによって邪魔されるべきでない環境における使用を可能にする。
【００４９】
上述されたように、キーパッドは本発明では装置の一体式の一部である必要はない。同様又は他の理由により、本発明の装置は更に、ディスプレイも一体式の一部である必要がなく、従って、寸法を更に小さくし可能であるならば費用も少なくされる。極めて小さなスピーカと幾つかのボタンで十分である。従って、本発明は、最小のセルラ式電話機の基礎を形成するだけでなく、最小の無線電子メール端末（イヤホン及び遠隔制御／送信機ピース）の基礎を形成する。これらは、サーバ上でテキスト音声変換が行われるので、キーボード又はディスプレイを必要としない。
【００５０】
本発明のもう１つの利点は、全てのオプションはソフトコードされ、上述の例によって示されたように時間が経過した後に変更することが可能であることである。ソフトコーディングによって、メニュ又はそのオプションは、例えば、アプリケーション、環境、ステータス、及び／又はネットワークを介し新しいオプションがサーバからダウンロードされることに依存して、動的に追加／削除、又は変更することが可能である。例えば、多機能装置は、メニュの第１のレベルとしてソフトウェアアプリケーションの組を使用し、各アプリケーションは、ユーザがこのリストをスクロールすると特定の聴覚フィードバックによってユーザに示される。例えば、ユーザは、メインレベルのリストをスクロールすると、「電子メール」、「電話機」、「ポケットベル」、「音楽」等の合成された又は予め記録された音声を聴く。有効化入力によってアプリケーション、例えば、「電子メール」を選択すると、次のレベルは、選択されたアプリケーションのコンテキストでの当該のオプションのメニュを供給し、これらのオプションの識別名は、ユーザがオプションをナビゲートする際に聴覚的に再現される。ユーザは次に、聴覚フィードバックを使用して対応するオプション（上述の例を参照）を再びナビゲートする。幾つかのメニュがこのような入れ子階層に収容されることが可能である。
【図面の簡単な説明】
【図１】 移動式電話機を示すブロック図である。
【図２】 パームトップコンピュータ又はＰＤＡを示すブロック図である。
【図３】 予め記録されたオーディオを再生する装置を示すブロック図である。
【図４】 図１乃至３の装置のＵＩを介するユーザ入力による動作を示すフローチャートである。

Claims (11)

  1. ユーザが情報処理装置と相互作用することを可能にし、上記ユーザがオプションの組をナビゲートすることを可能にするナビゲート入力を有するユーザインターフェースを含む情報処理装置であって、
    上記ユーザインターフェースは、上記ユーザがナビゲートする際に上記オプションのうちの各選択可能なオプションについての各聴覚フィードバック情報を上記ユーザに与えるフィードバック出力と、
    上記ユーザが、上記フィードバックに基づいて、現在のオプションを選択することを可能にする有効化入力とを更に含むことを特徴とする装置であり、
    上記ユーザが上記オプションの組をナビゲートする間に、聴覚フィードバックを与えるためのオーディオファイルを格納するメモリをプログラムすることを可能にし、
    上記フィードバック出力は、上記ユーザが素早くナビゲートしているときは可聴クリックで上記聴覚フィードバックを与え、上記ユーザがゆっくりとナビゲートしているときには合成された又は予め記録された音声出力で上記聴覚フィードバックを与えることを特徴とする、装置。
  2. 上記ナビゲート入力及び／又は上記有効化入力は、手動による入力を含むことを特徴とする請求項１記載の装置。
  3. 上記有効化入力は、手動による入力を含む請求項１記載の装置。
  4. 移動式通信装置を含む請求項１記載の装置。
  5. テキスト音声変換用のアプリケーションサーバと共に動作する無線電子メール端末を含む請求項４記載の装置。
  6. 音楽ファイルを再生する装置を含むことを特徴とする請求項１記載の装置。
  7. 上記各聴覚フィードバックは、上記音楽ファイルのうちの各音楽ファイルの各導入部分を含む請求項１記載の装置。
  8. ユーザが情報処理装置と相互作用することを可能にする方法であって、
    上記ユーザがオプションの組をナビゲートすることを可能にする段階と、
    上記ユーザがナビゲートする際に、上記オプションのうちの各選択可能なオプションについての各聴覚フィードバック情報を上記ユーザに与える段階であり、上記聴覚フィードバック情報は、上記ユーザが素早くナビゲートしているときは可聴クリックであり、上記ユーザがゆっくりとナビゲートしているときには合成された又は予め記録された音声出力である、段階と、
    上記オプションのうちの上記選択可能なオプションにアクセスするために、上記フィードバックに基づいて上記オプションのうちの現在のオプションを、上記ユーザが有効にすることを可能にする段階と、
    上記ユーザが上記オプションの組をナビゲートする際に、聴覚フィードバックを与えるためのオーディオファイルを格納するメモリをプログラムすることを可能にする段階とを含む方法。
  9. 上記情報処理装置は電話機を含み、
    上記オプションの組は、電話機の延長部を含むことを特徴とする請求項８記載の方法。
  10. 上記情報処理装置は電子メール通信が可能であり、
    上記オプションの組は、電子メールアドレスを含むことを特徴とする請求項８記載の方法。
  11. 上記情報処理装置はオーディオ再生機能を含み、
    上記オプションの組は、各オーディオファイルの各導入部分を含むことを特徴とする請求項８記載の方法。
JP2001545939A 1999-12-16 2000-12-01 ハンドヘルド式装置用のハンド−イヤユーザインターフェース Expired - Fee Related JP4733895B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US09/464,855 1999-12-16
US09/464,855 US6978127B1 (en) 1999-12-16 1999-12-16 Hand-ear user interface for hand-held device
PCT/EP2000/012153 WO2001044912A2 (en) 1999-12-16 2000-12-01 User interface with auditory feedback for hand-held device

Publications (2)

Publication Number Publication Date
JP2003517674A JP2003517674A (ja) 2003-05-27
JP4733895B2 true JP4733895B2 (ja) 2011-07-27

Family

ID=23845524

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001545939A Expired - Fee Related JP4733895B2 (ja) 1999-12-16 2000-12-01 ハンドヘルド式装置用のハンド−イヤユーザインターフェース

Country Status (8)

Country Link
US (2) US6978127B1 (ja)
EP (2) EP1181802B1 (ja)
JP (1) JP4733895B2 (ja)
KR (1) KR100756931B1 (ja)
CN (1) CN1199425C (ja)
DE (1) DE60033518T2 (ja)
TW (1) TWI244604B (ja)
WO (1) WO2001044912A2 (ja)

Families Citing this family (239)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7657910B1 (en) * 1999-07-26 2010-02-02 E-Cast Inc. Distributed electronic entertainment method and apparatus
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US7187947B1 (en) 2000-03-28 2007-03-06 Affinity Labs, Llc System and method for communicating selected information to an electronic device
FI110297B (fi) 2000-08-21 2002-12-31 Mikko Kalervo Vaeaenaenen Lyhytäänisanomajärjestelmä, -menetelmä ja -päätelaite
EP2432190A3 (en) 2001-06-27 2014-02-19 SKKY Incorporated Improved media delivery platform
GR1004462B (el) * 2001-10-19 2004-02-27 Θεοδωριδησαδημητριοσαχρηστου Συστημααακουστικησαεκτυλιξης
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
JP4204977B2 (ja) 2001-10-22 2009-01-07 アップル インコーポレイテッド メディアプレーヤーのためのインテリジェントなシンクロ操作
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US7079645B1 (en) * 2001-12-18 2006-07-18 Bellsouth Intellectual Property Corp. Speaker volume control for voice communication device
US8004496B2 (en) 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
US7336602B2 (en) * 2002-01-29 2008-02-26 Intel Corporation Apparatus and method for wireless/wired communications interface
US7333092B2 (en) 2002-02-25 2008-02-19 Apple Computer, Inc. Touch pad for handheld device
US7254708B2 (en) * 2002-03-05 2007-08-07 Intel Corporation Apparatus and method for wireless device set-up and authentication using audio authentication—information
US9715500B2 (en) 2004-04-27 2017-07-25 Apple Inc. Method and system for sharing playlists
US7797446B2 (en) 2002-07-16 2010-09-14 Apple Inc. Method and system for updating playlists
US9412417B2 (en) 2002-04-05 2016-08-09 Apple Inc. Persistent group of media items for a media device
US7680849B2 (en) 2004-10-25 2010-03-16 Apple Inc. Multiple media type synchronization between host computer and media device
US8150937B2 (en) 2004-10-25 2012-04-03 Apple Inc. Wireless synchronization between media player and host device
US7827259B2 (en) 2004-04-27 2010-11-02 Apple Inc. Method and system for configurable automatic media selection
JP2003308283A (ja) * 2002-04-18 2003-10-31 Mitsubishi Electric Corp 通信装置、通信方法及び車載用ナビゲーション装置
GB0213134D0 (en) 2002-06-07 2002-07-17 Mitel Knowledge Corp Mouse enabled phone
US7956272B2 (en) 2002-07-30 2011-06-07 Apple Inc. Management of files in a personal communication device
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
JP3999092B2 (ja) * 2002-09-30 2007-10-31 京セラ株式会社 重ね型携帯端末装置
CN1319356C (zh) * 2003-04-24 2007-05-30 三星电子株式会社 在移动终端中使用旋转键以及控制显示的装置和方法
WO2004107099A2 (en) 2003-04-30 2004-12-09 Disney Enterprises, Inc. Cell phone multimedia controller
JP4179085B2 (ja) * 2003-07-16 2008-11-12 松下電器産業株式会社 電子機器
US7757173B2 (en) * 2003-07-18 2010-07-13 Apple Inc. Voice menu system
US20070152977A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Illuminated touchpad
US7499040B2 (en) 2003-08-18 2009-03-03 Apple Inc. Movable touch pad with added functionality
CN1879344A (zh) * 2003-11-18 2006-12-13 诺基亚公司 用于对照预定字符序列验证输入检测字符序列的便携电子设备
US8059099B2 (en) 2006-06-02 2011-11-15 Apple Inc. Techniques for interactive input to portable electronic devices
US7495659B2 (en) 2003-11-25 2009-02-24 Apple Inc. Touch pad for handheld device
TWM257497U (en) * 2004-05-19 2005-02-21 Lite On Technology Corp Use roller of cell phone input apparatus
US20070110074A1 (en) 2004-06-04 2007-05-17 Bob Bradley System and Method for Synchronizing Media Presentation at Multiple Recipients
US8797926B2 (en) 2004-06-04 2014-08-05 Apple Inc. Networked media station
US8443038B2 (en) 2004-06-04 2013-05-14 Apple Inc. Network media device
US10972536B2 (en) 2004-06-04 2021-04-06 Apple Inc. System and method for synchronizing media presentation at multiple recipients
JP2008511045A (ja) 2004-08-16 2008-04-10 フィンガーワークス・インコーポレーテッド タッチセンス装置の空間分解能を向上させる方法
US8261246B1 (en) 2004-09-07 2012-09-04 Apple Inc. Method and system for dynamically populating groups in a developer environment
US7711835B2 (en) 2004-09-30 2010-05-04 Citrix Systems, Inc. Method and apparatus for reducing disclosure of proprietary data in a networked environment
US8099482B2 (en) 2004-10-01 2012-01-17 E-Cast Inc. Prioritized content download for an entertainment device
US11314378B2 (en) 2005-01-07 2022-04-26 Apple Inc. Persistent group of media items for a media device
US7958441B2 (en) 2005-01-07 2011-06-07 Apple Inc. Media management for groups of media items
US7890071B2 (en) * 2005-05-11 2011-02-15 Sigmatel, Inc. Handheld audio system
KR100907974B1 (ko) * 2005-05-13 2009-07-16 노키아 코포레이션 전자 장치에 캐릭터를 입력하는 방법
US7706832B2 (en) * 2005-05-20 2010-04-27 Kyocera Wireless Corp. Systems and methods for using aliases to manage contact information in a mobile communication device
CN100450240C (zh) * 2005-06-10 2009-01-07 华为技术有限公司 控制移动终端物理操作的装置及方法
US20070010289A1 (en) * 2005-07-11 2007-01-11 Arthur Mezue Detachable large display unit for cell phones
US7671837B2 (en) 2005-09-06 2010-03-02 Apple Inc. Scrolling input arrangements using capacitive sensors on a flexible membrane
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
DE602005018695D1 (de) * 2005-09-27 2010-02-11 Research In Motion Ltd Mehrtap-Tastaturbenutzerschnittstelle
US7684821B2 (en) 2005-09-27 2010-03-23 Research In Motion Limited Multi-tap keyboard user interface
US7880729B2 (en) 2005-10-11 2011-02-01 Apple Inc. Center button isolation ring
US7808480B2 (en) * 2005-10-28 2010-10-05 Sap Ag Method and system for secure input
US20070152983A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Touch pad with symbols based on mode
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
GB0601988D0 (en) * 2006-02-01 2006-03-15 Univ Dundee Speech generation
US9360967B2 (en) 2006-07-06 2016-06-07 Apple Inc. Mutual capacitance touch sensing device
US8743060B2 (en) 2006-07-06 2014-06-03 Apple Inc. Mutual capacitance touch sensing device
US8022935B2 (en) 2006-07-06 2011-09-20 Apple Inc. Capacitance sensing electrode with integrated I/O mechanism
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7940250B2 (en) 2006-09-06 2011-05-10 Apple Inc. Web-clip widgets on a portable multifunction device
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US7795553B2 (en) 2006-09-11 2010-09-14 Apple Inc. Hybrid button
US8274479B2 (en) 2006-10-11 2012-09-25 Apple Inc. Gimballed scroll wheel
US8482530B2 (en) 2006-11-13 2013-07-09 Apple Inc. Method of capacitively sensing finger position
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US8631088B2 (en) 2007-01-07 2014-01-14 Apple Inc. Prioritized data synchronization with host device
US8788954B2 (en) 2007-01-07 2014-07-22 Apple Inc. Web-clip widgets on a portable multifunction device
US8850140B2 (en) 2007-01-07 2014-09-30 Apple Inc. Data backup for mobile device
GB2445803A (en) * 2007-01-19 2008-07-23 Southwing S L Personal Communications Systems
US7826872B2 (en) * 2007-02-28 2010-11-02 Sony Ericsson Mobile Communications Ab Audio nickname tag associated with PTT user
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US20090013254A1 (en) * 2007-06-14 2009-01-08 Georgia Tech Research Corporation Methods and Systems for Auditory Display of Menu Items
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
WO2009012208A1 (en) * 2007-07-13 2009-01-22 Josh Spitzer Messaging network, system and method for an away user of a mobile communications device
US9654104B2 (en) 2007-07-17 2017-05-16 Apple Inc. Resistive force sensor with capacitive discrimination
US9619143B2 (en) * 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8683378B2 (en) 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US7910843B2 (en) 2007-09-04 2011-03-22 Apple Inc. Compact input device
US8046369B2 (en) 2007-09-04 2011-10-25 Apple Inc. Media asset rating system
US8619038B2 (en) 2007-09-04 2013-12-31 Apple Inc. Editing interface
US11126321B2 (en) 2007-09-04 2021-09-21 Apple Inc. Application menu user interface
US20090094283A1 (en) * 2007-10-03 2009-04-09 Microsoft Corporation Active use lookup via mobile device
US8416198B2 (en) 2007-12-03 2013-04-09 Apple Inc. Multi-dimensional scroll wheel
US8473081B2 (en) * 2007-12-25 2013-06-25 Personics Holdings, Inc. Method and system for event reminder using an earpiece
US8326635B2 (en) * 2007-12-25 2012-12-04 Personics Holdings Inc. Method and system for message alert and delivery using an earpiece
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8125461B2 (en) 2008-01-11 2012-02-28 Apple Inc. Dynamic input graphic display
US8820133B2 (en) 2008-02-01 2014-09-02 Apple Inc. Co-extruded materials and methods
US9454256B2 (en) 2008-03-14 2016-09-27 Apple Inc. Sensor configurations of an input device that are switchable based on mode
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
EP2112813A1 (en) 2008-04-24 2009-10-28 Koninklijke KPN N.V. Personal address book communication service
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
CN101600009A (zh) * 2008-06-04 2009-12-09 深圳富泰宏精密工业有限公司 无线控制装置及具有该控制装置的无线通信装置
CA2730413A1 (en) 2008-07-11 2010-01-14 Bby Solutions, Inc. Ratings switch for portable media players
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8816967B2 (en) 2008-09-25 2014-08-26 Apple Inc. Capacitive sensor having electrodes arranged on the substrate and the flex circuit
US8255825B2 (en) * 2008-10-07 2012-08-28 Microsoft Corporation Content aware adaptive display
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US9959870B2 (en) 2008-12-11 2018-05-01 Apple Inc. Speech recognition involving a mobile device
US8395590B2 (en) 2008-12-17 2013-03-12 Apple Inc. Integrated contact switch and touch sensor elements
US8453057B2 (en) * 2008-12-22 2013-05-28 Verizon Patent And Licensing Inc. Stage interaction for mobile device
US9591118B2 (en) * 2009-01-01 2017-03-07 Intel Corporation Pose to device mapping
US8862252B2 (en) * 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
GB2468338A (en) * 2009-03-05 2010-09-08 Marcus Lewis A headset outputting audio messages comprising menu options to a user who inputs commands via a joggle wheel on the headset based on the options
US9354751B2 (en) 2009-05-15 2016-05-31 Apple Inc. Input device with optimized capacitive sensing
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8872771B2 (en) 2009-07-07 2014-10-28 Apple Inc. Touch sensing device having conductive nodes
US8295820B2 (en) * 2009-07-15 2012-10-23 Oter Gottfried Advanced internet-based caller ID information/data for mobile phones and mobile networks
KR20110055096A (ko) * 2009-11-19 2011-05-25 삼성전자주식회사 휴대용 단말기에서 입체 효과 설정 방법 및 장치
US8736561B2 (en) 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
US8381107B2 (en) * 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
DE112011100329T5 (de) 2010-01-25 2012-10-31 Andrew Peter Nelson Jerram Vorrichtungen, Verfahren und Systeme für eine Digitalkonversationsmanagementplattform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8516395B2 (en) * 2010-03-30 2013-08-20 Cisco Technology, Inc. One-dimensional representation of a two-dimensional data structure
US10788976B2 (en) 2010-04-07 2020-09-29 Apple Inc. Device, method, and graphical user interface for managing folders with multiple pages
US8881061B2 (en) 2010-04-07 2014-11-04 Apple Inc. Device, method, and graphical user interface for managing folders
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US8949745B2 (en) * 2011-10-21 2015-02-03 Konntech Inc. Device and method for selection of options by motion gestures
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US9014674B2 (en) * 2013-01-17 2015-04-21 Samsung Electronics Co., Ltd. Apparatus and method for transmitting information in voicemail
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144949A2 (en) 2013-03-15 2014-09-18 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
AU2014306221B2 (en) 2013-08-06 2017-04-06 Apple Inc. Auto-activating smart responses based on activities from remote devices
US10250735B2 (en) 2013-10-30 2019-04-02 Apple Inc. Displaying relevant user interface objects
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US11816325B2 (en) 2016-06-12 2023-11-14 Apple Inc. Application shortcuts for carplay
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10993274B2 (en) 2018-03-30 2021-04-27 Apple Inc. Pairing devices by proxy
US11297369B2 (en) 2018-03-30 2022-04-05 Apple Inc. Remotely controlling playback devices
US10783929B2 (en) 2018-03-30 2020-09-22 Apple Inc. Managing playback groups
US10614857B2 (en) 2018-07-02 2020-04-07 Apple Inc. Calibrating media playback channels for synchronized presentation
US11675476B2 (en) 2019-05-05 2023-06-13 Apple Inc. User interfaces for widgets

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5481595A (en) * 1994-03-08 1996-01-02 Uniden America Corp. Voice tag in a telephone auto-dialer
WO1998042110A1 (fr) * 1997-03-18 1998-09-24 Mitsubishi Denki Kabushiki Kaisha Telephone mobile

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2571191B1 (fr) * 1984-10-02 1986-12-26 Renault Systeme de radiotelephone, notamment pour vehicule automobile
US5095503A (en) * 1989-12-20 1992-03-10 Motorola, Inc. Cellular telephone controller with synthesized voice feedback for directory number confirmation and call status
DE4008598C2 (de) 1990-03-17 1995-08-17 Philips Patentverwaltung Mobilfunkgerät mit einem mindestens eine Funktionstaste aufweisenden Bedienteil
US5444768A (en) * 1991-12-31 1995-08-22 International Business Machines Corporation Portable computer device for audible processing of remotely stored messages
JP3268467B2 (ja) * 1992-09-08 2002-03-25 株式会社日立製作所 電話機
US5500919A (en) * 1992-11-18 1996-03-19 Canon Information Systems, Inc. Graphics user interface for controlling text-to-speech conversion
US5812870A (en) * 1993-09-17 1998-09-22 Eloner I.P. Holdings Ltd. Personal organizer with interface for recording digital voice files
DE29503933U1 (de) * 1994-03-16 1995-12-07 Ericsson Telefon Ab L M Gleichförmige Mensch-Maschine-Schnittstelle für zellulare Mobiltelefone
US5495566A (en) * 1994-11-22 1996-02-27 Microsoft Corporation Scrolling contents of a window
US5774540A (en) * 1995-11-15 1998-06-30 Lucent Technologies Inc. Hierarchical menu screen interface for displaying and accessing telephone terminal features
IL116103A0 (en) * 1995-11-23 1996-01-31 Wireless Links International L Mobile data terminals with text to speech capability
JPH09224077A (ja) * 1996-02-14 1997-08-26 Canon Inc 電子機器における情報検索方式及び情報検索装置
US5748104A (en) * 1996-07-11 1998-05-05 Qualcomm Incorporated Wireless remote telemetry system
US5950123A (en) * 1996-08-26 1999-09-07 Telefonaktiebolaget L M Cellular telephone network support of audible information delivery to visually impaired subscribers
US6128012A (en) * 1996-09-19 2000-10-03 Microsoft Corporation User interface for a portable data management device with limited size and processing capability
US5901222A (en) * 1996-10-31 1999-05-04 Lucent Technologies Inc. User interface for portable telecommunication devices
EP0844572A1 (en) * 1996-11-22 1998-05-27 Webtv Networks, Inc. User interface for controlling audio functions in a web browser
US6282511B1 (en) * 1996-12-04 2001-08-28 At&T Voiced interface with hyperlinked information
US5909183A (en) * 1996-12-26 1999-06-01 Motorola, Inc. Interactive appliance remote controller, system and method
US6178338B1 (en) * 1997-04-28 2001-01-23 Sony Corporation Communication terminal apparatus and method for selecting options using a dial shuttle
US5978689A (en) * 1997-07-09 1999-11-02 Tuoriniemi; Veijo M. Personal portable communication and audio system
JP4051728B2 (ja) * 1997-08-07 2008-02-27 ソニー株式会社 記録再生装置
JP3195279B2 (ja) * 1997-08-27 2001-08-06 インターナショナル・ビジネス・マシーンズ・コーポレ−ション 音声出力システムおよびその方法
US6097964A (en) * 1997-09-04 2000-08-01 Nokia Mobile Phones Limited Navigation key for a handset
FR2769781B1 (fr) 1997-10-14 2000-01-07 Sagem Telephone mobile a diffusion de messages sonores
JP3865169B2 (ja) * 1997-11-28 2007-01-10 ソニー株式会社 通信端末装置及び通信端末装置の制御方法
US6246983B1 (en) * 1998-08-05 2001-06-12 Matsushita Electric Corporation Of America Text-to-speech e-mail reader with multi-modal reply processor
US6161008A (en) * 1998-11-23 2000-12-12 Nortel Networks Limited Personal mobility and communication termination for users operating in a plurality of heterogeneous networks
US6192253B1 (en) * 1999-10-06 2001-02-20 Motorola, Inc. Wrist-carried radiotelephone

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5481595A (en) * 1994-03-08 1996-01-02 Uniden America Corp. Voice tag in a telephone auto-dialer
WO1998042110A1 (fr) * 1997-03-18 1998-09-24 Mitsubishi Denki Kabushiki Kaisha Telephone mobile

Also Published As

Publication number Publication date
TWI244604B (en) 2005-12-01
EP1181802B1 (en) 2007-02-21
DE60033518D1 (de) 2007-04-05
CN1369168A (zh) 2002-09-11
EP1755319A2 (en) 2007-02-21
KR100756931B1 (ko) 2007-09-07
DE60033518T2 (de) 2007-11-22
EP1181802A2 (en) 2002-02-27
US7310513B2 (en) 2007-12-18
CN1199425C (zh) 2005-04-27
KR20010102132A (ko) 2001-11-15
US20060099908A1 (en) 2006-05-11
WO2001044912A3 (en) 2001-12-13
EP1755319A3 (en) 2007-02-28
US6978127B1 (en) 2005-12-20
WO2001044912A2 (en) 2001-06-21
JP2003517674A (ja) 2003-05-27

Similar Documents

Publication Publication Date Title
JP4733895B2 (ja) ハンドヘルド式装置用のハンド−イヤユーザインターフェース
US7735012B2 (en) Audio user interface for computing devices
JP4526060B2 (ja) 複数のデータ・セグメントに対するアクセスを提供する方法
JP4088749B2 (ja) 情報処理装置および情報処理方法、並びにプログラム
JP3731525B2 (ja) 情報処理装置および情報処理方法、情報処理システム、並びにプログラム
US7667123B2 (en) System and method for musical playlist selection in a portable audio device
US6697467B1 (en) Telephone controlled entertainment
US7956272B2 (en) Management of files in a personal communication device
TWI436276B (zh) 用以處理媒體檔案之方法、媒體播放器裝置和電腦程式
EP1818762A1 (en) Information management method, information management program, and information management device
JP5166371B2 (ja) 端末装置、画像表示方法、およびプログラム
US20020015020A1 (en) Radio-style hollow appliance for interactive use with a computer
JP5036716B2 (ja) 個人用通信デバイスにおけるファイルの管理
JP4103126B2 (ja) 情報処理装置および情報処理方法、情報処理システム、並びにプログラム
De Vet et al. A personal digital assistant as an advanced remote control for audio/video equipment
JP2006080771A (ja) Ｄｊプレイ機能を有する携帯端末装置
JP4424423B2 (ja) 情報処理装置および方法、並びにプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100825

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110307

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110314

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110425

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140428

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees