JP2015018365A - 情報処理装置、情報処理方法およびプログラム - Google Patents
情報処理装置、情報処理方法およびプログラム Download PDFInfo
- Publication number
- JP2015018365A JP2015018365A JP2013144449A JP2013144449A JP2015018365A JP 2015018365 A JP2015018365 A JP 2015018365A JP 2013144449 A JP2013144449 A JP 2013144449A JP 2013144449 A JP2013144449 A JP 2013144449A JP 2015018365 A JP2015018365 A JP 2015018365A
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- area
- name
- layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 48
- 238000003672 processing method Methods 0.000 title description 5
- 230000008859 change Effects 0.000 claims description 4
- 230000006870 function Effects 0.000 description 197
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 230000004048 modification Effects 0.000 description 11
- 238000012986 modification Methods 0.000 description 11
- 238000010191 image analysis Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 7
- 238000000034 method Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 108700037326 eHAND helix-loop-helix Proteins 0.000 description 1
- 101150000808 hand1 gene Proteins 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【解決手段】ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義する呼称定義機能と、上記画像を上記ディスプレイに表示させるとともに、上記呼称を上記領域に関連付けて一時的に上記ディスプレイに表示させる表示制御機能と、上記画像に対する音声入力を取得する音声入力取得機能と、上記音声入力に上記呼称が含まれる場合に、上記領域に関するコマンドを発行するコマンド発行機能とを実現するプロセッサを備える情報処理装置が提供される
【選択図】図2
Description
1.システム構成
1−1.ハードウェア構成
1−2.機能構成
1−3.領域のレイヤ構造
1−4.呼称の表示例
2.第2の実施形態
2−1.領域のレイヤ構造
2−2.呼称の表示例
2−3.変形例
3.第3の実施形態
4.補足
(1−1.ハードウェア構成)
図1は、本開示の一実施形態に係る表示装置の概略的な構成を示すブロック図である。図1を参照すると、表示装置100は、プロセッサ102、メモリ104、ストレージ106、通信モジュール108、ディスプレイ110、スピーカ112、マイクロフォン114、入力装置116、カメラモジュール118、および接続ポート120を含みうる。
図2は、本開示の一実施形態に係る表示装置において実現される概略的な機能構成を示す図である。図2を参照すると、表示装置100では、画像生成機能151、呼称定義機能153、表示制御機能155、音声入力取得機能157、およびコマンド発行機能159が実現されうる。
画像生成機能151は、表示装置100のディスプレイ110に表示するための画像を生成する。例えば、画像は、写真や映像などのコンテンツ画像や、各種のフォーマットで記述されたドキュメント(例えばhttp(hypertext markup language)で記述されたWebページなどを含む)の画像を含みうる。また、画像は、表示装置100の操作のために利用されるGUI(Graphical User Interface)画像を含んでもよい。これらの画像を表示するためのデータは、例えば、ストレージ106から読み出されてもよく、また通信モジュール108を介してネットワーク上のサーバなどから取得されてもよい。画像生成機能151によって生成された画像は、表示制御機能155によってディスプレイ110に表示される。
呼称定義機能153は、画像生成機能151によって生成され、表示制御機能155によってディスプレイ110に表示される画像の少なくとも一部の領域に関する呼称(address term)を定義する。上記の通り、本実施形態では、ディスプレイ110に表示される画像が、例えばサブ画像や被写体領域として、画像内に定義される領域を含みうる。呼称定義機能153は、これらの領域についてそれぞれ呼称を定義することによって、後述するように音声入力によってディスプレイ110における画像の表示を操作することを容易にする。呼称定義機能153は、定義された呼称をディスプレイ110への表示のために表示制御機能155に提供するとともに、呼称に関する情報をコマンドDB161に格納する。
表示制御機能155は、画像生成機能151によって生成された画像をディスプレイ110に表示させるとともに、呼称定義機能153によって定義された呼称を、呼称に対応する画像内の領域に関連付けて一時的にディスプレイ110に表示させる。例えば、表示制御機能155は、呼称を、対応する領域の中のどこかの位置にテキストとして表示させる。また、表示制御機能155は、呼称に対応する領域を示す枠線などを表示させ、呼称と枠線などを関連付けて表示させてもよい。
コマンドDB161には、上述のように、呼称定義機能153によって定義された呼称に関する情報が格納される。呼称に関する情報は、例えば、呼称そのものと、呼称によって特定される画像内の領域を特定するための情報を含みうる。例えば、呼称がサブ画像の表示領域に対応して設定される場合には、サブ画像を提供するアプリケーション機能の識別情報(例えば、プロセスIDやウインドウIDなどでありうる)が呼称とともに格納されうる。また、例えば、呼称がアプリケーション画像に含まれるGUIコンポーネントの領域に対応して設定される場合には、GUIコンポーネントの識別情報(例えば、ボタンやタブなどに与えられるIDでありうる)が呼称とともに格納されうる。さらに、例えば、呼称が被写体領域に対応して設定される場合には、被写体領域の識別情報(例えば、画像内での座標情報でありうる)が呼称とともに格納されうる。
音声入力取得機能157は、ディスプレイ110に表示された画像に対する音声入力を取得する。より具体的には、音声入力取得機能157は、表示制御機能155によってディスプレイ110に画像が表示されているときに、マイクロフォン114を介して取得されたユーザの音声入力を取得する。上述の通り、マイクロフォン114は表示装置100の周辺で発生しているさまざまな種類の音声を取得するため、音声入力取得機能157は、取得された音声データから、ユーザの発話などの所定の音声を抽出する処理を実行してもよい。あるいは、音声入力取得機能157とは別に、上記の処理を実行する前処理部(図示せず)が存在してもよい。
コマンド発行機能159は、音声入力取得機能157が取得した音声入力に、呼称定義機能153によって定義された呼称が含まれる場合に、その呼称に対応する領域に関するコマンドを発行する。より具体的には、コマンド発行機能159は、取得された音声入力から音声認識によって抽出されたテキストに基づいてコマンドDB161を参照し、テキストに含まれる呼称および操作コマンドの名称を検索する。該当する呼称および操作コマンドの名称が発見された場合、コマンド発行機能159は、テキストに含まれる呼称に対応する領域について、テキストに含まれる名称に対応する操作コマンドを発行する。コマンドは、例えば画像生成機能151または表示制御機能155に対して発行されうる。
図3および図4は、本開示の第1の実施形態において定義される画像内の領域のレイヤ構造について説明するための図である。本実施形態では、呼称定義機能153による呼称の定義の対象になる画像内の領域が、以下に説明するようなレイヤ構造に従って設定されうる。
図5および図6は、本開示の第1の実施形態における呼称の表示例を示す図である。本実施形態では、例えば図5の例に示されるように、ディスプレイ110に表示される画像に含まれる複数のサブ画像の表示領域のそれぞれについて呼称が定義される。図示された例では、レイヤ1の領域がディスプレイ110に表示される画像全体に対応して設定され、レイヤ2の領域が画像に含まれるサブ画像の表示領域について定義される。呼称定義機能153は、Webブラウザ(レイヤ2−1)、開発ツール(レイヤ2−2)、テキストエディタ(レイヤ2−3)、およびタスクバー(レイヤ2−4)の各表示領域に対応して呼称を定義しうる。なお、この例において、表示装置100は、例えばPCでありうる。
続いて、本開示の第2の実施形態について説明する。なお、この第2の実施形態は、上記の第1の実施形態と比較して、以下で説明する領域の構成例および呼称の表示例を除いてはほぼ同様の構成とすることが可能であるため、これらの点以外についての詳細な説明は省略する。
図7は、本開示の第2の実施形態において定義される画像内の領域のレイヤ構造について説明するための図である。本実施形態では、ディスプレイ110に表示される写真の画像の全体がレイヤ1の領域になる。さらに、レイヤ1の領域に包含されるレイヤ2の2つの領域(レイヤ2−1、レイヤ2−2)が定義される。レイヤ2の2つの領域(レイヤ2−1、レイヤ2−2)は、それぞれレイヤ3の2つの領域(レイヤ3−1、レイヤ3−2と、レイヤ3−3、レイヤ3−4)を包含する。レイヤ3の4つの領域(レイヤ3−1〜レイヤ3−4)のうちの2つ(レイヤ3−3、レイヤ3−4)は、それぞれさらにレイヤ4の2つの領域(レイヤ4−1、レイヤ4−2と、レイヤ4−3、レイヤ4−4)を包含する。
図8および図9は、本開示の第2の実施形態における呼称の表示例を示す図である。本実施形態では、例えば、図7の例に示されるように、ディスプレイ110に表示される画像に含まれる複数の被写体領域のそれぞれについて呼称が定義される。図示された例では、レイヤ1の領域がディスプレイ110に表示される写真の画像全体に対応して設定され(なお、写真の画像は、必ずしもディスプレイ110の全体に表示されなくてもよい。つまり、上記の第1の実施形態におけるサブ画像の1つとして写真の画像が表示されてもよい)、レイヤ2以下の領域が画像に含まれる被写体領域について定義される。
(第1の変形例)
図10は、本開示の第2の実施形態の第1の変形例を示す図である。図10A〜図10Cには、上記で図8Bおよび図8Cを参照して説明された、ユーザの「Zoom in “Boy”」という発話が音声入力として取得された場合にレイヤ3−3の領域を基準にして画像が拡大表示されるときのディスプレイ110の表示の変化が、遷移中の表示(図10B)とともに示されている。
図11および図12は、本開示の第2の実施形態の第2の変形例を示す図である。本実施形態では、図7を参照して説明したように、ディスプレイ110に表示される写真について、被写体領域を含む領域のレイヤ構造が設定された。図7に示した例では、下位レイヤ領域は上位レイヤ領域にその全部が包含されていたが、本変形例ではそうではない。
続いて、本開示の第3の実施形態について説明する。なお、この第3の実施形態は、上記の第1の実施形態と比較して、以下で説明する呼称の表示例を除いてはほぼ同様の構成とすることが可能であるため、呼称の表示例以外についての詳細な説明は省略する。
本開示の実施形態は、例えば、上記で説明したような情報処理装置(表示装置として説明された)、システム、情報処理装置またはシステムで実行される情報処理方法、情報処理装置を機能させるためのプログラム、およびプログラムが記録された一時的でない有形の媒体を含みうる。
(1)ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義する呼称定義機能と、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させる表示制御機能と、
前記画像に対する音声入力を取得する音声入力取得機能と、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行するコマンド発行機能と
を実現するプロセッサを備える情報処理装置。
(2)前記領域は、上位レイヤ領域と下位レイヤ領域とを含み、
前記表示制御機能は、前記上位レイヤ領域が前記ディスプレイに表示されている場合に、前記表示された上位レイヤ領域に少なくとも一部が包含される下位レイヤ領域の呼称を表示させる、前記(1)に記載の情報処理装置。
(3)前記コマンド発行機能は、前記下位レイヤ領域を拡大表示させるコマンドを発行する、前記(2)に記載の情報処理装置。
(4)前記領域は、前記下位レイヤ領域のさらに下位のレイヤ領域を含み、
前記表示制御機能は、前記下位レイヤ領域が拡大表示された場合に、前記下位レイヤ領域に少なくとも一部が包含される、前記下位レイヤ領域のさらに下位のレイヤ領域の呼称を表示させる、前記(3)に記載の情報処理装置。
(5)前記コマンド発行機能は、前記下位レイヤ領域を選択状態にするコマンドを発行する、前記(2)〜(4)のいずれか1項に記載の情報処理装置。
(6)前記領域は、前記下位レイヤ領域のさらに下位のレイヤ領域を含み、
前記表示制御機能は、前記下位レイヤ領域が選択状態になった場合に、前記下位レイヤ領域に少なくとも一部が包含される、前記下位レイヤ領域のさらに下位のレイヤ領域の呼称を表示させる、前記(5)に記載の情報処理装置。
(7)前記コマンド発行機能は、前記下位レイヤ領域のさらに下位のレイヤ領域を拡大表示させるコマンドを発行する、前記(6)に記載の情報処理装置。
(8)前記上位レイヤ領域は、前記画像の全体の領域に対応し、
前記下位レイヤ領域は、前記画像に含まれる複数のサブ画像のそれぞれの表示領域に対応する、前記(2)〜(7)のいずれか1項に記載の情報処理装置。
(9)前記コマンド発行機能は、前記複数のサブ画像のうち前記音声入力に含まれる呼称に対応するサブ画像を前記画像の全体の領域に拡大表示させるコマンドを発行する、前記(8)に記載の情報処理装置。
(10)前記上位レイヤ領域は、前記画像の全体の領域に表示されるアプリケーション画像に対応し、
前記下位レイヤ領域は、前記アプリケーション画像に含まれるGUIコンポーネントの領域に対応する、前記(2)〜(7)のいずれか1項に記載の情報処理装置。
(11)前記上位レイヤ領域は、前記画像の全体の領域に対応し、
前記下位レイヤ領域は、前記画像において認識された複数の被写体領域のそれぞれに対応する、前記(2)に記載の情報処理装置。
(12)前記コマンド発行機能は、前記複数の被写体領域のうち前記音声入力に含まれる呼称に対応する被写体領域を基準にして前記画像を拡大表示させるコマンドを発行する、前記(11)に記載の情報処理装置。
(13)前記下位レイヤ領域は、前記上位レイヤ領域に全部が包含される、前記(2)〜(12)のいずれか1項に記載の情報処理装置。
(14)前記呼称定義機能は、前記領域に関する設定情報に基づいて前記呼称を定義する、前記(1)〜(13)のいずれか1項に記載の情報処理装置。
(15)前記呼称定義機能は、前記領域の前記画像内での位置に基づいて前記呼称を定義する、前記(1)〜(14)のいずれか1項に記載の情報処理装置。
(16)前記呼称定義機能は、前記領域の表示態様の時系列的な変化に基づいて前記呼称を定義する、前記(1)〜(15)のいずれか1項に記載の情報処理装置。
(17)前記表示制御機能は、前記音声入力に含まれる呼称を前記ディスプレイに表示させる、前記(1)〜(16)のいずれか1項に記載の情報処理装置。
(18)前記表示制御機能は、前記発行されたコマンドを前記ディスプレイに表示させる、前記(1)〜(17)のいずれか1項に記載の情報処理装置。
(19)プロセッサが、
ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義することと、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させることと、
前記画像に対する音声入力を取得することと、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行することと
を含む情報処理方法。
(20)ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義する呼称定義機能と、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させる表示制御機能と、
前記画像に対する音声入力を取得する音声入力取得機能と、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行するコマンド発行機能と
をコンピュータに実現させるためのプログラム。
102 プロセッサ
104 メモリ
106 ストレージ
108 通信モジュール
110 ディスプレイ
114 マイクロフォン
153 呼称定義機能
155 表示制御機能
157 音声入力取得機能
159 コマンド発行機能
Claims (20)
- ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義する呼称定義機能と、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させる表示制御機能と、
前記画像に対する音声入力を取得する音声入力取得機能と、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行するコマンド発行機能と
を実現するプロセッサを備える情報処理装置。 - 前記領域は、上位レイヤ領域と下位レイヤ領域とを含み、
前記表示制御機能は、前記上位レイヤ領域が前記ディスプレイに表示されている場合に、前記表示された上位レイヤ領域に少なくとも一部が包含される下位レイヤ領域の呼称を表示させる、請求項1に記載の情報処理装置。 - 前記コマンド発行機能は、前記下位レイヤ領域を拡大表示させるコマンドを発行する、請求項2に記載の情報処理装置。
- 前記領域は、前記下位レイヤ領域のさらに下位のレイヤ領域を含み、
前記表示制御機能は、前記下位レイヤ領域が拡大表示された場合に、前記下位レイヤ領域に少なくとも一部が包含される、前記下位レイヤ領域のさらに下位のレイヤ領域の呼称を表示させる、請求項3に記載の情報処理装置。 - 前記コマンド発行機能は、前記下位レイヤ領域を選択状態にするコマンドを発行する、請求項2に記載の情報処理装置。
- 前記領域は、前記下位レイヤ領域のさらに下位のレイヤ領域を含み、
前記表示制御機能は、前記下位レイヤ領域が選択状態になった場合に、前記下位レイヤ領域に少なくとも一部が包含される、前記下位レイヤ領域のさらに下位のレイヤ領域の呼称を表示させる、請求項5に記載の情報処理装置。 - 前記コマンド発行機能は、前記下位レイヤ領域のさらに下位のレイヤ領域を拡大表示させるコマンドを発行する、請求項6に記載の情報処理装置。
- 前記上位レイヤ領域は、前記画像の全体の領域に対応し、
前記下位レイヤ領域は、前記画像に含まれる複数のサブ画像のそれぞれの表示領域に対応する、請求項2に記載の情報処理装置。 - 前記コマンド発行機能は、前記複数のサブ画像のうち前記音声入力に含まれる呼称に対応するサブ画像を前記画像の全体の領域に拡大表示させるコマンドを発行する、請求項8に記載の情報処理装置。
- 前記上位レイヤ領域は、前記画像の全体の領域に表示されるアプリケーション画像に対応し、
前記下位レイヤ領域は、前記アプリケーション画像に含まれるGUIコンポーネントの領域に対応する、請求項2に記載の情報処理装置。 - 前記上位レイヤ領域は、前記画像の全体の領域に対応し、
前記下位レイヤ領域は、前記画像において認識された複数の被写体領域のそれぞれに対応する、請求項2に記載の情報処理装置。 - 前記コマンド発行機能は、前記複数の被写体領域のうち前記音声入力に含まれる呼称に対応する被写体領域を基準にして前記画像を拡大表示させるコマンドを発行する、請求項11に記載の情報処理装置。
- 前記下位レイヤ領域は、前記上位レイヤ領域に全部が包含される、請求項2に記載の情報処理装置。
- 前記呼称定義機能は、前記領域に関する設定情報に基づいて前記呼称を定義する、請求項1に記載の情報処理装置。
- 前記呼称定義機能は、前記領域の前記画像内での位置に基づいて前記呼称を定義する、請求項1に記載の情報処理装置。
- 前記呼称定義機能は、前記領域の表示態様の時系列的な変化に基づいて前記呼称を定義する、請求項1に記載の情報処理装置。
- 前記表示制御機能は、前記音声入力に含まれる呼称を前記ディスプレイに表示させる、請求項1に記載の情報処理装置。
- 前記表示制御機能は、前記発行されたコマンドを前記ディスプレイに表示させる、請求項1に記載の情報処理装置。
- プロセッサが、
ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義することと、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させることと、
前記画像に対する音声入力を取得することと、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行することと
を含む情報処理方法。 - ディスプレイに表示される画像の少なくとも一部の領域に関する呼称を定義する呼称定義機能と、
前記画像を前記ディスプレイに表示させるとともに、前記呼称を前記領域に関連付けて一時的に前記ディスプレイに表示させる表示制御機能と、
前記画像に対する音声入力を取得する音声入力取得機能と、
前記音声入力に前記呼称が含まれる場合に、前記領域に関するコマンドを発行するコマンド発行機能と
をコンピュータに実現させるためのプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013144449A JP6102588B2 (ja) | 2013-07-10 | 2013-07-10 | 情報処理装置、情報処理方法およびプログラム |
US14/273,735 US20150019974A1 (en) | 2013-07-10 | 2014-05-09 | Information processing device, information processing method, and program |
EP14174730.3A EP2824564B1 (en) | 2013-07-10 | 2014-06-27 | Information processing device, information processing method, and program |
CN201410315263.1A CN104281259B (zh) | 2013-07-10 | 2014-07-03 | 信息处理装置、信息处理方法和程序 |
US16/049,228 US10725734B2 (en) | 2013-07-10 | 2018-07-30 | Voice input apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013144449A JP6102588B2 (ja) | 2013-07-10 | 2013-07-10 | 情報処理装置、情報処理方法およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015018365A true JP2015018365A (ja) | 2015-01-29 |
JP2015018365A5 JP2015018365A5 (ja) | 2016-02-12 |
JP6102588B2 JP6102588B2 (ja) | 2017-03-29 |
Family
ID=51033001
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013144449A Active JP6102588B2 (ja) | 2013-07-10 | 2013-07-10 | 情報処理装置、情報処理方法およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (2) | US20150019974A1 (ja) |
EP (1) | EP2824564B1 (ja) |
JP (1) | JP6102588B2 (ja) |
CN (1) | CN104281259B (ja) |
Cited By (81)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016132620A1 (ja) * | 2015-02-18 | 2016-08-25 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP2017102939A (ja) * | 2016-12-26 | 2017-06-08 | 株式会社プロフィールド | オーサリング装置、オーサリング方法、およびプログラム |
JP2018173754A (ja) * | 2017-03-31 | 2018-11-08 | ブラザー工業株式会社 | 情報処理プログラム、情報処理装置、および情報処理装置の制御方法 |
JP2019522250A (ja) * | 2016-06-10 | 2019-08-08 | アップル インコーポレイテッドApple Inc. | マルチタスキング環境におけるインテリジェントデジタルアシスタント |
JP2019185733A (ja) * | 2018-04-11 | 2019-10-24 | 百度在線網絡技術(北京)有限公司 | 音声制御方法、端末機器、クラウドサーバ及びシステム |
US10714117B2 (en) | 2013-02-07 | 2020-07-14 | Apple Inc. | Voice trigger for a digital assistant |
US10720160B2 (en) | 2018-06-01 | 2020-07-21 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US10741185B2 (en) | 2010-01-18 | 2020-08-11 | Apple Inc. | Intelligent automated assistant |
US10741181B2 (en) | 2017-05-09 | 2020-08-11 | Apple Inc. | User interface for correcting recognition errors |
US10748546B2 (en) | 2017-05-16 | 2020-08-18 | Apple Inc. | Digital assistant services based on device capabilities |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US10878809B2 (en) | 2014-05-30 | 2020-12-29 | Apple Inc. | Multi-command single utterance input method |
US10909171B2 (en) | 2017-05-16 | 2021-02-02 | Apple Inc. | Intelligent automated assistant for media exploration |
US10930282B2 (en) | 2015-03-08 | 2021-02-23 | Apple Inc. | Competing devices responding to voice triggers |
US10942703B2 (en) | 2015-12-23 | 2021-03-09 | Apple Inc. | Proactive assistance based on dialog communication between devices |
US11009970B2 (en) | 2018-06-01 | 2021-05-18 | Apple Inc. | Attention aware virtual assistant dismissal |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US11010127B2 (en) | 2015-06-29 | 2021-05-18 | Apple Inc. | Virtual assistant for media playback |
US11070949B2 (en) | 2015-05-27 | 2021-07-20 | Apple Inc. | Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display |
US11087759B2 (en) | 2015-03-08 | 2021-08-10 | Apple Inc. | Virtual assistant activation |
US11120372B2 (en) | 2011-06-03 | 2021-09-14 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US11126400B2 (en) | 2015-09-08 | 2021-09-21 | Apple Inc. | Zero latency digital assistant |
US11133008B2 (en) | 2014-05-30 | 2021-09-28 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
US11152002B2 (en) | 2016-06-11 | 2021-10-19 | Apple Inc. | Application integration with a digital assistant |
WO2021220769A1 (ja) * | 2020-04-27 | 2021-11-04 | ソニーグループ株式会社 | 情報処理装置及び情報処理方法 |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US11169616B2 (en) | 2018-05-07 | 2021-11-09 | Apple Inc. | Raise to speak |
US11217251B2 (en) | 2019-05-06 | 2022-01-04 | Apple Inc. | Spoken notifications |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
US11237797B2 (en) | 2019-05-31 | 2022-02-01 | Apple Inc. | User activity shortcut suggestions |
US11257504B2 (en) | 2014-05-30 | 2022-02-22 | Apple Inc. | Intelligent assistant for home automation |
US11269678B2 (en) | 2012-05-15 | 2022-03-08 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
US11348582B2 (en) | 2008-10-02 | 2022-05-31 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
US11380310B2 (en) | 2017-05-12 | 2022-07-05 | Apple Inc. | Low-latency intelligent automated assistant |
US11388291B2 (en) | 2013-03-14 | 2022-07-12 | Apple Inc. | System and method for processing voicemail |
US11405466B2 (en) | 2017-05-12 | 2022-08-02 | Apple Inc. | Synchronization and task delegation of a digital assistant |
US11423886B2 (en) | 2010-01-18 | 2022-08-23 | Apple Inc. | Task flow identification based on user intent |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
US11431642B2 (en) | 2018-06-01 | 2022-08-30 | Apple Inc. | Variable latency device coordination |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US11468282B2 (en) | 2015-05-15 | 2022-10-11 | Apple Inc. | Virtual assistant in a communication session |
US11467802B2 (en) | 2017-05-11 | 2022-10-11 | Apple Inc. | Maintaining privacy of personal information |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11488406B2 (en) | 2019-09-25 | 2022-11-01 | Apple Inc. | Text detection using global geometry estimators |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
US11500672B2 (en) | 2015-09-08 | 2022-11-15 | Apple Inc. | Distributed personal assistant |
US11516537B2 (en) | 2014-06-30 | 2022-11-29 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US11526368B2 (en) | 2015-11-06 | 2022-12-13 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US11532306B2 (en) | 2017-05-16 | 2022-12-20 | Apple Inc. | Detecting a trigger of a digital assistant |
US11580990B2 (en) | 2017-05-12 | 2023-02-14 | Apple Inc. | User-specific acoustic models |
US11599331B2 (en) | 2017-05-11 | 2023-03-07 | Apple Inc. | Maintaining privacy of personal information |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11657813B2 (en) | 2019-05-31 | 2023-05-23 | Apple Inc. | Voice identification in digital assistant systems |
US11656884B2 (en) | 2017-01-09 | 2023-05-23 | Apple Inc. | Application integration with a digital assistant |
US11671920B2 (en) | 2007-04-03 | 2023-06-06 | Apple Inc. | Method and system for operating a multifunction portable electronic device using voice-activation |
US11696060B2 (en) | 2020-07-21 | 2023-07-04 | Apple Inc. | User identification using headphones |
US11710482B2 (en) | 2018-03-26 | 2023-07-25 | Apple Inc. | Natural assistant interaction |
US11727219B2 (en) | 2013-06-09 | 2023-08-15 | Apple Inc. | System and method for inferring user intent from speech inputs |
US11755276B2 (en) | 2020-05-12 | 2023-09-12 | Apple Inc. | Reducing description length based on confidence |
US11765209B2 (en) | 2020-05-11 | 2023-09-19 | Apple Inc. | Digital assistant hardware abstraction |
US11790914B2 (en) | 2019-06-01 | 2023-10-17 | Apple Inc. | Methods and user interfaces for voice-based control of electronic devices |
US11798547B2 (en) | 2013-03-15 | 2023-10-24 | Apple Inc. | Voice activated device for use with a voice-based digital assistant |
US11809783B2 (en) | 2016-06-11 | 2023-11-07 | Apple Inc. | Intelligent device arbitration and control |
US11809483B2 (en) | 2015-09-08 | 2023-11-07 | Apple Inc. | Intelligent automated assistant for media search and playback |
US11838734B2 (en) | 2020-07-20 | 2023-12-05 | Apple Inc. | Multi-device audio adjustment coordination |
US11853536B2 (en) | 2015-09-08 | 2023-12-26 | Apple Inc. | Intelligent automated assistant in a media environment |
US11854539B2 (en) | 2018-05-07 | 2023-12-26 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US11886805B2 (en) | 2015-11-09 | 2024-01-30 | Apple Inc. | Unconventional virtual assistant interactions |
US11914848B2 (en) | 2020-05-11 | 2024-02-27 | Apple Inc. | Providing relevant data items based on context |
US11928604B2 (en) | 2005-09-08 | 2024-03-12 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US12010262B2 (en) | 2013-08-06 | 2024-06-11 | Apple Inc. | Auto-activating smart responses based on activities from remote devices |
US12014118B2 (en) | 2017-05-15 | 2024-06-18 | Apple Inc. | Multi-modal interfaces having selection disambiguation and text modification capability |
US12051413B2 (en) | 2015-09-30 | 2024-07-30 | Apple Inc. | Intelligent device identification |
US12067985B2 (en) | 2018-06-01 | 2024-08-20 | Apple Inc. | Virtual assistant operations in multi-device environments |
US12073147B2 (en) | 2013-06-09 | 2024-08-27 | Apple Inc. | Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
KR102417682B1 (ko) | 2015-09-09 | 2022-07-07 | 삼성전자주식회사 | 음성 인식을 이용한 닉네임 관리 장치 및 방법 |
DE102017219596A1 (de) * | 2016-12-22 | 2018-06-28 | Volkswagen Aktiengesellschaft | Sprachausgabestimme eines Sprachbediensystems |
US11029834B2 (en) * | 2017-12-20 | 2021-06-08 | International Business Machines Corporation | Utilizing biometric feedback to allow users to scroll content into a viewable display area |
USD987666S1 (en) * | 2019-09-11 | 2023-05-30 | Ford Global Technologies, Llc | Display screen or portion thereof with transitional graphical user interface |
CN110989893A (zh) * | 2019-12-06 | 2020-04-10 | 北京金山安全软件有限公司 | 一种点击操作的响应方法、装置及电子设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004029933A (ja) * | 2002-06-21 | 2004-01-29 | Mitsubishi Heavy Ind Ltd | 表示制御装置および表示制御方法 |
JP2008277903A (ja) * | 2007-04-25 | 2008-11-13 | Sony Corp | 撮像装置及びフォーカス対象決定方法 |
JP2009109587A (ja) * | 2007-10-26 | 2009-05-21 | Panasonic Electric Works Co Ltd | 音声認識制御装置 |
US20100031150A1 (en) * | 2005-10-17 | 2010-02-04 | Microsoft Corporation | Raising the visibility of a voice-activated user interface |
JP2011035771A (ja) * | 2009-08-04 | 2011-02-17 | Olympus Corp | 撮像装置、編集装置および撮像システム |
JP2011114401A (ja) * | 2009-11-24 | 2011-06-09 | Sony Computer Entertainment Inc | 画像データ作成支援装置および画像データ作成支援方法 |
WO2012040107A1 (en) * | 2010-09-20 | 2012-03-29 | Kopin Corporation | Advanced remote control of host application using motion and voice commands |
JP2012103840A (ja) * | 2010-11-09 | 2012-05-31 | Sony Corp | 情報処理装置、プログラムおよびコマンド生成方法 |
JP2013037688A (ja) * | 2011-08-05 | 2013-02-21 | Samsung Electronics Co Ltd | 電子装置及びその制御方法 |
Family Cites Families (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4989253A (en) * | 1988-04-15 | 1991-01-29 | The Montefiore Hospital Association Of Western Pennsylvania | Voice activated microscope |
US5970457A (en) * | 1995-10-25 | 1999-10-19 | Johns Hopkins University | Voice command and control medical care system |
US6847336B1 (en) * | 1996-10-02 | 2005-01-25 | Jerome H. Lemelson | Selectively controllable heads-up display system |
US6154723A (en) * | 1996-12-06 | 2000-11-28 | The Board Of Trustees Of The University Of Illinois | Virtual reality 3D interface system for data creation, viewing and editing |
IL119948A (en) * | 1996-12-31 | 2004-09-27 | News Datacom Ltd | Voice activated communication system and program guide |
US6224542B1 (en) * | 1999-01-04 | 2001-05-01 | Stryker Corporation | Endoscopic camera system with non-mechanical zoom |
US6514201B1 (en) * | 1999-01-29 | 2003-02-04 | Acuson Corporation | Voice-enhanced diagnostic medical ultrasound system and review station |
US6545669B1 (en) * | 1999-03-26 | 2003-04-08 | Husam Kinawi | Object-drag continuity between discontinuous touch-screens |
JP3980791B2 (ja) * | 1999-05-03 | 2007-09-26 | パイオニア株式会社 | 音声認識装置を備えたマンマシンシステム |
US6718308B1 (en) * | 2000-02-22 | 2004-04-06 | Daniel L. Nolting | Media presentation system controlled by voice to text commands |
US6428449B1 (en) * | 2000-05-17 | 2002-08-06 | Stanford Apseloff | Interactive video system responsive to motion and voice command |
JP2002041023A (ja) * | 2000-07-06 | 2002-02-08 | Internatl Business Mach Corp <Ibm> | コンピュータシステム、表示制御装置、ディスプレイ装置、表示制御方法、記憶媒体及びプログラム伝送装置 |
JP2002041276A (ja) * | 2000-07-24 | 2002-02-08 | Sony Corp | 対話型操作支援システム及び対話型操作支援方法、並びに記憶媒体 |
US7136814B1 (en) * | 2000-11-03 | 2006-11-14 | The Procter & Gamble Company | Syntax-driven, operator assisted voice recognition system and methods |
US6508706B2 (en) * | 2001-06-21 | 2003-01-21 | David Howard Sitrick | Electronic interactive gaming apparatus, system and methodology |
US20030005461A1 (en) * | 2001-07-02 | 2003-01-02 | Sony Corporation | System and method for linking closed captioning to web site |
US6882974B2 (en) * | 2002-02-15 | 2005-04-19 | Sap Aktiengesellschaft | Voice-control for a user interface |
JP3702867B2 (ja) * | 2002-06-25 | 2005-10-05 | 株式会社デンソー | 音声制御装置 |
US7213206B2 (en) * | 2003-09-09 | 2007-05-01 | Fogg Brian J | Relationship user interface |
KR100588042B1 (ko) * | 2004-01-14 | 2006-06-09 | 한국과학기술연구원 | 인터액티브 프레젠테이션 시스템 |
FI20040296A (fi) * | 2004-02-25 | 2005-08-26 | Saimaan Ipr Oy | Menetelmä ja laite palvelun pyytämiseksi verkossa |
US20050195221A1 (en) * | 2004-03-04 | 2005-09-08 | Adam Berger | System and method for facilitating the presentation of content via device displays |
US20050210416A1 (en) * | 2004-03-16 | 2005-09-22 | Maclaurin Matthew B | Interactive preview of group contents via axial controller |
JP2007142840A (ja) * | 2005-11-18 | 2007-06-07 | Canon Inc | 情報処理装置及び情報処理方法 |
US7792678B2 (en) * | 2006-02-13 | 2010-09-07 | Hon Hai Precision Industry Co., Ltd. | Method and device for enhancing accuracy of voice control with image characteristic |
US8207936B2 (en) * | 2006-06-30 | 2012-06-26 | Sony Ericsson Mobile Communications Ab | Voice remote control |
US8666525B2 (en) * | 2007-09-10 | 2014-03-04 | Palo Alto Research Center Incorporated | Digital media player and method for facilitating music recommendation |
US8155479B2 (en) * | 2008-03-28 | 2012-04-10 | Intuitive Surgical Operations Inc. | Automated panning and digital zooming for robotic surgical systems |
JP5151644B2 (ja) * | 2008-04-16 | 2013-02-27 | ソニー株式会社 | リモートコントロールシステム及びリモートコントロール信号処理方法 |
US20100275122A1 (en) * | 2009-04-27 | 2010-10-28 | Microsoft Corporation | Click-through controller for mobile interaction |
JP5357068B2 (ja) * | 2010-01-20 | 2013-12-04 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 情報処理装置、情報処理システム、データ・アーカイブ方法およびデータ削除方法 |
US8928579B2 (en) * | 2010-02-22 | 2015-01-06 | Andrew David Wilson | Interacting with an omni-directionally projected display |
CN101886833B (zh) * | 2010-07-22 | 2012-06-27 | 慈溪拓赢电器有限公司 | 一种采用斜拉杆的小型一体式冷热空调机 |
US9111255B2 (en) * | 2010-08-31 | 2015-08-18 | Nokia Technologies Oy | Methods, apparatuses and computer program products for determining shared friends of individuals |
US9316827B2 (en) * | 2010-09-20 | 2016-04-19 | Kopin Corporation | LifeBoard—series of home pages for head mounted displays (HMD) that respond to head tracking |
CN101950244A (zh) * | 2010-09-20 | 2011-01-19 | 宇龙计算机通信科技(深圳)有限公司 | 一种用户界面上的内容信息的提示方法及装置 |
KR20120068078A (ko) * | 2010-10-26 | 2012-06-27 | 삼성전자주식회사 | 영상 처리 장치 및 그의 영상 데이터와 오디오 데이터의 연결 방법 |
US20120110456A1 (en) * | 2010-11-01 | 2012-05-03 | Microsoft Corporation | Integrated voice command modal user interface |
US20120260287A1 (en) * | 2011-04-07 | 2012-10-11 | Sony Corporation | Personalized user interface for audio video display device such as tv |
JP5326066B1 (ja) * | 2011-10-25 | 2013-10-30 | オリンパスメディカルシステムズ株式会社 | 内視鏡手術システム |
CA2781298C (en) * | 2011-11-08 | 2017-01-03 | Research In Motion Limited | Improved block zoom on a mobile electronic device |
GB2501471A (en) * | 2012-04-18 | 2013-10-30 | Barco Nv | Electronic conference arrangement |
US9152295B2 (en) * | 2012-06-05 | 2015-10-06 | Apple Inc. | Triage tool for problem reporting in maps |
US9367959B2 (en) * | 2012-06-05 | 2016-06-14 | Apple Inc. | Mapping application with 3D presentation |
IL221863A (en) * | 2012-09-10 | 2014-01-30 | Elbit Systems Ltd | Digital video photography system when analyzing and displaying |
US9020825B1 (en) * | 2012-09-25 | 2015-04-28 | Rawles Llc | Voice gestures |
KR20140089847A (ko) * | 2013-01-07 | 2014-07-16 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
US9495266B2 (en) * | 2013-05-16 | 2016-11-15 | Advantest Corporation | Voice recognition virtual test engineering assistant |
-
2013
- 2013-07-10 JP JP2013144449A patent/JP6102588B2/ja active Active
-
2014
- 2014-05-09 US US14/273,735 patent/US20150019974A1/en not_active Abandoned
- 2014-06-27 EP EP14174730.3A patent/EP2824564B1/en active Active
- 2014-07-03 CN CN201410315263.1A patent/CN104281259B/zh not_active Expired - Fee Related
-
2018
- 2018-07-30 US US16/049,228 patent/US10725734B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004029933A (ja) * | 2002-06-21 | 2004-01-29 | Mitsubishi Heavy Ind Ltd | 表示制御装置および表示制御方法 |
US20100031150A1 (en) * | 2005-10-17 | 2010-02-04 | Microsoft Corporation | Raising the visibility of a voice-activated user interface |
JP2008277903A (ja) * | 2007-04-25 | 2008-11-13 | Sony Corp | 撮像装置及びフォーカス対象決定方法 |
JP2009109587A (ja) * | 2007-10-26 | 2009-05-21 | Panasonic Electric Works Co Ltd | 音声認識制御装置 |
JP2011035771A (ja) * | 2009-08-04 | 2011-02-17 | Olympus Corp | 撮像装置、編集装置および撮像システム |
JP2011114401A (ja) * | 2009-11-24 | 2011-06-09 | Sony Computer Entertainment Inc | 画像データ作成支援装置および画像データ作成支援方法 |
WO2012040107A1 (en) * | 2010-09-20 | 2012-03-29 | Kopin Corporation | Advanced remote control of host application using motion and voice commands |
JP2012103840A (ja) * | 2010-11-09 | 2012-05-31 | Sony Corp | 情報処理装置、プログラムおよびコマンド生成方法 |
JP2013037688A (ja) * | 2011-08-05 | 2013-02-21 | Samsung Electronics Co Ltd | 電子装置及びその制御方法 |
Cited By (132)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11928604B2 (en) | 2005-09-08 | 2024-03-12 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US11671920B2 (en) | 2007-04-03 | 2023-06-06 | Apple Inc. | Method and system for operating a multifunction portable electronic device using voice-activation |
US11979836B2 (en) | 2007-04-03 | 2024-05-07 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US11348582B2 (en) | 2008-10-02 | 2022-05-31 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US11900936B2 (en) | 2008-10-02 | 2024-02-13 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US10741185B2 (en) | 2010-01-18 | 2020-08-11 | Apple Inc. | Intelligent automated assistant |
US12087308B2 (en) | 2010-01-18 | 2024-09-10 | Apple Inc. | Intelligent automated assistant |
US11423886B2 (en) | 2010-01-18 | 2022-08-23 | Apple Inc. | Task flow identification based on user intent |
US11120372B2 (en) | 2011-06-03 | 2021-09-14 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US11269678B2 (en) | 2012-05-15 | 2022-03-08 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US11321116B2 (en) | 2012-05-15 | 2022-05-03 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US12009007B2 (en) | 2013-02-07 | 2024-06-11 | Apple Inc. | Voice trigger for a digital assistant |
US10714117B2 (en) | 2013-02-07 | 2020-07-14 | Apple Inc. | Voice trigger for a digital assistant |
US11862186B2 (en) | 2013-02-07 | 2024-01-02 | Apple Inc. | Voice trigger for a digital assistant |
US11557310B2 (en) | 2013-02-07 | 2023-01-17 | Apple Inc. | Voice trigger for a digital assistant |
US11636869B2 (en) | 2013-02-07 | 2023-04-25 | Apple Inc. | Voice trigger for a digital assistant |
US10978090B2 (en) | 2013-02-07 | 2021-04-13 | Apple Inc. | Voice trigger for a digital assistant |
US11388291B2 (en) | 2013-03-14 | 2022-07-12 | Apple Inc. | System and method for processing voicemail |
US11798547B2 (en) | 2013-03-15 | 2023-10-24 | Apple Inc. | Voice activated device for use with a voice-based digital assistant |
US11727219B2 (en) | 2013-06-09 | 2023-08-15 | Apple Inc. | System and method for inferring user intent from speech inputs |
US12073147B2 (en) | 2013-06-09 | 2024-08-27 | Apple Inc. | Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant |
US12010262B2 (en) | 2013-08-06 | 2024-06-11 | Apple Inc. | Auto-activating smart responses based on activities from remote devices |
US11810562B2 (en) | 2014-05-30 | 2023-11-07 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US12067990B2 (en) | 2014-05-30 | 2024-08-20 | Apple Inc. | Intelligent assistant for home automation |
US11670289B2 (en) | 2014-05-30 | 2023-06-06 | Apple Inc. | Multi-command single utterance input method |
US11699448B2 (en) | 2014-05-30 | 2023-07-11 | Apple Inc. | Intelligent assistant for home automation |
US11257504B2 (en) | 2014-05-30 | 2022-02-22 | Apple Inc. | Intelligent assistant for home automation |
US10878809B2 (en) | 2014-05-30 | 2020-12-29 | Apple Inc. | Multi-command single utterance input method |
US11133008B2 (en) | 2014-05-30 | 2021-09-28 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US11516537B2 (en) | 2014-06-30 | 2022-11-29 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US11838579B2 (en) | 2014-06-30 | 2023-12-05 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10528659B2 (en) | 2015-02-18 | 2020-01-07 | Sony Corporation | Information processing device and information processing method |
WO2016132620A1 (ja) * | 2015-02-18 | 2016-08-25 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US11087759B2 (en) | 2015-03-08 | 2021-08-10 | Apple Inc. | Virtual assistant activation |
US11842734B2 (en) | 2015-03-08 | 2023-12-12 | Apple Inc. | Virtual assistant activation |
US10930282B2 (en) | 2015-03-08 | 2021-02-23 | Apple Inc. | Competing devices responding to voice triggers |
US11468282B2 (en) | 2015-05-15 | 2022-10-11 | Apple Inc. | Virtual assistant in a communication session |
US12001933B2 (en) | 2015-05-15 | 2024-06-04 | Apple Inc. | Virtual assistant in a communication session |
US11070949B2 (en) | 2015-05-27 | 2021-07-20 | Apple Inc. | Systems and methods for proactively identifying and surfacing relevant content on an electronic device with a touch-sensitive display |
US11947873B2 (en) | 2015-06-29 | 2024-04-02 | Apple Inc. | Virtual assistant for media playback |
US11010127B2 (en) | 2015-06-29 | 2021-05-18 | Apple Inc. | Virtual assistant for media playback |
US11500672B2 (en) | 2015-09-08 | 2022-11-15 | Apple Inc. | Distributed personal assistant |
US11550542B2 (en) | 2015-09-08 | 2023-01-10 | Apple Inc. | Zero latency digital assistant |
US11954405B2 (en) | 2015-09-08 | 2024-04-09 | Apple Inc. | Zero latency digital assistant |
US11809483B2 (en) | 2015-09-08 | 2023-11-07 | Apple Inc. | Intelligent automated assistant for media search and playback |
US11853536B2 (en) | 2015-09-08 | 2023-12-26 | Apple Inc. | Intelligent automated assistant in a media environment |
US11126400B2 (en) | 2015-09-08 | 2021-09-21 | Apple Inc. | Zero latency digital assistant |
US12051413B2 (en) | 2015-09-30 | 2024-07-30 | Apple Inc. | Intelligent device identification |
US11809886B2 (en) | 2015-11-06 | 2023-11-07 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US11526368B2 (en) | 2015-11-06 | 2022-12-13 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US11886805B2 (en) | 2015-11-09 | 2024-01-30 | Apple Inc. | Unconventional virtual assistant interactions |
US10942703B2 (en) | 2015-12-23 | 2021-03-09 | Apple Inc. | Proactive assistance based on dialog communication between devices |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
JP2019522250A (ja) * | 2016-06-10 | 2019-08-08 | アップル インコーポレイテッドApple Inc. | マルチタスキング環境におけるインテリジェントデジタルアシスタント |
US11037565B2 (en) | 2016-06-10 | 2021-06-15 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US11657820B2 (en) | 2016-06-10 | 2023-05-23 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10733993B2 (en) | 2016-06-10 | 2020-08-04 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
JP2019204517A (ja) * | 2016-06-10 | 2019-11-28 | アップル インコーポレイテッドApple Inc. | マルチタスキング環境におけるインテリジェントデジタルアシスタント |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US11152002B2 (en) | 2016-06-11 | 2021-10-19 | Apple Inc. | Application integration with a digital assistant |
US11749275B2 (en) | 2016-06-11 | 2023-09-05 | Apple Inc. | Application integration with a digital assistant |
US11809783B2 (en) | 2016-06-11 | 2023-11-07 | Apple Inc. | Intelligent device arbitration and control |
JP2017102939A (ja) * | 2016-12-26 | 2017-06-08 | 株式会社プロフィールド | オーサリング装置、オーサリング方法、およびプログラム |
US11656884B2 (en) | 2017-01-09 | 2023-05-23 | Apple Inc. | Application integration with a digital assistant |
JP2018173754A (ja) * | 2017-03-31 | 2018-11-08 | ブラザー工業株式会社 | 情報処理プログラム、情報処理装置、および情報処理装置の制御方法 |
US11210061B2 (en) | 2017-03-31 | 2021-12-28 | Brother Kogyo Kabushiki Kaisha | Non-transitory computer-readable recording medium storing computer-readable instructions for causing information processing device to execute communication processing with image processing program and voice-recognition program, information processing device, and method of controlling information processing device |
US10741181B2 (en) | 2017-05-09 | 2020-08-11 | Apple Inc. | User interface for correcting recognition errors |
US11467802B2 (en) | 2017-05-11 | 2022-10-11 | Apple Inc. | Maintaining privacy of personal information |
US11599331B2 (en) | 2017-05-11 | 2023-03-07 | Apple Inc. | Maintaining privacy of personal information |
US11837237B2 (en) | 2017-05-12 | 2023-12-05 | Apple Inc. | User-specific acoustic models |
US11538469B2 (en) | 2017-05-12 | 2022-12-27 | Apple Inc. | Low-latency intelligent automated assistant |
US11580990B2 (en) | 2017-05-12 | 2023-02-14 | Apple Inc. | User-specific acoustic models |
US11862151B2 (en) | 2017-05-12 | 2024-01-02 | Apple Inc. | Low-latency intelligent automated assistant |
US11405466B2 (en) | 2017-05-12 | 2022-08-02 | Apple Inc. | Synchronization and task delegation of a digital assistant |
US11380310B2 (en) | 2017-05-12 | 2022-07-05 | Apple Inc. | Low-latency intelligent automated assistant |
US12014118B2 (en) | 2017-05-15 | 2024-06-18 | Apple Inc. | Multi-modal interfaces having selection disambiguation and text modification capability |
US12026197B2 (en) | 2017-05-16 | 2024-07-02 | Apple Inc. | Intelligent automated assistant for media exploration |
US11532306B2 (en) | 2017-05-16 | 2022-12-20 | Apple Inc. | Detecting a trigger of a digital assistant |
US10909171B2 (en) | 2017-05-16 | 2021-02-02 | Apple Inc. | Intelligent automated assistant for media exploration |
US11675829B2 (en) | 2017-05-16 | 2023-06-13 | Apple Inc. | Intelligent automated assistant for media exploration |
US10748546B2 (en) | 2017-05-16 | 2020-08-18 | Apple Inc. | Digital assistant services based on device capabilities |
US11710482B2 (en) | 2018-03-26 | 2023-07-25 | Apple Inc. | Natural assistant interaction |
JP2021073567A (ja) * | 2018-04-11 | 2021-05-13 | 百度在線網絡技術(北京)有限公司 | 音声制御方法、端末機器、クラウドサーバ及びシステム |
US11127398B2 (en) | 2018-04-11 | 2021-09-21 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method for voice controlling, terminal device, cloud server and system |
JP2019185733A (ja) * | 2018-04-11 | 2019-10-24 | 百度在線網絡技術(北京)有限公司 | 音声制御方法、端末機器、クラウドサーバ及びシステム |
US11900923B2 (en) | 2018-05-07 | 2024-02-13 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US11169616B2 (en) | 2018-05-07 | 2021-11-09 | Apple Inc. | Raise to speak |
US11487364B2 (en) | 2018-05-07 | 2022-11-01 | Apple Inc. | Raise to speak |
US11854539B2 (en) | 2018-05-07 | 2023-12-26 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US11907436B2 (en) | 2018-05-07 | 2024-02-20 | Apple Inc. | Raise to speak |
US11431642B2 (en) | 2018-06-01 | 2022-08-30 | Apple Inc. | Variable latency device coordination |
US11009970B2 (en) | 2018-06-01 | 2021-05-18 | Apple Inc. | Attention aware virtual assistant dismissal |
US10720160B2 (en) | 2018-06-01 | 2020-07-21 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US12061752B2 (en) | 2018-06-01 | 2024-08-13 | Apple Inc. | Attention aware virtual assistant dismissal |
US11630525B2 (en) | 2018-06-01 | 2023-04-18 | Apple Inc. | Attention aware virtual assistant dismissal |
US11360577B2 (en) | 2018-06-01 | 2022-06-14 | Apple Inc. | Attention aware virtual assistant dismissal |
US12067985B2 (en) | 2018-06-01 | 2024-08-20 | Apple Inc. | Virtual assistant operations in multi-device environments |
US10984798B2 (en) | 2018-06-01 | 2021-04-20 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US12080287B2 (en) | 2018-06-01 | 2024-09-03 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US11893992B2 (en) | 2018-09-28 | 2024-02-06 | Apple Inc. | Multi-modal inputs for voice commands |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
US11783815B2 (en) | 2019-03-18 | 2023-10-10 | Apple Inc. | Multimodality in digital assistant systems |
US11705130B2 (en) | 2019-05-06 | 2023-07-18 | Apple Inc. | Spoken notifications |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
US11217251B2 (en) | 2019-05-06 | 2022-01-04 | Apple Inc. | Spoken notifications |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11675491B2 (en) | 2019-05-06 | 2023-06-13 | Apple Inc. | User configurable task triggers |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
US11888791B2 (en) | 2019-05-21 | 2024-01-30 | Apple Inc. | Providing message response suggestions |
US11237797B2 (en) | 2019-05-31 | 2022-02-01 | Apple Inc. | User activity shortcut suggestions |
US11657813B2 (en) | 2019-05-31 | 2023-05-23 | Apple Inc. | Voice identification in digital assistant systems |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
US11360739B2 (en) | 2019-05-31 | 2022-06-14 | Apple Inc. | User activity shortcut suggestions |
US11790914B2 (en) | 2019-06-01 | 2023-10-17 | Apple Inc. | Methods and user interfaces for voice-based control of electronic devices |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
US11488406B2 (en) | 2019-09-25 | 2022-11-01 | Apple Inc. | Text detection using global geometry estimators |
WO2021220769A1 (ja) * | 2020-04-27 | 2021-11-04 | ソニーグループ株式会社 | 情報処理装置及び情報処理方法 |
US11914848B2 (en) | 2020-05-11 | 2024-02-27 | Apple Inc. | Providing relevant data items based on context |
US11765209B2 (en) | 2020-05-11 | 2023-09-19 | Apple Inc. | Digital assistant hardware abstraction |
US11924254B2 (en) | 2020-05-11 | 2024-03-05 | Apple Inc. | Digital assistant hardware abstraction |
US11755276B2 (en) | 2020-05-12 | 2023-09-12 | Apple Inc. | Reducing description length based on confidence |
US11838734B2 (en) | 2020-07-20 | 2023-12-05 | Apple Inc. | Multi-device audio adjustment coordination |
US11750962B2 (en) | 2020-07-21 | 2023-09-05 | Apple Inc. | User identification using headphones |
US11696060B2 (en) | 2020-07-21 | 2023-07-04 | Apple Inc. | User identification using headphones |
Also Published As
Publication number | Publication date |
---|---|
EP2824564B1 (en) | 2020-02-05 |
CN104281259B (zh) | 2018-12-25 |
US10725734B2 (en) | 2020-07-28 |
EP2824564A1 (en) | 2015-01-14 |
CN104281259A (zh) | 2015-01-14 |
US20150019974A1 (en) | 2015-01-15 |
US20190012140A1 (en) | 2019-01-10 |
JP6102588B2 (ja) | 2017-03-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6102588B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP7410893B2 (ja) | ユーザインタフェースにおけるナビゲートのためのカラムインタフェース | |
US10579187B2 (en) | Display control apparatus, display control method and display control program | |
CN106575361B (zh) | 提供视觉声像的方法和实现该方法的电子设备 | |
US9607651B2 (en) | Method and apparatus for controlling contents in electronic device | |
JP2016524423A (ja) | ユーザ選択関心領域を超解像するためのシステムおよび方法 | |
JP2008084110A (ja) | 情報表示装置、情報表示方法及び情報表示プログラム | |
JPWO2015072194A1 (ja) | 表示制御装置、表示制御方法およびプログラム | |
WO2014034256A1 (ja) | 表示制御装置、表示制御システムおよび表示制御方法 | |
US20190012129A1 (en) | Display apparatus and method for controlling display apparatus | |
WO2016152200A1 (ja) | 情報処理システムおよび情報処理方法 | |
JP5748279B2 (ja) | 視聴対象出力装置、および視聴対象出力装置の動作方法 | |
EP3001294A2 (en) | Mobile terminal and method for controlling the same | |
JP2013097535A (ja) | 電子機器および表示制御方法 | |
CN110109730A (zh) | 用于提供视听反馈的设备、方法和图形用户界面 | |
US20160132478A1 (en) | Method of displaying memo and device therefor | |
US11978252B2 (en) | Communication system, display apparatus, and display control method | |
US12075000B2 (en) | Application extension program, information processing apparatus, and method | |
JP5752759B2 (ja) | 電子機器、方法、およびプログラム | |
US20170092334A1 (en) | Electronic device and method for visualizing audio data | |
TWI411952B (zh) | 文件檔案內容之縮放顯示系統及其方法 | |
US20140195014A1 (en) | Electronic apparatus and method for controlling electronic apparatus | |
WO2014041851A1 (ja) | 情報処理装置 | |
JP2023055000A (ja) | 携帯端末、情報処理方法及び情報処理プログラム | |
JP6150538B2 (ja) | 動画記録装置及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151217 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151217 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160914 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161115 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170131 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170213 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6102588 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |