JP2019528492A - メディア探索用のインテリジェント自動アシスタント - Google Patents

メディア探索用のインテリジェント自動アシスタント Download PDF

Info

Publication number
JP2019528492A
JP2019528492A JP2018544350A JP2018544350A JP2019528492A JP 2019528492 A JP2019528492 A JP 2019528492A JP 2018544350 A JP2018544350 A JP 2018544350A JP 2018544350 A JP2018544350 A JP 2018544350A JP 2019528492 A JP2019528492 A JP 2019528492A
Authority
JP
Japan
Prior art keywords
media item
media
user
digital assistant
providing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018544350A
Other languages
English (en)
Other versions
JP6671497B2 (ja
Inventor
デイヴィッド チャンス グラハム,
デイヴィッド チャンス グラハム,
サイラス ダニエル イラニ,
サイラス ダニエル イラニ,
エイミー ピアシー,
エイミー ピアシー,
トーマス アルシーナ,
トーマス アルシーナ,
ギャレット エル. ウェインバーグ,
ギャレット エル. ウェインバーグ,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201770425A external-priority patent/DK179559B1/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2019528492A publication Critical patent/JP2019528492A/ja
Application granted granted Critical
Publication of JP6671497B2 publication Critical patent/JP6671497B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/632Query formulation
    • G06F16/634Query by example, e.g. query by humming
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/332Query formulation
    • G06F16/3329Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/433Query formulation using audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/685Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using automatically derived transcript of audio data, e.g. lyrics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation
    • G06F16/90332Natural language query formulation or dialogue systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • G06F40/35Discourse or dialogue representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/453Help systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1815Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification techniques
    • G10L17/22Interactive procedures; Man-machine interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78Detection of presence or absence of voice signals
    • G10L25/84Detection of presence or absence of voice signals for discriminating voice from noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Acoustics & Sound (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Library & Information Science (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Machine Translation (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

インテリジェント自動アシスタントを動作させるためのシステム及びプロセスが提供される。1つの例に従って、方法は、1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、メディアの要求を示す第1の自然言語音声入力を受信することであって、第1の自然言語音声入力は第1の検索パラメータを含む、ことと、デジタルアシスタントによって、第1の検索パラメータに基づいて特定された第1のメディアアイテムを提供することとを含む。この方法は、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、第2の入力がメディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することとを更に含む。この方法は、第2の音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の音声入力に基づいて、第2のメディアアイテムを特定することと、デジタルアシスタントによって第2のメディアアイテムを提供することとを更に含む。

Description

本出願は、2017年5月16日に出願された米国特許仮出願第62/506,981号「INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION」、2017年6月1日に出願されたデンマーク特許出願第PA201770425「INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION」、及び2017年6月1日に出願されたデンマーク特許出願第PA201770426「INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION」に対する優先権を請求し、これらの出願の内容はその全体が本明細書において参照により組み込まれている。
本発明は、インテリジェント自動アシスタントに一般に関し、更に具体的には、メディア探索用のデジタルアシスタントの聴覚に基づくインターフェースを提供することに関する。
インテリジェント自動アシスタント(又はデジタルアシスタント)は、人間のユーザと電子デバイスとの間の有益なインターフェースを提供することができる。そのようなアシスタントは、ユーザが口頭形式及び/又はテキスト形式の自然言語を使用して、デバイス又はシステムと対話することを可能にすることができる。例えば、ユーザは、ユーザ要求を含む音声入力を電子デバイス上で動作するデジタルアシスタントに提供することができる。デジタルアシスタントは、ユーザの意図をこの音声入力から解釈し、ユーザの意図をタスクとして実行することができる。その後、電子デバイスの1つ以上のサービスを実行することによってタスクを実行でき、ユーザ要求に応答した関連する出力をユーザに返すことができる。
ほとんどの場合、ユーザは、電子デバイスと対話するために、従来のグラフィカルユーザインターフェースに少なくとも部分的に依存する。ただし、場合によっては、デジタルアシスタントは、表示能力が制限されているか、又は表示能力がない電子デバイス上に実装されることがある。
いくつかの方法例を本明細書に開示する。方法の一例は、1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、メディアの要求を示す第1の自然言語音声入力を受信することであって、第1の自然言語音声入力は、第1の検索パラメータを含む、ことと、デジタルアシスタントによって、第1のメディアアイテムを提供することであって、第1の検索パラメータに基づいて第1のメディアアイテムが特定される、ことと、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、第2の自然言語音声入力が、メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することとを含む。この方法は、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の自然言語音声入力に基づいて、第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、デジタルアシスタントによって第2のメディアアイテムを提供することとを更に含む。
方法の一例は、1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、自然言語音声入力を受信することと、デジタルアシスタントによって、自然言語音声入力に基づいてタスクを特定することと、デジタルアシスタントによって、特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、音声応答に対応するメディアアイテムを再生することとを含む。
方法の一例は、1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、メディアの要求を示す音声入力を受信することと、音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、デジタルアシスタントによって、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することとを含む。この方法は、連続する非肯定応答の数が閾値を満たしていないという決定に従って、デジタルアシスタントによって、第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供することを更に含む。この方法は、連続する非肯定応答の数が閾値を満たすという決定に従って、第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを更に含む。
方法の一例は、1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、メディアの要求を示す音声入力を受信することと、デジタルアシスタントによって、電子デバイスに対する複数のユーザの物理的存在を検出することと、複数のユーザの物理的存在を検出することに応答して、複数のユーザに対応する複数の嗜好プロファイルを取得することと、デジタルアシスタントによって、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、デジタルアシスタントによって、マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、デジタルアシスタントによって、特定されたメディアアイテムを含むオーディオ出力を提供することとを含む。
いくつかの非一時的コンピュータ可読媒体の例を本明細書に開示する。非一時的コンピュータ可読記憶媒体の例は、1つ以上のプログラムを記憶する。1つ以上のプログラムは命令を含み、これらの命令は、電子デバイスの1つ以上のプロセッサによって実行されるときに、電子デバイスに対して、メディアの要求を示す第1の自然言語音声入力を受信することであって、第1の自然言語音声入力は、第1の検索パラメータを含む、ことと、デジタルアシスタントによって、第1のメディアアイテムを提供することであって、第1の検索パラメータに基づいて第1のメディアアイテムが特定される、ことと、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、第2の自然言語音声入力が、メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することとを実行させる。これらの命令は、電子デバイスに対して、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の自然言語音声入力に基づいて、第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、デジタルアシスタントによって第2のメディアアイテムを提供することとを更に実行させることができる。
非一時的コンピュータ可読記憶媒体の例は、1つ以上のプログラムを記憶する。1つ以上のプログラムは、電子デバイスの1つ以上のプロセッサによって実行されるときに、電子デバイスに対して、自然言語音声入力を受信することと、デジタルアシスタントによって、自然言語音声入力に基づいてタスクを特定することと、デジタルアシスタントによって、特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、音声応答に対応するメディアアイテムを再生することとを実行させる命令を含む。
非一時的コンピュータ可読記憶媒体の例は、1つ以上のプログラムを記憶する。1つ以上のプログラムは、電子デバイスの1つ以上のプロセッサによって実行されるときに、電子デバイスに対して、メディアの要求を示す音声入力を受信することと、音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、デジタルアシスタントによって、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することとを実行させる命令を含む。これらの命令は、電子デバイスに対して、連続する非肯定応答の数が閾値を満たしていないという決定に従って、デジタルアシスタントによって、第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供することを更に実行させることができる。これらの命令は、電子デバイスに対して、連続する非肯定応答の数が閾値を満たすという決定に従って、前述の第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを更に実行させることができる。
非一時的コンピュータ可読記憶媒体の例は、1つ以上のプログラムを記憶する。1つ以上のプログラムは、電子デバイスの1つ以上のプロセッサによって実行されるときに、電子デバイスに対して、メディアの要求を示す音声入力を受信することと、デジタルアシスタントによって、電子デバイスに対する複数のユーザの物理的存在を検出することと、複数のユーザの物理的存在を検出することに応答して、複数のユーザに対応する複数の嗜好プロファイルを取得することと、デジタルアシスタントによって、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、デジタルアシスタントによって、マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、デジタルアシスタントによって、特定されたメディアアイテムを含むオーディオ出力を提供することとを実行させる命令を含む。
いくつかの電子デバイスの例を本明細書に開示する。電子デバイスの例は、1つ以上のプロセッサと、メモリと、1つ以上のプログラムとを備え、これらの1つ以上のプログラムは、メモリ内に記憶されており、1つ以上のプロセッサによって実行されるように構成されており、これらの1つ以上のプログラムは、メディアの要求を示す第1の自然言語音声入力を受信することであって、この第1の自然言語音声入力は第1の検索パラメータを含んでいる、ことと、デジタルアシスタントによって、第1のメディアアイテムを提供することであって、第1の検索パラメータに基づいて第1のメディアアイテムが特定される、ことと、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、第2の自然言語音声入力が、メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することとを実行する命令を含む。1つ以上のプログラムは、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の自然言語音声入力に基づいて、第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、デジタルアシスタントによって第2のメディアアイテムを提供することとを実行する命令を更に含む。
電子デバイスの例は、1つ以上のプロセッサと、メモリと、1つ以上のプログラムとを備え、これらの1つ以上のプログラムは、メモリ内に記憶されており、1つ以上のプロセッサによって実行されるように構成されており、これらの1つ以上のプログラムは、自然言語音声入力を受信することと、デジタルアシスタントによって、自然言語音声入力に基づいてタスクを特定することと、デジタルアシスタントによって、特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、音声応答に対応するメディアアイテムを再生することとを実行する命令を含む。
電子デバイスの例は、1つ以上のプロセッサと、メモリと、1つ以上のプログラムとを備え、これらの1つ以上のプログラムは、メモリ内に記憶されており、1つ以上のプロセッサによって実行されるように構成されており、これらの1つ以上のプログラムは、メディアの要求を示す音声入力を受信することと、音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、デジタルアシスタントによって、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することとを実行する命令を含む。1つ以上のプログラムは、連続する非肯定応答の数が閾値を満たしていないという決定に従って、デジタルアシスタントによって、第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供する命令を更に含む。1つ以上のプログラムは、連続する非肯定応答の数が閾値を満たすという決定に従って、第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを実行する命令を更に含む。
電子デバイスの例は、1つ以上のプロセッサと、メモリと、1つ以上のプログラムとを備え、これらの1つ以上のプログラムは、メモリ内に記憶されており、1つ以上のプロセッサによって実行されるように構成されており、これらの1つ以上のプログラムは、メディアの要求を示す音声入力を受信することと、デジタルアシスタントによって、電子デバイスに対する複数のユーザの物理的存在を検出することと、複数のユーザの物理的存在を検出することに応答して、複数のユーザに対応する複数の嗜好プロファイルを取得することと、デジタルアシスタントによって、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、デジタルアシスタントによって、マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、デジタルアシスタントによって、特定されたメディアアイテムを含むオーディオ出力を提供することとを実行する命令を含む。
電子デバイスの例は、メディアの要求を示す第1の自然言語音声入力を受信する手段であって、第1の自然言語音声入力は第1の検索パラメータを含む、手段と、デジタルアシスタントによって、第1のメディアアイテムを提供する手段であって、第1の検索パラメータに基づいて第1のメディアアイテムが特定される、手段と、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信する手段と、第2の自然言語音声入力が、メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定する手段と、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の自然言語音声入力に基づいて、第1のメディアアイテムとは異なる第2のメディアアイテムを特定する手段と、デジタルアシスタントによって第2のメディアアイテムを提供する手段とを含む。
電子デバイスの例は、自然言語音声入力を受信する手段と、デジタルアシスタントによって、自然言語音声入力に基づいてタスクを特定する手段と、デジタルアシスタントによって、特定されたタスクに関連付けられた音声応答を示す音声出力を提供する手段と、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、音声応答に対応するメディアアイテムを再生する手段とを含む。
電子デバイスの例は、メディアの要求を示す音声入力を受信する手段と、音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供する手段と、デジタルアシスタントによって、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定する手段と、連続する非肯定応答の数が閾値を満たしていないという決定に従って、デジタルアシスタントによって、第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供する手段と、連続する非肯定応答の数が閾値を満たすという決定に従って、第2のメディアアイテムの提案を示すオーディオ出力を提供することを止める手段と、デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供する手段とを含む。
電子デバイスの例は、メディアの要求を示す音声入力を受信する手段と、デジタルアシスタントによって、電子デバイスに対する複数のユーザの物理的存在を検出する手段と、複数のユーザの物理的存在を検出することに応答して、複数のユーザに対応する複数の嗜好プロファイルを取得する手段と、デジタルアシスタントによって、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供する手段と、デジタルアシスタントによって、マージされた嗜好プロファイルに基づいてメディアアイテムを特定する手段と、デジタルアシスタントによって、特定されたメディアアイテムを含むオーディオ出力を提供する手段とを含む。
メディアアイテムを提供しながら自然言語音声入力を受信することにより、ユーザはメディア検索を容易に制御して所望のコンテンツを得ることができる。ユーザは、デジタルアシスタントを使用して、現在の再生を停止することも、デジタルアシスタントによるプロンプトを待機することも必要とせず、メディアの要求をいつでも絞り込むことができる。そのため、デジタルアシスタントは、メディア検索プロセスに対する完全かつ柔軟な制御をユーザに提供する。また、ユーザはデジタルアシスタントを使用していつでも会話に入り込み、会話を制御することができるため、メディアアイテムを提供しながら自然言語音声入力を受信することによって、デジタルアシスタントとユーザとの間での自然で直感的で人間的な対話を実現する。メディア検索プロセスの柔軟かつ直感的な制御を提供することにより、デバイスの操作性を向上させ、(例えば、ユーザの意図を理解し、ユーザに完全な制御を提供することによって)デジタルアシスタントとの対話をより効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによって、デバイスの電力使用を削減し、バッテリ寿命を改善する。
自然言語音声入力がメディアの要求を絞り込んでメディアアイテムを特定するユーザの意図に対応するかどうかを判定することにより、ユーザは相対的に少ない数の入力で所望のコンテンツを素早く取得することができる。本技法は、例えば、メディアの要求を絞り込むときに、ユーザは以前に指定されたパラメータを繰り返し提供する必要がないため、ユーザ入力の数を低減する。また、本技法は、例えば、ユーザは、より調整され、一連の決定を介して所望のコンテンツに絞り込まれた推奨を受け取ることができるので、デジタルアシスタントとユーザとの間の自然で直感的な対話を提供する。ユーザ入力の数を減らし、直感的なユーザインターフェースを提供することは、デバイスの操作性を高め、ユーザ−デバイスインターフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
関連するメディアアイテムを再生しながら、ユーザ要求に対する音声応答を示す音声出力を提供することにより、デジタルアシスタントのリッチで直感的な聴覚インターフェースを提供する。メディアアイテムの再生(例えば、関連するサウンド効果、コンテンツの代表サンプル)は、ユーザが提示されているコンテンツを迅速に理解し、オーディオ出力の持続時間を延ばすことなく、より確かな情報に基づいて決定することに役立つ。更に、ユーザがより確かな情報に基づいて決定できるようにすることで、ユーザ入力の数を低減する。リッチで直感的な聴覚インターフェースを提供することは、デバイスの操作性を高め、ユーザ−デバイスインターフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
デジタルアシスタントは、推奨に対する連続する非肯定応答の数が閾値を満たしているかどうかを判定し、満たしていない場合に、別の推奨を提供することによって、選択肢をユーザに素早く直感的に提示することができる。本技法は、ユーザが新しい推奨を繰り返し要求する必要がないため、ユーザ入力の数を低減する。推奨を取得するためのユーザ入力の数を減らすことは、デバイスの操作性を高め、ユーザ−デバイスインターフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
デジタルアシスタントは、連続する非肯定応答の数が閾値を満たしているかどうかを判定し、満たしている場合に、ユーザ入力を要求することによって、ユーザの所望のコンテンツを素早く特定することができる。本技法は、ユーザが望ましくない推奨を繰り返し拒否すること、デジタルアシスタントによる望ましくない推奨の提供を停止すること、及び/又は新しい検索を開始することが必要ないため、ユーザ入力の数を低減する。本技法は、デジタルアシスタントが、ユーザコマンドを使用せずに、適切な場合に自動的に情報の入力を促すので、デジタルアシスタントとユーザとの間の自然で直感的な対話も提供する。ユーザ入力の数を減らし、自然なユーザインターフェースを提供することは、デバイスの操作性を高め、ユーザ−デバイスインターフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
複数のユーザの物理的存在を検出し、これらのユーザの嗜好プロファイルに基づいてマージされた嗜好プロファイルを提供することによって、複数のユーザのために所望のコンテンツを迅速に特定することができる。本技法は、複数のユーザに共通する嗜好を特定するための、それらのユーザの認識的負担を低減し、共通の嗜好をデジタルアシスタントに対して指定すること、及び/又は望ましくない推奨を拒否するために必要な入力の数を低減する。ユーザ入力の数及び認識的負担を減らすことは、デバイスの操作性を高め、ユーザ−デバイスインターフェースを(例えば、デバイスを操作/対話するときに適切な入力を提供するようにユーザを支援し、ユーザの誤りを削減することによって)更に効率的にし、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによってデバイスの電力使用を削減し、バッテリ寿命を改善する。
種々の実施例に係る、デジタルアシスタントを実装するためのシステム及び環境を示すブロック図である。
様々な実施例に係る、デジタルアシスタントのクライアント側部分を実装するポータブル多機能デバイスを示すブロック図である。
様々な実施例に係る、イベント処理のための例示的な構成要素を示すブロック図である。
様々な実施例に係る、デジタルアシスタントのクライアント側部分を実装するポータブル多機能デバイスを示す図である。
様々な実施例に係る、ディスプレイ及びタッチ感知面を備える例示的な多機能デバイスのブロック図である。
様々な実施例に係る、ポータブル多機能デバイス上のアプリケーションのメニュー用の例示的なユーザインターフェースを示す図である。
様々な実施例に係る、ディスプレイとは別個のタッチ感知面を備える多機能デバイスのための例示的なユーザインターフェースを示す図である。
様々な実施例に係る、パーソナル電子デバイスを示す図である。
様々な実施例に係る、パーソナル電子デバイスを示すブロック図である。
様々な実施例に係る、デジタルアシスタントシステム又はそのサーバ部分を示すブロック図である。
様々な実施例に係る、図7Aに示すデジタルアシスタントの機能を示す図である。
様々な実施例に係る、オントロジの一部分を示す図である。
いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。 いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。
いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。 いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。
いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。 いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。
いくつかの実施形態に係る、電子デバイスの例示的なユーザインターフェースを示す図である。
様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセスを示す図である。
様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセスを示す図である。
様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセスを示す図である。
様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセスを示す図である。
以下の実施例の説明では、実施することが可能な特定の実施例が例示として示される、添付図面を参照する。様々な実施例の範囲から逸脱することなく、他の実施例を使用することができ、構造上の変更を実施することができることを理解されたい。
前述したように、デジタルアシスタントは、表示能力が制限されているか、又は表示能力がない電子デバイス上に実装されることがある。したがって、主に聴覚に基づくインターフェースを提供する電子デバイス(又は、電子デバイス上のデジタルアシスタント)が必要である。更に、デジタルアシスタントとユーザとの間での自然で直感的、かつリッチな対話を提供するための、主に聴覚に基づくインターフェースが必要である。そのような技法は、デバイスの操作性を向上させ、(例えば、ユーザが提示されたコンテンツを素早く取得して理解できるようにすることによって)デジタルアシスタントとの対話をより効率的にすることができ、加えて、ユーザがデバイスを更に素早くかつ効率的に使用できるようにすることによって、デバイスの電力使用を削減し、バッテリ寿命を改善する。
以下の説明では、様々な要素を説明するために「第1」、「第2」等の用語を使用するが、これらの要素はこれらの用語によって限定されるべきではない。これらの用語は、ある要素を別の要素と区別するためにのみ使用される。例えば、説明されている様々な実施例の範囲から逸脱することなく、第1の入力は第2の入力と称することができ、同様に、第2の入力は第1の入力と称し得る。第1の入力及び第2の入力は双方とも入力であり得、いくつかの場合では、個別の、異なる入力である。
本明細書で説明される様々な実施例の説明で使用される用語は、特定の実施例を説明することのみを目的とするものであって、限定することを意図するものではない。説明される様々な実施例の説明及び添付の特許請求の範囲で使用されるとき、単数形「a」、「an」、及び「the」は、文脈がそうではないことを明確に示さない限り、複数形もまた含むことが意図される。本明細書で使用されるときに、用語「及び/又は」は、関連する列挙された項目のうちの1つ以上の任意のすべての可能な組み合わせを指し、かつこれを含むことをもまた理解されたい。用語「includes(含む)、「including(含む)」、「comprises(含む)」及び/又は「comprising(含む)」は、本明細書で使用されるとき、述べられた特徴、整数、ステップ、動作、要素、及び/又は構成要素の存在を指定するが、1つ以上の他の特徴、整数、ステップ、動作、要素、構成要素、及び/又はそれらの群、の存在又は追加を除外しないことが更に理解されるであろう。
用語「if(〜場合に)」は、文脈に応じて「when(〜時に)」又は「upon(〜すると)」又は「in response to determining(〜という判定に応じて)」又は「in response to detecting(〜を検出したことに応じて)」を意味すると解釈することができる。同様に、句「if it is determined(〜と判定される場合に)」又は「if [a stated condition or event] is detected([述べられる条件又はイベント]が検出される場合に)」は、文脈に応じて「upon determining(〜と判定される時に)」又は「in response to determining(〜との判定に応じて)」又は「upon detecting [the stated condition or event]([述べられる条件又はイベント]の検出時に)」又は「in response to detecting [the stated condition or event]([述べられる条件又はイベント]の検出に応じて)」を意味すると解釈することができる。
1.システム及び環境
図1は、様々な実施例に係る、システム100のブロック図を示す。いくつかの実施例では、システム100はデジタルアシスタントを実装し得る。用語「デジタルアシスタント」、「仮想アシスタント」、「インテリジェント自動アシスタント」、又は「自動デジタルアシスタント」は、口頭及び/又はテキスト形式の自然言語入力を解釈してユーザ意図を推測し、推測されたユーザ意図に基づきアクションを実行する任意の情報処理システムを指す。例えば、推測されたユーザの意図を実行するために、システムは、以下の1つ以上、すなわち、推測されたユーザの意図を実現するために設計されたステップ及びパラメータを有するタスクフローを特定すること、推測されたユーザの意図からの特定の要件をタスクフローに入力すること、プログラム、方法、サービス、API等を呼び出すことによりタスクフローを実行すること、並びに可聴(例えば、スピーチ)形式及び/又は視覚形式でユーザへの出力応答を生成すること、を実行する。
具体的には、デジタルアシスタントは、自然言語命令、要求、陳述、叙述、及び/又は照会の形で少なくとも部分的にユーザ要求を受け入れることができる。通例、ユーザ要求はデジタルアシスタントによる情報回答又はタスクの実行のいずれかを求める。ユーザ要求への満足な応答は、要求された情報回答の提供、要求されたタスクの実行、又はその2つの組み合わせを含む。例えば、ユーザはデジタルアシスタントに「私は今どこにいますか?」等の質問をする。ユーザの現在の場所に基づき、デジタルアシスタントは、「あなたはセントラルパーク内の西門の近くにいます」と回答する。ユーザは、例えば、「私の友人を、来週の私のガールフレンドの誕生日パーティに招待してください」のように、タスク実行を要求する。それに応じて、デジタルアシスタントは、「はい、ただ今」と述べることによって要求を受け取ったことを通知し、次に、ユーザの代わりに、ユーザの電子アドレス帳に載っているユーザの友人の各々に適切なカレンダ招待状を送信してもよい。要求されたタスクの実行中、デジタルアシスタントは、長時間にわたって情報を複数回交換する連続的なダイアログにおいて、ユーザと対話する場合がある。情報又は種々のタスクの実行を要求するためにデジタルアシスタントと対話する方法は他にも数多く存在する。言葉による応答を提供し、プログラムされたアクションを取ることに加えて、デジタルアシスタントはまた、他の視覚又はオーディオ形式の応答を、例えば、テキスト、警報、音楽、ビデオ、アニメーション等として、提供する。
図1に示されているように、いくつかの実施例では、デジタルアシスタントはクライアント−サーバモデルに従って実装される。デジタルアシスタントは、ユーザデバイス104上で実行されるクライアント側部分102(以後、「DAクライアント102」)、及びサーバシステム108上で実行されるサーバ側部分106(以後「DAサーバ106」)を含む。DAクライアント102は1つ以上のネットワーク110を通じてDAサーバ106と通信する。DAクライアント102は、ユーザ対応入力及び出力処理、並びにDAサーバ106との通信等のクライアント側機能を提供する。DAサーバ106は、それぞれのユーザデバイス104上に各々常駐する任意の数のDAクライアント102のためのサーバ側機能を提供する。
いくつかの実施例では、DAサーバ106は、クライアント対応I/Oインターフェース112、1つ以上の処理モジュール114、データ及びモデル116、並びに外部サービスへのI/Oインターフェース118を含む。クライアント対応I/Oインターフェース112は、DAサーバ106のためのクライアント対応入力及び出力処理を促進する。1つ以上の処理モジュール114は、データ及びモデル116を利用して、音声入力を処理し、自然言語入力に基づいてユーザの意図を決定する。更に、1つ以上の処理モジュール114は、タスクの実行を、推測されたユーザの意図に基づいて実行する。いくつかの実施例では、DAサーバ106は、タスク完了又は情報取得のために、ネットワーク(単数又は複数)110を通して外部サービス120と通信する。外部サービスへのI/Oインターフェース118はこのような通信を促進する。
ユーザデバイス104は、任意の好適な電子デバイスであり得る。いくつかの実施例では、ユーザデバイスは、ポータブル多機能デバイス(例えば、図2Aを参照して以下に説明するデバイス200)、多機能デバイス(例えば、図4を参照して以下に説明するデバイス400)、又はパーソナル電子デバイス(例えば、図6A〜図6Bを参照して以下に説明するデバイス600)である。ポータブル多機能デバイスは、例えば、他の機能、例えば、PDA及び/又はミュージックプレーヤ機能、も含む携帯電話である。ポータブル多機能デバイスの具体的な実施例は、Apple Inc.(Cupertino,California)による、iPhone(登録商標)、iPod Touch(登録商標)、及びiPad(登録商標)デバイスを含む。ポータブル多機能デバイスの他の実施例は、限定を伴わずに、ラップトップコンピュータ又はタブレットコンピュータを含む。更に、いくつかの実施例では、ユーザデバイス104は、非ポータブル多機能デバイスである。特に、ユーザデバイス104は、デスクトップコンピュータ、ゲームコンソール、テレビ、又はテレビセットトップボックスである。いくつかの実施例では、ユーザデバイス104は、タッチ感知面(例えば、タッチスクリーンディスプレイ及び/又はタッチパッド)を含む。更に、ユーザデバイス104は、1つ以上の他の物理ユーザインターフェースデバイス、例えば、物理キーボード、マウス、及び/又はジョイスティック、を任意選択的に含む。電子デバイスの様々な実施例、例えば、多機能デバイス、を以下に詳細に説明する。
通信ネットワーク(単数又は複数)110の例としては、ローカルエリアネットワーク(Local Area Networks、LAN)及び、例えば、インターネットのようなワイドエリアネットワーク(Wide Area Networks、WAN)が挙げられる。通信ネットワーク(単数又は複数)110は、例えば、イーサネット(登録商標)、ユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIRE(登録商標)、移動通信用のグローバルシステム(Global System for Mobile Communications、GSM(登録商標))、拡張データGSM環境(Enhanced Data GSM Environment、EDGE)、符号分割多元接続(code division multiple access、CDMA)、時分割多元接続(time division multiple access、TDMA)、Bluetooth(登録商標)、Wi−Fi(登録商標)、ボイスオーバーインターネットプロトコル(voice over Internet Protocol、VoIP)、Wi−MAX(登録商標)、又は任意の他の好適な通信プロトコル等の、様々な有線又は無線プロトコルを含む、任意の周知のネットワークプロトコルを用いて実装される。
サーバシステム108は、1つ以上のスタンドアロンデータ処理装置、又はコンピュータの分散型ネットワーク上に実装される。いくつかの実施例では、サーバシステム108は、また、様々な仮想デバイス及び/又はサードパーティサービスプロバイダ(例えば、サードパーティクラウドサービスプロバイダ)のサービスを利用して、サーバシステム108の基本的なコンピューティングリソース及び/又はインフラストラクチャリソースを提供する。
いくつかの実施例では、ユーザデバイス104は、DAサーバ106と、第2のユーザデバイス122を介して通信する。第2のユーザデバイス122は、ユーザデバイス104と同様又は同一である。例えば、第2のユーザデバイス122は、図2A、図4、及び図6A〜図6Bを参照して以下に説明する、デバイス200、デバイス400、又はデバイス600と同様である。ユーザデバイス104は、第2のユーザデバイス122に、直接通信接続、例えば、Bluetooth(登録商標)、NFC、BTLE等を介して、又は、有線ネットワーク若しくは無線ネットワーク、例えば、ローカルWi−Fiネットワーク、を介して通信可能に連結するよう構成される。いくつかの実施例では、第2のユーザデバイス122は、ユーザデバイス104とDAサーバ106との間のプロキシとして動作するよう構成される。例えば、ユーザデバイス104のDAクライアント102は、情報(例えば、ユーザデバイス104にて受信したユーザの要求)を、DAサーバ106に、第2のユーザデバイス122を介して送信するよう構成される。DAサーバ106は情報を処理し、関連データ(例えば、ユーザの要求に応じてのデータコンテンツ)を、ユーザデバイス104に、第2のユーザデバイス122を介して返す。
いくつかの実施例では、ユーザデバイス104は、データに対する省略された要求を、第2のユーザデバイス122に通信し、ユーザデバイス104から送信する情報量を減らすよう構成される。第2のユーザデバイス122は、追加情報を決定し、省略された要求に加えて完全な要求を生成し、DAサーバ106に送信するよう構成される。このシステムアーキテクチャは、限られた通信能力及び/又は限られたバッテリ電力を有するユーザデバイス104(例えば、携帯時計又は同様のコンパクト電子デバイス)を、DAサーバ106が提供するサービスに、より強い通信能力及び/又はより大きなバッテリ電力を有する第2のユーザデバイス122(例えば、携帯電話、ラップトップコンピュータ、タブレットコンピュータ等)を、DAサーバ106へのプロキシとして使用して、好適にアクセス可能とし得る。図1では2つのユーザデバイス104及びユーザデバイス122のみが示されるが、システム100は、いくつかの実施例では、DAサーバシステム106と通信するよう、このプロキシ構成に構成された任意の数及び種類のユーザデバイスを含むということを理解されたい。
図1に示されるデジタルアシスタントはクライアント側部分(例えば、DAクライアント102)及びサーバ側部分(例えば、DAサーバ106)の両方を含むが、いくつかの実施例では、デジタルアシスタントの機能は、ユーザデバイス上にインストールされる独立型アプリケーションとして実装される。加えて、デジタルアシスタントのクライアント部分とサーバ部分との間の機能の分配は実装によって異なり得る。例えば、いくつかの実施例では、DAクライアントは、ユーザ対応入力及び出力処理機能のみを提供し、デジタルアシスタントのすべての他の機能をバックエンドサーバに委ねるシンクライアントである。
2.電子デバイス
ここで、デジタルアシスタントのクライアント側部分を実装するための電子デバイスの実施形態に注目する。図2Aは、いくつかの実施形態に係る、タッチ感知ディスプレイシステム212を備えるポータブル多機能デバイス200を示すブロック図である。タッチ感知ディスプレイ212は、便宜上「タッチスクリーン」と呼ばれる場合があり、「タッチ感知ディスプレイシステム」として既知である場合又は呼ばれる場合もある。デバイス200は、メモリ202(任意選択的に、1つ以上のコンピュータ可読記憶媒体を含む)、メモリコントローラ222、1つ以上の処理ユニット(CPU)220、周辺機器インターフェース218、RF回路208、オーディオ回路210、スピーカ211、マイクロフォン213、入出力(I/O)サブシステム206、他の入力制御デバイス216、及び外部ポート224を含む。デバイス200は、1つ以上の光センサ264を任意選択的に含む。デバイス200は、デバイス200(例えば、デバイス200のタッチ感知ディスプレイシステム212等のタッチ感知面)上の接触の強度を検出するための、1つ以上の接触強度センサ265を任意選択的に含む。デバイス200は、デバイス200上に触知出力を生成する(例えば、デバイス200のタッチ感知ディスプレイシステム212又はデバイス400のタッチパッド455等の、タッチ感知面上に触知出力を生成する)ための、1つ以上の触知出力生成器267を、任意選択的に含む。これらの構成要素は、1つ以上の通信バス又は信号ライン203を介して任意選択的に通信する。
本明細書及び特許請求の範囲で使用されるとき、タッチ感知面上の接触の「強度」という用語は、タッチ感知面上の接触(例えば、指接触)の力若しくは圧力(単位面積当りの力)、又はタッチ感知面上の接触の力若しくは圧力の代替物(代用物)を指す。接触の強度は、少なくとも4つの異なる値を含み、より典型的には、何百もの(例えば、少なくとも256個の)異なる値を含む、値範囲を有する。接触の強度は任意選択的に、様々な手法、及び様々なセンサ又はセンサの組み合わせを使用して判定(又は、測定)される。例えば、タッチ感知面の下に又はこれに隣接する1つ以上の力センサは任意選択的に、タッチ感知面上の様々な点における力を測定するために使用される。いくつかの実装において、複数の力センサの力測定値を組み合わせて(例えば、加重平均)、接触力の推定値を判定する。同様に、スタイラスの感圧性先端部を任意選択的に使用して、タッチ感知面上のスタイラスの圧力を判定する。あるいは、タッチ感知面上で検出される接触領域のサイズ及び/若しくはその変化、接触に近接するタッチ感知面の電気容量及び/若しくはその変化、並びに/又は、接触に近接するタッチ感知面の抵抗及び/若しくはその変化が、タッチ感知面上の接触の力又は圧力の代替物として、任意選択的に用いられる。いくつかの実装では、接触の力又は圧力の代替的測定値は、強度閾値を超えているか否かを判定するために直接に用いられる(例えば、強度閾値は、代替的測定値に対応する単位で記述される)。いくつかの実装では、接触の力又は圧力の代替的測定値は、推定される力又は圧力に変換され、この推定される力又は圧力を用いて、強度閾値を超えているか否かを判定する(例えば、強度閾値は、圧力の単位で測定された圧力閾値である)。接触の強度をユーザ入力の属性として使用することにより、アフォーダンスを(例えば、タッチ感知ディスプレイ上に)表示するための、及び/又は、ユーザ入力を(例えば、タッチ感知ディスプレイ、タッチ感知面、又はノブ若しくはボタン等の物理的/機械的制御部を介して)受け取るための、面積が制限されている、低減されたサイズのデバイス上で、他の場合であればユーザによってアクセスすることが不可能であり得る、追加的なデバイス機能への、ユーザのアクセスが可能となる。
本明細書及び特許請求の範囲で使用されるとき、用語「触知出力」は、ユーザの触覚でユーザによって検出されることになる、デバイスの従前の位置に対するデバイスの物理的変位、デバイスの構成要素(例えば、タッチ感知面)の、デバイスの別の構成要素(例えば、筐体)に対する物理的変位、又はデバイスの質量中心に対する構成要素の変位を指す。例えば、デバイス又はデバイスの構成要素が、タッチに敏感なユーザの表面(例えば、ユーザの手の指、手のひら、又は他の部分)に接触している状況において、物理的変位によって生成された触知出力は、デバイス又はデバイスの構成要素の物理的特性の認識された変化に相当する触感として、ユーザによって解釈される。例えば、タッチ感知面(例えば、タッチ感知ディスプレイ又はトラックパッド)の移動は、ユーザによって、物理アクチュエータボタンの「ダウンクリック」又は「アップクリック」として任意選択的に解釈される。いくつかの場合、ユーザの動作により物理的に押された(例えば、変位された)タッチ感知面に関連付けられた物理アクチュエータボタンの移動がないときでさえ、ユーザは「ダウンクリック」又は「アップクリック」等の触感を感じる。別の実施例として、タッチ感知面の移動は、タッチ感知面の平滑度に変化がない場合であっても、ユーザによって、そのタッチ感知面の「粗さ」として、任意選択的に解釈又は感知される。そのようなユーザによるタッチの解釈は、ユーザの個人的な感覚認知に左右されるものではあるが、大多数のユーザに共通する、多くのタッチの感覚認知が存在する。したがって、触知出力が、ユーザの特定の感覚認知(例えば、「アップクリック」「ダウンクリック」、「粗さ」)に対応するものと記述される場合、別途記載のない限り、生成された触知出力は、典型的な(又は、平均的な)ユーザの記述された感覚認知を生成するデバイス、又はデバイスの構成要素の物理的変位に対応する。
デバイス200は、ポータブル多機能デバイスの一実施例にすぎず、デバイス200は任意選択的に、示されているものよりも多くの構成要素若しくは少ない構成要素を有し、任意選択的に、2つ以上の構成要素を組み合わせ、又は任意選択的に、構成要素の異なる構成若しくは配置を有することを理解されたい。図2Aに示す様々な構成要素は、1つ以上の信号処理回路及び/又は特定用途向け集積回路を含む、ハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの双方の組み合わせで実装される。
メモリ202は、1つ以上のコンピュータ可読記憶媒体を含む。コンピュータ可読記憶媒体は、例えば、有形かつ非一時的である。メモリ202は高速ランダムアクセスメモリを含み、また、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステートメモリデバイス等の、不揮発性メモリも含む。メモリコントローラ222は、デバイス200の他の構成要素によるメモリ202へのアクセスを制御する。
いくつかの実施例では、メモリ202の非一時的コンピュータ可読記憶媒体は、(例えば、以下に説明するプロセスの態様を実行する)命令を、コンピュータベースのシステム、プロセッサを含むシステム、又は命令実行システム、装置、若しくはデバイスから命令を取ってくることができ、それらの命令を実行する他のシステム等の、命令実行システム、装置、若しくはデバイスによる使用、又はそれと関連した使用のために、記憶するために用いられる。他の実施例では、(例えば、以下で説明するプロセスの態様を実行する)命令は、サーバシステム108の非一時的コンピュータ可読記憶媒体(図示せず)上に記憶されるか、又はメモリ202の非一時的コンピュータ可読記憶媒体とサーバシステム108の非一時的コンピュータ可読記憶媒体との間で分配される。
周辺機器インターフェース218を使用して、デバイスの入力及び出力周辺機器を、CPU220及びメモリ202に連結する。1つ以上のプロセッサ220は、デバイス200のための様々な機能を実行し、データを処理するために、メモリ202に記憶された様々なソフトウェアプログラム及び/又は命令セットを動作させ、又は実行する。一部の実施形態では、周辺機器インターフェース218、CPU220、及びメモリコントローラ222は、チップ204等の単一チップ上に実装される。一部の他の実施形態では、それらは、別々のチップ上で実装される。
RF(radio frequency)(無線周波数)回路208は、電磁信号とも呼ばれるRF信号を送受信する。RF回路208は、電気信号を電磁信号に、又は電磁信号を電気信号に変換し、電磁信号を介して通信ネットワーク及び他の通信デバイスと通信する。RF回路208は任意選択的に、アンテナシステム、RF送受信機、1つ以上の増幅器、同調器、1つ以上の発振器、デジタル信号プロセッサ、CODECチップセット、加入者識別モジュール(Subscriber Identity Module、SIM)カード、メモリ等を含むがこれらに限定されない、それらの機能を実行するための周知の回路を含む。RF回路208は任意選択的に、ワールドワイドウェブ(World Wide Web、WWW)とも称されるインターネット、イントラネット、並びに/又はセルラー電話ネットワーク、無線ローカルエリアネットワーク(LAN)及び/若しくはメトロポリタンエリアネットワーク(Metropolitan Area Network、MAN)等の無線ネットワーク等のネットワークと、他のデバイスと無線通信によって通信する。RF回路208は、近距離通信無線等による近距離無線通信(Near Field Communication、NFC)フィールドを検出するための周知の回路を任意選択的に含む。無線通信は、複数の通信規格、通信プロトコル、及び通信技術のうちのいずれかを、任意選択的に使用する。これらとしては、移動通信用のグローバルシステム(Global System for Mobile Communications、GSM(登録商標))、拡張データGSM環境(Enhanced Data GSM Environment、EDGE)、高速ダウンリンクパケットアクセス(high−speed downlink packet access、HSDPA)、高速アップリンクパケットアクセス(high−speed uplink packet access、HSUPA)、Evolution,Data−Only(EV−DO)、HSPA、HSPA+、2重セルHSPA(Dual−Cell HSPDA、DC−HSPDA)、ロングタームエボリューション(long term evolution、LTE)、近距離通信(near field communication、NFC)、広帯域符号分割多元接続(wideband code division multiple access、W−CDMA)、符号分割多元接続(code division multiple access、CDMA)、時分割多元接続(time division multiple access、TDMA)、Bluetooth(登録商標)、Bluetooth Low Energy(BTLE)、Wireless Fidelity(Wi−Fi)(例えば、IEEE802.11a、IEEE802.11b、IEEE802.11g、IEEE802.11n、及び/又はIEEE802.11ac)、ボイスオーバーインターネットプロトコル(voice over Internet Protocol、VoIP)、Wi−MAX、電子メール用のプロトコル(例えば、インターネットメッセージアクセスプロトコル(Internet message access protocol、IMAP)及び/又はポストオフィスプロトコル(post office protocol、POP))、インスタントメッセージング(例えば、拡張可能メッセージング及びプレゼンスプロトコル(extensible messaging and Presence Leveraging Extensions、XMPP)、インスタントメッセージング及びプレゼンス利用拡張向けセッション開始プロトコル(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions、SIMPLE)、インスタントメッセージング及びプレゼンスサービス(Instant Messaging and Presence Service、IMPS))、及び/又はショートメッセージサービス(Short Message Service、SMS)、あるいは本文書の出願日現在までにまだ開発されていない通信プロトコルを含めた任意の他の好適な通信プロトコル、が挙げられるが、これらに限定されない。
オーディオ回路210、スピーカ211、及びマイクロフォン213は、ユーザとデバイス200との間のオーディオインターフェースを提供する。オーディオ回路210は、周辺機器インターフェース218からオーディオデータを受信し、このオーディオデータを電気信号に変換し、この電気信号をスピーカ211に送信する。スピーカ211は、電気信号を人間の可聴音波に変換する。音声回路210はまた、マイクロフォン213により音波から変換された電気信号を受信する。音声回路210は、電気信号を音声データに変換し、音声データを処理のために周辺機器インターフェース218に送信する。オーディオデータは、周辺機器インターフェース218によって、メモリ202及び/若しくはRF回路208から取得され、かつ/又はメモリ202及び/若しくはRF回路208に送信される。一部の実施形態において、オーディオ回路210はヘッドセットジャック(例えば、図3の312)も含む。ヘッドセットジャックは、オーディオ回路210と、出力専用ヘッドホン又は出力(例えば、片耳又は両耳用のヘッドホン)及び入力(例えば、マイクロフォン)の双方を有するヘッドセット等の、取り外し可能なオーディオ入出力周辺機器と、の間のインターフェースを提供する。
I/Oサブシステム206は、周辺機器インターフェース218に、タッチスクリーン212及び他の入力制御デバイス216等のデバイス200の入出力周辺機器を接続する。I/Oサブシステム206は、任意選択的に、ディスプレイコントローラ256、光センサコントローラ258、強度センサコントローラ259、触覚フィードバックコントローラ261、及び他の入力又は制御デバイスのための1つ以上の入力コントローラ260を含む。1つ以上の入力コントローラ260は、他の入力制御デバイス216から/へ、電気信号を受信/送信する。他の入力制御デバイス216は、任意選択的に、物理ボタン(例えば、プッシュボタン、ロッカーボタン等)、ダイヤル、スライダスイッチ、ジョイスティック、クリックホイール等を含む。一部の代替的実施形態では、入力コントローラ(単数又は複数)260は、任意選択的に、キーボード、赤外線ポート、USBポート、及びマウス等のポインタデバイスのうちのいずれかに接続される(又は、いずれにも接続されない)。1つ以上のボタン(例えば、図3の308)は、任意選択的に、スピーカ211及び/又はマイクロフォン213の音量調節のための、アップ/ダウンボタンを含む。1つ以上のボタンは、任意選択的に、プッシュボタン(例えば、図3の306)を含む。
2005年12月23日に出願された、米国特許第7,657,849号である米国特許出願第11/322,549号、「Unlocking a Device by Performing Gestures on an Unlock Image」に記載されているように、プッシュボタンの素早い押し下げにより、タッチスクリーン212のロックを解除するか、又はデバイスのロックを解除するためにタッチスクリーン上のジェスチャを用いる処理を開始する。この特許は、その全体が本明細書において参照により組み込まれる。プッシュボタン(例えば、306)をより長く押し下げることにより、デバイス200の電源をオン又はオフする。ユーザは、1つ以上のボタンの機能をカスタマイズすることができる。タッチスクリーン212は、仮想又はソフトボタン、及び1つ以上のソフトキーボードを実装するために用いられる。
タッチ感知ディスプレイ212は、デバイスとユーザとの間の入力インターフェース及び出力インターフェースを提供する。ディスプレイコントローラ256は、タッチスクリーン212から電気信号を受信し、かつ/又はタッチスクリーン212に電気信号を送信する。タッチスクリーン212は、ユーザに視覚出力を表示する。視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びそれらの任意の組み合わせ(総称して「グラフィック」と称する)を含む。一部の実施形態では、視覚出力の一部又はすべては、ユーザインターフェースオブジェクトに対応する。
タッチスクリーン212は、触覚及び/又は触感の接触に基づくユーザからの入力を受け付けるタッチ感知面、センサ、又はセンサのセットを有している。タッチスクリーン212及びディスプレイコントローラ256は(メモリ202内の任意の関連モジュール及び/又は命令セットと共に)、タッチスクリーン212上で接触(及び任意の接触の移動又は中断)を検出し、検出された接触をタッチスクリーン212上に表示されたユーザインターフェースオブジェクト(例えば、1つ以上のソフトキー、アイコン、ウェブページ、又は画像)との対話に変換する。例示的な実施形態では、タッチスクリーン212とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン212は、LCD(liquid crystal display、液晶ディスプレイ)技術、LPD(light emitting polymer display、発光ポリマーディスプレイ)技術、又はLED(light emitting diode、発光ダイオード)技術を用いるが、他の実施形態では、その他のディスプレイ技術を用いてもよい。タッチスクリーン212及びディスプレイコントローラ256は、現在既知の、又は今後開発される複数のタッチ感知技術のうちのいずれかを使用して、接触、及びその接触のあらゆる移動又は中断を検出し、これらの技術としては、静電容量技術、抵抗性技術、赤外線技術、及び表面弾性波技術、並びにタッチスクリーン212との1つ以上の接触点を判定するための他の近接センサアレイ又は他の要素が挙げられるが、これらに限定されない。例示的な実施形態では、California州CupertinoのApple Inc.によるiPhone(登録商標)及びiPod Touch(登録商標)において見られるような、投影型相互静電容量感知技術が使用されている。
タッチスクリーン212のいくつかの実施形態におけるタッチ感知ディスプレイは、以下の米国特許第6,323,846号(Westermanら)、同第6,570,557号(Westermanら)、及び/又は同第6,677,932号(Westerman)、及び/又は米国特許出願公開第2002/0015024(A1)号に記載されているマルチタッチ感知タッチパッドに類似する。これらの文献は、それぞれその全体が本明細書において参照により組み込まれている。ただし、タッチスクリーン212はデバイス200からの視覚出力を表示するのに対して、タッチ感知タッチパッドは視覚出力を提供しない。
タッチスクリーン212の一部の実施形態におけるタッチ感知ディスプレイは、以下の出願で説明されている。(1)2006年5月2日出願の米国特許出願第11/381,313号、「Multipoint Touch Surface Controller」、(2)2004年5月6日出願の同第10/840,862号、「Multipoint Touchscreen」、(3)2004年7月30日出願の同第10/903,964号、「Gestures For Touch Sensitive Input Devices」、(4)2005年1月31日出願の同第11/048,264号、「Gestures For Touch Sensitive Input Devices」、(5)2005年1月18日出願の同第11/038,590号、「Mode−Based Graphical User Interfaces For Touch Sensitive Input Devices」、(6)2005年9月16日出願の同第11/228,758号、「Virtual Input Device Placement On A Touch Screen User Interface」、(7)2005年9月16日出願の同第11/228,700号、「Operation Of A Computer With A Touch Screen Interface」、(8)2005年9月16日出願の同第11/228,737号、「Activating Virtual Keys Of A Touch−Screen Virtual Keyboard」、及び(9)2006年3月3日出願の同第11/367,749号、「Multi−Functional Hand−Held Device」。これらの出願のすべては、全体が参照により本明細書に組み込まれている。
タッチスクリーン212は、例えば、100dpiを超えるビデオ解像度を有する。一部の実施形態において、タッチスクリーンは約160dpiのビデオ解像度を有する。ユーザは、スタイラス、指等の任意の好適な物体又は付属物を使用して、タッチスクリーン212と接触する。いくつかの実施形態において、ユーザインターフェースは、主として指を基準とした接触及びジェスチャで機能するように設計され、タッチスクリーン上の指の接触面積が広いためスタイラスを基準とした入力よりも精度が低いことがある。一部の実施形態では、デバイスは、指に基づく粗い入力を正確なポインタ/カーソル位置又はユーザの望むアクションを実行するためのコマンドに変換する。
いくつかの実施形態では、タッチスクリーンに加えて、デバイス200は、特定の機能をアクティブ化又は非アクティブ化させるためのタッチパッド(図示せず)を含む。一部の実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない、デバイスのタッチ感知エリアである。タッチパッドは、タッチスクリーン212とは別個のタッチ感知面、又はタッチスクリーンによって形成されたタッチ感知面の延長である。
デバイス200はまた、様々な構成要素に電力を供給するための電力システム262を含む。電力システム262は、電力管理システム、1つ以上の電源(例えば、バッテリ、交流(AC))、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ(例えば、発光ダイオード(LED))、並びにポータブルデバイスにおける電力の生成、管理、及び分配に関連する任意の他の構成要素を含む。
デバイス200はまた、1つ以上の光センサ264を含む。図2Aでは、I/Oサブシステム206内の光センサコントローラ258に連結された光センサを示す。光センサ264は、電荷結合デバイス(CCD)又は相補的金属酸化物半導体(CMOS)フォトトランジスタを含む。光センサ264は、1つ以上のレンズを通して投影された、環境からの光を受光し、その光を、画像を表すデータに変換する。撮像モジュール243(カメラモジュールとも呼ばれる)と連携して、光センサ264は静止画像又はビデオをキャプチャする。いくつかの実施形態では、タッチスクリーンディスプレイが静止画像及び/又はビデオ画像取得のためのビューファインダとして使用されるように、デバイスの前面のタッチスクリーンディスプレイ212の反対側である、デバイス200の背面に光センサが配置されている。一部の実施形態では、ユーザが他のテレビ会議参加者をタッチスクリーンディスプレイ上で見るのと同時に、そのユーザの画像をテレビ会議のために得るように、デバイスの前面に光センサが配置されている。一部の実施形態では、光センサ264の位置は、ユーザによって(例えば、デバイス筐体内のレンズ及びセンサを回転させることによって)変更することができ、それにより、テレビ会議並びに静止画像及び/又はビデオ画像の取得の双方のために、単一の光センサ264を、タッチスクリーンディスプレイと共に使用する。
デバイス200はまた任意選択的に、1つ以上の接触強度センサ265を含む。図2Aでは、I/Oサブシステム206内の強度センサコントローラ259に連結された、接触強度センサを示す。接触強度センサ265は、1つ以上のピエゾ抵抗ひずみゲージ、電気容量式力センサ、電気力センサ、圧電力センサ、光学力センサ、容量式タッチ感知面、又は他の強度センサ(例えば、タッチ感知面上の接触の力(又は圧力)を測定するために使用するセンサ)を、任意選択的に含む。接触強度センサ265は、環境から接触強度情報(例えば、圧力情報又は圧力情報のプロキシ)を受信する。一部の実施形態において、少なくとも1つの接触強度センサが、タッチ感知面(例えば、タッチ感知ディスプレイシステム212)に配置されているか、又は、それに近接している。一部の実施形態において、少なくとも1つの接触強度センサが、デバイス200の前面に配置されたタッチスクリーンディスプレイ212の反対側である、デバイス200の背面に配置されている。
デバイス200はまた、1つ以上の近接センサ266を含む。図2Aでは、周辺機器インターフェース218と連結された近接センサ266を示す。あるいは、近接センサ266は、I/Oサブシステム206内の入力コントローラ260に連結される。近接センサ266は、米国特許出願第11/241,839号、「Proximity Detector In Handheld Device」、同第11/240,788号、「Proximity Detector In Handheld Device」、同第11/620,702号、「Using Ambient Light Sensor To Augment Proximity Sensor Output」、同第11/586,862号、「Automated Response To And Sensing Of User Activity In Portable Devices」、及び、同第11/638,251号、「Methods And Systems For Automatic Configuration Of Peripherals」で説明されているように実行され、これらの出願は、その全体が参照により本明細書に組み込まれる。一部の実施形態では、多機能デバイスがユーザの耳の近くに配置されるとき(例えば、ユーザが電話で通話しているとき)、近接センサは、タッチスクリーン212をオフにして無効化する。
デバイス200はまた、任意選択的に、1つ以上の触知出力生成器267を含む。図2Aでは、I/Oサブシステム206内の触覚フィードバックコントローラ261に連結された、触知出力生成器を示す。触知出力生成器267は、スピーカ若しくは他のオーディオ構成要素等の1つ以上の電気音響デバイス、及び/又はモータ、ソレノイド、電気活性ポリマー、圧電アクチュエータ、静電アクチュエータ、若しくは他の触知出力生成構成要素(例えば、デバイス上で電気信号を触知出力に変換する構成要素)等の、エネルギーを直線運動に変換する電気機械デバイスを、任意選択的に含む。接触強度センサ265は、触覚フィードバックモジュール233から触覚フィードバック生成命令を受信し、デバイス200のユーザが感知できる触知出力をデバイス200上で生成する。一部の実施形態において、少なくとも1つの触知出力生成器は、タッチ感知面(例えば、タッチ感知ディスプレイシステム212)に配置されているか、又はそれに近接しており、任意選択的に、タッチ感知面を垂直方向(例えば、デバイス200の表面の内/外)に、又は横方向(例えば、デバイス200の表面と同じ平面内の前後)に動かすことによって、触知出力を生成する。いくつかの実施形態では、少なくとも1つの触知出力生成器センサは、デバイス200の前面に配置されたタッチスクリーンディスプレイ212の反対側である、デバイス200の背面に配置されている。
デバイス200はまた、1つ以上の加速度計268も含む。図2Aは、加速度計268を周辺機器インターフェース218に連結して示す。あるいは、加速度計268は、I/Oサブシステム206内の入力コントローラ260に、連結される。加速度計268は、米国特許出願公開第20050190059号、「Acceleration−based Theft Detection System for Portable Electronic Devices」、及び同第20060017692号、「Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer」で説明されているように機能し、これらの文献の双方は、その全体が参照により本明細書に組み込まれる。一部の実施形態では、情報は、1つ以上の加速度計から受信されたデータの分析に基づいて、縦方向ビュー又は横方向ビュー内でタッチスクリーンディスプレイ上に表示される。デバイス200は任意選択的に、加速度計(単数又は複数)268に加えて、磁気計(図示せず)並びにデバイス200の位置及び方位(例えば、縦方向又は横方向)に関する情報を取得するためのGPS(又はGLONASS又は他のグローバルナビゲーションシステム)受信機(図示せず)を含む。
いくつかの実施形態では、メモリ202に記憶されたソフトウェア構成要素は、オペレーティングシステム226、通信モジュール(又は命令セット)228、接触/動きモジュール(又は命令セット)230、グラフィックモジュール(又は命令セット)232、テキスト入力モジュール(又は命令セット)234、全地球測位システム(GPS)モジュール(又は命令セット)235、デジタルアシスタントクライアントモジュール229、及びアプリケーション(又は命令セット)236を含む。更に、メモリ202は、データ及びモデル、例えば、ユーザデータ及びモデル231を記憶する。更に、いくつかの実施形態では、図2A及び図4に示すように、メモリ202(図2A)又はメモリ470(図4)は、デバイス/グローバル内部状態257を記憶する。デバイス/グローバル内部状態257は、現在アクティブ状態のアプリケーションがある場合、どのアプリケーションがアクティブかを示す、アクティブアプリケーション状態、どのアプリケーション、ビュー、又は他の情報がタッチスクリーンディスプレイ212の様々な領域を占領しているかを示す、表示状態、デバイスの様々なセンサ及び入力制御デバイス216から得られる情報を含む、センサ状態、並びに、デバイスの位置及び/又は姿勢に関する位置情報、のうちの1つ以上を含む。
オペレーティングシステム226(例えば、Darwin、RTXC、LINUX、UNIX(登録商標)、OS X、iOS、WINDOWS(登録商標)、又はVxWorks等の組み込みオペレーティングシステム)は、一般的なシステムタスク(例えば、メモリ管理、記憶デバイス制御、電力管理等)を制御及び管理するための様々なソフトウェア構成要素及び/又はドライバを含み、様々なハードウェア構成要素とソフトウェア構成要素との間の通信を促進する。
通信モジュール228は、1つ以上の外部ポート224を介して他のデバイスとの通信を容易にし、RF回路208及び/又は外部ポート224が受信したデータを処理するための様々なソフトウェア構成要素をも含む。外部ポート224(例えば、ユニバーサルシリアルバス(Universal Serial Bus、USB)、FIREWIRE(登録商標)等)は、直接的に、又はネットワーク(例えば、インターネット、無線LAN等)を通して間接的に、他のデバイスに連結するように適応している。一部の実施形態では、外部ポートは、iPod(登録商標)(Apple Inc.の商標)デバイス上で使用される30ピンコネクタと同じマルチピン(例えば、30ピン)コネクタか、又は同様の、及び/若しくは互換性のあるマルチピン(例えば、30ピン)コネクタである。
接触/動きモジュール230は、任意選択的に、(ディスプレイコントローラ256と連携して)タッチスクリーン212との接触、及び他のタッチ感知デバイス(例えば、タッチパッド又は物理クリックホイール)との接触を検出する。接触/動きモジュール230は、接触が生じたか否かを判定すること(例えば、指を下ろすイベントを検出すること)、接触の強度(例えば、接触の力若しくは圧力、又は、接触の力若しくは圧力の代替物)を判定すること、接触の移動が存在するか否かを判定し、タッチ感知面を横断する移動を追跡すること(例えば、指をドラッグする1つ以上のイベントを検出すること)、及び接触が停止したか否かを判定すること(例えば、指を上げるイベント又は接触の中断を検出すること)等の、接触の検出に関する様々な動作を実行するための、様々なソフトウェア構成要素を含む。接触/動きモジュール230は、タッチ感知面から接触データを受信する。一連の接触データにより表される接触点の移動を判定することは任意選択的に、接触点の速さ(大きさ)、速度(大きさ及び方向)、及び/又は加速度(大きさ及び/又は方向における変化)を判定することを含む。これらの動作は、任意選択的に、単一の接触(例えば、1本の指の接触)又は複数の同時接触(例えば、「マルチタッチ」/複数の指の接触)に適用される。一部の実施形態では、接触/動きモジュール230及びディスプレイコントローラ256は、タッチパッド上の接触を検出する。
一部の実施形態において、接触/動きモジュール230は、ユーザによって動作が実行されたか否かを判定するための(例えば、ユーザがアイコン上で「クリック」したか否かを判定するための)、1つ以上の強度閾値のセットを使用する。一部の実施形態では、少なくとも強度閾値のサブセットは、ソフトウェアパラメータに従って判定される(例えば、強度閾値は、特定の物理アクチュエータのアクティブ化閾値によって判定されず、デバイス200の物理ハードウェアを変更することなく調節されてもよい)。例えば、トラックパッド又はタッチスクリーンディスプレイのマウス「クリック」閾値は、トラックパッド又はタッチスクリーンディスプレイのハードウェアを変更することなく、広範囲の予め定義された閾値のうちのいずれかに設定されてもよい。加えて、一部の実装形態では、デバイスのユーザは、強度閾値の組のうちの1つ以上を調整するためのソフトウェア設定が提供される(例えば、個々の強度閾値を調整することによって、及び/又はシステムレベルのクリック「強度」パラメータで一度に複数の強度閾値を調整することによって)。
接触/動きモジュール230は任意選択的に、ユーザによるジェスチャ入力を検出する。タッチ感知面上の異なるジェスチャは、異なる接触パターン(例えば、検出される接触の異なる動き、タイミング、及び/又は強度)を有する。よって、ジェスチャは任意選択的に、特定の接触パターンを検出することによって検出される。例えば、指のタップジェスチャを検出することは、(例えば、アイコンの位置での)指を下ろすイベントを検出し、続いてその指を下ろすイベントと同じ位置(又は、実質的に同じ位置)で指を上げる(リフトオフ)イベントを検出することを含む。別の実施例として、タッチ感知面上での指のスワイプジェスチャを検出することは、指を下ろすイベントを検出し、続いて、1つ以上の、指をドラッグするイベントを検出し、その後、続いて指を上げる(リフトオフ)イベントを検出することを含む。
グラフィックモジュール232は、表示されるグラフィックの視覚的効果(例えば、輝度、透明度、彩度、コントラスト、又は他の視覚特性)を変更するための構成要素を含めた、タッチスクリーン212又は他のディスプレイ上にグラフィックをレンダリングして表示するための、様々な既知のソフトウェア構成要素を含む。本明細書にて使用されるとき、用語「グラフィック」は、ユーザに対して表示することができる任意のオブジェクトを含み、これらのオブジェクトとしては、テキスト、ウェブページ、アイコン(ソフトキーを含むユーザインターフェースオブジェクト等)、デジタル画像、ビデオ、アニメーション等が挙げられるが、これらに限定されない。
一部の実施形態では、グラフィックモジュール232は、使用されることになるグラフィックを表すデータを記憶する。各グラフィックは任意選択的に、対応するコードが割り当てられる。グラフィックモジュール232は、アプリケーション等から、必要に応じて、座標データ及び他のグラフィック特性データと共に表示されることとなるグラフィックを指定する1つ以上のコードを受信し、次いで、ディスプレイコントローラ256に出力するスクリーンの画像データを生成する。
触覚フィードバックモジュール233は、デバイス200とのユーザ対話に応じて、デバイス200上の1つ以上の位置で触知出力を生成するために、触知出力生成器(単数又は複数)267によって使用される命令を生成するための、様々なソフトウェア構成要素を含む。
テキスト入力モジュール234は、いくつかの実施例では、グラフィックモジュール232の構成要素であり、様々なアプリケーション(例えば、連絡先237、電子メール240、IM241、ブラウザ247、及びテキスト入力を必要とする任意の他のアプリケーション)でテキストを入力するための、ソフトキーボードを提供する。
GPSモジュール235はデバイスの位置を判定し、この情報を、様々なアプリケーションで使用するために提供する(例えば、位置に基づく電話にて使用するために電話238へ、写真/ビデオメタデータとしてカメラ243へ、及び、天気ウィジェット、ローカルイエローページウィジェット、及びマップ/ナビゲーションウィジェット等の、位置に基づくサービスを提供するアプリケーションへ)。
デジタルアシスタントクライアントモジュール229は様々なクライアント側デジタルアシスタント命令を含み、デジタルアシスタントのクライアント側機能を提供する。例えば、デジタルアシスタントクライアントモジュール229は、ポータブル多機能デバイス200の様々なユーザインターフェース(例えば、マイクロフォン213、加速度計(単数又は複数)268、タッチ感知ディスプレイシステム212、光センサ(単数又は複数)229、他の入力制御デバイス216等)を通して、声の入力(例えば、音声入力)、テキスト入力、タッチ入力、及び/又はジェスチャ入力を受信できる。デジタルアシスタントクライアントモジュール229はまた、ポータブル多機能デバイス200の様々な出力インターフェース(例えば、スピーカ211、タッチ感知ディスプレイシステム212、触知出力生成器(単数又は複数)267等)を通して、オーディオ(例えば、音声出力)、視覚、及び/又は触知の形態での出力を提供できる。例えば、出力は、音声、音響、警報、テキストメッセージ、メニュー、グラフィック、ビデオ、アニメーション、振動、及び/又は上記の2つ以上の組み合わせとして提供される。動作時、デジタルアシスタントクライアントモジュール229は、RF回路208を用いてDAサーバ106と通信する。
ユーザデータ及びモデル231は、ユーザに関連付けられた様々なデータ(例えば、ユーザ固有の語彙データ、ユーザ嗜好データ、ユーザ固有の名前の発音、ユーザの電子アドレス帳からのデータ、to doリスト、買い物リスト等)を含み、デジタルアシスタントのクライアント側機能を提供する。更に、ユーザデータ及びモデル231は、ユーザ入力を処理してユーザの意図を判定するための様々なモデル(例えば、音声認識モデル、統計的言語モデル、自然言語処理モデル、オントロジ、タスクフローモデル、サービスモデル等)を含む。
いくつかの実施例では、デジタルアシスタントクライアントモジュール229は、ポータブル多機能デバイス200の様々なセンサ、サブシステム、及び周辺機器を使用して、ポータブル多機能デバイス200の周囲環境から追加情報を収集し、ユーザ、現在のユーザ対話及び/又は現在のユーザ入力に関連付けられたコンテキストを確立する。いくつかの実施例では、デジタルアシスタントクライアントモジュール229は、ユーザの意図の推測を助けるために、ユーザ入力と共にコンテキスト情報又はそのサブセットをDAサーバ106に提供する。いくつかの実施例では、デジタルアシスタントはまた、ユーザへの出力をどのように準備し、配信するかを決定するために、コンテキスト情報を用いる。コンテキスト情報は、コンテキストデータと呼ばれる。
いくつかの実施例では、ユーザ入力に伴うコンテキスト情報は、センサ情報、例えば、照明、周囲ノイズ、周囲温度、周囲環境の画像又は映像等を含む。いくつかの実施例では、コンテキスト情報は、デバイスの物理状態、例えば、デバイスの向き、デバイスの位置、デバイスの温度、電力レベル、速度、加速度、運動パターン、セルラー信号強度等をも含み得る。いくつかの実施例では、DAサーバ106のソフトウェア状態、例えば、稼働中のプロセス、インストール済みのプログラム、過去と現在のネットワーク活動、バックグラウンドサービス、エラーログ、リソース使用量、等、及びポータブル多機能デバイス200の、ソフトウェア状態に関係する情報が、DAサーバ106に、ユーザ入力に関連付けられたコンテキスト情報として提供される。
いくつかの実施例では、デジタルアシスタントクライアントモジュール229は、DAサーバ106からの要求に応じて、ポータブル多機能デバイス200上に記憶されている情報(例えば、ユーザデータ231)を選択的に提供する。いくつかの実施例では、デジタルアシスタントクライアントモジュール229はまた、DAサーバ106による要求に応じて、自然言語ダイアログ又は他のユーザインターフェースを介してユーザから追加入力を引き出す。デジタルアシスタントクライアントモジュール229は、ユーザ要求内に表されているユーザの意図の意図推論及び/又は履行においてDAサーバ106を助けるために、追加入力をDAサーバ106に渡す。
デジタルアシスタントの更なる詳細を、図7A〜図7Cを参照して以下に説明する。デジタルアシスタントクライアントモジュール229が、以下に説明するデジタルアシスタントモジュール726の任意の数のサブモジュールを含み得ることが認識されるべきである。
アプリケーション236は、以下のモジュール(又は、命令セット)、又はそれらのサブセット若しくはスーパーセットを含む。
●連絡先モジュール237(ときには、アドレス帳又は連絡先リストとも呼ぶ)、
●電話モジュール238、
●テレビ会議モジュール239、
●電子メールクライアントモジュール240、
●インスタントメッセージング(IM)モジュール241、
●トレーニングサポートモジュール242、
●静止画像及び/又はビデオ画像用のカメラモジュール243、
●画像管理モジュール244、
●ビデオ再生モジュール、
●音楽再生モジュール、
●ブラウザモジュール247、
●カレンダモジュール248、
●天気ウィジェット249−1、株価ウィジェット249−2、計算機ウィジェット249−3、アラーム時計ウィジェット249−4、辞書ウィジェット249−5、及びユーザによって取得された他のウィジェット、並びにユーザ作成ウィジェット249−6、のうちの1つ以上を一部の例において含む、ウィジェットモジュール249、
●ユーザ作成ウィジェット249−6を作成するためのウィジェットクリエータモジュール250、
●検索モジュール251、
●ビデオプレーヤモジュール及びミュージックプレーヤモジュールを統合した、ビデオ及びミュージックプレーヤモジュール252、
●メモモジュール253、
●マップモジュール254、及び/又は
●オンラインビデオモジュール255。
メモリ202内に記憶される他のアプリケーション236の例としては、他のワードプロセッシングアプリケーション、他の画像編集アプリケーション、描画アプリケーション、プレゼンテーションアプリケーション、JAVA(登録商標)対応アプリケーション、暗号化、デジタル著作権管理、音声認識、及び音声複製が挙げられる。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、連絡先モジュール237は、(例えば、メモリ202又はメモリ470内の連絡先モジュール237のアプリケーション内部状態292に記憶される)アドレス帳又は連絡先リストを管理するために用いられる。この管理することとしては、アドレス帳に名前(単数又は複数)を加えること、アドレス帳から名前(単数又は複数)を削除すること、電話番号(単数又は複数)、メールアドレス(単数又は複数)、住所(単数又は複数)、又は他の情報を名前と関連付けること、画像を名前と関連付けること、名前を分類及び並べ替えること、電話番号又は電子メールアドレスを提供して、電話238、テレビ会議モジュール239、電子メール240、若しくはIM241による通信を開始する及び/又は容易にすること、等が含まれる。
RF回路208、オーディオ回路210、スピーカ211、マイクロフォン213、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、電話モジュール238は、電話番号に対応する一連の文字を入力し、連絡先モジュール237内の1つ以上の電話番号にアクセスし、入力された電話番号を修正し、対応する電話番号をダイヤルし、会話を行い、そして、会話が終了した際に接続を切るか又は電話を切るために、使用される。上述したように、無線通信は、複数の通信規格、プロトコル、及び技術のうちのいずれかを使用する。
RF回路208、オーディオ回路210、スピーカ211、マイクロフォン213、タッチスクリーン212、ディスプレイコントローラ256、光センサ264、光センサコントローラ258、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、連絡先モジュール237、及び電話モジュール238と連携して、テレビ会議モジュール239は、ユーザの命令に従って、ユーザと1人以上の他の参加者との間のテレビ会議を開始し、遂行し、終了するための、実行可能な命令を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、電子メールクライアントモジュール240は、ユーザの命令に応答して、電子メールを作成し、送信し、受信し、かつ管理するための、実行可能な命令を含む。画像管理モジュール244と連携して、電子メールクライアントモジュール240は、カメラモジュール243で撮影された静止画像又はビデオ画像を有する電子メールを作成及び送信することを非常に容易にする。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、インスタントメッセージングモジュール241は、インスタントメッセージに対応する文字列を入力したり、入力済みの文字を修正したり、(例えば、電話ベースのインスタントメッセージのためのショートメッセージサービス(SMS)若しくはマルチメディアメッセージサービス(MMS)プロトコルを使用して、又はインターネットベースのインスタントメッセージのためのXMPP、SIMPLE、若しくはIMPSを使用して)対応するインスタントメッセージを送信したり、インスタントメッセージを受信したり、その受信したインスタントメッセージを表示したりするための、実行可能な命令を含む。一部の実施形態において、送信及び/又は受信されるインスタントメッセージは、MMS及び/又は拡張メッセージングサービス(Enhanced Messaging Service、EMS)でサポートされるような、グラフィック、写真、オーディオファイル、ビデオファイル、及び/又は他の添付ファイルを含む。本明細書で使用するとき、「インスタントメッセージ」とは、電話ベースのメッセージ(例えば、SMS又はMMSを使用して送信されるメッセージ)及びインターネットベースのメッセージ(例えば、XMPP、SIMPLE、又はIMPSを使用して送信されるメッセージ)の双方を示す。
RF回路208、タッチ画面212、ディスプレイコントローラ256、接触/動作モジュール230、グラフィックモジュール232、テキスト入力モジュール234、GPSモジュール235、マップモジュール254、及びミュージックプレーヤモジュールと連携して、トレーニングサポートモジュール242は、(例えば、時間、距離、及び/又はカロリー消費目標を有する)トレーニングを生成することと、トレーニングセンサ(スポーツデバイス)と通信することと、トレーニングセンサデータを受信することと、トレーニングをモニタするために使用されるセンサを較正することと、トレーニングのための音楽を選択し、再生することと、トレーニングデータを表示し、記憶し、送信することとを実行するための実行可能な命令を含む。
タッチスクリーン212、ディスプレイコントローラ256、光センサ(単数又は複数)264、光センサコントローラ258、接触/動きモジュール230、グラフィックモジュール232、及び画像管理モジュール244と連携して、カメラモジュール243は、静止画像又は(ビデオストリームを含む)ビデオをキャプチャしてメモリ202にそれらを記憶する、静止画像又はビデオの特性を変更する、又はメモリ202から静止画像若しくはビデオを削除する、実行可能な命令を含む。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、及びカメラモジュール243と連携して、画像管理モジュール244は、静止画像及び/又はビデオ画像を配置する、修正し(例えば、編集し)又は別の方法で操作する、ラベルを付ける、削除する、(例えば、デジタルスライドショー又はアルバムにおいて)提示する、及び記憶したりする、実行可能な命令を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、ブラウザモジュール247は、ウェブページ又はそれらの一部、並びにウェブページにリンクされた添付及び他のファイルを検索し、リンク付け、受信し、表示することを含むユーザの命令に従い、インターネットをブラウズするための、実行可能な命令を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、電子メールクライアントモジュール240、及びブラウザモジュール247と関連して、カレンダモジュール248は、ユーザの命令に従い、カレンダ及びカレンダに関連付けられたデータ(例えば、カレンダ項目、to doリスト等)を作成し、表示し、変更し、かつ記憶するための実行可能な命令を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、及びブラウザモジュール247と連携して、ウィジェットモジュール249は、ユーザによってダウンロードされて、使用され得るミニアプリケーション(例えば、天気ウィジェット249−1、株価ウィジェット249−2、計算機ウィジェット249−3、アラーム時計ウィジェット249−4、及び辞書ウィジェット249−5)、又はユーザによって作成され得るミニアプリケーション(例えば、ユーザ作成ウィジェット249−6)である。一部の実施形態では、ウィジェットは、HTML(Hypertext Markup Language)(ハイパーテキストマークアップ言語)ファイル、CSS(Cascading Style Sheets)(カスケーディングスタイルシート)ファイル、及びJavaScript(登録商標)ファイルを含む。一部の実施形態では、ウィジェットは、XML(拡張可能マークアップ言語)ファイル及びJavaScript(登録商標)ファイル(例えば、Yahoo!ウィジェット)を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、及びブラウザモジュール247と連携して、ウィジェットクリエータモジュール250は、ウィジェットを作成する(例えば、ウェブページのユーザ指定箇所をウィジェットに変える)ために、ユーザによって使用される。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、検索モジュール251は、ユーザの命令に従って、1つ以上の検索基準(例えば、1つ以上のユーザ指定の検索語句)と一致する、メモリ202内のテキスト、音楽、音、画像、ビデオ、及び/又は他のファイルを検索するための、実行可能な命令を含む。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、オーディオ回路210、スピーカ211、RF回路208、及びブラウザモジュール247と連携して、ビデオ及びミュージックプレーヤモジュール252は、MP3又はAACファイル等の1つ以上のファイル形式で記憶された録音済みの音楽又は他のサウンドファイルをユーザがダウンロード及び再生できるようにする実行可能な命令、並びにビデオを(タッチスクリーン212上、又は外部ポート224を介して接続された外部のディスプレイ上に)表示、提示、又は別の方法で再生するための、実行可能な命令を含む。一部の実施形態では、デバイス200は、任意選択的に、iPod(Apple Inc.の商標)等のMP3プレーヤの機能を含む。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、及びテキスト入力モジュール234と連携して、メモモジュール253は、ユーザの命令に従って、メモ、to doリスト等を作成及び管理するための、実行可能な命令を含む。
RF回路208、タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、テキスト入力モジュール234、GPSモジュール235、及びブラウザモジュール247と連携して、マップモジュール254は、ユーザの命令に従って、マップ、及びマップに関連付けられたデータ(例えば、運転方向、特定の場所又はその付近の店舗及び他の関心対象地点についてのデータ、並びに他の位置に基づくデータ)を受信し、表示し、修正し、かつ記憶するために使用される。
タッチスクリーン212、ディスプレイコントローラ256、接触/動きモジュール230、グラフィックモジュール232、オーディオ回路210、スピーカ211、RF回路208、テキスト入力モジュール234、電子メールクライアントモジュール240、及びブラウザモジュール247と連携して、オンラインビデオモジュール255は、ユーザがH.264等の1つ以上のファイル形式のオンラインビデオにアクセスし、閲覧し、(例えば、ストリーミング及び/又はダウンロードにより)受信し、(例えば、タッチスクリーン上で又は外部ポート224を介して接続された外部のディスプレイ上で)再生し、特定のオンラインビデオへのリンクを含む電子メールを送信し、かつ別の方法で管理することが可能となる命令を含む。一部の実施形態では、特定のオンラインビデオへのリンクを送信するために、電子メールクライアントモジュール240ではなく、インスタントメッセージングモジュール241が使用される。オンラインビデオアプリケーションの追加の説明は、2007年6月20日に出願された米国特許仮出願第60/936,562号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」、及び2007年12月31日に出願された米国特許出願第11/968,067号、「Portable Multifunction Device,Method,and Graphical User Interface for Playing Online Videos」に見出すことができ、これらの出願の内容はその全体が本明細書において参照により組み込まれている。
上記で特定されたモジュール及びアプリケーションのそれぞれは、1つ以上の上記の機能を実行する実行可能な命令セット及び本出願に記載の方法(例えば、コンピュータにより実装される方法及び本明細書に記載の他の情報処理方法)に対応する。これらのモジュール(例えば、命令のセット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、それゆえ、様々な実施形態では、これらのモジュールの様々なサブセットが組み合わせられるか、又は他の方式で再編成され得る。例えば、ビデオプレーヤモジュールは、ミュージックプレーヤモジュールと組み合わせて、単一のモジュール(例えば、図2Aのビデオ及びミュージックプレーヤモジュール252)にすることができる。一部の実施形態において、メモリ202は、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ202は、上述されていない追加のモジュール及びデータ構造を記憶する。
一部の実施形態では、デバイス200は、デバイス上で予め定義された機能の組の動作がタッチスクリーン及び/又はタッチパッドを通じて排他的に実行されるデバイスである。デバイス200の動作のための主要な入力制御デバイスとしてタッチスクリーン及び/又はタッチパッドを使用することによって、デバイス200上の物理的な入力制御デバイス(プッシュボタン、ダイヤル等)の数が削減される。
タッチスクリーン及び/又はタッチパッドを通じて排他的に実行される予め定義された機能の組は任意選択的に、ユーザインターフェース間のナビゲーションを含む。一部の実施形態では、タッチパッドは、ユーザによってタッチされるとき、デバイス200上で表示される任意のユーザインターフェースから、メインメニュー、ホームメニュー、又はルートメニューにデバイス200をナビゲートする。そのような実施形態では、「メニューボタン」はタッチパッドを使用して実装される。一部の他の実施形態では、メニューボタンは、タッチパッドの代わりに、物理プッシュボタン又は他の物理入力制御デバイスである。
図2Bは、いくつかの実施形態に係る、イベント処理のための例示的な構成要素を示すブロック図である。いくつかの実施形態では、メモリ202(図2A)又はメモリ470(図4)は、イベントソート部270(例えば、オペレーティングシステム226内)及び対応するアプリケーション236−1(例えば、上述のアプリケーション237〜アプリケーション251、アプリケーション255、アプリケーション480〜アプリケーション490のうちのいずれか)を含む。
イベントソート部270は、イベント情報を受信し、イベント情報が配信されるアプリケーション236−1及びアプリケーション236−1のアプリケーションビュー291を判定する。イベントソート部270は、イベントモニタ271及びイベントディスパッチャモジュール274を含む。いくつかの実施形態では、アプリケーション236−1は、アプリケーションがアクティブ又は実行中のとき、タッチ感知ディスプレイ212上に表示される現在のアプリケーションビュー(単数又は複数)を示す、アプリケーション内部状態292を含む。いくつかの実施形態では、デバイス/グローバル内部状態257は、いずれのアプリケーション(単数又は複数)が現在アクティブであるかを判定するために、イベントソート部270によって使用され、アプリケーション内部状態292は、イベント情報が配信されるアプリケーションビュー291を判定するために、イベントソート部270によって使用される。
一部の実施形態において、アプリケーション内部状態292は、アプリケーション236−1が実行を再開する際に使用される再開情報、アプリケーション236−1によって情報が表示されているか又は表示の準備が整っていることを示すユーザインターフェース状態情報、ユーザがアプリケーション236−1の以前の状態又はビューに戻ることを可能にするための状態待ち行列、及びユーザが以前に行ったアクションのリドゥ/アンドゥ待ち行列、のうちの1つ以上等の追加情報を含む。
イベントモニタ271は、周辺機器インターフェース218からイベント情報を受信する。イベント情報は、サブイベント(例えば、マルチタッチジェスチャの一部としての、タッチ感知ディスプレイ212上でのユーザのタッチ)についての情報を含む。周辺機器インターフェース218は、I/Oサブシステム206、又は近接センサ266、加速度計(単数又は複数)268、及び/若しくは(オーディオ回路210を介する)マイクロフォン213等のセンサから受信する情報を送信する。周辺機器インターフェース218がI/Oサブシステム206から受信する情報には、タッチ感知ディスプレイ212又はタッチ感知面からの情報が含まれる。
一部の実施形態では、イベントモニタ271は、所定の間隔で周辺機器インターフェース218に要求を送信する。これに応じて、周辺機器インターフェース218はイベント情報を送信する。他の実施形態では、周辺機器インターフェース218は、重要なイベント(例えば、所定のノイズ閾値を上回り、かつ/又は所定の持続時間を超えた入力を受けること)が存在する場合にのみ、イベント情報を送信する。
いくつかの実施形態では、イベントソート部270はまた、ヒットビュー判定モジュール272及び/又はアクティブイベント認識部判定モジュール273も含む。
ヒットビュー判定モジュール272は、タッチ感知ディスプレイ212が2つ以上のビューを表示する場合に、サブイベントが1つ以上のビュー内のいずれの場所で発生したかを判定するための、ソフトウェア手順を提供する。ビューは、制御部及びユーザがディスプレイ上で見ることが可能な他の要素で構成される。
アプリケーションに関連付けられたユーザインターフェースの別の態様は、本明細書では、アプリケーションビュー又はユーザインターフェースウィンドウと呼ばれる場合があるビューのセットであり、それらの中で情報が表示され、タッチに基づくジェスチャが生じる。タッチが検出される(それぞれのアプリケーションの)アプリケーションビューは、アプリケーションのプログラム階層又はビュー階層内のプログラムレベルに対応する。例えば、タッチが検出される最下位レベルのビューは、ヒットビューと呼ばれ、また、適切な入力として認識されるイベントの組は、タッチに基づくジェスチャを開始する初期のタッチのヒットビューに少なくとも部分的に基づいて判定される。
ヒットビュー判定モジュール272は、タッチベースのジェスチャのサブイベントと関連する情報を受信する。アプリケーションが、階層として編成された複数のビューを有する場合、ヒットビュー判定モジュール272は、そのサブイベントを処理すべき階層内の最下位のビューとしての、ヒットビューを特定する。ほとんどの状況では、ヒットビューは、最初のサブイベント(例えば、イベント又は潜在的なイベントを形成するサブイベントのシーケンスにおける最初のサブイベント)が発生する最下位レベルのビューである。ヒットビューがヒットビュー判定モジュール272によって特定されると、ヒットビューは、典型的には、それがヒットビューとして特定された、同じタッチ又は入力ソースに関連するすべてのサブイベントを受信する。
アクティブイベント認識部判定モジュール273は、ビュー階層内のどのビュー(単数又は複数)がサブイベントの特定のシーケンスを受信すべきかを判定する。いくつかの実施形態では、アクティブイベント認識部判定モジュール273は、ヒットビューのみがサブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、アクティブイベント認識部判定モジュール273は、サブイベントの物理位置を含むすべてのビューはアクティブに関わっているビューであると判定し、したがって、すべてのアクティブに関わっているビューは、サブイベントの特定のシーケンスを受信すべきであると判定する。他の実施形態では、タッチサブイベントがある特定のビューに関連付けられた領域に完全に限定されたとしても、階層の上位のビューは、依然としてアクティブに関わっているビューであり続ける。
イベントディスパッチャモジュール274は、イベント情報をイベント認識部(例えば、イベント認識部280)に送信する。アクティブイベント認識部判定モジュール273を含む実施形態において、イベントディスパッチャモジュール274は、アクティブイベント認識部判定モジュール273により判定されたイベント認識部にイベント情報を配信する。一部の実施形態では、イベントディスパッチャモジュール274は、対応するイベント受信部282により取得されるイベント情報をイベント待ち行列に記憶する。
一部の実施形態では、オペレーティングシステム226は、イベントソート部270を含む。あるいは、アプリケーション236−1は、イベントソート部270を含む。更なる他の実施形態では、イベントソート部270は、スタンドアロンモジュール、又は接触/動きモジュール230等のメモリ202に記憶された別のモジュールの一部である。
一部の実施形態では、アプリケーション236−1は、各々がアプリケーションのユーザインターフェースのそれぞれのビュー内で発生するタッチイベントを処理する命令を含む、複数のイベントハンドラ290及び1つ以上のアプリケーションビュー291を含む。アプリケーション236−1の各アプリケーションビュー291は、1つ以上のイベント認識部280を含む。典型的には、それぞれのアプリケーションビュー291は、複数のイベント認識部280を含む。他の実施形態では、イベント認識部280のうちの1つ以上は、ユーザインターフェースキット(図示せず)、又はアプリケーション236−1がメソッド及び他の属性をそれから継承する上位レベルのオブジェクト等の、別々のモジュールの一部である。一部の実施形態では、それぞれのイベントハンドラ290は、データ更新部276、オブジェクト更新部277、GUI更新部278、及び/又はイベントソート部270から受信されたイベントデータ279、のうちの1つ以上を含む。イベントハンドラ290は、アプリケーション内部状態292を更新するために、データ更新部276、オブジェクト更新部277、又はGUI更新部278を利用するか、又は呼び出す。あるいは、アプリケーションビュー291のうちの1つ以上は、1つ以上のそれぞれのイベントハンドラ290を含む。また、一部の実施形態では、データ更新部276、オブジェクト更新部277、及びGUI更新部278のうちの1つ以上は、それぞれのアプリケーションビュー291に含まれる。
それぞれのイベント認識部280は、イベントソート部270からイベント情報(例えば、イベントデータ279)を受信して、そのイベント情報からイベントを特定する。イベント認識部280は、イベント受信部282及びイベント比較部284を含む。いくつかの実施形態では、イベント認識部280は更に、メタデータ283及びイベント配信命令288(サブイベント配信命令を含む)の少なくともサブセットを含む。
イベント受信部282は、イベントソート部270からイベント情報を受信する。イベント情報は、サブイベントについての情報、例えば、タッチ又はタッチの移動についての情報を含む。サブイベントに依存して、イベント情報はまた、サブイベントの位置等の追加の情報を含む。サブイベントがタッチの動きに関わるとき、イベント情報はまた、サブイベントの速さ及び方向を含む。一部の実施形態では、イベントは、1つの方位から別の方位への(例えば、縦方位から横方位への、又はその逆の)デバイスの回転を含み、イベント情報は、デバイスの現在の方位(デバイスの姿勢とも呼ばれる)についての対応する情報を含む。
イベント比較部284は、イベント情報を既定のイベント又はサブイベントの定義と比較し、その比較に基づいて、イベント若しくはサブイベントを判定する、又はイベント若しくはサブイベントの状態を判定若しくは更新する。いくつかの実施形態において、イベント比較部284は、イベント定義286を含む。イベント定義286は、例えば、イベント1(287−1)、イベント2(287−2)等の、イベントの定義(例えば、サブイベントの既定のシーケンス)を含む。一部の実施形態において、イベント(287)内のサブイベントは、例えば、タッチ開始、タッチ終了、タッチの移動、タッチの中止、及び複数のタッチを含む。ある実施例では、イベント1(287−1)の定義は、表示されたオブジェクト上のダブルタップである。このダブルタップは、例えば、所定の段階に関する表示オブジェクト上での第1のタッチ(タッチの開始)、所定の段階に関する第1のリフトオフ(タッチの終了)、所定の段階に関する表示オブジェクト上での第2のタッチ(タッチの開始)、及び所定の段階に関する第2のリフトオフ(タッチの終了)を含む。別の実施例では、イベント2(287−2)の定義は、表示されたオブジェクト上のドラッグ操作である。このドラッグ操作は、例えば、所定の段階に関する表示オブジェクト上でのタッチ(又は、接触)、タッチ感知ディスプレイ212を横断するタッチの移動、及びタッチのリフトオフ(タッチの終了)を含む。一部の実施形態において、イベントはまた、1つ以上の関連付けられたイベントハンドラ290に関する情報も含む。
一部の実施形態において、イベント定義287は、それぞれのユーザインターフェースオブジェクトに関するイベントの定義を含む。一部の実施形態において、イベント比較部284は、サブイベントに関連付けられたユーザインターフェースオブジェクトを判定するヒットテストを実行する。例えば、3つのユーザインターフェースオブジェクトがタッチ感知ディスプレイ212に表示されるアプリケーションビューにおいて、タッチ感知ディスプレイ212上でタッチが検出されると、イベント比較部284は、3つのユーザインターフェースオブジェクトのうちのどれがタッチ(サブイベント)に関連付けられているかを判定するためのヒットテストを実行する。表示された各オブジェクトが、対応するイベントハンドラ290と関連付けられている場合、イベント比較部は、ヒットテストの結果を使用して、どのイベントハンドラ290をアクティブ化すべきかを判定する。例えば、イベント比較部284は、サブイベント及びヒットテストのトリガとなるオブジェクトと関連付けられたイベントハンドラを選択する。
いくつかの実施形態では、それぞれのイベント(287)に関する定義はまた、サブイベントのシーケンスがイベント認識部のイベントタイプに対応するか否かが判定されるまでイベント情報の配信を遅延させる遅延動作をも含む。
それぞれのイベント認識部280が、一連のサブイベントがイベント定義286におけるイベントのいずれとも一致しないと判定するとき、それぞれのイベント認識部280は、イベント不可能、イベント失敗、又はイベント終了状態に入り、その後は、タッチに基づくジェスチャの後続のサブイベントを無視する。この状況では、ヒットビューに対してアクティブのままである他のイベント認識部がある場合、そのイベント認識部は、進行中のタッチに基づくジェスチャのサブイベントを追跡及び処理し続ける。
一部の実施形態では、それぞれのイベント認識部280は、イベント配信システムがどのようにサブイベント配信を実行すべきかをアクティブに関与しているイベント認識部に示す構成可能な属性、フラグ、及び/又はリストを有するメタデータ283を含む。一部の実施形態では、メタデータ283は、イベント認識部が相互にどのように対話するか又は対話することが可能とされているかについて示す構成可能な属性、フラグ、及び/又はリストを含む。一部の実施形態では、メタデータ283は、サブイベントがビュー階層又はプログラム階層における多様なレベルに配信されるかを示す構成可能な属性、フラグ、及び/又はリストを含む。
一部の実施形態では、それぞれのイベント認識部280は、イベントの1つ以上の特定のサブイベントが認識されるときに、イベントと関連付けられたイベントハンドラ290をアクティブ化する。一部の実施形態では、それぞれのイベント認識部280は、イベントと関連付けられたイベント情報をイベントハンドラ290に配信する。イベントハンドラ290をアクティブ化することは、それぞれのヒットビューにサブイベントを送信する(及び、送信を延期する)こととは別個である。一部の実施形態では、イベント認識部280は、認識されたイベントと関連付けられたフラグを投入し、フラグと関連付けられたイベントハンドラ290は、フラグを捕らえ、予め定義された処理を実行する。
一部の実施形態では、イベント配信命令288は、イベントハンドラをアクティブ化することなくサブイベントについてのイベント情報を配信するサブイベント配信命令を含む。代わりに、サブイベント配信命令は、一連のサブイベントと関連付けられたイベントハンドラに、又はアクティブに関与しているビューにイベント情報を配信する。一連のサブイベントに又はアクティブに関与しているビューと関連付けられたイベントハンドラは、イベント情報を受信し、予め定義された処理を実行する。
一部の実施形態では、データ更新部276は、アプリケーション236−1で使用されるデータを作成及び更新する。例えば、データ更新部276は、連絡先モジュール237で使用される電話番号を更新したり、又はビデオ再生モジュールで使用されるビデオファイルを記憶したりする。一部の実施形態では、オブジェクト更新部277は、アプリケーション236−1で使用されるオブジェクトを作成及び更新する。例えば、オブジェクト更新部277は、新たなユーザインターフェースオブジェクトを作成するか、又はユーザインターフェースオブジェクトの位置を更新する。GUI更新部278は、GUIを更新する。例えば、GUI更新部278は、表示情報を作成し、タッチ感知ディスプレイ上で表示するためにそれをグラフィックモジュール232に送信する。
一部の実施形態では、イベントハンドラ(単数又は複数)290は、データ更新部276、オブジェクト更新部277、及びGUI更新部278を含むか、又はそれらへのアクセスを有する。一部の実施形態では、データ更新部276、オブジェクト更新部277、及びGUI更新部278は、それぞれのアプリケーション236−1又はアプリケーションビュー291の単一モジュールに含まれる。他の実施形態では、それらは、2つ以上のソフトウェアモジュールに含まれる。
タッチ感知ディスプレイ上のユーザのタッチのイベント処理に関する前述の論考はまた、入力デバイスを使用して多機能デバイス200を動作させるための他の形態のユーザ入力にも適用されるが、そのすべてがタッチスクリーン上で開始されるわけではないことが理解されよう。例えば、単一若しくは複数のキーボードの押圧若しくは保持に任意選択的に合わせたマウスの移動及びマウスボタンの押圧、タッチパッド上でのタップ、ドラッグ、スクロール等の接触移動、ペンスタイラス入力、デバイスの移動、口頭による指示検出された眼球運動、バイオメトリック入力、並びに/又はそれらの任意の組み合わせは任意選択的に、認識されることになるイベントを定義するサブイベントに対応する入力として利用される。
図3は、一部の実施形態に係る、タッチスクリーン212を有するポータブル多機能デバイス200を示す。タッチスクリーンは、ユーザインターフェース(user interface、UI)300内に1つ以上のグラフィックを、任意選択的に表示する。本実施形態、並びに後述する実施形態において、ユーザは、例えば、1本以上の指302(図には、正確な縮尺率では描かれていない)又は1つ以上のスタイラス303(図には、正確な縮尺率では描かれていない)を用いて、グラフィック上でジェスチャを行うことにより、グラフィックのうちの1つ以上を選択することができる。一部の実施形態では、ユーザが1つ以上のグラフィックとの接触を断った際に、その1つ以上のグラフィックの選択が生じる。いくつかの実施形態において、ジェスチャは、1回以上のタップ、1回以上のスワイプ(左から右へ、右から左へ、上方向へ、及び/又は下方向へ)、及び/又はデバイス200と接触した指のローリング(右から左へ、左から右へ、上方向へ、及び/又は下方向へ)を、任意選択的に、含む。一部の実装形態又は状況では、グラフィックとの不測の接触は、グラフィックを選択しない。例えば、選択に対応するジェスチャがタップであるとき、アプリケーションアイコンの上をスイープするスワイプジェスチャは任意選択的に、対応するアプリケーションを選択しない。
デバイス200は、「ホーム」又はメニューボタン304等の、1つ以上の物理ボタンも含む。前で説明されたように、メニューボタン304は、デバイス200上で実行される、アプリケーションの組における任意のアプリケーション236にナビゲートするために使用される。あるいは、一部の実施形態では、メニューボタンは、タッチスクリーン212に表示されたGUIにおけるソフトキーとして実装されている。
一実施形態では、デバイス200は、タッチスクリーン212、メニューボタン304、デバイスの電源をオン/オフし、デバイスをロックするためのプッシュボタン306、音量調節ボタン(単数又は複数)308、加入者識別モジュール(SIM)カードスロット310、ヘッドセットジャック312、及びドッキング/充電用外部ポート224を含む。プッシュボタン306は任意選択的に、ボタンを押し下げ、予め定義された時間間隔の間にボタンを押し下げた状態で保持することによってデバイス上の電力をターンオン/オフし、ボタンを押し下げ予め定義された時間間隔が経過する前にボタンを解放することによってデバイスをロックし、及び/又はデバイスのロックを解除し若しくはロック解除処理を開始するために使用される。別の実施形態では、デバイス200はまた、マイクロフォン213を通して、一部の機能をアクティブ化又は非アクティブ化するための口頭入力を受ける。デバイス200はまた、タッチスクリーン212上の接触の強度を検出するための1つ以上の接触強度センサ265、及び/又は、デバイス200のユーザに対する触知出力を生成するための1つ以上の触知出力生成器267をも、任意選択的に含む。
図4は、いくつかの実施形態に係る、ディスプレイ及びタッチ感知面を備える例示的な多機能デバイスのブロック図である。デバイス400は、ポータブル型である必要はない。一部の実施形態では、デバイス400は、ラップトップコンピュータ、デスクトップコンピュータ、タブレットコンピュータ、マルチメディアプレーヤデバイス、ナビゲーションデバイス、教育的デバイス(子供の学習玩具等)、ゲームシステム、又は制御デバイス(例えば、家庭用又は業務用コントローラ)である。デバイス400は、典型的には、1つ以上の処理ユニット(CPU)410、1つ以上のネットワーク又は他の通信インターフェース460、メモリ470、及びこれらの構成要素を相互接続するための1つ以上の通信バス420を含む。通信バス420は、システム構成要素間の通信を相互接続及び制御する回路(チップセットと呼ばれることがある)を、任意選択的に含む。デバイス400は、典型的にはタッチスクリーンディスプレイであるディスプレイ440を備える入出力(I/O)インターフェース430を含む。I/Oインターフェース430はまた、キーボード及び/又はマウス(又は他のポインティングデバイス)450、並びにタッチパッド455、デバイス400上に触知出力を生成するための(例えば、図2Aを参照して上述した触知出力生成器267(単数又は複数)と同様の)触知出力生成器457、センサ459(例えば、光センサ、加速度センサ、近接センサ、タッチ感知センサ、及び/又は図2Aを参照して上述した接触強度センサ(単数又は複数)265と同様の接触強度センサ)をも、任意選択的に含む。メモリ470は、DRAM、SRAM、DDR RAM、又は他のランダムアクセスソリッドステートメモリデバイス等の、高速ランダムアクセスメモリを含み、また任意選択的に、1つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性半導体記憶デバイス等の、不揮発性メモリを含む。メモリ470は任意選択的に、CPU(単数又は複数)410からリモートに位置する1つ以上の記憶デバイスを含む。いくつかの実施形態では、メモリ470は、ポータブル多機能デバイス200(図2A)のメモリ202に記憶されたプログラム、モジュール、及びデータ構造、又はそれらのサブセットに類似する、プログラム、モジュール、及びデータ構造を記憶する。更に、メモリ470は、ポータブル多機能デバイス200のメモリ202に存在しない追加のプログラム、モジュール、及びデータ構造を、任意選択的に記憶する。例えば、デバイス400のメモリ470は、描画モジュール480、プレゼンテーションモジュール482、ワードプロセッシングモジュール484、ウェブサイト作成モジュール486、ディスクオーサリングモジュール488、及び/又はスプレッドシートモジュール490を任意選択的に記憶するが、ポータブル多機能デバイス200(図2A)のメモリ202はこれらのモジュールを任意選択的に記憶しない。
上記で特定された図4の要素のそれぞれは、いくつかの実施例では、前述のメモリデバイスのうち1つ以上に記憶される。上記で特定されたモジュールのうちのそれぞれは、上述した機能を実行する命令セットに対応する。上記で特定されたモジュール又はプログラム(例えば、命令セット)は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、それゆえ、様々な実施形態では、これらのモジュールの様々なサブセットを組み合わせるか、又は他の方式で再編成する。一部の実施形態では、メモリ470は、上記で特定されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ470は、上述されていない追加のモジュール及びデータ構造を記憶する。
ここで、例えば、ポータブル多機能デバイス200上に実装され得るユーザインターフェースの実施形態に注意を向ける。
図5Aは、いくつかの実施形態に係る、ポータブル多機能デバイス200上のアプリケーションのメニュー用の例示的なユーザインターフェースを示す。同様のユーザインターフェースは、デバイス400上で実装される。一部の実施形態では、ユーザインターフェース500は、以下の要素、又はそれらのサブセット若しくはスーパーセットを含む。
セルラー信号及びWi−Fi信号等の無線通信(単数又は複数)のための信号強度インジケータ(単数又は複数)502、
●時刻504、
●Bluetooth(登録商標)インジケータ505、
●バッテリ状態インジケータ506、
●下記等の、頻繁に利用されるアプリケーション用のアイコンを含むトレー508、
○不在着信又はボイスメールメッセージの数のインジケータ514を任意選択的に含む、「電話」とラベル付けされる、電話モジュール238用のアイコン516、
○未読電子メールの数のインジケータ510を任意選択的に含む、「メール」とラベル付けされる、電子メールクライアントモジュール240用のアイコン518、
○「ブラウザ」とラベル付けされる、ブラウザモジュール247用のアイコン520、及び
○「iPod」とラベル付けされる、iPod(Apple Inc.の商標)モジュール252とも称されるビデオ及びミュージックプレーヤモジュール252用のアイコン522、及び
●下記等の、その他のアプリケーション用のアイコン、
○「メッセージ」とラベル付けされた、IMモジュール241用のアイコン524、
○「カレンダ」とラベル付けされた、カレンダモジュール248用のアイコン526、
○「写真」とラベル付けされた、画像管理モジュール244用のアイコン528、
○「カメラ」とラベル付けされた、カメラモジュール243用のアイコン530、
○「オンラインビデオ」とラベル付けされた、オンラインビデオモジュール255用のアイコン532、
○「株式」とラベル付けされた、株式ウィジェット249−2用のアイコン534、
○「マップ」とラベル付けされた、マップモジュール254用のアイコン536、
○「天気」とラベル付けされた、天気ウィジェット249−1用のアイコン538、
○「時計」とラベル付けされた、アラーム時計ウィジェット249−4用のアイコン540、
○「トレーニングサポート」とラベル付けされた、トレーニングサポートモジュール242用のアイコン542、
○「メモ」とラベル付けされる、メモモジュール253用のアイコン544、及び
○デバイス200及びその様々なアプリケーション236に関する設定へのアクセスを提供する、「設定」とラベル付けされた、設定アプリケーション又はモジュール用のアイコン546。
図5Aに示されているアイコンのラベルは、単なる例示であることに留意されたい。例えば、ビデオ及びミュージックプレーヤモジュール252用のアイコン522は、任意選択的に、「ミュージック」又は「ミュージックプレーヤ」とラベル付けされる。他のラベルが、様々なアプリケーションアイコンのために、任意選択的に使用される。一部の実施形態では、それぞれのアプリケーションアイコンに関するラベルは、それぞれのアプリケーションアイコンに対応するアプリケーションの名前を含む。一部の実施形態では、特定のアプリケーションアイコンのラベルは、特定のアプリケーションアイコンに対応するアプリケーションの名前とは異なる。
図5Bは、ディスプレイ550(例えば、タッチスクリーンディスプレイ212)とは別個のタッチ感知面551(例えば、図4のタブレット又はタッチパッド455)を備えるデバイス(例えば、図4のデバイス400)上の、例示的なユーザインターフェースを示す。デバイス400はまた、タッチ感知面551上の接触の強度を検出するための1つ以上の接触強度センサ(例えば、センサ457のうちの1つ以上)、及び/又はデバイス400のユーザに対する触知出力を生成するための1つ以上の触知出力生成器459を任意選択的に含む。
以下の実施例のうちのいくつかはタッチスクリーンディスプレイ212上での入力(タッチ感知面とディスプレイとが組み合わされている場合)を参照して説明されるが、いくつかの実施形態では、デバイスは、図5Bに示すように、ディスプレイとは別個のタッチ感知面上での入力を検出する。いくつかの実施形態では、このタッチ感知面(例えば、図5Bの551)は、ディスプレイ(例えば、550)上の主軸(例えば、図5Bの553)に対応する主軸(例えば、図5Bの552)を有する。これらの実施形態によれば、デバイスは、タッチ感知面551との接触(例えば、図5Bの560及び562)を、ディスプレイ上のそれぞれの場所に対応する場所(例えば、図5Bでは、560は568に対応し、562は570に対応する)にて検出する。このように、タッチ感知面がディスプレイとは別個のものである場合、タッチ感知面(例えば、図5Bの551)上でデバイスによって検出されたユーザ入力(例えば、接触560及び接触562、並びにそれらの移動)が、多機能デバイスのディスプレイ(例えば、図5Bでの550)上のユーザインターフェースを操作するために、デバイスによって使用される。同様の方法が、本明細書に記載の他のユーザインターフェースに任意選択的に使用されることを理解されたい。
更に加えて、以下の実施例は主に指入力(例えば、指の接触、指のタップジェスチャ、指のスワイプジェスチャ)を参照して説明されるが、いくつかの実施形態では、それらの指入力のうちの1つ以上は、別の入力デバイスからの入力(例えば、マウスに基づく入力、又はスタイラス入力)で置き換えられることを理解されたい。例えば、スワイプジェスチャは任意選択的に、マウスクリックと置き換えられ(例えば、接触の代わりに)、その後、スワイプの経路に沿ってカーソルの移動が行われる(例えば、接触の移動の代わりに)。別の例として、タップジェスチャは任意選択的に、カーソルがタップジェスチャの位置の上に位置する間のマウスクリックと置き換えられる(例えば、接触の検出、それに続いて接触の検出を停止する代わりに)。同様に、複数のユーザ入力が同時に検出されるとき、複数のコンピュータマウスは任意選択的に同時に使用され、又はマウス及び指の接触が任意選択的に同時に使用されることを理解されたい。
図6Aは、例示的なパーソナル電子デバイス600を示す。デバイス600は、本体602を含む。いくつかの実施形態では、デバイス600は、デバイス200及びデバイス400(例えば、図2A〜図4B)に関して記載した特徴のいくつか又はすべてを含む。一部の実施形態では、デバイス600は、タッチ感知ディスプレイ画面604、以後、タッチスクリーン604を有する。タッチスクリーン604の代わりに、又はそれに追加して、デバイス600は、ディスプレイ及びタッチ感知面を有する。デバイス200及びデバイス400と同様に、一部の実施形態において、タッチスクリーン604(又はタッチ感知面)は、加えられている接触(例えば、タッチ)の強度を検出するための1つ以上の強度センサを有する。タッチスクリーン604(又は、タッチ感知面)の1つ以上の強度センサは、タッチの強度を表す出力データを提供する。デバイス600のユーザインターフェースは、タッチの強度に基づいてタッチに応答し、これは、異なる強度のタッチは、デバイス600上で異なるユーザインターフェース動作を呼び出し得ることを意味する。
タッチ強度を検出して処理するための技法は、例えば、関連出願である、2013年5月8日出願の「Device,Method,and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application」と題された国際出願PCT/US2013/040061号、及び2013年11月11日出願の「Device,Method,and Graphical User Interface for Transitioning Between Touch Input to Display Output Relationships」と題された同PCT/US2013/069483号に記載されており、これらの文献のそれぞれは、全体が参照により本明細書に組み込まれる。
一部の実施形態において、デバイス600は、1つ以上の入力機構606及び入力機構608を有する。入力機構606及び入力機構608は、含まれている場合、物理的なものである。物理入力機構の例としては、プッシュボタン及び回転可能機構が挙げられる。一部の実施形態では、デバイス600は、1つ以上のアタッチメント機構を有する。かかるアタッチメント機構は、含まれる場合には、例えば、デバイス600を、帽子、アイウェア、イヤリング、ネックレス、シャツ、ジャケット、ブレスレット、腕時計バンド、チェーン、ズボン、ベルト、靴、財布、バックパック等に、取り付けることを可能にする。これらのアタッチメント機構は、ユーザによってデバイス600が着用されることを可能にし得る。
図6Bは、例示的なパーソナル電子デバイス600を示す。いくつかの実施形態では、デバイス600は、図2A、図2B、及び図4に関連して記載した構成要素のいくつか又はすべてを含む。デバイス600は、I/O部614を1つ以上のコンピュータプロセッサ616及びメモリ618に動作可能に接続するバス612を有する。I/O部614は、タッチ感知式構成要素622、及び、任意選択的に、タッチ強度感知構成要素624を有し得るディスプレイ604に接続される。更には、I/O部614は、Wi−Fi、Bluetooth(登録商標)、近距離通信(「NFC」)、セルラー、及び/又は他の無線通信技法を使用して、アプリケーション及びオペレーティングシステムデータを受信するための、通信ユニット630と接続される。デバイス600は、入力機構606及び/又は入力機構608を含む。入力機構606は、例えば、回転可能入力デバイス、又は押下可能かつ回転可能な入力デバイスである。入力機構608は、一部の実施例では、ボタンである。
入力機構608は、一部の実施例では、マイクロフォンである。パーソナル電子デバイス600は、例えば、GPSセンサ632、加速度計634、方向センサ640(例えば、コンパス)、ジャイロスコープ636、動きセンサ638、及び/又はこれらの組み合わせ等の、様々なセンサを含み、それらのすべては、I/O部614に動作可能に接続される。
パーソナル電子デバイス600のメモリ618は、コンピュータ実行可能な命令を記憶するための非一時的コンピュータ可読記憶媒体とすることができ、それらの命令は、1つ以上のコンピュータプロセッサ616によって実行されると、例えば、コンピュータプロセッサに、下で説明されている技法及び処理を実行させる。コンピュータ実行可能な命令はまた、例えば、コンピュータベースのシステム、プロセッサを含むシステム、又は、命令実行システム、装置、若しくはデバイスから命令をフェッチしてその命令を実行し得る他のシステム、等の、命令実行システム、装置、若しくはデバイス、によって、又はそれらと接続して使用される、任意の非一時的コンピュータ可読記憶媒体に記憶及び/又は伝送される。パーソナル電子デバイス600は図6Bの構成要素及び構成に限定されるものではなく、他の構成要素又は追加的構成要素を、複数の構成で含み得る。
本明細書で使用する場合、用語「アフォーダンス」は、例えば、デバイス200、400、600、800、900、1000、及び/又は1100(図2A、図4、図6A〜図6B、図8A〜図8B、図9A〜図9B、図10A〜図10B、及び図11)のディスプレイ画面上に表示されるユーザ対話式のグラフィカルユーザインターフェースオブジェクトを指す。例えば、画像(例えば、アイコン)、ボタン、及びテキスト(例えば、ハイパーリンク)はそれぞれ、アフォーダンスを構成する。
本明細書にて使用されるとき、用語「フォーカスセレクタ」とは、ユーザが対話しているユーザインターフェースの現在の部分を示す入力要素を指す。カーソル又は他の位置マーカを含むいくつかの実装において、タッチ感知面(例えば、図4のタッチパッド455、又は図5Bのタッチ感知面551)上で入力(例えば、押圧入力)が検出された時に、カーソルが特定のユーザインターフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインターフェース要素)の上にあるとき、カーソルは「フォーカスセレクタ」として機能し、特定のユーザインターフェース要素が、検出された入力に従って調整される。タッチスクリーンディスプレイ上のユーザインターフェース要素との直接的な対話を可能にする、タッチスクリーンディスプレイ(例えば、図2Aのタッチ感知ディスプレイシステム212、又は図5Aのタッチスクリーン212)を含むいくつかの実装では、タッチスクリーン上で検出される接触が「フォーカスセレクタ」の役割を果たすため、入力(例えば、接触による押圧入力)がタッチスクリーンディスプレイ上の特定のユーザインターフェース要素(例えば、ボタン、ウィンドウ、スライダ、又は他のユーザインターフェース要素)の場所で検出されると、その特定のユーザインターフェース要素は検出された入力に従って調節される。一部の実装では、(例えば、タブキー又は矢印キーを使ってフォーカスを1つのボタンから別のボタンに移動させることにより)タッチスクリーンディスプレイ上の対応するカーソルの移動又は接触の移動なしに、フォーカスが、ユーザインターフェースの1つの領域からユーザインターフェースの別の領域に移動される。それらの実装形態では、フォーカスセレクタは、ユーザインターフェースの異なる領域の間のフォーカスの移動に従って移動する。フォーカスセレクタによってとられる具体的な形態とは関わりなく、フォーカスセレクタは一般的に、ユーザの意図したユーザインターフェースとの対話を通信するために(例えば、ユーザが対話することを意図しているユーザインターフェースの要素をデバイスに示すことによって)、ユーザによって制御されるユーザインターフェース要素(又は、タッチスクリーンディスプレイ上の接触)である。例えば、押圧入力がタッチ感知面(例えば、タッチパッド又はタッチスクリーン)上で検出されたときに、対応するボタンの上にあるフォーカスセレクタ(例えば、カーソル、接触又は選択ボックス)の位置は、(デバイスのディスプレイ上に示されている他のユーザインターフェース要素ではなく)対応するボタンをユーザがアクティブ化しようとしていることを示すものである。
本明細書及び特許請求の範囲で使用するとき、接触の「特性強度」という用語は、接触の1つ以上の強度に基づく、その接触の特性を指す。一部の実施形態では、特性強度は複数の強度サンプルに基づく。特性強度は任意選択的に、予め定義された数の強度サンプル、又は予め定義されたイベントに対する(例えば、接触を検出した後、接触のリフトオフを検出する前、接触の移動の開始を検出する前若しくは後、接触の終わりを検出する前、接触の強度における増大を検出する前若しくは後、及び/又は接触の強度における減少を検出する前若しくは後)予め定められた時間期間の間(例えば、0.05、0.1、0.2、0.5、1、2、5、10秒)に収集された強度サンプルの組に基づく。接触の特性強度は、任意選択的に、接触の強度の最大値、接触の強度の平均値(mean value)、接触の強度の平均値(average value)、接触の強度の上位10%値、接触の強度の最大値の半分の値、接触の強度の最大値の90%の値等、のうちの1つ以上に基づく。一部の実施形態では、接触の期間は、特性強度を判定する際に使用される(例えば、特性強度が経時的な接触の強度の平均にあるとき)。一部の実施形態では、特性強度は、操作がユーザによって実行されたかを判定するために1つ以上の強度閾値の組と比較される。例えば、1つ以上の強度閾値の組は、第1の強度閾値及び第2の強度閾値を含む。この実施例では、第1の閾値を越えない特性強度を有する接触の結果として第1の動作が実行され、第1の強度閾値を越え、第2の強度閾値を越えない特性強度を有する接触の結果として第2の動作が実行され、第2の閾値を越える特性強度を有する接触の結果として第3の動作が実行される。一部の実施形態では、特性強度と1つ以上の閾値との間の比較が、第1の動作又は第2の動作のいずれを実行するかを判定するために使用されるのではなく、1つ以上の動作を実行するかどうか(例えば、それぞれの動作を実行するのか、又はそれぞれの動作の実行を省略するのか)を判定するために使用される。
一部の実施形態では、特性強度を判定する目的で、ジェスチャの一部分が特定される。例えば、タッチ感知面は、開始位置から遷移して、接触の強度が増大する終了位置に到達する連続的なスワイプ接触を受信する。この実施例では、終了位置における接触の特性強度は、連続的なスワイプ接触全体ではなく、そのスワイプ接触の一部分のみ(例えば、終了位置におけるスワイプ接触の部分のみ)に基づく。一部の実施形態では、平滑化アルゴリズムは、接触の特性強度を判定する前にスワイプ接触の強度に適用される。例えば、平滑化アルゴリズムは任意選択的に、非加重移動平均平滑化アルゴリズム、三角平滑化アルゴリズム、中央値フィルタ平滑化アルゴリズム、及び/又は指数平滑化アルゴリズムのうちの1つ以上を含む。一部の状況では、それらの平滑化アルゴリズムは、特性強度を判定する目的で、スワイプ接触の強度における小幅な上昇又は低下を除去する。
タッチ感知面上の接触の強度は、接触検出強度閾値、軽い押圧強度閾値、深い押圧強度閾値、及び/又は1つ以上の他の強度閾値等の1つ以上の強度閾値に対して特徴付けする。一部の実施形態では、軽い押圧強度閾値は、物理マウスのボタン又はトラックパッドをクリックすることと典型的に関連付けられた操作をデバイスが実行する強度に対応する。一部の実施形態では、深い押圧強度閾値は、物理マウスのボタン又はトラックパッドをクリックすることと典型的に関連付けられた操作とは異なる操作をデバイスが実行する強度に対応する。一部の実施形態では、軽い押圧強度閾値を下回る(例えば、かつ、それを下回ると接触がもはや検出されないわずかな接触検出強度閾値を上回る)特性強度で接触が検出される場合、デバイスは、軽い押圧強度閾値又は深い押圧強度閾値に関連付けられた動作を実行することなく、タッチ感知面上の接触の移動に従って、フォーカスセレクタを移動させる。全般的には、特に明記しない限り、これらの強度閾値は、ユーザインターフェース図の異なるセット間でも一貫している。
軽い押圧強度閾値を下回る強度から、軽い押圧強度閾値と深い押圧強度閾値との間の強度への接触の特性強度の増大は、「軽い押圧」入力と呼ばれる場合がある。深い押圧強度閾値を下回る強度から、深い押圧強度閾値を上回る強度への接触の特性強度の増大は、「深い押圧」入力と呼ばれる場合がある。接触検出強度閾値を下回る強度から、接触検出強度閾値と軽い押圧強度閾値との間の強度への接触の特性強度の増大は、タッチ面上の接触の検出と呼ばれる場合がある。接触検出強度閾値を上回る強度から、接触検出強度閾値を下回る強度への接触の特性強度の減少は、タッチ面からの接触のリフトオフの検出と呼ばれる場合がある。一部の実施形態では、接触検出強度閾値はゼロである。いくつかの実施形態では、接触検出強度閾値はゼロより大きい。
本明細書で説明される一部の実施形態では、1つ以上の操作は、それぞれの押圧入力を含むジェスチャを検出したことに応じて、又はそれぞれの接触(又は、複数の接触)で実行されるそれぞれの押圧入力を検出したことに応じて実行され、それぞれの押圧入力は、押圧入力強度閾値を上回る接触(又は、複数の接触)の強度における増大を検出したことに少なくとも部分的に基づいて検出される。一部の実施形態では、それぞれの動作は、押圧入力強度閾値を上回る、対応する接触の強度の増大(例えば、対応する押圧入力の「ダウンストローク」)の検出に応じて実行される。一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る、対応する接触の強度の増大、及び後続の、押圧入力強度閾値を下回る接触の強度の減少を含み、対応する動作は、その後続の押圧入力閾値を下回る対応する接触の強度の減少(例えば、対応する押圧入力の「アップストローク」)の検出に応じて、実行される。
一部の実施形態では、デバイスは、「ジッタ」と呼ばれる場合がある不測の入力を回避するために強度ヒステリシスを採用し、デバイスは、押圧入力強度閾値との既定の関連性を有するヒステリシス強度閾値を定義又は選択する(例えば、ヒステリシス強度閾値は、押圧入力強度閾値よりもX強度単位低いか、又は、ヒステリシス強度閾値は、押圧入力強度閾値の75%、90%、若しくは何らかの妥当な比率である)。したがって、一部の実施形態では、押圧入力は、押圧入力強度閾値を上回る対応する接触の強度の増大、及び後続の、押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少を含み、対応する動作は、そのヒステリシス強度閾値を下回る、後続の対応する接触の強度の減少(例えば、対応する押圧入力の「アップストローク」)の検出に応じて、実行される。同様に、一部の実施形態では、押圧入力は、デバイスが、ヒステリシス強度閾値以下の強度から押圧入力強度閾値以上の強度への接触の強度の増大、及び任意選択的に、ヒステリシス強度以下の強度への、後続の接触の強度の減少を検出する場合にのみ検出され、対応する動作は、その押圧入力の検出(例えば、状況に応じて、接触の強度の増大、又は接触の強度の減少)に応じて、実行される。
説明を容易にするために、押圧入力強度閾値に関連付けられた押圧入力に応じて、又はその押圧入力を含むジェスチャに応じて実行される動作の説明は、押圧入力強度閾値を上回る接触の強度の増大、ヒステリシス強度閾値を下回る強度から押圧入力強度閾値を上回る強度への接触の強度の増大、押圧入力強度閾値を下回る接触の強度の減少、及び/又は押圧入力強度閾値に対応するヒステリシス強度閾値を下回る接触の強度の減少のいずれかを検出したことに応じて、任意選択的にトリガされる。更に加えて、押圧入力強度閾値を下回る接触の強度の減少を検出したことに応じて動作が実行されるとして説明される実施例では、その動作は、押圧入力強度閾値に対応し、かつそれよりも低いヒステリシス強度閾値を下回る、接触の強度の減少を検出したことに応じて任意選択的に実行される。
3.デジタルアシスタントシステム
図7Aは、様々な実施例に係る、デジタルアシスタントシステム700のブロック図を示す。いくつかの実施例では、デジタルアシスタントシステム700はスタンドアロンコンピュータシステム上に実装される。いくつかの実施例では、デジタルアシスタントシステム700は複数のコンピュータにわたって分散される。いくつかの実施例では、デジタルアシスタントのモジュール及び機能のいくつかはサーバ部分及びクライアント部分に分割される。この場合には、クライアント部分は1つ以上のユーザデバイス(例えば、デバイス104、デバイス122、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、又はデバイス1100)上に常駐し、例えば、図1に示すように、1つ以上のネットワークを通してサーバ部分(例えば、サーバシステム108)と通信する。いくつかの実施例では、デジタルアシスタントシステム700は、図1に示したサーバシステム108(及び/又はDAサーバ106)の一実装形態である。デジタルアシスタントシステム700はデジタルアシスタントシステムの単なる一実施例にすぎず、デジタルアシスタントシステム700は、図示されているよりも多数若しくは少数の構成要素を有することができ、2つ以上の構成要素を組み合わせることができ、又は構成要素の異なる構成若しくは配置を有することができることに留意されたい。図7Aに示す様々な構成要素は、1つ以上の信号処理回路及び/若しくは特定用途向け集積回路を含む、ハードウェア、1つ以上のプロセッサによって実行されるソフトウェア命令、ファームウェア、又はそれらの組み合わせの形態で実装される。
デジタルアシスタントシステム700は、メモリ702、1つ以上のプロセッサ704、入出力(I/O)インターフェース706、及びネットワーク通信インターフェース708を含む。これらの構成要素は1本以上の通信バス又は信号線710を介して、互いに通信することができる。
いくつかの実施例では、メモリ702は、高速ランダムアクセスメモリ及び/又は不揮発性コンピュータ可読記憶媒体(例えば、1つ以上の磁気ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性固体メモリデバイス)等、非一時的コンピュータ可読媒体を含む。
いくつかの実施例では、I/Oインターフェース706は、ディスプレイ、キーボード、タッチスクリーン、及びマイクロフォン等の、デジタルアシスタントシステム700の入出力デバイス716をユーザインターフェースモジュール722に連結する。I/Oインターフェース706は、ユーザインターフェースモジュール722と協働して、ユーザ入力(例えば、音声入力、キーボード入力、タッチ入力等)を受け取り、それらを適宜に処理する。いくつかの実施例では、例えば、デジタルアシスタントが独立型ユーザデバイス上に実装される場合には、デジタルアシスタントシステム700は、図2A、図4、図6A〜図6B、図8A〜図8B、図9A〜図9B、図10A〜図10B、及び図11においてそれぞれデバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、又はデバイス1100に関連して説明されている構成要素及びI/O通信インターフェースの任意のものを含む。いくつかの実施例では、デジタルアシスタントシステム700はデジタルアシスタントの実施形態のサーバ部分を表し、ユーザデバイス(例えば、デバイス104、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、又はデバイス1100)上に常駐するクライアント側部分を通してユーザと対話することができる。
いくつかの実施例では、ネットワーク通信インターフェース708は、有線通信ポート(単数又は複数)712及び/又は無線送受信回路714を含む。有線通信ポート(単数又は複数)は、1つ以上の有線インターフェース、例えば、イーサネット(登録商標)、ユニバーサルシリアルバス(USB)、FIREWIRE(登録商標)等を介して通信信号を受信及び送信する。無線回路714は、通信ネットワーク及び他の通信デバイスを起点/終点として、RF信号及び/又は光信号を受信及び送信する。無線通信は、GSM(登録商標)、EDGE、CDMA、TDMA、Bluetooth(登録商標)、Wi−Fi(登録商標)、VoIP、Wi−MAX(登録商標)、あるいは任意のその他の好適な通信プロトコル等の、複数の通信規格、プロトコル及び技術のうちの任意のものを使用する。ネットワーク通信インターフェース708は、インターネット、イントラネット等のネットワーク、及び/又はセルラー電話ネットワーク、無線ローカルエリアネットワーク(LAN)等の無線ネットワーク、及び/又はメトロポリタンエリアネットワーク(Metropolitan Area Network、MAN)を用いた、デジタルアシスタントシステム700と他のデバイスとの間の通信を可能にする。
いくつかの実施例では、メモリ702、又はメモリ702のコンピュータ可読記憶媒体は、オペレーティングシステム718、通信モジュール720、ユーザインターフェースモジュール722、1つ以上のアプリケーション724、及びデジタルアシスタントモジュール726のすべて又はサブセットを含むプログラム、モジュール、命令、及びデータ構造を記憶する。詳細には、メモリ702又はメモリ702のコンピュータ可読記憶媒体は、以下で説明するプロセスを実行する命令を記憶する。1つ以上のプロセッサ704はこれらのプログラム、モジュール、及び命令を実行し、データ構造から/への読み出し/書き込みを行う。
オペレーティングシステム718(例えば、Darwin(登録商標)、RTXC(登録商標)、LINUX(登録商標)、UNIX(登録商標)、iOS(登録商標)、OS X(登録商標)、WINDOWS(登録商標)、又はVxWorks等の組み込みオペレーティングシステム)は、一般的なシステムタスク(例えば、メモリ管理、記憶装置制御、電力管理等)を制御及び管理するための様々なソフトウェア構成要素及び/又はドライバを含み、種々のハードウェア、ファームウェア、及びソフトウェア構成要素間の通信を可能にする。
通信モジュール720は、ネットワーク通信インターフェース708上でのデジタルアシスタントシステム700と他のデバイスとの間の通信を可能にする。例えば、通信モジュール720は、図2A、図4、図6A〜図6Bにそれぞれ示すデバイス200、デバイス400、及びデバイス600等の電子デバイスのRF回路208と通信する。通信モジュール720はまた、無線回路機構714及び/又は有線通信ポート712によって受信されたデータを処理するための種々の構成要素も含む。
ユーザインターフェースモジュール722はI/Oインターフェース706を介して(例えば、キーボード、タッチスクリーン、ポインティングデバイス、コントローラ、及び/又はマイクロフォンから)ユーザからのコマンド及び/又は入力を受け取り、ディスプレイ上にユーザインターフェースオブジェクトを生成する。ユーザインターフェースモジュール722はまた、I/Oインターフェース706を介した(例えば、ディスプレイ、オーディオチャネル、スピーカ、タッチパッド等を通じて)ユーザへの出力(例えば、発語、音声、アニメーション、テキスト、アイコン、振動、触覚フィードバック、光等)も準備及び配信する。
アプリケーション724は、1つ以上のプロセッサ704により実行されるように構成されたプログラム及び/又はモジュールを含む。例えば、デジタルアシスタントシステムがスタンドアロンのユーザデバイス上に実装される場合には、アプリケーション724は、ゲーム、カレンダアプリケーション、ナビゲーションアプリケーション、又は電子メールアプリケーション等の、ユーザアプリケーションを含む。デジタルアシスタントシステム700がサーバ上に実装される場合には、アプリケーション724は、例えば、リソース管理アプリケーション、診断アプリケーション、又はスケジューリングアプリケーションを含む。
メモリ702はまた、デジタルアシスタントモジュール726(又はデジタルアシスタントのサーバ部分)も記憶する。いくつかの実施例では、デジタルアシスタントモジュール726は、以下のサブモジュール、又はそれらのサブセット若しくはスーパーセットを含む:入出力処理モジュール728、音声テキスト化(Speech−To−Text、STT)処理モジュール730、自然言語処理モジュール732、ダイアログフロー処理モジュール734、タスクフロー処理モジュール736、サービス処理モジュール738、及び音声合成モジュール740。これらのモジュールの各々は、デジタルアシスタントモジュール726の以下のシステム又はデータ及びモデルのうちの1つ以上、又はそれらのサブセット若しくはスーパーセットへのアクセスを有する:オントロジ760、語彙索引744、ユーザデータ748、タスクフローモデル754、サービスモデル756、及びASRシステム。
いくつかの実施例では、デジタルアシスタントモジュール726内に実装された処理モジュール、データ、及びモデルを用いて、デジタルアシスタントは以下のもののうちの少なくともいくつかを実行することができる:音声入力をテキストに変換すること、ユーザから受信した自然言語入力内に表現されているユーザの意図を特定すること、ユーザの意図を完全に推測するために必要な情報を(例えば、単語、ゲーム、意図等の曖昧さを除去することによって)能動的に引き出し、取得すること、推測された意図を満たすためのタスクフローを判定すること、及び、そのタスクフローを実行し、推測された意図を満たすこと。
いくつかの実施例では、図7Bに示すように、I/O処理モジュール728は、ユーザ入力(例えば、音声入力)を取得するため、及びユーザ入力への応答を(例えば、音声出力として)提供するために、図7AにおけるI/Oデバイス716を通してユーザと対話するか、又は、図7Aにおけるネットワーク通信インターフェース708を通してユーザデバイス(例えば、デバイス104、デバイス200、デバイス400、又はデバイス600)と対話する。I/O処理モジュール728は、ユーザ入力と共に、又はその受信の直後に、ユーザ入力に関連付けられるコンテキスト情報をユーザデバイスから任意選択的に取得する。コンテキスト情報は、ユーザ入力に関連するユーザ固有のデータ、語彙、及び/又は嗜好を含む。いくつかの実施例では、コンテキスト情報はまた、ユーザ要求が受信された時点におけるユーザデバイスのソフトウェア及びハードウェア状態、並びに/又はユーザ要求が受信された時点におけるユーザの周囲環境に関する情報も含む。いくつかの実施例では、I/O処理モジュール728はまた、ユーザ要求について、ユーザに補足質問を送信し、ユーザから回答を受信する。ユーザ要求がI/O処理モジュール728によって受信され、そのユーザ要求が音声入力を含んでいる場合、I/O処理モジュール728は、音声テキスト化変換のために、その音声入力をSTT処理モジュール730(又は音声レコナイザ)へ転送する。
STT処理モジュール730は1つ以上のASRシステムを含む。1つ以上のASRシステムは、I/O処理モジュール728を介して受信した音声入力を処理して、認識結果を生成することができる。各ASRシステムは、フロントエンド音声プリプロセッサを含む。フロントエンド音声プリプロセッサは、音声入力から代表的な特徴を抽出する。例えば、フロントエンド音声プリプロセッサは、音声入力を代表的な多次元ベクトルの列として特徴付けるスペクトルの特徴を抽出するために、音声入力に対してフーリエ変換を実行する。更に、各ASRシステムは、1つ以上の音声認識モデル(例えば、音響モデル及び/又は言語モデル)を含み、1つ以上の音声認識エンジンを実装する。音声認識モデルの実施例は、隠れマルコフモデル、混合ガウスモデル、ディープニューラルネットワークモデル、nグラム言語モデル、及び他の統計モデルを含む。音声認識エンジンの実施例は、動的時間伸縮ベースのエンジン及び重み付き有限状態トランスデューサ(Weighted Finite−State Transducers、WFST)ベースのエンジンを含む。フロントエンド音声プリプロセッサの抽出された代表的な特徴を処理して、中間認識結果(例えば、音素、音素文字列及びサブワード)を生成し、最終的には、テキスト認識結果(例えば、単語、単語文字列、又はトークンの列)を生成するために、1つ以上の音声認識モデル及び1つ以上の音声認識エンジンが使用される。いくつかの実施例では、音声入力は、認識結果を生成するために、サードパーティサービスによって、又はユーザのデバイス(例えば、デバイス104、デバイス200、デバイス400、又はデバイス600)上で少なくとも部分的に処理される。STT処理モジュール730が、テキスト文字列(例えば、単語、又は単語の列、又はトークンの列)を包含する認識結果を生成すると、認識結果は意図推論のために自然言語処理モジュール732に渡される。いくつかの例では、STT処理モジュール730は、音声入力の複数の候補テキスト表現を生成する。各候補テキスト表現は、音声入力に対応する単語又はトークンの列である。いくつかの例では、各候補テキスト表現は、音声認識信頼度スコアに関連付けられる。STT処理モジュール730は、音声認識信頼度スコアに基づいて、候補テキスト表現をランク付けし、最良のn個(例えば、最上位のn個)の候補テキスト表現(単数又は複数)を意図推論のために自然言語処理モジュール732に提供し、nはゼロより大きい既定の整数である。例えば、1つの例において、最上位の1個(n=1)の候補テキスト表現のみが、意図推論のために自然言語処理モジュール732に渡される。別の例では、最上位の5個(n=5)の候補テキスト表現が、意図推論のために自然言語処理モジュール732に渡される。
音声テキスト化処理についての更なる詳細が、2011年9月20日に出願された、「Consolidating Speech Recognition Results」についての米国実用特許出願第13/236,942号に記載されている。同出願の開示全体は本明細書において参照により組み込まれている。
いくつかの実施例では、STT処理モジュール730は、認識可能な単語の語彙を含み、かつ/又は、音標アルファベット変換モジュール731を介してそれにアクセスする。各語彙語は、1つ以上の音声認識音標アルファベットで表される単語の発音候補と関連付けられる。詳細には、認識可能な単語の語彙は、複数の発音候補に関連付けられた単語を含む。例えば、語彙は、発音候補
Figure 2019528492
に関連付けられた単語「トマト」を含む。更に、語彙語は、ユーザからの以前の音声入力に基づくカスタム発音候補に関連付けられる。そのようなカスタム発音候補は、STT処理モジュール730に記憶され、デバイス上のユーザのプロファイルを介して、特定のユーザに関連付けられる。いくつかの実施例では、単語の綴り並びに1つ以上の言語規則及び/又は音標規則に基づいて、単語の発音候補が判定される。いくつかの実施例では、例えば、既知の正規発音に基づいて、発音候補が手動で生成される。
いくつかの実施例では、発音候補の一般性に基づいて、発音候補がランク付けされる。例えば、発音候補
Figure 2019528492
は、
Figure 2019528492
よりも高くランク付けされるが、これは、発音候補
Figure 2019528492
が(例えば、全ユーザのうち、特定の地理的領域のユーザについて、又は、任意の他の適切なユーザのサブセットについて)より一般的に使用される発音だからである。いくつかの実施例では、発音候補が、ユーザに関連付けられたカスタム発音候補であるかどうかに基づいて、その発音候補がランク付けされる。例えば、カスタム発音候補は、正規発音候補よりも高くランク付けされる。このことは、正規発音から逸脱して独特の発音を有する固有名詞を認識するために有用であり得る。いくつかの実施例では、発音候補は、出身地、国籍又は民族性等の1つ以上の音声特性と関連付けられる。例えば、発音候補
Figure 2019528492
は米国と関連付けられるのに対し、発音候補
Figure 2019528492
は英国と関連付けられる。更に、発音候補のランクは、デバイス上のユーザのプロファイルに記憶されたユーザの1つ以上の特性(例えば、出身地、国籍、民族等)に基づく。例えば、ユーザのプロファイルから、ユーザが米国に関連付けられていることを判定することができる。ユーザが米国に関連付けられていることに基づいて、(米国に関連付けられた)発音候補
Figure 2019528492
が、(英国に関連付けられた)発音候補
Figure 2019528492
よりも高くランク付けされる。いくつかの実施例では、ランク付けされた発音候補のうちの1つが、予測された発音(例えば、最も可能性が高い発音)として選択される。
音声入力が受信されると、STT処理モジュール730が、音声入力に対応する音素を(例えば、音響モデルを用いて)決定し、次に、音素に一致する単語を(例えば、言語モデルを用いて)決定することを試みるために使用される。例えば、STT処理モジュール730は、音声入力の一部分に対応する音素の列
Figure 2019528492
を最初に特定した場合、語彙インデックス744に基づいて、この音素の列が単語「トマト」に対応すると判定することができる。
いくつかの実施例では、STT処理モジュール730は、近似マッチング技法を使用して、発言内の単語を判定する。したがって、例えば、STT処理モジュール730は、特定の音素の列が、単語「トマト」の候補音素の列のうちの1つではない場合でも、音素の列
Figure 2019528492
が単語「トマト」に対応すると判定する。
デジタルアシスタントの自然言語処理モジュール732(「自然言語プロセッサ」)は、STT処理モジュール730によって生成された最良のn個の候補テキスト表現(単数又は複数)(「単語列(単数又は複数)」又は「トークン列(単数又は複数)」)を受け取り、各候補テキスト表現を、デジタルアシスタントにより認識される1つ以上の「実施可能な意図」に関連付けようと試みる。「実施可能な意図」(又は「ユーザの意図」)は、デジタルアシスタントにより実行することができるタスクを表し、タスクフローモデル754内に実装される、関連付けられたタスクフローを有することができる。関連付けられたタスクフローは、タスクを実行するためにデジタルアシスタントが取る一連のプログラムされたアクション及びステップである。デジタルアシスタントの能力の範囲は、タスクフローモデル754内に実装され、記憶されているタスクフローの数及び種類に依存し、又は、換言すれば、デジタルアシスタントが認識する「実施可能な意図」の数及び種類に依存する。しかし、デジタルアシスタントの有効性はまた、自然言語で表現されたユーザ要求から正しい「実施可能な意図(単数又は複数)」を推定するアシスタントの能力にも依存する。
いくつかの実施例では、STT処理モジュール730から取得される単語又はトークン列に加えて、自然言語処理モジュール732はまた、例えば、I/O処理モジュール728から、ユーザ要求に関連付けられるコンテキスト情報も受信する。自然言語処理モジュール732は、任意選択的に、コンテキスト情報を使用して、STT処理モジュール730から受信した候補テキスト表現内に包含されている情報を明らかにし、補完し、かつ/又は更に定義する。コンテキスト情報は、例えば、ユーザの嗜好、ユーザデバイスのハードウェア及び/又はソフトウェア状態、ユーザ要求の前、最中、又は直後に集められたセンサ情報、デジタルアシスタントとユーザとの間の以前の対話(例えば、ダイアログ)等を含む。本明細書で説明するように、コンテキスト情報は、いくつかの実施例では動的であり、かつ時間、場所、ダイアログの内容及び他の因子によって変化する。
いくつかの実施例では、自然言語処理は、例えばオントロジ760に基づく。オントロジ760は、多数のノードを包含する階層構造であり、各ノードは、「実施可能な意図群」又はその他の「属性群」のうちの1つ以上に関連する「実施可能な意図」又は「属性」のいずれかを表す。上述したように、「実施可能な意図」は、デジタルアシスタントが実行可能なタスク、すなわち、「実施可能」であるか、又はアクションを及ぼされ得るタスクを表す。「属性」は、実施可能な意図、又は別の属性の下位態様に関連付けられるパラメータを表す。オントロジ760内の実施可能な意図ノードと属性ノードとの間のリンクは、属性ノードによって表されるパラメータが、実施可能な意図ノードによって表されるタスクにどのように関連するのかを定義する。
いくつかの実施例では、オントロジ760は実施可能な意図ノード及び属性ノードで構成される。オントロジ760内において、それぞれの実施可能な意図ノードは1つ以上の属性ノードに直接又は1つ以上の中間属性ノードを介してリンクされる。同様に、それぞれの属性ノードは、1つ以上の実施可能な意図ノードに直接又は1つ以上の中間属性ノードを介してリンクされる。例えば、図7Cに示すように、オントロジ760は、「レストラン予約」ノード(すなわち、実施可能な意図ノード)を含む。属性ノードである「レストラン」、「日付/時間」(予約用)及び「参加人数」が、実施可能な意図ノード(すなわち、「レストラン予約」ノード)にそれぞれ直接に接続される。
更に、属性ノードである「料理」、「価格帯」、「電話番号」及び「ロケーション」は、属性ノード「レストラン」のサブノードであり、中間属性ノード「レストラン」を介して「レストラン予約」ノード(すなわち、実施可能な意図ノード)にそれぞれ接続される。別の例として、図7Cに示すように、オントロジ760は「リマインダ設定」ノード(すなわち、別の実施可能な意図ノード)も含む。属性ノード「日付/時間」(リマインダ設定用)及び「テーマ」(リマインダ用)は、「リマインダ設定」ノードにそれぞれリンクされる。属性ノード「日付/時間」は、レストラン予約をするタスク及びリマインダを設定するタスクの両方に関連しているため、属性ノード「日付/時間」はオントロジ760内において「レストラン予約」ノード及び「リマインダ設定」ノードの両方にリンクされる。
実施可能な意図ノードは、そのリンクされた属性ノードと共に、「ドメイン」として説明される。本説明では、各ドメインは、それぞれの実施可能な意図に関連付けられ、特定の実施可能な意図に関連付けられたノードのグループ(及びノード間の関係)を指す。例えば、図7Cに示すオントロジ760は、オントロジ760内のレストラン予約ドメイン762の例及びリマインダドメイン764の例を含む。レストラン予約ドメインは、実施可能な意図ノード「レストラン予約」、属性ノード「レストラン」、「日付/時間」、及び「参加人数」、並びに下位属性ノード「料理」、「価格帯」、「電話番号」及び「ロケーション」を含む。リマインダドメイン764には、実施可能な意図ノード「リマインダ設定」、及び属性ノード「テーマ」及び「日付/時間」が含まれている。いくつかの実施例では、オントロジ760は多くのドメインで構成される。各ドメインは、1つ以上の他のドメインと、1つ以上の属性ノードを共有する。例えば、「日付/時間」属性ノードは、レストラン予約ドメイン762及びリマインダドメイン764に加えて、多くの異なるドメイン(例えば、スケジューリングドメイン、旅行予約ドメイン、映画チケットドメイン等)に関連付けられる。
図7Cは、オントロジ760内に2つの例示的なドメインを示すが、他のドメインとして、例えば、「映画を探す」、「電話をかける」、「道順を探す」、「会議をスケジュールする」、「メッセージを送信する」、及び「質問の答えを提供する」、「リストを読み上げる」、「ナビゲーションの指示を提供する」、「タスクの手順を提供する」等が挙げられ得る。「メッセージを送信する」のドメインは、「メッセージを送信する」の実施可能な意図ノードに関連付けられ、「受信者(単数又は複数)」、「メッセージタイプ」、及び「メッセージ本文」等の属性ノードを更に含む。属性ノード「受信者」は、例えば、「受信者名」及び「メッセージアドレス」等の下位属性ノードによって更に定義される。
いくつかの実施例では、オントロジ760は、デジタルアシスタントが理解し、作用を及ぼすことができるすべてのドメイン(したがって実施可能な意図)を含む。いくつかの実施例では、オントロジ760は、ドメイン若しくはノード全体を追加若しくは除去すること、又はオントロジ760内のノード間の関係を変更すること等によって、修正される。
いくつかの実施例では、複数の関連する実施可能な意図に関連付けられるノードは、オントロジ760内の「上位ドメイン」の下にクラスタ化される。例えば、「旅行」上位ドメインは、旅行に関連する属性ノード及び実施可能な意図ノードのクラスタを含む。旅行に関連する実施可能な意図ノードは、「航空券予約」、「ホテル予約」、「カーレンタル」、「道順を知る」、「興味のある場所を探す」等を含む。同じ上位ドメイン(例えば、「旅行」上位ドメイン)の下の実施可能な意図ノードは、多くの属性ノードを共有する。例えば、「航空券予約」、「ホテル予約」、「カーレンタル」、「道順を知る」、及び「興味のある場所を探す」についての実施可能な意図ノードは、属性ノードである「出発場所」、「目的地」、「出発日/時間」、「到着日/時間」、及び「参加人数」のうちの1つ以上を共有する。
いくつかの実施例では、オントロジ760内の各ノードは、そのノードによって表される属性又は実施可能な意図に関連する単語及び/又はフレーズのセットに関連付けられる。各ノードに関連付けられる単語及び/又はフレーズのそれぞれのセットは、そのノードに関連付けられるいわゆる「語彙」である。各ノードに関連付けられる単語及び/又はフレーズのそれぞれのセットは、ノードによって表される属性又は実施可能な意図に関連して語彙索引744内に記憶される。例えば、図7Bに戻ると、「レストラン」の属性についてのノードに関連付けられる語彙は、「食べ物」、「飲み物」、「料理」、「空腹」、「食べる」、「ピザ」、「ファストフード」、「食事」等の単語を含む。別の例として、「通話を開始する(initiate a phone call)」という実施可能な意図のノードに関連付けられる語彙は、「電話する(call)」、「電話(phone)」、「ダイヤルする(dial)」、「電話をかける(ring)」、「この番号に電話する(call this number)」、「〜に電話をかける(make a call to)」等の単語及びフレーズを含む。語彙索引744は異なる言語の単語及びフレーズを任意選択的に含む。
自然言語処理モジュール732は、STT処理モジュール730から候補テキスト表現(例えば、テキスト列(単数又は複数)又はトークン列(単数又は複数))を受け取り、候補表現ごとに、候補テキスト表現内の単語にどのノードが関係しているかを決定する。いくつかの実施例では、候補テキスト表現内の単語又はフレーズが(語彙索引744を介して)オントロジ760内の1つ以上のノードに関連付けられていることがわかった場合、その単語又はフレーズが、それらのノードを「トリガ」又は「アクティブ化」する。アクティブ化されたノードの量及び/又は相対的重要度に基づき、自然言語処理モジュール732は、ユーザがデジタルアシスタントに実行させようと意図したタスクとして、実施可能な意図のうちの1つを選択する。いくつかの実施例では、最も多く「トリガされた」ノードを有するドメインが選択される。いくつかの実施例では、最も高い信頼値(例えば、その種々のトリガされたノードの相対的重要度に基づく)を有するドメインが選択される。いくつかの実施例では、ドメインは、トリガされたノードの数及び重要度の組み合わせに基づき選択される。いくつかの実施例では、ノードを選択する際には、デジタルアシスタントはユーザからの同様の要求を以前に正確に解釈したかどうか等の追加の因子も考慮される。
ユーザデータ748は、ユーザ固有語彙、ユーザの嗜好、ユーザアドレス、ユーザの既定言語及び第二言語、ユーザの連絡先リスト、並びに各ユーザに関するその他の短期的又は長期的情報等の、ユーザ固有の情報を含む。いくつかの実施例では、自然言語処理モジュール732は、ユーザ入力内に包含されている情報を補完してユーザ意図を更に明確にするために、ユーザ固有の情報を使用する。例えば、ユーザ要求「私の誕生日パーティに私の友人を招待してほしい」に対して、自然言語処理モジュール732は、誰が「友人」であり、いつ及びどこで「誕生日パーティ」が催されるのであろうかを判定するために、こうした情報をユーザの要求内で明示的に提供するようにユーザに要請する代わりに、ユーザデータ748にアクセスすることができる。
いくつかの実施例では、自然言語処理モジュール732が、1つ以上の機械学習機構(例えば、ニューラルネットワーク)を用いて実装されるということが認識されるべきである。具体的には、1つ以上の機械学習機構は、候補テキスト表現と、候補テキスト表現に関連付けられたコンテキスト情報とを受け取るように構成される。1つ以上の機械学習機構は、候補テキスト表現及び関連するコンテキスト情報に基づいて、実施可能な意図の候補のセットにわたる意図信頼度スコアを決定するように構成される。自然言語処理モジュール732は、決定された意図信頼度スコアに基づいて、実施可能な意図の候補のセットから1つ以上の実施可能な意図の候補を選択することができる。また、いくつかの実施例では、オントロジ(例えば、オントロジ760)が、1つ以上の実施可能な意図の候補を実施可能な意図の候補のセットから選択するために使用される。
トークン文字列に基づくオントロジ検索のその他の詳細が、2008年12月22日出願の「Method and Apparatus for Searching Using an Active Ontology」に対する米国実用特許出願第12/341,743号に記載されている。同出願の開示全体は本明細書において参照により組み込まれている。
いくつかの実施例では、自然言語処理モジュール732が、ユーザ要求に基づいて、実施可能な意図(又はドメイン)を特定すると、自然言語処理モジュール732は、特定された実施可能な意図を表すように、構造化されたクエリを生成する。いくつかの実施例では、構造化されたクエリは、実施可能な意図のためのドメイン内の1つ以上のノードのためのパラメータを含み、パラメータの少なくとも一部には、ユーザ要求内で指定される特定の情報及び要求事項が入力される。例えば、ユーザが「私のために7時に寿司屋で夕食の予約を取ってください」と言うとする。この場合、自然言語処理モジュール732は、ユーザ入力に基づき、実施可能な意図を「レストラン予約」であると正確に特定することができる。オントロジによれば、「レストラン予約」ドメインのための構造化されたクエリは、{料理}、{時間}、{日付}、{参加人数}、及び同様のもの等のパラメータを含む。いくつかの実施例では、音声入力、及びSTT処理モジュール730を用いて音声入力から導き出されたテキストに基づいて、自然言語処理モジュール732は、レストラン予約ドメインのための部分的な構造化されたクエリを生成する。この場合、部分的な構造化されたクエリはパラメータ{料理=「寿司」}及びパラメータ{時間=「午後7時」}を含む。しかし、本例では、ユーザの発言は、ドメインに関連付けられる構造化されたクエリを完成するために十分な情報を包含していない。したがって、{参加人数}及び{日付}等のその他の必要パラメータは、現在利用可能な情報に基づいては、構造化されたクエリ内に指定されない。いくつかの実施では、自然言語処理モジュール732は、構造化されたクエリのいくつかのパラメータに、受信したコンテキスト情報を入力する。例えば、いくつかの実施例では、ユーザが「私の近くの」寿司レストランを要求した場合、自然言語処理モジュール732は、構造化されたクエリ内の{ロケーション}パラメータにユーザデバイスからのGPS座標を入力する。
いくつかの例では、自然言語処理モジュール732は、STT処理モジュール730から受信した候補テキスト表現ごとに、複数の実施可能な意図の候補を特定する。更にいくつかの例では、特定された実施可能な意図の候補ごとに、(部分的又は完全な)構造化されたクエリがそれぞれ生成される。自然言語処理モジュール732は、実施可能な意図の候補ごとに意図信頼度スコアを決定し、その意図信頼度スコアに基づいて実施可能な意図の候補をランク付けする。いくつかの実施例では、自然言語処理モジュール732は、任意の完成したパラメータを含む生成した構造化されたクエリ(単数又は複数)を、タスクフロー処理モジュール736(「タスクフロープロセッサ」)に渡す。いくつかの実施例では、最良のm個(例えば、最上位のm個)の実施可能な意図の候補のための構造化されたクエリ(単数又は複数)がタスクフロー処理モジュール736に提供され、mはゼロより大きい既定の整数である。いくつかの実施例では、最良のm個の実施可能な意図の候補のための構造化されたクエリ(単数又は複数)が、対応する候補テキスト表現(単数又は複数)と共に、タスクフロー処理モジュール736に提供される。
音声入力の複数の候補テキスト表現から決定された複数の実施可能な意図の候補に基づくユーザの意図の推測に関するその他の詳細は、2014年6月6日に出願された米国実用特許出願第14/298,725号「System and Method for Inferring User Intent From Speech Inputs」に記載されており、同出願の開示全体は本明細書において参照により組み込まれている。
タスクフロー処理モジュール736は、自然言語処理モジュール732から、構造化されたクエリ(単数又は複数)を受信し、必要ならば、構造化されたクエリを完成させ、ユーザの最終的な要求を「完了する」ために必要とされるアクションを実行するように構成される。いくつかの実施例では、これらのタスクを完了させるために必要な様々な手順がタスクフローモデル754内で提供される。いくつかの実施例では、タスクフローモデル754は、ユーザから追加情報を取得するための手順、及び実施可能な意図に関連付けられるアクションを実行するためのタスクフローを含む。
上述したように、構造化されたクエリを完成させるために、タスクフロー処理モジュール736は、追加情報を取得し、かつ/又は潜在的に曖昧な発言の曖昧性を回避するために、ユーザとの追加のダイアログを開始することが必要になる。このような対話が必要となる場合には、タスクフロー処理モジュール736は、ユーザとのダイアログに携わるためにダイアログフロー処理モジュール734を呼び出す。いくつかの実施例では、ダイアログフロー処理モジュール734は、どのように(及び/又はいつ)ユーザに追加情報を求めるべきかを決定し、ユーザ応答を受信し、これらを処理する。I/O処理モジュール728を通じてユーザに質問が提供され、ユーザから回答が受け取られる。いくつかの実施例では、ダイアログフロー処理モジュール734は、音声及び/又は視覚出力を介してユーザにダイアログ出力を提示し、口頭の応答又は物理的な(例えば、クリック)応答を介してユーザから入力を受信する。上述の例を続けると、タスクフロー処理モジュール736が、ドメイン「レストラン予約」に関連付けられる構造化されたクエリについての「参加人数」及び「日付」情報を決定するためにダイアログフロー処理モジュール734を呼び出すと、ダイアログフロー処理モジュール734は、「何人分ですか?」及び「どの日にしますか?」等の質問を、ユーザに渡すために生成する。ユーザから回答が受信されると、次に、ダイアログフロー処理モジュール734は、構造化されたクエリに、欠けている情報を入力するか、又は構造化されたクエリから欠けている情報を完成させるために、その情報をタスクフロー処理モジュール736に渡す。
タスクフロー処理モジュール736が、実施可能な意図のための構造化されたクエリを完成すると、タスクフロー処理モジュール736は、実施可能な意図に関連付けられる最終的なタスクの実行に進む。それに応じて、タスクフロー処理モジュール736は、構造化されたクエリ内に包含されている具体的なパラメータに応じて、タスクフローモデル内のステップ及び命令を実行する。例えば、「レストラン予約」の実施可能な意図のためのタスクフローモデルは、レストランと連絡を取り、特定の時間に特定の参加人数のための予約を実際に希望するためのステップ及び命令を含む。例えば、{レストラン予約、レストラン=ABC Cafe、日付=3/12/2012、時間=午後7時、参加人数=5}、等の構造化されたクエリを用いて、タスクフロー処理モジュール736は、(1)ABC Cafeのサーバ、又はOPENTABLE(登録商標)等のレストラン予約システムにログオンするステップと、(2)ウェブサイト上のフォーム内に日付、時間、及び参加人数情報を入力するステップと、(3)フォームを送信するステップと、(4)ユーザのカレンダ内に予約のためのカレンダ項目を記入するステップと、を実行する。
いくつかの実施例では、タスクフロー処理モジュール736は、ユーザ入力で要求されたタスクを完了するために、又はユーザ入力で要求された情報の回答を提供するために、サービス処理モジュール738(「サービス処理モジュール」)の支援を採用する。例えば、サービス処理モジュール738は、電話をかけるため、カレンダ項目を設定するため、マップ検索を呼び出すため、ユーザデバイス上にインストールされているその他のユーザアプリケーションを呼び出すか又はそれと対話するため、及びサードパーティサービス(例えばレストラン予約ポータル、ソーシャルネットワーキングウェブサイト、バンキングポータル等)を呼び出すか又はそれと対話するために、タスクフロー処理モジュール736の代わりに動作する。いくつかの実施例では、各サービスによって必要とされるプロトコル及びアプリケーションプログラミングインターフェース(application programming interface、API)は、サービスモデル756の中のそれぞれのサービスモデルによって指定される。サービス処理モジュール738は、サービスに適したサービスモデルにアクセスし、サービスモデルに従ってサービスによって必要とされるプロトコル及びAPIに従ってサービスの要求を生成する。
例えば、レストランがオンライン予約サービスを可能にしている場合には、レストランは、予約を行うために必要なパラメータ、及び必要なパラメータの値をオンライン予約サービスへ伝達するためのAPIを指定するサービスモデルを提出する。タスクフロー処理モジュール736によって要求されると、サービス処理モジュール738は、サービスモデルに記憶されているウェブアドレスを用いて、オンライン予約サービスとのネットワーク接続を確立し、必要な予約のパラメータ(例えば、時間、日付、参加人数)を、オンライン予約サービスのAPIに従う形式でオンライン予約インターフェースへ送信する。
いくつかの実施例では、ユーザの意図を推定して明確にし、ユーザ意図を更に明らかにして絞り込むための情報を入手し、ユーザの意図を達成するべく応答(すなわち、ユーザへの出力又はタスクの完了)を最終的に生成するために、自然言語処理モジュール732、ダイアログフロー処理モジュール734、及びタスクフロー処理モジュール736が集合的かつ反復的に使用される。生成された応答は、ユーザの意図を少なくとも部分的に達成する、音声入力へのダイアログ応答になる。更に、いくつかの実施例では、生成された応答は、音声出力として出力される。これらの実施例では、生成された応答は、音声合成モジュール740(例えば、音声合成器)に送信され、そこで、生成された応答を処理して、音声形態のダイアログ応答を合成することができる。更に他の実施例では、生成された応答は、音声入力のユーザ要求を満たすことに関連するデータコンテンツになる。
タスクフロー処理モジュール736が自然言語処理モジュール732から複数の構造化されたクエリを受信する例において、タスクフロー処理モジュール736は、受信された構造化されたクエリのうちの第1の構造化されたクエリを最初に処理し、第1の構造化されたクエリを完成させようとするか、かつ/又は第1の構造化されたクエリによって表される1つ以上のタスク又はアクションを実行しようとする。いくつかの実施例では、第1の構造化されたクエリは、最上位の実施可能な意図に対応する。他の実施例では、第1の構造化されたクエリは、対応する音声認識信頼度スコアと対応する意図信頼度スコアとの組み合わせに基づいて、受信された構造化されたクエリから選択される。いくつかの実施例では、タスクフロー処理モジュール736で、(例えば、必要なパラメータを決定できないことにより)第1の構造化されたクエリ処理中にエラーが発生した場合、タスクフロー処理モジュール736は、下位の実施可能な意図に対応する、受信された構造化されたクエリのうちの第2の構造化されたクエリを選択して処理することができる。第2の構造化されたクエリは、例えば、対応する候補テキスト表現の音声認識信頼度スコア、対応する実施可能な意図の候補の意図信頼度スコア、第1の構造化されたクエリ内で欠落している必要なパラメータ、又はこれらの任意の組み合わせに基づいて選択される。
音声合成モジュール740は、ユーザに提示するために、音声出力を合成するように構成される。音声合成モジュール740は、デジタルアシスタントにより提供されたテキストに基づいて、音声出力を合成する。例えば、生成されたダイアログ応答は、テキスト文字列の形態である。音声合成モジュール740は、テキスト文字列を可聴の音声出力に変換する。音声合成モジュール740は、テキストから音声出力を生成するために、波形接続合成、単位選択合成、ダイフォン合成、分野限定合成、フォルマント合成、調音合成、隠れマルコフモデル(HMM)ベースの合成、及びサイン波合成を含むが、これらには限定されない任意の適切な音声合成技法を使用する。いくつかの実施例では、音声合成モジュール740は、単語に対応する音素文字列に基づいて、個々の単語を合成するように構成される。例えば、音素文字列は、生成されたダイアログ応答中の単語に関連付けられる。音素文字列は、単語に関連付けられたメタデータ中に記憶される。音声合成モデル740は、単語を音声形式で合成するために、メタデータ内の音素文字列を直接処理するよう構成される。
いくつかの実施例では、音声合成モジュール740の使用の代わりに(又は、それに加えて)、リモートデバイス(例えば、サーバシステム108)上で音声合成が実行され、合成された音声が、ユーザへの出力のために、ユーザデバイスに送信される。例えば、これは、デジタルアシスタントのための出力がサーバシステムにおいて生成される、いくつかの実装形態で起こり得る。また、サーバシステムは概して、ユーザデバイスよりも多くの処理電力又はリソースを有するので、クライアント側合成を用いた実用的な出力よりも高い品質の音声出力を取得することが可能である。
デジタルアシスタントに関する追加の詳細は、その開示全体が参照により本明細書に組み込まれる、2011年1月10日出願の「Intelligent Automated Assistant」と題された米国実用特許出願第12/987,982号、2011年9月30日出願の「Generating and Processing Task Items That Represent Tasks to Perform」と題された米国実用特許出願第13/251,088号に記載されている。
4.メディア探索のためにデジタルアシスタントの聴覚に基づくインターフェースを提供する例示的な技法
図8A〜図8B、図9A〜図9B、図10A〜図10B、及び図11は、いくつかの実施形態に係る、デジタルアシスタントを提供する例示的なユーザインターフェース(「UI」)を含む例示的な技法を示す。これらの図は、図12〜図15の各プロセス1200、1300、1400、及び1500を含む、以下で説明されるプロセスを例示するためにも使用される。
図8Aは、電子デバイス800を示す。電子デバイス800は、いくつかの実施形態では、デバイス200、デバイス400、及びデバイス600(図2A、図4、図6A〜図6B)の任意のものであってよい。示された実施例では、電子デバイス800は、1つ以上のスピーカを備えた電子デバイスであるが、電子デバイスが、電話、ラップトップコンピュータ、デスクトップコンピュータ、タブレット、ウェアラブルデバイス(例えば、スマートウォッチ)、セットトップボックス、テレビ、スピーカ、又はこれらの任意組み合わせ若しくは部分的組み合わせ等の、任意の種類のデバイスであってよいということが理解されるであろう。
動作中に、電子デバイス800は、ユーザとインテリジェント自動アシスタント(又はデジタルアシスタント)との間の自然言語音声の交換を提供する。いくつかの実施例では、交換は純粋に聴覚による。いくつかの実施例では、交換は、追加的に又は代替的に視覚(例えば、グラフィカルユーザインターフェース及び/又は1つ以上のライトインジケータによる)及び/又は触覚による。
図8Aでは、電子デバイス800は、電子デバイス800のデジタルアシスタントへの要求を示す自然言語音声入力810を(例えば、マイクロフォンを介して)受信する。自然言語音声入力810は、デジタルアシスタントに向けられ得る任意の要求を含むことができる。いくつかの実施例では、自然言語音声入力は、既定のトリガフレーズ(例えば、「ヘイシリ」)を含む。いくつかの実施例では、自然言語音声入力は、メディアアイテムの要求(例えば、「Rich Rubinが作った音楽を再生する」、「ラップの曲を再生する」、「80年代の曲を再生する」、「アップビートの曲を再生する」)を含む。図8Aを参照すると、ユーザ802は、特定のアーチストのメディアアイテムに対するトリガフレーズ及び要求を含んでいる自然言語音声入力810「ヘイシリ、アデルによるあの新しい曲を再生する」を提供する。
いくつかの実施例では、電子デバイス800は、自然言語音声入力810を処理して、1つ以上のタスクを実行する。いくつかの実施例では、このようにして自然言語音声入力810を処理することは、例えば、STT処理モジュール730を使用して、自然言語音声入力の1つ以上の候補テキスト表現(例えば、テキスト列)を提供することを含む。説明したように、各候補テキスト表現は音声認識信頼度スコアに関連付けられてよく、それに応じて候補テキスト表現がランク付けされてよい。他の実施例では、自然言語入力はテキスト入力(例えば、電子デバイス800のタッチパッドを介して入力される)であり、n=1の場合の候補テキスト表現として提供される。このようにして候補テキスト表現として提供されるテキスト入力には、最大音声認識信頼度スコア、又は任意の他の音声認識信頼度スコアが割り当てられてよい。図8Aを参照すると、デジタルアシスタントは、候補テキスト表現「ヘイシリ、アデルによるあの新しい曲を再生する」を含む1つ以上の候補テキスト表現を提供する。
いくつかの実施例では、電子デバイス800は、例えば、自然言語処理モジュール732を使用して、最良のn個(例えば、最上位の)候補テキスト表現に基づいて1つ以上の候補意図を提供する。各候補意図は意図信頼度スコアに関連付けられてよく、それに応じて候補意図がランク付けされてよい。いくつかの実施例では、候補テキスト表現ごとに複数の候補意図が特定される。更に、いくつかの実施例では、1つ以上のパラメータを含む(部分的又は完全な)構造化されたクエリが、候補意図ごとに生成される。図8Aを参照すると、電子デバイス800のデジタルアシスタントは、候補テキスト表現「ヘイシリ、アデルによるあの新しい曲を再生する」に基づく「メディアアイテムの推奨を取得する」という候補意図を含む、1つ以上の候補意図を提供する。更に、電子デバイス800のデジタルアシスタントは、{メディアアイテムの推奨を取得する、アーチスト=アデル、メディタイプ=曲、期間=新しい}という複数のパラメータを含む構造化されたクエリを決定する。
その後、例えばタスクフロー処理モジュール736を使用して、最良のm個(例えば、最上位)の候補意図に基づいて、候補タスクが決定される。いくつかの実施例では、候補タスクは、最良のm個(例えば、最上位)の候補意図ごとに、構造化されたクエリに基づいて特定される。例として、説明したように、1つ以上のタスクフロー754等の1つ以上のタスクフローに従って、構造化されたクエリが実装されてよい。
いくつかの実施例では、電子デバイス800は、特定されたパラメータに基づいて候補タスクを実行し、1つ以上の結果を得る。例えば、構造化されたクエリに基づいて、電子デバイス800のタスクフロー処理モジュール(例えば、タスクフロー処理モジュール736)は、プログラム、メソッド、サービス、API等を呼び出して、1つ以上の結果を取得する。結果としては、例えば、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせを含むが、これらに限定されない、1つ以上のメディアアイテムに関する情報が挙げられる。図8Aを参照すると、デジタルアシスタントは、構造化されたクエリ{メディアアイテムの推奨を取得する、アーチスト=アデル、メディタイプ=曲、期間=新しい}に基づいて、検索パラメータ「アデル」、「曲」、及び「新しい」を使用して、メディア検索を実行し、「Hello」(以下では、「第1のメディアアイテム」と呼ぶ)というタイトルの曲を特定する。
その後、電子デバイス800は、第1のメディアアイテムを提供する。図8Aを参照すると、電子デバイス800のデジタルアシスタントは、曲「Hello」を再生812している。図に示されているように、デジタルアシスタントは、第1のメディアアイテムを再生しながら、第1のメディアアイテムの説明(例えば、言葉による説明)(「これはアデルによるHelloです」)を含む自然言語音声出力813も提供する。いくつかの実施例では、第1のメディアアイテムの再生及び第1のメディアアイテムの説明が同時に提供されてよい。
いくつかの実施例では、電子デバイス800は、自然言語音声入力810に応答して、第1のメディアアイテムの一部を再生する。第1のメディアアイテムの一部は、メディアアイテムの代表サンプル(例えば、コーラス、最初の一節)であることができる。いくつかの実施例では、デジタルアシスタントは、第1のメディアアイテムに関連付けられた説明(例えば、「これはアデルによるHelloです」)を示す音声出力を提供しながら、その部分(例えば、コーラス)を再生する。ユーザが肯定応答(例えば、自然言語応答)を音声出力に対して提供した場合(例えば、「わかった、これを再生する」)、電子デバイス800は、第1のメディアアイテム全体を(例えば、最初から)再生する。本明細書では、層化オーディオ出力機構の詳細が更に説明される。
いくつかの実施例では、電子デバイス800は、自然言語音声入力810に基づいて特定された複数のメディアアイテムの要約及び/又はリストを提供する(例えば、「このアーチストから多数の曲を取得しました。10曲のうちの最初の3曲は、「Hello」、...」)。いくつかの実施例では、電子デバイス800は、リストを提供する前に、1つ以上の提案(例えば、「何か好きな曲を聴く場合、又は次の5曲を聴く場合は、お知らせください」)を提供する。いくつかの実施例では、電子デバイスは、既定の回数の提案を提示した後に、提案を提供することを止める。例えば、電子デバイスは、同じメディアの要求に関して、「何か好きな曲を聴く場合は、お知らせください」という提案を3回提供した後に、この提案を提供することを止めることができる。メディアの推奨を提供することに関するその他の説明は、2016年9月23日に出願された米国特許出願第62/399,232号「INTELLIGENT AUTOMATED ASSISTANT」において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。米国特許出願第62/399,232号は、特に、メディアコンテンツを提示するための複数の形式(例えば、アルバム名、曲名等)を出力する例示的な技法について説明している。
電子デバイス800は、メディアアイテムを再生しながら自然言語音声入力を受信することができる。図8Aを参照すると、電子デバイス800は、「Hello」という曲を再生しながら、自然言語音声入力814(「実は、「I’m giving you up I’m forgiving it all」という歌詞の曲を再生する」)を受信している。いくつかの実施例では、電子デバイスは、自然言語音声入力814を受信することに応答して、第1のメディアアイテムの現在の再生が行われる方法(例えば、より低い音量又は速度で再生する)を調整する。オーディオ出力を調整することに関するその他の例示的記述は、2016年9月23日に出願された米国特許出願第62/399,232号「INTELLIGENT AUTOMATED ASSISTANT」において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。米国特許出願第62/399,232号は、特に、オーディオ出力の音量を増減すること、オーディオ出力を異なる速度で提供すること、及び/又はオーディオ入力を異なる言語で提供することを含む、オーディオ出力を調整するための例示的な技法について説明している。いくつかの実施例では、オーディオ出力は、オーディオ出力に関連付けられたユーザ入力に応答して調整される。
電子デバイス800は、自然言語入力812に関して前述した内容と一致する方法で、自然言語入力814を処理する。具体的には、電子デバイス800は、自然言語入力814に基づいて、1つ以上の候補テキスト表現、1つ以上の候補意図を提供し、最上位の候補意図に関連付けられたタスクを実行する。示された例では、自然言語音声入力814(「実は、「I’m giving you up I’m forgiving it all」という歌詞の曲を再生する」)に対応する1つの候補意図が、メディアの要求を絞り込んでいる。いくつかの実施例では、候補意図は、最良のm個の候補意図のうちの1つである。
いくつかの実施例では、電子デバイス800は、1つ以上の所定のフレーズ及びそれらの1つ以上のフレーズと等価の自然言語に基づいて、メディアの要求を絞り込むというユーザの意図を導き出す。所定のフレーズの例としては、「はい、しかし〜(yes,but)」、「〜はどうですか(what about)」、「〜はどうですか(how about)」、「だけ(only)」、「他に(else)」、「他の(other)」、「更に(more)」、「より少ない(less)」、「更に何か(something more)」、「より少ない何か(something less)」、「新しい曲(the new one)」、「古い曲(the old one)」、「〜という歌詞の曲(the one that goes)」、「〜のように聞こえる曲(the one that sounds like)」、「実は(actually)」、「待って(wait)」、「再生する(play)」、「いいえ(no)」、「別の(different)」、「スキップする(skip)」、及び「次へ(next)」が挙げられるが、これらに限定されない。このようにして、電子デバイス800は、「いいえ、他に何かありますか?」、「更に何かアップビートの曲を再生する」、「他に何かを再生する」、「彼が80年代に作った曲だけ」等の入力例を処理することができる。図8Aを参照すると、電子デバイス800は、自然言語音声入力814内の所定のフレーズ(例えば、「実は」、「再生する」、「〜という歌詞の曲」)に基づいて、メディアの要求を絞り込むというユーザの意図を導き出すことができる。自然言語入力814を処理する例示的な技法は、自然言語処理モジュール732に関して前述されている。例えば、電子デバイス800は、自然言語入力814(テキスト文字列「実は、「I’m giving you up I’m forgiving it all」という歌詞の曲を再生する」)の候補テキスト表現を(例えば、STT処理モジュール730から)受信し、候補テキスト表現内の単語に、デジタルアシスタントのオントロジ(例えば、オントロジ760)内のどのノードが関係しているかを決定することができる。アクティブ化されたノードの量及び/又は相対的重要度に基づいて、電子デバイス(更に具体的には、自然言語処理モジュール)は、ユーザがデジタルアシスタントに実行させようと意図したタスクとして、実施可能な意図のうちの1つを選択することができる。
いくつかの実施例では、電子デバイス800は、コンテキスト情報に基づいて、メディアの要求を絞り込むというユーザの意図を導き出す。コンテキスト情報は、電子デバイスとの1つ以上の前回のユーザ対話(例えば、ユーザセッション)を含む。例えば、ユーザの以前の要求が、メディアの推奨(例えば、音声入力812)を取得するというユーザの意図に関連付けられている場合、及び/又はユーザの現在の入力が、メディア推奨ドメイン内の1つ以上の属性(例えば、属性ノード)に対応する場合、電子デバイス800は、(例えば、1つ以上の指定された属性を使用して)以前のメディアの要求を絞り込むというユーザの意図を導き出すことができる。メディア推奨ドメイン内の属性は、アーチスト、ジャンル、歌詞、リリース日付、又は下に記載された検索パラメータのいずれかに対応することができる。図8Aを参照すると、電子デバイス800は、ユーザの以前の音声入力912及び/又は現在の音声入力(歌詞「I’m giving you up I’m forgiving it all」)で指定された属性に基づいて、メディアの要求を絞り込むというユーザの意図を導き出すことができる。
いくつかの実施例では、電子デバイス800は、自然言語音声入力814に基づいて、1つ以上の候補タスク及び対応するパラメータを特定する。図8Aを参照すると、電子デバイス800は、「以前のメディアの要求を絞り込む」という候補タスク、及び以前のメディアの要求を絞り込むための「I’m giving you up I’m forgiving it all」というパラメータを特定する。
自然言語音声入力に基づいて特定されたパラメータは、メディアの要求を絞り込むために使用され得る。本明細書では、パラメータの例が提供される。いくつかの実施例では、パラメータは、メディアアイテムの歌詞の内容(例えば、「ヘイジュード」)、ジャンル(例えば、「ヒップホップ」)、曲又はアルバムのタイトル(例えば、「ホテルカリフォルニア」)、場面又は期間(例えば、季節、休日、その日の時間、10年)、活動(例えば、トレーニング、運転、睡眠)、場所(例えば、海辺、職場、自宅、ハワイ)、雰囲気(例えば、アップビート)、アーチスト(例えば、歌手、プロデューサー)、又はこれらの任意の組み合わせに対応する。
いくつかの実施例では、パラメータは、既定のタイムフレーム内の日付(例えば、リリース日付)に対応する。例えば、電子デバイス800は、フレーズ(及びそれらのフレーズと等価の自然言語)とタイムフレームとの間の相関関係を記憶する。例えば、電子デバイス800は、「新しい」を1か月のタイムフレームに関連付け、「最近」を3か月のタイムフレームに関連付け、「発売された直後」及び「最新」を1週間のタイムフレームに関連付ける。
いくつかの実施例では、パラメータは、1人以上の人(例えば、対象とする視聴者)に対応する。例えば、自然言語音声入力814は、「私の友人は何を聴いていますか?」、「ジェーソンは何を再生していますか?」、「更に多くのエイミーの音楽を再生する」、「私の友人が好きな何かを再生する」等の、ユーザに関連付けられた人への参照を含むことができる。電子デバイス800は、自然言語音声入力を処理して、ユーザ(例えば、「私(me)」、「私の(for me)」、「私(I)」、「私(my)」)、ユーザ以外の人(例えば、「エイミー(Amy)」)、又はこれらの任意の組み合わせ(例えば、「私たち(our)」、「私の友人及び私(my friends and me)」)を参照している単語又はフレーズを特定する。これらの単語又はフレーズに基づいて、電子デバイス800は、1つ以上のソース(例えば、連絡先リスト、ソーシャルメディアサービス及びメディアサービス等のソフトウェアサービス)から識別情報を取得する。いくつかの実施例では、電子デバイス800は、解釈の候補間の曖昧さをなくすようにユーザに促すこと(例えば、「John Smith又はJohn Doeを意味していましたか?」)によって、識別情報を取得する。他のいくつかの実施例では、電子デバイス800は、電子デバイスの近くの1人以上の人の物理的存在等のコンテキスト情報に基づいて、識別情報を取得する。以下では、1人以上の人の物理的存在を検出する技法について更に詳細に説明する。
いくつかの実施例では、パラメータは、メディアアイテムのソースに対応する。例えば、自然言語音声入力814は、メディアアイテムのコレクションへの参照を含むことができる(例えば、「私のライブラリ内には何がありますか?」、「私の週末の音楽リストから何かを再生する」)。別の実施例として、自然言語音声入力814は、メディアアイテムの所有者への参照を含むことができる(例えば、「ジェーソンのコレクションから何かを再生する」)。これに応答して、電子デバイス800は、識別情報を取得し、更に、下で更に詳細に説明されるように、適切な許可設定で1つ以上のメディアアイテムを特定する。
いくつかの実施例では、電子デバイス800は、コンテキスト情報に少なくとも部分的に基づいて、メディアの要求を絞り込むためのパラメータを特定する。前述したように、コンテキスト情報(context information)(又は、コンテキスト情報(contextual information))は、電子デバイス800の環境に関連付けられた情報(例えば、照明、周囲ノイズ、周囲温度、周囲の環境の画像又は動画等)を含むことができる。いくつかの実施例では、コンテキスト情報は、電子デバイス800の物理的状態(例えば、デバイスの向き、デバイスの位置、デバイスの温度、電力レベル、速度、加速度、運動パターン、セルラー信号強度等)を含む。デバイスの位置は、絶対的(例えば、GPS座標に基づく)又は相対的(例えば、デバイスが、ユーザの居間、ガレージ、寝室内にある)であることができる。いくつかの実施例では、コンテキスト情報は電子デバイスでの現在の時刻を含む。いくつかの実施例では、コンテキスト情報は、デジタルアシスタントサーバ(例えば、DAサーバ106)の状態に関する情報(例えば、実行中のプロセス、インストールされたプログラム、過去及び現在のネットワーク活動、バックグラウンドサービス、エラーログ、リソース使用量等)、及び電子デバイス800の情報を含む。
いくつかの実施例では、コンテキスト情報は、電子デバイス800へ物理的に近接している人の識別情報を含む。いくつかの実施例では、電子デバイス800は、1つ以上のソースから情報を取得し、その情報を、1人以上のユーザに関する既知の情報と比較して、1人以上の特定を行うことによって、1人以上のユーザの物理的存在及び/又は識別情報を検出することができる。例えば、電子デバイス800は、人の電子デバイスの接続情報(例えば、同じWi−Fiネットワーク上、Bluetooth(登録商標)の範囲内、NFCの範囲内)等の、人に関連付けられた電子デバイスに関する情報に基づいて、その人の物理的存在を検出することができる。別の実施例として、電子デバイス800は、(例えば、カメラ及びマイクロフォンを介してキャプチャされた)人の顔の特徴及び/又は声の特徴に基づいて、その人の物理的存在を検出することができる。別の実施例として、電子デバイス800は、ローカルに利用可能な情報(カレンダの(現在の時刻に設定された)招待又は電子メールメッセージに示された連絡先等)に基づいて、人の物理的存在を検出することができる。更に別の実施例として、電子デバイス800は、人が提供する認証情報(例えば、ユーザ名及びパスワード)に基づいて、人の物理的存在を検出することができる。いくつかの実施例では、電子デバイス800は、人の物理的存在を検出した後に、曖昧さをなくすための入力(例えば、「私が聞いているのはジェーソンですか、それともジョンですか?」)及び/又は確認(例えば、「ジョンは今パーティに参加しましたか?」)を促す。
いくつかの実施例では、コンテキスト情報は、電子デバイス800に物理的に近接している人に関する情報を含む。例えば、コンテキスト情報は、電子デバイスに物理的に近接していることが検出された各人々の嗜好、メディアコレクション、履歴を含むことができる。例えば、電子デバイス800が、ユーザの友人エイミーが「私も好きな何かを再生する」と発言したと判定した場合、電子デバイスは、エイミーの嗜好(好きなジャンル、明示的な言語設定)を1つ以上のソースから特定し、その嗜好をメディアの要求を絞り込むための検索パラメータとして使用する。以下では、複数の人間のマージされた嗜好プロファイルの提供に関する追加情報について説明する。
いくつかの実施例では、コンテキスト情報は第1のメディアアイテムに関連する情報を含む。例えば、第1のメディアアイテムの推奨に応答してユーザが「これよりも新しい何かを再生する」と発言した場合、電子デバイス800は、第1のメディアアイテムのリリース日付に基づいて、時間パラメータを導き出す。
メディアリクエストを絞り込むための前述のパラメータは、単なる例であると理解されるべきである。電子デバイスが元のメディアの要求を処理しているとき、及び/又は電子デバイスが元のメディアの要求に基づいて1つ以上のメディアアイテムを提供している(例えば、関連する情報を提供しているか、又は再生している)ときに、電子デバイスはいつでもメディアの要求を絞り込むためのユーザ要求を受信できるということが、更に理解されるべきである。メディアの要求を絞り込むための自然言語音声入力(例えば、自然言語音声入力814)の使用が単なる例であるということが、更に理解されるべきである。いくつかの実施例では、電子デバイス800は、電子デバイスの1つ以上のセンサ(例えば、触知入力、ジェスチャ入力、ボタン押下)を介して入力を受信することに応答して、メディアの要求を絞り込む処理及び/又は追加のメディアアイテムを提供する処理を開始することができる。メディア検索を実行することに関するその他の例示的記述は、2016年6月8日に出願された米国特許出願第62/347,480号「INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION」において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。米国特許出願第62/347,480号は、特に、音声入力が、メディアアイテムの個別化された推奨を取得するというユーザの意図に対応しているかどうかを判定する例示的な技法を説明している。そのような判定に応じて、いくつかの実施例では、メディアアイテムのユーザ固有のコーパスから、少なくとも1つのメディアアイテムが取得される。コンテキスト情報を取得することに関するその他の例示的記述は、2017年5月16日に出願された米国特許出願第62/507,056号「PROVIDING AN AUDITORY−BASED INTERFACE OF A DIGITAL ASSISTANT」において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。米国特許出願第62/507,056号は、特に、自然言語音声入力の受信前、受信中、又は受信後にコンテキスト情報を取得する例示的な技法を説明している。いくつかの実施例では、取得されたコンテキスト情報は、ユーザ固有の情報及び電子デバイスの物理的状態を含む。
電子デバイスは、自然言語音声入力814が以前のメディアの要求(例えば、最良のm個の候補意図のうちの1つ)を絞り込むというユーザの意図に対応していると判定した後に、第1のメディアアイテムとは異なる第2のメディアアイテムを特定する。第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせであることができる。図8Aを参照すると、電子デバイス800は、音声入力812内のパラメータ(「アデル」、「新しい」、「曲」)及び音声入力814内のパラメータ(「I’m giving you up I’m forgiving it all」)に基づいて、第2のメディアアイテム(例えば、「Send My Love」)を特定している。
いくつかの実施例では、電子デバイス800は、自然言語音声入力812(「ヘイシリ、アデルによるあの新しい曲を再生する」)に基づいて、メディアアイテムの第1のセット(例えば、過去3か月以内にリリースされたアデルによる曲のセット)を特定している。電子デバイスは、メディアアイテムの第1のセットから(例えば、人気ランキングに基づいて)曲「Hello」を選択し、ユーザに提供する。その後、電子デバイス800は、その後の自然言語音声入力814に基づいて、自然言語音声入力814から導き出された指定パラメータに基づいて、メディアアイテムの第1のセットのサブセット(例えば、曲の第1のセットからの「I’m giving you up I’m forgiving it all」という歌詞を含んでいる曲のみ)を特定する。いくつかの実施例では、メディアアイテムの第1のセットのサブセットを特定することが、第1のセットのメディアアイテムが、自然言語入力814内の指定されたパラメータに一致するコンテンツ(例えば、歌詞、スクリプト)又はメタデータ(ジャンル、リリース日付)に関連付けられているかどうかを判定することを含む。関連付けられている場合、電子デバイス800は、サブセットから第2のメディアアイテム(「Send My Love」という曲)を選択して、ユーザに提供する。関連付けられていない場合、電子デバイス800は、第2のメディアアイテムを選択してユーザに提供することを止める。
いくつかの実施例では、電子デバイスは、メディアアイテムのユーザ固有のコーパスから第1のメディアアイテム及び/又は第2のメディアアイテムを特定する。いくつかの実施例では、電子デバイス800は、ユーザ入力に関連付けられた音響情報(例えば、自然言語音声入力814)に基づいて、ユーザ固有のコーパスを特定する。ユーザ固有のコーパスは、ユーザに関連付けられたデータ(例えば、嗜好、設定、以前の要求、以前の選択、以前の拒否、以前のユーザの購入、ユーザ固有のプレイリスト)に基づいて生成される。いくつかの実施例では、ユーザ固有のコーパスの少なくとも一部は、ソフトウェアサービス(例えば、メディアサービス又はソーシャルメディアサービス)に基づいて生成される。例えば、ユーザ固有のコーパスは、(例えば、ソフトウェアサービス上で)ユーザによって以前に拒否されたか若しくは嫌われたメディアアイテムを低いランキングに関連付けるか、又はそれらのメディアアイテムを含まない。別の実施例として、ユーザ固有のコーパスは、ソフトウェアサービス上でユーザによって所有/購入されたメディアアイテムに対応するデータを含む。更に別の実施例として、ユーザ固有のコーパスは、ソフトウェアサービス上でユーザによって作成されたメディアアイテム(例えば、プレイリスト)に対応するデータを含む。前述したように、電子デバイスは、ユーザ固有のコーパス内のメディアアイテムが、指定された検索パラメータに一致するメタデータ又はコンテンツに関連付けられているかどうかを判定することによって、メディアアイテムを特定することができる。いくつかの実施例では、ユーザ固有のコーパス内の少なくとも1つのメディアアイテムは、活動(例えば、トレーニング、睡眠)、雰囲気(例えば、アップビート、落ち着いている、悲しい)、場面(例えば、誕生日)、期間(例えば、80年代)、場所、キュレータ(例えば、ローリングストーンズのリスト)、コレクション(例えば、夏のプレイリスト)、1つ以上の以前のユーザ入力(ユーザによる以前の拒否、ユーザによる以前の好み)、又はこれらの任意の組み合わせを示すメタデータを含む。ユーザ固有のコーパスに関するその他の例示的記述は、2016年6月8日に出願された米国特許出願第62/347,480号「INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION」において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。
いくつかの実施例では、ユーザ固有のコーパス内の少なくとも1つのメディアアイテムは、メディアの要求を提供したユーザとは異なる人からの情報に基づくメタデータを含む。例えば、海辺に対応する場所でソフトウェアアプリケーション(例えば、iTunes等のメディアサービス)のすべてのユーザによって再生される頻度に基づいて、メディアアイテムを「海辺」の場所に関連付けることができる。別の実施例として、メディアアイテムを、ユーザの友人(すなわち、ソーシャルメディアサービス上でユーザに関連付けられた友人)によって、及び/又は同様の人口統計セグメントの人によって再生された回数に基づいて、活動(例えば、パーティ)に関連付けることができる。いくつかの実施例では、メタデータは、電子デバイス800とは異なるリモートデバイス上で生成される。いくつかの実施例では、ユーザ固有のコーパス内の少なくとも1つのメディアアイテムは、更に詳細に説明されるように、ユーザがアクセスすることが許可されていない(例えば、購入していない)が、電子デバイス800に物理的に近接している別の人がアクセスすることが許可されているメディアアイテムである。
その後、電子デバイス800は、第2のメディアアイテムを提供する。いくつかの実施例では、第1のメディアアイテムに関して前述された内容と一致する方法で、第2のメディアアイテムが提供される。図8Aを参照すると、電子デバイス800のデジタルアシスタントは、曲「Send My Love」を再生816している。図に示されているように、デジタルアシスタントは、例えば第2のメディアアイテムを再生しながら、第2のメディアアイテムの説明(「これはSend My Loveです」)を含む自然言語音声出力817も提供する。いくつかの実施例(図示されていない)では、電子デバイス800は、自然言語音声入力814に応答して第2のメディアアイテムの代表サンプルを再生し、第2のメディアアイテム全体を提供する前に、ユーザに確認を要求する。いくつかの実施例では、電子デバイス800は、自然言語音声入力814に基づいて特定された複数のメディアアイテムの要約及び/又はリストを提供する(例えば、「それらの歌詞を含む2つの曲(「Send My Love」、「Send My Love Acoustic Version...」)を見つけました」)。
いくつかの実施例では、図8Bを参照すると、電子デバイス800は、第3の自然言語音声入力818(「ヘイシリ、これを私のSaturday Morningプレイリストに追加する」)を受信している。電子デバイスは、第3の自然言語音声入力818に基づいて、メディアアイテムをメディアアイテムのコレクションに関連付けるというユーザの意図を決定する。電子デバイスは、コンテキスト情報(例えば、現在再生されている/以前に再生されたメディアアイテム)に基づいて、ユーザの意図を決定することができる。示されている例では、電子デバイス800は、現在再生されている曲「Send My Love」を、「Saturday Morning」という名前のプレイリストに関連付け、その関連付けを示す音声出力820(「完了しました」)を提供する。別の実施例(図示されていない)では、電子デバイスは、自然言語音声入力「最後の10曲をNew Favsという名前の新しいプレイリストに追加する」を受信することができる。それに応じて、電子デバイスは、「New Favs」という名前のメディアアイテムのコレクションを作成し、以前に再生された10曲をこの新しいコレクションに関連付けることができる。
いくつかの実施例では、電子デバイス800は、「Send My Love」を再生しながら、第4の自然言語音声入力822(「アデルはツアー中ですか?」)を受信する。第4の自然言語音声入力822に基づいて、電子デバイスは、特定のメディアアイテムに関連する情報(例えば、アーチスト、リリース日付、関連するインタビュー、生い立ち、歌詞の意味、ツアー情報、ユーザのどの友人がこのメディアアイテムを聴いたことがあるか)を取得するというユーザの意図を決定する。いくつかの実施例では、特定のメディアアイテムは、コンテキスト情報(再生中の曲、以前に再生された曲)に基づいて特定される。示されている例では、電子デバイス800は、アデル(現在再生されている曲の歌手)に関連するツアー情報を取得するというユーザの意図を決定し、その情報を示す音声出力824(「はい、アデルは来月あなたの市にいることになっています。チケットを購入しますか?」)を提供する。示されている例では、ユーザは、否定応答826(「今は購入しません」)を提供する。別の実施例(図示されていない)では、ユーザは肯定応答を提供することができ、電子デバイス800はコンサートチケットを購入するためのプロセスを開始することができる。いくつかの実施例では、電子デバイス800は、第4の自然言語音声入力822なしで、情報を自動的に提供する。
いくつかの実施例では、電子デバイス800は、メディアアイテムを再生しながら、別のメディアアイテムを示す音声出力を提供してよい。例として、電子デバイス800は、第2のメディアアイテム(「Send My Love」)を提供しながら、再生される第3のメディアアイテムを示す音声出力828(「次の曲は、アデルによるSomeone Like Youです」)を提供する。電子デバイス800は、第2のメディアアイテムを提供した後に、第3のメディアアイテムを提供する。いくつかの実施例では、電子デバイス800は、メディアアイテムを再生しながら、場所を示す自然言語音声入力(例えば、「これをガレージ内で再生する」)を受信してよい。それに応じて、電子デバイス800は、指定された場所に基づいて別の電子デバイス(例えば、ユーザのガレージに関連付けられたスピーカ、ユーザのガレージ内に物理的に配置された電話)を特定し、特定された電子デバイスにメディアアイテムを再生させる。いくつかの実施例では、電子デバイス800は、再生に関連する情報(例えば、メディアアイテムの識別情報、再生の進行、音量等の再生設定)を、特定された電子デバイスに(例えば、直接又はリモートデバイスを介して)送信することができる。場所を示す自然言語音声入力の処理及びそれに応じたメディアの要求の処理に関するその他の説明は、例えば、2014年9月30日に出願された米国実用特許出願第14/503,105号「Intelligent Assistant for Home Automation」(弁護士整理番号106842108200(P23013US1))、2016年6月9日に出願された米国特許仮出願第62/348,015号「Intelligent Automated Assistant in a Home Environment」(弁護士整理番号770003000100(P30331USP1))、及び2016年6月11日に出願された米国特許仮出願第62/348,896号「Intelligent Device Arbitration and Control」(弁護士整理番号770003001400(P30585USP1)に記載されており、これらの出願の開示全体は、本明細書において参照により組み込まれている。米国実用特許出願第14/503,105号は、特に、仮想アシスタントを使用して電子デバイス(例えば、ドアロック、サーモスタット等)を制御する例示的な技法を説明している。米国特許仮出願第62/348,015号は、特に、ユーザ入力が、確立された場所のデバイスを使用してタスクを実行し、確立された場所のデバイスのセットを表すデータ構造を取得するという意図に対応するかどうかを判定する例示的な技法を説明している。米国特許仮出願第62/348,896号は、特に、口頭入力に基づいてブロードキャストされる値を使用して、多くのデバイスのうちのどのデバイスが口頭入力に応答するべきかを決定する例示的な技法を説明している。
図9A〜図9Bは、電子デバイス900を示している。電子デバイス900は、いくつかの実施形態では、デバイス200、デバイス400、デバイス600、及びデバイス800(図2A、図4、図6A〜図6B、及び図8A〜図8B)の任意のものであってよい。示された実施例では、電子デバイス900は、1つ以上のスピーカを備えた電子デバイスであるが、電子デバイスが、電話、ラップトップコンピュータ、デスクトップコンピュータ、タブレット、ウェアラブルデバイス(例えば、スマートウォッチ)、セットトップボックス、テレビ、スピーカ、又はこれらの任意の組み合わせ若しくは部分的組み合わせ等の、任意の種類のデバイスであってよいということが理解されるであろう。
図9Aを参照すると、電子デバイス900は、電子デバイス900のデジタルアシスタントへの要求を示す自然言語音声入力910を(例えば、マイクロフォンを介して)受信する。自然言語音声入力910は、デジタルアシスタントに向けられ得る任意の要求を含むことができる。いくつかの実施例では、自然言語音声入力は、既定のトリガフレーズ(例えば、「ヘイシリ」)を含む。図9Aに示されている例では、ユーザ902は、トリガフレーズ及びメディアアイテムの要求を含む自然言語音声入力910「ヘイシリ、今日は、私向けにどんな音楽がありますか?」を提供している。
電子デバイス900は、電子デバイス800に関して前述した内容と一致する方法で、自然言語音声入力を処理する。例えば、電子デバイス900は、自然言語音声入力910を処理して、1つ以上の候補テキスト表現(例えば、テキスト表現「ヘイシリ、今日は、私向けにどんな音楽がありますか?」)及び1つ以上の候補意図(例えば、「メディアの推奨を取得する」というユーザの意図)を提供する。
電子デバイス900は、自然言語音声入力910に基づいてタスクを特定する。いくつかの実施例では、電子デバイス900は、前述したように、1つ以上の候補意図(1つ以上の候補テキスト表現に基づいて順番に特定される)に基づいて、1つ以上の候補タスクを特定する。更に電子デバイスは、1つ以上の結果を取得するために、候補タスクを実行する。1つ以上の結果は、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、またこれらの組み合わせ等の、メディアアイテムに関連する情報を含むことができる。図9Aに示された例では、電子デバイス900は、自然言語音声入力910に基づいて、パラメータ「私の」及び「音楽」を含む「メディアアイテムを提供する」という候補タスクを特定する。更に、電子デバイス900は、特定されたタスクを実行して、プレイリスト「Transgressive New Releases」に関連する情報を取得する。
図9Aを参照すると、電子デバイス900は、特定されたタスクに関連付けられた音声応答を示す音声出力914を提供している。具体的には、電子デバイス900は、特定されたプレイリストの言葉による説明(「プレイリストTransgressive New Releasesを取得しました」)を提供する。いくつかの実施例では、ユーザに提供される言葉による説明は、特定されたメディアアイテムに対応する情報(例えば、メタデータ)、ユーザ要求から特定されたパラメータ、又はこれらの組み合わせを含む。例えば、電子デバイス900は、ユーザ要求「私のお気に入りのアーチストの何かの曲を再生する」に応答して、音声出力「これは、あなたのお気に入りの歌手の1人であるアデルによる、先週リリースされた曲です」を提供することができる。電子デバイス900は、ユーザ固有のコーパスのメタデータに基づいて、ユーザのお気に入りの歌手を決定することができる。図8を参照して説明したように、いくつかの実施例では、ユーザ固有のコーパス内の少なくとも1つのメディアアイテムは、(ユーザによって以前に拒否された、ユーザによって以前に好まれた、ユーザによって以前に検索された)1つ以上の以前のユーザ入力を示すメタデータを含む。あるいは、いくつかの他の実施例では、電子デバイス900は、ユーザの嗜好データ(例えば、ユーザデータ及びモデル231)に基づいて、ユーザのお気に入りの歌手を決定することができる。
いくつかの実施例では、電子デバイス900は、1つ以上のテキスト発語化モードに従って、音声出力914を提供する。例えば、音声出力914は、デジタルアシスタントの音声、メディアアイテムに関連付けられた音声(例えば、アーチスト、DJ)、又はこれらの組み合わせで提供され得る。様々なテキスト発語化モードの使用に関するその他の例示的記述は、2017年5月16日に出願された米国特許出願第62/507,056号「PROVIDING AN AUDITORY−BASED INTERFACE OF A DIGITAL ASSISTANT」(弁護士整理番号770003015700(P34183USP1))において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。米国特許出願第62/507,056号は、特に、自然言語音声入力において指定される情報等のコンテキスト情報に基づいて様々なテキスト発語化モードを使用する例示的な技法を説明している。
電子デバイス900は、音声応答を示す音声出力(例えば、音声出力914)を提供しながら、その音声応答に対応するメディアアイテムの再生であるオーディオ出力912を同時に提供する。いくつかの実施例では、再生されるメディアアイテムは、特定されたメディアアイテムの一部(例えば、代表サンプル)である。例えば、特定されたメディアアイテムが単一の曲である場合、再生は、曲のコーラス又は最初の一節を含むことができる。別の実施例として、特定されたメディアアイテムがプレイリストである場合、再生は、プレイリスト内の各曲の5秒間の断片を含むことができる。
いくつかの実施例では、電子デバイス900は、音声出力とは異なる(例えば、低い)音量で再生する。いくつかの実施例では、電子デバイス900は、音声出力とは異なる(例えば、低い)忠実性で再生する。いくつかの実施例では、電子デバイス900は、音声出力914を提供する前に、オーディオ出力912の提供を開始する。他の実施例では、電子デバイス900は、オーディオ出力912及び音声出力914の提供を同時に開始する。更に他の実施例では、電子デバイス900は、オーディオ出力912を提供する前に、音声出力914の提供を開始する。再生時のオーディオを調整することに関するその他の説明は、2016年9月23日に出願された米国特許出願第62/399,232号「INTELLIGENT AUTOMATED ASSISTANT」(弁護士整理番号770003001300(P30584USP1)において提供されており、この出願は、その全体が本明細書において参照により組み込まれている。
いくつかの実施例では、電子デバイスは、再生しながら(912)、自然言語音声入力916(「それを再生する」)を受信する。電子デバイス900は、自然言語音声入力916の受信に応答して、特定されたメディアアイテムの再生であるオーディオ出力918を全体として(例えば、最初から)提供する。いくつかの実施例では、再生918は、再生912とは異なる音量及び/又は忠実性で提供される。
いくつかの実施例では、電子デバイス800は、再生しながら(918)、メディアアイテムに関連する情報を示す音声出力(図示されていない)を提供する。この情報は、例えば、曲の雑学的知識(「これは先週リリースされました」)、アーチストのツアー情報(「このアーチストは、来月カリフォルニアに来ます。チケットを購入しますか?」)、又はニュース(「このアーチストは、最近婚約しました。これについて更に知りたいかどうか、教えてください。」)に対応することができる。このメディアアイテムは、電子デバイス900によって再生されているメディアアイテム、以前に再生されたメディアアイテム、又は再生されることになるメディアアイテムであることができる。
いくつかの実施例では、電子デバイス900は、オーディオの2つの層(例えば、特定されたメディアアイテムの言葉による説明及び代表サンプル)を同時に提供する代わりに、代表サンプルを再生せずに、特定されたメディアアイテムの説明を提供する。いくつかの実施例では、ユーザ902は、代表サンプルを聴くための補足要求(例えば、「それはどのように聞こえますか?」、「プレイリストにはどんな種類の曲がありますか?」)を提供することができる。それに応じて、電子デバイス900は、代表サンプルを再生し(例えば、「これを聴いてください。<30秒間の要約>」)、場合によっては、追加の入力をユーザに促す(「これを再生しますか?」)。
オーディオの複数の層を提供する前述の技法は、単なる例であると理解されるべきである。通常、電子デバイス900は、層化及び/又は調整されたオーディオ情報を、デジタルアシスタントとユーザとの間のいずれかの対話の一部として提供することができる。例えば、図9Bを参照すると、電子デバイス900は、自然言語音声入力918(「ヘイシリ、私のチームはどうだった?」)を受信している。電子デバイス900は、その入力に基づいて、タスク(例えば、「スポーツイベントのスコアを取得する」という候補タスク)及び1つ以上のパラメータ(例えば、「ジャイアンツ」)を特定し、そのタスクを実行して1つ以上の結果(例えば、スコア)を取得する。いくつかの他の実施例では、電子デバイス900は、ユーザの嗜好データ(例えば、ユーザデータ及びモデル231)に基づいて、1つ以上のパラメータを決定することができる。電子デバイス900は、特定されたタスクに関連付けられた音声応答を示す音声出力922を提供している。示された例では、音声出力922は、取得された結果の言葉による説明(「昨日、ジャイアンツは勝ちました。スコアは...でした。」)を示す。
電子デバイス900は、音声出力922を提供しながら、音声応答に対応するメディアアイテムも再生する(920)。示された例では、メディアアイテムは、勝利のスコアに対応する音響効果(例えば、群衆の歓声)である。いくつかの実施例では、音響効果は、予め記録されたオーディオ(例えば、一般的な音響効果、関連するスポーツイベントで記録されたオーディオ)又はライブストリーム(例えば、電子デバイスの現在位置での雨の音)である。いくつかの実施例では、音声出力922は、再生920とは異なる(例えば、高い)音量及び/又は(例えば、高い)忠実性で提供される。
電子デバイス900のデジタルアシスタントは、様々なテキスト発語化モード、音声、及びシーケンでユーザと対話する(例えば、情報を提供する)ことができると理解されるべきである。通常、デジタルアシスタントは、オーディオ出力の様々な層(例えば、バックグラウンドオーディオ、フォアグラウンドオーディオ)と様々なタイプ(例えば、音響効果、音声、音楽)との間で調整し、直感的でリッチ、かつ自然なユーザインターフェースを提供することができる。例えば、電子デバイスは、フォアグラウンドオーディオのタイミング、音量、忠実性、及び内容に基づいて、バックグラウンドオーディオのタイミング、音量、忠実性、及び内容を調整することができる。
図10A〜図10Bは、電子デバイス1000を示している。電子デバイス1000は、いくつかの実施形態では、デバイス200、デバイス400、デバイス600、デバイス800、及びデバイス900(図2A、図4、図6A〜図6B、図8A〜図8B、及び図9A〜9B)の任意のものであってよい。示された実施例では、電子デバイス1000は、1つ以上のスピーカを備えた電子デバイスであるが、電子デバイスが、電話、ラップトップコンピュータ、デスクトップコンピュータ、タブレット、ウェアラブルデバイス(例えば、スマートウォッチ)、セットトップボックス、テレビ、スピーカ、又はこれらの任意の組み合わせ若しくは部分的組み合わせ等の、任意の種類のデバイスであってよいということが理解されるであろう。
図10Aを参照すると、電子デバイス1000は、電子デバイス1000のデジタルアシスタントへのメディアの要求を示す自然言語音声入力1010(「ヘイシリ、私は何を聴くべきですか?」)を(例えば、マイクロフォンを介して)受信する。電子デバイス1000は、電子デバイス800及び900に関して前述した内容と一致する方法で、自然言語音声入力を処理する。例えば、電子デバイス1000は、自然言語音声入力1010を処理して、1つ以上の候補テキスト表現(例えば、テキスト表現「ヘイシリ、私は何を聴くべきですか?」)及び1つ以上の候補意図(例えば、「メディアの推奨を取得する」というユーザの意図)を提供する。
電子デバイス1000は、自然言語音声入力1010に基づいてタスクを特定する。いくつかの実施例では、電子デバイス1000は、前述したように、1つ以上の候補意図に基づいて1つ以上の候補タスクを特定し、最上位の候補タスクを実行して、1つ以上の結果を取得する。いくつかの実施例では、1つ以上の結果は、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの組み合わせに関連する情報を含む。図10Aに示された例では、電子デバイス1000は、パラメータ「私の」を含む「メディアアイテムを提供する」という候補タスクを特定し、このタスクを実行して第1のメディアアイテム(バンクスによる「The Altar」)を取得する。
電子デバイス1000は、音声入力1010の受信に応答して、第1のメディアアイテムの提案を示すオーディオ出力1012(「オルタナティヴを聴きたい気分でしたら、バンクスによる「The Altar」を取得しています」)を提供する。いくつかの実施例では、第1のメディアアイテムの提案は、メディアアイテムのメタデータ(例えば、ジャンル、アーチスト)、及びこのメディアアイテムが推奨された理由(単数又は複数)(例えば、「オルタナティヴを聴きたい気分でしたら...」)等の、メディアの推奨をコンテキスト化するための追加情報を含む。いくつかの実施例では、電子デバイス1000は、推奨されたメディアアイテムの一部を同時に再生する。
いくつかの実施例では、電子デバイス1000は、オーディオ出力1012を提供した後に、音声入力1014(「いいえ」)を受信する。電子デバイスは、音声入力1014が、メディアの要求に対応する非肯定応答(例えば、「いいえ」、「次へ」、「好きではない」、「嫌い」、「更に2つ」、及び拒否を示す任意のフレーズと等価の自然言語)を示しているかどうかを判定する。電子デバイスは、音声入力1014が非肯定応答を示しているという決定に従って、この要求に対応する連続する非肯定応答の数を更新する。一方、電子デバイスは、音声入力1014が非肯定応答を示していないという決定に従って、この数の更新を止める。示された例では、電子デバイスは、音声入力1014に基づいて、この数を0から1に更新する。
図10Aを参照すると、いくつかの実施例では、電子デバイス1000は、第2のメディアアイテムの提案を示す別のオーディオ出力1016(「プレイリストWhen Hip−Hop Goes Leftはどうですか?」)を提供している。いくつかの実施例では、電子デバイス900は、第1のメディアアイテム及び第2のメディアアイテムを単一の検索の一部として特定し、第1のメディアアイテムが、第2のメディアアイテムよりも高い信頼度スコアを有しているため、電子デバイスによって最初に提案される。いくつかの実施例では、電子デバイスは、第1のメディアアイテム及び第2のメディアアイテムをそれぞれ特定するために2つの別々の検索を実行し、ユーザが第1のメディアアイテムの提案に対する非肯定応答(例えば、オーディオ入力1014)を提供した後に、第2の検索が実行される。
電子デバイス1000は、第2のメディアアイテムの提案を提供した後に、音声入力1018(「次へ」)を受信する。電子デバイスは、音声入力1014に関して説明された内容と一致する方法で、音声入力1018がメディアの要求に対応する非肯定応答を示しているかどうかを判定する。示された例では、電子デバイスは、音声入力1018が非肯定応答を示していることを決定し、この数を1から2に更新する。
図10Aを参照すると、いくつかの実施例では、電子デバイス1000は、第3のメディアアイテムの提案を示す更に別のオーディオ出力1020(「プレイリスト「If You Like Alabama Shakes」も取得しています」)を提供している。電子デバイス900は、単一の検索又は異なる検索で(例えば、異なる検索パラメータ及び/又はコンテキスト情報を使用して)、第1のメディアアイテム、第2のメディアアイテム、及び第3のメディアアイテムを特定することができる。
電子デバイス1000は、第3のメディアアイテムの提案を提供した後に、ユーザからの入力を(例えば、マイクロフォンを介して)サンプリングする。いくつかの実施例では、電子デバイスは、既定の期間(例えば、5秒)内に応答が受信されないということを決定する。電子デバイスは、この判定に従って、この要求に対応する連続する非肯定応答の数を更新する。示された例では、電子デバイスは、既定の期間内に応答が受信されない(例えば、沈黙している)ことを決定し、この数を2から3に更新する。
電子デバイス1000は、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定する。いくつかの実施例では、電子デバイスは、各オーディオ出力1012、1016、及び1020を提供した後に、判定を行う。電子デバイスは、連続する非肯定応答の数が閾値を満たしていないという決定に従って、別のメディアアイテムの提案を示すオーディオ出力を提供する。例えば、電子デバイスは、オーディオ出力1018(「次へ」)を受信した後に、連続する非肯定応答の数(2)が所定の閾値(例えば、3)に等しくないということを決定する。それに応じて、電子デバイスは、提案されたものとは異なる別のメディアアイテムを提案するために、音声出力1020を提供する。
電子デバイスは、連続する非肯定応答の数が閾値を満たすという決定に従って、別のメディアアイテムの提案を提供することを止め、代わりに、ユーザ入力の要求を示すオーディオ出力を提供する。例えば、電子デバイスは、非肯定応答1022(例えば、所定の時間の間の沈黙)を受信した後に、連続する非肯定応答の数(3)が所定の閾値(例えば、3)に等しいということを決定する。図10Bを参照すると、それに応じて電子デバイスは、音声出力1024(「わかりました。あなたが最近楽しんだアーチストの名前を挙げてください」)を提供している。
いくつかの実施例では、音声出力1024は、メディアの要求に関する1つ以上のパラメータの提供を促すことを示す。示された例において、電子デバイス1000は、アーチストのパラメータの提供をユーザに促し(「あなたが最近楽しんだアーチストの名前を挙げてください」)、音声入力1026(「えーと、Flume」)を受信している。音声入力1026は、メディアの要求に関するパラメータ(アーチスト=Flume)を示す。電子デバイス1000は、受信されたパラメータに基づいて、以前に推奨されたメディアアイテムとは異なる別のメディアアイテムを特定する。それに応じて、電子デバイス1000は、特定されたメディアアイテムを音声出力1028(「わかりました。これは、プレイリスト「If You Like Flume」です。」)を介して提供する。いくつかの実施例では、電子デバイスは、受信されたパラメータに基づいて、適切に、ユーザの嗜好データ(例えば、ユーザデータ及びモデル231)及び/又はユーザ固有のコーパスを更新する。
いくつかの実施例では、電子デバイス1000は、音声出力1024を提供する代わりに、又は追加として、以前に提案された複数のメディアアイテムからのユーザの選択を促すことを示す音声出力(例えば、「これらのうち、どれが良さそうですか?」)を提供する。いくつかの実施例では、電子デバイスは、ユーザの選択を示す音声入力(例えば、「うん、2番目の曲」、「ヒップホップの曲」、「アデルによる曲」)を受信し、コンテキスト情報に基づいて、この音声入力を解釈する。コンテキスト情報は、電子デバイスによって以前に提案された複数のメディアアイテムを含むことができる。
図11は、電子デバイス1100を示している。電子デバイス1100は、いくつかの実施形態では、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、及びデバイス1000(図2A、図4、図6A〜図6B、図8A〜図8B、図9A〜9B、及び図10)の任意のものであってよい。示された実施例では、電子デバイス1100は、1つ以上のスピーカを備えた電子デバイスであるが、電子デバイスが、電話、ラップトップコンピュータ、デスクトップコンピュータ、タブレット、ウェアラブルデバイス(例えば、スマートウォッチ)、セットトップボックス、テレビ、スピーカ、又はこれらの任意の組み合わせ若しくは部分的組み合わせ等の、任意の種類のデバイスであってよいということが理解されるであろう。
動作中に、電子デバイス1100は、ユーザ1102によって発言された、電子デバイス1100のデジタルアシスタントへのメディアの要求を示す自然言語音声入力1110(「ヘイシリ、何かを再生する」)を(例えば、マイクロフォンを介して)受信する。示された例では、電子デバイス1100は、ユーザ1102に関連付けられている。電子デバイス1100は、電子デバイス800、900、及び1000に関して前述した内容と一致する方法で、自然言語音声入力を処理する。例えば、電子デバイス1100は、自然言語音声入力1110を処理して、1つ以上の候補テキスト表現(例えば、テキスト表現「ヘイシリ、何かを再生する」)及び1つ以上の候補意図(例えば、「メディアの推奨を取得する」というユーザの意図)を提供する。
電子デバイス1100は、電子デバイスに近接している複数のユーザの物理的存在を検出する。いくつかの実施例では、電子デバイス1100は、人の電子デバイスの接続状態(例えば、同じWi−Fiネットワーク上、Bluetooth(登録商標)の範囲内、NFCの範囲内)等の、人に関連付けられた電子デバイスに関連する情報、人の電子デバイスに関する情報等に基づいて、その人の物理的存在を検出することができる。例えば、ユーザの姉妹も電子デバイス1100に物理的に近接していて、自分の電話を持っている場合、電子デバイス1100は、この姉妹の電話に対応する情報を受信することができる。例えば、電子デバイス1100は、(例えば、Bluetooth(登録商標)接続を介して)この姉妹のデバイスから識別情報(例えば、電話番号、ユーザ名)を受信することができる。別の実施例として、電子デバイス1100は、ルーティングデバイス(例えば、電子デバイス1100と姉妹のデバイスの両方が接続されている無線ルータ)から識別情報を受信することができる。
いくつかの実施例では、電子デバイス1100は、(例えば、カメラ及びマイクロフォンを介してキャプチャされた)人の顔の特徴及び/又は声の特徴に基づいて、その人の物理的存在を検出することができる。他の実施例では、電子デバイス800は、ローカルに利用可能な情報(カレンダの招待又は電子メールメッセージに示された連絡先等)に基づいて、人の物理的存在を検出することができる。更にいくつかの他の実施例では、電子デバイス800は、人が提供する認証情報(例えば、ユーザ名及びパスワード)に基づいて、人の物理的存在を検出することができる。いくつかの実施例では、電子デバイス1100は、人の物理的存在を検出した後に、曖昧さをなくすための入力(例えば、「私が聞いているのはジェーソンですか、それともジョンですか?」)及び/又は確認入力(例えば、「ジョンは今パーティに参加しましたか?」)を促す。
複数のユーザ(例えば、家族、訪問者)の物理的存在を検出することに応答して、電子デバイス1100は、複数のユーザに対応する複数の嗜好プロファイルを取得する。いくつかの実施例では、電子デバイス1100は、リモートデバイス(例えば、サーバデバイス)から、ユーザ1102以外の人(例えば、ユーザの姉妹)に対応する嗜好プロファイルを受信する。いくつかの実施例では、電子デバイス1100は、ユーザ1102以外の人(例えば、ユーザ1102の姉妹)に対応する嗜好プロファイルを、その人の電子デバイス(例えば、姉妹の電話)から直接受信する。いくつかの実施例では、電子デバイス1100は、ユーザ1102以外の人の嗜好プロファイルをローカルに記憶する。例えば、ユーザ1102は、嗜好をローカルに記憶するように、デジタルアシスタントにすでに頼んでおいてよい(例えば、「ヘイシリ、私の姉妹がビートルズが好きだということを覚えておいて」)。
電子デバイス1100は、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供する。いくつかの実施例では、マージされた嗜好プロファイルを提供することが、複数の嗜好プロファイルそれぞれによって共有された1つ以上の嗜好を特定することを含む。示された例では、電子装置1100は、ユーザの嗜好プロファイル及び姉妹の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供する。ユーザと姉妹の両方がビートルズに対する嗜好を有しているため、マージされた嗜好プロファイルはビートルズに対する嗜好を含む。一方、バンクスに対する嗜好をユーザのみが有しており、姉妹が有していないため、いくつかの実施例では、マージされた嗜好プロファイルは、バンクスに対する嗜好を含まなくてよい。
電子デバイス1100は、マージされた嗜好プロファイルに基づいて、メディアアイテムを特定する。特定されたメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせであることができる。例えば、電子デバイス1100は、曲のメタデータ(例えば、アーチスト)が、マージされたプロファイルの1つ以上の嗜好(例えば、ビートルズ)と一致するため、曲「ヘイジュード」を特定する。それに応じて、電子デバイス1100は、オーディオ出力1112(「これは、あなた達が両方とも好むかもしれないビートルズの曲です」)を提供する。オーディオ出力1112は、特定されたメディアアイテムの説明(「ビートルズの」)を含み、マージされたプロファイルを参照する(例えば、「あなた達が両方とも好むかもしれない曲」)。電子デバイス1100は、特定されたメディアを含むオーディオ出力1113(曲「ヘイジュード」の再生)も提供する。
いくつかの実施例では、マージされた嗜好プロファイルに基づいてメディアアイテムを特定することは、複数のメディアアイテムからメディアアイテムを特定することを含む。いくつかの実施例では、複数のメディアアイテムは、第1のユーザに関連付けられた(例えば、第1のユーザがアクセスすることを許可された)メディアアイテムの第1のセット、及び第2のユーザに関連付けられた(例えば、第2のユーザがアクセスすることを許可された)メディアアイテムの第2のセットを含む。示された例において、特定されたメディアアイテムは、メディアアイテムの第1のセットの一部ではなく、メディアアイテムの第2のセットの一部である(すなわち、ユーザは曲「ヘイジュード」にアクセスできないが、ユーザの姉妹はこの曲にアクセスできる)。
いくつかの実施例では、電子デバイス1100は、第2のユーザ(例えば、姉妹)を含む複数のユーザの物理的存在を検出した後に、第2のユーザの不在を検出する。電子デバイス1100は、第2のユーザの存在を検出する技法と同様の技法を使用して、第2のユーザの不在を検出することができる。例えば、電子デバイス1100は、第2のユーザの電子デバイスに関連する情報(例えば、姉妹のデバイスが無線ネットワークにまだ接続されているかどうか)を取得することによって、不在を検出することができる。この情報は、第2のユーザのデバイスから直接、又はネットワークルータから、取得され得る。電子デバイス1100は、第2のユーザの不在を検出した後に、マージされた嗜好プロファイル及び/又は検索される複数のメディアアイテムを更新する。例えば、電子デバイス1100がユーザの姉妹の不在を検出した場合、電子デバイス1100は、姉妹のみがアクセスできるメディアアイテム(例えば、姉妹のビートルズコレクション)を、検索される複数のメディアアイテムから削除する。
いくつかの実施例では、電子デバイス1100は、ユーザ以外の人の嗜好及び/又は活動に基づいて、メディアの要求を示す自然言語音声入力1114を受信する。図11に示された例では、ユーザ1102は、オーディオ出力1114(「私の友人は何を聴いていますか?」)を提供する。それに応じて、電子デバイス1100は、(例えば、連絡先リスト、ソーシャルメディアサービス及びメディアサービス等のソフトウェアサービス、並びにその他のユーザ固有のデータを介して)1人以上の人を特定する。電子デバイスは更に、1つ以上のソース(例えば、ソーシャルメディアサービス及びメディアサービス等のソフトウェアサービス)から、1人以上の人の嗜好(例えば、好みのジャンル、好みのアーチスト)及び/又は活動(最近再生された曲)に関連する情報を取得する。例えば、電子デバイス1100は、ソフトウェアサービス上でユーザに関連付けられた1人以上の人を特定することができ、これらの人の一部又は全部がソフトウェアサービスを利用して再生したメディアアイテムを特定する。あるいは、電子デバイス1100は、データベース(例えば、前述したユーザ固有のコーパス)内の適切なメタデータ(例えば、友人タグ)を使用してメディアアイテムを検索することによって、メディアアイテムを特定する。示された例では、電子デバイス1100は、オーディオ出力1116(「これは、アデルによるHelloです」)を提供して、特定されたメディアアイテムを提供する。
いくつかの実施例では、電子デバイスは、情報の要求を示す自然言語音声入力1118(「誰がこれを聴いていますか?」)を受信する。それに応じて、電子デバイス1100は、(例えば、関連するソフトウェアサービスを使用し、ユーザ固有のコーパスを使用して)メディアアイテムに関連付けられた1人以上の人の識別情報を提供する。識別情報は、ローカルに、及び/又は1つ以上のリモートデバイスから、取得され得る。示された例では、電子デバイス1100は、オーディオ出力1120(「あなたの友人のジョン及びジェーンです」)を提供して、識別情報を提供する。
4.メディア探索のためにデジタルアシスタントの聴覚に基づくインターフェースを提供するプロセス
図12は、様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセス1200を示している。プロセス1200は、例えば、デジタルアシスタントを実装する1つ以上の電子デバイスを使用して実行される。いくつかの実施例では、プロセス1200は、クライアントサーバシステム(例えばシステム100)を使用して実行され、プロセス1200のブロックは、サーバ(例えば、DAサーバ106)とクライアントデバイスとの間で任意の方法で分割される。他の実施例では、プロセス1200のブロックは、サーバと複数のクライアントデバイス(例えば、携帯電話及びスマートウォッチ)との間で分割される。したがって、本明細書では、プロセス1200の一部がクライアントサーバシステムの特定のデバイスによって実行されるように説明されているが、プロセス1200がそのように限定されないということが理解されるであろう。他の実施例では、プロセス1200は、1つのクライアントデバイス(例えば、ユーザデバイス104)のみ又は複数のクライアントデバイスのみを使用して実行される。プロセス1200では、いくつかのブロックは任意選択的に組み合わされ、いくつかのブロックの順序は任意選択的に変更され、いくつかのブロックは任意選択的に省略される。いくつかの実施例では、プロセス1200と組み合わせて、追加のステップが実行されてよい。
ブロック1202で、電子デバイスは、メディアの要求を示す第1の自然言語音声入力を受信する。第1の自然言語音声入力は、第1の検索パラメータを含む。いくつかの実施例では、電子デバイスは、第1の自然言語音声入力に基づいてテキスト文字列を取得する。また、電子デバイスは、このテキスト文字列に基づいて、メディアアイテムの推奨を取得するというユーザの意図の表現を決定する。更に、電子デバイスは、ユーザの意図の表現に基づいて、タスク及びタスクを実行するための1つ以上のパラメータ(第1の検索パラメータを含む)を決定する。
ブロック1204で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、第1のメディアアイテムを提供する。第1のメディアアイテムは、第1の検索パラメータに基づいて特定される。いくつかの実施例では、第1のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである。
いくつかの実施例では、第1のメディアアイテムを提供することは、デジタルアシスタントによって、第1のメディアアイテムに関連付けられた音声応答を示す音声出力を提供することを含む。第1のメディアアイテムを提供することは、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、第1のメディアアイテムの一部を再生することを更に含む。いくつかの他の実施例では、第1のメディアアイテムを提供することは、デジタルアシスタントによって、第1のメディアアイテムを再生することを含む。いくつかの他の実施例では、第1のメディアアイテムを提供することは、デジタルアシスタントによって、第1のメディアアイテムを含む複数のメディアアイテムを提供することを含む。
ブロック1206で、電子デバイスは、第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信する。いくつかの実施例では、電子デバイスは、第2の自然言語音声入力を受信することに応答して、第1のメディアアイテムが提供される方法を調整する。
ブロック1208で、電子デバイスは、第2の自然言語音声入力が、メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定する。いくつかの実施例では、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応しているかどうかを判定することは、1つ以上の所定のフレーズ及び1つ以上のフレーズと等価の自然言語に基づいて、メディアの要求を絞り込むというユーザの意図の表現を導き出すことを含む。いくつかの実施例では、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応しているかどうかを判定することは、コンテキスト情報に基づいて、メディアの要求を絞り込むというユーザの意図の表現を導き出すことを含む。
いくつかの実施例では、電子デバイスは、第2の自然言語音声入力に基づいて、メディアの要求を絞り込むための1つ以上のパラメータを取得する。いくつかの実施例では、1つ以上のパラメータのパラメータは、メディアアイテムの歌詞の内容、場面又は期間、活動、場所、雰囲気、既定のタイムフレーム内のリリース日付、対象とする視聴者、メディアアイテムのコレクション、又はこれらの任意の組み合わせに対応する。いくつかの実施例では、第2の自然言語音声入力が第1のユーザに関連付けられ、1つ以上のパラメータのパラメータが、第1のユーザとは異なる第2のユーザに対応する。
いくつかの実施例では、メディアの要求を絞り込むための1つ以上のパラメータを取得することは、コンテキスト情報に基づいて1つ以上のパラメータを決定することを含む。いくつかの実施例では、コンテキスト情報は第1のメディアアイテムに関連する情報を含む。
いくつかの実施例では、電子デバイスが1人以上のユーザの物理的存在を検出し、コンテキスト情報が、1人以上のユーザに関連する情報を含む。いくつかの実施例では、コンテキスト情報は、電子デバイスの1人以上のユーザに関連付けられた設定を含む。
ブロック1210で、電子デバイス(又はデジタルアシスタント)が、第2の自然言語音声入力がメディアの要求を絞り込むというユーザの意図に対応するという決定に従って、第1のパラメータ及び第2の自然言語音声入力に基づいて、第1のメディアアイテムとは異なる第2のメディアアイテムを特定し、第2のメディアアイテムを提供する。第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせであることができる。
いくつかの実施例では、電子デバイスは、第1の自然言語音声入力に基づいて、メディアアイテムの第1のセットを取得し、このメディアアイテムの第1のセットから第1のメディアアイテムを選択する。更に、電子デバイスは、第2の自然言語音声入力に基づいて、メディアアイテムの第1のセットのサブセットであるメディアアイテムの第2のセットを取得し、このメディアアイテムの第2のセットから第2のメディアアイテムを選択する。いくつかの実施例では、メディアアイテムの第2のセットを取得することは、メディアの要求を絞り込むための1つ以上のパラメータに基づいて、メディアアイテムの第1のセットから1つ以上のメディアアイテムを選択することを含む。
いくつかの実施例では、第2のメディアアイテムを特定することは、第2のメディアアイテムに関連付けられたコンテンツが1つ以上のパラメータのうちの少なくとも1つに一致するかどうかを判定することを含む。いくつかの他の実施例では、第2のメディアアイテムを特定することは、第2のメディアアイテムに関連付けられたメタデータが1つ以上のパラメータのうちの少なくとも1つに一致するかどうかを判定することを含む。
いくつかの実施例では、電子デバイスは、メディアアイテムのユーザ固有のコーパスから第2のメディアアイテムを取得し、メディアアイテムのユーザ固有のコーパスは、ユーザに関連付けられたデータに基づいて生成される。いくつかの実施例では、電子デバイスは、第2の自然言語音声入力に関連付けられた音響情報に基づいて、メディアアイテムのユーザ固有のコーパスを特定する。いくつかの実施例では、メディアアイテムのユーザ固有のコーパス内のメディアアイテムは、活動、雰囲気、場面、場所、時間、キュレータ、プレイリスト、1つ以上の以前のユーザ入力、又はこれらの任意の組み合わせを示すメタデータを含む。いくつかの実施例では、メタデータの少なくとも一部が、第1のユーザとは異なる第2のユーザからの情報に基づく。
いくつかの実施例では、第2のメディアアイテムを提供することは、デジタルアシスタントによって、第2のメディアアイテムに関連付けられた音声応答を示す音声出力を提供することを含む。更に、第2のメディアアイテムを提供することは、音声応答を示す音声出力を提供しながら、デジタルアシスタントによって、第2のメディアアイテムの一部を再生することを含む。
いくつかの実施例では、第2のメディアアイテムを提供することは、デジタルアシスタントによって、第2のメディアアイテムを再生することを含む。いくつかの他の実施例では、第2のメディアアイテムを提供することは、デジタルアシスタントによって、第2のメディアアイテムを含む複数のメディアアイテムを提供することを含む。
いくつかの実施例では、電子デバイスは、第3の自然言語音声入力を受信し、第3の自然言語音声入力に基づいて、第2のメディアアイテムをメディアアイテムのコレクションに関連付けるというユーザの意図の表現を決定する。更に、電子デバイスは、第2のメディアアイテムをメディアアイテムのコレクションに関連付け、デジタルアシスタントによって、その関連付けを示すオーディオ出力を提供する。
いくつかの実施例では、電子デバイスは、第2のメディアアイテムを提供しながら、第4の自然言語音声入力を受信する。更に、電子デバイスは、第4の自然言語音声入力に基づいて、特定のメディアアイテムに関連する情報を取得するというユーザの意図の表現を決定し、デジタルアシスタントによって、特定のメディアアイテムに関連する情報を提供する。いくつかの実施例では、電子デバイスは、コンテキスト情報に基づいて特定のメディアアイテムを選択する。
いくつかの実施例では、電子デバイス(又は電子デバイスのデジタルアシスタント)は、第2のメディアアイテムを提供しながら、第3のメディアアイテムを示す音声出力を提供し、第2のメディアアイテムを提供した後に、第3のメディアアイテムを提供する。
いくつかの実施例では、電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである。
図12を参照して上で説明された動作は、任意選択的に、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示す構成要素により実装される。例えば、プロセス1200の動作は、デバイス104、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、及びデバイス1100を含むが、これらに限定されない、本明細書に記載された任意のデバイス又はその構成要素によって実装されてよい。その他のプロセスが、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示した構成要素に基づいてどのように実装されるかは、当業者にとって明らかであろう。
図13は、様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセス1300を示している。プロセス1300は、例えば、デジタルアシスタントを実装する1つ以上の電子デバイスを使用して実行される。いくつかの実施例では、プロセス1300は、クライアントサーバシステム(例えばシステム100)を使用して実行され、プロセス1300のブロックは、サーバ(例えば、DAサーバ106)とクライアントデバイスとの間で任意の方法で分割される。他の実施例では、プロセス1300のブロックは、サーバと複数のクライアントデバイス(例えば、携帯電話及びスマートウォッチ)との間で分割される。したがって、本明細書では、プロセス1300の一部がクライアントサーバシステムの特定のデバイスによって実行されるように説明されているが、プロセス1300がそのように限定されないということが理解されるであろう。他の実施例では、プロセス1300は、1つのクライアントデバイス(例えば、ユーザデバイス104)のみ又は複数のクライアントデバイスのみを使用して実行される。プロセス1300では、いくつかのブロックは任意選択的に組み合わされ、いくつかのブロックの順序は任意選択的に変更され、いくつかのブロックは任意選択的に省略される。いくつかの実施例では、プロセス1300と組み合わせて、追加のステップが実行されてよい。
ブロック1302で、電子デバイスは自然言語音声入力を受信する。いくつかの実施例では、自然言語音声入力は、1つ以上のメディアアイテムの要求を示す。
ブロック1304で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、自然言語音声入力に基づいてタスクを特定する。いくつかの実施例では、タスクを特定することは、自然言語音声入力に基づいてテキスト文字列を取得することと、このテキスト文字列を解釈してユーザの意図の表現を取得することと、このユーザの意図の表現に基づいてタスクを決定することとを含む。
いくつかの実施例では、自然言語音声入力に基づいてタスクを特定することは、1つ以上のメディアアイテムを提供するタスクを特定することを含む。いくつかの実施例では、電子デバイスは、音声入力に基づいてメディアアイテム(以下では、「第2のメディアアイテム」)を特定し、このメディアアイテムに対応する情報を(例えば、特定されたタスクを実行することによって)取得する。いくつかの実施例では、第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの組み合わせを含む。いくつかの他の実施例では、電子デバイスは、タスクを実行して1つ以上の結果(例えば、検索結果)を取得する。
ブロック1306で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、特定されたタスクに関連付けられた音声応答を示す音声出力を提供する。いくつかの実施例では、音声出力を提供することは、第2のメディアアイテムの言葉による説明を提供することを含む。いくつかの実施例では、音声出力は、デジタルアシスタントの音声、第2のメディアアイテムに関連付けられた音声、又はこれらの組み合わせで提供される。いくつかの実施例では、特定されたタスクに関連付けられた音声応答を示す音声出力を提供することは、1つ以上の結果(例えば、検索結果)のうちの結果の言葉による説明を示す音声出力を提供することを含む。
ブロック1308で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、音声応答を示す音声出力を提供しながら、音声応答に対応するメディアアイテム(以下では、「第1のメディアアイテム」)を再生する。いくつかの実施例では、再生されるメディアアイテムは、第2のメディアアイテムの一部に対応する。例えば、再生されるメディアアイテムは、第2のメディアアイテムの代表サンプルである。
いくつかの実施例では、電子デバイスは、第1のメディアアイテムを再生しながら、第2の自然言語音声入力を受信する。電子デバイスは、第2の自然言語音声入力を受信することに応答して、第2のメディアアイテムを再生する。いくつかの実施例では、第2のメディアアイテムの再生は、第1のメディアアイテムの再生とは異なる音量で行われる。
いくつかの実施例では、特定されたタスクに関連付けられた音声応答を示す音声出力は、第1の音声出力である。電子デバイスは、第2のメディアアイテムを再生しながら、第2の音声出力を提供する。
いくつかの実施例では、音声応答に対応するメディアアイテムを再生することは、結果に対応する音響効果を再生することを含む。いくつかの実施例では、特定されたタスクに関連付けられた音声応答を示す音声出力は、第1の音量で提供され、メディアアイテム(例えば、音響効果)の再生は、第1の音量とは異なる第2の音量で行われる。
いくつかの実施例では、電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである。
図13を参照して上で説明された動作は、任意選択的に、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示す構成要素により実装される。例えば、プロセス1300の動作は、デバイス104、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、及びデバイス1100を含むが、これらに限定されない、本明細書に記載された任意のデバイス又はその構成要素によって実装されてよい。その他のプロセスが、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示した構成要素に基づいてどのように実装されるかは、当業者にとって明らかであろう。
図14は、様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセス1400を示している。プロセス1400は、例えば、デジタルアシスタントを実装する1つ以上の電子デバイスを使用して実行される。いくつかの実施例では、プロセス1400は、クライアントサーバシステム(例えばシステム100)を使用して実行され、プロセス1400のブロックは、サーバ(例えば、DAサーバ106)とクライアントデバイスとの間で任意の方法で分割される。他の実施例では、プロセス1400のブロックは、サーバと複数のクライアントデバイス(例えば、携帯電話及びスマートウォッチ)との間で分割される。したがって、本明細書では、プロセス1400の一部がクライアントサーバシステムの特定のデバイスによって実行されるように説明されているが、プロセス1400がそのように限定されないということが理解されるであろう。他の実施例では、プロセス1400は、1つのクライアントデバイス(例えば、ユーザデバイス104)のみ又は複数のクライアントデバイスのみを使用して実行される。プロセス1400では、いくつかのブロックは任意選択的に組み合わされ、いくつかのブロックの順序は任意選択的に変更され、いくつかのブロックは任意選択的に省略される。いくつかの実施例では、プロセス1400と組み合わせて、追加のステップが実行されてよい。
ブロック1402で、電子デバイスは、メディアの要求を示す音声入力を受信する。いくつかの実施例では、電子デバイスは、メディアの要求を示す音声入力に基づいてテキスト文字列を取得する。いくつかの実施例では、電子デバイスは更に、取得されたテキスト文字列に基づいてユーザの意図の表現を決定し、このユーザの意図の表現に基づいて、1つ以上のメディアアイテムに関連する情報を取得する。
ブロック1404で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、音声入力を受信することに応答して、第1のメディアアイテムの提案を示すオーディオ出力を提供する。いくつかの実施例では、第1のメディアアイテムは、1つ以上のメディアアイテムの一部である。いくつかの実施例では、第1のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである。
ブロック1406で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定する。
いくつかの実施例では、メディアの要求を示す音声入力は、第1の音声入力である。また、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することは、第1のメディアアイテムの提案を示すオーディオ出力を提供した後に、第2の音声入力を受信することと、第2の音声入力がメディアの要求に対応する非肯定応答を示しているかどうかを判定することとを含む。更に、電子デバイスは、第2の音声入力が非肯定応答を示しているという決定に従って、この要求に対応する連続する非肯定応答の数を更新する。電子デバイスは、第2の音声入力が非肯定応答を示していないという決定に従って、この要求に対応する連続する非肯定応答の数を更新することを止める。
いくつかの実施例では、第2の音声入力がメディアの要求に対する非肯定応答を示しているかどうかを判定することは、第2の音声入力が拒否を示しているかどうかを判定することを含む。
いくつかの実施例では、メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することは、第1のメディアアイテムの提案を示すオーディオ出力を提供した後に、この要求に対応する応答が所定の期間内に受信されないということを決定することを含む。メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することは、この要求に対応する連続する非肯定応答の数を更新することを更に含む。
ブロック1408で、連続する非肯定応答の数が閾値を満たしていないという決定に従って、電子デバイス(又は電子デバイスのデジタルアシスタント)は、第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供する。いくつかの実施例では、第2のメディアアイテムは、1つ以上のメディアアイテムの一部である。いくつかの実施例では、第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである。
ブロック1410で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、連続する非肯定応答の数が閾値を満たすという決定に従って、第2のメディアアイテムの提案を示すオーディオ出力を提供することを止め、ユーザ入力の要求を示すオーディオ出力を提供する。
いくつかの実施例では、ユーザ入力の要求を示すオーディオ出力を提供することは、デジタルアシスタントによって以前に提案された複数のメディアアイテムからのユーザの選択を促すことを示す音声出力を、デジタルアシスタントによって提供することを含む。いくつかの実施例では、電子デバイスは、ユーザ入力の要求を示すオーディオ出力を提供した後に、ユーザの選択を示す音声入力を受信し、コンテキスト情報に基づいて、ユーザの選択を示す音声入力を解釈する。いくつかの実施例では、コンテキスト情報は、デジタルアシスタントによって以前に提案された複数のメディアアイテムを含む。
いくつかの実施例では、ユーザ入力の要求を示すオーディオ出力を提供することは、メディアの要求に関する1つ以上のパラメータの提供を促すことを示す音声出力を、デジタルアシスタントによって提供することを含む。いくつかの実施例では、電子デバイスは、ユーザ入力の要求を示すオーディオ出力を提供した後に、メディアの要求に関する1つ以上のパラメータを示す音声入力を受信する。いくつかの実施例では、電子デバイスは、1つ以上のパラメータに基づいて第3のメディアアイテムを取得する。第3のメディアアイテムは、第1のメディアアイテムと第2のメディアアイテムとは異なる。
いくつかの実施例では、電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである。
図14を参照して上で説明された動作は、任意選択的に、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示す構成要素により実装される。例えば、プロセス1400の動作は、デバイス104、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、及びデバイス1100を含むが、これらに限定されない、本明細書に記載された任意のデバイス又はその構成要素によって実装されてよい。その他のプロセスが、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示した構成要素に基づいてどのように実装されるかは、当業者にとって明らかであろう。
図15は、様々な実施例に係る、デジタルアシスタントの聴覚に基づくインターフェースを提供するプロセス1500を示している。プロセス1500は、例えば、デジタルアシスタントを実装する1つ以上の電子デバイスを使用して実行される。いくつかの実施例では、プロセス1500は、クライアントサーバシステム(例えばシステム100)を使用して実行され、プロセス1500のブロックは、サーバ(例えば、DAサーバ106)とクライアントデバイスとの間で任意の方法で分割される。他の実施例では、プロセス1500のブロックは、サーバと複数のクライアントデバイス(例えば、携帯電話及びスマートウォッチ)との間で分割される。したがって、本明細書では、プロセス1500の一部がクライアントサーバシステムの特定のデバイスによって実行されるように説明されているが、プロセス1500がそのように限定されないということが理解されるであろう。他の実施例では、プロセス1500は、1つのクライアントデバイス(例えば、ユーザデバイス104)のみ又は複数のクライアントデバイスのみを使用して実行される。プロセス1500では、いくつかのブロックは任意選択的に組み合わされ、いくつかのブロックの順序は任意選択的に変更され、いくつかのブロックは任意選択的に省略される。いくつかの実施例では、プロセス1500と組み合わせて、追加のステップが実行されてよい。
ブロック1502で、電子デバイスは、メディアの要求を示す音声入力を受信する。ブロック1504で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、電子デバイスに対する複数のユーザの物理的存在を検出する。いくつかの実施例では、電子デバイスは、複数のユーザのうちの第1のユーザに関連付けられた第1の電子デバイスである。更に、電子デバイスに対する複数のユーザの物理的存在を検出することは、複数のユーザのうちの第2のユーザに関連付けられた第2の電子デバイスに対応する情報を受信することを含む。
いくつかの実施例では、第2の電子デバイスに対応する情報を受信することは、第1の電子デバイスで、第2の電子デバイスから識別情報を受信することを含む。いくつかの実施例では、第2の電子デバイスに対応する情報を受信することは、第1の電子デバイス及び第2の電子デバイスに接続されたルーティングデバイスから識別情報を受信することを含む。
ブロック1506で、電子デバイスは、複数のユーザの物理的存在を検出することに応答して、複数のユーザに対応する複数の嗜好プロファイルを取得する。いくつかの実施例では、電子デバイスは、第2のユーザに対応する嗜好プロファイルをリモートデバイスから受信する。他の実施例では、第2のユーザに対応する嗜好プロファイルは電子デバイス上に記憶される。
ブロック1508で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供する。いくつかの実施例では、マージされた嗜好プロファイルを提供することが、複数の嗜好プロファイルそれぞれによって共有された1つ以上の嗜好を特定することを含む。
ブロック1510で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、マージされた嗜好プロファイルに基づいて、メディアアイテムを特定する。いくつかの実施例では、特定されたメディアアイテムは、1つ以上の嗜好に一致するメタデータに関連付けられる。特定されたメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせであることができる。
いくつかの実施例では、マージされた嗜好プロファイルに基づいてメディアアイテムを特定することは、複数のメディアアイテムからメディアアイテムを特定することを含む。複数のメディアアイテムは、第1のユーザに関連付けられたメディアアイテムの第1のセット及び第2のユーザに関連付けられたメディアアイテムの第2のセットを含む。いくつかの実施例では、特定されたメディアアイテムは、メディアアイテムの第1のセットの一部ではないが、メディアアイテムの第2のセットの一部である。
ブロック1512で、電子デバイス(又は電子デバイスのデジタルアシスタント)は、特定されたメディアアイテムを含むオーディオ出力を提供する。いくつかの実施例では、オーディオ出力は、特定されたメディアアイテムの言葉による説明を含む。いくつかの実施例では、オーディオ出力は、マージされたプロファイルを示す音声出力を含む。
いくつかの実施例では、電子デバイス(又は電子デバイスのデジタルアシスタント)は、複数のユーザの物理的存在を検出した後に、第2のユーザの不在を検出する。電子デバイスは、第2のユーザの不在を検出した後に、複数のメディアアイテムを更新し、マージされた嗜好プロファイルを更新する。いくつかの実施例では、複数のメディアアイテムを更新することは、メディアアイテムを複数のメディアアイテムから削除することを含む。
いくつかの実施例では、電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである。
図15を参照して上で説明された動作は、任意選択的に、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示す構成要素により実装される。例えば、プロセス1500の動作は、デバイス104、デバイス200、デバイス400、デバイス600、デバイス800、デバイス900、デバイス1000、及びデバイス1100を含むが、これらに限定されない、本明細書に記載された任意のデバイス又はその構成要素によって実装されてよい。その他のプロセスが、図1〜図4、図6A〜図6B、及び図7A〜図7Cに示した構成要素に基づいてどのように実装されるかは、当業者にとって明らかであろう。
いくつかの実施態様によると、コンピュータ可読記憶媒体(例えば、非一時的コンピュータ可読記憶媒体)が提供されており、このコンピュータ可読記憶媒体は、電子デバイスの1つ以上のプロセッサによって実行される1つ以上のプログラムを記憶し、この1つ以上のプログラムは、本明細書に記載の方法又はプロセスのいずれかを実行する命令を含む。
いくつかの実施態様によると、本明細書に記載の方法又はプロセスのいずれかを実行する手段を含む電子デバイス(例えば、ポータブル電子デバイス)が提供されている。
いくつかの実施態様によると、本明細書に記載の方法又はプロセスのいずれかを実行するよう構成された処理ユニットを含む電子デバイス(例えば、ポータブル電子デバイス)が提供されている。
いくつかの実施態様によると、1つ以上のプロセッサ及び、1つ以上のプロセッサによって実行される1つ以上のプログラムを記憶するメモリを含み、この1つ以上のプログラムは、本明細書に記載の方法又はプロセスのいずれかを実行する命令を含む電子デバイス(例えば、ポータブル電子デバイス)が提供されている。
上述した説明は、説明の目的上、特定の実施形態を参照して説明されている。しかしながら、上記の例示的な議論は、網羅的であること、又は開示される厳密な形態に本発明を限定することを意図するものではない。上記の教示を鑑みて、多くの修正及び変形が可能である。これらの実施形態は、本技法の原理、及びその実際の適用を最も良好に説明するために、選択及び説明されたものである。それにより、他の当業者は、想到される具体的な用途に適するような様々な修正を使用して、本技法及び様々な実施形態を最も良好に利用することが可能となる。
添付図面を参照して、本開示及び実施例を十分に説明してきたが、様々な変更及び修正が、当業者には明らかとなるであろうことに留意されたい。そのような変更及び修正は、特許請求の範囲によって定義されるような、本開示及び実施例の範囲内に含まれるものとして理解されたい。
上述のように、本技術の一態様は、ユーザが求める内容又はユーザが関心を持つ可能性のある任意の他の内容の、ユーザへの提供を向上するために、種々のソースから入手可能なデータを収集及び使用することである。本開示は、場合によっては、この収集されたデータは、特定の人を一意的に特定するか、又はその人に連絡するか、若しくはその人のロケーションを特定するために用いることができる個人情報データを含んでよいことを企図している。そのような個人情報データとしては、人口統計データ、位置に基づくデータ、電話番号、電子メールアドレス、自宅の住所、又は任意の他の識別情報を挙げることができる。
本開示は、この技術のそのような個人情報データを使用してユーザを利することができることを理解する。例えば、個人情報データは、ユーザがより興味がある的を絞ったコンテンツを配信するために使用することができる。したがって、そのような個人情報データの使用は、配信されるコンテンツの計算された制御を可能にする。更に、ユーザを利する個人情報データに関するその他の使用もまた、本開示により意図されている。
本開示は、そのような個人情報データの収集、分析、開示、伝送、記憶、又はその他の使用に応答するエンティティは、確固たるプライバシーのポリシー及び/又はプライバシー慣行に従うであろうことを更に意図している。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための業界又は政府の要件を満たすか又は上回るものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し常に使用すべきである。例えば、ユーザからの個人情報は、そのエンティティの合法的かつ正当な使用のために収集されるべきであり、それらの合法的使用を除いて、共有又は販売されるべきではない。更には、そのような収集は、ユーザに告知して同意を得た後にのみ実施するべきである。更には、そのようなエンティティは、そのような個人情報データへのアクセスを保護して安全化し、その個人情報データへのアクセスを有する他者が、それらのプライバシーのポリシー及び手順を遵守することを保証するための、あらゆる必要な措置を講じるであろう。更には、そのようなエンティティは、広く受け入れられているプライバシーのポリシー及び慣行に対する自身の遵守を証明するために、第三者による評価を自らが受けることができる。
前述のことがらにもかかわらず、本開示はまた、ユーザが、個人情報データの使用又は個人情報データへのアクセスを選択的に阻止する実施形態も企図している。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するために、ハードウェア要素及び/又はソフトウェア要素を提供することができると想到する。例えば、広告配信サービスの場合において、この技術は、ユーザが、サービスの登録中、個人情報データの収集への参加の「オプトイン」又は「オプトアウト」を選択することを可能にするように構成することができる。別の実施例では、ユーザは、ターゲットコンテンツ配信サービスに位置情報を提供しないように選択することができる。更に別の例では、ユーザは正確な位置情報を提供しないが、位置領域情報の転送を許可することを選択することができる。
したがって、本開示は、1つ以上の様々な開示された実施形態を実施するための個人情報データの使用を広範に網羅しているが、本開示は、それらの様々な実施形態がまた、そのような個人情報データにアクセスすることを必要とせずに実施されることも可能であることも企図している。すなわち、本技術の様々な実施形態は、そのような個人情報データのすべて又は一部分の欠如により、実施不可能となるものではない。例えば、ユーザに関連付けられたデバイスによって要求されるコンテンツ等の非個人情報データ若しくは必要最小限の個人情報、コンテンツ配信サービスが入手可能な他の非個人情報、又は公的に入手可能な情報に基づき嗜好を推測することによって、コンテンツを選択し、ユーザへ配信することができる。

Claims (100)

  1. デジタルアシスタントを動作させる方法であって、
    1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、
    メディアの要求を示す第1の自然言語音声入力を受信することであって、前記第1の自然言語音声入力は、第1の検索パラメータを含む、ことと、
    前記デジタルアシスタントによって、第1のメディアアイテムを提供することであって、前記第1の検索パラメータに基づいて前記第1のメディアアイテムが特定される、ことと、
    前記第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するという決定に従って、
    前記第1のパラメータ及び前記第2の自然言語音声入力に基づいて、前記第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記第2のメディアアイテムを提供することとを含む、方法。
  2. 前記第1の自然言語音声入力に基づいて、テキスト文字列を取得することと、
    前記テキスト文字列に基づいて、メディアアイテムの推奨を取得するというユーザの意図の表現を決定することと、
    前記ユーザの意図の表現に基づいて、タスク及び前記タスクを実行するための1つ以上のパラメータを決定することとを更に含み、
    前記1つ以上のパラメータは前記第1の検索パラメータを含む、請求項1に記載の方法。
  3. 前記第1のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、前記第1のメディアアイテムに関連付けられた音声応答を示す音声出力を提供することと、
    前記デジタルアシスタントによって、前記音声応答を示す前記音声出力を提供しながら、前記第1のメディアアイテムの一部を再生することとを含む、請求項1又は2に記載の方法。
  4. 前記第1のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、前記第1のメディアアイテムを再生することを含む、請求項1又は2に記載の方法。
  5. 前記第1のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、複数のメディアアイテムを提供することを含み、前記複数のメディアアイテムは前記第1のメディアアイテムを含む、請求項1又は2に記載の方法。
  6. 前記第2の自然言語音声入力を受信することに応答して、前記第1のメディアアイテムが提供される前記方法を調整することを更に含む、請求項1から5のいずれか一項に記載の方法。
  7. 前記第2の自然言語音声入力が前記メディアの要求を絞り込むというユーザの意図に対応しているかどうかを判定することは、1つ以上の所定のフレーズ及び前記1つ以上のフレーズと等価の自然言語に基づいて、前記メディアの要求を絞り込むというユーザの意図の表現を導き出すことを含む、請求項1から6のいずれか一項に記載の方法。
  8. 前記第2の自然言語音声入力に基づいて、前記メディアの要求を絞り込むための1つ以上のパラメータを取得することを更に含む、請求項1から7のいずれか一項に記載の方法。
  9. 前記第2の自然言語音声入力が前記メディアの要求を絞り込むというユーザの意図に対応しているかどうかを判定することは、コンテキスト情報に基づいて、前記メディアの要求を絞り込むというユーザの意図の表現を導き出すことを含む、請求項8に記載の方法。
  10. 前記1つ以上のパラメータのうちのパラメータがメディアアイテムの歌詞内容に対応する、請求項8又は9に記載の方法。
  11. 前記1つ以上のパラメータのうちのパラメータが場面又は期間に対応する、請求項8から10のいずれか一項に記載の方法。
  12. 前記1つ以上のパラメータのうちのパラメータが活動に対応する、請求項8から11のいずれか一項に記載の方法。
  13. 前記1つ以上のパラメータのうちのパラメータが場所に対応する、請求項8から12のいずれか一項に記載の方法。
  14. 前記1つ以上のパラメータのうちのパラメータが雰囲気に対応する、請求項8から13のいずれか一項に記載の方法。
  15. 前記1つ以上のパラメータのうちのパラメータが既定のタイムフレーム内のリリース日付に対応する、請求項8から14のいずれか一項に記載の方法。
  16. 前記1つ以上のパラメータのうちのパラメータが対象とする視聴者に対応する、請求項8から15のいずれか一項に記載の方法。
  17. 前記1つ以上のパラメータのうちのパラメータがメディアアイテムのコレクションに対応する、請求項8から16のいずれか一項に記載の方法。
  18. 前記第2の自然言語音声入力は、第1のユーザに関連付けられており、
    前記1つ以上のパラメータのうちのパラメータは前記第1のユーザとは異なる第2のユーザに対応する、請求項8から17のいずれか一項に記載の方法。
  19. 前記メディアの要求を絞り込むための前記1つ以上のパラメータを取得することは、コンテキスト情報に基づいて前記1つ以上のパラメータを決定することを含む、請求項8から18のいずれか一項に記載の方法。
  20. 前記コンテキスト情報は、前記第1のメディアアイテムに関連する情報を含む、請求項19に記載の方法。
  21. 1人以上のユーザの物理的存在を検出することを更に含み、
    前記コンテキスト情報は、前記1人以上のユーザに関連する情報を含む、請求項19に記載の方法。
  22. 前記コンテキスト情報は、前記電子デバイスの1人以上のユーザに関連付けられた設定を含む、請求項19に記載の方法。
  23. 前記第1の自然言語音声入力に基づいて、メディアアイテムの第1のセットを取得することと、
    前記第1のメディアアイテムを前記メディアアイテムの第1のセットから選択することと、
    前記第2の自然言語音声入力に基づいて、メディアアイテムの第2のセットを取得することであって、前記メディアアイテムの第2のセットは、前記メディアアイテムの第1のセットのサブセットである、ことと、
    前記第2のメディアアイテムを前記メディアアイテムの第2のセットから選択することとを更に含む、請求項8から22のいずれか一項に記載の方法。
  24. 前記メディアアイテムの第2のセットを取得することは、
    前記メディアの要求を絞り込むための前記1つ以上のパラメータに基づいて、前記メディアアイテムの第1のセットから1つ以上のメディアアイテムを選択することを含む、請求項23に記載の方法。
  25. 前記第2のメディアアイテムを特定することは、
    前記第2のメディアアイテムに関連付けられたコンテンツが前記1つ以上のパラメータのうちの少なくとも1つに一致するかどうかを判定することを含む、請求項8から24のいずれか一項に記載の方法。
  26. 前記第2のメディアアイテムを特定することは、
    前記第2のメディアアイテムに関連付けられたメタデータが前記1つ以上のパラメータのうちの少なくとも1つに一致するかどうかを判定することを含む、請求項8から25のいずれか一項に記載の方法。
  27. メディアアイテムのユーザ固有のコーパスから前記第2のメディアアイテムを取得することを更に含み、メディアアイテムの前記ユーザ固有のコーパスは、ユーザに関連付けられたデータに基づいて生成される、請求項1から26のいずれか一項に記載の方法。
  28. 前記第2の自然言語音声入力に関連付けられた音響情報に基づいて、メディアアイテムの前記ユーザ固有のコーパスを特定することを更に含む、請求項27に記載の方法。
  29. メディアアイテムの前記ユーザ固有のコーパス内のメディアアイテムは、活動、雰囲気、場面、場所、時間、キュレータ、プレイリスト、1つ以上の以前のユーザ入力、又はこれらの任意の組み合わせを示すメタデータを含む、請求項27又は28に記載の方法。
  30. 前記メタデータの少なくとも一部は、前記第1のユーザとは異なる第2のユーザからの情報に基づく、請求項29に記載の方法。
  31. 第3の自然言語音声入力を受信することと、
    前記第3の自然言語音声入力に基づいて、前記第2のメディアアイテムをメディアアイテムのコレクションに関連付けるというユーザの意図の表現を決定することと、
    前記第2のメディアアイテムを前記メディアアイテムのコレクションに関連付けることと、
    前記デジタルアシスタントによって、前記関連付けを示すオーディオ出力を提供することとを更に含む、請求項1から30のいずれか一項に記載の方法。
  32. 前記第2のメディアアイテムを提供しながら、第4の自然言語音声入力を受信することと、
    前記第4の自然言語音声入力に基づいて、特定のメディアアイテムに関連する情報を取得するというユーザの意図の表現を決定することと、
    前記デジタルアシスタントによって、前記特定のメディアアイテムに関連する前記情報を提供することとを更に含む、請求項1から31のいずれか一項に記載の方法。
  33. コンテキスト情報に基づいて前記特定のメディアアイテムを選択することを更に含む、請求項32に記載の方法。
  34. 前記デジタルアシスタントによって、前記第2のメディアアイテムを提供しながら、第3のメディアアイテムを示す音声出力を提供することと、
    前記第2のメディアアイテムを提供した後に、前記第3のメディアアイテムを提供することとを更に含む、請求項1から33のいずれか一項に記載の方法。
  35. 前記第2のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、前記第2のメディアアイテムに関連付けられた音声応答を示す音声出力を提供することと、
    前記デジタルアシスタントによって、前記音声応答を示す前記音声出力を提供しながら、前記第2のメディアアイテムの一部を再生することとを含む、請求項1から34のいずれか一項に記載の方法。
  36. 前記第2のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、前記第2のメディアアイテムを再生することを含む、請求項1から34のいずれか一項に記載の方法。
  37. 前記第2のメディアアイテムを提供することは、
    前記デジタルアシスタントによって、複数のメディアアイテムを提供することを含み、前記複数のメディアアイテムは前記第2のメディアアイテムを含む、請求項1から34のいずれか一項に記載の方法。
  38. 前記第1のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである、請求項1から37のいずれか一項に記載の方法。
  39. 前記第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである、請求項1から37のいずれか一項に記載の方法。
  40. 前記電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである、請求項1から39のいずれか一項に記載の方法。
  41. デジタルアシスタントを動作させる方法であって、
    1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、
    自然言語音声入力を受信することと、
    前記デジタルアシスタントによって、前記自然言語音声入力に基づいてタスクを特定することと、
    前記デジタルアシスタントによって、前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、
    音声応答を示す前記音声出力を提供しながら、
    前記デジタルアシスタントによって、前記音声応答に対応するメディアアイテムを再生することとを含む、方法。
  42. 前記音声入力に基づいてタスクを特定することは、
    前記自然言語音声入力に基づいてテキスト文字列を取得することと、
    前記テキスト文字列を解釈して、ユーザの意図の表現を取得することと、
    前記ユーザの意図の表現に基づいて前記タスクを決定することとを含む、請求項41に記載の方法。
  43. 前記自然言語音声入力は、1つ以上のメディアアイテムの要求を示し、
    前記自然言語音声入力に基づいて前記タスクを特定することは、1つ以上のメディアアイテムを提供するタスクを特定することを含む、請求項41又は42に記載の方法。
  44. 前記メディアアイテムは、第1のメディアアイテムであり、前記方法は、
    前記音声入力に基づいて、第2のメディアアイテムを特定することと、
    前記第2のメディアアイテムに対応する情報を取得することとを更に含む、請求項43に記載の方法。
  45. 前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供することは、
    前記第2のメディアアイテムの言葉による説明を提供することを含む、請求項44に記載の方法。
  46. 音声応答を示す前記音声出力は、
    前記デジタルアシスタントの音声、
    前記第2のメディアアイテムに関連付けられた音声、
    又はこれらの組み合わせで提供される、請求項44又は45に記載の方法。
  47. 前記第1のメディアアイテムは、前記第2のメディアアイテムの一部に対応する、請求項44から46のいずれか一項に記載の方法。
  48. 前記第1のメディアアイテムを再生しながら、
    第2の自然言語音声入力を受信することと、
    前記第2の自然言語音声入力を受信することに応答して、前記第2のメディアアイテムを再生することとを更に含む、請求項44から47のいずれか一項に記載の方法。
  49. 前記第2のメディアアイテムの前記再生は、前記第1のメディアアイテムの前記再生とは異なる音量で行われる、請求項48に記載の方法。
  50. 前記特定されたタスクに関連付けられた音声応答を示す前記音声出力は第1の音声出力であり、前記方法は、
    前記第2のメディアアイテムを再生しながら、
    第2の音声出力を提供することを更に含む、請求項44から49のいずれか一項に記載の方法。
  51. 前記第2のメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの組み合わせを含む、請求項44から50のいずれか一項に記載の方法。
  52. 前記タスクを実行して1つ以上の結果を取得することを更に含む、請求項41に記載の方法。
  53. 前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供することは、前記1つ以上の結果のうちの結果の言葉による説明を示す音声出力を提供することを含み、
    前記音声応答に対応するメディアアイテムを再生することは、前記結果に対応する音響効果を再生することを含む、請求項52に記載の方法。
  54. 前記音声出力が第1の音量で提供され、メディアアイテムの前記再生が、前記第1の音量とは異なる第2の音量で行われる、請求項41から53のいずれか一項に記載の方法。
  55. 前記電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである、請求項41から54のいずれか一項に記載の方法。
  56. デジタルアシスタントを動作させる方法であって、
    1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、
    メディアの要求を示す音声入力を受信することと、
    前記音声入力を受信することに応答して、前記デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記デジタルアシスタントによって、前記メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することと、
    前記連続する非肯定応答の数が前記閾値を満たしていないという決定に従って、
    前記デジタルアシスタントによって、前記第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記連続する非肯定応答の数が前記閾値を満たしているという決定に従って、
    第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、
    前記デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを含む、方法。
  57. 前記メディアの要求を示す音声入力に基づいてテキスト文字列を取得することと、
    前記取得されたテキスト文字列に基づいて、ユーザの意図の表現を決定することと、
    前記ユーザの意図の表現に基づいて、1つ以上のメディアアイテムに関連する情報を取得することとを更に含み、
    前記1つ以上のメディアアイテムは、前記第1のメディアアイテム及び前記第2のメディアアイテムを含む、請求項56に記載の方法。
  58. 前記メディアの要求を示す前記音声入力は、第1の音声入力であり、
    前記メディアの要求に対応する前記連続する非肯定応答の数が前記閾値を満たしているかどうかを判定することは、
    前記第1のメディアアイテムの前記提案を示す前記オーディオ出力を提供した後に、第2の音声入力を受信することと、
    前記第2の音声入力が前記メディアの要求に対応する非肯定応答を示しているかどうかを判定することと、
    前記第2の音声入力が非肯定応答を示しているという決定に従って、前記要求に対応する前記連続する非肯定応答の数を更新することと、
    前記第2の音声入力が非肯定応答を示していないという決定に従って、前記要求に対応する前記連続する非肯定応答の数を更新することを止めることとを含む、請求項56又は57に記載の方法。
  59. 前記第2の音声入力が前記メディアの要求に対する非肯定応答を示しているかどうかを判定することは、前記第2の音声入力が拒否を示しているかどうかを判定することを含む、請求項58に記載の方法。
  60. 前記メディアの要求に対応する前記連続する非肯定応答の数が前記閾値を満たしているかどうかを判定することは、
    前記第1のメディアアイテムの前記提案を示す前記オーディオ出力を提供した後に、前記要求に対応する応答が所定の期間内に受信されないことを決定することと、
    前記要求に対応する前記連続する非肯定応答の数を更新することとを含む、請求項56又は57に記載の方法。
  61. ユーザ入力の要求を示すオーディオ出力を提供することは、
    前記デジタルアシスタントによって以前に提案された複数のメディアアイテムからのユーザの選択を促すことを示す音声出力を、前記デジタルアシスタントによって提供することを含む、請求項56から60のいずれか一項に記載の方法。
  62. ユーザ入力の要求を示す前記オーディオ出力を提供した後に、ユーザの選択を示す音声入力を受信することと、
    コンテキスト情報に基づいて、前記ユーザの選択を示す前記音声入力を解釈することとを更に含む、請求項61に記載の方法。
  63. 前記コンテキスト情報が、前記デジタルアシスタントによって以前に提案された前記複数のメディアアイテムを含む、請求項62に記載の方法。
  64. ユーザ入力の要求を示すオーディオ出力を提供することは、
    前記デジタルアシスタントによって、前記メディアの要求に関する1つ以上のパラメータの提供を促すことを示す音声出力を提供することを含む、請求項56から60のいずれか一項に記載の方法。
  65. 前記ユーザ入力の要求を示す前記オーディオ出力を提供した後に、前記メディアの要求に関する1つ以上のパラメータを示す音声入力を受信することを更に含む、請求項64に記載の方法。
  66. 前記1つ以上のパラメータに基づいて第3のメディアアイテムを取得することを更に含み、前記第3のメディアアイテムが前記第1のメディアアイテム及び前記第2のメディアアイテムとは異なる、請求項65に記載の方法。
  67. 前記第1のメディアアイテムが、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである、請求項56から66のいずれか一項に記載の方法。
  68. 前記第2のメディアアイテムが、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである、請求項56から67のいずれか一項に記載の方法。
  69. 前記電子デバイスが、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである、請求項56から68のいずれか一項に記載の方法。
  70. デジタルアシスタントを動作させる方法であって、
    1つ以上のプロセッサ及びメモリを有する電子デバイスにおいて、
    メディアの要求を示す音声入力を受信することと、
    前記デジタルアシスタントによって、前記電子デバイスに対する複数のユーザの物理的存在を検出することと、
    前記複数のユーザの前記物理的存在を検出することに応答して、前記複数のユーザに対応する複数の嗜好プロファイルを取得することと、
    前記デジタルアシスタントによって、前記複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、
    前記デジタルアシスタントによって、前記マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記特定されたメディアアイテムを含むオーディオ出力を提供することを含む、方法。
  71. 前記電子デバイスが、前記複数のユーザのうちの第1のユーザに関連付けられた第1の電子デバイスであり、
    前記電子デバイスに対する前記複数のユーザの物理的存在を検出することは、
    前記複数のユーザのうちの第2のユーザに関連付けられた第2の電子デバイスに対応する情報を受信することを含む、請求項70に記載の方法。
  72. 前記第2の電子デバイスに対応する情報を受信することは、前記第1の電子デバイスで、前記第2の電子デバイスから識別情報を受信することを含む、請求項71に記載の方法。
  73. 前記第2の電子デバイスに対応する情報を受信することは、ルーティングデバイスから識別情報を受信することを含み、
    前記ルーティングデバイスは、前記第1の電子デバイス及び前記第2の電子デバイスに接続されている、請求項71に記載の方法。
  74. 前記第2のユーザに対応する嗜好プロファイルをリモートデバイスから受信することを更に含む、請求項71から73のいずれか一項に記載の方法。
  75. 前記第2のユーザに対応する嗜好プロファイルが前記電子デバイス上に記憶される、請求項71から73のいずれか一項に記載の方法。
  76. 前記マージされた嗜好プロファイルを提供することは、
    前記複数の嗜好プロファイルそれぞれによって共有された1つ以上の嗜好を特定することを含む、請求項70から75のいずれか一項に記載の方法。
  77. 前記特定されたメディアアイテムは、前記1つ以上の嗜好に一致するメタデータに関連付けられている、請求項76に記載の方法。
  78. 前記マージされた嗜好プロファイルに基づいてメディアアイテムを特定することは、
    前記メディアアイテムを複数のメディアアイテムから特定することを含み、前記複数のメディアアイテムは、前記第1のユーザに関連付けられたメディアアイテムの第1のセット及び前記第2のユーザに関連付けられたメディアアイテムの第2のセットを含む、請求項71から77のいずれか一項に記載の方法。
  79. 前記メディアアイテムは前記メディアアイテムの第1のセットの一部ではなく、前記メディアアイテムは前記メディアアイテムの第2のセットの一部である、請求項78に記載の方法。
  80. 前記複数のユーザの物理存在を検出した後に、前記デジタルアシスタントによって、前記第2のユーザの不在を検出することと、
    前記第2のユーザの前記不在を検出した後に、
    前記複数のメディアアイテムを更新することと、
    前記マージされ嗜好プロファイルを更新することとを更に含む、請求項78又は79に記載の方法。
  81. 前記複数のメディアアイテムを更新することは、前記メディアアイテムを前記複数のメディアアイテムから削除することを含む、請求項78から80のいずれか一項に記載の方法。
  82. 前記オーディオ出力は、前記特定されたメディアアイテムの言葉による説明を含む、請求項70から81のいずれか一項に記載の方法。
  83. 前記オーディオ出力は、前記マージされたプロファイルを示す音声出力を含む、請求項70から82のいずれか一項に記載の方法。
  84. 前記特定されたメディアアイテムは、曲、オーディオブック、ポッドキャスト、ステーション、プレイリスト、又はこれらの任意の組み合わせである、請求項70から83のいずれか一項に記載の方法。
  85. 前記電子デバイスは、コンピュータ、セットトップボックス、スピーカ、スマートウォッチ、電話、又はこれらの組み合わせである、請求項70から84のいずれか一項に記載の方法。
  86. 1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムとを備える電子デバイスであって、前記1つ以上のプログラムは前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、
    メディアの要求を示す第1の自然言語音声入力を受信することであって、前記第1の自然言語音声入力が第1の検索パラメータを含む、ことと、
    デジタルアシスタントによって、第1のメディアアイテムを提供することであって、前記第1の検索パラメータに基づいて前記第1のメディアアイテムが特定される、ことと、
    前記第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するという決定に従って、
    前記第1のパラメータ及び前記第2の自然言語音声入力に基づいて、前記第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記第2のメディアアイテムを提供することとを実行する命令を含む、電子デバイス。
  87. 1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムとを備える電子デバイスであって、前記1つ以上のプログラムは前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、
    自然言語音声入力を受信することと、
    デジタルアシスタントによって、前記自然言語音声入力に基づいてタスクを特定することと、
    前記デジタルアシスタントによって、前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、
    音声応答を示す前記音声出力を提供しながら、
    前記デジタルアシスタントによって、前記音声応答に対応するメディアアイテムを再生することとを実行する命令を含む、電子デバイス。
  88. 1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムとを備える電子デバイスであって、前記1つ以上のプログラムは前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、
    メディアの要求を示す音声入力を受信することと、
    前記音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記デジタルアシスタントによって、前記メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することと、
    前記連続する非肯定応答の数が前記閾値を満たしていないという決定に従って、
    前記デジタルアシスタントによって、前記第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記連続する非肯定応答の数が前記閾値を満たしているという決定に従って、
    第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、
    前記デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを実行する命令を含む、電子デバイス。
  89. 1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムとを備える電子デバイスであって、前記1つ以上のプログラムは前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、
    メディアの要求を示す音声入力を受信することと、
    デジタルアシスタントによって、前記電子デバイスに対する複数のユーザの物理的存在を検出することと、
    前記複数のユーザの前記物理的存在を検出することに応答して、前記複数のユーザに対応する複数の嗜好プロファイルを取得することと、
    前記デジタルアシスタントによって、前記複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、
    前記デジタルアシスタントによって、前記マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記特定されたメディアアイテムを含むオーディオ出力を提供することとを実行する命令を含む、電子デバイス。
  90. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、電子デバイスの1つ以上のプロセッサによって実行されるときに、前記電子デバイスに対して、
    メディアの要求を示す第1の自然言語音声入力を受信することであって、前記第1の自然言語音声入力は、第1の検索パラメータを含む、ことと、
    デジタルアシスタントによって、第1のメディアアイテムを提供することであって、前記第1の検索パラメータに基づいて前記第1のメディアアイテムが特定される、ことと、
    前記第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定することと、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するという決定に従って、
    前記第1のパラメータ及び前記第2の自然言語音声入力に基づいて、前記第1のメディアアイテムとは異なる第2のメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記第2のメディアアイテムを提供することとを実行させる、非一時的コンピュータ可読記憶媒体。
  91. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、電子デバイスの1つ以上のプロセッサによって実行されるときに、前記電子デバイスに対して、
    自然言語音声入力を受信することと、
    デジタルアシスタントによって、自然言語音声入力に基づいてタスクを特定することと、
    前記デジタルアシスタントによって、前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供することと、
    音声応答を示す前記音声出力を提供しながら、
    前記デジタルアシスタントによって、前記音声応答に対応するメディアアイテムを再生することとを実行させる、非一時的コンピュータ可読記憶媒体。
  92. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、電子デバイスの1つ以上のプロセッサによって実行されるときに、前記電子デバイスに対して、
    メディアの要求を示す音声入力を受信することと、
    前記音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記デジタルアシスタントによって、前記メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定することと、
    前記連続する非肯定応答の数が前記閾値を満たしていないという決定に従って、
    前記デジタルアシスタントによって、前記第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供することと、
    前記連続する非肯定応答の数が前記閾値を満たしているという決定に従って、
    第2のメディアアイテムの提案を示すオーディオ出力を提供することを止めることと、
    前記デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供することとを実行させる、非一時的コンピュータ可読記憶媒体。
  93. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は、電子デバイスの1つ以上のプロセッサによって実行されるときに、前記電子デバイスに対して、
    メディアの要求を示す音声入力を受信することと、
    デジタルアシスタントによって、前記電子デバイスに対する複数のユーザの物理的存在を検出することと、
    前記複数のユーザの前記物理的存在を検出することに応答して、前記複数のユーザに対応する複数の嗜好プロファイルを取得することと、
    前記デジタルアシスタントによって、前記複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供することと、
    前記デジタルアシスタントによって、前記マージされた嗜好プロファイルに基づいてメディアアイテムを特定することと、
    前記デジタルアシスタントによって、前記特定されたメディアアイテムを含むオーディオ出力を提供することとを実行させる、非一時的コンピュータ可読記憶媒体。
  94. メディアの要求を示す第1の自然言語音声入力を受信する手段であって、前記第1の自然言語音声入力は、第1の検索パラメータを含む、手段と、
    デジタルアシスタントによって、第1のメディアアイテムを提供する手段であって、前記第1の検索パラメータに基づいて前記第1のメディアアイテムが特定される、手段と、
    前記第1のメディアアイテムを提供しながら、第2の自然言語音声入力を受信する手段と、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するかどうかを判定する手段と、
    前記第2の自然言語音声入力が、前記メディアの要求を絞り込むというユーザの意図に対応するという決定に従って、
    前記第1のパラメータ及び前記第2の自然言語音声入力に基づいて、前記第1のメディアアイテムとは異なる第2のメディアアイテムを特定する手段と、
    前記デジタルアシスタントによって、前記第2のメディアアイテムを提供する手段とを備える、電子デバイス。
  95. 自然言語音声入力を受信する手段と、
    デジタルアシスタントによって、前記自然言語音声入力に基づいてタスクを特定する手段と、
    前記デジタルアシスタントによって、前記特定されたタスクに関連付けられた音声応答を示す音声出力を提供する手段と、
    音声応答を示す前記音声出力を提供しながら、
    前記デジタルアシスタントによって、前記音声応答に対応するメディアアイテムを再生する手段とを備える、電子デバイス。
  96. メディアの要求を示す音声入力を受信する手段と、
    音声入力を受信することに応答して、デジタルアシスタントによって、第1のメディアアイテムの提案を示すオーディオ出力を提供する手段と、
    前記デジタルアシスタントによって、前記メディアの要求に対応する連続する非肯定応答の数が閾値を満たしているかどうかを判定する手段と、
    前記連続する非肯定応答の数が前記閾値を満たしていないという決定に従って、
    前記デジタルアシスタントによって、前記第1のメディアアイテムとは異なる第2のメディアアイテムの提案を示すオーディオ出力を提供する手段と、
    前記連続する非肯定応答の数が前記閾値を満たしているという決定に従って、
    第2のメディアアイテムの提案を示すオーディオ出力を提供することを止める手段と、
    前記デジタルアシスタントによって、ユーザ入力の要求を示すオーディオ出力を提供する手段とを備える、電子デバイス。
  97. メディアの要求を示す音声入力を受信する手段と、
    デジタルアシスタントによって、前記電子デバイスに対する複数のユーザの物理的存在を検出する手段と、
    前記複数のユーザの前記物理的存在を検出することに応答して、前記複数のユーザに対応する複数の嗜好プロファイルを取得する手段と、
    前記デジタルアシスタントによって、前記複数の嗜好プロファイルに基づいて、マージされた嗜好プロファイルを提供する手段と、
    前記デジタルアシスタントによって、前記マージされた嗜好プロファイルに基づいてメディアアイテムを特定する手段と、
    前記デジタルアシスタントによって、前記特定されたメディアアイテムを含むオーディオ出力を提供する手段とを備える、電子デバイス。
  98. 1つ以上のプロセッサと、
    メモリと、
    1つ以上のプログラムとを備える電子デバイスであって、前記1つ以上のプログラムは前記メモリに記憶されており、前記1つ以上のプロセッサによって実行されるように構成されており、前記1つ以上のプログラムは、請求項1から85のいずれか一項に記載の方法を実行する命令を含む、電子デバイス。
  99. 1つ以上のプログラムを記憶する非一時的コンピュータ可読記憶媒体であって、前記1つ以上のプログラムは命令を含み、前記命令は電子デバイスの1つ以上のプロセッサによって実行されるときに、前記電子デバイスに対して、請求項1から85のいずれか一項に記載の方法を実行させる、非一時的コンピュータ可読記憶媒体。
  100. 請求項1から85のいずれか一項に記載の方法を実行する手段を備える、電子デバイス。
JP2018544350A 2017-05-16 2018-04-17 メディア探索用のインテリジェント自動アシスタント Active JP6671497B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201762506981P 2017-05-16 2017-05-16
US62/506,981 2017-05-16
DKPA201770426 2017-06-01
DKPA201770425A DK179559B1 (en) 2017-05-16 2017-06-01 INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION
DKPA201770425 2017-06-01
DKPA201770426A DK179465B1 (en) 2017-05-16 2017-06-01 INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION
PCT/US2018/027879 WO2018212885A1 (en) 2017-05-16 2018-04-17 Intelligent automated assistant for media exploration

Publications (2)

Publication Number Publication Date
JP2019528492A true JP2019528492A (ja) 2019-10-10
JP6671497B2 JP6671497B2 (ja) 2020-03-25

Family

ID=64271825

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018544350A Active JP6671497B2 (ja) 2017-05-16 2018-04-17 メディア探索用のインテリジェント自動アシスタント

Country Status (7)

Country Link
US (5) US20180336275A1 (ja)
EP (3) EP3929771A1 (ja)
JP (1) JP6671497B2 (ja)
KR (2) KR20180135884A (ja)
CN (2) CN109635130A (ja)
AU (1) AU2018220034B2 (ja)
WO (1) WO2018212885A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022049710A1 (ja) * 2020-09-03 2022-03-10 日本電気株式会社 サービス提供装置、サービス提供システム、サービス提供方法及び非一時的なコンピュータ可読媒体

Families Citing this family (146)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
KR20150104615A (ko) 2013-02-07 2015-09-15 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
CN105264524B (zh) 2013-06-09 2019-08-02 苹果公司 用于实现跨数字助理的两个或更多个实例的会话持续性的设备、方法、和图形用户界面
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US11341153B2 (en) * 2015-10-05 2022-05-24 Verizon Patent And Licensing Inc. Computerized system and method for determining applications on a device for serving media
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DE102016007357A1 (de) * 2016-06-15 2017-12-21 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Kraftfahrzeugeinrichtung mit einer bewegbaren Fensterscheibe, Kraftfahrzeug mit einer solchen Kraftfahrzeugeinrichtung und Verfahren zum Betrieb einer solchen Kraftfahrzeugeinrichtung
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
KR102416782B1 (ko) * 2017-03-28 2022-07-05 삼성전자주식회사 음성 인식 서비스 운용 방법 및 이를 지원하는 전자 장치
TWI689865B (zh) * 2017-04-28 2020-04-01 塞席爾商元鼎音訊股份有限公司 智慧語音系統、語音輸出調整之方法及電腦可讀取記憶媒體
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10533362B2 (en) 2017-06-16 2020-01-14 GM Global Technology Operations LLC Systems and methods for memory and touch position window
CN107564517A (zh) * 2017-07-05 2018-01-09 百度在线网络技术(北京)有限公司 语音唤醒方法、设备及系统、云端服务器与可读介质
US10978187B2 (en) 2017-08-10 2021-04-13 Nuance Communications, Inc. Automated clinical documentation system and method
US11316865B2 (en) 2017-08-10 2022-04-26 Nuance Communications, Inc. Ambient cooperative intelligence system and method
EP3506255A1 (en) * 2017-12-28 2019-07-03 Spotify AB Voice feedback for user interface of media playback device
US20190235831A1 (en) * 2018-01-31 2019-08-01 Amazon Technologies, Inc. User input processing restriction in a speech processing system
EP3762805A4 (en) 2018-03-05 2022-04-27 Nuance Communications, Inc. SYSTEM AND PROCEDURE FOR VERIFICATION OF AUTOMATED CLINICAL DOCUMENTATION
EP3762921A4 (en) 2018-03-05 2022-05-04 Nuance Communications, Inc. AUTOMATED CLINICAL DOCUMENTATION SYSTEM AND PROCESS
US11250383B2 (en) 2018-03-05 2022-02-15 Nuance Communications, Inc. Automated clinical documentation system and method
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10789940B2 (en) * 2018-03-27 2020-09-29 Lenovo (Singapore) Pte. Ltd. Dynamic wake word identification
CN108665900B (zh) 2018-04-23 2020-03-03 百度在线网络技术(北京)有限公司 云端唤醒方法及系统、终端以及计算机可读存储介质
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US20210248168A1 (en) * 2018-08-24 2021-08-12 Hewlett-Packard Development Company, L.P. Identifying digital elements
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
GB2577879B (en) 2018-10-08 2022-08-24 B & W Group Ltd Content playback system
US10986404B2 (en) * 2018-10-24 2021-04-20 Rovi Guides, Inc. Systems and methods for overriding user input of commands in a multi-user environment
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
GB2579554A (en) * 2018-12-03 2020-07-01 Audiogum Uk Ltd Content playback system
CN109815482B (zh) * 2018-12-17 2023-05-23 北京百度网讯科技有限公司 一种新闻交互的方法、装置、设备和计算机存储介质
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
KR102656611B1 (ko) * 2019-01-29 2024-04-12 삼성전자주식회사 보이스 어시스턴트 서비스를 이용한 컨텐츠 재생 장치 및 그 동작 방법
WO2020159653A1 (en) * 2019-01-31 2020-08-06 Knowles Electronics, Llc Intrinsically safe microphone assembly
EP3931720A1 (en) * 2019-02-25 2022-01-05 Liveperson, Inc. Intent-driven contact center
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11003419B2 (en) 2019-03-19 2021-05-11 Spotify Ab Refinement of voice query interpretation
CN111724775B (zh) * 2019-03-22 2023-07-28 华为技术有限公司 一种语音交互方法及电子设备
US11973894B2 (en) 2019-04-30 2024-04-30 Apple Inc. Utilizing context information with an electronic device
CN110109645A (zh) * 2019-04-30 2019-08-09 百度在线网络技术(北京)有限公司 一种交互式音乐试听方法、装置和终端
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US20220236945A1 (en) * 2019-05-16 2022-07-28 Sony Group Corporation Information processing device, information processing method, and program
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11227679B2 (en) 2019-06-14 2022-01-18 Nuance Communications, Inc. Ambient clinical intelligence system and method
US11216480B2 (en) 2019-06-14 2022-01-04 Nuance Communications, Inc. System and method for querying data points from graph data structures
US11334712B1 (en) * 2019-06-24 2022-05-17 Amazon Technologies, Inc. Reducing unintended automation events
US11531807B2 (en) 2019-06-28 2022-12-20 Nuance Communications, Inc. System and method for customized text macros
CN110287339A (zh) * 2019-06-28 2019-09-27 百度在线网络技术(北京)有限公司 一种播放升级方法及装置
US11372926B2 (en) * 2019-07-22 2022-06-28 Microsoft Technology Licensing, Llc Asynchronous context communication for speech services
US11184298B2 (en) * 2019-08-28 2021-11-23 International Business Machines Corporation Methods and systems for improving chatbot intent training by correlating user feedback provided subsequent to a failed response to an initial user intent
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11670408B2 (en) 2019-09-30 2023-06-06 Nuance Communications, Inc. System and method for review of automated clinical documentation
US11861674B1 (en) 2019-10-18 2024-01-02 Meta Platforms Technologies, Llc Method, one or more computer-readable non-transitory storage media, and a system for generating comprehensive information for products of interest by assistant systems
US11567788B1 (en) 2019-10-18 2023-01-31 Meta Platforms, Inc. Generating proactive reminders for assistant systems
KR102135859B1 (ko) * 2019-10-24 2020-07-20 주식회사 유니온플레이스 개인화된 가상 비서를 제공하는 장치
US20210125610A1 (en) * 2019-10-29 2021-04-29 Facebook Technologies, Llc Ai-driven personal assistant with adaptive response generation
CN110718224B (zh) * 2019-10-31 2022-01-21 珠海格力电器股份有限公司 一种语音控制方法、装置、存储介质和智能设备
US12001754B2 (en) * 2019-11-21 2024-06-04 Motorola Mobility Llc Context based media selection based on preferences setting for active consumer(s)
KR20210066647A (ko) 2019-11-28 2021-06-07 삼성전자주식회사 전자 장치 및 이의 제어 방법
JP2023510444A (ja) * 2020-03-13 2023-03-14 グーグル エルエルシー ビデオゲーム対話のための自然言語ダイアログシステム
CN111540350B (zh) * 2020-03-31 2024-03-01 北京小米移动软件有限公司 一种智能语音控制设备的控制方法、装置及存储介质
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
EP3933560A1 (en) 2020-06-30 2022-01-05 Spotify AB Methods and systems for providing animated visual feedback for voice commands
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11756541B1 (en) * 2020-08-24 2023-09-12 Amazon Technologies, Inc. Contextual resolver for voice requests
KR20220037299A (ko) 2020-09-17 2022-03-24 삼성전자주식회사 전자 장치 및 그 제어 방법
US11881214B1 (en) * 2020-09-23 2024-01-23 Amazon Technologies, Inc. Sending prompt data related to content output on a voice-controlled device
US20220101842A1 (en) * 2020-09-25 2022-03-31 Vocollect, Inc. Systems, methods, and apparatuses for improving performance of executing a workflow operation
US11320979B1 (en) * 2020-10-15 2022-05-03 Salesforce.Com, Inc. Access control for online presentations
US11935527B2 (en) 2020-10-23 2024-03-19 Google Llc Adapting automated assistant functionality based on generated proficiency measure(s)
US11222103B1 (en) 2020-10-29 2022-01-11 Nuance Communications, Inc. Ambient cooperative intelligence system and method
US11783827B2 (en) 2020-11-06 2023-10-10 Apple Inc. Determining suggested subsequent user actions during digital assistant interaction
CN112562643A (zh) * 2020-11-09 2021-03-26 深圳桔子智能科技发展有限公司 语音交互方法、控制设备及存储介质
US11762871B2 (en) 2021-01-29 2023-09-19 Walmart Apollo, Llc Methods and apparatus for refining a search
US20220375466A1 (en) * 2021-05-18 2022-11-24 Apple Inc. Siri integration with guest voices
US11914923B1 (en) * 2021-12-10 2024-02-27 Amazon Technologies, Inc. Computer system-based pausing and resuming of natural language conversations
WO2023171943A1 (ko) * 2022-03-07 2023-09-14 삼성전자 주식회사 복수의 사용자의 선호도 정보를 이용하여 검색을 수행하는 전자 장치 및 이의 제어 방법
WO2023220239A1 (en) * 2022-05-11 2023-11-16 Liveperson, Inc. Training personal virtual agents based on an accuracy metric of previous responses from the agents
WO2024020065A1 (en) * 2022-07-20 2024-01-25 Cerence Operating Company Collaboration between a recommendation engine and a voice assistant
CN115544006B (zh) * 2022-09-23 2023-07-04 北京上里科技文化有限公司 一种通用数据库数据操作模型构建方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006202127A (ja) * 2005-01-21 2006-08-03 Pioneer Electronic Corp 推奨情報提示装置及び推奨情報提示方法等
JP2009545833A (ja) * 2006-07-31 2009-12-24 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. 楽曲をブラウズするための方法及びシステム
US20110106536A1 (en) * 2009-10-29 2011-05-05 Rovi Technologies Corporation Systems and methods for simulating dialog between a user and media equipment device
JP2015527683A (ja) * 2012-09-19 2015-09-17 アップル インコーポレイテッド 音声ベースのメディア検索

Family Cites Families (3772)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US6222525B1 (en) 1992-03-05 2001-04-24 Brad A. Armstrong Image controllers with sheet connected sensors
US8073695B1 (en) 1992-12-09 2011-12-06 Adrea, LLC Electronic book with voice emulation features
US7835989B1 (en) 1992-12-09 2010-11-16 Discovery Communications, Inc. Electronic book alternative delivery systems
US6311157B1 (en) 1992-12-31 2001-10-30 Apple Computer, Inc. Assigning meanings to utterances in a speech recognition system
US6594688B2 (en) 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
JP2813728B2 (ja) 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム/パン機能付パーソナル通信機
US6122482A (en) 1995-02-22 2000-09-19 Global Communications, Inc. Satellite broadcast receiving and distribution system
US5901287A (en) 1996-04-01 1999-05-04 The Sabre Group Inc. Information aggregation and synthesization system
US7113958B1 (en) 1996-08-12 2006-09-26 Battelle Memorial Institute Three-dimensional display of document set
US6199076B1 (en) 1996-10-02 2001-03-06 James Logan Audio program player including a dynamic program selection controller
US7787647B2 (en) 1997-01-13 2010-08-31 Micro Ear Technology, Inc. Portable system for programming hearing aids
US7321783B2 (en) 1997-04-25 2008-01-22 Minerva Industries, Inc. Mobile entertainment and communication device
US6026233A (en) 1997-05-27 2000-02-15 Microsoft Corporation Method and apparatus for presenting and selecting options to modify a programming language statement
US7046813B1 (en) 1997-09-25 2006-05-16 Fumio Denda Auditory sense training method and sound processing method for auditory sense training
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
KR100766627B1 (ko) 1998-01-26 2007-10-15 핑거웍스, 인크. 수동 입력 통합 방법 및 장치
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US6963871B1 (en) 1998-03-25 2005-11-08 Language Analysis Systems, Inc. System and method for adaptive multi-cultural searching and matching of personal names
US7603684B1 (en) 1998-05-19 2009-10-13 United Video Properties, Inc. Program guide system with video-on-demand browsing
US6424983B1 (en) 1998-05-26 2002-07-23 Global Information Research And Technologies, Llc Spelling and grammar checking system
US7711672B2 (en) 1998-05-28 2010-05-04 Lawrence Au Semantic network methods to disambiguate natural language meaning
US7536374B2 (en) 1998-05-28 2009-05-19 Qps Tech. Limited Liability Company Method and system for using voice input for performing device functions
US6742003B2 (en) 2001-04-30 2004-05-25 Microsoft Corporation Apparatus and accompanying methods for visualizing clusters of data and hierarchical cluster classifications
CN1151488C (zh) 1998-10-02 2004-05-26 国际商业机器公司 通过一般分层对象进行有效语音导航的结构框架
US6163794A (en) 1998-10-23 2000-12-19 General Magic Network system extensible by users
US6321092B1 (en) 1998-11-03 2001-11-20 Signal Soft Corporation Multiple input data management for wireless location-based applications
US7447637B1 (en) 1998-12-23 2008-11-04 Eastern Investments, Llc System and method of processing speech within a graphic user interface
US7319957B2 (en) 2004-02-11 2008-01-15 Tegic Communications, Inc. Handwriting and voice input with automatic correction
US7881936B2 (en) 1998-12-04 2011-02-01 Tegic Communications, Inc. Multimodal disambiguation of speech recognition
US7712053B2 (en) 1998-12-04 2010-05-04 Tegic Communications, Inc. Explicit character filtering of ambiguous text entry
US8938688B2 (en) 1998-12-04 2015-01-20 Nuance Communications, Inc. Contextual prediction of user words and user actions
US7679534B2 (en) 1998-12-04 2010-03-16 Tegic Communications, Inc. Contextual prediction of user words and user actions
US6842877B2 (en) 1998-12-18 2005-01-11 Tangis Corporation Contextual responses based on automated learning techniques
FR2787902B1 (fr) 1998-12-23 2004-07-30 France Telecom Modele et procede d'implementation d'un agent rationnel dialoguant, serveur et systeme multi-agent pour la mise en oeuvre
GB2388938B (en) 1999-02-22 2004-03-17 Nokia Corp A communication terminal having a predictive editor application
GB9904662D0 (en) 1999-03-01 1999-04-21 Canon Kk Natural language search method and apparatus
US7596606B2 (en) 1999-03-11 2009-09-29 Codignotto John D Message publishing system for publishing messages from identified, authorized senders
US7761296B1 (en) 1999-04-02 2010-07-20 International Business Machines Corporation System and method for rescoring N-best hypotheses of an automatic speech recognition system
US7558381B1 (en) 1999-04-22 2009-07-07 Agere Systems Inc. Retrieval of deleted voice messages in voice messaging system
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
JP4519381B2 (ja) 1999-05-27 2010-08-04 テジック コミュニケーションズ インク 自動訂正機能を備えたキーボード・システム
US7821503B2 (en) 2003-04-09 2010-10-26 Tegic Communications, Inc. Touch screen and graphical user interface
EP1224569A4 (en) 1999-05-28 2005-08-10 Sehda Inc PHRASE BASED DIALOGUE MODELING WITH SPECIAL APPLICATION FOR GENERATING RECOGNITION GRAMMARK FOR LANGUAGE-CONTROLLED USER INTERFACE
US20140098247A1 (en) 1999-06-04 2014-04-10 Ip Holdings, Inc. Home Automation And Smart Home Control Using Mobile Devices And Wireless Enabled Electrical Switches
US7711565B1 (en) 1999-06-10 2010-05-04 Gazdzinski Robert F “Smart” elevator system and method
US8065155B1 (en) 1999-06-10 2011-11-22 Gazdzinski Robert F Adaptive advertising apparatus and methods
AUPQ138199A0 (en) 1999-07-02 1999-07-29 Telstra R & D Management Pty Ltd A search system
US7743188B2 (en) 1999-08-12 2010-06-22 Palm, Inc. Method and apparatus for accessing a contacts database and telephone services
US7451177B1 (en) 1999-08-12 2008-11-11 Avintaquin Capital, Llc System for and method of implementing a closed loop response architecture for electronic commerce
US7925610B2 (en) 1999-09-22 2011-04-12 Google Inc. Determining a meaning of a knowledge item using document-based information
US6789231B1 (en) 1999-10-05 2004-09-07 Microsoft Corporation Method and system for providing alternatives for text derived from stochastic input sources
US7176372B2 (en) 1999-10-19 2007-02-13 Medialab Solutions Llc Interactive digital music recorder and player
EP1222655A1 (en) 1999-10-19 2002-07-17 Sony Electronics Inc. Natural language interface control system
US8392188B1 (en) 1999-11-05 2013-03-05 At&T Intellectual Property Ii, L.P. Method and system for building a phonotactic model for domain independent speech recognition
US7725307B2 (en) 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
US7050977B1 (en) 1999-11-12 2006-05-23 Phoenix Solutions, Inc. Speech-enabled server for internet website and method
US9076448B2 (en) 1999-11-12 2015-07-07 Nuance Communications, Inc. Distributed real time speech recognition system
US7392185B2 (en) 1999-11-12 2008-06-24 Phoenix Solutions, Inc. Speech based learning/training system using semantic decoding
US7130807B1 (en) * 1999-11-22 2006-10-31 Accenture Llp Technology sharing during demand and supply planning in a network-based supply chain environment
US8032409B1 (en) * 1999-11-22 2011-10-04 Accenture Global Services Limited Enhanced visibility during installation management in a network-based supply chain environment
US7716077B1 (en) * 1999-11-22 2010-05-11 Accenture Global Services Gmbh Scheduling and planning maintenance and service in a network-based supply chain environment
US8271336B2 (en) * 1999-11-22 2012-09-18 Accenture Global Services Gmbh Increased visibility during order management in a network-based supply chain environment
US7412643B1 (en) 1999-11-23 2008-08-12 International Business Machines Corporation Method and apparatus for linking representation and realization data
US7337389B1 (en) 1999-12-07 2008-02-26 Microsoft Corporation System and method for annotating an electronic document independently of its content
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US8271287B1 (en) 2000-01-14 2012-09-18 Alcatel Lucent Voice command remote control system
JP3444486B2 (ja) * 2000-01-26 2003-09-08 インターナショナル・ビジネス・マシーンズ・コーポレーション 音声認識手段を使用する自動音声応答システムおよび方法
GB2360106B (en) 2000-02-21 2004-09-22 Ac Properties Bv Ordering playable works
US6757362B1 (en) 2000-03-06 2004-06-29 Avaya Technology Corp. Personal virtual assistant
EP1275042A2 (en) 2000-03-06 2003-01-15 Kanisa Inc. A system and method for providing an intelligent multi-step dialog with a user
US8024415B2 (en) 2001-03-16 2011-09-20 Microsoft Corporation Priorities generation and management
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US7917366B1 (en) 2000-03-24 2011-03-29 Exaudios Technologies System and method for determining a personal SHG profile by voice analysis
US7187947B1 (en) 2000-03-28 2007-03-06 Affinity Labs, Llc System and method for communicating selected information to an electronic device
US7478129B1 (en) 2000-04-18 2009-01-13 Helen Jeanne Chemtob Method and apparatus for providing group interaction via communications networks
WO2001082111A2 (en) 2000-04-24 2001-11-01 Microsoft Corporation Computer-aided reading system and method with cross-language reading wizard
US6912498B2 (en) 2000-05-02 2005-06-28 Scansoft, Inc. Error correction in speech recognition by correcting text around selected area
FR2809509B1 (fr) 2000-05-26 2003-09-12 Bull Sa Systeme et procede d'internationalisation du contenu de documents a balises dans un systeme informatique
US7080315B1 (en) 2000-06-28 2006-07-18 International Business Machines Corporation Method and apparatus for coupling a visual browser to a voice browser
US7672952B2 (en) 2000-07-13 2010-03-02 Novell, Inc. System and method of semantic correlation of rich content
US7389225B1 (en) 2000-10-18 2008-06-17 Novell, Inc. Method and mechanism for superpositioning state vectors in a semantic abstract
US7139709B2 (en) 2000-07-20 2006-11-21 Microsoft Corporation Middleware layer between speech related applications and engines
JP2002041276A (ja) 2000-07-24 2002-02-08 Sony Corp 対話型操作支援システム及び対話型操作支援方法、並びに記憶媒体
US7853664B1 (en) 2000-07-31 2010-12-14 Landmark Digital Services Llc Method and system for purchasing pre-recorded music
US6915294B1 (en) 2000-08-18 2005-07-05 Firstrain, Inc. Method and apparatus for searching network resources
WO2002017069A1 (en) 2000-08-21 2002-02-28 Yahoo! Inc. Method and system of interpreting and presenting web content using a voice browser
US6836759B1 (en) 2000-08-22 2004-12-28 Microsoft Corporation Method and system of handling the selection of alternates for recognized words
US7287009B1 (en) 2000-09-14 2007-10-23 Raanan Liebermann System and a method for carrying out personal and business transactions
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7457750B2 (en) 2000-10-13 2008-11-25 At&T Corp. Systems and methods for dynamic re-configurable speech recognition
US6915262B2 (en) 2000-11-30 2005-07-05 Telesector Resources Group, Inc. Methods and apparatus for performing speech recognition and using speech recognition results
US7016847B1 (en) 2000-12-08 2006-03-21 Ben Franklin Patent Holdings L.L.C. Open architecture for a voice user interface
US7584278B2 (en) 2000-12-11 2009-09-01 Microsoft Corporation Method and system for task based management of multiple network resources
US7607083B2 (en) 2000-12-12 2009-10-20 Nec Corporation Test summarization using relevance measures and latent semantic analysis
US6973427B2 (en) 2000-12-26 2005-12-06 Microsoft Corporation Method for adding phonetic descriptions to a speech recognition lexicon
US7257537B2 (en) 2001-01-12 2007-08-14 International Business Machines Corporation Method and apparatus for performing dialog management in a computer conversational interface
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US8213910B2 (en) 2001-02-09 2012-07-03 Harris Technology, Llc Telephone using a connection network for processing data remotely from the telephone
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7171365B2 (en) 2001-02-16 2007-01-30 International Business Machines Corporation Tracking time using portable recorders and speech recognition
US7290039B1 (en) 2001-02-27 2007-10-30 Microsoft Corporation Intent based processing
US7277853B1 (en) 2001-03-02 2007-10-02 Mindspeed Technologies, Inc. System and method for a endpoint detection of speech for improved speech recognition in noisy environments
US7366979B2 (en) 2001-03-09 2008-04-29 Copernicus Investments, Llc Method and apparatus for annotating a document
US7216073B2 (en) 2001-03-13 2007-05-08 Intelligate, Ltd. Dynamic natural language understanding
CA2408625A1 (en) 2001-03-14 2002-09-19 At&T Corp. Method for automated sentence planning in a task classification system
US7209880B1 (en) 2001-03-20 2007-04-24 At&T Corp. Systems and methods for dynamic re-configurable speech recognition
WO2002089458A1 (en) 2001-04-30 2002-11-07 Octave Communications, Inc. Audio conference platform with dynamic speech detection threshold
JP2002358092A (ja) 2001-06-01 2002-12-13 Sony Corp 音声合成システム
US20020194003A1 (en) 2001-06-05 2002-12-19 Mozer Todd F. Client-server security system and method
US6975304B1 (en) 2001-06-11 2005-12-13 Handspring, Inc. Interface for processing of an alternate symbol in a computer device
US7606712B1 (en) 2001-06-28 2009-10-20 At&T Intellectual Property Ii, L.P. Speech recognition interface for voice actuation of legacy systems
US8831949B1 (en) 2001-06-28 2014-09-09 At&T Intellectual Property I, L.P. Voice recognition for performing authentication and completing transactions in a systems interface to legacy systems
US7328250B2 (en) 2001-06-29 2008-02-05 Nokia, Inc. Apparatus and method for handling electronic mail
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
US7987151B2 (en) 2001-08-10 2011-07-26 General Dynamics Advanced Info Systems, Inc. Apparatus and method for problem solving using intelligent agents
US7920682B2 (en) 2001-08-21 2011-04-05 Byrne William J Dynamic interactive voice interface
US11004114B2 (en) 2001-08-21 2021-05-11 Bookit Oy Components, system, platform and methodologies for mediating and provisioning services and product delivery and orchestrating, mediating and authenticating transactions and interactions
US7774388B1 (en) 2001-08-31 2010-08-10 Margaret Runchey Model of everything with UR-URL combination identity-identifier-addressing-indexing method, means, and apparatus
US7953447B2 (en) 2001-09-05 2011-05-31 Vocera Communications, Inc. Voice-controlled communications system and method using a badge application
US8121649B2 (en) 2001-09-05 2012-02-21 Vocera Communications, Inc. Voice-controlled communications system and method having an access device
US6975994B2 (en) 2001-09-12 2005-12-13 Technology Innovations, Llc Device for providing speech driven control of a media presentation
US7103848B2 (en) 2001-09-13 2006-09-05 International Business Machines Corporation Handheld electronic book reader with annotation and usage tracking capabilities
CA2462058A1 (en) 2001-09-21 2003-04-03 International Business Machines Corporation Input apparatus, computer apparatus, method for identifying input object, method for identifying input object in keyboard, and computer program
US7403938B2 (en) 2001-09-24 2008-07-22 Iac Search & Media, Inc. Natural language query processing
US6985865B1 (en) 2001-09-26 2006-01-10 Sprint Spectrum L.P. Method and system for enhanced response to voice commands in a voice command platform
US7324947B2 (en) 2001-10-03 2008-01-29 Promptu Systems Corporation Global speech user interface
US7167832B2 (en) 2001-10-15 2007-01-23 At&T Corp. Method for dialog management
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
ITFI20010199A1 (it) 2001-10-22 2003-04-22 Riccardo Vieri Sistema e metodo per trasformare in voce comunicazioni testuali ed inviarle con una connessione internet a qualsiasi apparato telefonico
US7913185B1 (en) 2001-10-25 2011-03-22 Adobe Systems Incorporated Graphical insertion of JavaScript pop-up menus
US7359671B2 (en) 2001-10-30 2008-04-15 Unwired Technology Llc Multiple channel wireless communication system
US20030101054A1 (en) 2001-11-27 2003-05-29 Ncc, Llc Integrated system and method for electronic speech recognition and transcription
US7447624B2 (en) 2001-11-27 2008-11-04 Sun Microsystems, Inc. Generation of localized software applications
US7483832B2 (en) 2001-12-10 2009-01-27 At&T Intellectual Property I, L.P. Method and system for customizing voice translation of text to speech
US7490039B1 (en) 2001-12-13 2009-02-10 Cisco Technology, Inc. Text to speech system and method having interactive spelling capabilities
US7103542B2 (en) 2001-12-14 2006-09-05 Ben Franklin Patent Holding Llc Automatically improving a voice recognition system
AU2003210795A1 (en) 2002-02-01 2003-09-02 John Fairweather System and method for analyzing data
US9374451B2 (en) 2002-02-04 2016-06-21 Nokia Technologies Oy System and method for multimodal short-cuts to digital services
US8374879B2 (en) 2002-02-04 2013-02-12 Microsoft Corporation Systems and methods for managing interactions from multiple speech-enabled applications
US7272377B2 (en) 2002-02-07 2007-09-18 At&T Corp. System and method of ubiquitous language translation for wireless devices
US8249880B2 (en) 2002-02-14 2012-08-21 Intellisist, Inc. Real-time display of system instructions
AU2003216329A1 (en) 2002-02-15 2003-09-09 Mathsoft Engineering And Education, Inc. Linguistic support for a regognizer of mathematical expressions
US7009663B2 (en) 2003-12-17 2006-03-07 Planar Systems, Inc. Integrated optical light sensitive active matrix liquid crystal display
US7221287B2 (en) 2002-03-05 2007-05-22 Triangle Software Llc Three-dimensional traffic report
JP4039086B2 (ja) 2002-03-05 2008-01-30 ソニー株式会社 情報処理装置および情報処理方法、情報処理システム、記録媒体、並びにプログラム
US7360158B1 (en) 2002-03-28 2008-04-15 At&T Mobility Ii Llc Interactive education tool
JP2003295882A (ja) 2002-04-02 2003-10-15 Canon Inc 音声合成用テキスト構造、音声合成方法、音声合成装置及びそのコンピュータ・プログラム
US7707221B1 (en) 2002-04-03 2010-04-27 Yahoo! Inc. Associating and linking compact disc metadata
US7359493B1 (en) 2002-04-11 2008-04-15 Aol Llc, A Delaware Limited Liability Company Bulk voicemail
US7043474B2 (en) 2002-04-15 2006-05-09 International Business Machines Corporation System and method for measuring image similarity based on semantic meaning
US7073193B2 (en) 2002-04-16 2006-07-04 Microsoft Corporation Media content descriptions
US7869998B1 (en) 2002-04-23 2011-01-11 At&T Intellectual Property Ii, L.P. Voice-enabled dialog system
US8135115B1 (en) 2006-11-22 2012-03-13 Securus Technologies, Inc. System and method for multi-channel recording
US7490034B2 (en) 2002-04-30 2009-02-10 Microsoft Corporation Lexicon with sectionalized data and method of using the same
US7221937B2 (en) 2002-05-06 2007-05-22 Research In Motion Limited Event reminder method
US7380203B2 (en) 2002-05-14 2008-05-27 Microsoft Corporation Natural input recognition tool
US7436947B2 (en) 2002-05-14 2008-10-14 Avaya Inc. Method and apparatus for automatic notification and response based on communication flow expressions
US7493560B1 (en) 2002-05-20 2009-02-17 Oracle International Corporation Definition links in online documentation
US8611919B2 (en) 2002-05-23 2013-12-17 Wounder Gmbh., Llc System, method, and computer program product for providing location based services and mobile e-commerce
US7546382B2 (en) 2002-05-28 2009-06-09 International Business Machines Corporation Methods and systems for authoring of mixed-initiative multi-modal interactions and related browsing mechanisms
US7398209B2 (en) 2002-06-03 2008-07-08 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7680649B2 (en) 2002-06-17 2010-03-16 International Business Machines Corporation System, method, program product, and networking use for recognizing words and their parts of speech in one or more natural languages
US8219608B2 (en) 2002-06-20 2012-07-10 Koninklijke Philips Electronics N.V. Scalable architecture for web services
US7568151B2 (en) 2002-06-27 2009-07-28 Microsoft Corporation Notification of activity around documents
US7079713B2 (en) 2002-06-28 2006-07-18 Microsoft Corporation Method and system for displaying and linking ink objects with recognized text and objects
EP1652173B1 (en) 2002-06-28 2015-12-30 Chemtron Research LLC Method and system for processing speech
US7656393B2 (en) 2005-03-04 2010-02-02 Apple Inc. Electronic device having display and surrounding touch sensitive bezel for user interface and control
US7693720B2 (en) 2002-07-15 2010-04-06 Voicebox Technologies, Inc. Mobile systems and methods for responding to natural language speech utterance
US6876727B2 (en) 2002-07-24 2005-04-05 Sbc Properties, Lp Voice over IP method for developing interactive voice response system
US7535997B1 (en) 2002-07-29 2009-05-19 At&T Intellectual Property I, L.P. Systems and methods for silent message delivery
US7027842B2 (en) 2002-09-24 2006-04-11 Bellsouth Intellectual Property Corporation Apparatus and method for providing hands-free operation of a device
US7328155B2 (en) 2002-09-25 2008-02-05 Toyota Infotechnology Center Co., Ltd. Method and system for speech recognition using grammar weighted based upon location information
US9342829B2 (en) 2002-10-01 2016-05-17 Andrew H B Zhou Systems and methods for mobile application, wearable application, transactional messaging, calling, digital multimedia capture and payment transactions
US7467087B1 (en) 2002-10-10 2008-12-16 Gillick Laurence S Training and using pronunciation guessers in speech recognition
US7373612B2 (en) 2002-10-21 2008-05-13 Battelle Memorial Institute Multidimensional structured data visualization method and apparatus, text visualization method and apparatus, method and apparatus for visualizing and graphically navigating the world wide web, method and apparatus for visualizing hierarchies
US8972266B2 (en) 2002-11-12 2015-03-03 David Bezar User intent analysis extent of speaker intent analysis system
US7822611B2 (en) 2002-11-12 2010-10-26 Bezar David B Speaker intent analysis system
US8005919B2 (en) 2002-11-18 2011-08-23 Aol Inc. Host-based intelligent results related to a character stream
US7386799B1 (en) 2002-11-21 2008-06-10 Forterra Systems, Inc. Cinematic techniques in avatar-centric communication during a multi-user online simulation
WO2004049306A1 (en) 2002-11-22 2004-06-10 Roy Rosser Autonomous response engine
US7298930B1 (en) 2002-11-29 2007-11-20 Ricoh Company, Ltd. Multimodal access of meeting recordings
EP1614102A4 (en) 2002-12-10 2006-12-20 Kirusa Inc VOICE ENTRY DESAMBIGUATION TECHNIQUES BASED ON THE USE OF MULTIMODAL INTERFACES
US7386449B2 (en) 2002-12-11 2008-06-10 Voice Enabling Systems Technology Inc. Knowledge-based flexible natural speech dialogue system
US7353139B1 (en) 2002-12-13 2008-04-01 Garmin Ltd. Portable apparatus with performance monitoring and audio entertainment features
FR2848688A1 (fr) 2002-12-17 2004-06-18 France Telecom Identification de langue d'un texte
JP3974511B2 (ja) 2002-12-19 2007-09-12 インターナショナル・ビジネス・マシーンズ・コーポレーション 情報検索のためのデータ構造を生成するコンピュータ・システム、そのための方法、情報検索のためのデータ構造を生成するコンピュータ実行可能なプログラム、情報検索のためのデータ構造を生成するコンピュータ実行可能なプログラムを記憶したコンピュータ可読な記憶媒体、情報検索システム、およびグラフィカル・ユーザ・インタフェイス・システム
ATE427623T1 (de) 2002-12-20 2009-04-15 Nokia Corp Verfahren und vorrichtung zur organisation von benutzerseitiger information mit meta-information
US8661112B2 (en) 2002-12-20 2014-02-25 Nuance Communications, Inc. Customized interactive voice response menus
JP2004205605A (ja) 2002-12-24 2004-07-22 Yamaha Corp 音声および楽曲再生装置およびシーケンスデータフォーマット
US7703091B1 (en) 2002-12-31 2010-04-20 Emc Corporation Methods and apparatus for installing agents in a managed network
US7003464B2 (en) 2003-01-09 2006-02-21 Motorola, Inc. Dialog recognition and control in a voice browser
US7593868B2 (en) 2003-01-29 2009-09-22 Innovation Interactive Llc Systems and methods for providing contextual advertising information via a communication network
US7617094B2 (en) 2003-02-28 2009-11-10 Palo Alto Research Center Incorporated Methods, apparatus, and products for identifying a conversation
US7805299B2 (en) 2004-03-01 2010-09-28 Coifman Robert E Method and apparatus for improving the transcription accuracy of speech recognition software
ATE386318T1 (de) 2003-03-01 2008-03-15 Robert E Coifman Verbesserung der transkriptionsgenauigkeit von spracherkennungssoftware
US7809565B2 (en) 2003-03-01 2010-10-05 Coifman Robert E Method and apparatus for improving the transcription accuracy of speech recognition software
US7529671B2 (en) 2003-03-04 2009-05-05 Microsoft Corporation Block synchronous decoding
US8064753B2 (en) 2003-03-05 2011-11-22 Freeman Alan D Multi-feature media article and method for manufacture of same
JP4828091B2 (ja) 2003-03-05 2011-11-30 ヒューレット・パッカード・カンパニー クラスタリング方法プログラム及び装置
US7835504B1 (en) 2003-03-16 2010-11-16 Palm, Inc. Telephone number parsing and linking
US8244712B2 (en) 2003-03-18 2012-08-14 Apple Inc. Localized viewing of file system names
US7613797B2 (en) 2003-03-19 2009-11-03 Unisys Corporation Remote discovery and system architecture
US7496498B2 (en) 2003-03-24 2009-02-24 Microsoft Corporation Front-end architecture for a multi-lingual text-to-speech system
US8745541B2 (en) 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
US7623892B2 (en) 2003-04-02 2009-11-24 Palm, Inc. System and method for enabling a person to switch use of computing devices
US7394947B2 (en) 2003-04-08 2008-07-01 The Penn State Research Foundation System and method for automatic linguistic indexing of images by a statistical modeling approach
US7941009B2 (en) 2003-04-08 2011-05-10 The Penn State Research Foundation Real-time computerized annotation of pictures
US8224757B2 (en) 2003-04-15 2012-07-17 Sap Ag Curriculum management system
US7711550B1 (en) 2003-04-29 2010-05-04 Microsoft Corporation Methods and system for recognizing names in a computer-generated document and for providing helpful actions associated with recognized names
US7669134B1 (en) 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US7421393B1 (en) 2004-03-01 2008-09-02 At&T Corp. System for developing a dialog manager using modular spoken-dialog components
US7407384B2 (en) 2003-05-29 2008-08-05 Robert Bosch Gmbh System, method and device for language education through a voice portal server
US7493251B2 (en) 2003-05-30 2009-02-17 Microsoft Corporation Using source-channel models for word segmentation
US7496230B2 (en) 2003-06-05 2009-02-24 International Business Machines Corporation System and method for automatic natural language translation of embedded text regions in images during information transfer
WO2004110099A2 (en) 2003-06-06 2004-12-16 Gn Resound A/S A hearing aid wireless network
US7720683B1 (en) 2003-06-13 2010-05-18 Sensory, Inc. Method and apparatus of specifying and performing speech recognition operations
KR100634496B1 (ko) 2003-06-16 2006-10-13 삼성전자주식회사 입력언어모드 인식방법 및 장치와 이를 이용한 입력언어모드 자동전환방법 및 장치
US7559026B2 (en) 2003-06-20 2009-07-07 Apple Inc. Video conferencing system having focus control
US7827047B2 (en) 2003-06-24 2010-11-02 At&T Intellectual Property I, L.P. Methods and systems for assisting scheduling with automation
US7757182B2 (en) 2003-06-25 2010-07-13 Microsoft Corporation Taskbar media player
US7363586B1 (en) 2003-06-26 2008-04-22 Microsoft Corporation Component localization
US7634732B1 (en) 2003-06-26 2009-12-15 Microsoft Corporation Persona menu
US7739588B2 (en) 2003-06-27 2010-06-15 Microsoft Corporation Leveraging markup language data for semantically labeling text strings and data and for providing actions based on semantically labeled text strings and data
US7580551B1 (en) 2003-06-30 2009-08-25 The Research Foundation Of State University Of Ny Method and apparatus for analyzing and/or comparing handwritten and/or biometric samples
WO2005003944A1 (en) 2003-07-01 2005-01-13 Nokia Corporation Method and device for operating a user-input area on an electronic display device
US20080097937A1 (en) 2003-07-10 2008-04-24 Ali Hadjarian Distributed method for integrating data mining and text categorization techniques
US8373660B2 (en) 2003-07-14 2013-02-12 Matt Pallakoff System and method for a portable multimedia client
KR100811232B1 (ko) 2003-07-18 2008-03-07 엘지전자 주식회사 턴 바이 턴 네비게이션 시스템 및 차기 안내방법
US7757173B2 (en) 2003-07-18 2010-07-13 Apple Inc. Voice menu system
US20080101584A1 (en) 2003-08-01 2008-05-01 Mitel Networks Corporation Method of providing context aware announcements
US7386438B1 (en) 2003-08-04 2008-06-10 Google Inc. Identifying language attributes through probabilistic analysis
US7386110B2 (en) 2003-08-14 2008-06-10 Hewlett-Packard Development Company, L.P. Directory assistance utilizing a personalized cache
US8311835B2 (en) 2003-08-29 2012-11-13 Microsoft Corporation Assisted multi-modal dialogue
US7475010B2 (en) 2003-09-03 2009-01-06 Lingospot, Inc. Adaptive and scalable method for resolving natural language ambiguities
US7539619B1 (en) 2003-09-05 2009-05-26 Spoken Translation Ind. Speech-enabled language translation system and method enabling interactive user supervision of translation and speech recognition accuracy
US20050054381A1 (en) 2003-09-05 2005-03-10 Samsung Electronics Co., Ltd. Proactive user interface
US7475015B2 (en) 2003-09-05 2009-01-06 International Business Machines Corporation Semantic language modeling and confidence measurement
US7337108B2 (en) 2003-09-10 2008-02-26 Microsoft Corporation System and method for providing high-quality stretching and compression of a digital audio signal
JP4663223B2 (ja) 2003-09-11 2011-04-06 パナソニック株式会社 演算処理装置
WO2005027485A1 (en) 2003-09-12 2005-03-24 Nokia Corporation Method and device for handling missed calls in a mobile communications environment
US7917364B2 (en) 2003-09-23 2011-03-29 Hewlett-Packard Development Company, L.P. System and method using multiple automated speech recognition engines
US7418392B1 (en) 2003-09-25 2008-08-26 Sensory, Inc. System and method for controlling the operation of a device by voice commands
US7460652B2 (en) 2003-09-26 2008-12-02 At&T Intellectual Property I, L.P. VoiceXML and rule engine based switchboard for interactive voice response (IVR) services
US7386440B2 (en) 2003-10-01 2008-06-10 International Business Machines Corporation Method, system, and apparatus for natural language mixed-initiative dialogue processing
US20060008256A1 (en) 2003-10-01 2006-01-12 Khedouri Robert K Audio visual player apparatus and system and method of content distribution using the same
US7548651B2 (en) 2003-10-03 2009-06-16 Asahi Kasei Kabushiki Kaisha Data process unit and data process unit control program
US7620894B1 (en) 2003-10-08 2009-11-17 Apple Inc. Automatic, dynamic user interface configuration
US7318020B1 (en) 2003-10-08 2008-01-08 Microsoft Corporation Methods and systems for external localization
US7383170B2 (en) 2003-10-10 2008-06-03 At&T Knowledge Ventures, L.P. System and method for analyzing automatic speech recognition performance data
US7487092B2 (en) 2003-10-17 2009-02-03 International Business Machines Corporation Interactive debugging and tuning method for CTTS voice building
US7643990B1 (en) 2003-10-23 2010-01-05 Apple Inc. Global boundary-centric feature extraction and associated discontinuity metrics
US7409347B1 (en) 2003-10-23 2008-08-05 Apple Inc. Data-driven global boundary optimization
US7669177B2 (en) 2003-10-24 2010-02-23 Microsoft Corporation System and method for preference application installation and execution
US20050097451A1 (en) 2003-11-03 2005-05-05 Cormack Christopher J. Annotating media content with user-specified information
US7292726B2 (en) 2003-11-10 2007-11-06 Microsoft Corporation Recognition of electronic ink with late strokes
JP4516527B2 (ja) 2003-11-12 2010-08-04 本田技研工業株式会社 音声認識装置
US7584092B2 (en) 2004-11-15 2009-09-01 Microsoft Corporation Unsupervised learning of paraphrase/translation alternations and selective application thereof
US7561069B2 (en) 2003-11-12 2009-07-14 Legalview Assets, Limited Notification systems and methods enabling a response to change particulars of delivery or pickup
US7841533B2 (en) 2003-11-13 2010-11-30 Metrologic Instruments, Inc. Method of capturing and processing digital images of an object within the field of view (FOV) of a hand-supportable digitial image capture and processing system
US7779356B2 (en) 2003-11-26 2010-08-17 Griesmer James P Enhanced data tip system and method
US20090018918A1 (en) 2004-11-04 2009-01-15 Manyworlds Inc. Influence-based Social Network Advertising
US7689412B2 (en) 2003-12-05 2010-03-30 Microsoft Corporation Synonymous collocation extraction using translation information
EP1691343B1 (en) 2003-12-05 2008-09-17 Kabushiki Kaisha Kenwood Audio device control device,audio device control method, and program
JP3734815B2 (ja) 2003-12-10 2006-01-11 任天堂株式会社 携帯ゲーム装置及びゲームプログラム
US7412388B2 (en) 2003-12-12 2008-08-12 International Business Machines Corporation Language-enhanced programming tools
US7427024B1 (en) 2003-12-17 2008-09-23 Gazdzinski Mark J Chattel management apparatus and methods
US7356748B2 (en) 2003-12-19 2008-04-08 Telefonaktiebolaget Lm Ericsson (Publ) Partial spectral loss concealment in transform codecs
US7404143B2 (en) 2003-12-26 2008-07-22 Microsoft Corporation Server-based single roundtrip spell checking
CN1898721B (zh) 2003-12-26 2011-12-07 株式会社建伍 设备控制装置以及设备控制方法
US7401300B2 (en) 2004-01-09 2008-07-15 Nokia Corporation Adaptive user interface input device
US7552055B2 (en) 2004-01-10 2009-06-23 Microsoft Corporation Dialog component re-use in recognition systems
US8160883B2 (en) 2004-01-10 2012-04-17 Microsoft Corporation Focus tracking in dialogs
US8281339B1 (en) 2004-01-12 2012-10-02 United Video Properties, Inc. Customizable flip and browse overlays in an interactive television system
US7660715B1 (en) 2004-01-12 2010-02-09 Avaya Inc. Transparent monitoring and intervention to improve automatic adaptation of speech models
US7359851B2 (en) 2004-01-14 2008-04-15 Clairvoyance Corporation Method of identifying the language of a textual passage using short word and/or n-gram comparisons
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
EP1560200B8 (en) 2004-01-29 2009-08-05 Harman Becker Automotive Systems GmbH Method and system for spoken dialogue interface
US7383250B2 (en) 2004-01-30 2008-06-03 Research In Motion Limited Contact query data system and method
US7610258B2 (en) 2004-01-30 2009-10-27 Microsoft Corporation System and method for exposing a child list
US7542971B2 (en) 2004-02-02 2009-06-02 Fuji Xerox Co., Ltd. Systems and methods for collaborative note-taking
US7596499B2 (en) 2004-02-02 2009-09-29 Panasonic Corporation Multilingual text-to-speech system with limited resources
JP4262113B2 (ja) 2004-02-13 2009-05-13 シチズン電子株式会社 バックライト
US7721226B2 (en) 2004-02-18 2010-05-18 Microsoft Corporation Glom widget
US7433876B2 (en) 2004-02-23 2008-10-07 Radar Networks, Inc. Semantic web portal and platform
US8654936B1 (en) 2004-02-24 2014-02-18 At&T Intellectual Property I, L.P. Home control, monitoring and communication system using remote voice commands
KR100462292B1 (ko) 2004-02-26 2004-12-17 엔에이치엔(주) 중요도 정보를 반영한 검색 결과 리스트 제공 방법 및 그시스템
US20050195094A1 (en) 2004-03-05 2005-09-08 White Russell W. System and method for utilizing a bicycle computer to monitor athletic performance
US7693715B2 (en) 2004-03-10 2010-04-06 Microsoft Corporation Generating large units of graphonemes with mutual information criterion for letter to sound conversion
US7711129B2 (en) 2004-03-11 2010-05-04 Apple Inc. Method and system for approximating graphic equalizers using dynamic filter order reduction
US7983835B2 (en) 2004-11-03 2011-07-19 Lagassey Paul J Modular intelligent transportation system
US7478033B2 (en) 2004-03-16 2009-01-13 Google Inc. Systems and methods for translating Chinese pinyin to Chinese characters
JP4587160B2 (ja) 2004-03-26 2010-11-24 キヤノン株式会社 信号処理装置および方法
US7409337B1 (en) 2004-03-30 2008-08-05 Microsoft Corporation Natural language processing interface
US7716216B1 (en) 2004-03-31 2010-05-11 Google Inc. Document ranking based on semantic distance between terms in a document
US7747601B2 (en) 2006-08-14 2010-06-29 Inquira, Inc. Method and apparatus for identifying and classifying query intent
US8713418B2 (en) 2004-04-12 2014-04-29 Google Inc. Adding value to a rendered document
US7496512B2 (en) 2004-04-13 2009-02-24 Microsoft Corporation Refining of segmental boundaries in speech waveforms using contextual-dependent models
US7623119B2 (en) 2004-04-21 2009-11-24 Nokia Corporation Graphical functions by gestures
EP1738291A1 (en) 2004-04-23 2007-01-03 Novauris Technologies Limited Tree index based method for accessing automatic directory
JP4296598B2 (ja) 2004-04-30 2009-07-15 カシオ計算機株式会社 通信端末装置および通信端末処理プログラム
US7657844B2 (en) 2004-04-30 2010-02-02 International Business Machines Corporation Providing accessibility compliance within advanced componentry
US7447665B2 (en) 2004-05-10 2008-11-04 Kinetx, Inc. System and method of self-learning conceptual mapping to organize and interpret data
EP1751936A1 (en) 2004-05-14 2007-02-14 Philips Intellectual Property & Standards GmbH Method for transmitting messages from a sender to a recipient, a messaging system and message converting means
US7366461B1 (en) 2004-05-17 2008-04-29 Wendell Brown Method and apparatus for improving the quality of a recorded broadcast audio program
US7778830B2 (en) 2004-05-19 2010-08-17 International Business Machines Corporation Training speaker-dependent, phrase-based speech grammars using an unsupervised automated technique
US8130929B2 (en) 2004-05-25 2012-03-06 Galileo Processing, Inc. Methods for obtaining complex data in an interactive voice response system
CN100524457C (zh) 2004-05-31 2009-08-05 国际商业机器公司 文本至语音转换以及调整语料库的装置和方法
US7873149B2 (en) 2004-06-01 2011-01-18 Verizon Business Global Llc Systems and methods for gathering information
US8060138B2 (en) 2004-06-02 2011-11-15 Research In Motion Limited Handheld electronic device and associated method employing a multiple-axis input device and providing a learning function in a text disambiguation environment
US7673340B1 (en) 2004-06-02 2010-03-02 Clickfox Llc System and method for analyzing system user behavior
US8095364B2 (en) 2004-06-02 2012-01-10 Tegic Communications, Inc. Multimodal disambiguation of speech recognition
US8224649B2 (en) 2004-06-02 2012-07-17 International Business Machines Corporation Method and apparatus for remote command, control and diagnostics of systems using conversational or audio interface
US7472065B2 (en) 2004-06-04 2008-12-30 International Business Machines Corporation Generating paralinguistic phenomena via markup in text-to-speech synthesis
EP1766940A4 (en) 2004-06-04 2012-04-11 Systems Ltd Keyless SYSTEM FOR ENHANCED DATA ENTRY IN A MOBILE OR FIXED ENVIRONMENT
US20090187402A1 (en) 2004-06-04 2009-07-23 Koninklijke Philips Electronics, N.V. Performance Prediction For An Interactive Speech Recognition System
US20050289559A1 (en) 2004-06-08 2005-12-29 Daniel Illowsky Method and system for vertical layering between levels in a processing unit facilitating direct event-structures and event-queues level-to-level communication without translation
WO2005122145A1 (en) 2004-06-08 2005-12-22 Metaphor Solutions, Inc. Speech recognition dialog management
US7565104B1 (en) 2004-06-16 2009-07-21 Wendell Brown Broadcast audio program guide
US8321786B2 (en) 2004-06-17 2012-11-27 Apple Inc. Routine and interface for correcting electronic text
GB0413743D0 (en) 2004-06-19 2004-07-21 Ibm Method and system for approximate string matching
US20070214133A1 (en) 2004-06-23 2007-09-13 Edo Liberty Methods for filtering data and filling in missing data using nonlinear inference
US8099395B2 (en) 2004-06-24 2012-01-17 Oracle America, Inc. System level identity object
US7720674B2 (en) 2004-06-29 2010-05-18 Sap Ag Systems and methods for processing natural language queries
JP4416643B2 (ja) 2004-06-29 2010-02-17 キヤノン株式会社 マルチモーダル入力方法
US7505795B1 (en) 2004-07-07 2009-03-17 Advanced Micro Devices, Inc. Power save management with customized range for user configuration and tuning value based upon recent usage
US8589156B2 (en) 2004-07-12 2013-11-19 Hewlett-Packard Development Company, L.P. Allocation of speech recognition tasks and combination of results thereof
US7823123B2 (en) 2004-07-13 2010-10-26 The Mitre Corporation Semantic system for integrating software components
JP4652737B2 (ja) 2004-07-14 2011-03-16 インターナショナル・ビジネス・マシーンズ・コーポレーション 単語境界確率推定装置及び方法、確率的言語モデル構築装置及び方法、仮名漢字変換装置及び方法、並びに、未知語モデルの構築方法、
JP4301102B2 (ja) 2004-07-22 2009-07-22 ソニー株式会社 音声処理装置および音声処理方法、プログラム、並びに記録媒体
US8036893B2 (en) 2004-07-22 2011-10-11 Nuance Communications, Inc. Method and system for identifying and correcting accent-induced speech recognition difficulties
US7936861B2 (en) 2004-07-23 2011-05-03 At&T Intellectual Property I, L.P. Announcement system and method of use
US7603349B1 (en) 2004-07-29 2009-10-13 Yahoo! Inc. User interfaces for search systems using in-line contextual queries
US7725318B2 (en) 2004-07-30 2010-05-25 Nice Systems Inc. System and method for improving the accuracy of audio searching
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US7831601B2 (en) 2004-08-04 2010-11-09 International Business Machines Corporation Method for automatically searching for documents related to calendar and email entries
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
US7508324B2 (en) 2004-08-06 2009-03-24 Daniel Suraqui Finger activated reduced keyboard and a method for performing text input
JP4563106B2 (ja) 2004-08-09 2010-10-13 アルパイン株式会社 車載機及びその音声出力方法
US7869999B2 (en) 2004-08-11 2011-01-11 Nuance Communications, Inc. Systems and methods for selecting from multiple phonectic transcriptions for text-to-speech synthesis
US8407239B2 (en) 2004-08-13 2013-03-26 Google Inc. Multi-stage query processing system and method for use with tokenspace repository
US7895531B2 (en) 2004-08-16 2011-02-22 Microsoft Corporation Floating command object
US8117542B2 (en) 2004-08-16 2012-02-14 Microsoft Corporation User interface for displaying selectable software functionality controls that are contextually relevant to a selected object
US7912699B1 (en) 2004-08-23 2011-03-22 At&T Intellectual Property Ii, L.P. System and method of lattice-based search for spoken utterance retrieval
US20060048055A1 (en) 2004-08-25 2006-03-02 Jun Wu Fault-tolerant romanized input method for non-roman characters
US7853574B2 (en) 2004-08-26 2010-12-14 International Business Machines Corporation Method of generating a context-inferenced search query and of sorting a result of the query
US7477238B2 (en) 2004-08-31 2009-01-13 Research In Motion Limited Handheld electronic device with text disambiguation
RU2007114059A (ru) 2004-09-14 2008-10-27 Интиллектчуал Проперти Бэнк Корп. (Jp) Чертежное устройство для схемы взаимосвязи документов, компонующее документы в хронологическом порядке
US20060059424A1 (en) 2004-09-15 2006-03-16 Petri Jonah W Real-time data localization
US7319385B2 (en) 2004-09-17 2008-01-15 Nokia Corporation Sensor data sharing
US7447360B2 (en) 2004-09-22 2008-11-04 Microsoft Corporation Analyzing tabular structures in expression recognition
US7716056B2 (en) 2004-09-27 2010-05-11 Robert Bosch Corporation Method and system for interactive conversational dialogue for cognitively overloaded device users
KR100754385B1 (ko) 2004-09-30 2007-08-31 삼성전자주식회사 오디오/비디오 센서를 이용한 위치 파악, 추적 및 분리장치와 그 방법
US7603381B2 (en) 2004-09-30 2009-10-13 Microsoft Corporation Contextual action publishing
US8107401B2 (en) 2004-09-30 2012-01-31 Avaya Inc. Method and apparatus for providing a virtual assistant to a communication participant
US7936863B2 (en) 2004-09-30 2011-05-03 Avaya Inc. Method and apparatus for providing communication tasks in a workflow
US8744852B1 (en) 2004-10-01 2014-06-03 Apple Inc. Spoken interfaces
US7756871B2 (en) 2004-10-13 2010-07-13 Hewlett-Packard Development Company, L.P. Article extraction
US7543232B2 (en) 2004-10-19 2009-06-02 International Business Machines Corporation Intelligent web based help system
US7693719B2 (en) 2004-10-29 2010-04-06 Microsoft Corporation Providing personalized voice font for text-to-speech applications
US7735012B2 (en) 2004-11-04 2010-06-08 Apple Inc. Audio user interface for computing devices
KR101087483B1 (ko) 2004-11-04 2011-11-28 엘지전자 주식회사 네비게이션 시스템의 안내 음성신호 출력 제어방법 및 장치
US7885844B1 (en) 2004-11-16 2011-02-08 Amazon Technologies, Inc. Automatically generating task recommendations for human task performers
JP4604178B2 (ja) 2004-11-22 2010-12-22 独立行政法人産業技術総合研究所 音声認識装置及び方法ならびにプログラム
WO2006056822A1 (en) 2004-11-23 2006-06-01 Nokia Corporation Processing a message received from a mobile cellular network
US7702500B2 (en) 2004-11-24 2010-04-20 Blaedow Karen R Method and apparatus for determining the meaning of natural language
US7376645B2 (en) 2004-11-29 2008-05-20 The Intellection Group, Inc. Multimodal natural language query system and architecture for processing voice and proximity-based queries
US20080255837A1 (en) 2004-11-30 2008-10-16 Jonathan Kahn Method for locating an audio segment within an audio file
JP4297442B2 (ja) 2004-11-30 2009-07-15 富士通株式会社 手書き情報入力装置
US8498865B1 (en) 2004-11-30 2013-07-30 Vocera Communications, Inc. Speech recognition system and method using group call statistics
US7630900B1 (en) 2004-12-01 2009-12-08 Tellme Networks, Inc. Method and system for selecting grammars based on geographic information associated with a caller
GB0426347D0 (en) 2004-12-01 2005-01-05 Ibm Methods, apparatus and computer programs for automatic speech recognition
US8214214B2 (en) 2004-12-03 2012-07-03 Phoenix Solutions, Inc. Emotion detection device and method for use in distributed systems
US7636657B2 (en) 2004-12-09 2009-12-22 Microsoft Corporation Method and apparatus for automatic grammar generation from data entries
US7853445B2 (en) 2004-12-10 2010-12-14 Deception Discovery Technologies LLC Method and system for the automatic recognition of deceptive language
US8275618B2 (en) 2004-12-22 2012-09-25 Nuance Communications, Inc. Mobile dictation correction user interface
US20060200350A1 (en) 2004-12-22 2006-09-07 David Attwater Multi dimensional confidence
US7483692B2 (en) 2004-12-28 2009-01-27 Sony Ericsson Mobile Communications Ab System and method of predicting user input to a mobile terminal
US7987244B1 (en) 2004-12-30 2011-07-26 At&T Intellectual Property Ii, L.P. Network repository for voice fonts
US7444589B2 (en) 2004-12-30 2008-10-28 At&T Intellectual Property I, L.P. Automated patent office documentation
US7818672B2 (en) 2004-12-30 2010-10-19 Microsoft Corporation Floating action buttons
US8478589B2 (en) 2005-01-05 2013-07-02 At&T Intellectual Property Ii, L.P. Library of existing spoken dialog data for use in generating new natural language spoken dialog systems
US7536565B2 (en) 2005-01-07 2009-05-19 Apple Inc. Techniques for improved playlist processing on media devices
US7363227B2 (en) 2005-01-10 2008-04-22 Herman Miller, Inc. Disruption of speech understanding by adding a privacy sound thereto
US8069422B2 (en) 2005-01-10 2011-11-29 Samsung Electronics, Co., Ltd. Contextual task recommendation system and method for determining user's context and suggesting tasks
US7418389B2 (en) 2005-01-11 2008-08-26 Microsoft Corporation Defining atom units between phone and syllable for TTS systems
US20080189099A1 (en) 2005-01-12 2008-08-07 Howard Friedman Customizable Delivery of Audio Information
US7337170B2 (en) 2005-01-18 2008-02-26 International Business Machines Corporation System and method for planning and generating queries for multi-dimensional analysis using domain models and data federation
US7529677B1 (en) 2005-01-21 2009-05-05 Itt Manufacturing Enterprises, Inc. Methods and apparatus for remotely processing locally generated commands to control a local device
US8150872B2 (en) 2005-01-24 2012-04-03 The Intellection Group, Inc. Multimodal natural language query system for processing and analyzing voice and proximity-based queries
US7873654B2 (en) 2005-01-24 2011-01-18 The Intellection Group, Inc. Multimodal natural language query system for processing and analyzing voice and proximity-based queries
US8228299B1 (en) 2005-01-27 2012-07-24 Singleton Technology, Llc Transaction automation and archival system using electronic contract and disclosure units
US7508373B2 (en) 2005-01-28 2009-03-24 Microsoft Corporation Form factor and input method for language input
US7734569B2 (en) 2005-02-03 2010-06-08 Strands, Inc. Recommender system for identifying a new set of media items responsive to an input set of media items and knowledge base metrics
GB0502259D0 (en) 2005-02-03 2005-03-09 British Telecomm Document searching tool and method
US7895039B2 (en) 2005-02-04 2011-02-22 Vocollect, Inc. Methods and systems for optimizing model adaptation for a speech recognition system
US8200495B2 (en) 2005-02-04 2012-06-12 Vocollect, Inc. Methods and systems for considering information about an expected response when performing speech recognition
US8577683B2 (en) 2008-08-15 2013-11-05 Thomas Majchrowski & Associates, Inc. Multipurpose media players
US7813481B1 (en) 2005-02-18 2010-10-12 At&T Mobility Ii Llc Conversation recording with real-time notification for users of communication terminals
US8041557B2 (en) 2005-02-24 2011-10-18 Fuji Xerox Co., Ltd. Word translation device, translation method, and computer readable medium
US7634413B1 (en) 2005-02-25 2009-12-15 Apple Inc. Bitrate constrained variable bitrate audio encoding
US7412389B2 (en) 2005-03-02 2008-08-12 Yang George L Document animation system
WO2005057425A2 (en) 2005-03-07 2005-06-23 Linguatec Sprachtechnologien Gmbh Hybrid machine translation system
US7676026B1 (en) 2005-03-08 2010-03-09 Baxtech Asia Pte Ltd Desktop telephony system
JP4840355B2 (ja) 2005-03-10 2011-12-21 パナソニック株式会社 デジタル放送受信装置
JP4404211B2 (ja) 2005-03-14 2010-01-27 富士ゼロックス株式会社 マルチリンガル翻訳メモリ、翻訳方法および翻訳プログラム
US7706510B2 (en) 2005-03-16 2010-04-27 Research In Motion System and method for personalized text-to-voice synthesis
US7933399B2 (en) 2005-03-22 2011-04-26 At&T Intellectual Property I, L.P. System and method for utilizing virtual agents in an interactive voice response application
US20060218506A1 (en) 2005-03-23 2006-09-28 Edward Srenger Adaptive menu for a user interface
US7565380B1 (en) 2005-03-24 2009-07-21 Netlogic Microsystems, Inc. Memory optimized pattern searching
US7925525B2 (en) 2005-03-25 2011-04-12 Microsoft Corporation Smart reminders
JP4702959B2 (ja) 2005-03-28 2011-06-15 パナソニック株式会社 ユーザインタフェイスシステム
US8346757B1 (en) 2005-03-28 2013-01-01 Google Inc. Determining query terms of little significance
EP1872361A4 (en) 2005-03-28 2009-07-22 Lessac Technologies Inc HYBRID SPEECH SYNTHESIZER, METHOD AND USE
US7721301B2 (en) 2005-03-31 2010-05-18 Microsoft Corporation Processing files from a mobile device using voice commands
US7664558B2 (en) 2005-04-01 2010-02-16 Apple Inc. Efficient techniques for modifying audio playback rates
GB2424969A (en) 2005-04-04 2006-10-11 Messagelabs Ltd Training an anti-spam filter
WO2006105596A1 (en) 2005-04-04 2006-10-12 Mor(F) Dynamics Pty Ltd Method for transforming language into a visual form
US20080120330A1 (en) 2005-04-07 2008-05-22 Iofy Corporation System and Method for Linking User Generated Data Pertaining to Sequential Content
US20080120312A1 (en) 2005-04-07 2008-05-22 Iofy Corporation System and Method for Creating a New Title that Incorporates a Preexisting Title
US20080140702A1 (en) 2005-04-07 2008-06-12 Iofy Corporation System and Method for Correlating a First Title with a Second Title
US20080141180A1 (en) 2005-04-07 2008-06-12 Iofy Corporation Apparatus and Method for Utilizing an Information Unit to Provide Navigation Features on a Device
US20080120342A1 (en) 2005-04-07 2008-05-22 Iofy Corporation System and Method for Providing Data to be Used in a Presentation on a Device
US20080120196A1 (en) 2005-04-07 2008-05-22 Iofy Corporation System and Method for Offering a Title for Sale Over the Internet
US20080119953A1 (en) 2005-04-07 2008-05-22 Iofy Corporation Device and System for Utilizing an Information Unit to Present Content and Metadata on a Device
GB0507036D0 (en) 2005-04-07 2005-05-11 Ibm Method and system for language identification
US20080120311A1 (en) 2005-04-07 2008-05-22 Iofy Corporation Device and Method for Protecting Unauthorized Data from being used in a Presentation on a Device
GB0507148D0 (en) 2005-04-08 2005-05-18 Ibm Method and apparatus for multimodal voice and web services
US9471566B1 (en) 2005-04-14 2016-10-18 Oracle America, Inc. Method and apparatus for converting phonetic language input to written language output
US20080195601A1 (en) 2005-04-14 2008-08-14 The Regents Of The University Of California Method For Information Retrieval
US7516123B2 (en) 2005-04-14 2009-04-07 International Business Machines Corporation Page rank for the semantic web query
US8260617B2 (en) 2005-04-18 2012-09-04 Nuance Communications, Inc. Automating input when testing voice-enabled applications
US7627481B1 (en) 2005-04-19 2009-12-01 Apple Inc. Adapting masking thresholds for encoding a low frequency transient signal in audio data
US7996589B2 (en) 2005-04-22 2011-08-09 Microsoft Corporation Auto-suggest lists and handwritten input
US7584093B2 (en) 2005-04-25 2009-09-01 Microsoft Corporation Method and system for generating spelling suggestions
US7684990B2 (en) * 2005-04-29 2010-03-23 Nuance Communications, Inc. Method and apparatus for multiple value confirmation and correction in spoken dialog systems
ATE539563T1 (de) 2005-05-03 2012-01-15 Oticon As System und verfahren zum teilen von netzwerkresourcen zwischen hörgeräten
US8046374B1 (en) 2005-05-06 2011-10-25 Symantec Corporation Automatic training of a database intrusion detection system
US7606580B2 (en) 2005-05-11 2009-10-20 Aol Llc Personalized location information for mobile devices
US8117540B2 (en) 2005-05-18 2012-02-14 Neuer Wall Treuhand Gmbh Method and device incorporating improved text input mechanism
US7886233B2 (en) 2005-05-23 2011-02-08 Nokia Corporation Electronic text input involving word completion functionality for predicting word candidates for partial word inputs
US7539882B2 (en) 2005-05-30 2009-05-26 Rambus Inc. Self-powered devices and methods
FR2886445A1 (fr) 2005-05-30 2006-12-01 France Telecom Procede, dispositif et programme d'ordinateur pour la reconnaissance de la parole
US8041570B2 (en) 2005-05-31 2011-10-18 Robert Bosch Corporation Dialogue management using scripts
US8126710B2 (en) 2005-06-01 2012-02-28 Loquendo S.P.A. Conservative training method for adapting a neural network of an automatic speech recognition device
US7580576B2 (en) 2005-06-02 2009-08-25 Microsoft Corporation Stroke localization and binding to electronic document
US8477323B2 (en) 2005-06-22 2013-07-02 Xerox Corporation System and method for conveying rendering intents
US8024195B2 (en) 2005-06-27 2011-09-20 Sensory, Inc. Systems and methods of performing speech recognition using historical information
US7538685B1 (en) 2005-06-28 2009-05-26 Avaya Inc. Use of auditory feedback and audio queues in the realization of a personal virtual assistant
US8396715B2 (en) 2005-06-28 2013-03-12 Microsoft Corporation Confidence threshold tuning
US8396456B2 (en) 2005-06-28 2013-03-12 Avaya Integrated Cabinet Solutions Inc. Visual voicemail management
GB0513225D0 (en) 2005-06-29 2005-08-03 Ibm Method and system for building and contracting a linguistic dictionary
US7542967B2 (en) 2005-06-30 2009-06-02 Microsoft Corporation Searching an index of media content
US7873523B2 (en) 2005-06-30 2011-01-18 Microsoft Corporation Computer implemented method of analyzing recognition results between a user and an interactive application utilizing inferred values instead of transcribed speech
US7433869B2 (en) 2005-07-01 2008-10-07 Ebrary, Inc. Method and apparatus for document clustering and document sketching
US7826945B2 (en) 2005-07-01 2010-11-02 You Zhang Automobile speech-recognition interface
US7885390B2 (en) 2005-07-01 2011-02-08 Soleo Communications, Inc. System and method for multi-modal personal communication services
US7881283B2 (en) 2005-07-13 2011-02-01 Research In Motion Limited Customizability of event notification on telephony-enabled devices
US9094636B1 (en) 2005-07-14 2015-07-28 Zaxcom, Inc. Systems and methods for remotely controlling local audio devices in a virtual wireless multitrack recording system
US7912720B1 (en) 2005-07-20 2011-03-22 At&T Intellectual Property Ii, L.P. System and method for building emotional machines
US7809572B2 (en) 2005-07-20 2010-10-05 Panasonic Corporation Voice quality change portion locating apparatus
US7613264B2 (en) 2005-07-26 2009-11-03 Lsi Corporation Flexible sampling-rate encoder
US20090048821A1 (en) 2005-07-27 2009-02-19 Yahoo! Inc. Mobile language interpreter with text to speech
US7571092B1 (en) 2005-07-29 2009-08-04 Sun Microsystems, Inc. Method and apparatus for on-demand localization of files
US7640160B2 (en) 2005-08-05 2009-12-29 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US8694322B2 (en) 2005-08-05 2014-04-08 Microsoft Corporation Selective confirmation for execution of a voice activated user interface
US7844037B2 (en) 2005-08-08 2010-11-30 Palm, Inc. Method and device for enabling message responses to incoming phone calls
US7362738B2 (en) 2005-08-09 2008-04-22 Deere & Company Method and system for delivering information to a user
US8775189B2 (en) 2005-08-09 2014-07-08 Nuance Communications, Inc. Control center for a voice controlled wireless communication device system
US7620549B2 (en) 2005-08-10 2009-11-17 Voicebox Technologies, Inc. System and method of supporting adaptive misrecognition in conversational speech
US8689135B2 (en) 2005-08-11 2014-04-01 Koninklijke Philips N.V. Method of driving an interactive system and user interface system
WO2007022533A2 (en) 2005-08-19 2007-02-22 Gracenote, Inc. Method and system to control operation of a playback device
US7949529B2 (en) 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
EP1919771A4 (en) 2005-08-31 2010-06-09 Intuview Itd EXPERT DECISION SUPPORT SYSTEM AND REAL-TIME METHODS OF OPERATING DOCUMENTS IN LANGUAGES OTHER THAN ENGLISH
US8265939B2 (en) 2005-08-31 2012-09-11 Nuance Communications, Inc. Hierarchical methods and apparatus for extracting user intent from spoken utterances
WO2007027989A2 (en) 2005-08-31 2007-03-08 Voicebox Technologies, Inc. Dynamic speech sharpening
US7443316B2 (en) 2005-09-01 2008-10-28 Motorola, Inc. Entering a character into an electronic device
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
GB2430101A (en) 2005-09-09 2007-03-14 Mitsubishi Electric Inf Tech Applying metadata for video navigation
US8688671B2 (en) 2005-09-14 2014-04-01 Millennial Media Managing sponsored content based on geographic region
US8819659B2 (en) 2005-09-14 2014-08-26 Millennial Media, Inc. Mobile search service instant activation
US8635073B2 (en) 2005-09-14 2014-01-21 At&T Intellectual Property I, L.P. Wireless multimodal voice browser for wireline-based IPTV services
US7378963B1 (en) 2005-09-20 2008-05-27 Begault Durand R Reconfigurable auditory-visual display
US8275399B2 (en) 2005-09-21 2012-09-25 Buckyball Mobile Inc. Dynamic context-data tag cloud
US7788590B2 (en) 2005-09-26 2010-08-31 Microsoft Corporation Lightweight reference user interface
US7505784B2 (en) 2005-09-26 2009-03-17 Barbera Melvin A Safety features for portable electronic device
US8270933B2 (en) 2005-09-26 2012-09-18 Zoomsafer, Inc. Safety features for portable electronic device
US7992085B2 (en) 2005-09-26 2011-08-02 Microsoft Corporation Lightweight reference user interface
US9009046B1 (en) 2005-09-27 2015-04-14 At&T Intellectual Property Ii, L.P. System and method for disambiguating multiple intents in a natural language dialog system
US7693716B1 (en) 2005-09-27 2010-04-06 At&T Intellectual Property Ii, L.P. System and method of developing a TTS voice
US7711562B1 (en) 2005-09-27 2010-05-04 At&T Intellectual Property Ii, L.P. System and method for testing a TTS voice
JP5120826B2 (ja) 2005-09-29 2013-01-16 独立行政法人産業技術総合研究所 発音診断装置、発音診断方法、記録媒体、及び、発音診断プログラム
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
JP4908094B2 (ja) 2005-09-30 2012-04-04 株式会社リコー 情報処理システム、情報処理方法及び情報処理プログラム
US7577522B2 (en) 2005-12-05 2009-08-18 Outland Research, Llc Spatially associated personal reminder system and method
US7930168B2 (en) 2005-10-04 2011-04-19 Robert Bosch Gmbh Natural language processing of disfluent sentences
CN100483399C (zh) 2005-10-09 2009-04-29 株式会社东芝 训练音译模型、切分统计模型的方法和装置
US9454747B2 (en) 2005-10-11 2016-09-27 Aol Inc. Ordering of conversations based on monitored recipient user interaction with corresponding electronic messages
US8401163B1 (en) 2005-10-18 2013-03-19 Callwave Communications, Llc Methods and systems for call processing and for providing call progress status over a network
US7707032B2 (en) 2005-10-20 2010-04-27 National Cheng Kung University Method and system for matching speech data
US8204266B2 (en) 2005-10-21 2012-06-19 Sfx Technologies Limited Audio devices
US20070094024A1 (en) 2005-10-22 2007-04-26 International Business Machines Corporation System and method for improving text input in a shorthand-on-keyboard interface
US8688148B2 (en) 2005-10-25 2014-04-01 Qualcomm Incorporated Dynamic resource matching system
US7395959B2 (en) 2005-10-27 2008-07-08 International Business Machines Corporation Hands free contact database information entry at a communication device
US7792253B2 (en) 2005-10-27 2010-09-07 International Business Machines Corporation Communications involving devices having different communication modes
US7778632B2 (en) 2005-10-28 2010-08-17 Microsoft Corporation Multi-modal device capable of automated actions
KR100755678B1 (ko) 2005-10-28 2007-09-05 삼성전자주식회사 개체명 검출 장치 및 방법
US9026915B1 (en) 2005-10-31 2015-05-05 At&T Intellectual Property Ii, L.P. System and method for creating a presentation using natural language
US7936339B2 (en) 2005-11-01 2011-05-03 Leapfrog Enterprises, Inc. Method and system for invoking computer functionality by interaction with dynamically generated interface regions of a writing surface
US7640158B2 (en) 2005-11-08 2009-12-29 Multimodal Technologies, Inc. Automatic detection and application of editing patterns in draft documents
US7676463B2 (en) 2005-11-15 2010-03-09 Kroll Ontrack, Inc. Information exploration systems and method
US20070112572A1 (en) 2005-11-15 2007-05-17 Fail Keith W Method and apparatus for assisting vision impaired individuals with selecting items from a list
US8175874B2 (en) 2005-11-17 2012-05-08 Shaul Shimhi Personalized voice activity detection
US8042048B2 (en) 2005-11-17 2011-10-18 Att Knowledge Ventures, L.P. System and method for home automation
US7909326B2 (en) 2005-11-22 2011-03-22 Walker Digital, Llc Systems, products and processes for conducting instant lottery games
US8055707B2 (en) 2005-11-30 2011-11-08 Alcatel Lucent Calendar interface for digital communications
WO2007062529A1 (en) 2005-11-30 2007-06-07 Linguacomm Enterprises Inc. Interactive language education system and method
US8209182B2 (en) 2005-11-30 2012-06-26 University Of Southern California Emotion recognition system
DE102005057406A1 (de) 2005-11-30 2007-06-06 Valenzuela, Carlos Alberto, Dr.-Ing. Verfahren zur Aufnahme einer Tonquelle mit zeitlich variabler Richtcharakteristik und zur Wiedergabe sowie System zur Durchführung des Verfahrens
TW200611546A (en) 2005-12-02 2006-04-01 Univ Chang Gung Mobile phone providing remotely activated and touch power-on and voice response system
EP1958377B1 (en) 2005-12-05 2009-05-27 Telefonaktiebolaget LM Ericsson (publ) A method and a system relating to network management
KR100810500B1 (ko) 2005-12-08 2008-03-07 한국전자통신연구원 대화형 음성 인터페이스 시스템에서의 사용자 편의성증대 방법
US7461043B2 (en) 2005-12-14 2008-12-02 Siemens Aktiengesellschaft Methods and apparatus to abstract events in software applications or services
GB2433403B (en) 2005-12-16 2009-06-24 Emil Ltd A text editing apparatus and method
US9330668B2 (en) 2005-12-20 2016-05-03 International Business Machines Corporation Sharing voice application processing via markup
DE102005061365A1 (de) 2005-12-21 2007-06-28 Siemens Ag Verfahren zur Ansteuerung zumindest einer ersten und zweiten Hintergrundapplikation über ein universelles Sprachdialogsystem
US8234494B1 (en) 2005-12-21 2012-07-31 At&T Intellectual Property Ii, L.P. Speaker-verification digital signatures
US7996228B2 (en) 2005-12-22 2011-08-09 Microsoft Corporation Voice initiated network operations
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7599918B2 (en) 2005-12-29 2009-10-06 Microsoft Corporation Dynamic search with implicit user intention mining
US7685144B1 (en) 2005-12-29 2010-03-23 Google Inc. Dynamically autocompleting a data entry
TWI302265B (en) 2005-12-30 2008-10-21 High Tech Comp Corp Moving determination apparatus
US7890330B2 (en) 2005-12-30 2011-02-15 Alpine Electronics Inc. Voice recording tool for creating database used in text to speech synthesis system
KR101265263B1 (ko) 2006-01-02 2013-05-16 삼성전자주식회사 발음 기호를 이용한 문자열 매칭 방법 및 시스템과 그방법을 기록한 컴퓨터 판독 가능한 기록매체
US7673238B2 (en) 2006-01-05 2010-03-02 Apple Inc. Portable media device with video acceleration capabilities
US7684991B2 (en) 2006-01-05 2010-03-23 Alpine Electronics, Inc. Digital audio file search method and apparatus using text-to-speech processing
US8006180B2 (en) 2006-01-10 2011-08-23 Mircrosoft Corporation Spell checking in network browser based applications
JP2007183864A (ja) 2006-01-10 2007-07-19 Fujitsu Ltd ファイル検索方法及びそのシステム
US8775526B2 (en) 2006-01-16 2014-07-08 Zlango Ltd. Iconic communication
JP4241736B2 (ja) 2006-01-19 2009-03-18 株式会社東芝 音声処理装置及びその方法
FR2896603B1 (fr) 2006-01-20 2008-05-02 Thales Sa Procede et dispositif pour extraire des informations et les transformer en donnees qualitatives d'un document textuel
US9600568B2 (en) 2006-01-23 2017-03-21 Veritas Technologies Llc Methods and systems for automatic evaluation of electronic discovery review and productions
US9275129B2 (en) 2006-01-23 2016-03-01 Symantec Corporation Methods and systems to efficiently find similar and near-duplicate emails and files
US7929805B2 (en) 2006-01-31 2011-04-19 The Penn State Research Foundation Image-based CAPTCHA generation system
IL174107A0 (en) 2006-02-01 2006-08-01 Grois Dan Method and system for advertising by means of a search engine over a data network
US7818291B2 (en) 2006-02-03 2010-10-19 The General Electric Company Data object access system and method using dedicated task object
US8352183B2 (en) 2006-02-04 2013-01-08 Microsoft Corporation Maps for social networking and geo blogs
DE602006008570D1 (de) 2006-02-10 2009-10-01 Harman Becker Automotive Sys System für sprachgesteuerte Auswahl einer Audiodatei und Verfahren dafür
US7836437B2 (en) 2006-02-10 2010-11-16 Microsoft Corporation Semantic annotations for virtual objects
US20090222270A2 (en) 2006-02-14 2009-09-03 Ivc Inc. Voice command interface device
US9101279B2 (en) 2006-02-15 2015-08-11 Virtual Video Reality By Ritchey, Llc Mobile user borne brain activity data and surrounding environment data correlation system
US7541940B2 (en) 2006-02-16 2009-06-02 International Business Machines Corporation Proximity-based task alerts
EP3534277B1 (en) 2006-02-17 2021-10-06 Google LLC Encoding and adaptive, scalable accessing of distributed models
KR100764174B1 (ko) 2006-03-03 2007-10-08 삼성전자주식회사 음성 대화 서비스 장치 및 방법
US7983910B2 (en) 2006-03-03 2011-07-19 International Business Machines Corporation Communicating across voice and text channels with emotion preservation
US9250703B2 (en) 2006-03-06 2016-02-02 Sony Computer Entertainment Inc. Interface with gaze detection and voice input
CN1984207B (zh) 2006-03-07 2010-05-12 华为技术有限公司 一种PoC业务的计费方法及设备
US8532678B2 (en) 2006-03-08 2013-09-10 Tomtom International B.V. Portable GPS navigation device
ATE414975T1 (de) 2006-03-17 2008-12-15 Svox Ag Text-zu-sprache-synthese
US7752152B2 (en) 2006-03-17 2010-07-06 Microsoft Corporation Using predictive user models for language modeling on a personal device with user behavior models based on statistical modeling
DE102006037156A1 (de) 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
JP4734155B2 (ja) 2006-03-24 2011-07-27 株式会社東芝 音声認識装置、音声認識方法および音声認識プログラム
US20070233806A1 (en) 2006-03-29 2007-10-04 Mehrzad Asadi Method and system for conducting an internet search using a mobile radio terminal
US8018431B1 (en) 2006-03-29 2011-09-13 Amazon Technologies, Inc. Page turner for handheld electronic book reader device
US7724696B1 (en) 2006-03-29 2010-05-25 Amazon Technologies, Inc. Predictive reader power management
US7930183B2 (en) 2006-03-29 2011-04-19 Microsoft Corporation Automatic identification of dialog timing problems for an interactive speech dialog application using speech log data indicative of cases of barge-in and timing problems
US8244545B2 (en) 2006-03-30 2012-08-14 Microsoft Corporation Dialog repair based on discrepancies between user model predictions and speech recognition results
US7283072B1 (en) 2006-03-30 2007-10-16 International Business Machines Corporation Methods of creating a dictionary for data compression
WO2007114226A1 (ja) 2006-03-31 2007-10-11 Pioneer Corporation 音声入力支援装置、その方法、そのプログラム、そのプログラムを記録した記録媒体、および、ナビゲーション装置
US7756708B2 (en) 2006-04-03 2010-07-13 Google Inc. Automatic language model update
CN101449538A (zh) 2006-04-04 2009-06-03 约翰逊控制技术公司 媒体文件的文本-语法改进
US8510109B2 (en) 2007-08-22 2013-08-13 Canyon Ip Holdings Llc Continuous speech transcription performance indication
US7797629B2 (en) 2006-04-05 2010-09-14 Research In Motion Limited Handheld electronic device and method for performing optimized spell checking during text entry by providing a sequentially ordered series of spell-check algorithms
US7996769B2 (en) 2006-04-05 2011-08-09 Research In Motion Limited Handheld electronic device and method for performing spell checking during text entry and for providing a spell-check learning feature
US7777717B2 (en) 2006-04-05 2010-08-17 Research In Motion Limited Handheld electronic device and method for performing spell checking during text entry and for integrating the output from such spell checking into the output from disambiguation
US7693717B2 (en) 2006-04-12 2010-04-06 Custom Speech Usa, Inc. Session file modification with annotation using speech recognition or text to speech
ATE448638T1 (de) 2006-04-13 2009-11-15 Fraunhofer Ges Forschung Audiosignaldekorrelator
US7707027B2 (en) 2006-04-13 2010-04-27 Nuance Communications, Inc. Identification and rejection of meaningless input during natural language classification
US8046363B2 (en) 2006-04-13 2011-10-25 Lg Electronics Inc. System and method for clustering documents
KR100744380B1 (ko) 2006-04-17 2007-07-30 삼성전자주식회사 외부 디스플레이 장치로 영상을 출력할 수 있는 기능을구비한 이동 단말기에서의 디스플레이 제어 장치 및 방법
US7475063B2 (en) 2006-04-19 2009-01-06 Google Inc. Augmenting queries with synonyms selected using language statistics
US8077153B2 (en) 2006-04-19 2011-12-13 Microsoft Corporation Precise selection techniques for multi-touch screens
US8103947B2 (en) 2006-04-20 2012-01-24 Timecove Corporation Collaborative system and method for generating biographical accounts
WO2007127695A2 (en) 2006-04-25 2007-11-08 Elmo Weber Frank Prefernce based automatic media summarization
KR100771626B1 (ko) 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
US20070255554A1 (en) 2006-04-26 2007-11-01 Lucent Technologies Inc. Language translation service for text message communications
US8214213B1 (en) 2006-04-27 2012-07-03 At&T Intellectual Property Ii, L.P. Speech recognition based on pronunciation modeling
US7757176B2 (en) 2006-05-03 2010-07-13 Sanjay Vakil Method and system for collective calendaring
US9020804B2 (en) 2006-05-10 2015-04-28 Xerox Corporation Method for aligning sentences at the word level enforcing selective contiguity constraints
WO2007129267A2 (en) 2006-05-10 2007-11-15 Koninklijke Philips Electronics N.V. Automatic external defibrillator with enhanced clarity of audible prompts
WO2007133716A2 (en) 2006-05-11 2007-11-22 Cerebode, Inc. Multimodal communication and command control systems and related methods
CA2650612C (en) 2006-05-12 2012-08-07 Nokia Corporation An adaptive user interface
CN101075228B (zh) 2006-05-15 2012-05-23 松下电器产业株式会社 识别自然语言中的命名实体的方法和装置
US7779353B2 (en) 2006-05-19 2010-08-17 Microsoft Corporation Error checking web documents
US7596765B2 (en) 2006-05-23 2009-09-29 Sony Ericsson Mobile Communications Ab Sound feedback on menu navigation
US7831423B2 (en) 2006-05-25 2010-11-09 Multimodal Technologies, Inc. Replacing text representing a concept with an alternate written form of the concept
US20100257160A1 (en) 2006-06-07 2010-10-07 Yu Cao Methods & apparatus for searching with awareness of different types of information
US7523108B2 (en) 2006-06-07 2009-04-21 Platformation, Inc. Methods and apparatus for searching with awareness of geography and languages
US7483894B2 (en) 2006-06-07 2009-01-27 Platformation Technologies, Inc Methods and apparatus for entity search
TW200801988A (en) 2006-06-08 2008-01-01 George Ko Concurrent multilingual translation system
US7853577B2 (en) 2006-06-09 2010-12-14 Ebay Inc. Shopping context engine
US8015183B2 (en) 2006-06-12 2011-09-06 Nokia Corporation System and methods for providing statstically interesting geographical information based on queries to a geographic search engine
US7774202B2 (en) 2006-06-12 2010-08-10 Lockheed Martin Corporation Speech activated control system and related methods
US8332218B2 (en) 2006-06-13 2012-12-11 Nuance Communications, Inc. Context-based grammars for automated speech recognition
US9219767B2 (en) 2006-06-22 2015-12-22 Linkedin Corporation Recording and indicating preferences
US20080141125A1 (en) 2006-06-23 2008-06-12 Firooz Ghassabian Combined data entry systems
US20110077943A1 (en) 2006-06-26 2011-03-31 Nec Corporation System for generating language model, method of generating language model, and program for language model generation
JP4675840B2 (ja) 2006-06-29 2011-04-27 三菱電機株式会社 リモートコントローラ並びに家電機器
US7548895B2 (en) 2006-06-30 2009-06-16 Microsoft Corporation Communication-prompted user assistance
US7586423B2 (en) 2006-06-30 2009-09-08 Research In Motion Limited Handheld electronic device and method for dual-mode disambiguation of text input
US8279171B2 (en) 2006-07-06 2012-10-02 Panasonic Corporation Voice input device
US8050500B1 (en) 2006-07-06 2011-11-01 Senapps, LLC Recognition method and system
US20080010387A1 (en) 2006-07-07 2008-01-10 Bryce Allen Curtis Method for defining a Wiki page layout using a Wiki page
US20080031475A1 (en) 2006-07-08 2008-02-07 Personics Holdings Inc. Personal audio assistant device and method
EP1879000A1 (en) 2006-07-10 2008-01-16 Harman Becker Automotive Systems GmbH Transmission of text messages by navigation systems
JP2008021002A (ja) 2006-07-11 2008-01-31 Fuji Xerox Co Ltd Webサーバ装置、表示情報音声合成装置及びプログラム
US7747445B2 (en) 2006-07-12 2010-06-29 Nuance Communications, Inc. Distinguishing among different types of abstractions consisting of plurality of commands specified by particular sequencing and or timing or no timing and sequencing using voice commands
US7756710B2 (en) 2006-07-13 2010-07-13 Sri International Method and apparatus for error correction in speech recognition applications
US20080016575A1 (en) 2006-07-14 2008-01-17 Motorola, Inc. Method and system of auto message deletion using expiration
TWI312103B (en) 2006-07-17 2009-07-11 Asia Optical Co Inc Image pickup systems and methods
US20080013751A1 (en) 2006-07-17 2008-01-17 Per Hiselius Volume dependent audio frequency gain profile
US20080022208A1 (en) 2006-07-18 2008-01-24 Creative Technology Ltd System and method for personalizing the user interface of audio rendering devices
JP2008026381A (ja) 2006-07-18 2008-02-07 Konica Minolta Business Technologies Inc 画像形成装置
US20080042970A1 (en) 2006-07-24 2008-02-21 Yih-Shiuan Liang Associating a region on a surface with a sound or with another region
US8234120B2 (en) 2006-07-26 2012-07-31 Nuance Communications, Inc. Performing a safety analysis for user-defined voice commands to ensure that the voice commands do not cause speech recognition ambiguities
US20080027726A1 (en) 2006-07-28 2008-01-31 Eric Louis Hansen Text to audio mapping, and animation of the text
US8135047B2 (en) 2006-07-31 2012-03-13 Qualcomm Incorporated Systems and methods for including an identifier with a packet associated with a speech signal
JP4728905B2 (ja) 2006-08-02 2011-07-20 クラリオン株式会社 音声対話装置および音声対話プログラム
KR100883652B1 (ko) 2006-08-03 2009-02-18 삼성전자주식회사 음성 구간 검출 방법 및 장치, 및 이를 이용한 음성 인식시스템
US8090575B2 (en) 2006-08-04 2012-01-03 Jps Communications, Inc. Voice modulation recognition in a radio-to-SIP adapter
US20080034044A1 (en) 2006-08-04 2008-02-07 International Business Machines Corporation Electronic mail reader capable of adapting gender and emotions of sender
US20080046948A1 (en) 2006-08-07 2008-02-21 Apple Computer, Inc. Creation, management and delivery of personalized media items
US20080040339A1 (en) 2006-08-07 2008-02-14 Microsoft Corporation Learning question paraphrases from log data
US7646296B2 (en) 2006-08-11 2010-01-12 Honda Motor Co., Ltd. Method and system for receiving and sending navigational data via a wireless messaging service on a navigation system
US8134481B2 (en) 2006-08-11 2012-03-13 Honda Motor Co., Ltd. Method and system for receiving and sending navigational data via a wireless messaging service on a navigation system
US7796980B1 (en) 2006-08-11 2010-09-14 Sprint Communications Company L.P. Remote mobile voice control of digital/personal video recorder
KR100753838B1 (ko) 2006-08-11 2007-08-31 한국전자통신연구원 적응형 차량 운전지원 장치 및 방법
KR20080015567A (ko) 2006-08-16 2008-02-20 삼성전자주식회사 휴대 장치를 위한 음성기반 파일 정보 안내 시스템 및 방법
KR100764649B1 (ko) 2006-08-18 2007-10-08 삼성전자주식회사 휴대용 단말기에서 미디어 플레이어를 제어하기 위한 장치및 방법
DE102006039126A1 (de) 2006-08-21 2008-03-06 Robert Bosch Gmbh Verfahren zur Spracherkennung und Sprachwiedergabe
US20080043943A1 (en) 2006-08-21 2008-02-21 Pinger, Inc. Graphical user interface for creating and accessing voice messages
US20080059200A1 (en) 2006-08-22 2008-03-06 Accenture Global Services Gmbh Multi-Lingual Telephonic Service
US20080059190A1 (en) 2006-08-22 2008-03-06 Microsoft Corporation Speech unit selection using HMM acoustic models
US20080052262A1 (en) 2006-08-22 2008-02-28 Serhiy Kosinov Method for personalized named entity recognition
US7970216B2 (en) 2006-08-24 2011-06-28 Dell Products L.P. Methods and apparatus for reducing storage size
US20100174544A1 (en) 2006-08-28 2010-07-08 Mark Heifets System, method and end-user device for vocal delivery of textual data
CN101513030A (zh) 2006-08-30 2009-08-19 日本电气株式会社 语音混合方法、多点会议服务器和利用该方法的程序
US8239480B2 (en) 2006-08-31 2012-08-07 Sony Ericsson Mobile Communications Ab Methods of searching using captured portions of digital audio content and additional information separate therefrom and related systems and computer program products
US9071701B2 (en) 2006-08-31 2015-06-30 Qualcomm Incorporated Using wireless characteristic to trigger generation of position fix
US9552349B2 (en) 2006-08-31 2017-01-24 International Business Machines Corporation Methods and apparatus for performing spelling corrections using one or more variant hash tables
US20080055194A1 (en) 2006-08-31 2008-03-06 Motorola, Inc. Method and system for context based user interface information presentation and positioning
US8402499B2 (en) 2006-08-31 2013-03-19 Accenture Global Services Gmbh Voicemail interface system and method
US20080077393A1 (en) 2006-09-01 2008-03-27 Yuqing Gao Virtual keyboard adaptation for multilingual input
US7881928B2 (en) 2006-09-01 2011-02-01 International Business Machines Corporation Enhanced linguistic transformation
US7689408B2 (en) 2006-09-01 2010-03-30 Microsoft Corporation Identifying language of origin for words using estimates of normalized appearance frequency
JP4666648B2 (ja) 2006-09-01 2011-04-06 本田技研工業株式会社 音声応答システム、音声応答プログラム
US8170790B2 (en) 2006-09-05 2012-05-01 Garmin Switzerland Gmbh Apparatus for switching navigation device mode
US7683886B2 (en) 2006-09-05 2010-03-23 Research In Motion Limited Disambiguated text message review function
US7996792B2 (en) 2006-09-06 2011-08-09 Apple Inc. Voicemail manager for portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8253695B2 (en) 2006-09-06 2012-08-28 Apple Inc. Email client for a portable multifunction device
US7771320B2 (en) 2006-09-07 2010-08-10 Nike, Inc. Athletic performance sensing and/or tracking systems and methods
US8589869B2 (en) 2006-09-07 2013-11-19 Wolfram Alpha Llc Methods and systems for determining a formula
TWI322610B (en) 2006-09-08 2010-03-21 Htc Corp Handheld electronic device
JP2008064687A (ja) 2006-09-08 2008-03-21 Toyota Motor Corp 走行情報案内装置
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US8036766B2 (en) 2006-09-11 2011-10-11 Apple Inc. Intelligent audio mixing among media playback and at least one other non-playback application
US9892650B2 (en) 2006-09-11 2018-02-13 Houghton Mifflin Harcourt Publishing Company Recovery of polled data after an online test platform failure
US8374874B2 (en) 2006-09-11 2013-02-12 Nuance Communications, Inc. Establishing a multimodal personality for a multimodal application in dependence upon attributes of user interaction
EP2082395A2 (en) 2006-09-14 2009-07-29 Google, Inc. Integrating voice-enabled local search and contact lists
US20100278453A1 (en) 2006-09-15 2010-11-04 King Martin T Capture and display of annotations in paper and electronic documents
WO2008033095A1 (en) 2006-09-15 2008-03-20 Agency For Science, Technology And Research Apparatus and method for speech utterance verification
US8027837B2 (en) 2006-09-15 2011-09-27 Apple Inc. Using non-speech sounds during text-to-speech synthesis
US8407229B2 (en) 2006-09-19 2013-03-26 Iac Search & Media, Inc. Systems and methods for aggregating search results
US20080076972A1 (en) 2006-09-21 2008-03-27 Apple Inc. Integrated sensors for tracking performance metrics
JP4393494B2 (ja) 2006-09-22 2010-01-06 株式会社東芝 機械翻訳装置、機械翻訳方法および機械翻訳プログラム
US20080077384A1 (en) 2006-09-22 2008-03-27 International Business Machines Corporation Dynamically translating a software application to a user selected target language that is not natively provided by the software application
US7865282B2 (en) 2006-09-22 2011-01-04 General Motors Llc Methods of managing communications for an in-vehicle telematics system
US20080084974A1 (en) 2006-09-25 2008-04-10 International Business Machines Corporation Method and system for interactively synthesizing call center responses using multi-language text-to-speech synthesizers
KR100813170B1 (ko) 2006-09-27 2008-03-17 삼성전자주식회사 사진 의미 인덱싱 방법 및 그 시스템
US7649454B2 (en) 2006-09-28 2010-01-19 Ektimisi Semiotics Holdings, Llc System and method for providing a task reminder based on historical travel information
US7930197B2 (en) 2006-09-28 2011-04-19 Microsoft Corporation Personal data mining
US8014308B2 (en) 2006-09-28 2011-09-06 Microsoft Corporation Hardware architecture for cloud services
US7528713B2 (en) 2006-09-28 2009-05-05 Ektimisi Semiotics Holdings, Llc Apparatus and method for providing a task reminder based on travel history
US8214208B2 (en) 2006-09-28 2012-07-03 Reqall, Inc. Method and system for sharing portable voice profiles
US7885222B2 (en) 2006-09-29 2011-02-08 Advanced Micro Devices, Inc. Task scheduler responsive to connectivity prerequisites
US7831432B2 (en) 2006-09-29 2010-11-09 International Business Machines Corporation Audio menus describing media contents of media players
US7945470B1 (en) 2006-09-29 2011-05-17 Amazon Technologies, Inc. Facilitating performance of submitted tasks by mobile task performers
JP2008090545A (ja) 2006-09-29 2008-04-17 Toshiba Corp 音声対話装置および音声対話方法
US20080082338A1 (en) 2006-09-29 2008-04-03 O'neil Michael P Systems and methods for secure voice identification and medical device interface
US20080082390A1 (en) 2006-10-02 2008-04-03 International Business Machines Corporation Methods for Generating Auxiliary Data Operations for a Role Based Personalized Business User Workplace
US7673251B1 (en) 2006-10-02 2010-03-02 Adobe Systems, Incorporated Panel presentation
US7801721B2 (en) 2006-10-02 2010-09-21 Google Inc. Displaying original text in a user interface with translated text
DE602006005055D1 (de) 2006-10-02 2009-03-19 Harman Becker Automotive Sys Nutzung von Sprachidentifizierung von Mediendateidaten in Sprachdialogsystemen
JP2008092269A (ja) 2006-10-02 2008-04-17 Matsushita Electric Ind Co Ltd ハンズフリー通話装置
JP2008096541A (ja) 2006-10-06 2008-04-24 Canon Inc 音声処理装置およびその制御方法
US8434133B2 (en) 2006-10-06 2013-04-30 Fmr Llc Single-party, secure multi-channel authentication
US7937075B2 (en) 2006-10-06 2011-05-03 At&T Intellectual Property I, L.P. Mode changing of a mobile communications device and vehicle settings when the mobile communications device is in proximity to a vehicle
US8024193B2 (en) 2006-10-10 2011-09-20 Apple Inc. Methods and apparatus related to pruning for concatenative text-to-speech synthesis
US8145473B2 (en) 2006-10-10 2012-03-27 Abbyy Software Ltd. Deep model statistics method for machine translation
CN101162153A (zh) 2006-10-11 2008-04-16 丁玉国 一种语音控制的车载gps导航系统及其实现方法
US20100278391A1 (en) 2006-10-12 2010-11-04 Yung-Tai Hsu Apparatus for behavior analysis and method thereof
US20080091426A1 (en) 2006-10-12 2008-04-17 Rod Rempel Adaptive context for automatic speech recognition systems
US8041568B2 (en) 2006-10-13 2011-10-18 Google Inc. Business listing search
US7793228B2 (en) 2006-10-13 2010-09-07 Apple Inc. Method, system, and graphical user interface for text entry with partial word display
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US7697922B2 (en) 2006-10-18 2010-04-13 At&T Intellectual Property I., L.P. Event notification systems and related methods
US20080098480A1 (en) 2006-10-20 2008-04-24 Hewlett-Packard Development Company Lp Information association
WO2008050225A2 (en) 2006-10-24 2008-05-02 Edgetech America, Inc. Method for spell-checking location-bound words within a document
US20080096533A1 (en) 2006-10-24 2008-04-24 Kallideas Spa Virtual Assistant With Real-Time Emotions
US20080124695A1 (en) 2006-10-26 2008-05-29 Cary Michael Myers Non-intrusive audio book
US8972268B2 (en) 2008-04-15 2015-03-03 Facebook, Inc. Enhanced speech-to-speech translation system and methods for adding a new word
US8255216B2 (en) 2006-10-30 2012-08-28 Nuance Communications, Inc. Speech recognition of character sequences
US8037179B2 (en) 2006-11-02 2011-10-11 Storz Endoskop Produktions Gmbh Device control system employing extensible markup language for defining information resources
JP2008116298A (ja) 2006-11-02 2008-05-22 Denso Corp 車載緊急通報装置及び車載緊急通報システム
US9471333B2 (en) 2006-11-03 2016-10-18 Conceptual Speech, Llc Contextual speech-recognition user-interface driven system and method
US20080109222A1 (en) 2006-11-04 2008-05-08 Edward Liu Advertising using extracted context sensitive information and data of interest from voice/audio transmissions and recordings
US7873517B2 (en) 2006-11-09 2011-01-18 Volkswagen Of America, Inc. Motor vehicle with a speech interface
US9329753B2 (en) 2006-11-10 2016-05-03 Blackberry Limited Handheld electronic device having selectable language indicator and menus for language selection and method therefor
US8718538B2 (en) 2006-11-13 2014-05-06 Joseph Harb Real-time remote purchase-list capture system
US9355568B2 (en) 2006-11-13 2016-05-31 Joyce S. Stone Systems and methods for providing an electronic reader having interactive and educational features
US20080114841A1 (en) 2006-11-14 2008-05-15 Lambert Daniel T System and method for interfacing with event management software
US20080114604A1 (en) 2006-11-15 2008-05-15 Motorola, Inc. Method and system for a user interface using higher order commands
US7904298B2 (en) 2006-11-17 2011-03-08 Rao Ashwin P Predictive speech-to-text input
CN101193460B (zh) 2006-11-20 2011-09-28 松下电器产业株式会社 检测声音的装置及方法
US8090194B2 (en) 2006-11-21 2012-01-03 Mantis Vision Ltd. 3D geometric modeling and motion capture using both single and dual imaging
WO2008061903A1 (en) 2006-11-22 2008-05-29 Agfa Healthcate Inc. Method and system for client / server distributed image processing
US8010338B2 (en) 2006-11-27 2011-08-30 Sony Ericsson Mobile Communications Ab Dynamic modification of a messaging language
US20080126075A1 (en) 2006-11-27 2008-05-29 Sony Ericsson Mobile Communications Ab Input prediction
US8600760B2 (en) 2006-11-28 2013-12-03 General Motors Llc Correcting substitution errors during automatic speech recognition by accepting a second best when first best is confusable
US20080126093A1 (en) 2006-11-28 2008-05-29 Nokia Corporation Method, Apparatus and Computer Program Product for Providing a Language Based Interactive Multimedia System
US8055502B2 (en) 2006-11-28 2011-11-08 General Motors Llc Voice dialing using a rejection reference
JP2008134949A (ja) 2006-11-29 2008-06-12 Fujitsu Ltd 携帯端末装置及びスケジュール作成画面表示方法
US9830912B2 (en) 2006-11-30 2017-11-28 Ashwin P Rao Speak and touch auto correction interface
EP1939860B1 (en) 2006-11-30 2009-03-18 Harman Becker Automotive Systems GmbH Interactive speech recognition system
US8355915B2 (en) 2006-11-30 2013-01-15 Rao Ashwin P Multimodal speech recognition system
GB0623915D0 (en) 2006-11-30 2007-01-10 Ibm Phonetic decoding and concatentive speech synthesis
US8401847B2 (en) 2006-11-30 2013-03-19 National Institute Of Advanced Industrial Science And Technology Speech recognition system and program therefor
US8571862B2 (en) 2006-11-30 2013-10-29 Ashwin P. Rao Multimodal interface for input of text
US8676802B2 (en) 2006-11-30 2014-03-18 Oracle Otc Subsidiary Llc Method and system for information retrieval with clustering
US20080129520A1 (en) 2006-12-01 2008-06-05 Apple Computer, Inc. Electronic device with enhanced audio feedback
US8001400B2 (en) 2006-12-01 2011-08-16 Apple Inc. Power consumption management for functional preservation in a battery-powered electronic device
US8045808B2 (en) 2006-12-04 2011-10-25 Trend Micro Incorporated Pure adversarial approach for identifying text content in images
US8311590B2 (en) 2006-12-05 2012-11-13 Hewlett-Packard Development Company, L.P. System and method for improved loudspeaker functionality
WO2008070094A2 (en) 2006-12-05 2008-06-12 Nuance Communication, Inc. Wireless server based text to speech email
US8208624B2 (en) 2006-12-05 2012-06-26 Hewlett-Packard Development Company, L.P. Hearing aid compatible mobile phone
US7676249B2 (en) 2006-12-05 2010-03-09 Research In Motion Limited Alert methods and apparatus for call appointments in a calendar application based on communication conditions of a mobile station
US20080140652A1 (en) 2006-12-07 2008-06-12 Jonathan Travis Millman Authoring tool
US20080140413A1 (en) 2006-12-07 2008-06-12 Jonathan Travis Millman Synchronization of audio to reading
US7831246B1 (en) 2006-12-08 2010-11-09 At&T Mobility Ii, Llc Mobile merchant
US7630972B2 (en) 2007-01-05 2009-12-08 Yahoo! Inc. Clustered search processing
US10185779B2 (en) 2008-03-03 2019-01-22 Oath Inc. Mechanisms for content aggregation, syndication, sharing, and updating
US8731610B2 (en) 2006-12-13 2014-05-20 Samsung Electronics Co., Ltd. Method for adaptive user interface in mobile devices
US7783644B1 (en) 2006-12-13 2010-08-24 Google Inc. Query-independent entity importance in books
US20100080398A1 (en) 2006-12-13 2010-04-01 Phonak Ag Method and system for hearing device fitting
US9522332B2 (en) 2006-12-13 2016-12-20 Voodoo Gaming Llc Video games including real-life attributes and/or fantasy team settings
US7646297B2 (en) 2006-12-15 2010-01-12 At&T Intellectual Property I, L.P. Context-detected auto-mode switching
US20080146290A1 (en) 2006-12-18 2008-06-19 Motorola, Inc. Changing a mute state of a voice call from a bluetooth headset
US7552045B2 (en) 2006-12-18 2009-06-23 Nokia Corporation Method, apparatus and computer program product for providing flexible text based language identification
US20080147411A1 (en) 2006-12-19 2008-06-19 International Business Machines Corporation Adaptation of a speech processing system from external input that is not directly related to sounds in an operational acoustic environment
US8204182B2 (en) 2006-12-19 2012-06-19 Nuance Communications, Inc. Dialect translator for a speech application environment extended for interactive text exchanges
KR101405284B1 (ko) 2006-12-20 2014-06-10 삼성전자 주식회사 화상형성장치 및 그 다국어 자판 표시방법
GB0625642D0 (en) 2006-12-21 2007-01-31 Symbian Software Ltd Mobile sensor feedback
US20080154600A1 (en) 2006-12-21 2008-06-26 Nokia Corporation System, Method, Apparatus and Computer Program Product for Providing Dynamic Vocabulary Prediction for Speech Recognition
ATE527652T1 (de) 2006-12-21 2011-10-15 Harman Becker Automotive Sys Mehrstufige spracherkennung
US7991724B2 (en) 2006-12-21 2011-08-02 Support Machines Ltd. Method and a computer program product for providing a response to a statement of a user
US8010367B2 (en) 2006-12-22 2011-08-30 Nuance Communications, Inc. Spoken free-form passwords for light-weight speaker verification using standard speech recognition engines
WO2008078670A1 (ja) 2006-12-22 2008-07-03 Nec Corporation 文言い換え方法、プログラムおよびシステム
US8630855B2 (en) 2006-12-22 2014-01-14 Anthony Oddo Call system and method
US20080154612A1 (en) 2006-12-26 2008-06-26 Voice Signal Technologies, Inc. Local storage and use of search results for voice-enabled mobile communications devices
US20080154577A1 (en) 2006-12-26 2008-06-26 Sehda,Inc. Chunk-based statistical machine translation system
US20080163119A1 (en) 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
JP4867654B2 (ja) 2006-12-28 2012-02-01 日産自動車株式会社 音声認識装置、および音声認識方法
EP1939759A1 (en) 2006-12-29 2008-07-02 Vodafone Holding GmbH Method for providing content to a mobile device, gateway for providing content and mobile device
US8019271B1 (en) 2006-12-29 2011-09-13 Nextel Communications, Inc. Methods and systems for presenting information on mobile devices
US7865817B2 (en) 2006-12-29 2011-01-04 Amazon Technologies, Inc. Invariant referencing in digital works
US8493330B2 (en) 2007-01-03 2013-07-23 Apple Inc. Individual channel phase delay scheme
US8019050B2 (en) 2007-01-03 2011-09-13 Motorola Solutions, Inc. Method and apparatus for providing feedback of vocal quality to a user
US8112166B2 (en) 2007-01-04 2012-02-07 Sound Id Personalized sound system hearing profile selection process
US20080167876A1 (en) 2007-01-04 2008-07-10 International Business Machines Corporation Methods and computer program products for providing paraphrasing in a text-to-speech system
US8074172B2 (en) 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
US7957955B2 (en) 2007-01-05 2011-06-07 Apple Inc. Method and system for providing word recommendations for text input
EP2099652B1 (en) 2007-01-05 2016-11-16 Visteon Global Technologies, Inc. System and method for customized audio prompting
US7889184B2 (en) 2007-01-05 2011-02-15 Apple Inc. Method, system and graphical user interface for displaying hyperlink information
US7889185B2 (en) 2007-01-05 2011-02-15 Apple Inc. Method, system, and graphical user interface for activating hyperlinks
US8060824B2 (en) 2007-01-05 2011-11-15 Starz Entertainment Llc User interface for a multimedia service
US8553856B2 (en) 2007-01-07 2013-10-08 Apple Inc. Voicemail systems and methods
WO2008085742A2 (en) 2007-01-07 2008-07-17 Apple Inc. Portable multifunction device, method and graphical user interface for interacting with user input elements in displayed content
US7978176B2 (en) 2007-01-07 2011-07-12 Apple Inc. Portrait-landscape rotation heuristics for a portable multifunction device
US8391844B2 (en) 2007-01-07 2013-03-05 Apple Inc. Voicemail systems and methods
FR2911201A1 (fr) 2007-01-08 2008-07-11 Sagem Comm Procede d'edition d'un texte exprime dans une langue
GB2445666A (en) 2007-01-09 2008-07-16 Spinvox Ltd Method of replying to an electronically received message
CA2674971C (en) 2007-01-09 2016-12-06 Spinvox Limited Selection of a link in a received message for speaking reply, which is converted into text form for delivery
US8056070B2 (en) 2007-01-10 2011-11-08 Goller Michael D System and method for modifying and updating a speech recognition program
US20080165994A1 (en) 2007-01-10 2008-07-10 Magnadyne Corporation Bluetooth enabled hearing aid
KR100799195B1 (ko) 2007-01-12 2008-01-29 삼성전자주식회사 휴대용 단말기에서 긴급 호 연결 방법 및 장치
US20080172698A1 (en) 2007-01-12 2008-07-17 Berger Adam L Performing support functions on a portable device
US7912724B1 (en) 2007-01-18 2011-03-22 Adobe Systems Incorporated Audio comparison using phoneme matching
KR100837166B1 (ko) 2007-01-20 2008-06-11 엘지전자 주식회사 전자기기의 정보 표시 방법 및 그 전자기기
US9524355B2 (en) 2007-01-22 2016-12-20 Mozy, Inc. Methods for delivering task-related digital content based on task-oriented user activity
KR100883657B1 (ko) 2007-01-26 2009-02-18 삼성전자주식회사 음성 인식 기반의 음악 검색 방법 및 장치
US7707226B1 (en) 2007-01-29 2010-04-27 Aol Inc. Presentation of content items based on dynamic monitoring of real-time context
JP5270841B2 (ja) 2007-01-29 2013-08-21 株式会社タイトー レッスンプログラム、記憶媒体
JP2008185805A (ja) 2007-01-30 2008-08-14 Internatl Business Mach Corp <Ibm> 高品質の合成音声を生成する技術
US20080186196A1 (en) 2007-02-01 2008-08-07 Sony Ericsson Mobile Communications Ab Non-time based snooze
US20080189606A1 (en) 2007-02-02 2008-08-07 Michal Rybak Handheld electronic device including predictive accent mechanism, and associated method
US7818176B2 (en) 2007-02-06 2010-10-19 Voicebox Technologies, Inc. System and method for selecting and presenting advertisements based on natural language processing of voice-based input
US20080186960A1 (en) 2007-02-06 2008-08-07 Access Systems Americas, Inc. System and method of controlling media streams in an electronic device
US20110047605A1 (en) 2007-02-06 2011-02-24 Vidoop, Llc System And Method For Authenticating A User To A Computer System
EP2126900B1 (en) 2007-02-06 2013-04-24 Nuance Communications Austria GmbH Method and system for creating entries in a speech recognition lexicon
US7912700B2 (en) 2007-02-08 2011-03-22 Microsoft Corporation Context based word prediction
US9465791B2 (en) 2007-02-09 2016-10-11 International Business Machines Corporation Method and apparatus for automatic detection of spelling errors in one or more documents
US20080195630A1 (en) 2007-02-13 2008-08-14 Amadeus S.A.S. Web service interrogation method and apparatus
US8078978B2 (en) 2007-10-19 2011-12-13 Google Inc. Method and system for predicting text
US7941133B2 (en) 2007-02-14 2011-05-10 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for schedule management based on locations of wireless devices
JP4890289B2 (ja) 2007-02-14 2012-03-07 ヤフー株式会社 リモコン文字入力制御方法、サーバおよびリモコン文字入力制御プログラム
US7853240B2 (en) 2007-02-15 2010-12-14 Research In Motion Limited Emergency number selection for mobile communications device
US20080201434A1 (en) 2007-02-16 2008-08-21 Microsoft Corporation Context-Sensitive Searches and Functionality for Instant Messaging Applications
US20080201000A1 (en) 2007-02-20 2008-08-21 Nokia Corporation Contextual grouping of media items
WO2008103925A1 (en) 2007-02-22 2008-08-28 Personics Holdings Inc. Method and device for sound detection and audio control
US20080204379A1 (en) 2007-02-22 2008-08-28 Microsoft Corporation Display with integrated audio transducer device
US7912828B2 (en) 2007-02-23 2011-03-22 Apple Inc. Pattern searching methods and apparatuses
US7797265B2 (en) 2007-02-26 2010-09-14 Siemens Corporation Document clustering that applies a locality sensitive hashing function to a feature vector to obtain a limited set of candidate clusters
US7801728B2 (en) 2007-02-26 2010-09-21 Nuance Communications, Inc. Document session replay for multimodal applications
US8112402B2 (en) 2007-02-26 2012-02-07 Microsoft Corporation Automatic disambiguation based on a reference resource
US7840409B2 (en) 2007-02-27 2010-11-23 Nuance Communications, Inc. Ordering recognition results produced by an automatic speech recognition engine for a multimodal application
US7822608B2 (en) 2007-02-27 2010-10-26 Nuance Communications, Inc. Disambiguating a speech recognition grammar in a multimodal application
US7826872B2 (en) 2007-02-28 2010-11-02 Sony Ericsson Mobile Communications Ab Audio nickname tag associated with PTT user
US8362642B2 (en) 2007-03-01 2013-01-29 Rambus Inc. Optimized power supply for an electronic system
US8457959B2 (en) 2007-03-01 2013-06-04 Edward C. Kaiser Systems and methods for implicitly interpreting semantically redundant communication modes
US8521519B2 (en) 2007-03-02 2013-08-27 Panasonic Corporation Adaptive audio signal source vector quantization device and adaptive audio signal source vector quantization method that search for pitch period based on variable resolution
TWI321313B (en) 2007-03-03 2010-03-01 Ind Tech Res Inst Apparatus and method to reduce recognization errors through context relations among dialogue turns
JP2008217468A (ja) 2007-03-05 2008-09-18 Mitsubishi Electric Corp 情報処理装置及びメニュー項目生成プログラム
US20080221866A1 (en) 2007-03-06 2008-09-11 Lalitesh Katragadda Machine Learning For Transliteration
US8880405B2 (en) 2007-03-07 2014-11-04 Vlingo Corporation Application text entry in a mobile environment using a speech processing facility
US8886540B2 (en) 2007-03-07 2014-11-11 Vlingo Corporation Using speech recognition results based on an unstructured language model in a mobile communication facility application
US20090030685A1 (en) 2007-03-07 2009-01-29 Cerra Joseph P Using speech recognition results based on an unstructured language model with a navigation system
US20080221880A1 (en) 2007-03-07 2008-09-11 Cerra Joseph P Mobile music environment speech processing facility
SE530911C2 (sv) 2007-03-07 2008-10-14 Hexaformer Ab Transformatoranordning
US8838457B2 (en) 2007-03-07 2014-09-16 Vlingo Corporation Using results of unstructured language model based speech recognition to control a system-level function of a mobile communications facility
US8886545B2 (en) 2007-03-07 2014-11-11 Vlingo Corporation Dealing with switch latency in speech recognition
US8949266B2 (en) 2007-03-07 2015-02-03 Vlingo Corporation Multiple web-based content category searching in mobile search application
US20110060587A1 (en) 2007-03-07 2011-03-10 Phillips Michael S Command and control utilizing ancillary information in a mobile voice-to-speech application
US8635243B2 (en) 2007-03-07 2014-01-21 Research In Motion Limited Sending a communications header with voice recording to send metadata for use in speech recognition, formatting, and search mobile search application
US20110054894A1 (en) 2007-03-07 2011-03-03 Phillips Michael S Speech recognition through the collection of contact information in mobile dictation application
US20080219641A1 (en) 2007-03-09 2008-09-11 Barry Sandrew Apparatus and method for synchronizing a secondary audio track to the audio track of a video source
GB0704772D0 (en) 2007-03-12 2007-04-18 Mongoose Ventures Ltd Aural similarity measuring system for text
US20080256613A1 (en) 2007-03-13 2008-10-16 Grover Noel J Voice print identification portal
US8924844B2 (en) 2007-03-13 2014-12-30 Visual Cues Llc Object annotation
US7801729B2 (en) 2007-03-13 2010-09-21 Sensory, Inc. Using multiple attributes to create a voice search playlist
JP4466666B2 (ja) 2007-03-14 2010-05-26 日本電気株式会社 議事録作成方法、その装置及びそのプログラム
US20080229218A1 (en) 2007-03-14 2008-09-18 Joon Maeng Systems and methods for providing additional information for objects in electronic documents
US7945851B2 (en) 2007-03-14 2011-05-17 Nuance Communications, Inc. Enabling dynamic voiceXML in an X+V page of a multimodal application
US8219406B2 (en) 2007-03-15 2012-07-10 Microsoft Corporation Speech-centric multimodal user interface design in mobile technology
US8626930B2 (en) 2007-03-15 2014-01-07 Apple Inc. Multimedia content filtering
JP4793291B2 (ja) 2007-03-15 2011-10-12 パナソニック株式会社 リモコン装置
US8144920B2 (en) 2007-03-15 2012-03-27 Microsoft Corporation Automated location estimation using image analysis
US8515757B2 (en) 2007-03-20 2013-08-20 Nuance Communications, Inc. Indexing digitized speech with words represented in the digitized speech
US8886537B2 (en) 2007-03-20 2014-11-11 Nuance Communications, Inc. Method and system for text-to-speech synthesis with personalized voice
JP4836290B2 (ja) 2007-03-20 2011-12-14 富士通株式会社 音声認識システム、音声認識プログラムおよび音声認識方法
JP2008233678A (ja) 2007-03-22 2008-10-02 Honda Motor Co Ltd 音声対話装置、音声対話方法、及び音声対話用プログラム
JP2008236448A (ja) 2007-03-22 2008-10-02 Clarion Co Ltd 音声信号処理装置、ハンズフリー通話装置、音声信号処理方法および制御プログラム
US8909532B2 (en) 2007-03-23 2014-12-09 Nuance Communications, Inc. Supporting multi-lingual user interaction with a multimodal application
US8126484B2 (en) 2007-03-26 2012-02-28 Qualcomm, Incorporated Apparatus and methods of sharing contact information between mobile communication devices using short message service
JP2008271481A (ja) 2007-03-27 2008-11-06 Brother Ind Ltd 電話装置
US8498628B2 (en) 2007-03-27 2013-07-30 Iocast Llc Content delivery system and method
US8702432B2 (en) 2007-03-28 2014-04-22 Breakthrough Performancetech, Llc Systems and methods for computerized interactive training
US7797269B2 (en) 2007-03-29 2010-09-14 Nokia Corporation Method and apparatus using a context sensitive dictionary
JP4713532B2 (ja) 2007-03-29 2011-06-29 株式会社エヌ・ティ・ティ・ドコモ 通信端末及びそのプログラム
WO2008120036A1 (en) 2007-03-29 2008-10-09 Nokia Corporation Method at a central server for managing a translation dictionary and a translation server system
CN101542592A (zh) 2007-03-29 2009-09-23 松下电器产业株式会社 关键词提取装置
JP2008250375A (ja) 2007-03-29 2008-10-16 Toshiba Corp 文字入力装置、方法およびプログラム
US20080244446A1 (en) 2007-03-29 2008-10-02 Lefevre John Disambiguation of icons and other media in text-based applications
TWI502380B (zh) 2007-03-29 2015-10-01 Nokia Corp 配合預測式本文輸入使用之方法、裝置、伺服器、系統及電腦程式產品
US8775931B2 (en) 2007-03-30 2014-07-08 Blackberry Limited Spell check function that applies a preference to a spell check algorithm based upon extensive user selection of spell check results generated by the algorithm, and associated handheld electronic device
US8650030B2 (en) 2007-04-02 2014-02-11 Google Inc. Location based responses to telephone requests
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US20080247529A1 (en) 2007-04-03 2008-10-09 Microsoft Corporation Incoming Call Classification And Disposition
US8131556B2 (en) 2007-04-03 2012-03-06 Microsoft Corporation Communications using different modalities
US7920902B2 (en) 2007-04-04 2011-04-05 Carroll David W Mobile personal audio device
US8032472B2 (en) 2007-04-04 2011-10-04 Tuen Solutions Limited Liability Company Intelligent agent for distributed services for mobile devices
US7809610B2 (en) 2007-04-09 2010-10-05 Platformation, Inc. Methods and apparatus for freshness and completeness of information
EP1981253B1 (en) 2007-04-10 2011-06-22 Oticon A/S A user interface for a communications device
CN105117376B (zh) 2007-04-10 2018-07-10 谷歌有限责任公司 多模式输入法编辑器
US20080253577A1 (en) 2007-04-13 2008-10-16 Apple Inc. Multi-channel sound panner
WO2008125107A1 (en) 2007-04-16 2008-10-23 Gn Resound A/S A hearing aid wireless communication adaptor
US7848924B2 (en) 2007-04-17 2010-12-07 Nokia Corporation Method, apparatus and computer program product for providing voice conversion using temporal dynamic features
JP4412504B2 (ja) 2007-04-17 2010-02-10 本田技研工業株式会社 音声認識装置、音声認識方法、及び音声認識用プログラム
KR100769156B1 (ko) 2007-04-20 2007-10-22 주식회사 서비전자 홈 네트워크 시스템 및 그것의 제어방법
US7953600B2 (en) 2007-04-24 2011-05-31 Novaspeech Llc System and method for hybrid speech synthesis
JP2008268684A (ja) 2007-04-24 2008-11-06 Seiko Instruments Inc 音声再生装置、電子辞書、音声再生方法、音声再生プログラム
JP5243730B2 (ja) 2007-04-24 2013-07-24 株式会社エヌ・ティ・ティ・ドコモ 検索支援システム、検索支援方法
JP4769223B2 (ja) 2007-04-26 2011-09-07 旭化成株式会社 テキスト発音記号変換辞書作成装置、認識語彙辞書作成装置、及び音声認識装置
KR100819928B1 (ko) 2007-04-26 2008-04-08 (주)부성큐 휴대 단말기의 음성 인식장치 및 그 방법
WO2008134625A1 (en) 2007-04-26 2008-11-06 Ford Global Technologies, Llc Emotive advisory system and method
US8695074B2 (en) 2007-04-26 2014-04-08 Microsoft Corporation Pre-authenticated calling for voice applications
US20080270151A1 (en) 2007-04-26 2008-10-30 Bd Metrics Method and system for developing an audience of buyers and obtaining their behavioral preferences to promote commerce on a communication network
US8457946B2 (en) 2007-04-26 2013-06-04 Microsoft Corporation Recognition architecture for generating Asian characters
US7983915B2 (en) 2007-04-30 2011-07-19 Sonic Foundry, Inc. Audio content search engine
US8005664B2 (en) 2007-04-30 2011-08-23 Tachyon Technologies Pvt. Ltd. System, method to generate transliteration and method for generating decision tree to obtain transliteration
US20080270344A1 (en) 2007-04-30 2008-10-30 Yurick Steven J Rich media content search engine
US7912289B2 (en) 2007-05-01 2011-03-22 Microsoft Corporation Image text replacement
US20080273672A1 (en) 2007-05-03 2008-11-06 Microsoft Corporation Automated attendant grammar tuning
US8032383B1 (en) 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
US7899666B2 (en) 2007-05-04 2011-03-01 Expert System S.P.A. Method and system for automatically extracting relations between concepts included in text
US9292807B2 (en) 2007-05-10 2016-03-22 Microsoft Technology Licensing, Llc Recommending actions based on context
TWI336048B (en) 2007-05-11 2011-01-11 Delta Electronics Inc Input system for mobile search and method therefor
KR20090001716A (ko) 2007-05-14 2009-01-09 이병수 성장 지능형 가상 비서 운영시스템 및 그 방법
AU2008254894C1 (en) 2007-05-15 2014-10-02 Tivo Solutions Inc. Multimedia content search and recording scheduling system
US8620652B2 (en) 2007-05-17 2013-12-31 Microsoft Corporation Speech recognition macro runtime
US8538757B2 (en) 2007-05-17 2013-09-17 Redstart Systems, Inc. System and method of a list commands utility for a speech recognition command system
US8886521B2 (en) 2007-05-17 2014-11-11 Redstart Systems, Inc. System and method of dictation for a speech recognition command system
WO2008142472A1 (en) 2007-05-18 2008-11-27 Giacomo Poretti System and method to consume web content using television set
US8700005B1 (en) 2007-05-21 2014-04-15 Amazon Technologies, Inc. Notification of a user device to perform an action
US20080294981A1 (en) 2007-05-21 2008-11-27 Advancis.Com, Inc. Page clipping tool for digital publications
EG25474A (en) 2007-05-21 2012-01-11 Sherikat Link Letatweer Elbarmaguey At Sae Method for translitering and suggesting arabic replacement for a given user input
US20080294517A1 (en) 2007-05-25 2008-11-27 Gregory Howard Hill Customized image based calendar, method and system
WO2008146456A1 (ja) 2007-05-28 2008-12-04 Panasonic Corporation 情報探索支援方法および情報探索支援装置
US8762143B2 (en) 2007-05-29 2014-06-24 At&T Intellectual Property Ii, L.P. Method and apparatus for identifying acoustic background environments based on time and speed to enhance automatic speech recognition
US8831941B2 (en) 2007-05-29 2014-09-09 At&T Intellectual Property Ii, L.P. System and method for tracking fraudulent electronic transactions using voiceprints of uncommon words
US8189880B2 (en) 2007-05-29 2012-05-29 Microsoft Corporation Interactive photo annotation based on face clustering
TWI338269B (en) 2007-05-31 2011-03-01 Univ Nat Taiwan Teaching materials generation methods and systems, and machine readable medium thereof
US8494137B2 (en) 2007-05-31 2013-07-23 Centurylink Intellectual Property Llc System and method for pre-call messaging
US8055708B2 (en) 2007-06-01 2011-11-08 Microsoft Corporation Multimedia spaces
JP2008299221A (ja) 2007-06-01 2008-12-11 Fujitsu Ten Ltd 発話検知装置
US20090027334A1 (en) 2007-06-01 2009-01-29 Cybernet Systems Corporation Method for controlling a graphical user interface for touchscreen-enabled computer systems
US8285206B2 (en) 2007-06-01 2012-10-09 Research In Motion Limited Proximity-dependent events
US8204238B2 (en) 2007-06-08 2012-06-19 Sensory, Inc Systems and methods of sonic communication
US8004493B2 (en) 2007-06-08 2011-08-23 Apple Inc. Methods and systems for providing sensory information to devices and peripherals
US8135577B2 (en) 2007-06-09 2012-03-13 Apple Inc. Braille support
CN101325756B (zh) 2007-06-11 2013-02-13 英华达(上海)电子有限公司 一种手机语音辨识装置以及激活手机语音辨识的方法
US20080312928A1 (en) 2007-06-12 2008-12-18 Robert Patrick Goebel Natural language speech recognition calculator
KR20080109322A (ko) 2007-06-12 2008-12-17 엘지전자 주식회사 사용자의 직관적 의도 파악에 따른 서비스 제공 방법 및장치
CA2690238A1 (en) 2007-06-13 2008-12-18 Widex A/S A system and a method for establishing a conversation group among a number of hearing aids
WO2008151624A1 (en) 2007-06-13 2008-12-18 Widex A/S Hearing aid system establishing a conversation group among hearing aids used by different users
WO2008151466A1 (en) 2007-06-14 2008-12-18 Google Inc. Dictionary word and phrase determination
US20080313335A1 (en) 2007-06-15 2008-12-18 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Communicator establishing aspects with context identifying
US8527262B2 (en) 2007-06-22 2013-09-03 International Business Machines Corporation Systems and methods for automatic semantic role labeling of high morphological text for natural language processing applications
JP4970160B2 (ja) 2007-06-22 2012-07-04 アルパイン株式会社 車載システム及び現在位置目印地点案内方法
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US7987176B2 (en) 2007-06-25 2011-07-26 Sap Ag Mixed initiative semantic search
US8027834B2 (en) 2007-06-25 2011-09-27 Nuance Communications, Inc. Technique for training a phonetic decision tree with limited phonetic exceptional terms
CN101785000B (zh) 2007-06-25 2013-04-24 谷歌股份有限公司 词概率确定方法和系统
US7689421B2 (en) 2007-06-27 2010-03-30 Microsoft Corporation Voice persona service for embedding text-to-speech features into software programs
US8090621B1 (en) 2007-06-27 2012-01-03 Amazon Technologies, Inc. Method and system for associating feedback with recommendation rules
US8763058B2 (en) 2007-06-28 2014-06-24 Apple Inc. Selective data downloading and presentation based on user interaction
US9794605B2 (en) 2007-06-28 2017-10-17 Apple Inc. Using time-stamped event entries to facilitate synchronizing data streams
US8190627B2 (en) 2007-06-28 2012-05-29 Microsoft Corporation Machine assisted query formulation
US7861008B2 (en) 2007-06-28 2010-12-28 Apple Inc. Media management and routing within an electronic device
US8065624B2 (en) 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
US8041438B2 (en) 2007-06-28 2011-10-18 Apple Inc. Data-driven media management within an electronic device
US9632561B2 (en) 2007-06-28 2017-04-25 Apple Inc. Power-gating media decoders to reduce power consumption
US8260809B2 (en) 2007-06-28 2012-09-04 Microsoft Corporation Voice-based search processing
US8050919B2 (en) 2007-06-29 2011-11-01 Microsoft Corporation Speaker recognition via voice sample based on multiple nearest neighbor classifiers
US7962344B2 (en) 2007-06-29 2011-06-14 Microsoft Corporation Depicting a speech user interface via graphical elements
US8290775B2 (en) 2007-06-29 2012-10-16 Microsoft Corporation Pronunciation correction of text-to-speech systems between different spoken languages
US8630841B2 (en) 2007-06-29 2014-01-14 Microsoft Corporation Regular expression word verification
KR100930802B1 (ko) 2007-06-29 2009-12-09 엔에이치엔(주) 이미지를 이용한 브라우저 제어 방법 및 시스템
US8019606B2 (en) 2007-06-29 2011-09-13 Microsoft Corporation Identification and selection of a software application via speech
JP4424382B2 (ja) 2007-07-04 2010-03-03 ソニー株式会社 コンテンツ再生装置およびコンテンツ自動受信方法
US7617074B2 (en) 2007-07-06 2009-11-10 Microsoft Corporation Suppressing repeated events and storing diagnostic information
US8219399B2 (en) 2007-07-11 2012-07-10 Garmin Switzerland Gmbh Automated speech recognition (ASR) tiling
US8306235B2 (en) 2007-07-17 2012-11-06 Apple Inc. Method and apparatus for using a sound sensor to adjust the audio output for a device
DE102007033472A1 (de) 2007-07-18 2009-01-29 Siemens Ag Verfahren zur Spracherkennung
US7890493B2 (en) 2007-07-20 2011-02-15 Google Inc. Translating a search query into multiple languages
CN101354746B (zh) 2007-07-23 2011-08-31 夏普株式会社 文字图像抽出装置及文字图像抽出方法
AU2008201643B1 (en) 2007-07-24 2008-08-28 Rambrandt Messaging Technologies, LP Messaging service in a wireless communications network
ITFI20070177A1 (it) 2007-07-26 2009-01-27 Riccardo Vieri Sistema per la creazione e impostazione di una campagna pubblicitaria derivante dall'inserimento di messaggi pubblicitari all'interno di uno scambio di messaggi e metodo per il suo funzionamento.
EP2183913A4 (en) 2007-07-30 2011-06-22 Lg Electronics Inc DISPLAY ARRANGEMENT AND SPEAKER SYSTEM FOR THE DISPLAY ARRANGEMENT
JP2009036999A (ja) 2007-08-01 2009-02-19 Infocom Corp コンピュータによる対話方法、対話システム、コンピュータプログラムおよびコンピュータに読み取り可能な記憶媒体
CN105045777A (zh) 2007-08-01 2015-11-11 金格软件有限公司 使用互联网语料库的自动的上下文相关的语言校正和增强
US9342496B2 (en) 2007-08-06 2016-05-17 Apple Inc. Auto-completion of names
TW200907695A (en) 2007-08-06 2009-02-16 jian-qiang Peng System and method of fast opening network link service
US20090043583A1 (en) 2007-08-08 2009-02-12 International Business Machines Corporation Dynamic modification of voice selection based on user specific factors
US7983919B2 (en) 2007-08-09 2011-07-19 At&T Intellectual Property Ii, L.P. System and method for performing speech synthesis with a cache of phoneme sequences
US7983478B2 (en) 2007-08-10 2011-07-19 Microsoft Corporation Hidden markov model based handwriting/calligraphy generation
US8321222B2 (en) 2007-08-14 2012-11-27 Nuance Communications, Inc. Synthesis by generation and concatenation of multi-form segments
JP2009048245A (ja) 2007-08-14 2009-03-05 Konami Digital Entertainment:Kk 入力受付装置、領域制御方法、および、プログラム
US8478598B2 (en) 2007-08-17 2013-07-02 International Business Machines Corporation Apparatus, system, and method for voice chat transcription
JP4987623B2 (ja) 2007-08-20 2012-07-25 株式会社東芝 ユーザと音声により対話する装置および方法
KR101490687B1 (ko) 2007-08-20 2015-02-06 삼성전자주식회사 홈 네트워크에서 디바이스들이 비밀 정보를 공유하는 방법및 이를 위한 장치
US8140632B1 (en) 2007-08-22 2012-03-20 Victor Roditis Jablokov Facilitating presentation by mobile device of additional content for a word or phrase upon utterance thereof
US7788276B2 (en) 2007-08-22 2010-08-31 Yahoo! Inc. Predictive stemming for web search with statistical machine translation models
US7983902B2 (en) 2007-08-23 2011-07-19 Google Inc. Domain dictionary creation by detection of new topic words using divergence value comparison
US8260619B1 (en) 2008-08-22 2012-09-04 Convergys Cmg Utah, Inc. Method and system for creating natural language understanding grammars
US20090055186A1 (en) 2007-08-23 2009-02-26 International Business Machines Corporation Method to voice id tag content to ease reading for visually impaired
US7917355B2 (en) 2007-08-23 2011-03-29 Google Inc. Word detection
KR101359715B1 (ko) 2007-08-24 2014-02-10 삼성전자주식회사 모바일 음성 웹 제공 방법 및 장치
US8126274B2 (en) 2007-08-30 2012-02-28 Microsoft Corporation Visual language modeling for image classification
US8190359B2 (en) 2007-08-31 2012-05-29 Proxpro, Inc. Situation-aware personal information management for a mobile device
US8826132B2 (en) 2007-09-04 2014-09-02 Apple Inc. Methods and systems for navigating content on a portable device
US8683378B2 (en) 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US20090058823A1 (en) 2007-09-04 2009-03-05 Apple Inc. Virtual Keyboards in Multi-Language Environment
US8683197B2 (en) 2007-09-04 2014-03-25 Apple Inc. Method and apparatus for providing seamless resumption of video playback
US20090106397A1 (en) 2007-09-05 2009-04-23 O'keefe Sean Patrick Method and apparatus for interactive content distribution
US9812023B2 (en) 2007-09-10 2017-11-07 Excalibur Ip, Llc Audible metadata
CN101601088B (zh) 2007-09-11 2012-05-30 松下电器产业株式会社 声音判断装置、声音检测装置以及声音判断方法
US20090070109A1 (en) 2007-09-12 2009-03-12 Microsoft Corporation Speech-to-Text Transcription for Personal Communication Devices
US20090074214A1 (en) 2007-09-13 2009-03-19 Bionica Corporation Assistive listening system with plug in enhancement platform and communication port to download user preferred processing algorithms
US20090076825A1 (en) 2007-09-13 2009-03-19 Bionica Corporation Method of enhancing sound for hearing impaired individuals
US8661340B2 (en) 2007-09-13 2014-02-25 Apple Inc. Input methods for device having multi-language environment
JP4990077B2 (ja) 2007-09-14 2012-08-01 株式会社日立製作所 ナビゲーション装置
US8838760B2 (en) 2007-09-14 2014-09-16 Ricoh Co., Ltd. Workflow-enabled provider
KR100920267B1 (ko) 2007-09-17 2009-10-05 한국전자통신연구원 음성 대화 분석 시스템 및 그 방법
US8706476B2 (en) 2007-09-18 2014-04-22 Ariadne Genomics, Inc. Natural language processing method by analyzing primitive sentences, logical clauses, clause types and verbal blocks
KR100919225B1 (ko) 2007-09-19 2009-09-28 한국전자통신연구원 음성 대화 시스템에 있어서 다단계 검증을 이용한 대화오류 후처리 장치 및 방법
US8583438B2 (en) 2007-09-20 2013-11-12 Microsoft Corporation Unnatural prosody detection in speech synthesis
ES2363037T3 (es) 2007-09-21 2011-07-19 The Boeing Company Control de vehículos.
US8042053B2 (en) 2007-09-24 2011-10-18 Microsoft Corporation Method for making digital documents browseable
US20090083035A1 (en) 2007-09-25 2009-03-26 Ritchie Winson Huang Text pre-processing for text-to-speech generation
US8069051B2 (en) 2007-09-25 2011-11-29 Apple Inc. Zero-gap playback using predictive mixing
US20090079622A1 (en) 2007-09-26 2009-03-26 Broadcom Corporation Sharing of gps information between mobile devices
US8589397B2 (en) 2007-09-28 2013-11-19 Nec Corporation Data classification method and data classification device
US9053089B2 (en) 2007-10-02 2015-06-09 Apple Inc. Part-of-speech tagging using latent analogy
US8923491B2 (en) 2007-10-03 2014-12-30 At&T Intellectual Property I, L.P. System and method for connecting to addresses received in spoken communications
TWI360761B (en) 2007-10-03 2012-03-21 Inventec Corp An electronic apparatus and a method for automatic
US7995732B2 (en) 2007-10-04 2011-08-09 At&T Intellectual Property I, Lp Managing audio in a multi-source audio environment
US8515095B2 (en) 2007-10-04 2013-08-20 Apple Inc. Reducing annoyance by managing the acoustic noise produced by a device
US8462959B2 (en) 2007-10-04 2013-06-11 Apple Inc. Managing acoustic noise produced by a device
US8595642B1 (en) 2007-10-04 2013-11-26 Great Northern Research, LLC Multiple shell multi faceted graphical user interface
US8165886B1 (en) 2007-10-04 2012-04-24 Great Northern Research LLC Speech interface system and method for control and interaction with applications on a computing system
US8036901B2 (en) 2007-10-05 2011-10-11 Sensory, Incorporated Systems and methods of performing speech recognition using sensory inputs of human position
IL186505A0 (en) 2007-10-08 2008-01-20 Excelang Ltd Grammar checker
US8655643B2 (en) 2007-10-09 2014-02-18 Language Analytics Llc Method and system for adaptive transliteration
US8139763B2 (en) 2007-10-10 2012-03-20 Spansion Llc Randomized RSA-based cryptographic exponentiation resistant to side channel and fault attacks
US9532164B2 (en) 2007-10-12 2016-12-27 Empire Ip Llc Mashing mapping content displayed on mobile devices
US20090097634A1 (en) 2007-10-16 2009-04-16 Ullas Balan Nambiar Method and System for Call Processing
US8594996B2 (en) 2007-10-17 2013-11-26 Evri Inc. NLP-based entity recognition and disambiguation
JP2009098490A (ja) 2007-10-18 2009-05-07 Kddi Corp 音声認識結果編集装置、音声認識装置およびコンピュータプログラム
US8209384B2 (en) 2007-10-23 2012-06-26 Yahoo! Inc. Persistent group-based instant messaging
US20090112677A1 (en) 2007-10-24 2009-04-30 Rhett Randolph L Method for automatically developing suggested optimal work schedules from unsorted group and individual task lists
US8606562B2 (en) 2007-10-25 2013-12-10 Blackberry Limited Disambiguated text message retype function
US8126863B2 (en) 2007-10-25 2012-02-28 Apple Inc. Search control combining classification and text-based searching techniques
US8000972B2 (en) 2007-10-26 2011-08-16 Sony Corporation Remote controller with speech recognition
US8364694B2 (en) 2007-10-26 2013-01-29 Apple Inc. Search assistant for digital media assets
US8280885B2 (en) 2007-10-29 2012-10-02 Cornell University System and method for automatically summarizing fine-grained opinions in digital text
JP2009110300A (ja) 2007-10-30 2009-05-21 Nippon Telegr & Teleph Corp <Ntt> 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム
US7840447B2 (en) 2007-10-30 2010-11-23 Leonard Kleinrock Pricing and auctioning of bundled items among multiple sellers and buyers
US20090112572A1 (en) 2007-10-30 2009-04-30 Karl Ola Thorn System and method for input of text to an application operating on a device
US8566098B2 (en) 2007-10-30 2013-10-22 At&T Intellectual Property I, L.P. System and method for improving synthesized speech interactions of a spoken dialog system
US8010614B1 (en) 2007-11-01 2011-08-30 Bitdefender IPR Management Ltd. Systems and methods for generating signatures for electronic communication classification
US9063979B2 (en) 2007-11-01 2015-06-23 Ebay, Inc. Analyzing event streams of user sessions
US7983997B2 (en) 2007-11-02 2011-07-19 Florida Institute For Human And Machine Cognition, Inc. Interactive complex task teaching system that allows for natural language input, recognizes a user's intent, and automatically performs tasks in document object model (DOM) nodes
CN101424973A (zh) 2007-11-02 2009-05-06 夏普株式会社 输入装置
US8055296B1 (en) 2007-11-06 2011-11-08 Sprint Communications Company L.P. Head-up display communication system and method
US8065152B2 (en) 2007-11-08 2011-11-22 Demand Media, Inc. Platform for enabling voice commands to resolve phoneme based domain name registrations
CN101179754A (zh) 2007-11-08 2008-05-14 深圳市戴文科技有限公司 一种交互式业务的实现方法及移动终端
US20090125813A1 (en) 2007-11-09 2009-05-14 Zhongnan Shen Method and system for processing multiple dialog sessions in parallel
US20090125299A1 (en) 2007-11-09 2009-05-14 Jui-Chang Wang Speech recognition system
JP4926004B2 (ja) 2007-11-12 2012-05-09 株式会社リコー 文書処理装置、文書処理方法及び文書処理プログラム
DE102008051757A1 (de) 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen
US20090125602A1 (en) 2007-11-14 2009-05-14 International Business Machines Corporation Automatic priority adjustment for incoming emails
US7890525B2 (en) 2007-11-14 2011-02-15 International Business Machines Corporation Foreign language abbreviation translation in an instant messaging system
US8294669B2 (en) 2007-11-19 2012-10-23 Palo Alto Research Center Incorporated Link target accuracy in touch-screen mobile devices by layout adjustment
US8112280B2 (en) 2007-11-19 2012-02-07 Sensory, Inc. Systems and methods of performing speech recognition with barge-in for use in a bluetooth system
US8620662B2 (en) 2007-11-20 2013-12-31 Apple Inc. Context-aware unit selection
US20150046537A1 (en) 2007-11-21 2015-02-12 Vdoqwest, Inc., A Delaware Corporation Retrieving video annotation metadata using a p2p network and copyright free indexes
US20110246471A1 (en) 2010-04-06 2011-10-06 Selim Shlomo Rakib Retrieving video annotation metadata using a p2p network
CN101448340B (zh) 2007-11-26 2011-12-07 联想(北京)有限公司 一种检测移动终端状态的方法、系统及该移动终端
US8213999B2 (en) 2007-11-27 2012-07-03 Htc Corporation Controlling method and system for handheld communication device and recording medium using the same
TWI373708B (en) 2007-11-27 2012-10-01 Htc Corp Power management method for handheld electronic device
ATE541270T1 (de) 2007-11-28 2012-01-15 Fujitsu Ltd Durch drahtloses ic-etikett verwaltete metallische röhre und drahtloses ic-etikett
US8190596B2 (en) 2007-11-28 2012-05-29 International Business Machines Corporation Method for assembly of personalized enterprise information integrators over conjunctive queries
JP2009134409A (ja) 2007-11-29 2009-06-18 Sony Ericsson Mobilecommunications Japan Inc リマインダ装置、リマインダ方法、リマインダプログラム、及び携帯端末装置
US7805286B2 (en) 2007-11-30 2010-09-28 Bose Corporation System and method for sound system simulation
US8543622B2 (en) 2007-12-07 2013-09-24 Patrick Giblin Method and system for meta-tagging media content and distribution
ATE516658T1 (de) 2007-12-07 2011-07-15 Research In Motion Ltd System und verfahren zur ereignisabhängigen zustandsaktivierung für eine mobile kommunikationsvorrichtung
US8140335B2 (en) 2007-12-11 2012-03-20 Voicebox Technologies, Inc. System and method for providing a natural language voice user interface in an integrated voice navigation services environment
US8385588B2 (en) 2007-12-11 2013-02-26 Eastman Kodak Company Recording audio metadata for stored images
JP5493267B2 (ja) 2007-12-11 2014-05-14 大日本印刷株式会社 商品検索装置および商品検索方法
US8275607B2 (en) 2007-12-12 2012-09-25 Microsoft Corporation Semi-supervised part-of-speech tagging
US9767681B2 (en) 2007-12-12 2017-09-19 Apple Inc. Handheld electronic devices with remote control functionality and gesture recognition
US20090158423A1 (en) 2007-12-14 2009-06-18 Symbol Technologies, Inc. Locking mobile device cradle
US9324078B2 (en) 2007-12-17 2016-04-26 SMOOTH PRODUCTIONS, Inc. Dynamic social network system
JP5327054B2 (ja) 2007-12-18 2013-10-30 日本電気株式会社 発音変動規則抽出装置、発音変動規則抽出方法、および発音変動規則抽出用プログラム
KR101300839B1 (ko) 2007-12-18 2013-09-10 삼성전자주식회사 음성 검색어 확장 방법 및 시스템
US8145196B2 (en) 2007-12-18 2012-03-27 Apple Inc. Creation and management of voicemail greetings for mobile communication devices
US20090164937A1 (en) 2007-12-20 2009-06-25 Alden Alviar Scroll Apparatus and Method for Manipulating Data on an Electronic Device Display
US8095680B2 (en) 2007-12-20 2012-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Real-time network transport protocol interface method and apparatus
US8063879B2 (en) 2007-12-20 2011-11-22 Research In Motion Limited Method and handheld electronic device including first input component and second touch sensitive input component
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US20090164301A1 (en) 2007-12-21 2009-06-25 Yahoo! Inc. Targeted Ad System Using Metadata
US8019604B2 (en) 2007-12-21 2011-09-13 Motorola Mobility, Inc. Method and apparatus for uniterm discovery and voice-to-voice search on mobile device
JP5239328B2 (ja) 2007-12-21 2013-07-17 ソニー株式会社 情報処理装置及びタッチ動作認識方法
CA2710245C (en) 2007-12-21 2018-01-23 Bce Inc. Method and apparatus for interrupting an active telephony session to deliver information to a subscriber
CN101188644A (zh) 2007-12-26 2008-05-28 中国工商银行股份有限公司 银行语音服务方法与系统
KR20090071077A (ko) 2007-12-27 2009-07-01 엘지전자 주식회사 네비게이션 장치 및 이의 턴 지점 정보 제공방법
US8219407B1 (en) 2007-12-27 2012-07-10 Great Northern Research, LLC Method for processing the output of a speech recognizer
US8583416B2 (en) 2007-12-27 2013-11-12 Fluential, Llc Robust information extraction from utterances
US20090172108A1 (en) 2007-12-28 2009-07-02 Surgo Systems and methods for a telephone-accessible message communication system
US8373549B2 (en) 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8405621B2 (en) 2008-01-06 2013-03-26 Apple Inc. Variable rate media playback methods for electronic devices with touch interfaces
US20090177966A1 (en) 2008-01-06 2009-07-09 Apple Inc. Content Sheet for Media Player
US7609179B2 (en) 2008-01-08 2009-10-27 International Business Machines Corporation Method for compressed data with reduced dictionary sizes by coding value prefixes
US8232973B2 (en) 2008-01-09 2012-07-31 Apple Inc. Method, device, and graphical user interface providing word recommendations for text input
US8478578B2 (en) 2008-01-09 2013-07-02 Fluential, Llc Mobile speech-to-speech interpretation system
US20090204243A1 (en) 2008-01-09 2009-08-13 8 Figure, Llc Method and apparatus for creating customized text-to-speech podcasts and videos incorporating associated media
WO2009087860A1 (ja) 2008-01-10 2009-07-16 Brother Kogyo Kabushiki Kaisha 音声対話装置及び音声対話プログラムを記憶したコンピュータ読み取り可能な媒体
JP5266761B2 (ja) 2008-01-10 2013-08-21 日産自動車株式会社 情報案内システムおよびその認識辞書データベース更新方法
US7870133B2 (en) 2008-01-14 2011-01-11 Infosys Technologies Ltd. Method for semantic based storage and retrieval of information
US10176827B2 (en) 2008-01-15 2019-01-08 Verint Americas Inc. Active lab
EP2081185B1 (en) 2008-01-16 2014-11-26 Nuance Communications, Inc. Speech recognition on large lists using fragments
US20090187950A1 (en) 2008-01-18 2009-07-23 At&T Knowledge Ventures, L.P. Audible menu system
US20090187577A1 (en) 2008-01-20 2009-07-23 Aviv Reznik System and Method Providing Audio-on-Demand to a User's Personal Online Device as Part of an Online Audio Community
ITPO20080002A1 (it) 2008-01-22 2009-07-23 Riccardo Vieri Sistema e metodo per la generazione di pubblicita' contestuale durante l'invio di sms, relativo dispositivo e interfaccia.
JP2009177440A (ja) 2008-01-24 2009-08-06 Nec Corp 携帯電話装置及びその制御方法
US8175882B2 (en) 2008-01-25 2012-05-08 International Business Machines Corporation Method and system for accent correction
US20120284015A1 (en) 2008-01-28 2012-11-08 William Drewes Method for Increasing the Accuracy of Subject-Specific Statistical Machine Translation (SMT)
US20090192782A1 (en) 2008-01-28 2009-07-30 William Drewes Method for increasing the accuracy of statistical machine translation (SMT)
US8223988B2 (en) 2008-01-29 2012-07-17 Qualcomm Incorporated Enhanced blind source separation algorithm for highly correlated mixtures
WO2009097555A2 (en) 2008-01-30 2009-08-06 Google Inc. Notification of mobile device events
CN101500041A (zh) 2008-01-30 2009-08-05 中兴通讯股份有限公司 呼叫控制方法和装置
CN101499156A (zh) 2008-01-31 2009-08-05 上海亿动信息技术有限公司 一种基于多广告信息发布装置发布广告的控制方法及装置
US7840581B2 (en) 2008-02-01 2010-11-23 Realnetworks, Inc. Method and system for improving the quality of deep metadata associated with media content
KR20090085376A (ko) 2008-02-04 2009-08-07 삼성전자주식회사 문자 메시지의 음성 합성을 이용한 서비스 방법 및 장치
US8000956B2 (en) 2008-02-08 2011-08-16 Xerox Corporation Semantic compatibility checking for automatic correction and discovery of named entities
US10269024B2 (en) 2008-02-08 2019-04-23 Outbrain Inc. Systems and methods for identifying and measuring trends in consumer content demand within vertically associated websites and related content
KR101334066B1 (ko) 2008-02-11 2013-11-29 이점식 진화하는 사이버 로봇 시스템 및 그 제공 방법
US8195656B2 (en) 2008-02-13 2012-06-05 Yahoo, Inc. Social network search
US8099289B2 (en) 2008-02-13 2012-01-17 Sensory, Inc. Voice interface and search for electronic devices including bluetooth headsets and remote systems
US20090210391A1 (en) 2008-02-14 2009-08-20 Hall Stephen G Method and system for automated search for, and retrieval and distribution of, information
JP2009193532A (ja) 2008-02-18 2009-08-27 Oki Electric Ind Co Ltd 対話管理装置、方法及びプログラム、並びに意識抽出システム
JP2009193448A (ja) 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 対話システム、方法及びプログラム
US8165884B2 (en) 2008-02-15 2012-04-24 Microsoft Corporation Layered prompting: self-calibrating instructional prompting for verbal interfaces
JP2009193457A (ja) 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 情報検索装置、方法及びプログラム
US8595119B2 (en) 2008-02-15 2013-11-26 New York Mercantile Exchange, Inc. Symbolic language for trade matching
EP2094032A1 (en) 2008-02-19 2009-08-26 Deutsche Thomson OHG Audio signal, method and apparatus for encoding or transmitting the same and method and apparatus for processing the same
CN101953176A (zh) 2008-02-20 2011-01-19 皇家飞利浦电子股份有限公司 音频设备及其操作方法
US20090215466A1 (en) 2008-02-22 2009-08-27 Darcy Ahl Mobile phone based system for disabling a cell phone while traveling
US8065143B2 (en) 2008-02-22 2011-11-22 Apple Inc. Providing text input using speech data and non-speech data
US8706474B2 (en) 2008-02-23 2014-04-22 Fair Isaac Corporation Translation of entity names based on source document publication date, and frequency and co-occurrence of the entity names
US8015144B2 (en) 2008-02-26 2011-09-06 Microsoft Corporation Learning transportation modes from raw GPS data
JP4433061B2 (ja) 2008-02-27 2010-03-17 株式会社デンソー 運転支援システム
US8068604B2 (en) 2008-12-19 2011-11-29 Computer Product Introductions Corporation Method and system for event notifications
US9049255B2 (en) 2008-02-29 2015-06-02 Blackberry Limited Visual event notification on a handheld communications device
US20090221274A1 (en) 2008-02-29 2009-09-03 Venkatakrishnan Poornima System, method and device for enabling alternative call handling routines for incoming calls
EP2096840B1 (en) 2008-02-29 2012-07-04 Research In Motion Limited Visual event notification on a handheld communications device
JP2009205579A (ja) 2008-02-29 2009-09-10 Toshiba Corp 音声翻訳装置およびプログラム
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US8205157B2 (en) 2008-03-04 2012-06-19 Apple Inc. Methods and graphical user interfaces for conducting searches on a portable multifunction device
US8201109B2 (en) 2008-03-04 2012-06-12 Apple Inc. Methods and graphical user interfaces for editing on a portable multifunction device
US20090228273A1 (en) 2008-03-05 2009-09-10 Microsoft Corporation Handwriting-based user interface for correction of speech recognition errors
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US8587402B2 (en) 2008-03-07 2013-11-19 Palm, Inc. Context aware data processing in mobile computing device
US20090228439A1 (en) 2008-03-07 2009-09-10 Microsoft Corporation Intent-aware search
US8380512B2 (en) 2008-03-10 2013-02-19 Yahoo! Inc. Navigation using a search engine and phonetic voice recognition
US20090235280A1 (en) 2008-03-12 2009-09-17 Xerox Corporation Event extraction system for electronic messages
CA2717992C (en) 2008-03-12 2018-01-16 E-Lane Systems Inc. Speech understanding method and system
US20090234655A1 (en) 2008-03-13 2009-09-17 Jason Kwon Mobile electronic device with active speech recognition
US20090235176A1 (en) 2008-03-14 2009-09-17 Madhavi Jayanthi Social interaction system for facilitating display of current location of friends and location of businesses of interest
US20090234638A1 (en) 2008-03-14 2009-09-17 Microsoft Corporation Use of a Speech Grammar to Recognize Instant Message Input
CN101246020B (zh) 2008-03-14 2011-05-25 深圳市凯立德科技股份有限公司 语音播报装置、使用了此装置的导航系统及其采用的方法
US7958136B1 (en) 2008-03-18 2011-06-07 Google Inc. Systems and methods for identifying similar documents
JP2009223840A (ja) 2008-03-19 2009-10-01 Fujitsu Ltd スケジュール管理プログラム,スケジュール管理装置およびスケジュール管理方法
CN101547396B (zh) 2008-03-24 2012-07-04 展讯通信(上海)有限公司 一种紧急呼叫过程中快速位置上报的方法
US20090239552A1 (en) 2008-03-24 2009-09-24 Yahoo! Inc. Location-based opportunistic recommendations
US8856009B2 (en) 2008-03-25 2014-10-07 Intelligent Mechatronic Systems Inc. Multi-participant, mixed-initiative voice interaction system
WO2009118716A1 (en) 2008-03-27 2009-10-01 Markport Limited Processing of messaging service attributes in communication systems
US8615388B2 (en) 2008-03-28 2013-12-24 Microsoft Corporation Intra-language statistical machine translation
US20090248456A1 (en) 2008-03-28 2009-10-01 Passkey International, Inc. Notifications and reports in a reservation system
EP2107553B1 (en) 2008-03-31 2011-05-18 Harman Becker Automotive Systems GmbH Method for determining barge-in
US7472061B1 (en) 2008-03-31 2008-12-30 International Business Machines Corporation Systems and methods for building a native language phoneme lexicon having native pronunciations of non-native words derived from non-native pronunciations
US20090249198A1 (en) 2008-04-01 2009-10-01 Yahoo! Inc. Techniques for input recogniton and completion
US8417298B2 (en) 2008-04-01 2013-04-09 Apple Inc. Mounting structures for portable electronic devices
TWI446780B (zh) 2008-04-03 2014-07-21 Hon Hai Prec Ind Co Ltd 通訊裝置及其通訊方法
US8312376B2 (en) 2008-04-03 2012-11-13 Microsoft Corporation Bookmark interpretation service
US20090253457A1 (en) 2008-04-04 2009-10-08 Apple Inc. Audio signal processing for certification enhancement in a handheld wireless communications device
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US8140368B2 (en) 2008-04-07 2012-03-20 International Business Machines Corporation Method and system for routing a task to an employee based on physical and emotional state
KR101491581B1 (ko) 2008-04-07 2015-02-24 삼성전자주식회사 철자 오류 보정 시스템 및 방법
US8311188B2 (en) 2008-04-08 2012-11-13 Cisco Technology, Inc. User interface with voice message summary
KR20090107364A (ko) 2008-04-08 2009-10-13 엘지전자 주식회사 이동 단말기 및 그 메뉴 제어방법
KR20090107365A (ko) 2008-04-08 2009-10-13 엘지전자 주식회사 이동 단말기 및 그 메뉴 제어방법
US8958848B2 (en) 2008-04-08 2015-02-17 Lg Electronics Inc. Mobile terminal and menu control method thereof
US20110093272A1 (en) 2008-04-08 2011-04-21 Ntt Docomo, Inc Media process server apparatus and media process method therefor
US8285737B1 (en) 2008-04-10 2012-10-09 Google Inc. Selecting content for publication
US7889101B2 (en) 2008-04-14 2011-02-15 Alpine Electronics, Inc Method and apparatus for generating location based reminder message for navigation system
US8370148B2 (en) 2008-04-14 2013-02-05 At&T Intellectual Property I, L.P. System and method for answering a communication notification
JP4656177B2 (ja) 2008-04-14 2011-03-23 トヨタ自動車株式会社 ナビゲーション装置、操作部表示方法
WO2009129315A1 (en) 2008-04-15 2009-10-22 Mobile Technologies, Llc System and methods for maintaining speech-to-speech translation in the field
US8046222B2 (en) 2008-04-16 2011-10-25 Google Inc. Segmenting words using scaled probabilities
US8490050B2 (en) 2008-04-17 2013-07-16 Microsoft Corporation Automatic generation of user interfaces
US8433778B1 (en) 2008-04-22 2013-04-30 Marvell International Ltd Device configuration
US8407049B2 (en) 2008-04-23 2013-03-26 Cogi, Inc. Systems and methods for conversation enhancement
US8666824B2 (en) 2008-04-23 2014-03-04 Dell Products L.P. Digital media content location and purchasing system
US8972432B2 (en) 2008-04-23 2015-03-03 Google Inc. Machine translation using information retrieval
US8249857B2 (en) 2008-04-24 2012-08-21 International Business Machines Corporation Multilingual administration of enterprise data with user selected target language translation
US8249858B2 (en) 2008-04-24 2012-08-21 International Business Machines Corporation Multilingual administration of enterprise data with default target languages
US8121837B2 (en) 2008-04-24 2012-02-21 Nuance Communications, Inc. Adjusting a speech engine for a mobile computing device based on background noise
US8082148B2 (en) 2008-04-24 2011-12-20 Nuance Communications, Inc. Testing a grammar used in speech recognition for reliability in a plurality of operating environments having different background noise
US8594995B2 (en) 2008-04-24 2013-11-26 Nuance Communications, Inc. Multilingual asynchronous communications of speech messages recorded in digital media files
US8194827B2 (en) 2008-04-29 2012-06-05 International Business Machines Corporation Secure voice transaction method and system
US8521512B2 (en) 2008-04-30 2013-08-27 Deep Sky Concepts, Inc Systems and methods for natural language communication with a computer
US8693698B2 (en) 2008-04-30 2014-04-08 Qualcomm Incorporated Method and apparatus to reduce non-linear distortion in mobile computing devices
US20090274376A1 (en) 2008-05-05 2009-11-05 Yahoo! Inc. Method for efficiently building compact models for large multi-class text classification
US8400405B2 (en) 2008-05-09 2013-03-19 Research In Motion Limited Handheld electronic device and associated method enabling text input in a language employing non-roman characters
US8254829B1 (en) 2008-05-09 2012-08-28 Sprint Communications Company L.P. Network media service with track delivery adapted to a user cadence
US8219115B1 (en) 2008-05-12 2012-07-10 Google Inc. Location based reminders
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8516562B2 (en) 2008-05-13 2013-08-20 Veritrix, Inc. Multi-channel multi-factor authentication
US20140365895A1 (en) 2008-05-13 2014-12-11 Apple Inc. Device and method for generating user interfaces from a template
US20130275899A1 (en) 2010-01-18 2013-10-17 Apple Inc. Application Gateway for Providing Different User Interfaces for Limited Distraction and Non-Limited Distraction Contexts
US8174503B2 (en) 2008-05-17 2012-05-08 David H. Cain Touch-based authentication of a mobile device through user generated pattern creation
US8131267B2 (en) 2008-05-19 2012-03-06 Tbm, Llc Interactive voice access and retrieval of information
DE102008024258A1 (de) 2008-05-20 2009-11-26 Siemens Aktiengesellschaft Verfahren zur Klassifizierung und Entfernung unerwünschter Anteile aus einer Äußerung bei einer Spracherkennung
US8285344B2 (en) 2008-05-21 2012-10-09 DP Technlogies, Inc. Method and apparatus for adjusting audio for a user environment
US10203861B2 (en) 2008-05-21 2019-02-12 Please Don't Go, LLC. Messaging window overlay for a browser
US20090292987A1 (en) 2008-05-22 2009-11-26 International Business Machines Corporation Formatting selected content of an electronic document based on analyzed formatting
US20130100268A1 (en) 2008-05-27 2013-04-25 University Health Network Emergency detection and response system and method
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US9305548B2 (en) 2008-05-27 2016-04-05 Voicebox Technologies Corporation System and method for an integrated, multi-modal, multi-device natural language voice services environment
US8082498B2 (en) 2008-05-27 2011-12-20 Appfolio, Inc. Systems and methods for automatic spell checking of dynamically generated web pages
US20090326938A1 (en) 2008-05-28 2009-12-31 Nokia Corporation Multiword text correction
US8126435B2 (en) 2008-05-30 2012-02-28 Hewlett-Packard Development Company, L.P. Techniques to manage vehicle communications
US8473279B2 (en) 2008-05-30 2013-06-25 Eiman Al-Shammari Lemmatizing, stemming, and query expansion method and system
US8694355B2 (en) 2008-05-30 2014-04-08 Sri International Method and apparatus for automated assistance with task management
US8233366B2 (en) 2008-06-02 2012-07-31 Apple Inc. Context-based error indication methods and apparatus
US20090298529A1 (en) 2008-06-03 2009-12-03 Symbol Technologies, Inc. Audio HTML (aHTML): Audio Access to Web/Data
KR101631496B1 (ko) 2008-06-03 2016-06-17 삼성전자주식회사 로봇 장치 및 그 단축 명령 등록 방법
JP5377889B2 (ja) 2008-06-05 2013-12-25 日本放送協会 言語処理装置およびプログラム
JP5136228B2 (ja) 2008-06-05 2013-02-06 日本電気株式会社 作業環境自動保存復元システム、作業環境自動保存復元方法および作業環境自動保存復元プログラム
US8140326B2 (en) 2008-06-06 2012-03-20 Fuji Xerox Co., Ltd. Systems and methods for reducing speech intelligibility while preserving environmental sounds
TWM348993U (en) 2008-06-06 2009-01-11 Ming-Ying Chen Smart voice-controlled device to control home appliance with infrared controller
US8180630B2 (en) 2008-06-06 2012-05-15 Zi Corporation Of Canada, Inc. Systems and methods for an automated personalized dictionary generator for portable devices
US8831948B2 (en) 2008-06-06 2014-09-09 At&T Intellectual Property I, L.P. System and method for synthetically generated speech describing media content
US8464150B2 (en) 2008-06-07 2013-06-11 Apple Inc. Automatic language identification for dynamic text processing
US9626363B2 (en) 2008-06-08 2017-04-18 Apple Inc. System and method for placeshifting media playback
US20090306967A1 (en) 2008-06-09 2009-12-10 J.D. Power And Associates Automatic Sentiment Analysis of Surveys
KR100988397B1 (ko) 2008-06-09 2010-10-19 엘지전자 주식회사 이동 단말기 및 그의 텍스트 수정방법
US8219397B2 (en) 2008-06-10 2012-07-10 Nuance Communications, Inc. Data processing system for autonomously building speech identification and tagging data
DE602008005428D1 (de) 2008-06-11 2011-04-21 Exb Asset Man Gmbh Vorrichtung und Verfahren mit verbessertem Texteingabemechanismus
KR101513615B1 (ko) 2008-06-12 2015-04-20 엘지전자 주식회사 이동 단말기 및 그 음성 인식 방법
US8527876B2 (en) 2008-06-12 2013-09-03 Apple Inc. System and methods for adjusting graphical representations of media files based on previous usage
US20090313020A1 (en) 2008-06-12 2009-12-17 Nokia Corporation Text-to-speech user interface control
US20090313564A1 (en) 2008-06-12 2009-12-17 Apple Inc. Systems and methods for adjusting playback of media files based on previous usage
US8452790B1 (en) 2008-06-13 2013-05-28 Ustringer LLC Method and apparatus for distributing content
US8140330B2 (en) 2008-06-13 2012-03-20 Robert Bosch Gmbh System and method for detecting repeated patterns in dialog systems
US8195460B2 (en) 2008-06-17 2012-06-05 Voicesense Ltd. Speaker characterization through speech analysis
US20090313023A1 (en) 2008-06-17 2009-12-17 Ralph Jones Multilingual text-to-speech system
US9510044B1 (en) 2008-06-18 2016-11-29 Gracenote, Inc. TV content segmentation, categorization and identification and time-aligned applications
DE102008028885A1 (de) 2008-06-18 2009-12-31 Epcos Ag Verfahren zur Abstimmung einer Resonanzfrequenz eines piezoelektrischen Bauelementes
CA2727951A1 (en) 2008-06-19 2009-12-23 E-Lane Systems Inc. Communication system with voice mail access and call by spelling functionality
AU2009260033A1 (en) 2008-06-19 2009-12-23 Wize Technologies, Inc. System and method for aggregating and summarizing product/topic sentiment
GB2462800A (en) 2008-06-20 2010-02-24 New Voice Media Ltd Monitoring a conversation between an agent and a customer and performing real time analytics on the audio signal for determining future handling of the call
US9081590B2 (en) 2008-06-24 2015-07-14 Microsoft Technology Licensing, Llc Multimodal input using scratchpad graphical user interface to edit speech text input with keyboard input
WO2009156438A1 (en) 2008-06-24 2009-12-30 Llinxx Method and system for entering an expression
WO2009156978A1 (en) 2008-06-26 2009-12-30 Intuitive User Interfaces Ltd System and method for intuitive user interaction
US8300801B2 (en) 2008-06-26 2012-10-30 Centurylink Intellectual Property Llc System and method for telephone based noise cancellation
US8423288B2 (en) 2009-11-30 2013-04-16 Apple Inc. Dynamic alerts for calendar events
US8364481B2 (en) 2008-07-02 2013-01-29 Google Inc. Speech recognition with parallel recognition tasks
US20100005085A1 (en) 2008-07-03 2010-01-07 Oracle International Corporation Creating relationship maps from enterprise application system data
US20110112837A1 (en) 2008-07-03 2011-05-12 Mobiter Dicta Oy Method and device for converting speech
KR101059631B1 (ko) 2008-07-04 2011-08-25 야후! 인크. 자동 입출력 인터페이스를 갖춘 번역기 및 그 인터페이싱방법
US8478592B2 (en) 2008-07-08 2013-07-02 Nuance Communications, Inc. Enhancing media playback with speech recognition
JP4710931B2 (ja) 2008-07-09 2011-06-29 ソニー株式会社 学習装置、学習方法、およびプログラム
US8781833B2 (en) 2008-07-17 2014-07-15 Nuance Communications, Inc. Speech recognition semantic classification training
US8521761B2 (en) 2008-07-18 2013-08-27 Google Inc. Transliteration for query expansion
US8166019B1 (en) 2008-07-21 2012-04-24 Sprint Communications Company L.P. Providing suggested actions in response to textual communications
KR20100010860A (ko) 2008-07-23 2010-02-02 엘지전자 주식회사 이동 단말기 및 그의 이벤트 제어방법
JP5791861B2 (ja) 2008-07-25 2015-10-07 シャープ株式会社 情報処理装置および情報処理方法
US8001125B1 (en) 2008-07-30 2011-08-16 Intuit Inc. Method and apparatus for defining relationships between tags
DE112009001779B4 (de) 2008-07-30 2019-08-08 Mitsubishi Electric Corp. Spracherkennungsvorrichtung
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8386485B2 (en) 2008-07-31 2013-02-26 George Mason Intellectual Properties, Inc. Case-based framework for collaborative semantic search
US8041848B2 (en) 2008-08-04 2011-10-18 Apple Inc. Media processing method and device
US8589149B2 (en) 2008-08-05 2013-11-19 Nuance Communications, Inc. Probability-based approach to recognition of user-entered data
US9317589B2 (en) 2008-08-07 2016-04-19 International Business Machines Corporation Semantic search by means of word sense disambiguation using a lexicon
KR100998566B1 (ko) 2008-08-11 2010-12-07 엘지전자 주식회사 음성인식을 이용한 언어 번역 방법 및 장치
CN102119412B (zh) 2008-08-11 2013-01-02 旭化成株式会社 例外语辞典制作装置、例外语辞典制作方法、和声音识别装置和声音识别方法
JP4577428B2 (ja) 2008-08-11 2010-11-10 ソニー株式会社 表示装置、表示方法及びプログラム
US8170969B2 (en) 2008-08-13 2012-05-01 Siemens Aktiengesellschaft Automated computation of semantic similarity of pairs of named entity phrases using electronic document corpora as background knowledge
WO2010017627A1 (en) 2008-08-14 2010-02-18 Dwight Darling Electronic presentation of world time zones
US8326630B2 (en) 2008-08-18 2012-12-04 Microsoft Corporation Context based online advertising
US8805110B2 (en) 2008-08-19 2014-08-12 Digimarc Corporation Methods and systems for content processing
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
JP5459214B2 (ja) 2008-08-20 2014-04-02 日本電気株式会社 言語モデル作成装置、言語モデル作成方法、音声認識装置、音声認識方法、プログラム、および記録媒体
US20100050064A1 (en) 2008-08-22 2010-02-25 At & T Labs, Inc. System and method for selecting a multimedia presentation to accompany text
US8112269B2 (en) 2008-08-25 2012-02-07 Microsoft Corporation Determining utility of a question
CN101802554B (zh) 2008-08-29 2013-09-25 联发科技(合肥)有限公司 用于播放语音导引的方法及相关导航装置
US8117136B2 (en) 2008-08-29 2012-02-14 Hewlett-Packard Development Company, L.P. Relationship management on a mobile computing device
WO2010025460A1 (en) 2008-08-29 2010-03-04 O3 Technologies, Llc System and method for speech-to-speech translation
US8442248B2 (en) 2008-09-03 2013-05-14 Starkey Laboratories, Inc. Systems and methods for managing wireless communication links for hearing assistance devices
US8098262B2 (en) 2008-09-05 2012-01-17 Apple Inc. Arbitrary fractional pixel movement
US8380959B2 (en) 2008-09-05 2013-02-19 Apple Inc. Memory management system and method
US20100063961A1 (en) 2008-09-05 2010-03-11 Fotonauts, Inc. Reverse Tagging of Images in System for Managing and Sharing Digital Images
US20100063825A1 (en) 2008-09-05 2010-03-11 Apple Inc. Systems and Methods for Memory Management and Crossfading in an Electronic Device
US8768702B2 (en) 2008-09-05 2014-07-01 Apple Inc. Multi-tiered voice feedback in an electronic device
US8116749B2 (en) 2008-09-08 2012-02-14 Proctor Jr James Arthur Protocol for anonymous wireless communication
US20100063926A1 (en) 2008-09-09 2010-03-11 Damon Charles Hougland Payment application framework
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8290971B2 (en) 2008-09-09 2012-10-16 Applied Systems, Inc. Method and apparatus for remotely displaying a list by determining a quantity of data to send based on the list size and the display control size
JP2010066519A (ja) 2008-09-11 2010-03-25 Brother Ind Ltd 音声対話装置、音声対話方法、および音声対話プログラム
CN101673274A (zh) 2008-09-12 2010-03-17 深圳富泰宏精密工业有限公司 影片字幕检索系统及方法
US8259082B2 (en) 2008-09-12 2012-09-04 At&T Intellectual Property I, L.P. Multimodal portable communication interface for accessing video content
US8929877B2 (en) 2008-09-12 2015-01-06 Digimarc Corporation Methods and systems for content processing
US8756519B2 (en) 2008-09-12 2014-06-17 Google Inc. Techniques for sharing content on a web page
US8239201B2 (en) 2008-09-13 2012-08-07 At&T Intellectual Property I, L.P. System and method for audibly presenting selected text
US20100071003A1 (en) 2008-09-14 2010-03-18 Modu Ltd. Content personalization
US8335778B2 (en) 2008-09-17 2012-12-18 Oracle International Corporation System and method for semantic search in an enterprise application
JP5213605B2 (ja) 2008-09-17 2013-06-19 シャープ株式会社 通信装置、情報提示装置、通信方法、プログラム、および記録媒体
US8775154B2 (en) 2008-09-18 2014-07-08 Xerox Corporation Query translation through dictionary adaptation
US8326622B2 (en) 2008-09-23 2012-12-04 International Business Machines Corporation Dialog filtering for filling out a form
US20100077350A1 (en) 2008-09-25 2010-03-25 Microsoft Corporation Combining elements in presentation of content
JP2010078979A (ja) 2008-09-26 2010-04-08 Nec Infrontia Corp 音声録音装置、録音音声検索方法及びプログラム
US8560371B2 (en) 2008-09-26 2013-10-15 Microsoft Corporation Suggesting things to do during time slots in a schedule
US8352268B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for selective rate of speech and speech preferences for text to speech synthesis
US8180641B2 (en) 2008-09-29 2012-05-15 Microsoft Corporation Sequential speech recognition with two unequal ASR systems
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
DE112009002304T5 (de) 2008-09-29 2012-01-19 Fisher-Rosemount Systems, Inc. Effiziente Auslegung und Konfigurierung von Elementen in einem Prozesssteuerungssystem
US20100082327A1 (en) 2008-09-29 2010-04-01 Apple Inc. Systems and methods for mapping phonemes for text to speech synthesis
US8352272B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for text to speech synthesis
US8396714B2 (en) 2008-09-29 2013-03-12 Apple Inc. Systems and methods for concatenation of words in text to speech synthesis
US20100082328A1 (en) 2008-09-29 2010-04-01 Apple Inc. Systems and methods for speech preprocessing in text to speech synthesis
US8583418B2 (en) 2008-09-29 2013-11-12 Apple Inc. Systems and methods of detecting language and natural language strings for text to speech synthesis
US8355919B2 (en) 2008-09-29 2013-01-15 Apple Inc. Systems and methods for text normalization for text to speech synthesis
US9077526B2 (en) 2008-09-30 2015-07-07 Apple Inc. Method and system for ensuring sequential playback of digital media
US8401178B2 (en) 2008-09-30 2013-03-19 Apple Inc. Multiple microphone switching and configuration
US8798956B2 (en) 2008-09-30 2014-08-05 Apple Inc. Method and apparatus for surface sensing input device
US20100079508A1 (en) 2008-09-30 2010-04-01 Andrew Hodge Electronic devices with gaze detection capabilities
US8411953B2 (en) 2008-09-30 2013-04-02 International Business Machines Corporation Tagging images by determining a set of similar pre-tagged images and extracting prominent tags from that set
JP2010086230A (ja) 2008-09-30 2010-04-15 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20100255858A1 (en) 2008-10-02 2010-10-07 Juhasz Paul R Dead Zone for Wireless Communication Device
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8285545B2 (en) 2008-10-03 2012-10-09 Volkswagen Ag Voice command acquisition system and method
US9442648B2 (en) 2008-10-07 2016-09-13 Blackberry Limited Portable electronic device and method of controlling same
US9200913B2 (en) 2008-10-07 2015-12-01 Telecommunication Systems, Inc. User interface for predictive traffic
US8380497B2 (en) 2008-10-15 2013-02-19 Qualcomm Incorporated Methods and apparatus for noise estimation
US8539342B1 (en) 2008-10-16 2013-09-17 Adobe Systems Incorporated Read-order inference via content sorting
US8170961B2 (en) 2008-10-16 2012-05-01 At&T Intellectual Property I, L.P. Text edit tracker that categorizes communications, determines distances between templates, codes templates in color, and uses a morphing score based on edits
US8543913B2 (en) 2008-10-16 2013-09-24 International Business Machines Corporation Identifying and using textual widgets
US20100114887A1 (en) 2008-10-17 2010-05-06 Google Inc. Textual Disambiguation Using Social Connections
US20100131899A1 (en) 2008-10-17 2010-05-27 Darwin Ecosystem Llc Scannable Cloud
US8364487B2 (en) 2008-10-21 2013-01-29 Microsoft Corporation Speech recognition system with display information
US8670546B2 (en) 2008-10-22 2014-03-11 At&T Intellectual Property I, L.P. Systems and methods for providing a personalized communication processing service
US8190437B2 (en) 2008-10-24 2012-05-29 Nuance Communications, Inc. Speaker verification methods and apparatus
US8218397B2 (en) 2008-10-24 2012-07-10 Qualcomm Incorporated Audio source proximity estimation using sensor array for noise reduction
US8724829B2 (en) 2008-10-24 2014-05-13 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for coherence detection
US8577685B2 (en) 2008-10-24 2013-11-05 At&T Intellectual Property I, L.P. System and method for targeted advertising
US8644488B2 (en) 2008-10-27 2014-02-04 Nuance Communications, Inc. System and method for automatically generating adaptive interaction logs from customer interaction text
US8645123B2 (en) 2008-10-27 2014-02-04 Microsoft Corporation Image-based semantic distance
US8412529B2 (en) 2008-10-29 2013-04-02 Verizon Patent And Licensing Inc. Method and system for enhancing verbal communication sessions
TWI487385B (zh) 2008-10-31 2015-06-01 Chi Mei Comm Systems Inc 音量調節裝置及其調節方法
KR101543221B1 (ko) 2008-10-31 2015-08-12 에스케이플래닛 주식회사 다중 사용자-다중 서비스 제공 방법, 장치 및 시스템
JP5230358B2 (ja) 2008-10-31 2013-07-10 キヤノン株式会社 情報検索装置、情報検索方法、プログラム及び記憶媒体
WO2010053437A1 (en) 2008-11-04 2010-05-14 Saplo Ab Method and system for analyzing text
US8170966B1 (en) 2008-11-04 2012-05-01 Bitdefender IPR Management Ltd. Dynamic streaming message clustering for rapid spam-wave detection
US8122094B1 (en) 2008-11-05 2012-02-21 Kotab Dominic M Methods for performing an action relating to the scheduling of an event by performing one or more actions based on a response to a message
US8122353B2 (en) 2008-11-07 2012-02-21 Yahoo! Inc. Composing a message in an online textbox using a non-latin script
US20100205628A1 (en) 2009-02-12 2010-08-12 Davis Bruce L Media processing methods and arrangements
KR101734450B1 (ko) 2008-11-10 2017-05-11 구글 인코포레이티드 멀티센서 음성 검출
US9202171B2 (en) 2008-11-11 2015-12-01 Digideal Corporation Virtual game assistant based on artificial intelligence
KR20100053149A (ko) 2008-11-12 2010-05-20 삼성전자주식회사 이동통신 단말기에서 참석 인원의 상황을 고려한 일정 생성장치 및 방법
US8249870B2 (en) 2008-11-12 2012-08-21 Massachusetts Institute Of Technology Semi-automatic speech transcription
US8386261B2 (en) 2008-11-14 2013-02-26 Vocollect Healthcare Systems, Inc. Training/coaching system for a voice-enabled work environment
US8832319B2 (en) 2008-11-18 2014-09-09 Amazon Technologies, Inc. Synchronization of digital content
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US8108214B2 (en) 2008-11-19 2012-01-31 Robert Bosch Gmbh System and method for recognizing proper names in dialog systems
US8296124B1 (en) 2008-11-21 2012-10-23 Google Inc. Method and apparatus for detecting incorrectly translated text in a document
US9202455B2 (en) 2008-11-24 2015-12-01 Qualcomm Incorporated Systems, methods, apparatus, and computer program products for enhanced active noise cancellation
US20100128701A1 (en) 2008-11-24 2010-05-27 Qualcomm Incorporated Beacon transmission for participation in peer-to-peer formation and discovery
US20100131265A1 (en) 2008-11-25 2010-05-27 Nokia Corporation Method, Apparatus and Computer Program Product for Providing Context Aware Queries in a Network
US8442824B2 (en) 2008-11-26 2013-05-14 Nuance Communications, Inc. Device, system, and method of liveness detection utilizing voice biometrics
US20100131498A1 (en) 2008-11-26 2010-05-27 General Electric Company Automated healthcare information composition and query enhancement
US8140328B2 (en) 2008-12-01 2012-03-20 At&T Intellectual Property I, L.P. User intention based on N-best list of recognition hypotheses for utterances in a dialog
US20100138680A1 (en) 2008-12-02 2010-06-03 At&T Mobility Ii Llc Automatic display and voice command activation with hand edge sensing
US8489599B2 (en) 2008-12-02 2013-07-16 Palo Alto Research Center Incorporated Context and activity-driven content delivery and interaction
US8117036B2 (en) 2008-12-03 2012-02-14 At&T Intellectual Property I, L.P. Non-disruptive side conversation information retrieval
US8073693B2 (en) 2008-12-04 2011-12-06 At&T Intellectual Property I, L.P. System and method for pronunciation modeling
JP5257311B2 (ja) 2008-12-05 2013-08-07 ソニー株式会社 情報処理装置、および情報処理方法
US8589157B2 (en) 2008-12-05 2013-11-19 Microsoft Corporation Replying to text messages via automated voice search techniques
US8054180B1 (en) 2008-12-08 2011-11-08 Amazon Technologies, Inc. Location aware reminders
US20100185949A1 (en) 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
EP2196989B1 (en) 2008-12-10 2012-06-27 Nuance Communications, Inc. Grammar and template-based speech recognition of spoken utterances
US9959870B2 (en) 2008-12-11 2018-05-01 Apple Inc. Speech recognition involving a mobile device
US20100153448A1 (en) 2008-12-12 2010-06-17 International Business Machines Corporation Persistent search notification
US8121842B2 (en) 2008-12-12 2012-02-21 Microsoft Corporation Audio output of a document from mobile device
US8208609B2 (en) 2008-12-15 2012-06-26 Centurylink Intellectual Property Llc System and method for voice activated dialing from a home phone
US8160881B2 (en) 2008-12-15 2012-04-17 Microsoft Corporation Human-assisted pronunciation generation
DE112009003645B4 (de) 2008-12-16 2014-05-15 Mitsubishi Electric Corporation Navigationsvorrichtung
US8447588B2 (en) 2008-12-18 2013-05-21 Palo Alto Research Center Incorporated Region-matching transducers for natural language processing
US9323854B2 (en) 2008-12-19 2016-04-26 Intel Corporation Method, apparatus and system for location assisted translation
JP5329939B2 (ja) 2008-12-19 2013-10-30 Kddi株式会社 コンテキスト検索方法および装置
US8918321B2 (en) 2012-04-13 2014-12-23 At&T Intellectual Property I, L.P. System and method for enhancing speech recognition accuracy
JP5579195B2 (ja) 2008-12-22 2014-08-27 グーグル インコーポレイテッド 複製されたコンテンツアドレス可能ストレージクラスタのための非同期分散型重複排除
US8635068B2 (en) 2008-12-23 2014-01-21 At&T Intellectual Property I, L.P. System and method for recognizing speech with dialect grammars
JP5326892B2 (ja) 2008-12-26 2013-10-30 富士通株式会社 情報処理装置、プログラム、および音響モデルを生成する方法
US8447609B2 (en) 2008-12-31 2013-05-21 Intel Corporation Adjustment of temporal acoustical characteristics
WO2010075623A1 (en) 2008-12-31 2010-07-08 Bce Inc. System and method for unlocking a device
US8456420B2 (en) 2008-12-31 2013-06-04 Intel Corporation Audible list traversal
KR101543326B1 (ko) 2009-01-05 2015-08-10 삼성전자주식회사 시스템 온 칩 및 그 구동 방법
TW201027515A (en) 2009-01-06 2010-07-16 High Tech Comp Corp Electronic event-recording device and method thereof
EP2205010A1 (en) 2009-01-06 2010-07-07 BRITISH TELECOMMUNICATIONS public limited company Messaging
US8332205B2 (en) 2009-01-09 2012-12-11 Microsoft Corporation Mining transliterations for out-of-vocabulary query terms
US20100180218A1 (en) 2009-01-15 2010-07-15 International Business Machines Corporation Editing metadata in a social network
US8364488B2 (en) 2009-01-15 2013-01-29 K-Nfb Reading Technology, Inc. Voice models for document narration
US10088976B2 (en) 2009-01-15 2018-10-02 Em Acquisition Corp., Inc. Systems and methods for multiple voice document narration
JP2010166478A (ja) 2009-01-19 2010-07-29 Hitachi Kokusai Electric Inc 無線通信端末
US8670583B2 (en) 2009-01-22 2014-03-11 Panasonic Corporation Hearing aid system
EP2211336B1 (en) 2009-01-23 2014-10-08 Harman Becker Automotive Systems GmbH Improved speech input using navigation information
US8213911B2 (en) 2009-01-28 2012-07-03 Virtual Hold Technology Llc Mobile communication device for establishing automated call back
US8200489B1 (en) 2009-01-29 2012-06-12 The United States Of America As Represented By The Secretary Of The Navy Multi-resolution hidden markov model using class specific features
US8862252B2 (en) 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
US8463806B2 (en) 2009-01-30 2013-06-11 Lexisnexis Methods and systems for creating and using an adaptive thesaurus
US20100197359A1 (en) 2009-01-30 2010-08-05 Harris Technology, Llc Automatic Detection of Wireless Phone
US9070282B2 (en) 2009-01-30 2015-06-30 Altorr Corp. Smartphone control of electrical devices
US9183881B2 (en) 2009-02-02 2015-11-10 Porto Technology, Llc System and method for semantic trick play
US20110307491A1 (en) 2009-02-04 2011-12-15 Fisk Charles M Digital photo organizing and tagging method
US9489131B2 (en) 2009-02-05 2016-11-08 Apple Inc. Method of presenting a web page for accessibility browsing
US8254972B2 (en) 2009-02-13 2012-08-28 Sony Mobile Communications Ab Device and method for handling messages
US8428758B2 (en) 2009-02-16 2013-04-23 Apple Inc. Dynamic audio ducking
CN102369724B (zh) 2009-02-18 2016-05-04 谷歌公司 自动捕获信息,例如使用文档感知设备捕获信息
US8032602B2 (en) 2009-02-18 2011-10-04 International Business Machines Corporation Prioritization of recipient email messages
US8326637B2 (en) 2009-02-20 2012-12-04 Voicebox Technologies, Inc. System and method for processing multi-modal device interactions in a natural language voice services environment
WO2010099352A1 (en) 2009-02-25 2010-09-02 Miri Systems, Llc Payment system and method
US20100223131A1 (en) 2009-02-27 2010-09-02 Research In Motion Limited Communications system providing mobile device notification based upon contact web pages and related methods
US8155630B2 (en) 2009-02-27 2012-04-10 Research In Motion Limited Communications system providing mobile device notification based upon personal interest information and calendar events
KR101041039B1 (ko) 2009-02-27 2011-06-14 고려대학교 산학협력단 오디오 및 비디오 정보를 이용한 시공간 음성 구간 검출 방법 및 장치
US9646603B2 (en) 2009-02-27 2017-05-09 Longsand Limited Various apparatus and methods for a speech recognition system
US9280971B2 (en) 2009-02-27 2016-03-08 Blackberry Limited Mobile wireless communications device with speech to text conversion and related methods
US8280434B2 (en) 2009-02-27 2012-10-02 Research In Motion Limited Mobile wireless communications device for hearing and/or speech impaired user
ATE544291T1 (de) 2009-02-27 2012-02-15 Research In Motion Ltd Mobile funkkommunikationsvorrichtung mit sprache- text-umwandlung und zugehörige verfahren
US9171284B2 (en) 2009-03-02 2015-10-27 Microsoft Technology Licensing, Llc Techniques to restore communications sessions for applications having conversation and meeting environments
US8239333B2 (en) 2009-03-03 2012-08-07 Microsoft Corporation Media tag recommendation technologies
US20100229100A1 (en) 2009-03-03 2010-09-09 Sprint Spectrum L.P. Methods and Systems for Storing and Accessing Application History
EP2405423B1 (en) 2009-03-03 2013-09-11 Mitsubishi Electric Corporation Voice recognition device
US8805439B2 (en) 2009-03-05 2014-08-12 Lg Electronics Inc. Mobile terminal and method for controlling the same
JP2010205111A (ja) 2009-03-05 2010-09-16 Nippon Telegr & Teleph Corp <Ntt> コンテキスト再現システム、コンテキスト再現方法、第1端末装置、第2端末装置、コンテキスト取得装置、または蓄積装置、それらのプログラム
US8605039B2 (en) 2009-03-06 2013-12-10 Zimpl Ab Text input
WO2010100937A1 (ja) 2009-03-06 2010-09-10 シャープ株式会社 ブックマーク利用装置、ブックマーク作成装置、ブックマーク共有システム、制御方法、制御プログラム、および、記録媒体
US20100225809A1 (en) 2009-03-09 2010-09-09 Sony Corporation And Sony Electronics Inc. Electronic book with enhanced features
US8380507B2 (en) 2009-03-09 2013-02-19 Apple Inc. Systems and methods for determining the language to use for speech generated by a text to speech engine
US8165321B2 (en) 2009-03-10 2012-04-24 Apple Inc. Intelligent clip mixing
WO2010105245A2 (en) 2009-03-12 2010-09-16 Exbiblio B.V. Automatically providing content associated with captured information, such as information captured in real-time
CN101833286A (zh) 2009-03-13 2010-09-15 王俊锋 一种智能家居控制器
US8417526B2 (en) 2009-03-13 2013-04-09 Adacel, Inc. Speech recognition learning system and method
US8286106B2 (en) 2009-03-13 2012-10-09 Oracle America, Inc. System and method for interacting with status information on a touch screen device
US8584050B2 (en) 2009-03-16 2013-11-12 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US8589374B2 (en) 2009-03-16 2013-11-19 Apple Inc. Multifunction device with integrated search and application selection
US20100235780A1 (en) 2009-03-16 2010-09-16 Westerman Wayne C System and Method for Identifying Words Based on a Sequence of Keyboard Events
CN101515952B (zh) 2009-03-18 2011-04-27 南京邮电大学 多传感器手机
KR101524740B1 (ko) 2009-03-19 2015-06-01 구글 인코포레이티드 입력 방법 편집기
JP2010224194A (ja) 2009-03-23 2010-10-07 Sony Corp 音声認識装置及び音声認識方法、言語モデル生成装置及び言語モデル生成方法、並びにコンピューター・プログラム
JP5419136B2 (ja) 2009-03-24 2014-02-19 アルパイン株式会社 音声出力装置
KR101078864B1 (ko) 2009-03-26 2011-11-02 한국과학기술원 질의/문서 주제 범주 변화 분석 시스템 및 그 방법과 이를 이용한 질의 확장 기반 정보 검색 시스템 및 그 방법
GB0905457D0 (en) 2009-03-30 2009-05-13 Touchtype Ltd System and method for inputting text into electronic devices
GB0917753D0 (en) 2009-10-09 2009-11-25 Touchtype Ltd System and method for inputting text into electronic devices
US20100250599A1 (en) 2009-03-30 2010-09-30 Nokia Corporation Method and apparatus for integration of community-provided place data
US9424246B2 (en) 2009-03-30 2016-08-23 Touchtype Ltd. System and method for inputting text into electronic devices
GB201016385D0 (en) 2010-09-29 2010-11-10 Touchtype Ltd System and method for inputting text into electronic devices
US9189472B2 (en) 2009-03-30 2015-11-17 Touchtype Limited System and method for inputting text into small screen devices
US10191654B2 (en) 2009-03-30 2019-01-29 Touchtype Limited System and method for inputting text into electronic devices
US8798255B2 (en) 2009-03-31 2014-08-05 Nice Systems Ltd Methods and apparatus for deep interaction analysis
US8166032B2 (en) 2009-04-09 2012-04-24 MarketChorus, Inc. System and method for sentiment-based text classification and relevancy ranking
US20100263015A1 (en) 2009-04-09 2010-10-14 Verizon Patent And Licensing Inc. Wireless Interface for Set Top Box
US8805823B2 (en) 2009-04-14 2014-08-12 Sri International Content processing systems and methods
KR101537706B1 (ko) 2009-04-16 2015-07-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8209174B2 (en) 2009-04-17 2012-06-26 Saudi Arabian Oil Company Speaker verification system
US8275736B2 (en) 2009-04-17 2012-09-25 International Business Machines Corporation Increasing knowledge sharing success rates using real time match making
US20110065456A1 (en) 2009-04-20 2011-03-17 Brennan Joseph P Cellular device deactivation system
US9761219B2 (en) 2009-04-21 2017-09-12 Creative Technology Ltd System and method for distributed text-to-speech synthesis and intelligibility
US8660970B1 (en) 2009-04-23 2014-02-25 The Boeing Company Passive learning and autonomously interactive system for leveraging user knowledge in networked environments
US8660924B2 (en) 2009-04-30 2014-02-25 Navera, Inc. Configurable interactive assistant
US8606735B2 (en) 2009-04-30 2013-12-10 Samsung Electronics Co., Ltd. Apparatus and method for predicting user's intention based on multimodal information
KR101581883B1 (ko) 2009-04-30 2016-01-11 삼성전자주식회사 모션 정보를 이용하는 음성 검출 장치 및 방법
KR101032792B1 (ko) 2009-04-30 2011-05-06 주식회사 코오롱 에어백용 폴리에스테르 원단 및 그의 제조 방법
BRPI1012218A2 (pt) 2009-05-08 2019-09-24 Obdedge Llc sistemas, métodos e dispositivos para monitoração e controle com base em política de uso de dispositivos móveis por operadores de veículo
US9298823B2 (en) 2009-05-08 2016-03-29 International Business Machines Corporation Identifying core content based on citations
WO2010131256A1 (en) 2009-05-13 2010-11-18 Rajesh Mehra A keyboard for linguistic scripts
US20100293460A1 (en) 2009-05-14 2010-11-18 Budelli Joe G Text selection method and system based on gestures
US8498857B2 (en) 2009-05-19 2013-07-30 Tata Consultancy Services Limited System and method for rapid prototyping of existing speech recognition solutions in different languages
US8583511B2 (en) 2009-05-19 2013-11-12 Bradley Marshall Hendrickson Systems and methods for storing customer purchasing and preference data and enabling a customer to pre-register orders and events
KR101577607B1 (ko) 2009-05-22 2015-12-15 삼성전자주식회사 상황 및 의도인지 기반의 언어 표현 장치 및 그 방법
WO2010138775A1 (en) 2009-05-27 2010-12-02 Geodelic, Inc. Location discovery system and method
US8369822B2 (en) 2009-05-28 2013-02-05 At&T Intellectual Property I, Lp Systems and methods for providing emergency callback procedures
WO2010135837A1 (en) 2009-05-28 2010-12-02 Intelligent Mechatronic Systems Inc Communication system with personal information management and remote vehicle monitoring and control features
US20150294377A1 (en) 2009-05-30 2015-10-15 Edmond K. Chow Trust network effect
US20120310652A1 (en) 2009-06-01 2012-12-06 O'sullivan Daniel Adaptive Human Computer Interface (AAHCI)
EP2259252B1 (en) 2009-06-02 2012-08-01 Nuance Communications, Inc. Speech recognition method for selecting a combination of list elements via a speech input
US8095119B2 (en) 2009-06-02 2012-01-10 Microsoft Corporation In-call contact information display
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US8560313B2 (en) 2010-05-13 2013-10-15 General Motors Llc Transient noise rejection for speech recognition
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US20120327009A1 (en) 2009-06-07 2012-12-27 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US8412531B2 (en) 2009-06-10 2013-04-02 Microsoft Corporation Touch anywhere to speak
KR101562792B1 (ko) 2009-06-10 2015-10-23 삼성전자주식회사 목표 예측 인터페이스 제공 장치 및 그 방법
JP2010287063A (ja) 2009-06-11 2010-12-24 Zenrin Datacom Co Ltd 情報提供装置、情報提供システム及びプログラム
US8290777B1 (en) 2009-06-12 2012-10-16 Amazon Technologies, Inc. Synchronizing the playing and displaying of digital content
US20130219333A1 (en) 2009-06-12 2013-08-22 Adobe Systems Incorporated Extensible Framework for Facilitating Interaction with Devices
US8484027B1 (en) 2009-06-12 2013-07-09 Skyreader Media Inc. Method for live remote narration of a digital book
CN101923853B (zh) 2009-06-12 2013-01-23 华为技术有限公司 说话人识别方法、设备和系统
US8533622B2 (en) 2009-06-17 2013-09-10 Microsoft Corporation Integrating digital book and zoom interface displays
US8306238B2 (en) 2009-06-17 2012-11-06 Sony Ericsson Mobile Communications Ab Method and circuit for controlling an output of an audio signal of a battery-powered device
US9215212B2 (en) 2009-06-22 2015-12-15 Citrix Systems, Inc. Systems and methods for providing a visualizer for rules of an application firewall
US20100324709A1 (en) 2009-06-22 2010-12-23 Tree Of Life Publishing E-book reader with voice annotation
US10353967B2 (en) 2009-06-22 2019-07-16 Microsoft Technology Licensing, Llc Assigning relevance weights based on temporal dynamics
US20100332236A1 (en) 2009-06-25 2010-12-30 Blueant Wireless Pty Limited Voice-triggered operation of electronic devices
US20100330908A1 (en) 2009-06-25 2010-12-30 Blueant Wireless Pty Limited Telecommunications device with voice-controlled functions
US11012732B2 (en) 2009-06-25 2021-05-18 DISH Technologies L.L.C. Voice enabled media presentation systems and methods
US8219930B2 (en) 2009-06-26 2012-07-10 Verizon Patent And Licensing Inc. Radial menu display systems and methods
US9754224B2 (en) 2009-06-26 2017-09-05 International Business Machines Corporation Action based to-do list
US8983640B2 (en) 2009-06-26 2015-03-17 Intel Corporation Controlling audio players using environmental audio analysis
US8527278B2 (en) 2009-06-29 2013-09-03 Abraham Ben David Intelligent home automation
US20100332224A1 (en) 2009-06-30 2010-12-30 Nokia Corporation Method and apparatus for converting text to audio and tactile output
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8700399B2 (en) 2009-07-06 2014-04-15 Sensory, Inc. Systems and methods for hands-free voice control and voice search
US20110002487A1 (en) 2009-07-06 2011-01-06 Apple Inc. Audio Channel Assignment for Audio Output in a Movable Device
US8943423B2 (en) 2009-07-07 2015-01-27 International Business Machines Corporation User interface indicators for changed user interface elements
KR101083540B1 (ko) 2009-07-08 2011-11-14 엔에이치엔(주) 통계적인 방법을 이용한 한자에 대한 자국어 발음열 변환 시스템 및 방법
US8344847B2 (en) 2009-07-09 2013-01-01 Medtronic Minimed, Inc. Coordination of control commands in a medical device system having at least one therapy delivery device and at least one wireless controller device
KR101061443B1 (ko) 2009-07-13 2011-09-02 엘지전자 주식회사 전자 기기, 이동 단말기 및 이를 이용한 기능 수행 방법
CA2768214A1 (en) 2009-07-15 2011-01-20 Google Inc. Commands directed at displayed text
US8892439B2 (en) 2009-07-15 2014-11-18 Microsoft Corporation Combination and federation of local and remote speech recognition
US9998552B1 (en) 2010-04-30 2018-06-12 Open Invention Network Llc Dynamic creation, data population, and communication establishment across various mediums
US20110016421A1 (en) 2009-07-20 2011-01-20 Microsoft Corporation Task oriented user interface platform
US20110016150A1 (en) 2009-07-20 2011-01-20 Engstroem Jimmy System and method for tagging multiple digital images
US8213962B2 (en) 2009-07-21 2012-07-03 Verizon Patent And Licensing Inc. Vehicle computer link to mobile phone
US7953679B2 (en) 2009-07-22 2011-05-31 Xerox Corporation Scalable indexing for layout based document retrieval and ranking
CA2761700C (en) 2009-07-24 2014-12-02 Research In Motion Limited Method and apparatus for a touch-sensitive display
US9117448B2 (en) 2009-07-27 2015-08-25 Cisco Technology, Inc. Method and system for speech recognition using social networks
US9489577B2 (en) 2009-07-27 2016-11-08 Cxense Asa Visual similarity for video content
US8239129B2 (en) 2009-07-27 2012-08-07 Robert Bosch Gmbh Method and system for improving speech recognition accuracy by use of geographic information
US20110029616A1 (en) 2009-07-29 2011-02-03 Guanming Wang Unified auto-reply to an email coming from unified messaging service
US8875219B2 (en) 2009-07-30 2014-10-28 Blackberry Limited Apparatus and method for controlled sharing of personal information
US8229488B2 (en) 2009-07-30 2012-07-24 Sony Ericsson Mobile Communications Ab Methods, apparatuses and computer programs for media content distribution
US9015818B2 (en) 2009-07-31 2015-04-21 Adobe Systems Incorporated Software application operational transfer
KR101608770B1 (ko) 2009-08-03 2016-04-04 엘지전자 주식회사 이동단말기 및 그 제어방법
JP2011033874A (ja) 2009-08-03 2011-02-17 Alpine Electronics Inc 多言語音声認識装置及び多言語音声認識辞書作成方法
US8340312B2 (en) 2009-08-04 2012-12-25 Apple Inc. Differential mode noise cancellation with active real-time control for microphone-speaker combinations used in two way audio communications
US8532574B2 (en) 2009-08-05 2013-09-10 Honda Motor Co., Ltd. Destination information sharing for the automobile environment
US8160877B1 (en) 2009-08-06 2012-04-17 Narus, Inc. Hierarchical real-time speaker recognition for biometric VoIP verification and targeting
US20110047072A1 (en) 2009-08-07 2011-02-24 Visa U.S.A. Inc. Systems and Methods for Propensity Analysis and Validation
US8233919B2 (en) 2009-08-09 2012-07-31 Hntb Holdings Ltd. Intelligently providing user-specific transportation-related information
JP5201599B2 (ja) 2009-08-11 2013-06-05 Necカシオモバイルコミュニケーションズ株式会社 端末装置、および、プログラム
US20110040707A1 (en) 2009-08-12 2011-02-17 Ford Global Technologies, Llc Intelligent music selection in vehicles
US8768313B2 (en) 2009-08-17 2014-07-01 Digimarc Corporation Methods and systems for image or audio recognition processing
US8626133B2 (en) 2009-08-19 2014-01-07 Cisco Technology, Inc. Matching a location of a contact with a task location
US8654952B2 (en) 2009-08-20 2014-02-18 T-Mobile Usa, Inc. Shareable applications on telecommunications devices
US9277021B2 (en) 2009-08-21 2016-03-01 Avaya Inc. Sending a user associated telecommunication address
KR101496649B1 (ko) 2009-08-21 2015-03-02 삼성전자주식회사 복합 네트워크 망을 통한 외부 디바이스의 기능 공유 방법 및 그 장치
EP2629211A1 (en) 2009-08-21 2013-08-21 Mikko Kalervo Väänänen Method and means for data searching and language translation
JP2011045005A (ja) 2009-08-24 2011-03-03 Fujitsu Toshiba Mobile Communications Ltd 携帯電話機
SG178344A1 (en) 2009-08-25 2012-03-29 Univ Nanyang Tech A method and system for reconstructing speech from an input signal comprising whispers
US20110054647A1 (en) 2009-08-26 2011-03-03 Nokia Corporation Network service for an audio interface unit
JP2011048671A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置および入力装置の制御方法
US8583638B2 (en) 2009-08-27 2013-11-12 Apple Inc. Adaptive mapping of search results
CN101996631B (zh) 2009-08-28 2014-12-03 国际商业机器公司 用于对齐文本的方法和装置
US20110238407A1 (en) 2009-08-31 2011-09-29 O3 Technologies, Llc Systems and methods for speech-to-speech translation
US8624851B2 (en) 2009-09-02 2014-01-07 Amazon Technologies, Inc. Touch-screen user interface
US8451238B2 (en) 2009-09-02 2013-05-28 Amazon Technologies, Inc. Touch-screen user interface
WO2011028844A2 (en) 2009-09-02 2011-03-10 Sri International Method and apparatus for tailoring the output of an intelligent automated assistant to a user
US9031834B2 (en) 2009-09-04 2015-05-12 Nuance Communications, Inc. Speech enhancement techniques on the power spectrum
TW201110108A (en) 2009-09-04 2011-03-16 Chunghwa Telecom Co Ltd Voice noise elimination method for microphone array
US8675084B2 (en) 2009-09-04 2014-03-18 Apple Inc. Systems and methods for remote camera control
US20120265535A1 (en) 2009-09-07 2012-10-18 Donald Ray Bryant-Rich Personal voice operated reminder system
US8560300B2 (en) 2009-09-09 2013-10-15 International Business Machines Corporation Error correction using fact repositories
US8788267B2 (en) 2009-09-10 2014-07-22 Mitsubishi Electric Research Laboratories, Inc. Multi-purpose contextual control
US8321527B2 (en) 2009-09-10 2012-11-27 Tribal Brands System and method for tracking user location and associated activity and responsively providing mobile device updates
US20110060812A1 (en) 2009-09-10 2011-03-10 Level 3 Communications, Llc Cache server with extensible programming framework
US20110066468A1 (en) 2009-09-11 2011-03-17 Internationl Business Machines Corporation Dynamic event planning through location awareness
US9140569B2 (en) 2009-09-11 2015-09-22 Telenav, Inc Location based system with contextual contact manager mechanism and method of operation thereof
US20110066942A1 (en) 2009-09-14 2011-03-17 Barton James M Multifunction Multimedia Device
KR101660348B1 (ko) 2009-09-16 2016-09-27 아브 이니티오 테크놀로지 엘엘시 데이터세트 요소의 매핑
US10587833B2 (en) 2009-09-16 2020-03-10 Disney Enterprises, Inc. System and method for automated network search and companion display of result relating to audio-video metadata
US8972878B2 (en) 2009-09-21 2015-03-03 Avaya Inc. Screen icon manipulation by context and frequency of Use
US9015148B2 (en) 2009-09-21 2015-04-21 Microsoft Corporation Suggesting related search queries during web browsing
CA2715362A1 (en) 2009-09-22 2011-03-22 Thwapr, Inc. Interoperable mobile media sharing
US9595257B2 (en) 2009-09-28 2017-03-14 Nuance Communications, Inc. Downsampling schemes in a hierarchical neural network structure for phoneme recognition
US8768308B2 (en) 2009-09-29 2014-07-01 Deutsche Telekom Ag Apparatus and method for creating and managing personal schedules via context-sensing and actuation
US9111538B2 (en) 2009-09-30 2015-08-18 T-Mobile Usa, Inc. Genius button secondary commands
US8995625B2 (en) 2009-09-30 2015-03-31 T-Mobile Usa, Inc. Unified interface and routing module for handling audio input
KR20110036385A (ko) 2009-10-01 2011-04-07 삼성전자주식회사 사용자 의도 분석 장치 및 방법
TW201113741A (en) 2009-10-01 2011-04-16 Htc Corp Lock-state switching method, electronic apparatus and computer program product
US9338274B2 (en) 2009-10-02 2016-05-10 Blackberry Limited Method of interacting with electronic devices in a locked state and handheld electronic device configured to permit interaction when in a locked state
US20110083079A1 (en) 2009-10-02 2011-04-07 International Business Machines Corporation Apparatus, system, and method for improved type-ahead functionality in a type-ahead field based on activity of a user within a user interface
JP5609884B2 (ja) 2009-10-05 2014-10-22 日本電気株式会社 電子メール送信機能を有する通信端末、電子メールの送信方法、及びプログラム
JP5473520B2 (ja) 2009-10-06 2014-04-16 キヤノン株式会社 入力装置及びその制御方法
US7809550B1 (en) 2009-10-08 2010-10-05 Joan Barry Barrows System for reading chinese characters in seconds
US20110087685A1 (en) 2009-10-09 2011-04-14 Microsoft Corporation Location-based service middleware
CN101673544B (zh) 2009-10-10 2012-07-04 上海电虹软件有限公司 一种基于声纹识别和定位跟踪的交叉监控方法和系统
US8335689B2 (en) 2009-10-14 2012-12-18 Cogi, Inc. Method and system for efficient management of speech transcribers
US8611876B2 (en) 2009-10-15 2013-12-17 Larry Miller Configurable phone with interactive voice response engine
US8510103B2 (en) 2009-10-15 2013-08-13 Paul Angott System and method for voice recognition
EP2488963A1 (en) 2009-10-15 2012-08-22 Rogers Communications Inc. System and method for phrase identification
US8255217B2 (en) 2009-10-16 2012-08-28 At&T Intellectual Property I, Lp Systems and methods for creating and using geo-centric language models
US8451112B2 (en) 2009-10-19 2013-05-28 Qualcomm Incorporated Methods and apparatus for estimating departure time based on known calendar events
US8332748B1 (en) 2009-10-22 2012-12-11 Google Inc. Multi-directional auto-complete menu
US8554537B2 (en) 2009-10-23 2013-10-08 Samsung Electronics Co., Ltd Method and device for transliteration
US8326624B2 (en) 2009-10-26 2012-12-04 International Business Machines Corporation Detecting and communicating biometrics of recorded voice during transcription process
US20110099507A1 (en) 2009-10-28 2011-04-28 Google Inc. Displaying a collection of interactive elements that trigger actions directed to an item
US20110099157A1 (en) 2009-10-28 2011-04-28 Google Inc. Computer-to-Computer Communications
US9197736B2 (en) 2009-12-31 2015-11-24 Digimarc Corporation Intuitive computing methods and systems
US8386574B2 (en) 2009-10-29 2013-02-26 Xerox Corporation Multi-modality classification for one-class classification in social networks
US9247421B2 (en) 2009-10-30 2016-01-26 Samsung Electronics Co., Ltd Mobile device, content delivery apparatus, content providing apparatus and control method thereof
US8315617B2 (en) 2009-10-31 2012-11-20 Btpatent Llc Controlling mobile device functions
US8832205B2 (en) 2009-11-02 2014-09-09 Lextine Software, Llc System and method for extracting calendar events from free-form email
US8279052B2 (en) 2009-11-04 2012-10-02 Immersion Corporation Systems and methods for haptic confirmation of commands
CN102056026B (zh) 2009-11-06 2013-04-03 中国移动通信集团设计院有限公司 音视频同步检测方法及其系统、语音检测方法及其系统
US20120137367A1 (en) 2009-11-06 2012-05-31 Cataphora, Inc. Continuous anomaly detection based on behavior modeling and heterogeneous information analysis
JP5622744B2 (ja) 2009-11-06 2014-11-12 株式会社東芝 音声認識装置
US8358747B2 (en) 2009-11-10 2013-01-22 International Business Machines Corporation Real time automatic caller speech profiling
US9171541B2 (en) 2009-11-10 2015-10-27 Voicebox Technologies Corporation System and method for hybrid processing in a natural language voice services environment
US8321209B2 (en) 2009-11-10 2012-11-27 Research In Motion Limited System and method for low overhead frequency domain voice authentication
EP2499626A1 (en) 2009-11-10 2012-09-19 Dulcetta, Inc. Dynamic audio playback of soundtracks for electronic visual works
US9502025B2 (en) 2009-11-10 2016-11-22 Voicebox Technologies Corporation System and method for providing a natural language content dedication service
US20110111724A1 (en) 2009-11-10 2011-05-12 David Baptiste Method and apparatus for combating distracted driving
US8682649B2 (en) 2009-11-12 2014-03-25 Apple Inc. Sentiment prediction from textual data
WO2011057346A1 (en) 2009-11-12 2011-05-19 Robert Henry Frater Speakerphone and/or microphone arrays and methods and systems of using the same
US8732180B2 (en) 2009-11-12 2014-05-20 Apple Inc. Recommending media items
US8712759B2 (en) 2009-11-13 2014-04-29 Clausal Computing Oy Specializing disambiguation of a natural language expression
KR20110052997A (ko) 2009-11-13 2011-05-19 삼성전자주식회사 디스플레이 장치와 클라이언트 단말 및 이의 제어 방법
KR20110052863A (ko) 2009-11-13 2011-05-19 삼성전자주식회사 모바일 기기 및 그 제어 신호 생성 방법
US20130166303A1 (en) 2009-11-13 2013-06-27 Adobe Systems Incorporated Accessing media data using metadata repository
US8989086B2 (en) 2009-11-13 2015-03-24 Samsung Electronics Co., Ltd. Methods and apparatus to support interference management in multi-tier wireless communication systems
TWI391915B (zh) 2009-11-17 2013-04-01 Inst Information Industry 語音變異模型建立裝置、方法及應用該裝置之語音辨識系統和方法
KR101595029B1 (ko) 2009-11-18 2016-02-17 엘지전자 주식회사 이동단말기 및 그 제어방법
US8358752B2 (en) 2009-11-19 2013-01-22 At&T Mobility Ii Llc User profile based speech to text conversion for visual voice mail
US8630971B2 (en) 2009-11-20 2014-01-14 Indian Institute Of Science System and method of using Multi Pattern Viterbi Algorithm for joint decoding of multiple patterns
US8358749B2 (en) 2009-11-21 2013-01-22 At&T Intellectual Property I, L.P. System and method to search a media content database based on voice input data
KR101960835B1 (ko) 2009-11-24 2019-03-21 삼성전자주식회사 대화 로봇을 이용한 일정 관리 시스템 및 그 방법
US8346688B2 (en) 2009-11-25 2013-01-01 International Business Machines Corporation Predicting states of subjects
US20110153330A1 (en) 2009-11-27 2011-06-23 i-SCROLL System and method for rendering text synchronized audio
US8731901B2 (en) 2009-12-02 2014-05-20 Content Savvy, Inc. Context aware back-transliteration and translation of names and common phrases using web resources
US8396888B2 (en) 2009-12-04 2013-03-12 Google Inc. Location-based searching using a search area that corresponds to a geographical location of a computing device
SG181484A1 (en) 2009-12-04 2012-07-30 Tivo Inc Multifunction multimedia device
US20110137664A1 (en) 2009-12-09 2011-06-09 International Business Machines Corporation Providing Schedule Related Information to External Entities
US8737975B2 (en) 2009-12-11 2014-05-27 At&T Mobility Ii Llc Audio-based text messaging
US8812990B2 (en) 2009-12-11 2014-08-19 Nokia Corporation Method and apparatus for presenting a first person world view of content
US8224300B2 (en) 2009-12-11 2012-07-17 Alpine Electronics, Inc. Method and apparatus to enhance navigation user experience for a smart phone device
KR101622111B1 (ko) 2009-12-11 2016-05-18 삼성전자 주식회사 대화 시스템 및 그의 대화 방법
US8543917B2 (en) 2009-12-11 2013-09-24 Nokia Corporation Method and apparatus for presenting a first-person world view of content
US20110144857A1 (en) 2009-12-14 2011-06-16 Theodore Charles Wingrove Anticipatory and adaptive automobile hmi
US9766089B2 (en) 2009-12-14 2017-09-19 Nokia Technologies Oy Method and apparatus for correlating and navigating between a live image and a prerecorded panoramic image
US8892443B2 (en) 2009-12-15 2014-11-18 At&T Intellectual Property I, L.P. System and method for combining geographic metadata in automatic speech recognition language and acoustic models
KR101211796B1 (ko) 2009-12-16 2012-12-13 포항공과대학교 산학협력단 외국어 학습 장치 및 그 제공 방법
US8341037B2 (en) 2009-12-18 2012-12-25 Apple Inc. Mixed source media playback
US8922485B1 (en) 2009-12-18 2014-12-30 Google Inc. Behavioral recognition on mobile devices
US8385982B2 (en) 2009-12-21 2013-02-26 At&T Intellectual Property I, L.P. Controlling use of a communications device in accordance with motion of the device
US20110154193A1 (en) 2009-12-21 2011-06-23 Nokia Corporation Method and Apparatus for Text Input
US9100809B2 (en) 2009-12-21 2015-08-04 Julia Olincy Olincy Automatic response option mobile system for responding to incoming texts or calls or both
US8805711B2 (en) 2009-12-22 2014-08-12 International Business Machines Corporation Two-layer data architecture for reservation management systems
US9222798B2 (en) 2009-12-22 2015-12-29 Modena Enterprises, Llc Systems and methods for identifying an activity of a user based on a chronological order of detected movements of a computing device
EP2339576B1 (en) 2009-12-23 2019-08-07 Google LLC Multi-modal input on an electronic device
KR20110072847A (ko) 2009-12-23 2011-06-29 삼성전자주식회사 열려진 사용자 의도 처리를 위한 대화관리 시스템 및 방법
US20110161309A1 (en) 2009-12-29 2011-06-30 Lx1 Technology Limited Method Of Sorting The Result Set Of A Search Engine
US8988356B2 (en) 2009-12-31 2015-03-24 Google Inc. Touch sensor and touchscreen user input combination
US8479107B2 (en) 2009-12-31 2013-07-02 Nokia Corporation Method and apparatus for fluid graphical user interface
US20110166862A1 (en) 2010-01-04 2011-07-07 Eyal Eshed System and method for variable automated response to remote verbal input at a mobile device
US8494852B2 (en) 2010-01-05 2013-07-23 Google Inc. Word-level correction of speech input
US20110167350A1 (en) 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US8346562B2 (en) 2010-01-06 2013-01-01 Csr Technology Inc. Method and apparatus for voice controlled operation of a media player
US8600743B2 (en) 2010-01-06 2013-12-03 Apple Inc. Noise profile determination for voice-related feature
WO2011085387A2 (en) 2010-01-11 2011-07-14 Everspeech, Inc. Integrated data processing and transcription service
US8311838B2 (en) 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US8381107B2 (en) 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US8334842B2 (en) 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
US20110179372A1 (en) 2010-01-15 2011-07-21 Bradford Allen Moore Automatic Keyboard Layout Determination
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US20110179002A1 (en) 2010-01-19 2011-07-21 Dell Products L.P. System and Method for a Vector-Space Search Engine
US8417575B2 (en) 2010-01-19 2013-04-09 Apple Inc. On-device offline purchases using credits
US8626511B2 (en) 2010-01-22 2014-01-07 Google Inc. Multi-dimensional disambiguation of voice commands
US8301121B2 (en) 2010-01-22 2012-10-30 Sony Ericsson Mobile Communications Ab Regulating alerts generated by communication terminals responsive to sensed movement
US20110184736A1 (en) 2010-01-26 2011-07-28 Benjamin Slotznick Automated method of recognizing inputted information items and selecting information items
US8346590B2 (en) 2010-01-27 2013-01-01 Google Inc. Automatically schedule and re-schedule meetings through search interface
JP5633042B2 (ja) 2010-01-28 2014-12-03 本田技研工業株式会社 音声認識装置、音声認識方法、及び音声認識ロボット
US8406745B1 (en) 2010-01-28 2013-03-26 Sprint Communications Company L.P. Synchronization of voice mail greeting and email auto-reply by a wireless communication device
US20120330662A1 (en) 2010-01-29 2012-12-27 Nec Corporation Input supporting system, method and program
EP2531930A1 (en) 2010-02-01 2012-12-12 Ginger Software, Inc. Automatic context sensitive language correction using an internet corpus particularly for small keyboard devices
EP2531969A4 (en) 2010-02-01 2013-12-04 Jumptap Inc INTEGRATED ADVERTISING SYSTEM
US20110191681A1 (en) 2010-02-02 2011-08-04 Dean Stark Systems and Methods for Human Intelligence Personal Assistance
US8687777B1 (en) 2010-02-03 2014-04-01 Tal Lavian Systems and methods for visual presentation and selection of IVR menu
US8600967B2 (en) 2010-02-03 2013-12-03 Apple Inc. Automatic organization of browsing histories
US8645287B2 (en) 2010-02-04 2014-02-04 Microsoft Corporation Image tagging based upon cross domain context
US8886541B2 (en) 2010-02-04 2014-11-11 Sony Corporation Remote controller with position actuatated voice transmission
US8179370B1 (en) 2010-02-09 2012-05-15 Google Inc. Proximity based keystroke resolution
US8751218B2 (en) 2010-02-09 2014-06-10 Siemens Aktiengesellschaft Indexing content at semantic level
US9413869B2 (en) 2010-02-10 2016-08-09 Qualcomm Incorporated Mobile device having plurality of input modes
US8898219B2 (en) 2010-02-12 2014-11-25 Avaya Inc. Context sensitive, cloud-based telephony
US8402018B2 (en) 2010-02-12 2013-03-19 Korea Advanced Institute Of Science And Technology Semantic search system using semantic ranking scheme
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US8812056B2 (en) 2010-02-12 2014-08-19 Christopher D. Higginbotham Voice-based command driven computer implemented method
US20120297341A1 (en) 2010-02-16 2012-11-22 Screenovate Technologies Ltd. Modified Operating Systems Allowing Mobile Devices To Accommodate IO Devices More Convenient Than Their Own Inherent IO Devices And Methods For Generating Such Systems
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US8850360B2 (en) 2010-02-23 2014-09-30 Hewlett-Packard Development Company, L.P. Skipping through electronic content on an electronic device
US9665344B2 (en) 2010-02-24 2017-05-30 GM Global Technology Operations LLC Multi-modal input system for a voice-based menu and content navigation service
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9710556B2 (en) 2010-03-01 2017-07-18 Vcvc Iii Llc Content recommendation based on collections of entities
US20120066303A1 (en) 2010-03-03 2012-03-15 Waldeck Technology, Llc Synchronized group location updates
US20110218855A1 (en) 2010-03-03 2011-09-08 Platformation, Inc. Offering Promotions Based on Query Analysis
US8502837B2 (en) 2010-03-04 2013-08-06 Research In Motion Limited System and method for activating components on an electronic device using orientation data
US8903847B2 (en) 2010-03-05 2014-12-02 International Business Machines Corporation Digital media voice tags in social networks
US8948515B2 (en) 2010-03-08 2015-02-03 Sightera Technologies Ltd. Method and system for classifying one or more images
US8521513B2 (en) 2010-03-12 2013-08-27 Microsoft Corporation Localization for interactive voice response systems
KR101477530B1 (ko) 2010-03-12 2014-12-30 뉘앙스 커뮤니케이션즈, 인코포레이티드 이동 전화의 터치 스크린과 함께 사용하기 위한 다중 모드 문자 입력 시스템
US20110228913A1 (en) 2010-03-16 2011-09-22 Telcordia Technologies, Inc. Automatic extraction of information from ongoing voice communication system and methods
US8374864B2 (en) 2010-03-17 2013-02-12 Cisco Technology, Inc. Correlation of transcribed text with corresponding audio
US20110231218A1 (en) 2010-03-18 2011-09-22 Tovar Tom C Systems and Methods for Providing Reminders for a Task List
KR101832693B1 (ko) 2010-03-19 2018-02-28 디지맥 코포레이션 직관적 컴퓨팅 방법들 및 시스템들
US20110231189A1 (en) 2010-03-19 2011-09-22 Nuance Communications, Inc. Methods and apparatus for extracting alternate media titles to facilitate speech recognition
US9323756B2 (en) 2010-03-22 2016-04-26 Lenovo (Singapore) Pte. Ltd. Audio book and e-book synchronization
US8554280B2 (en) 2010-03-23 2013-10-08 Ebay Inc. Free-form entries during payment processes
US20110239111A1 (en) 2010-03-24 2011-09-29 Avaya Inc. Spell checker interface
US20110238676A1 (en) 2010-03-25 2011-09-29 Palm, Inc. System and method for data capture, storage, and retrieval
US9628831B2 (en) 2010-03-25 2017-04-18 Whatsapp, Inc. Multimedia transcoding method and system for mobile devices
US9378202B2 (en) 2010-03-26 2016-06-28 Virtuoz Sa Semantic clustering
US20110238412A1 (en) 2010-03-26 2011-09-29 Antoine Ezzat Method for Constructing Pronunciation Dictionaries
US8428759B2 (en) 2010-03-26 2013-04-23 Google Inc. Predictive pre-recording of audio for voice input
US9026443B2 (en) 2010-03-26 2015-05-05 Nuance Communications, Inc. Context based voice activity detection sensitivity
US20120198380A1 (en) 2010-03-31 2012-08-02 Shimshon Czertok Contextual user interface
US8296380B1 (en) 2010-04-01 2012-10-23 Kel & Partners LLC Social media based messaging systems and methods
US20110242007A1 (en) 2010-04-01 2011-10-06 Gray Theodore W E-Book with User-Manipulatable Graphical Objects
US8930176B2 (en) 2010-04-01 2015-01-06 Microsoft Corporation Interactive multilingual word-alignment techniques
EP2556485A4 (en) 2010-04-07 2013-12-25 Max Value Solutions Intl Llc METHOD AND SYSTEM FOR PROVIDING GUIDANCE SERVICES IN NAME PRONUNCIATION
US9929982B2 (en) 2010-04-08 2018-03-27 Microsoft Technology Licensing, Llc Designating automated agents as friends in a social network service
US8448084B2 (en) 2010-04-08 2013-05-21 Twitter, Inc. User interface mechanics
KR101369810B1 (ko) 2010-04-09 2014-03-05 이초강 로봇을 위한 경험적 상황인식 방법을 실행하는 프로그램을 기록한 컴퓨터 판독가능한 기록 매체.
US8810684B2 (en) 2010-04-09 2014-08-19 Apple Inc. Tagging images in a mobile communications device using a contacts list
JP5315289B2 (ja) 2010-04-12 2013-10-16 トヨタ自動車株式会社 オペレーティングシステム及びオペレーティング方法
KR101681281B1 (ko) 2010-04-12 2016-12-12 구글 인코포레이티드 입력 방법 에디터에 대한 확장 프레임워크
CN102214187B (zh) 2010-04-12 2017-03-01 阿里巴巴集团控股有限公司 复合事件处理方法及装置
US8140567B2 (en) 2010-04-13 2012-03-20 Microsoft Corporation Measuring entity extraction complexity
US8265928B2 (en) 2010-04-14 2012-09-11 Google Inc. Geotagged environmental audio for enhanced speech recognition accuracy
US8756233B2 (en) 2010-04-16 2014-06-17 Video Semantics Semantic segmentation and tagging engine
US8595014B2 (en) 2010-04-19 2013-11-26 Qualcomm Incorporated Providing audible navigation system direction updates during predetermined time windows so as to minimize impact on conversations
US20130238647A1 (en) 2010-04-21 2013-09-12 Proteus Digital Health, Inc. Diagnostic System and Method
US20110260829A1 (en) 2010-04-21 2011-10-27 Research In Motion Limited Method of providing security on a portable electronic device having a touch-sensitive display
US20130096911A1 (en) 2010-04-21 2013-04-18 Universite Catholique De Louvain Normalisation of noisy typewritten texts
EP2586269B1 (en) 2010-04-22 2019-05-15 Zipit Wireless, Inc. System and method for administration and operation of one or more mobile electronic communications devices
US20110264495A1 (en) 2010-04-22 2011-10-27 Apple Inc. Aggregation of tagged media item information
US20110264999A1 (en) 2010-04-23 2011-10-27 Research In Motion Limited Electronic device including touch-sensitive input device and method of controlling same
US20110264530A1 (en) 2010-04-23 2011-10-27 Bryan Santangelo Apparatus and methods for dynamic secondary content and data insertion and delivery
US8874432B2 (en) 2010-04-28 2014-10-28 Nec Laboratories America, Inc. Systems and methods for semi-supervised relationship extraction
US8452037B2 (en) 2010-05-05 2013-05-28 Apple Inc. Speaker clip
US8380504B1 (en) 2010-05-06 2013-02-19 Sprint Communications Company L.P. Generation of voice profiles
US8756571B2 (en) 2010-05-07 2014-06-17 Hewlett-Packard Development Company, L.P. Natural language text instructions
US8938436B2 (en) 2010-05-10 2015-01-20 Verizon Patent And Licensing Inc. System for and method of providing reusable software service information based on natural language queries
JP5595112B2 (ja) 2010-05-11 2014-09-24 本田技研工業株式会社 ロボット
JP2011238022A (ja) 2010-05-11 2011-11-24 Panasonic Corp 端末、コンテンツの利用の把握方法およびコンテンツの利用システム
US20110283189A1 (en) 2010-05-12 2011-11-17 Rovi Technologies Corporation Systems and methods for adjusting media guide interaction modes
US20110279368A1 (en) 2010-05-12 2011-11-17 Microsoft Corporation Inferring user intent to engage a motion capture system
US8982738B2 (en) 2010-05-13 2015-03-17 Futurewei Technologies, Inc. System, apparatus for content delivery for internet traffic and methods thereof
US9634855B2 (en) 2010-05-13 2017-04-25 Alexander Poltorak Electronic personal interactive device that determines topics of interest using a conversational agent
US9015139B2 (en) 2010-05-14 2015-04-21 Rovi Guides, Inc. Systems and methods for performing a search based on a media content snapshot image
US8392186B2 (en) 2010-05-18 2013-03-05 K-Nfb Reading Technology, Inc. Audio synchronization for document narration with user-selected playback
US8745091B2 (en) 2010-05-18 2014-06-03 Integro, Inc. Electronic document classification
US8694313B2 (en) 2010-05-19 2014-04-08 Google Inc. Disambiguation of contact information using historical data
WO2011146276A2 (en) 2010-05-19 2011-11-24 Google Inc. Television related searching
US9552355B2 (en) 2010-05-20 2017-01-24 Xerox Corporation Dynamic bi-phrases for statistical machine translation
US8522283B2 (en) 2010-05-20 2013-08-27 Google Inc. Television remote control data transfer
US20110288917A1 (en) 2010-05-21 2011-11-24 James Wanek Systems and methods for providing mobile targeted advertisements
US9236047B2 (en) 2010-05-21 2016-01-12 Microsoft Technology Licensing, Llc Voice stream augmented note taking
US9552125B2 (en) 2010-05-21 2017-01-24 Google Inc. Input method editor
US8606579B2 (en) 2010-05-24 2013-12-10 Microsoft Corporation Voice print identification for identifying speakers
US9569549B1 (en) 2010-05-25 2017-02-14 Amazon Technologies, Inc. Location based recommendation and tagging of media content items
JP2011250027A (ja) 2010-05-25 2011-12-08 Panasonic Electric Works Co Ltd リモートコントロール機器及び情報通信システム
US8468012B2 (en) 2010-05-26 2013-06-18 Google Inc. Acoustic model adaptation using geographic information
WO2011150730A1 (zh) 2010-05-31 2011-12-08 百度在线网络技术(北京)有限公司 一种用于英文与另一种文字混合输入的方法和设备
EP2393056A1 (en) 2010-06-02 2011-12-07 Layar B.V. Acquiring, ranking and displaying points of interest for use in an augmented reality service provisioning system and graphical user interface for displaying such ranked points of interests
US8639516B2 (en) 2010-06-04 2014-01-28 Apple Inc. User-specific noise suppression for voice quality improvements
US8707195B2 (en) 2010-06-07 2014-04-22 Apple Inc. Devices, methods, and graphical user interfaces for accessibility via a touch-sensitive surface
US10204625B2 (en) 2010-06-07 2019-02-12 Affectiva, Inc. Audio analysis learning using video data
US8954425B2 (en) 2010-06-08 2015-02-10 Microsoft Corporation Snippet extraction and ranking
EP2397972B1 (en) 2010-06-08 2015-01-07 Vodafone Holding GmbH Smart card with microphone
US8458115B2 (en) 2010-06-08 2013-06-04 Microsoft Corporation Mining topic-related aspects from user generated content
US20110306426A1 (en) 2010-06-10 2011-12-15 Microsoft Corporation Activity Participation Based On User Intent
US9529918B2 (en) 2010-06-11 2016-12-27 Doat Media Ltd. System and methods thereof for downloading applications via a communication network
US20110307810A1 (en) 2010-06-11 2011-12-15 Isreal Hilerio List integration
US8234111B2 (en) 2010-06-14 2012-07-31 Google Inc. Speech and noise models for speech recognition
US8504404B2 (en) 2010-06-17 2013-08-06 Google Inc. Distance and location-aware scheduling assistance in a calendar system with notification of potential conflicts
US20110314003A1 (en) 2010-06-17 2011-12-22 Microsoft Corporation Template concatenation for capturing multiple concepts in a voice query
US9443071B2 (en) 2010-06-18 2016-09-13 At&T Intellectual Property I, L.P. Proximity based device security
WO2011160140A1 (en) 2010-06-18 2011-12-22 Susan Bennett System and method of semantic based searching
US8375320B2 (en) 2010-06-22 2013-02-12 Microsoft Corporation Context-based task generation
US20110313803A1 (en) 2010-06-22 2011-12-22 Microsoft Corporation Social Task Lists
EP2400373A1 (en) 2010-06-22 2011-12-28 Vodafone Holding GmbH Inputting symbols into an electronic device having a touch-screen
US9009592B2 (en) 2010-06-22 2015-04-14 Microsoft Technology Licensing, Llc Population of lists and tasks from captured voice and audio content
US8581844B2 (en) 2010-06-23 2013-11-12 Google Inc. Switching between a first operational mode and a second operational mode using a natural motion gesture
US8655901B1 (en) 2010-06-23 2014-02-18 Google Inc. Translation-based query pattern mining
JP2013529794A (ja) 2010-06-24 2013-07-22 本田技研工業株式会社 車載音声認識システム及び車両外音声認識システム間の通信システム及び方法
US8812299B1 (en) 2010-06-24 2014-08-19 Nuance Communications, Inc. Class-based language model and use
US11068657B2 (en) 2010-06-28 2021-07-20 Skyscanner Limited Natural language question answering system and method based on deep semantics
CN101894547A (zh) 2010-06-30 2010-11-24 北京捷通华声语音技术有限公司 一种语音合成方法和系统
US8250071B1 (en) 2010-06-30 2012-08-21 Amazon Technologies, Inc. Disambiguation of term meaning
JP5323770B2 (ja) 2010-06-30 2013-10-23 日本放送協会 ユーザ指示取得装置、ユーザ指示取得プログラムおよびテレビ受像機
US8411874B2 (en) 2010-06-30 2013-04-02 Google Inc. Removing noise from audio
US20120005602A1 (en) 2010-07-02 2012-01-05 Nokia Corporation Methods and apparatuses for facilitating task switching
EP2402867B1 (en) 2010-07-02 2018-08-22 Accenture Global Services Limited A computer-implemented method, a computer program product and a computer system for image processing
US8885978B2 (en) 2010-07-05 2014-11-11 Apple Inc. Operating a device to capture high dynamic range images
US20120010886A1 (en) 2010-07-06 2012-01-12 Javad Razavilar Language Identification
US8848882B2 (en) 2010-07-07 2014-09-30 Verizon Patent And Licensing Inc. System for and method of measuring caller interactions during a call session
US8249556B2 (en) 2010-07-13 2012-08-21 Google Inc. Securing a mobile computing device
JP5548542B2 (ja) 2010-07-13 2014-07-16 富士通テン株式会社 携帯端末装置および駐車位置案内プログラム
US9104670B2 (en) 2010-07-21 2015-08-11 Apple Inc. Customized search or acquisition of digital media assets
US8260247B2 (en) 2010-07-21 2012-09-04 Research In Motion Limited Portable electronic device and method of operation
US8528072B2 (en) 2010-07-23 2013-09-03 Apple Inc. Method, apparatus and system for access mode control of a device
WO2012010218A1 (en) 2010-07-23 2012-01-26 Phonak Ag Hearing system and method for operating a hearing system
US9786159B2 (en) 2010-07-23 2017-10-10 Tivo Solutions Inc. Multi-function remote control device
CN102340590A (zh) 2010-07-27 2012-02-01 上海闻泰电子科技有限公司 一种用于手机的感光加解锁装置及其实现方法
US9633656B2 (en) 2010-07-27 2017-04-25 Sony Corporation Device registration process from second display
US8463592B2 (en) 2010-07-27 2013-06-11 International Business Machines Corporation Mode supporting multiple language input for entering text
US8521526B1 (en) 2010-07-28 2013-08-27 Google Inc. Disambiguation of a spoken query term
JP5606205B2 (ja) 2010-07-28 2014-10-15 京セラ株式会社 携帯端末装置
US8861925B1 (en) 2010-07-28 2014-10-14 Intuit Inc. Methods and systems for audio-visual synchronization
CN102346557B (zh) 2010-07-28 2016-08-03 深圳市世纪光速信息技术有限公司 一种输入法和输入法系统
US8694537B2 (en) 2010-07-29 2014-04-08 Soundhound, Inc. Systems and methods for enabling natural language processing
KR101699720B1 (ko) 2010-08-03 2017-01-26 삼성전자주식회사 음성명령 인식 장치 및 음성명령 인식 방법
BRPI1004128A2 (pt) 2010-08-04 2012-04-10 Magneti Marelli Sist S Automotivos Ind E Com Ltda definição dos parámetros chave de nìvel superior para sensor lógico de biodiesel
JP2012037619A (ja) 2010-08-04 2012-02-23 Nec Corp 話者適応化装置、話者適応化方法および話者適応化用プログラム
US8775156B2 (en) 2010-08-05 2014-07-08 Google Inc. Translating languages in response to device motion
US9349368B1 (en) 2010-08-05 2016-05-24 Google Inc. Generating an audio notification based on detection of a triggering event
US8731939B1 (en) 2010-08-06 2014-05-20 Google Inc. Routing queries based on carrier phrase registration
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
US8473289B2 (en) 2010-08-06 2013-06-25 Google Inc. Disambiguating input based on context
US8359020B2 (en) 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
WO2012019637A1 (en) 2010-08-09 2012-02-16 Jadhav, Shubhangi Mahadeo Visual music playlist creation and visual music track exploration
US8802957B2 (en) 2010-08-16 2014-08-12 Boardwalk Technology Group, Llc Mobile replacement-dialogue recording system
CN101951553B (zh) 2010-08-17 2012-10-10 深圳市车音网科技有限公司 基于语音命令的导航方法及系统
US8719006B2 (en) 2010-08-27 2014-05-06 Apple Inc. Combined statistical and rule-based part-of-speech tagging for text-to-speech synthesis
EP2609734A4 (en) 2010-08-27 2015-02-25 Intel Corp RECORDING AND PLAYING OF A MEETING IN A HOME ENTERTAINMENT SYSTEM
US8676583B2 (en) 2010-08-30 2014-03-18 Honda Motor Co., Ltd. Belief tracking and action selection in spoken dialog systems
US8478519B2 (en) 2010-08-30 2013-07-02 Google Inc. Providing results to parameterless search queries
US8225137B2 (en) 2010-09-04 2012-07-17 Cisco Technology, Inc. System and method for providing media server redundancy in a network environment
US9800721B2 (en) 2010-09-07 2017-10-24 Securus Technologies, Inc. Multi-party conversation analyzer and logger
WO2012033820A2 (en) 2010-09-08 2012-03-15 Nuance Communications, Inc. Internet search related methods and apparatus
US20120059655A1 (en) 2010-09-08 2012-03-08 Nuance Communications, Inc. Methods and apparatus for providing input to a speech-enabled application program
US8341142B2 (en) 2010-09-08 2012-12-25 Nuance Communications, Inc. Methods and apparatus for searching the Internet
WO2012033492A1 (en) 2010-09-09 2012-03-15 Sony Ericsson Mobile Communications Ab Annotating e-books/e-magazines with application results
KR102000618B1 (ko) 2010-09-13 2019-10-21 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 부가기능의 관리
CN102402985A (zh) 2010-09-14 2012-04-04 盛乐信息技术(上海)有限公司 提高声纹识别安全性的声纹认证系统及其实现方法
KR101436339B1 (ko) 2010-09-15 2014-09-01 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 클라우드 컴퓨팅 환경에서의 태스크 할당
US8560229B1 (en) 2010-09-15 2013-10-15 Google Inc. Sensor based activity detection
US9538229B2 (en) 2010-09-15 2017-01-03 Verizon Patent And Licensing Inc. Media experience for touch screen devices
JP5480760B2 (ja) 2010-09-15 2014-04-23 株式会社Nttドコモ 端末装置、音声認識方法および音声認識プログラム
US20120068937A1 (en) 2010-09-16 2012-03-22 Sony Ericsson Mobile Communications Ab Quick input language/virtual keyboard/ language dictionary change on a touch screen device
US20120078635A1 (en) 2010-09-24 2012-03-29 Apple Inc. Voice control system
US8836638B2 (en) 2010-09-25 2014-09-16 Hewlett-Packard Development Company, L.P. Silent speech based command to a computing device
CN101937194B (zh) 2010-09-27 2012-12-19 鸿富锦精密工业(深圳)有限公司 具有学习功能的智能控制系统和方法
US8719014B2 (en) 2010-09-27 2014-05-06 Apple Inc. Electronic device with text error correction based on voice recognition data
KR20120031722A (ko) 2010-09-27 2012-04-04 삼성전자주식회사 동적 응답 생성 장치 및 방법
US20120114108A1 (en) 2010-09-27 2012-05-10 Voxer Ip Llc Messaging communication application
US8594997B2 (en) 2010-09-27 2013-11-26 Sap Ag Context-aware conversational user interface
CN101958958A (zh) 2010-09-29 2011-01-26 中兴通讯股份有限公司 一种回复信息的方法和终端
CN102436456B (zh) 2010-09-29 2016-03-30 国际商业机器公司 用于对命名实体进行分类的方法和装置
US10037319B2 (en) 2010-09-29 2018-07-31 Touchtype Limited User input prediction
US9465864B2 (en) 2010-09-29 2016-10-11 Excalibur Ip, Llc Training a search query intent classifier using wiki article titles and a search click log
US8515736B1 (en) 2010-09-30 2013-08-20 Nuance Communications, Inc. Training call routing applications by reusing semantically-labeled data collected for prior applications
US8644519B2 (en) 2010-09-30 2014-02-04 Apple Inc. Electronic devices with improved audio
US8965545B2 (en) 2010-09-30 2015-02-24 Google Inc. Progressive encoding of audio
US20120084248A1 (en) 2010-09-30 2012-04-05 Microsoft Corporation Providing suggestions based on user intent
US8812321B2 (en) 2010-09-30 2014-08-19 At&T Intellectual Property I, L.P. System and method for combining speech recognition outputs from a plurality of domain-specific speech recognizers via machine learning
US20120084634A1 (en) 2010-10-05 2012-04-05 Sony Corporation Method and apparatus for annotating text
US8606293B2 (en) 2010-10-05 2013-12-10 Qualcomm Incorporated Mobile device location estimation using environmental information
EP2625628A2 (en) 2010-10-05 2013-08-14 International Business Machines Corporation Probabilistic data mining model comparison engine
US9043386B2 (en) 2010-10-06 2015-05-26 Hbr Labs Inc. System and method for synchronizing collaborative form filling
US9679256B2 (en) 2010-10-06 2017-06-13 The Chancellor, Masters And Scholars Of The University Of Cambridge Automated assessment of examination scripts
US9465798B2 (en) 2010-10-08 2016-10-11 Iq Technology Inc. Single word and multi-word term integrating system and a method thereof
US10900799B2 (en) 2010-10-12 2021-01-26 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for determining a destination location from a communication
CA2814426A1 (en) 2010-10-15 2012-04-19 Intelligent Mechatronic Systems Inc. Implicit association and polymorphism driven human machine interaction
JP5572059B2 (ja) 2010-10-21 2014-08-13 京セラ株式会社 表示装置
JP5017441B2 (ja) 2010-10-28 2012-09-05 株式会社東芝 携帯型電子機器
US8335774B2 (en) 2010-10-28 2012-12-18 Google Inc. Replacing a master media file
US20120108221A1 (en) 2010-10-28 2012-05-03 Microsoft Corporation Augmenting communication sessions with applications
US9311308B2 (en) * 2010-10-29 2016-04-12 Hewlett-Packard Development Company, L.P. Content recommendation for groups
DE112010005959B4 (de) 2010-10-29 2019-08-29 Iflytek Co., Ltd. Verfahren und System zur automatischen Erkennung eines Endpunkts einer Tonaufnahme
US9058105B2 (en) 2010-10-31 2015-06-16 International Business Machines Corporation Automated adjustment of input configuration
US20120110456A1 (en) 2010-11-01 2012-05-03 Microsoft Corporation Integrated voice command modal user interface
US9348417B2 (en) 2010-11-01 2016-05-24 Microsoft Technology Licensing, Llc Multimodal input system
US8660531B2 (en) 2010-11-03 2014-02-25 Blackberry Limited Access to locked functions
US8831947B2 (en) 2010-11-07 2014-09-09 Nice Systems Ltd. Method and apparatus for large vocabulary continuous speech recognition using a hybrid phoneme-word lattice
US20120116770A1 (en) 2010-11-08 2012-05-10 Ming-Fu Chen Speech data retrieving and presenting device
WO2012063260A2 (en) 2010-11-09 2012-05-18 Mango Technologies Pvt Ltd. Virtual secretary on a smart device
US8881057B2 (en) 2010-11-09 2014-11-04 Blackberry Limited Methods and apparatus to display mobile device contexts
US20120124172A1 (en) 2010-11-15 2012-05-17 Google Inc. Providing Different Versions of a Media File
US8352576B2 (en) 2010-11-15 2013-01-08 Google Inc. Media file access
MY187902A (en) 2010-11-16 2021-10-27 Shardul Suresh Shroff System and method for providing virtual arbitration
US20120124126A1 (en) 2010-11-17 2012-05-17 Microsoft Corporation Contextual and task focused computing
US10144440B2 (en) 2010-11-17 2018-12-04 General Electric Company Methods and systems for data communications
US8713024B2 (en) 2010-11-22 2014-04-29 Microsoft Corporation Efficient forward ranking in a search engine
US9484018B2 (en) 2010-11-23 2016-11-01 At&T Intellectual Property I, L.P. System and method for building and evaluating automatic speech recognition via an application programmer interface
US8938216B2 (en) 2010-11-24 2015-01-20 Cisco Technology, Inc. Geographical location information/signal quality-context based recording and playback of multimedia data from a conference session
US20120135714A1 (en) 2010-11-29 2012-05-31 Toyota Motor Engineering & Manufacturing North America, Inc. Information system for motor vehicle
US9105008B2 (en) 2010-11-29 2015-08-11 Yahoo! Inc. Detecting controversial events
US8489625B2 (en) 2010-11-29 2013-07-16 Microsoft Corporation Mobile query suggestions with time-location awareness
US8862458B2 (en) 2010-11-30 2014-10-14 Sap Ag Natural language interface
CN103299292B (zh) 2010-12-02 2016-01-20 Sk电信有限公司 用于处理自然语言和数学公式的方法及其设备
JP5652913B2 (ja) 2010-12-03 2015-01-14 アイシン・エィ・ダブリュ株式会社 車載端末装置
US8312096B2 (en) 2010-12-08 2012-11-13 Google Inc. Priority inbox notifications and synchronization for mobile messaging application
US9092425B2 (en) 2010-12-08 2015-07-28 At&T Intellectual Property I, L.P. System and method for feature-rich continuous space language models
US9135241B2 (en) 2010-12-08 2015-09-15 At&T Intellectual Property I, L.P. System and method for learning latent representations for natural language tasks
KR101330328B1 (ko) 2010-12-14 2013-11-15 한국전자통신연구원 음성 인식 방법 및 이를 위한 시스템
US9158775B1 (en) 2010-12-18 2015-10-13 Google Inc. Scoring stream items in real time
WO2012084003A1 (en) 2010-12-20 2012-06-28 Tomtom Belgium N.V. Method for generating map data
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US8666726B2 (en) 2010-12-21 2014-03-04 Nuance Communications, Inc. Sample clustering to reduce manual transcriptions in speech recognition system
US20120158422A1 (en) 2010-12-21 2012-06-21 General Electric Company Methods and systems for scheduling appointments in healthcare systems
US20120158293A1 (en) 2010-12-21 2012-06-21 General Electric Company Methods and systems for dynamically providing users with appointment reminders
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US10515147B2 (en) 2010-12-22 2019-12-24 Apple Inc. Using statistical language models for contextual lookup
US20130035086A1 (en) 2010-12-22 2013-02-07 Logitech Europe S.A. Remote control system for providing content suggestions
US8532377B2 (en) 2010-12-22 2013-09-10 Xerox Corporation Image ranking based on abstract concepts
US20120166959A1 (en) 2010-12-23 2012-06-28 Microsoft Corporation Surfacing content including content accessed from jump list tasks and items
US20120166944A1 (en) 2010-12-23 2012-06-28 Stephen Hayden Cotterill Device, Method, and Graphical User Interface for Switching Between Two User Interfaces
US8838449B2 (en) 2010-12-23 2014-09-16 Microsoft Corporation Word-dependent language model
US8731902B2 (en) 2010-12-23 2014-05-20 Sap Ag Systems and methods for accessing applications based on user intent modeling
JP2012142744A (ja) 2010-12-28 2012-07-26 Sanyo Electric Co Ltd 通信装置
TWI413105B (zh) 2010-12-30 2013-10-21 Ind Tech Res Inst 多語言之文字轉語音合成系統與方法
JP2014504112A (ja) 2010-12-30 2014-02-13 アンビエンツ データ取得装置の集合を用いた情報処理
US8626681B1 (en) 2011-01-04 2014-01-07 Google Inc. Training a probabilistic spelling checker from structured data
KR101828273B1 (ko) 2011-01-04 2018-02-14 삼성전자주식회사 결합기반의 음성명령 인식 장치 및 그 방법
ES2707789T3 (es) 2011-01-05 2019-04-05 Connecthings Dispositivo para accionar un terminal portable
US8589950B2 (en) 2011-01-05 2013-11-19 Blackberry Limited Processing user input events in a web browser
KR101781557B1 (ko) 2011-01-05 2017-09-26 구글 인코포레이티드 텍스트 입력을 용이하게 하기 위한 방법 및 시스템
US9183843B2 (en) 2011-01-07 2015-11-10 Nuance Communications, Inc. Configurable speech recognition system using multiple recognizers
US8898065B2 (en) 2011-01-07 2014-11-25 Nuance Communications, Inc. Configurable speech recognition system using multiple recognizers
CA2821565C (en) 2011-01-07 2017-04-18 Research In Motion Limited System and method for controlling mobile communication devices
JP5712618B2 (ja) 2011-01-07 2015-05-07 サクサ株式会社 電話システム
US20120176255A1 (en) 2011-01-10 2012-07-12 Deutsche Telekom Ag Mobile device-based automatic parking location recorder and reminder using on-board diagnostics
TWI546700B (zh) 2011-01-13 2016-08-21 宏達國際電子股份有限公司 手持電子裝置及其控制方法與電腦程式產品
US20130283283A1 (en) 2011-01-13 2013-10-24 Htc Corporation Portable electronic device and control method therefor
US8863256B1 (en) 2011-01-14 2014-10-14 Cisco Technology, Inc. System and method for enabling secure transactions using flexible identity management in a vehicular environment
US8689116B2 (en) 2011-01-14 2014-04-01 Apple Inc. Email user interface
KR101242073B1 (ko) 2011-01-20 2013-03-11 주식회사 웨이브애프터 사용자단말의 터치스크린의 사용자 인터페이스 방법 및 그 기록매체
US20120192096A1 (en) 2011-01-25 2012-07-26 Research In Motion Limited Active command line driven user interface
US9031970B1 (en) 2011-01-26 2015-05-12 Google Inc. Query autocompletions
US8666895B2 (en) 2011-01-31 2014-03-04 Bank Of America Corporation Single action mobile transaction device
US8943054B2 (en) 2011-01-31 2015-01-27 Social Resolve, Llc Social media content management system and method
FI126119B (fi) 2011-01-31 2016-06-30 Waertsilae Finland Oy Massavaimennin
WO2012106198A1 (en) 2011-02-04 2012-08-09 Google Inc. Posting to social networks by voice
US9452735B2 (en) 2011-02-10 2016-09-27 Ford Global Technologies, Llc System and method for controlling a restricted mode in a vehicle
US8862612B2 (en) 2011-02-11 2014-10-14 Sony Corporation Direct search launch on a second display
US20120209654A1 (en) 2011-02-11 2012-08-16 Avaya Inc. Mobile activity assistant analysis
US9628842B2 (en) 2011-02-11 2017-04-18 Sony Corporation Method and apparatus for identifying content using IPTV devices
US10631246B2 (en) 2011-02-14 2020-04-21 Microsoft Technology Licensing, Llc Task switching on mobile devices
TW201241640A (en) 2011-02-14 2012-10-16 Microsoft Corp Dormant background applications on mobile devices
WO2012109696A1 (en) 2011-02-16 2012-08-23 Barrie Davis Wireless power, light and automation control
US10429869B2 (en) 2011-02-16 2019-10-01 Kortek Industries Pty Ltd Wireless power, light and automation control
WO2012111057A1 (ja) 2011-02-17 2012-08-23 Necカシオモバイルコミュニケーションズ株式会社 電子装置、表示方法及びプログラム
US8694335B2 (en) 2011-02-18 2014-04-08 Nuance Communications, Inc. Methods and apparatus for applying user corrections to medical fact extraction
US9916420B2 (en) 2011-02-18 2018-03-13 Nuance Communications, Inc. Physician and clinical documentation specialist workflow integration
US9686732B2 (en) 2011-02-22 2017-06-20 Theatrolabs, Inc. Observation platform for using structured communications with distributed traffic flow
US10145960B2 (en) 2011-02-24 2018-12-04 Ford Global Technologies, Llc System and method for cell phone restriction
KR101178310B1 (ko) 2011-02-24 2012-08-29 포항공과대학교 산학협력단 대화 관리 방법 및 이를 실행하는 시스템
CN102651217A (zh) 2011-02-25 2012-08-29 株式会社东芝 用于合成语音的方法、设备以及用于语音合成的声学模型训练方法
US8688453B1 (en) 2011-02-28 2014-04-01 Nuance Communications, Inc. Intent mining via analysis of utterances
US20120221552A1 (en) 2011-02-28 2012-08-30 Nokia Corporation Method and apparatus for providing an active search user interface element
US9632677B2 (en) 2011-03-02 2017-04-25 The Boeing Company System and method for navigating a 3-D environment using a multi-input interface
US8972275B2 (en) 2011-03-03 2015-03-03 Brightedge Technologies, Inc. Optimization of social media engagement
EP2498250B1 (en) 2011-03-07 2021-05-05 Accenture Global Services Limited Client and server system for natural language-based control of a digital network of devices
US9081760B2 (en) 2011-03-08 2015-07-14 At&T Intellectual Property I, L.P. System and method for building diverse language models
CN102122506B (zh) 2011-03-08 2013-07-31 天脉聚源(北京)传媒科技有限公司 一种语音识别的方法
US20120233266A1 (en) 2011-03-11 2012-09-13 Microsoft Corporation Peer-to-peer group with renegotiation of group owner
CN202092650U (zh) 2011-03-14 2011-12-28 深圳市车乐数码科技有限公司 一种带按键的语音导航的车载多媒体
US8849931B2 (en) 2011-03-15 2014-09-30 Idt Messaging, Llc Linking context-based information to text messages
US8606090B2 (en) 2011-03-17 2013-12-10 Sony Corporation Sport program chaptering
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8868111B1 (en) 2011-03-23 2014-10-21 Dp Technologies, Inc. Method and apparatus to enable the use of a personal communication device with an integrated vehicle interface
US8862255B2 (en) 2011-03-23 2014-10-14 Audible, Inc. Managing playback of synchronized content
US20120246133A1 (en) 2011-03-23 2012-09-27 Microsoft Corporation Online spelling correction/phrase completion system
US20120246064A1 (en) 2011-03-23 2012-09-27 Ebay, Inc. Customer refunds using payment service providers
US8766793B2 (en) 2011-03-25 2014-07-01 Microsoft Corporation Contextually-appropriate task reminders
US9202465B2 (en) 2011-03-25 2015-12-01 General Motors Llc Speech recognition dependent on text message content
US9171546B1 (en) 2011-03-29 2015-10-27 Google Inc. Performing functions based on commands in context of telephonic communication
CN202035047U (zh) 2011-03-29 2011-11-09 张磊 一种提取地址信息进行导航的移动终端
US9154555B2 (en) 2011-03-30 2015-10-06 Paypal, Inc. Device specific remote disabling of applications
JP2012211932A (ja) 2011-03-30 2012-11-01 Toshiba Corp 音声認識装置及び音声認識方法
US9760566B2 (en) 2011-03-31 2017-09-12 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
EP2691856A1 (en) 2011-03-31 2014-02-05 AOL Inc. Systems and methods for transferring application state between devices based on gestural input
WO2012135157A2 (en) 2011-03-31 2012-10-04 Microsoft Corporation Task driven user intents
US9280535B2 (en) 2011-03-31 2016-03-08 Infosys Limited Natural language querying with cascaded conditional random fields
US9842168B2 (en) 2011-03-31 2017-12-12 Microsoft Technology Licensing, Llc Task driven user intents
KR101599595B1 (ko) 2011-04-01 2016-03-03 인터디지탈 패튼 홀딩스, 인크 공통 pdp 컨텍스트를 공유하기 위한 시스템 및 방법
US9337999B2 (en) 2011-04-01 2016-05-10 Intel Corporation Application usage continuum across platforms
US9098488B2 (en) 2011-04-03 2015-08-04 Microsoft Technology Licensing, Llc Translation of multilingual embedded phrases
WO2012138319A1 (en) 2011-04-04 2012-10-11 Hewlett-Packard Development Company, L.P. Creating a correlation rule defining a relationship between event types
US20120252367A1 (en) 2011-04-04 2012-10-04 Meditalk Devices, Llc Auditory Speech Module For Medical Devices
US20120316955A1 (en) 2011-04-06 2012-12-13 Yahoo! Inc. System and Method for Mobile Application Search
US8914275B2 (en) 2011-04-06 2014-12-16 Microsoft Corporation Text prediction
US9292877B2 (en) 2011-04-13 2016-03-22 Longsand Limited Methods and systems for generating concept-based hash tags
CN102137193A (zh) 2011-04-13 2011-07-27 深圳凯虹移动通信有限公司 一种移动通讯终端及其通讯控制方法
US8983995B2 (en) 2011-04-15 2015-03-17 Microsoft Corporation Interactive semantic query suggestion for content search
US9366749B2 (en) 2011-04-15 2016-06-14 Qualcomm Incorporated Device position estimates from motion and ambient light classifiers
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
WO2012148904A1 (en) 2011-04-25 2012-11-01 Veveo, Inc. System and method for an intelligent personal timeline assistant
US9065660B2 (en) 2011-04-26 2015-06-23 Alcatel Lucent Usage monitoring after rollover
US9444692B2 (en) 2011-04-26 2016-09-13 Openet Telecom Ltd. Systems, devices and methods of crowd-sourcing across multiple domains
US9110556B2 (en) 2011-04-28 2015-08-18 Nokia Technologies Oy Method and apparatus for increasing the functionality of an electronic device in a locked state
CN102981746A (zh) 2011-05-03 2013-03-20 宏达国际电子股份有限公司 手持式电子装置及其网址输入校正方法
GB2504256B (en) 2011-05-04 2019-12-25 Blackberry Ltd Methods for adjusting a presentation of graphical data displayed on a graphical user interface
US8171137B1 (en) 2011-05-09 2012-05-01 Google Inc. Transferring application state across devices
US8150385B1 (en) 2011-05-09 2012-04-03 Loment, Inc. Automated reply messages among end user communication devices
KR101760422B1 (ko) 2011-05-11 2017-07-31 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101233561B1 (ko) 2011-05-12 2013-02-14 엔에이치엔(주) 단어 수준의 후보 생성에 기초한 음성 인식 시스템 및 방법
US9418661B2 (en) 2011-05-12 2016-08-16 Johnson Controls Technology Company Vehicle voice recognition systems and methods
US9064006B2 (en) 2012-08-23 2015-06-23 Microsoft Technology Licensing, Llc Translating natural language utterances to keyword search queries
EP2707821A4 (en) 2011-05-13 2015-04-08 David Plimpton CALENDAR-BASED SEARCH ENGINE
US20120290291A1 (en) 2011-05-13 2012-11-15 Gabriel Lee Gilbert Shelley Input processing for character matching and predicted word matching
US9075875B1 (en) 2011-05-13 2015-07-07 Google Inc. System and method for recommending television programs based on user search queries
US8793624B2 (en) 2011-05-18 2014-07-29 Google Inc. Control of a device using gestures
US8972240B2 (en) 2011-05-19 2015-03-03 Microsoft Corporation User-modifiable word lattice display for editing documents and search queries
US8914290B2 (en) 2011-05-20 2014-12-16 Vocollect, Inc. Systems and methods for dynamically improving user intelligibility of synthesized speech in a work environment
EP2712189A4 (en) 2011-05-20 2015-04-01 Japan Broadcasting Corp DEVICE AND PROGRAM FOR CONTROLLING PROGRAM SWITCHES
US20120304124A1 (en) 2011-05-23 2012-11-29 Microsoft Corporation Context aware input engine
US10522133B2 (en) 2011-05-23 2019-12-31 Nuance Communications, Inc. Methods and apparatus for correcting recognition errors
US9361282B2 (en) 2011-05-24 2016-06-07 Lg Electronics Inc. Method and device for user interface
US8731936B2 (en) 2011-05-26 2014-05-20 Microsoft Corporation Energy-efficient unobtrusive identification of a speaker
US9164983B2 (en) 2011-05-27 2015-10-20 Robert Bosch Gmbh Broad-coverage normalization system for social media language
US10672399B2 (en) 2011-06-03 2020-06-02 Apple Inc. Switching between text data and audio data based on a mapping
JP5463385B2 (ja) 2011-06-03 2014-04-09 アップル インコーポレイテッド テキストデータとオーディオデータとの間のマッピングの自動作成
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9268857B2 (en) 2011-06-03 2016-02-23 Facebook, Inc. Suggesting search results to users before receiving any search query from the users
US8751971B2 (en) 2011-06-05 2014-06-10 Apple Inc. Devices, methods, and graphical user interfaces for providing accessibility using a touch-sensitive surface
US20120317498A1 (en) 2011-06-07 2012-12-13 Research In Motion Limited Electronic communication device and method for displaying icons
US8781841B1 (en) 2011-06-07 2014-07-15 Cisco Technology, Inc. Name recognition of virtual meeting participants
US20120316774A1 (en) 2011-06-09 2012-12-13 Microsoft Corporation Automatic navigation to a prior known location
US20120316875A1 (en) 2011-06-10 2012-12-13 Red Shift Company, Llc Hosted speech handling
US8732319B2 (en) 2011-06-10 2014-05-20 Qualcomm Incorporated Context awareness proximity-based establishment of wireless communication connection
WO2012170817A1 (en) 2011-06-10 2012-12-13 Google Inc. Augmenting statistical machine translation with linguistic knowledge
US9082408B2 (en) 2011-06-13 2015-07-14 Mmodal Ip Llc Speech recognition using loosely coupled components
US20130158977A1 (en) 2011-06-14 2013-06-20 Andrew Senior System and Method for Evaluating Speech Exposure
US20120323967A1 (en) 2011-06-14 2012-12-20 Microsoft Corporation Spelling Using a Fuzzy Pattern Search
US20120324391A1 (en) 2011-06-16 2012-12-20 Microsoft Corporation Predictive word completion
US9201862B2 (en) 2011-06-16 2015-12-01 Asociacion Instituto Tecnologico De Informatica Method for symbolic correction in human-machine interfaces
US20120321112A1 (en) 2011-06-16 2012-12-20 Apple Inc. Selecting a digital stream based on an audio sample
CN102237088B (zh) 2011-06-17 2013-10-23 盛乐信息技术(上海)有限公司 语音识别多信息文本获取装置及方法
US20120329529A1 (en) 2011-06-21 2012-12-27 GreatCall, Inc. Gesture activate help process and system
KR101850124B1 (ko) 2011-06-24 2018-04-19 구글 엘엘씨 교차-언어 쿼리 제안을 위한 쿼리 번역 평가
US10984387B2 (en) 2011-06-28 2021-04-20 Microsoft Technology Licensing, Llc Automatic task extraction and calendar entry
WO2012103726A1 (zh) 2011-06-30 2012-08-09 华为技术有限公司 基于ott的媒体数据传输方法、装置及系统
US20130007240A1 (en) 2011-06-30 2013-01-03 At&T Intellectual Property I, L.P. Systems and methods to provide availability notifications for denied content requests
US20130006633A1 (en) 2011-07-01 2013-01-03 Qualcomm Incorporated Learning speech models for mobile device users
US20140100847A1 (en) 2011-07-05 2014-04-10 Mitsubishi Electric Corporation Voice recognition device and navigation device
US9367824B2 (en) 2011-07-05 2016-06-14 Sap Se Provisioning and performing action items
DE102011078642A1 (de) 2011-07-05 2013-01-10 Robert Bosch Gmbh Verfahren zum Prüfen eines m aus n Codes
US9582598B2 (en) 2011-07-05 2017-02-28 Visa International Service Association Hybrid applications utilizing distributed models and views apparatuses, methods and systems
US8682670B2 (en) 2011-07-07 2014-03-25 International Business Machines Corporation Statistical enhancement of speech output from a statistical text-to-speech synthesis system
US20130010575A1 (en) 2011-07-07 2013-01-10 International Business Machines Corporation Systems and methods of managing electronic calendar applications
US8209183B1 (en) 2011-07-07 2012-06-26 Google Inc. Systems and methods for correction of text from different input types, sources, and contexts
US8665212B2 (en) 2011-07-08 2014-03-04 Blackberry Limited Systems and methods for locking an electronic device
US20130018659A1 (en) 2011-07-12 2013-01-17 Google Inc. Systems and Methods for Speech Command Processing
US8812474B2 (en) 2011-07-14 2014-08-19 Nuance Communications, Inc. Methods and apparatus for identifying and providing information sought by a user
DE102012212514A1 (de) 2011-07-18 2013-02-21 Logitech Europe S.A. Fernbedienungs-Benutzerschnittstelle für Handgerät
US20130024277A1 (en) 2011-07-18 2013-01-24 Teletech Holdings, Inc. Platform to provide advertisements to users of registered products
CA2747153A1 (en) 2011-07-19 2013-01-19 Suleman Kaheer Natural language processing dialog system for obtaining goods, services or information
US20130024576A1 (en) 2011-07-22 2013-01-24 Microsoft Corporation Proximity-Based Detection
US20130031476A1 (en) 2011-07-25 2013-01-31 Coin Emmett Voice activated virtual assistant
US8781810B2 (en) 2011-07-25 2014-07-15 Xerox Corporation System and method for productive generation of compound words in statistical machine translation
US8260117B1 (en) 2011-07-26 2012-09-04 Ooyala, Inc. Automatically recommending content
US9009041B2 (en) 2011-07-26 2015-04-14 Nuance Communications, Inc. Systems and methods for improving the accuracy of a transcription using auxiliary data such as personal data
US8732028B2 (en) 2011-07-26 2014-05-20 Expose Retail Strategies Inc. Scheduling of order processing for remotely ordered goods
US20130030924A1 (en) 2011-07-28 2013-01-31 American Express Travel Related Services Company, Inc. Systems and methods for generating and using a digital pass
EP2737476A4 (en) 2011-07-28 2014-12-10 Blackberry Ltd METHOD AND DEVICES FOR COMMUNICATION RELIEF
EP2551784A1 (en) 2011-07-28 2013-01-30 Roche Diagnostics GmbH Method of controlling the display of a dataset
US9292112B2 (en) 2011-07-28 2016-03-22 Hewlett-Packard Development Company, L.P. Multimodal interface
US20130030913A1 (en) 2011-07-29 2013-01-31 Guangyu Zhu Deriving Ads Ranking of Local Advertisers based on Distance and Aggregate User Activities
US20130030789A1 (en) 2011-07-29 2013-01-31 Reginald Dalce Universal Language Translator
US20130031177A1 (en) 2011-07-29 2013-01-31 Myxer, Inc. Systems and methods for dynamic media selection
CN102905499B (zh) 2011-07-29 2015-12-09 纬创资通股份有限公司 竖卡模块及电子装置
US20130035117A1 (en) 2011-08-04 2013-02-07 GM Global Technology Operations LLC System and method for restricting driver mobile device feature usage while vehicle is in motion
EP2555536A1 (en) 2011-08-05 2013-02-06 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on voice recognition and motion recognition, and electronic apparatus applying the same
WO2013022222A2 (en) 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Method for controlling electronic apparatus based on motion recognition, and electronic apparatus applying the same
WO2013022218A2 (en) 2011-08-05 2013-02-14 Samsung Electronics Co., Ltd. Electronic apparatus and method for providing user interface thereof
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US8595015B2 (en) 2011-08-08 2013-11-26 Verizon New Jersey Inc. Audio communication assessment
CN102929710B (zh) 2011-08-09 2017-10-27 中兴通讯股份有限公司 一种调用应用模块的方法及移动终端
US8706472B2 (en) 2011-08-11 2014-04-22 Apple Inc. Method for disambiguating multiple readings in language conversion
WO2013022135A1 (en) 2011-08-11 2013-02-14 Lg Electronics Inc. Electronic device and method of controlling the same
US8589160B2 (en) 2011-08-19 2013-11-19 Dolbey & Company, Inc. Systems and methods for providing an electronic dictation interface
KR101893151B1 (ko) 2011-08-21 2018-08-30 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
US20130055099A1 (en) 2011-08-22 2013-02-28 Rose Yao Unified Messaging System with Integration of Call Log Data
JP5736276B2 (ja) 2011-08-23 2015-06-17 京セラ株式会社 携帯電子機器、制御方法、および、制御プログラム
US8943071B2 (en) 2011-08-23 2015-01-27 At&T Intellectual Property I, L.P. Automatic sort and propagation associated with electronic documents
US9195768B2 (en) 2011-08-26 2015-11-24 Amazon Technologies, Inc. Remote browsing session management
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US20130054706A1 (en) 2011-08-29 2013-02-28 Mary Graham Modulation of Visual Notification Parameters Based on Message Activity and Notification Value
US20130055147A1 (en) 2011-08-29 2013-02-28 Salesforce.Com, Inc. Configuration, generation, and presentation of custom graphical user interface components for a virtual cloud-based application
CN102955652A (zh) 2011-08-29 2013-03-06 王道平 一种拼音输入方法
US8819012B2 (en) 2011-08-30 2014-08-26 International Business Machines Corporation Accessing anchors in voice site content
US20130054631A1 (en) 2011-08-30 2013-02-28 Microsoft Corporation Adding social network data to search suggestions
US8554729B2 (en) 2011-08-31 2013-10-08 Google Inc. System and method for synchronization of actions in the background of an application
US20130061139A1 (en) 2011-09-01 2013-03-07 Google Inc. Server-based spell checking on a user device
US8914288B2 (en) 2011-09-01 2014-12-16 At&T Intellectual Property I, L.P. System and method for advanced turn-taking for interactive spoken dialog systems
US8660847B2 (en) 2011-09-02 2014-02-25 Microsoft Corporation Integrated local and cloud based speech recognition
WO2013033910A1 (en) 2011-09-09 2013-03-14 Google Inc. User interface for translation webpage
US9596084B2 (en) 2011-09-09 2017-03-14 Facebook, Inc. Initializing camera subsystem for face detection based on sensor inputs
US8788979B2 (en) 2011-09-10 2014-07-22 Microsoft Corporation Secondary actions on a notification
US20130066832A1 (en) 2011-09-12 2013-03-14 Microsoft Corporation Application state synchronization
US10075533B2 (en) 2011-09-15 2018-09-11 Paypal, Inc. Method and apparatus for transferring the state of content using short codes
US20130073346A1 (en) 2011-09-16 2013-03-21 David Chun Identifying companies most closely related to a given company
US20130073286A1 (en) 2011-09-20 2013-03-21 Apple Inc. Consolidating Speech Recognition Results
US20130073293A1 (en) 2011-09-20 2013-03-21 Lg Electronics Inc. Electronic device and method for controlling the same
CN103947219A (zh) 2011-09-21 2014-07-23 瑞典爱立信有限公司 用于传送或用于接收和播放媒体流的方法、设备和计算机程序
US8699963B2 (en) 2011-09-22 2014-04-15 Blackberry Limited Mobile communication device with receiver speaker
US8798995B1 (en) 2011-09-23 2014-08-05 Amazon Technologies, Inc. Key word determinations from voice data
US9129606B2 (en) 2011-09-23 2015-09-08 Microsoft Technology Licensing, Llc User query history expansion for improving language model adaptation
US8812301B2 (en) 2011-09-26 2014-08-19 Xerox Corporation Linguistically-adapted structural query annotation
KR20130032966A (ko) 2011-09-26 2013-04-03 엘지전자 주식회사 사용자 인터페이스 방법 및 장치
US20130080251A1 (en) 2011-09-26 2013-03-28 Accenture Global Services Limited Product registration and tracking system
US8768707B2 (en) 2011-09-27 2014-07-01 Sensory Incorporated Background speech recognition assistant using speaker verification
US8996381B2 (en) 2011-09-27 2015-03-31 Sensory, Incorporated Background speech recognition assistant
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US20130086609A1 (en) 2011-09-29 2013-04-04 Viacom International Inc. Integration of an Interactive Virtual Toy Box Advertising Unit and Digital Media Content
RU2542937C2 (ru) 2011-09-30 2015-02-27 Эпл Инк. Использование контекстной информации для облегчения обработки команд в виртуальном помощнике
CN103035251A (zh) 2011-09-30 2013-04-10 西门子公司 一种建立语音转换模型的方法、语音转换的方法及系统
US8452602B1 (en) 2011-09-30 2013-05-28 Google Inc. Structuring verbal commands to allow concatenation in a voice interface in a mobile device
KR101617665B1 (ko) 2011-09-30 2016-05-03 애플 인크. 핸즈-프리 상호작용을 위한 자동 적응식 사용자 인터페이스
US8452597B2 (en) 2011-09-30 2013-05-28 Google Inc. Systems and methods for continual speech recognition and detection in mobile computing devices
US8468022B2 (en) 2011-09-30 2013-06-18 Google Inc. Voice control for asynchronous notifications
AU2015203483A1 (en) 2011-09-30 2015-07-16 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US8386926B1 (en) 2011-10-06 2013-02-26 Google Inc. Network-based custom dictionary, auto-correction and text entry preferences
US9521175B2 (en) 2011-10-07 2016-12-13 Henk B. Rogers Media tagging
US9640175B2 (en) 2011-10-07 2017-05-02 Microsoft Technology Licensing, Llc Pronunciation learning from user correction
US9021565B2 (en) 2011-10-13 2015-04-28 At&T Intellectual Property I, L.P. Authentication techniques utilizing a computing device
US8738363B2 (en) 2011-10-13 2014-05-27 Xerox Corporation System and method for suggestion mining
US20130097566A1 (en) 2011-10-17 2013-04-18 Carl Fredrik Alexander BERGLUND System and method for displaying items on electronic devices
US10091322B2 (en) 2011-10-18 2018-10-02 Qualcomm Incorporated Method and apparatus for improving a user experience or device performance using an enriched user profile
US9686088B2 (en) 2011-10-19 2017-06-20 Facebook, Inc. Notification profile configuration based on device orientation
KR101873741B1 (ko) 2011-10-26 2018-07-03 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US8738376B1 (en) 2011-10-28 2014-05-27 Nuance Communications, Inc. Sparse maximum a posteriori (MAP) adaptation
US9223948B2 (en) 2011-11-01 2015-12-29 Blackberry Limited Combined passcode and activity launch modifier
US20130111330A1 (en) 2011-11-01 2013-05-02 Research In Motion Limited Accelerated compositing of fixed position elements on an electronic device
EP2590371B1 (en) 2011-11-02 2017-08-09 BlackBerry Limited System and method for enabling voice and video communications using a messaging application
US20130110943A1 (en) 2011-11-02 2013-05-02 Apple Inc. Notification and reminder generation, distribution, and storage system
US9471666B2 (en) 2011-11-02 2016-10-18 Salesforce.Com, Inc. System and method for supporting natural language queries and requests against a user's personal data cloud
US8996350B1 (en) 2011-11-02 2015-03-31 Dub Software Group, Inc. System and method for automatic document management
CN103093334A (zh) 2011-11-04 2013-05-08 周超然 活动通知文本识别并自动转换为日历项的方法
JP5681611B2 (ja) 2011-11-09 2015-03-11 株式会社日立製作所 ナビゲーションシステム、ナビゲーション装置、方法及びサーバ
US9711137B2 (en) 2011-11-10 2017-07-18 At&T Intellectual Property I, Lp Network-based background expert
US8863202B2 (en) 2011-11-11 2014-10-14 Sony Corporation System and method for voice driven cross service search using second display
US8996651B2 (en) 2011-11-12 2015-03-31 Yang Pan System and method for delivering media assets in a cloud environment
WO2013075071A1 (en) 2011-11-18 2013-05-23 Ayman Hammad Mobile wallet store and service injection platform apparatuses, methods and systems
US8972263B2 (en) 2011-11-18 2015-03-03 Soundhound, Inc. System and method for performing dual mode speech recognition
KR101467519B1 (ko) 2011-11-21 2014-12-02 주식회사 케이티 음성 정보를 이용한 컨텐츠 검색 서버 및 방법
CN102510426A (zh) 2011-11-29 2012-06-20 安徽科大讯飞信息科技股份有限公司 个人助理应用访问方法及系统
WO2013082507A1 (en) 2011-11-30 2013-06-06 Decarta Systems and methods for performing geo-search and retrieval of electronic point-of-interest records using a big index
CN103135916A (zh) 2011-11-30 2013-06-05 英特尔公司 手持无线设备中的智能图形界面
KR101830656B1 (ko) 2011-12-02 2018-02-21 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9323746B2 (en) 2011-12-06 2016-04-26 At&T Intellectual Property I, L.P. System and method for collaborative language translation
KR101193668B1 (ko) 2011-12-06 2012-12-14 위준성 스마트 기기를 이용한 상황 인식 기반 외국어 습득 및 학습 서비스 제공 방법
US9214157B2 (en) 2011-12-06 2015-12-15 At&T Intellectual Property I, L.P. System and method for machine-mediated human-human conversation
US9082402B2 (en) 2011-12-08 2015-07-14 Sri International Generic virtual personal assistant platform
US9646313B2 (en) 2011-12-13 2017-05-09 Microsoft Technology Licensing, Llc Gesture-based tagging to view related content
KR102101043B1 (ko) 2011-12-14 2020-04-16 리얼네트웍스 인코포레이티드 맞춤가능한 미디어 자동―응답 시스템들 및 방법들
US20130159847A1 (en) 2011-12-14 2013-06-20 International Business Machines Corporation Dynamic Personal Dictionaries for Enhanced Collaboration
US8868529B2 (en) 2011-12-16 2014-10-21 Sap Se N-dimensional locking
US9408011B2 (en) 2011-12-19 2016-08-02 Qualcomm Incorporated Automated user/sensor location recognition to customize audio performance in a distributed multi-sensor environment
US20150039295A1 (en) 2011-12-20 2015-02-05 Alona Soschen Natural language processor
CN202453859U (zh) 2011-12-20 2012-09-26 安徽科大讯飞信息科技股份有限公司 一种用于家电的语音交互装置
US8622836B2 (en) 2011-12-22 2014-01-07 Igt Use of wireless signal strength to determine connection
JP2013134430A (ja) 2011-12-27 2013-07-08 Toyota Motor Corp コマンド処理装置、方法、及びプログラム
JP5715042B2 (ja) 2011-12-27 2015-05-07 京セラ株式会社 装置、方法、及びプログラム
US8996729B2 (en) 2012-04-12 2015-03-31 Nokia Corporation Method and apparatus for synchronizing tasks performed by multiple devices
US20130173610A1 (en) 2011-12-29 2013-07-04 Microsoft Corporation Extracting Search-Focused Key N-Grams and/or Phrases for Relevance Rankings in Searches
US9094534B2 (en) 2011-12-29 2015-07-28 Apple Inc. Device, method, and graphical user interface for configuring and implementing restricted interactions with a user interface
US8818810B2 (en) 2011-12-29 2014-08-26 Robert Bosch Gmbh Speaker verification in a health monitoring system
US9218122B2 (en) 2011-12-29 2015-12-22 Rovi Guides, Inc. Systems and methods for transferring settings across devices based on user gestures
US9836177B2 (en) 2011-12-30 2017-12-05 Next IT Innovation Labs, LLC Providing variable responses in a virtual-assistant environment
US9189252B2 (en) 2011-12-30 2015-11-17 Microsoft Technology Licensing, Llc Context-based device action prediction
US10739938B2 (en) 2012-01-05 2020-08-11 International Business Machines Corporation Customizing a tag cloud
JP5790509B2 (ja) 2012-01-05 2015-10-07 富士通株式会社 画像再生装置、画像再生プログラム、及び画像再生方法
JP5887937B2 (ja) 2012-01-06 2016-03-16 株式会社リコー 出力制御システム、出力制御方法、出力制御装置、および出力制御プログラム
JP5547216B2 (ja) 2012-01-06 2014-07-09 株式会社東芝 電子機器及び表示制御方法
US8994560B2 (en) 2012-01-06 2015-03-31 International Business Machines Corporation Managing parking space availability
KR101590332B1 (ko) 2012-01-09 2016-02-18 삼성전자주식회사 영상장치 및 그 제어방법
US9547832B2 (en) 2012-01-10 2017-01-17 Oracle International Corporation Identifying individual intentions and determining responses to individual intentions
US8825020B2 (en) 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
CN103209369A (zh) 2012-01-16 2013-07-17 晨星软件研发(深圳)有限公司 电子装置的声控系统以及相关控制方法
US8812302B2 (en) 2012-01-17 2014-08-19 Google Inc. Techniques for inserting diacritical marks to text input via a user device
US9418674B2 (en) 2012-01-17 2016-08-16 GM Global Technology Operations LLC Method and system for using vehicle sound information to enhance audio prompting
JP2013148419A (ja) 2012-01-18 2013-08-01 Clarion Co Ltd 誘導システム、携帯端末装置および車載装置
US9134810B2 (en) 2012-01-19 2015-09-15 Blackberry Limited Next letter prediction for virtual keyboard
US20130204813A1 (en) 2012-01-20 2013-08-08 Fluential, Llc Self-learning, context aware virtual assistants, systems and methods
US9099098B2 (en) 2012-01-20 2015-08-04 Qualcomm Incorporated Voice activity detection in presence of background noise
US8571528B1 (en) 2012-01-25 2013-10-29 Intuit Inc. Method and system to automatically create a contact with contact details captured during voice calls
US20130197914A1 (en) 2012-01-26 2013-08-01 Microtechnologies Llc D/B/A Microtech Voice activated audio control system and associated method of use
WO2013113011A1 (en) 2012-01-26 2013-08-01 Telecommunication Systems, Inc. Natural navigational guidance
JP5682578B2 (ja) 2012-01-27 2015-03-11 日本電気株式会社 音声認識結果修正支援システム、音声認識結果修正支援方法および音声認識結果修正支援プログラム
US8745760B2 (en) 2012-01-30 2014-06-03 Cisco Technology, Inc. Malware classification for unknown executable files
US20140310365A1 (en) 2012-01-31 2014-10-16 Global Relay Communications Inc. System and Method for Tracking Messages in a Messaging Service
US8626748B2 (en) 2012-02-03 2014-01-07 International Business Machines Corporation Combined word tree text visualization system
KR101900319B1 (ko) 2012-02-07 2018-09-19 삼성전자 주식회사 서비스 연동 수행 방법과 이를 위한 시스템
US9253135B2 (en) 2012-02-07 2016-02-02 Google Inc. Notification management
US8995960B2 (en) 2012-02-10 2015-03-31 Dedo Interactive, Inc. Mobile device authentication
CN102629246B (zh) 2012-02-10 2017-06-27 百纳(武汉)信息技术有限公司 识别浏览器语音命令的服务器及浏览器语音命令识别方法
US10209954B2 (en) 2012-02-14 2019-02-19 Microsoft Technology Licensing, Llc Equal access to speech and touch input
CN103247290A (zh) 2012-02-14 2013-08-14 富泰华工业(深圳)有限公司 通信装置及其控制方法
US8533266B2 (en) 2012-02-14 2013-09-10 Google Inc. User presence detection and event discovery
CN103259907A (zh) 2012-02-15 2013-08-21 深圳富泰宏精密工业有限公司 情景模式切换系统及方法
JP2013167806A (ja) 2012-02-16 2013-08-29 Toshiba Corp 情報通知支援装置、情報通知支援方法、および、プログラム
US8682932B2 (en) 2012-02-16 2014-03-25 Oracle International Corporation Mechanisms for searching enterprise data graphs
US8793136B2 (en) 2012-02-17 2014-07-29 Lg Electronics Inc. Method and apparatus for smart voice recognition
US8832092B2 (en) 2012-02-17 2014-09-09 Bottlenose, Inc. Natural language processing optimized for micro content
RU2629799C2 (ru) 2012-02-17 2017-09-04 Конинклейке Филипс Н.В. Оценка и наблюдение острого повреждения легких (ali)/синдрома острой дыхательной недостаточности (ards)
US8453058B1 (en) 2012-02-20 2013-05-28 Google Inc. Crowd-sourced audio shortcuts
US9064497B2 (en) 2012-02-22 2015-06-23 Htc Corporation Method and apparatus for audio intelligibility enhancement and computing apparatus
US9042867B2 (en) 2012-02-24 2015-05-26 Agnitio S.L. System and method for speaker recognition on mobile devices
KR101889836B1 (ko) 2012-02-24 2018-08-20 삼성전자주식회사 음성인식을 통한 단말기의 잠금 상태 해제 및 조작 방법 및 장치
EP2631758B1 (en) 2012-02-24 2016-11-02 BlackBerry Limited Touchscreen keyboard providing word predictions in partitions of the touchscreen keyboard in proximate association with candidate letters
JP6053097B2 (ja) 2012-02-28 2016-12-27 シャープ株式会社 機器操作システム、機器操作装置、サーバ、機器操作方法およびプログラム
US8543398B1 (en) 2012-02-29 2013-09-24 Google Inc. Training an automatic speech recognition system using compressed word frequencies
US10984337B2 (en) 2012-02-29 2021-04-20 Microsoft Technology Licensing, Llc Context-based search query formation
US9026441B2 (en) 2012-02-29 2015-05-05 Nant Holdings Ip, Llc Spoken control for user construction of complex behaviors
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US20130235987A1 (en) 2012-03-06 2013-09-12 Jose Arroniz-Escobar Automatic machine to machine distribution of subscriber contact information
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
EP2648364B1 (en) 2012-03-07 2018-06-06 Accenture Global Services Limited Communication collaboration
US20130238326A1 (en) 2012-03-08 2013-09-12 Lg Electronics Inc. Apparatus and method for multiple device voice control
US8775177B1 (en) 2012-03-08 2014-07-08 Google Inc. Speech recognition process
US9639174B2 (en) 2012-03-09 2017-05-02 Paypal, Inc. Mobile device display content based on shaking the device
US20150006157A1 (en) 2012-03-14 2015-01-01 Nec Corporation Term synonym acquisition method and term synonym acquisition apparatus
US9576593B2 (en) 2012-03-15 2017-02-21 Regents Of The University Of Minnesota Automated verbal fluency assessment
US9223497B2 (en) 2012-03-16 2015-12-29 Blackberry Limited In-context word prediction and word correction
EP2639792A1 (en) 2012-03-16 2013-09-18 France Télécom Voice control of applications by associating user input with action-context idendifier pairs
KR101980173B1 (ko) 2012-03-16 2019-05-20 삼성전자주식회사 서드 파티 테스크 공급자들의 서비스 제공을 대행하는 협력적 퍼스널 어시스턴트 시스템 및 그에 따른 방법
JP5870790B2 (ja) 2012-03-19 2016-03-01 富士通株式会社 文章校正装置、及び文章校正方法
US8898064B1 (en) 2012-03-19 2014-11-25 Rawles Llc Identifying candidate passwords from captured audio
WO2013138999A1 (en) 2012-03-20 2013-09-26 Nokia Corporation Method and apparatus for providing group context sensing and inference
CN102663016B (zh) 2012-03-21 2015-12-16 上海触乐信息科技有限公司 电子设备上输入候选框进行输入信息扩展的系统及其方法
JP2013200423A (ja) 2012-03-23 2013-10-03 Toshiba Corp 音声対話支援装置、方法、およびプログラム
US20130343720A1 (en) 2012-03-26 2013-12-26 Customplay Llc Providing Plot Explanation Within A Video
US9609395B2 (en) 2012-03-26 2017-03-28 Max Abecassis Second screen subtitles function
JP5965175B2 (ja) 2012-03-27 2016-08-03 ヤフー株式会社 応答生成装置、応答生成方法および応答生成プログラム
US8681950B2 (en) 2012-03-28 2014-03-25 Interactive Intelligence, Inc. System and method for fingerprinting datasets
WO2013144759A1 (en) 2012-03-29 2013-10-03 Telmap Ltd. Location-based assistance for personal planning
US9230257B2 (en) 2012-03-30 2016-01-05 Sap Se Systems and methods for customer relationship management
CN103366741B (zh) 2012-03-31 2019-05-17 上海果壳电子有限公司 语音输入纠错方法及系统
US8881269B2 (en) 2012-03-31 2014-11-04 Apple Inc. Device, method, and graphical user interface for integrating recognition of handwriting gestures with a screen reader
ITRM20120142A1 (it) 2012-04-05 2013-10-06 X2Tv S R L Procedimento e sistema per la raccolta in tempo reale di un feedback da parte del pubblico di una trasmissione televisiva o radiofonica
US8892419B2 (en) 2012-04-10 2014-11-18 Artificial Solutions Iberia SL System and methods for semiautomatic generation and tuning of natural language interaction applications
US8996356B1 (en) 2012-04-10 2015-03-31 Google Inc. Techniques for predictive input method editors
US8346563B1 (en) 2012-04-10 2013-01-01 Artificial Solutions Ltd. System and methods for delivering advanced natural language interaction applications
US20130275117A1 (en) 2012-04-11 2013-10-17 Morgan H. Winer Generalized Phonetic Transliteration Engine
US9685160B2 (en) 2012-04-16 2017-06-20 Htc Corporation Method for offering suggestion during conversation, electronic device using the same, and non-transitory storage medium
US20130282709A1 (en) 2012-04-18 2013-10-24 Yahoo! Inc. Method and system for query suggestion
US9223537B2 (en) 2012-04-18 2015-12-29 Next It Corporation Conversation user interface
US20130279724A1 (en) 2012-04-19 2013-10-24 Sony Computer Entertainment Inc. Auto detection of headphone orientation
WO2013155619A1 (en) 2012-04-20 2013-10-24 Sam Pasupalak Conversational agent
US20130283199A1 (en) 2012-04-24 2013-10-24 Microsoft Corporation Access to an Application Directly from a Lock Screen
US9117449B2 (en) 2012-04-26 2015-08-25 Nuance Communications, Inc. Embedded system for construction of small footprint speech recognition with user-definable constraints
CN102682771B (zh) 2012-04-27 2013-11-20 厦门思德电子科技有限公司 一种适用于云平台的多语音控制方法
TWI511537B (zh) 2012-04-27 2015-12-01 Wistron Corp 智慧型電視系統、智慧型電視、行動裝置及其輸入操作方法
US9785883B2 (en) 2012-04-27 2017-10-10 Excalibur Ip, Llc Avatars for use with personalized generalized content recommendations
US9626150B2 (en) 2012-04-27 2017-04-18 Hewlett-Packard Development Company, L.P. Audio input from user
US20130289991A1 (en) 2012-04-30 2013-10-31 International Business Machines Corporation Application of Voice Tags in a Social Media Context
US20130285916A1 (en) 2012-04-30 2013-10-31 Research In Motion Limited Touchscreen keyboard providing word predictions at locations in association with candidate letters
KR101946364B1 (ko) 2012-05-01 2019-02-11 엘지전자 주식회사 적어도 하나의 마이크 센서를 갖는 모바일 디바이스 및 그 제어방법
US10088853B2 (en) 2012-05-02 2018-10-02 Honeywell International Inc. Devices and methods for interacting with an HVAC controller
CN103384290A (zh) 2012-05-03 2013-11-06 中兴通讯股份有限公司 具备定位导航功能的移动终端及其快捷定位导航的方法
US9058332B1 (en) 2012-05-04 2015-06-16 Google Inc. Blended ranking of dissimilar populations using an N-furcated normalization technique
KR101977072B1 (ko) 2012-05-07 2019-05-10 엘지전자 주식회사 음성 파일과 관련된 텍스트의 표시 방법 및 이를 구현한 전자기기
CN102694909A (zh) 2012-05-07 2012-09-26 深圳桑菲消费通信有限公司 一种手机的智能锁屏系统和方法
US8732560B2 (en) 2012-05-08 2014-05-20 Infineon Technologies Ag Method and device for correction of ternary stored binary data
US9423870B2 (en) 2012-05-08 2016-08-23 Google Inc. Input determination method
US9406299B2 (en) 2012-05-08 2016-08-02 Nuance Communications, Inc. Differential acoustic model representation and linear transform-based adaptation for efficient user profile update techniques in automatic speech recognition
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN108958550B (zh) 2012-05-09 2021-11-12 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
US8725808B2 (en) 2012-05-10 2014-05-13 Intel Mobile Communications GmbH Method for transferring data between a first device and a second device
US9467202B2 (en) 2012-05-10 2016-10-11 Lg Electronics Inc. Method and apparatus for downloading content using NFC
JP5996262B2 (ja) 2012-05-11 2016-09-21 シャープ株式会社 文字入力装置、電子機器、制御方法、制御プログラムおよび記録媒体
US9746916B2 (en) 2012-05-11 2017-08-29 Qualcomm Incorporated Audio user interaction recognition and application interface
US9002768B2 (en) 2012-05-12 2015-04-07 Mikhail Fedorov Human-computer interface system
US8897822B2 (en) 2012-05-13 2014-11-25 Wavemarket, Inc. Auto responder
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US20130308922A1 (en) 2012-05-15 2013-11-21 Microsoft Corporation Enhanced video discovery and productivity through accessibility
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US8775442B2 (en) 2012-05-15 2014-07-08 Apple Inc. Semantic search using a single-source semantic model
US20130307855A1 (en) 2012-05-16 2013-11-21 Mathew J. Lamb Holographic story telling
TWI466101B (zh) 2012-05-18 2014-12-21 Asustek Comp Inc 語音識別方法及系統
US20120296638A1 (en) 2012-05-18 2012-11-22 Ashish Patwa Method and system for quickly recognizing and responding to user intents and questions from natural language input using intelligent hierarchical processing and personalized adaptive semantic interface
CN103426428B (zh) 2012-05-18 2016-05-25 华硕电脑股份有限公司 语音识别方法及系统
US9247306B2 (en) 2012-05-21 2016-01-26 Intellectual Ventures Fund 83 Llc Forming a multimedia product using video chat
US8484573B1 (en) 2012-05-23 2013-07-09 Google Inc. Predictive virtual keyboard
US9406084B2 (en) 2012-05-23 2016-08-02 Specialty's Café & Bakery, Inc. Methods for submitting a food order remotely
US8850037B2 (en) 2012-05-24 2014-09-30 Fmr Llc Communication session transfer between devices
US9374448B2 (en) 2012-05-27 2016-06-21 Qualcomm Incorporated Systems and methods for managing concurrent audio messages
US9173074B2 (en) 2012-05-27 2015-10-27 Qualcomm Incorporated Personal hub presence and response
US20130325436A1 (en) 2012-05-29 2013-12-05 Wright State University Large Scale Distributed Syntactic, Semantic and Lexical Language Models
KR20130133629A (ko) 2012-05-29 2013-12-09 삼성전자주식회사 전자장치에서 음성명령을 실행시키기 위한 장치 및 방법
US9307293B2 (en) 2012-05-30 2016-04-05 Palo Alto Research Center Incorporated Collaborative video application for remote servicing
TWI492221B (zh) 2012-05-30 2015-07-11 友達光電股份有限公司 遙控裝置、遙控系統及遙控裝置之控制方法
US8768693B2 (en) 2012-05-31 2014-07-01 Yahoo! Inc. Automatic tag extraction from audio annotated photos
US20130325447A1 (en) 2012-05-31 2013-12-05 Elwha LLC, a limited liability corporation of the State of Delaware Speech recognition adaptation systems based on adaptation data
CN102750087A (zh) 2012-05-31 2012-10-24 华为终端有限公司 控制语音识别功能的方法、装置和终端设备
US8843371B2 (en) 2012-05-31 2014-09-23 Elwha Llc Speech recognition adaptation systems based on adaptation data
US9123338B1 (en) 2012-06-01 2015-09-01 Google Inc. Background audio identification for speech disambiguation
CN103455234A (zh) 2012-06-01 2013-12-18 腾讯科技(深圳)有限公司 显示应用程序界面的方法及装置
US20130321267A1 (en) 2012-06-04 2013-12-05 Apple Inc. Dynamically changing a character associated with a key of a keyboard
US20130325343A1 (en) 2012-06-05 2013-12-05 Apple Inc. Mapping application with novel search field
US8725823B2 (en) 2012-06-05 2014-05-13 Forget You Not, LLC Location-based communications
US9230556B2 (en) 2012-06-05 2016-01-05 Apple Inc. Voice instructions during navigation
US9311750B2 (en) 2012-06-05 2016-04-12 Apple Inc. Rotation operations in a mapping application
US8515750B1 (en) 2012-06-05 2013-08-20 Google Inc. Realtime acoustic adaptation using stability measures
US9997069B2 (en) 2012-06-05 2018-06-12 Apple Inc. Context-aware voice guidance
US9043150B2 (en) 2012-06-05 2015-05-26 Apple Inc. Routing applications for navigation
US9071564B2 (en) 2012-06-07 2015-06-30 Apple Inc. Data synchronization using mail and push notification services
US10444836B2 (en) 2012-06-07 2019-10-15 Nook Digital, Llc Accessibility aids for users of electronic devices
US20130332168A1 (en) 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Voice activated search and control for applications
US20130332159A1 (en) 2012-06-08 2013-12-12 Apple Inc. Using fan throttling to enhance dictation accuracy
WO2013185109A2 (en) 2012-06-08 2013-12-12 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US9002380B2 (en) 2012-06-08 2015-04-07 Apple Inc. Proximity-based notifications in a mobile device
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9674331B2 (en) 2012-06-08 2017-06-06 Apple Inc. Transmitting data from an automated assistant to an accessory
US9230218B2 (en) 2012-06-08 2016-01-05 Spotify Ab Systems and methods for recognizing ambiguity in metadata
US9916514B2 (en) 2012-06-11 2018-03-13 Amazon Technologies, Inc. Text recognition driven functionality
EP2675147B1 (en) 2012-06-11 2022-03-23 Samsung Electronics Co., Ltd. Service providing system in a vehicle including display device and mobile device, and method for providing service using the same
US9183845B1 (en) 2012-06-12 2015-11-10 Amazon Technologies, Inc. Adjusting audio signals based on a specific frequency range associated with environmental noise characteristics
JP5921348B2 (ja) 2012-06-13 2016-05-24 三菱電機株式会社 映像表示端末
JP2015529870A (ja) 2012-06-14 2015-10-08 フレクストロニクス エイピー エルエルシーFlextronics Ap,Llc テレビコンテンツをカスタマイズする方法及びシステム
CN104603773A (zh) 2012-06-14 2015-05-06 诺基亚公司 基于用户之间的社交扩散使兴趣标签与媒体项关联的方法和设备
US20130339454A1 (en) 2012-06-15 2013-12-19 Michael Walker Systems and methods for communicating between multiple access devices
JP5819261B2 (ja) 2012-06-19 2015-11-18 株式会社Nttドコモ 機能実行指示システム、機能実行指示方法及び機能実行指示プログラム
US9185501B2 (en) 2012-06-20 2015-11-10 Broadcom Corporation Container-located information transfer module
US9734839B1 (en) 2012-06-20 2017-08-15 Amazon Technologies, Inc. Routing natural language commands to the appropriate applications
US20140012574A1 (en) 2012-06-21 2014-01-09 Maluuba Inc. Interactive timeline for presenting and organizing tasks
US20130347029A1 (en) 2012-06-21 2013-12-26 United Video Properties, Inc. Systems and methods for navigating to content without an advertisement
US20130347018A1 (en) 2012-06-21 2013-12-26 Amazon Technologies, Inc. Providing supplemental content with active media
US20130346347A1 (en) 2012-06-22 2013-12-26 Google Inc. Method to Predict a Communicative Action that is Most Likely to be Executed Given a Context
US9813882B1 (en) 2012-06-25 2017-11-07 Amazon Technologies, Inc. Mobile notifications based upon notification content
US20130342672A1 (en) 2012-06-25 2013-12-26 Amazon Technologies, Inc. Using gaze determination with device input
US9305555B2 (en) 2012-06-25 2016-04-05 Mitsubishi Electric Corporation Onboard information device
US8606577B1 (en) 2012-06-25 2013-12-10 Google Inc. Visual confirmation of voice recognized text input
US20130346068A1 (en) 2012-06-25 2013-12-26 Apple Inc. Voice-Based Image Tagging and Searching
US20150201064A1 (en) 2012-06-26 2015-07-16 Blackberry Limited Methods and apparatus to detect and add impact events to a calendar program
US8819841B2 (en) 2012-06-26 2014-08-26 Google Inc. Automated accounts for media playback
CN102801853B (zh) 2012-06-27 2017-02-15 宇龙计算机通信科技(深圳)有限公司 移动终端和自动触发任务执行方法
US20140006153A1 (en) 2012-06-27 2014-01-02 Infosys Limited System for making personalized offers for business facilitation of an entity and methods thereof
US20140002338A1 (en) 2012-06-28 2014-01-02 Intel Corporation Techniques for pose estimation and false positive filtering for gesture recognition
JP6050625B2 (ja) 2012-06-28 2016-12-21 サターン ライセンシング エルエルシーSaturn Licensing LLC 情報処理装置及び情報処理方法、コンピューター・プログラム、並びに情報通信システム
US9141504B2 (en) 2012-06-28 2015-09-22 Apple Inc. Presenting status data received from multiple devices
KR101961139B1 (ko) 2012-06-28 2019-03-25 엘지전자 주식회사 이동 단말기 및 그것의 음성 인식 방법
JP5852930B2 (ja) 2012-06-29 2016-02-03 Kddi株式会社 入力文字推定装置およびプログラム
US9426229B2 (en) 2012-06-29 2016-08-23 Nokia Technologies Oy Apparatus and method for selection of a device for content sharing operations
US9195383B2 (en) 2012-06-29 2015-11-24 Spotify Ab Systems and methods for multi-path control signals for media presentation devices
US9996628B2 (en) 2012-06-29 2018-06-12 Verisign, Inc. Providing audio-activated resource access for user devices based on speaker voiceprint
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US10620797B2 (en) 2012-06-29 2020-04-14 Spotify Ab Systems and methods for multi-context media control and playback
US20140006012A1 (en) 2012-07-02 2014-01-02 Microsoft Corporation Learning-Based Processing of Natural Language Questions
US9536528B2 (en) 2012-07-03 2017-01-03 Google Inc. Determining hotword suitability
CN103533143A (zh) 2012-07-03 2014-01-22 联想(北京)有限公司 一种信息处理方法及电子设备
KR101972955B1 (ko) 2012-07-03 2019-04-26 삼성전자 주식회사 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치
KR20140004515A (ko) 2012-07-03 2014-01-13 삼성전자주식회사 디스플레이 장치, 대화형 시스템 및 응답 정보 제공 방법
CN103543902A (zh) 2012-07-09 2014-01-29 上海博路信息技术有限公司 一种短信地址的地图显示方法
US9064493B2 (en) 2012-07-09 2015-06-23 Nuance Communications, Inc. Detecting potential significant errors in speech recognition results
CN103544140A (zh) 2012-07-12 2014-01-29 国际商业机器公司 一种数据处理方法、展示方法和相应的装置
US20140019460A1 (en) 2012-07-12 2014-01-16 Yahoo! Inc. Targeted search suggestions
US9053708B2 (en) 2012-07-18 2015-06-09 International Business Machines Corporation System, method and program product for providing automatic speech recognition (ASR) in a shared resource environment
US9658746B2 (en) 2012-07-20 2017-05-23 Nook Digital, Llc Accessible reading mode techniques for electronic devices
JP2015531909A (ja) 2012-07-20 2015-11-05 インタートラスト テクノロジーズ コーポレイション 情報ターゲティングシステムおよび方法
US9442687B2 (en) 2012-07-23 2016-09-13 Korea Advanced Institute Of Science And Technology Method and apparatus for moving web object based on intent
US9953584B2 (en) 2012-07-24 2018-04-24 Nook Digital, Llc Lighting techniques for display devices
US20140028477A1 (en) 2012-07-24 2014-01-30 Apple Inc. Vehicle location system
US20140031060A1 (en) 2012-07-25 2014-01-30 Aro, Inc. Creating Context Slices of a Storyline from Mobile Device Data
US8589911B1 (en) 2012-07-26 2013-11-19 Google Inc. Intent fulfillment
JP2014026629A (ja) 2012-07-26 2014-02-06 Panasonic Corp 入力装置及び入力支援方法
US8949334B2 (en) 2012-07-26 2015-02-03 Microsoft Corporation Push-based recommendations
EP2879402A4 (en) 2012-07-27 2016-03-23 Sony Corp INFORMATION PROCESSING SYSTEM AND STORAGE MEDIUM
US8922034B2 (en) 2012-07-27 2014-12-30 Illinois Tool Works Inc. Power converter for engine generator
US8442821B1 (en) 2012-07-27 2013-05-14 Google Inc. Multi-frame prediction for hybrid neural network/hidden Markov models
US8990343B2 (en) 2012-07-30 2015-03-24 Google Inc. Transferring a state of an application from a first computing device to a second computing device
US20140039893A1 (en) 2012-07-31 2014-02-06 Sri International Personalized Voice-Driven User Interfaces for Remote Multi-User Services
US9465833B2 (en) 2012-07-31 2016-10-11 Veveo, Inc. Disambiguating user intent in conversational interaction system for large corpus information retrieval
US20140035823A1 (en) 2012-08-01 2014-02-06 Apple Inc. Dynamic Context-Based Language Determination
US8831957B2 (en) 2012-08-01 2014-09-09 Google Inc. Speech recognition models based on location indicia
US10108725B2 (en) 2012-08-02 2018-10-23 Rule 14 Real-time and adaptive data mining
US8953757B2 (en) 2012-08-06 2015-02-10 Angel.Com Incorporated Preloading contextual information for applications using a conversation assistant
US9390174B2 (en) 2012-08-08 2016-07-12 Google Inc. Search result ranking and presentation
CN104704797B (zh) 2012-08-10 2018-08-10 纽昂斯通讯公司 用于电子设备的虚拟代理通信
US10163058B2 (en) 2012-08-14 2018-12-25 Sri International Method, system and device for inferring a mobile user's current context and proactively providing assistance
US20140052791A1 (en) 2012-08-14 2014-02-20 International Business Machines Corporation Task Based Filtering of Unwanted Electronic Communications
US20140053101A1 (en) 2012-08-15 2014-02-20 Ge Aviation Systems Llc Methods for displaying on a graphical user interface
IN2015DN01946A (ja) 2012-08-15 2015-08-07 Ie Business Plains Llc
US9292487B1 (en) 2012-08-16 2016-03-22 Amazon Technologies, Inc. Discriminative language model pruning
KR20150045404A (ko) 2012-08-16 2015-04-28 뉘앙스 커뮤니케이션즈, 인코포레이티드 엔터테인먼트 시스템을 위한 사용자 인터페이스
US9031848B2 (en) 2012-08-16 2015-05-12 Nuance Communications, Inc. User interface for searching a bundled service content data source
US9497515B2 (en) 2012-08-16 2016-11-15 Nuance Communications, Inc. User interface for entertainment systems
KR101922464B1 (ko) 2012-08-16 2018-11-27 삼성전자주식회사 메시지 송수신 방법 및 그 전자장치
CN102820033B (zh) 2012-08-17 2013-12-04 南京大学 一种声纹识别方法
US20140279739A1 (en) 2013-03-15 2014-09-18 InsideSales.com, Inc. Resolving and merging duplicate records using machine learning
US20160357790A1 (en) 2012-08-20 2016-12-08 InsideSales.com, Inc. Resolving and merging duplicate records using machine learning
WO2014029099A1 (en) 2012-08-24 2014-02-27 Microsoft Corporation I-vector based clustering training data in speech recognition
US9229924B2 (en) 2012-08-24 2016-01-05 Microsoft Technology Licensing, Llc Word detection and domain dictionary recommendation
US20150227505A1 (en) 2012-08-27 2015-08-13 Hitachi, Ltd. Word meaning relationship extraction device
EP2891347B1 (en) 2012-08-28 2019-10-09 Nokia Technologies Oy Discovery method and system for discovery
US9026425B2 (en) 2012-08-28 2015-05-05 Xerox Corporation Lexical and phrasal feature domain adaptation in statistical machine translation
US9049295B1 (en) 2012-08-28 2015-06-02 West Corporation Intelligent interactive voice response system for processing customer communications
JP6393021B2 (ja) 2012-08-28 2018-09-19 京セラ株式会社 電子機器、制御方法、及び制御プログラム
US9390370B2 (en) 2012-08-28 2016-07-12 International Business Machines Corporation Training deep neural network acoustic models using distributed hessian-free optimization
KR102081925B1 (ko) 2012-08-29 2020-02-26 엘지전자 주식회사 디스플레이 디바이스 및 스피치 검색 방법
CN102866828B (zh) 2012-08-29 2015-11-25 腾讯科技(深圳)有限公司 一种终端控制方法和设备
US9218333B2 (en) 2012-08-31 2015-12-22 Microsoft Technology Licensing, Llc Context sensitive auto-correction
US10026394B1 (en) 2012-08-31 2018-07-17 Amazon Technologies, Inc. Managing dialogs on a speech recognition platform
US20140074589A1 (en) 2012-09-02 2014-03-13 Aaron David NIELSEN System and method for the selection and delivery of a customized consumer offer or engagement dialog by a live customer service representative in communication with a consumer
KR101398218B1 (ko) 2012-09-03 2014-05-22 경희대학교 산학협력단 감정 음성 인식장치 및 방법
US8826415B2 (en) 2012-09-04 2014-09-02 Apple Inc. Automated device access
CN103493500A (zh) 2012-09-04 2014-01-01 华为终端有限公司 媒体播放方法、控制点和终端
JP2014052445A (ja) 2012-09-06 2014-03-20 Canon Inc ズームレンズ
US9536049B2 (en) 2012-09-07 2017-01-03 Next It Corporation Conversational virtual healthcare assistant
US9325809B1 (en) 2012-09-07 2016-04-26 Mindmeld, Inc. Audio recall during voice conversations
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
EP2706458A1 (en) 2012-09-10 2014-03-12 Canon Kabushiki Kaisha Method and device for controlling communication between applications in a web runtime environment
US8600746B1 (en) 2012-09-10 2013-12-03 Google Inc. Speech recognition parameter adjustment
US20140074466A1 (en) 2012-09-10 2014-03-13 Google Inc. Answering questions using environmental context
US20150088523A1 (en) 2012-09-10 2015-03-26 Google Inc. Systems and Methods for Designing Voice Applications
US20140074470A1 (en) 2012-09-11 2014-03-13 Google Inc. Phonetic pronunciation
US20140074472A1 (en) 2012-09-12 2014-03-13 Chih-Hung Lin Voice control system with portable voice control device
WO2014040263A1 (en) 2012-09-14 2014-03-20 Microsoft Corporation Semantic ranking using a forward index
US20140078065A1 (en) 2012-09-15 2014-03-20 Ahmet Akkok Predictive Keyboard With Suppressed Keys
US9519641B2 (en) 2012-09-18 2016-12-13 Abbyy Development Llc Photography recognition translation
US9081482B1 (en) 2012-09-18 2015-07-14 Google Inc. Text input suggestion ranking
JP6057637B2 (ja) 2012-09-18 2017-01-11 株式会社アイ・オー・データ機器 携帯型情報端末装置、機能切替方法、および機能切替プログラム
US10656808B2 (en) 2012-09-18 2020-05-19 Adobe Inc. Natural language and user interface controls
WO2014047161A2 (en) 2012-09-18 2014-03-27 Google Inc. Posture-adaptive selection
US8823507B1 (en) 2012-09-19 2014-09-02 Amazon Technologies, Inc. Variable notification alerts
US9105268B2 (en) 2012-09-19 2015-08-11 24/7 Customer, Inc. Method and apparatus for predicting intent in IVR using natural language queries
US8769651B2 (en) 2012-09-19 2014-07-01 Secureauth Corporation Mobile multifactor single-sign-on authentication
US10042603B2 (en) 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
KR101919792B1 (ko) 2012-09-20 2018-11-19 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US9076450B1 (en) 2012-09-21 2015-07-07 Amazon Technologies, Inc. Directed audio for speech recognition
US20140211944A1 (en) 2012-09-24 2014-07-31 Daniel Joseph Lutz System and method of protecting, storing and decrypting keys over a computerized network
US9092415B2 (en) 2012-09-25 2015-07-28 Rovi Guides, Inc. Systems and methods for automatic program recommendations based on user interactions
US8983383B1 (en) 2012-09-25 2015-03-17 Rawles Llc Providing hands-free service to multiple devices
US8935167B2 (en) 2012-09-25 2015-01-13 Apple Inc. Exemplar-based latent perceptual modeling for automatic speech recognition
US8983836B2 (en) 2012-09-26 2015-03-17 International Business Machines Corporation Captioning using socially derived acoustic profiles
US8498864B1 (en) 2012-09-27 2013-07-30 Google Inc. Methods and systems for predicting a text
CN104469255A (zh) 2013-09-16 2015-03-25 杜比实验室特许公司 改进的音频或视频会议
EP2901730A4 (en) 2012-09-27 2016-08-03 Aegis Mobility Inc MOBILE DEVICE CONTEXT WITH CLOSE-UP COMMUNICATIONS
JP2014072586A (ja) 2012-09-27 2014-04-21 Sharp Corp 表示装置、表示方法、テレビジョン受像機、プログラム、および、記録媒体
US8806613B2 (en) 2012-09-28 2014-08-12 Intel Corporation Intelligent task assignment and authorization systems and methods
US10824310B2 (en) 2012-12-20 2020-11-03 Sri International Augmented reality virtual personal assistant for external representation
US9052964B2 (en) 2012-09-28 2015-06-09 International Business Machines Corporation Device operability enhancement with alternative device utilization
KR20140042994A (ko) 2012-09-28 2014-04-08 한국전자통신연구원 가상 에이전트와의 대화 내용에서 자동으로 추출되는 개인 프로파일링 정보를 이용한 자동학습 기반의 인공지능 대화 시스템
US10096316B2 (en) 2013-11-27 2018-10-09 Sri International Sharing intents to provide virtual assistance in a multi-person dialog
US10276157B2 (en) 2012-10-01 2019-04-30 Nuance Communications, Inc. Systems and methods for providing a voice agent user interface
US20140095172A1 (en) 2012-10-01 2014-04-03 Nuance Communications, Inc. Systems and methods for providing a voice agent user interface
US20140095171A1 (en) 2012-10-01 2014-04-03 Nuance Communications, Inc. Systems and methods for providing a voice agent user interface
US8645128B1 (en) 2012-10-02 2014-02-04 Google Inc. Determining pitch dynamics of an audio signal
US9367236B2 (en) 2012-10-05 2016-06-14 Google Inc. System and method for processing touch actions
US9230560B2 (en) 2012-10-08 2016-01-05 Nant Holdings Ip, Llc Smart home automation systems and methods
KR102009423B1 (ko) 2012-10-08 2019-08-09 삼성전자주식회사 음성 인식을 이용한 미리 설정된 동작 모드의 수행 방법 및 장치
US8606568B1 (en) 2012-10-10 2013-12-10 Google Inc. Evaluating pronouns in context
US8543397B1 (en) 2012-10-11 2013-09-24 Google Inc. Mobile device voice activation
US10275513B1 (en) 2012-10-12 2019-04-30 Google Llc Providing application functionality
JP6066471B2 (ja) 2012-10-12 2017-01-25 本田技研工業株式会社 対話システム及び対話システム向け発話の判別方法
US8713433B1 (en) 2012-10-16 2014-04-29 Google Inc. Feature-based autocorrection
US8843845B2 (en) 2012-10-16 2014-09-23 Google Inc. Multi-gesture text input prediction
CN103727948B (zh) 2012-10-16 2016-08-17 北京掌行通信息技术有限公司 乘车导航的实时诱导方法
US9031293B2 (en) 2012-10-19 2015-05-12 Sony Computer Entertainment Inc. Multi-modal sensor based emotion recognition and emotional interface
CN102882752A (zh) 2012-10-19 2013-01-16 天津光宏科技有限公司 基于物联网及安卓系统的智能家居系统及控制方法
WO2014064531A1 (en) 2012-10-22 2014-05-01 Spotify Ab Systems and methods for pre-fetching media content
JP2016502175A (ja) 2012-10-22 2016-01-21 ヴィド スケール インコーポレイテッド モバイルデバイスにおけるユーザプレゼンスの検出
US8527276B1 (en) 2012-10-25 2013-09-03 Google Inc. Speech synthesis using deep neural networks
US9305439B2 (en) 2012-10-25 2016-04-05 Google Inc. Configurable indicator on computing device
US20140122086A1 (en) 2012-10-26 2014-05-01 Microsoft Corporation Augmenting speech recognition with depth imaging
US9459176B2 (en) 2012-10-26 2016-10-04 Azima Holdings, Inc. Voice controlled vibration data analyzer systems and methods
US9158560B2 (en) 2012-10-26 2015-10-13 Verizon Patent And Licensing Inc. Dynamic application arranger
US20150228274A1 (en) 2012-10-26 2015-08-13 Nokia Technologies Oy Multi-Device Speech Recognition
KR20140054643A (ko) 2012-10-29 2014-05-09 삼성전자주식회사 음성인식장치 및 음성인식방법
KR102117841B1 (ko) 2012-10-30 2020-06-02 삼성전자주식회사 전자장치 및 그 제어방법
KR101967917B1 (ko) 2012-10-30 2019-08-13 삼성전자주식회사 음성을 인식하는 전자 장치 및 방법
WO2014070872A2 (en) 2012-10-30 2014-05-08 Robert Bosch Gmbh System and method for multimodal interaction with reduced distraction in operating vehicles
US10304465B2 (en) 2012-10-30 2019-05-28 Google Technology Holdings LLC Voice control user interface for low power mode
US9734151B2 (en) 2012-10-31 2017-08-15 Tivo Solutions Inc. Method and system for voice based media search
US20140122153A1 (en) 2012-10-31 2014-05-01 DoWhatILikeBest, LLC Favorite and serendipitous event correlation and notification
US8606576B1 (en) 2012-11-02 2013-12-10 Google Inc. Communication log with extracted keywords from speech-to-text processing
US9093069B2 (en) 2012-11-05 2015-07-28 Nuance Communications, Inc. Privacy-sensitive speech model creation via aggregation of multiple user models
JP2016504651A (ja) 2012-11-07 2016-02-12 インタートラスト テクノロジーズ コーポレイション 個人化データ管理システムおよび方法
JP6018881B2 (ja) 2012-11-07 2016-11-02 株式会社日立製作所 ナビゲーション装置、及びナビゲーション方法
US20140136987A1 (en) 2012-11-09 2014-05-15 Apple Inc. Generation of a user interface based on contacts
KR20140060995A (ko) 2012-11-13 2014-05-21 삼성전자주식회사 상황별 거절 메시지 제공 방법 및 이를 지원하는 단말기
US9247387B2 (en) 2012-11-13 2016-01-26 International Business Machines Corporation Proximity based reminders
US9275642B2 (en) 2012-11-13 2016-03-01 Unified Computer Intelligence Corporation Voice-operated internet-ready ubiquitous computing device and method thereof
KR101709187B1 (ko) 2012-11-14 2017-02-23 한국전자통신연구원 계층적 대화 태스크 라이브러리를 이용한 이중 대화관리 기반 음성대화시스템
KR20140061803A (ko) 2012-11-14 2014-05-22 삼성전자주식회사 프로젝션 장치
US9235321B2 (en) 2012-11-14 2016-01-12 Facebook, Inc. Animation sequence associated with content item
US9798799B2 (en) 2012-11-15 2017-10-24 Sri International Vehicle personal assistant that interprets spoken natural language input based upon vehicle context
US9085303B2 (en) 2012-11-15 2015-07-21 Sri International Vehicle personal assistant
US9032219B2 (en) 2012-11-16 2015-05-12 Nuance Communications, Inc. Securing speech recognition data
KR102028702B1 (ko) 2012-11-16 2019-10-04 삼성전자주식회사 현재의 상태에 따른 응답 메시지를 송신하는 전자 장치 및 방법
US9378456B2 (en) 2012-11-19 2016-06-28 Microsoft Technology Licensing, Llc Task completion
US8965754B2 (en) 2012-11-20 2015-02-24 International Business Machines Corporation Text prediction using environment hints
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US9251713B1 (en) 2012-11-20 2016-02-02 Anthony J. Giovanniello System and process for assessing a user and for assisting a user in rehabilitation
JP2014102669A (ja) 2012-11-20 2014-06-05 Toshiba Corp 情報処理装置、情報処理方法およびプログラム
KR101995428B1 (ko) 2012-11-20 2019-07-02 엘지전자 주식회사 이동 단말기 및 그 제어방법
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
KR20140064246A (ko) 2012-11-20 2014-05-28 한국전자통신연구원 착용형 디스플레이 장치
US9756049B2 (en) 2012-11-22 2017-09-05 8303142 Canada Inc. System and method for managing several mobile devices simultaneously
RU2530268C2 (ru) 2012-11-28 2014-10-10 Общество с ограниченной ответственностью "Спиктуит" Способ обучения информационной диалоговой системы пользователем
US20140146200A1 (en) 2012-11-28 2014-05-29 Research In Motion Limited Entries to an electronic calendar
US20140149118A1 (en) 2012-11-28 2014-05-29 Lg Electronics Inc. Apparatus and method for driving electric device using speech recognition
WO2014209157A1 (en) 2013-06-27 2014-12-31 Obschestvo S Ogranichennoy Otvetstvennostiyu "Speaktoit" Generating dialog recommendations for chat information systems
WO2014084413A1 (ko) 2012-11-28 2014-06-05 엘지전자 주식회사 가전 기기 구동 장치 및 방법
US9875741B2 (en) 2013-03-15 2018-01-23 Google Llc Selective speech recognition for chat and digital personal assistant systems
KR20210068622A (ko) 2012-11-29 2021-06-09 파세토, 인크. 여러 애플리케이션들을 디스플레이하기 위한 시스템 및 방법
JP2014109889A (ja) 2012-11-30 2014-06-12 Toshiba Corp コンテンツ検索装置、コンテンツ検索方法及び制御プログラム
US9589149B2 (en) 2012-11-30 2017-03-07 Microsoft Technology Licensing, Llc Combining personalization and privacy locally on devices
US9159319B1 (en) 2012-12-03 2015-10-13 Amazon Technologies, Inc. Keyword spotting with competitor models
US9549323B2 (en) 2012-12-03 2017-01-17 Samsung Electronics Co., Ltd. Method and mobile terminal for controlling screen lock
US9026429B2 (en) 2012-12-05 2015-05-05 Facebook, Inc. Systems and methods for character string auto-suggestion based on degree of difficulty
US9819786B2 (en) 2012-12-05 2017-11-14 Facebook, Inc. Systems and methods for a symbol-adaptable keyboard
US9244905B2 (en) 2012-12-06 2016-01-26 Microsoft Technology Licensing, Llc Communication context based predictive-text suggestion
US20140164476A1 (en) 2012-12-06 2014-06-12 At&T Intellectual Property I, Lp Apparatus and method for providing a virtual assistant
US8615221B1 (en) 2012-12-06 2013-12-24 Google Inc. System and method for selection of notification techniques in an electronic device
US8930181B2 (en) 2012-12-06 2015-01-06 Prashant Parikh Automatic dynamic contextual data entry completion
US20140163951A1 (en) 2012-12-07 2014-06-12 Xerox Corporation Hybrid adaptation of named entity recognition
US9471559B2 (en) 2012-12-10 2016-10-18 International Business Machines Corporation Deep analysis of natural language questions for question answering system
KR102091003B1 (ko) 2012-12-10 2020-03-19 삼성전자 주식회사 음성인식 기술을 이용한 상황 인식 서비스 제공 방법 및 장치
US9276802B2 (en) 2012-12-11 2016-03-01 Nuance Communications, Inc. Systems and methods for sharing information between virtual agents
US9697827B1 (en) 2012-12-11 2017-07-04 Amazon Technologies, Inc. Error reduction in speech processing
US9679300B2 (en) 2012-12-11 2017-06-13 Nuance Communications, Inc. Systems and methods for virtual agent recommendation for multiple persons
US9148394B2 (en) 2012-12-11 2015-09-29 Nuance Communications, Inc. Systems and methods for user interface presentation of virtual agent
KR20150095624A (ko) 2012-12-11 2015-08-21 뉘앙스 커뮤니케이션즈, 인코포레이티드 다수의 개인을 위한 가상 에이전트 추천 시스템 및 방법
US20140164532A1 (en) 2012-12-11 2014-06-12 Nuance Communications, Inc. Systems and methods for virtual agent participation in multiparty conversation
US9659298B2 (en) 2012-12-11 2017-05-23 Nuance Communications, Inc. Systems and methods for informing virtual agent recommendation
US9704486B2 (en) 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
US20140164953A1 (en) 2012-12-11 2014-06-12 Nuance Communications, Inc. Systems and methods for invoking virtual agent
US9190057B2 (en) 2012-12-12 2015-11-17 Amazon Technologies, Inc. Speech model retrieval in distributed speech recognition systems
US9117450B2 (en) 2012-12-12 2015-08-25 Nuance Communications, Inc. Combining re-speaking, partial agent transcription and ASR for improved accuracy / human guided ASR
US9185742B2 (en) 2012-12-13 2015-11-10 Google Technology Holdings LLC System and methods for a cloud based wireless personal area network service enabling context activity handoffs between devices
KR102014778B1 (ko) 2012-12-14 2019-08-27 엘지전자 주식회사 텍스트 메시징 서비스를 제공하는 디지털 디바이스 및 그 제어 방법
KR102090269B1 (ko) 2012-12-14 2020-03-17 삼성전자주식회사 정보 검색 방법, 그와 같은 기능을 갖는 디바이스 및 기록 매체
US9213754B1 (en) 2012-12-17 2015-12-15 Google Inc. Personalizing content items
US9141660B2 (en) 2012-12-17 2015-09-22 International Business Machines Corporation Intelligent evidence classification and notification in a deep question answering system
KR102102246B1 (ko) 2012-12-18 2020-04-22 삼성전자주식회사 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치
US9098467B1 (en) 2012-12-19 2015-08-04 Rawles Llc Accepting voice commands based on user identity
US9070366B1 (en) 2012-12-19 2015-06-30 Amazon Technologies, Inc. Architecture for multi-domain utterance processing
US20140179295A1 (en) 2012-12-20 2014-06-26 Enno Luebbers Deriving environmental context and actions from ad-hoc state broadcast
US8977555B2 (en) 2012-12-20 2015-03-10 Amazon Technologies, Inc. Identification of utterance subjects
US8645138B1 (en) 2012-12-20 2014-02-04 Google Inc. Two-pass decoding for speech recognition of search and action requests
WO2014096506A1 (en) 2012-12-21 2014-06-26 Nokia Corporation Method, apparatus, and computer program product for personalizing speech recognition
KR20140082157A (ko) 2012-12-24 2014-07-02 한국전자통신연구원 다중 음향 모델을 이용하여 음성을 인식하기 위한 장치 및 그 방법
JP2014126600A (ja) 2012-12-25 2014-07-07 Panasonic Corp 音声認識装置、音声認識方法、およびテレビ
JP2014124332A (ja) 2012-12-26 2014-07-07 Daiichi Shokai Co Ltd 遊技機
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
JP6093877B2 (ja) 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2014105274A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for navigating user interface hierarchies
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
CN103049567A (zh) 2012-12-31 2013-04-17 威盛电子股份有限公司 检索方法、检索系统以及自然语言理解系统
CN103077165A (zh) 2012-12-31 2013-05-01 威盛电子股份有限公司 自然语言对话方法及其系统
US8571851B1 (en) 2012-12-31 2013-10-29 Google Inc. Semantic interpretation using user gaze order
CN103021403A (zh) 2012-12-31 2013-04-03 威盛电子股份有限公司 基于语音识别的选择方法及其移动终端装置及信息系统
CN103020047A (zh) 2012-12-31 2013-04-03 威盛电子股份有限公司 修正语音应答的方法及自然语言对话系统
KR20140088449A (ko) 2013-01-02 2014-07-10 엘지전자 주식회사 중앙 제어 장치 및 그것의 제어 방법
KR101892734B1 (ko) 2013-01-04 2018-08-28 한국전자통신연구원 음성 인식 시스템에서의 오류 수정 방법 및 그 장치
US9497137B2 (en) 2013-01-04 2016-11-15 Sookbox, LLC Digital content connectivity and control via a plurality of controllers that are treated discriminatively
KR20140089862A (ko) 2013-01-07 2014-07-16 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
KR20140093303A (ko) 2013-01-07 2014-07-28 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
WO2014109104A1 (ja) 2013-01-08 2014-07-17 クラリオン株式会社 音声認識装置、音声認識プログラム及び音声認識方法
US20140195233A1 (en) 2013-01-08 2014-07-10 Spansion Llc Distributed Speech Recognition System
JP5921722B2 (ja) 2013-01-09 2016-05-24 三菱電機株式会社 音声認識装置および表示方法
US20140198047A1 (en) 2013-01-14 2014-07-17 Nuance Communications, Inc. Reducing error rates for touch based keyboards
US8731912B1 (en) 2013-01-16 2014-05-20 Google Inc. Delaying audio notifications
US9292489B1 (en) 2013-01-16 2016-03-22 Google Inc. Sub-lexical language models with word level pronunciation lexicons
US8942674B2 (en) 2013-01-18 2015-01-27 Blackberry Limited Responding to incoming calls
JP2014140121A (ja) 2013-01-21 2014-07-31 Sharp Corp 会議支援システム
US20140203939A1 (en) 2013-01-21 2014-07-24 Rtc Inc. Control and monitoring of light-emitting-diode (led) bulbs
US9047274B2 (en) 2013-01-21 2015-06-02 Xerox Corporation Machine translation-driven authoring system and method
US9148499B2 (en) 2013-01-22 2015-09-29 Blackberry Limited Method and system for automatically identifying voice tags through user operation
EP2760015A1 (en) 2013-01-23 2014-07-30 BlackBerry Limited Event-triggered hands-free multitasking for media playback
US9530409B2 (en) 2013-01-23 2016-12-27 Blackberry Limited Event-triggered hands-free multitasking for media playback
US9165566B2 (en) 2013-01-24 2015-10-20 Microsoft Technology Licensing, Llc Indefinite speech inputs
CN103971680B (zh) 2013-01-24 2018-06-05 华为终端(东莞)有限公司 一种语音识别的方法、装置
JP2014142566A (ja) 2013-01-25 2014-08-07 Alpine Electronics Inc 音声認識システムおよび音声認識方法
DE102013001219B4 (de) 2013-01-25 2019-08-29 Inodyn Newmedia Gmbh Verfahren und System zur Sprachaktivierung eines Software-Agenten aus einem Standby-Modus
JP6251958B2 (ja) 2013-01-28 2017-12-27 富士通株式会社 発話解析装置、音声対話制御装置、方法、及びプログラム
US9971495B2 (en) 2013-01-28 2018-05-15 Nook Digital, Llc Context based gesture delineation for user interaction in eyes-free mode
JP6115152B2 (ja) 2013-01-29 2017-04-19 コニカミノルタ株式会社 情報処理システム、情報処理装置、情報処理端末及びプログラム
WO2014119889A1 (en) 2013-01-31 2014-08-07 Samsung Electronics Co., Ltd. Method of displaying user interface on device, and device
JP2014150323A (ja) 2013-01-31 2014-08-21 Sharp Corp 文字入力装置
KR20140098947A (ko) 2013-01-31 2014-08-11 삼성전자주식회사 광고 제공 시스템, 사용자 단말 및 광고 제공 방법
US20140222435A1 (en) 2013-02-01 2014-08-07 Telenav, Inc. Navigation system with user dependent language mechanism and method of operation thereof
US10055091B2 (en) 2013-02-01 2018-08-21 Microsoft Technology Licensing, Llc Autosave and manual save modes for software applications
US9292492B2 (en) 2013-02-04 2016-03-22 Microsoft Technology Licensing, Llc Scaling statistical language understanding systems across domains and intents
US8694315B1 (en) 2013-02-05 2014-04-08 Visa International Service Association System and method for authentication using speaker verification techniques and fraud model
US20140218372A1 (en) 2013-02-05 2014-08-07 Apple Inc. Intelligent digital assistant in a desktop environment
US20140223481A1 (en) 2013-02-07 2014-08-07 United Video Properties, Inc. Systems and methods for updating a search request
US20140222967A1 (en) 2013-02-07 2014-08-07 Opanga Networks, Inc. Transparent media delivery and proxy
KR20150104615A (ko) 2013-02-07 2015-09-15 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US9519858B2 (en) 2013-02-10 2016-12-13 Microsoft Technology Licensing, Llc Feature-augmented neural networks and applications of same
US9842489B2 (en) 2013-02-14 2017-12-12 Google Llc Waking other devices for additional data
US9408040B2 (en) 2013-02-14 2016-08-02 Fuji Xerox Co., Ltd. Systems and methods for room-level location using WiFi
US9791921B2 (en) 2013-02-19 2017-10-17 Microsoft Technology Licensing, Llc Context-aware augmented reality object commands
US10078437B2 (en) 2013-02-20 2018-09-18 Blackberry Limited Method and apparatus for responding to a notification via a capacitive physical keyboard
US9734819B2 (en) 2013-02-21 2017-08-15 Google Technology Holdings LLC Recognizing accented speech
US9019129B2 (en) 2013-02-21 2015-04-28 Apple Inc. Vehicle location in weak location signal scenarios
US20140236986A1 (en) 2013-02-21 2014-08-21 Apple Inc. Natural language document search
US9621619B2 (en) 2013-02-21 2017-04-11 International Business Machines Corporation Enhanced notification for relevant communications
US20140245140A1 (en) 2013-02-22 2014-08-28 Next It Corporation Virtual Assistant Transfer between Smart Devices
US9672822B2 (en) 2013-02-22 2017-06-06 Next It Corporation Interaction with a portion of a content item through a virtual assistant
US9484023B2 (en) 2013-02-22 2016-11-01 International Business Machines Corporation Conversion of non-back-off language models for efficient speech decoding
US9414004B2 (en) 2013-02-22 2016-08-09 The Directv Group, Inc. Method for combining voice signals to form a continuous conversation in performing a voice search
US9330659B2 (en) 2013-02-25 2016-05-03 Microsoft Technology Licensing, Llc Facilitating development of a spoken natural language interface
CN104007832B (zh) 2013-02-25 2017-09-01 上海触乐信息科技有限公司 连续滑行输入文本的方法、系统及设备
US20140304086A1 (en) 2013-02-25 2014-10-09 Turn Inc. Methods and systems for modeling campaign goal adjustment
US9865266B2 (en) 2013-02-25 2018-01-09 Nuance Communications, Inc. Method and apparatus for automated speaker parameters adaptation in a deployed speaker verification system
US9172747B2 (en) 2013-02-25 2015-10-27 Artificial Solutions Iberia SL System and methods for virtual assistant networks
KR101383552B1 (ko) 2013-02-25 2014-04-10 미디어젠(주) 다중 명령어가 포함된 단일 문장의 음성인식방법
US9280981B2 (en) 2013-02-27 2016-03-08 Blackberry Limited Method and apparatus for voice control of a mobile device
US10354677B2 (en) 2013-02-28 2019-07-16 Nuance Communications, Inc. System and method for identification of intent segment(s) in caller-agent conversations
US9218819B1 (en) 2013-03-01 2015-12-22 Google Inc. Customizing actions based on contextual data and voice-based inputs
US9691382B2 (en) 2013-03-01 2017-06-27 Mediatek Inc. Voice control device and method for deciding response of voice control according to recognized speech command and detection output derived from processing sensor data
US9251467B2 (en) 2013-03-03 2016-02-02 Microsoft Technology Licensing, Llc Probabilistic parsing
US9886968B2 (en) 2013-03-04 2018-02-06 Synaptics Incorporated Robust speech boundary detection system and method
US9554050B2 (en) 2013-03-04 2017-01-24 Apple Inc. Mobile device using images and location for reminders
US9460715B2 (en) 2013-03-04 2016-10-04 Amazon Technologies, Inc. Identification using audio signatures and additional characteristics
US9454957B1 (en) 2013-03-05 2016-09-27 Amazon Technologies, Inc. Named entity resolution in spoken language processing
US9293129B2 (en) 2013-03-05 2016-03-22 Microsoft Technology Licensing, Llc Speech recognition assisted evaluation on text-to-speech pronunciation issue detection
KR101952179B1 (ko) 2013-03-05 2019-05-22 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN104038621A (zh) 2013-03-06 2014-09-10 三星电子(中国)研发中心 在通信终端中管理事件信息的装置及方法
US10795528B2 (en) 2013-03-06 2020-10-06 Nuance Communications, Inc. Task assistant having multiple visual displays
US10223411B2 (en) 2013-03-06 2019-03-05 Nuance Communications, Inc. Task assistant utilizing context for improved interaction
US9313261B2 (en) 2013-03-07 2016-04-12 Qualcomm Incorporated System and methods of transferring tasks from a first mobile device to a second mobile device
US9496968B2 (en) 2013-03-08 2016-11-15 Google Inc. Proximity detection by mobile devices
US20140257902A1 (en) 2013-03-08 2014-09-11 Baydin, Inc. Systems and methods for incorporating calendar functionality into electronic messages
US9990611B2 (en) 2013-03-08 2018-06-05 Baydin, Inc. Systems and methods for incorporating calendar functionality into electronic messages
US20140279622A1 (en) 2013-03-08 2014-09-18 Sudhakar Bharadwaj System and method for semantic processing of personalized social data and generating probability models of personal context to generate recommendations in searching applications
US8964947B1 (en) 2013-03-11 2015-02-24 Amazon Technologies, Inc. Approaches for sharing data between electronic devices
KR102113272B1 (ko) 2013-03-11 2020-06-02 삼성전자주식회사 전자장치에서 복사/붙여넣기 방법 및 장치
US9761225B2 (en) 2013-03-11 2017-09-12 Nuance Communications, Inc. Semantic re-ranking of NLU results in conversational dialogue applications
US9477753B2 (en) 2013-03-12 2016-10-25 International Business Machines Corporation Classifier-based system combination for spoken term detection
EP2946383B1 (en) 2013-03-12 2020-02-26 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9112984B2 (en) 2013-03-12 2015-08-18 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US10229697B2 (en) 2013-03-12 2019-03-12 Google Technology Holdings LLC Apparatus and method for beamforming to obtain voice and noise signals
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9129013B2 (en) 2013-03-12 2015-09-08 Nuance Communications, Inc. Methods and apparatus for entity detection
US9076459B2 (en) 2013-03-12 2015-07-07 Intermec Ip, Corp. Apparatus and method to classify sound to detect speech
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
US9514741B2 (en) 2013-03-13 2016-12-06 Nuance Communications, Inc. Data shredding for speech recognition acoustic model training under data retention restrictions
US9378739B2 (en) 2013-03-13 2016-06-28 Nuance Communications, Inc. Identifying corresponding positions in different representations of a textual work
US20140274005A1 (en) 2013-03-13 2014-09-18 Aliphcom Intelligent connection management in wireless devices
US10219100B2 (en) 2013-03-13 2019-02-26 Aliphcom Determining proximity for devices interacting with media devices
US9282423B2 (en) 2013-03-13 2016-03-08 Aliphcom Proximity and interface controls of media devices for media presentations
US9135248B2 (en) 2013-03-13 2015-09-15 Arris Technology, Inc. Context demographic determination system
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
US9842584B1 (en) 2013-03-14 2017-12-12 Amazon Technologies, Inc. Providing content on multiple devices
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US20140280072A1 (en) 2013-03-14 2014-09-18 Advanced Search Laboratories, lnc. Method and Apparatus for Human-Machine Interaction
US9247309B2 (en) 2013-03-14 2016-01-26 Google Inc. Methods, systems, and media for presenting mobile content corresponding to media content
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
US10133546B2 (en) 2013-03-14 2018-11-20 Amazon Technologies, Inc. Providing content on multiple devices
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9524489B2 (en) 2013-03-14 2016-12-20 Samsung Electronics Co., Ltd. Computing system with task transfer mechanism and method of operation thereof
US9123345B2 (en) 2013-03-14 2015-09-01 Honda Motor Co., Ltd. Voice interface systems and methods
US20140278349A1 (en) 2013-03-14 2014-09-18 Microsoft Corporation Language Model Dictionaries for Text Predictions
KR20140112910A (ko) 2013-03-14 2014-09-24 삼성전자주식회사 입력 제어 방법 및 이를 지원하는 전자 장치
US20140267599A1 (en) 2013-03-14 2014-09-18 360Brandvision, Inc. User interaction with a holographic poster via a secondary mobile device
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US9189196B2 (en) 2013-03-14 2015-11-17 Google Inc. Compartmentalized self registration of external devices
EP3101392B1 (en) 2013-03-15 2021-12-15 Apple Inc. Mapping application with turn-by-turn navigation mode for output to vehicle display
US9886160B2 (en) 2013-03-15 2018-02-06 Google Llc Managing audio at the tab level for user notification and control
WO2014143959A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Volume control for mobile device using a wireless device
US20140279787A1 (en) 2013-03-15 2014-09-18 Ximplar Limited Systems And Methods for an Adaptive Application Recommender
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US20140282178A1 (en) 2013-03-15 2014-09-18 Microsoft Corporation Personalized community model for surfacing commands within productivity application user interfaces
US20140282203A1 (en) 2013-03-15 2014-09-18 Research In Motion Limited System and method for predictive text input
US9299041B2 (en) 2013-03-15 2016-03-29 Business Objects Software Ltd. Obtaining data from unstructured data for a structured data collection
US9303997B2 (en) 2013-03-15 2016-04-05 Apple Inc. Prediction engine
US10073536B2 (en) 2013-03-15 2018-09-11 Google Llc Virtual keyboard input for international languages
US9317585B2 (en) 2013-03-15 2016-04-19 Google Inc. Search query suggestions based on personal information
US9176649B2 (en) 2013-03-15 2015-11-03 American Megatrends, Inc. Method and apparatus of remote management of computer system using voice and gesture based input
US20140267933A1 (en) 2013-03-15 2014-09-18 Toshiba America Information Systems, Inc. Electronic Device with Embedded Macro-Command Functionality
KR102057795B1 (ko) 2013-03-15 2019-12-19 애플 인크. 콘텍스트-민감성 방해 처리
US9189157B2 (en) 2013-03-15 2015-11-17 Blackberry Limited Method and apparatus for word prediction selection
US9558743B2 (en) 2013-03-15 2017-01-31 Google Inc. Integration of semantic context information
US9355472B2 (en) 2013-03-15 2016-05-31 Apple Inc. Device, method, and graphical user interface for adjusting the appearance of a control
CN105027197B (zh) * 2013-03-15 2018-12-14 苹果公司 训练至少部分语音命令系统
US9201865B2 (en) 2013-03-15 2015-12-01 Bao Tran Automated assistance for user request that determines semantics by domain, task, and parameter
WO2014145956A1 (en) 2013-03-15 2014-09-18 Adityo Prakash Systems and methods for facilitating integrated behavioral support
US20160132046A1 (en) 2013-03-15 2016-05-12 Fisher-Rosemount Systems, Inc. Method and apparatus for controlling a process plant with wearable mobile control devices
CN105190607B (zh) 2013-03-15 2018-11-30 苹果公司 通过智能数字助理的用户培训
US10638198B2 (en) 2013-03-15 2020-04-28 Ebay Inc. Shoppable video
US9378065B2 (en) 2013-03-15 2016-06-28 Advanced Elemental Technologies, Inc. Purposeful computing
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US20150314454A1 (en) 2013-03-15 2015-11-05 JIBO, Inc. Apparatus and methods for providing a persistent companion device
US20140288939A1 (en) 2013-03-20 2014-09-25 Navteq B.V. Method and apparatus for optimizing timing of audio commands based on recognized audio patterns
US9479499B2 (en) 2013-03-21 2016-10-25 Tencent Technology (Shenzhen) Company Limited Method and apparatus for identity authentication via mobile capturing code
US20140298395A1 (en) 2013-03-27 2014-10-02 Tencent Technology (Shenzhen) Company Limited Methods and systems for playing video on multiple terminals
JP6115941B2 (ja) 2013-03-28 2017-04-19 Kddi株式会社 対話シナリオにユーザ操作を反映させる対話プログラム、サーバ及び方法
JP6221301B2 (ja) 2013-03-28 2017-11-01 富士通株式会社 音声処理装置、音声処理システムおよび音声処理方法
US20140297288A1 (en) 2013-03-29 2014-10-02 Orange Telephone voice personal assistant
CN103236260B (zh) 2013-03-29 2015-08-12 京东方科技集团股份有限公司 语音识别系统
KR102050814B1 (ko) 2013-04-02 2019-12-02 삼성전자주식회사 그룹 대화에서 사적 대화 제공 장치 및 방법
JP2014203207A (ja) 2013-04-03 2014-10-27 ソニー株式会社 情報処理装置、情報処理方法及びコンピュータプログラム
WO2014162570A1 (ja) 2013-04-04 2014-10-09 パイオニア株式会社 表示制御装置、表示制御方法、表示制御プログラムおよびコンピュータが読み取り可能な記録媒体
WO2014161091A1 (en) 2013-04-04 2014-10-09 Rand James S Unified communications system and method
US9300718B2 (en) 2013-04-09 2016-03-29 Avaya Inc. System and method for keyword-based notification and delivery of content
CN103198831A (zh) 2013-04-10 2013-07-10 威盛电子股份有限公司 语音操控方法与移动终端装置
US10564815B2 (en) 2013-04-12 2020-02-18 Nant Holdings Ip, Llc Virtual teller systems and methods
US10027723B2 (en) 2013-04-12 2018-07-17 Provenance Asset Group Llc Method and apparatus for initiating communication and sharing of content among a plurality of devices
US8825474B1 (en) 2013-04-16 2014-09-02 Google Inc. Text suggestion output using past interaction data
US10580243B2 (en) 2013-04-16 2020-03-03 Imageware Systems, Inc. Conditional and situational biometric authentication and enrollment
US9875494B2 (en) 2013-04-16 2018-01-23 Sri International Using intents to analyze and personalize a user's dialog experience with a virtual personal assistant
US9760644B2 (en) 2013-04-17 2017-09-12 Google Inc. Embedding event creation link in a document
US20150193392A1 (en) 2013-04-17 2015-07-09 Google Inc. User Interface for Quickly Checking Agenda and Creating New Events
US10445115B2 (en) 2013-04-18 2019-10-15 Verint Americas Inc. Virtual assistant focused user interfaces
NL2010662C2 (en) 2013-04-18 2014-10-21 Bosch Gmbh Robert Remote maintenance.
US9075435B1 (en) 2013-04-22 2015-07-07 Amazon Technologies, Inc. Context-aware notifications
US20140315492A1 (en) 2013-04-22 2014-10-23 Salesforce.Com, Inc. Content delivery to a secondary device via a primary device
US9177318B2 (en) 2013-04-22 2015-11-03 Palo Alto Research Center Incorporated Method and apparatus for customizing conversation agents based on user characteristics using a relevance score for automatic statements, and a response prediction function
US9110889B2 (en) 2013-04-23 2015-08-18 Facebook, Inc. Methods and systems for generation of flexible sentences in a social networking system
CN104125322A (zh) 2013-04-24 2014-10-29 腾讯科技(深圳)有限公司 来电和短信控制方法及移动终端
DE102013007502A1 (de) 2013-04-25 2014-10-30 Elektrobit Automotive Gmbh Computer-implementiertes Verfahren zum automatischen Trainieren eins Dialogsystems und Dialogsystem zur Erzeugung von semantischen Annotationen
CN103280217B (zh) 2013-05-02 2016-05-04 锤子科技(北京)有限公司 一种移动终端的语音识别方法及其装置
US9472205B2 (en) 2013-05-06 2016-10-18 Honeywell International Inc. Device voice recognition systems and methods
US9384751B2 (en) 2013-05-06 2016-07-05 Honeywell International Inc. User authentication of voice controlled devices
US9064495B1 (en) 2013-05-07 2015-06-23 Amazon Technologies, Inc. Measurement of user perceived latency in a cloud based speech application
ES2751484T3 (es) 2013-05-07 2020-03-31 Veveo Inc Interfaz de entrada de voz incremental con retroalimentación en tiempo real
US20140337621A1 (en) 2013-05-07 2014-11-13 Serguei Nakhimov Wearable communication device, security complex and user interface
KR20140132246A (ko) 2013-05-07 2014-11-17 삼성전자주식회사 오브젝트 선택 방법 및 오브젝트 선택 장치
US9223898B2 (en) 2013-05-08 2015-12-29 Facebook, Inc. Filtering suggested structured queries on online social networks
US9043211B2 (en) 2013-05-09 2015-05-26 Dsp Group Ltd. Low power activation of a voice activated device
US9923849B2 (en) 2013-05-09 2018-03-20 Ebay Inc. System and method for suggesting a phrase based on a context
US9081411B2 (en) 2013-05-10 2015-07-14 Sri International Rapid development of virtual personal assistant applications
JP2014219614A (ja) 2013-05-10 2014-11-20 アルパイン株式会社 オーディオ装置、ビデオ装置及びコンピュータプログラム
US9489625B2 (en) 2013-05-10 2016-11-08 Sri International Rapid development of virtual personal assistant applications
CN103246638B (zh) 2013-05-13 2017-09-01 小米科技有限责任公司 一种信息粘贴方法和装置
US20140337751A1 (en) 2013-05-13 2014-11-13 Microsoft Corporation Automatic creation of calendar items
US9293138B2 (en) 2013-05-14 2016-03-22 Amazon Technologies, Inc. Storing state information from network-based user devices
US8918272B2 (en) 2013-05-14 2014-12-23 Sony Corporation Method and apparatus for finding a lost vehicle
US20140343943A1 (en) 2013-05-14 2014-11-20 Saudi Arabian Oil Company Systems, Computer Medium and Computer-Implemented Methods for Authenticating Users Using Voice Streams
US20140347181A1 (en) 2013-05-21 2014-11-27 Michael Edward Smith Luna Sensor-enabled media device
US20140344205A1 (en) 2013-05-15 2014-11-20 Aliphcom Smart media device ecosystem using local and remote data sources
US9495266B2 (en) 2013-05-16 2016-11-15 Advantest Corporation Voice recognition virtual test engineering assistant
US9514470B2 (en) 2013-05-16 2016-12-06 Microsoft Technology Licensing, Llc Enhanced search suggestion for personal information services
US20140344687A1 (en) 2013-05-16 2014-11-20 Lenitra Durham Techniques for Natural User Interface Input based on Context
KR101334342B1 (ko) 2013-05-16 2013-11-29 주식회사 네오패드 문자 입력 장치 및 문자 입력 방법
US9432499B2 (en) 2013-05-18 2016-08-30 Loralee Hajdu Peripheral specific selection of automated response messages
WO2014189486A1 (en) 2013-05-20 2014-11-27 Intel Corporation Natural human-computer interaction for virtual personal assistant systems
US9466294B1 (en) 2013-05-21 2016-10-11 Amazon Technologies, Inc. Dialog management system
US9188445B2 (en) 2013-05-21 2015-11-17 Honda Motor Co., Ltd. System and method for storing and recalling location data
US20150199077A1 (en) 2013-05-23 2015-07-16 Google Inc. Scheduling and viewing a calender event using time zones based on a user's location at event time
US20140351760A1 (en) 2013-05-24 2014-11-27 Google Inc. Order-independent text input
US20140350933A1 (en) 2013-05-24 2014-11-27 Samsung Electronics Co., Ltd. Voice recognition apparatus and control method thereof
US9747900B2 (en) 2013-05-24 2017-08-29 Google Technology Holdings LLC Method and apparatus for using image data to aid voice recognition
US9710147B2 (en) 2013-05-29 2017-07-18 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20140358523A1 (en) 2013-05-30 2014-12-04 Wright State University Topic-specific sentiment extraction
US20140358519A1 (en) 2013-06-03 2014-12-04 Xerox Corporation Confidence-driven rewriting of source texts for improved translation
US20140359637A1 (en) 2013-06-03 2014-12-04 Microsoft Corporation Task continuance across devices
US10282213B2 (en) 2013-06-03 2019-05-07 Avaya Inc. System and method for conversational configuration of applications
US9294455B2 (en) 2013-06-04 2016-03-22 Google Inc. Maintaining video conference session continuity during transfer of session to alternative device
US9286029B2 (en) 2013-06-06 2016-03-15 Honda Motor Co., Ltd. System and method for multimodal human-vehicle interaction and belief tracking
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
EP3005150A4 (en) 2013-06-07 2016-06-15 Apple Inc INTELLIGENT AUTOMATIC ASSISTANT
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9267805B2 (en) 2013-06-07 2016-02-23 Apple Inc. Modeling significant locations
WO2014197730A1 (en) 2013-06-08 2014-12-11 Apple Inc. Application gateway for providing different user interfaces for limited distraction and non-limited distraction contexts
US20140365459A1 (en) 2013-06-08 2014-12-11 Apple Inc. Harvesting Addresses
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10481769B2 (en) 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US9495620B2 (en) 2013-06-09 2016-11-15 Apple Inc. Multi-script handwriting recognition using a universal recognizer
CN105264524B (zh) 2013-06-09 2019-08-02 苹果公司 用于实现跨数字助理的两个或更多个实例的会话持续性的设备、方法、和图形用户界面
US9477393B2 (en) 2013-06-09 2016-10-25 Apple Inc. Device, method, and graphical user interface for displaying application status information
US9710219B2 (en) 2013-06-10 2017-07-18 Panasonic Intellectual Property Corporation Of America Speaker identification method, speaker identification device, and speaker identification system
KR20140144104A (ko) 2013-06-10 2014-12-18 삼성전자주식회사 전자기기 및 이의 서비스 제공 방법
US9449600B2 (en) 2013-06-11 2016-09-20 Plantronics, Inc. Character data entry
US9892115B2 (en) 2013-06-11 2018-02-13 Facebook, Inc. Translation training with cross-lingual multi-media support
US9508040B2 (en) 2013-06-12 2016-11-29 Microsoft Technology Licensing, Llc Predictive pre-launch for applications
US9665662B1 (en) 2013-06-13 2017-05-30 DataRPM Corporation Methods and system for providing real-time business intelligence using natural language queries
KR101809808B1 (ko) 2013-06-13 2017-12-15 애플 인크. 음성 명령에 의해 개시되는 긴급 전화를 걸기 위한 시스템 및 방법
US9311414B2 (en) 2013-06-14 2016-04-12 Google Inc. Systems and methods of selecting content based on aggregate entity co-occurrence
CN103292437B (zh) 2013-06-17 2016-01-20 广东美的制冷设备有限公司 语音交互式空调器及其控制方法
US9728184B2 (en) 2013-06-18 2017-08-08 Microsoft Technology Licensing, Llc Restructuring deep neural network acoustic models
USRE49014E1 (en) 2013-06-19 2022-04-05 Panasonic Intellectual Property Corporation Of America Voice interaction method, and device
US9437186B1 (en) 2013-06-19 2016-09-06 Amazon Technologies, Inc. Enhanced endpoint detection for speech recognition
US9633317B2 (en) 2013-06-20 2017-04-25 Viv Labs, Inc. Dynamically evolving cognitive architecture system based on a natural language intent interpreter
KR20140147587A (ko) 2013-06-20 2014-12-30 한국전자통신연구원 Wfst를 이용한 음성 끝점 검출 장치 및 방법
US20140379334A1 (en) 2013-06-20 2014-12-25 Qnx Software Systems Limited Natural language understanding automatic speech recognition post processing
US10474961B2 (en) 2013-06-20 2019-11-12 Viv Labs, Inc. Dynamically evolving cognitive architecture system based on prompting for additional user input
KR102160767B1 (ko) 2013-06-20 2020-09-29 삼성전자주식회사 제스처를 감지하여 기능을 제어하는 휴대 단말 및 방법
US10051072B2 (en) 2013-06-21 2018-08-14 Google Llc Detecting co-presence in the physical world
US9311298B2 (en) 2013-06-21 2016-04-12 Microsoft Technology Licensing, Llc Building conversational understanding systems using a toolset
JP6171617B2 (ja) 2013-06-24 2017-08-02 日本電気株式会社 応答対象音声判定装置、応答対象音声判定方法および応答対象音声判定プログラム
US10496743B2 (en) 2013-06-26 2019-12-03 Nuance Communications, Inc. Methods and apparatus for extracting facts from a medical text
JP2015012301A (ja) 2013-06-26 2015-01-19 京セラ株式会社 携帯電話機、携帯端末、音声操作プログラムおよび音声操作方法
US8947596B2 (en) 2013-06-27 2015-02-03 Intel Corporation Alignment of closed captions
US9747899B2 (en) 2013-06-27 2017-08-29 Amazon Technologies, Inc. Detecting self-generated wake expressions
US20150006148A1 (en) 2013-06-27 2015-01-01 Microsoft Corporation Automatically Creating Training Data For Language Identifiers
EP3014610B1 (en) 2013-06-28 2023-10-04 Harman International Industries, Incorporated Wireless control of linked devices
US9741339B2 (en) 2013-06-28 2017-08-22 Google Inc. Data driven word pronunciation learning and scoring with crowd sourcing based on the word's phonemes pronunciation scores
US9646606B2 (en) 2013-07-03 2017-05-09 Google Inc. Speech recognition using domain knowledge
CN103365279A (zh) 2013-07-10 2013-10-23 崔海伟 智能家居系统的状态反馈系统、方法及状态检测装置
US9396727B2 (en) 2013-07-10 2016-07-19 GM Global Technology Operations LLC Systems and methods for spoken dialog service arbitration
JP6102588B2 (ja) 2013-07-10 2017-03-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
DE102014109121B4 (de) 2013-07-10 2023-05-04 Gm Global Technology Operations, Llc Systeme und Verfahren zur Arbitrierung eines Sprachdialogdienstes
CN110096253B (zh) 2013-07-11 2022-08-30 英特尔公司 利用相同的音频输入的设备唤醒和说话者验证
WO2015006196A1 (en) 2013-07-11 2015-01-15 Mophie, Inc. Method and system for communicatively coupling a wearable computer with one or more non-wearable computers
TWI508057B (zh) 2013-07-15 2015-11-11 Chunghwa Picture Tubes Ltd 語音辨識系統以及方法
US9305554B2 (en) 2013-07-17 2016-04-05 Samsung Electronics Co., Ltd. Multi-level speech recognition
US9711148B1 (en) 2013-07-18 2017-07-18 Google Inc. Dual model speaker identification
US9311912B1 (en) 2013-07-22 2016-04-12 Amazon Technologies, Inc. Cost efficient distributed text-to-speech processing
US20150032238A1 (en) 2013-07-23 2015-01-29 Motorola Mobility Llc Method and Device for Audio Input Routing
US9407950B2 (en) 2013-07-23 2016-08-02 Microsoft Technology Licensing, Llc Controlling devices in entertainment environment
US9772994B2 (en) 2013-07-25 2017-09-26 Intel Corporation Self-learning statistical natural language processing for automatic production of virtual personal assistants
US9247219B2 (en) 2013-07-26 2016-01-26 SkyBell Technologies, Inc. Doorbell communication systems and methods
CN103412789B (zh) 2013-07-26 2016-09-21 宇龙计算机通信科技(深圳)有限公司 一种启动应用程序的方法、系统及移动终端
US8947530B1 (en) 2013-07-26 2015-02-03 Joseph Frank Scalisi Smart lock systems and methods
US9335983B2 (en) 2013-07-28 2016-05-10 Oded Haim Breiner Method and system for displaying a non-installed android application and for requesting an action from a non-installed android application
JP6370033B2 (ja) 2013-07-29 2018-08-08 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
TWI516698B (zh) 2013-07-31 2016-01-11 Apex Medical Corp Air cushion device and its vent valve
US9575720B2 (en) 2013-07-31 2017-02-21 Google Inc. Visual confirmation for a recognized voice-initiated action
US9311915B2 (en) 2013-07-31 2016-04-12 Google Inc. Context-based speech recognition
US20150039606A1 (en) 2013-08-01 2015-02-05 Vamsi Krishna Salaka Search phrase modification
TWI601032B (zh) 2013-08-02 2017-10-01 晨星半導體股份有限公司 應用於聲控裝置的控制器與相關方法
US10674198B2 (en) 2013-08-06 2020-06-02 Saronikos Trading And Services, Unipessoal Lda System for controlling electronic devices by means of voice commands, more specifically a remote control to control a plurality of electronic devices by means of voice commands
KR20150017156A (ko) 2013-08-06 2015-02-16 삼성전자주식회사 휴대단말기에서 추천어를 제공하는 방법 및 장치
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
US20150046828A1 (en) 2013-08-08 2015-02-12 Samsung Electronics Co., Ltd. Contextualizing sensor, service and device data with mobile devices
US9264862B2 (en) 2013-08-15 2016-02-16 Apple Inc. Determining exit from a vehicle
KR20150020872A (ko) 2013-08-19 2015-02-27 현대자동차주식회사 차량 기능 제어를 위한 제어 장치 및 제어 방법
CN103780970B (zh) 2013-08-20 2018-03-16 华为终端(东莞)有限公司 一种媒体播放的方法、装置和系统
JP2015041845A (ja) 2013-08-21 2015-03-02 カシオ計算機株式会社 文字入力装置及びプログラム
CN104426841A (zh) 2013-08-21 2015-03-18 阿里巴巴集团控股有限公司 设置背景图像的方法及相关的服务器和系统
US10047970B2 (en) 2013-08-21 2018-08-14 Honeywell International Inc. Devices and methods for interacting with an HVAC controller
US9161188B2 (en) 2013-08-22 2015-10-13 Yahoo! Inc. System and method for automatically suggesting diverse and personalized message completions
EP2862164B1 (en) 2013-08-23 2017-05-31 Nuance Communications, Inc. Multiple pass automatic speech recognition
US10192557B2 (en) 2013-08-26 2019-01-29 Samsung Electronics Co., Ltd Electronic device and method for voice recognition using a plurality of voice recognition engines
US20150066817A1 (en) 2013-08-27 2015-03-05 Persais, Llc System and method for virtual assistants with shared capabilities
US9729592B2 (en) 2013-08-27 2017-08-08 Persais, Llc System and method for distributed virtual assistant platforms
CN104427104B (zh) 2013-08-28 2018-02-27 联想(北京)有限公司 一种信息处理方法及电子设备
KR102147935B1 (ko) 2013-08-29 2020-08-25 삼성전자주식회사 데이터 처리 방법 및 그 전자 장치
MY175230A (en) 2013-08-29 2020-06-16 Panasonic Ip Corp America Device control method, display control method, and purchase payment method
US20150066506A1 (en) 2013-08-30 2015-03-05 Verint Systems Ltd. System and Method of Text Zoning
WO2015030796A1 (en) 2013-08-30 2015-03-05 Intel Corporation Extensible context-aware natural language interactions for virtual personal assistants
US10867597B2 (en) 2013-09-02 2020-12-15 Microsoft Technology Licensing, Llc Assignment of semantic labels to a sequence of words using neural network architectures
US9633669B2 (en) 2013-09-03 2017-04-25 Amazon Technologies, Inc. Smart circular audio buffer
CN110795005A (zh) 2013-09-03 2020-02-14 苹果公司 利用磁属性来操控用户界面对象的用户界面
US10001817B2 (en) 2013-09-03 2018-06-19 Apple Inc. User interface for manipulating user interface objects with magnetic properties
US9316400B2 (en) 2013-09-03 2016-04-19 Panasonic Intellctual Property Corporation of America Appliance control method, speech-based appliance control system, and cooking appliance
KR102065409B1 (ko) 2013-09-04 2020-01-13 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2015033151A2 (en) 2013-09-04 2015-03-12 Zero360, Inc. Processing system and method
GB2517952B (en) 2013-09-05 2017-05-31 Barclays Bank Plc Biometric verification using predicted signatures
JP6295554B2 (ja) 2013-09-06 2018-03-20 株式会社リコー プログラム、情報処理装置
US9460704B2 (en) 2013-09-06 2016-10-04 Google Inc. Deep networks for unit selection speech synthesis
US9208779B2 (en) 2013-09-06 2015-12-08 Google Inc. Mixture of n-gram language models
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US9485708B2 (en) 2013-09-10 2016-11-01 Qualcomm Incorporated Systems and methods for concurrent service discovery and minimum spanning tree formation for service delivery
US20150140934A1 (en) 2013-09-10 2015-05-21 Playtabase, LLC Wireless motion activated user device with bi-modality communication
US20150074524A1 (en) 2013-09-10 2015-03-12 Lenovo (Singapore) Pte. Ltd. Management of virtual assistant action items
CN104700832B (zh) 2013-12-09 2018-05-25 联发科技股份有限公司 语音关键字检测系统及方法
US9343068B2 (en) 2013-09-16 2016-05-17 Qualcomm Incorporated Method and apparatus for controlling access to applications having different security levels
US9600228B2 (en) 2013-09-16 2017-03-21 Here Global B.V. Enhanced system and method for static query generation and entry
US9240182B2 (en) 2013-09-17 2016-01-19 Qualcomm Incorporated Method and apparatus for adjusting detection threshold for activating voice assistant function
JP2015060423A (ja) 2013-09-19 2015-03-30 株式会社東芝 音声翻訳装置、音声翻訳方法およびプログラム
US9755605B1 (en) 2013-09-19 2017-09-05 Amazon Technologies, Inc. Volume control
JP2016531375A (ja) 2013-09-20 2016-10-06 アマゾン テクノロジーズ インコーポレイテッド ローカルとリモートのスピーチ処理
CN104463552B (zh) 2013-09-22 2018-10-02 中国电信股份有限公司 日历提醒生成方法和装置
US20150088511A1 (en) 2013-09-24 2015-03-26 Verizon Patent And Licensing Inc. Named-entity based speech recognition
US9418650B2 (en) 2013-09-25 2016-08-16 Verizon Patent And Licensing Inc. Training speech recognition using captions
US10134395B2 (en) 2013-09-25 2018-11-20 Amazon Technologies, Inc. In-call virtual assistants
US9401881B2 (en) 2013-09-26 2016-07-26 International Business Machines Corporation Automatic question generation and answering based on monitored messaging sessions
US9443527B1 (en) 2013-09-27 2016-09-13 Amazon Technologies, Inc. Speech recognition capability generation and control
US20150092520A1 (en) 2013-09-27 2015-04-02 Google Inc. Adaptive Trigger Point For Smartwatch Gesture-to-Wake
CN104516522B (zh) 2013-09-29 2018-05-01 北京三星通信技术研究有限公司 九宫格键盘输入的方法和装置
US20150095031A1 (en) 2013-09-30 2015-04-02 At&T Intellectual Property I, L.P. System and method for crowdsourcing of word pronunciation verification
US20150095278A1 (en) 2013-09-30 2015-04-02 Manyworlds, Inc. Adaptive Probabilistic Semantic System and Method
US9344755B2 (en) 2013-09-30 2016-05-17 Sonos, Inc. Fast-resume audio playback
KR101772044B1 (ko) 2013-10-02 2017-08-28 에스케이테크엑스 주식회사 거절메시지 전송 시스템 및 방법, 그리고 이를 위한 장치 및 컴퓨터 프로그램이 기록된 기록매체
US20150095268A1 (en) 2013-10-02 2015-04-02 Apple Inc. Intelligent multi-user task planning
US20150100537A1 (en) 2013-10-03 2015-04-09 Microsoft Corporation Emoji for Text Predictions
US20150100983A1 (en) 2013-10-06 2015-04-09 Yang Pan Personal Mobile Device as Ad hoc Set-Top Box for Television
US9436918B2 (en) 2013-10-07 2016-09-06 Microsoft Technology Licensing, Llc Smart selection of text spans
KR101480474B1 (ko) 2013-10-08 2015-01-09 엘지전자 주식회사 오디오 재생장치와 이를 포함하는 시스템
CN105706078B (zh) 2013-10-09 2021-08-03 谷歌有限责任公司 实体集合的自动定义
US20150100313A1 (en) 2013-10-09 2015-04-09 Verizon Patent And Licensing, Inc. Personification of computing devices for remote access
KR101506510B1 (ko) 2013-10-10 2015-03-30 송철호 음성인식 홈 네트워크 시스템
KR102114219B1 (ko) 2013-10-10 2020-05-25 삼성전자주식회사 오디오 시스템 및 오디오 출력 방법, 그리고 스피커 장치
EP3058446B1 (en) 2013-10-14 2024-06-05 Verizon Patent and Licensing Inc. Systems and methods for providing context-based user interface
US8996639B1 (en) 2013-10-15 2015-03-31 Google Inc. Predictive responses to incoming communications
US9063640B2 (en) 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
US9461945B2 (en) 2013-10-18 2016-10-04 Jeffrey P. Phillips Automated messaging response
US9143907B1 (en) 2013-10-21 2015-09-22 West Corporation Providing data messaging support by intercepting and redirecting received short message service (SMS) messages
JP6280342B2 (ja) 2013-10-22 2018-02-14 株式会社Nttドコモ 機能実行指示システム及び機能実行指示方法
US20150120723A1 (en) 2013-10-24 2015-04-30 Xerox Corporation Methods and systems for processing speech queries
JP2015083938A (ja) 2013-10-25 2015-04-30 三菱電機株式会社 ナビゲーションシステム
AU2014342551B2 (en) 2013-10-28 2017-08-03 Nant Holdings Ip, Llc Intent engines systems and method
US20150120296A1 (en) 2013-10-29 2015-04-30 At&T Intellectual Property I, L.P. System and method for selecting network-based versus embedded speech processing
US20150123898A1 (en) 2013-10-31 2015-05-07 Lg Electronics Inc. Digital device and control method thereof
US10055681B2 (en) 2013-10-31 2018-08-21 Verint Americas Inc. Mapping actions and objects to tasks
US9183830B2 (en) 2013-11-01 2015-11-10 Google Inc. Method and system for non-parametric voice conversion
US9942396B2 (en) 2013-11-01 2018-04-10 Adobe Systems Incorporated Document distribution and interaction
US10019985B2 (en) 2013-11-04 2018-07-10 Google Llc Asynchronous optimization for sequence training of neural networks
FR3012895B1 (fr) 2013-11-05 2015-12-25 Commissariat Energie Atomique Procede et programme d'ordinateur pour l'execution deportee de taches informatiques d'un equipement sans fil
US9547644B2 (en) 2013-11-08 2017-01-17 Google Inc. Presenting translations of text depicted in images
US9600474B2 (en) 2013-11-08 2017-03-21 Google Inc. User interface for realtime language translation
US10088973B2 (en) 2013-11-08 2018-10-02 Google Llc Event scheduling presentation in a graphical user interface environment
US10311482B2 (en) 2013-11-11 2019-06-04 At&T Intellectual Property I, Lp Method and apparatus for adjusting a digital assistant persona
JP6493866B2 (ja) 2013-11-12 2019-04-03 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 情報処理装置、情報処理方法、およびプログラム
US10430024B2 (en) 2013-11-13 2019-10-01 Microsoft Technology Licensing, Llc Media item selection using user-specific grammar
GB2520266A (en) 2013-11-13 2015-05-20 Ibm Cursor-Based Character input interface
US9361084B1 (en) 2013-11-14 2016-06-07 Google Inc. Methods and systems for installing and executing applications
US10110932B2 (en) 2013-11-18 2018-10-23 Cable Television Laboratories, Inc. Session administration
US9443522B2 (en) 2013-11-18 2016-09-13 Beijing Lenovo Software Ltd. Voice recognition method, voice controlling method, information processing method, and electronic apparatus
US9898554B2 (en) 2013-11-18 2018-02-20 Google Inc. Implicit question query identification
US10058777B2 (en) 2013-11-21 2018-08-28 Tencent Technology (Shenzhen) Company Limited Task execution method, apparatus and system
US10162813B2 (en) 2013-11-21 2018-12-25 Microsoft Technology Licensing, Llc Dialogue evaluation via multiple hypothesis ranking
US9451434B2 (en) 2013-11-27 2016-09-20 At&T Intellectual Property I, L.P. Direct interaction between a user and a communication network
US20150149354A1 (en) 2013-11-27 2015-05-28 Bank Of America Corporation Real-Time Data Recognition and User Interface Field Updating During Voice Entry
US10079013B2 (en) 2013-11-27 2018-09-18 Sri International Sharing intents to provide virtual assistance in a multi-person dialog
US9698999B2 (en) 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device
US9110635B2 (en) 2013-12-03 2015-08-18 Lenova (Singapore) Pte. Ltd. Initiating personal assistant application based on eye tracking and gestures
US8719039B1 (en) 2013-12-05 2014-05-06 Google Inc. Promoting voice actions to hotwords
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9215510B2 (en) 2013-12-06 2015-12-15 Rovi Guides, Inc. Systems and methods for automatically tagging a media asset based on verbal input and playback adjustments
CN103645876B (zh) 2013-12-06 2017-01-18 百度在线网络技术(北京)有限公司 语音输入方法和装置
EP3077999B1 (en) 2013-12-06 2022-02-02 The ADT Security Corporation Voice activated application for mobile devices
US20150162001A1 (en) 2013-12-10 2015-06-11 Honeywell International Inc. System and method for textually and graphically presenting air traffic control voice information
US20150160855A1 (en) 2013-12-10 2015-06-11 Google Inc. Multiple character input with a single selection
GB201321927D0 (en) 2013-12-11 2014-01-22 Touchtype Ltd System and method for inputting text into electronic devices
US9900177B2 (en) 2013-12-11 2018-02-20 Echostar Technologies International Corporation Maintaining up-to-date home automation models
US9696886B2 (en) 2013-12-12 2017-07-04 Google Technology Holdings LLC Systems and methods for communicating task reminders on portable electronic devices
US9208153B1 (en) 2013-12-13 2015-12-08 Symantec Corporation Filtering relevant event notifications in a file sharing and collaboration environment
KR20160101079A (ko) 2013-12-16 2016-08-24 뉘앙스 커뮤니케이션즈, 인코포레이티드 가상 어시스턴트를 제공하기 위한 시스템 및 방법
US9571645B2 (en) 2013-12-16 2017-02-14 Nuance Communications, Inc. Systems and methods for providing a virtual assistant
US9804820B2 (en) 2013-12-16 2017-10-31 Nuance Communications, Inc. Systems and methods for providing a virtual assistant
US9251492B2 (en) 2013-12-16 2016-02-02 Nuiku, Inc. Customized-enterprise-software integration systems and methods
US20170017501A1 (en) 2013-12-16 2017-01-19 Nuance Communications, Inc. Systems and methods for providing a virtual assistant
US9479931B2 (en) 2013-12-16 2016-10-25 Nuance Communications, Inc. Systems and methods for providing a virtual assistant
WO2015092943A1 (en) 2013-12-17 2015-06-25 Sony Corporation Electronic devices and methods for compensating for environmental noise in text-to-speech applications
US9721570B1 (en) 2013-12-17 2017-08-01 Amazon Technologies, Inc. Outcome-oriented dialogs on a speech recognition platform
GB2523984B (en) 2013-12-18 2017-07-26 Cirrus Logic Int Semiconductor Ltd Processing received speech data
US10565268B2 (en) 2013-12-19 2020-02-18 Adobe Inc. Interactive communication augmented with contextual information
US9741343B1 (en) 2013-12-19 2017-08-22 Amazon Technologies, Inc. Voice interaction application selection
EP3084760A4 (en) 2013-12-20 2017-08-16 Intel Corporation Transition from low power always listening mode to high power speech recognition mode
US10811013B1 (en) 2013-12-20 2020-10-20 Amazon Technologies, Inc. Intent-specific automatic speech recognition result generation
KR102179506B1 (ko) 2013-12-23 2020-11-17 삼성전자 주식회사 전자장치 및 그 제어방법
CN203721183U (zh) 2013-12-25 2014-07-16 安徽科大讯飞信息科技股份有限公司 一种语音唤醒装置
KR102092164B1 (ko) 2013-12-27 2020-03-23 삼성전자주식회사 디스플레이 장치, 서버 장치 및 이들을 포함하는 디스플레이 시스템과 그 컨텐츠 제공 방법들
WO2015100172A1 (en) 2013-12-27 2015-07-02 Kopin Corporation Text editing with gesture control and natural speech
JP2015127758A (ja) 2013-12-27 2015-07-09 シャープ株式会社 応答制御装置、制御プログラム
JP6121896B2 (ja) 2013-12-27 2017-04-26 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および情報処理システム
US9460735B2 (en) 2013-12-28 2016-10-04 Intel Corporation Intelligent ancillary electronic device
US10078489B2 (en) 2013-12-30 2018-09-18 Microsoft Technology Licensing, Llc Voice interface to a social networking service
US9390726B1 (en) 2013-12-30 2016-07-12 Google Inc. Supplementing speech commands with gestures
US20150278737A1 (en) 2013-12-30 2015-10-01 Google Inc. Automatic Calendar Event Generation with Structured Data from Free-Form Speech
US9471875B2 (en) 2013-12-31 2016-10-18 International Business Machines Corporation Using ontologies to comprehend regular expressions
US9274673B2 (en) 2013-12-31 2016-03-01 Google Inc. Methods, systems, and media for rewinding media content based on detected audio events
US9424241B2 (en) 2013-12-31 2016-08-23 Barnes & Noble College Booksellers, Llc Annotation mode including multiple note types for paginated digital content
US9152307B2 (en) 2013-12-31 2015-10-06 Google Inc. Systems and methods for simultaneously displaying clustered, in-line electronic messages in one display
US9304657B2 (en) 2013-12-31 2016-04-05 Abbyy Development Llc Audio tagging
US9830044B2 (en) 2013-12-31 2017-11-28 Next It Corporation Virtual assistant team customization
US9742836B2 (en) 2014-01-03 2017-08-22 Yahoo Holdings, Inc. Systems and methods for content delivery
US20150193379A1 (en) 2014-01-06 2015-07-09 Apple Inc. System and method for cognizant time-based reminders
JP6318621B2 (ja) 2014-01-06 2018-05-09 株式会社デンソー 音声処理装置、音声処理システム、音声処理方法、音声処理プログラム
US9037455B1 (en) 2014-01-08 2015-05-19 Google Inc. Limiting notification interruptions
US9443516B2 (en) 2014-01-09 2016-09-13 Honeywell International Inc. Far-field speech recognition systems and methods
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
US9924215B2 (en) 2014-01-09 2018-03-20 Hsni, Llc Digital media content management system and method
US20150201077A1 (en) 2014-01-12 2015-07-16 Genesys Telecommunications Laboratories, Inc. Computing suggested actions in caller agent phone calls by using real-time speech analytics and real-time desktop analytics
US10360907B2 (en) 2014-01-14 2019-07-23 Toyota Motor Engineering & Manufacturing North America, Inc. Smart necklace with stereo vision and onboard processing
US9514748B2 (en) 2014-01-15 2016-12-06 Microsoft Technology Licensing, Llc Digital personal assistant interaction with impersonations and rich multimedia in responses
US20150199965A1 (en) 2014-01-16 2015-07-16 CloudCar Inc. System and method for recognition and automatic correction of voice commands
US8868409B1 (en) 2014-01-16 2014-10-21 Google Inc. Evaluating transcriptions with a semantic parser
US9336300B2 (en) 2014-01-17 2016-05-10 Facebook, Inc. Client-side search templates for online social networks
CN104794122B (zh) 2014-01-20 2020-04-17 腾讯科技(北京)有限公司 一种位置信息推荐方法、装置和系统
KR102210433B1 (ko) 2014-01-21 2021-02-01 삼성전자주식회사 전자 장치 및 이의 음성 인식 방법
US10171643B2 (en) 2014-01-22 2019-01-01 Sony Corporation Directing audio output based on gestures
CN103744761B (zh) 2014-01-22 2017-02-08 广东欧珀移动通信有限公司 一种控制多台移动终端自动执行任务的方法及系统
CN106415721B (zh) 2014-01-22 2019-08-16 苹果公司 音频数据传输的协调切换
CN103760984A (zh) 2014-01-24 2014-04-30 成都万先自动化科技有限责任公司 人机对话系统
US9858039B2 (en) 2014-01-28 2018-01-02 Oracle International Corporation Voice recognition of commands extracted from user interface screen devices
US11386886B2 (en) 2014-01-28 2022-07-12 Lenovo (Singapore) Pte. Ltd. Adjusting speech recognition using contextual information
US10019060B2 (en) 2014-01-30 2018-07-10 Duane Matthew Cash Mind-controlled virtual assistant on a smartphone device
JP6296813B2 (ja) 2014-01-30 2018-03-20 キヤノン株式会社 情報処理端末、情報処理端末の制御方法およびプログラム
US20160173960A1 (en) 2014-01-31 2016-06-16 EyeGroove, Inc. Methods and systems for generating audiovisual media items
US10096040B2 (en) 2014-01-31 2018-10-09 Walmart Apollo, Llc Management of the display of online ad content consistent with one or more performance objectives for a webpage and/or website
WO2015116151A1 (en) 2014-01-31 2015-08-06 Hewlett-Packard Development Company, L.P. Voice input command
US9292488B2 (en) 2014-02-01 2016-03-22 Soundhound, Inc. Method for embedding voice mail in a spoken utterance using a natural language processing computer system
US10157272B2 (en) 2014-02-04 2018-12-18 Qualcomm Incorporated Systems and methods for evaluating strength of an audio password
US10028008B2 (en) 2014-02-04 2018-07-17 Google Llc Persistent media player
JP2015149568A (ja) 2014-02-05 2015-08-20 キヤノン株式会社 画像形成装置、その制御方法およびプログラム
US10050926B2 (en) 2014-02-05 2018-08-14 Facebook, Inc. Ideograms based on sentiment analysis
WO2015118645A1 (ja) 2014-02-06 2015-08-13 三菱電機株式会社 音声検索装置および音声検索方法
US20150334346A1 (en) 2014-05-16 2015-11-19 Elwha Llc Systems and methods for automatically connecting a user of a hands-free intercommunication system
US20150228281A1 (en) 2014-02-07 2015-08-13 First Principles,Inc. Device, system, and method for active listening
US9576588B2 (en) 2014-02-10 2017-02-21 Apple Inc. Close-talk detector for personal listening device with adaptive active noise control
US9837075B2 (en) 2014-02-10 2017-12-05 Mitsubishi Electric Research Laboratories, Inc. Statistical voice dialog system and method
US10083205B2 (en) 2014-02-12 2018-09-25 Samsung Electronics Co., Ltd. Query cards
GB201402534D0 (en) * 2014-02-13 2014-04-02 Piksel Inc Crowd based content delivery
US9037967B1 (en) 2014-02-18 2015-05-19 King Fahd University Of Petroleum And Minerals Arabic spell checking technique
US9589562B2 (en) 2014-02-21 2017-03-07 Microsoft Technology Licensing, Llc Pronunciation learning through correction logs
US10469428B2 (en) 2014-02-21 2019-11-05 Samsung Electronics Co., Ltd. Apparatus and method for transmitting message
US10691292B2 (en) 2014-02-24 2020-06-23 Microsoft Technology Licensing, Llc Unified presentation of contextually connected information to improve user efficiency and interaction performance
US20150243279A1 (en) 2014-02-26 2015-08-27 Toytalk, Inc. Systems and methods for recommending responses
US9495959B2 (en) 2014-02-27 2016-11-15 Ford Global Technologies, Llc Disambiguation of dynamic commands
US20150248651A1 (en) 2014-02-28 2015-09-03 Christine E. Akutagawa Social networking event planning
US10389876B2 (en) 2014-02-28 2019-08-20 Ultratec, Inc. Semiautomated relay method and apparatus
US10757201B2 (en) 2014-03-01 2020-08-25 Microsoft Technology Licensing, Llc Document and content feed
EP3739460A1 (en) 2014-03-03 2020-11-18 Sony Corporation Information processing apparatus, information processing method, and program
US9412363B2 (en) 2014-03-03 2016-08-09 Microsoft Technology Licensing, Llc Model based approach for on-screen item selection and disambiguation
US9489171B2 (en) 2014-03-04 2016-11-08 Microsoft Technology Licensing, Llc Voice-command suggestions based on user identity
US9582246B2 (en) 2014-03-04 2017-02-28 Microsoft Technology Licensing, Llc Voice-command suggestions based on computer context
US9574890B2 (en) 2014-03-04 2017-02-21 Qualcomm Incorporated Reduced power consumption and improved user experience when navigating along familiar routes
US20150256873A1 (en) 2014-03-04 2015-09-10 Microsoft Technology Licensing, Llc Relayed voice control of devices
US10409454B2 (en) 2014-03-05 2019-09-10 Samsung Electronics Co., Ltd. Smart watch device and user interface thereof
US9286910B1 (en) 2014-03-13 2016-03-15 Amazon Technologies, Inc. System for resolving ambiguous queries based on user context
CN103885663A (zh) 2014-03-14 2014-06-25 深圳市东方拓宇科技有限公司 一种生成和播放音乐的方法及其对应终端
US9405377B2 (en) 2014-03-15 2016-08-02 Microsoft Technology Licensing, Llc Trainable sensor-based gesture recognition
US10102274B2 (en) 2014-03-17 2018-10-16 NLPCore LLC Corpus search systems and methods
CN103841268A (zh) 2014-03-17 2014-06-04 联想(北京)有限公司 信息处理方法和信息处理装置
US9430186B2 (en) 2014-03-17 2016-08-30 Google Inc Visual indication of a recognized voice-initiated action
CN103885608A (zh) 2014-03-19 2014-06-25 百度在线网络技术(北京)有限公司 一种输入方法及系统
US9734817B1 (en) 2014-03-21 2017-08-15 Amazon Technologies, Inc. Text-to-speech task scheduling
US9336306B2 (en) 2014-03-21 2016-05-10 International Business Machines Corporation Automatic evaluation and improvement of ontologies for natural language processing tasks
US9966079B2 (en) 2014-03-24 2018-05-08 Lenovo (Singapore) Pte. Ltd. Directing voice input based on eye tracking
WO2015144621A1 (en) 2014-03-26 2015-10-01 Sony Corporation Electronic device and method for controlling the electronic device
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
US9916839B1 (en) 2014-03-27 2018-03-13 Amazon Technologies, Inc. Shared audio functionality based on device grouping
RU2014111971A (ru) 2014-03-28 2015-10-10 Юрий Михайлович Буров Способ и система голосового интерфейса
US9710546B2 (en) 2014-03-28 2017-07-18 Microsoft Technology Licensing, Llc Explicit signals personalized search
IN2014DE00899A (ja) 2014-03-28 2015-10-02 Samsung Electronics Co Ltd
GB2542279A (en) 2014-03-29 2017-03-15 Thomson Reuters Global Resources Improved method, system and software for searching, identifying, retrieving and presenting electronic documents
US9196243B2 (en) 2014-03-31 2015-11-24 International Business Machines Corporation Method and system for efficient spoken term detection using confusion networks
JPWO2015151157A1 (ja) 2014-03-31 2017-04-13 三菱電機株式会社 意図理解装置および方法
US20150278370A1 (en) 2014-04-01 2015-10-01 Microsoft Corporation Task completion for natural language input
US9286892B2 (en) 2014-04-01 2016-03-15 Google Inc. Language modeling in speech recognition
US10749989B2 (en) 2014-04-01 2020-08-18 Microsoft Technology Licensing Llc Hybrid client/server architecture for parallel processing
US10992609B2 (en) 2014-04-02 2021-04-27 CloLa, Inc. Text-messaging based concierge services
CN103902373B (zh) 2014-04-02 2017-09-29 百度在线网络技术(北京)有限公司 智能终端控制方法、服务器和智能终端
US9820095B2 (en) 2014-04-02 2017-11-14 Sony Corporation Power efficient proximity detection
US20150286627A1 (en) 2014-04-03 2015-10-08 Adobe Systems Incorporated Contextual sentiment text analysis
KR20150115555A (ko) 2014-04-04 2015-10-14 삼성전자주식회사 전자 장치 및 그의 정보 제공 방법
US9519644B2 (en) 2014-04-04 2016-12-13 Facebook, Inc. Methods and devices for generating media items
KR102249086B1 (ko) 2014-04-04 2021-05-10 삼성전자주식회사 레코딩 지원 전자장치 및 방법
US9383827B1 (en) 2014-04-07 2016-07-05 Google Inc. Multi-modal command display
CN104978963A (zh) 2014-04-08 2015-10-14 富士通株式会社 语音识别装置、方法以及电子设备
JP6282516B2 (ja) 2014-04-08 2018-02-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 複数機器の音声操作システム、音声操作方法及び、プログラム
US9542948B2 (en) 2014-04-09 2017-01-10 Google Inc. Text-dependent speaker identification
US20150294516A1 (en) 2014-04-10 2015-10-15 Kuo-Ching Chiang Electronic device with security module
US9888452B2 (en) 2014-04-10 2018-02-06 Twin Harbor Labs Llc Methods and apparatus notifying a user of the operating condition of a household appliance
WO2015157013A1 (en) 2014-04-11 2015-10-15 Analog Devices, Inc. Apparatus, systems and methods for providing blind source separation services
CN108551675B (zh) 2014-04-14 2022-04-15 创新先进技术有限公司 一种应用客户端、服务端及对应的Portal认证方法
US20150294086A1 (en) 2014-04-14 2015-10-15 Elwha Llc Devices, systems, and methods for automated enhanced care rooms
US9582499B2 (en) 2014-04-14 2017-02-28 Xerox Corporation Retrieval of domain relevant phrase tables
US10540979B2 (en) 2014-04-17 2020-01-21 Qualcomm Incorporated User interface for secure access to a device using speaker verification
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US10770075B2 (en) 2014-04-21 2020-09-08 Qualcomm Incorporated Method and apparatus for activating application by speech input
US9607613B2 (en) 2014-04-23 2017-03-28 Google Inc. Speech endpointing based on word comparisons
KR20150122561A (ko) 2014-04-23 2015-11-02 삼성전자주식회사 디바이스 및 상기 디바이스에서의 착신 호출 처리 방법
US20150310862A1 (en) 2014-04-24 2015-10-29 Microsoft Corporation Deep learning for semantic parsing including semantic utterance classification
CN105025051A (zh) 2014-04-24 2015-11-04 深圳市赛格导航科技股份有限公司 一种云端语音服务提供方法和系统
US9478247B2 (en) 2014-04-28 2016-10-25 Sonos, Inc. Management of media content playback
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
US8976063B1 (en) 2014-04-29 2015-03-10 Google Inc. Automated detection of vehicle parking and location
US9520127B2 (en) 2014-04-29 2016-12-13 Microsoft Technology Licensing, Llc Shared hidden layer combination for speech recognition systems
KR102248474B1 (ko) 2014-04-30 2021-05-07 삼성전자 주식회사 음성 명령 제공 방법 및 장치
US9600600B2 (en) 2014-04-30 2017-03-21 Excalibur Ip, Llc Method and system for evaluating query suggestions quality
US9712638B2 (en) * 2014-05-05 2017-07-18 International Business Machines Corporation Creating a dynamic aggregate group profile of users in an online collaboration session for providing tailored content delivery
US9501163B2 (en) 2014-05-06 2016-11-22 Symbol Technologies, Llc Apparatus and method for activating a trigger mechanism
US10789304B2 (en) 2014-05-06 2020-09-29 Oath Inc. Method and system for measuring user engagement with content items
KR102282487B1 (ko) 2014-05-08 2021-07-26 삼성전자주식회사 애플리케이션 실행 장치 및 방법
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US9459889B2 (en) 2014-05-19 2016-10-04 Qualcomm Incorporated Systems and methods for context-aware application control
KR102216048B1 (ko) 2014-05-20 2021-02-15 삼성전자주식회사 음성 명령 인식 장치 및 방법
US10726831B2 (en) 2014-05-20 2020-07-28 Amazon Technologies, Inc. Context interpretation in natural language processing using previous dialog acts
US10417554B2 (en) 2014-05-22 2019-09-17 Lee J. Scheffler Methods and systems for neural and cognitive processing
KR102223278B1 (ko) 2014-05-22 2021-03-05 엘지전자 주식회사 글래스 타입 단말기 및 이의 제어방법
US9990433B2 (en) 2014-05-23 2018-06-05 Samsung Electronics Co., Ltd. Method for searching and device thereof
KR102329420B1 (ko) 2014-05-23 2021-11-22 엘지전자 주식회사 이동단말기 및 그 제어방법
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9437189B2 (en) 2014-05-29 2016-09-06 Google Inc. Generating language models
US9519634B2 (en) 2014-05-30 2016-12-13 Educational Testing Service Systems and methods for determining lexical associations among words in a corpus
US10237711B2 (en) 2014-05-30 2019-03-19 Apple Inc. Dynamic types for activity continuation between electronic devices
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US10387451B2 (en) 2014-05-30 2019-08-20 Apple Inc. Synchronization system for multiple client devices
TWI520007B (zh) 2014-05-30 2016-02-01 由田新技股份有限公司 眼控密碼輸入設備、方法、電腦可讀取紀錄媒體及電腦程式產品
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
WO2015183699A1 (en) 2014-05-30 2015-12-03 Apple Inc. Predictive messaging method
US9380123B2 (en) 2014-05-30 2016-06-28 Apple Inc. Activity continuation between electronic devices
US11088807B2 (en) 2014-05-30 2021-08-10 Apple Inc. Application-level acknowledgements
US10033818B2 (en) 2014-05-30 2018-07-24 Apple Inc. Using listen ranges to deliver content to electronic devices from local caching servers
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
WO2015184387A1 (en) 2014-05-30 2015-12-03 Apple Inc. Accessory management system using environment model
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
KR102201095B1 (ko) 2014-05-30 2021-01-08 애플 인크. 하나의 디바이스의 사용으로부터 다른 디바이스의 사용으로의 전환
US10579212B2 (en) 2014-05-30 2020-03-03 Apple Inc. Structured suggestions
US9887949B2 (en) 2014-05-31 2018-02-06 Apple Inc. Displaying interactive notifications on touch sensitive devices
GB2526805A (en) 2014-06-03 2015-12-09 Nokia Technologies Oy Methods, apparatuses and computer programs for adapting content
US10318016B2 (en) 2014-06-03 2019-06-11 Harman International Industries, Incorporated Hands free device with directional interface
US9363254B2 (en) 2014-06-04 2016-06-07 Sonos, Inc. Cloud queue access control
US8995972B1 (en) 2014-06-05 2015-03-31 Grandios Technologies, Llc Automatic personal assistance between users devices
WO2015187048A1 (en) 2014-06-06 2015-12-10 Obschestvo S Ogranichennoy Otvetstvennostiyu "Speactoit" Proactive environment-based chat information system
JP6307356B2 (ja) 2014-06-06 2018-04-04 株式会社デンソー 運転コンテキスト情報生成装置
US10325205B2 (en) 2014-06-09 2019-06-18 Cognitive Scale, Inc. Cognitive information processing system environment
EP2983065B1 (en) 2014-06-11 2018-08-01 Huawei Technologies Co., Ltd. Method and terminal for quickly starting application service
US10127901B2 (en) 2014-06-13 2018-11-13 Microsoft Technology Licensing, Llc Hyper-structure recurrent neural networks for text-to-speech
CN104090652B (zh) 2014-06-13 2017-07-21 北京搜狗科技发展有限公司 一种语音输入方法和装置
US20150364140A1 (en) 2014-06-13 2015-12-17 Sony Corporation Portable Electronic Equipment and Method of Operating a User Interface
US10250538B2 (en) 2014-06-14 2019-04-02 Trisha N. Prabhu Detecting messages with offensive content
KR20150144668A (ko) 2014-06-17 2015-12-28 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US20150370787A1 (en) 2014-06-18 2015-12-24 Microsoft Corporation Session Context Modeling For Conversational Understanding Systems
US10186282B2 (en) 2014-06-19 2019-01-22 Apple Inc. Robust end-pointing of speech signals using speaker recognition
US9462112B2 (en) 2014-06-19 2016-10-04 Microsoft Technology Licensing, Llc Use of a digital assistant in communications
US9390706B2 (en) 2014-06-19 2016-07-12 Mattersight Corporation Personality-based intelligent personal assistant system and methods
US9384738B2 (en) 2014-06-24 2016-07-05 Google Inc. Dynamic threshold for speaker verification
US20150371529A1 (en) 2014-06-24 2015-12-24 Bose Corporation Audio Systems and Related Methods and Devices
US10783166B2 (en) 2014-06-24 2020-09-22 Google Llc List accumulation and reminder triggering
US9632748B2 (en) 2014-06-24 2017-04-25 Google Inc. Device designation for audio input monitoring
US9807559B2 (en) 2014-06-25 2017-10-31 Microsoft Technology Licensing, Llc Leveraging user signals for improved interactions with digital personal assistant
US20150379118A1 (en) 2014-06-27 2015-12-31 United Video Properties, Inc. Methods and systems for generating playlists based on activities being performed by a user
US20150381923A1 (en) 2014-06-27 2015-12-31 United Video Properties, Inc. Methods and systems for adjusting a play length of a media asset based user actions
US10402453B2 (en) 2014-06-27 2019-09-03 Nuance Communications, Inc. Utilizing large-scale knowledge graphs to support inference at scale and explanation generation
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
KR102261552B1 (ko) 2014-06-30 2021-06-07 삼성전자주식회사 음성 명령어 제공 방법 및 이를 지원하는 전자 장치
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US20160005320A1 (en) 2014-07-02 2016-01-07 Christopher deCharms Technologies for brain exercise training
US20160012038A1 (en) 2014-07-10 2016-01-14 International Business Machines Corporation Semantic typing with n-gram analysis
US10321204B2 (en) 2014-07-11 2019-06-11 Lenovo (Singapore) Pte. Ltd. Intelligent closed captioning
US10506273B2 (en) 2014-07-15 2019-12-10 Verizon Patent And Licensing Inc. Using a media client device to present media content from a mobile device
US9665248B2 (en) 2014-07-15 2017-05-30 Google Inc. Adaptive background playback behavior
KR20160009344A (ko) 2014-07-16 2016-01-26 삼성전자주식회사 귓속말 인식 방법 및 장치
US9257120B1 (en) 2014-07-18 2016-02-09 Google Inc. Speaker verification using co-location information
CN104113471B (zh) 2014-07-18 2018-06-05 广州三星通信技术研究有限公司 通讯连接异常时的信息处理方法和装置
JP6434144B2 (ja) 2014-07-18 2018-12-05 アップル インコーポレイテッドApple Inc. デバイスにおけるレイズジェスチャ検出
US9560402B2 (en) 2014-07-23 2017-01-31 Highlands Technologies Solutions Methods for displaying personalized messages, images and the like at event centers including cinema
US9301256B2 (en) 2014-07-24 2016-03-29 Verizon Patent And Licensing Inc. Low battery indication for callers to mobile device
US20160028666A1 (en) 2014-07-24 2016-01-28 Framy Inc. System and method for instant messaging
US20160086116A1 (en) 2014-07-27 2016-03-24 Supriya Rao Method and system of an automatically managed calendar and contextual task list
US9325842B1 (en) 2014-07-28 2016-04-26 Google Inc. Systems and methods for associating a string with a content item
US10178229B2 (en) 2014-07-29 2019-01-08 United Efficiency, Inc. System for limiting mobile phone distraction in motor vehicles and / or within fixed locations
US20160034811A1 (en) 2014-07-31 2016-02-04 Apple Inc. Efficient generation of complementary acoustic models for performing automatic speech recognition system combination
WO2016018057A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Method and device for providing function of mobile terminal
CN104123191A (zh) 2014-07-31 2014-10-29 北京智谷睿拓技术服务有限公司 任务迁移控制方法、装置和系统
WO2016017997A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable glasses and method of providing content using the same
US9377871B2 (en) 2014-08-01 2016-06-28 Nuance Communications, Inc. System and methods for determining keyboard input in the presence of multiple contact points
US9898175B2 (en) 2014-08-05 2018-02-20 Fibar Group S.A. Home network manager for home automation
US9874997B2 (en) 2014-08-08 2018-01-23 Sonos, Inc. Social playback queues
US9980539B2 (en) * 2014-08-11 2018-05-29 Apple Inc. Segmented attachment device
US9548066B2 (en) 2014-08-11 2017-01-17 Amazon Technologies, Inc. Voice application architecture
US9767794B2 (en) 2014-08-11 2017-09-19 Nuance Communications, Inc. Dialog flow management in hierarchical task dialogs
US9361442B2 (en) 2014-08-12 2016-06-07 International Business Machines Corporation Triggering actions on a user device based on biometrics of nearby individuals
US10243891B2 (en) 2014-08-14 2019-03-26 Oath Inc. Cross-device integration system and method
US9838999B2 (en) 2014-08-14 2017-12-05 Blackberry Limited Portable electronic device and method of controlling notifications
JP6044604B2 (ja) 2014-08-18 2016-12-14 カシオ計算機株式会社 端末装置、およびプログラム
WO2016028793A1 (en) 2014-08-18 2016-02-25 Interdigital Patent Holdings, Inc. Injecting streaming media into a playlist
US10345767B2 (en) 2014-08-19 2019-07-09 Samsung Electronics Co., Ltd. Apparatus and method for gamification of sensor data interpretation in smart home
KR20160023089A (ko) 2014-08-21 2016-03-03 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
US20160055240A1 (en) 2014-08-22 2016-02-25 Microsoft Corporation Orphaned utterance detection system and method
CN105472587A (zh) 2014-08-26 2016-04-06 小米科技有限责任公司 来电处理方法和装置
DE202015005999U1 (de) 2014-08-26 2015-11-26 Apple Inc. Benutzerschnittstelle zum Einschränken von Meldungen und Alarmen
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US10068008B2 (en) 2014-08-28 2018-09-04 Microsoft Technologies Licensing, LLC Spelling correction of email queries
US9990610B2 (en) 2014-08-29 2018-06-05 Google Llc Systems and methods for providing suggested reminders
CN105471705B (zh) 2014-09-03 2021-03-23 腾讯科技(深圳)有限公司 一种基于即时通讯的智能控制方法、设备及系统
CN104243699A (zh) 2014-09-04 2014-12-24 宇龙计算机通信科技(深圳)有限公司 一种来电拒接后的提醒方法、系统及移动终端
US9959863B2 (en) 2014-09-08 2018-05-01 Qualcomm Incorporated Keyword detection using speaker-independent keyword models for user-designated keywords
WO2016037311A1 (en) 2014-09-09 2016-03-17 Microsoft Technology Licensing, Llc Variable-component deep neural network for robust speech recognition
US20160071517A1 (en) 2014-09-09 2016-03-10 Next It Corporation Evaluating Conversation Data based on Risk Factors
US10204622B2 (en) 2015-09-10 2019-02-12 Crestron Electronics, Inc. Acoustic sensory network
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10171558B2 (en) 2014-09-12 2019-01-01 Microsoft Technology Licensing, Llc Cross device application discovery and control
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
CN105490890A (zh) 2014-09-16 2016-04-13 中兴通讯股份有限公司 智能家庭终端及其控制方法
US10261672B1 (en) 2014-09-16 2019-04-16 Amazon Technologies, Inc. Contextual launch interfaces
US9548979B1 (en) 2014-09-19 2017-01-17 United Services Automobile Association (Usaa) Systems and methods for authentication program enrollment
US9778736B2 (en) 2014-09-22 2017-10-03 Rovi Guides, Inc. Methods and systems for calibrating user devices
US9508028B2 (en) 2014-09-24 2016-11-29 Nuance Communications, Inc. Converting text strings into number strings, such as via a touchscreen input
JP6052814B2 (ja) 2014-09-24 2016-12-27 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation 音声認識モデルの構築方法、音声認識方法、コンピュータ・システム、音声認識装置、プログラムおよび記録媒体
US10317992B2 (en) 2014-09-25 2019-06-11 Microsoft Technology Licensing, Llc Eye gaze for spoken language understanding in multi-modal conversational interactions
US20160094889A1 (en) 2014-09-29 2016-03-31 Rovi Guides, Inc. Systems and methods for determining whether to merge search queries based on contextual information
US9606986B2 (en) 2014-09-29 2017-03-28 Apple Inc. Integrated word N-gram and class M-gram language models
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9646634B2 (en) 2014-09-30 2017-05-09 Google Inc. Low-rank hidden input layer for speech recognition neural network
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9378740B1 (en) 2014-09-30 2016-06-28 Amazon Technologies, Inc. Command suggestions during automatic speech recognition
US9830321B2 (en) 2014-09-30 2017-11-28 Rovi Guides, Inc. Systems and methods for searching for a media asset
US9578156B2 (en) 2014-09-30 2017-02-21 Samsung Electronics Co., Ltd. Method and apparatus for operating an electronic device
JP6448971B2 (ja) 2014-09-30 2019-01-09 シャープ株式会社 対話装置
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
WO2016054230A1 (en) 2014-10-01 2016-04-07 XBrain, Inc. Voice and connection platform
US9559993B2 (en) 2014-10-02 2017-01-31 Oracle International Corporation Virtual agent proxy in a real-time chat service
WO2016054651A1 (en) 2014-10-03 2016-04-07 Across Lab, Inc. Method and apparatus for remote, multi-media collaboration, including archive and search capability
US9318107B1 (en) 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
US9424841B2 (en) 2014-10-09 2016-08-23 Google Inc. Hotword detection on multiple devices
US9741344B2 (en) 2014-10-20 2017-08-22 Vocalzoom Systems Ltd. System and method for operating devices using voice commands
US20160117386A1 (en) 2014-10-22 2016-04-28 International Business Machines Corporation Discovering terms using statistical corpus analysis
US9576575B2 (en) 2014-10-27 2017-02-21 Toyota Motor Engineering & Manufacturing North America, Inc. Providing voice recognition shortcuts based on user verbal input
CN104460593B (zh) 2014-10-29 2017-10-10 小米科技有限责任公司 模式切换方法及装置
US9880714B2 (en) 2014-10-30 2018-01-30 Ebay Inc. Dynamic loading of contextual ontologies for predictive touch screen typing
CN105574067B (zh) 2014-10-31 2020-01-21 株式会社东芝 项目推荐装置以及项目推荐方法
CN104374399A (zh) 2014-10-31 2015-02-25 北京搜狗科技发展有限公司 一种导航信息显示方法和装置
US9646611B2 (en) 2014-11-06 2017-05-09 Microsoft Technology Licensing, Llc Context-based actions
US9678946B2 (en) 2014-11-10 2017-06-13 Oracle International Corporation Automatic generation of N-grams and concept relations from linguistic input data
GB2532075A (en) 2014-11-10 2016-05-11 Lego As System and method for toy recognition and detection based on convolutional neural networks
US10572589B2 (en) 2014-11-10 2020-02-25 International Business Machines Corporation Cognitive matching of narrative data
EP3218837A4 (en) 2014-11-11 2018-04-11 Webee LLC Systems and methods for smart spaces
US9542927B2 (en) 2014-11-13 2017-01-10 Google Inc. Method and system for building text-to-speech voice from diverse recordings
US20160139662A1 (en) 2014-11-14 2016-05-19 Sachin Dabhade Controlling a visual device based on a proximity between a user and the visual device
US10116748B2 (en) 2014-11-20 2018-10-30 Microsoft Technology Licensing, Llc Vehicle-based multi-modal interface
US9361126B1 (en) * 2014-11-24 2016-06-07 International Business Machines Corporation Device driver aggregation in operating system deployment
US9258604B1 (en) 2014-11-24 2016-02-09 Facebook, Inc. Commercial detection based on audio fingerprinting
US9886430B2 (en) 2014-11-25 2018-02-06 Microsoft Technology Licensing, Llc Entity based content selection
US10431214B2 (en) 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
US10614799B2 (en) 2014-11-26 2020-04-07 Voicebox Technologies Corporation System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance
US9812126B2 (en) 2014-11-28 2017-11-07 Microsoft Technology Licensing, Llc Device arbitration for listening devices
US10192549B2 (en) 2014-11-28 2019-01-29 Microsoft Technology Licensing, Llc Extending digital personal assistant action providers
EP3228084A4 (en) 2014-12-01 2018-04-25 Inscape Data, Inc. System and method for continuous media segment identification
KR20160065503A (ko) 2014-12-01 2016-06-09 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US10587541B2 (en) 2014-12-02 2020-03-10 Facebook, Inc. Device, method, and graphical user interface for lightweight messaging
US9466297B2 (en) 2014-12-09 2016-10-11 Microsoft Technology Licensing, Llc Communication system
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9241073B1 (en) 2014-12-09 2016-01-19 Ringcentral, Inc. Systems and methods for managing an event scheduling request in a telephony system
US20160162569A1 (en) 2014-12-09 2016-06-09 Idibon, Inc. Methods and systems for improving machine learning performance
US20160170966A1 (en) 2014-12-10 2016-06-16 Brian Kolo Methods and systems for automated language identification
CN111414222A (zh) 2014-12-11 2020-07-14 微软技术许可有限责任公司 能够实现可动作的消息传送的虚拟助理系统
US9912758B2 (en) 2014-12-16 2018-03-06 Yahoo Holdings, Inc. Continuing an application session on a different device
US9904673B2 (en) 2014-12-17 2018-02-27 International Business Machines Corporation Conversation advisor
DE112014007265T5 (de) 2014-12-18 2017-09-07 Mitsubishi Electric Corporation Spracherkennungseinrichtung und Spracherkennungsverfahren
US9911415B2 (en) 2014-12-19 2018-03-06 Lenovo (Singapore) Pte. Ltd. Executing a voice command during voice input
US9552816B2 (en) 2014-12-19 2017-01-24 Amazon Technologies, Inc. Application focus in speech-based systems
KR20160076201A (ko) 2014-12-22 2016-06-30 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US9690542B2 (en) 2014-12-22 2017-06-27 Microsoft Technology Licensing, Llc Scaling digital personal assistant agents across devices
US9811312B2 (en) 2014-12-22 2017-11-07 Intel Corporation Connected device voice command support
JP6504808B2 (ja) 2014-12-22 2019-04-24 キヤノン株式会社 撮像装置、音声コマンド機能の設定方法、コンピュータプログラム、及び記憶媒体
US10672390B2 (en) 2014-12-22 2020-06-02 Rovi Guides, Inc. Systems and methods for improving speech recognition performance by generating combined interpretations
US10229356B1 (en) 2014-12-23 2019-03-12 Amazon Technologies, Inc. Error tolerant neural network model compression
US9483388B2 (en) 2014-12-29 2016-11-01 Quixey, Inc. Discovery of application states
US9837081B2 (en) 2014-12-30 2017-12-05 Microsoft Technology Licensing, Llc Discovering capabilities of third-party voice-enabled resources
CN107112016B (zh) 2015-01-05 2020-12-29 谷歌有限责任公司 多模态状态循环
US9959129B2 (en) 2015-01-09 2018-05-01 Microsoft Technology Licensing, Llc Headless task completion within digital personal assistants
CN107112010B (zh) 2015-01-16 2021-06-01 三星电子株式会社 用于使用语法模型执行话音识别的方法和设备
CN104575501B (zh) 2015-01-19 2017-11-03 北京云知声信息技术有限公司 一种收音机语音操控指令解析方法及系统
KR102305584B1 (ko) 2015-01-19 2021-09-27 삼성전자주식회사 언어 모델 학습 방법 및 장치, 언어 인식 방법 및 장치
US9367541B1 (en) 2015-01-20 2016-06-14 Xerox Corporation Terminological adaptation of statistical machine translation system through automatic generation of phrasal contexts for bilingual terms
CN105869641A (zh) 2015-01-22 2016-08-17 佳能株式会社 语音识别装置及语音识别方法
US9947313B2 (en) 2015-01-26 2018-04-17 William Drewes Method for substantial ongoing cumulative voice recognition error reduction
US20160224559A1 (en) 2015-01-30 2016-08-04 Linkedin Corporation Ranking adjustment of federated content items in a social network
CN104573472A (zh) 2015-01-30 2015-04-29 深圳市中兴移动通信有限公司 移动终端及其操作方法
US20160227107A1 (en) 2015-02-02 2016-08-04 Lenovo (Singapore) Pte. Ltd. Method and device for notification preview dismissal
US9424412B1 (en) 2015-02-02 2016-08-23 Bank Of America Corporation Authenticating customers using biometrics
US20160225372A1 (en) 2015-02-03 2016-08-04 Samsung Electronics Company, Ltd. Smart home connected device contextual learning using audio commands
US9613022B2 (en) 2015-02-04 2017-04-04 Lenovo (Singapore) Pte. Ltd. Context based customization of word assistance functions
US10062061B2 (en) 2015-02-05 2018-08-28 Conduent Business Services, Llc Pay-by-phone parking system aided by a vision based monitoring device
CN104679472A (zh) 2015-02-13 2015-06-03 百度在线网络技术(北京)有限公司 人机语音交互方法和装置
US10121472B2 (en) 2015-02-13 2018-11-06 Knowles Electronics, Llc Audio buffer catch-up apparatus and method with two microphones
KR101678087B1 (ko) 2015-02-16 2016-11-23 현대자동차주식회사 차량 및 그 제어방법
KR20160101826A (ko) 2015-02-17 2016-08-26 삼성전자주식회사 멀티 유저 기반의 전자 장치
JP2016151928A (ja) 2015-02-18 2016-08-22 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9554356B2 (en) 2015-02-19 2017-01-24 Microsoft Technology Licensing, Llc Personalized reminders
EP3259688A4 (en) 2015-02-19 2018-12-12 Digital Reasoning Systems, Inc. Systems and methods for neural language modeling
US9928232B2 (en) 2015-02-27 2018-03-27 Microsoft Technology Licensing, Llc Topically aware word suggestions
WO2016137272A1 (ko) 2015-02-27 2016-09-01 삼성전자 주식회사 복수의 운영체제가 설치된 디바이스를 제어하는 방법 및 디바이스
US9911412B2 (en) 2015-03-06 2018-03-06 Nuance Communications, Inc. Evidence-based natural language input recognition
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10254911B2 (en) 2015-03-08 2019-04-09 Apple Inc. Device configuration user interface
US20160266871A1 (en) 2015-03-11 2016-09-15 Adapx, Inc. Speech recognizer for multimodal systems and signing in/out with and /or for a digital pen
US9805713B2 (en) 2015-03-13 2017-10-31 Google Inc. Addressing missing features in models
US10031722B1 (en) 2015-03-17 2018-07-24 Amazon Technologies, Inc. Grouping devices for voice control
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US10721517B2 (en) 2015-03-20 2020-07-21 Liuzhou Guitong Technology Co., Ltd. Method and system for synchronously reproducing multimedia multi-information
CN104869342A (zh) 2015-06-09 2015-08-26 柳州桂通科技股份有限公司 一种多媒体多信息同步重现的方法及其应用
US20160286045A1 (en) 2015-03-23 2016-09-29 Vonage Network Llc System and method for providing an informative message when rejecting an incoming call
US9703394B2 (en) 2015-03-24 2017-07-11 Google Inc. Unlearning techniques for adaptive language models in text entry
US10063510B2 (en) 2015-03-24 2018-08-28 Facebook, Inc. Techniques to share and remix media through a messaging system
US10956957B2 (en) 2015-03-25 2021-03-23 Facebook, Inc. Techniques for automated messaging
US9672725B2 (en) 2015-03-25 2017-06-06 Microsoft Technology Licensing, Llc Proximity-based reminders
US10261482B2 (en) 2015-03-26 2019-04-16 Ca, Inc. Initiating actions on wearable devices
US10133538B2 (en) 2015-03-27 2018-11-20 Sri International Semi-supervised speaker diarization
TWI525532B (zh) 2015-03-30 2016-03-11 Yu-Wei Chen Set the name of the person to wake up the name for voice manipulation
US9484021B1 (en) 2015-03-30 2016-11-01 Amazon Technologies, Inc. Disambiguation in speech recognition
US20160293157A1 (en) 2015-03-30 2016-10-06 Google Inc. Contextual Voice Action History
US10192546B1 (en) 2015-03-30 2019-01-29 Amazon Technologies, Inc. Pre-wakeword speech processing
EP3282447B1 (en) 2015-03-31 2020-08-26 Sony Corporation PROGRESSIVE UTTERANCE ANALYSIS FOR SUCCESSIVELY DISPLAYING EARLY SUGGESTIONS BASED ON PARTIAL SEMANTIC PARSES FOR VOICE CONTROL. &#xA;REAL TIME PROGRESSIVE SEMANTIC UTTERANCE ANALYSIS FOR VISUALIZATION AND ACTIONS CONTROL.
US20170032783A1 (en) 2015-04-01 2017-02-02 Elwha Llc Hierarchical Networked Command Recognition
US20160322044A1 (en) 2015-04-01 2016-11-03 Elwha Llc Networked User Command Recognition
US10095683B2 (en) 2015-04-10 2018-10-09 Facebook, Inc. Contextual speller models on online social networks
JP6564058B2 (ja) 2015-04-10 2019-08-21 華為技術有限公司Huawei Technologies Co.,Ltd. 音声認識方法、音声ウェイクアップ装置、音声認識装置、および端末
US9678664B2 (en) 2015-04-10 2017-06-13 Google Inc. Neural network for keyboard input decoding
US10021209B2 (en) 2015-04-10 2018-07-10 Open Text Sa Ulc Systems and methods for caching of managed content in a distributed environment using a multi-tiered architecture
US10049099B2 (en) 2015-04-10 2018-08-14 Facebook, Inc. Spell correction with hidden markov models on online social networks
US20160299977A1 (en) 2015-04-13 2016-10-13 Quixey, Inc. Action-Based App Recommendation Engine
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10218651B2 (en) 2015-04-20 2019-02-26 Oracle International Corporation Virtual assistance for chat agents
KR102269035B1 (ko) 2015-04-21 2021-06-24 삼성전자주식회사 서버 및 서버의 그룹 액션 제어방법
US9472196B1 (en) 2015-04-22 2016-10-18 Google Inc. Developer voice actions system
US10083213B1 (en) 2015-04-27 2018-09-25 Intuit Inc. Method and system for routing a question based on analysis of the question content and predicted user satisfaction with answer content before the answer content is generated
US10109277B2 (en) 2015-04-27 2018-10-23 Nuance Communications, Inc. Methods and apparatus for speech recognition using visual information
WO2016175354A1 (ko) 2015-04-29 2016-11-03 주식회사 아카인텔리전스 인공지능 대화 장치 및 방법
US11010768B2 (en) 2015-04-30 2021-05-18 Oracle International Corporation Character-based attribute value extraction system
GB2537903B (en) 2015-04-30 2019-09-04 Toshiba Res Europe Limited Device and method for a spoken dialogue system
US9953063B2 (en) 2015-05-02 2018-04-24 Lithium Technologies, Llc System and method of providing a content discovery platform for optimizing social network engagements
US20160328205A1 (en) 2015-05-05 2016-11-10 Motorola Mobility Llc Method and Apparatus for Voice Operation of Mobile Applications Having Unnamed View Elements
US9892363B2 (en) 2015-05-07 2018-02-13 Truemotion, Inc. Methods and systems for sensor-based driving data collection
CN104867492B (zh) 2015-05-07 2019-09-03 科大讯飞股份有限公司 智能交互系统及方法
US10685471B2 (en) 2015-05-11 2020-06-16 Facebook, Inc. Methods and systems for playing video while transitioning from a content-item preview to the content item
US9953648B2 (en) 2015-05-11 2018-04-24 Samsung Electronics Co., Ltd. Electronic device and method for controlling the same
US9761220B2 (en) 2015-05-13 2017-09-12 Microsoft Technology Licensing, Llc Language modeling based on spoken and unspeakable corpuses
US9906482B2 (en) 2015-05-13 2018-02-27 The Travelers Indemnity Company Predictive electronic message management systems and controllers
US20160337299A1 (en) 2015-05-13 2016-11-17 Google Inc. Prioritized notification display
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
KR20160136013A (ko) 2015-05-19 2016-11-29 엘지전자 주식회사 이동 단말기 및 그 제어 방법
EP3300074B1 (en) 2015-05-19 2019-08-21 Sony Corporation Information processing apparatus
US10446142B2 (en) 2015-05-20 2019-10-15 Microsoft Technology Licensing, Llc Crafting feedback dialogue with a digital assistant
US10061848B2 (en) 2015-05-22 2018-08-28 Microsoft Technology Licensing, Llc Ontology-crowd-relevance deep response generation
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10110430B2 (en) 2015-05-27 2018-10-23 Orion Labs Intelligent agent features for wearable personal communication nodes
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10097973B2 (en) 2015-05-27 2018-10-09 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9408182B1 (en) 2015-05-28 2016-08-02 Google Inc. Third party action triggers
US9552547B2 (en) 2015-05-29 2017-01-24 Sas Institute Inc. Normalizing electronic communications using a neural-network normalizer and a neural-network flagger
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10505884B2 (en) 2015-06-05 2019-12-10 Microsoft Technology Licensing, Llc Entity classification and/or relationship identification
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10755032B2 (en) 2015-06-05 2020-08-25 Apple Inc. Indexing web pages with deep links
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US9865265B2 (en) 2015-06-06 2018-01-09 Apple Inc. Multi-microphone speech recognition systems and related techniques
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US20160357861A1 (en) 2015-06-07 2016-12-08 Apple Inc. Natural language event detection
US20160365101A1 (en) 2015-06-15 2016-12-15 Motorola Mobility Llc Enabling Event Driven Voice Interaction with a Device
US20160371250A1 (en) 2015-06-16 2016-12-22 Microsoft Technology Licensing, Llc Text suggestion using a predictive grammar model
US20160372112A1 (en) 2015-06-18 2016-12-22 Amgine Technologies (Us), Inc. Managing Interactions between Users and Applications
US9818409B2 (en) 2015-06-19 2017-11-14 Google Inc. Context-dependent modeling of phonemes
US9767386B2 (en) 2015-06-23 2017-09-19 Adobe Systems Incorporated Training a classifier algorithm used for automatically generating tags to be applied to images
CN104951077A (zh) 2015-06-24 2015-09-30 百度在线网络技术(北京)有限公司 基于人工智能的人机交互方法、装置和终端设备
CN107667561B (zh) 2015-06-25 2021-01-08 苹果公司 移动通信设备和用于控制移动通信设备接收机的方法
KR102317526B1 (ko) 2015-06-25 2021-10-26 엘지전자 주식회사 헤드셋 및 그 제어 방법
US20160379638A1 (en) 2015-06-26 2016-12-29 Amazon Technologies, Inc. Input speech quality matching
US10325590B2 (en) 2015-06-26 2019-06-18 Intel Corporation Language model modification for local speech recognition systems using remote sources
US9881613B2 (en) 2015-06-29 2018-01-30 Google Llc Privacy-preserving training corpus selection
US10019992B2 (en) 2015-06-29 2018-07-10 Disney Enterprises, Inc. Speech-controlled actions based on keywords and context thereof
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10121471B2 (en) 2015-06-29 2018-11-06 Amazon Technologies, Inc. Language model speech endpointing
US20160379641A1 (en) 2015-06-29 2016-12-29 Microsoft Technology Licensing, Llc Auto-Generation of Notes and Tasks From Passive Recording
US10134425B1 (en) 2015-06-29 2018-11-20 Amazon Technologies, Inc. Direction-based speech endpointing
JP6655635B2 (ja) 2015-06-30 2020-02-26 ケー4コネクト インコーポレイテッド アドレス指定可能ホームオートメーション(ha)デバイスのユーザ選択可能リストに基づく所望シーン実現を含むhaシステム、及び関連方法
KR102371188B1 (ko) 2015-06-30 2022-03-04 삼성전자주식회사 음성 인식 장치 및 방법과 전자 장치
US9536527B1 (en) 2015-06-30 2017-01-03 Amazon Technologies, Inc. Reporting operational metrics in speech-based systems
US9998597B2 (en) 2015-07-06 2018-06-12 Nuance Communications, Inc. Systems and methods for facilitating communication using an interactive communication system
US10073887B2 (en) 2015-07-06 2018-09-11 Conduent Business Services, Llc System and method for performing k-nearest neighbor search based on minimax distance measure and efficient outlier detection
CN105100356B (zh) 2015-07-07 2018-04-06 上海斐讯数据通信技术有限公司 一种音量自动调节的方法和系统
JP2017019331A (ja) 2015-07-08 2017-01-26 Ntn株式会社 車両用モータ駆動装置
US20170011303A1 (en) 2015-07-09 2017-01-12 Qualcomm Incorporated Contact-Based Predictive Response
US10249297B2 (en) 2015-07-13 2019-04-02 Microsoft Technology Licensing, Llc Propagating conversational alternatives using delayed hypothesis binding
CN104967748B (zh) 2015-07-13 2018-10-23 宁波萨瑞通讯有限公司 一种安全操作应用服务的方法
US10426037B2 (en) 2015-07-15 2019-09-24 International Business Machines Corporation Circuitized structure with 3-dimensional configuration
CN106373575B (zh) 2015-07-23 2020-07-21 阿里巴巴集团控股有限公司 一种用户声纹模型构建方法、装置及系统
US10686738B2 (en) 2015-07-24 2020-06-16 Facebook, Inc. Providing personal assistant service via messaging
US10311384B2 (en) 2015-07-29 2019-06-04 Microsoft Technology Licensing, Llc Automatic creation and maintenance of a taskline
KR20170014297A (ko) 2015-07-29 2017-02-08 엘지전자 주식회사 와치 타입의 이동 단말기 및 그 제어 방법
US10255921B2 (en) 2015-07-31 2019-04-09 Google Llc Managing dialog data providers
US9691361B2 (en) 2015-08-03 2017-06-27 International Business Machines Corporation Adjusting presentation of content on a display
US20170039283A1 (en) 2015-08-03 2017-02-09 Microsoft Technology Licensing, Llc Searching Based on the Persona of Another
JP5906345B1 (ja) 2015-08-05 2016-04-20 株式会社Cygames 操作履歴に基づいてタッチ対象を予測するプログラム、電子装置、システム及び制御方法
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
KR102386854B1 (ko) 2015-08-20 2022-04-13 삼성전자주식회사 통합 모델 기반의 음성 인식 장치 및 방법
JP6809467B2 (ja) 2015-08-24 2021-01-06 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US10362978B2 (en) 2015-08-28 2019-07-30 Comcast Cable Communications, Llc Computational model for mood
US20170061423A1 (en) 2015-09-01 2017-03-02 Bank Of America Corporation Use of wearable as an account control system
US10339917B2 (en) 2015-09-03 2019-07-02 Google Llc Enhanced speech endpointing
US9531862B1 (en) 2015-09-04 2016-12-27 Vishal Vadodaria Contextual linking module with interactive intelligent agent for managing communications with contacts and navigation features
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10026399B2 (en) 2015-09-11 2018-07-17 Amazon Technologies, Inc. Arbitration between voice-enabled devices
CN106534469A (zh) 2015-09-11 2017-03-22 昆明我行科技有限公司 一种为智能手机实现电话通讯功能扩展的方法及电子设备
US9736318B2 (en) 2015-09-16 2017-08-15 International Business Machines Corporation Adaptive voice-text transmission
US9665567B2 (en) 2015-09-21 2017-05-30 International Business Machines Corporation Suggesting emoji characters based on current contextual emotional state of user
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
US9734142B2 (en) 2015-09-22 2017-08-15 Facebook, Inc. Universal translation
US20170085547A1 (en) 2015-09-22 2017-03-23 International Business Machines Corporation Storing, indexing and recalling data based on brain activity
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US9990040B2 (en) 2015-09-25 2018-06-05 Immersion Corporation Haptic CAPTCHA
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US20170091612A1 (en) 2015-09-30 2017-03-30 Apple Inc. Proactive assistant with memory assistance
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10425768B2 (en) 2015-09-30 2019-09-24 Lenovo (Singapore) Pte. Ltd. Adjusting audio output volume based on a detected presence of another device
US20170092278A1 (en) 2015-09-30 2017-03-30 Apple Inc. Speaker recognition
US10970646B2 (en) 2015-10-01 2021-04-06 Google Llc Action suggestions for user-selected content
US20170102837A1 (en) 2015-10-07 2017-04-13 Spotify Ab Dynamic control of playlists using wearable devices
US10083685B2 (en) 2015-10-13 2018-09-25 GM Global Technology Operations LLC Dynamically adding or removing functionality to speech recognition systems
US10891106B2 (en) 2015-10-13 2021-01-12 Google Llc Automatic batch voice commands
KR102405793B1 (ko) 2015-10-15 2022-06-08 삼성전자 주식회사 음성 신호 인식 방법 및 이를 제공하는 전자 장치
WO2017070522A1 (en) 2015-10-21 2017-04-27 Google Inc. Parameter collection and automatic dialog generation in dialog systems
US20180315416A1 (en) 2015-10-22 2018-11-01 Knowles Electronics, Llc Microphone with programmable phone onset detection engine
EP3369002A4 (en) 2015-10-26 2019-06-12 24/7 Customer, Inc. METHOD AND DEVICE FOR FACILITATING THE PREDICTION OF CUSTOMER VISIONS
US10146874B2 (en) 2015-10-28 2018-12-04 Fujitsu Limited Refining topic representations
CN106657521A (zh) 2015-10-30 2017-05-10 中兴通讯股份有限公司 一种智能设备语音交流方法、装置和系统
US20170125016A1 (en) 2015-11-02 2017-05-04 Le Holdings (Beijing) Co., Ltd. Method and electronic device for processing voice messages
US9691378B1 (en) 2015-11-05 2017-06-27 Amazon Technologies, Inc. Methods and devices for selectively ignoring captured audio data
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) * 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US9804681B2 (en) 2015-11-10 2017-10-31 Motorola Mobility Llc Method and system for audible delivery of notifications partially presented on an always-on display
KR102432620B1 (ko) 2015-11-12 2022-08-16 삼성전자주식회사 외부 객체의 근접에 따른 동작을 수행하는 전자 장치 및 그 방법
US10769189B2 (en) 2015-11-13 2020-09-08 Microsoft Technology Licensing, Llc Computer speech recognition and semantic understanding from activity patterns
US10546028B2 (en) 2015-11-18 2020-01-28 International Business Machines Corporation Method for personalized breaking news feed
US9940934B2 (en) 2015-11-18 2018-04-10 Uniphone Software Systems Adaptive voice authentication system and method
US10255611B2 (en) 2015-11-20 2019-04-09 International Business Machines Corporation Determining pricing using categorized costs with tree structures
US9697393B2 (en) 2015-11-20 2017-07-04 Symbol Technologies, Llc Methods and systems for adjusting mobile-device operating parameters based on housing-support type
US9792907B2 (en) 2015-11-24 2017-10-17 Intel IP Corporation Low resource key phrase detection for wake on voice
CN105430186A (zh) 2015-11-27 2016-03-23 东莞酷派软件技术有限公司 一种拒接短信的发送方法及系统
CN105897675A (zh) 2015-11-27 2016-08-24 乐视云计算有限公司 视频服务提供方法、访问鉴权方法及服务器和系统
KR102450853B1 (ko) 2015-11-30 2022-10-04 삼성전자주식회사 음성 인식 장치 및 방법
US10546015B2 (en) 2015-12-01 2020-01-28 Facebook, Inc. Determining and utilizing contextual meaning of digital standardized image characters
US9946862B2 (en) 2015-12-01 2018-04-17 Qualcomm Incorporated Electronic device generating notification based on context data in response to speech phrase from user
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10229671B2 (en) 2015-12-02 2019-03-12 GM Global Technology Operations LLC Prioritized content loading for vehicle automatic speech recognition systems
KR102535044B1 (ko) 2015-12-08 2023-05-23 삼성전자주식회사 단말장치, 서버 및 이벤트 제안방법
US10796693B2 (en) 2015-12-09 2020-10-06 Lenovo (Singapore) Pte. Ltd. Modifying input based on determined characteristics
US9990921B2 (en) 2015-12-09 2018-06-05 Lenovo (Singapore) Pte. Ltd. User focus activated voice recognition
US9830449B1 (en) 2015-12-16 2017-11-28 Amazon Technologies, Inc. Execution locations for request-driven code
US10685170B2 (en) 2015-12-16 2020-06-16 Microsoft Technology Licensing, Llc Dynamic content layout generator
US10013416B1 (en) 2015-12-18 2018-07-03 Amazon Technologies, Inc. Language based solution agent
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
KR102423588B1 (ko) 2015-12-28 2022-07-22 삼성전자주식회사 정보 제공 방법 및 장치
CA3009758A1 (en) 2015-12-29 2017-07-06 Mz Ip Holdings, Llc Systems and methods for suggesting emoji
US9716795B1 (en) 2015-12-30 2017-07-25 Qualcomm Incorporated Diversion of a call to a wearable device
US20170193083A1 (en) 2016-01-06 2017-07-06 International Business Machines Corporation Identifying message content related to an event utilizing natural language processing and performing an action pertaining to the event
US10382729B2 (en) 2016-01-06 2019-08-13 Vivint, Inc. Home automation system-initiated calls
JP2017123564A (ja) 2016-01-07 2017-07-13 ソニー株式会社 制御装置、表示装置、方法及びプログラム
US9747289B2 (en) 2016-01-13 2017-08-29 Disney Enterprises, Inc. System and method for proximity-based personalized content recommendations
US9792534B2 (en) 2016-01-13 2017-10-17 Adobe Systems Incorporated Semantic natural language vector space
CN105718448B (zh) 2016-01-13 2019-03-19 北京新美互通科技有限公司 一种对输入字符进行自动翻译的方法和装置
US20170235361A1 (en) 2016-01-20 2017-08-17 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Interaction based on capturing user intent via eye gaze
US20170206899A1 (en) 2016-01-20 2017-07-20 Fitbit, Inc. Better communication channel for requests and responses having an intelligent agent
KR102490548B1 (ko) 2016-01-25 2023-01-19 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
US9922647B2 (en) 2016-01-29 2018-03-20 International Business Machines Corporation Approach to reducing the response time of a speech interface
US10182155B2 (en) 2016-02-03 2019-01-15 At&T Intellectual Property I, L.P. Directing care calls using historical call backs, demographics and real time attributes
KR102495523B1 (ko) 2016-02-04 2023-02-03 삼성전자 주식회사 음성 명령을 처리하는 방법 및 이를 제공하는 전자 장치
US10055489B2 (en) 2016-02-08 2018-08-21 Ebay Inc. System and method for content-based media analysis
US9858927B2 (en) 2016-02-12 2018-01-02 Amazon Technologies, Inc Processing spoken commands to control distributed audio outputs
US10431218B2 (en) 2016-02-15 2019-10-01 EVA Automation, Inc. Integration and probabilistic control of electronic devices
US9858129B2 (en) 2016-02-16 2018-01-02 International Business Machines Corporation Dynamic copy content retrieval
US11023680B2 (en) 2016-02-17 2021-06-01 The King Abdulaziz City For Science And Technology (Kacst) Method and system for detecting semantic errors in a text using artificial neural networks
KR20170096774A (ko) 2016-02-17 2017-08-25 이준영 전자기기의 사용자 행동기반 정황인식 작동모드
US10514881B2 (en) 2016-02-18 2019-12-24 Sony Corporation Information processing device, information processing method, and program
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US9772817B2 (en) 2016-02-22 2017-09-26 Sonos, Inc. Room-corrected voice detection
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US20180063308A1 (en) 2016-02-23 2018-03-01 Bioworld Merchandising System and Method for Voice Recognition
US9779735B2 (en) 2016-02-24 2017-10-03 Google Inc. Methods and systems for detecting and processing speech signals
US9922648B2 (en) 2016-03-01 2018-03-20 Google Llc Developer voice actions system
US10404829B2 (en) 2016-03-11 2019-09-03 Wipro Limited Method and system for achieving improved quality of service (QoS) for content delivery in a SDN controller based communication network
AU2017234428B2 (en) 2016-03-14 2020-04-09 Apple Inc. Identification of voice inputs providing credentials
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
DK201670539A1 (en) 2016-03-14 2017-10-02 Apple Inc Dictation that allows editing
US10176802B1 (en) 2016-03-21 2019-01-08 Amazon Technologies, Inc. Lattice encoding using recurrent neural networks
US10304444B2 (en) 2016-03-23 2019-05-28 Amazon Technologies, Inc. Fine-grained natural language understanding
US11089132B2 (en) 2016-03-29 2021-08-10 Microsoft Technology Licensing, Llc Extensibility for context-aware digital personal assistant
US20170286397A1 (en) 2016-03-30 2017-10-05 International Business Machines Corporation Predictive Embeddings
US10979843B2 (en) 2016-04-08 2021-04-13 Qualcomm Incorporated Spatialized audio output based on predicted position data
US20170308609A1 (en) 2016-04-21 2017-10-26 Microsoft Technology Licensing, Llc Multi-result ranking exploration
CN109479172B (zh) 2016-04-21 2021-06-29 惠普发展公司,有限责任合伙企业 电子设备麦克风监听模式
US20170311005A1 (en) 2016-04-26 2017-10-26 Szu-Tung Lin Method of wireless audio transmission and playback
US10431205B2 (en) 2016-04-27 2019-10-01 Conduent Business Services, Llc Dialog device with dialog support generated using a mixture of language models combined using a recurrent neural network
EP4296935A3 (en) 2016-05-06 2024-04-03 The Board of Trustees of the Leland Stanford Junior University Mobile and wearable video capture and feedback plat-forms for therapy of mental disorders
US20180284735A1 (en) 2016-05-09 2018-10-04 StrongForce IoT Portfolio 2016, LLC Methods and systems for industrial internet of things data collection in a network sensitive upstream oil and gas environment
KR102307976B1 (ko) 2016-05-10 2021-09-30 구글 엘엘씨 디바이스들 상의 보이스 어시스턴트에 대한 구현들
RU2632144C1 (ru) 2016-05-12 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Компьютерный способ создания интерфейса рекомендации контента
US10534635B2 (en) 2016-05-13 2020-01-14 Sap Se Personal digital assistant
US10217464B2 (en) 2016-05-13 2019-02-26 Koninklijke Philips N.V. Vocabulary generation system
US20170329466A1 (en) 2016-05-13 2017-11-16 Sap Se User interface application and digital assistant
KR20170128820A (ko) 2016-05-16 2017-11-24 엘지전자 주식회사 이동단말기 및 그 제어방법
US11416212B2 (en) 2016-05-17 2022-08-16 Microsoft Technology Licensing, Llc Context-based user agent
US10417566B2 (en) 2016-05-22 2019-09-17 Microsoft Technology Licensing, Llc Self-learning technique for training a PDA component and a simulated user component
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US10832665B2 (en) 2016-05-27 2020-11-10 Centurylink Intellectual Property Llc Internet of things (IoT) human interface apparatus, system, and method
US9922655B2 (en) 2016-05-31 2018-03-20 International Business Machines Corporation System, method, and recording medium for controlling dialogue interruptions by a speech output device
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
WO2017212206A1 (en) 2016-06-06 2017-12-14 Cirrus Logic International Semiconductor Limited Voice user interface
CN107480161A (zh) 2016-06-08 2017-12-15 苹果公司 用于媒体探究的智能自动化助理
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10127926B2 (en) 2016-06-10 2018-11-13 Google Llc Securely executing voice actions with speaker identification and authentication input types
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10592601B2 (en) 2016-06-10 2020-03-17 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
AU2017100486C4 (en) 2016-06-11 2019-09-05 Apple Inc. Intelligent device arbitration and control
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
CN107491468B (zh) 2016-06-11 2021-06-01 苹果公司 具有数字助理的应用集成
US10117046B2 (en) 2016-06-12 2018-10-30 Apple Inc. Discrete location classification
DK201670608A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
WO2017218194A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interfaces for retrieving contextually relevant media content
US10257314B2 (en) 2016-06-22 2019-04-09 Microsoft Technology Licensing, Llc End-to-end user experiences with a digital assistant
US10332513B1 (en) 2016-06-27 2019-06-25 Amazon Technologies, Inc. Voice enablement and disablement of speech processing functionality
US11232136B2 (en) 2016-06-27 2022-01-25 Google Llc Contextual voice search suggestions
US10271093B1 (en) 2016-06-27 2019-04-23 Amazon Technologies, Inc. Systems and methods for routing content to an associated output device
US10200397B2 (en) 2016-06-28 2019-02-05 Microsoft Technology Licensing, Llc Robust matching for identity screening
US9990176B1 (en) * 2016-06-28 2018-06-05 Amazon Technologies, Inc. Latency reduction for content playback
US10783151B1 (en) 2016-06-29 2020-09-22 Amazon Technologies, Inc. Popularity-based content feed management system
GB201611380D0 (en) 2016-06-30 2016-08-17 Microsoft Technology Licensing Llc Artificial neural network with side input for language modelling and prediction
US20180007096A1 (en) 2016-06-30 2018-01-04 Microsoft Technology Licensing, Llc Weighted data center reselection
US10491598B2 (en) 2016-06-30 2019-11-26 Amazon Technologies, Inc. Multi-factor authentication to access services
US9934777B1 (en) 2016-07-01 2018-04-03 Amazon Technologies, Inc. Customized speech processing language models
US11244687B2 (en) 2016-07-06 2022-02-08 Pcms Holdings, Inc. System and method for customizing smart home speech interfaces using personalized speech profiles
US10489516B2 (en) 2016-07-13 2019-11-26 Fujitsu Social Science Laboratory Limited Speech recognition and translation terminal, method and non-transitory computer readable medium
US10467114B2 (en) 2016-07-14 2019-11-05 International Business Machines Corporation Hierarchical data processor tester
US11211168B2 (en) 2016-07-19 2021-12-28 Northwestern University Systems and methods for identifying content based on user interactions
US9825801B1 (en) 2016-07-22 2017-11-21 Spotify Ab Systems and methods for using seektables to stream media items
US10303772B2 (en) 2016-07-29 2019-05-28 International Business Machines Corporation Measuring mutual understanding in human-computer conversation
US10387461B2 (en) 2016-08-16 2019-08-20 Google Llc Techniques for suggesting electronic messages based on user activity and other context
US10326869B2 (en) 2016-08-19 2019-06-18 Amazon Technologies, Inc. Enabling voice control of telephone device
US20180060312A1 (en) 2016-08-23 2018-03-01 Microsoft Technology Licensing, Llc Providing ideogram translation
US10110272B2 (en) 2016-08-24 2018-10-23 Centurylink Intellectual Property Llc Wearable gesture control device and method
US10313779B2 (en) 2016-08-26 2019-06-04 Bragi GmbH Voice assistant system for wireless earpieces
US11200026B2 (en) 2016-08-26 2021-12-14 Bragi GmbH Wireless earpiece with a passive virtual assistant
US10192551B2 (en) 2016-08-30 2019-01-29 Google Llc Using textual input and user state information to generate reply content to present in response to the textual input
US10217462B2 (en) 2016-08-31 2019-02-26 Microsoft Technology Licensing, Llc Automating natural language task/dialog authoring by leveraging existing content
US10546066B2 (en) 2016-08-31 2020-01-28 Microsoft Technology Licensing, Llc End-to-end learning of dialogue agents for information access
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
CN107809372A (zh) 2016-09-08 2018-03-16 阿里巴巴集团控股有限公司 活动提醒消息的生成方法、活动提醒方法及装置
WO2017193515A1 (zh) 2016-09-09 2017-11-16 华为技术有限公司 用于推送通知的方法、装置、移动终端及图形用户界面
US10403273B2 (en) 2016-09-09 2019-09-03 Oath Inc. Method and system for facilitating a guided dialog between a user and a conversational agent
US20180089166A1 (en) 2016-09-23 2018-03-29 Apple Inc. User interface for providing text prediction
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10846618B2 (en) 2016-09-23 2020-11-24 Google Llc Smart replies using an on-device model
US9786271B1 (en) 2016-09-28 2017-10-10 International Business Machines Corporation Voice pattern coding sequence and cataloging voice matching system
US20180088969A1 (en) 2016-09-28 2018-03-29 Lenovo (Singapore) Pte. Ltd. Method and device for presenting instructional content
KR20200035476A (ko) 2016-10-03 2020-04-03 구글 엘엘씨 디바이스 토폴로지에 기초한 음성 명령 프로세싱
US10304463B2 (en) 2016-10-03 2019-05-28 Google Llc Multi-user personalization at a voice interface device
JP2018063537A (ja) 2016-10-12 2018-04-19 株式会社東芝 ホームネットワーク、電子機器、処理装置および表示方法
US10372814B2 (en) 2016-10-18 2019-08-06 International Business Machines Corporation Methods and system for fast, adaptive correction of misspells
US11392598B2 (en) 2016-10-19 2022-07-19 Ebay Inc. Applying a quantitative range for qualitative terms
CN106484139B (zh) 2016-10-19 2019-01-29 北京新美互通科技有限公司 表情符号推荐方法及装置
US10678502B2 (en) 2016-10-20 2020-06-09 Qualcomm Incorporated Systems and methods for in-ear control of remote devices
US10950230B2 (en) 2016-10-28 2021-03-16 Panasonic Intellectual Property Corporation Of America Information processing device and information processing method
US10469665B1 (en) 2016-11-01 2019-11-05 Amazon Technologies, Inc. Workflow based communications routing
US20180121432A1 (en) 2016-11-02 2018-05-03 Microsoft Technology Licensing, Llc Digital assistant integration with music services
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
US10776714B2 (en) 2016-11-04 2020-09-15 Google Llc Constructing and processing computational graphs for dynamically structured machine learning models
US10777201B2 (en) 2016-11-04 2020-09-15 Microsoft Technology Licensing, Llc Voice enabled bot platform
US10127908B1 (en) 2016-11-11 2018-11-13 Amazon Technologies, Inc. Connected accessory for a voice-controlled device
US10515632B2 (en) 2016-11-15 2019-12-24 At&T Intellectual Property I, L.P. Asynchronous virtual assistant
KR102501714B1 (ko) 2016-11-16 2023-02-21 삼성전자주식회사 사용자의 음성 입력에 대한 답변 메시지를 제공하는 디바이스 및 방법
US10170110B2 (en) 2016-11-17 2019-01-01 Robert Bosch Gmbh System and method for ranking of hybrid speech recognition results with neural networks
US10332523B2 (en) 2016-11-18 2019-06-25 Google Llc Virtual assistant identification of nearby computing devices
US10230841B2 (en) 2016-11-22 2019-03-12 Apple Inc. Intelligent digital assistant for declining an incoming call
WO2018098301A1 (en) 2016-11-23 2018-05-31 Abraham Joseph Kinney Detection of authorized user presence and handling of unauthenticated monitoring system commands
US10242443B2 (en) 2016-11-23 2019-03-26 General Electric Company Deep learning medical systems and methods for medical procedures
US10331791B2 (en) 2016-11-23 2019-06-25 Amazon Technologies, Inc. Service for developing dialog-driven applications
KR20180060328A (ko) 2016-11-28 2018-06-07 삼성전자주식회사 멀티 모달 입력을 처리하는 전자 장치, 멀티 모달 입력을 처리하는 방법 및 멀티 모달 입력을 처리하는 서버
GB201620235D0 (en) 2016-11-29 2017-01-11 Microsoft Technology Licensing Llc Neural network data entry system
US9934785B1 (en) * 2016-11-30 2018-04-03 Spotify Ab Identification of taste attributes from an audio signal
US11144825B2 (en) 2016-12-01 2021-10-12 University Of Southern California Interpretable deep learning framework for mining and predictive modeling of health care data
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US20180158548A1 (en) 2016-12-07 2018-06-07 B9 Systems, LLC Data processing systems for scheduling work shifts, such as physician work shifts
JP6795387B2 (ja) 2016-12-14 2020-12-02 パナソニック株式会社 音声対話装置、音声対話方法、音声対話プログラム及びロボット
US10521245B2 (en) 2016-12-18 2019-12-31 Oracle International Corporation Method and system for recursive plug-in application recipe generation
JP2018101828A (ja) 2016-12-19 2018-06-28 船井電機株式会社 制御装置
US11237696B2 (en) 2016-12-19 2022-02-01 Google Llc Smart assist for repeated actions
US10216832B2 (en) 2016-12-19 2019-02-26 Interactions Llc Underspecification of intents in a natural language processing system
US10032451B1 (en) 2016-12-20 2018-07-24 Amazon Technologies, Inc. User recognition for speech processing systems
JP2018101242A (ja) 2016-12-20 2018-06-28 株式会社リコー 情報処理装置、情報処理方法及びプログラム。
WO2018118442A1 (en) 2016-12-21 2018-06-28 Google Llc Acoustic-to-word neural network speech recognizer
US20190182176A1 (en) 2016-12-21 2019-06-13 Facebook, Inc. User Authentication with Voiceprints on Online Social Networks
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10186266B1 (en) 2016-12-28 2019-01-22 Amazon Technologies, Inc. Message playback using a shared device
US10210864B2 (en) 2016-12-29 2019-02-19 T-Mobile Usa, Inc. Voice command for communication between related devices
JP6725008B2 (ja) 2016-12-29 2020-07-15 ヤマハ株式会社 コマンドデータ送信装置、ローカルエリア装置、機器制御システム、コマンドデータ送信装置の制御方法、ローカルエリア装置の制御方法、機器制御方法、及びプログラム
US10268680B2 (en) 2016-12-30 2019-04-23 Google Llc Context-aware human-to-computer dialog
US10115396B2 (en) 2017-01-03 2018-10-30 Logitech Europe, S.A. Content streaming system
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US9747083B1 (en) * 2017-01-23 2017-08-29 Essential Products, Inc. Home device application programming interface
US9980183B1 (en) 2017-01-24 2018-05-22 Essential Products, Inc. Media and communications in a connected environment
US10146768B2 (en) 2017-01-25 2018-12-04 Google Llc Automatic suggested responses to images received in messages using language model
EP3358471A1 (en) 2017-02-04 2018-08-08 Tata Consultancy Services Limited Systems and methods for assessing quality of input text using recurrent neural networks
US11100384B2 (en) 2017-02-14 2021-08-24 Microsoft Technology Licensing, Llc Intelligent device user interactions
US10467510B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Intelligent assistant
CN106776581B (zh) 2017-02-21 2020-01-24 浙江工商大学 基于深度学习的主观性文本情感分析方法
CN108509119B (zh) 2017-02-28 2023-06-02 三星电子株式会社 用于功能执行的电子设备的操作方法和支持其的电子设备
KR20180101063A (ko) 2017-03-03 2018-09-12 삼성전자주식회사 사용자 입력을 처리하는 전자 장치 및 그 방법
DE102017203570A1 (de) 2017-03-06 2018-09-06 Volkswagen Aktiengesellschaft Verfahren und vorrichtung zur darstellung von empfohlenen bedienhandlungen eines vorschlagssystems und interaktion mit dem vorschlagssystem
US10096319B1 (en) 2017-03-13 2018-10-09 Amazon Technologies, Inc. Voice-based determination of physical and emotional characteristics of users
US10074371B1 (en) 2017-03-14 2018-09-11 Amazon Technologies, Inc. Voice control of remote device by disabling wakeword detection
US20180268106A1 (en) 2017-03-17 2018-09-20 Orbit Healthcare, Inc. System and method for connecting patients, medical service providers, and medical insurance providers
US20180270343A1 (en) 2017-03-20 2018-09-20 Motorola Mobility Llc Enabling event-driven voice trigger phrase on an electronic device
WO2018175806A1 (en) 2017-03-24 2018-09-27 Intel IP Corporation Techniques to enable physical downlink control channel communications
US10547729B2 (en) 2017-03-27 2020-01-28 Samsung Electronics Co., Ltd. Electronic device and method of executing function of electronic device
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US20180285056A1 (en) 2017-03-28 2018-10-04 Microsoft Technology Licensing, Llc Accessory human interface device
US10468032B2 (en) 2017-04-10 2019-11-05 Intel Corporation Method and system of speaker recognition using context aware confidence modeling
US10013979B1 (en) 2017-04-17 2018-07-03 Essential Products, Inc. Expanding a set of commands to control devices in an environment
KR102414122B1 (ko) 2017-04-19 2022-06-29 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 동작 방법
KR102298947B1 (ko) 2017-04-28 2021-09-08 삼성전자주식회사 음성 데이터 처리 방법 및 이를 지원하는 전자 장치
US10282416B2 (en) 2017-05-05 2019-05-07 Apple Inc. Unified framework for text conversion and prediction
US10902855B2 (en) 2017-05-08 2021-01-26 Motorola Mobility Llc Methods and devices for negotiating performance of control operations with acoustic signals
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US20180330714A1 (en) 2017-05-12 2018-11-15 Apple Inc. Machine learned systems
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US10366692B1 (en) 2017-05-15 2019-07-30 Amazon Technologies, Inc. Accessory for a voice-controlled device
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
EP3459076B1 (en) 2017-05-16 2020-07-22 Apple Inc. Far-field extension for digital assistant services
DK179559B1 (en) 2017-05-16 2019-02-15 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION
US10395659B2 (en) 2017-05-16 2019-08-27 Apple Inc. Providing an auditory-based interface of a digital assistant
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
EP3445058B1 (en) 2017-05-16 2021-07-07 Apple Inc. Methods and interfaces for home media control
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US11048995B2 (en) 2017-05-16 2021-06-29 Google Llc Delayed responses by computational assistant
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) * 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10170137B2 (en) 2017-05-18 2019-01-01 International Business Machines Corporation Voice signal component forecaster
US20180336439A1 (en) 2017-05-18 2018-11-22 Intel Corporation Novelty detection using discriminator of generative adversarial network
US10521512B2 (en) 2017-05-26 2019-12-31 Bose Corporation Dynamic text-to-speech response from a smart speaker
US20180349447A1 (en) 2017-06-02 2018-12-06 Apple Inc. Methods and systems for customizing suggestions using user-specific information
US20180349472A1 (en) 2017-06-02 2018-12-06 Apple Inc. Methods and systems for providing query suggestions
US20180349346A1 (en) 2017-06-02 2018-12-06 Apple Inc. Lattice-based techniques for providing spelling corrections
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10410635B2 (en) 2017-06-09 2019-09-10 Soundhound, Inc. Dual mode speech recognition
US20180357073A1 (en) 2017-06-13 2018-12-13 Motorola Solutions, Inc Method, device, and system for electronic digital assistant for natural language detection of a user status change and corresponding modification of a user interface
US10990930B2 (en) 2017-06-19 2021-04-27 International Business Machines Corporation Autonomous event generator
US10453451B2 (en) 2017-07-05 2019-10-22 Comcast Cable Communications, Llc Methods and systems for using voice to control multiple devices
US20190013025A1 (en) 2017-07-10 2019-01-10 Google Inc. Providing an ambient assist mode for computing devices
US20190019077A1 (en) 2017-07-17 2019-01-17 Cisco Technology, Inc. Automatic configuration of cognitive assistant
CN107450800A (zh) 2017-07-25 2017-12-08 维沃移动通信有限公司 一种任务设置方法、移动终端及计算机可读存储介质
CN107545262B (zh) 2017-07-31 2020-11-06 华为技术有限公司 一种在自然场景图像中检测文本的方法及装置
US10467552B2 (en) 2017-07-31 2019-11-05 Pearson Education, Inc. System and method for automatic content provisioning
US10783149B2 (en) 2017-08-02 2020-09-22 Microsoft Technology Licensing, Llc Dynamic productivity content rendering based upon user interaction patterns
US11294530B2 (en) 2017-08-07 2022-04-05 Microsoft Technology Licensing, Llc Displaying a translucent version of a user interface element
US11972327B2 (en) 2017-08-25 2024-04-30 Samsung Electronics Co., Ltd. Method for automating actions for an electronic device
KR102426704B1 (ko) 2017-08-28 2022-07-29 삼성전자주식회사 음성 인식 서비스 운용 방법 및 이를 지원하는 전자 장치
JP6929168B2 (ja) 2017-08-31 2021-09-01 キヤノン株式会社 音声制御デバイス、印刷装置、それらの制御方法およびプログラム
US10796687B2 (en) 2017-09-06 2020-10-06 Amazon Technologies, Inc. Voice-activated selective memory for voice-capturing devices
US11004444B2 (en) 2017-09-08 2021-05-11 Amazon Technologies, Inc. Systems and methods for enhancing user experience by communicating transient errors
US10438594B2 (en) 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10719507B2 (en) 2017-09-21 2020-07-21 SayMosaic Inc. System and method for natural language processing
CN107786730B (zh) 2017-09-27 2021-06-25 珠海市魅族科技有限公司 一种任务管理方法及终端
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US11450314B2 (en) 2017-10-03 2022-09-20 Google Llc Voice user interface shortcuts for an assistant application
WO2019073390A1 (en) 2017-10-09 2019-04-18 Voice Life Inc. RECEIVING DEVICE FOR RECEIVING WIRELESS ENERGY RECEPTION
KR102421255B1 (ko) 2017-10-17 2022-07-18 삼성전자주식회사 음성 신호를 제어하기 위한 전자 장치 및 방법
WO2019079015A1 (en) 2017-10-21 2019-04-25 Apple Inc. PERSONAL DOMAIN FOR A VIRTUAL ASSISTANT SYSTEM ON A COLLECTIVE DEVICE
US10680978B2 (en) 2017-10-23 2020-06-09 Microsoft Technology Licensing, Llc Generating recommended responses based on historical message data
CN107623616A (zh) 2017-10-27 2018-01-23 成都密为科技有限公司 智能网关和具有智能网关的取电开关
US20190129615A1 (en) 2017-10-30 2019-05-02 Futurewei Technologies, Inc. Apparatus and method for simplifying repeat performance of a prior performed task based on a context of a mobile device
US10152966B1 (en) 2017-10-31 2018-12-11 Comcast Cable Communications, Llc Preventing unwanted activation of a hands free device
US9967381B1 (en) 2017-11-03 2018-05-08 Republic Wireless, Inc. Virtual telephony assistant
US10685648B2 (en) 2017-11-08 2020-06-16 International Business Machines Corporation Sensor fusion model to enhance machine conversational awareness
US10515640B2 (en) 2017-11-08 2019-12-24 Intel Corporation Generating dialogue based on verification scores
CN107871500B (zh) 2017-11-16 2021-07-20 百度在线网络技术(北京)有限公司 一种播放多媒体的方法和装置
US10521946B1 (en) 2017-11-21 2019-12-31 Amazon Technologies, Inc. Processing speech to drive animations on avatars
US10013654B1 (en) 2017-11-29 2018-07-03 OJO Labs, Inc. Cooperatively operating a network of supervised learning processors to concurrently distribute supervised learning processor training and provide predictive responses to input data
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
JP6962158B2 (ja) 2017-12-01 2021-11-05 ヤマハ株式会社 機器制御システム、機器制御方法、及びプログラム
CN107919123B (zh) 2017-12-07 2022-06-03 北京小米移动软件有限公司 多语音助手控制方法、装置及计算机可读存储介质
US10971173B2 (en) 2017-12-08 2021-04-06 Google Llc Signal processing coordination among digital voice assistant computing devices
EP3707607B1 (en) 2017-12-08 2023-02-01 Google LLC Signal processing coordination among digital voice assistant computing devices
US11182122B2 (en) 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
US10664540B2 (en) 2017-12-15 2020-05-26 Intuit Inc. Domain specific natural language understanding of customer intent in self-help
US11409816B2 (en) 2017-12-19 2022-08-09 Motorola Solutions, Inc. Methods and systems for determining an action to be taken in response to a user query as a function of pre-query context information
US11221669B2 (en) 2017-12-20 2022-01-11 Microsoft Technology Licensing, Llc Non-verbal engagement of a virtual assistant
US10685225B2 (en) 2017-12-29 2020-06-16 Wipro Limited Method and system for detecting text in digital engineering drawings
US10170135B1 (en) 2017-12-29 2019-01-01 Intel Corporation Audio gait detection and identification
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10524040B2 (en) 2018-01-29 2019-12-31 Apple Inc. Headphones with orientation sensors
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US11195000B2 (en) 2018-02-13 2021-12-07 FLIR Belgium BVBA Swipe gesture detection systems and methods
US11145298B2 (en) 2018-02-13 2021-10-12 Roku, Inc. Trigger word detection with multiple digital assistants
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10674014B2 (en) 2018-03-15 2020-06-02 Ways Investments, LLC System, method, and apparatus for providing help
US11044364B2 (en) 2018-03-15 2021-06-22 Ways Investments, LLC System, method, and apparatus for providing help
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
CN108647681B (zh) 2018-05-08 2019-06-14 重庆邮电大学 一种带有文本方向校正的英文文本检测方法
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
AU2019100576C4 (en) 2018-06-03 2020-01-30 Apple Inc. Accelerated task performance
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10818296B2 (en) 2018-06-21 2020-10-27 Intel Corporation Method and system of robust speaker recognition activation
US11983807B2 (en) 2018-07-10 2024-05-14 Microsoft Technology Licensing, Llc Automatically generating motions of an avatar
US20200019609A1 (en) 2018-07-13 2020-01-16 Asapp, Inc. Suggesting a response to a message by selecting a template using a neural network
GB2576016B (en) 2018-08-01 2021-06-23 Arm Ip Ltd Voice assistant devices
KR20230145521A (ko) 2018-08-23 2023-10-17 구글 엘엘씨 멀티-어시스턴트 환경의 특성에 따른 어시스턴트 응답성 규정하기
TWI683306B (zh) 2018-08-28 2020-01-21 仁寶電腦工業股份有限公司 多語音助理之控制方法
US20200092625A1 (en) 2018-09-13 2020-03-19 Hayes S. Raffle Smart device cover
US10958301B2 (en) 2018-09-18 2021-03-23 Roku, Inc. Audio synchronization of a dumb speaker and a smart speaker using a spread code
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US20200127988A1 (en) 2018-10-19 2020-04-23 Apple Inc. Media intercom over a secure device to device communication channel
KR102608470B1 (ko) 2018-10-23 2023-12-01 삼성전자주식회사 데이터 인식 장치 및 방법과 트레이닝 장치 및 방법
US11196863B2 (en) 2018-10-24 2021-12-07 Verint Americas Inc. Method and system for virtual assistant conversations
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11238850B2 (en) 2018-10-31 2022-02-01 Walmart Apollo, Llc Systems and methods for e-commerce API orchestration using natural language interfaces
CN110288077B (zh) 2018-11-14 2022-12-16 腾讯科技(深圳)有限公司 一种基于人工智能的合成说话表情的方法和相关装置
TWI682325B (zh) 2018-11-20 2020-01-11 新唐科技股份有限公司 辨識系統及辨識方法
US20200175566A1 (en) 2018-11-30 2020-06-04 International Business Machines Corporation Adding and prioritizing items in a product list
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US10602215B1 (en) * 2018-12-17 2020-03-24 Rovi Guides, Inc. Systems and methods for recording relevant portions of a media asset
CN109657629B (zh) 2018-12-24 2021-12-07 科大讯飞股份有限公司 一种文本行提取方法及装置
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US10937425B2 (en) 2019-01-10 2021-03-02 Dell Products L.P. Systems and methods for selectively activating and interacting with a speech recognition service during application runtime without interrupting execution of the application
US20200279641A1 (en) 2019-03-01 2020-09-03 Cambia Health Solutions, Inc. Systems and methods for management of clinical queues
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11258865B2 (en) 2019-03-28 2022-02-22 Servicenow, Inc. Automated integration with cloud-based services
CN110135411B (zh) 2019-04-30 2021-09-10 北京邮电大学 名片识别方法和装置
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US20200379640A1 (en) 2019-05-29 2020-12-03 Apple Inc. User-realistic path synthesis via multi-task generative adversarial networks for continuous path keyboard input
DK180649B1 (en) 2019-05-31 2021-11-11 Apple Inc Voice assistant discoverability through on-device targeting and personalization
US11887585B2 (en) 2019-05-31 2024-01-30 Apple Inc. Global re-ranker
US20200380389A1 (en) 2019-05-31 2020-12-03 Apple Inc. Sentiment and intent analysis for customizing suggestions using user-specific information
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
CN110647274A (zh) 2019-08-15 2020-01-03 华为技术有限公司 一种界面显示方法及设备
CN110531860B (zh) 2019-09-02 2020-07-24 腾讯科技(深圳)有限公司 一种基于人工智能的动画形象驱动方法和装置
CN110825469A (zh) 2019-09-18 2020-02-21 华为技术有限公司 语音助手显示方法及装置
CN110598671B (zh) 2019-09-23 2022-09-27 腾讯科技(深圳)有限公司 基于文本的虚拟形象行为控制方法、设备和介质
US10757499B1 (en) 2019-09-25 2020-08-25 Sonos, Inc. Systems and methods for controlling playback and other features of a wireless headphone

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006202127A (ja) * 2005-01-21 2006-08-03 Pioneer Electronic Corp 推奨情報提示装置及び推奨情報提示方法等
JP2009545833A (ja) * 2006-07-31 2009-12-24 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. 楽曲をブラウズするための方法及びシステム
US20110106536A1 (en) * 2009-10-29 2011-05-05 Rovi Technologies Corporation Systems and methods for simulating dialog between a user and media equipment device
JP2015527683A (ja) * 2012-09-19 2015-09-17 アップル インコーポレイテッド 音声ベースのメディア検索

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022049710A1 (ja) * 2020-09-03 2022-03-10 日本電気株式会社 サービス提供装置、サービス提供システム、サービス提供方法及び非一時的なコンピュータ可読媒体

Also Published As

Publication number Publication date
KR20190025745A (ko) 2019-03-11
JP6671497B2 (ja) 2020-03-25
EP3427166A1 (en) 2019-01-16
US20210165826A1 (en) 2021-06-03
AU2018220034A1 (en) 2018-12-06
EP3929771A1 (en) 2021-12-29
EP4280078A3 (en) 2024-02-14
US10909171B2 (en) 2021-02-02
KR20180135884A (ko) 2018-12-21
US10303715B2 (en) 2019-05-28
WO2018212885A1 (en) 2018-11-22
CN109635130A (zh) 2019-04-16
US20180336275A1 (en) 2018-11-22
US11675829B2 (en) 2023-06-13
US20190197053A1 (en) 2019-06-27
CN110168526A (zh) 2019-08-23
US20180336894A1 (en) 2018-11-22
US20230259550A1 (en) 2023-08-17
AU2018220034B2 (en) 2019-04-18
KR101983003B1 (ko) 2019-05-27
EP4280078A2 (en) 2023-11-22

Similar Documents

Publication Publication Date Title
JP6671497B2 (ja) メディア探索用のインテリジェント自動アシスタント
CN112567323B (zh) 用户活动快捷方式建议
US11069347B2 (en) Intelligent automated assistant for media exploration
US10395659B2 (en) Providing an auditory-based interface of a digital assistant
KR102030784B1 (ko) 디지털 어시스턴트와의 애플리케이션 통합
KR102242877B1 (ko) 지능형 자동화 어시스턴트
CN108604449B (zh) 说话者识别
KR102211675B1 (ko) 디지털 어시스턴트의 동기화 및 태스크 위임
DK201970511A1 (en) Voice identification in digital assistant systems
KR20210013373A (ko) 디지털 어시스턴트의 동기화 및 태스크 위임
KR20220031737A (ko) 지능형 디바이스 중재 및 제어
JP2018507483A (ja) 仮想アシスタントの継続性
CN113392239A (zh) 用于媒体回放的虚拟助理
KR102120605B1 (ko) 개인 정보의 프라이버시를 유지하기 위한 자연 언어 입력의 클라이언트 서버 프로세싱
DK179465B1 (en) INTELLIGENT AUTOMATED ASSISTANT FOR MEDIA EXPLORATION
CN107463311B (zh) 智能列表读取
CN112017672B (zh) 数字助理系统中的声音识别
CN117170536A (zh) 数字助理与系统界面的集成

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190305

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180822

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180822

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180822

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190701

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200303

R150 Certificate of patent or registration of utility model

Ref document number: 6671497

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250