JP6799573B2 - 端末ブラケット及びファーフィールド音声対話システム - Google Patents

端末ブラケット及びファーフィールド音声対話システム Download PDF

Info

Publication number
JP6799573B2
JP6799573B2 JP2018223359A JP2018223359A JP6799573B2 JP 6799573 B2 JP6799573 B2 JP 6799573B2 JP 2018223359 A JP2018223359 A JP 2018223359A JP 2018223359 A JP2018223359 A JP 2018223359A JP 6799573 B2 JP6799573 B2 JP 6799573B2
Authority
JP
Japan
Prior art keywords
terminal
voice
information
farfield
bracket
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018223359A
Other languages
English (en)
Other versions
JP2019159307A (ja
Inventor
ホン スー
ホン スー
ポン リー
ポン リー
リーフォン ヂャオ
リーフォン ヂャオ
Original Assignee
バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド
バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド, バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド filed Critical バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド
Publication of JP2019159307A publication Critical patent/JP2019159307A/ja
Application granted granted Critical
Publication of JP6799573B2 publication Critical patent/JP6799573B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/04Supports for telephone transmitters or receivers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/26Devices for calling a subscriber
    • H04M1/27Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/271Devices whereby a plurality of signals may be stored simultaneously controlled by voice recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L2015/088Word spotting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/74Details of telephonic subscriber devices with voice recognition means

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)
  • Circuit For Audible Band Transducer (AREA)

Description

本出願はコンピュータ技術分野に関し、具体的に端末ブラケット及びファーフィールド音声対話システムに関する。
スマート端末(例えばスマートフォン)の益々の普及に従い、人間によるスマート端末の使用時間も益々長くなり、任意の時間、任意の場所にもスマート端末を使用するニーズがある。サイズに制限があるため、スマート端末は、ニアフィールド音声対話機能をサポートするように、一般的にニアフィールド集音装置(例えば、マイク)とニアフィールド再生装置(例えば、携帯電話のスピーカ)とを内蔵する。即ち、ユーザがスマート端末に近い場合に、言い出しだけで応答結果を得られる。このような対話手段は、人間にとって最も自然で簡単な対話手段であり、両手を効率的に解放し、且つ最大の程度で処理の難易度を低減させることができる。
ところが、ユーザがスマート端末から離れた場合に、スマート端末からファーフィールド音声対話機能をサポートできないため、ユーザが一般的にスマート端末に対して音声制御を実行することができない。
本出願の実施形態は、端末ブラケット及びファーフィールド音声対話システムを提出した。
本願に係る第一の側面によると、本出願の実施形態は、端末ブラケットであって、ファーフィールド集音装置と音声解析装置とが備えられ、ファーフィールド集音装置は、ユーザから送信された音声情報を受信し、音声情報を音声解析装置へ送信し、音声解析装置は、音声情報を解析して、音声情報に所定のウェークアップワードが含まれているか否かを確定し、所定のウェークアップワードが含まれていれば、音声情報を端末ブラケットと通信可能に接続された端末へ送信する端末ブラケットを提供する。
一部の実施形態において、端末ブラケットにファーフィールド再生装置が更に備えられ、ファーフィールド再生装置は、端末から受信された音声再生情報を再生する。
一部の実施形態において、ファーフィールド再生装置には、音声再生情報のパワーを増幅するためのパワーアンプが備えられる。
一部の実施形態において、端末ブラケットにブルートゥースモジュールが更に備えられ、音声情報に所定のウェークアップワードが含まれていれば、端末ブラケットのブルートゥースモジュールは、端末のブルートゥースモジュールと端末ブラケットのブルートゥースモジュールとの間にブルートゥース同期指向接続リンクを確立するように、端末のブルートゥースモジュールへ通信リンク確立指令を送信する。
一部の実施形態において、端末ブラケットは、ブルートゥース同期指向接続リンクにより音声情報を端末へ送信し、ブルートゥース同期指向接続リンクにより端末から音声再生情報を受信する。
本願に係る第二の側面によると、本出願の実施形態は、ファーフィールド音声対話システムであって、端末と第一の側面の実施形態の何れか一つに記載の端末ブラケットとが備えられ、端末と端末ブラケットは通信可能に接続される、ファーフィールド音声対話システムを提供する。
一部の実施形態において、端末には、制御装置と実行装置とが備えられ、制御装置は、音声情報に対して解析処理を行って音声情報に対応する制御情報を確定し、制御情報を実行装置へ送信し、実行装置は、制御情報に対応する処理を実行する。
一部の実施形態において、ファーフィールド音声対話システムにクラウドサーバが備えられ、クラウドサーバは、端末から送信された音声情報を受信し、音声情報に対して解析処理を行って音声情報に対応する制御情報を確定し、制御情報が含まれた制御指令を端末へ送信して、端末の実行装置に制御情報に対応する処理を実行させる。
一部の実施形態において、制御情報に音声再生情報が含まれている場合に、端末は音声再生情報を端末ブラケットへ送信し、端末ブラケットのファーフィールド再生装置は音声再生情報を再生する。
一部の実施形態において、端末にニアフィールド集音装置とニアフィールド再生装置とが備えられ、端末と端末ブラケットとの間に通信リンクが確立された後に、端末はニアフィールド集音装置とニアフィールド再生装置の動作状態をオフ状態へ切り替える。
本出願の実施形態により提供された端末ブラケット及びファーフィールド音声対話システムにおいて、端末ブラケットは、ユーザから送信された音声情報をファーフィールド集音装置により受信して音声情報を音声解析装置へ送信し、その後に、音声解析装置は音声情報を解析して音声情報に所定のウェークアップワードが含まれているか否かを確定し、所定のウェークアップワードが含まれている場合に、音声情報を端末ブラケットと通信可能に接続された端末へ送信する。つまり、ファーフィールド集音機能をサポートする端末ブラケットにより、ユーザから送信された音声情報を受信することにより、端末に対するファーフィールド音声制御の実現に寄与することができる。
以下の図面を参照してなされた非制限的実施形態に対する詳細的な説明により、本発明の他の特徴、目的及び利点がより明らかになる。
本出願により提供される端末ブラケットの一つの実施例の構成の模式図である。 本出願により提供される端末ブラケットの他の実施例の構成の模式図である。 本出願により提供されるファーフィールド音声対話システムの一つの実施例の構成の模式図である。 本出願により提供されるファーフィールド音声対話システムの一つの応用シーンにおけるインタラクションフローチャートである。 本出願により提供されるファーフィールド音声対話システムの他の応用シーンにおけるインタラクションフローチャートである。
以下、図面及び実施形態を参照しながら本発明をより詳細に説明する。なお、ここで説明する具体的な実施形態は、当該発明を説明するためのものに過ぎず、当該発明を限定するものではないことを理解すべきである。また、説明の便宜上、図面には発明に関連する部分のみを示す。
なお、矛盾のない限り、本願の実施形態と実施形態における特徴を相互に組み合せることができるものとする。以下、図面及び実施形態を参照しながら本願を詳細に説明する。
図1を参照する。図1は、本出願により提供される端末ブラケットの一つの実施例の構成の模式図を示す。本実施例における端末ブラケットには、ファーフィールド集音装置11と音声解析装置12とが備えられても良い。
本実施例において、ファーフィールド集音装置11は、まずユーザから送信された音声情報を受信し、その後に音声情報を音声解析装置12へ送信することができる。音声解析装置12は、音声情報を解析して音声情報に所定のウェークアップワードが含まれているか否かを確定し、音声情報に所定のウェークアップワードが含まれていると確定した場合に、音声情報を端末ブラケットと通信可能に接続された端末へ送信することができる。
従来の端末(例えば、スマートフォン)は、端末サイズに制限があるため、その内部に一般的にニアフィールド集音装置(例えば、マイク)だけ設置することによりニアフィールド(例えば、1メートル以内)集音機能をサポートする。ところが、ユーザが端末から離れた場合に(例えば、5メートル以内)、端末のニアフィールド集音装置により、ユーザから送信された音声情報を一般的に受信できない。ここで、端末ブラケットにおけるファーフィールド集音装置11により、ユーザから送信された音声情報を受信して、端末に通信可能に接続された端末ブラケットから音声情報を取得させることにより、端末に対するファーフィールド音声制御を実現することができる。
本実施例において、ファーフィールド集音装置11は、例えばマイクアレイ(Microphone Array)のような、遠距離ユーザから送信される音声情報を受信可能な各種の装置であっても良い。なお、マイクアレイは、一定の数且つ一定の空間構成の音響学センサ(一般的にマイクである)で構成され、サウンドフィールドの空間特徴にサンプリングして処理するためのシステムであっても良い。実際の応用において、線形、環形、球形マイクアレイは、原理的には大きい差がないが、空間構成が異なるため、形状の異なるマイクアレイが認識可能な空間の範囲が異なることになる。例えば、音源の位置決めについて、線形のアレイは一元の情報を持ち180度しか認識できず、環形のアレイは平面のアレイであるため、二元の情報を持ち360度を認識でき、球形のアレイは立体的な三元の空間のアレイであるため、三元の情報を持ち360度の方位角と180度のピッチ角を認識できる。ここでは、位置の異なるユーザが端末に対するファーフィールド音声制御を実行可能にするために、一般的にファーフィールド集音装置11として環形のマイクアレイ又は球形のマイクアレイを採用する。また、マイクアレイにおけるマイクの数が多いほど、ビームで区分できる空間が細かくなり、ノイズの多い環境において受信される音声情報の品質が高くなる。ところが、マイクアレイにおけるマイクの数が多いほど、コストも高くなる。従って、ファーフィールド音声対話の距離と合わせて適合なマイクの数を確定することができる。
また、後処理で音声情報に対する認識の正確度を向上するために、ファーフィールド集音装置11は、幾つかの処理アルゴリズム(例えば、ノイズ除去アルゴリズム、エコー、残響などを除去する音響学アルゴリズムなど)を採用して音声情報に対して処理を行うこともできる。例えば、ファーフィールド集音装置11は、ビーム形成の方法に基づいて、マイクアレイにおける複数のマイクで受信された音声情報に対して重み付け加算を行って、目標方向にピックアップビームを形成すし、他の方向からの反射音を減衰することにより、一連のクリーンな音声情報を取得することができる。
本実施例において、音声解析装置12は、常用の音声解析方法(例えば、音声認識方法、語義解析方法)を採用して、ファーフィールド集音装置11から受信された音声情報を解析することができる。例えば、音声解析装置12は、まず音声認識技術(Automatic Speech Recognition、ASR)を利用して音声情報に対して音声認識を行って、音声情報における語句内容を書面言語形式の語句内容へ変換し、そして単語分割技術(例えば完全分割手法)を利用して書面言語形式の語句内容を単語に分割し、最後に分割された単語に所定のウェークアップワード(例えば、「AA」、「どうも」など)が含まれているか否かを確定し、音声情報に所定のウェークアップワードが含まれたと確定された場合に、音声情報を端末ブラケットと通信可能に接続された端末へ送信して端末に対するファーフィールド音声制御を実現することができる。音声情報に所定のウェークアップワードが含まれていないと確定された場合に、フローを終了させる。つまり、ユーザは、端末に対してファーフィールド音声制御を実行しようとする場合に、所定のウェークアップワードと端末に対して制御する情報とを同時に言い出す必要がある。
本実施例において、端末と端末ブラケットとの間に複数種の手段で通信可能な接続を確立することができる。
例示として、端末ブラケットに有線ポート装置を設置することができる。有線ポート装置は、ランケーブルに接続して有線ネットワーク接続を実現することができる。なお、有線ポート装置に有線インターフェース、例えばRJ45(Registered Jack 45、コネクタ)におけるコンセントが含まれても良い。これにより、ランケーブルのジョイントが当該コンセントに挿入されると、有線ネットワークの接続を実現することができる。理解すべきなのは、このような有線接続手段は、プラグアンドプレイが可能になり、複雑なネットワークの配置手順が必要なくなる。且つ、一般的にネットオフが発生することがなく、ネットワークの運行が安定である。
他の例示として、端末ブラケットには、Wi−Fi(登録商標)(WIreless−Fidelity、無線ローカルエリアネットワーク)チップが設置されても良い。Wi−Fiチップは端末ブラケットを無線ローカルエリアネットワークに接続するようにトリガすることができる。これにより、無線ローカルエリアネットワークの信号のカバー範囲内に位置すれば、Wi−Fiチップは無線信号を受信できるため、端末ブラケットの設置場所がランケーブルに関わらずに任意に設置可能になり、ユーザによる使用の便利性を向上した。
他の例示として、端末ブラケットには、ブルートゥースモジュールが配置されても良い。ブルートゥースモジュールは、端末と端末ブラケットとの間にニアフィールド無線通信可能な接続を確立するようにトリガすることができる。つまり、端末ブラケットと端末との間にブルートゥース(登録商標)で情報を伝送することができる。これにより、端末ブラケットがネットワークに接続することに依存せず、端末ブラケットと端末との間の対話手段を豊かにすることができる。
説明すべきなのは、端末は一般的に端末ブラケットに固定的に設置される。なお、端末ブラケットの形状に制限がなく、端末を適当な箇所に固定的に設置すれば良い。
本出願の実施例により提供された端末ブラケットにおいて、端末ブラケットがファーフィールド集音装置によりユーザから送信された音声情報を受信して音声情報を音声解析装置へ送信し、その後に音声解析装置が音声情報を解析して音声情報に所定のウェークアップワードが含まれているか否かを確定し、所定のウェークアップワードが含まれている場合に、音声情報を端末ブラケットと通信可能に接続された端末へ送信する。つまり、ファーフィールド集音機能をサポートする端末ブラケットによりユーザから送信された音声情報を受信することにより、端末に対するファーフィールド音声制御の実現に寄与することができる。
続いて図2を参照する。図2は、本出願により提供される端末ブラケットの他の実施例の構成の模式図を示す。本実施例における端末ブラケットは、ファーフィールド集音装置11と、音声解析装置12と、ファーフィールド再生装置13と、ブルートゥースモジュール14とを備えても良い。
本実施例において、ファーフィールド集音装置11は、まずユーザから送信された音声情報を受信し、そして音声情報を音声解析装置12へ送信することができる。音声解析装置12は、音声情報を解析して音声情報に所定のウェークアップワードが含まれているか否かを確定し、音声情報に所定のウェークアップワードが含まれていると確定した場合に、端末ブラケットのブルートゥースモジュール14により端末のブルートゥースモジュールへ通信リンク確立指令を送信して端末のブルートゥースモジュールと端末ブラケットのブルートゥースモジュール14との間にブルートゥースSCO(Synchronous Connection Oriented、同期指向接続)リンクを確立することができる。端末ブラケットは、ブルートゥースSCOリンクにより音声情報を端末へ送信することができる。同時に、端末ブラケットは、ファーフィールド再生装置13を更に備えても良い。ファーフィールド再生装置13は、ブルートゥースSCOリンクにより端末から音声再生情報を受信し、端末から受信された音声再生情報を再生することができる。
従来の端末(例えば、スマートフォン)は、端末サイズに制限があるため、その内部に一般的にニアフィールド再生装置(例えば、携帯電話スピーカ)だけ設置することによりニアフィールド(例えば、1メートル以内)音声再生機能をサポートする。ところが、ユーザが端末から離れた場合に(例えば、5メートル以内)、端末のニアフィールド再生装置から再生された音声再生情報は一般的にユーザに良好に受信されない。ここで、端末ブラケットにおけるファーフィールド再生装置13により音声再生情報を再生可能であるため、音声再生情報がユーザに良好に受信される。
本実施例において、ファーフィールド再生装置13は、異なる場所に位置するユーザは何れも音声再生情報を受信できるように、方位の異なる複数のスピーカからなることができる。一般的に、ファーフィールド再生装置13に音声再生情報のパワーを増幅するためのパワーアンプが設置される。これにより、ファーフィールド再生装置13により再生される音声再生情報のボリュームを増大することにより、端末から離れたユーザも音声再生情報を良く受信可能である。
本実施例において、端末ブラケットは、一般的に、NFC(Near Field Communication、近距離無線通信)機能、ブルートゥース機能又はBLE(Bluetooth Low Energy、ブルートゥースローエネルギー)機能をサポートする。例えば、NFC機能をサポートする端末がNFC機能をサポートする端末ブラケットに設置された場合に、端末は予め実装された特定のアプリにより端末ブラケットとブルートゥースとBLE接続を確立することができる。ユーザから端末ブラケットに所定のウェークアップワードを言い出した場合に、端末ブラケットのブルートゥースモジュール14は、端末のブルートゥースモジュールへ通信リンク確立指令を送信して、端末のブルートゥースモジュールと端末ブラケットのブルートゥースモジュール14との間にブルートゥースSCOリンクを確立するようにトリガすることができる。なお、ブルートゥースは、デバイスによる短距離通信をサポートする無線技術である。ブルートゥース技術は、ペア毎のデバイス同士の間にブルートゥース通信を行なう場合に、当該ペアのデバイス同士の間の通信を実現するように、必ず一方のデバイスがマスタデバイス、他方のデバイスがスレーブデバイスであると規定される。一般的に、マスタデバイスは探索してペアリングを行なう。マスタデバイスとスレーブデバイスの間にブルートゥース物理リンクを確立することにより、マスタデバイスとスレーブデバイスの間にブルートゥース物理リンクで情報を送受信する。一般的に、ブルートゥース物理リンクには、二種類のSCOリンクとACL(Asynchronous Connection Less、非同期無接続)リンクとが含まれても良い。SCOリンクは、主に同期音声の伝送に用いられ、ACLリンクは、主にパケットデータの伝送に用いられる。
図2からわかるように、図1に対応する実施例と比べて、本実施例における端末ブラケットには、ファーフィールド再生装置13とブルートゥースモジュール14とが追加される。これにより、本実施例に説明された端末ブラケットは、ファーフィールド集音機能だけではなく、ファーフィールド再生機能をサポートするため、端末ブラケットにファーフィールド音声対話機能をサポートさせ、端末ブラケットと端末との間にブルートゥースで通信可能な接続を確立でき、端末ブラケットと端末との間の対話手段を豊かにすることができる。
本出願の実施例は、ファーフィールド音声対話システムを更に提供する。当該ファーフィールド音声対話システムには、端末と前記の各実施例に説明された端末ブラケットとが備えられても良い。なお、端末は端末ブラケットと通信可能に接続することができる。例示として、ファーフィールド音声対話システムは、図3に示すようになる。図3は、本出願により提供されたファーフィールド音声対話システムの一つの実施例の構成の模式図を示す。
図3に示すように、ファーフィールド音声対話システムは端末2と端末ブラケット1とを備えても良い。端末2と端末ブラケット1とは通信可能に接続される。
本実施例において、端末2と端末ブラケット1は、複数の手段で通信可能な接続を確立することができる。有線ネットワーク接続、無線ネットワーク接続及びブルートゥース接続などを含むが、それらに限定されない。
本実施例において、端末ブラケット1から送信された音声情報を受信した後に、端末2は複数種の手段で音声情報に対応する制御情報を取得することができる。
一つの例示として、端末2には制御装置と実行装置とが備えられても良い。なお、制御装置は、まず音声情報に対して解析処理を行って、音声情報に対応する制御情報を確定し、そして制御情報を実行装置へ送信することができる。実行装置は、制御情報に対応する処理を実行することができる。例えば、端末2は、サンプル音声情報セットとサンプル音声情報毎に対応するサンプル制御情報とをローカルに予め記憶することができる。具体的に、制御装置は音声情報をサンプル音声情報セットにおける各サンプル音声情報と逐一にマッチングすることができる。サンプル音声情報セットにおいて何れか一つのサンプル音声情報が音声情報と同一又は類似すれば、当該サンプル音声情報が音声情報にマッチしたと確定する。この場合に、制御装置は、ローカルで当該サンプル音声情報に対応するサンプル制御情報を、音声情報に対応する制御情報として検索して実行装置へ送信することにより、実行装置に制御情報に対応する処理を実行させることができる。ここで、実行装置は複数であっても良い。例えば、音声情報が「AA、映画名が《XX》である映画を再生する」であれば、制御情報が映画《XX》のビデオ情報であっても良く、実行装置が端末2のディスプレーとスピーカであっても良い。なお、ディスプレーは、映画《XX》のビデオ情報における画面情報を表示しても良く、スピーカは、映画《XX》のビデオ情報におけるオーディオ情報を再生しても良い。
他の例示として、ファーフィールド音声対話システムは、クラウドサーバを更に備えても良い。クラウドサーバは、端末2と通信可能に接続される。なお、クラウドサーバは、端末2から送信された音声情報を受信し、音声情報に対して解析処理を行って音声情報に対応する制御情報を確定し、その後に制御情報が含まれている制御指令を端末へ送信して、端末の実行装置に制御情報に対応する処理を実行させることができる。例えば、クラウドサーバは、サンプル音声情報セットとサンプル音声情報毎に対応するサンプル制御情報とを予め記憶することができる。具体的に、クラウドサーバは、まず通信可能に接続されている端末2から音声情報を取得し、その後に音声情報をサンプル音声情報セットにおける各サンプル音声情報と逐一にマッチングすることができる。サンプル音声情報セットにおいて何れか一つのサンプル音声情報が音声情報と同一又は類似すれば、当該サンプル音声情報が音声情報にマッチしたと確定する。この場合に、クラウドサーバは、当該サンプル音声情報に対応するサンプル制御情報を、音声情報に対応する制御情報として検索し、通信可能に接続されている端末2へ送信して、端末2に制御情報に対応する処理を実行させることができる。
本実施例の一部の任意の実施形態において、制御情報に音声再生情報が含まれている場合に、端末2は、音声再生情報を端末ブラケット1へ送信することができる。端末ブラケット1のファーフィールド再生装置13は、音声再生情報を再生することができる。これにより、ファーフィールド再生装置13により音声再生情報を再生することにより、音声再生情報が遠距離ユーザに良く受信可能である。例えば、制御情報が映画《XX》のビデオ情報であれば、端末2は映画《XX》のビデオ情報におけるオーディオ情報を端末ブラケット1へ送信することができる。端末2のディスプレーは、映画《XX》のビデオ情報における画面情報を表示し、同時に端末ブラケット2は、映画《XX》のビデオ情報におけるオーディオ情報を再生する。
本実施例の一部の任意の実施形態において、端末2は、ニアフィールド集音装置とニアフィールド再生装置とを備えても良い。端末2と端末ブラケット1との間に通信リンクが確立された後に、端末2はニアフィールド集音装置とニアフィールド再生装置の動作状態をオフ状態へ切り替えることができる。
本出願の実施例は、ファーフィールド音声対話システムの一つの応用シーンを更に提供する。図4は、本出願により提供されたファーフィールド音声対話システムの一つの応用シーンにおけるインタラクションフロー400を示す。まず、401に示すように、ユーザはファーフィールド音声対話システムにおける端末ブラケット1に対して音声情報として「AA、明君へ電話ください」を言い出すことができる。この場合に、402に示すように、端末ブラケット1のファーフィールド集音装置は、ユーザから送信された音声情報を受信し、音声情報を端末ブラケット1の音声解析装置へ送信することができる。その後に、403に示すように、音声解析装置は、音声情報を解析して、音声情報に所定のウェークアップワードとして「AA」が含まれていると確定する。この場合に、404に示すように、端末ブラケット1のブルートゥースモジュールは、端末2のブルートゥースモジュールへ通信リンク確立指令を送信して、端末2のブルートゥースモジュールと端末ブラケット1のブルートゥースモジュールとの間にブルートゥースSCOリンクを確立するようにトリガすることができる。その後に405に示すように、端末ブラケット2は、ブルートゥースSCOリンクにより音声情報を端末2へ送信することができる。この場合に406に示すように、端末2は音声情報をクラウドサーバへ送信することができる。その後に407に示すように、クラウドサーバは音声情報に対して解析処理を行い、処理結果に基づいて明君の電話番号と電話をかける指令とを端末2へ返信することができる。最後に408に示すように、端末2は明君の電話へかけ、受信された音声再生情報をブルートゥースSCOリンクで端末ブラケット1へ送信して、端末ブラケット1のファーフィールド再生装置に音声再生情報を再生させることができる。
本出願の実施例は、ファーフィールド音声対話システムの他の応用シーンを更に提供する。図5は、本出願により提供されたファーフィールド音声対話システムの他の応用シーンにおけるインタラクションフロー500を示す。まず、501に示すように、ユーザは、ファーフィールド音声対話システムにおける端末ブラケット1に対して、音声情報として「AA、映画名が《XX》の映画を再生する」を言い出すことができる。この場合に502に示すように、端末ブラケット1のファーフィールド集音装置はユーザから送信された音声情報を受信し、音声情報を端末ブラケット1の音声解析装置へ送信することができる。その後に503に示すように、音声解析装置は、音声情報を解析して、音声情報に所定のウェークアップワードとして「AA」が含まれていると確定する。この場合に504に示すように、端末ブラケット1のブルートゥースモジュールは、端末2のブルートゥースモジュールへ通信リンク確立指令を送信して、端末2のブルートゥースモジュールと端末ブラケット1のブルートゥースモジュールとの間にブルートゥースSCOリンクを確立するようにトリガすることができる。その後に505に示すように、端末ブラケット2は、ブルートゥースSCOリンクにより音声情報を端末2へ送信することができる。この場合に506に示すように、端末2は、音声情報をクラウドサーバへ送信することができる。その後に507に示すように、クラウドサーバは、音声情報に対して解析処理を行い、処理結果に基づいて映画《XX》のビデオ情報と映画を再生する指令とを端末2へ返信することができる。最後に508に示すように、端末2はブルートゥースSCOリンクで映画《XX》のビデオ情報におけるオーディオ情報を端末ブラケット1へ送信することができる。端末2のディスプレーは、映画《XX》のビデオ情報における画面情報を表示し、同時に、端末ブラケット2のファーフィールド再生装置は、映画《XX》のビデオ情報におけるオーディオ情報を再生する。
本出願の実施例により提出されたファーフィールド音声対話システムにおいて、端末ブラケットのファーフィールド集音装置により、ユーザから送信された音声情報を受信して音声情報を端末へ送信し、端末により音声情報に対応する制御情報を取得して制御情報に対応する処理を実行する。つまり、ファーフィールド音声対話システムは、ファーフィールド音声対話機能をサポートする端末ブラケットにより端末に対するファーフィールド音声制御を実現させることができる。
以上の記載は、本発明の好適な実施形態及び運用される技術原理に対する説明にすぎない。本願発明の範囲は、前記技術的特徴による特定の組み合わせからなる発明に限定されることなく、前記発明の技術的思想から逸脱しない限り、前記技術的特徴又は均等の特徴による任意の組み合わせによって形成される他の発明も同様に含まれることは、当業者であれば明らかである。例えば、前記特徴と本願に開示された(それらに限定されない)類似の機能を具備する技術的特徴が互いに置換され得る発明も本願発明に含まれる。

Claims (9)

  1. 端末を支持するための端末ブラケットであって、
    前記端末ブラケットにファーフィールド集音装置と音声解析装置とブルートゥースモジュールとが備えられ、
    前記ファーフィールド集音装置は、マイクアレイからなり、遠距離ユーザから送信された音声情報を受信し、前記音声情報を音声解析装置へ送信し、
    前記音声解析装置は、前記音声情報を解析して、前記音声情報に所定のウェークアップワードが含まれているか否かを確定し、
    前記所定のウェークアップワードが含まれていれば、前記端末ブラケットのブルートゥースモジュールは、前記端末のブルートゥースモジュールと前記端末ブラケットのブルートゥースモジュールとの間にブルートゥース同期指向接続リンクを確立するように、前記端末のブルートゥースモジュールへ通信リンク確立指令を送信し、
    前記ブルートゥース同期指向接続リンクにより、前記音声情報を前記端末ブラケットと通信可能に接続された前記端末へ送信する端末ブラケット。
  2. 前記端末ブラケットにファーフィールド再生装置が更に備えられ、
    前記ファーフィールド再生装置は、前記端末から受信された音声再生情報を再生する、請求項1に記載の端末ブラケット。
  3. 前記ファーフィールド再生装置には、前記音声再生情報のパワーを増幅するためのパワーアンプが備えられる、請求項2に記載の端末ブラケット。
  4. 前記端末ブラケットは、さらに、前記ブルートゥース同期指向接続リンクにより前記端末から前記音声再生情報を受信する、請求項2または3に記載の端末ブラケット。
  5. ファーフィールド音声対話システムであって、
    端末と請求項1〜の何れか一つに記載の端末ブラケットとが備えられ、前記端末と前記端末ブラケットは通信可能に接続される、ファーフィールド音声対話システム。
  6. 前記端末には、制御装置と実行装置とが備えられ、
    前記制御装置は、前記音声情報に対して解析処理を行って前記音声情報に対応する制御情報を確定し、前記制御情報を前記実行装置へ送信し、
    前記実行装置は、前記制御情報に対応する処理を実行する、請求項に記載のファーフィールド音声対話システム。
  7. 前記ファーフィールド音声対話システムにクラウドサーバが備えられ、
    前記クラウドサーバは、前記端末から送信された音声情報を受信し、前記音声情報に対して解析処理を行って前記音声情報に対応する制御情報を確定し、前記制御情報が含まれた制御指令を前記端末へ送信して、前記端末の実行装置に前記制御情報に対応する処理を実行させる、請求項に記載のファーフィールド音声対話システム。
  8. 前記制御情報に音声再生情報が含まれている場合に、前記端末は前記音声再生情報を前記端末ブラケットへ送信し、前記端末ブラケットのファーフィールド再生装置は前記音声再生情報を再生する、請求項又はに記載のファーフィールド音声対話システム。
  9. 前記端末にニアフィールド集音装置とニアフィールド再生装置とが備えられ、前記端末と前記端末ブラケットとの間に通信リンクが確立された後に、前記端末は前記ニアフィールド集音装置と前記ニアフィールド再生装置の動作状態をオフ状態へ切り替える、請求項の何れか一つに記載のファーフィールド音声対話システム。
JP2018223359A 2018-03-14 2018-11-29 端末ブラケット及びファーフィールド音声対話システム Active JP6799573B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810210026.7 2018-03-14
CN201810210026.7A CN108428452B (zh) 2018-03-14 2018-03-14 终端支架和远场语音交互系统

Publications (2)

Publication Number Publication Date
JP2019159307A JP2019159307A (ja) 2019-09-19
JP6799573B2 true JP6799573B2 (ja) 2020-12-16

Family

ID=63158411

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018223359A Active JP6799573B2 (ja) 2018-03-14 2018-11-29 端末ブラケット及びファーフィールド音声対話システム

Country Status (3)

Country Link
US (1) US11315555B2 (ja)
JP (1) JP6799573B2 (ja)
CN (1) CN108428452B (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108831471B (zh) * 2018-09-03 2020-10-23 重庆与展微电子有限公司 一种语音安全保护方法、装置和路由终端
CN109087642A (zh) * 2018-09-25 2018-12-25 联想(北京)有限公司 一种底座及电子设备
CN109243444B (zh) * 2018-09-30 2021-06-01 百度在线网络技术(北京)有限公司 语音交互方法、设备及计算机可读存储介质
CN111081238B (zh) * 2018-10-22 2022-09-23 深圳市冠旭电子股份有限公司 一种蓝牙音箱语音交互控制方法、装置及系统
CN111292738A (zh) * 2018-12-07 2020-06-16 北京京东尚科信息技术有限公司 语音交互的控制方法及系统
CN109524004B (zh) * 2018-12-29 2022-03-08 思必驰科技股份有限公司 一种实现多路音频和数据的并行传输的方法、外接式的语音交互装置和系统
CN111899730A (zh) * 2019-05-06 2020-11-06 深圳市冠旭电子股份有限公司 语音控制方法、装置及计算机可读存储介质
CN110189753B (zh) * 2019-05-28 2022-01-28 北京百度网讯科技有限公司 蓝牙音箱及其控制方法、系统和存储介质
CN110177363B (zh) * 2019-05-28 2022-04-26 百度在线网络技术(北京)有限公司 蓝牙数据传输方法、装置、蓝牙芯片和存储介质
CN110278205B (zh) 2019-06-19 2021-05-28 百度在线网络技术(北京)有限公司 蓝牙音箱底座及其控制方法和系统
CN110491387B (zh) * 2019-08-23 2022-03-29 三星电子(中国)研发中心 一种基于多个终端的交互服务实现方法和系统
CN110675873B (zh) 2019-09-29 2023-02-07 百度在线网络技术(北京)有限公司 智能设备的数据处理方法、装置、设备及存储介质
KR102629796B1 (ko) * 2019-10-15 2024-01-26 삼성전자 주식회사 음성 인식의 향상을 지원하는 전자 장치
CN110544478A (zh) * 2019-11-04 2019-12-06 南京创维信息技术研究院有限公司 驾驶舱智能远场语音交互的系统及方法
US11917092B2 (en) * 2020-06-04 2024-02-27 Syntiant Systems and methods for detecting voice commands to generate a peer-to-peer communication link
CN113782015A (zh) * 2021-01-06 2021-12-10 北京沃东天骏信息技术有限公司 一种语音交互的方法和装置
US20220279305A1 (en) * 2021-02-26 2022-09-01 Apple Inc. Automatic acoustic handoff
CN113496704B (zh) * 2021-07-29 2024-05-24 康佳集团股份有限公司 一种远场语音控制方法、终端及计算机可读存储介质

Family Cites Families (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3849424B2 (ja) * 2000-12-04 2006-11-22 株式会社デンソー 携帯電話機およびハンズフリー装置を利用した通話システム
US7113610B1 (en) * 2002-09-10 2006-09-26 Microsoft Corporation Virtual sound source positioning
US9038217B2 (en) * 2005-12-19 2015-05-26 Stryker Corporation Patient support with improved control
DK2040548T3 (da) 2006-06-23 2012-08-13 Amicus Therapeutics Inc Fremgangsmåde til behandling af neurologiske forstyrrelser ved forøgelse af aktiviteten af beta-glucocerebrosidase
WO2009073806A2 (en) * 2007-12-05 2009-06-11 Johnson Controls Technology Company Vehicle user interface systems and methods
JP2011023790A (ja) * 2009-07-13 2011-02-03 Sony Ericsson Mobile Communications Ab クレードル装置、携帯機器の操作方法、及び携帯機器の操作プログラム
NZ587483A (en) * 2010-08-20 2012-12-21 Ind Res Ltd Holophonic speaker system with filters that are pre-configured based on acoustic transfer functions
CN102111192B (zh) * 2011-03-03 2014-09-10 中兴通讯股份有限公司 一种蓝牙连接方法及系统
CN102740014A (zh) * 2011-04-07 2012-10-17 青岛海信电器股份有限公司 语音控制电视机、电视系统及通过语音控制电视机的方法
US20130028443A1 (en) * 2011-07-28 2013-01-31 Apple Inc. Devices with enhanced audio
JP2013102373A (ja) * 2011-11-09 2013-05-23 Denso Corp ハンズフリー装置
CN102594988A (zh) * 2012-02-10 2012-07-18 深圳市中兴移动通信有限公司 一种实现蓝牙耳机语音识别自动配对连接的方法及系统
JP2013214924A (ja) 2012-04-04 2013-10-17 Sharp Corp 無線操作機、無線操作機の制御方法、およびプログラム
CN102647368A (zh) * 2012-04-27 2012-08-22 深圳市铭美科技有限公司 基于蓝牙的即时通信方法、及通信系统
US9497544B2 (en) * 2012-07-02 2016-11-15 Qualcomm Incorporated Systems and methods for surround sound echo reduction
CN102855872B (zh) * 2012-09-07 2015-08-05 深圳市信利康电子有限公司 基于终端及互联网语音交互的家电控制方法及系统
US8468023B1 (en) * 2012-10-01 2013-06-18 Google Inc. Handsfree device with countinuous keyword recognition
US9704486B2 (en) * 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
US9842489B2 (en) * 2013-02-14 2017-12-12 Google Llc Waking other devices for additional data
CN104469980B (zh) * 2014-11-21 2018-09-11 广东欧珀移动通信有限公司 蓝牙连接方法及蓝牙设备
JP6501217B2 (ja) * 2015-02-16 2019-04-17 アルパイン株式会社 情報端末システム
EP3295687B1 (en) * 2015-05-14 2019-03-13 Dolby Laboratories Licensing Corporation Generation and playback of near-field audio content
US10333904B2 (en) * 2015-08-08 2019-06-25 Peter J. Tormey Voice access and control
US10373612B2 (en) * 2016-03-21 2019-08-06 Amazon Technologies, Inc. Anchored speech detection and speech recognition
JP6226020B2 (ja) 2016-04-28 2017-11-08 ソニー株式会社 車載装置、情報処理方法および情報処理システム
KR102471499B1 (ko) * 2016-07-05 2022-11-28 삼성전자주식회사 영상처리장치, 영상처리장치의 구동방법 및 컴퓨터 판독가능 기록매체
US10528977B1 (en) * 2016-09-22 2020-01-07 Amazon Technologies, Inc. Generating dynamic audio content for delivery to audio devices
CN106611600A (zh) * 2016-12-02 2017-05-03 广州音书科技有限公司 用于远场拾音及移动充电的音频处理装置及系统
CN106714013A (zh) * 2016-12-31 2017-05-24 深圳市优必选科技有限公司 一种蓝牙音箱
US10096319B1 (en) * 2017-03-13 2018-10-09 Amazon Technologies, Inc. Voice-based determination of physical and emotional characteristics of users
US11183181B2 (en) * 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US10992795B2 (en) * 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
CN206908758U (zh) * 2017-05-13 2018-01-19 深圳市智凌无线科技有限公司 一种基于云平台的多媒体同步播放装置
US10789949B2 (en) * 2017-06-20 2020-09-29 Bose Corporation Audio device with wakeup word detection
US10656268B2 (en) * 2017-07-27 2020-05-19 On Semiconductor Connectivity Solutions, Inc. Acoustic spatial diagnostics for smart home management
US10482904B1 (en) * 2017-08-15 2019-11-19 Amazon Technologies, Inc. Context driven device arbitration
US11004444B2 (en) * 2017-09-08 2021-05-11 Amazon Technologies, Inc. Systems and methods for enhancing user experience by communicating transient errors
CN107623614B (zh) * 2017-09-19 2020-12-08 百度在线网络技术(北京)有限公司 用于推送信息的方法和装置
US10531157B1 (en) * 2017-09-21 2020-01-07 Amazon Technologies, Inc. Presentation and management of audio and visual content across devices
US10586534B1 (en) * 2017-09-27 2020-03-10 Amazon Technologies, Inc. Voice-controlled device control using acoustic echo cancellation statistics
US10621981B2 (en) * 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10466962B2 (en) * 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
CN107798114A (zh) * 2017-11-03 2018-03-13 胡渐佳 智能音箱语音广告嵌入播放方法
US10529353B2 (en) * 2017-12-11 2020-01-07 Intel Corporation Reliable reverberation estimation for improved automatic speech recognition in multi-device systems
US10540970B2 (en) * 2017-12-12 2020-01-21 Amazon Technologies, Inc. Architectures and topologies for vehicle-based, voice-controlled devices
JP2019110447A (ja) * 2017-12-19 2019-07-04 オンキヨー株式会社 電子機器、電子機器の制御方法、及び、電子機器の制御プログラム
US10367540B1 (en) * 2018-02-20 2019-07-30 Cypress Semiconductor Corporation System and methods for low power consumption by a wireless sensor device
CN112203902B (zh) * 2018-04-20 2024-02-06 日产自动车株式会社 设备控制装置以及控制设备的控制方法
KR20200006739A (ko) * 2018-07-11 2020-01-21 현대자동차주식회사 대화 시스템, 이를 포함하는 차량 및 대화 처리 방법
KR20200004054A (ko) * 2018-07-03 2020-01-13 현대자동차주식회사 대화 시스템 및 대화 처리 방법
JP2020060696A (ja) * 2018-10-10 2020-04-16 本田技研工業株式会社 コミュニケーション支援システム、コミュニケーション支援方法、およびプログラム
US10650819B2 (en) * 2018-10-15 2020-05-12 Midea Group Co., Ltd. System and method for providing portable natural language processing interface across multiple appliances
US10978046B2 (en) * 2018-10-15 2021-04-13 Midea Group Co., Ltd. System and method for customizing portable natural language processing interface for appliances
US20200143649A1 (en) * 2018-11-01 2020-05-07 Wahsega Labs LLC Distributed threat detection system
JP7084848B2 (ja) * 2018-11-06 2022-06-15 本田技研工業株式会社 制御装置、エージェント装置及びプログラム
JP2020077135A (ja) * 2018-11-06 2020-05-21 本田技研工業株式会社 制御装置、エージェント装置及びプログラム
JP7146585B2 (ja) * 2018-11-13 2022-10-04 本田技研工業株式会社 視線検出装置、プログラム、及び、視線検出方法
JP7165566B2 (ja) * 2018-11-14 2022-11-04 本田技研工業株式会社 制御装置、エージェント装置及びプログラム
JP7053432B2 (ja) * 2018-11-14 2022-04-12 本田技研工業株式会社 制御装置、エージェント装置及びプログラム
US11132048B2 (en) * 2019-12-27 2021-09-28 Intel Corporation User attention-based user experience

Also Published As

Publication number Publication date
CN108428452A (zh) 2018-08-21
CN108428452B (zh) 2019-12-13
JP2019159307A (ja) 2019-09-19
US20190287521A1 (en) 2019-09-19
US11315555B2 (en) 2022-04-26

Similar Documents

Publication Publication Date Title
JP6799573B2 (ja) 端末ブラケット及びファーフィールド音声対話システム
US10728656B1 (en) Audio device and audio processing method
CN106782589B (zh) 移动终端及其语音输入方法和装置
JP2019159306A (ja) ファーフィールド音声制御デバイス及びファーフィールド音声制御システム
JP6336968B2 (ja) 呼中における三次元サウンド圧縮及びオーバー・ザ・エア送信
US8363823B1 (en) Two microphone uplink communication and stereo audio playback on three wire headset assembly
US20190237074A1 (en) Speech processing method, device and computer readable storage medium
US20150208191A1 (en) Information processing system and storage medium
US20200168201A1 (en) Processing Method for Sound Effect of Recording and Mobile Terminal
JP2017538341A (ja) 音量調節方法、システム、デバイス及びプログラム
JP2015507572A (ja) 車両内の音を指向させるシステム、方法、及び装置
CN109473097B (zh) 一种智能语音设备及其控制方法
JP2014060647A (ja) 情報処理システム及びプログラム
WO2017135194A1 (ja) 情報処理装置、情報処理システム、制御方法およびプログラム
CN112804610A (zh) TWS蓝牙耳机控制PC上微软Teams的方法
US10602276B1 (en) Intelligent personal assistant
CN111081238B (zh) 一种蓝牙音箱语音交互控制方法、装置及系统
WO2020017518A1 (ja) 音声信号処理装置
CN112055122B (zh) 一种会议组件设备、会议设备及数据处理方法
US11032659B2 (en) Augmented reality for directional sound
CN111556406B (zh) 音频处理方法、音频处理装置及耳机
WO2021004067A1 (zh) 一种显示装置
KR102571518B1 (ko) 복수의 스피커를 포함하는 전자 장치
CN102780947A (zh) 降低手持式电子装置录音噪音的系统及其方法
US11646046B2 (en) Psychoacoustic enhancement based on audio source directivity

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200403

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200904

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201120

R150 Certificate of patent or registration of utility model

Ref document number: 6799573

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250