JP2020160281A - 端末装置、端末装置の制御方法、およびプログラム - Google Patents
端末装置、端末装置の制御方法、およびプログラム Download PDFInfo
- Publication number
- JP2020160281A JP2020160281A JP2019059873A JP2019059873A JP2020160281A JP 2020160281 A JP2020160281 A JP 2020160281A JP 2019059873 A JP2019059873 A JP 2019059873A JP 2019059873 A JP2019059873 A JP 2019059873A JP 2020160281 A JP2020160281 A JP 2020160281A
- Authority
- JP
- Japan
- Prior art keywords
- terminal device
- unit
- preprocessing
- server
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 13
- 238000004891 communication Methods 0.000 claims abstract description 75
- 238000007781 pre-processing Methods 0.000 claims abstract description 65
- 238000012545 processing Methods 0.000 description 30
- 230000006870 function Effects 0.000 description 17
- 239000008186 active pharmaceutical agent Substances 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000003058 natural language processing Methods 0.000 description 7
- 230000001052 transient effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000036039 immunity Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
図1は、端末装置100を含むサービスシステム1の構成図である。サービスシステム1は、例えば、端末装置100と、複数のサーバ装置200−1、200−2、200−3、200−4…とを備える。符号の末尾のハイフン以下数字は、サービスを区別するための識別子であるものとする。いずれのサーバ装置であるかを区別しない場合、単にサーバ装置200と称する場合がある。図1では3つのサーバ装置200を示しているが、サーバ装置200の数は2つ以下であってもよいし、3つ以上であってもよい。それぞれのサーバ装置200は、互いに異なるサービスの提供者が運営するものである。従って、本発明におけるサービスは、互いに異なる提供者により実現されるものである。任意の主体(法人、団体、個人等)がサービスの提供者となり得る。
図2は、第1実施形態に係る端末装置100の構成と、車両Mに搭載された機器とを示す図である。車両Mには、例えば、一以上のマイク10と、表示・操作装置20と、スピーカユニット30と、車載通信装置60と、端末装置100とが搭載される。また、スマートフォンなどの汎用通信装置70が車室内に持ち込まれ、通信装置として使用される場合がある。これらの装置は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図2に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。
図2に戻り、端末装置100は、例えば、第1管理部110と、第2管理部120と、通信制御部150−1〜150−3と、ペアリングアプリ実行部152とを備える。第1管理部110は、前処理部112−1、112−2と、表示制御部116と、音声制御部118とを備える。第2管理部120は、前処理部122−3と、表示制御部126と、音声制御部128とを備える。いずれの通信制御部であるか区別しない場合、単に通信制御部150と称する。3つの通信制御部150を示しているのは、図1におけるサーバ装置200の数に対応させた一例に過ぎず、通信制御部150の数は、2つであってもよいし、4つ以上であってもよい。図2に示すソフトウェア配置は説明のために簡易に示しており、実際には、例えば、通信制御部150と車載通信装置60の間に管理部110が介在してもよいように、任意に改変することができる。
図5は、サーバ装置200の構成の一例を示す図である。ここでは、端末装置100からネットワークNWまでの物理的な通信についての説明を省略する。
以下、端末装置100において前処理部により実行される前処理について説明する。図6は、前処理部により実行される処理について説明するための図である。マイク10により収音された音声は、例えば、前処理部112−1と、少なくとも通信制御部150−3とに供給される。なお、図6に示す例はあくまで一例であり、マイク10により収音された音声は、各前処理部に並行して供給されてよい。
20 表示・操作装置
30 スピーカユニット
60 車載通信装置
70 汎用通信装置
100 端末装置
110 第1管理部
112−1、112−2、122−3 前処理部
116、126 表示制御部
118、128 音声制御部
120 第2管理部
150−1、150−2、150−3 通信制御部
152 ペアリングアプリ実行部
200−1、200−2、200−3 サーバ装置
Claims (7)
- 車両に搭載される端末装置であって、
マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行う二以上の前処理部と、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信する通信制御部と、
を備える端末装置。 - 前記通信制御部は、前記複数のサーバ装置のうち第1のサーバ装置に対しては、少なくとも、前記前処理部による前処理が行われなかった音声を送信する、
請求項1記載の端末装置。 - 前記二以上の前処理部のうち、前記第1のサーバ装置以外のサーバ装置に応じた前処理を行う前処理部を実現する第1のOSと、
前記前処理部による前処理が行われなかった音声を取り出すための第2のOSと、
を搭載している、請求項2記載の端末装置。 - 前記二以上の前処理部のうち一部または全部は、シーケンシャルに処理を行う、
請求項1から3のうちいずれか1項記載の端末装置。 - 前記複数のサーバ装置のそれぞれに対応した複数の前記通信制御部を備える、
請求項1から4のうちいずれか1項記載の端末装置。 - 車両に搭載される端末装置の制御方法であって、
前記端末装置が備える二以上の前処理部のそれぞれが、マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行い、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信する、
端末装置の制御方法。 - 車両に搭載される端末装置により実行されるプログラムであって、
前記端末装置に、
マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行わせ、
前記複数のサーバ装置のそれぞれに応じた前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信させる、
プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019059873A JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
CN202010215503.6A CN111755007B (zh) | 2019-03-27 | 2020-03-24 | 终端装置、终端装置的控制方法及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019059873A JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020160281A true JP2020160281A (ja) | 2020-10-01 |
JP7278830B2 JP7278830B2 (ja) | 2023-05-22 |
Family
ID=72643185
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019059873A Active JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7278830B2 (ja) |
CN (1) | CN111755007B (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000148185A (ja) * | 1998-11-13 | 2000-05-26 | Matsushita Electric Ind Co Ltd | 認識装置及び認識方法 |
JP2005003997A (ja) * | 2003-06-12 | 2005-01-06 | Toyota Motor Corp | 音声認識装置および音声認識方法ならびに車両 |
JP2011232619A (ja) * | 2010-04-28 | 2011-11-17 | Ntt Docomo Inc | 音声認識装置および音声認識方法 |
JP2013007764A (ja) * | 2011-06-22 | 2013-01-10 | Clarion Co Ltd | 音声データ中継装置、端末装置、音声データ中継方法、および音声認識システム |
JP2016126330A (ja) * | 2014-12-26 | 2016-07-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 音声認識装置及び音声認識方法 |
JP2016151608A (ja) * | 2015-02-16 | 2016-08-22 | アルパイン株式会社 | 電子装置、情報端末システム、音声認識機能の起動プログラムおよび音声認識機能の起動方法 |
JP2019028160A (ja) * | 2017-07-27 | 2019-02-21 | アルパイン株式会社 | 電子装置および情報端末システム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001333265A (ja) * | 2000-05-19 | 2001-11-30 | Hideo Nakajima | 電子すかしを埋め込んだ電子くじと通信網を使用した電子くじの運用方法。 |
US9449602B2 (en) * | 2013-12-03 | 2016-09-20 | Google Inc. | Dual uplink pre-processing paths for machine and human listening |
JP6595324B2 (ja) * | 2015-12-04 | 2019-10-23 | クラリオン株式会社 | 車載装置、音声認識システム |
US20180075842A1 (en) * | 2016-09-14 | 2018-03-15 | GM Global Technology Operations LLC | Remote speech recognition at a vehicle |
US10304463B2 (en) * | 2016-10-03 | 2019-05-28 | Google Llc | Multi-user personalization at a voice interface device |
-
2019
- 2019-03-27 JP JP2019059873A patent/JP7278830B2/ja active Active
-
2020
- 2020-03-24 CN CN202010215503.6A patent/CN111755007B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000148185A (ja) * | 1998-11-13 | 2000-05-26 | Matsushita Electric Ind Co Ltd | 認識装置及び認識方法 |
JP2005003997A (ja) * | 2003-06-12 | 2005-01-06 | Toyota Motor Corp | 音声認識装置および音声認識方法ならびに車両 |
JP2011232619A (ja) * | 2010-04-28 | 2011-11-17 | Ntt Docomo Inc | 音声認識装置および音声認識方法 |
JP2013007764A (ja) * | 2011-06-22 | 2013-01-10 | Clarion Co Ltd | 音声データ中継装置、端末装置、音声データ中継方法、および音声認識システム |
JP2016126330A (ja) * | 2014-12-26 | 2016-07-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 音声認識装置及び音声認識方法 |
JP2016151608A (ja) * | 2015-02-16 | 2016-08-22 | アルパイン株式会社 | 電子装置、情報端末システム、音声認識機能の起動プログラムおよび音声認識機能の起動方法 |
JP2019028160A (ja) * | 2017-07-27 | 2019-02-21 | アルパイン株式会社 | 電子装置および情報端末システム |
Also Published As
Publication number | Publication date |
---|---|
CN111755007B (zh) | 2024-05-07 |
CN111755007A (zh) | 2020-10-09 |
JP7278830B2 (ja) | 2023-05-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105189179B (zh) | 用于主动对话控制的方法和装置 | |
JP2009300537A (ja) | 音声作動システム、音声作動方法および車載装置 | |
JP7198122B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7278830B2 (ja) | 端末装置、端末装置の制御方法、およびプログラム | |
JP2021096717A (ja) | 情報提供装置、情報提供方法、およびプログラム | |
CN111667824A (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
JP2020144264A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020131805A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020162003A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
CN111667823B (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
US20200317215A1 (en) | Agent system, agent server, method of controlling agent server, and storage medium | |
JP7245695B2 (ja) | サーバ装置、情報提供システム、および情報提供方法 | |
JP2020160133A (ja) | エージェントシステム、エージェントシステムの制御方法、およびプログラム | |
CN111661065A (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
JP7169921B2 (ja) | エージェント装置、エージェントシステム、エージェント装置の制御方法、およびプログラム | |
JP2020148583A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020142721A (ja) | エージェントシステム、車載機器の制御方法、及びプログラム | |
JP2020157853A (ja) | 車載エージェントシステム、車載エージェントシステムの制御方法、およびプログラム | |
JP7274901B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
CN111559317B (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
JP7280074B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2024067241A (ja) | 車載装置およびシステム | |
CN117864047A (zh) | 一种基于声源定位与表情识别的显示屏控制方法及系统 | |
JP2021099735A (ja) | エージェント装置 | |
JP2020160132A (ja) | エージェント装置、エージェント装置の制御方法、プログラム、エージェントサーバ、およびエージェントサーバの制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221219 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230418 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7278830 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |