JP7250547B2 - エージェントシステム、情報処理装置、情報処理方法、およびプログラム - Google Patents
エージェントシステム、情報処理装置、情報処理方法、およびプログラム Download PDFInfo
- Publication number
- JP7250547B2 JP7250547B2 JP2019018971A JP2019018971A JP7250547B2 JP 7250547 B2 JP7250547 B2 JP 7250547B2 JP 2019018971 A JP2019018971 A JP 2019018971A JP 2019018971 A JP2019018971 A JP 2019018971A JP 7250547 B2 JP7250547 B2 JP 7250547B2
- Authority
- JP
- Japan
- Prior art keywords
- occupant
- unit
- utterance content
- information
- wording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 20
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000000034 method Methods 0.000 claims description 37
- 230000008569 process Effects 0.000 claims description 35
- 230000008859 change Effects 0.000 claims description 4
- 239000003795 chemical substances by application Substances 0.000 description 106
- 238000004891 communication Methods 0.000 description 38
- 238000012545 processing Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 20
- 230000006870 function Effects 0.000 description 14
- 238000000605 extraction Methods 0.000 description 9
- 239000000284 extract Substances 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 235000015927 pasta Nutrition 0.000 description 3
- 238000002485 combustion reaction Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000446 fuel Substances 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000011068 loading method Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 235000019640 taste Nutrition 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 235000021189 garnishes Nutrition 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9035—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/04—Segmentation; Word boundary detection
- G10L15/05—Word boundary detection
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/16—Speech classification or search using artificial neural networks
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/24—Speech recognition using non-acoustical features
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/227—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of the speaker; Human-factor methodology
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Navigation (AREA)
- User Interface Of Digital Computer (AREA)
- Traffic Control Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
(1):この発明の一態様に係るエージェントシステムは、移動体の乗員の発話内容を含む音声を認識する認識部と、前記乗員を含む画像を取得する取得部と、前記認識部により認識された前記乗員の発話内容に含まれる文言と、記憶部に記憶された、発話内容が不明確となる文言を含む不明確情報とを照合し、前記乗員の発話内容に不明確となる文言が含まれる場合に、前記取得部により取得された画像に基づいて前記乗員の視線方向である第1方向または前記乗員により指し示された第2方向を推定し、推定した前記第1方向または前記第2方向に存在する地物を推定する推定部と、を備え、前記認識部は、前記推定部により推定された地物に基づいて、前記乗員の発話内容を認識する、エージェントシステムである。
[システム構成]
図1は、第1の実施形態に係るエージェントシステム1の構成の一例を示す図である。第1の実施形態に係るエージェントシステム1は、例えば、車両(以下、車両M)に搭載されるエージェント装置100と、サーバ装置200とを備える。車両Mは、例えば、二輪や三輪、四輪等の車両である。これらの車両の駆動源は、ディーゼルエンジンやガソリンエンジン等の内燃機関、電動機、或いはこれらの組み合わせであってよい。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
図2は、第1の実施形態に係るエージェント装置100の構成の一例を示す図である。第1の実施形態に係るエージェント装置100は、例えば、エージェント側通信部102と、車室内カメラ104と、マイク(マイクロフォン)106と、スピーカ108と、表示部110と、入力部112と、車両センサ114と、GNSS(Global Navigation Satellite System)受信機116と、車外カメラ118と、エージェント側制御部120と、エージェント側記憶部150とを備える。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続されてよい。なお、図2に示すエージェント装置100の構成はあくまでも一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。
図5は、第1の実施形態に係るサーバ装置200の構成の一例を示す図である。第1の実施形態に係るサーバ装置200は、例えば、サーバ側通信部202と、サーバ側制御部210と、サーバ側記憶部230とを備える。
次に、推定部220の機能の詳細について説明する。図8は、推定部220の処理について説明するための図である。図8の例において、車両Mは、図示された車線L1、L2のうち、車線L1に沿って走行しているものとし、車両Mの周辺には物体OB1~OB4が存在するものとする。図9は、図8に示す走行の場面における車室内の様子を説明するための図である。図9の例において、乗員Pは、車両Mを運転しているものとする。
例えば、推定部220は、上述した位置データに加えて車両Mの方位や速度等の情報をエージェント装置100から取得し、取得した方や速度等の情報も含めて、第1方向または第2方向に対応する地物を推定してもよい。また、推定部220は、上述した第1方向および第2方向のそれぞれに対応する地物を推定してもよい。また、推定部220は、第1方向と第2方向とを合わせて1つの方向を設定し、設定した方向に対応する地物を推定してもよい。
次に、第1の実施形態に係るエージェントシステム1の処理(プロセス)の流れについてフローチャートを用いて説明する。なお、以下では、エージェント装置100の処理と、サーバ装置200との処理を分けて説明するものとする。また、以下に示す処理の流れは、所定のタイミングで繰り返し実行されてよい。所定のタイミングとは、例えば、音声データからエージェント装置を起動させる特定ワード(例えば、ウェイクアップワード)が抽出されたタイミングや、車両Mに搭載される各種スイッチのうち、エージェント装置100を起動させるスイッチの選択を受け付けたタイミング等である。
上述した第1の実施形態では、車両Mに搭載されたエージェント装置100と、サーバ装置200とが互いに異なる装置であるものとして説明したがこれに限定されるものではない。例えば、エージェント機能に係るサーバ装置200の構成要素は、エージェント装置100の構成要素に含まれてもよい。この場合、サーバ装置200は、エージェント装置100のエージェント側制御部120によって仮想的に実現される仮想マシンとして機能させてもよい。以下、サーバ装置200の構成要素を含むエージェント装置100Aを第2の実施形態として説明する。この場合、エージェント装置100Aが「エージェントシステム」の一例である。なお、第2の実施形態において、上述した第1の実施形態と同様の構成要素については、同様の符号を付するものとし、ここでの具体的な説明は省略する。
図15は、第2の実施形態に係るエージェント装置100Aの一連の処理の流れを示すフローチャートである。また、以下に示す処理の流れは、第1の実施形態における処理の流れと同様に所定のタイミングで繰り返し実行されてよい。まず、エージェント側制御部120の取得部122は、マイク106によって収集される乗員の音声データを取得する(ステップS200)。次に、発話区間抽出部214Aは、取得した音声データの発話区間を抽出する(ステップS202)。次に、音声認識部216Aは、抽出された発話区間の音声データを認識する(ステップS204)。
Claims (13)
- 移動体の乗員の発話内容を含む音声を認識する認識部と、
前記乗員を含む画像を取得する取得部と、
前記認識部により認識された前記乗員の発話内容に含まれる文言と、記憶部に記憶された、発話内容が不明確となる文言を含む不明確情報とを照合し、前記乗員の発話内容に不明確となる文言が含まれる場合に、前記取得部により取得された画像に基づいて前記乗員の視線方向である第1方向または前記乗員により指し示された第2方向を推定し、推定した前記第1方向または前記第2方向に存在する地物を前記不明確となる文言に対応する地物として推定する推定部と、を備え、
前記認識部は、前記乗員の発話内容に不明確となる文言が含まれる場合に、前記推定部により推定された地物と、前記発話内容のうち前記不明確となる文言以外の発話内容とに基づいて、前記乗員の発話内容の全体の意味を認識する、
エージェントシステム。 - 前記取得部は、複数のマイクのそれぞれにより収集された前記乗員の音声を取得し、
前記推定部は、前記取得部により取得された複数のマイクのそれぞれから取得される音声に基づいて、前記第1方向を推定する、
請求項1に記載のエージェントシステム。 - 前記推定部は、前記複数のマイクのそれぞれから取得される音声の強さのピーク値と、それぞれがピーク値となる時間差情報とに基づいて、前記第1方向を推定する、
請求項2に記載のエージェントシステム。 - 前記推定部は、前記移動体の位置データと前記第1方向または前記第2方向とに基づいて、前記記憶部に記憶された地図情報から前記第1方向または前記第2方向に存在する地物を推定する、
請求項1から3のうち何れか1項に記載のエージェントシステム。 - 前記推定部は、前記乗員の発話内容に含まれる特徴情報を取得し、取得した特徴情報に基づいて、前記第1方向または前記第2方向に存在する地物を推定する、
請求項1から4のうち何れか1項に記載のエージェントシステム。 - 前記推定部は、
前記第1方向または前記第2方向の変化がない状態が所定時間以上継続している場合に、前記第1方向または前記第2方向に存在する地物に関する情報を前記記憶部に記憶させ、
前記乗員の発話内容に不明確な文言が含まれる場合に、前記記憶部に記憶された前記地物に関する情報の中から前記不明確な文言に対応する地物を推定する、
請求項1から5のうち何れか1項に記載のエージェントシステム。 - 前記推定部は、前記第1方向または前記第2方向に存在する複数の地物候補が推定された場合に、前記記憶部に記憶された前記乗員に対するプロファイル情報に基づいて、前記複数の地物候補のうち一以上の地物を選択する、
請求項1から6のうち何れか1項に記載のエージェントシステム。 - 前記推定部は、前記記憶部に記憶されたプロファイル情報に基づいて、前記複数の地物候補の優先度を設定する、
請求項7に記載のエージェントシステム。 - 前記認識部により認識された発話内容に対応する情報を生成する生成部と、
前記生成部により生成された情報を前記乗員に提供する情報提供部と、を更に備える、
請求項1から8のうち何れか1項に記載のエージェントシステム。 - 移動体の乗員の発話内容を含む音声を認識する認識部と、
前記乗員を含む画像を取得する取得部と、
前記認識部により認識された前記乗員の発話内容に含まれる文言と、記憶部に記憶された、発話内容が不明確となる文言を含む不明確情報とを照合し、前記乗員の発話内容に不明確となる文言が含まれる場合に、前記取得部により取得された画像に基づいて前記乗員の視線方向である第1方向または前記乗員により指し示された第2方向を推定し、推定した前記第1方向または前記第2方向に存在する地物を前記不明確となる文言に対応する地物として推定する推定部と、を備え、
前記認識部は、前記乗員の発話内容に不明確となる文言が含まれる場合に、前記推定部により推定された地物と、前記発話内容のうち前記不明確となる文言以外の発話内容とに基づいて、前記乗員の発話内容の全体の意味を認識しつつ、前記移動体に搭載された機器または前記移動体を制御する、
情報処理装置。 - 前記情報処理装置は、前記移動体に搭載され、
前記認識部により認識された発話内容に対応する情報を生成する生成部と、
前記生成部により生成された情報を前記乗員に提供する情報提供部と、を更に備える、
請求項10に記載の情報処理装置。 - 単一または複数のコンピュータが、
移動体の乗員の発話内容を含む音声を認識するプロセスと、
前記乗員を含む画像を取得するプロセスと、
認識された前記乗員の発話内容に含まれる文言と、記憶部に記憶された発話内容が不明確となる文言を含む不明確情報とを照合するプロセスと、
前記乗員の発話内容に不明確となる文言が含まれる場合に、前記画像に基づいて前記乗員の視線方向である第1方向または前記乗員により指し示された第2方向を取得するプロセスと、
取得した前記第1方向または前記第2方向に存在する地物を前記不明確となる文言に対応する地物として推定するプロセスと、
前記乗員の発話内容に不明確となる文言が含まれる場合に、推定された地物と、前記発話内容のうち前記不明確となる文言以外の発話内容とに基づいて、前記乗員の発話内容の全体の意味を認識するプロセスとを有する、
情報処理方法。 - 単一または複数のコンピュータにインストールされ、
移動体の乗員の発話内容を含む音声を認識する処理と、
前記乗員を含む画像を取得する処理と、
認識された前記乗員の発話内容に含まれる文言と、記憶部に記憶された発話内容が不明確となる文言を含む不明確情報とを照合する処理と、
前記乗員の発話内容に不明確となる文言が含まれる場合に、前記画像に基づいて前記乗員の視線方向である第1方向または前記乗員により指し示された第2方向を取得する処理と、
取得された前記第1方向または前記第2方向に存在する地物を前記不明確となる文言に対応する地物として推定する処理と、
前記乗員の発話内容に不明確となる文言が含まれる場合に、推定された地物と、前記発話内容のうち前記不明確となる文言以外の発話内容とに基づいて、前記乗員の発話内容の全体の意味を認識する処理とを含む、
前記コンピュータに実行させるプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019018971A JP7250547B2 (ja) | 2019-02-05 | 2019-02-05 | エージェントシステム、情報処理装置、情報処理方法、およびプログラム |
CN202010079363.4A CN111599356B (zh) | 2019-02-05 | 2020-02-03 | 智能体系统、信息处理装置、信息处理方法及存储介质 |
US16/779,700 US11508368B2 (en) | 2019-02-05 | 2020-02-03 | Agent system, and, information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019018971A JP7250547B2 (ja) | 2019-02-05 | 2019-02-05 | エージェントシステム、情報処理装置、情報処理方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020126166A JP2020126166A (ja) | 2020-08-20 |
JP7250547B2 true JP7250547B2 (ja) | 2023-04-03 |
Family
ID=71837807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019018971A Active JP7250547B2 (ja) | 2019-02-05 | 2019-02-05 | エージェントシステム、情報処理装置、情報処理方法、およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11508368B2 (ja) |
JP (1) | JP7250547B2 (ja) |
CN (1) | CN111599356B (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11158335B1 (en) * | 2019-03-28 | 2021-10-26 | Amazon Technologies, Inc. | Audio beam selection |
CN113434620A (zh) * | 2021-06-25 | 2021-09-24 | 阿波罗智联(北京)科技有限公司 | 显示方法、装置、设备、存储介质以及计算机程序产品 |
JPWO2023144574A1 (ja) * | 2022-01-26 | 2023-08-03 | ||
JPWO2023144573A1 (ja) * | 2022-01-26 | 2023-08-03 | ||
WO2023163047A1 (ja) * | 2022-02-25 | 2023-08-31 | パイオニア株式会社 | 端末装置、情報提供システム、情報処理方法、プログラム及び記憶媒体 |
WO2024127692A1 (ja) * | 2022-12-12 | 2024-06-20 | パイオニア株式会社 | 情報処理装置、情報処理方法及び情報処理用プログラム |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003061184A (ja) | 2001-08-14 | 2003-02-28 | Sony Corp | 情報処理装置および方法、情報生成装置および方法、記録媒体、並びにプログラム |
JP2003106861A (ja) | 2001-09-28 | 2003-04-09 | Clarion Co Ltd | ナビゲーション装置及び方法 |
JP2013011483A (ja) | 2011-06-28 | 2013-01-17 | Denso Corp | 運転支援装置 |
JP2015041197A (ja) | 2013-08-21 | 2015-03-02 | 三菱電機株式会社 | 表示制御装置 |
JP2017122640A (ja) | 2016-01-07 | 2017-07-13 | トヨタ自動車株式会社 | 情報制御装置 |
JP2017156954A (ja) | 2016-03-01 | 2017-09-07 | トヨタ自動車株式会社 | 自動運転システム |
JP2017208056A (ja) | 2016-05-17 | 2017-11-24 | 山内 和博 | 自動運転車 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6363156B1 (en) * | 1998-11-18 | 2002-03-26 | Lear Automotive Dearborn, Inc. | Integrated communication system for a vehicle |
JP5014662B2 (ja) | 2006-04-13 | 2012-08-29 | アルパイン株式会社 | 車載用音声認識装置及び音声認識方法 |
JP4747949B2 (ja) * | 2006-05-25 | 2011-08-17 | ヤマハ株式会社 | 音声会議装置 |
JP2008058409A (ja) * | 2006-08-29 | 2008-03-13 | Aisin Aw Co Ltd | 音声認識方法及び音声認識装置 |
JP4976903B2 (ja) | 2007-04-05 | 2012-07-18 | 本田技研工業株式会社 | ロボット |
JP5452158B2 (ja) * | 2009-10-07 | 2014-03-26 | 株式会社日立製作所 | 音響監視システム、及び音声集音システム |
KR102206383B1 (ko) * | 2012-07-09 | 2021-01-22 | 엘지전자 주식회사 | 음성 인식 장치 및 그 방법 |
US9881610B2 (en) * | 2014-11-13 | 2018-01-30 | International Business Machines Corporation | Speech recognition system adaptation based on non-acoustic attributes and face selection based on mouth motion using pixel intensities |
CN107148614B (zh) * | 2014-12-02 | 2020-09-08 | 索尼公司 | 信息处理设备、信息处理方法和程序 |
JP2016181018A (ja) * | 2015-03-23 | 2016-10-13 | ソニー株式会社 | 情報処理システムおよび情報処理方法 |
JP7337699B2 (ja) * | 2017-03-23 | 2023-09-04 | ジョイソン セイフティ システムズ アクイジション エルエルシー | 口の画像を入力コマンドと相互に関連付けるシステム及び方法 |
DE102017213241A1 (de) * | 2017-08-01 | 2019-02-07 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren, Vorrichtung, mobiles Anwendergerät, Computerprogramm zur Steuerung eines Audiosystems eines Fahrzeugs |
JP6965783B2 (ja) * | 2018-02-13 | 2021-11-10 | トヨタ自動車株式会社 | 音声提供方法および音声提供システム |
KR102562227B1 (ko) * | 2018-06-12 | 2023-08-02 | 현대자동차주식회사 | 대화 시스템, 그를 가지는 차량 및 차량의 제어 방법 |
-
2019
- 2019-02-05 JP JP2019018971A patent/JP7250547B2/ja active Active
-
2020
- 2020-02-03 US US16/779,700 patent/US11508368B2/en active Active
- 2020-02-03 CN CN202010079363.4A patent/CN111599356B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003061184A (ja) | 2001-08-14 | 2003-02-28 | Sony Corp | 情報処理装置および方法、情報生成装置および方法、記録媒体、並びにプログラム |
JP2003106861A (ja) | 2001-09-28 | 2003-04-09 | Clarion Co Ltd | ナビゲーション装置及び方法 |
JP2013011483A (ja) | 2011-06-28 | 2013-01-17 | Denso Corp | 運転支援装置 |
JP2015041197A (ja) | 2013-08-21 | 2015-03-02 | 三菱電機株式会社 | 表示制御装置 |
JP2017122640A (ja) | 2016-01-07 | 2017-07-13 | トヨタ自動車株式会社 | 情報制御装置 |
JP2017156954A (ja) | 2016-03-01 | 2017-09-07 | トヨタ自動車株式会社 | 自動運転システム |
JP2017208056A (ja) | 2016-05-17 | 2017-11-24 | 山内 和博 | 自動運転車 |
Also Published As
Publication number | Publication date |
---|---|
US20200251108A1 (en) | 2020-08-06 |
US11508368B2 (en) | 2022-11-22 |
JP2020126166A (ja) | 2020-08-20 |
CN111599356B (zh) | 2024-05-14 |
CN111599356A (zh) | 2020-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7250547B2 (ja) | エージェントシステム、情報処理装置、情報処理方法、およびプログラム | |
US11366513B2 (en) | Systems and methods for user indication recognition | |
US11211033B2 (en) | Agent device, method of controlling agent device, and storage medium for providing service based on vehicle occupant speech | |
JP4380541B2 (ja) | 車両用エージェント装置 | |
JP7195161B2 (ja) | 案内システム、案内方法、およびプログラム | |
US11176948B2 (en) | Agent device, agent presentation method, and storage medium | |
US10994612B2 (en) | Agent system, agent control method, and storage medium | |
US11450316B2 (en) | Agent device, agent presenting method, and storage medium | |
JP6173477B2 (ja) | ナビゲーション用サーバ、ナビゲーションシステムおよびナビゲーション方法 | |
WO2014057540A1 (ja) | ナビゲーション装置およびナビゲーション用サーバ | |
US11380325B2 (en) | Agent device, system, control method of agent device, and storage medium | |
WO2018230688A1 (ja) | エクスペリエンス提供システム、エクスペリエンス提供方法およびエクスペリエンス提供プログラム | |
CN111750885A (zh) | 控制装置、控制方法以及存储程序的存储介质 | |
CN111746435B (zh) | 信息提供装置、信息提供方法及存储介质 | |
JP2020060861A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
US20220208187A1 (en) | Information processing device, information processing method, and storage medium | |
JP2020144285A (ja) | エージェントシステム、情報処理装置、移動体搭載機器制御方法、及びプログラム | |
JP2020106997A (ja) | 車載装置、通信システム | |
JP2020060623A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
JP7254689B2 (ja) | エージェントシステム、エージェント方法、及びプログラム | |
US20230311922A1 (en) | Traffic safety support system | |
US20230311927A1 (en) | Traffic safety support system | |
JP2020154993A (ja) | ライドシェアシステム、情報処理方法、およびプログラム | |
CN112241677A (zh) | 信息提供装置、信息提供方法及存储介质 | |
JP2020166073A (ja) | 音声インタフェイスシステム、制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220825 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221028 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20221213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230201 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20230201 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230209 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20230214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230221 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230322 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7250547 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |