JP2020094928A - 経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム - Google Patents
経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム Download PDFInfo
- Publication number
- JP2020094928A JP2020094928A JP2018233652A JP2018233652A JP2020094928A JP 2020094928 A JP2020094928 A JP 2020094928A JP 2018233652 A JP2018233652 A JP 2018233652A JP 2018233652 A JP2018233652 A JP 2018233652A JP 2020094928 A JP2020094928 A JP 2020094928A
- Authority
- JP
- Japan
- Prior art keywords
- information
- route
- music information
- output
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3492—Special cost functions, i.e. other than distance or default speed limit of road segments employing speed data or traffic data, e.g. real-time or historical
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3611—Destination input or retrieval using character input or menus, e.g. menus of POIs
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/487—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Library & Information Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内装置を提供する。【解決手段】本発明に係る経路案内装置は、ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有する。【選択図】図7
Description
本発明は、経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システムに関する。
従来、車両を運転するドライバに対し、ドライバの指定した目的地への経路を案内する経路案内システム(ナビゲーションシステムともいわれる)が知られている。特許文献1では、現在地から目的地までに複数の経路候補が存在する場合に、予測走行時間や、経路の走行に要する費用、経路の周辺の施設等を表示して、ドライバの経路選択を支援するナビゲーションシステムを提案している。
また、特許文献2では、より精度の高い経路予測を実現するために、複数のナビゲーション装置から取得した走行データを平均化して生成した仮想車両走行データに基づいて、現在地から目的地までの経路予測を行う技術を開示している。
ところで、特定の目的地を設定するよりも通過する経路の運転を楽しむようなドライブやツーリングのための経路を選択したい場合がある。このような経路の選択には、経路の景色や走行中の速度感など非言語情報が有用であると考えられる。他方、経路案内システムで施設の情報や予測到達時間の表示を確認可能であっても、経路をイメージするような感覚的な非言語情報を得ることは難しいという課題がある。
本発明は、上記課題に鑑みてなされ、その目的は、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な技術を実現することである。
本発明によれば、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有する、
ことを特徴とする経路案内装置が提供される。
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有する、
ことを特徴とする経路案内装置が提供される。
また、本発明によれば、
第1経路の環境情報に基づく第1音と、第2経路の環境情報に基づく第2音と、をそれぞれ取得する取得手段と、
前記第1経路及び前記第2経路のいずれかを選択するために、前記第1音及び前記第2音をそれぞれ、ユーザに選択可能に出力するように制御する出力制御手段と、を備える、
ことを特徴とする経路案内装置が提供される。
第1経路の環境情報に基づく第1音と、第2経路の環境情報に基づく第2音と、をそれぞれ取得する取得手段と、
前記第1経路及び前記第2経路のいずれかを選択するために、前記第1音及び前記第2音をそれぞれ、ユーザに選択可能に出力するように制御する出力制御手段と、を備える、
ことを特徴とする経路案内装置が提供される。
また、本発明によれば、
ユーザに音楽情報を可聴な態様で出力する出力工程と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択工程と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供工程と、を有する、
ことを特徴とする経路案内装置の制御方法が提供される。
ユーザに音楽情報を可聴な態様で出力する出力工程と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択工程と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供工程と、を有する、
ことを特徴とする経路案内装置の制御方法が提供される。
更に、本発明によれば、
ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段とを有する経路案内装置と、通信する情報処理サーバであって、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、
ことを特徴とする情報処理サーバが提供される。
ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段とを有する経路案内装置と、通信する情報処理サーバであって、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、
ことを特徴とする情報処理サーバが提供される。
また、本発明によれば、
経路案内装置と情報処理サーバとを有する経路案内システムであって、
前記経路案内装置は、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有し、
前記情報処理サーバは、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、
ことを特徴とする経路案内システムが提供される。
経路案内装置と情報処理サーバとを有する経路案内システムであって、
前記経路案内装置は、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有し、
前記情報処理サーバは、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、
ことを特徴とする経路案内システムが提供される。
本発明によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能になる。
(実施形態1)
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。
<経路案内システムの構成>
図1を参照して、本実施形態に係る経路案内システム100の構成について説明する。車両130および車両160は、経路案内装置140を備えた、例えば電気自動車などの電動車両である。車両130及び車両160は、自動運転機能を備えた車両および運転者が手動で運転する車両を含む。
図1を参照して、本実施形態に係る経路案内システム100の構成について説明する。車両130および車両160は、経路案内装置140を備えた、例えば電気自動車などの電動車両である。車両130及び車両160は、自動運転機能を備えた車両および運転者が手動で運転する車両を含む。
経路案内装置140は、車両130及び車両160の車内の様々なセンサによって、車両の挙動に関する情報(例えば車両の速度、加速度、およびブレーキの適用などのCAN情報)と走行経路の周囲の情報(例えばドライブレコーダの映像)とを収集する。これらのデータは車両情報として情報処理サーバ110に送信可能である。この車両情報は、フローティングデータ(プローブデータ、交通情報などとも呼ばれる)の一部を構成してもよい。車両情報には、車両の識別情報、車両の使用者の識別情報など他の情報を更に含んでよい。車両情報は、後述する車両情報送信処理により、一定の間隔でまたは特定のイベントが発生したことに応じて情報処理サーバ110に送信される。また、車両130は、後述する経路提示処理を行う。なお、後述する経路提示処理では、車両130のユーザ(ここでは運転者を指す)は、目的地を特定するのではなく、流れる音楽情報(例えばBGM)と対応する画像情報(例えばジャケット写真)に基づき、所望の音楽情報(および画像)を選択する。これにより、雰囲気に合わせた経路を取得する。例えば、ユーザが目的地を特定せずに経路を設定したい場合、図7に示すような、「街路樹が多い」、「ゆっくり青空が見える」、又は「街の喧騒」などの雰囲気の情報に対応する音楽情報702とそれらの音楽情報と対応する画像情報703(或いは704〜705)とを含むマルチメディア情報701を用いる。例えば、ユーザは、画像情報703と画像情報704が選択可能に出力される表示710と、カーソル711で指定される画像情報に対応する音楽情報の出力とを視聴しながら、所望の雰囲気を表す情報を選択する。ユーザが所望の雰囲気の音楽情報等を選択すると、経路案内装置140は、選択された音楽情報等と対応する経路の情報を情報処理サーバ110から取得して、表示150としてユーザに提供する。表示150は、表示部306に表示される経路の一例を模式的に示しており、音楽情報等の選択に応じた経路が表示されている。このようにして、ツーリングすることが目的である場合など、ユーザが目的地を特に定めること無く運転したい場合に、非言語情報に基づいて経路を選択できるようにする。なお、以下の説明では、ユーザに対して音楽情報と画像情報との両方を出力して選択させる場合を例に説明するが、いずれかのみをユーザに出力して選択させるようにしてもよい。
情報処理サーバ110は、1つ以上のサーバ装置で構成され、車両130や車両160から送信される車両情報を、ネットワーク120を介して取得し、経路の環境情報として蓄積する。後述するように、経路の環境情報は、例えば、速度やブレーキ回数などの車両の挙動に関する情報と、ドライブレコーダの映像などの走行経路の周囲の情報を含む。また、情報処理サーバ110は、経路提供処理を実行する。詳細は後述するが、情報処理サーバ110は、車両160等から取得した車両情報に基づき、経路の環境情報の特徴と音楽情報(および画像情報)とを対応付ける。情報処理サーバ110は、経路案内装置140に対して経路を選択するための音楽情報や画像情報を送信し、送信した情報のなかから選択された所定の音楽情報や画像情報を受信する。更に、選択された所定の音楽情報や画像情報に基づいて案内用の経路を決定し、決定した案内用の経路が経路案内装置140においてユーザに提供されるように、決定した案内用の経路を経路案内装置140に送信する。ネットワーク120は、例えばインターネットや携帯電話網などの通信網を含み、情報処理サーバ110と、車両130や車両160と間の情報を伝送する。
<情報処理サーバの構成>
次に、図2を参照して、情報処理サーバ110の機能構成例について説明する。なお、以降の図を参照して説明する機能ブロックの各々は、統合されまたは分離されてもよく、また説明する機能が別のブロックで実現されてもよい。また、ハードウェアとして説明するものがソフトウェアで実現されてもよく、その逆であってもよい。
次に、図2を参照して、情報処理サーバ110の機能構成例について説明する。なお、以降の図を参照して説明する機能ブロックの各々は、統合されまたは分離されてもよく、また説明する機能が別のブロックで実現されてもよい。また、ハードウェアとして説明するものがソフトウェアで実現されてもよく、その逆であってもよい。
通信部201は、車両130或いは車両160の経路案内装置140と、ネットワーク120を介して通信するための通信回路を含む。通信部201は、制御部202によって制御される外部装置への情報を送信したり外部装置からの情報を受信したりする。
制御部202は、1つ以上の演算装置であるCPU210と、RAM211とを含む。制御部202は、記録部204に記憶されたプログラムをRAM211に展開、実行することにより、制御部202内部の各部の動作を制御したり、情報処理サーバ110の各部の動作を制御したりする。また、制御部202は、後述の経路提供処理を実行する。RAM211は、例えばDRAM等の揮発性の記憶媒体を含み、制御部202がプログラムを実行するためのパラメータや処理結果等を一時的に記憶する。
操作部203は、情報処理サーバ110の管理者が操作指示を与えるためのキーボードやマウス等の操作部材、或いはリモートで与えられた操作指示を受け付けるモジュールであり、操作指示を受け付けると制御部202に操作情報を通知する。
記録部204は、例えば半導体メモリ等の不揮発性の記録媒体を含み、情報処理サーバ110の動作に必要な設定値を記録している。また、記録部204は、車両130や車両160から送信される車両情報(すなわち車両の速度等の車両の挙動に関する情報とドライブレコーダの映像等の走行経路の周囲の情報)を環境情報データベースに記録する。また、記録部204は、「街路樹が多い」、「ゆっくり青空が見える」、又は「街の喧騒」などの雰囲気の情報(ラベル)が付与された音楽情報(例えばBGM)と、同様の雰囲気の情報が付与された画像情報(例えばジャケット写真)とを、マルチメディア情報データベースに記録する。
表示部205は、例えばLCDやOLED等の表示パネルを含み、例えば管理者が情報処理サーバ110を設定するための設定用ユーザインタフェースを表示する。或いは、外部装置によって表示可能な情報を送信する表示制御を行ってもよい。
情報取得部212は、車両130や車両160から送信される車両情報を、通信部201を介して取得する。情報取得部212は、取得した車両情報を環境情報データベースに記録する。また、情報取得部212は、画像情報を提供する、不図示の外部装置から、雰囲気の情報が付与された音楽情報および画像情報を取得して、マルチメディア情報データベースに記録する。
環境情報処理部213は、環境情報データベースに記録された車両情報から得られる、経路の環境情報の特徴を(例えば所定の距離ごとに)機械学習アルゴリズムを用いて解析し、経路の雰囲気の情報との対応付けを学習する。また、環境情報処理部213は、特定の経路が入力されると、学習済みの結果を用いて、入力された特徴と最も対応すると推定される経路の雰囲気の情報を出力する。なお、以下ディープニューラルネットワークモデルを採用した場合について記載するがこれに問わない。機械学習アルゴリズムは、例えば、線形回帰、非線形回帰、ロジスティック回帰、サポートベクターマシーン(SVM)、決定木、パーセプトロン、ランダムフォレストAda Boost、ナイーブベイズ、k近傍法 ( KNN )、ニューラルネットワーク( NN )、畳み込みニューラルネットワーク( CNN )などが選択できる。
マルチメディア情報処理部214は、経路の雰囲気の情報と対応するマルチメディア情報(すなわち音楽情報と画像情報)をマルチメディア情報データベースから取り出して出力する。このため、情報処理サーバ110は、特定の経路が入力された場合に、環境情報処理部213による処理結果を用いて、入力された特徴と最も対応すると推定される音楽情報と画像情報とを出力することができる。
提示対象決定部215は、車両130の経路案内装置140からマルチメディア情報の取得要求を受信すると、経路案内装置140で表示するマルチメディア情報を決定し、決定したマルチメディア情報を経路案内装置140に送信する。提示対象決定部215は、例えば、マルチメディア情報の取得要求に含まれる、経路案内装置140の現在位置に基づいて、設定可能な複数の経路候補を選択する。そして、選択した複数の経路候補のそれぞれを、環境情報処理部213に入力し、経路候補の雰囲気の情報を出力し、マルチメディア情報処理部214が経路候補の雰囲気の情報に基づいて、それぞれに対応付けられる音楽情報および画像情報を出力することで、提示対象決定部215は音楽情報及び画像情報を取得する。
情報提供部216は、経路案内装置140から選択されたマルチメディア情報(音楽情報と画像情報)を受信すると、選択されたマルチメディア情報に対応する経路を特定して、特定した経路を経路案内装置140に送信する。例えば、情報提供部216は、提示対象決定部215が処理した経路候補のうち、選択されたマルチメディア情報と対応する経路候補を特定し、決定された経路として経路案内装置140に送信する。
<車両における経路案内装置の構成>
次に、車両130における経路案内装置140の機能構成例について、図3を参照して説明する。なお、図3に示す構成は一例であり、一部の機能ブロックは経路案内装置140の外部(すなわち車両130内)に備わっていてもよい。例えばセンサ部301、通信部303、記録部305、表示部306、音声出力部307は、経路案内装置140の外部に備わっていてもよい。また、車両160には、同様の経路案内装置140が備わっているものとする。以下の説明では、経路案内装置140が車載機である場合を例に説明するが、経路案内装置140は、車載機に限らず、車両130の車両の挙動に関する情報を取得可能であればパーソナルコンピュータやスマートフォンなどの電子機器であってもよい。
次に、車両130における経路案内装置140の機能構成例について、図3を参照して説明する。なお、図3に示す構成は一例であり、一部の機能ブロックは経路案内装置140の外部(すなわち車両130内)に備わっていてもよい。例えばセンサ部301、通信部303、記録部305、表示部306、音声出力部307は、経路案内装置140の外部に備わっていてもよい。また、車両160には、同様の経路案内装置140が備わっているものとする。以下の説明では、経路案内装置140が車載機である場合を例に説明するが、経路案内装置140は、車載機に限らず、車両130の車両の挙動に関する情報を取得可能であればパーソナルコンピュータやスマートフォンなどの電子機器であってもよい。
センサ部301は、車両の挙動に関する情報、すなわち、車両の位置、車両速度、車両の加速度、ブレーキの作動有無、電池の充電量等に関する情報を取得するための種々のセンサを含む。センサには例えば、GPS、速度センサ、加速度センサ、充電量を計測するセンサやブレーキの作動を検知するセンサ等を含む。センサから取得されたデータの一部または全部は記録部305に記録され、後に通信部303を介して情報処理サーバ110に送信される。また、センサ部301は、走行経路の周囲の情報、すなわち、ドライブレコーダの映像を取得するためのカメラやLIDAR(Light Detection and Ranging)を含む。
操作部302は、経路案内装置140のタッチパネルやボタン等の操作部材を含み、表示部306に表示される経路案内(ナビゲーション)や各種操作用のGUIに対する操作を行うことができる。通信部303は、例えば通信用回路等を含む通信デバイスであり、例えばLTE等の移動体通信を介してネットワーク120に接続し、情報処理サーバ110と必要なデータの送受信を行う。
制御部304は、1つ以上の演算装置であるCPU310と、RAM311とを含み、例えば記録部305に記録されたプログラムをCPU310が実行することにより、制御部304内の各機能ブロックや経路案内装置140内の各部の動作を制御する。
車両情報提供部312は、センサ部301によって収集されたデータ(車両の挙動に関する情報と走行経路の周囲の情報)を、車両情報として情報処理サーバ110に提供する。
マルチメディア情報出力部313は、情報処理サーバ110から受信したマルチメディア情報(すなわち画像情報と音声情報)を、表示部306や音声出力部307を介してユーザに視聴可能に出力する。選択部314は、出力されたマルチメディア情報に対するユーザの操作に応じて、出力した複数のマルチメディア情報のうちから所定のマルチメディア情報を選択する。
経路情報提供部315は、ユーザによって選択された所定のマルチメディア情報に対応する経路を、情報処理サーバ110から取得して、表示部306を介してユーザに提供する。経路情報提供部315によって提供される経路は、表示部306に、例えば上述の表示150のように表示される。
記録部305は、例えば半導体メモリ等の不揮発性メモリを含み、車両の挙動に関する情報や走行経路の周囲の情報を一定期間に渡って格納するデータベース、経路案内のための地図情報等を保持する。また、制御部304が実行するプログラムを保持する。
表示部306は、例えばLCDやOLED等の表示パネルを含み、経路案内の際に表示される地図、操作用のユーザインタフェース、或いは経路案内装置の各種設定を行ったり車両130内の各種操作を行ったりするためのユーザインタフェース等を表示する。表示部306は、制御部304の指示に応じて、画像情報をユーザに出力可能である。音声出力部307は、例えば音声情報をユーザに出力可能なスピーカを含む。
<経路案内装置における車両情報送信処理の一連の動作>
次に、経路案内装置140における車両情報送信処理の一連の動作について、図4を参照して説明する。なお、本処理は、制御部304のCPU310が記録部305に記録されるプログラムを実行することにより実現される。制御部304は、例えば、経路案内装置140に電力が供給されたときに開始する。
次に、経路案内装置140における車両情報送信処理の一連の動作について、図4を参照して説明する。なお、本処理は、制御部304のCPU310が記録部305に記録されるプログラムを実行することにより実現される。制御部304は、例えば、経路案内装置140に電力が供給されたときに開始する。
S401において、制御部304は、ドライブレコーダの情報(すなわち走行経路の周囲の情報)を記録部305に記録する。S402において、制御部304は、車両の挙動に関する情報(すなわちCAN情報)を記録部305に記録する。
S403において、制御部304は、車両情報を情報処理サーバ110へ送信するタイミングであるかを判定する。制御部304は、例えば、内部のタイマー情報を参照して、基準となる時刻から所定以上の時間が経過している場合は送信タイミングであると判定してS404へ進む。そうでない場合は、S401に戻って処理を繰り返す。
S404において、制御部304は、記録部305に記録されている車両情報を情報処理サーバ110に送信する。このとき、制御部304は、情報処理サーバ110に対して送信していない情報であるかを判定したうえで、未送信である情報のみを情報処理サーバ110に送信する。
S405において、制御部304は、車両情報の送信処理を終了するかを判定する。制御部304は、処理を終了しない場合、再びS401に戻って処理を繰り返す。そうでない場合、制御部304は、車両情報送信処理を終了する。
<情報処理サーバにおける経路提供処理の一連の動作>
次に、情報処理サーバ110における経路提供処理の一連の動作について、図5を参照して説明する。なお、本処理は、制御部202のCPU210が記録部204に記録されるプログラムを実行することにより実現される。なお、以下で説明する環境情報データベースには予め所定の量の車両情報が格納されており、それらを用いた教師データが生成されているものとする。具体的には、環境情報データベースに記録されている車両情報のうちの少なくとも一部は、機械学習に用いる教師データとして用いるために、情報処理サーバ110の運用者や第三者により、手動または自動で、ラベル付けがなされている。教師データは、例えば、車両が走行した経路とその経路を走行した際のドライブレコーダの映像を1区間分取り出して、その区間の経路に対して「街路樹が多い」、「ゆっくり青空が見える」、又は「街の喧騒」などの雰囲気の情報(ラベル)が割り当てられている。例えば、図8(a)〜(c)は、経路を区間ごとに分割し、区間811〜814に対応する車両情報を教師データとして用いる例を示している。区間811〜814を車両が走行した際のドライブレコーダの映像をもとに、第3者が手動でまたは自動で、雰囲気の情報の正解ラベルを付与することにより、図8(b)に示すような区間と雰囲気の情報のラベルを対応付けた教師データが生成される。また、ドライブレコーダの映像を用いた教師データとは別に、図8(c)に示すような、音楽情報と雰囲気の情報のラベルを対応付けた対応データも生成される。この対応データは、音楽情報(例えばBGM)を聞いたときに連想される雰囲気の情報が付与されている。画像情報についても、図8(c)と同様の対応データが生成される。
次に、情報処理サーバ110における経路提供処理の一連の動作について、図5を参照して説明する。なお、本処理は、制御部202のCPU210が記録部204に記録されるプログラムを実行することにより実現される。なお、以下で説明する環境情報データベースには予め所定の量の車両情報が格納されており、それらを用いた教師データが生成されているものとする。具体的には、環境情報データベースに記録されている車両情報のうちの少なくとも一部は、機械学習に用いる教師データとして用いるために、情報処理サーバ110の運用者や第三者により、手動または自動で、ラベル付けがなされている。教師データは、例えば、車両が走行した経路とその経路を走行した際のドライブレコーダの映像を1区間分取り出して、その区間の経路に対して「街路樹が多い」、「ゆっくり青空が見える」、又は「街の喧騒」などの雰囲気の情報(ラベル)が割り当てられている。例えば、図8(a)〜(c)は、経路を区間ごとに分割し、区間811〜814に対応する車両情報を教師データとして用いる例を示している。区間811〜814を車両が走行した際のドライブレコーダの映像をもとに、第3者が手動でまたは自動で、雰囲気の情報の正解ラベルを付与することにより、図8(b)に示すような区間と雰囲気の情報のラベルを対応付けた教師データが生成される。また、ドライブレコーダの映像を用いた教師データとは別に、図8(c)に示すような、音楽情報と雰囲気の情報のラベルを対応付けた対応データも生成される。この対応データは、音楽情報(例えばBGM)を聞いたときに連想される雰囲気の情報が付与されている。画像情報についても、図8(c)と同様の対応データが生成される。
S501において、制御部202の情報取得部212は、車両130の経路案内装置140から、車両情報を受信する。情報取得部212は、受信した車両情報を、車両の識別情報に関連付けて記録部204の環境情報データベースに格納する。
なお、環境情報データベースに新たに追加された車両情報の一部又は全部は更なる教師データの生成のために利用され得るが、新たに追加された車両情報を用いた教師データの生成は本経路提供処理とは別個に行われる。
S502において、制御部202は、マルチメディア情報と車両情報との対応付けを学習する。例えば、環境情報処理部213は、ある区間を走行した車両の挙動に関する情報(速度やブレーキ回数等)と走行経路の周囲の情報(ドライブレコーダの映像)を入力すると、その区間に対して最も高い確率で推定される雰囲気の情報を出力するディープニューラルネットワークを用いる。走行経路の周囲の情報は、ドライブレコーダの映像に基づき、経路に係る道路種別、該経路の周辺施設、および該経路の周辺環境の情報を予め抽出しておいてもよい。環境情報処理部213は、大量の教師データを用いて、区間ごとの車両情報と正解ラベルをディープニューラルネットワークに繰り返し入力し、ディープニューラルネットワークの重み付けを最適化させる(学習済みとなる)。学習済みの結果(学習済みのニューラルネットワーク)を用いることにより、教師データに含まれていない、ある区間の車両情報をディープニューラルネットワークに入力した場合に、当該区間に対する最も可能性の高い雰囲気の情報が出力される。マルチメディア情報処理部214は、ディープニューラルネットワークから出力された雰囲気の情報に基づいて、対応する音楽情報を出力する。なお、ここで説明した例では、一例として、ニューラルネットワークに、ある区間の車両情報に対して雰囲気の情報を出力させるようにしたが、ある区間の車両情報に対して経路の雰囲気を表現する音楽情報を出力するようなニューラルネットワークを用いてもよい。また、勿論、ここで説明したディープニューラルネットワークの重み付けを最適化する処理(すなわち学習)は、本経路提供処理とは別個に(教師データの生成後の任意のタイミングで)生成された教師データを用いて予め行っておいてよい。
S503において、制御部202は、経路案内装置140からマルチメディア情報の取得要求を受信する。マルチメディア情報の取得要求は、例えば、経路案内装置140の現在位置、充電状況に応じた走行可能距離を含む。
S504において、制御部202は、マルチメディア情報を車両(経路案内装置140)に提供する。具体的には、制御部202の提示対象決定部215は、例えば、受信したマルチメディア情報の取得要求に含まれる、経路案内装置140の現在位置、走行可能距離に基づいて、設定可能な複数の経路候補を選択する。そして、選択した複数の経路候補のそれぞれを、環境情報処理部213に入力し、その結果として経路候補のそれぞれに対応付けられる音楽情報および画像情報を取得する。なお、経路候補が複数の区間から構成される場合、例えば、環境情報処理部213が区間ごとに雰囲気の情報を出力し、マルチメディア情報処理部214は区間ごとの雰囲気の情報に対応する音楽情報等を出力する。このため、提示対象決定部215は、1つの経路内で最も数の多い音楽情報(および画像情報)を特定することにより、音楽情報および画像情報を決定する。すなわち、図8(a)に示す例では、1つの経路候補が区間813から区間814への経路である場合、「ゆっくり青空がみえる」に対応する「音楽B」が決定される。つまり、1つの経路候補に対して、代表的な1つの音楽情報および画像情報が決定される。提示対象決定部215は、決定した音楽情報および画像情報を車両に提供する。例えば、現在位置から走行可能な距離に基づいて選択された経路候補が3つであった場合、3つの音楽情報および画像情報が経路案内装置140に提供される。
なお、提供する複数の音楽情報のうち同一の音楽情報が含まれる(例えば、音楽Bが2つである)場合、提示対象決定部215は、音楽情報が異なるように、一方の音楽情報の特性を、対応付けられている経路の環境情報に基づいて変更する(例えば編曲する)。編曲は、例えば、経路における車両の挙動に関する情報に基づいて、車両の平均速度が早いほど音楽情報のテンポを上げたり、ブレーキの回数が多いほど音楽情報のテンポを下げたりすることができる。或いは、提示対象決定部215は、提供する複数の音楽情報と画像情報のうち音楽情報と画像情報の両方が同一である場合に、音楽情報の特性を、対応付けられている経路の環境情報に基づいて変更してもよい。
S505において、制御部202の情報提供部216は、車両の経路案内装置140で選択された所定のマルチメディア情報(音楽情報および画像情報)を取得する。S506において、情報提供部216は、S504において音楽情報に対応付けられていた経路を用いて、経路案内装置140で選択されたマルチメディア情報に対応する経路を決定し、S507において、当該決定した経路を車両の経路案内装置140に送信する。制御部202は、その後、経路提供処理を終了する。
<経路案内装置における経路提示処理>
次に、経路案内装置140における経路提示処理の一連の動作について、図6を参照して説明する。なお、本処理は、制御部304のCPU310が記録部305に記録されるプログラムを実行することにより実現される。制御部304は、例えば、ユーザからの経路を探索する操作を受け付けた場合に、本処理を開始する。
次に、経路案内装置140における経路提示処理の一連の動作について、図6を参照して説明する。なお、本処理は、制御部304のCPU310が記録部305に記録されるプログラムを実行することにより実現される。制御部304は、例えば、ユーザからの経路を探索する操作を受け付けた場合に、本処理を開始する。
S601において、制御部304は、マルチメディア情報(音楽情報および画像情報)の取得要求を情報処理サーバ110に送信する。このとき、取得要求は、経路案内装置140の現在位置、および走行可能距離を含む。なお、走行可能距離の代わりに、移動したいと考える移動時間をユーザが入力するようにしてもよい。
S602において、制御部304は、情報処理サーバ110がS504において提供するマルチメディア情報(音楽情報および画像情報)を受信する。S603において、制御部304は、受信したマルチメディア情報(音楽情報および画像情報)を出力する。音楽情報は、音声出力部307から、ユーザに可聴な態様で出力される。画像情報は、表示部306にユーザに視認可能に表示される。
S604において、制御部304は、出力されたマルチメディア情報に対するユーザの操作(例えば、ユーザによるタッチ操作)に応じて、ユーザの所望のマルチメディア情報を選択する。S605において、制御部304は、S604で選択したマルチメディア情報を、情報処理サーバ110に送信する。
S605において、制御部304は、S507において情報処理サーバ110から提供された経路を受信し、S606において、受信した経路を表示部306に提示する。ユーザが提示された経路に沿って車両を移動することを決定すると、S608おいて、制御部304は、当該経路の案内を行い、案内に係る経路を移動すると本処理を終了する。なお、経路案内装置140は、選択した音声情報および画像情報と走行した経路の景色やテンポに違和感があった場合には、同様の組み合わせが発生しないように、ユーザからフィードバック(ユーザ評価)を受け付けるようにしてもよい。この場合、経路案内装置140は、情報処理サーバ110にフィードバック情報と経路の情報とを送信する。情報処理サーバ110では、当該経路に対して、選択された音楽情報および画像情報(直接には雰囲気の情報)が選択され難くなるように、ディープニューラルネットワークの重み付けを変更するように学習してもよい。
以上説明したように、本実施形態では、車両の挙動に関する情報と走行経路の周囲の情報に基づいて決定した音楽情報および画像情報を用いて、ユーザに選択させ、当該選択に応じて経路を提供するようにした。このようにすることで、ツーリングすることが目的である場合など、ユーザが目的地を特に定めること無く運転したい場合に、直感的に経路を選択できるようにする。
なお、上述の例では、情報処理サーバ110が、S504において学習済みのニューラルネットワークに基づき経路候補からマルチメディア情報を決定したり、S506において経路案内装置で選択されたマルチメディア情報に対応する経路を決定したりした。しかし、これらの処理を経路案内装置140が行うようにしてもよい。例えば、情報処理サーバにおいて学習された学習済みのニューラルネットワークの情報を経路案内装置140に送信する。経路案内装置140は、S601〜S602を行うことなく、受信した学習済みのニューラルネットワークの情報を用いて、経路候補からマルチメディア情報を決定し、S603において複数のマルチメディア情報を出力してもよい。このニューラルネットワークの情報は、例えば学習済みのニューラルネットワークを再構築するための情報であり各ニューロンの重み付けパラメータの値や当該ニューラルネットワークに使用されるハイパーパラメータの値を含む。この場合、例えば、経路案内装置140は記憶部305に学習結果をあらかじめ保持していてもよい。また、S604でマルチメディア情報を選択した後に、S605〜S606を行なわずに、選択されたマルチメディア情報に対応する経路を決定してもよい。このようにすれば、処理負荷の重いニューラルネットワークの学習は情報処理サーバ110で行っておいて、マルチメディア情報の決定や経路の決定などの処理をローカル側で実行することで高い応答性を実現することができるようになる。
また、上述の例では、経路案内装置140は、情報処理サーバからマルチメディア情報(音楽情報および画像情報)を受信(S602)し、当該マルチメディア情報を選択のためにユーザに出力(S603)するようにした。しかし、経路案内装置140は、予め経路案内装置140の記録部305に記録しておいた音楽情報や画像情報をユーザに出力して、所定の音楽情報や画像情報を選択するようにしてもよい。
<実施形態のまとめ>
1.上記実施形態の経路案内装置(例えば参照番号140)は、
ユーザに音楽情報を可聴な態様で出力する出力手段(例えば307、313、S603)と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段(例えば314)と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段(例えば315)と、を有する。
1.上記実施形態の経路案内装置(例えば参照番号140)は、
ユーザに音楽情報を可聴な態様で出力する出力手段(例えば307、313、S603)と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段(例えば314)と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段(例えば315)と、を有する。
この実施形態によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内装置を提供することができる。
2.上記実施形態では、
前記出力手段(例えば306)は、出力される音楽情報と対応する画像情報を更に出力可能である。
前記出力手段(例えば306)は、出力される音楽情報と対応する画像情報を更に出力可能である。
この実施形態によれば、景色等を視覚的に連想可能な情報に基づいて経路を決定することができる。
3.上記実施形態では、経路案内装置は更に、
前記提供手段によって前記ユーザに提供される経路を、選択された前記所定の音楽情報に基づいて決定する決定手段を有する。
前記提供手段によって前記ユーザに提供される経路を、選択された前記所定の音楽情報に基づいて決定する決定手段を有する。
この実施形態によれば、処理負荷の重いニューラルネットワークの学習は情報処理サーバ110で行っておいて、マルチメディア情報の決定や経路の決定などの処理をローカル側で実行することで高い応答性を実現することができる。
4.上記実施形態では、経路案内装置は更に、
選択された前記所定の音楽情報を外部装置に送信する送信手段(例えば313)であって、前記外部装置(例えば110)は、ユーザに提供される経路を、受信した音楽情報に基づいて決定する決定手段(例えば215)を有する、送信手段と、
前記提供手段によって提供するために、前記外部装置によって決定された経路を前記外部装置から受信する受信手段(例えば315)と、を更に有する。
選択された前記所定の音楽情報を外部装置に送信する送信手段(例えば313)であって、前記外部装置(例えば110)は、ユーザに提供される経路を、受信した音楽情報に基づいて決定する決定手段(例えば215)を有する、送信手段と、
前記提供手段によって提供するために、前記外部装置によって決定された経路を前記外部装置から受信する受信手段(例えば315)と、を更に有する。
この実施形態によれば、マルチメディア情報の決定や経路の決定などの処理をサーバ側で実行することでより高度なアルゴリズムを用いたり精度の高い処理を行ったりすることができる。
5.上記実施形態では、
前記出力手段から出力される音楽情報は、経路の環境情報の特徴と対応付けられている(例えば図8)。
前記出力手段から出力される音楽情報は、経路の環境情報の特徴と対応付けられている(例えば図8)。
この実施形態によれば、所望の経路の雰囲気を表す音楽情報を選択することにより経路を選択することができる。
6.上記実施形態では、
前記経路の環境情報は、経路を移動する車両の挙動に関する情報を含む。
前記経路の環境情報は、経路を移動する車両の挙動に関する情報を含む。
この実施形態によれば、経路の特徴を車両の挙動に関する情報に基づいて表現し、音楽情報と対応付けることができる。
7.上記実施形態では、
前記車両の挙動に関する情報は、経路を移動する車両の速度、加速度、およびブレーキ回数の少なくとも1つを含む。
前記車両の挙動に関する情報は、経路を移動する車両の速度、加速度、およびブレーキ回数の少なくとも1つを含む。
この実施形態によれば、経路の特徴を、経路を移動する車両の速度、加速度、およびブレーキ回数の少なくとも1つに基づいて表現し、音楽情報と対応付けることができる。
8.上記実施形態では、
前記経路の環境情報は、更に、経路に係る道路種別、該経路の周辺施設、および該経路の周辺環境の少なくとも1つの情報を含む。
前記経路の環境情報は、更に、経路に係る道路種別、該経路の周辺施設、および該経路の周辺環境の少なくとも1つの情報を含む。
この実施形態によれば、経路の特徴を、経路に係る道路種別、該経路の周辺施設、および該経路の周辺環境の少なくとも1つに基づいて表現し、音楽情報と対応付けることができる。
9.上記実施形態では、
前記出力手段から出力される音楽情報は、前記経路案内装置の現在位置からの経路の環境情報の特徴と対応付けられている。
前記出力手段から出力される音楽情報は、前記経路案内装置の現在位置からの経路の環境情報の特徴と対応付けられている。
この実施形態によれば、現在位置からの経路の特徴を車両の挙動に関する情報に基づいて表現し、音楽情報と対応付けることができる。
10.上記実施形態では、
前記出力手段から出力される音楽情報は、出力しようとする複数の音楽情報が同一の音楽情報であった場合に、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている。
前記出力手段から出力される音楽情報は、出力しようとする複数の音楽情報が同一の音楽情報であった場合に、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている。
この実施形態によれば、選択する音楽情報の種類が少なく、出力しようとする音楽情報が重なってしまう場合であっても、経路の特徴に応じて音楽情報を変更してユーザに出力することができる。
11.上記実施形態では、
前記出力手段から出力される音楽情報と前記出力手段から出力される画像情報とは、それぞれ、経路の環境情報の特徴に対応付けられており、
前記出力手段から出力される音楽情報は、出力しようとする音楽情報が同一であり、且つ、音楽情報に対応する画像情報が同一である場合、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている。
前記出力手段から出力される音楽情報と前記出力手段から出力される画像情報とは、それぞれ、経路の環境情報の特徴に対応付けられており、
前記出力手段から出力される音楽情報は、出力しようとする音楽情報が同一であり、且つ、音楽情報に対応する画像情報が同一である場合、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている。
この実施形態によれば、選択する音楽情報および画像情報の種類が少なく、出力しようとする音楽情報も画像情報も重なってしまう場合であっても、経路の特徴に応じて音楽情報を変更してユーザに出力することができる。
12.本実施形態の経路案内装置は、
第1経路の環境情報に基づく第1音と、第2経路の環境情報に基づく第2音と、をそれぞれ取得する取得手段と、
前記第1経路及び前記第2経路のいずれかを選択するために、前記第1音及び前記第2音をそれぞれ、ユーザに選択可能に出力するように制御する出力制御手段と、を備える。
第1経路の環境情報に基づく第1音と、第2経路の環境情報に基づく第2音と、をそれぞれ取得する取得手段と、
前記第1経路及び前記第2経路のいずれかを選択するために、前記第1音及び前記第2音をそれぞれ、ユーザに選択可能に出力するように制御する出力制御手段と、を備える。
この実施形態によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内装置を提供することが可能になる。
13.本実施形態の経路案内装置は、
前記取得手段は、前記第1経路の前記環境情報に基づく第1画像と、前記第2経路の前記環境情報に基づく第2画像と、をそれぞれ取得し、
前記出力制御部は、更に、前記第1経路及び前記第2経路のいずれかを選択するために、前記第1画像及び前記第2画像をそれぞれ、前記ユーザに選択可能に出力するように制御する。
前記取得手段は、前記第1経路の前記環境情報に基づく第1画像と、前記第2経路の前記環境情報に基づく第2画像と、をそれぞれ取得し、
前記出力制御部は、更に、前記第1経路及び前記第2経路のいずれかを選択するために、前記第1画像及び前記第2画像をそれぞれ、前記ユーザに選択可能に出力するように制御する。
この実施形態によれば、景色等を視覚的に連想可能な情報に基づいて経路を決定することができる。
14.本実施形態の経路案内装置の制御方法は、
ユーザに音楽情報を可聴な態様で出力する出力工程と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択工程と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供工程と、を有する。
ユーザに音楽情報を可聴な態様で出力する出力工程と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択工程と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供工程と、を有する。
この実施形態によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内装置の制御方法を提供することが可能になる。
15.本実施形態の情報処理サーバは、
ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段とを有する経路案内装置と、通信する情報処理サーバであって、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する。
ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段とを有する経路案内装置と、通信する情報処理サーバであって、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する。
この実施形態によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内装置に、音楽情報に対応する経路を提供可能の情報処理サーバを提供することができる。
16.本実施形態の経路案内システムは、
経路案内装置と情報処理サーバとを有する経路案内システムであって、
前記経路案内装置は、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有し、
前記情報処理サーバは、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する。
経路案内装置と情報処理サーバとを有する経路案内システムであって、
前記経路案内装置は、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有し、
前記情報処理サーバは、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する。
この実施形態によれば、車両が走行する経路を設定する際に、非言語情報に基づいて経路を決定することが可能な経路案内システムを提供することができる。
140…経路案内装置、212…情報取得部、213…環境情報処理部、215…提示対象決定部、216…情報提供部、313…マルチメディア情報出力部、314…選択部、315…経路情報提供部
Claims (16)
- ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有する、ことを特徴とする経路案内装置。 - 前記出力手段は、出力される音楽情報と対応する画像情報を更に出力可能である、ことを特徴とする請求項1に記載の経路案内装置。
- 前記提供手段によって前記ユーザに提供される経路を、選択された前記所定の音楽情報に基づいて決定する決定手段を更に有する、ことを特徴とする請求項1または2に記載の経路案内装置。
- 選択された前記所定の音楽情報を外部装置に送信する送信手段であって、前記外部装置は、ユーザに提供される経路を、受信した音楽情報に基づいて決定する決定手段を有する、送信手段と、
前記提供手段によって提供するために、前記外部装置によって決定された経路を前記外部装置から受信する受信手段と、を更に有する、ことを特徴とする請求項1または2に記載の経路案内装置。 - 前記出力手段から出力される音楽情報は、経路の環境情報の特徴と対応付けられている、ことを特徴とする請求項1から4のいずれか1項に記載の経路案内装置。
- 前記経路の環境情報は、経路を移動する車両の挙動に関する情報を含む、ことを特徴とする請求項5に記載の経路案内装置。
- 前記車両の挙動に関する情報は、経路を移動する車両の速度、加速度、およびブレーキ回数の少なくとも1つを含む、ことを特徴とする請求項6に記載の経路案内装置。
- 前記経路の環境情報は、更に、経路に係る道路種別、該経路の周辺施設、および該経路の周辺環境の少なくとも1つの情報を含む、ことを特徴とする請求項6または7に記載の経路案内装置。
- 前記出力手段から出力される音楽情報は、前記経路案内装置の現在位置からの経路の環境情報の特徴と対応付けられている、ことを特徴とする請求項5から8のいずれか1項に記載の経路案内装置。
- 前記出力手段から出力される音楽情報は、出力しようとする複数の音楽情報が同一の音楽情報であった場合に、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている、ことを特徴とする請求項5から9のいずれか1項に記載の経路案内装置。
- 前記出力手段から出力される音楽情報と前記出力手段から出力される画像情報とは、それぞれ、経路の環境情報の特徴に対応付けられており、
前記出力手段から出力される音楽情報は、出力しようとする音楽情報が同一であり、且つ、音楽情報に対応する画像情報が同一である場合、前記同一の音楽情報の一方の音楽情報の特性が、対応付けられている前記経路の環境情報に基づいて変更されている、ことを特徴とする請求項2に記載の経路案内装置。 - 第1経路の環境情報に基づく第1音と、第2経路の環境情報に基づく第2音と、をそれぞれ取得する取得手段と、
前記第1経路及び前記第2経路のいずれかを選択するために、前記第1音及び前記第2音をそれぞれ、ユーザに選択可能に出力するように制御する出力制御手段と、
を備える経路案内装置。 - 前記取得手段は、前記第1経路の前記環境情報に基づく第1画像と、前記第2経路の前記環境情報に基づく第2画像と、をそれぞれ取得し、
前記出力制御手段は、更に、前記第1経路及び前記第2経路のいずれかを選択するために、前記第1画像及び前記第2画像をそれぞれ、前記ユーザに選択可能に出力するように制御する請求項12に記載の経路案内装置。 - ユーザに音楽情報を可聴な態様で出力する出力工程と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択工程と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供工程と、を有する、ことを特徴とする経路案内装置の制御方法。 - ユーザに音楽情報を可聴な態様で出力する出力手段と、出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段とを有する経路案内装置と、通信する情報処理サーバであって、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、ことを特徴とする情報処理サーバ。 - 経路案内装置と情報処理サーバとを有する経路案内システムであって、
前記経路案内装置は、
ユーザに音楽情報を可聴な態様で出力する出力手段と、
出力された音楽情報に対する前記ユーザの操作に応じて、所定の音楽情報を選択する選択手段と、
選択された前記所定の音楽情報に対応する経路を、前記ユーザに提供する提供手段と、を有し、
前記情報処理サーバは、
前記所定の音楽情報に対応する経路を、前記所定の音楽情報に基づいて決定する決定手段を有する、ことを特徴とする経路案内システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018233652A JP2020094928A (ja) | 2018-12-13 | 2018-12-13 | 経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム |
CN201911227177.4A CN111323033B (zh) | 2018-12-13 | 2019-12-04 | 路径引导装置及其控制方法、信息处理服务器、以及路径引导系统 |
US16/707,272 US11385070B2 (en) | 2018-12-13 | 2019-12-09 | Route navigation apparatus capable of determining route based on non-verbal information, control method therefor, information processing server, and route navigation system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018233652A JP2020094928A (ja) | 2018-12-13 | 2018-12-13 | 経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020094928A true JP2020094928A (ja) | 2020-06-18 |
Family
ID=71071138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018233652A Pending JP2020094928A (ja) | 2018-12-13 | 2018-12-13 | 経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11385070B2 (ja) |
JP (1) | JP2020094928A (ja) |
CN (1) | CN111323033B (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022020043A (ja) * | 2020-08-26 | 2022-01-31 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 目的地の予測方法、装置、電子機器、コンピュータ可読記憶媒体及びコンピュータプログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11886514B2 (en) | 2019-10-11 | 2024-01-30 | Kinaxis Inc. | Machine learning segmentation methods and systems |
US11526899B2 (en) | 2019-10-11 | 2022-12-13 | Kinaxis Inc. | Systems and methods for dynamic demand sensing |
US20210110298A1 (en) * | 2019-10-15 | 2021-04-15 | Kinaxis Inc. | Interactive machine learning |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2003093766A1 (fr) | 2002-04-30 | 2003-11-13 | Hitachi, Ltd. | Systeme de navigation de type communication et procede de navigation |
DE10324813B4 (de) * | 2003-06-02 | 2015-12-31 | Robert Bosch Gmbh | Verfahren zur Diagnose eines Tankentlüftungsventils |
JP4283212B2 (ja) * | 2004-12-10 | 2009-06-24 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 雑音除去装置、雑音除去プログラム、及び雑音除去方法 |
JP2009014423A (ja) | 2007-07-03 | 2009-01-22 | Pioneer Electronic Corp | 情報提供サーバ、ナビゲーション装置、情報提供方法及びプログラム |
JP4812717B2 (ja) * | 2007-09-10 | 2011-11-09 | 株式会社デンソーアイティーラボラトリ | ナビゲーション装置および経路提示方法 |
US8234063B2 (en) * | 2009-12-18 | 2012-07-31 | Telenav, Inc. | Navigation system with location profiling and method of operation thereof |
CN102288190B (zh) * | 2010-05-13 | 2013-11-06 | 株式会社电装 | 路径引导装置 |
EP2817591A4 (en) * | 2013-04-15 | 2015-10-07 | Flextronics Ap Llc | CHANGE OF BEHAVIOR BY CHANGED ASSIGNMENT ROUTES BASED ON USER PROFILE INFORMATION |
WO2015059812A1 (ja) * | 2013-10-25 | 2015-04-30 | 三菱電機株式会社 | 移動支援装置及び移動支援方法 |
KR20170000919A (ko) * | 2015-06-24 | 2017-01-04 | 현대엠엔소프트 주식회사 | 음악 앱 실행 정보를 이용한 경로 추천 장치 및 방법 |
US10034066B2 (en) * | 2016-05-02 | 2018-07-24 | Bao Tran | Smart device |
CN106441344A (zh) * | 2016-09-18 | 2017-02-22 | 智车优行科技(北京)有限公司 | 基于地理位置信息的车载音乐播放方法、装置及车辆 |
US11535262B2 (en) * | 2018-09-10 | 2022-12-27 | Here Global B.V. | Method and apparatus for using a passenger-based driving profile |
-
2018
- 2018-12-13 JP JP2018233652A patent/JP2020094928A/ja active Pending
-
2019
- 2019-12-04 CN CN201911227177.4A patent/CN111323033B/zh active Active
- 2019-12-09 US US16/707,272 patent/US11385070B2/en active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022020043A (ja) * | 2020-08-26 | 2022-01-31 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 目的地の予測方法、装置、電子機器、コンピュータ可読記憶媒体及びコンピュータプログラム |
JP7334205B2 (ja) | 2020-08-26 | 2023-08-28 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 目的地の予測方法、装置、電子機器、コンピュータ可読記憶媒体及びコンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11385070B2 (en) | 2022-07-12 |
CN111323033A (zh) | 2020-06-23 |
CN111323033B (zh) | 2023-11-21 |
US20200191594A1 (en) | 2020-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2020094928A (ja) | 経路案内装置およびその制御方法、情報処理サーバ、ならびに経路案内システム | |
US11663516B2 (en) | Artificial intelligence apparatus and method for updating artificial intelligence model | |
US11047698B2 (en) | Autonomous driving apparatus and method thereof | |
US11495214B2 (en) | Artificial intelligence device for providing voice recognition service and method of operating the same | |
CN110214107A (zh) | 提供驾驶员教育的自主车辆 | |
US20220197120A1 (en) | Control of Display Device for Autonomous Vehicle | |
US20210173614A1 (en) | Artificial intelligence device and method for operating the same | |
US20190360717A1 (en) | Artificial intelligence device capable of automatically checking ventilation situation and method of operating the same | |
EP3736191A1 (en) | Electronic device and method for vehicle driving assistance | |
KR102339085B1 (ko) | 사용자의 어플리케이션 사용 기록을 고려하여 사용자의 음성을 인식하는 인공 지능 장치 및 그 방법 | |
US20190354178A1 (en) | Artificial intelligence device capable of being controlled according to user action and method of operating the same | |
EP3174000B1 (en) | Information presentation device, method, and program | |
US20200114925A1 (en) | Interaction device, interaction method, and program | |
JPWO2017183476A1 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
KR20190095193A (ko) | 인공 지능 시스템의 동작을 관리하는 인공 지능 장치 및 그 방법 | |
WO2018123055A1 (ja) | 情報提供システム | |
KR20190094304A (ko) | 음성 인식 기능을 제공하는 인공 지능 로봇 및 그의 동작 방법 | |
US11449074B2 (en) | Robot for providing guidance service using artificial intelligence and method of operating the same | |
US20200005144A1 (en) | Artificial intelligence server for controlling a plurality of robots using artificial intelligence | |
WO2018123057A1 (ja) | 情報提供システム | |
KR20190107616A (ko) | 개체명 테이블을 생성하는 인공 지능 장치 및 그 방법 | |
US10931813B1 (en) | Artificial intelligence apparatus for providing notification and method for same | |
US11615327B2 (en) | Artificial intelligence device for providing search service and method thereof | |
US11977384B2 (en) | Control system for controlling a plurality of robots using artificial intelligence | |
US20190377489A1 (en) | Artificial intelligence device for providing voice recognition service and method of operating the same |