JP2020153897A - Server and vehicle - Google Patents

Server and vehicle Download PDF

Info

Publication number
JP2020153897A
JP2020153897A JP2019054406A JP2019054406A JP2020153897A JP 2020153897 A JP2020153897 A JP 2020153897A JP 2019054406 A JP2019054406 A JP 2019054406A JP 2019054406 A JP2019054406 A JP 2019054406A JP 2020153897 A JP2020153897 A JP 2020153897A
Authority
JP
Japan
Prior art keywords
destination
vehicle
recommendation
unit
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019054406A
Other languages
Japanese (ja)
Inventor
恵 彌永
Megumi Yanaga
恵 彌永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2019054406A priority Critical patent/JP2020153897A/en
Publication of JP2020153897A publication Critical patent/JP2020153897A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

To provide a server for recommending an event a vehicle user attempted to accomplish at a destination but could not, and a vehicle that receives such service from the server.SOLUTION: A recommendation provision system is provided, comprising server 10 with a recommendation generation unit 72 configured to identify a case where a vehicle arrived at a destination but a period of time spent there is equal to or less than a lower limit of an average stay time to generate a recommendation that recommends a vehicle user to revisit the destination.SELECTED DRAWING: Figure 3

Description

この発明は、車両からナビゲーション情報を取得し、前記車両の利用者が、目的地で成し遂げようと目指して成し遂げることができなかった事柄をリコメンドするサーバ及び該サーバからのサービスが提供される車両に関する。 The present invention relates to a server that acquires navigation information from a vehicle and recommends things that the user of the vehicle could not achieve with the aim of achieving the destination, and a vehicle to which a service from the server is provided. ..

例えば、特許文献1には、以下に説明するナビゲーション方法が開示されている。 For example, Patent Document 1 discloses a navigation method described below.

すなわち、ナビゲーションシステムの利用者が所定のタイムリミット以内(所定時間内)に目的地に到着した場合、目的地リストからその目的地を削除する。利用者が所定時間内に目的地に到着しなかった場合、目的地として更新すべきか否かについて利用者に問い合わせを行う。 That is, when the user of the navigation system arrives at the destination within the predetermined time limit (within the predetermined time), the destination is deleted from the destination list. If the user does not arrive at the destination within the specified time, the user is inquired as to whether or not the destination should be renewed.

利用者が目的地として更新しないと回答した場合、ナビゲーションシステムはこの目的地を目的地リストから削除する。利用者が目的地を更新する旨の応答を行った場合、新たなタイムスタンプを作成する(特許文献1の[0032])。 If the user replies that they will not update as a destination, the navigation system will remove this destination from the destination list. When the user responds to update the destination, a new time stamp is created (Patent Document 1 [0032]).

特開2005−140775号公報Japanese Unexamined Patent Publication No. 2005-140775

しかしながら、上記特許文献1に開示された技術では、目的的に到着したことにより目的地リストから該目的地を削除しているが、たとえ、目的地に到着したとしても、前記車両の利用者が前記目的地で成し遂げようと目指した事柄を成し遂げることができたとはいえず、目的地に到着したといえ、一律に目的地を削除してしまうのは問題がある。 However, in the technique disclosed in Patent Document 1, the destination is deleted from the destination list due to the arrival for the purpose, but even if the destination is arrived, the user of the vehicle It cannot be said that we were able to achieve what we were aiming to achieve at the destination, and even if we arrived at the destination, it is problematic to delete the destination uniformly.

この発明は、このような課題を考慮してなされたものであって、車両の利用者が、目的地で成し遂げようと目指して成し遂げることができなかった事柄をリコメンドし得るサーバ及び該サーバからのサービスが提供される車両を提供することを目的とする。 The present invention has been made in view of such issues, from a server capable of recommending things that the vehicle user could not achieve with the aim of achieving at the destination, and from the server. The purpose is to provide a vehicle for which service is provided.

この発明の一態様に係るサーバは、
車両からナビゲーション情報を取得するナビゲーション情報取得部と、
前記ナビゲーション情報から、利用者により設定された目的地に前記車両が到着したか否かを判定する到着判定部と、
到着した目的地での前記車両の滞在時間が、平均滞在時間の下限値以下であるか否かを判定する滞在時間判定部と、
前記目的地を再訪させるリコメンドを作成するリコメンド作成部と、を備え、
前記リコメンド作成部は、
前記車両が前記目的地に到着し、到着した前記目的地での滞在時間が、前記平均滞在時間の下限値以下である場合、前記目的地を再訪させる前記リコメンドを作成する。
The server according to one aspect of the present invention is
The navigation information acquisition unit that acquires navigation information from the vehicle,
From the navigation information, an arrival determination unit that determines whether or not the vehicle has arrived at a destination set by the user, and
A staying time determination unit that determines whether or not the staying time of the vehicle at the arriving destination is equal to or less than the lower limit of the average staying time.
It is equipped with a recommendation creation unit that creates recommendations that revisit the destination.
The recommendation making department
When the vehicle arrives at the destination and the staying time at the destination is equal to or less than the lower limit of the average staying time, the recommendation for revisiting the destination is created.

この発明によれば、車両が目的地に到着し、到着した前記目的地での滞在時間が、前記目的地での平均滞在時間の下限値以下である場合、前記目的地で成し遂げようと目指していた事柄が成し遂げることができなかったものとみなして、前記目的地を再訪させるリコメンドを作成するので、該リコメンドにより前記目的地で成し遂げようと目指して成し遂げることができなかった事柄を利用者に容易に想起させることができる。 According to the present invention, when a vehicle arrives at a destination and the staying time at the destination is equal to or less than the lower limit of the average staying time at the destination, it is aimed to achieve the goal at the destination. Since the recommendation is made to revisit the destination by assuming that the thing could not be achieved, it is easy for the user to achieve the thing that could not be achieved with the aim of achieving the destination by the recommendation. Can be reminded of.

図1は、実施形態に係るサーバ及び該サーバからサービスが提供される、実施形態に係る車両を備えるリコメンド提供システムの構成図である。FIG. 1 is a configuration diagram of a server according to an embodiment and a recommendation providing system including a vehicle according to the embodiment in which a service is provided from the server. 図2は、ナビゲーション装置が搭載された車両の構成例を示すブロック図である。FIG. 2 is a block diagram showing a configuration example of a vehicle equipped with a navigation device. 図3は、サーバの構成を示すブロック図である。FIG. 3 is a block diagram showing a server configuration. 図4は、リコメンド提供システムの動作説明に供されるシーケンス図である。FIG. 4 is a sequence diagram provided for explaining the operation of the recommendation providing system.

この発明に係るサーバ及び該サーバからのサービスが提供される車両について実施形態を挙げ、添付の図面を参照して以下に詳細に説明する。 An embodiment of the server according to the present invention and the vehicle to which the service is provided from the server will be described in detail with reference to the accompanying drawings.

[構成]
図1は、実施形態に係るサーバ10及び該サーバ10からサービス(リコメンド)が提供される、実施形態に係る車両14を備えるリコメンド提供システム12の構成例を示している。
[Constitution]
FIG. 1 shows a configuration example of a server 10 according to an embodiment and a recommendation providing system 12 including a vehicle 14 according to the embodiment in which a service (recommendation) is provided from the server 10.

図1に示すように、リコメンド提供システム12は、基本的には、利用者26が利用する車両14に搭載されたナビゲーション装置16と、ナビゲーション装置16に通信網22を介して接続されたサーバ10とから構成されている。
車両14のナビゲーション装置16は、家25、例えば自宅を、ナビゲーション装置16の出発地として利用する。
As shown in FIG. 1, the recommendation providing system 12 basically has a navigation device 16 mounted on the vehicle 14 used by the user 26 and a server 10 connected to the navigation device 16 via a communication network 22. It is composed of and.
The navigation device 16 of the vehicle 14 uses the house 25, for example, the home as the starting point of the navigation device 16.

図2は、ナビゲーション装置16が搭載された車両14の構成例を示すブロック図である。 FIG. 2 is a block diagram showing a configuration example of a vehicle 14 on which the navigation device 16 is mounted.

図3は、サーバ10の構成例を示すブロック図である。 FIG. 3 is a block diagram showing a configuration example of the server 10.

図2に示すように、ナビゲーション装置16は、通信端末18を有し、該通信端末18は、ナビゲーション本体部(ナビゲーションECU)17に接続されるとともに図示しない基地局を含む通信網22を通じてサーバ10に無線接続される(図1)。 As shown in FIG. 2, the navigation device 16 has a communication terminal 18, which is connected to a navigation main body (navigation ECU) 17 and a server 10 through a communication network 22 including a base station (not shown). Is wirelessly connected to (Fig. 1).

ナビゲーション装置16は、ナビゲーション本体部17の他、このナビゲーション本体部17に接続される入力部(入力装置、タッチパネル)34、ディスクドライブ(記録媒体読取装置)35、車載カメラ43、マイクロホン44、表示部(モニタ、ディスプレイ等の画像表示装置)32、スピーカ(音声出力装置)36、GPS装置38、振動ジャイロ39及び車速センサ40と、を備える。 In addition to the navigation main body 17, the navigation device 16 includes an input unit (input device, touch panel) 34, a disk drive (recording medium reader) 35, an in-vehicle camera 43, a microphone 44, and a display unit connected to the navigation main body 17. (Image display device such as monitor and display) 32, speaker (audio output device) 36, GPS device 38, vibration gyro 39, and vehicle speed sensor 40.

ここで、表示部32は、目的地への経路探索の結果の推奨経路及びPOI(Point Of Interest)情報(施設情報)等を地図上に表示する液晶表示器等から構成され、入力部34は、例えば、表示部32上のタッチパネル(タッチスクリーン)等により構成される。ディスクドライブ35は、例えば、POI情報を含む地図情報が記録された記録媒体であるCD、DVD、BD等の各ディスクを再生することができる。車載カメラ43は、車内の、運転者等の利用者26の顔の画像を撮像可能な位置に配置され、マイクロホン44は、利用者26を含む乗員の音声を録音可能な位置に配置される。 Here, the display unit 32 is composed of a liquid crystal display or the like that displays a recommended route as a result of a route search to the destination and POI (Point Of Interest) information (facility information) on a map, and the input unit 34 is For example, it is composed of a touch panel (touch screen) on the display unit 32 and the like. The disk drive 35 can play, for example, each disk such as a CD, DVD, or BD, which is a recording medium on which map information including POI information is recorded. The in-vehicle camera 43 is arranged at a position in the vehicle where the image of the face of the user 26 such as the driver can be captured, and the microphone 44 is arranged at a position where the voice of the occupant including the user 26 can be recorded.

車載カメラ43とマイクロホン44とにより画像・音声情報取得部46が形成される。 The image / audio information acquisition unit 46 is formed by the in-vehicle camera 43 and the microphone 44.

ナビゲーション本体部17は、マイクロコンピュータを含む計算機であり、CPU(中央処理装置)、メモリ(記憶部)であるROM(EEPROMも含む。)、RAM(ランダムアクセスメモリ)、その他、A/D変換器、D/A変換器等の入出力装置、及び計時器(計時手段)としてのタイマ等を有しており、CPUがROMに記録されているプログラムを読み出し実行することで各種機能実現部(機能実現手段)、例えば演算部(制御部)、記憶部、処理部等として機能する。 The navigation main unit 17 is a computer including a microcomputer, and is a CPU (central processing unit), a memory (storage unit), a ROM (including an EEPROM), a RAM (random access memory), and an A / D converter. It has an input / output device such as a D / A converter, and a timer as a time measuring device (time measuring means), and the CPU reads and executes a program recorded in the ROM to realize various functions (functions). It functions as a realization means), for example, a calculation unit (control unit), a storage unit, a processing unit, and the like.

サーバ10も同様に計算機であり、演算部(制御部)60等として機能する他、記憶部62、及び通信部64を有する(図3参照)。 The server 10 is also a computer, functions as a calculation unit (control unit) 60 and the like, and also has a storage unit 62 and a communication unit 64 (see FIG. 3).

この実施形態において、ナビゲーション本体部17は、道路情報及びPOI情報(施設情報)を含む地図情報を記憶する地図情報記憶部23と、目的地設定部24と、車両14の現在地から目的地までの経路探索を行い、推奨経路を設定し得る経路探索部27と、リコメンド処理部28と、を備える。 In this embodiment, the navigation main unit 17 is a map information storage unit 23 that stores map information including road information and POI information (facility information), a destination setting unit 24, and a vehicle 14 from the current location to the destination. It includes a route search unit 27 that can perform a route search and set a recommended route, and a recommendation processing unit 28.

ナビゲーション装置16は、地図情報記憶部23に記憶されている地図情報に基づいて、目的地設定部24を参照し入力部34を通じて利用者26により設定された目的地までの推奨経路を経路探索部27により探索し、探索された推奨経路に従って利用者26が乗った車両14を誘導することにより、目的地まで利用者26を案内する経路案内をする。 Based on the map information stored in the map information storage unit 23, the navigation device 16 refers to the destination setting unit 24 and searches for a recommended route to the destination set by the user 26 through the input unit 34. The search is performed by 27, and the vehicle 14 on which the user 26 is riding is guided according to the searched recommended route to guide the user 26 to the destination.

この実施形態では例として、目的地91は、図1に示すように、レストラン91A又は観覧車91Bに設定され、車両14は、家25からそれぞれ、推奨経路80(80A、80B)に従って誘導されるものとする。 In this embodiment, as an example, the destination 91 is set to the restaurant 91A or the Ferris wheel 91B, as shown in FIG. 1, and the vehicle 14 is guided from the house 25 according to the recommended route 80 (80A, 80B), respectively. It shall be.

ナビゲーション装置16は、現在地検出部等として機能する現在地検出装置(現在位置検出装置)42を備える。現在地検出装置42は、自車両14の現在地を検出する装置であり、自車両14の進行方位を検出する振動ジャイロ39、車速を検出する車速センサ40、GPS衛星からのGPS信号を検出するGPS装置38等から構成される。 The navigation device 16 includes a current location detection device (current position detection device) 42 that functions as a current location detection unit and the like. The current location detection device 42 is a device that detects the current location of the own vehicle 14, a vibration gyro 39 that detects the traveling direction of the own vehicle 14, a vehicle speed sensor 40 that detects the vehicle speed, and a GPS device that detects GPS signals from GPS satellites. It is composed of 38 mag.

ナビゲーション装置16は、この現在地検出装置42により検出された自車両14の現在地に基づいて、推奨経路を探索するときの経路探索開始点を決定することができる。また、ナビゲーション装置16は、表示部32に表示された地図上、車両14の現在地に自車アイコンを表示する。 The navigation device 16 can determine a route search start point when searching for a recommended route based on the current location of the own vehicle 14 detected by the current location detection device 42. Further, the navigation device 16 displays the own vehicle icon at the current location of the vehicle 14 on the map displayed on the display unit 32.

図3に示すように、サーバ10は、演算部60として、ナビゲーション情報取得部66、到着判定部68、滞在時間判定部70、リコメンド作成部72、画像・音声情報取得部74及び感情推定部76を備える他に、記憶部62と通信部64を備える。 As shown in FIG. 3, as the calculation unit 60, the server 10 includes a navigation information acquisition unit 66, an arrival determination unit 68, a stay time determination unit 70, a recommendation creation unit 72, an image / voice information acquisition unit 74, and an emotion estimation unit 76. In addition to the above, the storage unit 62 and the communication unit 64 are provided.

記憶部62には、ナビゲーション装置16の地図情報記憶部23に記憶されている地図情報より高精度の地図情報{道路情報及びPOI情報を含む。}が記憶され逐次更新されている。 The storage unit 62 includes map information {road information and POI information with higher accuracy than the map information stored in the map information storage unit 23 of the navigation device 16. } Is stored and updated sequentially.

なお、サーバ10の記憶部62及びナビゲーション装置16の地図情報記憶部23に記憶されている地図情報には、推奨経路を演算するために用いられる経路計算情報や、交差点名称、道路名称等、推奨経路に従って自車両14を目的地まで案内するために用いられる経路誘導情報、道路形状を表す道路情報、さらには海岸線や河川、鉄道、建物等、道路以外の地図形状を表す背景情報、及び目的地91Aとされるレストランや目的地91Bとされる観覧車等のPOI情報等が含まれている。 The map information stored in the storage unit 62 of the server 10 and the map information storage unit 23 of the navigation device 16 includes route calculation information used for calculating the recommended route, intersection names, road names, and the like. Route guidance information used to guide the vehicle 14 to the destination according to the route, road information indicating the road shape, background information indicating a map shape other than the road such as a coastline, a river, a railroad, a building, and a destination. It includes POI information such as a restaurant designated as 91A and a Ferris wheel designated as destination 91B.

上述したように車両14のナビゲーション装置16において、目的地設定部24を参照して入力部34の利用者26の操作によって目的地が設定されると、現在地検出装置42により検出された自車両14の現在地を経路探索開始点として、設定された目的地までの経路演算が経路計算情報に基づいて所定のアルゴリズムにより経路探索部27で行われ、経路探索開始点と目的地との間の経路が探索され、目的地91(91A、91B)までの推奨経路80(80A、80B)が求められる。 As described above, when the destination is set by the operation of the user 26 of the input unit 34 with reference to the destination setting unit 24 in the navigation device 16 of the vehicle 14, the own vehicle 14 detected by the current location detection device 42. The route calculation to the set destination is performed by the route search unit 27 by a predetermined algorithm based on the route calculation information, and the route between the route search start point and the destination is obtained. It is searched and the recommended route 80 (80A, 80B) to the destination 91 (91A, 91B) is obtained.

この場合、ナビゲーション本体部17を通じて、推奨経路80と推奨経路80付近の地図が表示部32に表示されて経路案内が実行され、推奨経路80に従ってナビゲーション装置16を介してスピーカ36による音声ガイダンスと表示部32上の表示を利用して右左折の指示等が適宜行われる。 In this case, the recommended route 80 and the map near the recommended route 80 are displayed on the display unit 32 through the navigation main unit 17, route guidance is executed, and voice guidance and display by the speaker 36 are performed via the navigation device 16 according to the recommended route 80. Instructions for turning left or right are appropriately given using the display on the unit 32.

サーバ10のナビゲーション情報取得部66は、目的地91と、推奨経路80と、車両14の現在位置を含むナビゲーション情報を車両14から通信網22を通じて取得する。なお、ナビゲーション情報取得部66は、いわゆるフローティングカーデータ{車両14の走行速度、位置、リンク(道路区間)の走行時間、停車位置での停車時間を含む}の取得部としても機能する。 The navigation information acquisition unit 66 of the server 10 acquires navigation information including the destination 91, the recommended route 80, and the current position of the vehicle 14 from the vehicle 14 through the communication network 22. The navigation information acquisition unit 66 also functions as a so-called floating car data {including the traveling speed and position of the vehicle 14, the traveling time of the link (road section), and the stopping time at the stopping position}.

到着判定部68は、車両14の現在位置と目的地91の位置とから車両14が目的地91に到着したか否かを判定する。 The arrival determination unit 68 determines whether or not the vehicle 14 has arrived at the destination 91 based on the current position of the vehicle 14 and the position of the destination 91.

滞在時間判定部70は、車両14の前記フローティングカーデータから車両14の目的地91における滞在時間を取得し、取得した滞在時間と記憶部62に記憶されている当該目的地91の平均滞在時間の下限値とを比較する。 The staying time determination unit 70 acquires the staying time at the destination 91 of the vehicle 14 from the floating car data of the vehicle 14, and the acquired staying time and the average staying time of the destination 91 stored in the storage unit 62. Compare with the lower limit.

なお、目的地91の平均滞在時間の下限値は、当該目的地91に対するSNSや他の車両のフローティングカーデータ等から得た平均滞在時間の例えば半分の時間に設定する The lower limit of the average staying time of the destination 91 is set to, for example, half the average staying time obtained from the SNS for the destination 91, floating car data of other vehicles, and the like.

画像・音声情報取得部74は、車両14が目的地91に到着したとき、すなわち、ナビゲーションが終了したときから所定時間の間、車両14の画像・音声情報取得部46(車載カメラ43とマイクロホン44)で取得された画像情報と音声情報を取得する。なお、後述するように、画像情報と音声情報は、到着直前から直後まで所定時間の間取得することが好ましい。 The image / audio information acquisition unit 74 uses the image / audio information acquisition unit 46 (vehicle-mounted camera 43 and microphone 44) of the vehicle 14 for a predetermined time from the time when the vehicle 14 arrives at the destination 91, that is, the time when the navigation is completed. ) Acquires the image information and audio information acquired in. As will be described later, it is preferable to acquire the image information and the audio information for a predetermined time from immediately before arrival to immediately after arrival.

感情推定部76は、画像情報から顔の表情及び音声情報の内容を分析し、利用者26が、到着した目的地91に対して嫌悪感を抱かなかったか、未練感を抱かなかったか、それ以外かの目的地91の到着時の感情(印象)を推定する。 The emotion estimation unit 76 analyzes the facial expression and the contents of the voice information from the image information, and the user 26 does not have a disgust or a feeling of unskilledness toward the destination 91 that has arrived, or other than that. The emotion (impression) at the time of arrival of the destination 91 is estimated.

[動作]
次に、基本的には以上のように構成されるリコメンド提供システム12の動作を、サーバ10を中心として、図4のシーケンス図を参照して説明する。
[motion]
Next, the operation of the recommendation providing system 12 basically configured as described above will be described with reference to the sequence diagram of FIG. 4 centering on the server 10.

ステップS1にて、車両14が、ナビゲーション(目的地設定、推奨経路の設定、及び推奨経路80に沿う経路案内に基づく走行)を開始すると、ステップS11にて、サーバ10のナビゲーション情報取得部66にて車両14から送信されたナビゲーション情報(設定された目的地91、設定された推奨経路80、及び推奨経路に沿う経路案内に基づく走行状態)が取得される。 In step S1, when the vehicle 14 starts navigation (traveling based on destination setting, recommended route setting, and route guidance along the recommended route 80), in step S11, the navigation information acquisition unit 66 of the server 10 is contacted. The navigation information (the set destination 91, the set recommended route 80, and the traveling state based on the route guidance along the recommended route) transmitted from the vehicle 14 is acquired.

ステップS2にて、車両14がナビゲーションを終了する(ステップS2:YES)まで、サーバ10では、ステップS12にて、到着判定部68は、取得(受信)したナビゲーション情報から車両14が目的地に到着した(ステップS12:YES)か、否(ステップS12:NO)かを判定する。 Until the vehicle 14 ends the navigation in step S2 (step S2: YES), in the server 10, the arrival determination unit 68 arrives at the destination from the acquired (received) navigation information in step S12. (Step S12: YES) or not (step S12: NO) is determined.

ステップS2にて車両14のナビゲーションが終了した(ステップS2:YES)とき、すなわち、車両14の現在位置が目的地91近傍となったとき、サーバ10の到着判定部68にて、車両14が目的地に到着した(ステップS12:YES)と判定する。 When the navigation of the vehicle 14 is completed in step S2 (step S2: YES), that is, when the current position of the vehicle 14 is near the destination 91, the arrival determination unit 68 of the server 10 aims at the vehicle 14. It is determined that the vehicle has arrived at the ground (step S12: YES).

サーバ10は、ステップS13にて、車両14が目的地91に到着したと判定したときから、あるいは到着する所定距離前(所定時間前)、例えば、数百メートル前(数十秒前)からサーバ10の画像・音声情報取得部74は、車載カメラ43で取得されている画像情報とマイクロホン44で取得される音声情報のリアルタイム送信をナビゲーション装置16に要請する。 The server 10 starts when it is determined in step S13 that the vehicle 14 has arrived at the destination 91, or before a predetermined distance (predetermined time), for example, several hundred meters (several tens of seconds) before the arrival. The image / audio information acquisition unit 74 of 10 requests the navigation device 16 to transmit the image information acquired by the vehicle-mounted camera 43 and the audio information acquired by the microphone 44 in real time.

この要請に基づき、ステップS3にて、車両14の画像・音声情報取得部46は、要請を受信したとき(目的地91への到着直前時)から車両14のナビゲーションが終了した数十秒後(目的地91への到着直後時)まで車載カメラ43による利用者26を含む乗員の車載カメラ43で撮像し録画した画像情報と、マイクロホン44で録音した利用者26を含む乗員の音声情報を送信する。なお、滞在時間が平均滞在時間の下限値以下の目的地91から出発する際の数十秒も録音・録画してもよい。ステップS14にて、サーバ10の画像・音声情報取得部74は、送信されてきた画像情報と音声情報を一旦記憶部62に記憶する。 Based on this request, in step S3, the image / voice information acquisition unit 46 of the vehicle 14 receives the request (immediately before arriving at the destination 91) and several tens of seconds after the navigation of the vehicle 14 is completed (when the navigation of the vehicle 14 is completed). Until immediately after arrival at the destination 91), the image information captured and recorded by the in-vehicle camera 43 of the occupant including the user 26 by the in-vehicle camera 43 and the voice information of the occupant including the user 26 recorded by the microphone 44 are transmitted. .. It should be noted that the staying time may be recorded for several tens of seconds when departing from the destination 91 which is equal to or less than the lower limit of the average staying time. In step S14, the image / audio information acquisition unit 74 of the server 10 temporarily stores the transmitted image information and audio information in the storage unit 62.

ステップS15にて、滞在時間判定部70は、車両14が目的地91に到着し、到着した目的地91での滞在時間が、当該目的地91での平均滞在時間の下限値以下であるか否かを判定する。 In step S15, the staying time determination unit 70 determines whether or not the vehicle 14 arrives at the destination 91 and the staying time at the arriving destination 91 is equal to or less than the lower limit of the average staying time at the destination 91. Is determined.

滞在時間が平均滞在時間の下限値を上回っていた(ステップS15:NO)場合には、車両14の利用者26が、目的地91で成し遂げようと目指していた事柄が成し遂げられたものと判定して処理を終了する。 If the staying time exceeds the lower limit of the average staying time (step S15: NO), it is determined that the user 26 of the vehicle 14 has achieved what he / she was aiming to achieve at the destination 91. And end the process.

滞在時間が平均滞在時間の下限値以下であった(ステップS15:YES)場合には、ステップS16にて、リコメンド作成部72は、当該目的地91で成し遂げようと目指していた事柄が成し遂げられなかったものとして当該目的地91を再訪させるためのリコメンド(再訪リコメンド)の情報を作成し、記憶部62に記憶する。 If the staying time is less than or equal to the lower limit of the average staying time (step S15: YES), in step S16, the recommendation making unit 72 cannot accomplish what it was aiming to accomplish at the destination 91. As a result, information on a recommendation (revisit recommendation) for revisiting the destination 91 is created and stored in the storage unit 62.

なお、記憶部62に記憶された再訪リコメンドの情報は、後述するステップS19での再訪リコメンドが維持されていることを前提として、例えば、サーバ10が、次回のステップS11にて、車両14のナビゲーション装置16から新たなナビゲーション情報の取得を開始したとき、車両14のナビゲーション装置16のリコメンド作成部から、再訪リコメンドの情報(「前回、目的地で所定の事柄が成し遂げられなかったようです。事柄が成し遂げられなかった未訪問目的地(レストラン91A又は観覧車91Bを)を目的地に設定なされてはいかがでしょうか」等を示す情報)を送信し、ナビゲーション装置16のリコメンド処理部28を通じて表示部32上に表示させる。あるいは、例えば、表示部32に表示される目的地の設定履歴等から再訪リコメンドの情報を参照できるようにしてもよい。 The revisit recommendation information stored in the storage unit 62 is based on the premise that the revisit recommendation in step S19, which will be described later, is maintained. For example, the server 10 navigates the vehicle 14 in the next step S11. When the acquisition of new navigation information was started from the device 16, the recommendation creation section of the navigation device 16 of the vehicle 14 revisited the recommendation information ("It seems that the predetermined thing was not achieved at the destination last time. Information indicating "Why don't you set the unvisited destination (restaurant 91A or Ferris wheel 91B) as the destination that could not be achieved?") Is transmitted, and the display unit 32 is transmitted through the recommendation processing unit 28 of the navigation device 16. Display above. Alternatively, for example, the revisit recommendation information may be referred to from the setting history of the destination displayed on the display unit 32.

ステップS17にて、サーバ10の感情推定部76は、記憶部62に記憶されている画像情報・音声情報から利用者26の顔の表情に基づき利用者26の嫌悪感の有無を推定する。例えば、鼻にしわを寄せる、上唇を上げる、もしくはその両者の特徴が合わさった表情を検出した場合、あるいは「感じがよくないね」等の音声を検出した場合には、嫌悪感が有る(ステップS17:嫌悪感)と判定する。 In step S17, the emotion estimation unit 76 of the server 10 estimates the presence or absence of disgust of the user 26 based on the facial expression of the user 26 from the image information / voice information stored in the storage unit 62. For example, if you detect a facial expression that wrinkles your nose, raises your upper lip, or combines the characteristics of both, or if you detect a voice such as "I don't feel good", you have a disgust (step). S17: Disgust) is determined.

この場合には、利用者26が到着した目的地91に再訪する意思がないものとみなし、ステップS18にて、記憶部62に記憶した再訪リコメンドを削除し、処理を終了する。なお、嫌悪感の対象となった目的地91を利用者26と紐づけて保存しておき、POI情報のリコメンドの際に参照するためのデータとして活用してもよい。 In this case, it is considered that the user 26 does not intend to return to the destination 91 where he / she has arrived, and in step S18, the revisit recommendation stored in the storage unit 62 is deleted, and the process ends. The destination 91, which is the target of disgust, may be stored in association with the user 26 and used as data to be referred to when recommending POI information.

さらに、感情推定部76は、画像情報・音声情報から利用者26の顔の表情に基づき利用者26の未練感の有無を推定する。例えば、眉が上に、瞼が上下に引っ張られて眼は見開き、顎が下がって唇と歯が引き離されている表情を検出した場合あるいは「売り切れだ」、「休業だ」等の音声を検出した場合未練感があると判定し、又は嫌悪感・未練感が不明な場合には、未練感が有るか不明であると判定する。 Further, the emotion estimation unit 76 estimates the presence or absence of unskilled feeling of the user 26 based on the facial expression of the user 26 from the image information / voice information. For example, when the eyebrows are pulled up, the eyelids are pulled up and down, the eyes are wide open, the chin is lowered and the lips and teeth are separated, or when a voice such as "sold out" or "closed" is detected. If this is the case, it is determined that there is an unskilled feeling, or if the disgust / unskilled feeling is unknown, it is determined that there is an unskilled feeling or not.

この場合には、ステップS19にて再訪リコメンドを維持して処理を終了する。 In this case, the revisit recommendation is maintained and the process ends in step S19.

なお、未練感があると判定された場合と未練感が有るか不明と判定された場合では、再訪リコメンドの方法(仕方)を調整してもよい。例えば、未練感があると判定された場合はスピーカ36による音声で再訪リコメンドをし、未練感が有るか不明であると判定された場合は表示部32に文字で表示するのみにとどめてもよい。 In addition, when it is determined that there is a feeling of unskilledness and when it is determined that there is a feeling of unskilledness or it is unknown, the method of revisiting recommendation may be adjusted. For example, if it is determined that there is a feeling of unskilledness, a revisit recommendation may be made by voice from the speaker 36, and if it is determined that there is a feeling of unskilledness or not, it may be displayed only in characters on the display unit 32. ..

また、目的地91に到着したが滞在時間が平均滞在時間の下限値以下である場合には、何らかの理由で目的が達成されていないことが予測される。よって、同様の目的が達成可能な代替目的地、POI情報をリコメンドするようにしてもよい。 If the person arrives at the destination 91 but the staying time is equal to or less than the lower limit of the average staying time, it is predicted that the purpose has not been achieved for some reason. Therefore, the POI information, which is an alternative destination that can achieve the same purpose, may be recommended.

[実施形態から把握し得る発明]
ここで、上記実施形態及び変形例から把握し得る発明について、以下に記載する。なお、理解の便宜のために構成要素には実施形態で用いた符号をかっこ書きで付けているが、該構成要素は、その符号をつけたものに限定されない。
[Invention that can be grasped from the embodiment]
Here, the inventions that can be grasped from the above embodiments and modifications will be described below. For convenience of understanding, the components are marked with the reference numerals used in the embodiments in parentheses, but the components are not limited to those with the reference numerals.

この発明に係るサーバ(10)は、
車両(14)からナビゲーション情報を取得するナビゲーション情報取得部(66)と、
前記ナビゲーション情報から、利用者(26)により設定された目的地(91)に前記車両(14)が到着したか否かを判定する到着判定部(68)と、
到着した目的地(91)での前記車両(14)の滞在時間が、平均滞在時間の下限値以下であるか否かを判定する滞在時間判定部(70)と、
前記目的地(91)を再訪させるリコメンドを作成するリコメンド作成部(72)と、を備え、
前記リコメンド作成部(72)は、
前記車両(14)が前記目的地(91)に到着し、到着した前記目的地(91)での滞在時間が、前記平均滞在時間の下限値以下である場合、前記目的地(91)を再訪させる前記リコメンドを作成する。
The server (10) according to the present invention is
The navigation information acquisition unit (66) that acquires navigation information from the vehicle (14),
From the navigation information, an arrival determination unit (68) that determines whether or not the vehicle (14) has arrived at the destination (91) set by the user (26), and
A staying time determination unit (70) for determining whether or not the staying time of the vehicle (14) at the arriving destination (91) is equal to or less than the lower limit of the average staying time.
It is provided with a recommendation making unit (72) for making a recommendation to revisit the destination (91).
The recommendation making unit (72)
When the vehicle (14) arrives at the destination (91) and the staying time at the arrived destination (91) is equal to or less than the lower limit of the average staying time, the destination (91) is revisited. Make the recommendation to be made.

これによれば、車両(14)が目的地(91)に到着し、到着した前記目的地(91)での滞在時間が、前記目的地(91)での平均滞在時間の下限値以下である場合、前記目的地(91)で成し遂げようと目指していた事柄が成し遂げることができなかったものとみなして、前記目的地(91)を再訪させるリコメンドを作成するので、該リコメンドにより目的地(91)で成し遂げようと目指して成し遂げることができなかった事柄を利用者(26)に容易に想起させることができる。 According to this, the vehicle (14) arrives at the destination (91), and the staying time at the destination (91) that has arrived is equal to or less than the lower limit of the average staying time at the destination (91). In this case, it is considered that what was intended to be achieved at the destination (91) could not be achieved, and a recommendation for revisiting the destination (91) is created. Therefore, the recommendation makes the destination (91). It is possible to easily remind the user (26) of the things that could not be achieved with the aim of accomplishing with).

この場合、さらに、前記車両(14)から前記利用者(26)の顔の画像情報及び/又は前記車両(14)内の音声情報を取得する画像・音声情報取得部(74)と、
前記画像・音声情報から前記利用者(26)の目的地(91)に対する嫌悪感及び未練感の感情の有無を推定する感情推定部(76)と、を備え、
前記リコメンド作成部(72)は、
前記未練感が推定された場合、前記作成したリコメンドを維持する一方、前記嫌悪感が推定された場合、前記作成したリコメンドを削除する。
In this case, further, an image / audio information acquisition unit (74) that acquires image information of the face of the user (26) from the vehicle (14) and / or audio information in the vehicle (14).
It is provided with an emotion estimation unit (76) that estimates the presence or absence of disgust and unskilled feelings toward the destination (91) of the user (26) from the image / audio information.
The recommendation making unit (72)
When the unskilled feeling is estimated, the prepared recommendation is maintained, while when the disgust is estimated, the prepared recommendation is deleted.

このように、感情推定部(76)により推定された利用者(26)の感情が未練感であった場合、リコメンド作成部(72)は、再訪のリコメンドを維持し、嫌悪感であった場合、前記リコメンドを削除するようにしたので、利用者(26)の感情に合致した的確なリコメンドを効率的に作成することができる。 In this way, when the emotion of the user (26) estimated by the emotion estimation unit (76) is unskilled, the recommendation making unit (72) maintains the recommendation of revisit and is disgusted. Since the recommendation is deleted, it is possible to efficiently create an accurate recommendation that matches the emotion of the user (26).

なお、この発明は、上述の実施形態に限らず、この明細書の記載内容に基づき、種々の構成を採り得ることはもちろんである。 It should be noted that the present invention is not limited to the above-described embodiment, and it goes without saying that various configurations can be adopted based on the contents described in this specification.

10…サーバ 12…リコメンド提供システム
14…車両(自車両) 16…ナビゲーション装置
25…家 26…利用者
43…車載カメラ 44…マイクロホン
46、74…画像・音声情報取得部 66…ナビゲーション情報取得部
68…到着判定部 70…滞在時間判定部
72…リコメンド作成部 76…感情推定部
91…目的地 91A…レストラン(目的地)
91B…観覧車(目的地)
10 ... Server 12 ... Recommendation providing system 14 ... Vehicle (own vehicle) 16 ... Navigation device 25 ... House 26 ... User 43 ... In-vehicle camera 44 ... Microphone 46, 74 ... Image / audio information acquisition unit 66 ... Navigation information acquisition unit 68 … Arrival determination unit 70… Stay time determination unit 72… Recommendation creation unit 76… Emotion estimation unit 91… Destination 91A… Restaurant (destination)
91B ... Ferris wheel (destination)

Claims (3)

車両からナビゲーション情報を取得するナビゲーション情報取得部と、
前記ナビゲーション情報から、利用者により設定された目的地に前記車両が到着したか否かを判定する到着判定部と、
到着した目的地での前記車両の滞在時間が、平均滞在時間の下限値以下であるか否かを判定する滞在時間判定部と、
前記目的地を再訪させるリコメンドを作成するリコメンド作成部と、を備え、
前記リコメンド作成部は、
前記車両が前記目的地に到着し、到着した前記目的地での滞在時間が、前記平均滞在時間の下限値以下である場合、前記目的地を再訪させる前記リコメンドを作成する
サーバ。
The navigation information acquisition unit that acquires navigation information from the vehicle,
From the navigation information, an arrival determination unit that determines whether or not the vehicle has arrived at a destination set by the user, and
A staying time determination unit that determines whether or not the staying time of the vehicle at the arriving destination is equal to or less than the lower limit of the average staying time.
It is equipped with a recommendation creation unit that creates recommendations that revisit the destination.
The recommendation making department
A server that creates the recommendation to revisit the destination when the vehicle arrives at the destination and the staying time at the destination is equal to or less than the lower limit of the average staying time.
請求項1に記載のサーバにおいて、
さらに、前記車両から前記利用者の顔の画像情報及び/又は前記車両内の音声情報を取得する画像・音声情報取得部と、
前記画像・音声情報から前記利用者の目的地に対する嫌悪感及び未練感の感情の有無を推定する感情推定部と、を備え、
前記リコメンド作成部は、
前記未練感が推定された場合、前記作成したリコメンドを維持する一方、前記嫌悪感が推定された場合、前記作成したリコメンドを削除する
サーバ。
In the server according to claim 1,
Further, an image / audio information acquisition unit that acquires image information of the user's face and / or audio information in the vehicle from the vehicle.
It is provided with an emotion estimation unit that estimates the presence or absence of disgust and unskilled feelings toward the destination of the user from the image / audio information.
The recommendation making department
A server that maintains the created recommendation when the unskilled feeling is estimated, and deletes the created recommendation when the disgust is estimated.
請求項1又は2に記載のサーバからのサービスが提供される車両。 A vehicle to which the service from the server according to claim 1 or 2 is provided.
JP2019054406A 2019-03-22 2019-03-22 Server and vehicle Pending JP2020153897A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019054406A JP2020153897A (en) 2019-03-22 2019-03-22 Server and vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019054406A JP2020153897A (en) 2019-03-22 2019-03-22 Server and vehicle

Publications (1)

Publication Number Publication Date
JP2020153897A true JP2020153897A (en) 2020-09-24

Family

ID=72558718

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019054406A Pending JP2020153897A (en) 2019-03-22 2019-03-22 Server and vehicle

Country Status (1)

Country Link
JP (1) JP2020153897A (en)

Similar Documents

Publication Publication Date Title
US20200309548A1 (en) Control apparatus, control method, and non-transitory computer-readable storage medium storing program
JP2015141053A (en) Automatic driving support system, automatic driving support method, and computer program
US9374803B2 (en) Message notification system, message transmitting and receiving apparatus, program, and recording medium
JP7139904B2 (en) Information processing device and information processing program
JP7241550B2 (en) GUIDING DEVICE, GUIDING METHOD, AND PROGRAM
JP4421667B2 (en) Information guidance device, information guidance method, information guidance program, and computer-readable recording medium
CN108932290B (en) Location proposal device and location proposal method
US20200191583A1 (en) Matching method, matching server, matching system, and storage medium
CN108779987A (en) Communication terminal, server unit, route search system and computer program
US20080221792A1 (en) Navigation apparatus
JP2009162721A (en) Drive auxiliary device
JP6619316B2 (en) Parking position search method, parking position search device, parking position search program, and moving object
CN108020233B (en) Navigation system and control method for navigation system
CN112141010A (en) Control method, control device, electronic equipment and storage medium
CN111721314A (en) Server
JP2020143950A (en) Information provision system
JP6757230B2 (en) In-vehicle device and awakening system
JP2020153897A (en) Server and vehicle
JP2020060517A (en) Agent device, method for controlling agent device, and program
JP2010160066A (en) Navigation apparatus
JP3948018B2 (en) Information recording apparatus, information recording method, and information recording program
WO2023062814A1 (en) Audio output device, audio output method, program, and storage medium
WO2023162192A1 (en) Content output device, content output method, program, and recording medium
WO2023063405A1 (en) Content generation device, content generation method, program, and storage medium
WO2023163047A1 (en) Terminal device, information providing system, information processing method, program, and storage medium