JP7070322B2 - Route guidance control device, route guidance control system, route guidance control method, and route guidance control program - Google Patents

Route guidance control device, route guidance control system, route guidance control method, and route guidance control program Download PDF

Info

Publication number
JP7070322B2
JP7070322B2 JP2018198146A JP2018198146A JP7070322B2 JP 7070322 B2 JP7070322 B2 JP 7070322B2 JP 2018198146 A JP2018198146 A JP 2018198146A JP 2018198146 A JP2018198146 A JP 2018198146A JP 7070322 B2 JP7070322 B2 JP 7070322B2
Authority
JP
Japan
Prior art keywords
guidance
route guidance
control unit
voice guidance
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018198146A
Other languages
Japanese (ja)
Other versions
JP2020067285A (en
Inventor
聡隆 村田
啓太 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2018198146A priority Critical patent/JP7070322B2/en
Publication of JP2020067285A publication Critical patent/JP2020067285A/en
Application granted granted Critical
Publication of JP7070322B2 publication Critical patent/JP7070322B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、経路案内制御装置、経路案内制御システム、経路案内制御方法、および経路案内制御プログラムに関する。 The present invention relates to a route guidance control device, a route guidance control system, a route guidance control method, and a route guidance control program.

車両において用いられるナビゲーション装置において、音声案内が行われる。例えば、設定された経路において右折または左折を行う交差点の300m手前、100m手前、交差点直前などにおいて複数回、音声案内が行われる。 Voice guidance is provided in the navigation device used in the vehicle. For example, voice guidance is performed a plurality of times at an intersection 300 m before, 100 m before, or immediately before an intersection where a right turn or a left turn is made on a set route.

例えば、特許文献1には、進路変更が生じる交差点の手前で段階的に音声案内を行うナビゲーション装置が開示されている。 For example, Patent Document 1 discloses a navigation device that provides voice guidance step by step before an intersection where a course change occurs.

特開2017-181150号公報Japanese Unexamined Patent Publication No. 2017-181150

経路の音声案内が行われたとき、ナビゲーション装置の利用者は、実際の風景と音声案内された情報との認識が一致している場合は、音声案内が1回であっても複数回であっても、対象となる交差点を把握しているため、適切に右左折できる。これに対し、音声案内が行われたとき、実際の風景と音声案内された情報との認識が一致していない場合や、音声案内を聞き逃した場合には、表示部に表示されている地図等の経路案内情報と実際の風景とを見比べることで、案内対象地点である交差点等を適切に把握しようとする。そのような状態においては、次の音声案内まで待つ必要があるため、その間、表示部に表示されている情報を何度も見返してしまい安全を損なうおそれがある。 When the voice guidance of the route is performed, the user of the navigation device may perform the voice guidance multiple times even if the voice guidance is performed once if the recognition of the actual scenery and the voice-guided information match. However, since I know the target intersection, I can turn left and right properly. On the other hand, when the voice guidance is performed, if the recognition of the actual scenery and the voice guidance information do not match, or if the voice guidance is missed, the map displayed on the display unit. By comparing the route guidance information such as, etc. with the actual scenery, we try to properly grasp the intersections, etc. that are the guidance target points. In such a state, it is necessary to wait until the next voice guidance, and during that time, the information displayed on the display unit may be reviewed many times, which may impair safety.

そこで、本発明は、案内対象地点における音声案内を適切に把握させることができる、経路案内装置、経路案内制御システム、経路案内制御方法、および経路案内制御プログラムを提供することを課題とする。 Therefore, it is an object of the present invention to provide a route guidance device, a route guidance control system, a route guidance control method, and a route guidance control program capable of appropriately grasping voice guidance at a guidance target point.

本発明の経路案内制御装置は、経路案内を行う経路案内制御部と、前記経路案内制御部による経路案内画像を表示部に表示する表示制御部と、前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出制御部と、前記経路案内制御部の処理に基づき音声案内を行う音声案内制御部と、前記音声案内制御部による音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるとき、前記音声案内制御部に音声案内を再度行わせる案内制御部と、を備える。 The route guidance control device of the present invention includes a route guidance control unit that provides route guidance, a display control unit that displays a route guidance image by the route guidance control unit on the display unit, and the display unit that displays the route guidance image. The route guidance image after the line-of-sight detection control unit that detects the user's line of sight to the user, the voice guidance control unit that performs voice guidance based on the processing of the route guidance control unit, and the voice guidance by the voice guidance control unit are executed. It is provided with a guidance control unit that causes the voice guidance control unit to perform voice guidance again when the user's line of sight to the display unit displaying the above is a predetermined condition.

本発明の経路案内制御システムは、本発明の経路案内制御装置と、地図情報を記憶する記憶部と、前記ユーザの視線を検出する視線検出部と、前記音声案内を出力する音声出力部と、を備える。 The route guidance control system of the present invention includes the route guidance control device of the present invention, a storage unit for storing map information, a line-of-sight detection unit for detecting the line of sight of the user, and a voice output unit for outputting the voice guidance. To prepare for.

本発明の経路案内制御方法は、経路案内を行う経路案内ステップと、前記経路案内ステップによる経路案内画像を表示部に表示する表示ステップと、前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出ステップと、前記経路案内ステップの処理に基づき音声案内を行う音声案内ステップと、前記音声案内ステップによる音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるとき、前記音声案内ステップに音声案内を再度行わせる案内ステップと、を含む。 The route guidance control method of the present invention includes a route guidance step for performing route guidance, a display step for displaying a route guidance image by the route guidance step on a display unit, and a user for the display unit displaying the route guidance image. The display unit displaying the route guidance image after the line-of-sight detection step for detecting the line of sight, the voice guidance step for performing voice guidance based on the processing of the route guidance step, and the voice guidance by the voice guidance step are executed. Includes a guidance step that causes the voice guidance step to perform voice guidance again when the user's line of sight to the user is a predetermined condition.

本発明の経路案内制御プログラムは、経路案内を行う経路案内ステップと、前記経路案内ステップによる経路案内画像を表示部に表示する表示ステップと、前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出ステップと、前記経路案内ステップの処理に基づき音声案内を行う音声案内ステップと、前記音声案内ステップによる音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるとき、前記音声案内ステップに音声案内を再度行わせる案内ステップと、をコンピュータに実行させる。 The route guidance control program of the present invention includes a route guidance step for performing route guidance, a display step for displaying a route guidance image by the route guidance step on a display unit, and a user for the display unit displaying the route guidance image. The display unit displaying the route guidance image after the line-of-sight detection step for detecting the line of sight, the voice guidance step for performing voice guidance based on the processing of the route guidance step, and the voice guidance by the voice guidance step are executed. When the user's line of sight to the user is a predetermined condition, the computer is made to execute the guidance step of causing the voice guidance step to perform voice guidance again.

本発明によれば、案内対象地点における音声案内を適切に把握させることができる。 According to the present invention, it is possible to appropriately grasp the voice guidance at the guidance target point.

図1は、第一実施形態に係る経路案内制御システムの構成の一例を示すブロック図である。FIG. 1 is a block diagram showing an example of the configuration of the route guidance control system according to the first embodiment. 図2は、ユーザの視線を検出する方法を説明するための図である。FIG. 2 is a diagram for explaining a method of detecting a user's line of sight. 図3は、ユーザの視線が表示部に向いていることを検出する方法を説明するための図である。FIG. 3 is a diagram for explaining a method of detecting that the line of sight of the user is directed to the display unit. 図4は、第一実施形態に係る経路案内制御装置の処理の流れの一例を示すフローチャートである。FIG. 4 is a flowchart showing an example of the processing flow of the route guidance control device according to the first embodiment. 図5は、第一実施形態に係る経路案内制御装置の処理の流れの一例を示すフローチャートである。FIG. 5 is a flowchart showing an example of the processing flow of the route guidance control device according to the first embodiment. 図6は、第二実施形態に係る経路案内制御システムの構成の一例を示すブロック図である。FIG. 6 is a block diagram showing an example of the configuration of the route guidance control system according to the second embodiment. 図7は、第二実施形態に係る経路案内制御装置の処理の流れの一例を示すフローチャートである。FIG. 7 is a flowchart showing an example of the processing flow of the route guidance control device according to the second embodiment.

以下、添付図面を参照して、本発明に係る実施形態を詳細に説明する。なお、この実施形態により本発明が限定されるものではなく、また、実施形態が複数ある場合には、各実施形態を組み合わせて構成するものも含む。 Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. It should be noted that the present invention is not limited to this embodiment, and when there are a plurality of embodiments, the present invention also includes a combination of the respective embodiments.

[第一実施形態]
図1を用いて、第一実施形態に係る経路案内制御システムの構成について説明する。図1は、第一実施形態に係る経路案内制御システムの構成の一例を示すブロック図である。
[First Embodiment]
The configuration of the route guidance control system according to the first embodiment will be described with reference to FIG. FIG. 1 is a block diagram showing an example of the configuration of the route guidance control system according to the first embodiment.

図1に示すように、経路案内制御システム1は、記憶部10と、GPS(Global Positioning System)受信部20と、視線検出部30と、音声出力部40と、表示部50と、経路案内制御装置100と、を備える。 As shown in FIG. 1, the route guidance control system 1 includes a storage unit 10, a GPS (Global Positioning System) receiving unit 20, a line-of-sight detection unit 30, a voice output unit 40, a display unit 50, and route guidance control. The device 100 is provided.

経路案内制御システム1は、所謂ナビゲーション装置である。経路案内制御システム1は、車両に予め装着されているナビゲーション装置、車両に後付けするナビゲーション装置、あるいはナビゲーション機能を備える各種装置であってもよい。 The route guidance control system 1 is a so-called navigation device. The route guidance control system 1 may be a navigation device pre-mounted on the vehicle, a navigation device retrofitted to the vehicle, or various devices having a navigation function.

記憶部10は、例えば、経路案内制御装置100の各部を実現させるためのプログラムを記憶している。この場合、経路案内制御装置100は、記憶部10に記憶されているプログラムを展開して実行することで、各部の機能を実現する。記憶部10は、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ(Flash Memory)などの半導体メモリ素子、または、ハードディスク、ソリッドステートドライブ、光ディスクなどの記憶装置で実現することができる。記憶部10は、複数の異なるメモリ等で構成されてもよい。記憶部10は、例えば、地図情報11を記憶している。地図情報11は、例えば、道路や施設に関する情報を含む。 The storage unit 10 stores, for example, a program for realizing each unit of the route guidance control device 100. In this case, the route guidance control device 100 realizes the functions of each unit by expanding and executing the program stored in the storage unit 10. The storage unit 10 is realized by, for example, a semiconductor memory element such as a RAM (Random Access Memory), a ROM (Read Only Memory), or a flash memory (Flash Memory), or a storage device such as a hard disk, a solid state drive, or an optical disk. Can be done. The storage unit 10 may be composed of a plurality of different memories or the like. The storage unit 10 stores, for example, the map information 11. The map information 11 includes, for example, information about roads and facilities.

GPS受信部20は、GPS受信回路、GPS受信アンテナなどから構成されており、GPS信号を受信する。GPS受信部20は、受信したGPS信号を現在位置情報取得部122に出力する。 The GPS receiving unit 20 is composed of a GPS receiving circuit, a GPS receiving antenna, and the like, and receives a GPS signal. The GPS receiving unit 20 outputs the received GPS signal to the current position information acquisition unit 122.

視線検出部30は、例えば、運転者の視線を検出するために、運転者の顔を撮影する。視線検出部30は、運転席と向かい合って配置されている。具体的には、視線検出部30は、例えば、インストルメントパネルや、後方を確認するためのルームミラーなどに設置される。視線検出部30は、例えば、運転をしている際に、経路案内の音声が出力された後の、運転者の顔を撮影する。この場合、視線検出部30は、例えば、運転者の前方方向の視線や、運転者が表示部50に対する視線を検出する。視線検出部30は、例えば、運転者の顔を撮影した可視光映像を視線検出制御部123に出力する。視線検出部30に特に制限はなく、例えば、可視光カメラや、赤外線カメラで実現することができる。 The line-of-sight detection unit 30 photographs, for example, the driver's face in order to detect the driver's line of sight. The line-of-sight detection unit 30 is arranged so as to face the driver's seat. Specifically, the line-of-sight detection unit 30 is installed on, for example, an instrument panel, a rear-view mirror for checking the rear, and the like. The line-of-sight detection unit 30 photographs, for example, the driver's face after the route guidance voice is output while driving. In this case, the line-of-sight detection unit 30 detects, for example, the driver's line of sight in the forward direction or the driver's line of sight to the display unit 50. The line-of-sight detection unit 30 outputs, for example, a visible light image of the driver's face to the line-of-sight detection control unit 123. The line-of-sight detection unit 30 is not particularly limited, and can be realized by, for example, a visible light camera or an infrared camera.

音声出力部40は、音声を含む種々の音を出力する。音声出力部40は、例えば、音声案内制御部124からの制御に従って、運転者に対して、目的地までの経路に関する音声案内を出力する。音声出力部40は、例えば、車両にオーディオ装置用に設置されたスピーカで実現することができる。 The voice output unit 40 outputs various sounds including voice. The voice output unit 40 outputs voice guidance regarding the route to the destination to the driver, for example, according to the control from the voice guidance control unit 124. The audio output unit 40 can be realized, for example, by a speaker installed for an audio device in a vehicle.

表示部50は、種々の映像を表示する。表示部50は、例えば、表示制御部126からの制御に従って、経路案内画像を表示する。表示部50は、例えば、自車両を運転中の運転者の前方に配置されている。表示部50は、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)または有機EL(Organic Electro-Luminescence)ディスプレイなどを含むディスプレイである。 The display unit 50 displays various images. The display unit 50 displays the route guidance image according to the control from the display control unit 126, for example. The display unit 50 is arranged in front of the driver who is driving the own vehicle, for example. The display unit 50 is a display including, for example, a liquid crystal display (LCD) or an organic EL (Organic Electro-Luminescence) display.

経路案内制御装置100は、経路案内制御部121と、現在位置情報取得部122と、視線検出制御部123と、音声案内制御部124と、案内制御部125と、表示制御部126とを備えている。経路案内制御部121と、現在位置情報取得部122と、視線検出制御部123と、音声案内制御部124と、案内制御部125と、表示制御部126とは、バス110を介して互いに接続されている。このような経路案内制御装置100は、例えば、CPU(Central Processing Unit)を含む電子的な回路で実現することができる。 The route guidance control device 100 includes a route guidance control unit 121, a current position information acquisition unit 122, a line-of-sight detection control unit 123, a voice guidance control unit 124, a guidance control unit 125, and a display control unit 126. There is. The route guidance control unit 121, the current position information acquisition unit 122, the line-of-sight detection control unit 123, the voice guidance control unit 124, the guidance control unit 125, and the display control unit 126 are connected to each other via the bus 110. ing. Such a route guidance control device 100 can be realized by, for example, an electronic circuit including a CPU (Central Processing Unit).

経路案内制御部121は、例えば、経路案内を実行する。経路案内制御部121は、例えば、ユーザから指示された目的地までの経路案内を、記憶部10に記憶されている地図情報11に基づいて実行する。この場合、経路案内制御部121は、現在位置に関する情報を現在位置情報取得部122から取得する。これにより、経路案内制御部121は、現在位置から目的地までの経路を地図情報11に基づいて実行する。 The route guidance control unit 121 executes, for example, route guidance. For example, the route guidance control unit 121 executes route guidance to the destination instructed by the user based on the map information 11 stored in the storage unit 10. In this case, the route guidance control unit 121 acquires information regarding the current position from the current position information acquisition unit 122. As a result, the route guidance control unit 121 executes the route from the current position to the destination based on the map information 11.

経路案内制御部121は、例えば、現在位置から目的地までの経路の音声案内を実行させるための制御信号を音声案内制御部124に出力する。経路案内制御部121は、例えば、右折及び左折などの案内対象地点までの距離が所定の第一の距離(例えば、300m)で、第一の音声案内を実行させるための制御信号を音声案内制御部124に出力する。経路案内制御部121は、例えば、案内対象地点までの距離が第一の距離よりも短い第二の距離(例えば、100m)で、第二の音声案内を実行させるための制御信号を音声案内制御部124に出力する。これにより、経路案内制御部121は、案内対象地点において、複数回の音声案内を音声案内制御部124に実行させる。経路案内制御部121は、例えば、右折及び左折などの案内対象地点に存在する建物や、施設などの名称を地図情報11から取得し、音声案内制御部124に出力してもよい。 The route guidance control unit 121 outputs, for example, a control signal for executing voice guidance of the route from the current position to the destination to the voice guidance control unit 124. The route guidance control unit 121 controls voice guidance to control a control signal for executing the first voice guidance when the distance to the guidance target point such as a right turn or a left turn is a predetermined first distance (for example, 300 m). Output to unit 124. The route guidance control unit 121 controls voice guidance for controlling a control signal for executing the second voice guidance at a second distance (for example, 100 m) in which the distance to the guidance target point is shorter than the first distance. Output to unit 124. As a result, the route guidance control unit 121 causes the voice guidance control unit 124 to execute voice guidance a plurality of times at the guidance target point. For example, the route guidance control unit 121 may acquire the names of buildings and facilities existing at the guidance target points such as right turn and left turn from the map information 11 and output them to the voice guidance control unit 124.

経路案内制御部121は、現在位置から目的地までの経路の経路案内画像を表示部50に表示させるための制御信号を表示制御部126に出力する。 The route guidance control unit 121 outputs a control signal for displaying the route guidance image of the route from the current position to the destination on the display unit 50 to the display control unit 126.

現在位置情報取得部122は、現在位置情報を取得する。現在位置情報取得部122は、例えば、GPS受信部20からGPS信号を取得し、取得したGPS信号に基づいて、現在位置情報を取得する。現在位置情報取得部122は、取得した現在位置情報を経路案内制御部121に出力する。 The current position information acquisition unit 122 acquires the current position information. The current position information acquisition unit 122 acquires, for example, a GPS signal from the GPS receiving unit 20, and acquires the current position information based on the acquired GPS signal. The current position information acquisition unit 122 outputs the acquired current position information to the route guidance control unit 121.

視線検出制御部123は、運転者の視線の方向を検出する。視線検出制御部123は、例えば、視線検出部30から受けた運転者の可視光映像または赤外光映像に基づいて、運転者の視線の方向を検出する。 The line-of-sight detection control unit 123 detects the direction of the driver's line of sight. The line-of-sight detection control unit 123 detects the direction of the driver's line of sight, for example, based on the driver's visible light image or infrared light image received from the line-of-sight detection unit 30.

図2を用いて、視線検出制御部123が運転者の視線を検出する方法について説明する。図2は、視線検出制御部123が運転者の視線を検出する方法を説明するための図である。 A method of detecting the driver's line of sight by the line-of-sight detection control unit 123 will be described with reference to FIG. FIG. 2 is a diagram for explaining a method in which the line-of-sight detection control unit 123 detects the line-of-sight of the driver.

図2に示すように、視線検出部30は、例えば、運転者U(ユーザ)の顔を撮影する。そして、視線検出部30は、図2に示すような、可視光映像を視線検出制御部123に出力する。具体的には後述するが、視線検出制御部123は、運転者Uの目130の目頭や瞳などの特徴点を検出することで、運転者Uの視線の方向Vを検出する。また、他の手法として、視線検出部30は、運転者Uの顔に赤外線を照射して赤外映像を撮影する。そして、視線検出制御部123は、赤外映像から運転者Uの両目の範囲を特定するとともに、角膜反射と瞳孔位置から、運転者Uの視線の方向Vを検出する。 As shown in FIG. 2, the line-of-sight detection unit 30 photographs, for example, the face of the driver U (user). Then, the line-of-sight detection unit 30 outputs a visible light image to the line-of-sight detection control unit 123 as shown in FIG. Specifically, as will be described later, the line-of-sight detection control unit 123 detects the direction V of the line-of-sight of the driver U by detecting feature points such as the inner corners of the eyes and the pupil of the driver U's eyes 130. As another method, the line-of-sight detection unit 30 irradiates the face of the driver U with infrared rays to capture an infrared image. Then, the line-of-sight detection control unit 123 identifies the range of both eyes of the driver U from the infrared image, and detects the direction V of the line-of-sight of the driver U from the corneal reflex and the pupil position.

例えば、図3を用いて、視線検出制御部123が表示部50を視認しているか否かを検出する方法について説明する。図3は、視線検出制御部123が表示部50を視認しているか否かを検出する方法を説明するための図である。 For example, a method of detecting whether or not the line-of-sight detection control unit 123 is visually recognizing the display unit 50 will be described with reference to FIG. FIG. 3 is a diagram for explaining a method of detecting whether or not the line-of-sight detection control unit 123 is visually recognizing the display unit 50.

図3に示すように、例えば、視線検出制御部123が、運転者Uの目130に基づいて、視線の方向Vを検出する。この場合、例えば、表示部50が運転者Uの斜め下方に設けられている場合に、視線の方向Vの位置が予め定められた斜め下方の所定の範囲Lに収まっている場合に、運転者Uが表示部50を視認していることを検出することができる。ここで、所定の範囲Lは、例えば、運転者Uが運転をしている際の頭部の位置と、表示部50が設置されている位置に基づいて設定すればよい。 As shown in FIG. 3, for example, the line-of-sight detection control unit 123 detects the direction V of the line-of-sight based on the eyes 130 of the driver U. In this case, for example, when the display unit 50 is provided diagonally below the driver U, and the position of the direction V of the line of sight is within a predetermined range L diagonally below a predetermined range, the driver It can be detected that U is visually recognizing the display unit 50. Here, the predetermined range L may be set based on, for example, the position of the head when the driver U is driving and the position where the display unit 50 is installed.

視線検出制御部123は、例えば、運転者に対する音声案内が行われた後に、経路案内画像を表示中の表示部50に対する運転者の所定の条件の視線を検出した場合、再度の音声案内を実行させるための制御信号を案内制御部125に出力する。所定の条件とは、例えば、音声案内に対して運転者が迷っていると判断される条件のことをいう。運転者が迷っている状態とは、例えば、所定の期間内に表示部50に対して視線が複数回向いたり、所定の期間内に前方と、表示部50とを交互に視認したり、表示部50を注視したりすることをいう。所定の期間は特に制限はないが、例えば、数秒間(例えば、2秒以内)である。運転者が迷っていると判断される状態は、これらの動作に限定されず、その他の動作を任意に設定してもよい。視線検出制御部123は、音声案内が行われたか否かについては、音声案内制御部124が出力する制御信号に基づいて、把握する。言い換えれば、視線検出制御部123は、音声案内制御部124が出力する制御信号に従って、視線検出部30が撮影した運転者の所定の条件の視線を検出する。 For example, when the line-of-sight detection control unit 123 detects the line-of-sight of the driver under the predetermined conditions for the display unit 50 displaying the route guidance image after the voice guidance to the driver is performed, the line-of-sight detection control unit 123 executes the voice guidance again. A control signal for causing the motion is output to the guidance control unit 125. The predetermined condition means, for example, a condition in which it is determined that the driver is at a loss for voice guidance. The state in which the driver is at a loss means, for example, that the line of sight is directed to the display unit 50 a plurality of times within a predetermined period, or the front and the display unit 50 are alternately visually recognized or displayed within a predetermined period. It means to watch the part 50. The predetermined period is not particularly limited, but is, for example, several seconds (for example, within 2 seconds). The state in which the driver is determined to be lost is not limited to these operations, and other operations may be arbitrarily set. The line-of-sight detection control unit 123 grasps whether or not voice guidance has been performed based on the control signal output by the voice guidance control unit 124. In other words, the line-of-sight detection control unit 123 detects the line-of-sight of the driver under predetermined conditions taken by the line-of-sight detection unit 30 according to the control signal output by the voice guidance control unit 124.

音声案内制御部124は、例えば、経路案内制御部121から出力された制御信号に基づいて、現在位置から目的地までの経路の音声案内を音声出力部40から出力する。具体的には、音声案内制御部124は、例えば、自車両が案内対象地点(例えば、左折地点)から300m手前の地点に到達した際に、「300m先を左方向です」といった音声案内を音声出力部40から出力する。 The voice guidance control unit 124 outputs voice guidance of the route from the current position to the destination from the voice output unit 40, for example, based on the control signal output from the route guidance control unit 121. Specifically, for example, when the own vehicle reaches a point 300 m before the guidance target point (for example, a left turn point), the voice guidance control unit 124 voices voice guidance such as "300 m ahead to the left". Output from the output unit 40.

音声案内制御部124は、例えば、案内制御部125から再度の音声案内を実行する旨の制御信号を受けた場合、再度の音声案内を音声出力部40から出力する。この場合、音声案内制御部124は、例えば、「先ほど、300m先を左方向ですと案内しました」といった再度の音声案内を音声出力部40から出力する。ここで、音声案内制御部124は、例えば、再度の音声案内地点から案内対象地点までの距離を音声出力部40から出力してもよい。例えば、一度目の音声案内から40m進んでいる場合には、音声案内制御部124は、「260m先を左方向です」といった更新された距離の再度の音声案内を音声出力部40から出力してもよい。また、音声案内制御部124は、一度目の音声案内から40m進んでいるような場合には、現在地から案内対象地点までの距離が切のいい距離まで待ってから、再度の音声案内を音声出力部40から出力してもよい。例えば、音声案内制御部124は、現在地から案内対象地点までの距離が260mの地点では音声案内を行わずに、案内対象地点までの距離が200mになった地点で「200m先を左方向です」といった再度の音声案内を音声出力部40から出力してもよい。音声案内制御部124は、例えば、一度目の音声案内を実行した後、その旨の情報を含む制御信号を視線検出制御部123に出力する。 For example, when the voice guidance control unit 124 receives a control signal from the guidance control unit 125 to execute the voice guidance again, the voice guidance control unit 124 outputs the voice guidance again from the voice output unit 40. In this case, the voice guidance control unit 124 outputs the voice guidance again from the voice output unit 40, for example, "I have previously guided you to the left direction 300 m ahead". Here, the voice guidance control unit 124 may output, for example, the distance from the voice guidance point again to the guidance target point from the voice output unit 40. For example, when traveling 40 m from the first voice guidance, the voice guidance control unit 124 outputs another voice guidance of the updated distance such as "260 m ahead to the left" from the voice output unit 40. May be good. Further, when the voice guidance control unit 124 is 40 m ahead of the first voice guidance, the voice guidance control unit 124 waits until the distance from the current location to the guidance target point is a good distance, and then outputs the voice guidance again. It may be output from the unit 40. For example, the voice guidance control unit 124 does not perform voice guidance at a point where the distance from the current location to the guidance target point is 260 m, and at the point where the distance to the guidance target point is 200 m, "200 m ahead is to the left". The voice guidance such as is may be output from the voice output unit 40 again. For example, the voice guidance control unit 124 outputs a control signal including information to that effect to the line-of-sight detection control unit 123 after executing the first voice guidance.

音声案内制御部124は、例えば、経路案内制御部121から案内対象地点に存在する建物名や、施設名などの情報を経路案内制御部121から受けた場合には、再度の音声案内において、建物名や、施設名に基づいた音声案内を実行してもよい。例えば、案内対象地点に、AA銀行が存在する場合には、音声案内制御部124は、「AA銀行がある次の交差点を左方向です」といった再度の音声案内を音声出力部40から出力してもよい。 For example, when the voice guidance control unit 124 receives information such as a building name existing at a guidance target point and a facility name from the route guidance control unit 121 from the route guidance control unit 121, the voice guidance control unit 124 performs the building again in the voice guidance. Voice guidance may be performed based on the name or facility name. For example, when the AA bank exists at the guidance target point, the voice guidance control unit 124 outputs another voice guidance such as "The next intersection where the AA bank is located is to the left" from the voice output unit 40. May be good.

音声案内制御部124は、例えば、再度の音声案内においては、一度目の音声案内よりも運転者が案内の内容を把握しやすいように、音声案内を実行してもよい。この場合、音声案内制御部124は、例えば、一度目の音声案内よりも音声の音の大きさを変化させたり、一度目の音声案内とは音声案内速度を変化させたりして、音声案内を実行してもよい。音声案内制御部124は、例えば、再度の音声案内においては、声質や、声色を変化させて経路案内を実行してもよい。 For example, in the voice guidance again, the voice guidance control unit 124 may execute the voice guidance so that the driver can easily grasp the content of the guidance than the first voice guidance. In this case, the voice guidance control unit 124 performs voice guidance by, for example, changing the loudness of the voice from the first voice guidance or changing the voice guidance speed from the first voice guidance. You may do it. For example, in the voice guidance again, the voice guidance control unit 124 may execute the route guidance by changing the voice quality and the voice color.

案内制御部125は、再度の音声案内を実行させるための制御信号を音声案内制御部124に出力する。具体的には、案内制御部125には、例えば、音声案内制御部124による音声案内が実行された後に、経路案内画像を表示中の表示部50に対する運転者の視線が所定の条件を満たす場合、視線検出制御部123から制御信号が入力される。そして、案内制御部125は、視線検出制御部123からの制御信号に従って、再度の音声案内を実行させるための制御信号を音声案内制御部124に出力する。 The guidance control unit 125 outputs a control signal for executing the voice guidance again to the voice guidance control unit 124. Specifically, when the guidance control unit 125 satisfies a predetermined condition, for example, when the driver's line of sight to the display unit 50 displaying the route guidance image satisfies the predetermined condition after the voice guidance by the voice guidance control unit 124 is executed. , A control signal is input from the line-of-sight detection control unit 123. Then, the guidance control unit 125 outputs a control signal for executing the voice guidance again to the voice guidance control unit 124 according to the control signal from the line-of-sight detection control unit 123.

表示制御部126は、種々の情報を表示部50に表示する。表示制御部126は、例えば、経路案内制御部121から出力された制御信号に基づいて、表示部50に経路案内画像を表示する。 The display control unit 126 displays various information on the display unit 50. The display control unit 126 displays the route guidance image on the display unit 50, for example, based on the control signal output from the route guidance control unit 121.

次に、図4を用いて、第一実施形態に係る経路案内制御装置の処理について説明する。図4は、第一実施形態に係る経路案内制御装置の処理の流れの一例を示すフローチャートである。 Next, the process of the route guidance control device according to the first embodiment will be described with reference to FIG. FIG. 4 is a flowchart showing an example of the processing flow of the route guidance control device according to the first embodiment.

まず、経路案内制御装置100は、案内対象地点における、音声案内が必要であるか否かを判定する(ステップS101)。音声案内の要否は、例えば、経路案内において音声による案内を利用するか否かの設定に基づく。さらには、案内対象地点が音声による案内を要する案内対象地点であるか否かの設定に基づく。具体的には、走行中の道路から交差する他の道路や、走行中の道路に隣接する駐車場や目的地などの侵入地点など、地点を明確に指示する必要がある地点は、音声による案内を必要とする。 First, the route guidance control device 100 determines whether or not voice guidance is required at the guidance target point (step S101). The necessity of voice guidance is based on, for example, the setting of whether or not to use voice guidance in route guidance. Furthermore, it is based on the setting of whether or not the guidance target point is a guidance target point that requires voice guidance. Specifically, voice guidance is provided for points where it is necessary to clearly indicate the points, such as other roads that intersect with the road on which the vehicle is traveling, and intrusion points such as parking lots and destinations adjacent to the road on which the vehicle is traveling. Needs.

音声案内が必要でない場合(ステップS101の「No」)、経路案内制御装置100は、図4に記載の処理を終了する。一方、音声案内が必要である場合(ステップS101の「Yes」)、経路案内制御装置100は、ステップS102に進む。 When voice guidance is not required (“No” in step S101), the route guidance control device 100 ends the process described in FIG. On the other hand, when voice guidance is required (“Yes” in step S101), the route guidance control device 100 proceeds to step S102.

経路案内制御装置100は、ステップS102において、第一の音声案内の開始タイミングであるか否かを判定する。具体的には、経路案内制御装置100は、現在位置情報取得部122が取得した現在位置情報に基づいて、第一の音声案内の開始タイミングであるか否かを判定する。 In step S102, the route guidance control device 100 determines whether or not it is the start timing of the first voice guidance. Specifically, the route guidance control device 100 determines whether or not it is the start timing of the first voice guidance based on the current position information acquired by the current position information acquisition unit 122.

第一の音声案内の開始タイミングでない場合(ステップS102の「No」)、経路案内制御装置100は、ステップS102の処理を繰り返し実行し、第一の音声案内の開始タイミングまで待機する。一方、第一の音声案内タイミングである場合(ステップS102の「Yes」)、経路案内制御装置100は、ステップS103に進む。 If it is not the start timing of the first voice guidance (“No” in step S102), the route guidance control device 100 repeatedly executes the process of step S102 and waits until the start timing of the first voice guidance. On the other hand, when it is the first voice guidance timing (“Yes” in step S102), the route guidance control device 100 proceeds to step S103.

次に、経路案内制御装置100は、音声出力部40から音声を出力することで、運転者に対して、第一の音声案内を実行する(ステップS103)。具体的には、経路案内制御装置100は、音声案内制御部124によって、音声出力部40から第一の音声案内を出力する。そして、経路案内制御装置100は、ステップS104に進む。 Next, the route guidance control device 100 executes the first voice guidance to the driver by outputting voice from the voice output unit 40 (step S103). Specifically, the route guidance control device 100 outputs the first voice guidance from the voice output unit 40 by the voice guidance control unit 124. Then, the route guidance control device 100 proceeds to step S104.

次に、経路案内制御装置100は、ステップS104において、第一の音声案内が実行されてから、所定の時間が経過したか否かを判定する。 Next, in step S104, the route guidance control device 100 determines whether or not a predetermined time has elapsed since the first voice guidance was executed.

所定の時間が経過していない場合には(ステップS104の「No」)、経路案内制御装置100は、ステップS105に進む。一方、所定の時間が経過した場合には(ステップS104の「Yes」)、経路案内制御装置100は、ステップS107に進む。 If the predetermined time has not elapsed (“No” in step S104), the route guidance control device 100 proceeds to step S105. On the other hand, when the predetermined time has elapsed (“Yes” in step S104), the route guidance control device 100 proceeds to step S107.

経路案内制御装置100は、ステップS105において、第一の音声案内が実行されてから所定の時間が経過していない場合、運転者の表示部50に対する視線を複数回検出したか否かを判定する。具体的には、経路案内制御装置100は、視線検出制御部123によって、視線検出部30から運転者の視線を検出して判定する。 In step S105, the route guidance control device 100 determines whether or not the driver has detected the line of sight to the display unit 50 a plurality of times when a predetermined time has not elapsed since the first voice guidance was executed. .. Specifically, the route guidance control device 100 detects and determines the driver's line of sight from the line-of-sight detection unit 30 by the line-of-sight detection control unit 123.

運転者の表示部50に対する視線を複数回検出しなかった場合(ステップS105の「No」)、経路案内制御装置100は、ステップS104に戻る。すなわち、経路案内制御装置100は、第一の音声案内が実行されてから所定の時間が経過するまでの間、運転者の表示部50に対する視線の判定を繰り返し実行する。一方、運転者の表示部50に対する視線を複数回検出した場合(ステップS105の「Yes」)、経路案内制御装置100は、ステップS106に進む。 When the line of sight to the display unit 50 of the driver is not detected a plurality of times (“No” in step S105), the route guidance control device 100 returns to step S104. That is, the route guidance control device 100 repeatedly executes determination of the line of sight of the driver's display unit 50 from the time when the first voice guidance is executed until a predetermined time elapses. On the other hand, when the line of sight to the display unit 50 of the driver is detected a plurality of times (“Yes” in step S105), the route guidance control device 100 proceeds to step S106.

次に、経路案内制御装置100は、運転者に対して、再度の音声案内を実行する(ステップS106)。具体的には、経路案内制御装置100は、案内制御部125によって音声案内制御部124を制御することで、再度の音声案内を音声出力部40から出力する。そして、経路案内制御装置100は、ステップS107に進む。 Next, the route guidance control device 100 executes voice guidance again to the driver (step S106). Specifically, the route guidance control device 100 controls the voice guidance control unit 124 by the guidance control unit 125, so that the voice guidance again is output from the voice output unit 40. Then, the route guidance control device 100 proceeds to step S107.

経路案内制御装置100は、ステップS107において、第二の音声案内の開始タイミングであるか否かを判定する。具体的には、経路案内制御装置100は、現在位置情報取得部122によって現在位置を取得して、第二の音声案内の開始タイミングであるか否かを判定する。 In step S107, the route guidance control device 100 determines whether or not it is the start timing of the second voice guidance. Specifically, the route guidance control device 100 acquires the current position by the current position information acquisition unit 122, and determines whether or not it is the start timing of the second voice guidance.

第二の音声案内の開始タイミングでない場合(ステップS107の「No」)、経路案内制御装置100は、ステップS107の処理を繰り返し、第二の音声案内の開始タイミングまで待機する。一方、第二の音声案内タイミングである場合(ステップS107の「Yes」)、経路案内制御装置100は、ステップS108に進む。 If it is not the start timing of the second voice guidance (“No” in step S107), the route guidance control device 100 repeats the process of step S107 and waits until the start timing of the second voice guidance. On the other hand, when it is the second voice guidance timing (“Yes” in step S107), the route guidance control device 100 proceeds to step S108.

次に、経路案内制御装置100は、音声出力部40から音声を出力することで、運転者に対して、第二の音声案内を実行する(ステップS108)。そして、経路案内制御装置100は、図4の処理を終了する。 Next, the route guidance control device 100 executes the second voice guidance to the driver by outputting the voice from the voice output unit 40 (step S108). Then, the route guidance control device 100 ends the process of FIG.

次に図5を用いて、第一実施形態に係る経路案内制御装置の処理の変形例について説明する。図5は、第一実施形態に係る経路案内制御装置の処理の流れの一例を示すフローチャートである。 Next, a modified example of the processing of the route guidance control device according to the first embodiment will be described with reference to FIG. FIG. 5 is a flowchart showing an example of the processing flow of the route guidance control device according to the first embodiment.

図5に図示のステップS201~ステップS204については、図4に図示のステップS101~ステップS104と同様なので、説明は省略する。 Since steps S201 to S204 shown in FIG. 5 are the same as steps S101 to S104 shown in FIG. 4, description thereof will be omitted.

ステップS204の後、経路案内制御装置100は、運転者が表示部50と、前方とを交互に複数回視認したか否かを検出する。 After step S204, the route guidance control device 100 detects whether or not the driver has visually recognized the display unit 50 and the front alternately a plurality of times.

運転者が表示部50と、前方とを交互に複数回視認したことが検出されなかった場合(ステップS205の「No」)、経路案内制御装置100は、ステップS204に戻る。一方、運転者が表示部50と、前方とを交互に複数回視認したことが検出された場合(ステップS205の「Yes」)、ステップS206に進む。 When it is not detected that the driver visually recognizes the display unit 50 and the front alternately a plurality of times (“No” in step S205), the route guidance control device 100 returns to step S204. On the other hand, when it is detected that the driver visually recognizes the display unit 50 and the front alternately a plurality of times (“Yes” in step S205), the process proceeds to step S206.

図5に図示のステップS206~ステップS208については、図4に図示のステップS106~ステップS108と同様なので、説明は省略する。 Since steps S206 to S208 shown in FIG. 5 are the same as steps S106 to S108 shown in FIG. 4, description thereof will be omitted.

上述のとおり、第一実施形態では、第一の音声案内が実行された後、運転者の視線の方向が所定の方向を向いていた場合に、第二の音声案内が実行される前に、再度の音声案内を実行させることができる。これにより、第一実施形態は、運転者に対して、案内対象地点を適切に把握させることができる。 As described above, in the first embodiment, after the first voice guidance is executed, when the direction of the driver's line of sight is in a predetermined direction, before the second voice guidance is executed, The voice guidance can be executed again. Thereby, in the first embodiment, the driver can appropriately grasp the guidance target point.

[第二実施形態]
次に、図6を用いて、第二実施形態に係る経路案内制御システムについて説明する。図6は、第二実施形態に係る経路案内制御システム1の構成を示すブロック図である。
[Second Embodiment]
Next, the route guidance control system according to the second embodiment will be described with reference to FIG. FIG. 6 is a block diagram showing a configuration of the route guidance control system 1 according to the second embodiment.

図6に示すように、経路案内制御システム1Aは、記憶部10と、GPS受信部20と、視線検出部30と、音声出力部40と、表示部50と、カメラ60と、経路案内制御装置100Aとを備える。経路案内制御装置100Aは、経路案内制御部121と、現在位置情報取得部122と、視線検出制御部123と、音声案内制御部124と、案内制御部125と、表示制御部126と、撮影データ取得部127と、撮影データ認識部128とを備えている。すなわち、経路案内制御システム1Aは、カメラ60を備えている点と、経路案内制御装置100Aが撮影データ取得部127と、撮影データ認識部128とを備えている点で、経路案内制御システム1とは異なっている。 As shown in FIG. 6, the route guidance control system 1A includes a storage unit 10, a GPS reception unit 20, a line-of-sight detection unit 30, a voice output unit 40, a display unit 50, a camera 60, and a route guidance control device. It is equipped with 100A. The route guidance control device 100A includes a route guidance control unit 121, a current position information acquisition unit 122, a line-of-sight detection control unit 123, a voice guidance control unit 124, a guidance control unit 125, a display control unit 126, and shooting data. It includes an acquisition unit 127 and a shooting data recognition unit 128. That is, the route guidance control system 1A includes a camera 60, and the route guidance control device 100A includes a shooting data acquisition unit 127 and a shooting data recognition unit 128. Is different.

カメラ60は、例えば、自車両の前方を走行する車両を撮影する。この場合、カメラ60は、例えば、一般的なフロントカメラで実現することができる。カメラ60は、撮影した自車両の前方を走行する車両の撮影データを撮影データ取得部127に出力する。 The camera 60 captures, for example, a vehicle traveling in front of the own vehicle. In this case, the camera 60 can be realized by, for example, a general front camera. The camera 60 outputs the shooting data of the vehicle traveling in front of the own vehicle to the shooting data acquisition unit 127.

撮影データ取得部127は、例えば、カメラ60からカメラ60が撮影した撮影データを取得する。撮影データ取得部127は、例えば、カメラ60から取得した撮影データを撮影データ認識部128に出力する。 The shooting data acquisition unit 127 acquires shooting data shot by the camera 60 from the camera 60, for example. The shooting data acquisition unit 127 outputs, for example, the shooting data acquired from the camera 60 to the shooting data recognition unit 128.

撮影データ認識部128は、例えば、撮影データに基づいて、先行車両の走行状況を認識する。具体的には、撮影データ認識部128は、例えば、案内対象地点における先行車両の走行状況を認識する。案内対象地点における先行車両の走行状況とは、例えば、案内対象地点で先行車両が直進したり、左折したり、右折したりする状況を含む。先行車両の走行状況は、例えば、先行車両が走行している走行車線、先行車両のウインカーの点滅、案内対象地点近傍における減速の度合い(加速度の変化)などに基づいて認識すればよい。撮影データ認識部128は、先行車両の走行状況の認識結果を、音声案内制御部124に出力する。 The shooting data recognition unit 128 recognizes the traveling status of the preceding vehicle based on the shooting data, for example. Specifically, the shooting data recognition unit 128 recognizes, for example, the traveling status of the preceding vehicle at the guidance target point. The traveling situation of the preceding vehicle at the guidance target point includes, for example, a situation in which the preceding vehicle goes straight, turns left, or turns right at the guidance target point. The traveling condition of the preceding vehicle may be recognized based on, for example, the traveling lane in which the preceding vehicle is traveling, the blinking of the blinker of the preceding vehicle, the degree of deceleration in the vicinity of the guidance target point (change in acceleration), and the like. The shooting data recognition unit 128 outputs the recognition result of the traveling condition of the preceding vehicle to the voice guidance control unit 124.

音声案内制御部124は、例えば、先行車両の走行状況に基づいた音声案内を、音声出力部40から出力する。音声案内制御部124は、例えば、再度の音声案内を実行するための制御信号を受けた後、撮影データ認識部128から受けた認識結果が、自車両の進行方向と同一であった場合に、先行車両の走行状況に基づいた音声案内を、音声出力部40から出力する。例えば、案内対象地点において、先行車両が左折をし、自車両も左折をする場合には、音声案内制御部124は、「先行車両について行ってください」といったような音声案内を音声出力部40から出力する。 The voice guidance control unit 124 outputs, for example, voice guidance based on the traveling condition of the preceding vehicle from the voice output unit 40. The voice guidance control unit 124 receives, for example, a recognition result received from the photographing data recognition unit 128 after receiving a control signal for executing voice guidance again, when the recognition result is the same as the traveling direction of the own vehicle. The voice guidance based on the traveling condition of the preceding vehicle is output from the voice output unit 40. For example, when the preceding vehicle makes a left turn and the own vehicle also makes a left turn at the guidance target point, the voice guidance control unit 124 provides voice guidance such as "Please follow the preceding vehicle" from the voice output unit 40. Output.

図7を用いて、第二実施形態に係る経路案内制御装置100Aの処理について説明する。図7は、第二実施形態に係る経路案内制御装置100Aの処理の流れの一例を示すフローチャートである。 The process of the route guidance control device 100A according to the second embodiment will be described with reference to FIG. 7. FIG. 7 is a flowchart showing an example of the processing flow of the route guidance control device 100A according to the second embodiment.

図7に図示のステップS301~ステップS305は、図4に図示のステップS101~ステップS105と同様なので、説明は省略する。 Since steps S301 to S305 shown in FIG. 7 are the same as steps S101 to S105 shown in FIG. 4, the description thereof will be omitted.

ステップS305の後、経路案内制御装置100Aは、先行車両の進行方向が自車両と同一であるか否かを判定する。具体的には、経路案内制御装置100Aは、撮影データ認識部128によって、先行車両の進行方向が自車両と同一であるか否かを判定する。 After step S305, the route guidance control device 100A determines whether or not the traveling direction of the preceding vehicle is the same as that of the own vehicle. Specifically, the route guidance control device 100A determines whether or not the traveling direction of the preceding vehicle is the same as that of the own vehicle by the photographing data recognition unit 128.

先行車両の進行方向が自車両の進行方向と同一でない場合(ステップS306の「No」)、経路案内制御装置100Aは、ステップS307に進み、図4に図示のステップS106のように、再度の音声案内を実行する(ステップS307)。そして、経路案内制御装置100Aは、ステップS309に進む。なお、図7に図示のステップS309とステップS310とは、それぞれ、図4に図示のステップS107とステップS108と同様なので、説明は省略する。ステップS310の後、経路案内制御装置100Aは、図7の処理を終了する。 When the traveling direction of the preceding vehicle is not the same as the traveling direction of the own vehicle (“No” in step S306), the route guidance control device 100A proceeds to step S307, and the voice is repeated again as in step S106 shown in FIG. Guidance is executed (step S307). Then, the route guidance control device 100A proceeds to step S309. Since step S309 and step S310 shown in FIG. 7 are the same as steps S107 and S108 shown in FIG. 4, respectively, description thereof will be omitted. After step S310, the route guidance control device 100A ends the process of FIG. 7.

一方、ステップS306において、先行車両の進行方向が自車両の進行方向と同一である場合(ステップS306の「Yes」)、経路案内制御装置100Aは、ステップS308に進む。 On the other hand, in step S306, when the traveling direction of the preceding vehicle is the same as the traveling direction of the own vehicle (“Yes” in step S306), the route guidance control device 100A proceeds to step S308.

経路案内制御装置100Aは、先行車両に基づいた再度の音声案内を実行する(ステップS308)。具体的には、経路案内制御装置100Aは、案内制御部125によって、先行車両の認識結果を撮影データ認識部128から受けた音声案内制御部124を制御することで、先行車両に基づいた再度の音声案内を音声出力部40から出力する。そして、経路案内制御装置100Aは、図7の処理を終了する。 The route guidance control device 100A executes voice guidance again based on the preceding vehicle (step S308). Specifically, the route guidance control device 100A controls the voice guidance control unit 124 that receives the recognition result of the preceding vehicle from the photographing data recognition unit 128 by the guidance control unit 125, so that the route guidance control device 100A can be used again based on the preceding vehicle. The voice guidance is output from the voice output unit 40. Then, the route guidance control device 100A ends the process of FIG. 7.

上述のとおり、第二実施形態では、第一の音声案内が実行された後、運転者の視線の方向が所定の方向を向いていた場合に、第二の音声案内が実行される前に、先行車両に基づいた再度の音声案内を実行させることができる。これにより、運転者は、案内対象地点をより適切に把握することができる。 As described above, in the second embodiment, after the first voice guidance is executed, when the direction of the driver's line of sight is in a predetermined direction, before the second voice guidance is executed, It is possible to execute the voice guidance again based on the preceding vehicle. As a result, the driver can more appropriately grasp the guidance target point.

第二実施形態においては、先行車両の走行状態の認識をカメラ60が撮影した撮影データに基づいて行うこととして説明したが、他の手法を用いて先行車両の走行状態を認識してもよい。例えば、車車間通信を用いることで、自車両の進行方向と同一方向に進行する他車両を特定してもよい。この場合、案内対象地点から例えば300mなど所定距離手前となった場合、周囲の他車両に進行方向情報を送信するリクエストを行い、リクエストに基づき送信された進行方向情報に基づいて、自車両の進行方向と同一方向に進行する他車両を特定する。この場合、音声案内制御部124は、「2台前の車両について行ってください」などの音声案内を行うことができる。また、進行方向情報には、他車両の特徴を特定する情報が含まれていてもよい。この場合、音声案内制御部124は、「先行した赤い車両についていってください」などの音声案内を行うことができる。 In the second embodiment, the recognition of the running state of the preceding vehicle is performed based on the shooting data captured by the camera 60, but the running state of the preceding vehicle may be recognized by using another method. For example, by using vehicle-to-vehicle communication, another vehicle traveling in the same direction as the own vehicle may be specified. In this case, when the vehicle is in front of a predetermined distance, for example, 300 m from the guidance target point, a request is made to transmit the traveling direction information to other vehicles in the vicinity, and the traveling of the own vehicle is performed based on the traveling direction information transmitted based on the request. Identify other vehicles traveling in the same direction as the direction. In this case, the voice guidance control unit 124 can perform voice guidance such as "Please follow the vehicle in front of two vehicles". Further, the traveling direction information may include information that identifies the characteristics of another vehicle. In this case, the voice guidance control unit 124 can perform voice guidance such as "Please follow the preceding red vehicle".

また、上述した各実施形態においては、第一の音声案内と第二の音声案内とを行うこととして説明したが、音声案内の回数は1回であっても2回以上であっても本発明を適用可能である。例えば、音声案内を1回行う場合においては、第一の音声案内後、案内対象地点に到達するまで、または案内対象地点の所定距離手前に到達するまでの間に、運転者の視線が所定条件となった場合に、音声案内を再度行わせるようにしてもよい。 Further, in each of the above-described embodiments, the first voice guidance and the second voice guidance have been described, but the present invention may be performed once or twice or more. Is applicable. For example, in the case of performing voice guidance once, the driver's line of sight is a predetermined condition after the first voice guidance until the guidance target point is reached or before the guidance target point is reached a predetermined distance. If it becomes, the voice guidance may be performed again.

さらに、上述した各実施形態において、ステップS104、ステップS204、ステップS304の各処理は、所定時間経過したか否かの判断に代えて、所定距離走行したか否かの判断としてもよき、所定時間経過したか否かの判断に、所定距離走行したか否かの判断を加えてもよい。この場合の所定距離とは、第一の音声案内を行うタイミングと第二の音声案内を開始するタイミングとの間の距離、または第一の音声案内を開始するタイミングと案内対象地点との間の距離である。この距離は、第二の音声案内を開始するタイミングまたは案内対象地点の手前であり、再度の音声案内と第二の音声案内を開始するタイミングまたは案内対象地点の案内とが連続して案内されない程度の距離であることがこのましい。 Further, in each of the above-described embodiments, the processes of step S104, step S204, and step S304 may be used as a determination as to whether or not the vehicle has traveled a predetermined distance, instead of determining whether or not a predetermined time has elapsed. A judgment as to whether or not the vehicle has traveled a predetermined distance may be added to the judgment as to whether or not the vehicle has passed. In this case, the predetermined distance is the distance between the timing of performing the first voice guidance and the timing of starting the second voice guidance, or the distance between the timing of starting the first voice guidance and the guidance target point. The distance. This distance is before the timing to start the second voice guidance or the guidance target point, and the timing to start the second voice guidance or the guidance to the guidance target point is not continuously guided. It is this distance.

以上、本発明の実施形態を説明したが、これら実施形態の内容により実施形態が限定されるものではない。また、前述した構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。さらに、前述した構成要素は適宜組み合わせることが可能である。さらに、前述した実施形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換又は変更を行うことができる。 Although the embodiments of the present invention have been described above, the embodiments are not limited by the contents of these embodiments. Further, the above-mentioned components include those that can be easily assumed by those skilled in the art, those that are substantially the same, that is, those in a so-called equal range. Furthermore, the components described above can be combined as appropriate. Further, various omissions, replacements or changes of the components can be made without departing from the gist of the above-described embodiment.

1,1A 経路案内制御システム
10 記憶部
11 地図情報
20 GPS受信部
30 視線検出部
40 音声出力部
50 表示部
60 カメラ
100,100A 経路案内制御装置
110 バス
121 経路案内制御部
122 現在位置情報取得部
123 視線検出制御部
124 音声案内制御部
125 案内制御部
126 表示制御部
127 撮影データ取得部
128 撮影データ認識部
1,1A Route guidance control system 10 Storage unit 11 Map information 20 GPS reception unit 30 Line-of-sight detection unit 40 Voice output unit 50 Display unit 60 Camera 100, 100A Route guidance control device 110 Bus 121 Route guidance control unit 122 Current position information acquisition unit 123 Line-of-sight detection control unit 124 Voice guidance control unit 125 Guidance control unit 126 Display control unit 127 Imaging data acquisition unit 128 Imaging data recognition unit

Claims (7)

経路案内を行う経路案内制御部と、
前記経路案内制御部による経路案内画像を表示部に表示する表示制御部と、
前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出制御部と、
前記経路案内制御部の処理に基づき音声案内を行う音声案内制御部と、
先行車両を撮影するカメラから前記先行車両の撮影データを取得する撮影データ取得部と、
前記撮影データに基づいて、前記先行車両の走行状況を認識する先行車両認識部と、
前記音声案内制御部による音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるときにおいて前記先行車両認識部が、前記先行車両の進行方向が自車両と同一であると認識した場合、前記音声案内制御部に前記先行車両の進行方向に関する情報を含めた音声案内を再度行わせる案内制御部と、
を備える、経路案内制御装置。
A route guidance control unit that provides route guidance and
A display control unit that displays a route guidance image by the route guidance control unit on the display unit,
A line-of-sight detection control unit that detects the user's line of sight to the display unit displaying the route guidance image, and a line-of-sight detection control unit.
A voice guidance control unit that provides voice guidance based on the processing of the route guidance control unit,
A shooting data acquisition unit that acquires shooting data of the preceding vehicle from a camera that shoots the preceding vehicle,
A preceding vehicle recognition unit that recognizes the traveling status of the preceding vehicle based on the shooting data,
After the voice guidance by the voice guidance control unit is executed , the preceding vehicle recognition unit advances the preceding vehicle when the user's line of sight to the display unit displaying the route guidance image is a predetermined condition. When it is recognized that the direction is the same as that of the own vehicle, the voice guidance control unit causes the voice guidance control unit to perform voice guidance again including information on the traveling direction of the preceding vehicle .
A route guidance control device.
前記音声案内制御部は、案内対象地点との距離関係を示す音声案内を行い、
前記案内制御部は、前記音声案内制御部により前記案内対象地点との距離関係を示す音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるとき、前記音声案内制御部に前記案内対象地点との更新された距離関係を示す音声案内を再度行わせる、
請求項1に記載の経路案内制御装置。
The voice guidance control unit provides voice guidance indicating the distance relationship with the guidance target point.
The guidance control unit has a predetermined condition that the user's line of sight to the display unit displaying the route guidance image is a predetermined condition after the voice guidance control unit executes voice guidance indicating a distance relationship with the guidance target point. When, the voice guidance control unit is made to perform voice guidance again indicating the updated distance relationship with the guidance target point.
The route guidance control device according to claim 1.
前記案内制御部は、前記音声案内制御部による音声案内が実行された後に、前記ユーザが前記表示部を所定の期間内に複数回見たことを検出した場合、前記音声案内制御部に音声案内を再度行わせる、
請求項1または2に記載の経路案内制御装置。
When the guidance control unit detects that the user has seen the display unit a plurality of times within a predetermined period after the voice guidance by the voice guidance control unit is executed, the voice guidance control unit provides voice guidance to the voice guidance control unit. To do it again,
The route guidance control device according to claim 1 or 2.
前記案内制御部は、前記音声案内制御部による音声案内が実行された後に、前記ユーザが前記表示部と前方を所定の期間内に複数回見たことを検出した場合、前記音声案内制御部に音声案内を再度行わせる、
請求項1または2に記載の経路案内制御装置。
When the guidance control unit detects that the user has seen the display unit and the front a plurality of times within a predetermined period after the voice guidance by the voice guidance control unit is executed, the voice guidance control unit informs the voice guidance control unit. Have voice guidance performed again,
The route guidance control device according to claim 1 or 2.
請求項1からのいずれか1項に記載の経路案内制御装置と、
地図情報を記憶する記憶部と、
前記ユーザの視線を検出する視線検出部と、
前記音声案内を出力する音声出力部と、を備える、
経路案内制御システム。
The route guidance control device according to any one of claims 1 to 4 .
A storage unit that stores map information,
The line-of-sight detection unit that detects the user's line of sight,
A voice output unit for outputting the voice guidance is provided.
Route guidance control system.
経路案内を行う経路案内ステップと、
前記経路案内ステップによる経路案内画像を表示部に表示する表示ステップと、
前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出ステップと、
前記経路案内ステップの処理に基づき音声案内を行う音声案内ステップと、
先行車両を撮影するカメラから前記先行車両の撮影データを取得する撮影データ取得ステップと、
前記撮影データに基づいて、前記先行車両の走行状況を認識する先行車両認識ステップと、
前記音声案内ステップによる音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるときにおいて前記先行車両認識ステップで、前記先行車両の進行方向が自車両と同一であると認識した場合前記先行車両の進行方向に関する情報を含めた音声案内を再度行わせる案内ステップと、
経路案内制御装置が実行する経路案内制御方法。
A route guidance step for route guidance and
A display step for displaying a route guidance image by the route guidance step on a display unit, and a display step.
A line-of-sight detection step for detecting the user's line of sight to the display unit displaying the route guidance image, and
A voice guidance step that provides voice guidance based on the processing of the route guidance step,
A shooting data acquisition step of acquiring shooting data of the preceding vehicle from a camera that shoots the preceding vehicle, and
A preceding vehicle recognition step for recognizing the traveling status of the preceding vehicle based on the shooting data,
After the voice guidance by the voice guidance step is executed , the traveling direction of the preceding vehicle in the preceding vehicle recognition step when the line of sight of the user to the display unit displaying the route guidance image is a predetermined condition. When it is recognized that the vehicle is the same as the own vehicle, a guidance step for re-performing voice guidance including information on the traveling direction of the preceding vehicle, and a guidance step.
The route guidance control method executed by the route guidance control device.
経路案内を行う経路案内ステップと、
前記経路案内ステップによる経路案内画像を表示部に表示する表示ステップと、
前記経路案内画像を表示中の前記表示部に対するユーザの視線を検出する視線検出ステップと、
前記経路案内ステップの処理に基づき音声案内を行う音声案内ステップと、
先行車両を撮影するカメラから前記先行車両の撮影データを取得する撮影データ取得ステップと、
前記撮影データに基づいて、前記先行車両の走行状況を認識する先行車両認識ステップと、
前記音声案内ステップによる音声案内が実行された後に、前記経路案内画像を表示中の前記表示部に対する前記ユーザの視線が所定の条件であるときにおいて前記先行車両認識ステップで、前記先行車両の進行方向が自車両と同一であると認識した場合前記先行車両の進行方向に関する情報を含めた音声案内を再度行わせる案内ステップと、
をコンピュータに実行させるための経路案内制御プログラム。

A route guidance step for route guidance and
A display step for displaying a route guidance image by the route guidance step on a display unit, and a display step.
A line-of-sight detection step for detecting the user's line of sight to the display unit displaying the route guidance image, and
A voice guidance step that provides voice guidance based on the processing of the route guidance step,
A shooting data acquisition step of acquiring shooting data of the preceding vehicle from a camera that shoots the preceding vehicle, and
A preceding vehicle recognition step for recognizing the traveling status of the preceding vehicle based on the shooting data,
After the voice guidance by the voice guidance step is executed , the traveling direction of the preceding vehicle in the preceding vehicle recognition step when the line of sight of the user to the display unit displaying the route guidance image is a predetermined condition. When it is recognized that the vehicle is the same as the own vehicle, a guidance step for re-performing voice guidance including information on the traveling direction of the preceding vehicle, and a guidance step.
A route guidance control program that allows a computer to execute.

JP2018198146A 2018-10-22 2018-10-22 Route guidance control device, route guidance control system, route guidance control method, and route guidance control program Active JP7070322B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018198146A JP7070322B2 (en) 2018-10-22 2018-10-22 Route guidance control device, route guidance control system, route guidance control method, and route guidance control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018198146A JP7070322B2 (en) 2018-10-22 2018-10-22 Route guidance control device, route guidance control system, route guidance control method, and route guidance control program

Publications (2)

Publication Number Publication Date
JP2020067285A JP2020067285A (en) 2020-04-30
JP7070322B2 true JP7070322B2 (en) 2022-05-18

Family

ID=70390104

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018198146A Active JP7070322B2 (en) 2018-10-22 2018-10-22 Route guidance control device, route guidance control system, route guidance control method, and route guidance control program

Country Status (1)

Country Link
JP (1) JP7070322B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002277271A (en) 2001-03-16 2002-09-25 Aisin Aw Co Ltd Navigation apparatus
JP2006343904A (en) 2005-06-08 2006-12-21 Xanavi Informatics Corp Driving support device
JP2007225282A (en) 2004-03-31 2007-09-06 Pioneer Electronic Corp Information presentation device, information presentation program, and information presentation method or the like
JP2009003767A (en) 2007-06-22 2009-01-08 Denso Corp On-vehicle machine

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002277271A (en) 2001-03-16 2002-09-25 Aisin Aw Co Ltd Navigation apparatus
JP2007225282A (en) 2004-03-31 2007-09-06 Pioneer Electronic Corp Information presentation device, information presentation program, and information presentation method or the like
JP2006343904A (en) 2005-06-08 2006-12-21 Xanavi Informatics Corp Driving support device
JP2009003767A (en) 2007-06-22 2009-01-08 Denso Corp On-vehicle machine

Also Published As

Publication number Publication date
JP2020067285A (en) 2020-04-30

Similar Documents

Publication Publication Date Title
JP4848893B2 (en) Intersection information providing system and driving support system
WO2017056224A1 (en) Information presenting device and information presenting method
JP6447958B2 (en) Sign recognition display device
JP2008015759A (en) Driving support device
WO2017145549A1 (en) Looking aside and oversight warning system and computer program
JP2012008790A (en) Driving support device and driving support method
JP2005127996A (en) Route guidance system, method, and program
WO2014020889A1 (en) Operation control device and operation control program
CN111189464B (en) Automatic driving device and navigation device
JP6825433B2 (en) Virtual image display device and computer program
CN110462699B (en) Display control device for vehicle and display unit for vehicle
JP3968720B2 (en) Image display device for vehicle
JPWO2018092298A1 (en) Vehicle control apparatus and vehicle control method
JP7070322B2 (en) Route guidance control device, route guidance control system, route guidance control method, and route guidance control program
US20210014409A1 (en) Apparatus for recording drive video of a vehicle and method thereof
JP6367081B2 (en) Driving support device, driving support program, and driving support method
JP2021043861A (en) Driving support control device, determination support control device, driving support system, driving support control method and determination support control method
KR101744718B1 (en) Display system and control method therof
US20210192974A1 (en) Driving teaching device
WO2018047393A1 (en) Video output system
JP6319173B2 (en) Vehicle regulation speed display device
KR20230031730A (en) Apparatus for determining a traffic light, system having the same and method thereof
JP2022041245A (en) Vehicle display control device, method, program, and vehicle display system
JP3864418B2 (en) Image display device for vehicle
JP5262224B2 (en) Drive recorder

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220307

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220418

R150 Certificate of patent or registration of utility model

Ref document number: 7070322

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150