JP2013216258A - Vehicular operating instruction support device - Google Patents

Vehicular operating instruction support device Download PDF

Info

Publication number
JP2013216258A
JP2013216258A JP2012090146A JP2012090146A JP2013216258A JP 2013216258 A JP2013216258 A JP 2013216258A JP 2012090146 A JP2012090146 A JP 2012090146A JP 2012090146 A JP2012090146 A JP 2012090146A JP 2013216258 A JP2013216258 A JP 2013216258A
Authority
JP
Japan
Prior art keywords
operation unit
switch
driver
vehicle
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012090146A
Other languages
Japanese (ja)
Other versions
JP5796533B2 (en
Inventor
Masaru Kakizaki
勝 柿崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2012090146A priority Critical patent/JP5796533B2/en
Publication of JP2013216258A publication Critical patent/JP2013216258A/en
Application granted granted Critical
Publication of JP5796533B2 publication Critical patent/JP5796533B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To smoothly notify an operation part designated by a driver to an external device in a support device for vehicular operating instructions, which is installed in a vehicle, and from which the driver receives the operating instructions on operation part in a cabin through communication with the external device.SOLUTION: A sight line detector 41 detects the direction of driver's sight line through the image of a driver taken by a camera 9 to give an output to a switch determiniator 43. The switch determiniator 43 preliminarily holds a data map of switches corresponding to the direction of driver's sight line to determine the switch designated by the driver. The ID of the determined switch is transmitted to a help desk 50. The determined switch is irradiated with a laser by a laser irradiation device 22 while changing over to a switch designated by the help desk 50.

Description

本発明は、車両に搭載され、オペレータが常駐するヘルプデスク等の外部装置との通信を介して、ドライバが車室内の操作部の操作説明を受ける際に利用される車両用操作説明支援装置に関する。   The present invention relates to a vehicle operation explanation support device that is mounted on a vehicle and used when a driver receives an operation explanation of an operation unit in a vehicle compartment via communication with an external device such as a help desk where an operator resides. .

近年、自動車等の車両の高機能化に伴い、運転席の周辺には多数のスイッチ等の操作部が設けられるようになっている。このため、例えばカーシェア等によって、乗りなれていない車に搭乗するドライバは、運転席の周辺にあるスイッチがどういう機能を有しているか分からない場合がある。同様に、機械の扱いが苦手なドライバは、自身の所有する車両であっても運転席の周辺にあるスイッチがどういう機能を有しているか分からない場合がある。   2. Description of the Related Art In recent years, with the enhancement of functions of vehicles such as automobiles, a large number of operation units such as switches are provided around the driver's seat. For this reason, for example, a driver who rides in a car that is not on board due to car sharing or the like may not know what function the switch around the driver's seat has. Similarly, a driver who is not good at handling a machine may not know what function a switch around the driver's seat has even if it is a vehicle owned by the driver.

このような課題を解決する方法として、車両の外部装置として予め設けられたヘルプデスクのオペレータが、通信を介してドライバと双方向で会話をしながら、操作部の機能や位置を説明する方法がある。しかし、会話だけではドライバの意図がオペレータにうまく伝わらず、長い時間を要してしまうことがあり効率が悪い。また、車両の走行中にドライバが自分の意図を懸命にオペレータに伝えようとして、会話に集中して運転における集中力が低下してしまうのも好ましくない。   As a method for solving such a problem, there is a method in which a help desk operator provided in advance as an external device of a vehicle has two-way conversation with a driver via communication to explain functions and positions of an operation unit. is there. However, the conversation is not efficient because the driver's intention is not well communicated to the operator and may take a long time. In addition, it is not preferable that the driver concentrates on the conversation and the concentration in driving decreases because the driver tries to convey his intention to the operator while the vehicle is running.

そこで、ドライバがオペレータと会話する際、オペレータが通信を介して指定した車両の操作部にレーザ照射する装置が提案されている。この装置を使用すれば、ドライバはオペレータが指定するスイッチを即座に把握でき、説明を効率よく受けることができる(例えば、特許文献1参照)。   In view of this, there has been proposed an apparatus for irradiating a laser to an operation portion of a vehicle designated by an operator through communication when the driver talks with the operator. By using this device, the driver can immediately grasp the switch designated by the operator and can receive an explanation efficiently (for example, see Patent Document 1).

特開2008−296606号公報JP 2008-296606 A

しかしながら、特許文献1に記載の発明では、オペレータが指定した操作部をドライバへ分かりやすく伝えることはできても、ドライバからオペレータへ、そのドライバが機能を知りたい操作部の位置等を分かりやすく伝えることができない。そこで、本発明は、車両に搭載され、外部装置との通信を介してドライバが車室内の操作部の操作説明を受ける車両用操作説明支援装置において、ドライバが指定した操作部を前記外部装置へ円滑に通知することを目的としてなされた。   However, in the invention described in Patent Document 1, even if the operation unit designated by the operator can be transmitted to the driver in an easy-to-understand manner, the position of the operation unit that the driver wants to know the function from the driver is easily transmitted to the driver. I can't. Accordingly, the present invention provides a vehicle operation explanation support device that is mounted on a vehicle and receives an operation explanation of an operation unit in a vehicle compartment via communication with an external device. The operation unit designated by the driver is sent to the external device. It was made for the purpose of smooth notification.

前記目的を達するためになされた本発明の車両用操作説明支援装置では、受信手段は、車室内の操作部の操作説明を外部装置との通信を介して受信してドライバに提供する。一方、操作部判定手段は、ドライバの視線を検出して、前記車室内の複数の操作部のうちドライバが注視している操作部を判定し、通知手段は、その操作部判定手段が判定した操作部を前記通信を介して前記外部装置に通知する。このため、ドライバが注視した操作部を外部装置へ円滑に通知することができ、外部装置からよりドライバの所望に一致した操作説明を受信することが可能となる。なお、前記操作部判定手段が判定した操作部に局所的に可視光を照射する照射手段を、更に備えていれば、前記通知手段によって通知された操作部をドライバが確認でき、装置の信頼性が向上する。   In the vehicle operation explanation support apparatus of the present invention made to achieve the above object, the receiving means receives the operation explanation of the operation unit in the vehicle compartment via communication with an external device and provides it to the driver. On the other hand, the operation unit determination means detects the driver's line of sight to determine the operation unit being watched by the driver among the plurality of operation units in the vehicle interior, and the notification unit is determined by the operation unit determination unit The operation unit is notified to the external device via the communication. For this reason, the operation unit watched by the driver can be smoothly notified to the external device, and it is possible to receive an operation description more consistent with the driver's desire from the external device. If the operation unit determined by the operation unit determination unit is further provided with irradiation means for locally irradiating visible light, the driver can confirm the operation unit notified by the notification unit, and the reliability of the apparatus Will improve.

本発明が適用された車両の車室内の構成を表す外観図である。It is an external view showing the structure of the vehicle interior of the vehicle to which this invention was applied. その車室内に設けられたカメラの動作を表す説明図である。It is explanatory drawing showing operation | movement of the camera provided in the vehicle interior. 前記車両の車両用操作説明支援装置の構成を表すブロック図である。It is a block diagram showing the structure of the vehicle operation description assistance apparatus of the said vehicle. その車両用操作説明支援装置による通知処理を表すフローチャートである。It is a flowchart showing the notification process by the operation description assistance apparatus for vehicles. その車両用操作説明支援装置による切替処理を表すフローチャートである。It is a flowchart showing the switching process by the operation explanation assistance device for vehicles. その車両用操作説明支援装置による照射処理を表すフローチャートである。It is a flowchart showing the irradiation process by the operation explanation assistance device for vehicles. ヘルプデスクによるヘルプ処理を表すフローチャートである。It is a flowchart showing the help process by a help desk. 前記車室内に設けられたレーザ照射装置の動作を表す説明図である。It is explanatory drawing showing operation | movement of the laser irradiation apparatus provided in the said vehicle interior.

[実施形態の構成]
次に、本発明の実施形態を図面と共に説明する。なお、本実施形態の車両1は、オペレータOPが常駐するヘルプデスク50(図3参照)との通信を介して、ドライバD(図2参照)が車室内のスイッチ11,12,13,…の操作説明を受けることができるように構成されたものある。
[Configuration of the embodiment]
Next, embodiments of the present invention will be described with reference to the drawings. Note that in the vehicle 1 of the present embodiment, the driver D (see FIG. 2) sets the switches 11, 12, 13,... In the vehicle interior via communication with the help desk 50 (see FIG. 3) where the operator OP resides. Some are configured to receive operation instructions.

図1に示すように、車両1は、フロントガラス2の下方に設けられたインストルメントパネル3に、ドライバDがヘルプデスク50に質問等を発するためのドライバ用マイク5と、それに対するヘルプデスク50からの回答等を発声するドライバ用スピーカ7とを備えている。また、インストルメントパネル3には、ドライバDの視線を検出するためのカメラ9も設けられている。このカメラ9は、図2に模式的に示すように、ドライバDの顔を含む範囲の画像、すなわち、図2にAで示した範囲の画像を撮影する。   As shown in FIG. 1, a vehicle 1 includes an instrument panel 3 provided below a windshield 2, a driver microphone 5 for a driver D to ask questions to the help desk 50, and a help desk 50 corresponding thereto. And a driver speaker 7 that utters an answer from the user. The instrument panel 3 is also provided with a camera 9 for detecting the line of sight of the driver D. As schematically shown in FIG. 2, the camera 9 captures an image of a range including the face of the driver D, that is, an image of a range indicated by A in FIG.

図1に戻って、また、車両1の車室内には、ヘルプデスク50を呼び出すためのヘルプデスク呼び出しスイッチ10が、一般的な車両にも設けられる他のスイッチ11,12,13,…と共に設けられている。更に、車室の天井20には、レーザ照射口21からスイッチ11,12,13,…に向けて可視光としてのレーザを局所的に照射するレーザ照射装置22が設けられている。   Returning to FIG. 1, a help desk call switch 10 for calling the help desk 50 is provided in the passenger compartment of the vehicle 1 together with other switches 11, 12, 13,. It has been. Further, the ceiling 20 of the passenger compartment is provided with a laser irradiation device 22 for locally irradiating laser as visible light from the laser irradiation port 21 toward the switches 11, 12, 13,.

図3は、車両1の車内(以下、単に車内という)に設けられた本実施形態の車両用操作説明支援装置としての構成を、その装置が通信を行うヘルプデスク50の構成と共に表すブロック図である。なお、ヘルプデスク50は、全国各地域にまたは全国で1箇所に設けられた施設で、オペレータOPが操作可能な端末装置51を備えている。端末装置51は、例えば、マウス及びキーボードを備えた一般のパーソナルコンピュータで構成することができる。また、ヘルプデスク50は、車両1に搭載された車載通信装置29と通信可能なヘルプデスク用通信装置53を備えており、このヘルプデスク用通信装置53は端末装置51に接続されている。なお、車載通信装置29とヘルプデスク用通信装置53との間の通信は、電話回線,インターネット等、各種通信回線を利用して行うことができる。   FIG. 3 is a block diagram illustrating the configuration of the vehicle operation explanation support device of the present embodiment provided in the vehicle 1 (hereinafter simply referred to as the vehicle interior) together with the configuration of the help desk 50 with which the device communicates. is there. The help desk 50 includes a terminal device 51 that can be operated by the operator OP at a facility provided in each region of the country or in one place in the country. The terminal device 51 can be configured by a general personal computer including a mouse and a keyboard, for example. The help desk 50 includes a help desk communication device 53 that can communicate with the in-vehicle communication device 29 mounted on the vehicle 1, and the help desk communication device 53 is connected to the terminal device 51. Communication between the in-vehicle communication device 29 and the help desk communication device 53 can be performed using various communication lines such as a telephone line and the Internet.

更に、端末装置51には、オペレータOPが使用するオペレータ用マイク55とオペレータ用スピーカ57とが接続されている。車両1の車載通信装置29にも、前述のドライバ用マイク5とドライバ用スピーカ7とが接続されている。このため、前記通信を介して、ドライバDとオペレータOPとの間で双方向の通話を行うことができる。   Furthermore, an operator microphone 55 and an operator speaker 57 used by the operator OP are connected to the terminal device 51. The in-vehicle communication device 29 of the vehicle 1 is also connected to the driver microphone 5 and the driver speaker 7 described above. For this reason, a two-way call can be performed between the driver D and the operator OP via the communication.

また、レーザ照射装置22を制御するレーザ照射制御器30は、CPU,ROM,RAMを備えたマイクロコンピュータとして構成され、後述の処理で使用される第1メモリ31,第2メモリ32を備えている。更に、レーザ照射制御器30は、経過時間を計測するタイマ35と、第1メモリ31または第2メモリ32に対応して数値「1」または「2」が設定されるカウンタ37とが設けられている。   The laser irradiation controller 30 that controls the laser irradiation device 22 is configured as a microcomputer including a CPU, a ROM, and a RAM, and includes a first memory 31 and a second memory 32 that are used in processing to be described later. . Further, the laser irradiation controller 30 is provided with a timer 35 for measuring the elapsed time, and a counter 37 for setting a numerical value “1” or “2” corresponding to the first memory 31 or the second memory 32. Yes.

更に、レーザ照射制御器30には、前述の車載通信装置29とヘルプデスク呼び出しスイッチ10とが接続され、カメラ9が視線検出器41,スイッチ判定器43を介して接続されている。カメラ9は、前述のようにドライバDの顔を撮影して視線検出器41へ出力する。視線検出器41はドライバDの顔の画像からドライバDの視線の向いている向きを検出してスイッチ判定器43へ出力する。この視線検出器41による視線の向きの検出方法は、周知の種々の方法が適用可能であるが、例えば、眼球のプルキニエ像(角膜表面での反射光)と瞳孔との相対位置に基づいて検出する方法が適用可能である。スイッチ判定器43は、予めドライバDの視線の向きに対応するスイッチのマップを保持しており、ドライバDが注視しているスイッチ(11,12,13,…のいずれか)を判定する。   Further, the on-vehicle communication device 29 and the help desk calling switch 10 are connected to the laser irradiation controller 30, and the camera 9 is connected via a line-of-sight detector 41 and a switch determination unit 43. The camera 9 captures the face of the driver D and outputs it to the line-of-sight detector 41 as described above. The line-of-sight detector 41 detects the direction of the line of sight of the driver D from the face image of the driver D and outputs the detected direction to the switch determination unit 43. Various known methods can be applied to the method of detecting the direction of the line of sight by the line-of-sight detector 41. For example, the detection is based on the relative position between the Purkinje image of the eyeball (reflected light on the corneal surface) and the pupil. The method to do is applicable. The switch determination unit 43 holds a map of switches corresponding to the direction of the line of sight of the driver D in advance, and determines the switch (any one of 11, 12, 13,...) Being watched by the driver D.

スイッチ判定器43の判定結果はレーザ照射制御器30へ出力され、そのスイッチのIDは第1メモリ31に保存される。すなわち、第1メモリ31は、スイッチ判定器43がドライバが注視したと判定したスイッチのIDを保存するものである。また、第2メモリ32は、ヘルプデスク50のオペレータOPがスイッチ11,12,13,…のいずれかに対するレーザ照射の要求を前記通信を介して行った場合に、そのスイッチのIDを保存するものである。車載通信装置29とヘルプデスク用通信装置53とは、前述のように通信を介して通話の音声データを送受信するのみならず、前記スイッチのIDの送受信も行う。   The determination result of the switch determiner 43 is output to the laser irradiation controller 30, and the switch ID is stored in the first memory 31. That is, the first memory 31 stores the ID of the switch determined by the switch determination unit 43 that the driver has watched. The second memory 32 stores the switch ID when the operator OP of the help desk 50 makes a laser irradiation request to any one of the switches 11, 12, 13,... Via the communication. It is. The in-vehicle communication device 29 and the help desk communication device 53 not only transmit / receive voice data of a call via communication as described above, but also transmit / receive the ID of the switch.

[実施形態の処理]
このため、ヘルプデスク用通信装置53は車載通信装置29と通信することができ、ドライバDがヘルプデスク呼び出しスイッチ10を押下すると通信が開始されてオペレータOPとドライバDとが通話できるようになる。また、オペレータOPがレーザ照射を要求するスイッチを端末装置51を介して指定した場合、そのスイッチのIDは前記通信を介してレーザ照射制御器30に送られ、第2メモリ32に保存される。
[Process of embodiment]
For this reason, the help desk communication device 53 can communicate with the in-vehicle communication device 29. When the driver D presses the help desk call switch 10, the communication is started and the operator OP and the driver D can talk. When the operator OP designates a switch for requesting laser irradiation via the terminal device 51, the ID of the switch is sent to the laser irradiation controller 30 via the communication and stored in the second memory 32.

端末装置51は、スイッチのIDとそのスイッチの情報とを対応付けたテーブルを備えており、前記通信を介してレーザ照射制御器30の第1メモリ31からスイッチのIDを取得した場合、オペレータOPにそのスイッチの情報を提示する。また、レーザ照射制御器30は、後述の処理によってレーザ照射装置22を制御して、第1メモリ31または第2メモリ32の少なくともいずれか一方にIDが保存されたスイッチにレーザを照射する。このため、オペレータOPは、車両1の車内におけるレーザの照射位置を、遠隔操作で制御することができる。   The terminal device 51 includes a table in which the switch ID and the switch information are associated with each other. When the switch ID is acquired from the first memory 31 of the laser irradiation controller 30 through the communication, the terminal OP 51 Presents the switch information. Further, the laser irradiation controller 30 controls the laser irradiation device 22 by a process to be described later, and irradiates the laser whose ID is stored in at least one of the first memory 31 and the second memory 32. For this reason, the operator OP can control the irradiation position of the laser in the vehicle 1 by remote control.

次に、前記処理の詳細について、図4〜図7のフローチャートを用いて説明する。なお、ヘルプデスク呼び出しスイッチ10が押下されると、レーザ照射制御器30では、図4〜図6に示す3つの処理が並行して開始される。また、それと同時に、ヘルプデスク50の端末装置51では、図7に示すヘルプ処理が開始される。   Next, details of the processing will be described with reference to the flowcharts of FIGS. When the help desk call switch 10 is pressed, the laser irradiation controller 30 starts three processes shown in FIGS. 4 to 6 in parallel. At the same time, the terminal device 51 of the help desk 50 starts the help process shown in FIG.

図4に示す通知処理は、カメラ9,視線検出器41,スイッチ判定器43を介してドライバDに注視されていると判定されたスイッチのIDを、ヘルプデスク50に通知する処理である。処理が開始されると、先ず、S10(Sはステップを表す:以下同様)にて、カメラ9,視線検出器41に駆動信号が送信されることにより、そのカメラ9でドライバDの顔を撮影して、その画像に基づいて視線検出器41でドライバDの視線の向きを検出する処理が実行される。続くS20では、スイッチ判定器43に駆動信号が送信されることにより、ドライバDが注視しているスイッチをS10にて検出された視線の向きに応じてスイッチ判定器43に判定させる処理が実行される。スイッチ判定器43による判定手法は、例えば、ドライバDの視線の向きの延長上にあるスイッチをドライバDの注視しているスイッチとして判定する手法が適用できる。なお、S20では、もし視線に対応したスイッチがなければスイッチを見ていないと判定する。   The notification process shown in FIG. 4 is a process for notifying the help desk 50 of the ID of the switch determined to be watched by the driver D via the camera 9, the line-of-sight detector 41, and the switch determination unit 43. When the processing is started, first, a drive signal is transmitted to the camera 9 and the line-of-sight detector 41 in S10 (S represents a step: the same applies hereinafter), so that the camera 9 captures the face of the driver D. Then, processing for detecting the direction of the line of sight of the driver D is executed by the line-of-sight detector 41 based on the image. In subsequent S20, a process for causing the switch determining unit 43 to determine the switch being watched by the driver D according to the direction of the line of sight detected in S10 is performed by transmitting a drive signal to the switch determining unit 43. The As a determination method by the switch determination unit 43, for example, a method of determining a switch on the extension of the direction of the line of sight of the driver D as a switch that the driver D is gazing at can be applied. In S20, if there is no switch corresponding to the line of sight, it is determined that the switch is not seen.

続くS30ではスイッチ判定器43によってスイッチが判定されたか否かが判断される。判定されている場合は(S30:Y)、当該判定されたスイッチのIDがS40にて第1メモリ31に記録された後、判定されていない場合はそのまま、処理はS50へ移行する。S50では、第1メモリ31にスイッチのIDが保存されているか否かが判断される。保存されていない場合は(S50:N)、処理は前述のS10へ移行し、保存されている場合は(S50:Y)、処理はS60へ移行する。   In subsequent S30, the switch determination unit 43 determines whether or not the switch is determined. If it is determined (S30: Y), after the ID of the determined switch is recorded in the first memory 31 in S40, if it is not determined, the process proceeds to S50. In S <b> 50, it is determined whether or not the switch ID is stored in the first memory 31. If not stored (S50: N), the process proceeds to S10 described above, and if stored (S50: Y), the process proceeds to S60.

S60では、第1メモリ31に保存されたスイッチのIDが、車載通信装置29を介してオペレータOPに送信された後、処理は前述のS10へ移行する。具体的には、S60では、前記スイッチのIDが車載通信装置29,ヘルプデスク用通信装置53を介して端末装置51に送信され、端末装置51のディスプレイ等に情報が表示されることによってオペレータOPに伝えられる。   In S60, after the switch ID stored in the first memory 31 is transmitted to the operator OP via the in-vehicle communication device 29, the process proceeds to S10 described above. Specifically, in S60, the switch ID is transmitted to the terminal device 51 via the in-vehicle communication device 29 and the help desk communication device 53, and the information is displayed on the display of the terminal device 51 and the operator OP. To be told.

なお、S40によるIDの記録は、上書きによってなされ、第1メモリ31には、ドライバDに注視されたと直近に判定された1つのスイッチのIDのみが保存される。このため、ドライバDが視線をフロントガラス2に移して運転を継続したとしても(S30:N)、それまでに注視されたスイッチのIDが保存されていれば(S50:Y)、最後に注視されたスイッチのIDが繰り返し送信される(S60)。   Note that the recording of the ID in S40 is performed by overwriting, and only the ID of one switch that has been most recently determined to be watched by the driver D is stored in the first memory 31. For this reason, even if the driver D moves the line of sight to the windshield 2 and continues the operation (S30: N), if the ID of the switch that has been watched so far is stored (S50: Y), the gaze is finally given. The switched switch ID is repeatedly transmitted (S60).

図5に示す切替処理は、カウンタ37に設定される数値を「1」と「2」とで交互に切り替えるための処理である。なお、このカウンタ37に設定される数値は、後述の照射処理(図6)でも使用される。   The switching process shown in FIG. 5 is a process for alternately switching the numerical value set in the counter 37 between “1” and “2”. The numerical value set in the counter 37 is also used in the irradiation process (FIG. 6) described later.

図5に示すように、処理が開始されると、S100にて、カウンタ37の数値が「1」1にリセットされる。続くS110では、タイマ35をリセットして時間の計測を開始する処理がなされる。なお、タイマ35は時間をms単位で時間を計測する。続くS120では、タイマ35の計測した時間が0.5秒を超えたか否かが判断される。0.5秒を超えていない場合は(S120:N)、処理はそのままS120で待機し、時間が0.5秒を超えると(S120:Y)、処理はS130へ移行する。   As shown in FIG. 5, when the process is started, the value of the counter 37 is reset to “1” 1 in S100. In subsequent S110, a process of resetting the timer 35 and starting time measurement is performed. Note that the timer 35 measures time in units of ms. In subsequent S120, it is determined whether or not the time measured by the timer 35 has exceeded 0.5 seconds. If it does not exceed 0.5 seconds (S120: N), the process stands by in S120, and if the time exceeds 0.5 seconds (S120: Y), the process proceeds to S130.

S130では、カウンタ37に設定されている数値が「1」であるか否かが判断される。そして、カウンタ37の数値が「1」の場合は(S130:Y)、S140にてカウンタ37の数値が「2」にされた後、カウンタ37の数値が「2」の場合は(S130:N)、S150にてその数値が「1」にされた後、処理は前述のS110へ移行する。こうして、S110〜S150の処理が繰り返し実行されることにより、カウンタ37の数値が0.5秒毎に「1」と「2」とで交互に切り替えられる。   In S130, it is determined whether or not the numerical value set in the counter 37 is “1”. When the numerical value of the counter 37 is “1” (S130: Y), after the numerical value of the counter 37 is set to “2” in S140, the numerical value of the counter 37 is “2” (S130: N). ) After the numerical value is set to “1” in S150, the process proceeds to S110 described above. Thus, by repeatedly executing the processing of S110 to S150, the numerical value of the counter 37 is alternately switched between “1” and “2” every 0.5 seconds.

図6に示す照射処理は、第1メモリ31または第2メモリ32の少なくともいずれか一方にIDが保存されたスイッチに、レーザ照射装置22を介してレーザを照射するための処理である。なお、この処理は、ヘルプデスク50の端末装置51からの指示に密接に関連するため、図7に示した端末装置51によるヘルプ処理を先に説明する。   The irradiation process shown in FIG. 6 is a process for irradiating a laser whose ID is stored in at least one of the first memory 31 and the second memory 32 via the laser irradiation device 22. Since this process is closely related to an instruction from the terminal device 51 of the help desk 50, the help process by the terminal device 51 shown in FIG. 7 will be described first.

図7に示すように、この処理では、先ずS800にて、車載通信装置29とヘルプデスク用通信装置53との間の通信が開始される。これによって、オペレータ用マイク55に入力された音声がドライバ用スピーカ7から出力され、ドライバ用マイク5から入力された音声がオペレータ用スピーカ57から出力されるようになり、オペレータOPとドライバDが互いに通話可能になる。   As shown in FIG. 7, in this process, communication between the in-vehicle communication device 29 and the help desk communication device 53 is first started in S800. As a result, the sound input to the operator microphone 55 is output from the driver speaker 7, and the sound input from the driver microphone 5 is output from the operator speaker 57, so that the operator OP and the driver D are mutually connected. You can call.

続くS810では、レーザ照射制御器30における前述のS60の処理によりスイッチのIDが送信されているかを確認することによって、そのレーザ照射制御器30の第1メモリ31にスイッチのIDが保存されているか否かが判断される。第1メモリ31にスイッチのIDが保存されている場合は(S810:Y)、S811が実行された後に処理はS820へ移行し、保存されていない場合は(S810:N)、処理はそのままS820へ移行する。   In subsequent S810, whether the switch ID is stored in the first memory 31 of the laser irradiation controller 30 by checking whether the switch ID is transmitted by the processing of S60 in the laser irradiation controller 30 described above. It is determined whether or not. If the switch ID is stored in the first memory 31 (S810: Y), the process proceeds to S820 after S811 is executed. If the switch ID is not stored (S810: N), the process is directly performed in S820. Migrate to

S811では、第1メモリ31に保存されているスイッチのIDが、端末装置51のディスプレイ等に表示される。これによって、オペレータOPは、ドライバDが伝えたいスイッチ、より正確にはドライバDが注視していると判定されたスイッチ(以下、判定スイッチともいう)を知ることができる。   In S811, the switch ID stored in the first memory 31 is displayed on the display of the terminal device 51 or the like. Thus, the operator OP can know the switch that the driver D wants to convey, more precisely the switch that is determined to be watched by the driver D (hereinafter also referred to as a determination switch).

S820では、オペレータOPがレーザを照射するスイッチのIDを端末装置51に入力したか否かが判断される。オペレータOPが端末装置51にスイッチのIDを入力している場合は(S820:Y)、S821が実行された後に処理はS830へ移行し、入力していない場合は(S820:N)、処理はそのままS830へ移行する。   In S820, it is determined whether or not the operator OP has input the ID of the switch to irradiate the laser to the terminal device 51. When the operator OP has input the switch ID to the terminal device 51 (S820: Y), the process proceeds to S830 after S821 is executed, and when the operator OP has not input (S820: N), the process is The process proceeds to S830 as it is.

S821では、前記入力されたスイッチのIDが端末装置51からレーザ照射制御器30へ通信を介して送信され、レーザ照射制御器30は第2メモリ32にそのIDを保存する。これによって、レーザ照射制御器30は、オペレータOPがレーザを照射するように指定したスイッチ(以下、指定スイッチともいう)のIDを、第2メモリ32を参照することによって受け取ることができる。   In S <b> 821, the ID of the input switch is transmitted from the terminal device 51 to the laser irradiation controller 30 via communication, and the laser irradiation controller 30 stores the ID in the second memory 32. As a result, the laser irradiation controller 30 can receive the ID of a switch (hereinafter also referred to as a “designated switch”) designated by the operator OP to irradiate the laser by referring to the second memory 32.

S830では、オペレータOPがレーザ照射共用要求を端末装置51に入力したか否かが判断される。オペレータOPがレーザ照射共用要求を入力している場合は(S830:Y)、S831が実行された後に処理はS840へ移行し、入力していない場合は(S830:N)、処理はそのままS840へ移行する。   In S830, it is determined whether or not the operator OP has input a laser irradiation sharing request to the terminal device 51. If the operator OP has input a laser irradiation sharing request (S830: Y), the process proceeds to S840 after S831 is executed. If not (S830: N), the process proceeds to S840 as it is. Transition.

S831では、コマンドとしてのレーザ照射共用要求が、端末装置51からレーザ照射制御器30へ通信を介して送信される。これによって、レーザ照射制御器30は、後述の処理により、共用によって指定スイッチにレーザを照射する処理を実行する。   In S831, a laser irradiation sharing request as a command is transmitted from the terminal device 51 to the laser irradiation controller 30 via communication. As a result, the laser irradiation controller 30 executes a process of irradiating the designated switch with a laser in common by a process described later.

S840では、オペレータOPがレーザ照射切り替え要求を端末装置51に入力したか否かが判断される。オペレータOPがレーザ照射切り替え要求を入力している場合は(S840:Y)、S841が実行された後に処理はS860へ移行し、入力していない場合は(S840:N)、処理はそのままS860へ移行する。   In S840, it is determined whether or not the operator OP has input a laser irradiation switching request to the terminal device 51. If the operator OP has input a laser irradiation switching request (S840: Y), the process proceeds to S860 after S841 is executed. If not (S840: N), the process proceeds to S860 as it is. Transition.

S841では、コマンドとしてのレーザ照切り替え射要求が、端末装置51からレーザ照射制御器30へ通信を介して送信される。これによって、レーザ照射制御器30は、後述の処理により、切り替えによって指定スイッチにレーザを照射する処理を実行する。   In S <b> 841, a laser illumination switching request as a command is transmitted from the terminal device 51 to the laser irradiation controller 30 via communication. As a result, the laser irradiation controller 30 executes a process of irradiating the designated switch with the laser by switching, as will be described later.

S860では、オペレータOPが端末装置51を操作して通信を切った否かが判断される。通信を切っていない場合は(S860:N)、処理は前述のS810へ移行し、通信を切った場合は(S860:Y)、処理はS870へ移行する。S870では、このヘルプ処理の終了処理がなされると共に、ヘルプ処理が終了した旨、通信を介してレーザ照射制御器30に通知される。   In S860, it is determined whether or not the operator OP has disconnected the communication by operating the terminal device 51. If the communication is not disconnected (S860: N), the process proceeds to S810 described above. If the communication is disconnected (S860: Y), the process proceeds to S870. In S870, the help process is finished, and the help of the help process is notified to the laser irradiation controller 30 via communication.

端末装置51の前記処理と並行して、レーザ照射制御器30にて実行される照射処理では、図6に示すように、先ず、S200にて、車載通信装置29とヘルプデスク用通信装置53との間の通信が開始される。この処理は、端末装置51における前述のS800の処理と同一の処理である。   In the irradiation process executed by the laser irradiation controller 30 in parallel with the process of the terminal device 51, as shown in FIG. 6, first, in S200, the in-vehicle communication device 29 and the help desk communication device 53 Communication between is started. This process is the same as the process of S800 described above in the terminal device 51.

続くS210では、前述のS831またはS841によってオペレータOPから(具体的には端末装置51から)、車載通信装置29を介してレーザ照射共用要求またはレーザ照射切り替え要求が送信されたか否かが判断される。いずれの要求もない場合は(S210:N)、処理はS230へ移行し、前述のS40の処理により第1メモリ31にスイッチのIDが保存されているか否かが判断される。保存されている場合は(S230:Y)、S260にてそのIDに対応するスイッチにレーザ照射装置22を介してレーザが照射されて、処理はS270へ移行する。また、第1メモリ31にスイッチのIDが保存されていない場合は(S230:N)、処理はそのままS270へ移行する。   In the subsequent S210, it is determined whether or not a laser irradiation sharing request or a laser irradiation switching request is transmitted from the operator OP (specifically, from the terminal device 51) via the in-vehicle communication device 29 in S831 or S841 described above. . If there is no request (S210: N), the process proceeds to S230, and whether or not the switch ID is stored in the first memory 31 is determined by the process of S40 described above. If stored (S230: Y), the laser corresponding to the ID is irradiated with the laser via the laser irradiation device 22 in S260, and the process proceeds to S270. If the switch ID is not stored in the first memory 31 (S230: N), the process proceeds to S270 as it is.

S270では、前述のS870の処理によって端末装置51からヘルプ処理の終了が通知されているか否かが判断され、ヘルプ処理が終了していない場合は(S270:N)、処理は前述のS210へ移行する。このため、オペレータOPからの要求の送信がない場合は(S210:N)、ドライバDに注視されていると判定されて第1メモリ31に保存されている判定スイッチのみにレーザが照射される。   In S270, it is determined whether or not the end of the help process has been notified from the terminal device 51 by the process of S870 described above. If the help process has not been completed (S270: N), the process proceeds to S210 described above. To do. For this reason, when the request from the operator OP is not transmitted (S210: N), it is determined that the driver D is gazing and only the determination switch stored in the first memory 31 is irradiated with the laser.

一方、オペレータOPから要求の送信があった場合は(S210:Y)、処理はS310へ移行し、その要求がレーザ照射共用要求であるか否かが判断される。レーザ照射共用要求である場合は(S310:Y)、処理はS320へ移行し、前述の図5の処理で切り替えられるカウンタ37の数値が「1」であるか否かが判断される。カウンタ37の数値が「1」である場合は(S320:Y)、処理は前述のS230へ移行し、第1メモリ31に保持されている判定スイッチにレーザが照射される。   On the other hand, when a request is transmitted from the operator OP (S210: Y), the process proceeds to S310, and it is determined whether or not the request is a laser irradiation shared request. If it is a laser irradiation shared request (S310: Y), the process proceeds to S320, and it is determined whether or not the value of the counter 37 that is switched in the process of FIG. 5 described above is “1”. When the value of the counter 37 is “1” (S320: Y), the process proceeds to S230 described above, and the determination switch held in the first memory 31 is irradiated with the laser.

また、カウンタ37の数値が「2」である場合は(S320:N)、処理はS340へ移行し、前述のS821の処理により第2メモリ32にスイッチのIDが保存されているか否かが判断される。保存されている場合は(S340:Y)、S350にてそのIDに対応するスイッチにレーザ照射装置22を介してレーザが照射されて、処理は前述のS270へ移行する。すなわち、オペレータOPに指定された指定スイッチにレーザが照射される。一方、第2メモリ32にスイッチのIDが保存されていない場合は(S340:N)、処理はそのままS270へ移行する。   When the value of the counter 37 is “2” (S320: N), the process proceeds to S340, and it is determined whether the switch ID is stored in the second memory 32 by the process of S821 described above. Is done. If stored (S340: Y), the switch corresponding to the ID is irradiated with the laser via the laser irradiation device 22 in S350, and the process proceeds to S270 described above. In other words, the laser is irradiated to the designated switch designated by the operator OP. On the other hand, if the switch ID is not stored in the second memory 32 (S340: N), the process proceeds directly to S270.

すなわち、オペレータOPからレーザ照射共用要求があった場合は(S210:Y,S310:Y)、S210〜S350の処理が繰り返し実行されることにより、0.5秒毎に(図5参照)、判定スイッチと指定スイッチとが交互に時分割でレーザを照射される。なお、S260によるレーザの照射と、S350によるレーザの照射とは、レーザの色を変える、一方をパルス状の照射にするなど、照射の態様を異ならせるのが望ましい。そうすることによって、どのスイッチが判定スイッチでどのスイッチが指定スイッチであるかを、ドライバDが容易に判別することができる。   That is, when there is a laser irradiation sharing request from the operator OP (S210: Y, S310: Y), the determination is made every 0.5 seconds (see FIG. 5) by repeatedly executing the processes of S210 to S350. The switch and the designated switch are alternately irradiated with laser in a time division manner. Note that it is desirable that the laser irradiation by S260 and the laser irradiation by S350 be different in the irradiation mode, such as changing the laser color or changing one to pulsed irradiation. By doing so, the driver D can easily determine which switch is the determination switch and which switch is the designated switch.

一方、オペレータOPからレーザ照射切り替え要求があった場合は(S210:Y,S310:N)、処理はS310からそのままS340へ移行し、指定スイッチのみにレーザが照射される。このため、例えば、ドライバDがスイッチ13を注視した後にオペレータOPがスイッチ11を指定してレーザ照射切り替え要求を送信すると(S210:Y,S310:N)、図8(A)に例示するように、レーザはスイッチ11にのみ照射される(S350)。これに対して、ドライバDがスイッチ13を注視した後にオペレータOPがスイッチ11を指定してレーザ照射共用要求を送信すると(S210Y,S310:Y)、図8(B)に例示するように、レーザはスイッチ11とスイッチ13とに交互に照射される(S260,S350)。   On the other hand, when there is a laser irradiation switching request from the operator OP (S210: Y, S310: N), the process proceeds from S310 to S340 as it is, and only the designated switch is irradiated with the laser. For this reason, for example, when the operator OP designates the switch 11 and transmits a laser irradiation switching request after the driver D gazes at the switch 13 (S210: Y, S310: N), as illustrated in FIG. The laser is irradiated only to the switch 11 (S350). On the other hand, when the driver OP gazes at the switch 13 and the operator OP designates the switch 11 and transmits a laser irradiation sharing request (S210Y, S310: Y), as illustrated in FIG. Are alternately applied to the switch 11 and the switch 13 (S260, S350).

そして、このように、操作説明に必要なスイッチ11,12,13,…に対して適宜レーザを照射しながら説明がなされた後、オペレータOPが通信を切る(S860参照)ことによってヘルプ処理が終了すると(S270:Y)、処理はS380へ移行する。S380では、ヘルプ処理の終了処理がなされて、この処理が終了する。なお、これと同時に、図4,図5に示した通知処理,切替処理も終了する。   As described above, the explanation is made while appropriately irradiating the lasers to the switches 11, 12, 13,... Necessary for the operation explanation, and then the operator OP disconnects the communication (see S860), thereby completing the help process. Then (S270: Y), the process proceeds to S380. In S380, the help process is terminated, and the process ends. At the same time, the notification process and the switching process shown in FIGS. 4 and 5 are also terminated.

[実施形態の効果及びその変形例]
このように、本実施形態では、ヘルプデスク50のオペレータOPが指定したスイッチのみならず、ドライバDが注視したスイッチにもレーザを照射することができ、その注視されたスイッチのIDをヘルプデスク50に通知することができる。従って、次の使用例のように、ドライバDの所望に一致した操作説明をヘルプデスク50から円滑に受信することが可能になる。
[Effects of the embodiment and modifications thereof]
Thus, in this embodiment, not only the switch designated by the operator OP of the help desk 50 but also the switch watched by the driver D can be irradiated with the laser, and the ID of the watched switch is assigned to the help desk 50. Can be notified. Therefore, as in the following usage example, it is possible to smoothly receive an operation description that matches the desire of the driver D from the help desk 50.

例えば、ドライバDがヘルプデスク呼び出しスイッチ10を押してオペレータOPと会話を始める。そしてドライバDがスイッチ11を注視したときにはスイッチ11にレーザが照射されて(S260)、スイッチ11がドライバDが見て分かりやすくなる。また、ドライバDは自分が注視したスイッチ11が正確に認識されたことも知ることができる。そして、同時にスイッチ11のIDがオペレータOPに通知される(S60)。このようにドライバDとオペレータOPでドライバDが注視しているスイッチ11の情報を共有することができる。しかも、ドライバDは、自身がスイッチ11を注視したことが正確に認識されたことが確認できるので、装置の信頼性も向上する。   For example, the driver D presses the help desk call switch 10 to start a conversation with the operator OP. When the driver D gazes at the switch 11, the switch 11 is irradiated with a laser (S 260), and the switch 11 is easily seen by the driver D. The driver D can also know that the switch 11 he / she has watched is correctly recognized. At the same time, the ID of the switch 11 is notified to the operator OP (S60). In this way, the driver D and the operator OP can share information on the switch 11 that the driver D is watching. In addition, since the driver D can confirm that the driver D has accurately observed that the driver 11 has gazed, the reliability of the apparatus is also improved.

次に、ドライバDがスイッチ12を注視した場合には同様にスイッチ12にレーザが照射されて(S260)、スイッチ12がドライバDが見て分かりやすくなる。そして同時にスイッチ12のIDがオペレータOPへ通知される(S60)。このようにドライバDとオペレータOPとで、ドライバDが注視しているスイッチ12の情報を共有することができる。   Next, when the driver D gazes at the switch 12, the switch 12 is similarly irradiated with laser (S260), and the switch 12 becomes easy to see when the driver D sees it. At the same time, the ID of the switch 12 is notified to the operator OP (S60). In this way, the driver D and the operator OP can share the information of the switch 12 being watched by the driver D.

更に、レーザはオペレータOPから制御することができ、端末装置51から「レーザ照射切り替え要求」を送信した場合(S841)、レーザはオペレータOPが指定したスイッチに照射されるようになる(S350)。   Further, the laser can be controlled from the operator OP, and when the “laser irradiation switching request” is transmitted from the terminal device 51 (S841), the laser is irradiated to the switch designated by the operator OP (S350).

また、オペレータOPが端末装置51から「レーザ照射共用要求」を送信した場合(S831)、オペレータOPが指定した指定スイッチとドライバDの注視した判定スイッチとを、それぞれ異なる色を用いて時分割で照射する(S260,S350)。   When the operator OP transmits a “laser irradiation sharing request” from the terminal device 51 (S831), the designation switch designated by the operator OP and the determination switch watched by the driver D are time-shared using different colors. Irradiate (S260, S350).

このため、例えばこのようなやりとりが可能になる。ドライバDがヘルプデスク50を呼び出し、スイッチ12を注視しながら「運転席の窓を開けるスイッチはこれ?」と問いかける。スイッチ12には青色のドライバ用レーザが照射され、ドライバDとオペレータOPで情報を共有することができる。オペレータOPはレーザ照射切り替え要求を端末装置51から出力してスイッチに照射されているレーザをオペレータOP側で制御できるようにして、「助手席の窓を開ける機能です」と答え、更にスイッチ13に赤色のレーザを照射しながら「これが運転席のスイッチです」と答える。ドライバDは視線をスイッチ13に向けてスイッチ13を確認する。このように会話のやりとりが円滑になる。   For this reason, for example, such exchange is possible. The driver D calls the help desk 50 and asks, “Which switch can open the driver's seat window?” While gazing at the switch 12. The switch 12 is irradiated with a blue driver laser, and the driver D and the operator OP can share information. The operator OP outputs a laser irradiation switching request from the terminal device 51 so that the laser irradiated to the switch can be controlled on the operator OP side, and replied, “It is a function to open the passenger seat window”. Answering "This is the driver's seat switch" while irradiating the red laser. The driver D turns the line of sight toward the switch 13 and confirms the switch 13. In this way, conversations are exchanged smoothly.

更に以下のようなやりとりも可能になる。ドライバDがヘルプデスク50を呼び出し、スイッチ12を注視しながら「これを押すとナビが使えますか?」と問いかける。スイッチ12には青色のドライバ用レーザが照射され、ドライバDとオペレータOPとで情報を共有することができる。オペレータOPはレーザ照射共用要求を端末装置51から出力して、スイッチ12を青色でレーザ照射しながら、スイッチ13を赤色でレーザ照射し、「そうです。その青く照射されたスイッチを押すとナビの電源がONします。」と答え、更に「赤く照射されたスイッチはナビ用のトークスイッチですので、これを押すと音声認識で操作ができます」と会話のやりとりが円滑になる。   Furthermore, the following exchanges are also possible. The driver D calls the help desk 50 and asks "Can I use the navigation if I press this button?" The switch 12 is irradiated with a blue driver laser so that the driver D and the operator OP can share information. The operator OP outputs a laser irradiation shared request from the terminal device 51, and while irradiating the switch 12 with the laser in blue, the switch 13 is irradiated with the laser in red. “Yes. "The power will be turned on." In addition, "The switch illuminated in red is a talk switch for navigation, so if you press it, you can operate by voice recognition", the conversation will be smooth.

なお、前記実施形態において、ヘルプデスク50が外部装置に、車載通信装置29及びドライバ用スピーカ7が受信手段に、カメラ9及び視線検出器41及びスイッチ判定器43が操作部判定手段に、レーザ照射制御器30及び車載通信装置29が通知手段に、レーザ照射装置22が照射手段に、それぞれ相当する。また、本発明は前記実施形態に何ら限定されるものではなく、本発明の要旨を逸脱しない範囲で種々の形態で実施することができる。例えば、操作部としては、スイッチ以外にもレバー,ダイヤル等の種々の操作部が想定される。また、外部装置は必ずしもオペレータを必要とせず、音声メッセージを格納したパーソナルコンピュータ等であってもよく、その場合、注視された操作部に関する説明を一方的に行ってもよい。   In the above embodiment, the help desk 50 is an external device, the in-vehicle communication device 29 and the driver speaker 7 are receiving means, the camera 9, the line-of-sight detector 41, and the switch determining device 43 are operating portion determining means, and laser irradiation. The controller 30 and the in-vehicle communication device 29 correspond to the notification unit, and the laser irradiation device 22 corresponds to the irradiation unit. The present invention is not limited to the above-described embodiment, and can be implemented in various forms without departing from the gist of the present invention. For example, as the operation unit, various operation units such as a lever and a dial are assumed in addition to the switch. The external device does not necessarily require an operator, and may be a personal computer or the like that stores a voice message. In that case, the watched operation unit may be unilaterally explained.

なお、前記実施形態に記載したように、本発明において、外部装置から照射切り替え要求を送信した場合に、外部装置から指定操作部に可視光を照射できる場合、照射がなされる操作部を切り替えながら1つの照射手段を使うことができる。また、外部装置から照射共用要求を送信した場合に、判定操作部に対する可視光の照射と指定操作部に対する可視光の照射とを、互いに異なる態様で時分割で実行できる場合、複数の操作部を絡めて説明をすることが容易になる。   In addition, as described in the above embodiment, in the present invention, when an irradiation switching request is transmitted from an external device, visible light can be irradiated from the external device to the designated operation unit, while switching the operation unit to be irradiated. One irradiation means can be used. In addition, when an illumination sharing request is transmitted from an external device, when the irradiation of visible light to the determination operation unit and the irradiation of visible light to the designated operation unit can be executed in a time-sharing manner in mutually different manners, a plurality of operation units are It becomes easy to explain with entanglement.

1…車両 5…ドライバ用マイク 7…ドライバ用スピーカ
9…カメラ 11,12,13…スイッチ 22…レーザ照射装置
29…車載通信装置 30…レーザ照射制御器 31…第1メモリ
32…第2メモリ 41…視線検出器 43…スイッチ判定器
50…ヘルプデスク 51…端末装置 53…ヘルプデスク用通信装置
55…オペレータ用マイク 57…オペレータ用スピーカ D…ドライバ
OP…オペレータ
DESCRIPTION OF SYMBOLS 1 ... Vehicle 5 ... Driver microphone 7 ... Driver speaker 9 ... Camera 11, 12, 13 ... Switch 22 ... Laser irradiation device 29 ... In-vehicle communication device 30 ... Laser irradiation controller 31 ... First memory 32 ... Second memory 41 ... line-of-sight detector 43 ... switch determination device 50 ... help desk 51 ... terminal device 53 ... help desk communication device 55 ... operator microphone 57 ... operator speaker D ... driver OP ... operator

Claims (6)

車両(1)に搭載され、車室内の操作部の操作説明を外部装置(50)との通信を介して受信してドライバ(D)に提供する受信手段(29,7)を備えた車両用操作説明支援装置において、
ドライバの視線を検出して、前記車室内の複数の操作部(11,12,13)のうちドライバが注視している操作部を判定する操作部判定手段(9,41,43)と、
前記操作部判定手段が判定した操作部を前記通信を介して前記外部装置に通知する通知手段(30,29)と、
を備えたことを特徴とする車両用操作説明支援装置。
A vehicle equipped with a receiving means (29, 7) mounted on the vehicle (1) and receiving an operation explanation of the operation unit in the vehicle compartment via communication with the external device (50) and providing it to the driver (D). In the operation explanation support device,
Operation unit determination means (9, 41, 43) for detecting the driver's line of sight and determining the operation unit being watched by the driver among the plurality of operation units (11, 12, 13) in the vehicle interior;
Notification means (30, 29) for notifying the external device of the operation part determined by the operation part determination means via the communication;
A vehicle operation explanation support apparatus comprising:
前記操作部判定手段が判定した操作部に局所的に可視光を照射する照射手段(22)を、
更に備えたことを特徴とする請求項1に記載の車両用操作説明支援装置。
An irradiating means (22) for locally irradiating visible light to the operating section determined by the operating section determining means,
The vehicle operation explanation support apparatus according to claim 1, further comprising:
前記照射手段は、前記操作部判定手段が直近に判定した操作部に前記可視光を継続的に照射し、
前記通知手段は、前記操作部判定手段が直近に判定した操作部を継続的に前記外部装置に通知することを特徴とする請求項2に記載の車両用操作説明支援装置。
The irradiation unit continuously irradiates the visible light to the operation unit most recently determined by the operation unit determination unit,
The vehicle operation explanation support device according to claim 2, wherein the notification unit continuously notifies the external device of the operation unit that has been determined most recently by the operation unit determination unit.
前記外部装置から、前記通信を介して前記車室内のいずれかの操作部を指定する情報を受けたとき、
前記照射手段は、前記外部装置が指定した操作部に局所的に可視光を照射することを特徴とする請求項2または3に記載の車両用操作説明支援装置。
When receiving information specifying one of the operation units in the vehicle compartment via the communication from the external device,
The vehicle operation explanation support device according to claim 2, wherein the irradiation unit locally irradiates visible light to an operation unit designated by the external device.
前記操作部判定手段が判定した操作部を判定操作部とし、前記外部装置が指定した操作部を指定操作部として、
前記外部装置による操作部の指定が照射切り替え要求としてなされたとき、
前記照射手段は、前記判定操作部に対する可視光の照射を中止して前記指定操作部に可視光を照射することを特徴とする請求項4に記載の車両用操作説明支援装置。
The operation unit determined by the operation unit determination unit is a determination operation unit, and the operation unit specified by the external device is a specified operation unit.
When designation of the operation unit by the external device is made as an irradiation switching request,
The vehicle operation explanation support device according to claim 4, wherein the irradiation unit stops irradiation of visible light to the determination operation unit and irradiates the designated operation unit with visible light.
前記操作部判定手段が判定した操作部を判定操作部とし、前記外部装置が指定した操作部を指定操作部として、
前記外部装置による操作部の指定が照射共用要求としてなされたとき、
前記照射手段は、前記判定操作部に対する可視光の照射と前記指定操作部に対する可視光の照射とを、互いに異なる態様で時分割で実行することを特徴とする請求項4に記載の車両用操作説明支援装置。
The operation unit determined by the operation unit determination unit is a determination operation unit, and the operation unit specified by the external device is a specified operation unit.
When designation of the operation unit by the external device is made as an irradiation sharing request,
5. The vehicle operation according to claim 4, wherein the irradiation unit executes irradiation of visible light on the determination operation unit and irradiation of visible light on the designated operation unit in a time-sharing manner in different manners. Explanation support device.
JP2012090146A 2012-04-11 2012-04-11 Vehicle operation explanation support device Expired - Fee Related JP5796533B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012090146A JP5796533B2 (en) 2012-04-11 2012-04-11 Vehicle operation explanation support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012090146A JP5796533B2 (en) 2012-04-11 2012-04-11 Vehicle operation explanation support device

Publications (2)

Publication Number Publication Date
JP2013216258A true JP2013216258A (en) 2013-10-24
JP5796533B2 JP5796533B2 (en) 2015-10-21

Family

ID=49588917

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012090146A Expired - Fee Related JP5796533B2 (en) 2012-04-11 2012-04-11 Vehicle operation explanation support device

Country Status (1)

Country Link
JP (1) JP5796533B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020149106A (en) * 2019-03-11 2020-09-17 本田技研工業株式会社 Agent device, agent system, server device, method for controlling agent device, and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008195375A (en) * 2007-01-19 2008-08-28 Denso Corp In-vehicle information display device and light irradiation device used therefor
JP2008296606A (en) * 2007-05-29 2008-12-11 Denso Corp Vehicular light irradiation indicator
JP2011162090A (en) * 2010-02-11 2011-08-25 Denso Corp Vehicle control system
JP2012056359A (en) * 2010-09-06 2012-03-22 Denso Corp On-vehicle equipment control device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008195375A (en) * 2007-01-19 2008-08-28 Denso Corp In-vehicle information display device and light irradiation device used therefor
JP2008296606A (en) * 2007-05-29 2008-12-11 Denso Corp Vehicular light irradiation indicator
JP2011162090A (en) * 2010-02-11 2011-08-25 Denso Corp Vehicle control system
JP2012056359A (en) * 2010-09-06 2012-03-22 Denso Corp On-vehicle equipment control device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020149106A (en) * 2019-03-11 2020-09-17 本田技研工業株式会社 Agent device, agent system, server device, method for controlling agent device, and program
US11532303B2 (en) 2019-03-11 2022-12-20 Honda Motor Co., Ltd. Agent apparatus, agent system, and server device
JP7211856B2 (en) 2019-03-11 2023-01-24 本田技研工業株式会社 AGENT DEVICE, AGENT SYSTEM, SERVER DEVICE, CONTROL METHOD FOR AGENT DEVICE, AND PROGRAM

Also Published As

Publication number Publication date
JP5796533B2 (en) 2015-10-21

Similar Documents

Publication Publication Date Title
US20190251973A1 (en) Speech providing method, speech providing system and server
WO2015125243A1 (en) Display control device, display control method for display control device, gaze direction detecting system, and callibration control method for gaze direction detecting system
JP2016038768A (en) Vehicle controller
CN106471573B (en) Speech recognition equipment and speech recognition system
WO2017212901A1 (en) Vehicle-mounted device
CN111190480A (en) Control device, agent device, and computer-readable storage medium
CN106605165A (en) Head-up display system, head-up display device, and navigation information display method
JP5796533B2 (en) Vehicle operation explanation support device
US20160347207A1 (en) Vehicle control system, portable terminal, and vehicular device
CN111144539A (en) Control device, agent device, and computer-readable storage medium
CN111192583A (en) Control device, agent device, and computer-readable storage medium
US9361789B2 (en) Remote control system
JP2021123300A (en) Indoor lighting system
US20220000367A1 (en) Biometric information measurement device, terminal, and biometric information measurement system
US11318893B2 (en) Display control system and display control method
JP2019074498A (en) Drive supporting device
JP2009162691A (en) On-vehicle information terminal
KR20150106257A (en) Mobile device loss protecting system for the passenger in a taxi and method of cotnrolling the same
US11731643B2 (en) Vehicle management system
US11505209B2 (en) System for automated driving with assistance for a driver in performing a non-driving activity
US11184475B2 (en) Mobile apparatus, terminal apparatus, information processing system, information processing method, program for mobile apparatus, and program for terminal apparatus
KR20210101141A (en) Vehicle cabin lighting system
KR101893944B1 (en) Urgent communication system and method using contact guide module for vehicle
CN111210814A (en) Control device, agent device, and computer-readable storage medium
JP2024041610A (en) Driver assistance systems, driver assistance methods, and driver assistance programs

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140805

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150415

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150421

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150721

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150803

R151 Written notification of patent or utility model registration

Ref document number: 5796533

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees