JP2020166157A - Driving training device and driving training method - Google Patents

Driving training device and driving training method Download PDF

Info

Publication number
JP2020166157A
JP2020166157A JP2019067613A JP2019067613A JP2020166157A JP 2020166157 A JP2020166157 A JP 2020166157A JP 2019067613 A JP2019067613 A JP 2019067613A JP 2019067613 A JP2019067613 A JP 2019067613A JP 2020166157 A JP2020166157 A JP 2020166157A
Authority
JP
Japan
Prior art keywords
simulated
data
marking
driving
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019067613A
Other languages
Japanese (ja)
Other versions
JP7097323B2 (en
Inventor
克仁 青木
Katsuto Aoki
克仁 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2019067613A priority Critical patent/JP7097323B2/en
Publication of JP2020166157A publication Critical patent/JP2020166157A/en
Application granted granted Critical
Publication of JP7097323B2 publication Critical patent/JP7097323B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

To provide a driving training device, etc., with which it is possible for a user to exactly recognize his or her own driving skill and heighten training effects.SOLUTION: A controller 30 of a driving training device 1 executes simulated traveling control for causing simulated traveling environment data to be displayed on monitors 11, 21 in accordance with the operation state of a handle 3, etc., by a trainee M1. During execution of the simulated traveling control, the controller acquires spoken voice data of the trainee M1, sets a marking point of time that is a prescribed timing on a time series of the simulated traveling environment data, stores associated simulated traveling data in which the spoken voice data of the trainee M1 and the marking point of time are associated to the simulated traveling environment data, and executes traveling reproduction control for causing the associated simulated traveling data to be displayed on the monitors 11, 21 on the basis of the marking point of time when a selection operation is executed at the marking point of time after the termination of the simulated traveling control.SELECTED DRAWING: Figure 8

Description

本発明は、ユーザによって模擬車両が運転される運転教習装置などに関する。 The present invention relates to a driving training device in which a simulated vehicle is driven by a user.

従来、運転教習装置として、特許文献1に記載されたものが知られている。この運転教習装置では、車両を試験走行路内で走行させ、3つのカメラによって走行中の車両前方のシーンが撮影されるとともに、その撮像データを車両内の運転者の前方のディスプレイで表示させながら、運転者の運転状態が検出される。そして、その検出結果に基づいて、危険シーンをディスプレイに表示することにより、運転者は危険シーンを現実感を伴って体験できるように構成されている。 Conventionally, as a driving training device, the one described in Patent Document 1 is known. In this driving training device, the vehicle is driven in the test driving path, the scene in front of the moving vehicle is photographed by three cameras, and the captured data is displayed on the display in front of the driver in the vehicle. , The driving state of the driver is detected. Then, by displaying the dangerous scene on the display based on the detection result, the driver can experience the dangerous scene with a sense of reality.

国際公開第2014/141526号パンフレットInternational Publication No. 2014/141526 Pamphlet

上記従来の運転教習装置によれば、運転者は危険シーンを車両の走行中しか体験できない関係上、自らの運転技術の問題点を把握しにくいという問題がある。また、同じ理由により、指導者が運転者を指導する場合には、そのときの運転状態において、走行速度などが妥当であったか否かなどを受講者に指導することができないことで、教習効果があがりにくいという問題もある。 According to the above-mentioned conventional driving training device, there is a problem that it is difficult for a driver to grasp a problem of his / her own driving technique because he / she can experience a dangerous scene only while the vehicle is running. In addition, for the same reason, when the instructor instructes the driver, it is not possible to instruct the trainee whether or not the running speed is appropriate in the driving state at that time, so that the training effect is effective. There is also the problem that it is difficult to get up.

本発明は、上記課題を解決するためになされたもので、ユーザが自身の運転技能を的確に認識することができ、教習効果を高めることができる運転教習装置などを提供することを目的とする。 The present invention has been made to solve the above problems, and an object of the present invention is to provide a driving training device or the like capable of accurately recognizing one's own driving skill and enhancing the training effect. ..

上記目的を達成するために、請求項1に係る発明は、第1ユーザ(受講者M1)によって模擬車両2が模擬走行環境下で運転される運転教習装置1において、出力インターフェース(メインモニタ11、スピーカ12、操作モニタ21)と、模擬車両2を運転するために第1ユーザによって操作される操作部(ハンドル3、レバー3a,3h、スイッチ3d〜3g)と、第1ユーザによる操作部の操作状態を取得する操作状態取得部(センサ装置5)と、模擬走行環境を少なくとも映像化した模擬走行環境データを記憶する模擬走行環境データ記憶部(コントローラ30)と、第1ユーザによる操作部の操作状態に応じて、模擬走行環境データ記憶部に記憶された模擬走行環境データを出力インターフェースに出力させる模擬走行制御を実行する模擬走行制御部(コントローラ30、STEP5〜8)と、模擬走行制御の実行中、第1ユーザの発声状態を表す発声データを取得する発声データ取得部(マイク装置4)と、模擬走行制御の実行中、模擬走行環境データの時系列上の所定タイミングを、マーキング時点として設定するマーキング時点設定部(コントローラ30、STEP21,22)と、模擬走行制御の実行中、第1ユーザの発声データ及びマーキング時点を模擬走行環境データに対して少なくとも関連付けしたデータを、関連付け模擬走行データとして記憶する関連付け模擬走行データ記憶部(コントローラ30、STEP9)と、模擬走行制御の終了後、所定再生条件が成立したか否かを判定する判定部(コントローラ30、STEP32,51,55)と、所定再生条件が成立したときに、マーキング時点に基づいて、関連付け模擬走行データを出力インターフェースに再生出力させる走行再生制御を実行する走行再生制御部(コントローラ30、STEP52,54)と、を備えることを特徴とする。 In order to achieve the above object, the invention according to claim 1 is an output interface (main monitor 11, main monitor 11,) in a driving training device 1 in which a simulated vehicle 2 is driven by a first user (student M1) in a simulated driving environment. Speaker 12, operation monitor 21), operation unit (handle 3, lever 3a, 3h, switches 3d to 3g) operated by the first user to drive the simulated vehicle 2, and operation of the operation unit by the first user. Operation of the operation state acquisition unit (sensor device 5) for acquiring the state, the simulated driving environment data storage unit (controller 30) for storing at least the simulated driving environment data that visualizes the simulated driving environment, and the operation of the operation unit by the first user. Simulated driving control unit (controller 30, STEP5-8) that executes simulated driving control that outputs simulated driving environment data stored in the simulated driving environment data storage unit to the output interface according to the state, and execution of simulated driving control A voice data acquisition unit (microphone device 4) that acquires voice data representing the voice state of the first user, and a predetermined timing on the time series of simulated running environment data during execution of simulated running control are set as marking time points. The marking time setting unit (controller 30, STEP21, 22) and the data in which the voice data of the first user and the marking time are at least associated with the simulated driving environment data during the execution of the simulated driving control are used as the associated simulated driving data. A predetermined association simulated running data storage unit (controller 30, STEP 9) to be stored, and a determination unit (controller 30, STEP 32, 51, 55) for determining whether or not a predetermined reproduction condition is satisfied after the simulated running control is completed. It is characterized by including a travel reproduction control unit (controller 30, STEP 52, 54) that executes travel reproduction control for reproducing and outputting the associated simulated travel data to the output interface when the reproduction condition is satisfied. And.

この運転教習装置によれば、第1ユーザによる操作部の操作状態に応じて、模擬走行環境データ記憶部に記憶された模擬走行環境データを出力インターフェースに出力させる模擬走行制御が実行される。この模擬走行制御の実行中、第1ユーザの発声状態を表す発声データが取得され、模擬走行環境データの時系列上の所定タイミングがマーキング時点として設定される。さらに、模擬走行制御の実行中、第1ユーザの発声データ及びマーキング時点を模擬走行環境データに対して少なくとも関連付けしたデータが、関連付け模擬走行データとして記憶される。 According to this driving training device, simulated driving control for outputting simulated driving environment data stored in the simulated driving environment data storage unit to the output interface is executed according to the operation state of the operation unit by the first user. During the execution of this simulated travel control, vocalization data representing the vocalization state of the first user is acquired, and a predetermined timing on the time series of the simulated travel environment data is set as a marking time point. Further, during the execution of the simulated running control, data in which the utterance data of the first user and the marking time are at least associated with the simulated running environment data are stored as the associated simulated running data.

そして、模擬走行制御の終了後、所定再生条件が成立したか否かが判定され、所定再生条件が成立したときに、関連付け模擬走行データを出力インターフェースから再生出力させる走行再生制御が実行される。このように、模擬走行制御を実行した後、その終了直後において走行再生制御を開始することができるので、第1ユーザは、自身の運転技能に加えて、運転中のユーザ自身の発声状態を迅速かつ的確に認識することができる。さらに、第1ユーザに加えて、第2ユーザ及びそれ以外のユーザにおいても、第1ユーザの模擬車両の運転中における問題点を迅速かつ具体的に把握できることで、教習効果を高めることができる。 Then, after the simulated travel control is completed, it is determined whether or not the predetermined reproduction condition is satisfied, and when the predetermined reproduction condition is satisfied, the travel reproduction control for reproducing and outputting the associated simulated travel data from the output interface is executed. In this way, after executing the simulated driving control, the driving reproduction control can be started immediately after the simulated driving control, so that the first user can quickly adjust the vocalization state of the user himself / herself during driving in addition to his / her own driving skill. And it can be recognized accurately. Further, in addition to the first user, the second user and other users can quickly and concretely grasp the problems during the driving of the simulated vehicle of the first user, so that the training effect can be enhanced.

また、走行再生制御を実行する際、マーキング時点に基づいて走行再生制御が開始されるので、このマーキング時点を適切に設定することにより、走行再生制御を、適切なタイミングから開始することができ、教習効果をさらに高めることができる。 Further, when the traveling reproduction control is executed, the traveling reproduction control is started based on the marking time point. Therefore, by appropriately setting the marking time point, the traveling reproduction control can be started from an appropriate timing. The training effect can be further enhanced.

請求項2に係る発明は、請求項1に記載の運転教習装置1において、入力インターフェース(キーボード22、マウス23)をさらに備え、マーキング時点設定部は、模擬走行制御の実行中における所定事象の発生タイミングを、第1マーキング時点として設定し、判定部は、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第1マーキング時点の選択操作が実行されたときに、所定再生条件が成立したと判定し(STEP55)、走行再生制御部は、所定再生条件が成立したときに、第1マーキング時点を基準として時系列上の第1所定値T1分、過去にさかのぼった時点から走行再生制御を開始するように構成されている(STEP52)ことを特徴とする。 The invention according to claim 2 further includes an input interface (keyboard 22, mouse 23) in the driving training device 1 according to claim 1, and the marking time setting unit generates a predetermined event during execution of simulated running control. The timing is set as the first marking time point, and the determination unit satisfies the predetermined reproduction condition when the selection operation at the first marking time point is executed by the operation of the input interface by the second user after the simulated running control is completed. (STEP55), when the predetermined reproduction condition is satisfied, the traveling reproduction control unit controls the traveling reproduction from the time when the first predetermined value T1 minute on the time series is traced back to the past with respect to the first marking time. It is characterized in that it is configured to start (STEP 52).

この運転教習装置によれば、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第1マーキング時点の選択操作が実行されたときに、所定再生条件が成立したと判定される。そして、所定再生条件が成立したときに、走行再生制御が、第1マーキング時点を基準として時系列上の第1所定値分、過去にさかのぼった時点から開始される。この第1マーキング時点は、模擬走行制御の実行中における所定事象の発生タイミングであるので、走行再生制御を、所定事象の発生タイミングから第1所定値分、過去にさかのぼった時点で開始することができる。それにより、第1ユーザ及び第2ユーザなどは、所定事象が発生したときの第1ユーザの運転状態を視覚的かつ聴覚的に確実に認識することができる。 According to this driving training device, it is determined that the predetermined reproduction condition is satisfied when the selection operation at the time of the first marking is executed by the operation of the input interface by the second user after the simulated driving control is completed. Then, when the predetermined reproduction condition is satisfied, the traveling reproduction control is started from the time retroactive to the past by the first predetermined value in the time series with reference to the first marking time point. Since the first marking time point is the occurrence timing of a predetermined event during the execution of the simulated running control, the running reproduction control may be started at a time retroactive to the past by the first predetermined value from the occurrence timing of the predetermined event. it can. As a result, the first user, the second user, and the like can reliably visually and audibly recognize the driving state of the first user when a predetermined event occurs.

請求項3に係る発明は、請求項1に記載の運転教習装置1において、入力インターフェース(キーボード22、マウス23)をさらに備え、マーキング時点設定部は、模擬走行制御の実行中、第2ユーザによる入力インターフェースの操作によって所定のマーキング動作が実行されたときに、マーキング動作の実行タイミングを、第2マーキング時点として設定し(STEP21,22)、判定部は、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第2マーキング時点の選択操作が実行されたときに、所定再生条件が成立したと判定し(STEP51)、走行再生制御部は、所定再生条件が成立したときに、第2マーキング時点を基準として時系列上の第2所定値T2分、過去にさかのぼった時点から走行再生制御を開始するように構成されている(STEP54)ことを特徴とする。 The invention according to claim 3 further includes an input interface (keyboard 22, mouse 23) in the driving training device 1 according to claim 1, and a marking time point setting unit is used by a second user during execution of simulated running control. When a predetermined marking operation is executed by operating the input interface, the execution timing of the marking operation is set as the second marking time point (STEP21, 22), and the determination unit determines the second user after the simulated running control is completed. When the selection operation at the time of the second marking is executed by the operation of the input interface by (STEP51), the traveling reproduction control unit determines that the predetermined reproduction condition is satisfied, and when the predetermined reproduction condition is satisfied, the second It is characterized in that the traveling reproduction control is started from the second predetermined value T2 minutes on the time series with respect to the marking time point and the time point retroactive to the past (STEP 54).

この運転教習装置によれば、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第2マーキング時点の選択操作が実行されたときに、所定再生条件が成立したと判定される。そして、所定再生条件が成立したときに、走行再生制御が、第2マーキング時点を基準として時系列上の第2所定値分、過去にさかのぼった時点から開始される。この第2マーキング時点は、模擬走行制御の実行中、第2ユーザによる入力インターフェースの操作によって所定のマーキング動作が実行されたときに、このマーキング動作の実行タイミングとして設定される。したがって、この第2マーキング時点を、例えば、第2ユーザが第1ユーザに対して教習の必要性が高いと判断したタイミングに設定することにより、走行再生制御を、第2ユーザが第1ユーザに対して教習の必要性が高いと判断したタイミングに対して第2所定値分、過去にさかのぼった時点から開始することができる。その結果、第1ユーザ及び第2ユーザなどは、第2ユーザが第1ユーザに対して教習の必要性が高いと判断したタイミングで発生した事象を確実に認識することができ、教習効果をより一層、高めることができる。 According to this driving training device, it is determined that the predetermined reproduction condition is satisfied when the selection operation at the time of the second marking is executed by the operation of the input interface by the second user after the simulated driving control is completed. Then, when the predetermined reproduction condition is satisfied, the traveling reproduction control is started from the time retroactive to the past by the second predetermined value in the time series with reference to the second marking time point. This second marking time point is set as the execution timing of this marking operation when a predetermined marking operation is executed by the operation of the input interface by the second user during the execution of the simulated running control. Therefore, by setting the second marking time point, for example, at the timing when the second user determines that the need for training is high for the first user, the running reproduction control is set to the first user by the second user. On the other hand, it is possible to start from a point retroactive to the past by a second predetermined value for the timing when it is judged that the necessity of training is high. As a result, the first user, the second user, and the like can surely recognize the event that occurred at the timing when the second user determines that the first user has a high need for training, and the training effect can be further improved. It can be further enhanced.

請求項4に係る発明は、請求項2に記載の運転教習装置1において、入力インターフェース(キーボード22、マウス23)をさらに備え、マーキング時点設定部は、模擬走行制御の実行中、第2ユーザによる入力インターフェースの操作によって所定のマーキング動作が実行されたときに、マーキング動作の実行タイミングを、第2マーキング時点として設定し(STEP21,22)、判定部は、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第2マーキング時点の選択操作が実行されたときに、所定再生条件が成立したとさらに判定し(STEP51)、走行再生制御部は、所定再生条件が成立したときに、第2マーキング時点を基準として時系列上の第1所定値T1よりも大きい第2所定値T2分、過去にさかのぼった時点から走行再生制御を開始するように構成されている(STEP54)ことを特徴とする。 The invention according to claim 4 further includes an input interface (keyboard 22, mouse 23) in the driving training device 1 according to claim 2, and a marking time point setting unit is used by a second user during execution of simulated running control. When a predetermined marking operation is executed by operating the input interface, the execution timing of the marking operation is set as the second marking time point (STEP21, 22), and the determination unit determines the second user after the simulated running control is completed. When the selection operation at the time of the second marking is executed by the operation of the input interface by, it is further determined that the predetermined reproduction condition is satisfied (STEP51), and when the predetermined reproduction condition is satisfied, the traveling reproduction control unit is the first. 2 It is characterized in that the running reproduction control is started from a time point retroactive to the past by a second predetermined value T2 minutes larger than the first predetermined value T1 on the time series with reference to the marking time point (STEP54). To do.

この運転教習装置によれば、模擬走行制御の終了後、第2ユーザによる入力インターフェースの操作によって第2マーキング時点の選択操作が実行されたときに、所定再生条件が成立したと判定される。そして、所定再生条件が成立したときに、走行再生制御が、第2マーキング時点を基準として時系列上の第1所定値よりも大きい第2所定値分、過去にさかのぼった時点から開始される。この第2マーキング時点は、模擬走行制御の実行中、第2ユーザによる入力インターフェースの操作によって所定のマーキング動作が実行されたときに、マーキング動作の実行タイミングとして設定される。したがって、この第2マーキング時点を、例えば第2ユーザが第1ユーザに対して教習の必要性が高いと判断したタイミングに設定することにより、第1ユーザ及び第2ユーザなどは、第2ユーザが第1ユーザに対して教習の必要性が高いと判断したタイミングで発生した事象を、所定事象と比べて、より確実に認識することができる。 According to this driving training device, it is determined that the predetermined reproduction condition is satisfied when the selection operation at the time of the second marking is executed by the operation of the input interface by the second user after the simulated driving control is completed. Then, when the predetermined reproduction condition is satisfied, the traveling reproduction control is started from the time retroactive to the past by the second predetermined value larger than the first predetermined value in the time series with reference to the second marking time point. This second marking time point is set as the execution timing of the marking operation when a predetermined marking operation is executed by the operation of the input interface by the second user during the execution of the simulated running control. Therefore, by setting the second marking time point, for example, at the timing when the second user determines that the need for training is high for the first user, the first user, the second user, and the like can be set by the second user. It is possible to more reliably recognize an event that occurs at the timing when it is determined that the need for training is high for the first user, as compared with a predetermined event.

請求項5に係る発明は、請求項1ないし4のいずれかに記載の運転教習装置1において、模擬車両2は、2輪タイプの緊急車両であることを特徴とする。 The invention according to claim 5 is characterized in that, in the driving training device 1 according to any one of claims 1 to 4, the simulated vehicle 2 is a two-wheel type emergency vehicle.

この運転教習装置によれば、2輪タイプの緊急車両を用いて、模擬走行制御が実行され、その後、走行再生制御が実行される。この場合、2輪タイプの緊急車両は、他車両の監視などを実行するものであるので、模擬走行制御の実行中、そのような他車両の監視作業などを実行することになる。したがって、走行再生制御の実行中、他車両の監視作業などが適切に実行されたか否かを確認することができ、商品性を向上させることができる。 According to this driving training device, simulated driving control is executed using a two-wheel type emergency vehicle, and then driving reproduction control is executed. In this case, since the two-wheel type emergency vehicle monitors other vehicles and the like, such monitoring work of other vehicles is executed during the execution of the simulated travel control. Therefore, it is possible to confirm whether or not the monitoring work of another vehicle is properly executed during the execution of the traveling reproduction control, and it is possible to improve the commercial value.

請求項6に係る発明は、請求項1ないし4のいずれかに記載の運転教習装置1において、模擬車両は、四輪車両を含む、マイク公報を実施する各種車両であることを特徴とする。 The invention according to claim 6 is characterized in that, in the driving training device 1 according to any one of claims 1 to 4, the simulated vehicle is a variety of vehicles for carrying out the microphone publication, including a four-wheeled vehicle.

この運転教習装置によれば、四輪車両を含む、マイク公報を実施する各種車両を用いて、模擬走行制御が実行され、その後、走行再生制御が実行される。したがって、パトカー、救急車及び消防車などの、マイク公報を実施する各種車両において、マイク公報が適切に実行されたか否かを確認することができ、商品性を向上させることができる。 According to this driving training device, simulated driving control is executed using various vehicles that implement the microphone publication, including four-wheeled vehicles, and then driving reproduction control is executed. Therefore, it is possible to confirm whether or not the microphone publication is properly executed in various vehicles such as police cars, ambulances, and fire engines that implement the microphone publication, and it is possible to improve the commercial value.

前述した目的を達成するために、請求項7に係る発明は、第1ユーザによって模擬車両2が模擬走行環境下で運転される運転教習方法において、第1ユーザ(受講者M1)による操作部(レバー3a,3h、スイッチ3b〜3g)の操作状態を取得し、模擬走行環境を少なくとも映像化した模擬走行環境データを記憶し、第1ユーザによる操作部の操作状態に応じて、模擬走行環境データを出力インターフェース(メインモニタ11、操作モニタ21)に表示させる模擬走行制御を実行し(STEP5〜8)、模擬走行制御の実行中、第1ユーザの発声状態を表す発声データを取得し、模擬走行制御の実行中、模擬走行環境データ中の所定タイミングを、マーキング時点として取得し(STEP21,22)、模擬走行制御の実行中、発声データ及マーキング時点を模擬走行環境データに対して関連付けしたデータを、関連付け模擬走行データとして記憶し(STEP9)、模擬走行制御の終了後、所定再生条件が成立したか否かを判定し、所定再生条件が成立したときに、マーキング時点に基づいて、関連付け模擬走行データを出力インターフェースから再生出力させる走行再生制御を実行する(STEP38)ことを特徴とする。 In order to achieve the above-mentioned object, the invention according to claim 7 is an operation unit (student M1) by a first user (student M1) in a driving training method in which a simulated vehicle 2 is driven by a first user in a simulated driving environment. The operating state of the levers 3a, 3h, switches 3b to 3g) is acquired, the simulated driving environment data that at least visualizes the simulated driving environment is stored, and the simulated driving environment data is stored according to the operating state of the operation unit by the first user. Is executed on the output interface (main monitor 11, operation monitor 21) (STEPs 5 to 8), and during the execution of the simulated running control, the voiced data representing the voiced state of the first user is acquired and the simulated running is performed. During the execution of the control, the predetermined timing in the simulated driving environment data is acquired as the marking time point (STEP21, 22), and during the execution of the simulated driving control, the voice data and the marking time are associated with the simulated driving environment data. , Stored as associated simulated running data (STEP 9), after the simulation running control is completed, it is determined whether or not the predetermined playback condition is satisfied, and when the predetermined playback condition is met, the associated simulated running is based on the marking time. It is characterized in that it executes running reproduction control (STEP38) to reproduce and output data from an output interface.

本発明の一実施形態に係る運転教習装置の構成を示す正面図である。It is a front view which shows the structure of the driving training apparatus which concerns on one Embodiment of this invention. 運転教習装置の構成を示す側面図である。It is a side view which shows the structure of the driving training apparatus. ハンドル装置の構成を示す図である。It is a figure which shows the structure of the handle device. 運転教習装置の電気的な構成を示すブロック図である。It is a block diagram which shows the electric structure of a driving training apparatus. 模擬走行制御処理を示すフローチャートである。It is a flowchart which shows the simulated running control processing. 各種データ記憶処理を示すフローチャートである。It is a flowchart which shows various data storage processing. 走行再生制御処理を示すフローチャートである。It is a flowchart which shows the traveling reproduction control processing. 頭出し再生制御処理を示すフローチャートである。It is a flowchart which shows the cue reproduction control process. 走行再生制御処理中の再生映像の一例を示す図である。It is a figure which shows an example of the reproduced image in the traveling reproduction control processing. 走行再生制御処理中の俯瞰視状態での再生映像の表示例を示す図である。It is a figure which shows the display example of the reproduced image in the bird's-eye view state in the traveling reproduction control processing.

以下、図面を参照しながら、本発明の一実施形態に係る運転教習装置について説明する。図1及び図2に示すように、本実施形態の運転教習装置1は、模擬車両2を用いて、運転教習を実行するものであり、模擬車両2に加えて、表示音響装置10、指導用装置20及びコントローラ30などを備えている。 Hereinafter, the driving training device according to the embodiment of the present invention will be described with reference to the drawings. As shown in FIGS. 1 and 2, the driving training device 1 of the present embodiment executes the driving training using the simulated vehicle 2, and in addition to the simulated vehicle 2, the display sound device 10 and the instruction It includes a device 20, a controller 30, and the like.

この模擬車両2は、警察官である受講者M1(第1ユーザ)が跨がって運転する二輪車タイプのものであり、より具体的には、いわゆる「白バイ」と呼ばれるパトロール用の緊急車両タイプのものである。 This simulated vehicle 2 is a two-wheeled vehicle type that is driven by a student M1 (first user) who is a police officer, and more specifically, a so-called "white police motorcycle" emergency vehicle type for patrol. belongs to.

模擬車両2は、図3に示すように、ハンドル3を備えており、このハンドル3には、クラッチレバー3a、サイドビュースイッチ3b、前照灯上下切換スイッチ3c、方向指示スイッチ3d、ホーンスイッチ3e、スタータスイッチ3f、エンジン停止スイッチ3g、前輪ブレーキレバー3h、スロットルグリップ3i及びサイレンスイッチ(図示せず)などが設けられている。なお、本実施形態では、ハンドル3、レバー3a,3h及びスイッチ3d〜3gが操作部に相当する。 As shown in FIG. 3, the simulated vehicle 2 is provided with a handle 3, which is provided with a clutch lever 3a, a side view switch 3b, a headlight up / down changeover switch 3c, a direction indicator switch 3d, and a horn switch 3e. , Starter switch 3f, engine stop switch 3g, front wheel brake lever 3h, throttle grip 3i, siren switch (not shown) and the like are provided. In this embodiment, the handle 3, the levers 3a, 3h, and the switches 3d to 3g correspond to the operation unit.

このクラッチレバー3aは、クラッチ操作を実行するためのものであり、サイドビュースイッチ3bは、表示音響装置10の後述するメインモニタ11内へのサイドビュー(サイドミラーの映像)の表示/非表示を切り換えるものである。 The clutch lever 3a is for executing the clutch operation, and the side view switch 3b displays / hides the side view (image of the side mirror) in the main monitor 11 described later of the display sound device 10. It is a switch.

さらに、前照灯上下切換スイッチ3cは、前照灯のハイビーム/ロービームを切り換えるものであり、方向指示スイッチ3dは、左右の方向指示器の点滅/停止を切り換えるものである。一方、ホーンスイッチ3eは、押下して警告音を発生するためのものであり、スタータスイッチ3f及びエンジン停止スイッチ3gはそれぞれ、エンジンの始動用及び停止用のものである。 Further, the headlight up / down changeover switch 3c switches the high beam / low beam of the headlight, and the direction indicator switch 3d switches the blinking / stop of the left and right turn signals. On the other hand, the horn switch 3e is for generating a warning sound when pressed, and the starter switch 3f and the engine stop switch 3g are for starting and stopping the engine, respectively.

また、前輪ブレーキレバー3hは、前輪ブレーキ操作を実行するためのものであり、スロットルグリップ3iは、回動させることよってエンジン回転数を上昇させるためのものである。さらに、サイレンスイッチは、緊急時にサイレン音などを発生するためのものである。 Further, the front wheel brake lever 3h is for executing the front wheel brake operation, and the throttle grip 3i is for increasing the engine speed by rotating the front wheel brake lever 3h. Further, the siren switch is for generating a siren sound or the like in an emergency.

これらに加えて、模擬車両2には、後輪ブレーキレバー及び変速レバー(いずれも図示せず)が設けられている。後輪ブレーキレバーは、右足で後輪ブレーキ操作を実行するためのものであり、変速レバーは、左足で変速動作を実行するためのものである。以上の各種スイッチ及び各種レバーの操作状態は、後述するセンサ装置5によって検出される。 In addition to these, the simulated vehicle 2 is provided with a rear wheel brake lever and a speed change lever (neither of them is shown). The rear wheel brake lever is for executing the rear wheel brake operation with the right foot, and the shift lever is for executing the shift operation with the left foot. The operating states of the various switches and levers described above are detected by the sensor device 5 described later.

また、受講者M1のヘルメットには、マイク装置4(発声データ取得部)が設けられている。このマイク装置4は、無線通信装置を内蔵しており、受講者M1の音声をデータとして含む音声データ信号をコントローラ30に送信する。コントローラ30は、後述する模擬走行制御処理の実行中において、この音声データ信号をスピーカ12から出力するとともに、記憶装置31内に記憶する。 Further, the helmet of the student M1 is provided with a microphone device 4 (vocalization data acquisition unit). The microphone device 4 has a built-in wireless communication device, and transmits a voice data signal including the voice of the student M1 as data to the controller 30. The controller 30 outputs this voice data signal from the speaker 12 and stores it in the storage device 31 during the execution of the simulated travel control process described later.

また、表示音響装置10は、メインモニタ11及び左右のスピーカ12,12を備えており、これらのメインモニタ11及び左右のスピーカ12,12は、図4に示すように、コントローラ30に電気的に接続されている。 Further, the display sound device 10 includes a main monitor 11 and left and right speakers 12, 12, and these main monitors 11 and left and right speakers 12, 12 are electrically connected to the controller 30 as shown in FIG. It is connected.

この表示音響装置10では、運転教習中、後述するコントローラ30からの映像信号によって、模擬走行環境下での教習用映像がメインモニタ11に表示され、コントローラ30からの音響信号によって、運転教習用の走行音などが左右のスピーカ12,12から出力される。 In the display sound device 10, during the driving training, the training video under the simulated running environment is displayed on the main monitor 11 by the video signal from the controller 30, which will be described later, and the sound signal from the controller 30 is used for the driving training. Running sounds and the like are output from the left and right speakers 12, 12.

また、前述した指導用装置20は、操作モニタ21、キーボード22及びマウス23を備えており、図4に示すように、これらの構成要素21〜23はいずれもコントローラ30に電気的に接続されている。 Further, the instruction device 20 described above includes an operation monitor 21, a keyboard 22, and a mouse 23, and as shown in FIG. 4, all of these components 21 to 23 are electrically connected to the controller 30. There is.

操作モニタ21は、指導者M2(第2ユーザ)が運転教習時に参照するものであり、テーブル24上に載置されているとともに、後述するように、運転教習中、コントローラ30から映像信号が供給されることで、メインモニタ11と同じ映像を表示できるように構成されている。なお、本実施形態では、メインモニタ11、スピーカ12及び操作モニタ21が出力インターフェースに相当する。 The operation monitor 21 is referred to by the instructor M2 (second user) during the driving training, is placed on the table 24, and is supplied with a video signal from the controller 30 during the driving training as described later. By doing so, it is configured to be able to display the same image as the main monitor 11. In this embodiment, the main monitor 11, the speaker 12, and the operation monitor 21 correspond to the output interface.

さらに、キーボード22及びマウス23も、テーブル24上に載置されており、指導者M2は、これらのキーボード22及びマウス23を介して、模擬走行制御処理及び走行再生制御処理の開始/終了動作や、後述する各種の操作を実行する。なお、本実施形態では、キーボード22及びマウス23が入力インターフェースに相当する。また、以下の説明では、キーボード22及びマウス23が指導者M2によって操作されたことを、適宜、「指導者M2の入力操作」という。 Further, the keyboard 22 and the mouse 23 are also placed on the table 24, and the instructor M2 performs a start / end operation of the simulated running control process and the running reproduction control process via the keyboard 22 and the mouse 23. , Perform various operations described later. In this embodiment, the keyboard 22 and the mouse 23 correspond to the input interface. Further, in the following description, the operation of the keyboard 22 and the mouse 23 by the instructor M2 is appropriately referred to as "input operation of the instructor M2".

一方、コントローラ30は、表示音響装置10に内蔵されており(図2参照)、このコントローラ30によって、運転教習中、後述するように、模擬走行制御処理及び走行再生制御処理が実行される。なお、本実施形態では、コントローラ30が、模擬走行環境データ記憶部、模擬走行制御部、マーキング時点設定部、関連付け模擬走行データ記憶部、判定部及び走行再生制御部に相当する。 On the other hand, the controller 30 is built in the display sound device 10 (see FIG. 2), and the controller 30 executes a simulated running control process and a running reproduction control process during the driving training as described later. In the present embodiment, the controller 30 corresponds to a simulated running environment data storage unit, a simulated running control unit, a marking time point setting unit, an associated simulated running data storage unit, a determination unit, and a running reproduction control unit.

このコントローラ30には、前述した構成要素11,12,21〜23に加えて、センサ装置5及びアクチュエータ装置6が電気的に接続されている。 In addition to the components 11, 12, 21 to 23 described above, the sensor device 5 and the actuator device 6 are electrically connected to the controller 30.

センサ装置5(操作状態取得部)は、各種のセンサで構成されており、前述した各種スイッチ及び各種レバーの操作状態と、ハンドル3の操舵角とを表す操作状態データを検出して、それらを表す検出信号をコントローラ30に出力する。 The sensor device 5 (operation state acquisition unit) is composed of various sensors, detects operation state data representing the operation states of the various switches and levers described above, and the steering angle of the steering wheel 3, and displays them. The represented detection signal is output to the controller 30.

また、アクチュエータ装置6は、複数のアクチュエータで構成されている。コントローラ30は、後述する模擬走行制御処理の実行中、アクチュエータ装置6の動作状態を制御する。それにより、模擬走行制御処理の実行中、受講者M1が前後方向、上下方向及び左右方向の加減速度などを感じるように、模擬車両2の挙動が制御される。 Further, the actuator device 6 is composed of a plurality of actuators. The controller 30 controls the operating state of the actuator device 6 during the execution of the simulated travel control process described later. As a result, the behavior of the simulated vehicle 2 is controlled so that the student M1 feels the acceleration / deceleration in the front-rear direction, the up-down direction, the left-right direction, and the like during the execution of the simulated running control process.

一方、コントローラ30は、記憶装置31、データベース32及び演算処理装置33を備えている。この記憶装置31は、例えば、RAM及びE2PROMなどで構成されており、前述したセンサ装置5からの検出信号が表す操作状態データ、及び後述する模擬走行制御処理における摸擬走行データの算出結果などを記憶する。 On the other hand, the controller 30 includes a storage device 31, a database 32, and an arithmetic processing device 33. The storage device 31 is composed of, for example, a RAM and an E2PROM, and can store operation state data represented by a detection signal from the sensor device 5 described above, and calculation results of simulated travel data in simulated travel control processing described later. Remember.

また、データベース32は、例えば、ROMなどで構成されており、その内部には、運転教習用の各種コース、各種走行条件及び各種環境条件などを含む模擬走行環境データ(映像データ及び音響データ)が記憶されている。 Further, the database 32 is composed of, for example, a ROM or the like, and inside the database 32, simulated driving environment data (video data and acoustic data) including various courses for driving training, various driving conditions, various environmental conditions, and the like are stored. It is remembered.

この模擬走行環境データは、警察官である受講者M1が白バイタイプの模擬車両2を運転しながら、パトロール走行を行うときの教習用データである関係上、交通環境シーンとして、歩行者の車道への飛出し及び交差点での事故発生などの所定危険事象の発生シーンが含まれている。これに加えて、模擬走行環境データでは、上記の所定危険事象の発生タイミングが、後述する第1頭出し再生制御処理での第1マーキング時点として予め設定されている。 This simulated driving environment data is data for training when a student M1 who is a police officer drives a motorcycle police motorcycle type simulated vehicle 2 and patrols, so as a traffic environment scene, it goes to a pedestrian's roadway. Includes scenes of certain dangerous events such as jumping out and accidents at intersections. In addition to this, in the simulated driving environment data, the occurrence timing of the above-mentioned predetermined dangerous event is preset as the first marking time point in the first cue reproduction control process described later.

さらに、演算処理装置33は、例えば、CPUなどで構成されており、運転教習時には、指導者M2のキーボード22及びマウス23の操作状態と、センサ装置5からの検出信号などに応じて、以下に述べるように、模擬走行制御処理などを実行する。 Further, the arithmetic processing device 33 is composed of, for example, a CPU or the like, and at the time of driving training, it is described below according to the operation state of the keyboard 22 and the mouse 23 of the instructor M2 and the detection signal from the sensor device 5. As described, the simulated driving control process and the like are executed.

次に、図5を参照しながら、模擬走行制御処理について説明する。この模擬走行制御処理は、模擬車両2を用いて、受講者M1による模擬走行状態を制御するものであり、コントローラ30によって所定の制御周期で実行される。この模擬走行制御処理の場合、受講者M1が警察官である関係上、白バイによるパトロール走行が模擬走行として実行される。 Next, the simulated travel control process will be described with reference to FIG. This simulated travel control process controls the simulated travel state by the student M1 using the simulated vehicle 2, and is executed by the controller 30 at a predetermined control cycle. In the case of this simulated running control process, since the student M1 is a police officer, patrol running by police motorcycle is executed as simulated running.

まず、データリセット処理を実行する(図5/STEP1)。このデータリセット処理は、記憶装置31内に記憶されている演算結果や後述するフラグなどの各種のデータをリセットするものであり、模擬走行制御処理の1回目の制御タイミングにおいてのみ実行され、それ以降の制御タイミングではスキップされる。 First, the data reset process is executed (FIG. 5 / STEP1). This data reset process resets various data such as calculation results stored in the storage device 31 and flags described later, and is executed only at the first control timing of the simulated travel control process, and thereafter. It is skipped at the control timing of.

次に、模擬走行フラグF_RUNが「1」であるか否かを判定する(図5/STEP2)。この判定が否定で(図5/STEP2…NO)、F_RUN=0であるときには、制御開始条件が成立したか否かを判定する(図5/STEP3)。 Next, it is determined whether or not the simulated running flag F_RUN is "1" (FIG. 5 / STEP2). When this determination is negative (FIG. 5 / STEP2 ... NO) and F_RUN = 0, it is determined whether or not the control start condition is satisfied (FIG. 5 / STEP3).

この場合、指導者M2の入力操作によって、模擬走行制御処理の開始操作が実行されたときに、制御開始条件が成立したと判定され、それ以外のときには制御開始条件が不成立であると判定される。 In this case, it is determined that the control start condition is satisfied when the start operation of the simulated running control process is executed by the input operation of the instructor M2, and it is determined that the control start condition is not satisfied in other cases. ..

この判定が否定で(図5/STEP3…NO)、制御開始条件が不成立であるときには、そのまま本処理を終了する。一方、この判定が肯定で(図5/STEP3…YES)、制御開始条件が成立しているときには、それを表すために、模擬走行フラグF_RUNを「1」に設定する(図5/STEP4)。 If this determination is negative (FIG. 5 / STEP3 ... NO) and the control start condition is not satisfied, the present process is terminated as it is. On the other hand, when this determination is affirmative (FIG. 5 / STEP3 ... YES) and the control start condition is satisfied, the simulated travel flag F_RUN is set to "1" to indicate that (FIG. 5 / STEP4).

以上のように模擬走行フラグF_RUNが「1」に設定されたとき、又は、前述した判定が肯定で(図2/STEP2…YES)、前回以前の制御タイミングにおいて模擬走行フラグF_RUNが「1」に設定されていたときには、次に、摸擬走行データ算出処理を実行する(図5/STEP5)。 When the simulated running flag F_RUN is set to "1" as described above, or when the above-mentioned determination is affirmative (FIG. 2 / STEP2 ... YES), the simulated running flag F_RUN is set to "1" at the control timing before the previous time. If it has been set, then the simulated running data calculation process is executed (FIG. 5 / STEP5).

この摸擬走行データ算出処理では、記憶装置31内の模擬走行環境データ及びセンサ装置5の検出信号に応じて、模擬車両2の走行状態及び交通環境を表す摸擬走行データが算出される。 In this simulated running data calculation process, simulated running environment data representing the running state and traffic environment of the simulated vehicle 2 is calculated according to the simulated running environment data in the storage device 31 and the detection signal of the sensor device 5.

次いで、映像制御処理を実行する(図5/STEP6)。この映像制御処理では、上記の走行データの算出結果に対応する映像信号が、メインモニタ11及び操作モニタ21に供給される。それにより、模擬車両2の走行状態及び交通環境に対応する映像が2つのモニタ11,21に表示される。具体的には、例えば、図9に示すような映像がモニタ11,21に表示される。 Next, the video control process is executed (FIG. 5 / STEP6). In this video control process, a video signal corresponding to the above calculation result of the traveling data is supplied to the main monitor 11 and the operation monitor 21. As a result, images corresponding to the traveling state and the traffic environment of the simulated vehicle 2 are displayed on the two monitors 11 and 21. Specifically, for example, the image shown in FIG. 9 is displayed on the monitors 11 and 21.

次に、音響制御処理を実行する(図5/STEP7)。この音響制御処理では、前述した走行データの算出結果に対応する音響信号がスピーカ12に供給される。それにより、例えば、模擬車両2の走行音、エンジン音及びブレーキ音などがスピーカ12から出力される。また、例えば、模擬車両2が緊急走行状態となり、受講者M1によってサイレンスイッチがオンされたときには、サイレン音がスピーカ12から出力される。 Next, the acoustic control process is executed (FIG. 5 / STEP7). In this acoustic control process, an acoustic signal corresponding to the calculation result of the traveling data described above is supplied to the speaker 12. As a result, for example, the running sound, engine sound, brake sound, etc. of the simulated vehicle 2 are output from the speaker 12. Further, for example, when the simulated vehicle 2 is in an emergency running state and the siren switch is turned on by the student M1, the siren sound is output from the speaker 12.

これに加えて、受講者M1が発声することで、その音声データがマイク装置4を介してコントローラ30に送信されたときには、この音声データがスピーカ12に供給される。それにより、例えば、受講者M1が他車両又は交通参加者に対する警告や指示などを発声したときには、それがスピーカ12から出力される。 In addition to this, when the student M1 utters the voice data and the voice data is transmitted to the controller 30 via the microphone device 4, the voice data is supplied to the speaker 12. As a result, for example, when the student M1 utters a warning or instruction to another vehicle or a traffic participant, it is output from the speaker 12.

次いで、車両制御処理を実行する(図5/STEP8)。この車両制御では、前述した摸擬走行データに対応する駆動信号がアクチュエータ装置6に供給される。それにより、例えば、受講者M1がスロットルグリップを開ける方向に回したときには、加速感が得られるように、模擬車両2の挙動が制御され、受講者M1がブレーキ操作を実行したときには、減速感が得られるように、模擬車両2の挙動が制御される。 Next, the vehicle control process is executed (FIG. 5 / STEP8). In this vehicle control, a drive signal corresponding to the above-mentioned simulated running data is supplied to the actuator device 6. As a result, for example, the behavior of the simulated vehicle 2 is controlled so that when the student M1 turns in the direction of opening the throttle grip, a feeling of acceleration is obtained, and when the student M1 executes the braking operation, a feeling of deceleration is felt. The behavior of the simulated vehicle 2 is controlled so as to be obtained.

次に、各種データ記憶処理を実行する(図5/STEP9)。この各種データ記憶処理は、前述した摸擬走行データなどを記憶するものであり、具体的には、図6に示すように実行される。 Next, various data storage processes are executed (FIG. 5 / STEP9). These various data storage processes store the above-mentioned simulated running data and the like, and are specifically executed as shown in FIG.

同図に示すように、まず、前述した摸擬走行データを記憶装置31内に記憶する(図6/STEP20)。次いで、マーキング操作が実行されたか否かを判定する(図6/STEP21)。 As shown in the figure, first, the above-mentioned simulated running data is stored in the storage device 31 (FIG. 6 / STEP20). Next, it is determined whether or not the marking operation has been executed (FIG. 6 / STEP21).

この場合、指導者M2の入力操作によって、所定のマーキング操作が実行されたときに、マーキング操作が実行されたと判定され、それ以外のときには、マーキング操作が実行されていないと判定される。この判定が否定で(図6/STEP21…NO)、マーキング操作が実行されていないときには、そのまま本処理を終了する。 In this case, it is determined that the marking operation has been executed when the predetermined marking operation is executed by the input operation of the instructor M2, and it is determined that the marking operation has not been executed at other times. If this determination is negative (FIG. 6 / STEP21 ... NO) and the marking operation is not executed, the present process is terminated as it is.

一方、この判定が肯定で(図6/STEP21…YES)、マーキング操作が実行されたときには、このマーキング操作が実行されたタイミングを、摸擬走行データ中の第2マーキング時点として記憶装置31内に記憶する(図6/STEP22)。その後、本処理を終了する。 On the other hand, when this determination is affirmative (FIG. 6 / STEP21 ... YES) and the marking operation is executed, the timing at which the marking operation is executed is set in the storage device 31 as the second marking time point in the simulated running data. Remember (Fig. 6 / STEP22). After that, this process ends.

この場合、前述したように、模擬走行環境データには、所定危険事象の発生タイミングが第1マーキング時点として予め設定されているので、摸擬走行データは、模擬走行環境データ(音響データ及び映像データ)に対して、受講者M1の音声データ、第1マーキング時点及び第2マーキング時点を関連付けしたデータ(関連付け模擬走行データ)として、記憶装置31内に記憶される。 In this case, as described above, since the occurrence timing of the predetermined dangerous event is preset as the first marking time in the simulated driving environment data, the simulated driving environment data is the simulated driving environment data (acoustic data and video data). ), The audio data of the student M1 and the data (association simulated running data) in which the first marking time point and the second marking time point are associated are stored in the storage device 31.

図5に戻り、各種データ記憶処理を以上のように実行した後、制御終了条件が成立したか否かを判定する(図5/STEP10)。この場合、指導者M2の入力操作によって、模擬走行制御処理の終了操作が実行されたときに、制御終了条件が成立したと判定され、それ以外のときには制御終了条件が不成立であると判定される。 Returning to FIG. 5, after executing various data storage processes as described above, it is determined whether or not the control end condition is satisfied (FIG. 5 / STEP10). In this case, it is determined that the control end condition is satisfied when the end operation of the simulated running control process is executed by the input operation of the instructor M2, and it is determined that the control end condition is not satisfied in other cases. ..

この判定が否定で(図5/STEP10…NO)、制御終了条件が不成立であるときには、そのまま本処理を終了する。 If this determination is negative (FIG. 5 / STEP10 ... NO) and the control end condition is not satisfied, the present process is terminated as it is.

一方、この判定が肯定で(図5/STEP10…YES)、制御終了条件が成立したときには、それを表すために前述した模擬走行フラグF_RUNを「0」に設定するとともに、模擬走行制御を実行済みであることを表すために、模擬走行実行済みフラグF_FINISHを「1」に設定する(図5/STEP11)。その後、本処理を終了する。 On the other hand, when this determination is affirmative (FIG. 5 / STEP10 ... YES) and the control end condition is satisfied, the simulated running flag F_RUN described above is set to "0" to indicate that, and the simulated running control has been executed. In order to indicate that, the simulated running executed flag F_FINISH is set to "1" (FIG. 5 / STEP11). After that, this process ends.

次に、図7を参照しながら、走行再生制御処理について説明する。この走行再生制御処理は、上記のように模擬走行制御処理を実行した後、記憶装置31内に記憶された摸擬走行データを再生するものであり、コントローラ30によって所定の制御周期で実行される。 Next, the traveling reproduction control process will be described with reference to FIG. 7. This travel reproduction control process reproduces the simulated travel data stored in the storage device 31 after executing the simulated travel control process as described above, and is executed by the controller 30 in a predetermined control cycle. ..

同図に示すように、まず、前述した模擬走行実行済みフラグF_FINISHが「1」であるか否かを判定する(図7/STEP30)。この判定が否定で(図7/STEP30…NO)、前述した模擬走行制御処理を実行済みでないときには、そのまま本処理を終了する。 As shown in the figure, first, it is determined whether or not the above-mentioned simulated running execution completed flag F_FINISH is “1” (FIG. 7 / STEP30). If this determination is negative (FIG. 7 / STEP30 ... NO) and the simulated travel control process described above has not been executed, the present process is terminated as it is.

一方、この判定が肯定で(図7/STEP30…YES)、模擬走行制御を実行済みであるときには、頭出し再生フラグF_CUEPLAYが「1」であるか否かを判定する(図7/STEP31)。 On the other hand, when this determination is affirmative (FIG. 7 / STEP30 ... YES) and the simulated travel control has been executed, it is determined whether or not the cueing reproduction flag F_CUEPLAY is "1" (FIG. 7 / STEP31).

この判定が否定で(図7/STEP31…NO)、F_CUEPLAY=0であるときには、頭出し再生条件が成立しているか否かを判定する(図7/STEP32)。この場合、指導者M2の入力操作によって、前述した第1マーキング時点又は第2マーキング時点の選択操作が実行されたときに、頭出し再生条件が成立したと判定され、それ以外のときには、頭出し再生条件が不成立であると判定される。 When this determination is negative (FIG. 7 / STEP31 ... NO) and F_CUEPLAY = 0, it is determined whether or not the cueing reproduction condition is satisfied (FIG. 7 / STEP32). In this case, it is determined that the cueing reproduction condition is satisfied when the above-mentioned selection operation at the first marking time point or the second marking time point is executed by the input operation of the instructor M2, and at other times, cueing is performed. It is determined that the reproduction condition is not satisfied.

この判定が否定で(図7/STEP32…NO)、頭出し再生条件が不成立であるときには、通常再生フラグF_PLAYが「1」であるか否かを判定する(図7/STEP33)。 When this determination is negative (FIG. 7 / STEP32 ... NO) and the cueing reproduction condition is not satisfied, it is determined whether or not the normal reproduction flag F_PLAY is "1" (FIG. 7 / STEP33).

この判定が否定で(図7/STEP33…NO)、F_PLAY=0であるときには、通常再生条件が成立しているか否かを判定する(図7/STEP34)。この場合、指導者M2の入力操作によって、所定の通常再生操作が実行されたときには、通常再生条件が成立したと判定され、それ以外のときには、通常再生条件が不成立であると判定される。 When this determination is negative (FIG. 7 / STEP33 ... NO) and F_PLAY = 0, it is determined whether or not the normal reproduction condition is satisfied (FIG. 7 / STEP34). In this case, when the predetermined normal reproduction operation is executed by the input operation of the instructor M2, it is determined that the normal reproduction condition is satisfied, and in other cases, it is determined that the normal reproduction condition is not satisfied.

この判定が否定で(図7/STEP34…NO)、通常再生条件が不成立であるときには、そのまま本処理を終了する。一方、この判定が肯定で(図7/STEP34…YES)、通常再生条件が成立しているときには、通常再生制御処理を実行すべきであると判定して、それを表すために、通常再生フラグF_PLAYを「1」に設定する(図7/STEP35)。 If this determination is negative (FIG. 7 / STEP34 ... NO) and the normal reproduction condition is not satisfied, the present process is terminated as it is. On the other hand, when this determination is affirmative (FIG. 7 / STEP34 ... YES) and the normal reproduction condition is satisfied, it is determined that the normal reproduction control process should be executed, and the normal reproduction flag is used to indicate that. Set F_PLAY to "1" (Fig. 7 / STEP35).

このように通常再生フラグF_PLAYを「1」に設定したとき、又は、前述した判定が肯定で(図7/STEP33…YES)、F_PLAY=1であるときには、次に、通常再生制御処理を実行する(STEP36)。 When the normal playback flag F_PLAY is set to "1" in this way, or when the above-mentioned determination is affirmative (FIG. 7 / STEP33 ... YES) and F_PLAY = 1, then the normal playback control process is executed. (STEP36).

この通常再生制御処理では、摸擬走行データ中の映像データがモニタ11,21に再生表示されるとともに、摸擬走行データ中の音響データ及び音声データがスピーカ12から再生出力される。この場合、摸擬走行データ中の映像データとしては、図9に示す受講者M1から前方を見た状態の映像データと、図10に示す俯瞰状態の映像データとが指導者M2の入力操作によって切り換えられて、モニタ11,21に再生表示される。 In this normal reproduction control process, the video data in the simulated running data is reproduced and displayed on the monitors 11 and 21, and the acoustic data and the audio data in the simulated running data are reproduced and output from the speaker 12. In this case, as the video data in the simulated running data, the video data in the state of looking forward from the student M1 shown in FIG. 9 and the video data in the bird's-eye view state shown in FIG. 10 are input by the instructor M2. It is switched and is reproduced and displayed on the monitors 11 and 21.

また、この通常再生制御処理の実行中、指導者M2の入力操作によって、所定の一時停止操作が実行されたときには、モニタ11,21の再生表示及びスピーカ12の再生出力が一時停止される。以上の点は、後述する第1頭出し再生制御処理及び第2頭出し再生制御処理においても同様である。 Further, during the execution of this normal reproduction control process, when a predetermined pause operation is executed by the input operation of the instructor M2, the reproduction display of the monitors 11 and 21 and the reproduction output of the speaker 12 are temporarily stopped. The above points are the same in the first cue regeneration control process and the second cue regeneration control process, which will be described later.

一方、前述した判定が肯定で(図7/STEP32…YES)、頭出し再生条件が成立しているとき、すなわち指導者M2によって前述した第1マーキング時点又は第2マーキング時点の選択操作が実行されたときには、頭出し再生制御処理を実行すべきであると判定して、それを表すために、頭出し再生フラグF_CUEPLAYを「1」に設定する(図7/STEP37)。 On the other hand, when the above-mentioned determination is affirmative (FIG. 7 / STEP32 ... YES) and the cueing reproduction condition is satisfied, that is, the leader M2 executes the above-mentioned selection operation at the first marking time point or the second marking time point. At that time, it is determined that the cueing reproduction control process should be executed, and in order to indicate this, the cueing reproduction flag F_CUEPLAY is set to "1" (FIG. 7 / STEP37).

このように頭出し再生フラグF_CUEPLAYを「1」に設定したとき、又は、前述した判定が肯定で(図7/STEP31…YES)、F_CUEPLAY=1であるときには、次に、頭出し再生制御処理を実行する(STEP38)。 When the cueing reproduction flag F_CUEPLAY is set to "1" in this way, or when the above-mentioned determination is affirmative (FIG. 7 / STEP31 ... YES) and F_CUEPLAY = 1, then the cueing reproduction control process is performed. Execute (STEP38).

この頭出し再生制御処理は、具体的には、図8に示すように実行される。同図に示すように、まず、第2頭出し再生フラグF_CUEPLAY2が「1」であるか否かを判定する(図8/STEP50)。 Specifically, this cueing reproduction control process is executed as shown in FIG. As shown in the figure, first, it is determined whether or not the second cue reproduction flag F_CUEPLAY2 is "1" (FIG. 8 / STEP50).

この判定が否定で(図8/STEP50……NO)、F_CUEPLAY2=0であるときには、第2頭出し再生条件が成立しているか否かを判定する(図8/STEP51)。この場合、指導者M2の入力操作によって、前述した第2マーキング時点の選択操作が実行されたときには、第2頭出し再生条件が成立していると判定され、それ以外のときには、第2頭出し再生条件が不成立であると判定される。 When this determination is negative (FIG. 8 / STEP50 ... NO) and F_CUEPLAY2 = 0, it is determined whether or not the second cue reproduction condition is satisfied (FIG. 8 / STEP51). In this case, when the selection operation at the time of the second marking described above is executed by the input operation of the instructor M2, it is determined that the second cueing reproduction condition is satisfied, and in other cases, the second cueing is performed. It is determined that the reproduction condition is not satisfied.

この判定が否定で(図8/STEP51…NO)、第2頭出し再生条件が不成立であるときには、第1頭出し再生制御処理を実行する(図8/STEP52)。 When this determination is negative (FIG. 8 / STEP51 ... NO) and the second cue reproduction condition is not satisfied, the first cue reproduction control process is executed (FIG. 8 / STEP52).

この第1頭出し再生制御処理では、第1マーキング時点よりも第1所定値T1分、過去にさかのぼったタイミングから、摸擬走行データ中の映像データがモニタ11,21に再生表示されると同時に、摸擬走行データ中の音響データ及び音声データがスピーカ12から再生出力される。第1所定値T1は、所定時間(例えば数秒)に設定されている。 In this first cue playback control process, the video data in the simulated running data is played back and displayed on the monitors 11 and 21 from the timing that goes back to the past by the first predetermined value T1 minutes from the time of the first marking. , The acoustic data and the voice data in the simulated running data are reproduced and output from the speaker 12. The first predetermined value T1 is set to a predetermined time (for example, several seconds).

この第1頭出し再生制御処理では、例えば、図10又は図9に示す画像が再生表示される。また、図10に「×」で示す点P1が第1マーキング時点に相当する。以上のように、第1頭出し再生制御処理を実行した後、本処理を終了する。 In this first cue reproduction control process, for example, the image shown in FIG. 10 or FIG. 9 is reproduced and displayed. Further, the point P1 indicated by "x" in FIG. 10 corresponds to the time of the first marking. As described above, after executing the first cue reproduction control process, this process ends.

一方、上述した判定が肯定で(図8/STEP51…YES)、指導者M2の入力操作によって、前述した第2マーキング時点の選択操作が実行されたときには、第2頭出し再生制御処理を実行すべきであると判定して、それを表すために、第2頭出し再生フラグF_CUEPLAY2を「1」に設定する(図8/STEP53)。 On the other hand, when the above-mentioned determination is affirmative (FIG. 8 / STEP51 ... YES) and the above-mentioned selection operation at the time of the second marking is executed by the input operation of the instructor M2, the second cue reproduction control process is executed. The second cue reproduction flag F_CUEPLAY2 is set to "1" in order to determine that it should be, and to indicate it (FIG. 8 / STEP53).

次いで、第2頭出し再生制御処理を実行する(図8/STEP54)。この第2頭出し再生制御処理では、第2マーキング時点よりも第2所定値T2分、過去にさかのぼったタイミングから、摸擬走行データ中の映像データがモニタ11,21に再生表示されるとともに、摸擬走行データ中の音響データ及び音声データがスピーカ12から再生出力される。この第2所定値T2は、前述した第1所定値T1よりも大きい所定時間(例えば数秒)に設定されており、その理由については後述する。 Next, the second cue reproduction control process is executed (FIG. 8 / STEP54). In this second cueing reproduction control process, the video data in the simulated running data is reproduced and displayed on the monitors 11 and 21 from the timing retroactive to the past by the second predetermined value T2 minutes from the time of the second marking. The acoustic data and the voice data in the simulated running data are reproduced and output from the speaker 12. The second predetermined value T2 is set to a predetermined time (for example, several seconds) larger than the above-mentioned first predetermined value T1, and the reason will be described later.

この第2頭出し再生制御処理では、例えば、図10又は図9に示す画像が再生表示され。また、図10に「◇」で示す点P2が第2マーキング時点に相当する。以上のように、第2頭出し再生制御処理を実行した後、本処理を終了する。 In this second cue reproduction control process, for example, the image shown in FIG. 10 or FIG. 9 is reproduced and displayed. Further, the point P2 indicated by “◇” in FIG. 10 corresponds to the time of the second marking. As described above, after executing the second cue reproduction control process, this process ends.

一方、前述した判定が肯定で(図8/STEP50…YES)、F_CUEPLAY2=1であるときには、第1頭出し再生条件が成立しているか否かを判定する(図8/STEP55)。この場合、指導者M2の入力操作によって、前述した第1マーキング時点の選択操作が実行されたときには、第1頭出し再生条件が成立していると判定され、それ以外のときには、第1頭出し再生条件が不成立であると判定される。 On the other hand, when the above-mentioned determination is affirmative (FIG. 8 / STEP50 ... YES) and F_CUEPLAY2 = 1, it is determined whether or not the first cue reproduction condition is satisfied (FIG. 8 / STEP55). In this case, when the above-mentioned selection operation at the time of the first marking is executed by the input operation of the instructor M2, it is determined that the first cueing reproduction condition is satisfied, and in other cases, the first cueing is performed. It is determined that the reproduction condition is not satisfied.

この判定が肯定で(図8/STEP55…YES)、第1頭出し再生条件が成立しているときには、第1頭出し再生制御処理を実行すべきであると判定して、それを表すために、第2頭出し再生フラグF_CUEPLAY2を「0」に設定する(図8/STEP56)。 When this determination is affirmative (FIG. 8 / STEP55 ... YES) and the first cueing reproduction condition is satisfied, it is determined that the first cueing reproduction control process should be executed, and this is indicated. , The second cue reproduction flag F_CUEPLAY2 is set to "0" (FIG. 8 / STEP56).

次いで、前述したように、第1頭出し再生制御処理を実行して(図8/STEP52)、本処理を終了する。 Next, as described above, the first cue reproduction control process is executed (FIG. 8 / STEP52), and this process is terminated.

一方、上述した判定が否定で(図8/STEP55…NO)、第1頭出し再生条件が不成立であるときには、前述したように、第2頭出し再生制御処理を実行して(図8/STEP54)、本処理を終了する。 On the other hand, when the above-mentioned determination is negative (FIG. 8 / STEP55 ... NO) and the first cueing reproduction condition is not satisfied, the second cueing reproduction control process is executed as described above (FIG. 8 / STEP54). ), End this process.

図7に戻り、頭出し再生制御処理を以上のように実行した後、又は、通常再生制御処理を前述したように実行した後、制御終了条件が成立したか否かを判定する(図7/STEP39)。この場合、指導者M2の入力操作によって、走行再生制御処理の終了操作が実行されたときに、制御終了条件が成立したと判定され、それ以外のときには制御終了条件が不成立であると判定される。 Returning to FIG. 7, after executing the cue reproduction control process as described above, or after executing the normal reproduction control process as described above, it is determined whether or not the control end condition is satisfied (FIG. 7 / STEP39). In this case, it is determined that the control end condition is satisfied when the end operation of the traveling reproduction control process is executed by the input operation of the instructor M2, and it is determined that the control end condition is not satisfied in other cases. ..

この判定が否定で(図7/STEP39…NO)、制御終了条件が不成立であるときには、そのまま本処理を終了する。 If this determination is negative (FIG. 7 / STEP39 ... NO) and the control end condition is not satisfied, the present process is terminated as it is.

一方、この判定が肯定で(図7/STEP39…YES)、制御終了条件が成立したときには、フラグリセット処理を実行する(図7/STEP40)。このフラグリセット処理では、前述した各種のフラグF_PLAY,F_CUEPLAY,F_CUEPLAY2がいずれも「0」にリセットされる。以上のように、フラグリセット処理を実行した後、本処理を終了する。 On the other hand, when this determination is affirmative (FIG. 7 / STEP39 ... YES) and the control end condition is satisfied, the flag reset process is executed (FIG. 7 / STEP40). In this flag reset process, the various flags F_PLAY, F_CUEPLAY, and F_CUEPLAY2 described above are all reset to "0". As described above, after executing the flag reset process, this process ends.

次に、前述した第2所定値T2が第1所定値T1よりも大きい所定時間に設定されている理由について説明する。模擬走行制御処理の実行中、例えば、図9に示すような先行車両40が前方に存在する模擬走行環境下で、この先行車両40がフラフラと蛇行するような危険運転を実行している場面が発生することがある。 Next, the reason why the above-mentioned second predetermined value T2 is set to a predetermined time larger than the first predetermined value T1 will be described. During the execution of the simulated driving control process, for example, in a simulated driving environment in which the preceding vehicle 40 is present in front as shown in FIG. 9, there is a scene in which the preceding vehicle 40 is performing dangerous driving such as meandering. May occur.

このような場面では、受講者M1は、「前の車両、左側によって停止しなさい」などの停止指示を発声したり、サイレンスイッチ操作によりサイレン音を発生したりすることが要求される。その際、指導者M2が受講者M1の停止指示の発声タイミング又はサイレン音の発生タイミングが遅いと感じたり、間に合っていないと感じたりしたタイミングで、前述したマーキング動作が指導者M2によって実行され、第2マーキング時点が設定される。 In such a situation, the student M1 is required to utter a stop instruction such as "Stop by the vehicle in front, stop by the left side", or generate a siren sound by operating the siren switch. At that time, the above-mentioned marking operation is executed by the instructor M2 at the timing when the instructor M2 feels that the timing of issuing the stop instruction of the student M1 or the timing of generating the siren sound is late or not in time. The second marking time point is set.

そして、走行再生制御処理を実行する際、この第2マーキング時点から、第2所定値T2分、過去にさかのぼった時点から、第2頭出し再生制御処理が実行されるので、指導者M2は、上記のような、受講者M1に対する指導が必要と感じた事象を受講者M1と一緒に参照しながら、受講者M1に教習することになる。 Then, when the traveling reproduction control process is executed, the second cueing reproduction control process is executed from the second marking time point, the second predetermined value T2 minutes, and the time point back to the past. While referring to the above-mentioned events that the student M1 feels necessary to be instructed together with the student M1, the student M1 will be taught.

この場合、前述した第1マーキング時点は、予め設定された所定危険事象の発生タイミングであるのに対して、第2マーキング時点は、上記のように指導者M2の操作によって設定されるタイミングである関係上、摸擬走行データを再生する際には、第2マーキング時点から過去にさかのぼる時間を大きく設定しないと、指導者M2が受講者M1の指導が必要と感じたシーンが再生されないおそれがある。以上の理由により、第2マーキング時点から過去にさかのぼる時間である第2所定値T2は、第1マーキング時点から過去にさかのぼる時間である第1所定値T1よりも大きい値に設定されている。 In this case, the above-mentioned first marking time point is the timing at which a predetermined dangerous event occurs preset, whereas the second marking time point is the timing set by the operation of the leader M2 as described above. For this reason, when playing back the simulated running data, if the time going back to the past from the time of the second marking is not set large, the scene that the instructor M2 feels that the instruction of the student M1 is necessary may not be reproduced. .. For the above reasons, the second predetermined value T2, which is the time going back to the past from the second marking time point, is set to a value larger than the first predetermined value T1 which is the time going back to the past from the first marking time point.

以上のように、本実施形態の運転教習装置1によれば、模擬走行制御処理が実行される。この模擬走行制御処理では、受講者M1による模擬車両2のハンドル3、各種スイッチ及び各種レバーの操作運転状態に応じて、記憶装置31内の模擬走行環境データが、モニタ11,21に表示されると同時に、スピーカ12から出力される。そして、この模擬走行制御処理の実行中、受講者M1の発声状態を表す発声データがマイク装置4を介して取得され、指導者M2の入力操作によって所定のマーキング動作が実行されたときに、その実行タイミングが第2マーキング時点として設定される。さらに、模擬走行制御処理の実行中、受講者M1の発声データ、音響データ、第1マーキング時点及び第2マーキング時点が模擬走行環境データに対して関連付けされ、関連付け模擬走行データとして記憶装置31内に記憶される。 As described above, according to the driving training device 1 of the present embodiment, the simulated driving control process is executed. In this simulated driving control process, the simulated driving environment data in the storage device 31 is displayed on the monitors 11 and 21 according to the operating operation state of the steering wheel 3, various switches and various levers of the simulated vehicle 2 by the student M1. At the same time, it is output from the speaker 12. Then, during the execution of this simulated running control process, when the vocalization data representing the vocalization state of the student M1 is acquired via the microphone device 4 and the predetermined marking operation is executed by the input operation of the instructor M2, the vocalization data is executed. The execution timing is set as the second marking time point. Further, during the execution of the simulated running control process, the utterance data, acoustic data, first marking time point, and second marking time point of the student M1 are associated with the simulated running environment data, and are stored in the storage device 31 as the associated simulated running data. Will be remembered.

そして、模擬走行制御処理の終了後、走行再生制御処理が実行される。このように模擬走行制御処理を実行した後、その終了直後において走行再生制御処理を開始することができるので、受講者M1は、受講者自身の運転技能に加えて、運転中の受講者自身の発声状態を迅速かつ的確に認識することができる。さらに、受講者M1に加えて、指導者M2及びそれ以外のユーザにおいても、受講者M1の模擬車両2の運転中における問題点を迅速かつ具体的に把握できることで、教習効果を高めることができる。 Then, after the simulated travel control process is completed, the travel reproduction control process is executed. After executing the simulated driving control process in this way, the driving reproduction control process can be started immediately after the completion of the simulated driving control process. Therefore, the student M1 can use the student's own driving skill in addition to the student's own driving skill. The vocalization state can be recognized quickly and accurately. Further, in addition to the student M1, the instructor M2 and other users can quickly and concretely grasp the problems during the operation of the simulated vehicle 2 of the student M1, so that the training effect can be enhanced. ..

また、走行再生制御処理では、指導者M2の入力操作によって、第1マーキング時点が選択されたときには、第1頭出し再生制御処理が実行される。この第1頭出し再生制御処理では、第1マーキング時点から第1所定値T1分、過去にさかのぼった時点から、摸擬走行データの再生が開始される。それにより、指導者M2は、所定危険事象が発生したときの受講者M1の運転状態を受講者M1と一緒に参照しながら、運転教習を実行することができる。それにより、教習効果を高めることができる。 Further, in the traveling reproduction control process, when the first marking time point is selected by the input operation of the instructor M2, the first cue reproduction control process is executed. In this first cueing reproduction control process, reproduction of the simulated running data is started from the time of the first marking, the first predetermined value T1 minute, and from the time of going back to the past. As a result, the instructor M2 can execute the driving training while referring to the driving state of the student M1 when the predetermined dangerous event occurs together with the student M1. As a result, the training effect can be enhanced.

さらに、走行再生制御処理では、指導者M2の入力操作によって、第2マーキング時点が選択されたときには、第2頭出し再生制御処理が実行される。この第2頭出し再生制御処理では、第2マーキング時点から第2所定値T2分、過去にさかのぼった時点から、摸擬走行データの再生が開始される。この場合、前述した理由により、第2所定値T2は、第1所定値T1よりも大きい値に設定されているので、指導者M2の操作によって設定された第2マーキング時点から過去にさかのぼる時間を大きくできることで、指導者M2は、受講者M1に対する指導が必要と感じた事象を受講者M1と一緒に参照しながら、受講者M1に教習することができる。それにより、教習効果を高めることができる。 Further, in the traveling reproduction control process, when the second marking time point is selected by the input operation of the instructor M2, the second cue reproduction control process is executed. In this second cueing reproduction control process, reproduction of the simulated running data is started from the second predetermined value T2 minutes from the time of the second marking and from the time of going back to the past. In this case, for the reason described above, the second predetermined value T2 is set to a value larger than the first predetermined value T1, so that the time going back to the past from the second marking time set by the operation of the instructor M2 is set. By being able to increase the size, the instructor M2 can teach the student M1 while referring to the event that the instructor M1 feels necessary to be instructed together with the student M1. As a result, the training effect can be enhanced.

なお、実施形態は、出力インターフェースとして、メインモニタ11、スピーカ12及び操作モニタ21を用いた例であるが、本発明の出力インターフェースはこれらに限らず、模擬走行環境データを出力可能であるとともに、関連付け模擬走行データを再生出力可能なものであればよい。例えば、関連付け模擬走行データのうちの映像データを出力する出力インターフェースとして、1つのモニタや、1つのタッチパネル式のモニタを用いてもよく、3Dホログラム装置や、ヘッドマウント式のVR装置を用いてもよい。 In the embodiment, the main monitor 11, the speaker 12, and the operation monitor 21 are used as the output interface, but the output interface of the present invention is not limited to these, and can output simulated driving environment data. Anything that can reproduce and output the associated simulated driving data is sufficient. For example, one monitor or one touch panel type monitor may be used as an output interface for outputting the video data of the associated simulated running data, or a 3D hologram device or a head-mounted VR device may be used. Good.

また、実施形態は、走行再生制御処理中の音響データを、スピーカ12から出力した例であるが、スピーカ12に代えて、受講者M1が装着したヘルメットにヘッドセットを取り付け、ヘッドセットのヘルメットに内蔵された内蔵スピーカから、音響データを出力するように構成してもよい。さらに、受講者M1が装着したヘッドフォンから音響データを出力するように構成してもよい。 Further, the embodiment is an example in which the acoustic data during the traveling reproduction control process is output from the speaker 12, but instead of the speaker 12, the headset is attached to the helmet worn by the student M1 to be used as the helmet of the headset. The acoustic data may be output from the built-in built-in speaker. Further, the sound data may be output from the headphones worn by the student M1.

さらに、実施形態は、入力インターフェースとして、キーボード22及びマウス23を用いた例であるが、本発明の入力インターフェースはこれらに限らず、第2ユーザによる操作によって第2マーキング時点の選択操作を実行できるものであればよい。例えば、入力インターフェースとして、レーザポインタなどの光学式ポインティングデバイスや、タッチパネルやタッチペンなどの接触式のデバイスを用いてもよい。さらに、入力インターフェースとして、音声を選択操作に変換できる非接触式のデバイスを用いてもよい。 Further, the embodiment is an example in which the keyboard 22 and the mouse 23 are used as the input interface, but the input interface of the present invention is not limited to these, and the selection operation at the time of the second marking can be executed by the operation by the second user. Anything is fine. For example, as an input interface, an optical pointing device such as a laser pointer or a contact device such as a touch panel or a touch pen may be used. Further, as an input interface, a non-contact device capable of converting voice into a selection operation may be used.

一方、実施形態は、走行再生制御処理の実行中、指導者M2の入力操作により第1マーキング時点又は第2マーキング時点が選択されたときに、第1頭出し再生条件又は第2頭出し再生条件(所定再生条件)が成立したと判定して、第1頭出し再生制御処理又は第2頭出し再生制御処理を実行するように構成した例であるが、以下のように構成してもよい。 On the other hand, in the embodiment, when the first marking time point or the second marking time point is selected by the input operation of the instructor M2 during the execution of the traveling reproduction control process, the first cueing reproduction condition or the second cueing reproduction condition This is an example in which it is determined that the (predetermined reproduction condition) is satisfied and the first cue reproduction control process or the second cue reproduction control process is executed, but the configuration may be as follows.

例えば、AI(人工知能)により、走行再生制御処理の実行中における指導者M2の第1マーキング時点又は第2マーキング時点の選択状態を機械学習し、その学習結果に基づき、第1頭出し再生制御処理又は第2頭出し再生制御処理を自動的に実行するように構成してもよい。この場合、例えば、学習結果において、第1マーキング時点及び第2マーキング時点のいずれかの時点の選択頻度が最も高いときに、所定再生条件が成立したと判定すればよい。 For example, AI (artificial intelligence) is used to machine-learn the selection state of the leader M2 at the time of the first marking or the time of the second marking during the execution of the traveling reproduction control process, and based on the learning result, the first cue reproduction control is performed. It may be configured to automatically execute the process or the second cue reproduction control process. In this case, for example, in the learning result, it may be determined that the predetermined reproduction condition is satisfied when the selection frequency at any of the first marking time and the second marking time is the highest.

また、実施形態は、模擬走行制御処理の実行中、音響データを記憶装置31内に記憶し、走行再生制御処理の実行中、音響データを映像データ及び音声データと一緒に再生出力するように構成した例であるが、例えば、以下のように構成してもよい。すなわち、模擬走行制御処理の実行中、音響データを記憶装置31内に記憶するのを省略し、走行再生制御処理の実行中、映像データ及び音声データを再生出力するように構成してもよい。 Further, in the embodiment, the acoustic data is stored in the storage device 31 during the execution of the simulated travel control process, and the acoustic data is reproduced and output together with the video data and the audio data during the execution of the travel reproduction control process. For example, the configuration may be as follows. That is, it is possible to omit storing the acoustic data in the storage device 31 during the execution of the simulated travel control process, and to reproduce and output the video data and the audio data during the execution of the travel reproduction control process.

さらに、実施形態は、受講者M1を第1ユーザとし、指導者M2を第2ユーザとした例であるが、同一人物を第1ユーザ及び第2ユーザとしてもよい。 Further, in the embodiment, the student M1 is the first user and the instructor M2 is the second user, but the same person may be the first user and the second user.

一方、実施形態は、模擬車両として、白バイタイプの2輪車両を用いた例であるが、本発明の模擬車両は、これに限らず、ユーザによって模擬運転されるものであればよい。例えば、模擬車両として、パトカー、救急車及び消防車などの、マイク公報を実施する各種車両を用いてもよい。その場合には、マイク公報が適切に実行されたか否かを確認することができ、商品性を向上させることができる。 On the other hand, the embodiment is an example in which a motorcycle police motorcycle type two-wheeled vehicle is used as the simulated vehicle, but the simulated vehicle of the present invention is not limited to this, and any vehicle may be simulated and driven by the user. For example, as a simulated vehicle, various vehicles such as police cars, ambulances, and fire engines that carry out the microphone publication may be used. In that case, it is possible to confirm whether or not the microphone publication has been properly executed, and it is possible to improve the commercial value.

M1 受講者(第1ユーザ)
M2 指導者(第2ユーザ)
1 運転教習装置
2 模擬車両
3 ハンドル(操作部)
3a,3h レバー(操作部)
3d〜3g スイッチ(操作部)
4 マイク装置(発声データ取得部)
5 センサ装置(操作状態取得部)
11 メインモニタ(出力インターフェース)
12 スピーカ(出力インターフェース)
21 操作モニタ(出力インターフェース)
22 キーボード(入力インターフェース)
23 マウス(入力インターフェース)
30 コントローラ(模擬走行環境データ記憶部、模擬走行制御処理部、マーキング時 点設定部、関連付け模擬走行データ記憶部、判定部、走行再生制御処理部)
T1 第1所定値
T2 第2所定値
M1 student (first user)
M2 leader (second user)
1 Driving training device 2 Simulated vehicle 3 Steering wheel (operation unit)
3a, 3h lever (operation part)
3d ~ 3g switch (operation unit)
4 Microphone device (voice data acquisition unit)
5 Sensor device (operation status acquisition unit)
11 Main monitor (output interface)
12 Speaker (output interface)
21 Operation monitor (output interface)
22 Keyboard (input interface)
23 Mouse (input interface)
30 Controller (simulated driving environment data storage unit, simulated driving control processing unit, marking time point setting unit, associated simulated driving data storage unit, judgment unit, driving reproduction control processing unit)
T1 1st predetermined value T2 2nd predetermined value

Claims (7)

第1ユーザによって模擬車両が模擬走行環境下で運転される運転教習装置において、
出力インターフェースと、
前記模擬車両を運転するために前記第1ユーザによって操作される操作部と、
前記第1ユーザによる当該操作部の操作状態を取得する操作状態取得部と、
前記模擬走行環境を少なくとも映像化した模擬走行環境データを記憶する模擬走行環境データ記憶部と、
前記第1ユーザによる前記操作部の前記操作状態に応じて、当該模擬走行環境データ記憶部に記憶された前記模擬走行環境データを前記出力インターフェースに出力させる模擬走行制御を実行する模擬走行制御部と、
当該模擬走行制御の実行中、前記第1ユーザの発声状態を表す発声データを取得する発声データ取得部と、
前記模擬走行制御の実行中、前記模擬走行環境データの時系列上の所定タイミングを、マーキング時点として設定するマーキング時点設定部と、
前記模擬走行制御の実行中、前記第1ユーザの前記発声データ及び前記マーキング時点を前記模擬走行環境データに対して少なくとも関連付けしたデータを、関連付け模擬走行データとして記憶する関連付け模擬走行データ記憶部と、
前記模擬走行制御の終了後、所定再生条件が成立したか否かを判定する判定部と、
当該所定再生条件が成立したときに、前記マーキング時点に基づいて、前記関連付け模擬走行データを前記出力インターフェースに再生出力させる走行再生制御を実行する走行再生制御部と、を備えることを特徴とする運転教習装置。
In a driving training device in which a simulated vehicle is driven by a first user in a simulated driving environment,
With the output interface
An operation unit operated by the first user to drive the simulated vehicle,
An operation state acquisition unit that acquires the operation state of the operation unit by the first user,
A simulated driving environment data storage unit that stores at least simulated driving environment data that visualizes the simulated driving environment,
A simulated running control unit that executes simulated running control to output the simulated running environment data stored in the simulated running environment data storage unit to the output interface according to the operation state of the operation unit by the first user. ,
During the execution of the simulated running control, a vocalization data acquisition unit that acquires vocalization data representing the vocalization state of the first user, and a vocalization data acquisition unit.
During the execution of the simulated running control, a marking time point setting unit that sets a predetermined timing on the time series of the simulated running environment data as a marking time point,
During the execution of the simulated running control, the associated simulated running data storage unit that stores at least the data in which the vocalization data of the first user and the marking time point are associated with the simulated running environment data as the associated simulated running data.
After the simulation running control is completed, a determination unit for determining whether or not a predetermined reproduction condition is satisfied, and a determination unit.
The operation is characterized by comprising a travel reproduction control unit that executes travel reproduction control for reproducing and outputting the associated simulated travel data to the output interface based on the marking time point when the predetermined reproduction condition is satisfied. Training device.
請求項1に記載の運転教習装置において、
入力インターフェースをさらに備え、
前記マーキング時点設定部は、前記模擬走行制御の実行中における所定事象の発生タイミングを、第1マーキング時点として設定し、
前記判定部は、前記模擬走行制御の終了後、第2ユーザによる前記入力インターフェースの操作によって前記第1マーキング時点の選択操作が実行されたときに、前記所定再生条件が成立したと判定し、
前記走行再生制御部は、前記所定再生条件が成立したときに、前記第1マーキング時点を基準として時系列上の第1所定値分、過去にさかのぼった時点から前記走行再生制御を開始するように構成されていることを特徴とする運転教習装置。
In the driving training device according to claim 1,
With more input interface
The marking time point setting unit sets the occurrence timing of a predetermined event during the execution of the simulated running control as the first marking time point.
After the simulation running control is completed, the determination unit determines that the predetermined reproduction condition is satisfied when the selection operation at the time of the first marking is executed by the operation of the input interface by the second user.
When the predetermined reproduction condition is satisfied, the traveling reproduction control unit starts the traveling reproduction control from a time retroactively by the first predetermined value in the time series with reference to the first marking time point. A driving training device characterized by being configured.
請求項1に記載の運転教習装置において、
入力インターフェースをさらに備え、
前記マーキング時点設定部は、前記模擬走行制御の実行中、第2ユーザによる前記入力インターフェースの操作によって所定のマーキング動作が実行されたときに、当該マーキング動作の実行タイミングを、第2マーキング時点として設定し、
前記判定部は、前記模擬走行制御の終了後、前記第2ユーザによる前記入力インターフェースの操作によって前記第2マーキング時点の選択操作が実行されたときに、前記所定再生条件が成立したと判定し、
前記走行再生制御部は、前記所定再生条件が成立したときに、前記第2マーキング時点を基準として時系列上の第2所定値分、過去にさかのぼった時点から前記走行再生制御を開始するように構成されていることを特徴とする運転教習装置。
In the driving training device according to claim 1,
With more input interface
The marking time point setting unit sets the execution timing of the marking operation as the second marking time when a predetermined marking operation is executed by the operation of the input interface by the second user during the execution of the simulated running control. And
After the simulation running control is completed, the determination unit determines that the predetermined reproduction condition is satisfied when the selection operation at the time of the second marking is executed by the operation of the input interface by the second user.
When the predetermined reproduction condition is satisfied, the traveling reproduction control unit starts the traveling reproduction control from a time retroactive to the past by a second predetermined value in the time series with reference to the second marking time point. A driving training device characterized by being configured.
請求項2に記載の運転教習装置において、
入力インターフェースをさらに備え、
前記マーキング時点設定部は、前記第2ユーザによる前記入力インターフェースの操作によって所定のマーキング動作が実行されたときに、当該マーキング動作の実行タイミングを、第2マーキング時点として設定し、
前記判定部は、前記模擬走行制御の終了後、前記第2ユーザによる前記入力インターフェースの操作によって前記第2マーキング時点の選択操作が実行されたときに、前記所定再生条件が成立したとさらに判定し、
前記走行再生制御部は、前記所定再生条件が成立したときに、前記第2マーキング時点を基準として時系列上の前記第1所定値よりも大きい第2所定値分、過去にさかのぼった時点から前記走行再生制御を開始するように構成されていることを特徴とする運転教習装置。
In the driving training device according to claim 2.
With more input interface
When a predetermined marking operation is executed by the operation of the input interface by the second user, the marking time point setting unit sets the execution timing of the marking operation as the second marking time point.
After the simulation running control is completed, the determination unit further determines that the predetermined reproduction condition is satisfied when the selection operation at the time of the second marking is executed by the operation of the input interface by the second user. ,
When the predetermined reproduction condition is satisfied, the traveling reproduction control unit is said to have a second predetermined value larger than the first predetermined value in the time series with reference to the second marking time point, from the time retroactive to the past. A driving training device characterized in that it is configured to start driving reproduction control.
請求項1ないし4のいずれかに記載の運転教習装置において、
前記模擬車両は、2輪タイプの緊急車両であることを特徴とする運転教習装置。
In the driving training device according to any one of claims 1 to 4.
The simulated vehicle is a driving training device characterized by being a two-wheel type emergency vehicle.
請求項1ないし4のいずれかに記載の運転教習装置において、
前記模擬車両は、四輪車両を含む、マイク公報を実施する各種車両であることを特徴とする運転教習装置。
In the driving training device according to any one of claims 1 to 4.
The simulated vehicle is a driving training device including four-wheeled vehicles, which are various vehicles for carrying out the microphone publication.
第1ユーザによって模擬車両が模擬走行環境下で運転される運転教習方法において、
前記第1ユーザによる操作部の操作状態を取得し、
前記模擬走行環境を少なくとも映像化した模擬走行環境データを記憶し、
前記第1ユーザによる前記操作部の前記操作状態に応じて、前記模擬走行環境データを出力インターフェースに表示させる模擬走行制御を実行し、
当該模擬走行制御の実行中、前記第1ユーザの発声状態を表す発声データを取得し、
前記模擬走行制御の実行中、前記模擬走行環境データ中の所定タイミングを、マーキング時点として取得し、
前記模擬走行制御の実行中、前記発声データ及前記マーキング時点を前記模擬走行環境データに対して関連付けしたデータを、関連付け模擬走行データとして記憶し、
前記模擬走行制御の終了後、所定再生条件が成立したか否かを判定し、
当該所定再生条件が成立したときに、前記マーキング時点に基づいて、前記関連付け模擬走行データを前記出力インターフェースから再生出力させる走行再生制御を実行することを特徴とする模擬運転方法。
In the driving training method in which the simulated vehicle is driven by the first user in a simulated driving environment,
Acquire the operation state of the operation unit by the first user,
The simulated driving environment data that at least visualizes the simulated driving environment is stored and stored.
According to the operation state of the operation unit by the first user, the simulated running control for displaying the simulated running environment data on the output interface is executed.
During the execution of the simulated running control, the vocal data representing the vocal state of the first user is acquired, and the vocal data is acquired.
During the execution of the simulated running control, a predetermined timing in the simulated running environment data is acquired as a marking time point.
During the execution of the simulated running control, the data in which the vocalization data and the marking time point are associated with the simulated running environment data are stored as the associated simulated running data.
After the simulated running control is completed, it is determined whether or not the predetermined reproduction condition is satisfied.
A simulated driving method, characterized in that, when the predetermined reproduction condition is satisfied, travel reproduction control for reproducing and outputting the associated simulated driving data from the output interface is executed based on the marking time point.
JP2019067613A 2019-03-29 2019-03-29 Driving training equipment and driving training method Active JP7097323B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019067613A JP7097323B2 (en) 2019-03-29 2019-03-29 Driving training equipment and driving training method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019067613A JP7097323B2 (en) 2019-03-29 2019-03-29 Driving training equipment and driving training method

Publications (2)

Publication Number Publication Date
JP2020166157A true JP2020166157A (en) 2020-10-08
JP7097323B2 JP7097323B2 (en) 2022-07-07

Family

ID=72714877

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019067613A Active JP7097323B2 (en) 2019-03-29 2019-03-29 Driving training equipment and driving training method

Country Status (1)

Country Link
JP (1) JP7097323B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001500981A (en) * 1996-03-12 2001-01-23 トレイニング・イノヴェイションズ・グループ,リミテッド・ライアビリティ・カンパニー Post-report system and method for searching and displaying multiple data streams in a time synchronous manner
US6361321B1 (en) * 1997-04-10 2002-03-26 Faac, Inc. Dynamically controlled vehicle simulator system, and methods of constructing and utilizing same
JP2014228794A (en) * 2013-05-24 2014-12-08 三菱プレシジョン株式会社 Railroad simulator, finger pointing movement detecting method, and railroad simulating method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001500981A (en) * 1996-03-12 2001-01-23 トレイニング・イノヴェイションズ・グループ,リミテッド・ライアビリティ・カンパニー Post-report system and method for searching and displaying multiple data streams in a time synchronous manner
US6361321B1 (en) * 1997-04-10 2002-03-26 Faac, Inc. Dynamically controlled vehicle simulator system, and methods of constructing and utilizing same
JP2014228794A (en) * 2013-05-24 2014-12-08 三菱プレシジョン株式会社 Railroad simulator, finger pointing movement detecting method, and railroad simulating method

Also Published As

Publication number Publication date
JP7097323B2 (en) 2022-07-07

Similar Documents

Publication Publication Date Title
US10825350B2 (en) Virtual reality driver training and assessment system
JP4235465B2 (en) Riding simulation equipment
US20180197440A1 (en) Method and device for evaluating driving behavior
US5415550A (en) Riding simulation system
JP3817612B2 (en) Virtual driving system
CN112258925A (en) Automobile driving simulation training system with real road feeling of feedback steering
JP4312977B2 (en) Driving simulation device and image display control method
JP2011227242A (en) Drive simulation device, control program of drive simulation device, and control method of drive simulation device
JP7097323B2 (en) Driving training equipment and driving training method
JP2018045067A (en) Simulated driving device and simulated driving method
JP6797472B2 (en) Vehicle system
JP6854227B2 (en) Driving training device
JP7064424B2 (en) Driving training system
JP7410836B2 (en) driving training device
JP5090891B2 (en) Safe driving teaching system
JP2019066636A (en) Driving training device, and driving training method
JP2669806B2 (en) Motorcycle driving simulator
WO2005066918A1 (en) Simulation device and data transmission/reception method for simulation device
WO2021166324A1 (en) In-vehicle device, content reproduction method, and program
CN112758014A (en) Driving signal processing method and vehicle
JP2023523012A (en) Multi-sensory based performance enhancement system
JP2004246214A (en) Riding simulation apparatus
JP7064195B2 (en) Simulated driving device and simulated driving method
CN109640228B (en) Data processing method and electronic equipment
JP2003114607A (en) Virtual driving system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210329

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220420

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220614

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220627

R150 Certificate of patent or registration of utility model

Ref document number: 7097323

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150