JPWO2020059076A1 - Driving support device and driving support method - Google Patents

Driving support device and driving support method Download PDF

Info

Publication number
JPWO2020059076A1
JPWO2020059076A1 JP2020547542A JP2020547542A JPWO2020059076A1 JP WO2020059076 A1 JPWO2020059076 A1 JP WO2020059076A1 JP 2020547542 A JP2020547542 A JP 2020547542A JP 2020547542 A JP2020547542 A JP 2020547542A JP WO2020059076 A1 JPWO2020059076 A1 JP WO2020059076A1
Authority
JP
Japan
Prior art keywords
change
illuminance
driving
vehicle
driver
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020547542A
Other languages
Japanese (ja)
Other versions
JP7175321B2 (en
Inventor
晴彦 若柳
晴彦 若柳
下谷 光生
光生 下谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JPWO2020059076A1 publication Critical patent/JPWO2020059076A1/en
Application granted granted Critical
Publication of JP7175321B2 publication Critical patent/JP7175321B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0053Handover processes from vehicle to occupant
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00

Abstract

本発明は、自動運転から手動運転への切り替えを円滑に行うことが可能な運転支援装置および運転支援方法を提供することを目的とする。本発明による運転支援装置は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、照度変化推定部が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、影響緩和推定部が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える運転切替部とを備える。An object of the present invention is to provide a driving support device and a driving support method capable of smoothly switching from automatic driving to manual driving. The driving support device according to the present invention has an illuminance change estimation unit that estimates a sudden illuminance change that the driver's vision cannot follow instantaneously, and an illuminance change estimation unit that estimates the illuminance change. An impact mitigation estimation unit that estimates the mitigation of the impact on the vision of the driver who drives the vehicle, and a driving switching unit that switches the vehicle driving from automatic driving to manual driving when the impact mitigation estimation unit estimates the mitigation of the impact. To be equipped.

Description

本発明は、手動運転または自動運転への相互の切り替えを自動的に行うことによって運転者の運転の支援を行う運転支援装置および運転支援方法に関する。 The present invention relates to a driving support device and a driving support method that assist a driver in driving by automatically switching between manual driving and automatic driving.

例えば、車両がトンネル内を走行しているときにトンネルの出口に近づくと急激な照度変化が生じることがある。このとき、車両の運転者は、急激な照度変化によって視界が奪われることがあり、視界不良が原因となって車両が前方車両に接触する可能性がある。あるいは、視界不良が原因となって運転者が車両を減速すると、後続車両の渋滞を誘発する可能性がある。 For example, when a vehicle is traveling in a tunnel and approaches the exit of the tunnel, a sudden change in illuminance may occur. At this time, the driver of the vehicle may be deprived of his / her field of vision due to a sudden change in illuminance, and the vehicle may come into contact with the vehicle in front due to poor visibility. Alternatively, if the driver slows down the vehicle due to poor visibility, it may induce congestion in the following vehicle.

従来、運転者が周囲を見づらい状態になると手動運転から自動運転に自動的に切り替え、周囲環境が好転すると自動運転から手動運転に切り替える技術が開示されている(例えば、特許文献1参照)。 Conventionally, there has been disclosed a technique of automatically switching from manual driving to automatic driving when it becomes difficult for the driver to see the surroundings, and switching from automatic driving to manual driving when the surrounding environment improves (see, for example, Patent Document 1).

特開2017−188127号公報Japanese Unexamined Patent Publication No. 2017-188127

運転者は、急激な照度変化が生じると一時的に視界不良になることがあるが、しばらくすると変化後の照度に慣れて視界不良が緩和される。 The driver may temporarily have poor visibility when a sudden change in illuminance occurs, but after a while, the driver becomes accustomed to the changed illuminance and the poor visibility is alleviated.

特許文献1では、例えば、車両が西日に向かって走行している間は自動運転から手動運転に切り替えない。従って、特許文献1では、運転者の視界不良が緩和された後でも自動運転を続けることになる。この場合、運転者は、手動運転ができる状態であるにもかかわらず自動運転が継続されているため、いつ手動運転に戻るのかが分からず運転に戸惑うことがある。このように、従来では、自動運転から手動運転への切り替えを円滑に行っているとはいえなかった。 In Patent Document 1, for example, automatic driving is not switched to manual driving while the vehicle is traveling toward the west sun. Therefore, in Patent Document 1, automatic driving is continued even after the poor visibility of the driver is alleviated. In this case, the driver may be confused about the operation because he / she does not know when to return to the manual operation because the automatic operation is continued even though the driver can perform the manual operation. As described above, conventionally, it cannot be said that the switching from the automatic operation to the manual operation is smoothly performed.

本発明は、このような問題を解決するためになされたものであり、自動運転から手動運転への切り替えを円滑に行うことが可能な運転支援装置および運転支援方法を提供することを目的とする。 The present invention has been made to solve such a problem, and an object of the present invention is to provide a driving support device and a driving support method capable of smoothly switching from automatic driving to manual driving. ..

上記の課題を解決するために、本発明による運転支援装置は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、照度変化推定部が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、影響緩和推定部が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える運転切替部とを備える。 In order to solve the above problems, the driving support device according to the present invention includes an illuminance change estimation unit that estimates a sudden illuminance change that the driver's vision cannot follow instantly, and an illuminance change estimation unit. When the impact mitigation estimation unit estimates the mitigation of the impact of the illuminance change estimated by the change estimation unit on the driver's vision, and the impact mitigation estimation unit estimates the mitigation of the impact, the vehicle is automatically driven. It is equipped with an operation switching unit that switches from to manual operation.

また、本発明による運転支援方法は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定し、影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える。 Further, the driving support method according to the present invention estimates a sudden change in illuminance that is a change in illuminance around the vehicle and cannot be instantly followed by the driver's vision, and the estimated illuminance change is the visual vision of the driver driving the vehicle. When the mitigation of the influence on the vehicle is estimated and the mitigation of the influence is estimated, the driving of the vehicle is switched from the automatic driving to the manual driving.

本発明によると、運転支援装置は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、照度変化推定部が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、影響緩和推定部が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える運転切替部とを備えるため、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 According to the present invention, the driving support device includes an illuminance change estimation unit that estimates a sudden illuminance change that the driver's vision cannot follow instantaneously due to a illuminance change around the vehicle, and an illuminance estimated by the illuminance change estimation unit. When the impact mitigation estimation unit estimates the mitigation of the impact of the change on the driver's vision and the impact mitigation estimation unit estimates the mitigation of the impact, the operation is switched from automatic driving to manual driving. Since it is provided with a unit, it is possible to smoothly switch from automatic operation to manual operation.

また、運転支援方法は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定し、影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えるため、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 In addition, the driving support method estimates a sudden change in illuminance that cannot be instantly followed by the driver's vision, which is a change in illuminance around the vehicle, and the effect of the estimated illuminance change on the driver's vision. When the mitigation of the above is estimated and the mitigation of the influence is estimated, the driving of the vehicle is switched from the automatic driving to the manual driving, so that the switching from the automatic driving to the manual driving can be smoothly performed.

本発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。 Objectives, features, aspects, and advantages of the present invention will be made more apparent with the following detailed description and accompanying drawings.

本発明の実施の形態1による運転支援装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the operation support device by Embodiment 1 of this invention. 本発明の実施の形態1による運転支援装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the operation support device by Embodiment 1 of this invention. 本発明の実施の形態1による運転支援装置のハードウェア構成の一例を示すブロック図である。It is a block diagram which shows an example of the hardware composition of the driving support apparatus according to Embodiment 1 of this invention. 本発明の実施の形態1による運転支援装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation of the driving support device by Embodiment 1 of this invention. 本発明の実施の形態2による運転支援装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the operation support device by Embodiment 2 of this invention. 本発明の実施の形態2による運転支援装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation of the driving support device by Embodiment 2 of this invention. 本発明の実施の形態3による運転支援装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation of the driving support device by Embodiment 3 of this invention. 本発明の実施の形態4による運転支援装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the operation support device according to Embodiment 4 of this invention. 本発明の実施の形態4による運転支援装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation of the driving support apparatus according to Embodiment 4 of this invention. 本発明の実施の形態5による運転支援装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the operation support apparatus according to Embodiment 5 of this invention. 本発明の実施の形態5による運転支援装置の動作の一例を示すフローチャートである。It is a flowchart which shows an example of the operation of the driving support apparatus according to Embodiment 5 of this invention. 本発明の実施の形態による運転支援システムの構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the driving support system by embodiment of this invention.

本発明の実施の形態について、図面に基づいて以下に説明する。 Embodiments of the present invention will be described below with reference to the drawings.

<実施の形態1>
<構成>
図1は、本発明の実施の形態1による運転支援装置1の構成の一例を示すブロック図である。なお、図1では、本実施の形態1による運転支援装置を構成する必要最小限の構成を示している。
<Embodiment 1>
<Structure>
FIG. 1 is a block diagram showing an example of the configuration of the driving support device 1 according to the first embodiment of the present invention. Note that FIG. 1 shows the minimum necessary configuration for configuring the driving support device according to the first embodiment.

図1に示すように、運転支援装置1は、照度変化推定部2と、影響緩和推定部3と、運転切替部4とを備えている。照度変化推定部2は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する。影響緩和推定部3は、照度変化推定部2が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する。運転切替部4は、影響緩和推定部3が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える。 As shown in FIG. 1, the driving support device 1 includes an illuminance change estimation unit 2, an influence mitigation estimation unit 3, and an operation switching unit 4. The illuminance change estimation unit 2 estimates an illuminance change around the vehicle that is so rapid that the driver's vision cannot instantly follow it. The influence mitigation estimation unit 3 estimates the mitigation of the influence of the illuminance change estimated by the illuminance change estimation unit 2 on the visual sense of the driver who drives the vehicle. When the influence mitigation estimation unit 3 estimates the mitigation of the influence, the operation switching unit 4 switches the operation of the vehicle from the automatic driving to the manual driving.

次に、図1に示す運転支援装置1を含む運転支援装置の他の構成について説明する。 Next, another configuration of the driving support device including the driving support device 1 shown in FIG. 1 will be described.

図2は、他の構成に係る運転支援装置5の構成の一例を示すブロック図である。 FIG. 2 is a block diagram showing an example of the configuration of the driving support device 5 according to another configuration.

図2に示すように、運転支援装置5は、照度変化推定部2と、影響緩和推定部3と、運転切替部4と、状態変化取得部6とを備えている。状態変化取得部6は、DMS(Driver Monitoring System)9に接続されている。運転切替部4は、自動運転制御装置10に接続されている。なお、運転支援装置5、DMS9、および自動運転制御装置10は、車両に搭載されているものとする。 As shown in FIG. 2, the driving support device 5 includes an illuminance change estimation unit 2, an influence mitigation estimation unit 3, an operation switching unit 4, and a state change acquisition unit 6. The state change acquisition unit 6 is connected to the DMS (Driver Monitoring System) 9. The operation switching unit 4 is connected to the automatic operation control device 10. It is assumed that the driving support device 5, the DMS 9, and the automatic driving control device 10 are mounted on the vehicle.

DMS9は、運転者の顔および眼のうちの少なくとも一方の状態変化を検出する。例えば、DMS9は、運転者の顔全体を予め定められた時間ごとに撮影し、撮影した顔全体を画像処理することによって顔および眼のうちの少なくとも一方の状態変化を検出する。運転者の顔の状態変化は、運転者の顔の表情の変化、および運転者の顔の向きの変化を含む。また、運転者の眼の状態変化は、運転者の瞳孔の大きさの変化、運転者の瞼の開閉の変化を含む。 The DMS 9 detects a change of state in at least one of the driver's face and eyes. For example, the DMS 9 captures the entire driver's face at predetermined time intervals, and detects a change in the state of at least one of the face and the eye by performing image processing on the entire captured face. Changes in the state of the driver's face include changes in the facial expressions of the driver and changes in the orientation of the driver's face. In addition, changes in the state of the driver's eyes include changes in the size of the driver's pupils and changes in the opening and closing of the driver's eyelids.

状態変化取得部6は、DMS9から、運転者の顔および眼のうちの少なくとも一方の状態変化を取得する。具体的には、状態変化取得部6は、DMS9から、運転者の顔の表情の変化、運転者の顔の向きの変化、運転者の瞳孔の大きさの変化、および運転者の瞼の開閉の変化のうちの少なくとも1つを取得する。 The state change acquisition unit 6 acquires the state change of at least one of the driver's face and eyes from the DMS 9. Specifically, from the DMS 9, the state change acquisition unit 6 changes the facial expression of the driver, changes the orientation of the driver's face, changes the size of the driver's pupil, and opens and closes the driver's eyelids. Get at least one of the changes in.

照度変化推定部2は、状態変化取得部6が取得した運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する。ここで、急激な照度変化とは、車両周辺の照度が暗から明に急激に変化することと、車両周辺の照度が明から暗に急激に変化することとを含む。 The illuminance change estimation unit 2 is an illuminance change around the vehicle based on the state change of at least one of the driver's face and eyes acquired by the state change acquisition unit 6, and the driver's vision cannot be instantly followed. Estimate a sudden change in illuminance. Here, the abrupt illuminance change includes a sudden change in the illuminance around the vehicle from dark to light and a sudden change in the illuminance around the vehicle from light to dark.

具体的には、照度変化推定部2は、運転者の顔および眼のうちの少なくとも一方の状態が瞬間的に変化したとき、車両周辺の急激な照度変化があったと推定する。すなわち、照度変化推定部2は、車両周辺の照度が明から暗または暗から明に急激に変化したことを推定したとき、運転者の視界不良が生じたと推定する。 Specifically, the illuminance change estimation unit 2 estimates that there was a sudden change in illuminance around the vehicle when the state of at least one of the driver's face and eyes changed momentarily. That is, when the illuminance change estimation unit 2 estimates that the illuminance around the vehicle suddenly changes from bright to dark or from dark to bright, it is estimated that the driver's visibility is poor.

照度変化推定部2は、運転者の瞳孔の大きさが予め定められた大きさよりも小さくなったとき、車両周辺の急激な照度変化があったと推定する。すなわち、照度変化推定部2は、車両周辺の照度が暗から明に急激に変化したことを推定したとき、運転者の視界不良が生じたと推定する。また、照度変化推定部2は、運転者の瞳孔の大きさが予め定められた大きさよりも大きくなったとき、車両周辺の急激な照度変化があったと推定する。すなわち、照度変化推定部2は、車両周辺の照度が明から暗に急激に変化したことを推定したとき、運転者の視界不良が生じたと推定する。 The illuminance change estimation unit 2 estimates that there was a sudden change in illuminance around the vehicle when the size of the driver's pupil became smaller than a predetermined size. That is, when the illuminance change estimation unit 2 estimates that the illuminance around the vehicle has suddenly changed from dark to bright, it is estimated that the driver's visibility has deteriorated. Further, the illuminance change estimation unit 2 estimates that when the size of the driver's pupil becomes larger than a predetermined size, there is a sudden change in illuminance around the vehicle. That is, when the illuminance change estimation unit 2 estimates that the illuminance around the vehicle has suddenly changed from bright to dark, it is estimated that the driver's visibility has deteriorated.

照度変化推定部2は、運転者の瞼の開閉の変化、運転者の顔の表情の変化、および運転者の顔の向きの変化のうちの少なくとも1つに基づいて、車両周辺の急激な照度変化を推定してもよい。例えば、照度変化推定部2は、運転者の瞼の開き具合が急に狭くなったとき、運転者が眩しそうな表情をしたとき、または運転者が顔を背けたとき、車両周辺の照度が暗から明に急激に変化したと推定し、運転者の視界不良が生じたと推定する。あるいは、照度変化推定部2は、運転者の瞼の開き具合が急に広くなったとき、運転者が目を凝らすような表情をしたとき、車両周辺の照度が暗から明に急激に変化したと推定し、運転者の視界不良が生じたと推定する。 The illuminance change estimation unit 2 is based on at least one of a change in the opening and closing of the driver's eyelids, a change in the facial expression of the driver, and a change in the orientation of the driver's face, and the sudden illuminance around the vehicle. The change may be estimated. For example, the illuminance change estimation unit 2 measures the illuminance around the vehicle when the driver's eyelids open suddenly narrows, when the driver makes a dazzling expression, or when the driver turns away from his face. It is presumed that there was a sudden change from dark to bright, and that the driver's visibility was poor. Alternatively, the illuminance change estimation unit 2 suddenly changes the illuminance around the vehicle from dark to bright when the driver's eyelids open suddenly widen or when the driver makes a squinting expression. It is presumed that the driver's visibility was poor.

影響緩和推定部3は、状態変化取得部6が取得した運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて、照度変化推定部2が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定する。具体的には、影響緩和推定部3は、照度変化推定部2が車両周辺の急激な照度変化を推定した後、状態変化取得部6が取得した運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて、照度変化推定部2が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定する。ここで、車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和とは、車両周辺の急激な照度変化によって生じた運転者の視界不良が緩和される、すなわち、運転者の視界が正常に戻ることをいう。 The influence mitigation estimation unit 3 drives a sudden change in illuminance around the vehicle estimated by the illuminance change estimation unit 2 based on the state change of at least one of the driver's face and eyes acquired by the state change acquisition unit 6. Estimate the mitigation of the effect on one's vision. Specifically, the impact mitigation estimation unit 3 estimates at least one of the driver's face and eyes acquired by the state change acquisition unit 6 after the illuminance change estimation unit 2 estimates a sudden illuminance change around the vehicle. Based on the state change, the mitigation of the influence of the sudden illuminance change around the vehicle estimated by the illuminance change estimation unit 2 on the driver's vision is estimated. Here, mitigation of the influence of a sudden change in illuminance around the vehicle on the driver's vision means that the poor visibility of the driver caused by the sudden change in illuminance around the vehicle is alleviated, that is, the driver's vision is reduced. It means returning to normal.

例えば、影響緩和推定部3は、車両周辺の急激な照度変化によって運転者の瞳孔の大きさが予め定められた大きさよりも小さくなった後、当該運転者の瞳孔の大きさが通常の大きさに戻ったとき、車両周辺の急激な照度変化が運転者の視覚に与える影響が緩和したと推定する。また、影響緩和推定部3は、運転者の瞼の開閉の変化、運転者の顔の表情の変化、および運転者の顔の向きの変化のうちの少なくとも1つに基づいて、車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定してもよい。 For example, in the influence mitigation estimation unit 3, after the size of the driver's pupil becomes smaller than a predetermined size due to a sudden change in illuminance around the vehicle, the size of the driver's pupil becomes a normal size. When returning to, it is estimated that the effect of sudden changes in illuminance around the vehicle on the driver's vision has eased. In addition, the impact mitigation estimation unit 3 suddenly changes around the vehicle based on at least one of a change in the opening and closing of the driver's eyelids, a change in the facial expression of the driver, and a change in the orientation of the driver's face. It may be estimated that the effect of the change in illuminance on the driver's vision is mitigated.

運転切替部4は、手動運転切替部7と、自動運転切替部8とを有している。自動運転切替部8は、照度変化推定部2が車両周辺の急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。自動運転制御装置10は、自動運転切替部8の指示に従って、車両の自動運転を制御する。 The operation switching unit 4 includes a manual operation switching unit 7 and an automatic operation switching unit 8. When the illuminance change estimation unit 2 estimates a sudden illuminance change around the vehicle, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving. The automatic driving control device 10 controls the automatic driving of the vehicle according to the instruction of the automatic driving switching unit 8.

例えば、自動運転切替部8は、予め定められた自動運転レベルで運転するように自動運転制御装置10に指示してもよい。例えば、自動運転レベルがSAE(Society of Automotive Engineers)で定義された自動運転レベルである場合、自動運転切替部8は、自動運転レベルを0から3に変更するように自動運転制御装置10に指示する。なお、以下で説明する自動運転レベルは、SAEで定義された自動運転レベルであるものとする。 For example, the automatic operation switching unit 8 may instruct the automatic operation control device 10 to operate at a predetermined automatic operation level. For example, when the automatic driving level is the automatic driving level defined by SAE (Society of Automotive Engineers), the automatic driving switching unit 8 instructs the automatic driving control device 10 to change the automatic driving level from 0 to 3. To do. The automatic operation level described below is assumed to be the automatic operation level defined by SAE.

なお、自動運転レベル1の機能を車両が有している場合、自動運転切替部8は、自動運転レベルを上げずに自動運転に係る制御パラメータを変えてもよい。例えば、車両が車線逸脱防止機能を有している場合、自動運転切替部8は、車両が白線を超えそうになったときに車線の中心に車両を戻すようにステアリング操作を強く制御するように自動運転制御装置10に指示する。また、例えば、車両が自動ブレーキ機能を有している場合、自動運転切替部8は、通常よりも早めにブレーキをかけるように自動運転制御装置10に指示する。このように、本実施の形態1では、自動運転レベルを変えずに自動運転に係る制御の度合いを強くする、すなわちより自動運転に近い制御を行うようにする場合も、自動運転に切り替える概念に含める。 When the vehicle has the function of the automatic driving level 1, the automatic driving switching unit 8 may change the control parameters related to the automatic driving without raising the automatic driving level. For example, when the vehicle has a lane departure prevention function, the automatic driving switching unit 8 strongly controls the steering operation so as to return the vehicle to the center of the lane when the vehicle is about to cross the white line. Instruct the automatic operation control device 10. Further, for example, when the vehicle has an automatic braking function, the automatic driving switching unit 8 instructs the automatic driving control device 10 to apply the brake earlier than usual. As described above, in the first embodiment, the concept of switching to the automatic driving is adopted even when the degree of control related to the automatic driving is strengthened without changing the automatic driving level, that is, the control closer to the automatic driving is performed. include.

自動運転切替部8は、車両の速度、車両の周囲環境、または照度変化推定部2が推定した輝度変化の度合いに応じて、自動運転レベルまたは自動運転に係る制御パラメータを変えてもよい。 The automatic driving switching unit 8 may change the automatic driving level or the control parameter related to the automatic driving according to the speed of the vehicle, the surrounding environment of the vehicle, or the degree of the brightness change estimated by the illuminance change estimation unit 2.

手動運転切替部7は、影響緩和推定部3が車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。自動運転制御装置10は、手動運転切替部7の指示に従って、車両の自動運転の制御を解除して手動運転に移行するように制御する。具体的には、手動運転切替部7は、自動運転の際に自動運転切替部8によって変えられた自動運転レベルを手動運転に相当する自動運転レベル0にする、または自動運転に係る制御パラメータを元に戻すように自動運転制御装置10に指示する。 The manual driving switching unit 7 automatically drives the vehicle so as to switch the driving of the vehicle from automatic driving to manual driving when the influence mitigation estimation unit 3 estimates the mitigation of the influence of a sudden change in illuminance around the vehicle on the driver's vision. Instruct the control device 10. The automatic driving control device 10 controls to release the control of the automatic driving of the vehicle and shift to the manual driving according to the instruction of the manual driving switching unit 7. Specifically, the manual operation switching unit 7 sets the automatic operation level changed by the automatic operation switching unit 8 at the time of automatic operation to the automatic operation level 0 corresponding to the manual operation, or sets the control parameter related to the automatic operation. Instruct the automatic operation control device 10 to return to the original state.

図3は、運転支援装置5のハードウェア構成の一例を示すブロック図である。 FIG. 3 is a block diagram showing an example of the hardware configuration of the driving support device 5.

運転支援装置5における照度変化推定部2、影響緩和推定部3、状態変化取得部6、手動運転切替部7、および自動運転切替部8の各機能は、処理回路により実現される。すなわち、運転支援装置5は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、照度変化推定部2が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定し、影響緩和推定部3が車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替え、照度変化推定部2が車両周辺の急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替えるための処理回路を備える。処理回路は、メモリ12に格納されたプログラムを実行するプロセッサ11(中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、DSP(Digital Signal Processor)ともいう)である。 Each function of the illuminance change estimation unit 2, the influence mitigation estimation unit 3, the state change acquisition unit 6, the manual operation switching unit 7, and the automatic operation switching unit 8 in the operation support device 5 is realized by a processing circuit. That is, the driving support device 5 estimates a sudden change in illuminance around the vehicle that the driver's vision cannot instantly follow, and the illuminance change estimation unit 2 estimates a sudden change in illuminance around the vehicle. Estimates the mitigation of the influence on the driver's vision, and when the influence mitigation estimation unit 3 estimates the mitigation of the influence on the driver's vision due to a sudden change in illuminance around the vehicle, the vehicle is manually driven from automatic driving. When switching to driving and the illuminance change estimation unit 2 estimates a sudden illuminance change around the vehicle, a processing circuit for switching the driving of the vehicle from manual driving to automatic driving is provided. The processing circuit is a processor 11 (also referred to as a central processing unit, a processing unit, an arithmetic unit, a microprocessor, a microcomputer, or a DSP (Digital Signal Processor)) that executes a program stored in the memory 12.

運転支援装置5における照度変化推定部2、影響緩和推定部3、状態変化取得部6、手動運転切替部7、および自動運転切替部8の各機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアまたはファームウェアは、プログラムとして記述され、メモリ12に格納される。処理回路は、メモリ12に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、運転支援装置5は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定するステップ、照度変化推定部2が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定するステップ、影響緩和推定部3が車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えるステップ、照度変化推定部2が車両周辺の急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替えるステップが結果的に実行されることになるプログラムを格納するためのメモリ12を備える。また、これらのプログラムは、照度変化推定部2、影響緩和推定部3、状態変化取得部6、手動運転切替部7、および自動運転切替部8の手順または方法をコンピュータに実行させるものであるともいえる。ここで、メモリとは、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read Only Memory)等の不揮発性または揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、DVD等、または、今後使用されるあらゆる記憶媒体であってもよい。 The functions of the illuminance change estimation unit 2, the influence mitigation estimation unit 3, the state change acquisition unit 6, the manual operation switching unit 7, and the automatic operation switching unit 8 in the operation support device 5 are software, firmware, or software and firmware. It is realized by the combination. The software or firmware is described as a program and stored in the memory 12. The processing circuit realizes the functions of each part by reading and executing the program stored in the memory 12. That is, the driving support device 5 is a step of estimating a sudden change in illuminance so that the driver's vision cannot instantly follow the change in illuminance around the vehicle, and the sudden illuminance around the vehicle estimated by the illuminance change estimation unit 2. Step to estimate the mitigation of the influence of the change on the driver's vision, when the influence mitigation estimation unit 3 estimates the mitigation of the influence of the sudden change in illuminance around the vehicle on the driver's vision, the vehicle is automatically driven. Stores a program that results in the step of switching from manual driving to manual driving, and the step of switching vehicle driving from manual driving to automatic driving when the illuminance change estimation unit 2 estimates a sudden change in illuminance around the vehicle. A memory 12 for the operation is provided. In addition, these programs also cause a computer to execute the procedures or methods of the illuminance change estimation unit 2, the influence mitigation estimation unit 3, the state change acquisition unit 6, the manual operation switching unit 7, and the automatic operation switching unit 8. I can say. Here, the memory is, for example, non-volatile or volatile such as RAM (Random Access Memory), ROM (Read Only Memory), flash memory, EPROM (Erasable Programmable Read Only Memory), and EEPROM (Electrically Erasable Programmable Read Only Memory). It may be a sex semiconductor memory, a magnetic disk, a flexible disk, an optical disk, a compact disk, a DVD, or the like, or any storage medium used in the future.

<動作>
図4は、運転支援装置5の動作の一例を示すフローチャートである。なお、図4の動作の前提として、車両は手動運転で走行しているものとする。
<Operation>
FIG. 4 is a flowchart showing an example of the operation of the driving support device 5. As a premise of the operation shown in FIG. 4, it is assumed that the vehicle is manually driven.

ステップS101において、照度変化推定部2は、運転者の視界は不良であるか否かを判断する。上述の通り、照度変化推定部2は、車両周辺の急激な照度変化があったと推定したとき、運転者の視界は不良であると判断する。運転者の視界は不良であると判断するまでステップS101の処理を繰り返し、運転者の視界は不良であると判断するとステップS102に移行する。 In step S101, the illuminance change estimation unit 2 determines whether or not the driver's field of vision is poor. As described above, the illuminance change estimation unit 2 determines that the driver's field of vision is poor when it is estimated that there is a sudden change in illuminance around the vehicle. The process of step S101 is repeated until it is determined that the driver's field of vision is poor, and when it is determined that the driver's field of vision is poor, the process proceeds to step S102.

ステップS102において、自動運転切替部8は、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。 In step S102, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving.

ステップS103において、影響緩和推定部3は、運転者の視界は正常であるか否かを判断する。上述の通り、影響緩和推定部3は、照度変化推定部2が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定したとき、運転者の視界は正常であると判断する。運転者の視界は正常であると判断するまでステップS103の処理を繰り返し、運転者の視界は正常であると判断するとステップS104に移行する。 In step S103, the influence mitigation estimation unit 3 determines whether or not the driver's field of vision is normal. As described above, the influence mitigation estimation unit 3 determines that the driver's field of vision is normal when the illuminance change estimation unit 2 estimates the mitigation of the influence of the sudden change in illuminance around the vehicle on the driver's vision. to decide. The process of step S103 is repeated until it is determined that the driver's field of vision is normal, and when it is determined that the driver's field of vision is normal, the process proceeds to step S104.

ステップS104において、手動運転切替部7は、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。 In step S104, the manual driving switching unit 7 instructs the automatic driving control device 10 to switch the driving of the vehicle from the automatic driving to the manual driving.

以上のことから、本実施の形態1によれば、車両周辺の急激な輝度変化を推定すると手動運転から自動運転に切り替え、その後、急激な照度変化が運転者の視覚に与える影響の緩和を推定すると自動運転から手動運転に切り替える。これにより、運転者が手動運転することができる状態であるにもかかわらず自動運転を継続することを防ぎ、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 From the above, according to the first embodiment, when a sudden change in brightness around the vehicle is estimated, the driving is switched from manual driving to automatic driving, and then it is estimated that the influence of the sudden change in illuminance on the driver's vision is alleviated. Then, it switches from automatic operation to manual operation. As a result, it is possible to prevent the driver from continuing the automatic operation even though the driver can perform the manual operation, and to smoothly switch from the automatic operation to the manual operation.

なお、照度変化推定部2は、図示しない車外センサが検出したトンネルまたは対向車両などの周辺環境を考慮して、車両周辺の急激な照度変化を推定するようにしてもよい。この場合、照度変化推定部2は、より正確な照度変化の推定をすることができる。車外センサは、例えば、車両の周辺を撮影することが可能なカメラであり、トンネルまたは対向車両などの周辺環境を撮影することができる。 The illuminance change estimation unit 2 may estimate a sudden illuminance change around the vehicle in consideration of the surrounding environment such as a tunnel or an oncoming vehicle detected by an external sensor (not shown). In this case, the illuminance change estimation unit 2 can estimate the illuminance change more accurately. The vehicle exterior sensor is, for example, a camera capable of photographing the surroundings of the vehicle, and can photograph the surrounding environment such as a tunnel or an oncoming vehicle.

<実施の形態2>
図5は、本発明の実施の形態2による運転支援装置13の構成の一例を示すブロック図である。
<Embodiment 2>
FIG. 5 is a block diagram showing an example of the configuration of the driving support device 13 according to the second embodiment of the present invention.

図5に示すように、運転支援装置13は、運転切替部4と、車両位置取得部14と、地図情報取得部15と、照度変化取得部16と、時刻情報取得部17と、照度変化推定部18と、影響緩和推定部19とを備えている。運転切替部4は、自動運転制御装置10に接続されている。車両位置取得部14は、高精度ロケータ20に接続されている。地図情報取得部15は、地図情報記憶装置22に接続されている。なお、運転支援装置13、高精度ロケータ20、および自動運転制御装置10は、車両に搭載されているものとする。運転切替部4は、実施の形態1と同様であるため、ここでは詳細な説明を省略する。 As shown in FIG. 5, the driving support device 13 includes a driving switching unit 4, a vehicle position acquisition unit 14, a map information acquisition unit 15, an illuminance change acquisition unit 16, a time information acquisition unit 17, and an illuminance change estimation. A unit 18 and an impact mitigation estimation unit 19 are provided. The operation switching unit 4 is connected to the automatic operation control device 10. The vehicle position acquisition unit 14 is connected to the high-precision locator 20. The map information acquisition unit 15 is connected to the map information storage device 22. It is assumed that the driving support device 13, the high-precision locator 20, and the automatic driving control device 10 are mounted on the vehicle. Since the operation switching unit 4 is the same as that of the first embodiment, detailed description thereof will be omitted here.

高精度ロケータ20は、GNSS(Global Navigation Satellite System)21と、地図情報記憶装置22とを備えている。GNSS21は、GNSS衛星から位置情報を取得する。なお、GNSS21は、GNSS衛星から高精度な位置情報を取得することが望ましい。地図情報記憶装置22は、例えばハードディスクまたは半導体メモリ等の記憶装置から構成されており、道路構造および道路形状のうちの少なくとも一方を含む地図情報を記憶している。道路構造は、トンネルの出入口、地下駐車場の出入口、立体駐車場の出入口、および上り坂の頂上付近のうちの少なくとも1つを含んでいる。このように、地図情報記憶装置22は、3次元の地図情報を記憶している。高精度ロケータ20は、GNSS21が取得した位置情報と、地図情報記憶装置22が記憶している地図情報とに基づいて、地図上における車両の現在位置を検出する。 The high-precision locator 20 includes a GNSS (Global Navigation Satellite System) 21 and a map information storage device 22. The GNSS21 acquires position information from the GNSS satellite. It is desirable that the GNSS 21 acquire highly accurate position information from the GNSS satellite. The map information storage device 22 is composed of a storage device such as a hard disk or a semiconductor memory, and stores map information including at least one of a road structure and a road shape. The road structure includes at least one of a tunnel doorway, an underground parking lot doorway, a multi-storey car park doorway, and near the top of an uphill. In this way, the map information storage device 22 stores three-dimensional map information. The high-precision locator 20 detects the current position of the vehicle on the map based on the position information acquired by the GNSS 21 and the map information stored in the map information storage device 22.

車両位置取得部14は、高精度ロケータ20から、車両の現在位置を取得する。地図情報取得部15は、地図情報記憶装置22から、道路構造および道路形状のうちの少なくとも一方を含む地図情報を取得する。 The vehicle position acquisition unit 14 acquires the current position of the vehicle from the high-precision locator 20. The map information acquisition unit 15 acquires map information including at least one of the road structure and the road shape from the map information storage device 22.

照度変化取得部16は、車両の周辺の照度変化を示す周辺照度変化を取得する。具体的には、照度変化取得部16は、図示しない車外センサから周辺照度変化を取得する。車外センサは、例えば車外の照度を検出するセンサまたはカメラである。車外センサがカメラである場合、カメラが撮影した画像を画像処理することによって周辺照度変化を検出することができる。 The illuminance change acquisition unit 16 acquires a change in ambient illuminance indicating a change in illuminance around the vehicle. Specifically, the illuminance change acquisition unit 16 acquires the ambient illuminance change from an external sensor (not shown). The vehicle exterior sensor is, for example, a sensor or a camera that detects the illuminance outside the vehicle. When the sensor outside the vehicle is a camera, the change in ambient illuminance can be detected by image processing the image taken by the camera.

時刻情報取得部17は、現在の日付および時刻を含む時刻情報を取得する。なお、時刻情報取得部17は、運転支援装置13が保持する時刻情報を取得してもよく、外部から時刻情報を取得してもよい。 The time information acquisition unit 17 acquires time information including the current date and time. The time information acquisition unit 17 may acquire the time information held by the driving support device 13, or may acquire the time information from the outside.

照度変化推定部18は、車両位置取得部14が取得した車両の現在位置と、地図情報取得部15が取得した地図情報と、照度変化取得部16が取得した周辺照度変化と、時刻情報取得部17が取得した時刻情報とに基づいて、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する。 The illuminance change estimation unit 18 includes the current position of the vehicle acquired by the vehicle position acquisition unit 14, the map information acquired by the map information acquisition unit 15, the peripheral illuminance change acquired by the illuminance change acquisition unit 16, and the time information acquisition unit. Based on the time information acquired by 17, the illuminance change around the vehicle, which is so rapid that the driver's vision cannot be instantly followed, is estimated.

例えば、照度変化推定部18は、車両がトンネル内を走行中に出口に近づいて照度が変化したとき、トンネル出口において車両周辺の急激な照度変化が生じると推定する。この場合、照度は暗から明に変化する。トンネルの出口に近づいたときに照度が変化したことは、照度変化取得部16が取得した周辺照度変化から把握することができる。また、トンネル出口における照度は、時刻情報取得部17が取得した時刻情報からトンネルの出口における太陽の方向を推定することによって把握することができる。なお、車両がトンネルに向かって走行する場合も同様である。この場合、照度は明から暗に変化する。 For example, the illuminance change estimation unit 18 estimates that when the vehicle approaches the exit while traveling in the tunnel and the illuminance changes, a sudden change in illuminance around the vehicle occurs at the tunnel exit. In this case, the illuminance changes from dark to light. The change in illuminance when approaching the exit of the tunnel can be grasped from the change in ambient illuminance acquired by the illuminance change acquisition unit 16. Further, the illuminance at the tunnel exit can be grasped by estimating the direction of the sun at the tunnel exit from the time information acquired by the time information acquisition unit 17. The same applies when the vehicle travels toward the tunnel. In this case, the illuminance changes from light to dark.

照度変化推定部18は、車両がカーブを曲がった後に太陽に向かって走行するとき、カーブを曲がった後において車両周辺の急激な照度変化が生じると推定する。あるいは、照度変化推定部2は、車両が建物の陰から出た後に太陽に向かって走行するとき、建物の陰から出た後において車両周辺の急激な照度変化が生じると推定する。これらの場合、照度は暗から明に変化する。ここで、太陽に向かって走行する場合は、夕暮れ時の西日に向かって走行する場合、または朝日に向かって走行する場合などを含む。 The illuminance change estimation unit 18 estimates that when the vehicle travels toward the sun after turning a curve, a sudden change in illuminance around the vehicle occurs after turning the curve. Alternatively, the illuminance change estimation unit 2 estimates that when the vehicle travels toward the sun after coming out of the shadow of the building, a sudden change in illuminance around the vehicle occurs after coming out of the shadow of the building. In these cases, the illuminance changes from dark to light. Here, the case of traveling toward the sun includes the case of traveling toward the west sun at dusk, the case of traveling toward the morning sun, and the like.

なお、照度変化推定部18は、照度変化取得部16が取得した周辺照度変化のみに基づいて、車両周辺の急激な照度変化を推定してもよい。例えば、照度変化推定部18は、対向車のヘッドライトによる周辺照度変化を照度変化取得部16が取得したとき、車両周辺の急激な照度変化が生じたと推定してもよい。この場合、照度は暗から明に変化する。 The illuminance change estimation unit 18 may estimate a sudden illuminance change around the vehicle based only on the peripheral illuminance change acquired by the illuminance change acquisition unit 16. For example, the illuminance change estimation unit 18 may estimate that a sudden change in illuminance around the vehicle has occurred when the illuminance change acquisition unit 16 acquires the change in ambient illuminance due to the headlights of the oncoming vehicle. In this case, the illuminance changes from dark to light.

また、照度変化推定部18は、前方車両からの反射光による周辺照度変化を照度変化取得部16が取得したとき、車両周辺の急激な照度変化が生じたと推定してもよい。この場合、照度は暗から明に変化する。前方車両からの反射光としては、例えば、タンクローリーの光沢があるタンク、車体に光沢がある車両、車両のリアガラスに貼られたマジックミラーなどからの反射光などが挙げられる。 Further, the illuminance change estimation unit 18 may estimate that a sudden change in illuminance around the vehicle has occurred when the illuminance change acquisition unit 16 acquires the change in ambient illuminance due to the reflected light from the vehicle in front. In this case, the illuminance changes from dark to light. Examples of the reflected light from the vehicle in front include a glossy tank of a tank truck, a vehicle having a glossy vehicle body, and reflected light from a magic mirror attached to the rear glass of the vehicle.

影響緩和推定部19は、照度変化推定部18の推定結果に基づいて、照度変化推定部18が推定した車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定する。人は、暗から明に照度が変化したときに視覚が慣れるまでの時間である明順応時間と、明から暗に照度が変化したときに視覚が慣れるまでの時間である暗順応時間とが概ね決まっており、明順応時間の方が暗順応時間よりも短い。 The influence mitigation estimation unit 19 estimates the mitigation of the influence of the sudden illuminance change around the vehicle estimated by the illuminance change estimation unit 18 on the driver's vision based on the estimation result of the illuminance change estimation unit 18. A person generally has a light adaptation time, which is the time it takes for a person to get used to vision when the illuminance changes from dark to light, and a dark adaptation time, which is the time it takes for the person to get used to vision when the illuminance changes from light to dark. It is fixed, and the light adaptation time is shorter than the dark adaptation time.

影響緩和推定部19は、照度変化推定部18の推定結果が暗から明への照度変化である場合、照度変化した時から明順応時間経過後に、車両周辺の急激な照度変化が運転者の視覚に与える影響が緩和すると推定する。また、影響緩和推定部19は、照度変化推定部18の推定結果が明から暗への照度変化である場合、照度変化した時から暗順応時間経過後に、車両周辺の急激な照度変化が運転者の視覚に与える影響が緩和すると推定する。なお、明順応時間および暗順応時間の情報は、影響緩和推定部19が保持していてもよく、照度変化推定部18が保持していてもよい。また、明順応時間および暗順応時間は、運転者の年齢に応じて異なるようにしてもよい。 In the influence mitigation estimation unit 19, when the estimation result of the illuminance change estimation unit 18 is a change in illuminance from dark to light, the driver's vision is that a sudden change in illuminance around the vehicle occurs after the illuminance adaptation time elapses from the time when the illuminance changes. It is estimated that the impact on Further, when the estimation result of the illuminance change estimation unit 18 is the illuminance change from light to dark, the influence mitigation estimation unit 19 causes a sudden change in illuminance around the vehicle after the dark adaptation time elapses from the time when the illuminance changes. It is estimated that the effect on the visual sense of The information on the light adaptation time and the dark adaptation time may be held by the influence mitigation estimation unit 19 or may be held by the illuminance change estimation unit 18. Further, the light adaptation time and the dark adaptation time may be different depending on the age of the driver.

自動運転切替部8は、照度変化推定部18が車両周辺の急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。このとき、自動運転切替部8は、照度変化推定部18が推定した照度変化が生じる時よりも予め定められた時間前に手動運転から自動運転に切り替えるように自動運転制御装置10に指示してもよい。上述の通り、例えば、車両がトンネルの出口に近づいたとき、カーブを曲がった後に太陽に向かって走行するとき、または車両が建物の陰から出た後に太陽に向かって走行するとき、照度変化推定部18は、車両周辺の急激な照度変化を事前に推定することができる。このような場合において、自動運転切替部8は、実際に急激な照度変化が生じるよりも前に手動運転から自動運転に切り替えることができる。 When the illuminance change estimation unit 18 estimates a sudden illuminance change around the vehicle, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving. At this time, the automatic operation switching unit 8 instructs the automatic operation control device 10 to switch from the manual operation to the automatic operation before the time when the illuminance change estimated by the illuminance change estimation unit 18 occurs. May be good. As mentioned above, for example, when the vehicle approaches the exit of the tunnel, when the vehicle travels toward the sun after turning a curve, or when the vehicle travels toward the sun after leaving the shadow of the building, the illumination change estimation The unit 18 can estimate in advance a sudden change in illuminance around the vehicle. In such a case, the automatic operation switching unit 8 can switch from the manual operation to the automatic operation before the sudden change in illuminance actually occurs.

手動運転切替部7は、影響緩和推定部19が車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。具体的には、手動運転切替部7は、明順応時間または暗順応時間に基づいて推定された自動運転の適応時間が経過したとき、車両周辺の急激な照度変化が運転者の視覚に与える影響が緩和したと推定する。自動運転の適応時間については後述する。 The manual driving switching unit 7 automatically drives the vehicle so as to switch the driving of the vehicle from automatic driving to manual driving when the influence mitigation estimation unit 19 estimates the mitigation of the influence of a sudden change in illuminance around the vehicle on the driver's vision. Instruct the control device 10. Specifically, the manual driving switching unit 7 has an effect on the driver's vision due to a sudden change in illuminance around the vehicle when the adaptation time for automatic driving estimated based on the light adaptation time or the dark adaptation time has elapsed. Is presumed to have eased. The adaptation time for automatic driving will be described later.

運転支援装置13における車両位置取得部14、地図情報取得部15、照度変化取得部16、時刻情報取得部17、照度変化推定部18、および影響緩和推定部19の各機能は、処理回路により実現される。すなわち、運転支援装置13は、車両の現在位置を取得し、道路構造および道路形状のうちの少なくとも一方を含む地図情報を取得し、周辺照度変化を取得し、現在の日付および時刻を含む時刻情報を取得し、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、照度変化推定部18の推定結果に基づいて車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定するための処理回路を備える。処理回路は、図3に示すようなメモリ12に格納されたプログラムを実行するプロセッサ11である。なお、手動運転切替部7および自動運転切替部8については、図2に示す手動運転切替部7および自動運転切替部8と同様である。 Each function of the vehicle position acquisition unit 14, the map information acquisition unit 15, the illuminance change acquisition unit 16, the time information acquisition unit 17, the illuminance change estimation unit 18, and the influence mitigation estimation unit 19 in the driving support device 13 is realized by the processing circuit. Will be done. That is, the driving support device 13 acquires the current position of the vehicle, acquires map information including at least one of the road structure and the road shape, acquires the change in ambient illuminance, and time information including the current date and time. Is acquired, and the sudden change in illuminance around the vehicle is estimated so that the driver's vision cannot follow it instantly, and the sudden change in illuminance around the vehicle is based on the estimation result of the illuminance change estimation unit 18. It is provided with a processing circuit for estimating the mitigation of the influence on the driver's vision. The processing circuit is a processor 11 that executes a program stored in the memory 12 as shown in FIG. The manual operation switching unit 7 and the automatic operation switching unit 8 are the same as the manual operation switching unit 7 and the automatic operation switching unit 8 shown in FIG.

運転支援装置13における車両位置取得部14、地図情報取得部15、照度変化取得部16、時刻情報取得部17、照度変化推定部18、および影響緩和推定部19の各機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。図3に示すように、ソフトウェアまたはファームウェアは、プログラムとして記述され、メモリ12に格納される。処理回路は、メモリ12に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、運転支援装置13は、車両の現在位置を取得するステップ、道路構造および道路形状のうちの少なくとも一方を含む地図情報を取得するステップ、周辺照度変化を取得するステップ、現在の日付および時刻を含む時刻情報を取得するステップ、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定するステップ、照度変化推定部18の推定結果に基づいて車両周辺の急激な照度変化が運転者の視覚に与える影響の緩和を推定するステップが結果的に実行されることになるプログラムを格納するためのメモリ12を備える。また、これらのプログラムは、車両位置取得部14、地図情報取得部15、照度変化取得部16、時刻情報取得部17、照度変化推定部18、および影響緩和推定部19の手順または方法をコンピュータに実行させるものであるともいえる。なお、手動運転切替部7および自動運転切替部8については、図2に示す手動運転切替部7および自動運転切替部8と同様である。 The functions of the vehicle position acquisition unit 14, the map information acquisition unit 15, the illuminance change acquisition unit 16, the time information acquisition unit 17, the illuminance change estimation unit 18, and the influence mitigation estimation unit 19 in the driving support device 13 are software, firmware, and Or it is realized by a combination of software and firmware. As shown in FIG. 3, the software or firmware is described as a program and stored in the memory 12. The processing circuit realizes the functions of each part by reading and executing the program stored in the memory 12. That is, the driving support device 13 obtains the step of acquiring the current position of the vehicle, the step of acquiring map information including at least one of the road structure and the road shape, the step of acquiring the change in ambient illuminance, and the current date and time. A step of acquiring time information including time, a step of estimating an illuminance change around the vehicle that is so rapid that the driver's vision cannot follow instantly, and a step of estimating the illuminance change estimation unit 18 around the vehicle. A memory 12 is provided for storing a program in which a step of estimating the mitigation of the influence of a sudden change in illuminance on the driver's vision is to be executed as a result. In addition, these programs provide a computer with the procedures or methods of the vehicle position acquisition unit 14, the map information acquisition unit 15, the illuminance change acquisition unit 16, the time information acquisition unit 17, the illuminance change estimation unit 18, and the influence mitigation estimation unit 19. It can be said that it is something to be executed. The manual operation switching unit 7 and the automatic operation switching unit 8 are the same as the manual operation switching unit 7 and the automatic operation switching unit 8 shown in FIG.

<動作>
図6は、運転支援装置13の動作の一例を示すフローチャートである。なお、図6の動作の前提として、車両は手動運転で走行しているものとする。
<Operation>
FIG. 6 is a flowchart showing an example of the operation of the driving support device 13. As a premise of the operation shown in FIG. 6, it is assumed that the vehicle is manually driven.

ステップS201において、照度変化推定部18は、車両が急激な照度変化が発生する地点を走行しているか否かを判断する。急激な照度変化が発生する地点としては、例えば、上述で説明したようなトンネルの出口付近、カーブに差し掛かった地点、建物の陰から出る地点などが挙げられる。車両が急激な照度変化が発生する地点を走行していると判断するまでステップS201の処理を繰り返し、車両が急激な照度変化が発生する地点を走行していると判断するとステップS202に移行する。 In step S201, the illuminance change estimation unit 18 determines whether or not the vehicle is traveling at a point where a sudden illuminance change occurs. Examples of points where a sudden change in illuminance occurs include a point near the exit of a tunnel as described above, a point approaching a curve, and a point exiting behind a building. The process of step S201 is repeated until it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, and when it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, the process proceeds to step S202.

ステップS202において、影響緩和推定部19は、自動運転を行う時間である自動運転の適応時間を推定する。具体的には、影響緩和推定部19は、上述で説明した明順応時間または暗順応時間に基づいて、自動運転の適応時間を推定する。なお、自動運転の適応時間は、適宜に変更してもよい。例えば、照度変化の程度が大きい場合は自動運転の開始を早めるようにしてもよく、照度変化の程度が小さい場合は自動運転の開始を遅くしてもよい。自動運転の適応時間の推定は、影響緩和推定部19ではなく照度変化推定部18が行ってもよい。 In step S202, the influence mitigation estimation unit 19 estimates the adaptation time of the automatic driving, which is the time for performing the automatic driving. Specifically, the impact mitigation estimation unit 19 estimates the adaptation time for automatic driving based on the light adaptation time or the dark adaptation time described above. The adaptation time for automatic driving may be changed as appropriate. For example, when the degree of illuminance change is large, the start of automatic operation may be accelerated, and when the degree of illuminance change is small, the start of automatic operation may be delayed. The estimation of the adaptation time for automatic driving may be performed by the illuminance change estimation unit 18 instead of the influence mitigation estimation unit 19.

ステップS203において、自動運転切替部8は、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。 In step S203, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving.

ステップS204において、影響緩和推定部19は、自動運転の適応時間を経過したか否かを判断する。自動運転の適応時間を経過するまではステップS204の処理を繰り返し、自動運転の適応時間を経過するとステップS205に移行する。 In step S204, the impact mitigation estimation unit 19 determines whether or not the adaptation time for automatic driving has elapsed. The process of step S204 is repeated until the adaptation time for automatic operation elapses, and the process proceeds to step S205 when the adaptation time for automatic operation elapses.

ステップS205において、手動運転切替部7は、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。 In step S205, the manual driving switching unit 7 instructs the automatic driving control device 10 to switch the driving of the vehicle from the automatic driving to the manual driving.

以上のことから、本実施の形態2によれば、車両が急激な照度変化が発生する地点を走行していると判断すると手動運転から自動運転に切り替え、その後、自動運転の適応時間が経過すると自動運転から手動運転に切り替える。これにより、運転者が手動運転することができる状態であるにもかかわらず自動運転を継続することを防ぎ、自動運転から手動運転への切り替えを円滑に行うことが可能となる。また、急激な照度変化が発生する地点を事前に推定することができるため、実際に急激な照度変化が生じるよりも前に手動運転から自動運転に切り替えることができる。 From the above, according to the second embodiment, when it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, the manual operation is switched to the automatic operation, and then the adaptation time for the automatic operation elapses. Switch from automatic operation to manual operation. As a result, it is possible to prevent the driver from continuing the automatic operation even though the driver can perform the manual operation, and to smoothly switch from the automatic operation to the manual operation. Further, since the point where the sudden illuminance change occurs can be estimated in advance, it is possible to switch from the manual operation to the automatic operation before the sudden illuminance change actually occurs.

<実施の形態3>
<構成>
本発明の実施の形態3による運転支援装置の構成は、実施の形態2で説明した図5に示す運転支援装置13と同様である。以下では、本実施の形態3による運転支援装置は、図5に示す運転支援装置13であるものとして説明する。
<Embodiment 3>
<Structure>
The configuration of the driving support device according to the third embodiment of the present invention is the same as that of the driving support device 13 shown in FIG. 5 described in the second embodiment. Hereinafter, the driving support device according to the third embodiment will be described as being the driving support device 13 shown in FIG.

<動作>
図7は、本実施の形態3による運転支援装置13の動作の一例を示すフローチャートである。なお、図7の動作の前提として、車両は手動運転で走行しているものとする。図7のステップS301、ステップS304、およびステップS305は、図6のステップS201、ステップS204、およびステップS205に対応しているため、ここでは説明を省略する。以下では、ステップS302およびステップS303について説明する。
<Operation>
FIG. 7 is a flowchart showing an example of the operation of the driving support device 13 according to the third embodiment. As a premise of the operation shown in FIG. 7, it is assumed that the vehicle is manually driven. Since step S301, step S304, and step S305 of FIG. 7 correspond to step S201, step S204, and step S205 of FIG. 6, description thereof will be omitted here. Hereinafter, steps S302 and S303 will be described.

ステップS302において、自動運転切替部8は、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。 In step S302, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving.

ステップS303において、影響緩和推定部19は、自動運転を行う時間である自動運転の適応時間を推定する。当該推定は、図6のステップS202と同様である。 In step S303, the influence mitigation estimation unit 19 estimates the adaptation time of the automatic driving, which is the time for performing the automatic driving. The estimation is the same as in step S202 of FIG.

以上のことから、本実施の形態3によれば、実施の形態2と同様、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 From the above, according to the third embodiment, it is possible to smoothly switch from the automatic operation to the manual operation as in the second embodiment.

<実施の形態4>
<構成>
図8は、本発明の実施の形態4による運転支援装置23の構成の一例を示すブロック図である。
<Embodiment 4>
<Structure>
FIG. 8 is a block diagram showing an example of the configuration of the driving support device 23 according to the fourth embodiment of the present invention.

図8に示すように、運転支援装置23は、実施の形態1で説明した図2に示す影響緩和推定部3および状態変化取得部6と、実施の形態2で説明した図5に示す車両位置取得部14、地図情報取得部15、照度変化取得部16、時刻情報取得部17、および照度変化推定部18とを組み合わせて構成されていることを特徴とする。なお、運転切替部4は、実施の形態1,2と同様の機能を有している。運転支援装置23、DMS9、高精度ロケータ20、および自動運転制御装置10は、車両に搭載されているものとする。 As shown in FIG. 8, the driving support device 23 includes the influence mitigation estimation unit 3 and the state change acquisition unit 6 shown in FIG. 2 described in the first embodiment, and the vehicle position shown in FIG. 5 described in the second embodiment. It is characterized in that it is configured by combining the acquisition unit 14, the map information acquisition unit 15, the illuminance change acquisition unit 16, the time information acquisition unit 17, and the illuminance change estimation unit 18. The operation switching unit 4 has the same functions as those of the first and second embodiments. It is assumed that the driving support device 23, the DMS 9, the high-precision locator 20, and the automatic driving control device 10 are mounted on the vehicle.

<動作>
図9は、運転支援装置23の動作の一例を示すフローチャートである。なお、図9の動作の前提として、車両は手動運転で走行しているものとする。
<Operation>
FIG. 9 is a flowchart showing an example of the operation of the driving support device 23. As a premise of the operation shown in FIG. 9, it is assumed that the vehicle is manually driven.

ステップS401において、照度変化推定部18は、車両が急激な照度変化が発生する地点を走行しているか否かを判断する。当該判断は、図6のステップS201と同様である。車両が急激な照度変化が発生する地点を走行していると判断するまでステップS401の処理を繰り返し、車両が急激な照度変化が発生する地点を走行していると判断するとステップS402に移行する。 In step S401, the illuminance change estimation unit 18 determines whether or not the vehicle is traveling at a point where a sudden illuminance change occurs. The determination is the same as in step S201 of FIG. The process of step S401 is repeated until it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, and when it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, the process proceeds to step S402.

ステップS402において、自動運転切替部8は、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。 In step S402, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving.

ステップS403において、影響緩和推定部3は、運転者の視界は正常であるか否かを判断する。当該判断は、図4のステップS103と同様である。運転者の視界は正常であると判断するまでステップS403の処理を繰り返し、運転者の視界は正常であると判断するとステップS404に移行する。 In step S403, the impact mitigation estimation unit 3 determines whether or not the driver's field of vision is normal. The determination is the same as in step S103 of FIG. The process of step S403 is repeated until it is determined that the driver's field of view is normal, and when it is determined that the driver's field of view is normal, the process proceeds to step S404.

ステップS404において、手動運転切替部7は、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。 In step S404, the manual driving switching unit 7 instructs the automatic driving control device 10 to switch the driving of the vehicle from the automatic driving to the manual driving.

以上のことから、本実施の形態4によれば、車両が自動運転に切り替えられた後に運転者の視界が正常に戻ったとき、自動運転から手動運転に切り替える。これにより、運転者が手動運転することができる状態であるにもかかわらず自動運転を継続することを防ぎ、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 From the above, according to the fourth embodiment, when the driver's field of vision returns to normal after the vehicle is switched to automatic driving, the automatic driving is switched to manual driving. As a result, it is possible to prevent the driver from continuing the automatic operation even though the driver can perform the manual operation, and to smoothly switch from the automatic operation to the manual operation.

実施の形態2では、自動運転の適応時間が経過すると自動運転から手動運転に切り替えているが、自動運転の適応時間が経過する前に運転者が手動運転することができる状態になる場合があると考えられる。このような場合において、本実施の形態4によれば運転者の視界が正常に戻ると自動運転から手動運転に切り替えているため、実施の形態2よりも自動運転に要する時間を短くすることができる。 In the second embodiment, the automatic driving is switched to the manual driving when the adaptation time of the automatic driving elapses, but the driver may be in a state where the manual driving can be performed before the adaptation time of the automatic driving elapses. it is conceivable that. In such a case, according to the fourth embodiment, when the driver's field of vision returns to normal, the automatic driving is switched to the manual driving. Therefore, the time required for the automatic driving can be shortened as compared with the second embodiment. it can.

<実施の形態5>
<構成>
図10は、本発明の実施の形態5による運転支援装置24の構成の一例を示すブロック図である。
<Embodiment 5>
<Structure>
FIG. 10 is a block diagram showing an example of the configuration of the driving support device 24 according to the fifth embodiment of the present invention.

図10に示すように、運転支援装置24は、実施の形態1で説明した図2に示す状態変化取得部6と、実施の形態2で説明した図5に示す車両位置取得部14、地図情報取得部15、照度変化取得部16、および時刻情報取得部17とを組み合わせて構成されていることを特徴としている。また、影響緩和推定部25は、実施の形態1で説明した図2に示す影響緩和推定部3と、実施の形態2で説明した図5に示す影響緩和推定部19とを組み合わせた機能を有している。なお、運転切替部4は、実施の形態1,2と同様の機能を有している。運転支援装置24、DMS9、高精度ロケータ20、および自動運転制御装置10は、車両に搭載されているものとする。 As shown in FIG. 10, the driving support device 24 includes the state change acquisition unit 6 shown in FIG. 2 described in the first embodiment, the vehicle position acquisition unit 14 shown in FIG. 5 described in the second embodiment, and map information. It is characterized in that it is configured by combining the acquisition unit 15, the illuminance change acquisition unit 16, and the time information acquisition unit 17. Further, the impact mitigation estimation unit 25 has a function of combining the impact mitigation estimation unit 3 shown in FIG. 2 described in the first embodiment and the impact mitigation estimation unit 19 shown in FIG. 5 described in the second embodiment. doing. The operation switching unit 4 has the same functions as those of the first and second embodiments. It is assumed that the driving support device 24, the DMS 9, the high-precision locator 20, and the automatic driving control device 10 are mounted on the vehicle.

<動作>
図11は、運転支援装置24の動作の一例を示すフローチャートである。なお、図11の動作の前提として、車両は手動運転で走行しているものとする。
<Operation>
FIG. 11 is a flowchart showing an example of the operation of the driving support device 24. As a premise of the operation shown in FIG. 11, it is assumed that the vehicle is manually driven.

ステップS501において、照度変化推定部18は、車両が急激な照度変化が発生する地点を走行しているか否かを判断する。当該判断は、図6のステップS201と同様である。車両が急激な照度変化が発生する地点を走行していると判断するまでステップS501の処理を繰り返し、車両が急激な照度変化が発生する地点を走行していると判断するとステップS502に移行する。 In step S501, the illuminance change estimation unit 18 determines whether or not the vehicle is traveling at a point where a sudden illuminance change occurs. The determination is the same as in step S201 of FIG. The process of step S501 is repeated until it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, and when it is determined that the vehicle is traveling at a point where a sudden change in illuminance occurs, the process proceeds to step S502.

ステップS502において、影響緩和推定部25は、自動運転を行う時間である自動運転の適応時間を推定する。当該推定は、図6のステップS202と同様である。 In step S502, the influence mitigation estimation unit 25 estimates the adaptation time of the automatic driving, which is the time for performing the automatic driving. The estimation is the same as in step S202 of FIG.

ステップS503において、自動運転切替部8は、車両の運転を手動運転から自動運転に切り替えるように自動運転制御装置10に指示する。 In step S503, the automatic driving switching unit 8 instructs the automatic driving control device 10 to switch the driving of the vehicle from manual driving to automatic driving.

ステップS504において、影響緩和推定部25は、自動運転の適応時間を経過したか否かを判断する。自動運転の適応時間を経過するまではステップS504の処理を繰り返し、自動運転の適応時間を経過するとステップS505に移行する。 In step S504, the impact mitigation estimation unit 25 determines whether or not the adaptation time for automatic driving has elapsed. The process of step S504 is repeated until the adaptation time for automatic operation elapses, and the process proceeds to step S505 when the adaptation time for automatic operation elapses.

ステップS505において、影響緩和推定部25は、運転者の視界は正常であるか否かを判断する。当該判断は、図4のステップS103と同様である。運転者の視界は正常であると判断するまでステップS505の処理を繰り返し、運転者の視界は正常であると判断するとステップS506に移行する。 In step S505, the influence mitigation estimation unit 25 determines whether or not the driver's field of vision is normal. The determination is the same as in step S103 of FIG. The process of step S505 is repeated until it is determined that the driver's field of vision is normal, and when it is determined that the driver's field of vision is normal, the process proceeds to step S506.

ステップS506において、手動運転切替部7は、車両の運転を自動運転から手動運転に切り替えるように自動運転制御装置10に指示する。 In step S506, the manual driving switching unit 7 instructs the automatic driving control device 10 to switch the driving of the vehicle from the automatic driving to the manual driving.

以上のことから、本実施の形態5によれば、車両が自動運転に切り替えられた後、自動運転の適応時間を経過し、かつ運転者の視界が正常に戻ったとき、自動運転から手動運転に切り替える。これにより、自動運転の適応時間が経過しても運転者の視界が正常に戻っていない場合は、自動運転から手動運転に切り替えないため、より安全な運転の切り替えを行うことができる。すなわち、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 From the above, according to the fifth embodiment, when the adaptation time for automatic driving has elapsed after the vehicle is switched to automatic driving and the driver's visibility returns to normal, the automatic driving is changed to manual driving. Switch to. As a result, if the driver's field of vision does not return to normal even after the adaptation time for automatic driving has elapsed, the automatic driving is not switched to manual driving, so that safer driving can be switched. That is, it is possible to smoothly switch from automatic operation to manual operation.

以上で説明した運転支援装置は、車載用ナビゲーション装置、すなわちカーナビゲーション装置だけでなく、車両に搭載可能なPND(Portable Navigation Device)、および車両の外部に設けられるサーバなどを適宜に組み合わせてシステムとして構築されるナビゲーション装置あるいはナビゲーション装置以外の装置にも適用することができる。この場合、運転支援装置の各機能あるいは各構成要素は、上記システムを構築する各機能に分散して配置される。 The driving support device described above is a system in which not only an in-vehicle navigation device, that is, a car navigation device, but also a PND (Portable Navigation Device) that can be mounted on a vehicle, a server provided outside the vehicle, and the like are appropriately combined. It can also be applied to a navigation device to be constructed or a device other than the navigation device. In this case, each function or each component of the driving support device is distributed and arranged in each function for constructing the system.

具体的には、一例として、運転支援装置の機能をサーバに配置することができる。例えば、図12に示すように、ユーザ側は、DMS9および自動運転制御装置10を備える。また、サーバ26は、状態変化取得部6、照度変化推定部2、影響緩和推定部3、および運転切替部4を備えている。このような構成とすることによって、運転支援システムを構築することができる。図5に示す運転支援装置13、図8に示す運転支援装置23、および図10に示す運転支援装置24についても同様である。 Specifically, as an example, the function of the driving support device can be arranged on the server. For example, as shown in FIG. 12, the user side includes a DMS 9 and an automatic operation control device 10. Further, the server 26 includes a state change acquisition unit 6, an illuminance change estimation unit 2, an influence mitigation estimation unit 3, and an operation switching unit 4. With such a configuration, a driving support system can be constructed. The same applies to the driving support device 13 shown in FIG. 5, the driving support device 23 shown in FIG. 8, and the driving support device 24 shown in FIG.

このように、運転支援装置の各機能を、システムを構築する各機能に分散して配置した構成であっても、上記の実施の形態と同様の効果が得られる。 As described above, even in a configuration in which each function of the driving support device is distributed and arranged in each function for constructing the system, the same effect as that of the above-described embodiment can be obtained.

また、上記の実施の形態における動作を実行するソフトウェアを、例えばサーバに組み込んでもよい。このソフトウェアをサーバが実行することにより実現される運転支援方法は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定し、影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えることである。 Further, software that executes the operation according to the above embodiment may be incorporated into, for example, a server. The driving support method realized by the server executing this software estimates the sudden change in illuminance around the vehicle so that the driver's vision cannot follow it instantly, and the estimated change in illuminance is the vehicle. When the mitigation of the influence on the driver's vision is estimated and the mitigation of the influence is estimated, the driving of the vehicle is switched from the automatic driving to the manual driving.

このように、上記の実施の形態における動作を実行するソフトウェアをサーバに組み込んで動作させることによって、上記の実施の形態と同様の効果が得られる。 As described above, by incorporating the software that executes the operation according to the above embodiment into the server and operating the server, the same effect as that of the above embodiment can be obtained.

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。 In the present invention, each embodiment can be freely combined, and each embodiment can be appropriately modified or omitted within the scope of the invention.

本発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。 Although the present invention has been described in detail, the above description is exemplary in all embodiments and the invention is not limited thereto. It is understood that innumerable variations not illustrated can be assumed without departing from the scope of the present invention.

1 運転支援装置、2 照度変化推定部、3 影響緩和推定部、4 運転切替部、5 運転支援装置、6 状態変化取得部、7 手動運転切替部、8 自動運転切替部、9 DMS、10 自動運転制御装置、11 プロセッサ、12 メモリ、13 運転支援装置、14 車両位置取得部、15 地図情報取得部、16 照度変化取得部、17 時刻情報取得部、18 照度変化推定部、19 影響緩和推定部、20 高精度ロケータ、21 GNSS、22 地図情報記憶装置、23,24 運転支援装置、25 影響緩和推定部、26 サーバ。 1 Driving support device, 2 Illumination change estimation unit, 3 Impact mitigation estimation unit, 4 Operation switching unit, 5 Driving support device, 6 State change acquisition unit, 7 Manual operation switching unit, 8 Automatic operation switching unit, 9 DMS, 10 Automatic Driving control device, 11 processor, 12 memory, 13 driving support device, 14 vehicle position acquisition unit, 15 map information acquisition unit, 16 illuminance change acquisition unit, 17 time information acquisition unit, 18 illuminance change estimation unit, 19 impact mitigation estimation unit , 20 high-precision locator, 21 GNSS, 22 map information storage device, 23, 24 driving support device, 25 impact mitigation estimation unit, 26 servers.

上記の課題を解決するために、本発明による運転支援装置は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、照度変化推定部が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、照度変化推定部が急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替え、その後、影響緩和推定部が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える運転切替部とを備える。 In order to solve the above problems, the driving support device according to the present invention includes an illuminance change estimation unit that estimates a sudden illuminance change that the driver's vision cannot follow instantly, and an illuminance change estimation unit. When the impact mitigation estimation unit that estimates the mitigation of the effect of the illuminance change estimated by the change estimation unit on the vision of the driver who drives the vehicle and the illuminance change estimation unit estimate the sudden illuminance change, the vehicle is manually driven. It is provided with a driving switching unit that switches the driving of the vehicle from automatic driving to manual driving when the impact mitigation estimation unit estimates the mitigation of the impact after switching from driving to automatic driving.

また、本発明による運転支援方法は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定し、急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替え、その後、影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える。 Further, the driving support method according to the present invention estimates a sudden change in illuminance that cannot be instantly followed by the driver's vision due to a change in illuminance around the vehicle, and the estimated illuminance change is the visual vision of the driver driving the vehicle. When the mitigation of the influence on the vehicle is estimated and the sudden change in illuminance is estimated, the driving of the vehicle is switched from the manual driving to the automatic driving, and then when the mitigation of the influence is estimated, the driving of the vehicle is changed from the automatic driving to the manual driving. Switch.

本発明によると、運転支援装置は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、照度変化推定部が推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、照度変化推定部が急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替え、その後、影響緩和推定部が影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替える運転切替部とを備えるため、自動運転から手動運転への切り替えを円滑に行うことが可能となる。 According to the present invention, the driving support device includes an illuminance change estimation unit that estimates a sudden illuminance change that the driver's vision cannot follow instantaneously due to a illuminance change around the vehicle, and an illuminance estimated by the illuminance change estimation unit. When the impact mitigation estimation unit that estimates the mitigation of the impact of changes on the driver's vision and the illuminance change estimation unit estimates a sudden illuminance change, the vehicle driving is switched from manual driving to automatic driving. After that, when the impact mitigation estimation unit estimates the mitigation of the impact, it is equipped with a driving switching unit that switches the vehicle driving from automatic driving to manual driving, so that it is possible to smoothly switch from automatic driving to manual driving. Become.

また、運転支援方法は、車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、推定した照度変化が車両を運転する運転者の視覚に与える影響の緩和を推定し、急激な照度変化を推定したとき、車両の運転を手動運転から自動運転に切り替え、その後、影響の緩和を推定したとき、車両の運転を自動運転から手動運転に切り替えるため、自動運転から手動運転への切り替えを円滑に行うことが可能となる。

In addition, the driving support method estimates a sudden change in illuminance that cannot be instantly followed by the driver's vision, which is a change in illuminance around the vehicle, and the effect of the estimated illuminance change on the driver's vision. When the mitigation of the vehicle is estimated and the sudden change in illuminance is estimated, the driving of the vehicle is switched from the manual driving to the automatic driving, and then when the mitigation of the influence is estimated, the driving of the vehicle is switched from the automatic driving to the manual driving. It is possible to smoothly switch from automatic operation to manual operation.

Claims (22)

車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定する照度変化推定部と、
前記照度変化推定部が推定した前記照度変化が前記車両を運転する前記運転者の視覚に与える影響の緩和を推定する影響緩和推定部と、
前記影響緩和推定部が前記影響の緩和を推定したとき、前記車両の運転を自動運転から手動運転に切り替える運転切替部と、
を備える、運転支援装置。
An illuminance change estimation unit that estimates illuminance changes around the vehicle that are so rapid that the driver's vision cannot follow them instantly.
An effect mitigation estimation unit that estimates the mitigation of the effect of the illuminance change estimated by the illuminance change estimation unit on the vision of the driver who drives the vehicle, and an effect mitigation estimation unit.
When the impact mitigation estimation unit estimates the mitigation of the impact, a driving switching unit that switches the driving of the vehicle from automatic driving to manual driving, and
A driving support device equipped with.
前記運転者の顔および眼のうちの少なくとも一方の状態変化を取得する状態変化取得部をさらに備えることを特徴とする、請求項1に記載の運転支援装置。 The driving support device according to claim 1, further comprising a state change acquisition unit that acquires a state change of at least one of the driver's face and eyes. 前記照度変化推定部は、前記状態変化取得部が取得した前記運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて前記照度変化を推定することを特徴とする、請求項2に記載の運転支援装置。 2. The illuminance change estimation unit is characterized in that the illuminance change estimation unit estimates the illuminance change based on the state change of at least one of the driver's face and eyes acquired by the state change acquisition unit. Driving support device. 前記運転切替部は、前記照度変化推定部が前記照度変化を推定したとき、前記車両の運転を前記手動運転から前記自動運転に切り替えることを特徴とする、請求項2に記載の運転支援装置。 The driving support device according to claim 2, wherein the driving switching unit switches the driving of the vehicle from the manual driving to the automatic driving when the illuminance change estimating unit estimates the illuminance change. 前記状態変化取得部は、前記運転者の瞳孔の大きさの変化を取得し、
前記照度変化推定部は、前記瞳孔の大きさが予め定められた大きさよりも小さくなったとき、前記照度変化したと推定することを特徴とする、請求項2に記載の運転支援装置。
The state change acquisition unit acquires a change in the size of the driver's pupil and obtains the change.
The driving support device according to claim 2, wherein the illuminance change estimation unit estimates that the illuminance has changed when the size of the pupil becomes smaller than a predetermined size.
前記状態変化取得部は、前記運転者の瞼の開閉の変化、前記運転者の顔の表情の変化、および前記運転者の顔の向きの変化のうちの少なくとも1つを取得し、
前記照度変化推定部は、前記運転者の瞼の開閉の変化、前記運転者の顔の表情の変化、および前記運転者の顔の向きの変化のうちの少なくとも1つに基づいて前記照度変化を推定することを特徴とする、請求項2に記載の運転支援装置。
The state change acquisition unit acquires at least one of a change in the opening and closing of the driver's eyelids, a change in the facial expression of the driver, and a change in the orientation of the driver's face.
The illuminance change estimation unit determines the illuminance change based on at least one of a change in the opening and closing of the driver's eyelids, a change in the facial expression of the driver, and a change in the orientation of the driver's face. The driving support device according to claim 2, wherein the driving support device is characterized by estimating.
前記影響緩和推定部は、前記状態変化取得部が取得した前記運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて前記緩和を推定することを特徴とする、請求項2に記載の運転支援装置。 The mitigation estimation unit according to claim 2, wherein the effect mitigation estimation unit estimates the mitigation based on a state change of at least one of the driver's face and eyes acquired by the state change acquisition unit. Driving support device. 前記運転切替部は、前記自動運転に係る制御パラメータまたは自動運転レベルを変えることを特徴とする、請求項4に記載の運転支援装置。 The driving support device according to claim 4, wherein the driving switching unit changes a control parameter or an automatic driving level related to the automatic driving. 前記車両の現在位置を取得する車両位置取得部と、
道路構造および道路形状のうちの少なくとも一方を含む地図情報を取得する地図情報取得部と、
前記車両の周辺の照度変化を示す周辺照度変化を取得する照度変化取得部と、
をさらに備えることを特徴とする、請求項1に記載の運転支援装置。
A vehicle position acquisition unit that acquires the current position of the vehicle, and
A map information acquisition unit that acquires map information including at least one of the road structure and road shape,
An illuminance change acquisition unit that acquires an ambient illuminance change indicating an illuminance change around the vehicle, and an illuminance change acquisition unit.
The driving support device according to claim 1, further comprising.
前記照度変化推定部は、前記車両位置取得部が取得した前記現在位置と、前記地図情報取得部が取得した前記地図情報と、前記照度変化取得部が取得した前記周辺照度変化とに基づいて前記照度変化を推定することを特徴とする、請求項9に記載の運転支援装置。 The illuminance change estimation unit is based on the current position acquired by the vehicle position acquisition unit, the map information acquired by the map information acquisition unit, and the ambient illuminance change acquired by the illuminance change acquisition unit. The driving support device according to claim 9, wherein the change in illuminance is estimated. 前記運転切替部は、前記照度変化推定部が前記照度変化を推定したとき、前記車両の運転を前記手動運転から前記自動運転に切り替えることを特徴とする、請求項10に記載の運転支援装置。 The driving support device according to claim 10, wherein the driving switching unit switches the driving of the vehicle from the manual driving to the automatic driving when the illuminance change estimating unit estimates the illuminance change. 前記運転切替部は、前記照度変化推定部が推定した前記照度変化が生じる時よりも予め定められた時間前に前記手動運転から前記自動運転に切り替えることを特徴とする、請求項11に記載の運転支援装置。 The eleventh aspect of claim 11, wherein the operation switching unit switches from the manual operation to the automatic operation at a predetermined time before the time when the illuminance change estimated by the illuminance change estimation unit occurs. Driving support device. 前記道路構造は、トンネルの出入口、地下駐車場の出入口、立体駐車場の出入口、および上り坂の頂上付近のうちの少なくとも1つを含むことを特徴とする、請求項9に記載の運転支援装置。 The driving support device according to claim 9, wherein the road structure includes at least one of a tunnel entrance / exit, an underground parking lot entrance / exit, a multi-storey car park entrance / exit, and the vicinity of the top of an uphill. .. 前記照度変化推定部は、車両がカーブを曲がった後に太陽に向かって走行するとき、または車両が建物の陰から出た後に太陽に向かって走行するとき、前記照度変化したと推定することを特徴とする、請求項10に記載の運転支援装置。 The illuminance change estimation unit is characterized in that it estimates that the illuminance has changed when the vehicle travels toward the sun after turning a curve, or when the vehicle travels toward the sun after leaving the shadow of a building. The driving support device according to claim 10. 前記影響緩和推定部は、前記照度変化推定部の推定結果に基づいて前記緩和を推定することを特徴とする、請求項9に記載の運転支援装置。 The driving support device according to claim 9, wherein the influence mitigation estimation unit estimates the mitigation based on the estimation result of the illuminance change estimation unit. 前記影響緩和推定部は、暗から明に前記照度変化したときに前記運転者の視覚が慣れるまでの時間である明順応時間、または明から暗に前記照度変化したときに前記運転者の視覚が慣れるまでの時間である暗順応時間が経過したときに前記緩和を推定することを特徴とする、請求項15に記載の運転支援装置。 In the influence mitigation estimation unit, the light adaptation time, which is the time until the driver's vision gets used when the illuminance changes from dark to light, or the driver's vision changes when the illuminance changes from light to dark. The driving support device according to claim 15, wherein the relaxation is estimated when the dark adaptation time, which is the time to get used to, has elapsed. 前記明順応時間および前記暗順応時間は、前記運転者の年齢に応じて異なることを特徴とする、請求項16に記載の運転支援装置。 The driving support device according to claim 16, wherein the light adaptation time and the dark adaptation time differ depending on the age of the driver. 前記運転切替部は、前記自動運転に係る制御パラメータまたは自動運転レベルを変えることを特徴とする、請求項11に記載の運転支援装置。 The driving support device according to claim 11, wherein the driving switching unit changes a control parameter or an automatic driving level related to the automatic driving. 前記運転者の顔および眼のうちの少なくとも一方の状態変化を取得する状態変化取得部をさらに備えることを特徴とする、請求項11に記載の運転支援装置。 The driving support device according to claim 11, further comprising a state change acquisition unit that acquires a state change of at least one of the driver's face and eyes. 前記影響緩和推定部は、前記状態変化取得部が取得した前記運転者の顔および眼のうちの少なくとも一方の状態変化に基づいて前記緩和を推定することを特徴とする、請求項19に記載の運転支援装置。 19. The mitigation estimation unit according to claim 19, wherein the effect mitigation estimation unit estimates the mitigation based on a state change of at least one of the driver's face and eyes acquired by the state change acquisition unit. Driving support device. 前記影響緩和推定部は、前記車両位置取得部が取得した前記現在位置と、前記地図情報取得部が取得した前記地図情報と、前記照度変化取得部が取得した前記周辺照度変化とにも基づいて前記緩和を推定することを特徴とする、請求項20に記載の運転支援装置。 The influence mitigation estimation unit is also based on the current position acquired by the vehicle position acquisition unit, the map information acquired by the map information acquisition unit, and the peripheral illuminance change acquired by the illuminance change acquisition unit. The driving support device according to claim 20, wherein the relaxation is estimated. 車両周辺の照度変化であって運転者の視覚が瞬時に追従できない程に急激な照度変化を推定し、
推定した前記照度変化が前記車両を運転する前記運転者の視覚に与える影響の緩和を推定し、
前記影響の緩和を推定したとき、前記車両の運転を自動運転から手動運転に切り替える、運転支援方法。
Estimate the illuminance change around the vehicle so suddenly that the driver's vision cannot follow it instantly.
Estimate the mitigation of the effect of the estimated illuminance change on the vision of the driver who drives the vehicle.
A driving support method for switching the driving of the vehicle from automatic driving to manual driving when the mitigation of the influence is estimated.
JP2020547542A 2018-09-20 2018-09-20 Driving support device and driving support method Active JP7175321B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/034803 WO2020059076A1 (en) 2018-09-20 2018-09-20 Driving assistance device and driving support method

Publications (2)

Publication Number Publication Date
JPWO2020059076A1 true JPWO2020059076A1 (en) 2021-04-30
JP7175321B2 JP7175321B2 (en) 2022-11-18

Family

ID=69888577

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020547542A Active JP7175321B2 (en) 2018-09-20 2018-09-20 Driving support device and driving support method

Country Status (2)

Country Link
JP (1) JP7175321B2 (en)
WO (1) WO2020059076A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3120837A1 (en) * 2021-03-16 2022-09-23 Psa Automobiles Sa Vehicle with brightness change detection in the driving scenario

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0953917A (en) * 1995-08-16 1997-02-25 Nissan Motor Co Ltd Instrument for measuring direction of line of sight for vehicle
JP2006011656A (en) * 2004-06-23 2006-01-12 Toyota Motor Corp Vehicle driving support device
JP2007276733A (en) * 2006-04-11 2007-10-25 Nissan Motor Co Ltd Driving operation auxiliary device for vehicle, and vehicle with driving operation assisting device for vehicle
JP2007331545A (en) * 2006-06-14 2007-12-27 Toyota Motor Corp Vehicle drive support apparatus
JP2010257217A (en) * 2009-04-24 2010-11-11 Honda Motor Co Ltd Vehicle circumference monitoring device
WO2018163471A1 (en) * 2017-03-10 2018-09-13 オムロン株式会社 Driving mode switching control device, system, method, and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6437045B2 (en) 2017-05-15 2018-12-12 みこらった株式会社 Self-driving car

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0953917A (en) * 1995-08-16 1997-02-25 Nissan Motor Co Ltd Instrument for measuring direction of line of sight for vehicle
JP2006011656A (en) * 2004-06-23 2006-01-12 Toyota Motor Corp Vehicle driving support device
JP2007276733A (en) * 2006-04-11 2007-10-25 Nissan Motor Co Ltd Driving operation auxiliary device for vehicle, and vehicle with driving operation assisting device for vehicle
JP2007331545A (en) * 2006-06-14 2007-12-27 Toyota Motor Corp Vehicle drive support apparatus
JP2010257217A (en) * 2009-04-24 2010-11-11 Honda Motor Co Ltd Vehicle circumference monitoring device
WO2018163471A1 (en) * 2017-03-10 2018-09-13 オムロン株式会社 Driving mode switching control device, system, method, and program

Also Published As

Publication number Publication date
WO2020059076A1 (en) 2020-03-26
JP7175321B2 (en) 2022-11-18

Similar Documents

Publication Publication Date Title
US9589194B2 (en) Driving assistance device and image processing program
US9902427B2 (en) Parking assistance device, parking assistance method, and non-transitory computer readable medium storing program
JP5682304B2 (en) Image providing device
WO2015162784A1 (en) Information presentation device and information presentation method
CN109844842B (en) Driving mode switching control device, system, method and storage medium
CN108140312A (en) Parking assistance method and parking aid
JP2016021653A (en) Periphery monitoring device and program
US20190096359A1 (en) Display control device, display device, in-vehicle display system, and display control method
US10450003B2 (en) Parking assist device and parking assist system
US11618482B2 (en) State determination device, driving support device, state determination method, and driving support method
US20200062173A1 (en) Notification control apparatus and method for controlling notification
CN109969189A (en) Vehicle
WO2017022051A1 (en) Display control device, display device and display control method
JPWO2020059076A1 (en) Driving support device and driving support method
JP2014072604A (en) Image processing system, image processing device, image processing method and program
JP2002109699A (en) Vehicle drive support device
US20200034102A1 (en) Display device for a vehicle
WO2019167109A1 (en) Display control device and display control method for vehicle
JP2020088604A (en) Travel control device, control method, and program
JP2016030447A (en) Parking support system
JP2019093958A (en) Operation support device for vehicle
JP2009096310A (en) Parking support apparatus
JP2016211998A (en) Vehicle regulatory speed display device
JP7116670B2 (en) TRIP CONTROL DEVICE, CONTROL METHOD AND PROGRAM
JPWO2020110186A1 (en) Operation plan change instruction device and operation plan change instruction method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200915

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210608

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20211116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220107

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220107

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220118

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220125

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20220325

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20220329

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20220614

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20220726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220901

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20221011

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20221108

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20221108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221108

R150 Certificate of patent or registration of utility model

Ref document number: 7175321

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150