WO2021075160A1 - 表示制御装置、表示制御プログラム及び車載システム - Google Patents

表示制御装置、表示制御プログラム及び車載システム Download PDF

Info

Publication number
WO2021075160A1
WO2021075160A1 PCT/JP2020/032301 JP2020032301W WO2021075160A1 WO 2021075160 A1 WO2021075160 A1 WO 2021075160A1 JP 2020032301 W JP2020032301 W JP 2020032301W WO 2021075160 A1 WO2021075160 A1 WO 2021075160A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
target
control
vehicle
content
Prior art date
Application number
PCT/JP2020/032301
Other languages
English (en)
French (fr)
Inventor
明彦 柳生
大祐 竹森
清水 泰博
一輝 小島
しおり 間根山
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2020090877A external-priority patent/JP7259802B2/ja
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Publication of WO2021075160A1 publication Critical patent/WO2021075160A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems

Definitions

  • the disclosure according to this specification relates to a display control technology for controlling a display by a head-up display.
  • Patent Document 1 discloses a vehicle display device that superimposes a display image on a real image in front of a head-up display. This vehicle display device superimposes, for example, a display object such as an arrow for guiding a lane change on a road surface or the like in the foreground.
  • Patent Document 1 does not notify the driver of changes in the controlled object, and thus changes in vehicle behavior. Therefore, the driver of the vehicle whose driving is controlled may feel anxiety about the change in the behavior of the vehicle.
  • the purpose of this disclosure is to provide a display control device or the like that can suppress the driver's anxiety about changes in vehicle behavior.
  • one disclosed aspect is used in a vehicle having a lane keeping function that controls driving so as to continue driving in a track specified based on road surface information, and is provided by a head-up display.
  • a display control device that controls display, and when the information acquisition unit that acquires target information indicating the control target on the road surface used for driving control and the control target used for driving control change, the change in the control target is changed. It is a display control device including a display control unit for displaying the content to be controlled to be shown.
  • one disclosed aspect is used in a vehicle having a lane keeping function that controls driving so that driving is continued in a track specified based on road surface information, and display control that controls display by a head-up display.
  • at least one processing unit acquires target information indicating a control target on a road surface used for driving control, and when the control target used for driving control changes, a control target indicating a change in the control target.
  • an in-vehicle system used in a vehicle that controls a display by a head-up display, and is a lane that controls driving so as to continue driving in a track specified based on road surface information.
  • the maintenance control unit, the information acquisition unit that acquires target information indicating the control target on the road surface used for driving control, and the control target content indicating the change of the control target when the control target used for driving control changes are displayed. It is an in-vehicle system including a display control unit for driving.
  • the control target on the road surface used for driving control changes, the control target content indicating the change of the control target is displayed. Therefore, the driver can recognize the change in the control target of the driving control in advance by looking at the control target content. Therefore, even if the vehicle behavior changes, the driver's anxiety about such a behavior change can be suppressed.
  • the function of the display control device according to the first embodiment of the present disclosure is realized by the HCU (Human Machine Interface Control Unit) 100 shown in FIGS. 1 and 2.
  • the HCU 100 comprises an HMI (Human Machine Interface) system 10 used in the vehicle A together with a head-up display (hereinafter, HUD) 20 and the like.
  • the HMI system 10 further includes an operating device 26, a driver status monitor (hereinafter, DSM) 27, and the like.
  • the HMI system 10 includes an input interface function that accepts user operations by an occupant (for example, a driver) of the vehicle A, and an output interface function that presents information to the driver.
  • the HMI system 10 is communicably connected to the communication bus 99 of the vehicle-mounted network 1 mounted on the vehicle A.
  • the HMI system 10 is one of a plurality of nodes provided in the vehicle-mounted network 1.
  • a peripheral monitoring sensor 30, a locator 40, a driving support ECU (Electronic Control Unit) 50, an automatic driving ECU 52, and the like are connected to the communication bus 99 of the vehicle-mounted network 1 as nodes.
  • These nodes connected to the communication bus 99 can communicate with each other.
  • the specific nodes of these devices and each ECU may be directly electrically connected to each other and may be able to perform communication without going through the communication bus 99.
  • the front-rear (see Fig. 2 front Ze and rear Go) and left-right (see Fig. 2 side Yo) directions are defined with reference to the vehicle A stationary on a horizontal plane.
  • the front-rear direction is defined along the longitudinal direction (traveling direction) of the vehicle A.
  • the left-right direction is defined along the width direction of the vehicle A.
  • the vertical direction (see FIG. 2 upper Ue and lower Si) is defined along the vertical direction of the horizontal plane that defines the front-rear direction and the left-right direction.
  • the description of the reference numerals indicating each direction may be omitted as appropriate.
  • the peripheral monitoring sensor 30 is an autonomous sensor that monitors the surrounding environment of the vehicle A.
  • the peripheral monitoring sensor 30 can be used to detect moving objects such as pedestrians, cyclists, non-human animals, and other vehicles, as well as falling objects, guardrails, curbs, road markings, road markings, and the like from the detection range around the vehicle. It is possible to detect road markings and stationary objects such as structures on the side of the road.
  • the peripheral monitoring sensor 30 provides detection information for detecting an object around the vehicle A to the driving support ECU 50 and the like.
  • the peripheral monitoring sensor 30 has a front camera 31 as a detection configuration for object detection.
  • the front camera 31 outputs at least one of the imaging data obtained by photographing the front range of the vehicle A and the analysis result of the imaging data as detection information.
  • the peripheral monitoring sensor 30 may have a detection configuration such as a millimeter wave radar, a rider, and a sonar together with the front camera 31.
  • the locator 40 generates highly accurate position information of the own vehicle of the vehicle A by compound positioning that combines a plurality of acquired information.
  • the locator 40 includes a GNSS (Global Navigation Satellite System) receiver 41, an inertial sensor 42, a high-precision map database (hereinafter, high-precision map DB) 43, and a locator ECU 44.
  • GNSS Global Navigation Satellite System
  • the GNSS receiver 41 receives positioning signals transmitted from a plurality of artificial satellites (positioning satellites).
  • the inertial sensor 42 includes, for example, a gyro sensor and an acceleration sensor.
  • the high-precision map DB 43 is mainly composed of a non-volatile memory, and stores high-precision map data (hereinafter, high-precision map data).
  • the high-precision map data is map data with higher accuracy than the navigation map data (hereinafter referred to as navigation map data) used for route guidance.
  • High-precision map data is map data that can be used for advanced driving support and automatic driving.
  • the high-precision map data includes three-dimensional shape information of the road, information on the number of lanes, information indicating the traveling direction allowed for each lane, and the like. Further, the high-precision map data includes information on node points such as white lines that can specify the position of road markings.
  • the locator ECU 44 has a configuration mainly including a microcomputer provided with a processor, RAM, a storage unit, an input / output interface, a bus connecting these, and the like.
  • the locator ECU 44 combines the positioning signal received by the GNSS receiver 41, the measurement result of the inertial sensor 42, the vehicle speed information output to the communication bus 99, and the like, and sequentially positions the own vehicle position, the traveling direction, and the like of the vehicle A.
  • the locator ECU 44 provides the position information and direction information of the vehicle A based on the positioning result to the HCU 100, the driving support ECU 50, the automatic driving ECU 52, and the like through the communication bus 99.
  • the locator ECU 44 can provide the requested high-precision map data to the requesting ECU in response to the request from the driving support ECU 50, the automatic driving ECU 52, and the like.
  • the driving support ECU 50 and the automatic driving ECU 52 are configured to mainly include a computer equipped with a processor, a RAM, a storage unit, an input / output interface, a bus connecting them, and the like, respectively.
  • the driving support ECU 50 and the automatic driving ECU 52 together with the HCU 100 and the like, construct an in-vehicle system 110 that processes most of the calculations required on the vehicle side.
  • the driving support ECU 50 has a driving support function that supports the driving operation of the driver.
  • the automatic driving ECU 52 has an automatic driving function capable of acting as a driver's driving operation.
  • the driving support ECU 50 enables partial automatic driving control (advanced driving support) of level 2 or lower.
  • the automatic driving ECU 52 enables automatic driving control of level 3 or higher.
  • the driving support ECU 50 and the automatic driving ECU 52 recognize the driving environment around the vehicle A for the driving control described later based on the detection information acquired from the peripheral monitoring sensor 30, respectively.
  • Each of the ECUs 50 and 52 provides the HCU 100 with the analysis result of the detection information carried out for recognizing the traveling environment.
  • each of the ECUs 50 and 52 can generate road surface information regarding the road surface in the front range as one of the analysis results based on the detection information and provide it to the HCU 100.
  • the road surface information includes information for identifying the lane in which the vehicle A is currently traveling (hereinafter, own lane Lns, see FIG. 4), in other words, the lane of the own vehicle.
  • the road surface information includes information indicating the relative positions and shapes of the left and right lane markings Ll or the road edge Er (both see FIG. 4).
  • Roadside Er is identified based on the recognition of, for example, curbs, guardrails, lines written on roadside walls, snow cover outside the lane, pylon, pole cones, and shoulder walls, dirt and grass near the lane Ll. Ru.
  • Each ECU 50, 52 performs a process of specifying each of the lane marking Ll and the road end Er in parallel.
  • the ECUs 50 and 52 output the information regarding the lane marking Ll and interrupt the output of the information regarding the roadside Er.
  • an interrupted section of the lane marking Ll hereinafter, the interrupted section Sl, see FIG. 4
  • each of the ECUs 50 and 52 uses information on the road end Er instead of the information on the lane marking Ll. Output. Even in such an interrupted section Sl, the output of information regarding the lane marking Ll is continued on the side where the lane marking Ll exists (on the right side in FIG. 4).
  • front-rear and left-right directions in the present embodiment are defined with reference to the vehicle A stationary on a horizontal plane as described above. Specifically, the front-rear direction is defined along the longitudinal direction of the vehicle A stationary on the horizontal plane. Further, the left-right direction is defined along the width direction of the vehicle A stationary on the horizontal plane.
  • the driving support ECU 50 has a plurality of functional units that realize advanced driving support by executing a program by a processor. Specifically, the driving support ECU 50 has an ACC (Adaptive Cruise Control) control unit and a lane keeping control unit 51 in addition to the above-mentioned functional unit that recognizes the driving environment.
  • the ACC control unit is a functional unit that realizes an ACC function of driving the vehicle A at a constant speed at a target vehicle speed or causing the vehicle A to follow the vehicle in front while maintaining the distance between the vehicle and the vehicle in front.
  • the lane keeping control unit 51 is a functional unit that realizes the function of the LTA (Lane Tracing Assist) that controls the traveling of the vehicle A in the lane.
  • LTA is also called LTC (LaneTraceControl).
  • the lane keeping control unit 51 controls the steering angle of the steering wheel of the vehicle A based on the position and shape information of the lane marking Ll or the roadside Er extracted from the image data of the front camera 31 by recognizing the traveling environment.
  • the lane keeping control unit 51 generates a planned travel line PRL having a shape along the own lane Lns so that the vehicle can continue traveling in the own lane Lns, which is the running lane.
  • the lane keeping control unit 51 defines the planned traveling line PRL at the center position of the own lane Lns, which is approximately equidistant from the left and right controlled target Tc. Therefore, when one of the left and right control target Tc changes (switches) from the lane marking Ll to the road end Er, the planned traveling line PRL of the own vehicle is gently offset so as to approach the road end Er which is the control target Tc (). (See FIG. 4). Further, when the control target Tc on either the left or right side changes (switches) from the road end Er to the lane marking Ll, the lane keeping control unit 51 releases the offset of the planned travel line PRL so as to move away from the road end Er.
  • the lane keeping control unit 51 cooperates with the ACC control unit to perform driving control (lane keeping control or lane following control) for locating the vehicle A in the substantially center of the own lane Lns according to the planned traveling line PRL.
  • the automatic driving ECU 52 has a plurality of functional units that realize autonomous driving of the vehicle A by executing a program by the processor.
  • the automatic driving ECU 52 generates a scheduled traveling line PRL based on the high-precision map data and the vehicle position information acquired from the locator 40 and the detection information acquired from the peripheral monitoring sensor 30.
  • the automatic driving ECU 52 executes acceleration / deceleration control, steering control, and the like so that the vehicle A travels along the scheduled traveling line PRL.
  • the above automatic driving ECU 52 has a function of performing lane keeping control substantially the same as that of the lane keeping control unit 51 of the driving support ECU 50, that is, driving control of the vehicle A so as to continue traveling in the own lane Lns.
  • the unit is referred to as a lane keeping control unit 53 for convenience.
  • the driver of the vehicle A can exclusively use one of the lane keeping control units 51 and 53.
  • the lane keeping control units 51 and 53 switch the operating state of the lane keeping control between the off state, the standby state, and the executing state.
  • the off state is a state in which the lane keeping control units 51 and 53 are not activated.
  • the standby state is a state in which the lane keeping control units 51 and 53 are activated, but the lane keeping control is not executed.
  • the execution state is a state in which the lane keeping control is activated and the vehicle is running in the lane based on the establishment of the execution conditions such as being able to recognize the lane markings Ll or the road end Er on both the left and right sides.
  • the lane keeping control units 51 and 53 sequentially provide the HCU 100 with control information related to the lane keeping control when the lane keeping control is in the standby state or the executing state.
  • the control information includes at least status information indicating the operating state of the lane keeping control and line shape information defining the shape of the planned traveling line PRL.
  • the status information is information indicating the operating state of the lane keeping control, and specifically, is information indicating whether or not the lane keeping control is in the executing state.
  • the line shape information includes the coordinate information of the main points, the distance between the points, the radius of curvature, and the like, so that the shape of the planned traveling line PRL can be reproduced on the acquisition side.
  • the operation device 26 is an input unit that accepts user operations by a driver or the like. User operations related to, for example, a driving support function or an automatic driving function are input to the operation device 26.
  • the operation device 26 includes a steering switch provided on the spoke portion of the steering wheel, an operation lever provided on the steering column portion 8, a voice input device for detecting the driver's utterance, and the like.
  • the DSM27 has a configuration including a near-infrared light source, a near-infrared camera, and a control unit for controlling them.
  • the DSM 27 is installed in a posture in which the near-infrared camera is directed toward the headrest portion of the driver's seat, for example, on the upper surface of the steering column portion 8 or the upper surface of the instrument panel 9.
  • the DSM27 uses a near-infrared camera to photograph the head of the driver irradiated with near-infrared light by a near-infrared light source.
  • the image captured by the near-infrared camera is image-analyzed by the control unit.
  • the control unit extracts information such as the position of the eye point EP and the line-of-sight direction from the captured image, and sequentially outputs the extracted state information to the HCU 100.
  • the HUD 20 is electrically connected to the HCU 100 and sequentially acquires the video data generated by the HCU 100. Based on the video data, the HUD 20 presents various information related to the vehicle-mounted function, such as a driving support function or an automatic driving function, to the driver using the virtual image Vi.
  • the HUD 20 is housed in the storage space inside the instrument panel 9 below the windshield WS.
  • the HUD 20 projects the light formed as a virtual image Vi toward the projection range PA of the windshield WS.
  • the light projected on the windshield WS is reflected toward the driver's seat side in the projection range PA and is perceived by the driver.
  • the driver visually recognizes the display in which the virtual image Vi is superimposed on the foreground seen through the projection range PA.
  • the HUD 20 includes a projector 21 and a magnifying optical system 22.
  • the projector 21 has an LCD (Liquid Crystal Display) panel and a backlight.
  • the projector 21 is fixed to the housing of the HUD 20 with the display surface of the LCD panel facing the magnifying optical system 22.
  • the projector 21 displays each frame image of the video data on the display surface of the LCD panel, and transmits and illuminates the display surface with a backlight to emit light formed as a virtual image Vi toward the magnifying optical system 22.
  • the magnifying optical system 22 includes at least one optical element such as a concave mirror.
  • the magnifying optical system 22 projects the light emitted from the projector 21 onto the upper projection range PA while spreading it by reflection.
  • the angle of view VA is set in the HUD 20. Assuming that the virtual range in the space where the virtual image Vi can be imaged by the HUD 20 is the image plane IS, the angle of view VA is defined based on the virtual line connecting the driver's eye point EP and the outer edge of the image plane IS. The viewing angle.
  • the angle of view VA is an angle range in which the driver can visually recognize the virtual image Vi when viewed from the eye point EP.
  • the horizontal angle of view for example, about 10 to 12 °
  • the vertical angle of view for example, about 4 to 5 °
  • the front range for example, a range of about a dozen m to 100 m
  • the front range for example, a range of about a dozen m to 100 m
  • the HUD 20 displays the superimposed content CTs (see FIG. 5) and the non-superimposed content CTn (see FIG. 8) as virtual images Vi.
  • Superimposed content CTs are AR display objects used for augmented reality (AR) display.
  • the display position of the superimposed content CTs is associated with a specific superimposed object existing in the foreground, such as a specific position on the road surface, a vehicle in front, a pedestrian, and a road sign.
  • the superimposed content CTs are superimposed and displayed on a specific superimposed object (for example, the road surface of the own lane Lns, see FIG. 4) in the foreground, and the driver follows the superimposed object so as to be relatively fixed to the superimposed object. It is visually movable.
  • the relative positional relationship between the driver's eye point EP, the superimposed object in the foreground, and the superimposed content CTs is continuously maintained. Therefore, the shape of the superimposed content CTs is continuously updated at a predetermined cycle according to the relative position and shape of the superimposed object.
  • the superimposed content CTs are displayed in a posture closer to horizontal than the non-superimposed content CTn, and have a display shape extended in the depth direction (traveling direction, forward Ze) as seen from the driver, for example.
  • the non-superimposed content CTn is a non-AR display object excluding the superimposed content CTs among the display objects superimposed and displayed in the foreground.
  • the display position of the non-superimposed content CTn is a specific position within the projection range PA (angle of view VA). Therefore, the non-superimposed content CTn is displayed as if it is relatively fixed to the vehicle configuration such as the windshield WS.
  • the shape of such non-superimposed content CTn is substantially constant. Due to the positional relationship between the vehicle A and the superposed target, even if the non-superimposed content CTn is used, a timing may occur in which the superposed content CTs are superposed and displayed.
  • the HCU 100 is an electronic control device that integrally controls the display by the in-vehicle display device such as the meter display and the HUD 20 in the HMI system 10.
  • the HCU100, HUD20, and the like constitute a virtual image display system.
  • the HCU 100 mainly includes a computer including a processing unit 11, a RAM 12, a storage unit 13, an input / output interface 14, and a bus connecting these.
  • the processing unit 11 is hardware for arithmetic processing combined with the RAM 12.
  • the processing unit 11 has a configuration including at least one arithmetic core such as a CPU (Central Processing Unit) and a GPU (Graphics Processing Unit).
  • the processing unit 11 may further include an FPGA (Field-Programmable Gate Array), an NPU (Neural network Processing Unit), an IP core having other dedicated functions, and the like.
  • the RAM 12 may be configured to include a video RAM for video generation.
  • the processing unit 11 executes various processes for realizing the display control method of the present disclosure by accessing the RAM 12.
  • the storage unit 13 is configured to include a non-volatile storage medium.
  • Various programs (display control programs, etc.) executed by the processing unit 11 are stored in the storage unit 13.
  • the HCU 100 shown in FIGS. 1 to 3 has a plurality of functional units that control the superimposed display of contents by the HUD 20 by executing the display control program stored in the storage unit 13 by the processing unit 11.
  • the HCU 100 is constructed with functional units such as a viewpoint position specifying unit 71, a control information acquisition unit 72, a locator information acquisition unit 73, and a display generation unit 74.
  • the viewpoint position specifying unit 71 identifies the position of the eye point EP of the driver seated in the driver's seat based on the state information acquired from the DSM 27.
  • the viewpoint position specifying unit 71 generates three-dimensional coordinates (hereinafter, eye point coordinates) indicating the position of the eye point EP, and sequentially provides the generated eye point coordinates to the display generation unit 74.
  • the control information acquisition unit 72 acquires information indicating the control state of the vehicle A mainly through the communication bus 99. Specifically, the control information acquisition unit 72 acquires road surface information output from each of the ECUs 50 and 52. The control information acquisition unit 72 further acquires target information indicating the control target Tc on the front road surface used for lane keeping control from the content of the road surface information.
  • the target information is information indicating the type of the target used for lane keeping control as the control target Tc, and specifically, information indicating whether the control target Tc is the lane marking Ll or the roadside Er. Is.
  • the control information acquisition unit 72 further acquires the target position information indicating the relative position of the controlled target Tc for which the type is specified with respect to the vehicle A (own vehicle) and the target shape information indicating the shape on the road surface.
  • the control information acquisition unit 72 acquires the status information and the line shape information output from the lane keeping control units 51 and 53.
  • the line shape information is information indicating the expected locus (planned traveling line PRL) of the vehicle A generated for lane keeping control.
  • the control information acquisition unit 72 acquires vehicle speed information and torque information output to the communication bus 99 by, for example, a travel control ECU or the like. Further, the control information acquisition unit 72 acquires height information based on the output of the height sensor as information indicating the posture of the vehicle A.
  • the locator information acquisition unit 73 acquires the latest position information and direction information about the vehicle A from the locator ECU 44 as own vehicle position information. In addition, the locator information acquisition unit 73 acquires high-precision map data of the peripheral range of the vehicle A from the locator ECU 44. The locator information acquisition unit 73 can acquire the navigation map data used for route guidance as a substitute map data of the high-precision map data in the road range where the high-precision map data is not developed. The navigation map data is provided to the locator information acquisition unit 73 by, for example, a navigation device mounted on the vehicle A, a user terminal connected to the HMI system 10, or the like.
  • the locator information acquisition unit 73 acquires, for example, high-precision map data or navigation map data in a range (for example, about 50 m to 200 m around the vehicle A) necessary for superimposing display of superimposed content CTs from the locator ECU 44 or a navigation device or the like. To do.
  • the display generation unit 74 controls the presentation of information to the driver by the HUD 20 by generating video data that is sequentially output to the HUD 20.
  • the display generation unit 74 draws the original image of each content displayed as a virtual image Vi on each frame image of the video data to be output toward the HUD 20.
  • the display generation unit 74 builds a 3D model when drawing the original image of the superimposed content CTs (see FIG. 5) on the frame image.
  • information regarding the superimposition target acquired by the control information acquisition unit 72 and the locator information acquisition unit 73 for example, the front road surface, the lane marking Ll, the road end Er, and the like is used.
  • the display generation unit 74 arranges the constructed 3D model in the virtual space with reference to the position of the own vehicle.
  • the vehicle position information acquired by the locator information acquisition unit 73 is used for arranging the 3D model.
  • the display generation unit 74 sets the position of the virtual camera and the position of the virtual magnifying optical system 22 (or the image plane IS) in the virtual space where the 3D model is arranged.
  • the display generation unit 74 calculates the shape of the 3D model as seen from the virtual camera position by the viewpoint conversion process.
  • the virtual camera position corresponds to the position of the driver's eye point EP, and is corrected based on the eye point coordinates acquired by the viewpoint position specifying unit 71. Further, the virtual camera position and the optical system position are corrected to positions that reflect the attitude change of the vehicle A based on the height information and the torque information acquired by the control information acquisition unit 72.
  • the display generation unit 74 draws the reference data of the original image according to the shape of the 3D model viewed from the virtual camera position.
  • the display generation unit 74 imparts a predetermined deformation to the reference data of the original image so that the distortion of the optical image due to the reflection by the magnifying optical system 22 and the windshield WS is offset.
  • the display generation unit 74 generates video data including the original image to which the distortion correction is applied in each frame image.
  • the display generation unit 74 continuously outputs the generated video data to the projector 21 in a predetermined video format.
  • the display generation unit 74 displays the LTA content CTlt as one of the superimposed content CTs.
  • the details of the LTA content CTlt will be described with reference to FIGS. 1 to 3 based on FIGS. 4 and 5.
  • the LTA content CTlt is displayed when the lane keeping control is in the execution state in the lane keeping control units 51 and 53.
  • the LTA content CTlt is superimposed content CTs indicating the planned travel line PRL of the vehicle A by emphasizing the running path of the own vehicle.
  • the LTA content CTlt is visually recognized by the driver as if it were a virtual road paint by displaying it as if it were stuck on the road surface.
  • the display generation unit 74 is predetermined so as to match the road surface shape seen from the eye point EP (see FIG. 2) according to the traveling of the vehicle A.
  • the drawing shape of the LTA content CTRL is updated in the update cycle of.
  • the LTA content CTlt has a two-line shape including a pair of lane marking-enhanced image portions LPl and LPr that are superimposed and displayed on the road surface such as the front runway (see the lane marking display in the upper part of FIG. 5).
  • the display generation unit 74 draws the lane marking image units LPl and LPr based on the target position information and the target shape information regarding the lane marking Ll, and thereby associates the lane marking image unit Ll with the control target Tc with the lane marking image unit. Display LPl and LPr.
  • Each lane marking image section LPl, LPr has a shape extending in a strip shape along the own lane Lns, and is superimposed and displayed in the vicinity of each of the left and right lane marking Ll on the road surface of the own lane Lns. ..
  • the lane marking image portions LPl and LPr are superimposed on the road surface slightly inside (the center side of the own lane Lns) from the left and right lane marking Ll.
  • the lane marking image section LPl on the left side of the vehicle is visually recognized slightly to the right of the lane marking Ll on the left side of the vehicle when viewed from the driver.
  • the lane marking image section LPr on the right side of the own vehicle is visually recognized slightly to the left of the lane marking Ll on the right side of the own vehicle when viewed from the driver.
  • the display generation unit 74 superimposes and displays the left and right division line emphasized image units LPl and LPr in the sections in which the left and right division line Ll are recognized respectively.
  • the lane marking-enhanced image portion LPl is temporarily hidden, especially between the start point Sls and the end point Sl.
  • the display generation unit 74 superimposes and displays the road edge emphasized image unit LPe instead of the hidden division line emphasized image unit LPl.
  • the road edge-enhanced image section LPe has a shape extending in a strip shape along the own lane Lns, like the lane marking image sections LPl and LPr.
  • the display generation unit 74 draws the road end-enhanced image unit LPe based on the target position information and the target shape information regarding the road end Er, thereby causing the road end-enhanced image unit LPe to be associated with the road end Er set as the control target Tc. Display it.
  • the road edge enhanced image unit LPe is superimposed and displayed on the road surface on the center side (right side) of the track with respect to the road edge Er on the left side of the vehicle.
  • the road edge-enhanced image unit LPe is displayed so as to be visually recognized outside the own lane Lns than the virtual extension line assuming that the front end (starting point Sls) of the interrupted lane marking Ll is extended forward.
  • the display generation unit 74 sets the distance Die between the road edge Er and the road edge enhanced image unit LPe wider than the interval Dil between the lane marking Ll and the lane marking image unit LPl.
  • the distances Die and Dil in this case are the distances on the road surface assuming that they are drawn on the road surface as virtual road paint, in other words, the distances set when the 3D model is placed in the virtual space. The value.
  • the display generation unit 74 displays the road edge-enhanced image unit LPe in a manner different from that of the division line-enhanced image units LPl and LPr.
  • the road edge-enhanced image section LPe is drawn so that the line width is thicker than that of each section line-enhanced image section LPl, LPr.
  • the road edge-enhanced image unit LPe is displayed with a brightness or display color different from that of the division line-enhanced image units LPl and LPr.
  • the road edge-enhanced image unit LPe is displayed with higher brightness than each division line-enhanced image unit LPl, LPr, or is displayed in a display color having a high attractiveness.
  • the display generation unit 74 includes the image unit included in the LTA content CTlt among the emphasized image units LPl, LPr, and LPe according to the type of the target Tc to be controlled in the lane keeping control. Is replaced with, and is superimposed and displayed on the road surface ahead in association with the control target Tc. Therefore, when the type of the control target Tc used for the lane keeping control changes, the display generation unit 74 changes the control target Tc by changing the mode of the LTA content CTlt by exchanging the emphasized image units LPl, LPr, and LPe. Can be shown to the driver.
  • the control target Tc used for lane keeping control is switched from the lane marking Ll to the roadside Er.
  • the display generation unit 74 refers to the target information acquired by the control information acquisition unit 72, and determines whether or not the control target Tc is scheduled to shift and the distance to the start point Sls of the interrupted section Sl which is the transition position of the control target Tc. To grasp.
  • the display generation unit 74 further displays the road edge-enhanced image unit LPe in addition to the road edge-enhanced image units LPl and LPr (FIG. 5, middle section, road edge display). reference).
  • the road edge-enhanced image section LPe is displayed above the lane marking-enhanced image section LPl, and is superimposed on the road surface in front of the lane marking-enhanced image section LPl on the left side of the vehicle in terms of the driver's appearance.
  • the road edge-enhanced image portion LPe has a shape extending forward from a position slightly to the left of the starting point Sls.
  • the road edge-enhanced image section LPe is not connected to the lane marking-enhanced image section LPl. That is, the lower end (rear end) of the road edge-enhanced image portion LPe is separated from the upper end (front end) of the division line-enhanced image portion LPl.
  • the road edge-enhanced image section LPe is displayed offset outward with respect to the lane marking image section LPl, and indicates the switching of the controlled target Tc from the lane marking Ll to the road edge Er.
  • the upper end of the lane marking image section LPl on the left side of the vehicle and the lower end of the road edge enhanced image section LPe move toward the lower edge of the angle of view VA following the starting point Sls that moves downward in the foreground.
  • the division line-enhanced image portion LPl is gradually shortened and framed out of the angle of view VA.
  • the road edge-enhanced image unit LPe extends to the lower left of the angle of view VA and is displayed so as to diagonally cross the inside of the angle of view VA.
  • the control target Tc used for the lane keeping control is returned from the road end Er to the lane marking Ll.
  • the display generation unit 74 redisplays the lane marking-enhanced image section LPl on the left side of the vehicle (see FIG. 5, lower lane marking redisplay).
  • the lane marking image section LPl is displayed as offset inward with respect to the road edge enhanced image section LPe, and indicates the switching of the control target Tc from the road edge Er to the lane marking Ll.
  • the upper end of the road edge-enhanced image section LPe and the lower end of the lane marking-enhanced image section LPl move toward the lower edge of the angle of view VA following the end point Sl that moves downward in the foreground.
  • the road edge-enhanced image portion LPe is gradually shortened and framed out of the angle of view VA.
  • the lane marking image section LPl extends toward the lower left of the angle of view VA and is displayed so as to diagonally cross the inside of the lane marking VA in the same manner as the lane marking image section LPr on the right side of the vehicle.
  • the details of the display control method for realizing the above-mentioned content display will be described below with reference to FIGS. 1 and 3 to 5 based on the flowchart shown in FIG.
  • the display control process shown in FIG. 6 is repeatedly started by the HCU 100 that has completed the start-up process or the like, for example, by switching the vehicle power supply to the ON state.
  • the control information acquisition unit 72 starts acquiring the status information, and proceeds to S102.
  • one of the lane keeping control units 51 and 53 determines whether or not the lane keeping control is in the ON state, and waits for the activation of the lane keeping control. As an example, when the status information can be acquired, S102 determines that the lane keeping control is in the ON state. If it is determined in S102 that the lane keeping control is in the ON state, the process proceeds to S103.
  • one of the lane keeping control units 51 and 53 determines whether or not the lane keeping control is in the execution state. When the lane keeping control is in the standby state, the determination in S103 is repeated. On the other hand, if it is determined in S103 that the lane keeping control is in the execution state, the process proceeds to S104.
  • the control information acquisition unit 72 acquires the latest target information, and proceeds to S105.
  • S105 based on the target information acquired in S104, it is determined whether or not there is a change in the type of the control target Tc in the detectable front range of the front camera 31. Specifically, in S105, it is determined whether or not the start point Sls of the break section Sl is detected, or whether or not the end point Sl of the break section Sl is detected.
  • the process proceeds to S106.
  • S106 the display of the LTA content CTlt that emphasizes the current left and right controlled target Tc is continued, and the process proceeds to S109.
  • the normal display of the LTA content CTlt including the lane marking-enhanced image portions LPl and LPr is continued (see the upper part of FIG. 5).
  • the display of the LTA content CTlt including the road edge emphasized image unit LPe is continued instead of the left side division line emphasized image unit LPl.
  • S107 it is determined whether or not the start point Sls or the end point Sl, that is, the transition position of the control target Tc is within the angle of view VA. If it is determined in S107 that the transition position is outside the angle of view VA, the process proceeds to S106, and the display of the LTA content CTlt in the current mode is continued.
  • S107 if it is determined in S107 that the transition position is within the angle of view VA, the process proceeds to S108.
  • S108 an offset display indicating switching of the control target Tc is performed, and the process proceeds to S109.
  • the lane marking image section LPr on the right side of the vehicle and the lane marking image section LPl on the left side of the vehicle and the road edge enhancement image section LPe are displayed in a divided state that is not connected to each other (FIG. 5 interruption and interruption). See bottom).
  • S109 the latest status information is referred to, and it is determined whether or not the execution state of the lane keeping control is continued. If it is determined in S109 that the lane keeping control is still in the execution state, the process returns to S104. On the other hand, if it is determined in S109 that the lane keeping control is no longer in the execution state, the process proceeds to S110. In S110, the display of the LTA content CTlt is terminated, and the display control process is temporarily terminated. The display of other contents other than the LTA content CTlt may be continued as it is.
  • the LTA content CTlt indicating such a change in the control target Tc is displayed. Therefore, the driver can recognize in advance the change in the controlled target Tc of the lane keeping control by looking at the LTA content CTlt. Therefore, even if the behavior of the vehicle A changes, the driver's anxiety about such a behavior change can be suppressed.
  • the LTA content CTlt of the first embodiment is displayed superimposed on the front road surface in association with the control target Tc based on the target position information indicating the relative position of the control target Tc.
  • the switching of the control target Tc is clearly shown to the driver by the offset display in which the lane marking image unit LPl and the road edge emphasis image unit LPe arranged in the front-rear direction when viewed from the driver are shifted in the left-right direction.
  • the LTA content CTlt can notify the driver of the change of the controlled target Tc in an easy-to-understand manner. As a result, the effect of suppressing the driver's anxiety is more likely to be exhibited.
  • the distance Die between the road edge Er and the road edge enhanced image unit LPe is wider than the interval Dil between the lane marking Ll and the lane marking image unit LPl.
  • the road edge enhanced image unit LPe and the lane marking image unit LPl are not connected to each other and are connected to the road surface. It is superimposed and displayed. As described above, if the emphasized image units LPe and LPl that emphasize the target Tc to be controlled are divided and displayed, the driver can easily grasp the point at which the Tc to be controlled is switched.
  • the mode of the LTA content CTlt is changed according to the type of the target Tc to be controlled.
  • the road edge-enhanced image section LPe that emphasizes the road edge Er is set to have higher brightness or higher attraction than the lane marking-enhanced image section LPl that emphasizes the lane marking Ll.
  • the driver is less likely to overlook the switching schedule of the controlled target Tc. As a result, the effect of suppressing the driver's anxiety is more likely to be exhibited.
  • the LTA content CTlt corresponds to the "controlled content”
  • the lane marking-enhanced image section LPl corresponds to the "image section” and the "first image section”
  • the road edge-enhanced image section LPe corresponds to the road edge-enhanced image section LPe.
  • one of the lane marking Ll and the road end Er corresponds to the "first target”
  • the other corresponds to the "second target”
  • the start point Sls and the end point Sl correspond to the "transition position”.
  • the control information acquisition unit 72 corresponds to the "information acquisition unit”
  • the display generation unit 74 corresponds to the "display control unit”
  • the HCU 100 corresponds to the "display control device”.
  • the second embodiment of the present disclosure shown in FIGS. 7 and 8 is a modification of the first embodiment.
  • the process of displaying the notice icon CTni is performed. It is carried out (Fig. 7 S208).
  • the notice icon CTni is a non-superimposed content CTn that is displayed separately from the LTA content CTlt when the planned changing position of the control target Tc is outside the angle of view VA.
  • the notice icon CTni is displayed approximately in the center of the angle of view VA (see the upper part of FIG. 8).
  • the notice icon CTni suggests to the driver that the vehicle A is scheduled to move laterally by including the image portion drawn in a crank shape.
  • the display generation unit 74 displays a switching animation using the notice icon CTni and the division line emphasized image unit LPl at the timing when the start point Sls, which is the transition position, enters the angle of view VA.
  • the notice icon CTni moves from the center of the angle of view VA toward the start point Sls in the foreground while changing from the non-superimposed content CTn to the superposed content CTs.
  • the display size of the notice icon CTni is gradually reduced as it moves to the starting point Sls. Due to such movement and reduction, the notice icon CTni is superimposed and displayed above (front) the start point Sls (see the middle upper row of FIG. 8).
  • the notice icon CTni is hidden as a predetermined time elapses after moving to the vicinity of the start point Sls. After the notice icon CTni disappears, the display generation unit 74 displays an animation of extending the lane marking image unit LPl on the left side of the vehicle in the traveling direction along the road edge Er as a switching animation (FIG. 8, lower middle row). reference). Specifically, the lane marking image unit LPl extends the tip (upper end, front end) inside the lane marking Ll to the outside (left side) toward the road end Er. Further, the lane marking-enhanced image unit LPl bends the tip in the traveling direction near the inside of the road edge Er, and further extends in the traveling direction along the road edge Er.
  • the display generation unit 74 repeats the animation of stretching the division line emphasized image unit LPl a predetermined number of times.
  • the stretched portion LEP of the lane marking-enhanced image portion LPl is drawn, for example, in a broken line shape during the switching animation.
  • the stretched portion LEP changes to a solid line drawing shape (see the lower part of FIG. 8).
  • the lane marking-enhanced image portion LPl has a drawing shape that is bent like a crank as a whole, in other words, a drawing shape that is integrated with the road edge-enhanced image portion LPe (see FIG. 5). Even in such a lane marking image portion LPl, the distance Die (see FIG. 4) between the road edge Er and the extending portion LEP is secured wider than the distance ill (see FIG. 4) between the lane marking Ll and the main body portion.
  • the LTA content CTlt of the second embodiment described so far can notify the driver of a change in the controlled target Tc by displaying an animation that stretches the lane marking-enhanced image portion LPl. Therefore, the driver can recognize in advance a change in the control target Tc of the lane keeping control. Therefore, the driver's anxiety about the behavior change caused by the switching of the controlled target Tc can be suppressed.
  • the driver is notified of the change in the control target Tc by displaying the notice icon CTni. Based on the above, the driver can recognize at an early stage the change schedule of the controlled target Tc, and by extension, the possibility of lateral movement. As a result, the effect of suppressing the driver's anxiety is more likely to be exhibited.
  • the contents of the processes of S201 to S206 and S209 to S211 in the display control process of the second embodiment are substantially the same as the contents of the processes of S101 to S106 and S108 to S110 of the first embodiment.
  • the third embodiment of the present disclosure shown in FIG. 9 is another modification of the first embodiment.
  • the display generation unit 74 displays the locus when the interrupted section Sl is detected in the traveling direction (see the upper part of FIG. 9).
  • the expected locus content CTp is displayed together with the LTA content CTlt.
  • the predicted locus content CTp is superimposed content CTs that are drawn based on the line shape information acquired by the control information acquisition unit 72 (see FIG. 3) and superimposed and displayed in the substantially center of the road surface of the own lane Lns.
  • the predicted locus content CTp notifies the driver of the shape of the planned traveling line PRL (see FIG. 4) generated by the lane keeping control units 51 and 53 (see FIG. 1).
  • the display generation unit 74 bends the division line emphasized image unit LPl on the left side of the vehicle to the outside (left side) (see the middle section of FIG. 9).
  • the lane marking image section LPl has a drawing shape that extends from the inside of the lane marking Ll to the vicinity of the road end Er above the interrupted lane marking Ll and is further bent in the traveling direction.
  • the lane marking-enhanced image portion LPl has a drawing shape in which the front end of the linear image portion superimposed on the inside of the lane marking Ll and the rear end of the linear image portion superimposed on the inside of the road end Er are connected. Is displayed.
  • the display generation unit 74 bends the predicted locus content CTp to the left side in the same manner as the lane marking image unit LPl.
  • the lateral bending of the expected locus content CTp may be emphasized with respect to the lateral bending of the actual planned travel line PRL.
  • the display generation unit 74 bends the division line emphasized image unit LPl on the left side of the own vehicle inward (see the lower part of FIG. 9).
  • the lane marking image section LPl has a drawing shape that extends from the vicinity of the road edge Er to the inside of the lane marking Ll below the reappearing lane marking Ll and is further bent in the traveling direction.
  • the display generation unit 74 bends the predicted locus content CTp to the right side (center side) in the same manner as the lane marking image unit LPl, and superimposes it on the center of the own lane Lns again.
  • the LTA content CTlt and the expected locus content CTp notify the driver of the possibility of another lateral movement.
  • the driver is notified of the planned change in the controlled object Tc. Therefore, the driver's anxiety about the behavior change caused by the switching of the controlled target Tc can be suppressed.
  • the predicted locus content CTp indicating the planned traveling line PRL of the vehicle A to be maintained and controlled in the lane is superimposed and displayed together with the LTA content CTlt based on the line shape information.
  • the change of the control target Tc used for the lane keeping control is shown to the driver in an easy-to-understand manner by the cooperation of the mode change of the two superimposed contents CTs.
  • the driver can easily grasp the point at which the controlled target Tc is switched.
  • the line shape information corresponds to "trajectory information".
  • the fourth embodiment of the present disclosure shown in FIG. 10 is still another modification of the first embodiment.
  • the virtual division line image unit LPv is displayed at the timing when the start point Sls of the interrupted section Sl enters the angle of view VA.
  • the virtual division line image unit LPv is an image unit corresponding to the road edge enhanced image unit LPe (see FIG. 5) of the first embodiment, and is from the start point Sls to the end point Sl of the interrupted section Sl (see FIG. 4). , It is displayed in a limited manner as an image unit that replaces the section line emphasized image unit LPl.
  • the virtual lane marking image section LPv is displayed on the extension of the lane marking image section LPl, and extends linearly along the road edge Er and the lane marking image section LPr on the right side of the vehicle.
  • the virtual lane marking image section LPv complements the broken lane marking Ll on the left side of the own vehicle, and together with the lane marking-enhanced image section LPr on the right side of the own vehicle, makes the virtual own lane Lns appear in the angle of view VA.
  • the virtual division line image unit LPv is displayed with substantially the same brightness and display color as the division line emphasized image unit LPl. As described above, the virtual division line image unit LPv can be visually recognized by the driver as an image unit having continuity with the division line emphasized image unit LPl.
  • the virtual lane marking image section LPv has a drawing shape different from that of the lane marking-enhanced image section LPl, and is specifically drawn in a broken line shape. With such a drawing shape, the virtual lane marking image unit LPv clearly indicates to the driver the switching of the control target Tc from one of the lane marking Ll and the road edge Er to the other.
  • the LTA content CTlt changes to include the virtual division line image unit LPv, so that the driver can be notified of the change in the controlled target Tc. Therefore, even in the fourth embodiment, the driver's anxiety about the behavior change caused by the switching of the controlled target Tc can be suppressed.
  • the virtual division line image unit LPv is superimposed and displayed on the extension of the division line emphasized image unit LPl. Based on the above, it is unlikely that the linear image portion displayed in the vicinity of the road edge Er gives the driver a misunderstanding that the driver is traveling near the road edge Er. In this way, the LTA content CTlt that intentionally displays the virtual lane marking image unit LPv at a position on the center side away from the road edge Er can contribute to reducing the driver's anxiety.
  • the fifth embodiment of the present disclosure shown in FIG. 11 is a modification of the second embodiment.
  • the LTA content CTlt of the fifth embodiment includes a center-enhanced image portion LPc instead of the two division line-enhanced image portions LPl and LPr (see FIG. 7).
  • the center-enhanced image unit LPc is an image unit that extends linearly along the own lane Lns, similarly to the section line-enhanced image units LPl and LPr.
  • the center-enhanced image unit LPc is superimposed and displayed in the substantially center of the own lane Lns.
  • the center-enhanced image unit LPc is drawn based on the line shape information as in the predicted locus content CTp (see FIG. 9) of the third embodiment, and notifies the driver of the shape of the planned traveling line PRL (see FIG. 4).
  • the display generation unit 74 displays the notice icon CTni as the non-superimposed content CTn (see FIG. 8) based on the grasp of the interrupted section Sl.
  • the notice icon CTni is displayed on the division line Ll side that is interrupted with respect to the center-enhanced image portion LPc so as not to overlap with the center-enhanced image portion LPc.
  • the display generation unit 74 moves the notice icon CTni toward the start point Sls in accordance with the approach of the start point Sls into the angle of view VA, and superimposes the display on the road surface above (front) of the start point Sls.
  • the notice icon CTni moved on the extension of the lane marking Ll on the left side of the own vehicle becomes the superimposed content CTs constituting the LTA content CTlt together with the center-enhanced image portion LPc.
  • the display generation unit 74 changes the center-enhanced image unit LPc into a shape that bends toward the road end Er side.
  • the LTA content CTlt notifies the driver of the change of the control target Tc by the mode change in which the additional display of the notice icon CTni and the bending display of the center-enhanced image unit LPc are combined.
  • the LTA content CTlt can notify the driver of the change in the controlled target Tc as in the second embodiment. Therefore, the driver's anxiety about the behavior change caused by the switching of the controlled target Tc can be suppressed.
  • the sixth embodiment of the present disclosure shown in FIGS. 12 to 19 is a modification of the third embodiment. Similar to the third embodiment, the display generation unit 74 (see FIG. 3) of the sixth embodiment displays the expected locus content CTp and the target emphasized content CTet according to the control state of the lane keeping control units 51 and 53. (See FIGS. 14 and 15).
  • the predicted locus content CTp is superimposed content CTs indicating the planned traveling line PRL of the vehicle A.
  • the target-emphasized content CTet is superimposed content CTs that emphasize the lane marking Ll or the road edge Er, which is the control target Tc.
  • the target-emphasized content CTet corresponds to the LTA content CTlt (see FIG. 5) of the first embodiment, and can show a change in the controlled target Tc.
  • S605 based on the target information acquired in S604 immediately before, it is determined whether or not there is a plan to switch the control target Tc from the lane marking Ll to the road end Er on either the left or right side. If it is determined in S605 that the lane keeping control with the lane marking Ll as the control target Tc is continued on both the left and right sides, the process proceeds to S606. In S606, the locus display of the LTA (see the upper part of FIG. 14) is started and continued, and the process proceeds to S610.
  • the locus display of the LTA includes the expected locus content CTp.
  • the predicted locus content CTp is superimposed on the center of the road surface ahead of the own lane Lns in a single line shape, and visualizes the planned traveling line PRL.
  • the predicted locus content CTp is superimposed on the road surface position which is approximately equidistant from the controlled target Tc on both the left and right sides.
  • the expected locus content CTp is drawn in a dotted line shape (broken line shape) extending along the extending direction of the own lane Lns. Due to such a drawing shape, it is difficult for the driver to recognize the deviation of the superimposed content with respect to the road.
  • the predicted locus content CTp is not always displayed even during the period when the lane keeping control is in the execution state.
  • the predicted locus content CTp repeats a display state and a non-display state at a predetermined cycle by blinking display.
  • the predicted locus content CTp is in the display state for 5 seconds, then in the non-display state for 5 seconds, and then returns to the display state.
  • the period of the hidden state may be shorter or longer than the period of the displayed state.
  • start point Sls is detected in S605 and it is determined that the type change of the control target Tc from the lane marking Ll to the road end Er occurs, the process proceeds to S607.
  • start point Sls it is determined whether or not the transition position (start point Sls) of the control target Tc is within the angle of view VA. If it is determined in S607 that the transition position is outside the angle of view VA, the process proceeds to S608.
  • the offset notice display (see the middle section of FIG. 14) for notifying the switching of the control target Tc from the lane marking Ll to the road end Er is started and continued, and the process proceeds to S610.
  • the offset notice display includes the target emphasized content CTet.
  • the division line emphasized image unit LPl is superimposed and displayed on the road surface as the target emphasized content CTet.
  • the lane marking-enhanced image unit LPl is displayed in association with the lane marking Ll based on the target position information of the lane marking Ll, which is not detected (on the left side in FIG. 14).
  • the lane marking-enhanced image section LPl is drawn in a solid line extending along the adjacent lane marking Ll.
  • the lane marking-enhanced image section LPl continues to be displayed without blinking.
  • the expected trajectory content CTp (see the upper part of FIG. 14) is hidden.
  • the display of the predicted locus content CTp ends at the start of the display of the division line emphasized image unit LPl.
  • the display end of the predicted locus content CTp may be substantially simultaneous with the display start of the lane marking image section LPl, or may be immediately before or immediately after the display start of the lane marking image section LPl.
  • the lane marking-enhanced image unit LPl is displayed with a brightness higher than the expected locus content CTp at which the display is terminated.
  • the display color of the lane marking-enhanced image section LPl may be substantially the same as the predicted locus content CTp, or may be different from the predicted locus content CTp.
  • the division line emphasized image unit LPl may be displayed with substantially the same brightness as the expected locus content CTp.
  • the offset start display includes the target emphasized content CTet and the expected locus content CTp.
  • the target-enhanced content CTet has a lane marking-enhanced image portion LPl and a road edge-enhanced image portion LPe.
  • the display generation unit 74 superimposes and displays the lane marking image section LPl in association with the lane marking Ll, and connects the display generation unit 74 to the lane marking image section LPl.
  • the road edge emphasized image section LPe is superimposed and displayed in association with the road edge Er.
  • the display generation unit 74 When transitioning from the offset notice display to the offset start display, the display generation unit 74 extends the end portion on the back side of the lane marking image unit LPl toward the road end Er based on the target position information of the road end Er. Further, the display generation unit 74 starts the display of the road edge-enhanced image unit LPe by extending the end portion of the lane marking image unit LPl that has reached the vicinity of the road end Er. Along the road edge Er.
  • the display generation unit 74 redisplays the expected locus content CTp at the timing of starting the extension of the lane marking image unit LPl to the road end Er.
  • the predicted locus content CTp has a shape curved or bent toward the target emphasized content CTet side (left side) so as to indicate the implementation of the offset by the lane keeping control units 51 and 53.
  • the blinking of the expected locus content CTp is interrupted.
  • the predicted locus content CTp continues to be displayed until the lateral movement of the vehicle A is completed.
  • S610 it is determined whether or not the lateral movement accompanying the offset control is completed. If it is determined in S610 that the lateral movement is not completed, the process proceeds to S611. Even if there is no change in the control target Tc, the process proceeds from S610 to S611. In S611, it is determined whether or not the execution state of the lane keeping control has ended. If it is determined in S611 that the execution state of the lane keeping control is continuing, the process returns to S604. On the other hand, if it is determined in S611 that the lane keeping control has transitioned to the off state, the process proceeds to S620 and the LTA-related content display is terminated.
  • the offset continuous display includes the target emphasized content CTet and the expected locus content CTp.
  • the road edge emphasized image unit LPe is continuously displayed inside the road edge Er as the target emphasized content CTet.
  • the road edge-enhanced image unit LPe ends the display at the timing when a predetermined time (for example, about 5 seconds) continues after the completion of the lateral movement of the own vehicle for offsetting.
  • the expected locus content CTp is hidden at the timing when a predetermined time (for example, about 5 seconds) continues after the lateral movement of the own vehicle is completed.
  • the predicted locus content CTp is blinking and displayed in the same manner as the normal locus display (see the upper part of FIG. 14) while the own vehicle is traveling in the interrupted section Sl (see the broken line in FIG. 15).
  • the predicted locus content CTp is once hidden, and then, for example, the non-display continuation for 5 seconds and the display continuation for 5 seconds are repeated.
  • S613 If it is determined in S613 that the lane marking Ll has been rediscovered, the process proceeds to S615.
  • S615 it is determined whether or not the rediscovery position (end point Sl) of the lane marking Ll is within the angle of view VA. If it is determined in S615 that the end point Sl of the break section Sl is outside the angle of view VA, the process proceeds to S616.
  • S616 the release notice display (see the middle stage of FIG. 15) for notifying the switching of the control target Tc from the road end Er to the lane marking Ll, in other words, the cancellation of the offset control, is started and continued, and the process proceeds to S618.
  • the cancellation notice display includes the target emphasized content CTet and the expected locus content CTp.
  • the virtual division line image unit LPv2 is displayed inside the road edge Er as the target emphasized content CTet.
  • the virtual lane marking image unit LPv2 is a solid line in which the end portion (end point Sl) of the lane marking Ll outside the re-detected angle of view VA is superimposed and displayed on the extension extending toward the vehicle along the road end Er. It is an image part of the shape.
  • the virtual division line image unit LPv2 is apparently extended so as to be continuous with the division line Ll outside the angle of view VA.
  • the virtual division line image unit LPv2 is displayed with a brightness higher than that of the expected locus content CTp.
  • the virtual lane marking image section LPv2 may be displayed in a display color different from the predicted trajectory content CTp or the road edge enhanced image section LPe, or may be displayed in the same display color as the predicted trajectory content CTp or the road edge enhanced image section LPe. May be done.
  • the predicted locus content CTp is interrupted from blinking and is maintained in the displayed state.
  • S615 If it is determined in S615 that the end point Sl of the interrupted section Sl is within the angle of view VA, the process proceeds to S617.
  • S617 the offset release display (see the lower part of FIG. 15) indicating the switching of the control target Tc from the road end Er to the lane marking Ll is started and continued, and the process proceeds to S618.
  • the display of the target emphasized content CTet and the expected locus content CTp is continued.
  • the virtual lane marking image unit LPv2 displayed as the target emphasized content CTet is superimposed and displayed on the own vehicle side of the lane marking Ll so as not to overlap with the actual lane marking Ll.
  • the display of the virtual division line image unit LPv2 is terminated by the frame-out of the end point Sl of the interrupted section Sl.
  • the predicted locus content CTp has a shape curved or bent toward the opposite side (right side) of the target emphasized content CTet so as to indicate the cancellation of the offset by the lane keeping control units 51 and 53.
  • the expected locus content CTp continues to be displayed without blinking until the lateral movement is completed.
  • S619 it is determined whether or not the lateral movement accompanying the release of the offset control is completed. If it is determined in S619 that the lateral movement is not completed, the process returns to S612. On the other hand, even if the undetected state of the lane marking Ll on the (left side) continues, the process returns from S619 to S612. On the other hand, when it is determined in S619 that the lateral movement is completed, the process returns to S604.
  • the lane keeping control units 51 and 53 perform offset control not only when the control target Tc changes from the lane marking Ll to the roadside Er, but also when overtaking a specific target target (for example, a large vehicle AL or the like). carry out. Specifically, when the lane keeping control units 51 and 53 overtake the large vehicle AL running in parallel in the adjacent lane, the lane keeping control units 51 and 53 offset the traveling position in the own lane Lns in the direction away from the large vehicle AL. The lane keeping control units 51 and 53 sequentially provide the HCU 100 with control information related to such a large vehicle offset control.
  • the lane keeping control units 51 and 53 can perform both offset control toward the road edge Er (hereinafter referred to as road edge offset control) and large vehicle offset control in parallel. More specifically, as shown in FIGS. 16 and 17, the lane keeping control units 51 and 53 control the large vehicle offset when the own vehicle overtakes the large vehicle AL during the road end offset control in the interrupted section Sl. Is further implemented.
  • road edge offset control the road edge offset control
  • the lane keeping control units 51 and 53 control the large vehicle offset when the own vehicle overtakes the large vehicle AL during the road end offset control in the interrupted section Sl.
  • the display generation unit 74 has a road end offset display (see FIG. 18) corresponding to the above-mentioned offset start display (see the lower part of FIG. 14). (Refer to the upper row).
  • the road edge offset display includes the target emphasized content CTet and the expected locus content CTp.
  • the target-enhanced content CTet integrally has a lane-enhanced image portion LPr and a road edge-enhanced image portion LPe, and crosses the inner side of the starting point Sls so as to cross the inner side of the lane marking Ll to the road edge Er. It extends inward.
  • the predicted locus content CTp has a shape that bends to the road end Er side (right side) at the back side of the start point Sls, and draws the planned running line PRL in the road end offset control on the front road surface.
  • the display generation unit 74 indicates the large vehicle offset corresponding to the above-mentioned offset continuous display (see the upper part of FIG. 15). Display (see the lower part of Fig. 18).
  • the large vehicle offset display includes the target emphasized content CTet (road edge emphasized image unit LPe) and the expected locus content CTp.
  • the roadside-enhanced image unit LPe clearly indicates to the driver that the vehicle does not deviate outward from the roadside Er.
  • the expected locus content CTp continues to be displayed without blinking.
  • the predicted locus content CTp has a shape of bending toward the LPe side (right side) of the road edge emphasized image portion and extending to the back side, and draws the planned traveling line PRL in the large vehicle offset control on the front road surface.
  • the large vehicle offset release display also includes the target emphasized content CTet (road edge emphasized image unit LPe) and the expected locus content CTp.
  • the predicted locus content CTp exhibits a shape that bends to the opposite side (left type) of the road edge emphasized image portion LPe and extends to the back side, and draws a planned traveling line PRL for releasing the offset control of the large vehicle on the front road surface.
  • the road end offset release display is a display corresponding to the above-mentioned offset release display (see the lower part of FIG. 15), and includes a virtual lane marking image unit LPv2 as the target emphasized content CTet and the expected locus content CTp.
  • the predicted locus content CTp exhibits a shape that bends to the opposite side (left side) of one of the rediscovered lane markings Ll and extends to the back side, and draws a planned traveling line PRL on the front road surface to release the road end offset control. ..
  • the driver is notified of the scheduled change of the controlled object Tc by the offset start display and the offset release display. Therefore, the driver's anxiety about the behavior change caused by the switching of the controlled target Tc can be suppressed.
  • the display generation unit 74 of the sixth embodiment emphasizes the division line Ll visually recognized in the angle of view VA when the transition position of the control target Tc from the division line Ll to the road edge Er is outside the angle of view VA.
  • the target-emphasized content CTet is displayed in such a manner.
  • the offset notice display (see the middle part of FIG. 14) including the target-emphasized content CTe foretells the change of the control target Tc. According to the above, the driver can know the execution schedule of the behavior change with a sufficient margin before the behavior change due to the switching of the control target Tc is started. Therefore, driver anxiety can be further suppressed.
  • the display generation unit 74 of the sixth embodiment superimposes and displays the road edge enhanced image unit LPe in a state of being connected to the lane marking image unit LPr.
  • the control target Tc can be displayed. Changes can be clearly shown to the driver.
  • the display generation unit 74 of the sixth embodiment hides the expected locus content CTp when displaying the target emphasized content CTet in the offset notice display.
  • the driver can easily recognize the target emphasized content CTet.
  • the change in the controlled target Tc can be grasped by the driver at an early stage, and the effect of suppressing the driver's anxiety can be further exerted.
  • the display generation unit 74 changes the behavior of the own vehicle by each offset control by the road edge offset display and the large vehicle offset display. , Can notify the driver individually. As a result, even if the behavior of the own vehicle is repeatedly changed, the effect of suppressing the driver's anxiety can be exhibited.
  • the target emphasized content CTet corresponds to the "controlled content”.
  • the LTA content CTlts of the first to fourth embodiments had a double line shape. Further, the LTA content CTlt of the fifth embodiment and the target emphasized content CTet of the sixth embodiment exhibited a single line. As described above, the drawing shapes and the like of the LTA content CTlt and the target emphasized content CTet corresponding to the “controlled content” are not limited to those of the above embodiment, and may be changed as appropriate.
  • the LTA content CTlt having a drawing shape that completely fills the range within the angle of view VA on the road surface of the own lane Lns is displayed.
  • the LTA content CTlt of the second modification of the above embodiment is displayed as a non-superimposed content CTn whose display position is not associated with the control target Tc.
  • the object-enhanced content CTet further having the division line-enhanced image portion LPr that emphasizes the other (right side) division line Ll on which the detection is continued is, for example, offset start display and offset. It is displayed on the release display, etc.
  • the display of the target emphasized content CTet in the offset notice display is omitted, and the expected locus content CTp notifies the switching schedule of the control target as the LTA content CTlt.
  • the lane marking image section LPl, LPr associated with the lane marking Ll and the road edge enhanced image section LPe associated with the road edge Er are drawn in different modes from each other.
  • the line width, brightness, display color, and the like of each of these emphasized image portions may be substantially the same as each other.
  • the display of the advance notice icon CTni and the expected locus content CTp which have been carried out supplementarily, may be omitted.
  • the predicted locus content CTp may be displayed substantially all the time during the period when the lane keeping control is in the execution state.
  • the offset start display and the offset release display had substantially the same contents.
  • the offset start display and the offset release display may have different contents.
  • the notice icon CTni and the switching animation may be displayed only in the offset start display and may not be displayed in the offset release display.
  • the contents of the lane keeping control carried out by the lane keeping control units 51 and 53 may be changed as appropriate.
  • the lane keeping control units 51 and 53 may be able to generate a scheduled traveling line PRL that suppresses the occurrence of lateral movement of the vehicle A in the interrupted section Sl. That is, the lateral movement in the interrupted section Sl does not always have to occur. Even in such a form, the effect of notifying the lateral movement in advance can be exhibited.
  • the lane keeping control units 51 and 53 can carry out lane keeping control so as to maintain the distance from the lane marking Ll based on the lane marking Ll where the break does not occur.
  • lane maintenance control when the lane keeping control unit 51, 53 has a break in the lane marking Ll on the left side of the vehicle, the distance from the lane marking Ll on the right side of the vehicle is used as a reference. It is possible to continue running while maintaining. According to such lane keeping control, lateral movement of the vehicle A due to the approach to the interrupted section Sl is less likely to occur.
  • the control target Tc notified by the LTA content CTlt may be limited to road markings formed on the road surface and fixed to the road surface. That is, a target that can be moved by itself, such as a vehicle on the road surface, does not have to be included in the control target Tc notified of the change.
  • Both the driving support ECU 50 and the automatic driving ECU 52 were mounted on the vehicle A of the above embodiment. However, only one ECU may have a lane keeping function. In the modified example 5 of the above embodiment, one ECU having the functions of both the driving support ECU 50 and the automatic driving ECU 52 is provided. Further, in the modification 6 of the above embodiment, of the two ECUs, only the driving support ECU 50 is mounted on the vehicle A. Further, in the modification 7 of the above embodiment, of the two ECUs, only the automatic driving ECU 52 is mounted on the vehicle A.
  • the LTA content CTlt of the above embodiment has static elements such as display color, display brightness, and reference display shape, and dynamic such as blinking presence / absence, blinking cycle, animation presence / absence, and animation operation.
  • the elements may be changed as appropriate.
  • the static or dynamic elements of the LTA content CTlt may be modifiable according to the driver's preferences.
  • other content different from the LTA content may be appropriately displayed in the angle of view VA.
  • the HCU of the above embodiment sequentially controls the projection shape and projection position of the virtual image light imaged as the superimposed content CTs so that the superimposed content is superimposed on the superimposed object without deviation when viewed from the driver.
  • the HCU used the position information of the eye point detected by the DSM and the attitude information of the vehicle output to the communication bus for such correction processing.
  • the HCU may perform correction control of the projected shape and the projected position of the virtual image light only by either the position information of the eye point or the attitude information of the vehicle. Further, the correction control of the virtual image light using the position information of the eye point and the attitude information of the vehicle may not be performed at the same time.
  • the HCU may sequentially control the projection shape and projection position of the virtual image light imaged as the superimposed content by further using the detection information of the gyro sensor provided in the HUD, for example.
  • the gyro sensor is a posture sensor that mainly detects a posture change in the pitch direction of a vehicle. By using such an attitude sensor, the superimposed content can be superimposed on the superimposed object more accurately.
  • the HUD projector of the modified example 8 is provided with an EL (ElectroLuminescence) panel instead of the LCD panel and the backlight. Further, instead of the EL panel, a projector using a display such as a plasma display panel, a cathode ray tube and an LED can be adopted for the HUD 20.
  • EL ElectroLuminescence
  • the HUD of the modified example 9 is provided with a laser module (hereinafter, LSM) and a screen instead of the LCD and the backlight.
  • LSM includes, for example, a laser light source, a MEMS (Micro Electro Mechanical Systems) scanner, and the like.
  • the screen is, for example, a micromirror array or a microlens array.
  • a display image is drawn on the screen by scanning the laser beam emitted from the LSM.
  • the HUD projects the display image drawn on the screen onto the windshield by the magnifying optical element, and displays the virtual image in the air.
  • the HUD of the modified example 10 is provided with a DLP (Digital Light Processing, registered trademark) projector.
  • a DLP projector has a digital mirror device (hereinafter, DMD) provided with a large number of micromirrors, and a projection light source that projects light toward the DMD.
  • the DLP projector draws a display image on the screen under the control of linking the DMD and the projection light source.
  • a projector using LCOS Liquid Crystal On Silicon
  • a holographic optical element is adopted as one of the optical systems for displaying the virtual image Vi in the air.
  • the HCU and the HUD are integrally configured. That is, the HUD control circuit is equipped with the HCU processing function. In such a modification 13, the HUD corresponds to the "display control device". Further, the processing function of the HCU of the modification 14 is provided in the meter ECU. In addition to such a meter ECU, an HCU processing function may be mounted on a navigation ECU, a display audio ECU, or the like. In such a modification 14 and the like, the meter device, the navigation device, and the display audio device correspond to the “display control device”.
  • the front detection range of the front camera 31 (peripheral monitoring sensor 30) is wider in front of the vehicle than the front road surface range that overlaps with the angle of view VA when viewed from the eye point EP.
  • the front detection range of the front camera of the modified example 15 may be defined narrower on the own vehicle side than the front road surface range that overlaps with the angle of view VA. In such a modification 15, the offset notice display and the face notice display are omitted.
  • the HCU 100 is provided with a camera image acquisition unit that acquires the imaged data obtained by capturing the foreground of the own vehicle, which is the imaged data of the front camera 31.
  • the display generation unit 74 generates video data obtained by superimposing an original image such as an LTA content CTlt on a real image of the foreground based on the captured data.
  • the HUD 20 displays a video in which each content is superimposed on a real image as a virtual image in the foreground.
  • a virtual image display in which the original image such as the content used for the AR display is superimposed on the real image may be performed.
  • each function provided by the HCU can be provided by the software and the hardware that executes the software, the hardware only, the hardware only, or a combination thereof. Further, when such a function is provided by an electronic circuit as hardware, each function can also be provided by a digital circuit including a large number of logic circuits or an analog circuit.
  • the form of the storage medium (sustainable tangible computer reading medium, non-transitory tangible storage medium) for storing the programs (display control program and vehicle program) that can realize the above display control method is also changed as appropriate.
  • the storage medium is not limited to the configuration provided on the circuit board, and may be provided in the form of a memory card or the like, inserted into the slot portion, and electrically connected to the control circuit of the HCU. ..
  • the storage medium may be an optical disk and a hard disk drive that serve as a copy base for the program to the HCU.
  • the vehicle equipped with the HMI system is not limited to a general private car, but may be a vehicle for rent-a-car, a vehicle for a manned taxi, a vehicle for ride sharing, a freight vehicle, a bus, or the like.
  • the vehicle equipped with the HMI system may be a right-hand drive vehicle or a left-hand drive vehicle.
  • the traffic environment in which the vehicle travels may be a traffic environment premised on left-hand traffic, or may be a traffic environment premised on right-hand traffic.
  • the content display according to the present disclosure is appropriately optimized according to the road traffic law of each country and region, the steering wheel position of the vehicle, and the like.
  • control unit and its method described in the present disclosure may be realized by a dedicated computer constituting a processor programmed to execute one or a plurality of functions embodied by a computer program.
  • the apparatus and method thereof described in the present disclosure may be realized by a dedicated hardware logic circuit.
  • the apparatus and method thereof described in the present disclosure may be realized by one or more dedicated computers configured by a combination of a processor that executes a computer program and one or more hardware logic circuits.
  • the computer program may be stored in a computer-readable non-transitional tangible recording medium as an instruction executed by the computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Instrument Panels (AREA)

Abstract

HCUは、車線維持機能を備える車両(A)において用いられ、ヘッドアップディスプレイによる表示を制御する表示制御装置の機能を有している。車線維持機能は、路面情報に基づき特定される自車車線(Lns)内での走行が継続されるように、運転制御を実施する。HCUは、車線維持制御に用いられる路面上の制御対象(Tc)を示す対象情報を取得し、車線維持制御に用いられる制御対象(Tc)が変わる場合に、制御対象(Tc)の変化を示すLTAコンテンツ(CTlt)を表示させる。

Description

表示制御装置、表示制御プログラム及び車載システム 関連出願の相互参照
 この出願は、2019年10月17日に日本に出願された特許出願第2019-190360号、及び、2020年5月25日に日本に出願された特許出願第2020-90877号を基礎としており、基礎の出願の内容を、全体的に、参照により援用している。
 この明細書による開示は、ヘッドアップディスプレイによる表示を制御する表示制御の技術に関する。
 例えば特許文献1には、ヘッドアップディスプレイを用いて前方の実像に表示映像を重畳させる車両用表示装置が開示されている。この車両用表示装置は、例えば車線変更を誘導する矢印等の表示物を、前景中の路面等に重畳表示させる。
国際公開第2015/118859号
 近年、運転制御を行う機能を備えた車両が普及しつつある。一例として、路面情報に基づき特定した走路内での走行が継続されるよう運転制御を行うことが可能である。こうした車両では、運転制御に用いられる路面上の制御対象が変化すると、車両の挙動にも変化が生じ得る。しかし、特許文献1には、制御対象の変化、ひいては車両挙動の変化が、ドライバに通知されない。そのため、運転制御された車両のドライバは、車両の挙動変化に不安を感じる可能性があった。
 本開示は、車両挙動の変化に対するドライバの不安を抑制可能な表示制御装置等の提供を目的とする。
 上記目的を達成するため、開示された一つの態様は、路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持機能を備える車両において用いられ、ヘッドアップディスプレイによる表示を制御する表示制御装置であって、運転制御に用いられる路面上の制御対象を示す対象情報を取得する情報取得部と、運転制御に用いられる制御対象が変わる場合に、制御対象の変化を示す制御対象コンテンツを表示させる表示制御部と、を備える表示制御装置とされる。
 また開示された一つの態様は、路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持機能を備える車両において用いられ、ヘッドアップディスプレイによる表示を制御する表示制御プログラムであって、少なくとも一つの処理部に、運転制御に用いられる路面上の制御対象を示す対象情報を取得し、運転制御に用いられる制御対象が変わる場合に、制御対象の変化を示す制御対象コンテンツを表示させる、ことを含む処理を実施させる表示制御プログラムとされる。
 また開示された一つの態様は、車両において用いられ、ヘッドアップディスプレイによる表示を制御する車載システムであって、路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持制御部と、運転制御に用いられる路面上の制御対象を示す対象情報を取得する情報取得部と、運転制御に用いられる制御対象が変わる場合に、制御対象の変化を示す制御対象コンテンツを表示させる表示制御部と、を備える車載システムとされる。
 これらの態様では、運転制御に用いられる路面上の制御対象が変わると、制御対象の変化を示す制御対象コンテンツが表示される。そのためドライバは、運転制御の制御対象の変化を、制御対象コンテンツを見ることで予め認識できる。したがって、車両挙動に変化が生じたとしても、こうした挙動変化に対するドライバの不安は、抑制され得る。
 尚、請求の範囲等における括弧内の参照番号は、後述する実施形態における具体的な構成との対応関係の一例を示すものにすぎず、技術的範囲を何ら制限するものではない。
本開示の第一実施形態によるHCUを含む車載ネットワークの全体像を示す図である。 車両に搭載されるヘッドアップディスプレイの一例を示す図である。 HCUの概略的な構成の一例を示す図である。 LTAコンテンツに含まれる各強調画像部の重畳レイアウトの詳細を模式的に示す図である。 制御対象の種別変化を示すためのLTAコンテンツの表示変化を順に示す図である。 HCUにて実施される表示制御処理の詳細を示すフローチャートである。 第二実施形態の表示制御処理の詳細を示すフローチャートである。 第二実施形態のLTAコンテンツの表示変化を順に示す図である。 第三実施形態のLTAコンテンツの表示変化を順に示す図である。 第四実施形態のLTAコンテンツを示す図である。 第五実施形態のLTAコンテンツを示す図である。 第六実施形態の表示制御処理の詳細を、図13と共に示すフローチャートである。 表示制御処理の詳細を、図12と共に示すフローチャートである。 道路端へ向かうオフセット制御が開始されるときのLTAコンテンツの表示変化を順に示す図である。 オフセット制御が解除されるときのLTAコンテンツの表示変化を順に示す図である。 道路端へ向かうオフセット制御と、大型車から離れるオフセット制御とを連続実施するシーンを説明するための図である。 道路端オフセット制御及び大型車オフセット制御を続けて解除するシーンを説明するための図である。 図16に示すシーンでのオフセット表示の一例を示す図である。 図17に示すシーンでのオフセット表示の一例を示す図である。
 以下、本開示の複数の実施形態を図面に基づいて説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合わせることができる。そして、複数の実施形態及び変形例に記述された構成同士の明示されていない組み合わせも、以下の説明によって開示されているものとする。
 (第一実施形態)
 本開示の第一実施形態による表示制御装置の機能は、図1及び図2に示すHCU(Human Machine Interface Control Unit)100によって実現されている。HCU100は、車両Aにおいて用いられるHMI(Human Machine Interface)システム10を、ヘッドアップディスプレイ(以下、HUD)20等と共に構成している。HMIシステム10には、操作デバイス26及びドライバステータスモニタ(以下、DSM)27等がさらに含まれている。HMIシステム10は、車両Aの乗員(例えばドライバ等)によるユーザ操作を受け付ける入力インターフェース機能と、ドライバへ向けて情報を提示する出力インターフェース機能とを備えている。
 HMIシステム10は、車両Aに搭載された車載ネットワーク1の通信バス99に通信可能に接続されている。HMIシステム10は、車載ネットワーク1に設けられた複数のノードのうちの一つである。車載ネットワーク1の通信バス99には、周辺監視センサ30、ロケータ40、運転支援ECU(Electronic Control Unit)50及び自動運転ECU52等がノードとして接続されている。通信バス99に接続されたこれらのノードは、相互に通信可能である。これら装置及び各ECUのうちの特定ノード同士は、相互に直接的に電気接続され、通信バス99を介することなく通信を実施可能であってよい。
 尚、以下の説明における前後(図2 前方Ze及び後方Go参照)及び左右(図2 側方Yo参照)の各方向は、水平面上に静止させた車両Aを基準として規定される。具体的に、前後方向は、車両Aの長手方向(進行方向)に沿って規定される。また左右方向は、車両Aの幅方向に沿って規定される。さらに、上下(図2 上方Ue及び下方Si参照)の方向は、前後方向及び左右方向を規定した水平面の鉛直方向に沿って規定される。また、記載の簡略化のため、各方向を示す符号の記載を適宜省略する場合がある。
 周辺監視センサ30は、車両Aの周辺環境を監視する自律センサである。周辺監視センサ30は、自車周囲の検出範囲から、歩行者、サイクリスト、人間以外の動物、及び他車両等の移動物体、さらに路上の落下物、ガードレール、縁石、道路標識、道路区画線等の路面標示及び道路脇にある構造物等の静止物体、を検出可能である。周辺監視センサ30は、車両Aの周囲の物体を検出した検出情報を、運転支援ECU50等に提供する。
 周辺監視センサ30は、物体検出のための検出構成として、フロントカメラ31を有している。フロントカメラ31は、車両Aの前方範囲を撮影した撮像データ、及び撮像データの解析結果の少なくとも一方を、検出情報として出力する。周辺監視センサ30は、フロントカメラ31と共に、ミリ波レーダ、ライダ及びソナー等の検出構成を有していてもよい。
 ロケータ40は、複数の取得情報を組み合わせる複合測位により、車両Aの高精度な自車の位置情報等を生成する。ロケータ40は、GNSS(Global Navigation Satellite System)受信器41、慣性センサ42、高精度地図データベース(以下、高精度地図DB)43、及びロケータECU44を含む構成である。
 GNSS受信器41は、複数の人工衛星(測位衛星)から送信された測位信号を受信する。慣性センサ42は、例えばジャイロセンサ及び加速度センサを含んでいる。高精度地図DB43は、不揮発性メモリを主体に構成されており、高精度な地図データ(以下、高精度地図データ)を記憶している。高精度地図データは、経路案内に用いられるナビゲーション用の地図データ(以下、ナビ地図データ)よりも高精度な地図データである。高精度地図データは、高度運転支援及び自動運転に利用可能な地図データである。高精度地図データには、道路の三次元形状情報、レーン数情報、各レーンに許容された進行方向を示す情報等が含まれている。さらに、高精度地図データには、例えば白線等の道路標示の位置を特定可能なノード点の情報が含まれている。
 ロケータECU44は、プロセッサ、RAM、記憶部、入出力インターフェース、及びこれらを接続するバス等を備えたマイクロコンピュータを主体として含む構成である。ロケータECU44は、GNSS受信器41で受信する測位信号、慣性センサ42の計測結果、及び通信バス99に出力された車速情報等を組み合わせ、車両Aの自車位置及び進行方向等を逐次測位する。ロケータECU44は、測位結果に基づく車両Aの位置情報及び方角情報を、通信バス99を通じて、HCU100、運転支援ECU50及び自動運転ECU52等に提供する。加えてロケータECU44は、運転支援ECU50及び自動運転ECU52等からの要求に応じて、要求された高精度地図データを要求元のECUに提供可能である。
 運転支援ECU50及び自動運転ECU52は、それぞれプロセッサ、RAM、記憶部、入出力インターフェース、及びこれらを接続するバス等を備えたコンピュータを主体として含む構成である。運転支援ECU50及び自動運転ECU52は、HCU100等と共に、車両側にて必要とされる演算の大部分を処理する車載システム110を構築している。
 運転支援ECU50は、ドライバの運転操作を支援する運転支援機能を備えている。自動運転ECU52は、ドライバの運転操作を代行可能な自動運転機能を備えている。一例として、米国自動車技術会の規定する自動運転レベルにおいて、運転支援ECU50は、レベル2以下の部分的な自動走行制御(高度運転支援)を可能にする。一方、自動運転ECU52は、レベル3以上の自動走行制御を可能にする。
 運転支援ECU50及び自動運転ECU52は、それぞれ周辺監視センサ30から取得する検出情報に基づき、後述の運転制御のため、車両Aの周囲の走行環境を認識する。各ECU50,52は、走行環境認識のために実施した検出情報の解析結果を、HCU100に提供する。
 具体的に、各ECU50,52は、前方範囲の路面に関する路面情報を、検出情報に基づく解析結果の一つとして生成し、HCU100に提供可能である。路面情報には、車両Aが現在走行する車線(以下、自車車線Lns,図4参照)、言い替えれば、自車の走路を特定するための情報が含まれている。具体的には、左右の区画線Ll又は道路端Er(共に図4参照)の相対位置及び形状を示す情報が、路面情報には含まれている。道路端Erは、例えば縁石、ガードレール、道路脇の壁に書かれた線、車線外の積雪、パイロン、ポールコーン、並びに区画線Llに近い路肩壁、ダート及び草等の認識に基づき、特定される。
 各ECU50,52は、区画線Ll及び道路端Erのそれぞれを特定する処理を併行実施している。各ECU50,52は、左右それぞれについて、区画線Llを特定できている場合には、区画線Llに関する情報を出力し、道路端Erに関する情報の出力を中断する。各ECU50,52は、左右いずれかの側に区画線Llの途切れた区間(以下、途切れ区間Sl,図4参照)が発生した場合、区画線Llに関する情報に替えて、道路端Erに関する情報を出力する。こうした途切れ区間Slにおいても、区画線Llが存在している側(図4では右側)については、区画線Llに関する情報の出力が継続される。
 尚、本実施形態における前後及び左右の各方向は、上述したように、水平面上に静止させた車両Aを基準として規定される。具体的に、前後方向は、水平面上に静止した車両Aの長手方向に沿って規定される。また左右方向は、水平面上に静止した車両Aの幅方向に沿って規定される。
 運転支援ECU50は、プロセッサによるプログラムの実行により、高度運転支援を実現する複数の機能部を有する。具体的に、運転支援ECU50は、上述の走行環境を認識する機能部に加えて、ACC(Adaptive Cruise Control)制御部及び車線維持制御部51を有する。ACC制御部は、目標車速で車両Aを定速走行させるか、又は前走車との車間距離を維持しつつ車両Aを前走車に追従走行させるACCの機能を実現する機能部である。
 車線維持制御部51は、車両Aの車線内走行を制御するLTA(Lane Tracing Assist)の機能を実現する機能部である。LTAは、LTC(Lane Trace Control)とも呼称される。車線維持制御部51は、走行環境認識によってフロントカメラ31の撮像データから抽出される区画線Ll又は道路端Erの位置及び形状情報に基づき、車両Aの操舵輪の舵角を制御する。車線維持制御部51は、走行中の走路である自車車線Lns内での走行が継続されるよう、当該自車車線Lnsに沿う形状の予定走行ラインPRLを生成する。車線維持制御部51は、左右の制御対象Tcから概ね等距離となる自車車線Lnsの中央位置に予定走行ラインPRLを規定する。そのため、左右一方の制御対象Tcが区画線Llから道路端Erに変化する(切り替わる)場合、自車の予定走行ラインPRLは、制御対象Tcとなる道路端Erに近づくように緩やかにオフセットする(図4参照)。また、左右一方の制御対象Tcから道路端Erから区画線Llに変化する(切り替わる)場合、車線維持制御部51は、道路端Erから離れるように、予定走行ラインPRLのオフセットを解除する。車線維持制御部51は、ACC制御部と連携し、予定走行ラインPRLに従い、自車車線Lnsの概ね中央に車両Aを位置させる運転制御(車線維持制御又は車線追従制御)を行う。
 自動運転ECU52は、プロセッサによるプログラムの実行により、車両Aの自律走行を実現する複数の機能部を有する。自動運転ECU52は、ロケータ40より取得する高精度地図データ及び自車位置情報と、周辺監視センサ30より取得する検出情報とに基づき、予定走行ラインPRLを生成する。自動運転ECU52は、予定走行ラインPRLに沿って車両Aが走行するように、加減速制御及び操舵制御等を実行する。
 以上の自動運転ECU52にて、運転支援ECU50の車線維持制御部51と実質的に同一の車線維持制御、即ち、自車車線Lns内での走行が継続されるよう車両Aの運転制御を行う機能部を、便宜的に車線維持制御部53とする。車両Aのドライバは、車線維持制御部51,53のうちの一方を排他的に利用可能である。
 車線維持制御部51,53は、車線維持制御の作動状態を、オフ状態、待機状態、及び実行状態のうちで切り替える。オフ状態は、車線維持制御部51,53が起動されていない状態である。待機状態は、車線維持制御部51,53が起動されているものの、車線維持制御を実施していない状態である。実行状態は、左右両側の区画線Ll又は道路端Erを認識できている等の実行条件の成立に基づき、車線維持制御がアクティブとなり、走路内走行が実施されている状態である。
 車線維持制御部51,53は、車線維持制御が待機状態又は実行状態にある場合、車線維持制御に関連する制御情報を、HCU100に逐次提供する。制御情報には、車線維持制御の作動状態を示すステータス情報、及び予定走行ラインPRLの形状を規定するライン形状情報が少なくとも含まれている。ステータス情報は、車線維持制御の作動状態を示す情報であり、具体的には、車線維持制御が実行状態にあるか否かを示す情報である。ライン形状情報は、主要な地点の座標情報、地点間の距離及び曲率半径等を含むことにより、取得側にて予定走行ラインPRLの形状を再現可能な情報とされている。
 次に、HMIシステム10に含まれる操作デバイス26、DSM27、HUD20及びHCU100の各詳細を順に説明する。
 操作デバイス26は、ドライバ等によるユーザ操作を受け付ける入力部である。操作デバイス26には、例えば運転支援機能又は自動運転機能等に関連するユーザ操作が入力される。具体的には、ステアリングホイールのスポーク部に設けられたステアスイッチ、ステアリングコラム部8に設けられた操作レバー、及びドライバの発話を検出する音声入力装置等が、操作デバイス26に含まれる。
 DSM27は、近赤外光源及び近赤外カメラと、これらを制御する制御ユニットとを含む構成である。DSM27は、運転席のヘッドレスト部分に近赤外カメラを向けた姿勢にて、例えばステアリングコラム部8の上面又はインスツルメントパネル9の上面等に設置されている。DSM27は、近赤外光源によって近赤外光を照射されたドライバの頭部を、近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、アイポイントEPの位置及び視線方向等の情報を撮像画像から抽出し、抽出した状態情報をHCU100へ向けて逐次出力する。
 HUD20は、HCU100と電気的に接続されており、HCU100によって生成された映像データを逐次取得する。HUD20は、映像データに基づき、例えば運転支援機能又は自動運転機能等、車載機能に関連する種々の情報を、虚像Viを用いてドライバに提示する。
 HUD20は、ウィンドシールドWSの下方にて、インスツルメントパネル9内の収容空間に収容されている。HUD20は、虚像Viとして結像される光を、ウィンドシールドWSの投影範囲PAへ向けて投影する。ウィンドシールドWSに投影された光は、投影範囲PAにおいて運転席側へ反射され、ドライバによって知覚される。ドライバは、投影範囲PAを通して見える前景に、虚像Viが重畳された表示を視認する。
 HUD20は、プロジェクタ21及び拡大光学系22を備えている。プロジェクタ21は、LCD(Liquid Crystal Display)パネル及びバックライトを有している。プロジェクタ21は、LCDパネルの表示面を拡大光学系22へ向けた姿勢にて、HUD20の筐体に固定されている。プロジェクタ21は、映像データの各フレーム画像をLCDパネルの表示面に表示し、当該表示面をバックライトによって透過照明することで、虚像Viとして結像される光を拡大光学系22へ向けて射出する。拡大光学系22は、凹面鏡等の光学素子を、少なくとも一つ含む構成である。拡大光学系22は、プロジェクタ21から射出された光を反射によって広げつつ、上方の投影範囲PAに投影する。
 HUD20には、画角VAが設定される。HUD20にて虚像Viを結像可能な空間中の仮想範囲を結像面ISとすると、画角VAは、ドライバのアイポイントEPと結像面ISの外縁とを結ぶ仮想線に基づき規定される視野角である。画角VAは、アイポイントEPから見て、ドライバが虚像Viを視認できる角度範囲となる。HUD20では、垂直方向における垂直画角(例えば4~5°程度)よりも、水平方向における水平画角(例えば10~12°程度)の方が大きくされている。アイポイントEPから見たとき、結像面ISと重なる前方範囲(例えば十数m~100m程度の範囲)が画角VA内の範囲となる。
 HUD20は、重畳コンテンツCTs(図5参照)及び非重畳コンテンツCTn(図8参照)を、虚像Viとして表示する。重畳コンテンツCTsは、拡張現実(Augmented Reality,以下、AR)表示に用いられるAR表示物である。重畳コンテンツCTsの表示位置は、例えば路面の特定位置、前方車両、歩行者及び道路標識等、前景に存在する特定の重畳対象に関連付けられている。重畳コンテンツCTsは、前景中にある特定の重畳対象(例えば自車車線Lnsの路面,図4参照)に重畳表示され、当該重畳対象に相対固定されているように、重畳対象を追って、ドライバの見た目上で移動可能である。即ち、ドライバのアイポイントEPと、前景中の重畳対象と、重畳コンテンツCTsとの相対的な位置関係は、継続的に維持される。そのため、重畳コンテンツCTsの形状は、重畳対象の相対位置及び形状に合わせて、所定の周期で更新され続ける。重畳コンテンツCTsは、非重畳コンテンツCTnよりも水平に近い姿勢で表示され、例えばドライバから見た奥行き方向(進行方向,前方Ze)に延伸した表示形状とされる。
 非重畳コンテンツCTnは、前景に重畳表示される表示物のうちで、重畳コンテンツCTsを除いた非AR表示物である。非重畳コンテンツCTnの表示位置は、投影範囲PA(画角VA)内の特定位置とされる。故に、非重畳コンテンツCTnは、ウィンドシールドWS等の車両構成に相対固定されているように表示される。こうした非重畳コンテンツCTnの形状は、実質的に一定とされる。尚、車両Aと重畳対象との位置関係に起因し、非重畳コンテンツCTnであっても、重畳コンテンツCTsの重畳対象に重畳表示されるタイミングが発生してもよい。
 HCU100は、HMIシステム10において、メータディスプレイ及びHUD20等の車載表示デバイスによる表示を統合的に制御する電子制御装置である。HCU100及びHUD20等は、虚像表示システムを構成している。
 HCU100は、処理部11、RAM12、記憶部13、入出力インターフェース14、及びこれらを接続するバス等を備えたコンピュータを主体として含む構成である。処理部11は、RAM12と結合された演算処理のためのハードウェアである。処理部11は、CPU(Central Processing Unit)及びGPU(Graphics Processing Unit)等の演算コアを少なくとも一つ含む構成である。処理部11は、FPGA(Field-Programmable Gate Array)、NPU(Neural network Processing Unit)及び他の専用機能を備えたIPコア等をさらに含む構成であってよい。RAM12は、映像生成のためのビデオRAMを含む構成であってよい。処理部11は、RAM12へのアクセスにより、本開示の表示制御方法を実現するための種々の処理を実行する。記憶部13は、不揮発性の記憶媒体を含む構成である。記憶部13には、処理部11によって実行される種々のプログラム(表示制御プログラム等)が格納されている。
 図1~図3に示すHCU100は、記憶部13に記憶された表示制御プログラムを処理部11によって実行することで、HUD20によるコンテンツの重畳表示を制御する複数の機能部を有する。具体的に、HCU100には、視点位置特定部71、制御情報取得部72、ロケータ情報取得部73及び表示生成部74等の機能部が構築される。
 視点位置特定部71は、DSM27から取得する状態情報に基づき、運転席に着座しているドライバのアイポイントEPの位置を特定する。視点位置特定部71は、アイポイントEPの位置を示す三次元の座標(以下、アイポイント座標)を生成し、生成したアイポイント座標を、表示生成部74に逐次提供する。
 制御情報取得部72は、車両Aの制御状態を示す情報を、主に通信バス99を通じて取得する。具体的に、制御情報取得部72は、各ECU50,52より出力される路面情報を取得する。制御情報取得部72は、路面情報の内容から、車線維持制御に用いられる前方路面上の制御対象Tcを示す対象情報をさらに取得する。対象情報は、制御対象Tcとして車線維持制御に利用される物標の種別を示す情報であり、具体的には、制御対象Tcが区画線Llであるのか又は道路端Erであるのかを示す情報である。制御情報取得部72は、種別を特定した制御対象Tcについて、の車両A(自車)に対する相対位置を示す対象位置情報、及び路面上での形状を示す対象形状情報をさらに取得する。
 制御情報取得部72は、各車線維持制御部51,53より出力されるステータス情報及びライン形状情報を取得する。ライン形状情報は、車線維持制御のために生成される車両Aの予想軌跡(予定走行ラインPRL)を示す情報である。加えて制御情報取得部72は、例えば走行制御ECU等によって通信バス99に出力される車速情報及びトルク情報を取得する。さらに、制御情報取得部72は、車両Aの姿勢を示す情報として、ハイトセンサの出力に基づくハイト情報を取得する。
 ロケータ情報取得部73は、車両Aについての最新の位置情報及び方角情報を、自車位置情報としてロケータECU44から取得する。加えてロケータ情報取得部73は、車両Aの周辺範囲の高精度地図データを、ロケータECU44から取得する。ロケータ情報取得部73は、高精度地図データが未整備の道路範囲にて、経路案内に用いられるナビ地図データを、高精度地図データの代替地図データとして取得可能である。ナビ地図データは、例えば車両Aに搭載されたナビゲーション装置、又はHMIシステム10に接続されたユーザ端末等により、ロケータ情報取得部73に提供される。ロケータ情報取得部73は、例えば重畳コンテンツCTsの重畳表示に必要な範囲(一例として、車両Aの周囲50m~200m程度)の高精度地図データ又はナビ地図データを、ロケータECU44又はナビゲーション装置等から取得する。
 表示生成部74は、HUD20に逐次出力される映像データを生成することで、HUD20によるドライバへの情報提示を制御する。表示生成部74は、虚像Viとして表示される各コンテンツの元画像を、HUD20へ向けて出力する映像データの個々のフレーム画像に描画する。
 表示生成部74は、重畳コンテンツCTs(図5参照)の元画像をフレーム画像に描画する場合、3Dモデルを構築する。3Dモデルの構築には、制御情報取得部72及びロケータ情報取得部73にて取得される重畳対象、例えば、前方路面、及び区画線Ll又は道路端Er等に関する情報等が用いられる。表示生成部74は、構築した3Dモデルを、自車位置を基準として、仮想空間に配置する。3Dモデルの配置には、ロケータ情報取得部73にて取得される自車位置情報が用いられる。
 表示生成部74は、3Dモデルを配置した仮想空間に、仮想のカメラ位置及び仮想の拡大光学系22(又は結像面IS)の位置を設定する。表示生成部74は、視点変換処理により、仮想のカメラ位置から見た3Dモデルの形状を演算する。仮想のカメラ位置は、ドライバのアイポイントEPの位置に対応しており、視点位置特定部71にて取得されるアイポイント座標に基づき補正される。さらに、仮想のカメラ位置及び光学系位置は、制御情報取得部72にて取得されるハイト情報及びトルク情報に基づき、車両Aの姿勢変化を反映した位置にそれぞれ補正される。
 表示生成部74は、仮想のカメラ位置から見た3Dモデルの形状に従い、元画像の基準データを描画する。表示生成部74は、拡大光学系22及びウィンドシールドWSでの反射に伴う光像の歪みが相殺されるように、元画像の基準データに、予め規定された変形を付与する。表示生成部74は、歪み補正の適用された元画像を各フレーム画像に含んでなる映像データを生成する。表示生成部74は、生成した映像データを、予め規定された映像フォーマットで、プロジェクタ21へ向けて連続的に出力する。
 表示生成部74は、重畳コンテンツCTsの一つとして、LTAコンテンツCTltを表示させる。以下、図4及び図5に基づき、図1~図3を参照しつつ、LTAコンテンツCTltの詳細を説明する。
 LTAコンテンツCTltは、車線維持制御部51,53にて車線維持制御が実行状態にある場合に表示される。LTAコンテンツCTltは、自車の走路を強調することで、車両Aの予定走行ラインPRLを示す重畳コンテンツCTsである。LTAコンテンツCTltは、路面に貼り付いたような様態での表示により、仮想の道路ペイントのようにドライバに視認される。表示生成部74は、制御情報取得部72及びロケータ情報取得部73の取得情報に基づき、車両Aの走行に合わせて、アイポイントEP(図2参照)から見える路面形状に適合するように、所定の更新周期で、LTAコンテンツCTltの描画形状を更新する。
 LTAコンテンツCTltは、前方走路等の路面に重畳表示される一対の区画線強調画像部LPl,LPrを含んだ2本線状を呈している(図5上段 区画線表示を参照)。表示生成部74は、区画線Llに関する対象位置情報及び対象形状情報に基づき区画線強調画像部LPl,LPrを描画することで、制御対象Tcとされた区画線Llに関連づけて区画線強調画像部LPl,LPrを表示させる。
 各区画線強調画像部LPl,LPrは、自車車線Lnsに沿って細帯状に延伸する形状であり、自車車線Lnsの路面のうちで、左右の各区画線Llの近傍に重畳表示される。各区画線強調画像部LPl,LPrは、左右の区画線Llよりも僅かに内側(自車車線Lnsの中央側)の路面に重畳される。自車左側の区画線強調画像部LPlは、ドライバから見て、自車左側の区画線Llよりも僅かに右側に視認される。一方、自車右側の区画線強調画像部LPrは、ドライバから見て、自車右側の区画線Llよりも僅かに左側に視認される。
 表示生成部74は、左右の区画線Llがそれぞれ認識されている区間において、左右の区画線強調画像部LPl,LPrを重畳表示させる。一方で、区画線Llが消失している途切れ区間Slでは、特に開始点Sls及び終了点Sleの間にて、区画線強調画像部LPlは、一時的に非表示とされる。こうした途切れ区間Slのうちで道路端Erの特定が可能な区間では、表示生成部74は、非表示とした区画線強調画像部LPlに替えて、道路端強調画像部LPeを重畳表示させる。
 道路端強調画像部LPeは、各区画線強調画像部LPl,LPrと同様に、自車車線Lnsに沿って細帯状に延伸する形状である。表示生成部74は、道路端Erに関する対象位置情報及び対象形状情報に基づき道路端強調画像部LPeを描画することで、制御対象Tcとされた道路端Erに関連づけて道路端強調画像部LPeを表示させる。一例として、自車左側の制御対象Tcが道路端Erである場合、道路端強調画像部LPeは、自車左側の道路端Erに対し、走路の中央側(右側)となる路面に重畳表示される。道路端強調画像部LPeは、途切れた区画線Llの前端(開始点Sls)を前方に延長させたと仮定した仮想延長線よりも、自車車線Lnsの外側に視認されるように表示される。
 表示生成部74は、道路端Er及び道路端強調画像部LPe間の間隔Dieを、区画線Ll及び区画線強調画像部LPl間の間隔Dilよりも広く設定する。この場合の間隔Die,Dilとは、仮想の道路ペイントとして路面に描かれたと仮定した場合の路面上での距離であり、言い換えれば、仮想空間での3Dモデルの配置の際に設定される距離値である。
 加えて表示生成部74は、各区画線強調画像部LPl,LPrとは異なる様態で、道路端強調画像部LPeを表示させる。一例として、道路端強調画像部LPeは、各区画線強調画像部LPl,LPrよりも線幅が太くなるよう描画される。さらに、道路端強調画像部LPeは、各区画線強調画像部LPl,LPrとは異なる輝度又は表示色にて表示される。具体的には、道路端強調画像部LPeは、各区画線強調画像部LPl,LPrよりも高輝度に表示されるか、又は誘目性の高い表示色にて表示される。
 以上のように、表示生成部74は、車線維持制御において制御対象Tcとされる物標の種別に応じて、LTAコンテンツCTltに含ませる画像部を、各強調画像部LPl,LPr,LPeのうちで入れ替え、制御対象Tcに関連付けて前方路面に重畳表示させる。故に、車線維持制御に用いられる制御対象Tcの種別が変わる場合、表示生成部74は、各強調画像部LPl,LPr,LPeの入れ替えによるLTAコンテンツCTltの様態の変更により、制御対象Tcの変化をドライバに示すことができる。
 一例として、自車左側の区画線Llが途切れるシーン(図4参照)では、車線維持制御に用いられる制御対象Tcが、区画線Llから道路端Erに切り替わる。表示生成部74は、制御情報取得部72にて取得される対象情報を参照し、制御対象Tcの移行予定の有無と、制御対象Tcの移行位置となる途切れ区間Slの開始点Slsまでの距離を把握する。表示生成部74は、の開始点Slsが画角VA内に入ると、各区画線強調画像部LPl,LPrに加えて、道路端強調画像部LPeをさらに表示させる(図5中段 道路端表示を参照)。
 道路端強調画像部LPeは、区画線強調画像部LPlの上方に表示され、ドライバの見た目上では、自車左側の区画線強調画像部LPlよりも前方の路面に重畳される。道路端強調画像部LPeは、開始点Slsの僅かに左側の位置から、前方へ向かって延伸する形状とされる。道路端強調画像部LPeは、区画線強調画像部LPlとつなげられていない。即ち、道路端強調画像部LPeの下端(後端)は、区画線強調画像部LPlの上端(前端)から離れている。道路端強調画像部LPeは、区画線強調画像部LPlに対して外側にオフセットした表示とされ、区画線Llから道路端Erへの制御対象Tcの切り替わりを示す。
 自車左側の区画線強調画像部LPlの上端及び道路端強調画像部LPeの下端は、前景中を下方に移動する開始点Slsを追って、画角VAの下縁へ向けて移動する。その結果、区画線強調画像部LPlは、徐々に短くなり、画角VA外にフレームアウトする。一方、道路端強調画像部LPeは、画角VAの左下方へ延伸し、画角VA内を斜めに横切るように表示される。
 さらに、途切れ区間Slの終了点Sleに車両Aが接近すると、車線維持制御に用いられる制御対象Tcは、道路端Erから区画線Llに戻される。表示生成部74は、途切れ区間Slの終了点Sleが画角VA内に入ると、自車左側の区画線強調画像部LPlを再表示させる(図5下段 区画線再表示を参照)。区画線強調画像部LPlは、道路端強調画像部LPeに対して内側にオフセットした表示とされ、道路端Erから区画線Llへの制御対象Tcの切り替わりを示す。
 道路端強調画像部LPeの上端及び区画線強調画像部LPlの下端は、前景中を下方に移動する終了点Sleを追って、画角VAの下縁へ向けて移動する。その結果、道路端強調画像部LPeは、徐々に短くなり、画角VA外にフレームアウトする。一方、区画線強調画像部LPlは、画角VAの左下方へ向けて延伸し、自車右側の区画線強調画像部LPrと同様に、画角VA内を斜めに横切るように表示される。
 以上のようなコンテンツ表示を実現する表示制御方法の詳細を、図6に示すフローチャートに基づき、図1及び図3~図5を参照しつつ、以下説明する。図6に示す表示制御処理は、例えば車両電源のオン状態への切り替えにより、起動処理等を終えたHCU100により、繰り返し開始される。
 S101では、制御情報取得部72によるステータス情報の取得を開始し、S102に進む。S102では、車線維持制御部51,53のいずれかにて車線維持制御がオン状態にあるか否かを判定し、車線維持制御の起動を待機する。一例として、ステータス情報の取得が可能な場合、S102では、車線維持制御がオン状態にあると判定する。S102にて、車線維持制御がオン状態であると判定すると、S103に進む。
 S103では、車線維持制御部51,53のいずれかにて、車線維持制御が実行状態にあるか否かを判定する。車線維持制御が待機状態である場合、S103の判定を繰り返す。一方で、S103にて、車線維持制御が実行状態にあると判定した場合、S104に進む。
 S104では、制御情報取得部72にて最新の対象情報を取得し、S105に進む。S105では、S104にて取得した対象情報に基づき、フロントカメラ31の検出可能な前方範囲にて、制御対象Tcの種別の変化があるか否かを判定する。具体的に、S105では、途切れ区間Slの開始点Slsを検出したか否か、又は途切れ区間Slの終了点Sleを検出したか否かを判定する。
 S105にて、開始点Sls及び終了点Sleのいずれも非検出であり、制御対象Tcの種別の変化がないと判定した場合、S106に進む。S106では、現在の左右の制御対象Tcを強調するLTAコンテンツCTltの表示を継続させて、S109に進む。例えば、左右両側に区画線Llが存在する区間では、区画線強調画像部LPl,LPrを含むLTAコンテンツCTltの通常表示が継続される(図5 上段参照)。また、途切れ区間Slでは、左側の区画線強調画像部LPlに替えて道路端強調画像部LPeを含むLTAコンテンツCTltの表示が継続される。
 一方、S105にて、開始点Sls又は終了点Sleを検出しており、制御対象Tcの種別が変化すると判定した場合、S107に進む。S107では、開始点Sls又は終了点Sle、即ち、制御対象Tcの移行位置が画角VA内であるか否かを判定する。S107にて、移行位置が画角VA外であると判定した場合、S106に進み、現在の様態でのLTAコンテンツCTltの表示を継続させる。
 対して、S107にて、移行位置が画角VA内であると判定した場合、S108に進む。S108では、制御対象Tcの切り替わりを示すオフセット表示を実施し、S109に進む。具体的に、S108では、自車右側の区画線強調画像部LPrと共に、自車左側の区画線強調画像部LPl及び道路端強調画像部LPeを互いにつなげない分断状態で表示させる(図5 中断及び下段参照)。
 S109では、最新のステータス情報を参照し、車線維持制御の実行状態が継続されているか否かを判定する。S109にて、車線維持制御が依然として実行状態であると判定した場合、S104に戻る。一方、S109にて、車線維持制御が実行状態ではなくなったと判定した場合、S110に進む。S110では、LTAコンテンツCTltの表示を終了し、表示制御処理を一旦終了する。尚、LTAコンテンツCTltを除く他のコンテンツの表示は、そのまま継続されてよい。
 ここまで説明した第一実施形態では、車線維持制御に用いられる路面上の制御対象Tcが変わると、こうした制御対象Tcの変化を示すLTAコンテンツCTltが表示される。そのためドライバは、車線維持制御の制御対象Tcの変化を、LTAコンテンツCTltを見ることで予め認識できる。したがって、車両Aの挙動に変化が生じたとしても、こうした挙動変化に対するドライバの不安は、抑制され得る。
 加えて第一実施形態のLTAコンテンツCTltは、制御対象Tcの相対位置を示す対象位置情報に基づき、制御対象Tcに関連づけられて前方路面に重畳表示される。その結果、ドライバから見て前後方向に並ぶ区画線強調画像部LPl及び道路端強調画像部LPeが左右方向にずれたオフセット表示により、制御対象Tcの切り替わりがドライバに明示される。こうした重畳表示によれば、LTAコンテンツCTltは、制御対象Tcの変化をドライバに分かり易く通知し得る。その結果、ドライバの不安を抑制する効果も、いっそう発揮され易くなる。
 また第一実施形態では、道路端Er及び道路端強調画像部LPe間の間隔Dieが、区画線Ll及び区画線強調画像部LPl間の間隔Dilよりも広くされる。以上のように、制御対象Tcが区画線Llとは異なる場合に、道路端Erから比較的離れた位置に道路端強調画像部LPeが重畳されていれば、ドライバは、道路端Erに自車が過度に接近しないことを認識し得る。その結果、区画線Llの消失に起因するドライバの不安の増加を抑えることが可能になる。
 さらに第一実施形態では、区画線Ll及び道路端Erの一方から他方へと制御対象Tcが切り替わる場合、道路端強調画像部LPe及び区画線強調画像部LPlは、互いにつなげられることなく、路面に重畳表示される。以上のように、制御対象Tcとなる物標を強調する各強調画像部LPe,LPlを分断表示すれば、ドライバは、制御対象Tcが切り替わるポイントを容易に把握できるようになる。
 加えて第一実施形態では、制御対象Tcとされる物標の種別に応じて、LTAコンテンツCTltの様態が変更される。具体的には、道路端Erを強調する道路端強調画像部LPeは、区画線Llを強調する区画線強調画像部LPlよりも高輝度又は高誘目とされる。こうしたLTAコンテンツCTltの様態変更によれば、ドライバは、制御対象Tcの切り替わり予定を見落とし難くなる。その結果、ドライバの不安を抑制する効果が、いっそう発揮され易くなる。
 尚、第一実施形態において、LTAコンテンツCTltが「制御対象コンテンツ」に相当し、区画線強調画像部LPlが「画像部」及び「第一画像部」に相当し、道路端強調画像部LPeが「画像部」及び「第二画像部」に相当する。また、区画線Ll及び道路端Erのうちの一方が「第一対象」に相当し、その他方が「第二対象」に相当し、開始点Sls及び終了点Sleが「移行位置」に相当する。制御情報取得部72が「情報取得部」に相当し、表示生成部74が「表示制御部」に相当し、HCU100が「表示制御装置」に相当する。
 (第二実施形態)
 図7及び図8に示す本開示の第二実施形態は、第一実施形態の変形例である。第二実施形態の表示制御処理では、開始点Sls及び終了点Sle(図4参照)等の移行位置が画角VA外である場合(図7 S207:NO)、予告アイコンCTniを表示する処理が実施される(図7 S208)。予告アイコンCTniは、制御対象Tcの変化する予定位置が画角VA外である場合に、LTAコンテンツCTltとは別に表示される非重畳コンテンツCTnである。予告アイコンCTniは、画角VAの概ね中央に表示される(図8 上段参照)。予告アイコンCTniは、クランク状に描画された画像部を含むことで、車両Aに横方向の移動が発生予定であることをドライバに示唆する。
 表示生成部74(図3参照)は、移行位置である開始点Slsが画角VA内に入るタイミングで、予告アイコンCTni及び区画線強調画像部LPlを用いた切り替えアニメーションを表示させる。切り替えアニメーションにおいて、予告アイコンCTniは、非重畳コンテンツCTnから重畳コンテンツCTsへと変化しつつ、画角VAの中央から前景中の開始点Slsへ向けて移動する。予告アイコンCTniは、開始点Slsへの移動に伴い、徐々の表示サイズを縮小される。こうした移動及び縮小により、予告アイコンCTniは、開始点Slsの上方(前方)に重畳表示される(図8 中上段参照)。
 予告アイコンCTniは、開始点Slsの近傍への移動後、所定時間の経過に伴い非表示とされる。表示生成部74は、予告アイコンCTniが消失した後、切り替えアニメーションとして、自車左側の区画線強調画像部LPlを、道路端Erに沿って進行方向に延伸させるアニメーションを表示させる(図8 中下段参照)。具体的に、区画線強調画像部LPlは、区画線Llの内側にある先端(上端,前端)を、道路端Erへ向かって外側(左側)に延伸させる。さらに、区画線強調画像部LPlは、道路端Erの内側近傍にて先端を進行方向に屈曲させ、道路端Erに沿って進行方向にさらに延伸させる。表示生成部74は、区画線強調画像部LPlを延伸させるアニメーションを、所定回数繰り返す。区画線強調画像部LPlの延伸部分LEPは、切り替えアニメーションの期間中、例えば破線状に描画される。
 表示生成部74は、切り替えアニメーションの表示を終了させると、延伸部分LEPを実線状の描画形状に変化させる(図8 下段参照)。以上により、区画線強調画像部LPlは、全体としてクランク状に屈曲した描画形状、言い換えれば、道路端強調画像部LPe(図5参照)と一体化された描画形状となる。こうした区画線強調画像部LPlにおいても、道路端Er及び延伸部分LEP間の間隔Die(図4参照)は、区画線Ll及び本体部分間の間隔Dil(図4参照)よりも広く確保される。
 ここまで説明した第二実施形態のLTAコンテンツCTltは、区画線強調画像部LPlを延伸させるアニメーション表示により、制御対象Tcの変化をドライバに通知できる。そのためドライバは、車線維持制御の制御対象Tcの変化を予め認識できる。したがって、制御対象Tcの切り替わりに起因する挙動変化へのドライバの不安は、抑制され得る。
 加えて第二実施形態では、HUD20の画角VAよりも前方に開始点Slsがある場合でも、予告アイコンCTniの表示により、制御対象Tcの変化がドライバに予告される。以上によれば、ドライバは、制御対象Tcの変化予定、ひいては、横移動の発生の可能性を、早期に認識できる。その結果、ドライバの不安を抑制する効果が、いっそう発揮され易くなる。
 尚、第二実施形態の表示制御処理におけるS201~S206及びS209~S211の処理の内容は、第一実施形態のS101~S106及びS108~S110の処理の内容と実質的に同一である。
 (第三実施形態)
 図9に示す本開示の第三実施形態は、第一実施形態の別の変形例である。第三実施形態において、表示生成部74(図3参照)は、進行方向に途切れ区間Slを検出すると、軌跡表示を実施する(図9 上段参照)。軌跡表示では、予想軌跡コンテンツCTpが、LTAコンテンツCTltと共に表示される。予想軌跡コンテンツCTpは、制御情報取得部72(図3参照)にて取得されるライン形状情報に基づき描画され、自車車線Lnsの路面の概ね中央に重畳表示される重畳コンテンツCTsである。予想軌跡コンテンツCTpは、車線維持制御部51,53(図1参照)にて生成される予定走行ラインPRL(図4参照)の形状をドライバに通知する。
 表示生成部74は、途切れ区間Slの開始点Slsが画角VA内となると、自車左側の区画線強調画像部LPlを外側(左側)に屈曲させる(図9 中段参照)。区画線強調画像部LPlは、途切れた区画線Llの上方にて、当該区画線Llの内側から道路端Erの近傍まで延伸し、さらに進行方向に屈曲した描画形状とされる。言い換えれば、区画線強調画像部LPlは、区画線Llの内側に重畳される線状画像部の前端と、道路端Erの内側に重畳される線状画像部の後端とをつなげた描画形状で表示される。
 加えて表示生成部74は、予想軌跡コンテンツCTpを、区画線強調画像部LPlと同様に、左側に屈曲させる。予想軌跡コンテンツCTpの横方向への屈曲は、実際の予定走行ラインPRLの横方向への屈曲に対し強調されていてもよい。以上のオフセット開始表示により、LTAコンテンツCTlt及び予想軌跡コンテンツCTpは、横移動の発生可能性を、ドライバに予告する。
 表示生成部74は、途切れ区間Slの終了点Sleが画角VA内となると、自車左側の区画線強調画像部LPlを内側(右側)に屈曲させる(図9 下段参照)。区画線強調画像部LPlは、再出現した区画線Llの下方にて、道路端Erの近傍から区画線Llの内側まで延伸し、さらに進行方向に屈曲した描画形状とされる。加えて表示生成部74は、予想軌跡コンテンツCTpを、区画線強調画像部LPlと同様に右側(中央側)に屈曲させ、再び自車車線Lnsの中央に重畳させる。以上のオフセット解除表示により、LTAコンテンツCTlt及び予想軌跡コンテンツCTpは、再度の横移動の発生可能性を、ドライバに予告する。
 ここまで説明した第三実施形態でも、予定された制御対象Tcの変化がドライバに通知される。故に、制御対象Tcの切り替わりに起因する挙動変化へのドライバの不安は、抑制され得る。
 加えて第三実施形態では、ライン形状情報に基づき、車線維持制御される車両Aの予定走行ラインPRLを示す予想軌跡コンテンツCTpが、LTAコンテンツCTltと共に重畳表示される。以上によれば、車線維持制御に用いられる制御対象Tcの変化が、二つの重畳コンテンツCTsの様態変化の連携により、ドライバに分かり易く示される。その結果、ドライバは、制御対象Tcが切り替わるポイントを容易に把握できるようになる。尚、第三実施形態では、ライン形状情報が「軌跡情報」に相当する。
 (第四実施形態)
 図10に示す本開示の第四実施形態は、第一実施形態のさらに別の変形例である。第四実施形態では、途切れ区間Slの開始点Slsが画角VA内に入るタイミングで、仮想区画線画像部LPvが表示される。仮想区画線画像部LPvは、第一実施形態の道路端強調画像部LPe(図5参照)に相当する画像部であり、途切れ区間Slの開始点Slsから終了点Sle(図4参照)までにおいて、区画線強調画像部LPlに替わる画像部として限定的に表示される。
 仮想区画線画像部LPvは、区画線強調画像部LPlの延長上に表示され、道路端Er及び自車右側の区画線強調画像部LPrに沿って線状に延伸している。仮想区画線画像部LPvは、途切れた自車左側の区画線Llを補完し、自車右側の区画線強調画像部LPrと共に仮想の自車車線Lnsを画角VA内に浮かび上がらせる。仮想区画線画像部LPvは、区画線強調画像部LPlと概ね同一の輝度及び表示色にて表示される。以上により、仮想区画線画像部LPvは、区画線強調画像部LPlとの連続性を有す画像部として、ドライバに視認され得る。
 一方で、仮想区画線画像部LPvは、区画線強調画像部LPlとは異なる描画形状とされており、具体的には、破線状に描画されている。こうした描画形状により、仮想区画線画像部LPvは、区画線Ll及び道路端Erの一方から他方への制御対象Tcの切り替わりを、ドライバに明示する。
 ここまで説明した第四実施形態でも、途切れ区間Slが存在する場合に、LTAコンテンツCTltは、仮想区画線画像部LPvを含む様態に変化することで、制御対象Tcの変化をドライバに予告できる。したがって、第四実施形態でも、制御対象Tcの切り替わりに起因する挙動変化へのドライバの不安は、抑制され得る。
 加えて第四実施形態では、区画線強調画像部LPlの延長上に、仮想区画線画像部LPvが重畳表示される。以上によれば、道路端Erの近傍に表示された線状の画像部が、道路端Erの近くを走行するような誤解をドライバに与える事態は、生じ難くなる。このように、道路端Erから離れた中央側の位置にあえて仮想区画線画像部LPvを表示させるLTAコンテンツCTltは、ドライバの不安感の低減に寄与できる。
 (第五実施形態)
 図11に示す本開示の第五実施形態は、第二実施形態の変形例である。第五実施形態のLTAコンテンツCTltは、二つの区画線強調画像部LPl,LPr(図7参照)に替えて、中央強調画像部LPcを含んでいる。中央強調画像部LPcは、各区画線強調画像部LPl,LPrと同様に、自車車線Lnsに沿って線状に延伸する画像部である。中央強調画像部LPcは、自車車線Lnsの概ね中央に重畳表示される。中央強調画像部LPcは、第三実施形態の予想軌跡コンテンツCTp(図9参照)と同様に、ライン形状情報に基づき描画され、予定走行ラインPRL(図4参照)の形状をドライバに通知する。
 表示生成部74は、第二実施形態と同様に、途切れ区間Slの把握に基づき、非重畳コンテンツCTn(図8参照)としての予告アイコンCTniを表示させる。予告アイコンCTniは、中央強調画像部LPcと重ならないように、中央強調画像部LPcに対して途切れる区画線Ll側に表示される。
 表示生成部74は、開始点Slsの画角VA内への進入に合わせて、予告アイコンCTniを開始点Slsへ向けて移動させ、開始点Slsの上方(前方)の路面に重畳表示させる。自車左側の区画線Llの延長上に移動した予告アイコンCTniは、中央強調画像部LPcと共にLTAコンテンツCTltを構成する重畳コンテンツCTsとなる。
 加えて表示生成部74は、開始点Slsが画角VA内に入ると、中央強調画像部LPcを、道路端Er側へ向けて屈曲する形状に変化させる。その結果、LTAコンテンツCTltは、予告アイコンCTniの追加表示と中央強調画像部LPcの屈曲表示とを組み合わせた様態変化により、制御対象Tcの切り替わりをドライバに通知する。
 ここまで説明した第五実施形態でも、第二実施形態と同様に、LTAコンテンツCTltは、制御対象Tcの変化をドライバに予告できる。したがって、制御対象Tcの切り替わりに起因する挙動変化へのドライバの不安は、抑制され得る。
 (第六実施形態)
 図12~図19に示す本開示の第六実施形態は、第三実施形態の変形例である。第六実施形態の表示生成部74(図3参照)は、第三実施形態と同様に、車線維持制御部51,53の制御状態に応じて、予想軌跡コンテンツCTp及び対象強調コンテンツCTetを表示する(図14及び図15参照)。予想軌跡コンテンツCTpは、車両Aの予定走行ラインPRLを示す重畳コンテンツCTsである。対象強調コンテンツCTetは、制御対象Tcとされる区画線Ll又は道路端Erを強調する重畳コンテンツCTsである。対象強調コンテンツCTetは、第一実施形態のLTAコンテンツCTlt(図5参照)に相当し、制御対象Tcの変化を示すことができる。
 以下、第六実施形態のコンテンツ表示を実現する表示制御方法の詳細を、図12及び図13に示すフローチャートに基づき、図3,図14及び図15を参照しつつ説明する。尚、第六実施形態の表示制御処理におけるS601~S604,S611,S620の処理の内容は、第一実施形態のS101~S104,S109,S110の処理の内容と実質的に同一である。
 S605では、直前のS604にて取得した対象情報に基づき、左右のいずれか一方にて、区画線Llから道路端Erへの制御対象Tcの切り替わり予定があるか否かを判定する。S605にて、左右両側とも区画線Llを制御対象Tcとした車線維持制御が継続すると判定した場合、S606に進む。S606では、LTAの軌跡表示(図14 上段参照)を開始及び継続させて、S610に進む。
 LTAの軌跡表示には、予想軌跡コンテンツCTpが含まれている。予想軌跡コンテンツCTpは、自車車線Lnsの前方路面の中央に1本線状に重畳され、予定走行ラインPRLを可視化する。予想軌跡コンテンツCTpは、左右両側の制御対象Tcから概ね等距離となる路面位置に重畳される。予想軌跡コンテンツCTpは、自車車線Lnsの延伸方向に沿って伸びる点線状(破線状)に描画される。こうした描画形状により、道路に対する重畳コンテンツのずれがドライバに認識され難くされている。予想軌跡コンテンツCTpは、車線維持制御が実行状態である期間であっても、常時表示されない。予想軌跡コンテンツCTpは、点滅表示により、所定の周期で表示状態と非表示状態とを繰り返す。一例として、予想軌跡コンテンツCTpは、表示状態を5秒間継続した後、非表示状態を5秒間継続して、再び表示状態となる。非表示状態の期間は、表示状態の期間より短くてもよく、又は長くてもよい。
 S605にて、開始点Slsを検出しており、区画線Llから道路端Erへの制御対象Tcの種別変化が生じると判定した場合、S607に進む。S607では、制御対象Tcの移行位置(開始点Sls)が画角VA内であるか否かを判定する。S607にて、移行位置が画角VA外であると判定した場合、S608に進む。S608では、区画線Llから道路端Erへの制御対象Tcの切り替わりを予告するオフセット予告表示(図14 中段参照)を開始及び継続させて、S610に進む。
 オフセット予告表示には、対象強調コンテンツCTetが含まれている。オフセット予告表示では、区画線強調画像部LPlが、対象強調コンテンツCTetとして路面に重畳表示される。区画線強調画像部LPlは、非検出となる一方(図14では左側)の区画線Llの対象位置情報に基づき、当該区画線Llに関連づけて表示される。区画線強調画像部LPlは、隣接する区画線Llに沿って伸びる実線状に描画される。区画線強調画像部LPlは、点滅されることなく、表示を継続される。
 オフセット予告表示では、予想軌跡コンテンツCTp(図14 上段参照)が非表示とされる。予想軌跡コンテンツCTpは、区画線強調画像部LPlの表示の開始に合わせて、表示を終了される。予想軌跡コンテンツCTpの表示終了は、区画線強調画像部LPlの表示開始と実質同時であってもよく、或いは区画線強調画像部LPlの表示開始の直前又は直後であってもよい。区画線強調画像部LPlは、表示を終了される予想軌跡コンテンツCTpよりも高い輝度で表示される。区画線強調画像部LPlの表示色は、予想軌跡コンテンツCTpと実質同じであってよく、又は予想軌跡コンテンツCTpと異なっていてもよい。また、別の例として、区画線強調画像部LPlは、予想軌跡コンテンツCTpと実質同一の輝度で表示されてもよい。
 S607にて、移行位置が画角VA内であると判定した場合、S609に進む。S609では、区画線Llから道路端Erへの制御対象Tcの切り替わりを示すオフセット開始表示(図14 下段参照)を開始及び継続させて、S610に進む。
 オフセット開始表示には、対象強調コンテンツCTet及び予想軌跡コンテンツCTpが含まれている。対象強調コンテンツCTetは、区画線強調画像部LPl及び道路端強調画像部LPeを有している。表示生成部74は、区画線Llから道路端Erへと制御対象Tcが変わる場合、区画線Llに関連付けて区画線強調画像部LPlを重畳表示させつつ、区画線強調画像部LPlとつなげた様態で道路端Erに関連付けて道路端強調画像部LPeを重畳表示させる。オフセット予告表示からオフセット開始表示に遷移する場合、表示生成部74は、道路端Erの対象位置情報に基づき、区画線強調画像部LPlの奥側の端部を道路端Erへ向けて延伸させる。さらに表示生成部74は、道路端Erの近傍に達した区画線強調画像部LPlの端部を、道路端Erに沿って延伸させることにより、道路端強調画像部LPeの表示を開始させる。
 加えて表示生成部74は、オフセット予告表示からオフセット開始表示に遷移する場合、区画線強調画像部LPlの道路端Erへの延伸を開始させるタイミングに合わせて、予想軌跡コンテンツCTpを再表示させる。予想軌跡コンテンツCTpは、車線維持制御部51,53によるオフセットの実施を示すように、対象強調コンテンツCTet側(左側)へ向けて湾曲又は屈曲した形状となる。オフセット開始表示において、予想軌跡コンテンツCTpの点滅は、中断される。予想軌跡コンテンツCTpは、車両Aの横移動が完了するまで表示を継続される。
 S610では、オフセット制御に伴う横移動が完了したか否かを判定する。S610にて、横移動が完了していないと判定した場合、S611に進む。制御対象Tcの変化が無い場合でも、S610からS611に進む。S611では、車線維持制御の実行状態が終了したか否かを判定する。S611にて、車線維持制御の実行状態が継続していると判定した場合、S604に戻る。一方で、S611にて、車線維持制御がオフ状態に遷移したと判定した場合、S620に進み、LTA関連のコンテンツ表示を終了させる。
 一方、S610にて、オフセット制御の横移動が完了したと判定した場合、S612に進む。S612では、S604と同様に、制御対象Tcの対象情報を取得し、S613に進む。S613では、区画線Llの再検出の有無を判定する。S613にて、区画線Llが未検出のままであると判定した場合、S614に進む。S614では、オフセット制御の継続を示すオフセット継続表示(図15 上段参照)を開始及び継続させて、S618に進む。
 オフセット継続表示には、対象強調コンテンツCTet及び予想軌跡コンテンツCTpが含まれている。オフセット継続表示では、道路端強調画像部LPeが対象強調コンテンツCTetとして、道路端Erの内側に継続して表示される。道路端強調画像部LPeは、オフセットのための自車の横移動の完了後、所定の時間(例えば5秒程度)が継続したタイミングで、表示を終了される。
 予想軌跡コンテンツCTpは、自車の横移動の完了後、所定の時間(例えば5秒程度)が継続したタイミングで、非表示とされる。予想軌跡コンテンツCTpは、自車が途切れ区間Slを走行中、通常の軌跡表示(図14 上段参照)と同様に、点滅表示される(図15 破線参照)。一例として、予想軌跡コンテンツCTpは、一旦非表示とされた後に、例えば5秒間の非表示継続と、5秒間の表示継続とを繰り返す。
 S613にて、区画線Llが再検出されたと判定した場合、S615に進む。S615では、区画線Llの再検出位置(終了点Sle)が画角VA内であるか否かを判定する。S615にて、途切れ区間Slの終了点Sleが画角VA外であると判定した場合、S616に進む。S616では、道路端Erから区画線Llへの制御対象Tcの切り替わり、言い替えれば、オフセット制御の解除、を予告する解除予告表示(図15 中段参照)を開始及び継続させて、S618に進む。
 解除予告表示には、対象強調コンテンツCTet及び予想軌跡コンテンツCTpが含まれている。解除予告表示では、仮想区画線画像部LPv2が対象強調コンテンツCTetとして、道路端Erの内側に表示される。仮想区画線画像部LPv2は、再検出された画角VA外の区画線Llの端部(終了点Sle)を、道路端Erに沿って自車側に延長した延長上に重畳表示される実線状の画像部である。仮想区画線画像部LPv2は、見た目上にて、画角VA外の区画線Llと連続するように延伸している。仮想区画線画像部LPv2は、予想軌跡コンテンツCTpよりも高い輝度で表示される。仮想区画線画像部LPv2は、予想軌跡コンテンツCTp又は道路端強調画像部LPeとは異なる表示色で表示されてもよく、或いは予想軌跡コンテンツCTp又は道路端強調画像部LPeと同一の表示色で表示されてもよい。予想軌跡コンテンツCTpは、点滅を中断され、表示された状態に維持される。
 S615にて、途切れ区間Slの終了点Sleが画角VA内であると判定した場合、S617に進む。S617では、道路端Erから区画線Llへの制御対象Tcの切り替わりを示すオフセット解除表示(図15 下段参照)を開始及び継続させて、S618に進む。
 オフセット解除表示でも、対象強調コンテンツCTet及び予想軌跡コンテンツCTpの表示が継続される。対象強調コンテンツCTetとして表示される仮想区画線画像部LPv2は、実際の区画線Llと重ならないように、当該区画線Llの自車側に重畳表示される。仮想区画線画像部LPv2は、途切れ区間Slの終了点Sleのフレームアウトによって表示を終了される。予想軌跡コンテンツCTpは、車線維持制御部51,53によるオフセットの解除を示すように、対象強調コンテンツCTetの反対側(右側)へ向けて湾曲又は屈曲した形状となる。オフセット解除表示においても、予想軌跡コンテンツCTpは、横移動が完了するまで、点滅されることなく表示を継続される。
 そして、S618では、S611と同様に、車線維持制御の実行状態が終了したか否かを判定する。S618にて、車線維持制御がオフ状態に遷移したと判定した場合、S620に進み、LTA関連のコンテンツ表示を終了させる。一方で、S618にて、車線維持制御の実行状態が継続していると判定した場合、S619に進む。
 S619では、オフセット制御の解除に伴う横移動が完了したか否かを判定する。S619にて、横移動が完了していないと判定した場合、S612に戻る。一方(左側)の区画線Llの未検出状態が継続している場合でも、S619からS612に戻る。対して、S619にて、横移動が完了したと判定した場合、S604に戻る。
 <大型車オフセット制御>
 車線維持制御部51,53は、制御対象Tcが区画線Llから道路端Erに変化する場合に加えて、特定の対象物標(例えば、大型車AL等)を追い抜く場合にも、オフセット制御を実施する。具体的に、車線維持制御部51,53は、隣接車線を並走する大型車ALを追い抜くとき、この大型車ALから離れる方向に、自車車線Lns内での走行位置をオフセットさせる。車線維持制御部51,53は、こうした大型車オフセット制御に関連する制御情報を、HCU100に逐次提供する。
 車線維持制御部51,53は、道路端Erへ向かうオフセット制御(以下、道路端オフセット制御)と、大型車オフセット制御との両方を併行実施できる。詳記すると、図16及び図17に示すように、車線維持制御部51,53は、途切れ区間Slにて道路端オフセット制御の実施中、自車が大型車ALを追い抜くとき、大型車オフセット制御をさらに実施する。以下、途切れ区間Slの走行中に大型車ALを追い抜くシーンでの表示遷移の詳細を、図16~図19に基づき、図3を参照しつつ説明する。
 表示生成部74は、車線維持制御部51,53によって道路端オフセット制御が実施される場合(図16参照)、上述のオフセット開始表示(図14 下段参照)に相当する道路端オフセット表示(図18上段参照)を実施する。道路端オフセット表示には、対象強調コンテンツCTetと予想軌跡コンテンツCTpとが含まれている。対象強調コンテンツCTetは、区画線強調画像部LPr及び道路端強調画像部LPeを一体的に有しており、開始点Slsの奥側を横切るようにして、区画線Llの内側から道路端Erの内側に延伸している。予想軌跡コンテンツCTpは、開始点Slsの奥側にて道路端Er側(右側)に屈曲する形状を呈し、道路端オフセット制御における予定走行ラインPRLを前方路面に描き出す。
 表示生成部74は、道路端オフセット制御での横移動の完了後、自車が大型車ALを追い抜く場合(図16参照)、上述のオフセット継続表示(図15 上段参照)に相当する大型車オフセット表示(図18 下段参照)を実施する。大型車オフセット表示には、対象強調コンテンツCTet(道路端強調画像部LPe)と、予想軌跡コンテンツCTpとが含まれている。道路端強調画像部LPeは、自車が道路端Erから外側に逸脱しないことをドライバに明示する。予想軌跡コンテンツCTpは、点滅されることなく表示を継続される。予想軌跡コンテンツCTpは、道路端強調画像部LPe側(右側)へ屈曲しつつ奥側に延伸する形状を呈し、大型車オフセット制御における予定走行ラインPRLを前方路面に描き出す。
 車線維持制御部51,53は、自車が大型車ALを追い抜くと、大型車オフセット制御を解除しつつ、道路端オフセット制御を継続する(図17参照)。このとき表示生成部74は、大型車オフセット制御の解除予定を通知する大型車オフセット解除表示(図19 上段参照)を実施する。大型車オフセット解除表示にも、対象強調コンテンツCTet(道路端強調画像部LPe)と、予想軌跡コンテンツCTpとが含まれている。予想軌跡コンテンツCTpは、道路端強調画像部LPeの反対側(左型)へ屈曲しつつ奥側へ延伸する形状を呈し、大型車オフセット制御を解除する予定走行ラインPRLを前方路面に描き出す。
 さらに、表示生成部74は、道路端オフセット制御が解除される場合、大型車オフセット制御の解除予定を通知する道路端オフセット解除表示(図19 下段参照)を実施する。道路端オフセット解除表示は、上述のオフセット解除表示(図15 下段参照)に相当する表示であり、対象強調コンテンツCTetとしての仮想区画線画像部LPv2と、予想軌跡コンテンツCTpとを含んでいる。予想軌跡コンテンツCTpは、再検出された一方の区画線Llの反対側(左側)へ屈曲しつつ奥側へ延伸する形状を呈し、道路端オフセット制御を解除する予定走行ラインPRLを前方路面に描き出す。
 ここまで説明した第六実施形態でも、予定された制御対象Tcの変化がオフセット開始表示及びオフセット解除表示によってドライバに通知される。故に、制御対象Tcの切り替わりに起因する挙動変化へのドライバの不安は、抑制され得る。
 加えて第六実施形態の表示生成部74は、区画線Llから道路端Erへの制御対象Tcの移行位置が画角VA外である場合、画角VA内に視認される区画線Llを強調する様態で対象強調コンテンツCTetを表示させる。こうした対象強調コンテンツCTetを含むオフセット予告表示(図14 中段参照)が、制御対象Tcの変化を予告する。以上によれば、制御対象Tcの切り替わりによる挙動変化が開始される以前に、ドライバは、十分な余裕をもって、挙動変化の実施予定を知ることができる。したがって、ドライバの不安は、いっそう抑制され得る。
 また第六実施形態の表示生成部74は、区画線Llから道路端Erへと制御対象Tcが変わる場合、区画線強調画像部LPrとつなげた様態で道路端強調画像部LPeを重畳表示させる。このように、区画線Llを強調する区画線強調画像部LPrと、道路端Erを強調する道路端強調画像部LPeとを一体化させた対象強調コンテンツCTetを表示させることで、制御対象Tcの変化がドライバに分かり易く示され得る。
 さらに第六実施形態の表示生成部74は、オフセット予告表示にて、対象強調コンテンツCTetを表示する場合に、予想軌跡コンテンツCTpを非表示にする。以上のように、画角VA内に表示させるコンテンツの数を制限する表示制御によれば、ドライバは、対象強調コンテンツCTetを認識し易くなる。その結果、制御対象Tcの変化がドライバに早期に把握されるようになり、ドライバの不安を抑制する効果がいっそう発揮され得る。
 加えて第六実施形態では、道路端オフセット制御及び大型車オフセットが併行実施される場合でも、表示生成部74は、道路端オフセット表示及び大型車オフセット表示により各オフセット制御による自車の挙動変化を、ドライバに個別に報知できる。その結果、自車の挙動変化が繰り返されても、ドライバの不安を抑制する効果が発揮可能になる。
 尚、第六実施形態において、対象強調コンテンツCTetが「制御対象コンテンツ」に相当する。
 (他の実施形態)
 以上、本開示の複数の実施形態及び変形例について説明したが、本開示は、上記実施形態及び変形例に限定して解釈されるものではなく、本開示の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
 上記第一~第四実施形態のLTAコンテンツCTltは、2本線状を呈していた。また、上記第五実施形態のLTAコンテンツCTlt及び上記第六実施形態の対象強調コンテンツCTetは、1本線状を呈していた。以上のように、「制御対象コンテンツ」に相当するLTAコンテンツCTlt及び対象強調コンテンツCTetの描画形状等は、上記実施形態のものに限定されず、適宜変更されてよい。
 例えば、上記実施形態の変形例1では、自車車線Lnsの路面のうちで、画角VA内となる範囲を全体的に塗り潰すような描画形状のLTAコンテンツCTltが表示される。また、上記実施形態の変形例2のLTAコンテンツCTltは、制御対象Tcに表示位置が関連付けられない非重畳コンテンツCTnとして表示される。
 さらに、上記第六実施形態の変形例3では、検出が継続される他方(右側)の区画線Llを強調する区画線強調画像部LPrをさらに有する対象強調コンテンツCTetが、例えばオフセット開始表示及びオフセット解除表示等にて表示される。また、上記第六実施形態の変形例4では、オフセット予告表示における対象強調コンテンツCTetの表示が省略され、予想軌跡コンテンツCTpが、LTAコンテンツCTltとして制御対象の切り替り予定を報知する。
 上記実施形態では、区画線Llに関連付けられる区画線強調画像部LPl,LPrと、道路端Erに関連付けられる道路端強調画像部LPeとは、互いに異なる様態で描画されていた。こうした各強調画像部の線幅、輝度及び表示色等は、互いに実質同一であってもよい。また、上記実施形態にて、補助的に実施されていた予告アイコンCTni及び予想軌跡コンテンツCTpの表示は、省略されてもよい。さらに、予想軌跡コンテンツCTpは、車線維持制御が実行状態である期間中、実質常に表示されてもよい。
 上記第一~第五実施形態において、オフセット開始表示及びオフセット解除表示(オフセット終了表示)は、実質同一の内容とされていた。しかし、オフセット開始表示とオフセット解除表示は、互いに異なる内容とされてよい。一例として、予告アイコンCTni及び切り替えアニメーションは、オフセット開始表示にのみ表示され、オフセット解除表示では表示されなくてもよい。
 車線維持制御部51,53にて実施される車線維持制御の内容は、適宜変更されてよい。例えば、車線維持制御部51,53は、途切れ区間Slにおいて、車両Aの横移動の発生を抑制するような予定走行ラインPRLを生成可能であってもよい。即ち、途切れ区間Slでの横方向への移動は、常に発生しなくてもよい。こうした形態であっても、横方向への移動を予め通知する効果は、発揮可能である。
 一例として、車線維持制御部51,53は、途切れの発生していない区画線Llを基準として、当該区画線Llとの距離を維持するような車線維持制御を実施可能である。こうした車線維持制御において、車線維持制御部51,53は、自車左側の区画線Llに途切れが生じた場合、自車右側の区画線Llを基準として、それまでの右側区画線Llとの距離を維持しながら、走行を継続させることができる。こうした車線維持制御によれば、途切れ区間Slへの進入に伴う車両Aの横方向への移動は、発生し難くなる。
 LTAコンテンツCTltによって切り替わりが通知される制御対象Tcは、路面上に形成され、路面に固定された道路標示に限定されてよい。即ち、路面上にある車両等、自力で移動可能な物標は、切り替わりを通知される制御対象Tcに含まれてなくてよい。
 上記実施形態の車両Aには、運転支援ECU50及び自動運転ECU52の両方が搭載されていた。しかし、車線維持機能を有するECUは、1つのみであってもよい。上記実施形態の変形例5では、運転支援ECU50及び自動運転ECU52の両方の機能を備える1つのECUが設けられている。また上記実施形態の変形例6では、2つのECUのうちで運転支援ECU50のみが車両Aに搭載されている。さらに、上記実施形態の変形例7では、2つのECUのうちで自動運転ECU52のみが車両Aに搭載されている。
 上記実施形態のLTAコンテンツCTltは、表示色、表示輝度、基準となる表示形状等の静的な要素、さらに、点滅の有無、点滅の周期、アニメーションの有無、及びアニメーションの動作等の動的な要素を適宜変更されてよい。また、LTAコンテンツCTltの静的又は動的な要素は、ドライバの嗜好に応じて変更可能であってよい。加えて、LTAコンテンツと異なる他のコンテンツが画角VA内に適宜表示されていてもよい。
 上記実施形態のHCUは、ドライバから見て重畳対象に重畳コンテンツがずれなく重畳されるように、重畳コンテンツCTsとして結像される虚像光の投影形状及び投影位置を逐次制御していた。HCUは、こうした補正処理に、DSMにて検出されるアイポイントの位置情報と、通信バスに出力される車両の姿勢情報とを用いていた。しかし、HCUは、アイポイントの位置情報及び車両の姿勢情報のいずれか一方のみによって、虚像光の投影形状及び投影位置の補正制御を実施してもよい。またアイポイントの位置情報及び車両の姿勢情報を用いた虚像光の補正制御は、共に実施されなくてもよい。
 HCUは、例えばHUDに設けられたジャイロセンサの検出情報をさらに用いて、重畳コンテンツとして結像される虚像光の投影形状及び投影位置を逐次制御してもよい。ジャイロセンサは、主に車両のピッチ方向の姿勢変化を検出する姿勢センサである。こうした姿勢センサの利用によれば、重畳コンテンツは、いっそう正確に重畳対象に重畳され得る。
 変形例8のHUDのプロジェクタには、LCDパネル及びバックライトに替えて、EL(Electro Luminescence)パネルが設けられている。さらに、ELパネルに替えて、プラズマディスプレイパネル、ブラウン管及びLED等の表示器を用いたプロジェクタがHUD20には採用可能である。
 変形例9のHUDには、LCD及びバックライトに替えて、レーザモジュール(以下、LSM)及びスクリーンが設けられている。LSMは、例えばレーザ光源及びMEMS(Micro Electro Mechanical Systems)スキャナ等を含む構成である。スクリーンは、例えばマイクロミラーアレイ又はマイクロレンズアレイである。こうしたHUDでは、LSMから照射されるレーザ光の走査により、スクリーンに表示像が描画される。HUDは、スクリーンに描画された表示像を、拡大光学素子によってウィンドシールドに投影し、虚像を空中表示させる。
 変形例10のHUDには、DLP(Digital Light Processing,登録商標)プロジェクタが設けられている。DLPプロジェクタは、多数のマイクロミラーが設けられたデジタルミラーデバイス(以下、DMD)と、DMDに向けて光を投射する投射光源とを有している。DLPプロジェクタは、DMD及び投射光源を連携させた制御により、表示像をスクリーンに描画する。
 さらに、変形例11のHUDでは、LCOS(Liquid Crystal On Silicon)を用いたプロジェクタが採用されている。また変形例12のHUDには、虚像Viを空中表示させる光学系の一つに、ホログラフィック光学素子が採用されている。
 上記実施形態の変形例13では、HCUとHUDとが一体的に構成されている。即ち、HUDの制御回路には、HCUの処理機能が実装されている。こうした変形例13では、HUDが、「表示制御装置」に相当する。また変形例14のHCUの処理機能は、メータECUに設けられている。こうしたメータECU以外にも、ナビゲーションECU及びディスプレイオーディオECU等に、HCUの処理機能が実装されてよい。こうした変形例14等では、メータ装置、ナビゲーション装置及びディスプレイオーディオ装置が「表示制御装置」に相当する。
 上記第六実施形態等では、フロントカメラ31(周辺監視センサ30)の前方検出範囲が、アイポイントEPから見て画角VAと重なる前方路面範囲よりも車両前方に広くなっている。これにより、制御対象Tcの移行位置が画角VA内となる以前に、制御対象Tcの変化の予告が可能であった。しかし、変形例15のフロントカメラの前方検出範囲は、画角VAと重なる前方路面範囲より、自車側に狭く規定されていてもよい。こうした変形例15では、オフセット予告表示及び顔所予告表示は、省略される。
 上記実施形態の変形例16では、フロントカメラ31の撮像データであって、自車の前景を撮像した撮像データを取得するカメラ画像取得部が、HCU100に設けられている。表示生成部74は、撮像データに基づく前景のリアル画像に、LTAコンテンツCTlt等の元画像を重ねてなる映像データを生成する。こうした映像データに基づき、HUD20は、リアル画像に各コンテンツを重ねた映像を、前景に虚像として表示させる。以上のように、HUD20の画角VAが十分でない場合、AR表示に用いられるコンテンツ等の元画像をリアル画像に重ねた虚像表示が実施されてもよい。
 上記実施形態にて、HCUによって提供されていた各機能は、ソフトウェア及びそれを実行するハードウェア、ソフトウェアのみ、ハードウェアのみ、あるいはそれらの複合的な組合せによっても提供可能である。さらに、こうした機能がハードウェアとしての電子回路によって提供される場合、各機能は、多数の論理回路を含むデジタル回路、又はアナログ回路によっても提供可能である。
 また、上記の表示制御方法を実現可能なプログラム(表示制御プログラム及び車両用プログラム)等を記憶する記憶媒体(持続的有形コンピュータ読み取り媒体,non-transitory tangible storage medium)の形態も、適宜変更されてよい。例えば記憶媒体は、回路基板上に設けられた構成に限定されず、メモリカード等の形態で提供され、スロット部に挿入されて、HCUの制御回路に電気的に接続される構成であってよい。さらに、記憶媒体は、HCUへのプログラムのコピー基となる光学ディスク及びのハードディスクドライブ等であってもよい。
 HMIシステムを搭載する車両は、一般的な自家用の乗用車に限定されず、レンタカー用の車両、有人タクシー用の車両、ライドシェア用の車両、貨物車両及びバス等であってもよい。
 HMIシステムを搭載する車両は、右ハンドル車両であってもよく、又は左ハンドル車両であってもよい。さらに、車両が走行する交通環境は、左側通行を前提とした交通環境であってもよく、右側通行を前提とした交通環境であってもよい。本開示によるコンテンツ表示は、それぞれの国及び地域の道路交通法、さらに車両のハンドル位置等に応じて適宜最適化される。
 本開示に記載の制御部及びその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の装置及びその手法は、専用ハードウェア論理回路により、実現されてもよい。もしくは、本開示に記載の装置及びその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウェア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていてもよい。

Claims (12)

  1.  路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持機能を備える車両(A)において用いられ、ヘッドアップディスプレイ(20)による表示を制御する表示制御装置であって、
     前記運転制御に用いられる路面上の制御対象(Tc)を示す対象情報を取得する情報取得部(72)と、
     前記運転制御に用いられる前記制御対象が変わる場合に、前記制御対象の変化を示す制御対象コンテンツ(CTlt,CTet)を表示させる表示制御部(74)と、
     を備える表示制御装置。
  2.  前記情報取得部は、前記制御対象の前記車両に対する相対位置を示す対象位置情報、をさらに取得し、
     前記表示制御部は、前記制御対象に関連づけて前記制御対象コンテンツを路面に重畳表示させる請求項1に記載の表示制御装置。
  3.  前記表示制御部は、
     前記制御対象の変化が予定される移行位置(Sls)が前記ヘッドアップディスプレイの画角(VA)内であるか否かを判定し、
     前記移行位置が前記画角外である場合、前記画角内に視認される前記制御対象を強調する様態で前記制御対象コンテンツを表示させ、前記制御対象の変化を予告する請求項2に記載の表示制御装置。
  4.  前記表示制御部は、
     前記制御対象の変化が予定される移行位置(Sls,Sle)が前記ヘッドアップディスプレイの画角(VA)内であるか否かを判定し、
     前記移行位置が前記画角外である場合、前記制御対象コンテンツとは別に予告アイコン(CTni)を表示させ、前記制御対象の変化を予告する請求項2に記載の表示制御装置。
  5.  前記制御対象コンテンツは、前記制御対象に対し走路の中央側となる路面に重畳される画像部を含み、
     前記表示制御部は、
     前記対象情報に基づき、前記制御対象が走路を区画する区画線(Ll)であるか否かを把握し、
     前記制御対象が前記区画線と異なる場合、前記制御対象が前記区画線である場合よりも、前記制御対象及び前記画像部間の間隔(Die)を広くする請求項2~4のいずれか一項に記載の表示制御装置。
  6.  前記表示制御部は、第一対象から第二対象へと前記制御対象が変わる場合、前記第一対象に関連付けて第一画像部(LPl,LPr)を重畳表示させつつ、当該第一画像部とつなげないように前記第二対象に関連付けて第二画像部(LPe)を重畳表示させる請求項2~5のいずれか一項に記載の表示制御装置。
  7.  前記表示制御部は、第一対象から第二対象へと前記制御対象が変わる場合、前記第一対象に関連付けて第一画像部(LPl)を重畳表示させつつ、当該第一画像部とつなげた様態で前記第二対象に関連付けて第二画像部(LPe)を重畳表示させる請求項2~5のいずれか一項に記載の表示制御装置。
  8.  前記情報取得部は、前記制御対象として前記運転制御に用いられる物標の種別を示す情報を含む前記対象情報を取得し、
     前記表示制御部は、前記制御対象とされる前記物標の種別に応じて、前記制御対象コンテンツの様態を変更する請求項1~7のいずれか一項に記載の表示制御装置。
  9.  前記情報取得部は、前記運転制御のために生成される前記車両の予定走行ライン(PRL)を示す軌跡情報、をさらに取得し、
     前記表示制御部は、前記軌跡情報に基づき、前記運転制御される前記車両の前記予定走行ラインを示す予想軌跡コンテンツ(CTp)を重畳表示させる請求項1~8のいずれか一項に記載の表示制御装置。
  10.  前記表示制御部は、前記制御対象コンテンツを表示する場合に、前記予想軌跡コンテンツを非表示にする請求項9に記載の表示制御装置。
  11.  路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持機能を備える車両(A)において用いられ、ヘッドアップディスプレイ(20)による表示を制御する表示制御プログラムであって、
     少なくとも一つの処理部(11)に、
     前記運転制御に用いられる路面上の制御対象(Tc)を示す対象情報を取得し(S104,S204)、
     前記運転制御に用いられる前記制御対象が変わる場合に、前記制御対象の変化を示す制御対象コンテンツ(CTlt,CTet)を表示させる(S108,S209)、
     ことを含む処理を実施させる表示制御プログラム。
  12.  車両(A)において用いられ、ヘッドアップディスプレイ(20)による表示を制御する車載システムであって、
     路面情報に基づき特定される走路内での走行が継続されるよう運転制御を行う車線維持制御部(51,53)と、
     前記運転制御に用いられる路面上の制御対象(Tc)を示す対象情報を取得する情報取得部(72)と、
     前記運転制御に用いられる前記制御対象が変わる場合に、前記制御対象の変化を示す制御対象コンテンツ(CTlt,CTet)を表示させる表示制御部(74)と、
     を備える車載システム。
PCT/JP2020/032301 2019-10-17 2020-08-27 表示制御装置、表示制御プログラム及び車載システム WO2021075160A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2019190360 2019-10-17
JP2019-190360 2019-10-17
JP2020-090877 2020-05-25
JP2020090877A JP7259802B2 (ja) 2019-10-17 2020-05-25 表示制御装置、表示制御プログラム及び車載システム

Publications (1)

Publication Number Publication Date
WO2021075160A1 true WO2021075160A1 (ja) 2021-04-22

Family

ID=75537796

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/032301 WO2021075160A1 (ja) 2019-10-17 2020-08-27 表示制御装置、表示制御プログラム及び車載システム

Country Status (1)

Country Link
WO (1) WO2021075160A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013533990A (ja) * 2010-05-11 2013-08-29 コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミット ベシュレンクテル ハフツング 走行細長通路を求める方法
WO2015118859A1 (ja) * 2014-02-05 2015-08-13 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法
JP2016110627A (ja) * 2014-12-01 2016-06-20 株式会社デンソー 画像処理装置
JP2017074918A (ja) * 2015-10-16 2017-04-20 株式会社デンソー 報知管理装置及び報知管理方法
JP2017210034A (ja) * 2016-05-23 2017-11-30 本田技研工業株式会社 走行制御装置
US20180370567A1 (en) * 2017-06-21 2018-12-27 Toyota Research Institute, Inc. Enhanced virtual lane marker data for conveying a vehicle operational state
WO2019175956A1 (ja) * 2018-03-13 2019-09-19 三菱電機株式会社 表示制御装置、表示装置、及び表示制御方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013533990A (ja) * 2010-05-11 2013-08-29 コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミット ベシュレンクテル ハフツング 走行細長通路を求める方法
WO2015118859A1 (ja) * 2014-02-05 2015-08-13 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法
JP2016110627A (ja) * 2014-12-01 2016-06-20 株式会社デンソー 画像処理装置
JP2017074918A (ja) * 2015-10-16 2017-04-20 株式会社デンソー 報知管理装置及び報知管理方法
JP2017210034A (ja) * 2016-05-23 2017-11-30 本田技研工業株式会社 走行制御装置
US20180370567A1 (en) * 2017-06-21 2018-12-27 Toyota Research Institute, Inc. Enhanced virtual lane marker data for conveying a vehicle operational state
WO2019175956A1 (ja) * 2018-03-13 2019-09-19 三菱電機株式会社 表示制御装置、表示装置、及び表示制御方法

Similar Documents

Publication Publication Date Title
WO2021002081A1 (ja) 表示制御装置及び表示制御プログラム
WO2020261781A1 (ja) 表示制御装置、表示制御プログラム、および持続的有形コンピュータ読み取り媒体
US11803053B2 (en) Display control device and non-transitory tangible computer-readable medium therefor
WO2020208989A1 (ja) 表示制御装置及び表示制御プログラム
JP7310560B2 (ja) 表示制御装置及び表示制御プログラム
WO2020225990A1 (ja) 表示制御装置及び表示制御プログラム
JP7338735B2 (ja) 表示制御装置及び表示制御プログラム
US11850940B2 (en) Display control device and non-transitory computer-readable storage medium for display control on head-up display
JP7215466B2 (ja) 表示制御装置及び表示制御プログラム
JP7243660B2 (ja) 表示制御装置及び表示制御プログラム
JP7259802B2 (ja) 表示制御装置、表示制御プログラム及び車載システム
JP2021006805A (ja) 表示制御装置及び表示制御プログラム
JP7111121B2 (ja) 表示制御装置及び表示制御プログラム
WO2021075160A1 (ja) 表示制御装置、表示制御プログラム及び車載システム
JP7318431B2 (ja) 表示制御装置及び表示制御プログラム
JP7173078B2 (ja) 表示制御装置及び表示制御プログラム
JP7092158B2 (ja) 表示制御装置及び表示制御プログラム
JP7059975B2 (ja) 表示制御装置及び表示制御プログラム
JP2020183192A (ja) 表示制御装置及び表示制御プログラム
US12033548B2 (en) Display control device and display control program product
JP7014206B2 (ja) 表示制御装置および表示制御プログラム
WO2021039198A1 (ja) 表示制御装置及び表示制御プログラム
JP2021066197A (ja) 表示制御装置、表示制御プログラム及び車載システム
JP7255443B2 (ja) 表示制御装置及び表示制御プログラム
JP7063345B2 (ja) 表示制御装置及び表示制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20876877

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20876877

Country of ref document: EP

Kind code of ref document: A1