WO2017154316A1 - 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム - Google Patents

車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム Download PDF

Info

Publication number
WO2017154316A1
WO2017154316A1 PCT/JP2016/089116 JP2016089116W WO2017154316A1 WO 2017154316 A1 WO2017154316 A1 WO 2017154316A1 JP 2016089116 W JP2016089116 W JP 2016089116W WO 2017154316 A1 WO2017154316 A1 WO 2017154316A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
video data
range
display control
unit
Prior art date
Application number
PCT/JP2016/089116
Other languages
English (en)
French (fr)
Inventor
泉 佐伯
昇 勝俣
Original Assignee
株式会社Jvcケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2016046009A external-priority patent/JP6690311B2/ja
Priority claimed from JP2016047185A external-priority patent/JP6690315B2/ja
Priority claimed from JP2016051385A external-priority patent/JP6575404B2/ja
Application filed by 株式会社Jvcケンウッド filed Critical 株式会社Jvcケンウッド
Publication of WO2017154316A1 publication Critical patent/WO2017154316A1/ja
Priority to US15/967,709 priority Critical patent/US10531016B2/en
Priority to US16/565,654 priority patent/US10567672B2/en
Priority to US16/565,665 priority patent/US10567673B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders

Definitions

  • the present invention relates to a vehicle display control device, a vehicle display system, a vehicle display control method, and a program.
  • the present invention has been made in view of the above, and an object of the present invention is to enable appropriate confirmation of the periphery of a vehicle.
  • a vehicle display control device acquires first video data from a rear camera that is disposed behind a vehicle and captures the rear of the vehicle.
  • a rear video data acquisition unit; a side rear video data acquisition unit that is arranged on a side of the vehicle and acquires second video data from a side rear camera that captures a rear side of the vehicle; and the rear video data acquisition A first section that is a part of the first video data acquired by the section and a second section that is located on a side of the first range, and a first section that is cut out as the first range.
  • An image is displayed on a rear view monitor that displays a rear image of the vehicle, and the second image data is displayed on a side monitor that displays an image of a side of the vehicle, and is cut as the second range under a predetermined condition.
  • the video Characterized in that it comprises a display control unit for displaying on Idomonita.
  • a vehicle display system includes the vehicle display control device and at least one of the rear camera, the side rear camera, the rear view monitor, and the side monitor.
  • a vehicle display control method includes a rear image data acquisition step for acquiring first image data from a rear camera that is disposed behind a vehicle and captures the rear of the vehicle, and is disposed on a side of the vehicle. And a part of the first video data acquired in the rear video data acquisition step for acquiring the second video data from the side rear camera that captures the rear side of the vehicle and the rear video data acquisition step.
  • a cutting step for cutting out the first range and a second range located to the side of the first range, and an image cut out as the first range as a rear view monitor for displaying a rear image of the vehicle Display the second video data on a side monitor that displays a video of the side of the vehicle, and display the video clipped as the second range on the side monitor under a predetermined condition. And a display control step that.
  • a program according to the present invention is arranged at a rear of a vehicle, and is arranged at a rear video data acquisition step of acquiring first video data from a rear camera that captures the rear of the vehicle, and is arranged at a side of the vehicle, A side rear video data acquisition step of acquiring second video data from a side rear camera that images the rear side of the rear side, and a first range that is a part of the first video data acquired in the rear video data acquisition step; A step of cutting out a second range located on the side of the first range, and displaying a video cut out as the first range on a rear view monitor that displays a rear image of the vehicle, Display that displays second video data on a side monitor that displays a video of a side of the vehicle, and displays video that is cut out as the second range on the side monitor under a predetermined condition To execute the control steps on a computer that acts as a vehicle for the display control device.
  • FIG. 1 is a schematic diagram illustrating a configuration example of a vehicle display system according to the first embodiment.
  • FIG. 2 is a schematic diagram illustrating a configuration example of the vehicle display system according to the first embodiment.
  • FIG. 3 is a block diagram illustrating a configuration example of the vehicle display system according to the first embodiment.
  • FIG. 4 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the first embodiment.
  • FIG. 5 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • FIG. 6 is a flowchart showing the flow of processing in the display control unit of the vehicle display control device of the vehicle display system according to the first embodiment.
  • FIG. 1 is a schematic diagram illustrating a configuration example of a vehicle display system according to the first embodiment.
  • FIG. 2 is a schematic diagram illustrating a configuration example of the vehicle display system according to the first embodiment.
  • FIG. 3
  • FIG. 7 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • FIG. 8 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • FIG. 9 is a flowchart showing the flow of processing in the vehicle display control apparatus of the vehicle display system according to the second embodiment.
  • FIG. 10 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the second embodiment.
  • FIG. 11 is a diagram illustrating another example of the video data captured by the rear camera of the vehicle display system according to the second embodiment.
  • FIG. 12 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the second embodiment.
  • FIG. 13 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the second embodiment.
  • FIG. 14 is a block diagram illustrating a configuration example of the vehicle display system according to the third embodiment.
  • FIG. 15 is a schematic diagram illustrating a configuration example of the vehicle display system according to the third embodiment.
  • FIG. 16 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the third embodiment.
  • FIG. 17 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • FIG. 18 is a diagram illustrating another example of the video data captured by the rear camera of the vehicle display system according to the third embodiment.
  • FIG. 19 is a flowchart illustrating a process flow in the control unit of the vehicle display control device of the vehicle display system according to the third embodiment.
  • FIG. 20 is a diagram illustrating another example of images displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • FIG. 21 is a diagram illustrating another example of images displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • FIG. 22 is a flowchart showing a flow of processing in the control unit of the vehicle display control apparatus of the vehicle display system according to the fourth embodiment.
  • FIG. 23 is a block diagram illustrating a configuration example of the vehicle display system according to the fifth embodiment.
  • FIG. 24 is a flowchart showing the flow of processing in the control unit of the vehicle display control apparatus of the vehicle display system according to the fifth embodiment.
  • FIG. 1 is a schematic diagram illustrating a configuration example of a vehicle display system according to the first embodiment.
  • FIG. 2 is a schematic diagram illustrating a configuration example of the vehicle display system according to the first embodiment.
  • FIG. 3 is a block diagram illustrating a configuration example of the vehicle display system according to the first embodiment.
  • the vehicle display system 1 includes a rear camera 110, a right side camera (side rear camera) 120, a left side camera (side rear camera) 130, a rear view monitor 140, It has a side monitor 150, a left side monitor 160, a recognition dictionary storage unit 200, and a vehicle display control device 10.
  • the rear camera 110 is disposed behind the vehicle 100 and photographs the rear of the vehicle 100.
  • the rear camera 110 captures a range including a confirmation range by the rear view monitor 140.
  • the rear camera 110 captures a range including the blind spots of the right side camera 120 and the left side camera 130.
  • the rear camera 110 has a horizontal angle of view of 90 to 180 °, for example, and a vertical angle of view of 45 to 90 °, for example.
  • the rear camera 110 captures the first video data 110A as shown in FIG.
  • FIG. 4 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the first embodiment.
  • the rear camera 110 can capture a wider range of video than the range displayed on the rear view monitor 140, but the first range is a range that allows the driver of the vehicle 100 to properly recognize the rear using the rear view monitor 140.
  • AC is cut out and displayed on the rear view monitor 140.
  • the first video data 110A includes a first range AC that is a confirmation range by the rear view monitor 140, a second range AR and a second range AL that are confirmation ranges by the right side monitor 150 and the left side monitor 160.
  • the first range AC and the second range AR partially overlap.
  • the first range AC and the second range AL partially overlap.
  • the first video data 110A includes a blind spot range BR corresponding to the blind spot of the right side camera 120 and a blind spot range BL corresponding to the blind spot of the left side camera 130 to the side of the first range AC.
  • the first video data 110A further includes the outside of the first range AC, the second range AR, and the second range AL.
  • the rear camera 110 normally takes a picture including a range not displayed on the rear view monitor 140, the right side monitor 150, and the left side monitor 160.
  • the rear camera 110 outputs the captured first video data 110 ⁇ / b> A to the rear video data acquisition unit 42 of the video data acquisition unit 40 of the vehicle display control device 10.
  • the right side camera 120 is arranged on the right side of the vehicle 100 and photographs the right side of the vehicle 100.
  • the right side camera 120 captures a confirmation range by the right side monitor 150.
  • the right-side camera 120 has a horizontal field angle of, for example, 15 to 45 ° and a vertical field angle of, for example, 15 to 45 °.
  • the right camera 120 is adjustable in angle.
  • the right-side camera 120 outputs the captured video to the side rear video data acquisition unit 41 of the video data acquisition unit 40 of the vehicle display control device 10.
  • the left side camera 130 is arranged on the left side of the vehicle 100 and photographs the left side of the vehicle 100.
  • the left side camera 130 captures a confirmation range by the left side monitor 160.
  • the left camera 130 has a horizontal angle of view of, for example, 15 to 45 °, and a vertical angle of view of, for example, 15 to 45 °.
  • the left camera 130 is adjustable in angle.
  • the left-side camera 130 outputs the captured video to the side rear video data acquisition unit 41 of the video data acquisition unit 40 of the vehicle display control device 10.
  • the rear view monitor 140 is an electronic room mirror as an example. When the rear view monitor 140 is used as an electronic room mirror, it does not matter whether there is a half mirror for confirming the rear by optical reflection.
  • the rear view monitor 140 is a display including, for example, a liquid crystal display (LCD: Liquid Crystal Display) or an organic EL (Organic Electro-Luminescence) display.
  • the rear view monitor 140 displays a rear image of the vehicle 100 based on the video signal output from the display control unit 90 of the vehicle display control device 10. Specifically, the rear view monitor 140 displays a rear image as shown in FIG.
  • FIG. 5 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • the rear view monitor 140 overlaps and displays a part of the right side monitor 150 and the left side monitor 160 on the side.
  • the rear view monitor 140 is disposed at a position that is easily visible to the driver.
  • the rear view monitor 140 is disposed at the center upper portion of the windshield 101 in the vehicle width direction.
  • the right side monitor 150 is a display including a liquid crystal display or an organic EL display, for example.
  • the right side monitor 150 displays a right rear video of the vehicle 100 based on the video signal output from the display control unit 90 of the vehicle display control device 10. Specifically, the right side monitor 150 displays a right rear image as shown in FIG.
  • the right side monitor 150 has a range in which the rear view is hindered by the reflection of the vehicle body 100R on the right side of the vehicle 100.
  • the right side monitor 150 is disposed at a position that is easily visible to the driver. In the present embodiment, the right side monitor 150 is disposed on the right side of the dashboard 102 in the vehicle width direction.
  • the left side monitor 160 is a display including, for example, a liquid crystal display or an organic EL display.
  • the left side monitor 160 displays a left rear video of the vehicle 100 based on the video signal output from the display control unit 90 of the vehicle display control device 10. Specifically, the left side monitor 160 displays a left rear image as shown in FIG.
  • the left side monitor 160 has a range in which the rear view is hindered by the reflection of the vehicle body 100 ⁇ / b> L on the left side of the vehicle 100.
  • the left side monitor 160 is disposed at a position that is easily visible to the driver. More specifically, the left side monitor 160 is disposed on the left side of the dashboard 102 in the vehicle width direction.
  • the recognition dictionary storage unit 200 stores, for example, a recognition dictionary that can collate patterns such as the shape, size, and color of a front view of a moving body including a four-wheeled vehicle, a two-wheeled vehicle, and a person.
  • the recognition dictionary storage unit 200 is, for example, a semiconductor memory device such as a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory (Flash Memory), a hard disk, an optical disk, an external storage device via a network, or the like. It is a storage device.
  • the vehicle display control device 10 includes a storage unit 20 and a control unit 30.
  • the storage unit 20 stores data and various processing results required for various processes in the vehicle display control apparatus 10.
  • the storage unit 20 is, for example, a semiconductor memory device such as a RAM, a ROM, or a flash memory, or a storage device such as a hard disk, an optical disk, or an external storage device via a network.
  • the control unit 30 is an arithmetic processing unit configured with, for example, a CPU (Central Processing Unit).
  • the control unit 30 includes a video data acquisition unit 40, a cutout unit 50, a specification unit 60, a detection unit 70, a determination unit 80, and a display control unit 90.
  • the control unit 30 executes instructions included in the program stored in the storage unit 20.
  • the video data acquisition unit 40 acquires video images of the rear and side rear of the vehicle 100.
  • the video data acquired by the video data acquisition unit 40 is, for example, video data in which images of 120 frames per second are continuous.
  • the video data acquisition unit 40 includes a side rear video data acquisition unit 41 and a rear video data acquisition unit 42.
  • the side rear video data acquisition unit 41 acquires the second video data output by the right side camera 120 and the left side camera 130.
  • the side rear video data acquisition unit 41 outputs the acquired second video data to the cutout unit 50.
  • the rear video data acquisition unit 42 acquires the first video data 110 ⁇ / b> A output from the rear camera 110.
  • the rear video data acquisition unit 42 outputs the acquired first video data 110A to the cutout unit 50 and the detection unit 70.
  • the cutout unit 50 cuts out the first range AC that is a part of the first video data 110A from the first video data 110A. Which range of the first video data 110A is the first range AC is registered and stored in advance. In the present embodiment, the first range AC is the central portion of the first video data 110A.
  • the cutout unit 50 outputs the cut out rear video data 110 ⁇ / b> C to the specifying unit 60 and the display control unit 90.
  • the cutout unit 50 cuts out the first right rear video data 110R and the first left rear video data 110L in accordance with the right side monitor 150 and the left side monitor 160 from the second video data.
  • the cutout unit 50 outputs the cut out first right rear video data 110R and the first left rear video data 110L to the display control unit 90.
  • the identifying unit 60 identifies the second range AR, the second range AL, the blind spot range BR, and the blind spot range BL located on the side of the first range AC in the first video data 110A. More specifically, the specifying unit 60 includes the first right rear video data 110R and the first left rear video data extracted from the second video data by the shooting direction of the right side camera 120 and the left side camera 130 and the cutting unit 50. Ranges that are predetermined as ranges that coincide with or substantially coincide with 110L are specified as the second range AR and the second range AL. Further, the specifying unit 60 converts the shooting direction of the right side camera 120 and the left side camera 130 and the first right rear video data 110R and the first left rear video data 110L extracted from the second video data by the cutting unit 50.
  • a predetermined range based on the blind spot range BR and the blind spot range BL are specified.
  • the specifying unit 60 performs image matching based on the second video data and the first video data 110A, and, as shown in FIG. 4, the second range AR in the first video data 110A and The second range AL, the blind spot range BR, and the blind spot range BL may be specified.
  • the second video data is cut out by the cutting unit 50
  • the first left rear video data 110L and the first right rear video data 110R are matched.
  • the identifying unit 60 outputs information on the second range AR, the second range AL, the blind spot range BR, and the blind spot range BL in the identified first video data 110A to the detecting unit 70.
  • the processing of the specifying unit 60 is controlled by the control unit 30 so as to be executed when the rear camera 110, the right side camera 120, or the left side camera 130 is adjusted in angle or exchanged.
  • the specifying unit 60 displays a frame indicating the second range AR, the second range AL, the blind spot range BR, and the blind spot range BL together with the rear video data 110C on the rear view monitor 140, and the driver or the like. You may make it set by operation of. Specifically, the driver or the like is displayed on the rear view monitor 140 and the first right rear video data 110R displayed on the right side monitor 150, the first left rear video data 110L displayed on the left side monitor 160, and the like. Align the frame with the correct position so that it matches the frame. In this manner, the specifying unit 60 may specify the second range AR, the second range AL, the blind spot range BR, and the blind spot range BL in the first video data 110A.
  • the detection unit 70 detects the backward moving object V from the first video data 110A.
  • the detection unit 70 may detect a moving object with respect to the entire first video data 110A and determine whether the detected moving object exists in the blind spot range BR or the blind spot range BL.
  • the blind spot range BR or the blind spot range may be determined. You may detect a mobile body with respect to BL.
  • the detection unit 70 includes a recognition unit 71 that recognizes the moving body and recognizes the backward moving body V in the blind area BR or the blind area BL of the first video data 110A or the first video data 110A.
  • the determination unit 80 determines whether or not the backward moving body V detected by the detection unit 70 exists in the blind spot range BR or the blind spot range BL. Specifically, in the case of the first video data 110A shown in FIG. 4, it is determined that the backward moving body V1 exists in the blind spot range BL.
  • the display control unit 90 displays the rear video data 110C on the rear view monitor 140 as normal display processing at normal times.
  • the display control unit 90 displays the first right rear video data 110R on the right side monitor 150 as the normal display process at the normal time.
  • the display control unit 90 normally causes the right side monitor 150 to display the first right rear video data 110R based on the second video data captured by the right side camera 120.
  • the display control unit 90 displays the first left rear video data 110L on the left side monitor 160 as normal display processing at normal time.
  • the display control unit 90 normally displays the first left rear video data 110L based on the second video data captured by the left camera 130 on the left side monitor 160.
  • the display control unit 90 determines whether or not a predetermined condition is satisfied every frame or every predetermined frame. When the predetermined condition is satisfied, the display control unit 90 sets the blind spot range BR or the blind spot range BL to the right side monitor 150 and the left side monitor 160. A blind spot display process to include and display is performed. More specifically, when the determination unit 80 determines that the backward moving object V exists in the blind spot range BR or the blind spot range BL, the display control unit 90 outputs the second right rear video data cut out from the first video data 110A. 110R2 (see FIG. 7) and the second left rear video data 110L2 (see FIG. 7) are displayed on the right side monitor 150 and the left side monitor 160. The display control unit 90 returns the right side monitor 150 and the left side monitor 160 to normal display when the backward moving object V deviates from the blind spot range BR or the blind spot range BL of the first video data 110A.
  • the display control unit 90 Even if the backward moving object V is detected in the blind spot range BR or the blind spot range BL of the first video data 110A, the display control unit 90 has a small amount of the backward moving object V in the blind spot range BR or the blind spot range BL. If it is not displayed (only a little is shown), the right side monitor 150 and the left side monitor 160 may be kept in a normal display. Specifically, for example, when the area of the rear moving body V reflected in the blind spot range BR or the blind spot range BL is equal to or less than half of the area when the entire rear moving body V is shown, the normal display may be maintained. .
  • the display control unit 90 determines whether or not the backward moving body V or a part of the backward moving body V (hereinafter, described as the backward moving body V) is detected behind the vehicle 100 (step S11). More specifically, the display control unit 90 determines whether or not the backward moving object V is detected in the first video data 110 ⁇ / b> A by the detection unit 70.
  • the display control unit 90 determines that the backward moving object V is not detected behind the vehicle 100 (No in step S11), the display control unit 90 ends the process.
  • step S11 If the display control unit 90 determines that the backward moving body V is detected behind the vehicle 100 (Yes in step S11), the display control unit 90 proceeds to step S12.
  • the display control unit 90 determines whether or not the detected position of the rear moving body V exists in the blind spot range BR or the blind spot range BL of the first video data 110A (step S12). More specifically, the display control unit 90 determines whether or not the detection unit 70 has detected the backward moving object V existing in the blind spot range BR or the blind spot range BL of the first video data 110A.
  • step S12 If the display control unit 90 determines that the detected position of the backward moving body V does not exist in the blind spot range BR or the blind spot range BL of the first video data 110A (No in step S12), the display control unit 90 returns to step S11 for processing. repeat.
  • step S12 When the display control unit 90 determines that the detected position of the backward moving body V is in the blind spot range BR or the blind spot range BL of the first video data 110A (Yes in step S12), the process proceeds to step S13.
  • the display control unit 90 determines whether or not the detected backward moving object V is approaching the vehicle 100 (step S13). More specifically, for example, the display control unit 90 determines whether or not the detection unit 70 detects that the backward moving object V is close to the vehicle 100.
  • step S13 If the display control unit 90 determines that the backward moving object V is not approaching the vehicle 100 (No in step S13), the display control unit 90 returns to step S11 and repeats the process.
  • step S13 If the display control unit 90 determines that the backward moving object V is approaching the vehicle 100 (Yes in step S13), the display control unit 90 proceeds to step S14.
  • the display control unit 90 determines whether or not there is a moving body on the side of the vehicle 100 (step S14). More specifically, the display control unit 90 compares the portion of the second video data excluding the reflection of the vehicle body 100R and the vehicle body 100L with the corresponding portion of the first video data 110A. It is determined that there is a moving object on the side. In this way, the display control unit 90 detects a moving body that exists on the side of the vehicle 100 that is photographed only by the right-side camera 120 or the left-side camera 130 and is not photographed by the rear camera 110.
  • the display control unit 90 determines that there is no moving object on the side of the vehicle 100 (No in step S14), the display control unit 90 ends the process.
  • step S14 If the display control unit 90 determines that a moving body is present on the side of the vehicle 100 (Yes in step S14), the display control unit 90 proceeds to step S15.
  • the display control unit 90 causes the right side monitor 150 and the left side monitor 160 to display the second right rear video data 110R2 and the second left rear video data 110L2 cut out from the first video data 110A (step S15). More specifically, the display control unit 90 assigns the second range AR and the second range AL, which are located to the side of the first range AC of the first video data 110A, to the cutout unit 50 as the second right rear video data. 110R2 and second left rear video data 110L2. Then, the display control unit 90 displays the clipped second right rear video data 110R2 and second left rear video data 110L2 on the right side monitor 150 and the left side monitor 160.
  • the display control unit 90 determines whether or not the position of the backward moving object V is outside the blind spot range BR or the blind spot range BL of the first video data 110A (step S16). More specifically, the display control unit 90 determines whether the detection unit 70 detects that the position of the backward moving object V is outside the blind spot range BR or the blind spot range BL of the first video data 110A.
  • step S16 When the display control unit 90 determines that the position of the backward moving body V is outside the blind spot range BR or the blind spot range BL of the first video data 110A (Yes in step S16), the process proceeds to step S17.
  • the display control unit 90 changes the determination condition as to whether or not the detected backward moving body V exists in the blind spot range BR or the blind spot range BL of the first video data 110A according to the distance between the vehicle 100 and the backward moving body V. Also good. For example, when the detected distance to the rear moving body V is short, it is determined that the area is present if the area of the rear moving body V reflected in the blind spot range BR or the blind spot range BL is 25% or more of the total reflected area. To do. Further, when the detected distance to the rear moving body V is long, it is determined that the area is present if the area of the rear moving body V reflected in the blind spot range BR or the blind spot range BL is 75% or more of the total projected area. To do.
  • the distance between the vehicle 100 and the detected rear moving body V is determined when the rear moving body V is detected by the recognition unit 71 from the first video data 110A, and the grounding position based on the detected contour of the rear moving body is specified.
  • the position can be obtained from the positional relationship in the first video data 110A. Specifically, if the distance from the vehicle 100 to the rear moving body V is 100 m or more, the area of the rear moving body V shown in the blind spot range BR or the blind spot range BL is 75% or more of the area when the whole is shown. If so, it is judged to exist.
  • the area of the rear moving body V reflected in the blind spot range BR or the blind spot range BL is 50% or more of the area when the whole is reflected. If there is, it is judged that it exists. Furthermore, if the distance from the vehicle 100 to the rear moving body V is less than 50 m, the area of the rear moving body V reflected in the blind spot range BR or the blind spot range BL is 25% or more of the total area. Judge that it exists.
  • step S11 the display control unit 90 determines that the backward moving body V1 and the backward moving body V2 are detected in the first video data 110A (Yes in step S11). And the display control part 90 determines with the position of the back moving body V1 existing in the blind spot range BL of 110 A of 1st video data (it is Yes at step S12). Then, it is determined that the backward moving body V1 is approaching (Yes in step S13). Then, it is determined that there is no moving body on the side of vehicle 100 (Yes in step S14). In step S15, the display control unit 90 causes the left side monitor 160 to display the second left rear video data 110L2.
  • FIG. 7 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • the display control unit 90 causes the left side monitor 160 to display the second left rear video data 110L2 in which the rear moving body V1 is reflected, and the right side monitor 150 is a normal display.
  • the right rear video data 110R may be displayed.
  • FIG. 8 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the first embodiment.
  • the vehicle display system 1 displays the right side monitor 150 and the left side monitor 160.
  • the second right rear video data 110R2 and the second left rear video data 110L2 are displayed.
  • the vehicular display system 1 has the rear moving body V in the blind spot of the right side camera 120 and the left side camera 130 with respect to the right side monitor 150 and the left side monitor 160. Then, the second right rear video data 110R2 and the second left rear video data 110L2 cut out from the first video data 110A are displayed. As described above, the vehicular display system 1 includes the rear moving body V on the right side monitor 150 and the left side monitor 160 even when the rear moving body V exists in the blind spot of the right side camera 120 and the left side camera 130. Can be displayed. Thereby, the display system 1 for vehicles can display the back moving body V appropriately. For this reason, the display system 1 for vehicles can enable confirmation of the periphery of the suitable vehicle 100. FIG.
  • the vehicle display system according to the present embodiment will be described with reference to FIGS. 9 to 13.
  • the vehicle display system has the same basic configuration as the vehicle display system 1 of the first embodiment.
  • the same components as those of the vehicle display system 1 are denoted by the same reference numerals or corresponding reference numerals, and detailed description thereof is omitted.
  • the processing in the control unit is different from the processing in the control unit 30 of the vehicle display system 1.
  • the detection unit detects the moving direction of the backward moving object V.
  • the detection unit detects the moving direction of the rear moving body V based on the change in the position of the rear moving body V in the first video data 110A for each frame.
  • the determination unit determines whether or not the detected backward moving object V has moved from the first range AC to the blind spot range BR or the blind spot range BL.
  • the display control unit When the determination unit determines that the backward moving object V is moving from the first range AC or the second range AR or the second range AL to the blind spot range BR or the blind spot range BL, the display control unit The rear video data 110R3 or the second left rear video data 110L3 is displayed on the right side monitor 150 or the left side monitor 160.
  • the display control unit performs the processes shown in steps S21 to S27.
  • Steps S21 and S23 are the same as steps S11 and S13 in the flowchart shown in FIG. 6, and steps S24 to S27 are the same as steps S14 to S17 in the flowchart shown in FIG.
  • the display control unit determines whether or not the backward moving body V has moved from the first range AC, the second range AR, or the second range AL to the blind spot range BR or the blind spot range BL (step S22). More specifically, the display control unit detects whether or not the backward moving body V has been moved from the first range AC or the second range AR or the second range AL to the blind spot range BR or the blind spot range BL by the detection unit. Determine whether.
  • step S21 If the display control unit determines that the backward moving object V has not moved from the first range AC or the second range AR or the second range AL to the blind spot range BR or the blind spot range BL (No in step S22), step Returning to S21, the process is repeated.
  • step S22 If the display control unit determines that the backward moving object V is moving from the first range AC or the second range AR or the second range AL to the blind spot range BR or the blind spot range BL (Yes in step S22), step Proceed to S23.
  • FIG. 10 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the second embodiment.
  • FIG. 11 is a diagram illustrating another example of the video data captured by the rear camera of the vehicle display system according to the second embodiment.
  • FIG. 11 shows a state slightly after the state shown in FIG.
  • the backward moving body V3 moves from the first range AC to the blind spot range BL as shown in the first video data 110A1 and the first video data 110A2, and the backward moving body V4 is away from the vehicle 100.
  • step S21 the display control unit determines that the backward moving bodies V3 and V4 are detected in the first video data 110A1 (Yes in step S21). Then, the display control unit determines that the backward moving body V2 is moving from the first range AC to the blind spot range BL (Yes in step S22). Then, it is determined that the backward moving body V3 is approaching (Yes in step S23). Then, it is determined that there is no moving body on the side of vehicle 100 (Yes in step S24). In step S25, the display control unit causes the left side monitor 160 to display the second left rear video data 110L3.
  • the display control unit causes the left side monitor 160 to display the second left rear video data 110L3 in which the rear moving body V3 is reflected, and causes the right side monitor 150 to display the second right rear side.
  • the video data 110R3 is displayed.
  • FIG. 12 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the second embodiment.
  • the display control unit causes the left side monitor 160 to display the second left rear video data 110L3 in which the rear moving body V3 is reflected, and the right side monitor 150 is the normal display.
  • the right rear video data 110R may be displayed.
  • FIG. 13 is a diagram illustrating another example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the second embodiment.
  • the vehicle display system 1 detects the backward moving body V moving to the blind spot range BR or the blind spot range BL in the display control unit, with respect to the right side monitor 150 and the left side monitor 160.
  • Second right rear video data 110R3 and second left rear video data 110L3 are displayed.
  • the vehicular display system is configured so that the rear side moving body V moving to the blind spot range BR or the blind spot range BL is detected with respect to the right side monitor 150 or the left side monitor 160.
  • Second right rear video data 110R3 and second left rear video data 110L3 cut out from one video data 110A are displayed.
  • the display system 1 for vehicles can display the back moving body V appropriately.
  • the display system 1 for vehicles can enable confirmation of the periphery of the suitable vehicle 100.
  • FIG. 14 is a block diagram illustrating a configuration example of the vehicle display system according to the third embodiment.
  • the vehicle display system 1A of the present embodiment shown in FIG. 14 is different from the first embodiment in the configuration of the vehicle display control device 10A.
  • FIG. 15 is a schematic diagram illustrating a configuration example of the vehicle display system according to the third embodiment.
  • FIG. 16 is a diagram illustrating an example of video data captured by the rear camera of the vehicle display system according to the third embodiment. Specifically, the rear camera 110 captures the first video data 110A as shown in FIG.
  • the right-side camera 120 is shooting a shooting range SR as shown in FIG.
  • the right side camera 120 outputs the captured second video data to the side rear video data acquisition unit 41 of the video data acquisition unit 40 of the vehicle display control apparatus 10A.
  • the left side camera 130 is photographing a photographing range SL as shown in FIG.
  • the left side camera 130 outputs the captured second video data to the side rear video data acquisition unit 41 of the video data acquisition unit 40 of the vehicle display control apparatus 10A.
  • FIG. 17 is a diagram illustrating an example of an image displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • the right side monitor 150 displays a right rear image as shown in FIG. 17 during normal display.
  • the left side monitor 160 displays a left rear image as shown in FIG. 17 during normal display.
  • the vehicle display control device 10A includes a storage unit 20 and a control unit 30A.
  • the control unit 30A includes a video data acquisition unit 40, a cutout unit 50A, a determination unit 60A, a selection unit 70A, and a display control unit 90A.
  • the rear video data acquisition unit 42 outputs the acquired first video data 110A to the cutout unit 50A.
  • the cutout unit 50A cuts out the first right video data 110R1A and the first left video data 110L1A that match the right side monitor 150 and the left side monitor 160 from the second video data.
  • the video data displayed on the right side monitor 150 may be displayed without cutting out the second video data captured by the right camera 120, or may be displayed as the first right video data 110R1A.
  • the video data displayed on the left side monitor 160 may be displayed without cutting out the second video data captured by the left side camera 130, or may be displayed as the first left video data 110L1A.
  • the cutout unit 50A cuts out the second range AR and the second range AL from the first video data 110A. More specifically, the cutout unit 50A converts the second range AR located on the side of the first range AC of the first video data 110A into the second right video data (second right rear video data in the first embodiment) 110R2A. Cut out as. The cutout unit 50A cuts out the second range AL located on the side of the first range AC of the first video data 110A as second left video data (second left rear video data in the first embodiment) 110L2A. Which range of the first video data 110A is set as the second range AR and the second range AL is stored in the storage unit 20 in advance.
  • the vertical axis of the second range AR and the second range AL coincides with the vertical axis of the first range AC.
  • FIG. 18 is a diagram illustrating another example of the video data captured by the rear camera of the vehicle display system according to the third embodiment.
  • the cutout unit 50A configured as described above cuts out the first right video data 110R1A, the first left video data 110L1A, the second right video data 110R2A, the second left video data 110L2A, and the cut out rear video data 110C.
  • the data is output to the selection unit 70A.
  • Determination unit 60A determines the traveling state of vehicle 100.
  • the determination unit 60 ⁇ / b> A determines a traveling state based on information acquired from an ECU (Engine Control Unit) of the vehicle 100. More specifically, the determination unit 60A acquires information including the vehicle speed, for example.
  • Determination unit 60A determines whether vehicle 100 is continuously traveling at a predetermined speed or higher. Specifically, for example, the determination unit 60A determines whether or not the vehicle 100 continuously travels at a vehicle speed of 30 km / h or more for 10 seconds or more. Alternatively, the determination unit 60A may determine whether the vehicle 100 continuously travels at a predetermined speed or more and is operating with auto cruise control. Determination unit 60A outputs the determination result to selection unit 70A.
  • the selection unit 70A selects one of the first right video data 110R1A and the first left video data 110L1A, the second right video data 110R2A, and the second left video data 110L2A based on the traveling situation determined by the determination unit 60A. select. More specifically, when the determination unit 60A determines that the vehicle 100 is traveling at a predetermined speed or higher, the selection unit 70A selects the second right video data 110R2A and the second left video data 110L2A. When the determination unit 60A determines that the vehicle 100 is traveling at a speed lower than the predetermined speed, the selection unit 70A selects the first right video data 110R1A and the first left video data 110L1A. In other words, the selection unit 70A selects the first right video data 110R1A and the first left video data 110L1A at the normal time. The selection unit 70A outputs the selection result to the display control unit 90A.
  • the display control unit 90A causes the right side monitor 150 and the left side monitor 160 to display the video data selected by the selection unit 70A. More specifically, the display control unit 90A displays the first right video data 110R1A and the first left video data 110L1A on the right side monitor 150 and the left side monitor 160 as normal display processing at normal times.
  • the display control unit 90A causes the right side monitor 150 and the left side monitor 160 to display the second right video data 110R2A and the second left video data 110L2A.
  • FIG. 19 is a flowchart illustrating a process flow in the control unit of the vehicle display control device of the vehicle display system according to the third embodiment. This process is executed during startup of the vehicle display system 1A.
  • Control unit 30A determines whether or not the traveling speed of vehicle 100 is equal to or higher than a predetermined speed (step SA11). More specifically, control unit 30A determines whether or not traveling speed of vehicle 100 is determined to be equal to or higher than a predetermined speed by determination unit 60A.
  • step SA11 the control unit 30A proceeds to step SA14.
  • Control unit 30A proceeds to step SA12 if determining unit 60A determines that the traveling speed of vehicle 100 continues to be a predetermined speed or more (Yes in step SA11).
  • control unit 30A determines whether or not the traveling speed of the vehicle 100 has continued above a predetermined speed for a predetermined time (step SA12). More specifically, control unit 30A determines whether or not determination unit 60A has determined that the traveling speed of vehicle 100 has been at or above a predetermined speed for a predetermined time or more.
  • step SA12 When the determination unit 60A determines that the traveling speed of the vehicle 100 has not continued above the predetermined speed for a predetermined time or longer (No in step SA12), the control unit 30A proceeds to step SA14.
  • Control unit 30A proceeds to step SA13 if determining unit 60A determines that the traveling speed of vehicle 100 has continued above the predetermined speed for a predetermined time or longer (Yes in step SA12).
  • the control unit 30A selects and displays the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL as videos to be displayed on the right side monitor 150 and the left side monitor 160 (step S30). SA13). More specifically, the control unit 30A causes the selection unit 70A to select the second right video data 110R2A and the second left video data 110L2A. Then, the display control unit 90A displays the second right video data 110R2A and the second left video data 110L2A on the right side monitor 150 and the left side monitor 160.
  • the control unit 30A determines whether the current right side monitor 150 and left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL. (Step SA14).
  • the control unit 30A When it is determined that the current right side monitor 150 and the left side monitor 160 are not displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL, the control unit 30A (No in step SA14), the process is terminated.
  • step SA14 When it is determined that the current right side monitor 150 and the left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL, the control unit 30A (Yes in step SA14), the process proceeds to step SA15.
  • the control unit 30A selects and displays the second video data acquired by the side rear video data acquisition unit 41 as the video to be displayed on the right side monitor 150 and the left side monitor 160 (step SA15). More specifically, the control unit 30A causes the selection unit 70A to select the first right video data 110R1A and the first left video data 110L1A. Then, the display controller 90A displays the first right video data 110R1A and the first left video data 110L1A on the right side monitor 150 and the left side monitor 160.
  • FIG. 20 is a diagram illustrating another example of images displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • FIG. 21 is a diagram illustrating another example of images displayed on the rear view monitor, the right side monitor, and the left side monitor of the vehicle display system according to the third embodiment.
  • the vehicle display system 1A displays the video data selected by the selection unit 70A on the right side monitor 150 and the left side monitor 160 based on the traveling state of the vehicle 100 determined by the determination unit 60A.
  • the video data selected by the selection unit 70A based on the traveling state of the vehicle 100 determined by the determination unit 60A is used as the right side monitor 150 and the left side monitor 160.
  • the vehicle display system 1 ⁇ / b> A can display appropriate video data on the right side monitor 150 and the left side monitor 160 based on the traveling state of the vehicle 100.
  • the vehicle display system 1 ⁇ / b> A displays the second right video data 110 ⁇ / b> R ⁇ b> 2 ⁇ / b> A and the second left video data on the right side monitor 150 and the left side monitor 160 when the vehicle 100 continues at a predetermined speed or higher for a predetermined time or longer.
  • the vehicle display system 1 ⁇ / b> A can appropriately check the periphery of the vehicle 100 according to the traveling state.
  • FIG. 22 is a flowchart showing a flow of processing in the control unit of the vehicle display control apparatus of the vehicle display system according to the fourth embodiment.
  • the vehicle display system has the same basic configuration as the vehicle display system 1A of the third embodiment.
  • the same components as those in the vehicle display system 1A are denoted by the same reference numerals or corresponding reference numerals, and detailed description thereof is omitted.
  • the determination unit acquires information including current location information and map information, for example.
  • the determination unit determines whether the travel point of the vehicle 100 is a point where the vehicle 100 can travel at a predetermined speed or higher. Specifically, for example, when the traveling point of the vehicle 100 is a suburban road, a highway, a car road, a circuit, or the like, the determining unit determines that the vehicle 100 can travel at a predetermined speed or higher. Alternatively, when the vehicle 100 passes through the ETC gate, the determination unit may determine that the travel point of the vehicle 100 is an expressway or an automobile-only road and can travel at a predetermined speed or higher.
  • the predetermined speed is, for example, 80 km / h.
  • the selection unit selects the second right video data 110R2A and the second left video data 110L2A when the determination unit determines that the vehicle 100 is traveling at a point where the vehicle 100 can travel at a predetermined speed or higher.
  • the selection unit selects the first right video data 110R1A and the first left video data 110L1A when the determination unit determines that the vehicle 100 is traveling at a point where the vehicle 100 cannot travel at a predetermined speed or higher. In other words, the selection unit selects the first right video data 110R1A and the first left video data 110L1A at the normal time.
  • the control unit determines whether or not the determination unit determines that the point can travel at a predetermined speed or higher (step SA21). More specifically, the determination unit determines whether the current location of the vehicle 100 is a point where the vehicle 100 can travel at a predetermined speed or more based on the current location information and map information acquired from the vehicle 100.
  • step SA23 when the determination unit determines that the point is not a point where the vehicle can travel at a predetermined speed or higher (No in step SA21).
  • step SA22 when the determination unit determines that the point can travel at a predetermined speed or more (Yes in step SA21).
  • the control unit selects and displays the second right image data 110R2A and the second left image data 110L2A in the second range AR and the second range AL as images to be displayed on the right side monitor 150 and the left side monitor 160 (step SA22). ). More specifically, the control unit selects the second right video data 110R2A and the second left video data 110L2A at the selection unit, and the display control unit selects the second right video data 110R2A and the second left video data 110L2A with respect to the right side monitor 150 and the left side monitor 160. The video data 110R2A and the second left video data 110L2A are displayed.
  • the control unit determines whether the current right side monitor 150 and left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL ( Step SA23).
  • step SA23 When it is determined that the current right side monitor 150 and the left side monitor 160 are not displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL ( In step SA23, No), the process ends.
  • the control unit determines that the current right side monitor 150 and the left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL ( In step SA23, Yes), the process proceeds to step SA24.
  • the control unit selects and displays the second video data acquired by the side rear video data acquisition unit 41 as the video to be displayed on the right side monitor 150 and the left side monitor 160 (step SA24). More specifically, the control unit selects the first right video data 110R1A and the first left video data 110L1A at the selection unit, and the display control unit selects the first right video data 110R1A and the first left video data 110L1A. The video data 110R1A and the first left video data 110L1A are displayed.
  • the vehicle display system displays the video data selected by the selection unit on the right side monitor 150 and the left side monitor 160 based on the traveling state of the vehicle 100 determined by the determination unit.
  • the vehicle display system can display the appropriate right side monitor 150 and left side monitor 160 based on the traveling state of the vehicle 100 as in the third embodiment. .
  • the vehicle display system displays the second right video data 110R2A and the second left video data on the right side monitor 150 and the left side monitor 160.
  • 110L2A is displayed.
  • the second right video data 110R2A and the second left video data 110L2A that do not include the blind spot of the vehicle 100 are prioritized and confirmed from the side. can do.
  • the display system for vehicles can enable the confirmation of the periphery of the suitable vehicle 100 according to a driving
  • FIG. 23 is a block diagram illustrating a configuration example of the vehicle display system according to the fifth embodiment.
  • a vehicle display system 1B of the present embodiment shown in FIG. 23 is different from the third embodiment in the configuration of the vehicle display control device 10B.
  • the recognition dictionary storage unit 200 stores, for example, a recognition dictionary that can collate patterns such as a four-wheeled vehicle, a two-wheeled vehicle, and a front view of a moving body including a person, such as a shape, size, and color.
  • the vehicle display control device 10B includes a storage unit 20 and a control unit 30B.
  • Control unit 30B includes a video data acquisition unit 40, a cutout unit 50B, a determination unit 60B, a selection unit 70B, a detection unit 80B, and a display control unit 90B.
  • the rear video data acquisition unit 42 outputs the acquired first video data 110A to the cutout unit 50B and the detection unit 80B.
  • the determination unit 60B acquires, for example, the vehicle speed and information for determining the possibility of the passenger getting off.
  • the information for determining the possibility of the passenger getting off is, for example, unlocking the door of the vehicle 100, contacting the door knob of the door of the vehicle 100 or operating the door knob of the door of the vehicle 100 or being attached to the passenger.
  • the seat belt release operation is at least either one or a combination thereof.
  • the determination unit 60B determines whether or not there is a possibility that the vehicle 100 stops and the passenger gets out of the vehicle 100.
  • the stop of the vehicle 100 in this case may be regarded as a stop when, for example, the vehicle speed becomes less than 5 km / h due to deceleration in addition to a complete stop where the vehicle speed is zero. This is because it is possible to appropriately confirm the periphery of the vehicle 100 immediately before a complete stop for a passenger who is scheduled to get off.
  • Determination unit 60B outputs the determination result to selection unit 70B.
  • the determination unit 60B determines that there is a possibility of getting off when the vehicle speed is zero and the door lock release of the vehicle 100 is detected. In other words, the determination unit 60B determines that there is a possibility of getting off when it is detected that the door lock of the vehicle 100 is released after the vehicle 100 stops. Alternatively, the determination unit 60B determines that there is a possibility of getting off when the vehicle speed is zero and the contact of the door of the vehicle 100 with the inner knob of the vehicle is detected. In other words, the determination unit 60B determines that there is a possibility of getting off when contact with the inner knob of the door of the vehicle 100 is detected after the vehicle 100 stops.
  • the determination unit 60B determines that there is a possibility of getting off when the vehicle speed is zero and an operation on the inner knob of the door of the vehicle 100 is detected. In other words, the determination unit 60B determines that there is a possibility of getting off when an operation on the inner knob of the door of the vehicle 100 is detected after the vehicle 100 stops. Alternatively, the determination unit 60B determines that there is a possibility of getting off when the vehicle speed is zero and the release operation of the seat belt worn by the occupant is detected. In other words, the determination unit 60B determines that there is a possibility of getting off when the release operation of the seat belt worn by the passenger after the stop of the vehicle 100 is detected.
  • the determination unit 60B may determine that there is a possibility of getting off by combining a plurality of the above.
  • the state determined by the determination unit 60B as being likely to get off is not limited to the above. Specifically, for example, the determination unit 60B may determine that there is a possibility of getting off when it is detected that the current location of the vehicle 100 is a destination set in the navigation system.
  • the selection unit 70B selects the second right video data 110R2A and the second left video data 110L2A when the determination unit 60B determines that the vehicle 100 stops and there is a possibility of getting off.
  • the selection unit 70B selects the first right video data 110R1A and the first left video data 110L1A when the vehicle 100 is stopped by the determination unit 60B and it is not determined that there is a possibility of getting off. In other words, the selection unit 70B selects the first right video data 110R1A and the first left video data 110L1A at the normal time.
  • the selection unit 70B outputs the selection result to the display control unit 90B.
  • the detection unit 80B detects the moving body of the first video data 110A.
  • the detection unit 80B includes a recognition unit 81B that performs moving body recognition and recognizes a moving body in the first video data 110A.
  • the recognition unit 81B performs pattern matching using the recognition dictionary stored in the recognition dictionary storage unit 200 on the first video data 110A, and detects the presence of the moving object.
  • the recognizing unit 81B recognizes whether the moving body is close to or away from the vehicle 100 based on the change in the size of the moving body in the first video data 110A for each frame.
  • the detection unit 80B outputs the detection result to the display control unit 90B.
  • the display control unit 90B displays the first right video data 110R1A and the first left video data 110L1A on the right side monitor 150 and the left side monitor 160.
  • FIG. 24 is a flowchart showing the flow of processing in the control unit of the vehicle display control apparatus of the vehicle display system according to the fifth embodiment. This process is executed during startup of the vehicle display system 1B.
  • Control unit 30B determines whether or not vehicle 100 is determined to be stopped by determination unit 60B (step SB31).
  • Control unit 30B proceeds to step SB36 when determining unit 60B determines that vehicle 100 is not stopped (No in step SB31).
  • Control unit 30B proceeds to step SB32 when determining unit 60B determines that vehicle 100 is stopped (Yes in step SB31).
  • the control unit 30B determines whether or not the determination unit 60B determines that there is a possibility that the passenger gets out of the vehicle (step SB32).
  • the control unit 30B proceeds to step SB36 when the determination unit 60B determines that there is no possibility of getting out of the passenger (No in step SB32).
  • the control unit 30B proceeds to step SB33 when the determination unit 60B determines that there is a possibility that the passenger gets off (Yes in step SB32).
  • the control unit 30B selects and displays the second right image data 110R2A and the second left image data 110L2A in the second range AR and the second range AL as the images to be displayed on the right side monitor 150 and the left side monitor 160 (Step S30). SB33). More specifically, the control unit 30B selects the second right video data 110R2A and the second left video data 110L2A by the selection unit 70B, and the display control unit 90B selects the right side monitor 150 and the left side monitor 160. The second right video data 110R2A and the second left video data 110L2A are displayed.
  • the control unit 30B determines whether it is determined that the proximity moving body is detected in the second range AR or the second range AL (step SB34). More specifically, the control unit 30B determines that the moving body (rear moving body) is detected in the second range AR or the second range AL and the moving body is close to the vehicle 100 by the recognition unit 81B. In this case, it is determined that the proximity moving body is detected in the second range AR or the second range AL.
  • the control unit 30B returns to step SB31 and repeats the process when it is not determined that the proximity moving body is detected in the second range AR or the second range AL (No in step SB34).
  • the control unit 30B proceeds to step SB35 when it is determined that the proximity moving body is detected in the second range AR or the second range AL (Yes in step SB34).
  • the control unit 30B issues a warning (step SB35), returns to step SB31, and continues the process. More specifically, the control unit 30B displays characters and icons on the right side monitor 150 or the left side monitor 160 on the side where the proximity moving body is detected in step SB34 (hereinafter referred to as “detection side”) in the display control unit 90B. A warning display such as is displayed. Alternatively, the control unit 30B causes the display control unit 90B to display a warning display that blinks the second range AR or the second range AL on the detection-side right side monitor 150 or the left side monitor 160, and with a speaker. Audio may be output.
  • control unit 30B may turn on the illumination inside the rear end of the door of the vehicle 100 on the detection side in the display control unit 90B so that the proximity moving body recognizes the opening operation of the door. Furthermore, the control unit 30B may issue a warning when the detection side matches the side determined by the determination unit 60B as being likely to get out of the passenger. More specifically, the control unit 30B may perform a warning when the detection side matches the side where the door lock release of the vehicle 100 is detected. Alternatively, the control unit 30B may issue a warning when the detection side matches the side where the contact of the door of the vehicle 100 with the inner knob is detected. Alternatively, the control unit 30B may issue a warning when the detection side matches the side where the operation on the inner knob of the door of the vehicle 100 is detected. Alternatively, the control unit 30 may issue a warning when the detection side matches the side where the release operation of the seat belt worn by the occupant is detected.
  • the control unit 30B determines whether the current right side monitor 150 and the left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL. (Step SB36).
  • step SB36 When it is determined that the current right side monitor 150 and the left side monitor 160 are displaying the second right video data 110R2A and the second left video data 110L2A in the second range AR and the second range AL, the control unit 30B (Yes in step SB36), the process proceeds to step SB37.
  • the control unit 30B selects and displays the second video data acquired by the side rear video data acquisition unit 41 as the video to be displayed on the right side monitor 150 and the left side monitor 160 (step SB37). More specifically, the control unit 30B causes the selection unit 70B to select the first right video data 110R1A and the first left video data 110L1A. Then, the display controller 90B displays the first right video data 110R1A and the first left video data 110L1A on the right side monitor 150 and the left side monitor 160.
  • control unit 30B causes the right side monitor 150 and the left side monitor 160 to The two right video data 110R2A and the second left video data 110L2A are displayed.
  • the control unit 30B displays the second right video on the right side monitor 150 and the left side monitor 160 as shown in FIG. Data 110R2A and second left video data 110L2A are displayed.
  • the vehicle display system 1B causes the right side monitor 150 and the left side monitor 160 to display the video data selected by the selection unit 70B based on the traveling state of the vehicle 100 determined by the determination unit 60B.
  • the rear side is preferentially confirmed from the side by the second right video data 110R2A and the second left video data 110L2A not including the blind spot of the vehicle 100. be able to.
  • the side of the vehicle 100 can be confirmed from the first right video data 110R1A and the first left video data 110L1A. In this way, the vehicle display system 1B can enable appropriate confirmation of the vicinity of the vehicle 100 in accordance with the traveling state.
  • the vehicle display system 1B causes the right side monitor 150 and the left side monitor 160 to display the video data selected by the selection unit 70B based on the traveling state of the vehicle 100 determined by the determination unit 60B.
  • the vehicle display system 1B uses the right side monitor 150 and the left side monitor 160 for the video data selected by the selection unit 70B based on the traveling state of the vehicle 100 determined by the determination unit 60B. To display.
  • the vehicle display system 1 ⁇ / b> B can display the appropriate right side monitor 150 and left side monitor 160 based on the traveling state of the vehicle 100. Specifically, when the vehicle 100 stops and there is a possibility of getting off, the vehicle display system 1B displays the second right video data 110R2A and the second left video data 110L2A on the right side monitor 150 and the left side monitor 160. Is displayed.
  • the vehicle display system 1 ⁇ / b> B can appropriately check the periphery of the vehicle 100 according to the traveling state.
  • the vehicle display system 1B may notify the occupant that there is a proximity moving body when the occupant may get off and a proximity moving body is detected in the second range AR or the second range AL. Inform the body that the door has been opened. Accordingly, the vehicle display system 1B can ensure the safety of the occupant when the occupant gets off.
  • the selection unit 70B selects the second right video data 110R2A as the video to be displayed on the right side monitor 150. In this case, the video displayed on the left side monitor 160 maintains the display of the first left video data 110L1A.
  • the selection unit 70B selects the second left video data 110L2A as the video to be displayed on the left side monitor 160. In this case, the video displayed on the right side monitor 150 maintains the display of the first right video data 110R1A.
  • the display on the right side monitor 150 and the left side monitor 160 may be continued for a predetermined time after the engine of the vehicle 100 stops.
  • vehicle 100 is an EV vehicle
  • the power required for display on right side monitor 150 and left side monitor 160 can be supplied from a storage battery.
  • the vehicle display system 1B displays the display on the right side monitor 150 and the left side monitor 160 after a predetermined time has elapsed or when it is detected that the passenger has exited and the vehicle 100 has been locked. Turn off.
  • Each component of the vehicle display systems 1, 1 ⁇ / b> A, and 1 ⁇ / b> B illustrated in the drawings is functionally conceptual and may not necessarily be physically configured as illustrated. That is, the specific form of each device is not limited to the one shown in the figure, and all or a part of them is functionally or physically distributed or integrated in arbitrary units according to the processing load or usage status of each device. May be.
  • the configuration of the vehicle display systems 1, 1 ⁇ / b> A, 1 ⁇ / b> B is realized, for example, as software by a program loaded in a memory.
  • the above embodiment has been described as a functional block realized by cooperation of these hardware or software. That is, these functional blocks can be realized in various forms by hardware only, software only, or a combination thereof.
  • the display control unit 90 When a plurality of backward moving bodies V are detected in the first video data 110A in step S11 of the flowchart shown in FIG. 6, the display control unit 90 performs the processes after step S12 on the backward moving body V that satisfies a predetermined condition. You may do it. More specifically, when a plurality of backward moving bodies V are detected in the first video data 110A, the display control unit 90 determines the distance from the vehicle 100 between the blind spot range BR side and the blind spot range BL side of the first video data 110A. You may make it perform the process after step S12 about each smallest back moving body V. FIG.
  • the display system 1 for vehicles can confirm the back moving body V which needs to confirm more preferentially, for example, it is closest, among the several back moving bodies V detected.
  • the vehicle display system 1 can make it possible to check the vicinity of the appropriate vehicle 100.
  • the display control unit 90 may determine whether or not the relative speed between the rear moving body V and the vehicle 100 satisfies a predetermined condition in addition to the determinations of steps S11 to S13 in the flowchart shown in FIG. For example, when the relative speed of the rear moving body V with respect to the vehicle 100 is equal to or higher than a predetermined value, the display control unit 90 may perform the processes after step S14.
  • the relative speed between the rear moving body V and the vehicle 100 can be calculated based on the change in the size of the image of the rear moving body V in the first video data 110A for each frame. Thereby, the display system 1 for vehicles can enable confirmation of the periphery of the suitable vehicle 100.
  • the recognition unit 71 may use only the backward moving body V recognized as the front surface of the vehicle 100 as a detection target by using a recognition dictionary that can distinguish the front surface and the rear surface of the vehicle 100. .
  • the vehicle is facing in the opposite direction, such as an oncoming vehicle, and can be excluded from the detection target.
  • the display control unit 90 may determine Yes in each step if the determination conditions in steps S11 to S14 and S16 in the flowchart shown in FIG. Thereby, the display system 1 for vehicles can suppress the video displayed on the right side monitor 150 and the left side monitor 160 from being carelessly switched. As described above, the vehicle display system 1 can make it possible to check the vicinity of the appropriate vehicle 100.
  • the display control unit 90 may determine whether or not to perform the process of the flowchart shown in FIG. 6 based on the current position of the vehicle 100 before step S11 of the flowchart shown in FIG.
  • the display control unit 90 includes a current location data acquisition unit that acquires the current position of the vehicle 100 and a peripheral status data acquisition unit that acquires a peripheral status including map information, and the vehicle 100 displays a predetermined point such as a downtown area.
  • the display control unit 90 has a current location data acquisition unit and a surrounding situation data acquisition unit, and when the vehicle 100 is traveling at a predetermined speed or higher, the display control unit 90 performs the processing of the flowchart shown in FIG. Also good.
  • the display control unit 90 When the display control unit 90 displays the second right rear video data 110R2 or the second left rear video data 110L2 on the right side monitor 150 or the left side monitor 160, the display control unit 90 colors the whole or a part translucently with a predetermined transparency. It may be displayed. Thereby, the display system 1 for vehicles makes it easy for the right side monitor 150 or the left side monitor 160 to display the second right rear video data 110R2 or the second left rear video data 110L2 instead of the normal display. Can be confirmed. As described above, the vehicle display system 1 can make it possible to check the vicinity of the appropriate vehicle 100.
  • the recognition unit 81B may further determine whether the distance between the vehicle 100 and the detected proximity moving body is within a predetermined distance.
  • the distance between the vehicle 100 and the detected proximity moving body is determined by identifying the ground contact position based on the outline of the detected proximity mobile body when the recognition section 81B detects the proximity mobile body from the first video data 110A. It can be obtained from the positional relationship in the first video data 110A.

Abstract

後方映像データ取得部42と、側後方映像データ取得部41と、後方映像データ取得部42が取得した第一映像データの一部である第一範囲と、第一範囲の側方に位置する第二範囲とを切出す切出部50と、第一範囲として切出された映像を、車両の後方映像を表示するリヤビューモニタ140に表示させ、第二映像データを車両の側方の映像を表示するサイドモニタ150、サイドモニタ160に表示させ、所定の条件において、第二範囲として切出された映像をサイドモニタ150、サイドモニタ160に表示させる表示制御部90とを備える。

Description

車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
 本発明は、車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラムに関する。
 車両の後方を確認するルームミラーや左右サイドミラーに代わって、車両の後方周辺領域を撮影する後方カメラからの映像を表示したり、車両の側方周辺領域を撮影した側方カメラからの映像を表示したりする技術が知られている(例えば、特許文献1参照)。
特開2015-009646号公報
 ところで、車両のサイドミラーには、自車両が映り込むことで死角が存在する。左右サイドミラーに代わって側方カメラを用いる場合も、同様に死角が存在する。そのため、運転者は、死角に位置する後続車を含む後方移動体を確認することが困難である。そこで、適切な車両周辺の確認を可能にする技術が望まれている。
 本発明は、上記に鑑みてなされたものであって、適切な車両周辺の確認を可能とすることを目的とする。
 上述した課題を解決し、目的を達成するために、本発明に係る車両用表示制御装置は、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得部と、前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得部と、前記後方映像データ取得部が取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出部と、前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御部とを備えることを特徴とする。
 本発明に係る車両用表示システムは、上記の車両用表示制御装置と、前記後方カメラ、前記側後方カメラ、前記リヤビューモニタ、前記サイドモニタの少なくともいずれかを備えることを特徴とする。
 本発明に係る車両用表示制御方法は、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出ステップと、前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御ステップとを含む。
 本発明に係るプログラムは、車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出ステップと、前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御ステップとを車両用表示制御装置として動作するコンピュータに実行させる。
 本発明によれば、適切な車両周辺の確認を可能にすることができるという効果を奏する。
図1は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。 図2は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。 図3は、第一実施形態に係る車両用表示システムの構成例を示すブロック図である。 図4は、第一実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。 図5は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。 図6は、第一実施形態に係る車両用表示システムの車両用表示制御装置の表示制御部における処理の流れを示すフローチャートである。 図7は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図8は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図9は、第二実施形態に係る車両用表示システムの車両用表示制御装置における処理の流れを示すフローチャートである。 図10は、第二実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。 図11は、第二実施形態に係る車両用表示システムの後方カメラで撮影された映像データの他の例を示す図である。 図12は、第二実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。 図13は、第二実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図14は、第三実施形態に係る車両用表示システムの構成例を示すブロック図である。 図15は、第三実施形態に係る車両用表示システムの構成例を示す概略図である。 図16は、第三実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。 図17は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。 図18は、第三実施形態に係る車両用表示システムの後方カメラで撮影された映像データの他の例を示す図である。 図19は、第三実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。 図20は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図21は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。 図22は、第四実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。 図23は、第五実施形態に係る車両用表示システムの構成例を示すブロック図である。 図24は、第五実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。
 以下に添付図面を参照して、本発明に係る車両用表示制御装置10、車両用表示システム1、車両用表示制御方法およびプログラムの実施形態を詳細に説明する。なお、以下の実施形態により本発明が限定されるものではない。
[第一実施形態]
 車両用表示システム1は、車両100に搭載され、車両周辺を表示する。図1は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。図2は、第一実施形態に係る車両用表示システムの構成例を示す概略図である。図3は、第一実施形態に係る車両用表示システムの構成例を示すブロック図である。
 図1ないし図3に示すように、車両用表示システム1は、後方カメラ110と、右側方カメラ(側後方カメラ)120と、左側方カメラ(側後方カメラ)130と、リヤビューモニタ140と、右サイドモニタ150と、左サイドモニタ160と、認識辞書記憶部200と、車両用表示制御装置10とを有する。
 後方カメラ110は、車両100の後方に配置され、車両100の後方を撮影する。後方カメラ110は、リヤビューモニタ140による確認範囲を含んだ範囲を撮影する。後方カメラ110は、右側方カメラ120および左側方カメラ130の死角を含んだ範囲を撮影する。後方カメラ110は、水平方向の画角が例えば90~180°、上下方向の画角が例えば45~90°である。具体的には、後方カメラ110は、図4に示すような、第一映像データ110Aを撮影している。図4は、第一実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。後方カメラ110は、リヤビューモニタ140に表示させる範囲より広い範囲の映像を撮影可能であるが、リヤビューモニタ140を用いて車両100の運転者が適切に後方を認識できるような範囲としての第一範囲ACを切出してリヤビューモニタ140に表示する。第一映像データ110Aは、リヤビューモニタ140による確認範囲である第一範囲ACと、右サイドモニタ150および左サイドモニタ160による確認範囲である第二範囲AR、第二範囲ALとを含む。第一範囲ACと第二範囲ARとは、一部が重複している。第一範囲ACと第二範囲ALとは、一部が重複している。第一映像データ110Aは、第一範囲ACの側方に右側方カメラ120の死角に該当する死角範囲BRおよび左側方カメラ130の死角に該当する死角範囲BLを含んでいる。本実施形態では、第一映像データ110Aは、第一範囲ACと第二範囲ARと第二範囲ALとの外側をさらに含んでいる。言い換えると、後方カメラ110は、通常時、リヤビューモニタ140や右サイドモニタ150および左サイドモニタ160に表示されない範囲を含んで撮影している。後方カメラ110は、撮影した第一映像データ110Aを車両用表示制御装置10の映像データ取得部40の後方映像データ取得部42へ出力する。
 右側方カメラ120は、車両100の右側方に配置され、車両100の右側方を撮影する。右側方カメラ120は、右サイドモニタ150による確認範囲を撮影する。右側方カメラ120は、水平方向の画角が例えば15~45°、上下方向の画角が例えば15~45°である。右側方カメラ120は、角度調節自在である。右側方カメラ120は、撮影した映像を車両用表示制御装置10の映像データ取得部40の側後方映像データ取得部41へ出力する。
 左側方カメラ130は、車両100の左側方に配置され、車両100の左側方を撮影する。左側方カメラ130は、左サイドモニタ160による確認範囲を撮影する。左側方カメラ130は、水平方向の画角が例えば15~45°、上下方向の画角が例えば15~45°である。左側方カメラ130は、角度調節自在である。左側方カメラ130は、撮影した映像を車両用表示制御装置10の映像データ取得部40の側後方映像データ取得部41へ出力する。
 リヤビューモニタ140は、一例としては電子ルームミラーである。リヤビューモニタ140を電子ルームミラーとして用いる場合は、後方を光学的な反射により確認するためのハーフミラーの有無は問わない。リヤビューモニタ140は、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)または有機EL(Organic Electro-Luminescence)ディスプレイなどを含むディスプレイである。リヤビューモニタ140は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の後方映像を表示する。具体的に、リヤビューモニタ140は、図5に示すような後方映像を表示する。図5は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。リヤビューモニタ140は、側方において、右サイドモニタ150および左サイドモニタ160の一部と重複して表示している。リヤビューモニタ140は、運転者から視認容易な位置に配置されている。本実施形態では、リヤビューモニタ140は、ウィンドシールド101の車幅方向の中央上部に配置されている。
 右サイドモニタ150は、例えば、液晶ディスプレイまたは有機ELディスプレイなどを含むディスプレイである。右サイドモニタ150は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の右側後方映像を表示する。具体的に、右サイドモニタ150は、図5に示すような右側後方映像を表示する。右サイドモニタ150は、車両100の右側方の車体100Rの映り込みにより後方視界が阻害される範囲がある。右サイドモニタ150は、運転者から視認容易な位置に配置されている。本実施形態では、右サイドモニタ150は、ダッシュボード102の車幅方向の右側に配置されている。
 左サイドモニタ160は、例えば、液晶ディスプレイまたは有機ELディスプレイを含むディスプレイである。左サイドモニタ160は、車両用表示制御装置10の表示制御部90から出力された映像信号に基づき、車両100の左側後方映像を表示する。具体的に、左サイドモニタ160は、図5に示すような左側後方映像を表示する。左サイドモニタ160は、車両100の左側方の車体100Lの映り込みにより後方視界が阻害される範囲がある。左サイドモニタ160は、運転者から視認容易な位置に配置されている。より詳しくは、左サイドモニタ160は、ダッシュボード102の車幅方向の左側に配置されている。
 認識辞書記憶部200は、例えば、四輪車、二輪車、人を含む移動体の正面視の形状、大きさ、色などのパターンを照合可能な認識辞書を記憶している。認識辞書記憶部200は、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ(Flash Memory)などの半導体メモリ素子、または、ハードディスク、光ディスク、ネットワークを介した外部記憶装置などの記憶装置である。
 図3に戻って、車両用表示制御装置10は、記憶部20と、制御部30とを有する。
 記憶部20は、車両用表示制御装置10における各種処理に要するデータおよび各種処理結果を記憶する。記憶部20は、例えば、RAM、ROM、フラッシュメモリなどの半導体メモリ素子、または、ハードディスク、光ディスク、ネットワークを介した外部記憶装置などの記憶装置である。
 制御部30は、例えば、CPU(Central Processing Unit)などで構成された演算処理装置である。制御部30は、映像データ取得部40と、切出部50と、特定部60と、検出部70と、判断部80と、表示制御部90とを含む。制御部30は、記憶部20に記憶されているプログラムに含まれる命令を実行する。
 映像データ取得部40は、車両100の後方および側後方を撮影した映像を取得する。映像データ取得部40が取得する映像データは、例えば、毎秒120フレームの画像が連続した映像データである。映像データ取得部40は、側後方映像データ取得部41と、後方映像データ取得部42とを有する。側後方映像データ取得部41は、右側方カメラ120および左側方カメラ130が出力した第二映像データを取得する。側後方映像データ取得部41は、取得した第二映像データを切出部50に出力する。後方映像データ取得部42は、後方カメラ110が出力した第一映像データ110Aを取得する。後方映像データ取得部42は、取得した第一映像データ110Aを切出部50および検出部70に出力する。
 切出部50は、第一映像データ110Aから、第一映像データ110Aの一部である第一範囲ACを切出す。第一映像データ110Aのどの範囲を第一範囲ACとするかは、あらかじめ登録され記憶されている。本実施形態では、第一範囲ACは、第一映像データ110Aの中央部とする。切出部50は、切出した後方映像データ110Cを特定部60および表示制御部90に出力する。
 切出部50は、第二映像データから、右サイドモニタ150および左サイドモニタ160に合わせた第一右側後方映像データ110Rおよび第一左側後方映像データ110Lを切出す。切出部50は、切出した第一右側後方映像データ110Rおよび第一左側後方映像データ110Lを表示制御部90に出力する。
 特定部60は、第一映像データ110Aにおける、第一範囲ACの側方に位置する第二範囲ARと第二範囲ALと死角範囲BRと死角範囲BLとを特定する。より詳しくは、特定部60は、右側方カメラ120および左側方カメラ130の撮影向きや切出部50により第二映像データから切出された第一右側後方映像データ110Rおよび第一左側後方映像データ110Lに一致またはほぼ一致する範囲として予め定められている範囲を、第二範囲ARおよび第二範囲ALとして特定する。また、特定部60は、右側方カメラ120および左側方カメラ130の撮影向きや切出部50により第二映像データから切出された第一右側後方映像データ110Rおよび第一左側後方映像データ110Lに基づいて予め定められている範囲を死角範囲BRおよび死角範囲BLとして特定する。特定部60は、他の特定手法として、第二映像データと第一映像データ110Aとに基づき、画像のマッチングを行って、図4に示すように、第一映像データ110Aにおける第二範囲ARと第二範囲ALと死角範囲BRと死角範囲BLとを特定してもよい。この場合において、第二映像データが切出部50によって切出し処理が行われている場合は、第一左側後方映像データ110Lおよび第一右側後方映像データ110Rとの画像のマッチングを行う。特定部60は、特定した第一映像データ110Aにおける第二範囲ARと第二範囲ALと死角範囲BRと死角範囲BLとの情報を検出部70に出力する。特定部60の処理は、後方カメラ110または右側方カメラ120または左側方カメラ130が角度調節されたり交換されたりした場合に実行されるように制御部30で制御される。
 特定部60は、リヤビューモニタ140に、図4に示すように、後方映像データ110Cとともに第二範囲ARと第二範囲ALと死角範囲BRと死角範囲BLとを示す枠を表示し、運転者などの操作によって設定するようにしてもよい。具体的には、運転者などが、右サイドモニタ150に表示された第一右側後方映像データ110Rおよび左サイドモニタ160に表示された第一左側後方映像データ110Lと、リヤビューモニタ140に表示された枠とが一致するように、枠を正しい位置に合わせる。このようにして、特定部60は、第一映像データ110Aにおける第二範囲ARと第二範囲ALと死角範囲BRと死角範囲BLとを特定してもよい。
 検出部70は、第一映像データ110Aから後方移動体Vを検出する。検出部70は、第一映像データ110Aの全体に対して移動体を検出し、検出された移動体が死角範囲BRまたは死角範囲BLに存在するか判断してもよく、死角範囲BRまたは死角範囲BLに対して移動体の検出を行ってもよい。検出部70は、第一映像データ110Aまたは第一映像データ110Aの死角範囲BRまたは死角範囲BLにおいて、移動体認識を行い、後方移動体Vを認識する認識部71を有する。認識部71は、第一映像データ110Aまたは第一映像データ110Aの死角範囲BRまたは死角範囲BLに対して、認識辞書記憶部200が記憶している認識辞書を用いたパターンマッチングを行い、後方移動体Vの存在を検出する。認識部71は、フレームごとの第一映像データ110Aにおける後方移動体V1の大きさの変化に基づき、後方移動体V1が車両100に近接しているか離接しているかを認識する。検出部70は、検出結果を表示制御部90に出力する。
 判断部80は、検出部70で検出された後方移動体Vが死角範囲BRまたは死角範囲BLに存在するか否かを判断する。具体的には、図4に示す第一映像データ110Aの場合、後方移動体V1が死角範囲BLに存在すると判断される。
 表示制御部90は、通常時の通常表示処理として、後方映像データ110Cをリヤビューモニタ140に表示させる。表示制御部90は、通常時の通常表示処理として、第一右側後方映像データ110Rを右サイドモニタ150に表示させる。言い換えると、表示制御部90は、通常時は、右側方カメラ120で撮影された第二映像データに基づく第一右側後方映像データ110Rを右サイドモニタ150に表示させる。表示制御部90は、通常時の通常表示処理として、第一左側後方映像データ110Lを左サイドモニタ160に表示させる。言い換えると、表示制御部90は、通常時は、左側方カメラ130で撮影された第二映像データに基づく第一左側後方映像データ110Lを左サイドモニタ160に表示させる。
 表示制御部90は、毎フレームまたは所定フレームごとに、所定条件を満たすか否かを判定して、所定条件を満たす場合、右サイドモニタ150および左サイドモニタ160に死角範囲BRまたは死角範囲BLを含めて表示させる死角表示処理を行う。より詳しくは、表示制御部90は、判断部80で死角範囲BRまたは死角範囲BLに後方移動体Vが存在すると判断された場合、第一映像データ110Aから切出された第二右側後方映像データ110R2(図7参照)、第二左側後方映像データ110L2(図7参照)を右サイドモニタ150および左サイドモニタ160に表示させる。表示制御部90は、後方移動体Vが第一映像データ110Aの死角範囲BRまたは死角範囲BLから外れた場合、右サイドモニタ150および左サイドモニタ160を通常表示に戻す。
 表示制御部90は、後方移動体Vが第一映像データ110Aの死角範囲BRまたは死角範囲BLで検出された場合であっても、後方移動体Vが死角範囲BRまたは死角範囲BLに少ししか存在していない(少ししか映っていない)場合、右サイドモニタ150および左サイドモニタ160は、通常の表示のままとしてもよい。具体的には例えば、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、後方移動体Vの全体が写った場合の面積の半分以下である場合、通常の表示のままとしてもよい。
 次に、図6を用いて、表示制御部90による死角表示処理の流れについて説明する。図6は、第一実施形態に係る車両用表示システムの車両用表示制御装置の表示制御部における処理の流れを示すフローチャートである。
 表示制御部90は、車両100の後方に後方移動体Vまたは後方移動体Vの一部分(以下、後方移動体Vとして説明する)の検出ありか否かを判定する(ステップS11)。より詳しくは、表示制御部90は、検出部70で第一映像データ110Aにおいて後方移動体Vが検出されたか否かを判定する。
 表示制御部90は、車両100の後方に後方移動体Vが検出されていないと判定した場合(ステップS11でNo)、処理を終了する。
 表示制御部90は、車両100の後方に後方移動体Vの検出ありと判定した場合(ステップS11でYes)、ステップS12に進む。
 表示制御部90は、検出した後方移動体Vの位置が第一映像データ110Aの死角範囲BRまたは死角範囲BLに存在するか否かを判定する(ステップS12)。より詳しくは、表示制御部90は、検出部70で、第一映像データ110Aの死角範囲BRまたは死角範囲BLに存在する後方移動体Vが検出されたか否かを判定する。
 表示制御部90は、検出した後方移動体Vの位置が第一映像データ110Aの死角範囲BRまたは死角範囲BLに存在していないと判定した場合(ステップS12でNo)、ステップS11に戻って処理を繰り返す。
 表示制御部90は、検出した後方移動体Vの位置が第一映像データ110Aの死角範囲BRまたは死角範囲BLに存在すると判定した場合(ステップS12でYes)、ステップS13に進む。
 表示制御部90は、検出した後方移動体Vが車両100に接近中であるか否かを判定する(ステップS13)。より詳しくは、例えば、表示制御部90は、検出部70で後方移動体Vが車両100に近接していると検出されたか否かを判定する。
 表示制御部90は、後方移動体Vが車両100に接近中でないと判定した場合(ステップS13でNo)、ステップS11に戻って処理を繰り返す。
 表示制御部90は、後方移動体Vが車両100に接近中であると判定した場合(ステップS13でYes)、ステップS14に進む。
 表示制御部90は、車両100の側方に移動体が存在するか否かを判定する(ステップS14)。より詳しくは、表示制御部90は、第二映像データにおける車体100R、車体100Lの映り込みを除いた部分と、第一映像データ110Aの該当部分とを比較し、差異がある場合、車両100の側方に移動体が存在すると判定する。このようにして、表示制御部90は、右側方カメラ120または左側方カメラ130でしか撮影されず、後方カメラ110では撮影されない、車両100の側方に存在する移動体を検出する。
 表示制御部90は、車両100の側方に移動体が存在しないと判定した場合(ステップS14でNo)、処理を終了する。
 表示制御部90は、車両100の側方に移動体が存在すると判定した場合(ステップS14でYes)、ステップS15に進む。
 表示制御部90は、右サイドモニタ150および左サイドモニタ160に、第一映像データ110Aから切出された第二右側後方映像データ110R2および第二左側後方映像データ110L2を表示させる(ステップS15)。より詳しくは、表示制御部90は、切出部50に対して、第一映像データ110Aの第一範囲ACの側方に位置する第二範囲ARおよび第二範囲ALを第二右側後方映像データ110R2および第二左側後方映像データ110L2として切出させる。そして、表示制御部90は、切出させた第二右側後方映像データ110R2および第二左側後方映像データ110L2を右サイドモニタ150および左サイドモニタ160に表示させる。
 表示制御部90は、後方移動体Vの位置が第一映像データ110Aの死角範囲BR外または死角範囲BL外であるか否かを判定する(ステップS16)。より詳しくは、表示制御部90は、検出部70で後方移動体Vの位置が第一映像データ110Aの死角範囲BR外または死角範囲BL外であると検出されたか否かを判定する。
 表示制御部90は、後方移動体Vの位置が第一映像データ110Aの死角範囲BR外または死角範囲BL外でないと判定した場合(ステップS16でNo)、ステップS14に戻って処理を繰り返す。
 表示制御部90は、後方移動体Vの位置が第一映像データ110Aの死角範囲BR外または死角範囲BL外であると判定した場合(ステップS16でYes)、ステップS17に進む。
 表示制御部90は、右サイドモニタ150および左サイドモニタ160を通常表示とする(ステップS17)。より詳しくは、表示制御部90は、右サイドモニタ150および左サイドモニタ160に、第一映像データ110Aから切出された第二右側後方映像データ110R2、第二左側後方映像データ110L2を表示させる。
 表示制御部90は、検出した後方移動体Vが第一映像データ110Aの死角範囲BRまたは死角範囲BLに存在するか否かの判定条件を、車両100と後方移動体Vの距離によって変更してもよい。例えば、検出した後方移動体Vまでの距離が近い場合は、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、全体が映った場合の面積の25%以上であれば存在すると判断する。また、検出した後方移動体Vまでの距離が遠い場合は、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、全体が映った場合の面積の75%以上であれば存在すると判断する。車両100と検出した後方移動体Vまでの距離は、第一映像データ110Aから認識部71による後方移動体Vを検出した際に、検出した後方移動体の輪郭に基づく接地位置を特定し、接地位置の第一映像データ110Aにおける位置関係により求めることができる。具体的には、車両100から後方移動体Vまでの距離が100m以上であれば、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、全体が映った場合の面積の75%以上であれば存在すると判断する。また、車両100から後方移動体Vまでの距離が50m以上100m未満であれば、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、全体が映った場合の面積の50%以上であれば存在すると判断する。さらに、車両100から後方移動体Vまでの距離が50m未満であれば、死角範囲BRまたは死角範囲BLに映る後方移動体Vの面積が、全体が映った場合の面積の25%以上であれば存在すると判断する。
 図4を用いて、表示制御部90による死角表示処理の具体例を説明する。なお、後方移動体V1は、車両100に接近中とする。表示制御部90は、ステップS11において、第一映像データ110Aに後方移動体V1、後方移動体V2検出ありと判定する(ステップS11でYes)。そして、表示制御部90は、後方移動体V1の位置が第一映像データ110Aの死角範囲BLに存在すると判定する(ステップS12でYes)。そして、後方移動体V1が接近中であると判定される(ステップS13でYes)。そして、車両100の側方に移動体が存在しないと判定される(ステップS14でYes)。そして、ステップS15において、表示制御部90は、左サイドモニタ160に、第二左側後方映像データ110L2を表示させる。
 具体的には、表示制御部90は、図7に示すように、左サイドモニタ160に、後方移動体V1が映る第二左側後方映像データ110L2を表示させ、右サイドモニタ150に、第二右側後方映像データ110R2を表示させる。図7は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
 または、表示制御部90は、図8に示すように、左サイドモニタ160に、後方移動体V1が映る第二左側後方映像データ110L2を表示させ、右サイドモニタ150に、通常表示である、第一右側後方映像データ110Rを表示させてもよい。図8は、第一実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
 このようにして、車両用表示システム1は、表示制御部90で、右側方カメラ120および左側方カメラ130の死角に後方移動体Vが検出された場合、右サイドモニタ150および左サイドモニタ160に対して、第二右側後方映像データ110R2、第二左側後方映像データ110L2を表示させる。
 上述したように、本実施形態に係る車両用表示システム1は、右側方カメラ120および左側方カメラ130の死角に後方移動体Vが存在する場合、右サイドモニタ150および左サイドモニタ160に対して、第一映像データ110Aから切出された第二右側後方映像データ110R2、第二左側後方映像データ110L2を表示させる。このように、車両用表示システム1は、後方移動体Vが右側方カメラ120および左側方カメラ130の死角に存在する場合であっても、右サイドモニタ150および左サイドモニタ160に後方移動体Vを表示することができる。これにより、車両用表示システム1は、後方移動体Vを適切に表示することができる。このため、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
[第二実施形態]
 図9ないし図13を参照しながら、本実施形態に係る車両用表示システムについて説明する。車両用表示システムは、基本的な構成は第一実施形態の車両用表示システム1と同様である。以下の説明においては、車両用表示システム1と同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。本実施形態の車両用表示システムは、制御部における処理が車両用表示システム1の制御部30における処理と異なる。
 検出部は、後方移動体Vの移動方向を検出する。検出部は、フレームごとの、第一映像データ110Aにおける後方移動体Vの位置の変化に基づき、後方移動体Vの移動方向を検出する。
 判断部は、検出された後方移動体Vが第一範囲ACから死角範囲BRまたは死角範囲BLへ移動しているか否かを判断する。
 表示制御部は、判断部で第一範囲ACまたは第二範囲ARまたは第二範囲ALから、死角範囲BRまたは死角範囲BLへ後方移動体Vが移動していると判断された場合、第二右側後方映像データ110R3または第二左側後方映像データ110L3を右サイドモニタ150または左サイドモニタ160に表示させる。
 図9を用いて、車両用表示システムの車両用表示制御装置における処理の流れについて説明する。図9は、第二実施形態に係る車両用表示システムの車両用表示制御装置における処理の流れを示すフローチャートである。
 表示制御部は、ステップS21~ステップS27に示す処理を行う。ステップS21、ステップS23は、図6に示すフローチャートのステップS11、ステップS13と同様の処理であり、ステップS24~ステップS27は、図6に示すフローチャートのステップS14~ステップS17と同様の処理である。
 表示制御部は、第一範囲ACまたは第二範囲ARまたは第二範囲ALから、死角範囲BRまたは死角範囲BLへ後方移動体Vが移動しているか否かを判定する(ステップS22)。より詳しくは、表示制御部は、検出部で第一範囲ACまたは第二範囲ARまたは第二範囲ALから、死角範囲BRまたは死角範囲BLへ後方移動体Vが移動していると検出されたか否かを判定する。
 表示制御部は、第一範囲ACまたは第二範囲ARまたは第二範囲ALから、死角範囲BRまたは死角範囲BLへ後方移動体Vが移動していないと判定した場合(ステップS22でNo)、ステップS21に戻って処理を繰り返す。
 表示制御部は、第一範囲ACまたは第二範囲ARまたは第二範囲ALから、死角範囲BRまたは死角範囲BLへ後方移動体Vが移動していると判定した場合(ステップS22でYes)、ステップS23に進む。
 図10、図11を用いて、表示制御部による死角表示処理の具体例を説明する。図10は、第二実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。図11は、第二実施形態に係る車両用表示システムの後方カメラで撮影された映像データの他の例を示す図である。図11は、図10に示す状態より少し後の状態である。なお、後方移動体V3は、第一映像データ110A1および第一映像データ110A2に映っているように、第一範囲ACから死角範囲BLへ移動し、後方移動体V4は、車両100から遠ざかっているものとする。表示制御部は、ステップS21において、第一映像データ110A1に後方移動体V3、V4検出ありと判定する(ステップS21でYes)。そして、表示制御部は、後方移動体V2が第一範囲ACから死角範囲BLへ移動していると判定される(ステップS22でYes)。そして、後方移動体V3が接近中であると判定される(ステップS23でYes)。そして、車両100の側方に移動体が存在しないと判定される(ステップS24でYes)。そして、ステップS25において、表示制御部は、左サイドモニタ160に、第二左側後方映像データ110L3を表示させる。
 具体的には、表示制御部は、図12に示すように、左サイドモニタ160に、後方移動体V3が映る第二左側後方映像データ110L3を表示させ、右サイドモニタ150に、第二右側後方映像データ110R3を表示させる。図12は、第二実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。
 または、表示制御部は、図13に示すように、左サイドモニタ160に、後方移動体V3が映る第二左側後方映像データ110L3を表示させ、右サイドモニタ150に、通常表示である、第一右側後方映像データ110Rを表示させてもよい。図13は、第二実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
 このようにして、車両用表示システム1は、表示制御部で、死角範囲BRまたは死角範囲BLへ移動する後方移動体Vが検出された場合、右サイドモニタ150および左サイドモニタ160に対して、第二右側後方映像データ110R3、第二左側後方映像データ110L3を表示させる。
 上述したように、本実施形態に係る車両用表示システムは、死角範囲BRまたは死角範囲BLへ移動する後方移動体Vが検出された場合、右サイドモニタ150または左サイドモニタ160に対して、第一映像データ110Aから切出された第二右側後方映像データ110R3、第二左側後方映像データ110L3を表示させる。これにより、車両用表示システム1は、後方移動体Vを適切に表示することができる。このため、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
[第三実施形態]
 図14ないし図18を参照しながら、本実施形態に係る車両用表示システムについて説明する。図14は、第三実施形態に係る車両用表示システムの構成例を示すブロック図である。図14に示す、本実施形態の車両用表示システム1Aは、車両用表示制御装置10Aの構成が、第一実施形態と異なる。
 図15、図16を用いて、後方カメラ110の撮影範囲を説明する。図15は、第三実施形態に係る車両用表示システムの構成例を示す概略図である。図16は、第三実施形態に係る車両用表示システムの後方カメラで撮影された映像データの一例を示す図である。具体的には、後方カメラ110は、図16に示すような、第一映像データ110Aを撮影している。
 右側方カメラ120は、図15に示すような、撮影範囲SRを撮影している。右側方カメラ120は、撮影した第二映像データを車両用表示制御装置10Aの映像データ取得部40の側後方映像データ取得部41へ出力する。
 左側方カメラ130は、図15に示すような、撮影範囲SLを撮影している。左側方カメラ130は、撮影した第二映像データを車両用表示制御装置10Aの映像データ取得部40の側後方映像データ取得部41へ出力する。
 具体的に、リヤビューモニタ140は、図17に示すような後方映像を表示する。図17は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の一例を示す図である。
 具体的に、右サイドモニタ150は、通常表示時は、図17に示すような右側後方映像を表示する。
 具体的に、左サイドモニタ160は、通常表示時は、図17に示すような左側後方映像を表示する。
 図14に戻って、車両用表示制御装置10Aは、記憶部20と、制御部30Aとを有する。
 制御部30Aは、映像データ取得部40と、切出部50Aと、判断部60Aと、選択部70Aと、表示制御部90Aとを含む。
 後方映像データ取得部42は、取得した第一映像データ110Aを切出部50Aに出力する。
 切出部50Aは、第二映像データから、右サイドモニタ150および左サイドモニタ160に合わせた第一右映像データ110R1Aおよび第一左映像データ110L1Aを切り出す。右サイドモニタ150に表示される映像データは、右側方カメラ120が撮影した第二映像データを切り出さずに表示してもよく、第一右映像データ110R1Aとして切り出したデータを表示してもよい。左サイドモニタ160に表示される映像データは、左側方カメラ130が撮影した第二映像データを切り出さずに表示してもよく、第一左映像データ110L1Aとして切り出したデータを表示してもよい。
 切出部50Aは、第一映像データ110Aから、第二範囲ARおよび第二範囲ALを切り出す。より詳しくは、切出部50Aは、第一映像データ110Aの第一範囲ACの側方に位置する第二範囲ARを第二右映像データ(第一実施形態の第二右側後方映像データ)110R2Aとして切り出す。切出部50Aは、第一映像データ110Aの第一範囲ACの側方に位置する第二範囲ALを第二左映像データ(第一実施形態の第二左側後方映像データ)110L2Aとして切り出す。第一映像データ110Aのどの範囲を第二範囲ARおよび第二範囲ALとするかは、あらかじめ記憶部20に記憶されている。
 本実施形態では、図16に示すように、第二範囲ARおよび第二範囲ALは、その上下方向の中心軸線が、第一範囲ACの上下方向の中心軸線と一致している。
 または、図18に示すように、第二範囲AR1および第二範囲AL1は、その上下方向の中心軸線が、第一範囲ACの上下方向の中心軸線より下方に位置付けられていてもよい。図18は、第三実施形態に係る車両用表示システムの後方カメラで撮影された映像データの他の例を示す図である。
 このように構成された切出部50Aは、切り出した第一右映像データ110R1Aと第一左映像データ110L1Aと第二右映像データ110R2Aと第二左映像データ110L2Aと切り出した後方映像データ110Cとを選択部70Aに出力する。
 判断部60Aは、車両100の走行状況を判断する。判断部60Aは、車両100のECU(Engine Control Unit)から取得した情報に基づき、走行状況を判断する。より詳しくは、判断部60Aは、例えば、車速を含む情報を取得する。判断部60Aは、車両100が所定速度以上で継続して走行しているか否かを判断する。具体的には例えば、判断部60Aは、車両100が車速30km/h以上を10秒以上継続して走行しているか否かを判断する。または、判断部60Aは、車両100が所定速度以上で継続して走行し、かつ、オートクルーズコントロールで動作しているか否かを判断してもよい。判断部60Aは、判断結果を選択部70Aに出力する。
 選択部70Aは、判断部60Aが判断した走行状況に基づき、第一右映像データ110R1Aおよび第一左映像データ110L1Aと、第二右映像データ110R2Aおよび第二左映像データ110L2Aとからいずれか一方を選択する。より詳しくは、選択部70Aは、判断部60Aで車両100が所定速度以上で走行していると判断された場合、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択する。選択部70Aは、判断部60Aで車両100が所定速度未満で走行していると判断された場合、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。言い換えると、選択部70Aは、通常時に、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。選択部70Aは、選択結果を表示制御部90Aに出力する。
 表示制御部90Aは、選択部70Aで選択された映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。より詳しくは、表示制御部90Aは、通常時の通常表示処理として、第一右映像データ110R1Aおよび第一左映像データ110L1Aを、右サイドモニタ150および左サイドモニタ160に表示させる。表示制御部90Aは、判断部60Aで所定条件を満たすと判断された場合、第二右映像データ110R2Aおよび第二左映像データ110L2Aを、右サイドモニタ150および左サイドモニタ160に表示させる。
 次に、図19を用いて、制御部30Aにおける処理の流れについて説明する。図19は、第三実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。この処理は、車両用表示システム1Aの起動中実行される。
 制御部30Aは、車両100の走行速度が所定速度以上であるか否かを判定する(ステップSA11)。より詳しくは、制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上と判断されたか否かを判定する。
 制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上ではないと判断された場合(ステップSA11でNo)、ステップSA14に進む。
 制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上を継続していると判断された場合(ステップSA11でYes)、ステップSA12に進む。
 制御部30Aは、車両100の走行速度が所定速度以上を所定時間以上継続しているか否かを判定する(ステップSA12)。より詳しくは、制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上の状態を所定時間以上継続していると判断されたか否かを判定する。
 制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上を所定時間以上継続していないと判断された場合(ステップSA12でNo)、ステップSA14に進む。
 制御部30Aは、判断部60Aで、車両100の走行速度が所定速度以上を所定時間以上継続していると判断された場合(ステップSA12でYes)、ステップSA13に進む。
 制御部30Aは、右サイドモニタ150および左サイドモニタ160に表示する映像として、第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択させ表示させる(ステップSA13)。より詳しくは、制御部30Aは、選択部70Aで、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択させる。そして、表示制御部90Aで、右サイドモニタ150および左サイドモニタ160に対して、第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。
 制御部30Aは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示しているか否かを判定する(ステップSA14)。
 制御部30Aは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していないと判断された場合(ステップSA14でNo)、処理を終了する。
 制御部30Aは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していると判断された場合(ステップSA14でYes)、ステップSA15に進む。
 制御部30Aは、右サイドモニタ150および左サイドモニタ160に表示する映像として、側後方映像データ取得部41が取得した第二映像データを選択させ表示させる(ステップSA15)。より詳しくは、制御部30Aは、選択部70Aで、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択させる。そして、表示制御部90Aで、右サイドモニタ150および左サイドモニタ160に対して、第一右映像データ110R1Aおよび第一左映像データ110L1Aを表示させる。
 具体的には、第二範囲ARおよび第二範囲ALが図16に示すように設定されている場合、制御部30Aは、図20に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。図20は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
 または、第二範囲AR1および第二範囲AL1が図18に示すように設定されている場合、制御部30Aは、図21に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。図21は、第三実施形態に係る車両用表示システムのリヤビューモニタと右サイドモニタと左サイドモニタとに表示される映像の他の例を示す図である。
 このようにして、車両用表示システム1Aは、判断部60Aで判断した車両100の走行状況に基づき、選択部70Aが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
 上述したように、本実施形態に係る車両用表示システム1Aは、判断部60Aで判断した車両100の走行状況に基づき、選択部70Aが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。このように、車両用表示システム1Aは、車両100の走行状況に基づき、適切な映像データを右サイドモニタ150および左サイドモニタ160に表示することができる。具体的には、車両用表示システム1Aは、車両100が所定速度以上を所定時間以上継続している場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示する。これにより、車両100が所定速度以上を所定時間以上継続している場合、車両100の死角を含まない第二右映像データ110R2Aおよび第二左映像データ110L2Aで後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1Aおよび第一左映像データ110L1Aで車両100の側方を確認することができる。このように、車両用表示システム1Aは、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
[第四実施形態]
 図22を参照しながら、本実施形態に係る車両用表示システムについて説明する。図22は、第四実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。車両用表示システムは、基本的な構成は第三実施形態の車両用表示システム1Aと同様である。以下の説明においては、車両用表示システム1Aと同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。
 判断部は、例えば、現在地情報、地図情報を含む情報を取得する。判断部は、車両100の走行地点が所定速度以上で走行可能な地点であるか否かを判断する。具体的には例えば、判断部は、車両100の走行地点が、郊外の道路、高速道路、自動車専用道路、サーキットなどの場合、所定速度以上で走行可能な地点であると判断する。または、判断部は、車両100がETCゲートを通過した場合、車両100の走行地点が高速道路や自動車専用道路であり、所定速度以上で走行可能な地点であると判断してもよい。所定速度は、例えば、80km/hである。
 選択部は、判断部で車両100が所定速度以上で走行可能な地点を走行していると判断された場合、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択する。選択部は、判断部で車両100が所定速度以上で走行可能ではない地点を走行していると判断された場合、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。言い換えると、選択部は、通常時に、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。
 制御部は、判断部で、所定速度以上で走行可能な地点であると判断されたか否かを判定する(ステップSA21)。より詳しくは、判断部は、車両100から取得した現在地情報と地図情報とに基づいて、車両100の現在地が所定速度以上で走行可能な地点であるか否かを判断する。
 制御部は、判断部で、所定速度以上で走行可能な地点ではないと判断された場合(ステップSA21でNo)、ステップSA23に進む。
 制御部は、判断部で、所定速度以上で走行可能な地点であると判断された場合(ステップSA21でYes)、ステップSA22に進む。
 制御部は、右サイドモニタ150および左サイドモニタ160に表示する映像として、第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択させ表示させる(ステップSA22)。より詳しくは、制御部は、選択部で、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択し、表示制御部で、右サイドモニタ150および左サイドモニタ160に対して、第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。
 制御部は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示しているか否かを判定する(ステップSA23)。
 制御部は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していないと判断された場合(ステップSA23でNo)、処理を終了する。
 制御部は、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していると判断された場合(ステップSA23でYes)、ステップSA24に進む。
 制御部は、右サイドモニタ150および左サイドモニタ160に表示する映像として、側後方映像データ取得部41が取得した第二映像データを選択させ表示させる(ステップSA24)。より詳しくは、制御部は、選択部で、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択し、表示制御部で、右サイドモニタ150および左サイドモニタ160に対して、第一右映像データ110R1Aおよび第一左映像データ110L1Aを表示させる。
 このようにして、車両用表示システムは、判断部で判断した車両100の走行状況に基づき、選択部が選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
 上述したように、本実施形態に係る車両用表示システムは、第三実施形態と同様に、車両100の走行状況に基づき、適切な右サイドモニタ150および左サイドモニタ160の表示をすることができる。具体的には、車両用表示システムは、車両100の現在地が所定速度以上で走行可能な地点である場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示する。これにより、車両100の現在地が所定速度以上で走行可能な地点である場合、車両100の死角を含まない第二右映像データ110R2Aおよび第二左映像データ110L2Aで後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1Aおよび第一左映像データ110L1Aで車両100の側方を確認することができる。このため、車両用表示システムは、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
[第五実施形態]
 図23、図24を参照しながら、本実施形態に係る車両用表示システムについて説明する。図23は、第五実施形態に係る車両用表示システムの構成例を示すブロック図である。図23に示す、本実施形態の車両用表示システム1Bは、車両用表示制御装置10Bの構成が、第三実施形態と異なる。
 認識辞書記憶部200は、例えば、四輪車、二輪車、人を含む移動体の正面視などの形状、大きさ、色などのパターンを照合可能な認識辞書を記憶している。
 車両用表示制御装置10Bは、記憶部20と、制御部30Bとを有する。
 制御部30Bは、映像データ取得部40と、切出部50Bと、判断部60Bと、選択部70Bと、検出部80Bと、表示制御部90Bとを含む。
 後方映像データ取得部42は、取得した第一映像データ110Aを切出部50Bおよび検出部80Bに出力する。
 判断部60Bは、例えば、車速と乗員の降車可能性を判断する情報とを取得する。乗員の降車可能性を判断する情報とは、例えば、車両100のドアロック解除または車両100のドアの車内側ノブへの接触または車両100のドアの車内側ノブへの操作または乗員に装着されていたシートベルトの解除操作の少なくもいずれかまたはこれらの組み合わせである。判断部60Bは、車両100が停止し、かつ、車両100から乗員が降車する降車可能性があるか否かを判断する。この場合の車両100の停止とは、車速がゼロの完全な停止に加えて、減速により例えば車速が5km/h未満となったときから、停止とみなしてもよい。降車予定の乗員に対して、完全な停止直前から適切に車両100周辺の確認を可能とさせるためである。判断部60Bは、判断結果を選択部70Bに出力する。
 より詳しくは、判断部60Bは、車速がゼロ、かつ、車両100のドアロック解除が検出された場合、降車可能性ありと判断する。言い換えると、判断部60Bは、車両100の停止後に車両100のドアロック解除されたことが検出された場合、降車可能性ありと判断する。または、判断部60Bは、車速がゼロ、かつ、車両100のドアの車内側ノブへの接触が検出された場合、降車可能性ありと判断する。言い換えると、判断部60Bは、車両100の停止後に車両100のドアの車内側ノブへの接触が検出された場合、降車可能性ありと判断する。または、判断部60Bは、車速がゼロ、かつ、車両100のドアの車内側ノブへの操作が検出された場合、降車可能性ありと判断する。言い換えると、判断部60Bは、車両100の停止後に車両100のドアの車内側ノブへの操作が検出された場合、降車可能性ありと判断する。または、判断部60Bは、車速がゼロ、かつ、乗員に装着されていたシートベルトの解除操作が検出された場合、降車可能性ありと判断する。言い換えると、判断部60Bは、車両100の停止後に乗員に装着されていたシートベルトの解除操作が検出された場合、降車可能性ありと判断する。判断部60Bは、上記を複数組み合わせて、降車可能性ありと判断してもよい。判断部60Bで降車可能性ありと判断される状態は、上記に限定されない。具体的には例えば、判断部60Bは、車両100の現在地がナビゲーションシステムに設定された目的地であることが検出された場合、降車可能性ありと判断してもよい。
 選択部70Bは、判断部60Bで車両100が停止し、かつ、降車可能性ありと判断された場合、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択する。選択部70Bは、判断部60Bで車両100が停止し、かつ、降車可能性ありと判断されていない場合、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。言い換えると、選択部70Bは、通常時に、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択する。選択部70Bは、選択結果を表示制御部90Bに出力する。
 検出部80Bは、第一映像データ110Aの移動体を検出する。検出部80Bは、第一映像データ110Aにおいて、移動体認識を行い、移動体を認識する認識部81Bを有する。認識部81Bは、第一映像データ110Aに対して、認識辞書記憶部200が記憶している認識辞書を用いたパターンマッチングを行い、移動体の存在を検出する。認識部81Bは、フレームごとの第一映像データ110Aにおける移動体の大きさの変化に基づき、移動体が車両100に近接しているか離接しているかを認識する。検出部80Bは、検出結果を表示制御部90Bに出力する。
 表示制御部90Bは、判断部60Bで所定条件を満たすと判断された場合、第一右映像データ110R1Aおよび第一左映像データ110L1Aを、右サイドモニタ150および左サイドモニタ160に表示させる。
 次に、図24を用いて、制御部30Bにおける処理の流れについて説明する。図24は、第五実施形態に係る車両用表示システムの車両用表示制御装置の制御部における処理の流れを示すフローチャートである。この処理は、車両用表示システム1Bの起動中実行される。
 制御部30Bは、判断部60Bで、車両100が停止していると判断されたか否かを判定する(ステップSB31)。
 制御部30Bは、判断部60Bで、車両100が停止していないと判断された場合(ステップSB31でNo)、ステップSB36に進む。
 制御部30Bは、判断部60Bで、車両100が停止していると判断された場合(ステップSB31でYes)、ステップSB32に進む。
 制御部30Bは、判断部60Bで、乗員降車可能性ありと判断されたか否かを判定する(ステップSB32)。
 制御部30Bは、判断部60Bで、乗員降車可能性なしと判断された場合(ステップSB32でNo)、ステップSB36に進む。
 制御部30Bは、判断部60Bで、乗員降車可能性ありと判断された場合(ステップSB32でYes)、ステップSB33に進む。
 制御部30Bは、右サイドモニタ150および左サイドモニタ160に表示する映像として、第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択させ表示させる(ステップSB33)。より詳しくは、制御部30Bは、選択部70Bで、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択し、表示制御部90Bで、右サイドモニタ150および左サイドモニタ160に対して、第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。
 制御部30Bは、第二範囲ARまたは第二範囲ALに近接移動体検出と判断されたか否かを判定する(ステップSB34)。より詳しくは、制御部30Bは、認識部81Bで、第二範囲ARまたは第二範囲ALに移動体(後方移動体)が検出され、かつ、移動体が車両100に近接していると判断した場合、第二範囲ARまたは第二範囲ALに近接移動体が検出されたと判定する。
 制御部30Bは、第二範囲ARまたは第二範囲ALに近接移動体検出と判断されなかった場合(ステップSB34でNo)、ステップSB31に戻って処理を繰り返す。
 制御部30Bは、第二範囲ARまたは第二範囲ALに近接移動体検出と判断された場合(ステップSB34でYes)、ステップSB35に進む。
 制御部30Bは、警告を行い(ステップSB35)、ステップSB31に戻って処理を継続する。より詳しくは、制御部30Bは、表示制御部90Bで、ステップSB34で近接移動体が検出された側(以下、「検出側」という)の右サイドモニタ150または左サイドモニタ160に、文字やアイコンなどの警告表示を表示させる。または、制御部30Bは、表示制御部90Bで、検出側の右サイドモニタ150または左サイドモニタ160に、第二範囲ARまたは第二範囲ALを点滅させた警告表示を表示させ、かつ、スピーカーで音声を出力させてもよい。または、制御部30Bは、表示制御部90Bで、検出側の車両100のドア後端内側の照明を点灯させ、近接移動体にドアの開操作を認識させてもよい。さらに、制御部30Bは、検出側と、判断部60Bで乗員降車可能性ありと判断された側とが一致した場合、警告を行うようにしてもよい。より詳しくは、制御部30Bは、検出側と、車両100のドアロック解除が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30Bは、検出側と、車両100のドアの車内側ノブへの接触が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30Bは、検出側と、車両100のドアの車内側ノブへの操作が検出された側とが一致した場合、警告を行うようにしてもよい。または、制御部30は、検出側と、乗員に装着されていたシートベルトの解除操作が検出された側とが一致した場合、警告を行うようにしてもよい。
 制御部30Bは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示しているか否かを判定する(ステップSB36)。
 制御部30Bは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していないと判断された場合(ステップSB36でNo)、処理を終了する。
 制御部30Bは、現在の右サイドモニタ150および左サイドモニタ160が第二範囲ARおよび第二範囲ALの第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示していると判断された場合(ステップSB36でYes)、ステップSB37に進む。
 制御部30Bは、右サイドモニタ150および左サイドモニタ160に表示する映像として、側後方映像データ取得部41が取得した第二映像データを選択させ表示させる(ステップSB37)。より詳しくは、制御部30Bは、選択部70Bで、第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択させる。そして、表示制御部90Bで、右サイドモニタ150および左サイドモニタ160に対して、第一右映像データ110R1Aおよび第一左映像データ110L1Aを表示させる。
 具体的には、第二範囲ARおよび第二範囲ALが図16に示すように設定されている場合、制御部30Bは、図20に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。
 または、第二範囲AR1および第二範囲AL1が図18に示すように設定されている場合、制御部30Bは、図21に示すように、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示させる。
 このようにして、車両用表示システム1Bは、判断部60Bで判断した車両100の走行状況に基づき、選択部70Bが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
 上述したように、本実施形態に係る車両用表示システム1Bは、判断部60Bで判断した車両100の走行状況に基づき、選択部70Bが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。このように、車両用表示システム1Bは、車両100の走行状況に基づき、適切な映像データを右サイドモニタ150および左サイドモニタ160に表示することができる。具体的には、車両用表示システム1Bは、車両100が所定速度以上を所定時間以上継続している場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示する。これにより、車両100が所定速度以上を所定時間以上継続している場合、車両100の死角を含まない第二右映像データ110R2Aおよび第二左映像データ110L2Aで後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1Aおよび第一左映像データ110L1Aで車両100の側方を確認することができる。このように、車両用表示システム1Bは、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
 このようにして、車両用表示システム1Bは、判断部60Bで判断した車両100の走行状況に基づき、選択部70Bが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。
 上述したように、本実施形態に係る車両用表示システム1Bは、判断部60Bで判断した車両100の走行状況に基づき、選択部70Bが選択した映像データを、右サイドモニタ150および左サイドモニタ160に表示させる。このように、車両用表示システム1Bは、車両100の走行状況に基づき、適切な右サイドモニタ150および左サイドモニタ160の表示をすることができる。具体的には、車両用表示システム1Bは、車両100が停止し、かつ、降車可能性がある場合、右サイドモニタ150および左サイドモニタ160に第二右映像データ110R2Aおよび第二左映像データ110L2Aを表示する。これにより、車両100が停止し、かつ、降車可能性がある場合、車両100の死角を含まない第二右映像データ110R2Aおよび第二左映像データ110L2Aで後方を側方より優先して確認することができる。これに対して、通常時は、第一右映像データ110R1Aおよび第一左映像データ110L1Aで車両100の側方を確認することができる。このため、車両用表示システム1Bは、走行状況に応じて適切な車両100周辺の確認を可能にすることができる。
 車両用表示システム1Bは、乗員降車可能性があり、かつ、第二範囲ARまたは第二範囲ALに近接移動体が検出された場合、乗員に近接移動体があることを報知したり、近接移動体にドアが開操作されたことを報知したりする。これにより、車両用表示システム1Bは、乗員降車時に乗員の安全を確保することができる。
 上述した実施形態においては、選択部70Bは、判断部60Bで車両100が停止し、かつ、降車可能性ありと判断された場合、第二右映像データ110R2Aおよび第二左映像データ110L2Aを選択し、それ以外においては第一右映像データ110R1Aおよび第一左映像データ110L1Aを選択した。判断部60Bは、乗員の降車可能性を左右独立して判断してもよい。この場合、選択部70Bは、映像データの選択を左右独立して行う。
 判断部60Bが、車両100の右側に着座している乗員の降車可能性ありと判断した場合、または判断部60Bが、車両100の右側のドアロック解除やドアの車内側ノブ操作から乗員の降車可能性ありと判断した場合、選択部70Bは、右サイドモニタ150に表示する映像として、第二右映像データ110R2Aを選択する。この場合、左サイドモニタ160に表示させる映像は、第一左映像データ110L1Aの表示が維持される。
 判断部60Bが、車両100の左側に着座している乗員の降車可能性ありと判断した場合、または判断部60Bが、車両100の左側のドアロック解除やドアの車内側ノブ操作から乗員の降車可能性ありと判断した場合、選択部70Bは、左サイドモニタ160に表示する映像として、第二左映像データ110L2Aを選択する。この場合、右サイドモニタ150に表示させる映像は、第一右映像データ110R1Aの表示が維持される。
 車両用表示システム1Bは、乗員の降車可能性ありと判断した場合、車両100のエンジンが停止後も所定時間、右サイドモニタ150および左サイドモニタ160の表示を継続するようにしてもよい。車両100がEV車である場合、右サイドモニタ150および左サイドモニタ160の表示に要する電力は蓄電池から供給することができる。また、車両用表示システム1Bは、所定時間経過後、または、乗員の降車が完了し、車両100がドアロックされたことを検出した場合などに、右サイドモニタ150および左サイドモニタ160の表示をOFFにする。
 図示した車両用表示システム1、1A、1Bの各構成要素は、機能概念的なものであり、必ずしも物理的に図示の如く構成されていなくてもよい。すなわち、各装置の具体的形態は、図示のものに限られず、各装置の処理負担や使用状況などに応じて、その全部または一部を任意の単位で機能的または物理的に分散または統合してもよい。
 車両用表示システム1、1A、1Bの構成は、例えば、ソフトウェアとして、メモリにロードされたプログラムなどによって実現される。上記実施形態では、これらのハードウェアまたはソフトウェアの連携によって実現される機能ブロックとして説明した。すなわち、これらの機能ブロックについては、ハードウェアのみ、ソフトウェアのみ、または、それらの組み合わせによって種々の形で実現できる。
 上記に記載した構成要素には、当業者が容易に想定できるもの、実質的に同一のものを含む。さらに、上記に記載した構成は適宜組み合わせが可能である。また、本発明の要旨を逸脱しない範囲において構成の種々の省略、置換または変更が可能である。
 表示制御部90は、図6に示すフローチャートのステップS11において、第一映像データ110Aで後方移動体Vが複数検出された場合、所定条件を満たす後方移動体Vについて、ステップS12以降の処理を行うようにしてもよい。より詳しくは、表示制御部90は、第一映像データ110Aで後方移動体Vが複数検出された場合、第一映像データ110Aの死角範囲BR側と死角範囲BL側とで車両100との距離が最も小さい各後方移動体Vについて、ステップS12以降の処理を行うようにしてもよい。これにより、車両用表示システム1は、複数検出された後方移動体Vの中から、例えば最も近接しているなど、より優先的に確認する必要がある後方移動体Vを確認することができる。このように、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
 表示制御部90は、図6に示すフローチャートのステップS11~S13の判定に加えて、後方移動体Vと車両100との相対速度が所定条件を満たすか否かを判定してもよい。例えば、表示制御部90は、後方移動体Vが車両100との相対速度が所定値以上の場合、ステップS14以降の処理を行うようにしてもよい。ここで、後方移動体Vと車両100との相対速度は、フレームごとの第一映像データ110Aにおける後方移動体Vの映像の大きさの変化に基づき、算出することが可能である。これにより、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
 認識部71は、後方移動体Vを検出する際、車両100の前面と後面とを判別可能な認識辞書を用いて、車両100の前面として認識された後方移動体Vのみを検出対象としてもよい。車両100の後面が認識された場合は、対向車など反対方向を向いている車両であるため、検出対象から除外できる。
 さらに、表示制御部90は、図6に示すフローチャートのステップS11~S14、S16における判定条件が、一定時間継続して成立したら、各ステップにおいてYesと判定してもよい。これにより、車両用表示システム1は、不用意に右サイドモニタ150および左サイドモニタ160に表示する映像が切り替わることを抑制することができる。このように、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
 表示制御部90は、図6に示すフローチャートのステップS11の前に、車両100の現在位置に基づき、図6に示すフローチャートの処理を行うか否かを判定してもよい。例えば、表示制御部90は、車両100の現在位置を取得する現在地データ取得部と、地図情報を含む周辺状況を取得する周辺状況データ取得部とを有し、車両100が繁華街など所定地点を走行している場合、図6に示すフローチャートの処理を行わないこととしてもよい。または、表示制御部90は、現在地データ取得部と周辺状況データ取得部とを有し、車両100が所定速度以上で走行している場合、図6に示すフローチャートの処理を行うこととしたりしてもよい。
 表示制御部90は、右サイドモニタ150または左サイドモニタ160に、第二右側後方映像データ110R2または第二左側後方映像データ110L2を表示させる場合、全体または一部を、所定透明度で半透明に着色し表示してもよい。これにより、車両用表示システム1は、右サイドモニタ150または左サイドモニタ160が、通常表示ではなく、第二右側後方映像データ110R2または第二左側後方映像データ110L2を表示していることを容易に確認することができる。このように、車両用表示システム1は、適切な車両100周辺の確認を可能にすることができる。
 認識部81Bは、図24に示すフローチャートのステップSB34において、さらに、車両100と検出した近接移動体までの距離が所定距離内であるか否かを判定してもよい。車両100と検出した近接移動体までの距離は、第一映像データ110Aから認識部81Bによる近接移動体を検出した際に、検出した近接移動体の輪郭に基づく接地位置を特定し、接地位置の第一映像データ110Aにおける位置関係により求めることができる。
 1    車両用表示システム
 10   車両用表示制御装置
 30   制御部
 40   映像データ取得部
 41   側後方映像データ取得部
 42   後方映像データ取得部
 50   切出部
 60   特定部
 70   検出部
 71   認識部
 80   判断部
 90   表示制御部
 100  車両
 110  後方カメラ
 110A 第一映像データ
 120  右側方カメラ(側後方カメラ)
 130  左側方カメラ(側後方カメラ)
 140  リヤビューモニタ
 150  右サイドモニタ
 160  左サイドモニタ
 200  認識辞書記憶部
 AC   第一範囲
 AR   第二範囲
 AL   第二範囲
 BR   死角範囲
 BL   死角範囲
 V    後方移動体

Claims (22)

  1.  車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得部と、
     前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得部と、
     前記後方映像データ取得部が取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出部と、
     前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御部と
     を備えることを特徴とする車両用表示制御装置。
  2.  前記第一映像データにおける、前記第一範囲の側方に位置し、前記サイドモニタの死角に該当する死角範囲を特定する特定部と、
     前記第一映像データにおいて、移動体認識を行い、後方移動体の存在を検出する検出部と、
     前記検出部で検出された前記後方移動体が前記死角範囲に存在するか否かを判断する判断部と、
     をさらに備え、
     前記表示制御部は、前記判断部で前記死角範囲に前記後方移動体が存在すると判断された場合、前記第二範囲として切出された映像を前記サイドモニタに表示させる
     請求項1に記載の車両用表示制御装置。
  3.  前記検出部は、前記後方移動体の移動状況を検出し、
     前記判断部は、前記検出部で検出された前記後方移動体が前記死角範囲に存在し、かつ、検出した前記後方移動体の前記移動状況が所定条件を満たすか否かを判断し、
     前記表示制御部は、前記判断部で、前記検出部で検出された前記後方移動体が前記死角範囲に存在し、かつ、検出した前記後方移動体の前記移動状況が所定条件を満たすと判断された場合、前記第二範囲として切出された映像を前記サイドモニタに表示させる
     請求項2に記載の車両用表示制御装置。
  4.  前記検出部は、前記後方移動体の移動方向を検出し、
     前記判断部は、検出された前記後方移動体が前記第一範囲から前記死角範囲へ移動しているか否かを判断し、
     前記表示制御部は、前記第一範囲として切出された映像を前記リヤビューモニタに表示させ、前記判断部で前記第一範囲から前記死角範囲へ前記後方移動体が移動していると判断された場合、前記第二範囲として切出された映像を前記サイドモニタに表示させる
     請求項2または3に記載の車両用表示制御装置。
  5.  前記検出部は、検出された前記後方移動体が前記車両に接近していることを検出し、
     前記判断部は、検出された前記後方移動体が前記車両に接近しているか否かを判断し、
     前記表示制御部は、前記判断部で前記後方移動体が前記車両に接近していると判断された場合、前記第二範囲として切出された映像を前記サイドモニタに表示させる
     請求項2から4のいずれか一項に記載の車両用表示制御装置。
  6.  前記車両の走行状況を判断する判断部と、
     前記判断部が判断した走行状況に基づき、前記側後方映像データ取得部が取得した前記第二映像データと、前記切出部が切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択部と、
     をさらに備え、
     前記表示制御部は、前記選択部が選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる、
     請求項1に記載の車両用表示制御装置。
  7.  前記切出部は、前記側後方映像データ取得部が取得した前記第二映像データに基づき、前記サイドモニタに表示される範囲において前記車両の車体の映り込みにより後方視界が阻害される範囲を含む範囲を前記第二範囲として切り出す
     請求項6に記載の車両用表示制御装置。
  8.  前記切出部は、前記第一範囲の側方端部と前記第二範囲とが一部重なるように切り出す
     請求項6または7に記載の車両用表示制御装置。
  9.  前記切出部は、前記第二範囲を、前記第一範囲に対して下方に位置するように切り出す
     請求項6から8のいずれか一項に記載の車両用表示制御装置。
  10.  前記判断部は、前記車両の前記走行状況に基づき、前記車両が所定速度以上で走行しているか否かを判断し、
     前記選択部は、前記判断部で前記車両が所定速度以上で走行していると判断された場合、前記切出部が切り出した前記第二範囲の映像データを選択し、前記判断部で前記車両が所定速度未満で走行していると判断された場合、前記側後方映像データ取得部が取得した前記第二映像データを選択する
     請求項6から9のいずれか一項に記載の車両用表示制御装置。
  11.  前記判断部は、前記車両の前記走行状況に基づき、前記車両の走行地点が所定速度以上で走行可能な地点であるか否かを判断し、
     前記選択部は、前記判断部で前記車両が所定速度以上で走行可能な地点を走行していると判断された場合、前記切出部が切り出した前記第二範囲の映像データを選択し、前記判断部で前記車両が所定速度以上で走行可能ではない地点を走行していると判断された場合、前記側後方映像データ取得部が取得した前記第二映像データを選択する
     請求項6から9のいずれか一項に記載の車両用表示制御装置。
  12.  前記車両の乗員の降車可能性を判断する判断部と、
     前記判断部が判断した降車可能性に基づき、前記側後方映像データ取得部が取得した前記第二映像データと、前記切出部が切り出した前記第二範囲の映像データとからいずれか一方の映像データを選択する選択部と、
     をさらに備え、
     前記表示制御部は、前記選択部が選択した映像データを、前記車両の側方の映像を表示するサイドモニタに表示させ、前記第一範囲として切り出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させる、
     請求項1に記載の車両用表示制御装置。
  13.  前記判断部は、前記車両が停止している判断に加えて、前記車両から乗員が降車する降車可能性があるか否かを判断し、
     前記選択部は、前記判断部で前記車両が停止し、かつ、前記降車可能性ありと判断された場合、前記切出部が切り出した前記第二範囲の映像データを選択する
     請求項12に記載の車両用表示制御装置。
  14.  前記判断部は、前記車両のドアロック解除または前記車両のドアの車内側ノブへの接触検出または前記車両のドアの車内側ノブへの操作検出または前記乗員に装着されていたシートベルトの解除操作のいずれかが検出された場合、前記降車可能性ありと判断する
     請求項13に記載の車両用表示制御装置。
  15.  前記判断部は、前記車両の乗員の降車可能性を、前記車両の左右方向に対して独立して判断し、
     前記選択部は、前記判断部が判断した前記車両の降車可能性に基づき、降車可能性のある方向に対して映像を選択する
     請求項12から14のいずれか一項に記載の車両用表示制御装置。
  16.  前記第一映像データにおいて、移動体認識を行い、後方移動体の存在および前記車両に近接しているか否かを検出する検出部を備え、
     前記表示制御部は、前記検出部で、前記車両に近接している前記後方移動体を検出した場合、前記車両に近接している前記後方移動体の存在を報知する報知部に報知させる
     請求項12から15のいずれか一項に記載の車両用表示制御装置。
  17.  前記切出部は、前記側後方映像データ取得部が取得した前記第二映像データに基づき、前記サイドモニタに表示される範囲において前記車両の車体の映り込みにより後方視界が阻害される範囲を含む範囲を前記第二範囲として切り出す
     請求項12から16のいずれか一項に記載の車両用表示制御装置。
  18.  前記切出部は、前記第一範囲の側方端部と前記第二範囲とが一部重なるように切り出す
     請求項12から17のいずれか一項に記載の車両用表示制御装置。
  19.  前記切出部は、前記第二範囲を、前記第一範囲に対して下方に位置するように切り出す
     請求項12から18のいずれか一項に記載の車両用表示制御装置。
  20.  請求項1から19のいずれか一項に記載の車両用表示制御装置と、
     前記後方カメラ、前記側後方カメラ、前記リヤビューモニタ、前記サイドモニタの少なくともいずれかを備える
     ことを特徴とする車両用表示システム。
  21.  車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、
     前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、
     前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出ステップと、
     前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御ステップと
     を含む車両用表示制御方法。
  22.  車両の後方に配置され、前記車両の後方を撮影する後方カメラからの第一映像データを取得する後方映像データ取得ステップと、
     前記車両の側方に配置され、前記車両の後側方を撮影する側後方カメラからの第二映像データを取得する側後方映像データ取得ステップと、
     前記後方映像データ取得ステップで取得した前記第一映像データの一部である第一範囲と、前記第一範囲の側方に位置する第二範囲とを切出す切出ステップと、
     前記第一範囲として切出された映像を、前記車両の後方映像を表示するリヤビューモニタに表示させ、前記第二映像データを前記車両の側方の映像を表示するサイドモニタに表示させ、所定の条件において、前記第二範囲として切出された映像を前記サイドモニタに表示させる表示制御ステップと
     を車両用表示制御装置として動作するコンピュータに実行させるためのプログラム。
PCT/JP2016/089116 2016-03-09 2016-12-28 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム WO2017154316A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/967,709 US10531016B2 (en) 2016-03-09 2018-05-01 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US16/565,654 US10567672B2 (en) 2016-03-09 2019-09-10 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US16/565,665 US10567673B2 (en) 2016-03-09 2019-09-10 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2016-046009 2016-03-09
JP2016046009A JP6690311B2 (ja) 2016-03-09 2016-03-09 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2016-047185 2016-03-10
JP2016047185A JP6690315B2 (ja) 2016-03-10 2016-03-10 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2016051385A JP6575404B2 (ja) 2016-03-15 2016-03-15 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2016-051385 2016-03-15

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/967,709 Continuation US10531016B2 (en) 2016-03-09 2018-05-01 On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium

Publications (1)

Publication Number Publication Date
WO2017154316A1 true WO2017154316A1 (ja) 2017-09-14

Family

ID=59789335

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/089116 WO2017154316A1 (ja) 2016-03-09 2016-12-28 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム

Country Status (2)

Country Link
US (3) US10531016B2 (ja)
WO (1) WO2017154316A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI839629B (zh) 2021-08-17 2024-04-21 公信電子股份有限公司 電子後視鏡系統及其顯示方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10789495B2 (en) 2016-12-21 2020-09-29 Volkswagen Ag System and method for 1D root association providing sparsity guarantee in image data
JP7067225B2 (ja) * 2018-04-16 2022-05-16 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム
US10922824B1 (en) * 2019-08-13 2021-02-16 Volkswagen Ag Object tracking using contour filters and scalers
JP7314885B2 (ja) * 2020-09-01 2023-07-26 トヨタ自動車株式会社 車両用周辺監視装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003219413A (ja) * 2002-01-24 2003-07-31 Clarion Co Ltd 車両後方モニタシステムおよびモニタ装置
JP2005223524A (ja) * 2004-02-04 2005-08-18 Nissan Motor Co Ltd 車両周辺監視装置
JP2007295357A (ja) * 2006-04-26 2007-11-08 Alpine Electronics Inc 車載周辺状況提示装置
JP2009081666A (ja) * 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2010163104A (ja) * 2009-01-16 2010-07-29 Denso Corp 車両用表示装置及びそれを備えた車両周辺視野表示システム
JP2012170127A (ja) * 2012-04-23 2012-09-06 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2014116756A (ja) * 2012-12-07 2014-06-26 Toyota Motor Corp 周辺監視システム
JP2015144407A (ja) * 2013-12-27 2015-08-06 株式会社Jvcケンウッド 視界支援装置、視界支援方法、及び視界支援プログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3977368B2 (ja) * 2004-09-30 2007-09-19 クラリオン株式会社 駐車支援システム
JP5143009B2 (ja) * 2006-10-11 2013-02-13 パナソニック株式会社 映像表示装置及び映像表示方法
US9242602B2 (en) * 2012-08-27 2016-01-26 Fotonation Limited Rearview imaging systems for vehicle
JP2015009646A (ja) 2013-06-28 2015-01-19 アルパイン株式会社 運転支援装置
JP2016175552A (ja) * 2015-03-20 2016-10-06 株式会社オートネットワーク技術研究所 降車通知装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003219413A (ja) * 2002-01-24 2003-07-31 Clarion Co Ltd 車両後方モニタシステムおよびモニタ装置
JP2005223524A (ja) * 2004-02-04 2005-08-18 Nissan Motor Co Ltd 車両周辺監視装置
JP2007295357A (ja) * 2006-04-26 2007-11-08 Alpine Electronics Inc 車載周辺状況提示装置
JP2009081666A (ja) * 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2010163104A (ja) * 2009-01-16 2010-07-29 Denso Corp 車両用表示装置及びそれを備えた車両周辺視野表示システム
JP2012170127A (ja) * 2012-04-23 2012-09-06 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
JP2014116756A (ja) * 2012-12-07 2014-06-26 Toyota Motor Corp 周辺監視システム
JP2015144407A (ja) * 2013-12-27 2015-08-06 株式会社Jvcケンウッド 視界支援装置、視界支援方法、及び視界支援プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI839629B (zh) 2021-08-17 2024-04-21 公信電子股份有限公司 電子後視鏡系統及其顯示方法

Also Published As

Publication number Publication date
US20180249093A1 (en) 2018-08-30
US20200007793A1 (en) 2020-01-02
US10531016B2 (en) 2020-01-07
US20200007792A1 (en) 2020-01-02
US10567673B2 (en) 2020-02-18
US10567672B2 (en) 2020-02-18

Similar Documents

Publication Publication Date Title
US20210331623A1 (en) Apparatus for providing around view
US9511730B1 (en) Collision warning system
JP6020507B2 (ja) 車両用画像表示装置及び車両用画像表示方法
JP4517393B2 (ja) 運転支援装置
CN109564734B (zh) 驾驶辅助装置、驾驶辅助方法、移动体和程序
WO2017154316A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6651031B2 (ja) 車両ドア衝突防止装置および車両ドア衝突防止方法
KR20190012052A (ko) 차량용 사이드 미러
CN111278702B (zh) 车辆控制装置、具有该车辆控制装置的车辆以及控制方法
KR102600202B1 (ko) 차량 및 차량의 제어방법
CN109562757B (zh) 驾驶辅助装置、驾驶辅助方法、移动体和程序
US20140078291A1 (en) Driver Assisting System and Method for a Motor Vehicle
CN110949301B (zh) 车辆的乘员监视装置以及乘员保护系统
JPWO2018056104A1 (ja) 車両制御装置、車両制御方法、および移動体
JP2017216509A (ja) 車両用表示装置
JP6575404B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2007062503A (ja) 車載機器制御装置
WO2017154317A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
KR102441510B1 (ko) 자율 주행 제어 시스템, 그를 가지는 차량 및 그 제어 방법
JP6398182B2 (ja) 信号情報提示装置
WO2018020751A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2022140026A (ja) 画像処理装置、画像処理方法およびプログラム
JP2005018235A (ja) 車両用警報装置
JP2017162198A (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP6690311B2 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16893639

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 16893639

Country of ref document: EP

Kind code of ref document: A1