WO2017002708A1 - 画像表示制御装置 - Google Patents

画像表示制御装置 Download PDF

Info

Publication number
WO2017002708A1
WO2017002708A1 PCT/JP2016/068731 JP2016068731W WO2017002708A1 WO 2017002708 A1 WO2017002708 A1 WO 2017002708A1 JP 2016068731 W JP2016068731 W JP 2016068731W WO 2017002708 A1 WO2017002708 A1 WO 2017002708A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
vehicle
region
displayed
switching
Prior art date
Application number
PCT/JP2016/068731
Other languages
English (en)
French (fr)
Inventor
渡邊　一矢
孝之 中所
坂部　匡彦
Original Assignee
アイシン精機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アイシン精機株式会社 filed Critical アイシン精機株式会社
Priority to JP2017526314A priority Critical patent/JP6555348B2/ja
Priority to EP16817816.8A priority patent/EP3316574A4/en
Priority to US15/738,681 priority patent/US10484651B2/en
Priority to CN201680037469.XA priority patent/CN107852481B/zh
Publication of WO2017002708A1 publication Critical patent/WO2017002708A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Definitions

  • Embodiments described herein relate generally to an image display control apparatus.
  • camera images Of a plurality of images (hereinafter referred to as camera images) obtained by imaging of a camera provided so as to be capable of imaging a plurality of areas around the vehicle, the camera image of the area selected by the user and the vehicle from above.
  • a technique that enables an intuitive grasp of which region of a camera image is displayed by associating and displaying a viewed image hereinafter referred to as a bird's-eye view image.
  • the image display control apparatus includes a display unit and a control unit.
  • the control unit includes a first screen including a first image of the vehicle as viewed from above and a second image obtained by imaging a part of the second region of the first region to be imaged around the vehicle. Is displayed on the display unit, and is switched from the second image to a third image obtained by imaging a third region selected as a partial region included in the first region and different from the second region. And before the time when the second image is switched to the third image, identification information for identifying the third region is displayed in the first image. Thus, as an example, the identification information is displayed until the user switches from the second image to the third image, so that the user can easily recognize which region the image to be displayed next is. can do.
  • the first image is displayed on the first screen while the control unit switches from the second image to the third image, and the first image is displayed prior to the third image.
  • a black image is displayed instead of the two images.
  • the control unit gradually decreases the brightness of the second image until the black image is displayed, and after the black image is displayed, the brightness of the third image is gradually increased.
  • the identification information is information that is superimposed and displayed on the area of the first image corresponding to the third area.
  • the user can easily grasp which region is the next image to be displayed among the regions included in the first region.
  • control unit does not display the identification information after a predetermined time has elapsed after the second image is switched to the third image or after the second image is switched to the third image. Change to Thereby, as an example, the user can easily grasp that the switching from the second image to the third image has been completed.
  • FIG. 1 is a perspective view illustrating an example of a state in which a part of the vehicle according to the first embodiment is seen through.
  • FIG. 2 is a plan view illustrating an example of the vehicle according to the first embodiment.
  • FIG. 3 is a block diagram illustrating an example of a functional configuration of the vehicle according to the first embodiment.
  • FIG. 4A is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 4B is a diagram for describing an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 4A is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 4B is a diagram for describing an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 4C is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 4D is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 5A is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 5B is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 5C is a diagram for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 5D is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6B is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6C is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6B is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 6C is a diagram
  • FIG. 6D is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7B is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7C is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7B is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 7C is a diagram
  • FIG. 7D is a diagram for describing an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8B is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8C is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8A is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8B is a diagram for explaining an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 8C is a diagram for
  • FIG. 8D is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9A is a diagram for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9B is a diagram for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9C is a diagram for describing an example of a switching process of a captured image in a vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9A is a diagram for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9B is a diagram for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 9C
  • FIG. 9D is a diagram for describing an example of a captured image switching process in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • FIG. 10A is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 10B is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 10C is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 10D is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 10A is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 10B is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 10C is a diagram for
  • FIG. 10E is a diagram for describing an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 11A is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 11B is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 11C is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 11D is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 11E is a diagram for describing an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 12A is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 12B is a diagram for explaining an example of a vehicle periphery monitoring screen displayed in the vehicle according to the second embodiment.
  • FIG. 12C is a diagram for explaining an example of a vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • FIG. 1 is a perspective view illustrating an example of a state in which a part of the vehicle according to the first embodiment is seen through.
  • FIG. 2 is a plan view illustrating an example of the vehicle according to the first embodiment.
  • the vehicle 1 has a passenger compartment 2a in which a user (not shown) gets.
  • a steering section 4 an acceleration operation section 5, a braking operation section 6, a speed change operation section 7 and the like are provided in a state that a driver as a user can operate from the seat 2b.
  • Steering unit 4 is a steering wheel protruding from the dashboard (instrument panel).
  • the acceleration operation unit 5 is an accelerator pedal provided under the driver's feet.
  • the braking operation unit 6 is a brake pedal provided under the driver's feet.
  • the speed change operation unit 7 is a shift lever protruding from the center console.
  • a monitor device 11 having a display device 8 (an example of a display unit) and a sound output device 9 configured by a speaker or the like and capable of outputting various sound information is provided.
  • the monitor device 11 is provided at the center of the dashboard in the passenger compartment 2a in the vehicle width direction (left-right direction).
  • the display device 8 includes an LCD (Liquid Crystal Display), an OELD (Organic Electroluminescent Display), and the like, and an image obtained by imaging the periphery of the vehicle 1 and an image of the vehicle 1 viewed from above (a so-called overhead view image g1). (Refer to FIG. 4A to FIG. 4D)) (hereinafter, referred to as a vehicle periphery monitoring screen G1 (refer to FIG. 4A to FIG. 4D)) and the like.
  • LCD Liquid Crystal Display
  • OELD Organic Electroluminescent Display
  • the display device 8 includes a transparent operation input unit 10 (so-called touch panel) that is provided on the display screen and detects a touch operation on the display screen.
  • a transparent operation input unit 10 that is provided on the display screen and detects a touch operation on the display screen.
  • the user can visually recognize an image displayed on the display screen of the display device 8.
  • the user can input various types of operation information by touching the display position of the image displayed on the display screen of the display device 8 with a finger or the like.
  • the monitor device 11 may have various operation units such as a switch, a dial, a joystick, and a push button.
  • another audio output device may be provided at a position different from the position where the monitor device 11 is provided.
  • various types of sound information can be output from both the sound output device 9 and other sound output devices.
  • the monitor device 11 can display information on various systems such as a navigation system and an audio system in addition to the vehicle periphery monitoring screen G1 (see FIGS. 4A to 4D).
  • a display unit capable of displaying the monitoring screen G1 may be provided separately from the monitor device 11.
  • the vehicle 1 is a four-wheeled vehicle (four-wheeled vehicle), and has two right and left front wheels 3F and two right and left rear wheels 3R.
  • the side slip angle of the front wheel 3F changes (turns) according to the steering of the steering unit 4 (steering wheel).
  • the steering system 12 (see FIG. 3) is an electric power steering system, an SBW (Steer By Wire) system, or the like, and a torque (assist torque) is added to the steering unit 4 by an actuator 12a (see FIG. 3) to generate a steering force.
  • the front wheel 3F is steered.
  • the vehicle 1 (vehicle body 2) includes a plurality of regions around the vehicle 1 (in this embodiment, the front of the vehicle 1, the rear of the vehicle 1, and the left side in the vehicle width direction of the vehicle 1.
  • a plurality of (in this embodiment, five) imaging units 16a, 16b, 16c, 16d, and 16e (hereinafter referred to as imaging unit 16a) provided so as to be capable of imaging the vehicle 1 in the vehicle width direction and under the floor of the vehicle 1).
  • 16b, 16c, 16d, and 16e are described as the imaging unit 16).
  • the imaging unit 16 is a so-called digital camera having an imaging element such as a CCD (Charge Coupled Device) or a CIS (CMOS Image Sensor).
  • the imaging unit 16 images a region around the vehicle 1 at a predetermined frame rate, and outputs image data of an image (a frame image constituting a moving image) obtained by the imaging.
  • the imaging unit 16 includes a wide-angle lens and can capture a range of a viewing angle of 140 to 220 ° in the horizontal direction.
  • the imaging units 16 a, 16 b, 16 c, and 16 d are provided with their optical axes directed downward of the vehicle 1. Therefore, the imaging units 16a, 16b, 16c, and 16d can image a road surface on which the vehicle 1 can move and a region above the road surface (external environment).
  • the imaging unit 16e is provided with its optical axis directed downward of the vehicle 1 and can image a road surface on which the vehicle 1 can move.
  • the imaging unit 16 a is provided at the front end 2 c (for example, a front grill) of the vehicle body 2 and can capture an area in front of the vehicle 1.
  • the imaging unit 16b is provided at the rear end 2e of the vehicle body 2 (for example, the rear trunk door 2h) and can capture an area behind the vehicle 2.
  • the imaging unit 16c is provided at the left end 2d of the vehicle body 2 in the vehicle width direction (for example, the left door mirror 2g), and can image the left region of the vehicle 2.
  • the imaging unit 16d is provided at the right end 2f of the vehicle body 2 in the vehicle width direction (for example, the right door mirror 2g), and can image the right region of the vehicle 1.
  • the imaging unit 16e is provided under the floor of the vehicle 1 and can image a road surface on which the vehicle 1 can move.
  • FIG. 3 is a block diagram illustrating an example of a functional configuration of the vehicle according to the first embodiment.
  • the vehicle 1 includes a monitor device 11, a steering system 12, an actuator 12a, a torque sensor 12b, an ECU (Electronic Control Unit) 14, an obstacle sensor 17, a brake system 18, A brake sensor 18b, a steering angle sensor 19, an accelerator sensor 20, a shift sensor 21, and a wheel speed sensor 22 are provided.
  • the monitor device 11, the steering system 12, the ECU 14, the obstacle sensor 17, the brake system 18, the accelerator sensor 20, the shift sensor 21, and the wheel speed sensor 22 are connected to an electric communication line (hereinafter referred to as a vehicle interior). It is electrically connected via a network 23).
  • the in-vehicle network 23 is configured by, for example, a CAN (Controller Area Network).
  • the vehicle 1 has two acceleration sensors 26 (26a, 26b).
  • the vehicle 1 is a vehicle equipped with ESC (Electronic Stability Control), and executes ESC based on the detection results of acceleration in the front-rear and left-right directions of the vehicle 1 by the acceleration sensors 26a and 26b.
  • ESC Electronic Stability Control
  • the ECU14 performs an image process with respect to the image data obtained by the imaging of the imaging part 16, and displays the image data which performed the said image process on the display apparatus 8.
  • the ECU 14 controls each part such as the steering system 12 and the brake system 18 by transmitting a control signal to each part of the vehicle 1 via the in-vehicle network 23.
  • the ECU 14 also detects detection results of the torque sensor 12b, the obstacle sensor 17, the brake sensor 18b, the steering angle sensor 19, the accelerator sensor 20, the shift sensor 21, the wheel speed sensor 22, the acceleration sensor 26, and the like via the in-vehicle network 23. To get.
  • the ECU 14 acquires operation information input by the user using the operation input unit 10.
  • the ECU 14 includes a CPU (Central Processing Unit) 14a, a ROM (Read Only Memory) 14b, a RAM (Random Access Memory) 14c, a display control unit 14d, a voice control unit 14e, an SSD (Solid State Drive) 14f, and the like.
  • CPU14a is a control part which controls the vehicle 1 whole, Comprising: Various processes, such as the acquisition process of the movement path
  • the CPU 14a reads a program stored in a nonvolatile storage device such as the ROM 14b or the SSD 14f, and executes various processes according to the program.
  • the RAM 14c is used as a work area when the CPU 14a executes various processes according to a program, and temporarily stores data used for various processes executed by the CPU 14a.
  • the display control unit 14d performs image processing on image data (for example, image data obtained by imaging by the imaging unit 16) displayed on the display device 8, display processing of image data on the display device 8, and the like.
  • the voice control unit 14e executes processing for outputting sound data such as voice from the voice output device 9.
  • the SSD 14f is a nonvolatile storage unit that can rewrite various data, and retains the various data even when the ECU 14 is turned off.
  • the ECU 14 may include a processor such as a DSP (Digital Signal Processor) and a logic circuit instead of the CPU 14a as a control unit that controls the entire vehicle 1.
  • the SSD 14f is used as a main storage device that stores a program executed by the CPU 14a.
  • an HDD Hard Disk Drive
  • the ECU 14 includes the SSD 14f or HDD as the main storage device.
  • the present invention is not limited to this, and the external device of the ECU 14 may include the SSD 14f or HDD.
  • FIGS. 4A to 4D and FIGS. 5A to 5D are diagrams for explaining an example of a switching process of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • the CPU 14a (an example of the control unit) operates the vehicle periphery monitoring shown in FIG. 4A when the operation input unit 10 is operated and the operation information for instructing the display of the vehicle periphery monitoring screen G1 is input.
  • the screen G1 is displayed on the display device 8.
  • the vehicle periphery monitoring screen G1 (an example of the first screen) is an imaging target when the vehicle 1 is viewed from above and an overhead image g1 (an example of the first image).
  • a part of the region (an example of the first region) (an example of the second region, in this embodiment, a front region that is a region in front of the vehicle 1, a wide-angle region wider than the front region, the vehicle width of the vehicle 1)
  • a captured image g2 (an example of a second image) obtained by capturing an image of a side region that is the left and right regions of the direction or an underfloor region that is an underfloor region of the vehicle 1)
  • a selection image g3 that is a GUI (Graphic User Interface) for selecting a region for displaying the captured image g2 from among the regions to be imaged around.
  • the bird's-eye view image g1 includes a vehicle image g11 when the vehicle 1 is viewed from above, and a surrounding image g12 when the region around the vehicle 1 is viewed from above.
  • the CPU 14a generates a surrounding image g12a obtained by converting an image obtained by imaging by the imaging unit 16a into an image obtained by viewing the front area from above (so-called viewpoint conversion). Further, the CPU 14a generates a surrounding image g12b obtained by converting the two images obtained by the imaging of the imaging units 16c and 16d into images obtained by viewing the left area and the right area from above.
  • the CPU 14a generates a surrounding image g12c obtained by converting an image obtained by imaging by the imaging unit 16b into an image obtained by viewing the rear region of the vehicle 1 from above. Then, the CPU 14a sets an image obtained by combining the surrounding image g12a, the surrounding image g12b, and the surrounding image g12c as the surrounding image g12.
  • the CPU 14a first displays the captured image g2 included in the vehicle periphery monitoring screen G1 as shown in FIG. 4A.
  • the image obtained by imaging the front area by the imaging unit 16 is used.
  • the CPU 14a selects a selection image g31 for selecting the front area as the area for displaying the captured image g2, and the wide-angle area as the area for displaying the captured image g2.
  • the image g3 is included in the vehicle periphery monitoring screen G1.
  • the CPU 14a includes the selection image g3 in the vehicle periphery monitoring screen G1, but it is sufficient that at least the overhead image g1 and the captured image g2 are included in the vehicle periphery monitoring screen G1.
  • the CPU 14a detects the touch operation on the selection image g3 by the operation input unit 10, and the operation information indicating an area (hereinafter referred to as a selection area, for example, a side area) selected by the user using the selection image g3.
  • a selection area an example of a third area, which is indicated by the input operation information in the present embodiment
  • the CPU 14a displays the post-switching image (an example of the third image) that is an image obtained by imaging the selection area by the imaging unit 16 (for example, the imaging units 16c and 16d).
  • the image is switched to the pre-switching image (an example of the second image) that is the image displayed immediately before the post-switching image, and is displayed on the display device 8 as the captured image g2.
  • the CPU 14a Prior to the time when the pre-switching image is switched to the post-switching image (in this embodiment, until the switching from the pre-switching image to the post-switching image), the CPU 14a includes the identification image g13 (the identification information of the identification information). Example) is displayed.
  • the identification image g13 is an image for identifying the selection region selected by the user.
  • the identification image g13 is displayed before the switching from the pre-switching image to the post-switching image, so that the user can easily recognize which region the next displayed image is. Can do.
  • the identification image g13 is information that is displayed in a superimposed manner on the area of the overhead image g1 that corresponds to the selected area. Accordingly, the user can easily grasp which region of the image to be imaged around the vehicle 1 is the next image to be displayed.
  • the identification image g13 of the present embodiment corresponds to identification information.
  • the CPU 14a identifies the area corresponding to the selected area in the surrounding image g12 included in the overhead image g1 as a display mode different from the other areas before the time point when the pre-switching image is switched to the post-switching image.
  • the image g13 is superimposed and displayed on the overhead image g1.
  • the display mode different from the other areas is that the color of the area corresponding to the selected area in the surrounding image g12 is different from that of the other area, or the area corresponding to the selected area is blinked. is there. For example, as illustrated in FIG.
  • the CPU 14a sets the area corresponding to the side area of the surrounding image g12b to another area.
  • An identification image g13 having a display mode different from the above is superimposed on the overhead image g1.
  • the CPU 14a superimposes and displays the identification image g13 in which the region corresponding to the selected region in the surrounding image g12 is displayed differently from the other regions on the overhead image g1, but after switching from the pre-switching image.
  • the present invention is not limited to this as long as the identification image g13 is displayed in the bird's-eye view image g1 before the time of switching to the image.
  • the CPU 14a may display text representing the selected area (for example, “the front area has been selected”) as the identification image g13 in the overhead image g1.
  • the CPU 14a superimposes the identification image g13 on the overhead image g1, but in order not to give an impression that the overhead image g1 cannot be visually recognized due to the display of the identification image g13, the overhead image g1 is transmitted through the identification image g13.
  • the identification image g13 may be superimposed and displayed on the overhead view image g1 in such a manner that can be seen through.
  • the CPU 14a keeps displaying the overhead image g1 on the vehicle periphery monitoring screen G1 before switching from the pre-switching image to the post-switching image, prior to displaying the post-switching image.
  • the black image g4 is displayed instead of the pre-switching image.
  • the CPU 14a continues to display the black image g4 for a preset time before displaying the post-switching image. Thereby, the user can grasp
  • the CPU 14a may gradually decrease the luminance of the pre-switching image until the black image g4 is displayed instead of the pre-switching image. That is, the CPU 14a displays the black image g4 after fading out the pre-switching image until the black image g4 is displayed instead of the pre-switching image.
  • the user can grasp
  • the CPU 14a includes the post-switching image as the captured image g2 in the vehicle periphery monitoring screen G1.
  • the CPU 14a displays the identification image g13 for a predetermined time after including the post-switching image as the captured image g2 in the vehicle periphery monitoring screen G1 (that is, after switching from the pre-switching image to the post-switching image). Keep doing. This prevents the identification image g13 from being immediately hidden after the captured image g2 is switched. Therefore, the captured image obtained by capturing the region selected by the user after the captured image g2 is switched. It can be confirmed whether or not g2 is displayed.
  • the CPU 14a may gradually increase the brightness of the post-switching image until the post-switching image is displayed instead of the black image g4. That is, the CPU 14a fades in the post-switching image and displays the post-switching image until the post-switching image is displayed instead of the black image g4. Thereby, since it can prevent that the captured image g2 switches in a short time, the user can grasp
  • the CPU 14a hides the identification image g13 after a predetermined time has elapsed since the display of the post-switching image was started.
  • the CPU 14a displays an image for identifying a selection region that currently displays the captured image g2. It may be displayed (that is, the identification image g13 is redisplayed). Thereby, even after the identification image g13 is not displayed, it is possible to easily identify which area the captured image g2 obtained by capturing an image is displayed by performing a touch operation on the captured image g2. it can. Further, as shown in FIG.
  • the CPU 14a makes the bird's-eye view image g1 and the selection image g3 non-displayed and displays the post-switching image on the vehicle periphery monitoring screen G1, thereby further confirming the post-switching image. It can also be made easier.
  • the CPU 14a changes the identification image g13 to non-display after a predetermined time has elapsed after the pre-switching image is switched to the post-switching image.
  • the present invention is not limited to this.
  • the identification image g13 may be changed to non-display at the same time that is switched to the post-switching image.
  • FIGS. 6A to 6D and FIGS. 7A to 7D are diagrams for explaining an example of switching processing of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • the CPU 14a displays a vehicle periphery monitoring screen G1 including a captured image g2 obtained by imaging by the imaging unit 16a on the display device 8, as shown in FIG. 6A. Thereafter, as shown in FIG. 6B, when a touch operation on the selection image g32 is detected and the wide-angle area is selected as the selection area, the CPU 14a selects an area corresponding to the wide-angle area in the surrounding image g12 as another area. An identification image g13 having a display mode different from that of the region is superimposed and displayed on the vehicle periphery monitoring screen G1.
  • the CPU 14a changes the pre-switching image for the preset time and the black image g4 while the overhead image g1 is displayed on the vehicle periphery monitoring screen G1 before the captured image g2 is switched. Is displayed. Further, as illustrated in FIG. 6C, the CPU 14a may gradually decrease the luminance of the pre-switching image until the black image g4 is displayed instead of the pre-switching image.
  • the CPU 14a captures an image (post-switching image) obtained by imaging the wide-angle region with the imaging unit 16a. ) As a captured image g2 in the vehicle periphery monitoring screen G1. Further, as illustrated in FIG. 7A, the CPU 14a may gradually increase the luminance of the post-switching image until the post-switching image is displayed instead of the black image g4.
  • the CPU 14a hides the identification image g13 after a predetermined time has elapsed since the display of the post-switching image was started. At that time, as shown in FIG. 7D, the CPU 14a hides the overhead image g1 and the selection image g3 and displays the switched image on the vehicle periphery monitoring screen G1, thereby further confirming the switched image. It is also possible to make it easier.
  • FIGS. 8A to 8D and FIGS. 9A to 9D are diagrams for explaining an example of switching processing of captured images in the vehicle periphery monitoring screen displayed in the vehicle according to the first embodiment.
  • the CPU 14a displays a vehicle periphery monitoring screen G1 including a captured image g2 obtained by imaging by the imaging unit 16a on the display device 8, as shown in FIG. 8A.
  • the CPU 14a changes the area corresponding to the wide-angle area in the surrounding image g12 to the other area.
  • An identification image g13 having a display mode different from that of the region is superimposed and displayed on the vehicle periphery monitoring screen G1.
  • the CPU 14a replaces the pre-switching image with the pre-switching image for a preset time while the overhead image g1 is displayed on the vehicle periphery monitoring screen G1 before the captured image g2 is switched. Is displayed. Further, as illustrated in FIG. 8C, the CPU 14a may gradually decrease the luminance of the pre-switching image until the black image g4 is displayed instead of the pre-switching image.
  • the CPU 14a captures an image (switched image) obtained by imaging by the imaging unit 16e. It is included in the vehicle periphery monitoring screen G1 as g2. Further, as shown in FIG. 9A, the CPU 14a gradually increases the luminance of the post-switching image until the post-switching image is displayed instead of the black image g4.
  • the image obtained by imaging by the imaging unit 16e is displayed as an image obtained by imaging the underfloor region.
  • the present invention is not limited to this, and for example, the front region is captured by the imaging unit 16a.
  • the image obtained by imaging the front of the vehicle 1 by the imaging unit 16a as compared with the image obtained by directly imaging the underfloor, the road surface condition of the wide underfloor region that is not hidden by the tire of the vehicle 1 Can be displayed.
  • the captured images g2 of FIGS. 9A to 9D by displaying the tire g of the vehicle 1 and the index g21 indicating the outside of the vehicle 1 in an overlapping manner, the user can select which region of the vehicle 1 under the floor area. Can be easily grasped.
  • the CPU 14a hides the identification image g13 after a predetermined time has elapsed since the display of the post-switching image was started. At that time, as shown in FIG. 9D, the CPU 14a hides the overhead view image g1 and the selection image g3 and displays the switched image on the vehicle periphery monitoring screen G1 so as to confirm the switched image. It is also possible to make it easier.
  • the identification image g13 is displayed before the switching from the pre-switching image to the post-switching image. Can be easily recognized.
  • the present embodiment is an example in which a vehicle image included in a vehicle periphery monitoring screen is used as a selection image for selecting a selection region.
  • description of the same parts as those in the first embodiment is omitted.
  • FIG. 10A to FIG. 10E, FIG. 11A to FIG. 11E, and FIG. 12A to FIG. 12C are diagrams for explaining an example of the vehicle periphery monitoring screen displayed on the vehicle according to the second embodiment.
  • the CPU 14a displays a message M1 indicating that a selection area can be selected using the vehicle image g11 in addition to the overhead image g1 and the captured image g2 (for example, “vehicle icon
  • the display area can be selected by depressing “” to display the vehicle periphery monitoring screen G 1 including “) on the display device 8.
  • the CPU 14a changes the display mode of the vehicle image g11 to a predetermined display mode (for example, blinking state, highlight display).
  • a predetermined display mode for example, blinking state, highlight display.
  • the CPU 14a has a plurality of candidate areas (in this embodiment, a front area, a wide-angle area, a side area, and an underfloor area) that can be selected as a selection area each time a touch operation on the vehicle image g11 is detected by the operation input unit 10.
  • a plurality of candidate region images g16 corresponding to each region) are switched and displayed in the overhead view image g1 in a preset order.
  • the candidate area image g16 is an image in which the area corresponding to the candidate area in the peripheral image g12 is displayed differently from the other areas (for example, blinking state, highlighted display).
  • the CPU 14a, the candidate area image g16a corresponding to the front area, the candidate area image g16b corresponding to the wide-angle area, the candidate area image g16c corresponding to the side area, and the candidate area image g16d corresponding to the underfloor area. Are switched and displayed as a plurality of candidate area images g16.
  • the CPU 14a switches and displays the candidate area image g16a, the candidate area image g16b, the candidate area image g16c, and the candidate area image g16d in this order. To do.
  • the plurality of candidate region images g16 are switched and displayed.
  • the present invention is not limited to this, and for example, a captured image
  • a plurality of candidate area images g16 may be switched and displayed.
  • the CPU 14a may switch the candidate area image g16 to be displayed among the plurality of candidate area images g16 according to the direction of the swipe operation detected by the operation input unit 10.
  • a plurality of candidate area images g16 are switched and displayed according to a touch operation detected by a touch panel that is an example of the operation input unit 10, but for example, near a dashboard, an instrument panel, or a steering wheel
  • a plurality of candidate area images g16 may be switched and displayed in response to a cyclic operation of a hardware switch installed in the above.
  • the CPU 14a displays the candidate area image g16 in which the touch operation is detected. It is determined that the corresponding candidate selection area (for example, the side area) has been selected as the selection area.
  • the CPU 14a may determine that the candidate selection area corresponding to the last displayed candidate area image g16 has been selected as the selection area. Then, as shown in FIG. 11D, when a touch operation on the candidate area image g16 (for example, the candidate area image g16c) is detected by the operation input unit 10, the CPU 14a displays the candidate area image g16 in which the touch operation is detected. It is determined that the corresponding candidate selection area (for example, the side area) has been selected as the selection area.
  • the CPU 14a may determine that the candidate selection area corresponding to the last displayed candidate area image g16 has been selected as the selection area. Then, as shown in FIG.
  • the CPU 14a includes an image (post-switching image) obtained by imaging the selected region as the captured image g2 in the vehicle periphery monitoring screen G1, as in the first embodiment. . Further, as shown in FIG. 11E, the CPU 14a superimposes and displays the identification image g13 in the overhead image g1 before the time point when the pre-switching image is switched to the post-switching image, as in the first embodiment. .
  • the vehicle 1 by touching the vehicle image g11 included in the overhead image g1, the plurality of candidate area images g16 are switched and displayed, and the candidate area image g16 is displayed. Since the selection area can be selected by performing a touch operation, an operation for selecting the selection area can be performed intuitively.
  • the identification image g13 is displayed before the switching from the pre-switching image to the post-switching image, so that the user can display the next image. Can be easily recognized.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Mechanical Engineering (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

実施形態の画像表示制御装置は、表示部と、制御部と、を有する。制御部は、車両を上から見た第１画像と、車両の周囲で撮像対象となる第１領域のうち一部の第２領域を撮像して得られた第２画像とを含む第１画面を表示部に表示し、第２画像から、第１領域に含まれる一部の領域として選択されかつ第２領域とは異なる第３領域を撮像して得られた第３画像へ切り替えて表示部上に表示し、第２画像が第３画像に切り替えられる時点よりも前に、第１画像内に、第３領域を識別する識別情報を表示する。

Description

画像表示制御装置
　本発明の実施形態は、画像表示制御装置に関する。
　車両の周囲の複数の領域を撮像可能に設けられたカメラの撮像により得られた複数の画像（以下、カメラ画像と言う）のうち、ユーザにより選択された領域のカメラ画像と、車両を上から見た画像（以下、俯瞰画像と言う）と、を関連付けて表示することによって、いずれの領域のカメラ画像が表示されているかを直感的に把握できるようにする技術がある。
特開２００８－１７３１１号公報
　しかしながら、特許文献１に記載の技術では、手動または自動に問わず、切り替わる先のカメラ画像が、いずれの領域のカメラ画像かをユーザが把握していない場合、例えば、１つのボタンを押す毎に所定の順番でカメラ画像が切り替わる場合や車両の走行状態に応じてカメラ画像が切り替わる場合など、カメラ画像が切り替わった後に、俯瞰画像とカメラ画像とを確認して、どの領域のカメラ画像に切り替わったかを、ユーザが理解しなければならず、分かりづらかった。
　実施形態の画像表示制御装置は、表示部と、制御部と、を有する。制御部は、車両を上から見た第１画像と、車両の周囲で撮像対象となる第１領域のうち一部の第２領域を撮像して得られた第２画像とを含む第１画面を表示部に表示し、第２画像から、第１領域に含まれる一部の領域として選択されかつ第２領域とは異なる第３領域を撮像して得られた第３画像へ切り替えて表示部に表示し、第２画像が第３画像に切り替えられる時点よりも前に、第１画像内に、第３領域を識別する識別情報を表示する。これにより、一例として、第２画像から第３画像に切り替るまでの間に、識別情報が表示されることにより、ユーザが、次に表示される画像がいずれの領域であるかを容易に認識することができる。
　また、実施形態の画像表示制御装置は、制御部が、第２画像から第３画像に切り替るまでの間に、第１画像を第１画面に表示したまま、第３画像に先立って、第２画像に代えて黒画像を表示する。これにより、一例として、第２画像が第３画像に切り替わる際に、第１画像が見えなくなって、第２画像が第３画像に切り替わったのか否かをユーザが把握できなくなることを防止できる。
　また、実施形態の画像表示制御装置は、制御部が、黒画像が表示されるまで、第２画像の輝度を徐々に下げ、黒画像が表示された後、第３画像の輝度を徐々に上げる。これにより、一例として、第２画像が第３画像に切り替わる際に、第１画像が見えなくなって、第２画像が第３画像に切り替わったのか否かをユーザが把握できなくなることを防止でき、かつ第２画像が第３画像に切り替わったか否かをユーザが容易に把握することができる。
　また、実施形態の画像表示制御装置は、識別情報は、第３領域に対応する第１画像の領域に重畳表示される情報である。これにより、一例として、第１領域に含まれる領域のうち、次に表示される画像がいずれの領域であるかをユーザが容易に把握することができる。
　さらに、実施形態の画像表示制御装置は、制御部は、第２画像が第３画像に切り替えられたと同時に、または第２画像が第３画像に切り替わった後、所定時間経過後に識別情報を非表示に変更する。これにより、一例として、第２画像から第３画像への切り替えが完了したことをユーザが容易に把握することができる。
図１は、第１の実施形態にかかる車両の一部が透視された状態の一例が示された斜視図である。 図２は、第１の実施形態にかかる車両の一例を示す平面図である。 図３は、第１の実施形態にかかる車両の機能構成の一例を示すブロック図である。 図４Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図４Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図４Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図４Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図５Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図５Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図５Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図５Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図６Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図６Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図６Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図６Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図７Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図７Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図７Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図７Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図８Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図８Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図８Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図８Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図９Ａは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図９Ｂは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図９Ｃは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図９Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。 図１０Ａは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１０Ｂは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１０Ｃは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１０Ｄは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１０Ｅは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１１Ａは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１１Ｂは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１１Ｃは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１１Ｄは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１１Ｅは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１２Ａは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１２Ｂは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。 図１２Ｃは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。
　以下、添付の図面を用いて、本実施形態にかかる画像表示制御装置を車両に搭載した例について説明する。
（第１の実施形態）
　まず、図１および図２を用いて、本実施形態にかかる画像表示制御装置を搭載した車両の概略構成について説明する。図１は、第１の実施形態にかかる車両の一部が透視された状態の一例が示された斜視図である。図２は、第１の実施形態にかかる車両の一例を示す平面図である。
　図１に示すように、本実施形態にかかる車両１は、図示しないユーザが乗車する車室２ａを有している。車室２ａ内には、ユーザとしての運転者が座席２ｂから操作可能な状態で、操舵部４、加速操作部５、制動操作部６、変速操作部７等が設けられている。
　操舵部４は、ダッシュボード（インストルメントパネル）から突出したステアリングホイールである。加速操作部５は、運転者の足下に設けられたアクセルペダルである。制動操作部６は、運転者の足下に設けられたブレーキペダルである。変速操作部７は、センターコンソールから突出したシフトレバーである。
　また、車室２ａ内には、表示装置８（表示部の一例）と、スピーカ等で構成され各種の音情報を出力可能な音声出力装置９と、を有するモニタ装置１１が設けられている。モニタ装置１１は、車室２ａ内のダッシュボードの車幅方向（左右方向）の中央部に設けられている。表示装置８は、ＬＣＤ（Liquid　Crystal　Display）やＯＥＬＤ（Organic　Electroluminescent　Display）等で構成され、車両１の周囲を撮像して得られた画像および車両１を上から見た画像（所謂、俯瞰画像ｇ１（図４Ａ～図４Ｄ参照））を含む画面（以下、車両周辺監視用画面Ｇ１（図４Ａ～図４Ｄ参照）と言う）等の各種情報を表示可能な表示部である。
　本実施形態では、表示装置８は、表示画面上に設けられかつ当該表示画面に対するタッチ操作を検出する透明な操作入力部１０（所謂、タッチパネル）を有している。ユーザは、表示装置８の表示画面に表示される画像を視認することができる。また、ユーザは、表示装置８の表示画面に表示される画像の表示位置に指等で触れることによって、各種の操作情報を入力することができる。
　また、モニタ装置１１は、スイッチ、ダイヤル、ジョイスティック、押しボタン等の各種の操作部を有していても良い。また、車室２ａ内には、モニタ装置１１が設けられた位置とは異なる位置に、他の音声出力装置が設けられていても良い。この場合、音声出力装置９および他の音声出力装置の両方から、各種の音情報を出力することができる。また、本実施形態では、モニタ装置１１は、車両周辺監視用画面Ｇ１（図４Ａ～図４Ｄ参照）に加えて、ナビゲーションシステムやオーディオシステム等の各種システムに関する情報も表示可能であるが、車両周辺監視用画面Ｇ１（図４Ａ～図４Ｄ参照）を表示可能な表示部を、モニタ装置１１とは別に設けることも可能である。
　また、本実施形態では、車両１は、図１および図２に示すように、四輪車（四輪自動車）であり、左右２つの前輪３Ｆと、左右２つの後輪３Ｒとを有する。前輪３Ｆの横滑り角が操舵部４（ステアリングホイール）の操舵に応じて変化（転舵）する。操舵システム１２（図３参照）は、電動パワーステアリングシステムやＳＢＷ（Steer　By　Wire）システム等であり、アクチュエータ１２ａ（図３参照）によって操舵部４にトルク（アシストトルク）を付加して操舵力を補って、前輪３Ｆを操舵する。
　また、図２に示すように、車両１（車体２）は、当該車両１の周囲の複数の領域（本実施形態では、車両１の前方、車両１の後方、車両１の車幅方向の左側、車両１の車幅方向の右側、車両１の床下）を撮像可能に設けられた複数（本実施形態では、５つ）の撮像部１６ａ，１６ｂ，１６ｃ，１６ｄ，１６ｅ（以下、撮像部１６ａ，１６ｂ，１６ｃ，１６ｄ，１６ｅを区別する必要が無い場合には、撮像部１６と記載する）を有している。撮像部１６は、ＣＣＤ（Charge　Coupled　Device）やＣＩＳ（CMOS　Image　Sensor）等の撮像素子を有する所謂デジタルカメラである。
　本実施形態では、撮像部１６は、所定のフレームレートで車両１の周囲の領域を撮像し、当該撮像により得られた画像（動画像を構成するフレーム画像）の画像データを出力する。また、本実施形態では、撮像部１６は、広角レンズを有し、水平方向に１４０～２２０°の視野角の範囲を撮像可能である。また、撮像部１６ａ，１６ｂ，１６ｃ，１６ｄは、その光軸が車両１の下方に向けられて設けられている。したがって、撮像部１６ａ，１６ｂ，１６ｃ，１６ｄは、車両１が移動可能な路面と当該路面から上方の領域（外部の環境）を撮像可能である。一方、撮像部１６ｅは、その光軸が車両１の下方に向けられて設けられ、車両１が移動可能な路面を撮像可能である。
　具体的には、撮像部１６ａは、車体２の前側の端部２ｃ（例えば、フロントグリル）に設けられ、車両１の前方の領域を撮像可能である。また、撮像部１６ｂは、車体２の後側の端部２ｅ（例えば、リアトランクのドア２ｈ）に設けられ、車両２の後方の領域を撮像可能である。撮像部１６ｃは、車体２の車幅方向の左側の端部２ｄ（例えば、左側のドアミラー２ｇ）に設けられ、車両２の左側の領域を撮像可能である。撮像部１６ｄは、車体２の車幅方向の右側の端部２ｆ（例えば、右側のドアミラー２ｇ）に設けられ、車両１の右側の領域を撮像可能である。撮像部１６ｅは、車両１の床下に設けられ、車両１が移動可能な路面を撮像可能である。
　次に、図３を用いて、本実施形態にかかる車両１の機能構成について説明する。図３は、第１の実施形態にかかる車両の機能構成の一例を示すブロック図である。
　図３に示すように、本実施形態にかかる車両１は、モニタ装置１１と、操舵システム１２と、アクチュエータ１２ａ、トルクセンサ１２ｂ、ＥＣＵ（Electronic　Control　Unit）１４、障害物センサ１７、ブレーキシステム１８、ブレーキセンサ１８ｂ、舵角センサ１９、アクセルセンサ２０、シフトセンサ２１および車輪速センサ２２を有している。そして、モニタ装置１１と、操舵システム１２と、ＥＣＵ１４と、障害物センサ１７と、ブレーキシステム１８と、アクセルセンサ２０と、シフトセンサ２１と、車輪速センサ２２とは、電気通信回線（以下、車内ネットワーク２３と言う）を介して電気的に接続されている。車内ネットワーク２３は、例えば、ＣＡＮ（Controller　Area　Network）によって構成される。
　本実施形態では、車両１は、２個の加速度センサ２６（２６ａ，２６ｂ）を有している。本実施形態では、車両１は、ＥＳＣ（Electronic　Stability　Control）を搭載した車両であり、加速度センサ２６ａ，２６ｂによる車両１の前後左右方向の加速度の検出結果に基づいて、ＥＳＣを実行する。
　ＥＣＵ１４は、撮像部１６の撮像により得られた画像データに対して画像処理を実行し、当該画像処理を実行した画像データを表示装置８に表示する。また、ＥＣＵ１４は、車内ネットワーク２３を介して、車両１の各部へ制御信号を送信することで、操舵システム１２、ブレーキシステム１８等の各部を制御する。また、ＥＣＵ１４は、車内ネットワーク２３を介して、トルクセンサ１２ｂ、障害物センサ１７、ブレーキセンサ１８ｂ、舵角センサ１９、アクセルセンサ２０、シフトセンサ２１、車輪速センサ２２、加速度センサ２６等の検出結果を取得する。また、ＥＣＵ１４は、操作入力部１０を用いてユーザにより入力された操作情報を取得する。
　具体的には、ＥＣＵ１４は、ＣＰＵ（Central　Processing　Unit）１４ａ、ＲＯＭ（Read　Only　Memory）１４ｂ、ＲＡＭ（Random　Access　Memory）１４ｃ、表示制御部１４ｄ、音声制御部１４ｅ、ＳＳＤ（Solid　State　Drive）１４ｆ等を有している。ＣＰＵ１４ａは、車両１全体を制御する制御部であって、車両１の移動経路の取得処理、物体との干渉の有無の判断処理等の各種処理を実行する。ＣＰＵ１４ａは、ＲＯＭ１４ｂやＳＳＤ１４ｆ等の不揮発性の記憶装置に記憶されたプログラムを読み出し、当該プログラムに従って各種処理を実行する。ＲＡＭ１４ｃは、ＣＰＵ１４ａがプログラムに従って各種処理を実行する際の作業領域として用いられ、ＣＰＵ１４ａにより実行される各種処理に用いるデータを一時的に記憶する。
　表示制御部１４ｄは、表示装置８に表示する画像データ（例えば、撮像部１６の撮像により得られた画像データ）に対する画像処理、表示装置８に対する画像データの表示処理等を実行する。音声制御部１４ｅは、音声出力装置９から音声等の音データを出力する処理等を実行する。ＳＳＤ１４ｆは、各種データを書き換え可能な不揮発性の記憶部であり、ＥＣＵ１４の電源がオフされた場合であっても当該各種データを保持する。
　本実施形態では、ＣＰＵ１４ａ、ＲＯＭ１４ｂおよびＲＡＭ１４ｃは、１つの集積回路に搭載されているものとする。また、ＥＣＵ１４は、車両１全体を制御する制御部としてＣＰＵ１４ａに替えて、ＤＳＰ（Digital　Signal　Processor）等のプロセッサや論理回路を有していても良い。また、本実施形態では、ＣＰＵ１４ａにより実行されるプログラム等を記憶する主記憶装置としてＳＳＤ１４ｆを用いているが、これに限定するものではなく、例えばＨＤＤ（Hard　Disk　Drive）等を主記憶装置として用いても良い。また、本実施形態では、ＥＣＵ１４が主記憶装置としてのＳＳＤ１４ｆまたはＨＤＤを有しているが、これに限定するものではなく、ＥＣＵ１４の外部装置がＳＳＤ１４ｆまたはＨＤＤを有していても良い。
　次に、図４Ａ～図４Ｄおよび図５Ａ～図５Ｄを用いて、本実施形態にかかる車両１による車両周辺監視用画面Ｇ１の表示処理について説明する。図４Ａ～図４Ｄおよび図５Ａ～図５Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。
　本実施形態では、ＣＰＵ１４ａ（制御部の一例）は、操作入力部１０が操作されて、車両周辺監視用画面Ｇ１の表示を指示する操作情報が入力されると、図４Ａに示す車両周辺監視用画面Ｇ１を表示装置８に表示する。車両周辺監視用画面Ｇ１（第１画面の一例）は、図４Ａに示すように、車両１を上から見た俯瞰画像ｇ１（第１画像の一例）と、車両１の周囲で撮像対象となる領域（第１領域の一例）のうち一部の領域（第２領域の一例、本実施形態では、車両１の前方の領域である前方領域、前方領域より広域の広角領域、車両１の車幅方向の左側および右側の領域であるサイド領域、または車両１の床下の領域である床下領域）を撮像部１６により撮像して得られた撮像画像ｇ２（第２画像の一例）と、車両１の周囲で撮像対象となる領域のうち撮像画像ｇ２を表示する領域を選択するためのＧＵＩ（Graphic　User　Interface）である選択用画像ｇ３と、を含む。
　本実施形態では、俯瞰画像ｇ１は、図４Ａに示すように、車両１を上から見た車両画像ｇ１１と、当該車両１の周囲の領域を上から見た周囲画像ｇ１２と、を含む。ＣＰＵ１４ａは、撮像部１６ａの撮像により得られた画像を、前方領域を上から見た画像に変換（所謂、視点変換）した周囲画像ｇ１２ａを生成する。また、ＣＰＵ１４ａは、撮像部１６ｃ，１６ｄの撮像により得られた２つの画像を、左側領域および右側領域を上から見た画像に変換した周囲画像ｇ１２ｂを生成する。また、ＣＰＵ１４ａは、撮像部１６ｂの撮像により得られた画像を、車両１の後方領域を上から見た画像に変換した周囲画像ｇ１２ｃを生成する。そして、ＣＰＵ１４ａは、周囲画像ｇ１２ａと、周囲画像ｇ１２ｂと、周囲画像ｇ１２ｃとを組み合わせた画像を、周囲画像ｇ１２とする。
　本実施形態では、ＣＰＵ１４ａは、車両周辺監視用画面Ｇ１の表示を指示する操作情報が入力された後、最初に、車両周辺監視用画面Ｇ１に含める撮像画像ｇ２には、図４Ａに示すように、撮像部１６により前方領域を撮像して得られた画像を用いる。
　また、本実施形態では、ＣＰＵ１４ａは、図４Ａに示すように、撮像画像ｇ２を表示する領域として前方領域を選択するための選択用画像ｇ３１、撮像画像ｇ２を表示する領域として広角領域を選択するための選択用画像ｇ３２、撮像画像ｇ２を表示する領域としてサイド領域を選択するための選択用画像ｇ３３、および撮像画像ｇ２を表示する領域として床下領域を選択するための選択用画像ｇ３４を、選択用画像ｇ３として車両周辺監視用画面Ｇ１に含める。本実施形態では、ＣＰＵ１４ａは、選択用画像ｇ３を車両周辺監視用画面Ｇ１に含めているが、少なくとも俯瞰画像ｇ１および撮像画像ｇ２が車両周辺監視用画面Ｇ１に含まれていれば良い。
　ここで、選択用画像ｇ３を用いて撮像画像ｇ２を切り替える動作について説明する。ＣＰＵ１４ａは、操作入力部１０により選択用画像ｇ３に対するタッチ操作が検出されて、当該選択用画像ｇ３を用いてユーザが選択した領域（以下、選択領域と言う。例えば、サイド領域）を示す操作情報が入力されると、車両１の周囲で撮像対象となる領域に含まれる一部でありかつユーザにより選択された選択領域（第３領域の一例、本実施形態では、入力された操作情報が示す領域）を特定する。そして、ＣＰＵ１４ａは、図５Ｂに示すように、選択領域を撮像部１６（例えば、撮像部１６ｃ，１６ｄ）により撮像して得られた画像である切替後画像（第３画像の一例）を、当該切替後画像の一つ前に表示されていた画像である切替前画像（第２画像の一例）に切り替えて撮像画像ｇ２として表示装置８上に表示する。
　ＣＰＵ１４ａは、切替前画像から切替後画像に切り替えられる時点より前に（本実施形態では、切替前画像から切替後画像に切り替わるまでの間）、俯瞰画像ｇ１内に、識別画像ｇ１３（識別情報の一例）を表示する。ここで、識別画像ｇ１３は、ユーザが選択した選択領域を識別する画像である。これにより、切替前画像から切替後画像に切り替るまでの間に、識別画像ｇ１３が表示されることにより、ユーザが、次に表示される画像がいずれの領域であるかを容易に認識することができる。本実施形態では、識別画像ｇ１３は、選択領域に対応する俯瞰画像ｇ１の領域に重畳表示される情報である。これにより、車両１の周囲で撮像対象となる領域のうち、次に表示される画像がいずれの領域であるかをユーザが容易に把握することができる。本実施形態の識別画像ｇ１３は、識別情報に相当する。
　本実施形態では、ＣＰＵ１４ａは、切替前画像から切替後画像に切り替えられる時点より前に、俯瞰画像ｇ１が含む周囲画像ｇ１２のうち選択領域に対応する領域を他の領域と異なる表示態様とする識別画像ｇ１３を、俯瞰画像ｇ１に重畳表示する。ここで、他の領域と異なる表示態様とは、周囲画像ｇ１２のうち選択領域に対応する領域の色を、他の領域と異ならせたり、当該選択領域に対応する領域を点滅させたりすることである。例えば、図４Ｂに示すように、ＣＰＵ１４ａは、選択用画像ｇ３３にタッチ操作が検出されて、サイド領域が選択領域として選択された場合、周囲画像ｇ１２ｂのサイド領域に対応する領域を、他の領域とは異なる表示態様とする識別画像ｇ１３を、俯瞰画像ｇ１に重畳表示する。
　本実施形態では、ＣＰＵ１４ａは、周囲画像ｇ１２のうち選択領域に対応する領域を他の領域と異なる表示態様とする識別画像ｇ１３を俯瞰画像ｇ１に重畳表示させているが、切替前画像から切替後画像に切り替えられる時点よりも前に、俯瞰画像ｇ１内に、識別画像ｇ１３を表示するものであれば、これに限定するものではない。例えば、ＣＰＵ１４ａは、選択領域を表すテキスト（例えば、「前方領域が選択されました。」等）を識別画像ｇ１３として俯瞰画像ｇ１内に表示させても良い。本実施形態では、ＣＰＵ１４ａは、識別画像ｇ１３を俯瞰画像ｇ１に重畳表示させているが、識別画像ｇ１３の表示によって俯瞰画像ｇ１が視認できなくなる印象を与えないために、識別画像ｇ１３を通じて俯瞰画像ｇ１が透けて見える態様で、識別画像ｇ１３を俯瞰画像ｇ１に重畳表示させても良い。
　さらに、ＣＰＵ１４ａは、図４Ｄに示すように、切替前画像から切替後画像に切り替るまでの間に、俯瞰画像ｇ１を車両周辺監視用画面Ｇ１に表示したまま、切替後画像の表示に先立って、切替前画像に代えて黒画像ｇ４を表示する。これにより、切替前画像から切替後画像に切り替わる際に、俯瞰画像ｇ１を常に視認することができかつ撮像画像ｇ２が切り替わったタイミングを視認することができるので、撮像画像ｇ２が切り替わったのか否かをユーザが容易に把握できる。本実施形態では、ＣＰＵ１４ａは、切替後画像の表示に先立って、予め設定された時間、黒画像ｇ４を表示し続けるものとする。これにより、撮像画像ｇ２が切り替わったことをユーザがより容易に把握することができる。
　また、ＣＰＵ１４ａは、図４Ｃに示すように、切替前画像に代えて黒画像ｇ４を表示するまでの間、切替前画像の輝度を徐々に下げても良い。すなわち、ＣＰＵ１４ａは、切替前画像に代えて黒画像ｇ４を表示するまでの間、切替前画像をフェードアウトさせた後に、黒画像ｇ４を表示する。これにより、撮像画像ｇ２が短い時間で切り替わることを防止できるので、撮像画像ｇ２が切り替わったか否かをユーザが容易に把握することができる。
　その後、ＣＰＵ１４ａは、図５Ｂに示すように、黒画像ｇ４の表示を開始してから予め設定された時間が経過すると、切替後画像を撮像画像ｇ２として車両周辺監視用画面Ｇ１に含める。本実施形態では、ＣＰＵ１４ａは、切替後画像を撮像画像ｇ２として車両周辺監視用画面Ｇ１に含めた後（すなわち、切替前画像から切替後画像に切り替えた後）、所定時間、識別画像ｇ１３を表示し続ける。これにより、撮像画像ｇ２が切り替えられた後、識別画像ｇ１３が直ちに非表示になることを防止できるので、撮像画像ｇ２が切り替えられた後、ユーザが選択した領域を撮像して得られた撮像画像ｇ２が表示されたか否かを確認することができる。
　また、ＣＰＵ１４ａは、図５Ａに示すように、黒画像ｇ４に代えて切替後画像を表示するまでの間、切替後画像の輝度を徐々に上げても良い。すなわち、ＣＰＵ１４ａは、黒画像ｇ４に代えて切替後画像を表示するまでの間、切替後画像をフェードインさせて、切替後画像を表示する。これにより、撮像画像ｇ２が短い時間で切り替わることを防止できるので、撮像画像ｇ２が切り替わったか否かをユーザが容易に把握することができる。
　そして、ＣＰＵ１４ａは、図５Ｃに示すように、切替後画像の表示を開始してから所定時間経過後、識別画像ｇ１３を非表示とする。また、ＣＰＵ１４ａは、識別画像ｇ１３を非表示とした後、操作入力部１０によって撮像画像ｇ２に対するタッチ操作が検出された場合に、現在、撮像画像ｇ２を表示している選択領域を識別する画像を表示（すなわち、識別画像ｇ１３再表示）させても良い。これにより、識別画像ｇ１３が非表示となった後も、撮像画像ｇ２にタッチ操作することによって、いずれの領域を撮像して得られた撮像画像ｇ２が表示されているかを容易に特定することができる。さらに、ＣＰＵ１４ａは、図５Ｄに示すように、俯瞰画像ｇ１および選択用画像ｇ３を非表示としかつ切替後画像を車両周辺監視用画面Ｇ１に全画面表示させることによって、切替後画像をより確認し易くすることも可能である。本実施形態では、ＣＰＵ１４ａは、切替前画像が切替後画像に切り替わった後、所定時間経過後に識別画像ｇ１３を非表示に変更しているが、これに限定するものではなく、例えば、切替前画像が切替後画像に切り替えられたと同時に、識別画像ｇ１３を非表示に変更しても良い。
　次に、図６Ａ～図６Ｄおよび図７Ａ～図７Ｄを用いて、車両周辺監視用画面Ｇ１に含める撮像画像ｇ２を、前方領域を撮像して得られた画像（切替前画像）から、広角領域を撮像して得られた画像（切替後画像）に切り替えて表示する処理について説明する。図６Ａ～図６Ｄおよび図７Ａ～図７Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。
　まず、ＣＰＵ１４ａは、図６Ａに示すように、撮像部１６ａの撮像により得られた撮像画像ｇ２を含む車両周辺監視用画面Ｇ１を表示装置８に表示しているものとする。その後、ＣＰＵ１４ａは、図６Ｂに示すように、選択用画像ｇ３２に対するタッチ操作が検出されて、広角領域が選択領域として選択された場合、周囲画像ｇ１２のうち広角領域に対応する領域を、他の領域とは異なる表示態様とする識別画像ｇ１３を、車両周辺監視用画面Ｇ１に重畳表示する。
　その後、ＣＰＵ１４ａは、図６Ｄに示すように、撮像画像ｇ２が切り替わる前に、俯瞰画像ｇ１を車両周辺監視用画面Ｇ１に表示したまま、予め設定された時間、切替前画像に替えて黒画像ｇ４を表示する。また、ＣＰＵ１４ａは、図６Ｃに示すように、切替前画像に代えて黒画像ｇ４を表示するまでの間、切替前画像の輝度を徐々に下げても良い。
　次に、ＣＰＵ１４ａは、図７Ｂに示すように、黒画像ｇ４の表示を開始してから予め設定された時間が経過すると、広角領域を撮像部１６ａにより撮像して得られた画像（切替後画像）を撮像画像ｇ２として車両周辺監視用画面Ｇ１に含める。また、ＣＰＵ１４ａは、図７Ａに示すように、黒画像ｇ４に代えて切替後画像を表示するまでの間、切替後画像の輝度を徐々に上げても良い。
　そして、ＣＰＵ１４ａは、図７Ｃに示すように、切替後画像の表示を開始してから所定時間経過後、識別画像ｇ１３を非表示とする。その際、ＣＰＵ１４ａは、図７Ｄに示すように、俯瞰画像ｇ１および選択用画像ｇ３を非表示としかつ切替後画像を車両周辺監視用画面Ｇ１に全画面表示させることによって、切替後画像をより確認し易くすることも可能である。
　次に、図８Ａ～図８Ｄおよび図９Ａ～図９Ｄを用いて、車両周辺監視用画面Ｇ１に含める撮像画像ｇ２を、前方領域を撮像して得られた画像（切替前画像）から、床下領域を撮像して得られた画像（切替後画像）に切り替えて表示する処理について説明する。図８Ａ～図８Ｄおよび図９Ａ～図９Ｄは、第１の実施形態にかかる車両において表示される車両周辺監視用画面内の撮像画像の切替処理の一例を説明するための図である。
　まず、ＣＰＵ１４ａは、図８Ａに示すように、撮像部１６ａの撮像により得られた撮像画像ｇ２を含む車両周辺監視用画面Ｇ１を表示装置８に表示しているものとする。その後、ＣＰＵ１４ａは、図８Ｂに示すように、選択用画像ｇ３４に対するタッチ操作が検出されて、床下領域が選択領域として選択された場合、周囲画像ｇ１２のうち広角領域に対応する領域を、他の領域とは異なる表示態様とする識別画像ｇ１３を、車両周辺監視用画面Ｇ１に重畳表示する。
　その後、ＣＰＵ１４ａは、図８Ｄに示すように、撮像画像ｇ２が切り替わる前に、俯瞰画像ｇ１を車両周辺監視用画面Ｇ１に表示したまま、予め設定された時間、切替前画像に替えて黒画像ｇ４を表示する。また、ＣＰＵ１４ａは、図８Ｃに示すように、切替前画像に代えて黒画像ｇ４を表示するまでの間、切替前画像の輝度を徐々に下げても良い。
　次に、ＣＰＵ１４ａは、図９Ｂに示すように、黒画像ｇ４の表示を開始してから予め設定された時間が経過すると、撮像部１６ｅの撮像により得られた画像（切替後画像）を撮像画像ｇ２として車両周辺監視用画面Ｇ１に含める。また、ＣＰＵ１４ａは、図９Ａに示すように、黒画像ｇ４に代えて切替後画像を表示するまでの間、切替後画像の輝度を徐々に上げる。本実施形態では、撮像部１６ｅの撮像により得られた画像を、床下領域を撮像して得られた画像として表示しているが、これに限定するものではなく、例えば、撮像部１６ａにより前方領域を撮像して得られた画像を記憶しておき、当該記憶された画像を、床下領域を上からリアルタイムで見た画像に視点変換して表示しても良い。これにより、床下を直接撮像して得られた画像に比べ、撮像部１６ａにより車両１の前方を撮像して得られた画像によれば、車両１のタイヤで隠されない広域な床下領域の路面状況を表示することができる。さらに、図９Ａ～図９Ｄの撮像画像ｇ２に示すように、車両１のタイヤおよび車両１の外部を示す指標ｇ２１を重畳表示することにより、ユーザは、車両１の床下領域のうちどの領域の画像が表示されたかを容易に把握することができる。
　そして、ＣＰＵ１４ａは、図９Ｃに示すように、切替後画像の表示を開始してから所定時間経過後、識別画像ｇ１３を非表示とする。その際、ＣＰＵ１４ａは、図９Ｄに示すように、俯瞰画像ｇ１および選択用画像ｇ３を非表示としかつ切替後画像を車両周辺監視用画面Ｇ１に全画面表示させることによって、切替後画像をより確認し易くすることも可能である。
　このように、第１の実施形態の車両１によれば、切替前画像から切替後画像に切り替るまでの間に、識別画像ｇ１３が表示されることにより、ユーザが、次に表示される画像がいずれの領域であるかを容易に認識することができる。
（第２の実施形態）
　本実施形態は、車両周辺監視用画面が含む車両画像を、選択領域を選択するための選択用画像として用いる例である。以下の説明では、第１の実施形態と同様の箇所については説明を省略する。
　図１０Ａ～図１０Ｅ、図１１Ａ～図１１Ｅ、および図１２Ａ～図１２Ｃは、第２の実施形態にかかる車両において表示される車両周辺監視用画面の一例を説明するための図である。本実施形態では、ＣＰＵ１４ａは、図１０Ａに示すように、俯瞰画像ｇ１および撮像画像ｇ２に加えて、当該車両画像ｇ１１を用いて選択領域を選択可能である旨のメッセージＭ１（例えば、「車両アイコンを押下すると、表示エリアを選択できます」）を含む車両周辺監視用画面Ｇ１を表示装置８に表示する。
　そして、ＣＰＵ１４ａは、図１０Ｂに示すように、操作入力部１０によって車両画像ｇ１１に対するタッチ操作が検出されると、車両画像ｇ１１の表示態様を所定の表示態様（例えば、点滅状態、ハイライト表示）に変更する。さらに、ＣＰＵ１４ａは、操作入力部１０によって車両画像ｇ１１に対するタッチ操作が検出される度に、選択領域として選択可能な複数の候補領域（本実施形態では、前方領域、広角領域、サイド領域、および床下領域）それぞれに対応する複数の候補領域画像ｇ１６を、予め設定された順番で、切り替えて俯瞰画像ｇ１に表示する。ここで、候補領域画像ｇ１６は、周辺画像ｇ１２のうち候補領域に対応する領域を他の領域と異なる表示態様（例えば、点滅状態、ハイライト表示）とする画像である。また、本実施形態では、ＣＰＵ１４ａは、前方領域に対応する候補領域画像ｇ１６ａ、広角領域に対応する候補領域画像ｇ１６ｂ、サイド領域に対応する候補領域画像ｇ１６ｃ、および床下領域に対応する候補領域画像ｇ１６ｄを、複数の候補領域画像ｇ１６として切り替えて表示する。
　本実施形態では、ＣＰＵ１４ａは、図１０Ａ～図１０Ｅおよび図１１Ａ～図１１Ｃに示すように、候補領域画像ｇ１６ａ、候補領域画像ｇ１６ｂ、候補領域画像ｇ１６ｃ、および候補領域画像ｇ１６ｄの順に、切り替えて表示する。本実施形態では、操作入力部１０によって車両画像ｇ１１に対するタッチ操作が検出される度に、複数の候補領域画像ｇ１６を切り替えて表示しているが、これに限定するものではなく、例えば、撮像画像ｇ２に対するタッチ操作が検出される度若しくは操作入力部１０によってスワイプ操作が検出される度に、複数の候補領域画像ｇ１６を切り替えて表示しても良い。若しくは、ＣＰＵ１４ａは、操作入力部１０によって検出されたスワイプ操作の方向に応じて、複数の候補領域画像ｇ１６のうち表示する候補領域画像ｇ１６を切り替えても良い。また、本実施形態では、操作入力部１０の一例であるタッチパネルにより検出されるタッチ操作に応じて、複数の候補領域画像ｇ１６を切り替えて表示しているが、例えば、ダッシュボードやインパネ付近やステアリング等に設置されたハードウェアスイッチのサイクリック操作に応じて、複数の候補領域画像ｇ１６を切り替えて表示しても良い。
　その後、図１１Ｄに示すように、操作入力部１０によって候補領域画像ｇ１６（例えば、候補領域画像ｇ１６ｃ）に対するタッチ操作が検出されると、ＣＰＵ１４ａは、当該タッチ操作が検出された候補領域画像ｇ１６に対応する候補選択領域（例えば、サイド領域）が選択領域として選択されたと判断する。若しくは、操作入力部１０によって車両画像ｇ１１に対する長押しが検出されると、ＣＰＵ１４ａは、最後に表示された候補領域画像ｇ１６に対応する候補選択領域が選択領域として選択されたと判断しても良い。そして、ＣＰＵ１４ａは、図１１Ｅに示すように、第１の実施形態と同様にして、選択領域を撮像して得られた画像（切替後画像）を撮像画像ｇ２として車両周辺監視用画面Ｇ１に含める。また、ＣＰＵ１４ａは、図１１Ｅに示すように、第１の実施形態と同様にして、切替前画像から切替後画像に切り替えられる時点より前に、俯瞰画像ｇ１内に、識別画像ｇ１３を重畳表示する。
　一方、図１２Ａおよび図１２Ｂに示すように、複数の候補領域画像ｇ１６が切り替えて表示されている途中で、選択領域の選択の中止を指示するための中止ボタンｇ１５に対するタッチ操作が操作入力部１０によって検出されると、ＣＰＵ１４ａは、図１２Ｃに示すように、車両画像ｇ１１の表示態様を元の表示態様に戻し、選択領域を選択できない状態とする。
　このように、第２の実施形態にかかる車両１によれば、俯瞰画像ｇ１が含む車両画像ｇ１１をタッチ操作することによって、複数の候補領域画像ｇ１６を切り替えて表示させ、かつ候補領域画像ｇ１６をタッチ操作することで選択領域を選択することができるので、選択領域を選択する際の操作を直感的に行うことができる。
　以上説明したとおり、第１，２の実施形態によれば、切替前画像から切替後画像に切り替るまでの間に、識別画像ｇ１３が表示されることにより、ユーザが、次に表示される画像がいずれの領域であるかを容易に認識することができる。
　本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、請求の範囲に記載された発明とその均等の範囲に含まれる。

Claims (5)

  1. 　表示部と、
    　車両を上から見た第１画像と、車両の周囲で撮像対象となる第１領域のうち一部の第２領域を撮像して得られた第２画像とを含む第１画面を前記表示部に表示し、前記第２画像から、前記第１領域に含まれる一部の領域として選択されかつ前記第２領域とは異なる第３領域を撮像して得られた第３画像へ切り替えて前記表示部上に表示し、前記第２画像が前記第３画像に切り替えられる時点よりも前に、前記第１画像内に、前記第３領域を識別する識別情報を表示する制御部と、
    　を備えた画像表示制御装置。
  2. 　前記制御部は、前記第２画像から前記第３画像に切り替るまでの間に、前記第１画像を前記第１画面に表示したまま、前記第３画像に先立って、前記第２画像に代えて黒画像を表示する請求項１に記載の画像表示制御装置。
  3. 　前記制御部は、前記黒画像が表示されるまで、前記第２画像の輝度を徐々に下げ、前記黒画像が表示された後、前記第３画像の輝度を徐々に上げる請求項２に記載の画像表示制御装置。
  4. 　前記識別情報は、前記第３領域に対応する前記第１画像の領域に重畳表示される情報である請求項１から３のいずれか一に記載の画像表示制御装置。
  5. 　前記制御部は、前記第２画像が前記第３画像に切り替えられたと同時に、または前記第２画像が前記第３画像に切り替わった後、所定時間経過後に前記識別情報を非表示に変更する請求項１から４のいずれか一に記載の画像表示制御装置。
PCT/JP2016/068731 2015-06-29 2016-06-23 画像表示制御装置 WO2017002708A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017526314A JP6555348B2 (ja) 2015-06-29 2016-06-23 画像表示制御装置
EP16817816.8A EP3316574A4 (en) 2015-06-29 2016-06-23 Image display control device
US15/738,681 US10484651B2 (en) 2015-06-29 2016-06-23 Image display control device
CN201680037469.XA CN107852481B (zh) 2015-06-29 2016-06-23 图像显示控制装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015130276 2015-06-29
JP2015-130276 2015-06-29

Publications (1)

Publication Number Publication Date
WO2017002708A1 true WO2017002708A1 (ja) 2017-01-05

Family

ID=57608404

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/068731 WO2017002708A1 (ja) 2015-06-29 2016-06-23 画像表示制御装置

Country Status (5)

Country Link
US (1) US10484651B2 (ja)
EP (1) EP3316574A4 (ja)
JP (1) JP6555348B2 (ja)
CN (1) CN107852481B (ja)
WO (1) WO2017002708A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021106434A1 (ja) * 2019-11-25 2021-06-03

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3264250B1 (de) * 2016-06-27 2020-12-09 Volkswagen Aktiengesellschaft Verfahren und system zum auswählen eines betriebsmodus für ein fahrzeug
JP6607272B2 (ja) * 2018-03-02 2019-11-20 株式会社Ｊｖｃケンウッド 車両用記録装置、車両用記録方法及びプログラム
CN110248147B (zh) 2018-09-25 2022-08-23 浙江大华技术股份有限公司 一种图像显示方法及装置
USD1036453S1 (en) * 2020-08-27 2024-07-23 Mobileye Vision Technologies Ltd. Display screen with graphical user interface
JP7491194B2 (ja) * 2020-11-23 2024-05-28 株式会社デンソー 周辺画像生成装置、表示制御方法
DE102021201014A1 (de) 2021-02-04 2022-08-04 Zf Friedrichshafen Ag Rundumsicht-Darstellung mit einer Fahrzeugansicht
JP2022125859A (ja) 2021-02-17 2022-08-29 株式会社デンソー 周辺画像表示装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005150938A (ja) * 2003-11-12 2005-06-09 Nissan Motor Co Ltd 車両周辺モニタシステムおよび車両周辺モニタ方法
JP2005170285A (ja) * 2003-12-12 2005-06-30 Ichikoh Ind Ltd 車両用映像表示装置
JP2007210451A (ja) * 2006-02-09 2007-08-23 Nissan Motor Co Ltd 車両用表示装置
JP2008021234A (ja) * 2006-07-14 2008-01-31 Denso Corp 運転支援画像表示システム及び車載装置
JP2008024138A (ja) * 2006-07-20 2008-02-07 Denso Corp 画像表示装置およびプログラム
JP2010147516A (ja) * 2008-12-16 2010-07-01 Mitsubishi Motors Corp 車両周辺監視装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2007034611A1 (ja) * 2005-09-21 2009-03-19 富士通テン株式会社 表示装置、その検査方法およびその製造方法並びに表示パネルの検査方法および製造方法
JP2008017311A (ja) 2006-07-07 2008-01-24 Nissan Motor Co Ltd 車両用映像表示装置及び車両周囲映像の表示方法
JP2009060404A (ja) 2007-08-31 2009-03-19 Denso Corp 映像処理装置
JP4962788B2 (ja) 2007-11-02 2012-06-27 株式会社デンソー 車両周辺監視装置
JP4973564B2 (ja) * 2008-03-27 2012-07-11 三菱自動車工業株式会社 車両周辺表示装置
JPWO2009141846A1 (ja) * 2008-05-19 2011-09-22 パナソニック株式会社 車両周囲監視装置および車両周囲監視方法
JP5523954B2 (ja) * 2010-06-30 2014-06-18 富士通テン株式会社 画像表示システム
JP2012244600A (ja) * 2011-05-24 2012-12-10 Fujitsu Ten Ltd 画像表示システム、画像処理装置、及び、画像表示方法
WO2014027489A1 (ja) * 2012-08-17 2014-02-20 本田技研工業株式会社 運転支援装置
EP2981077B1 (en) * 2013-03-28 2017-09-27 Aisin Seiki Kabushiki Kaisha Periphery monitoring device and program
CN107089227B (zh) * 2013-10-04 2019-11-19 本田技研工业株式会社 停车辅助装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005150938A (ja) * 2003-11-12 2005-06-09 Nissan Motor Co Ltd 車両周辺モニタシステムおよび車両周辺モニタ方法
JP2005170285A (ja) * 2003-12-12 2005-06-30 Ichikoh Ind Ltd 車両用映像表示装置
JP2007210451A (ja) * 2006-02-09 2007-08-23 Nissan Motor Co Ltd 車両用表示装置
JP2008021234A (ja) * 2006-07-14 2008-01-31 Denso Corp 運転支援画像表示システム及び車載装置
JP2008024138A (ja) * 2006-07-20 2008-02-07 Denso Corp 画像表示装置およびプログラム
JP2010147516A (ja) * 2008-12-16 2010-07-01 Mitsubishi Motors Corp 車両周辺監視装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3316574A4 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021106434A1 (ja) * 2019-11-25 2021-06-03
WO2021106434A1 (ja) * 2019-11-25 2021-06-03 富士フイルム株式会社 映像作成方法
US11689687B2 (en) 2019-11-25 2023-06-27 Fujifilm Corporation Video creation method
JP7345561B2 (ja) 2019-11-25 2023-09-15 富士フイルム株式会社 映像作成方法

Also Published As

Publication number Publication date
EP3316574A1 (en) 2018-05-02
CN107852481B (zh) 2020-07-28
JPWO2017002708A1 (ja) 2018-04-05
JP6555348B2 (ja) 2019-08-07
EP3316574A4 (en) 2018-05-30
US20180192005A1 (en) 2018-07-05
CN107852481A (zh) 2018-03-27
US10484651B2 (en) 2019-11-19

Similar Documents

Publication Publication Date Title
JP6555348B2 (ja) 画像表示制御装置
US9308863B2 (en) Vehicle peripheral observation device
US9950739B2 (en) Vehicle circumference monitoring apparatus
JP5187179B2 (ja) 車両周辺監視装置
JP2014209713A (ja) 周辺監視装置、及びプログラム
JP2018006921A (ja) 周辺監視装置
KR101491169B1 (ko) 차량의 탑재기기 조작 장치 및 그 제어 방법
US20200081608A1 (en) Display control device
JP2016063390A (ja) 画像処理装置、及び画像表示システム
US20200317267A1 (en) Parking assistance device
CN110884426B (zh) 显示控制装置
JP4436392B2 (ja) 映像処理装置
CN110877574A (zh) 显示控制装置
JP2008141622A (ja) 車両周辺情報表示装置
JP5709460B2 (ja) 運転支援システム、運転支援方法および運転支援プログラム
JP2017069834A (ja) 表示制御装置
JP4840332B2 (ja) 遠隔操作装置
JP2020121638A (ja) 表示制御装置
JP4467313B2 (ja) 車両周辺撮像装置
CN114590203A (zh) 周边监视装置
JP2019186754A (ja) 周辺監視装置
JP6610139B2 (ja) 周辺監視装置
JP7159599B2 (ja) 周辺監視装置
JP5284452B2 (ja) 車両表示装置
JP2018056792A (ja) 画像表示制御装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16817816

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017526314

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016817816

Country of ref document: EP