WO2017203970A1 - 車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム - Google Patents

車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム Download PDF

Info

Publication number
WO2017203970A1
WO2017203970A1 PCT/JP2017/017530 JP2017017530W WO2017203970A1 WO 2017203970 A1 WO2017203970 A1 WO 2017203970A1 JP 2017017530 W JP2017017530 W JP 2017017530W WO 2017203970 A1 WO2017203970 A1 WO 2017203970A1
Authority
WO
WIPO (PCT)
Prior art keywords
monitor
abnormality
camera
information processing
vehicle
Prior art date
Application number
PCT/JP2017/017530
Other languages
English (en)
French (fr)
Inventor
英史 大場
知典 阿川
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/300,996 priority Critical patent/US11214269B2/en
Publication of WO2017203970A1 publication Critical patent/WO2017203970A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0205Diagnosing or detecting failures; Failure detection models
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/182Distributing information between displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/90Calibration of instruments, e.g. setting initial or reference parameters; Testing of instruments, e.g. detecting malfunction
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0205Diagnosing or detecting failures; Failure detection models
    • B60W2050/0215Sensor drifts or sensor failures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera

Definitions

  • the present technology relates to an in-vehicle information processing apparatus, an in-vehicle information processing system, an information processing method, and a program that are attached to a vehicle.
  • a rearview mirror and a side mirror are installed in the vehicle.
  • Patent Document 1 is a technique that can deal with a case in which a camera that captures the rear of the vehicle fails, and does not assume a case where an abnormality has occurred in the monitor, and can deal with the case. There is a problem that cannot be done.
  • an object of the present technology is to provide an in-vehicle information processing apparatus, an in-vehicle information processing system, and an information that can be dealt with even if an abnormality occurs in a monitor that displays an image behind the vehicle captured by a camera. It is to provide a processing method and a program.
  • an in-vehicle information processing apparatus includes a control unit.
  • the control unit detects whether there is an abnormality in a first monitor that displays a first image captured by a first camera among a plurality of cameras that capture a predetermined area including the rear of the vehicle.
  • a monitor abnormality is detected, the first image is displayed on a second monitor different from the first monitor from the first mode in which the first image is displayed on the first monitor. Switch to the second mode.
  • the user can surely check the rear and rear sides of the vehicle with the second monitor instead of the first monitor. Therefore, even if an abnormality occurs in the first monitor, the first image can be presented to the user via the second monitor, and the provisional until the first monitor in which the abnormality has occurred is replaced.
  • An alternative means can be provided to the user. Therefore, according to the present technology, it is possible to provide an in-vehicle information processing apparatus that can cope with an abnormality occurring in a monitor that displays an image behind the vehicle captured by a camera.
  • the control unit may further generate monitor abnormality alert information notifying the abnormality of the first monitor.
  • the first image and the monitor abnormality alert information are superimposed and displayed, and it is possible to effectively alert the user that an abnormality has occurred in the first monitor.
  • the control unit Based on the abnormality of the first camera, the control unit notifies the abnormality of the first camera on the first monitor in the first mode, and on the second monitor in the second mode. Camera abnormality alert information notifying the abnormality of the first camera may be further generated.
  • the first image and camera abnormality alert information are superimposed and displayed on the first monitor
  • the first image and camera abnormality alert are displayed on the second monitor. Information is displayed superimposed. Therefore, in both the first mode and the second mode, it is possible to effectively alert the user that an abnormality has occurred in the first camera.
  • the control unit may switch from the first mode to the second mode based on a user input operation. This makes it possible to switch from the first mode to the second mode according to the user's intention.
  • an in-vehicle information processing system includes a plurality of cameras, a plurality of monitors, and a control unit.
  • the plurality of cameras capture an image of a predetermined area including the rear of the vehicle.
  • the plurality of monitors display images captured by the plurality of cameras.
  • the control unit detects whether there is an abnormality in the first monitor that displays the first image captured by the first camera among the plurality of cameras, and detects an abnormality in the first monitor. Then, the first mode in which the first image is displayed on the first monitor is switched to the second mode in which the first image is displayed on a second monitor different from the first monitor.
  • the user can surely confirm the first image on the second monitor instead of the first monitor under the control of the control unit. Therefore, even if an abnormality occurs in the first monitor, the first image can be presented to the user via the second monitor, and the provisional until the first monitor in which the abnormality has occurred is replaced.
  • An alternative means can be provided to the user. Therefore, according to the above-described technology, it is possible to provide an in-vehicle information processing system that can cope with an abnormality occurring in a monitor that displays an image behind the vehicle imaged by a camera.
  • the first camera is First and second input / output systems for imaging a predetermined area including the rear of the vehicle; An input / output abnormality detector for detecting an abnormality in the first input / output system, and a camera output for switching the image input / output system of the first camera from the first input / output system to the second input / output system. And a camera control unit including a switching unit.
  • control unit In the second mode, the control unit is configured to monitor the second monitor in the second mode based on the monitor abnormality alert information informing the abnormality of the first monitor on the second monitor and the abnormality of the first camera.
  • Camera abnormality alert information for notifying the abnormality of the first camera on the two monitors,
  • the plurality of monitors may display the monitor abnormality alert information and the camera abnormality alert information as symbol marks.
  • the plurality of monitors include a first imaging area in which a part of the vehicle is displayed and a second imaging area in which the outside of the vehicle other than the part of the vehicle is displayed, and the second imaging The symbol mark may be displayed in the area.
  • the symbol mark may be a mark that does not include characters. Thereby, it is possible to warn the users of various nationalities of abnormality of the plurality of cameras and the plurality of monitors.
  • a support member that is detachably provided on the vehicle body, supports the first camera and the first monitor, and has a joint connected to the first monitor;
  • the first monitor may be configured to be rotatable about at least one axis around the joint.
  • the user can surely confirm the rear and rear side images captured by the first monitor without depending on the place where the support member is installed.
  • the second monitor may be a room mirror alternative monitor, a side mirror alternative monitor, a navigation monitor, a center console monitor, or a meter panel.
  • an information processing method includes: This includes detecting whether or not there is an abnormality in the first monitor that displays the first image captured by the first camera among a plurality of cameras that capture a predetermined area including the rear of the vehicle.
  • an abnormality is detected in the first monitor, the first mode in which the first image is displayed on the first monitor is different from the first monitor in the second mode. The mode is switched to the second mode displayed on the monitor.
  • a program according to an embodiment of the present technology is provided in an in-vehicle information processing apparatus. Detecting the presence or absence of abnormality of the first monitor that displays the first image captured by the first camera among the plurality of cameras that capture the predetermined area including the rear of the vehicle; When an abnormality of the first monitor is detected, the first image is displayed on the first monitor from the first mode, and the first image is different from the first monitor. And switching to the second mode displayed on the monitor.
  • an in-vehicle information processing apparatus As described above, according to the present technology, an in-vehicle information processing apparatus, an in-vehicle information processing system, an information processing method, and an information processing method that can cope with an abnormality in a monitor that displays an image behind the vehicle captured by a camera.
  • a program can be provided. Note that the above effects are not necessarily limited, and any of the effects shown in this specification or other effects that can be grasped from this specification together with the above effects or instead of the above effects. May be played.
  • FIG. 1 is a schematic diagram illustrating a configuration example of an automobile 100 as an example of a vehicle equipped with an in-vehicle information processing system according to the present embodiment
  • FIG. 2 is a schematic diagram illustrating the interior of the automobile 100
  • FIG. 3 is a functional block diagram showing a configuration example of the in-vehicle information processing system 10. Note that the configurations of the in-vehicle information processing system 10 and the automobile 100 are not limited to the configurations described in the drawings referred to in the following description.
  • the on-vehicle information processing system 10 may be a camera monitor system that replaces a rear-view mirror such as a side mirror or a rearview mirror of the automobile 100, for example.
  • the in-vehicle information processing system 10 includes a plurality of cameras, a plurality of monitors, a control unit 30, and a user input unit 40 as shown in FIGS.
  • the plurality of cameras provided in the automobile 100 includes first and second side cameras 11 and 12 and a back camera 13 as shown in FIG.
  • the first side camera 11 is provided on the driver's seat side of the automobile 100 and is electrically connected to the control unit 30 by wire or wirelessly.
  • the first side camera 11 is configured to be able to image the rear and rear sides of the automobile 100.
  • FIG. 4 is a schematic view of the outside of the car 100 viewed from the driver's seat side.
  • the first side camera 11 according to the present embodiment is supported by a support member 130 that protrudes from the front door 110 on the driver's seat side of the automobile 100 to the outside of the vehicle.
  • the support member 130 supports the frame 140 that protrudes rearward from the support member 130 and the first side camera 11.
  • the 1st side camera 11 becomes a structure enclosed by the frame 140, as shown in FIG. Thereby, it is suppressed that a raindrop, a foreign material, etc. adhere to the lens of the 1st side camera 11.
  • FIG. The first side camera 11 may be provided directly on the side mirror when the automobile 100 has a side mirror.
  • the second side camera 12 typically has the same configuration as the first side camera 11 described above, except that it is provided on the passenger seat side as shown in FIG.
  • the second side camera 12 may be the same type of camera as the first side camera 11 or may be a different type of camera.
  • the back camera 13 is provided in the cabin cabin or the rear bumper in the vicinity of the back door 120, the roof portion, the high mount brake lamp, and the rear window wiper of the automobile 100. Or it is electrically connected by radio. Further, the back camera 13 is configured to be able to image the rear side of the automobile 100.
  • the back camera 13 may be the same type of camera as the first and second side cameras 11 and 12, or may be a different type of camera.
  • the 1st and 2nd side cameras 11 and 12 of FIG. 1, and the back camera 13 are described larger than an actual thing for convenience.
  • the plurality of monitors provided in the automobile 100 include a first side mirror alternative monitor 21, a second side mirror alternative monitor 22, a room mirror alternative monitor 23, and a navigation monitor 24. And a center console monitor 25 and a meter panel 26. These monitors are electrically connected to the control unit 30 by wire or wirelessly, and are configured to be able to display an image received from the control unit 30. Each of the plurality of monitors may be configured to be detachable from the vehicle body.
  • the first side mirror alternative monitor 21 is a display device that is disposed near the front door 110 on the driver's seat side where the first side camera 11 is provided, and uses, for example, liquid crystal or organic EL (Electroluminescence).
  • the first side mirror alternative monitor 21 is configured to be able to receive images captured by the plurality of cameras 11, 12, and 13 from the control unit 30 and display the received images. Furthermore, the first side mirror alternative monitor 21 is configured to display an image obtained by performing image processing on the image, various function buttons, and the like.
  • the first side mirror alternative monitor 21 preferentially receives an image output from the first side camera 11 among the plurality of cameras 11, 12, and 13 under the control of the control unit 30.
  • the first side mirror replacement monitor 21 has a function of substituting a side mirror that mainly captures the rear and rear sides of the automobile 100 on the driver's seat side.
  • the second side mirror alternative monitor 22 is a display device that is disposed near the front door 110 on the passenger seat side where the second side camera 12 is provided, and uses, for example, liquid crystal or organic EL.
  • the second side mirror alternative monitor 22 is configured to receive images generated by the plurality of cameras 11, 12, and 13 from the control unit 30, and to display the received images. Furthermore, the second side mirror alternative monitor 22 is configured to display an image obtained by performing image processing on the image, various function buttons, and the like.
  • the second side mirror replacement monitor 22 preferentially receives an image generated by the second side camera 12 among the plurality of cameras 11, 12, 13 under the control of the control unit 30.
  • the second side mirror replacement monitor 22 has a function of replacing a side mirror that mainly captures the rear and rear sides of the vehicle 100 on the passenger seat side.
  • the second side mirror replacement monitor 22 may be the same type of monitor as the first side mirror replacement monitor 21 or may be a different type of monitor.
  • the room mirror alternative monitor 23 is typically attached to the windshield or ceiling of the automobile 100 in the vehicle.
  • the room mirror alternative monitor 23 is a display device using, for example, liquid crystal or organic EL, and is configured to receive images generated by the plurality of cameras 11, 12, and 13 from the control unit 30 and display the received images. Has been.
  • the room mirror alternative monitor 23 is also configured to display an image obtained by performing image processing on the image, various function buttons, and the like.
  • the room mirror alternative monitor 23 preferentially receives an image generated by the back camera 13 among the plurality of cameras 11, 12, and 13 under the control of the control unit 30.
  • the room mirror replacement monitor 23 has a function of replacing a room mirror that mainly captures the rear of the automobile 100.
  • the room mirror replacement monitor 23 may be the same type of monitor as the first and second side mirror replacement monitors 21 and 22, or may be a different type of monitor. Further, the room mirror alternative monitor 23 may be configured to arbitrarily switch between the monitor and the mirror.
  • the navigation monitor 24, the center console monitor 25, and the meter panel 26 are electrically connected to the control unit 30, and can receive images generated by the plurality of cameras 11, 12, and 13 from the control unit 30 and display the received images. It is configured.
  • the navigation monitor 24 is typically a car navigation device and displays map information, navigation information, and the like.
  • the center console monitor 25 is a monitor attached to the center console of the automobile 100, and is an integrated control panel that controls the temperature of the air conditioner, the volume of the audio, and the like.
  • the meter panel 26 is a panel that mainly displays speed information of the automobile 100.
  • the meter panel 26 may be configured to be detachable from the automobile 100.
  • the control unit 30 is typically an ECU (Electronic Control Unit) mounted on the automobile 100 and receives images output from the plurality of cameras 11, 12, and 13.
  • a plurality of monitors 21, 22 and 23, a navigation monitor 24, a center console monitor 25, and a meter panel 26 can be output.
  • the control unit 30 corresponds to the in-vehicle information processing apparatus according to this embodiment, and includes hardware necessary for a computer such as a CPU (Central Processing Unit), a RAM (Random Access Memory), and a ROM (Read Only Memory). .
  • the information processing method according to the present technology is executed when the CPU loads a program according to the present technology recorded in advance in the ROM into the RAM and executes the program.
  • the control unit 30 includes a monitor abnormality detection unit 31, a monitor output switching unit 32, and a monitor abnormality alert information generation unit 33, as shown in FIG.
  • the control unit 30 executes the above-described program recorded in the ROM to realize functions as the monitor abnormality detection unit 31, the monitor output switching unit 32, and the monitor abnormality alert information generation unit 33, and is mounted on the vehicle.
  • the control processing of the entire information processing system 10 and processing such as mode switching described later are executed.
  • the monitor abnormality detection unit 31 is based on, for example, current value abnormality of the plurality of monitors 21, 22, and 23, and the abnormality of these monitors (color tone failure, lightness failure, setting failure (uncalibrated), image not displayed, etc.) It can be configured to detect the presence or absence of Alternatively, it is possible to simply detect an external operation by a driver manually. That is, the detection of the presence / absence of abnormality of the plurality of monitors 21, 22, and 23 is not necessarily limited to automatic detection, and may be detected by an instruction operation associated with the driver recognizing a failure.
  • the monitor output switching unit 32 is configured to be able to switch the image output system in the in-vehicle information processing system 10 based on the detection result of the monitor abnormality detection unit 31.
  • the monitor output switching unit 32 can also switch the output system based on a user input operation.
  • the monitor abnormality alert information generation unit 33 Based on the detection result of the monitor abnormality detection unit 31, the monitor abnormality alert information generation unit 33 generates monitor abnormality alert information notifying that an abnormality has occurred in any one of the monitors 21, 22, and 23. To do.
  • the monitor abnormality alert information generation unit 33 is configured to be able to output the generated monitor abnormality alert information to the navigation monitor 24, the center console monitor 25, and the meter panel 26.
  • the user input unit 40 is electrically connected to the control unit 30 and includes various buttons and a touch panel displayed on the display screens of the plurality of monitors 21, 22, and 23. As a result, the user operates the user input unit 40 to change the output system of the above-described in-vehicle information processing system 10 or to perform desired processing such as designation of the viewing angle range of the plurality of cameras 11, 12, 13. Can be executed.
  • the in-vehicle information processing system 10 has the above-described configuration.
  • FIG. 5 is a flowchart illustrating an example of an information processing method of the control unit 30.
  • the control unit 30 performs control to switch from “normal mode M1” in which images are normally displayed on the plurality of monitors 21, 22, 23 to “abnormality detection mode M2” in which the output system is different from the normal mode M1. I do.
  • an information processing method of the control unit 30 will be described with reference to FIG.
  • control unit 30 acquires control information (images and the like) from the plurality of cameras 11, 12, and 13 (St101).
  • the monitor abnormality detection unit 31 detects the presence or absence of abnormality of the plurality of monitors 21, 22, and 23 (St102).
  • the control unit 30 outputs the acquired images to the plurality of monitors 21, 22, and 23. Then, an image is displayed (St103).
  • the control unit 30 in the normal mode M1 outputs the images acquired from the plurality of cameras 11, 12, and 13 to the plurality of monitors 21, 22, and 23 corresponding to the plurality of cameras 11, 12, and 13, respectively. .
  • control unit 30 in the normal mode M1 transfers the image acquired from the first side camera 11 to the first side mirror alternative monitor 21 and the image acquired from the second side camera 12 to the second side mirror alternative monitor 22.
  • the image acquired from the back camera 13 is output to the room mirror alternative monitor 23.
  • the control unit 30 acquires control information (images and the like) from the plurality of cameras 11, 12, and 13 (St101), and the monitor abnormality detection unit 31 includes a plurality of monitors 21, 22, and 23. The presence or absence of abnormality is detected (St102).
  • the monitor abnormality alert information generation unit 33 displays the monitor abnormality alert information. Generate (St104).
  • the monitor abnormality detection unit 31 can also detect an abnormality of any one of the plurality of monitors 21, 22, and 23 and determine whether an image can be output to the monitor.
  • the monitor output switching unit 32 displays images acquired from the plurality of cameras 11, 12, and 13 and monitor abnormality alert information on monitors other than the plurality of monitors 21, 22, and 23. Output to.
  • the image is a monitor other than the plurality of monitors 21, 22, and 23 (navigation monitor).
  • the abnormality detection mode M2 displayed on the center console monitor 25 or the meter panel 26) is switched (St105), and an image is displayed at a new output destination (St103).
  • the monitor abnormality alert information and an image acquired from the first side camera 11 corresponding to the first side mirror replacement monitor 21 are displayed.
  • the image is output to the navigation monitor 24, the center console monitor 25, or the meter panel 26, and the image captured by the first side camera 11 and the monitor abnormality alert information are superimposed and displayed on these display devices.
  • the in-vehicle information processing system 10 is any one of the monitors 21, 22, and 23 that replace the rearview mirror of the automobile 100 as described above.
  • an image that is to be displayed by the monitor can be displayed on the monitor 24, 25, or 26 other than the monitor that substitutes for the rear-view mirror.
  • the monitor 24, 25, or 26 other than the monitor that replaces the rear-view mirror is behind the automobile 100. And the rear side can be confirmed reliably.
  • the rear and rear sides of the automobile 100 are communicated to the user via the monitor 24, 25, or 26 other than the monitor that replaces the rearview mirror. It is possible to provide the user with provisional alternative means until the monitor 21, 22, or 23 in which an abnormality has occurred is replaced.
  • the in-vehicle information processing system 10 was scheduled to display the monitors 21, 22, or 23 that substitute for the rearview mirror on the monitors 24, 25, or 26 that originally did not have the function of replacing the rearview mirror. It is possible to superimpose and display an image and monitor abnormality alert information that allows the user to recognize the abnormality of the monitor. Accordingly, it is possible to effectively alert the user that an abnormality has occurred in the monitor, prompt early replacement of the monitor, and suppress a prolonged state in which the abnormality has occurred in the monitor.
  • FIG. 6 is a functional block diagram showing a configuration example of the in-vehicle information processing system 200 according to the present embodiment.
  • the same reference numerals are given to the same configurations as those in the first embodiment, and detailed description thereof is omitted, and illustration of the second side camera 12 and the back camera 13 is omitted.
  • the case where an image is acquired from the first side camera 11 will be described as a representative, but the present invention is not limited to this.
  • the control unit 30 includes a camera abnormality alert information generation unit 34
  • the first side camera 11 includes first and second imaging elements 111 and 114
  • the second embodiment differs from the first embodiment in that it includes second output ICs (Integrated Circuits) 112 and 115 and a camera control unit 117.
  • not only the first side camera 11 but also the second side camera 12 and the back camera 13 can have the same configuration.
  • the first image sensor 111 is an image sensor such as a CCD (Charge Coupled Device) sensor or a CMOS (Complementary Metal Oxide Semiconductor) sensor.
  • the first image sensor 111 is configured to be able to image the rear and rear sides of the automobile 100 at a predetermined frame rate, and outputs the captured image to the first output IC 112.
  • the first image sensor 111 may be a back-illuminated image sensor, or a stacked image sensor in which a pixel portion and a logic portion are stacked.
  • the first output IC 112 is configured to drive the first image sensor 111 and output an image output from the first image sensor 111 to the camera control unit 117.
  • the first image pickup device 111 and the first output IC 112 constitute the first input / output system 113 of the first side camera 11.
  • the second image sensor 114 is an image sensor such as a CCD sensor or a CMOS sensor like the first image sensor 111.
  • the second image sensor 114 is configured to be able to image the rear and rear sides of the automobile 100 at a predetermined frame rate, and outputs the captured image to the second output IC 115.
  • the second output IC 115 is configured to drive the second image sensor 114 and output the image output from the second image sensor 114 to the camera control unit 117.
  • the second image sensor 114 and the second output IC 115 constitute the second input / output system 116 having a function of backing up the first input / output system 113.
  • the camera control unit 117 is a controller of the first side camera 11 and is configured to be able to output images output from the first and second input / output systems 113 and 116 to the control unit 30.
  • the camera control unit 117 includes an input / output abnormality detection unit 118 and a camera output switching unit 119, as shown in FIG.
  • the camera control unit 117 is configured by, for example, a DSP (Digital Signal Processing) and executes an operation program stored in the program area to realize functions as the input / output abnormality detection unit 118 and the camera output switching unit 119.
  • control processing for the entire first side camera 11 and processing such as switching of an input / output system described later are executed.
  • the input / output abnormality detection unit 118 detects the presence or absence of these abnormalities on the basis of abnormalities such as current values of the first and second input / output systems 113 and 116. Specifically, the input / output abnormality detection unit 118 is configured to detect an abnormality in the first input / output system 113 and output the detection result to the camera abnormality alert information generation unit 34 and the camera output switching unit 119. .
  • the input / output abnormality detection unit 118 can detect the presence / absence of an abnormality in the second input / output system 116 and can stop (OFF) the output of an image from the first side camera 11 when there is an abnormality.
  • the camera output switching unit 119 is configured to be able to switch the image input / output system of the first side camera 11 from the first input / output system 113 to the second input / output system 116 based on the detection result of the input / output abnormality detection unit 118. Has been.
  • the camera abnormality alert information generation unit 34 generates camera abnormality alert information that notifies the abnormality of the first side camera 11 based on the detection result of the input / output abnormality detection unit 118.
  • the camera abnormality alert information generation unit 34 is configured to be able to output the generated camera abnormality alert information to the navigation monitor 24, the center console monitor 25, or the meter panel 26.
  • FIG. 7 is a flowchart illustrating an example of an information processing method of the in-vehicle information processing system 200.
  • control unit 30 performs control to switch from the “normal mode M1” to the “abnormality detection mode M2” described in the first embodiment, and in addition to the camera control unit 117. Performs control to switch the input / output system of the first side camera 11.
  • an information processing method of the in-vehicle information processing system 200 will be described with reference to FIG.
  • Normal mode (Control example 1)
  • the camera control unit 117 acquires an image from the first input / output system 113 (St201).
  • the input / output abnormality detection unit 118 detects whether there is an abnormality in the first input / output system 113 (St202).
  • the camera control unit 117 controls the image output from the first input / output system 113. To the unit 30. Thereafter, an image is displayed on the first side mirror alternative monitor 21 through the process described in the first embodiment (NO in St102 ⁇ St103).
  • control examples 2 and 3 in the normal mode M3 of the present embodiment will be described.
  • Control example 2 First, as in Control Example 1, the camera control unit 117 acquires an image from the first input / output system 113 (St201), and the input / output abnormality detection unit 118 detects whether there is an abnormality in the first input / output system 113. (St202).
  • the input / output abnormality detection unit 118 detects an abnormality in the first input / output system 113 (NO in St202)
  • the input / output abnormality detection unit 118 sends the detection result to the camera output switching unit 119 and the camera abnormality alert.
  • the data is output to the information generation unit 34.
  • the camera abnormality alert information generation unit 34 generates camera abnormality alert information (St203), and the camera output switching unit 119 switches from the first input / output system 113 to the second input / output system 116 (St204).
  • the camera control unit 117 acquires an image from the second input / output system 116 instead of the first input / output system 113 (St205).
  • the input / output abnormality detection unit 118 detects the presence / absence of an abnormality in the second input / output system 116 (St206). If no abnormality is detected (YES in St206), it is acquired from the second input / output system 116. The image is output to the control unit 30.
  • the control unit 30 executes the process described in the first embodiment (NO in St102 ⁇ St103).
  • the input / output abnormality detection unit 118 switches the image input / output system of the first side camera 11 from the first input / output system 113 to the second input / output system 116, and the control unit 30 performs the second input / output system.
  • the image acquired from the output system 116 and the camera abnormality alert information are output to the first side mirror alternative monitor 21 (St201 ⁇ St202 NO ⁇ St203 ⁇ St204 ⁇ St205 ⁇ ST206 YES ⁇ St102 NO ⁇ St103).
  • the image output from the second input / output system 116 and the camera abnormality alert information are superimposed and displayed on the first side mirror alternative monitor 21.
  • Control example 3 In this control example 3, after the camera control unit 117 and the control unit 30 execute the above process (NO of St201 ⁇ St202 ⁇ St203 ⁇ St204 ⁇ St205), the input / output abnormality detection unit 118 is connected to the second input / output system 116. Abnormality is detected (NO in St206), and image output of the first side camera 11 is stopped (OFF) (St207). Next, the control unit 30 executes the process described in the first embodiment (NO in St102 ⁇ St103).
  • the input / output abnormality detection unit 118 detects the abnormality of the first and second input / output systems 113 and 116, stops the output of the image of the first side camera 11, and the control unit 30 Only camera abnormality alert information is output to the first side mirror replacement monitor 21 (St201 ⁇ St202 NO ⁇ St203 ⁇ St204 ⁇ St205 ⁇ St206 NO ⁇ St207 ⁇ St102 NO ⁇ St103).
  • Control example 4 In the present control example 4, the camera control unit 117 executes the above-described process (YES in St201 ⁇ St202), and the control unit 30 performs the process described in the first embodiment (YES in St102 ⁇ St104 ⁇ St105 ⁇ St103). Execute.
  • the monitor abnormality detection unit 31 detects an abnormality in the first side mirror alternative monitor 21
  • the monitor output switching unit 32 switches the image output system in the in-vehicle information processing system 200 and performs control.
  • the unit 30 outputs an image acquired from the first input / output system 113 and monitor abnormality alert display information to the navigation monitor 24, the center console monitor 25 or the meter panel 26 (St201 ⁇ YES of St202 ⁇ YES of St102 ⁇ St104 ⁇ St105 ⁇ St103).
  • the center console monitor 25 or the meter panel 26 the image output from the first input / output system 113 and the monitor abnormality alert information are displayed in a superimposed manner.
  • Control example 5 In this control example 5, the camera control unit 117 and the control unit 30 perform the above process (NO of St201 ⁇ St202 ⁇ St203 ⁇ St204 ⁇ St205 ⁇ YES of St206) and the process described in the first embodiment (St102). YES ⁇ St104 ⁇ St105 ⁇ St103).
  • the input / output abnormality detection unit 118 switches the image input / output system of the first side camera 11 from the first input / output system 113 to the second input / output system 116, and the control unit 30 performs the second operation.
  • the image output from the input / output system 116, camera abnormality alert information, and monitor abnormality alert information are output to the navigation monitor 24, the center console monitor 25, or the meter panel 26 (NO of St201 ⁇ St202 ⁇ St203 ⁇ St204 ⁇ St205 ⁇ (YES of St206 ⁇ YES of St102 ⁇ St104 ⁇ St105 ⁇ St103).
  • the image output from the second input / output system 116, the camera abnormality alert information, and the monitor abnormality alert information are superimposed and displayed on the navigation monitor 24, the center console monitor 25, or the meter panel 26.
  • Control example 6 In the present control example 6, the camera control unit 117 and the control unit 30 perform the above steps (NO of St201 ⁇ St202 ⁇ St203 ⁇ St204 ⁇ St205 ⁇ NO of St206 ⁇ St207) and the steps described in the first embodiment ( (YES of St102 ⁇ St104 ⁇ St105 ⁇ St103) is executed.
  • the input / output abnormality detection unit 118 detects the abnormality of the first and second input / output systems 113 and 116, stops the output of the image of the first side camera 11, and the control unit 30
  • the camera abnormality alert information and the monitor abnormality alert information are output to the navigation monitor 24, the center console monitor 25, or the meter panel 26 (St201 ⁇ St202 NO ⁇ St203 ⁇ St204 ⁇ St205 ⁇ St206 NO ⁇ St207 ⁇ St102 YES ⁇ St104 ⁇ St105 ⁇ St103).
  • the camera abnormality alert information and the monitor abnormality alert information are superimposed and displayed on the navigation monitor 24, the center console monitor 25 or the meter panel 26.
  • the in-vehicle information processing system 200 has a configuration in which the first side camera 11 includes a first input / output system 113 and a second input / output system 116 having a function of backing up the first input / output system 113. .
  • the second input / output system 116 can image the rear and rear sides of the vehicle instead of the first input / output system 113. Therefore, it is possible to improve the reliability of the camera when imaging the rear side and the rear side of the vehicle.
  • FIG. 8 is a schematic diagram illustrating an example of an image displayed on the monitor when abnormality occurs in the camera and the monitor according to the present technology.
  • the navigation monitor 24, the center console monitor 25, and the meter panel 26 indicate that the alert information output by the monitor abnormality alert information generation unit 33 and the camera abnormality alert information generation unit 34 is “CALL” as shown in FIG. It is converted into character information such as “DEALLER” or the symbol mark SM and displayed.
  • the monitor displays a first imaging area E ⁇ b> 1 in which the body line of the automobile 100 (a part of the automobile 100) is displayed, and the outside of the vehicle other than a part of the automobile 100.
  • a second imaging area E2 is formed, and character information and symbol marks SM are displayed in the second imaging area E2.
  • the monitors 24, 25, and 26 can also display the character information and the symbol mark SM by appropriately changing the arrangement according to the angle of view (area area) of the second imaging area E2.
  • the alert information is typically displayed whenever the user starts or resumes driving, but may be set not to be displayed.
  • the type of the symbol mark SM is not particularly limited.
  • the symbol mark SM may be a universal mark (a mark that does not include characters) that can accommodate users of various nationalities, or a symbol mark that imitates a wrench or a hammer as shown in FIG. Can do.
  • FIG. 9 is a schematic diagram showing the configuration of the camera monitor system 300 according to the present embodiment.
  • the same components as those in the first embodiment are denoted by the same reference numerals, and detailed description thereof is omitted.
  • a temporary monitor 21a configured to be able to display control information (image, monitor abnormality alert information, camera abnormality alert information, etc.) output from the control unit 30;
  • the first side camera 11 and the first side camera 11 are supported by a common support member, and are different from the above-described embodiment in that they can constitute a pair of camera monitor systems 300.
  • the second side camera 12 and the back camera 13 can also form a system similar to the camera monitor system 300.
  • the camera monitor system 300 is not limited to the configuration shown in FIG.
  • the camera monitor system 300 includes a support member 310 and first and second joint portions 320 and 330.
  • the support member 310 is a spring-fixed (pinch) clip, and includes first and second plate-like members 311 and 312 as shown in FIG.
  • the first plate-like member 311 has first and second main surfaces 311a and 311b, the first main surface 311a is provided with a first joint portion 320, and the end of the second main surface 311b.
  • a first clamping part 315 is provided in the part.
  • the first sandwiching portion 315 includes a first convex portion 314 provided at an end of the first plate-like member 311 and a first concave portion 313 provided adjacent to the first convex portion 314. It is configured.
  • the second plate-shaped member 312 has third and fourth main surfaces 312a and 312b.
  • a second clamping portion 318 is provided at the end of the third main surface 312a, and the fourth main surface.
  • the 2nd joint part 330 is provided in 312b.
  • the second sandwiching portion 318 includes a second convex portion 317 provided at an end portion of the second plate-like member 312 and a second concave portion 316 provided adjacent to the second convex portion 317. It is configured.
  • the camera monitor system 300 has a function of sandwiching an object to be sandwiched between the first convex portion 314 and the second convex portion 317 or the first concave portion 313 and the second concave portion 316.
  • the material which comprises the 1st and 2nd convex parts 314 and 317 is not specifically limited, For example, it can consist of synthetic rubbers of a polybutane diene type, a nitrile type, or a chloroprene type material.
  • the rubber may be coated on the surfaces of the first and second recesses 313 and 316. Thereby, it is suppressed that a damage
  • the support member 310 is not limited to the pinch type clip as shown in FIG. 9, and is configured to be clamped and fixed with, for example, a leaf spring type clip or the like, and further with a screw or the like. It may be.
  • the first joint unit 320 includes a socket 321 and a first relay member 322.
  • the first joint part 320 according to this embodiment is a so-called free pan head of a pivot type.
  • the socket 321 includes a substantially spherical accommodating portion 321a and a first tightening knob 321b through which the socket 321 is inserted.
  • the first relay member 322 has one end connected to a stay S fixed to the back surface (surface opposite to the image display surface) of the temporary monitor 21a with screws or the like (not shown).
  • a spherical member 322a is provided at the other end.
  • the spherical member 322a is accommodated in the accommodating portion 321a of the socket 321 so as to be detachable with a predetermined gap.
  • the temporary monitor 21a can be rotated about the spherical member 322a at least around the Y axis via the stay S and the first relay member 322 (see FIG. 10).
  • the spherical member 322a can be fixed in the housing portion 321a by the first tightening knob 321b.
  • pivot joint refers to a connection between two mechanical elements, and means that the position of the element changes in the normal angular direction with respect to the other element.
  • the pivot joint may include, for example, a ball joint, a universal joint (universal joint), or the like.
  • the second joint portion 330 includes a pedestal 331 and a second relay member 332. As shown in the figure, the second relay member 332 has one end connected to the pedestal 331 and the other end connected to the first side camera 11.
  • the second relay member 332 is configured to be rotatable around the D axis perpendicular to the longitudinal direction of the second plate-like member 312.
  • the first side camera 11 can also rotate around the D axis.
  • the pivot joint method may be adopted for the second joint part 330 as in the first joint part 320.
  • FIG. 10 is a schematic diagram showing the operation of the temporary monitor 21 a of the camera monitor system 300.
  • the temporary monitor 21a is configured to be rotatable about at least the Y axis while being supported by the support member 310 via the first joint portion 320, and the spherical member 322a is configured to be a first tightening knob 321b. Is fixed in the accommodating portion 321a.
  • the user can fix the position (angle) of the temporary monitor 21a at a desired position (angle), and the image displayed on the temporary monitor 21a can be displayed regardless of the location where the camera monitor system 300 is installed. Can be confirmed. That is, the camera monitor system 300 can function in the same manner as an input / output system including the first side camera 11 and the monitor 24, 25, or 26 other than the monitor that substitutes for the rearview mirror.
  • the camera monitor system 300 including the temporary monitor 21a and the first side camera 11 can be provided, a new in the “abnormality detection modes M2 and M4” described in the above embodiment is provided. Even if an abnormality occurs in the monitor 24, 25, or 26 as the output destination and, for example, an image is not displayed on the monitor, provisional alternative means until the monitor is replaced with a new monitor is provided to the user. In addition, it is possible to reliably confirm the rear and rear side images captured by the first side camera 11.
  • the camera monitor system 300 is not limited to the structure which consists of the 1st side camera 11 and the temporary monitor 21a, As with the 1st side mirror alternative monitor 21 and the 1st side camera 11, the motor vehicle 100 of FIG. It is also possible to configure a rear camera and a rear camera, and a temporary camera that outputs the captured image to the control unit 30.
  • the first side mirror replacement monitor 21 can constitute a system similar to the camera monitor system 300.
  • the place where the camera monitor system 300 is attached is typically the side window of the automobile 100, but is not particularly limited as long as it can be held between the first and second holding portions 315 and 318. Absent. Further, the temporary monitor 21a and the first side camera 11 are illustrated as an integral unit, but may be a separate type, and may be configured to connect a general-purpose smartphone or the like as a monitor.
  • the in-vehicle information processing systems 10 and 200 are configured to output images output from the plurality of cameras 11, 12, and 13 to the common control unit 30, but are not limited thereto, and the control unit 30 may correspond to each of the plurality of cameras 11, 12, and 13.
  • the monitors 24, 22 and 23 that substitute for the rearview mirror have a new output destination when the monitor 24 other than the monitor that substitutes for the rearview mirror
  • the present invention is not limited to this, and the input / output system of the in-vehicle information processing systems 10 and 200 may be switched between the monitors 21, 22, and 23 that substitute for the rearview mirror.
  • images captured by the plurality of cameras 11, 12, and 13 on the monitors 21, 22, or 23 that are new output destinations are displayed on two screens.
  • the camera abnormality alert information generation unit 34 of the above embodiment not only generates camera abnormality alert information based on the abnormality of the input / output system of the plurality of cameras 11, 12, 13, but also the temporary described in the third embodiment.
  • Camera abnormality alert information may be generated based on camera abnormality (uncalibrated, imaging failure, etc.).
  • the monitors other than the monitor that replaces the rearview mirror in the abnormality detection modes M2 and M4 of the above embodiment are not limited to the navigation monitor 24, the center console monitor 25, and the meter panel 26, but are HUD (Head-Up Display).
  • Rear monitors, flip-down monitors, headrest monitors, sun visor monitors, and the like may be employed as new output destinations in the abnormality detection modes M2 and M4.
  • a monitor installed at a location that is not suitable for visual recognition by the driver during normal use such as a rear monitor, it is desirable that the monitor can be freely attached to and detached from the vehicle.
  • the vehicle to which the in-vehicle information processing systems 10 and 200 and the camera monitor system 300 according to the present technology can be applied is not limited to a passenger car such as the automobile 100 but can be applied to a motorcycle, a large passenger car such as a bus, and the like. It is.
  • An in-vehicle information processing apparatus including a control unit for switching.
  • the control unit further generates monitor abnormality alert information notifying the abnormality of the first monitor.
  • the control unit Based on the abnormality of the first camera, the control unit notifies the abnormality of the first camera on the first monitor in the first mode, and on the second monitor in the second mode.
  • An in-vehicle information processing apparatus that further generates camera abnormality alert information notifying the abnormality of the first camera.
  • the in-vehicle information processing system is First and second input / output systems for imaging a predetermined area including the rear of the vehicle; An input / output abnormality detector for detecting an abnormality in the first input / output system, and a camera output for switching the image input / output system of the first camera from the first input / output system to the second input / output system.
  • An in-vehicle information processing system having a camera control unit including a switching unit.
  • the control unit is configured to monitor the second monitor in the second mode based on the monitor abnormality alert information informing the abnormality of the first monitor on the second monitor and the abnormality of the first camera.
  • Camera abnormality alert information for notifying the abnormality of the first camera on the two monitors.
  • the in-vehicle information processing system, wherein the plurality of monitors display the monitor abnormality alert information and the camera abnormality alert information as symbol marks.
  • the in-vehicle information processing system includes a first imaging area in which a part of the vehicle is displayed and a second imaging area in which the outside of the vehicle other than the part of the vehicle is displayed, and the second imaging An in-vehicle information processing system that displays the symbol mark in the area.
  • the symbol mark is a mark that does not include characters.
  • a support member that is detachably provided on the vehicle body, supports the first camera and the first monitor, and has a joint connected to the first monitor;
  • An in-vehicle information processing system further comprising: a user input unit that causes the control unit to switch from the first mode to the second mode based on a user input operation.
  • the vehicle-mounted information processing system according to any one of (5) to (11) above, The in-vehicle information processing system, wherein the second monitor is any one of a room mirror alternative monitor, a side mirror alternative monitor, a navigation monitor, a center console monitor, or a meter panel.
  • DESCRIPTION OF SYMBOLS 10 Vehicle-mounted information processing apparatus 11 ... 1st side camera 12 ... 2nd side camera 13 ... Back camera 21 ... 1st side mirror alternative monitor 21a ... Temporary monitor 22 ... Second side mirror replacement monitor 23 ... Room mirror replacement monitor 24 ... Navigation monitor 25 ... Center console monitor 26 ... Meter panel 30 ... Control unit 31 ... Monitor abnormality detection unit 32 ... Monitor output switching unit 33 ... Monitor abnormality alert information generation unit 34 ... Camera abnormality alert information generation unit 40 ... User input unit 111..First imaging element 112..First output IC 113 .. First input / output system 114 .. Second image sensor 115 .. Second output IC 116 .. Second input / output system 300 .. Camera monitor system 310 .. Support member 320 .. First joint part 330 .. Second joint part

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本技術の一形態に係る車載用情報処理装置は、制御部を有する。上記制御部は、車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える。

Description

車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム
 本技術は、車両に取り付けられる車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラムに関する。
 従来、自動車等の車両を運転する運転手が車両後方の視認性を確保するための手段として、ルームミラーやサイドミラーが車両に設置されている。
 近年では、このようなルームミラーやサイドミラーを代替する手段として、車両後方の状況をカメラで撮像した画像をモニタに表示するCMS(Camera Monitor System)の普及が期待されている(例えば、特許文献1)。
特開2014-061808号公報
 しかしながら、特許文献1に記載の技術は、車両後方を撮像するカメラが故障したケースに対応可能な技術であり、モニタに異常が発生したケースを想定しておらず、当該ケースに対処することができない課題がある。
 以上のような事情に鑑み、本技術の目的は、カメラにより撮像された車両後方の画像を表示するモニタに異常が発生しても対処可能な車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラムを提供することにある。
 上記目的を達成するため、本技術の一形態に係る車載用情報処理装置は、制御部を有する。
 上記制御部は、車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える。
 この構成とすることにより、ユーザは第1のモニタの替わりに第2のモニタで車両後方及び後側方を確実に確認することができる。よって、第1のモニタに異常が生じたとしても第2のモニタを介して第1の画像をユーザへ提示することができ、異常が発生した第1のモニタが交換されるまでの暫定的な代替手段をユーザに提供することが可能となる。
 従って、本技術によれば、カメラにより撮像された車両後方の画像を表示するモニタに異常が発生しても対処可能な車載用情報処理装置を提供することができる。
 上記制御部は、上記第1のモニタの異常を知らせるモニタ異常アラート情報をさらに生成してもよい。
 これにより、例えば第2のモニタにおいて、第1の画像とモニタ異常アラート情報とが重畳表示され、ユーザに対して第1のモニタに異常が生じていることを効果的に注意喚起することができる。
 上記制御部は、上記第1のカメラの異常に基づき、上記第1のモードでは上記第1のモニタで上記第1のカメラの異常を知らせ、上記第2のモードでは上記第2のモニタで上記第1のカメラの異常を知らせるカメラ異常アラート情報をさらに生成してもよい。
 これにより、上記第1のモードでは、第1のモニタに第1の画像とカメラ異常アラート情報とが重畳表示され、上記第2のモードでは、第2のモニタに第1の画像とカメラ異常アラート情報が重畳表示される。従って、上記第1のモードと上記第2のモードのどちらにおいても、ユーザに対して第1のカメラに異常が生じていることを効果的に注意喚起することができる。
 上記制御部は、ユーザの入力操作に基づき、上記第1のモードから上記第2のモードへ切り替えてもよい。
 これにより、ユーザの意思に応じて上記第1のモードから上記第2のモードへ切り替えることが可能となる。
 上記目的を達成するため、本技術の一形態に係る車載用情報処理システムは、複数のカメラと、複数のモニタと、制御部とを具備する。
 上記複数のカメラは、車両後方を含む所定領域を撮像する。
 上記複数のモニタは、上記複数のカメラで撮像された画像を表示する。
 上記制御部は、上記複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える。
 この構成とすることにより、ユーザは制御部の制御により、第1のモニタの替わりに第2のモニタで第1の画像を確実に確認することができる。よって、第1のモニタに異常が生じたとしても第2のモニタを介して第1の画像をユーザへ提示することができ、異常が発生した第1のモニタが交換されるまでの暫定的な代替手段をユーザに提供することが可能となる。
 従って、上記技術によれば、カメラにより撮像された車両後方の画像を表示するモニタに異常が発生しても対処可能な車載用情報処理システムを提供することできる。
 上記第1のカメラは、
 上記車両後方を含む所定領域を撮像する第1及び第2の入出力系統と、
 上記第1の入出力系統の異常を検出する入出力異常検出部と、上記第1のカメラの画像の入出力系統を上記第1の入出力系統から上記第2の入出力系統へ切り替えるカメラ出力切り替え部とを備えるカメラ制御部と
 を有してもよい。
 これにより、第2入出力系統が第1入出力系統の替わりに車両後方及び後側方を撮像することが可能となる。ゆえに、車両後方及び車両後側方を撮像する上でのカメラシステムの信頼性を向上させることができる。
 上記制御部は、上記第2のモードにおいて上記第2のモニタで上記第1のモニタの異常を知らせるモニタ異常アラート情報と、上記第1のカメラの異常に基づき、上記第2のモードにおいて上記第2のモニタで上記第1のカメラの異常を知らせるカメラ異常アラート情報とを生成し、
 上記複数のモニタは、上記モニタ異常アラート情報及び上記カメラ異常アラート情報をシンボルマークとして表示してもよい。
 この構成とすることにより、第1のカメラと、第1のカメラが撮像した画像を表示する第1のモニタに異常が発生した場合に、第2のモニタで上記画像と、モニタ異常アラート情報と、カメラ異常アラート情報が重畳表示される。これにより、ユーザに対してカメラ及びモニタの異常を同一モニタで同時に注意喚起することが可能となる。
 上記複数のモニタは、上記車両の一部が表示されている第1の撮像領域と、上記車両の一部以外の車外が表示されている第2の撮像領域とを含み、上記第2の撮像領域において上記シンボルマークを表示してもよい。
 これにより、ユーザに対するアラート情報の視認性を向上させることが可能となる。
 上記シンボルマークは、文字を含まないマークであってもよい。
 これにより、様々な国籍のユーザに対して、上記複数のカメラと上記複数のモニタの異常を警告することができる。
 車体に着脱自在に設けられ、上記第1のカメラと上記第1のモニタとを支持し、上記第1のモニタに接続されるジョイントを有する支持部材とをさらに具備し、
 上記第1のモニタは、上記ジョイントを中心に少なくとも一軸周りに回動可能に構成されていてもよい。
 これにより、ユーザは支持部材が設置された場所に左右されずに、第1のモニタが撮像した車両後方及び後側方の画像を確実に確認することができる。
 ユーザの入力操作に基づき、上記制御部に上記第1のモードから上記第2のモードへ切り替えさせるユーザ入力部をさらに具備してもよい。
 これにより、ユーザの意思に応じて上記第1のモードから上記第2のモードへ切り替えることが可能となる。
 上記第2のモニタは、ルームミラー代替モニタ、サイドミラー代替モニタ、ナビゲーションモニタ、センターコンソールモニタ又はメーターパネルのいずれかであってもよい。
 上記目的を達成するため、本技術の一形態に係る情報処理方法は、
 車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出することを含む。
 上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードが、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替えられる。
 上記目的を達成するため、本技術の一形態に係るプログラムは、車載用情報処理装置に、
 車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出するステップと、
 上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替えるステップと
 を実行させる。
 以上のように、本技術によれば、カメラにより撮像された車両後方の画像を表示するモニタに異常が発生しても対処可能な車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラムを提供することができる。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、又は、上記の効果に代えて、本明細書に示されたいずれかの効果又は本明細書から把握され得る他の効果が奏されてもよい。
本技術の一形態に係る車載用情報処理システムを搭載した車両の一例としての自動車の構成例を示す模式図である。 上記自動車の車内を示す模式図である。 上記車載用情報処理システムの構成例を示す機能ブロック図である。 上記自動車の運転席側から車外を見た模式図である。 本技術の一形態に係る車載用情報処理装置の情報処理方法の一例を示すフローチャートである。 本技術の第2の実施形態に係る車載用情報処理システムの構成例を示す機能ブロック図である。 上記実施形態の車載用情報処理装置の情報処理方法の一例を示すフローチャートである。 本技術に係るカメラ及びモニタに異常が発生した場合のモニタに表示された画像の一例を示す模式図である。 本技術の第3の実施形態に係るカメラモニタシステムの構成例を示す模式図である。 上記カメラモニタシステムに係るモニタの動作を示す模式図である。
 以下、本技術に係る実施形態を、図面を参照しながら説明する。
 <第1の実施形態>
 [車載用情報処理システムの概要]
 図1は本実施形態に係る車載用情報処理システムを搭載した車両の一例としての自動車100の構成例を示す模式図であり、図2は自動車100の車内を示す模式図である。また、図3は車載用情報処理システム10の構成例を示す機能ブロック図である。なお、車載用情報処理システム10と自動車100の構成は、以降の説明で参照する図面に記載された構成に限定されない。
 本実施形態に係る車載用情報処理システム10は、例えば、自動車100のサイドミラーやルームミラー等の後写鏡を代替するカメラモニタシステムとすることができる。車載用情報処理システム10は、図1~図3に示すように、複数のカメラと、複数のモニタと、制御部30と、ユーザ入力部40とを有する。
 (複数のカメラ)
 自動車100に設けられている複数のカメラは、図1に示すように、第1及び第2サイドカメラ11,12と、バックカメラ13とを有する。
 第1サイドカメラ11は、図1に示すように、自動車100の運転席側に設けられ、制御部30と有線又は無線により電気的に接続されている。また、第1サイドカメラ11は、自動車100の車両後方及び後側方を撮像可能に構成されている。
 図4は、自動車100の運転席側から車外を見た模式図である。本実施形態に係る第1サイドカメラ11は、同図に示すように、自動車100の運転席側の前方ドア110から車外へ突出している支持部材130に支持されている。
 支持部材130は、支持部材130から車両後方へ突出している枠体140と、第1サイドカメラ11を支持する。ここで、第1サイドカメラ11は、図4に示すように、枠体140に囲繞された構成となる。これにより、第1サイドカメラ11のレンズに雨滴や異物等が付着することが抑制される。なお、第1サイドカメラ11は、自動車100がサイドミラーを有する構成である場合は、サイドミラーに直接設けられてもよい。
 第2サイドカメラ12は、図1に示すように助手席側に設けられていることを除いて、典型的には上述の第1サイドカメラ11と同様の構成を有する。また、第2サイドカメラ12は第1サイドカメラ11と同種のカメラであってもよく、異なるタイプのカメラであってもよい。
 バックカメラ13は、図1に示すように自動車100のバックドア120、ルーフ部、ハイマウントブレーキランプ、後方窓ワイパー付近の範囲にある車室キャビン内やリヤバンパーに設けられ、制御部30と有線又は無線により電気的に接続されている。また、バックカメラ13は、自動車100の車両後方を撮像可能に構成されている。
 また、バックカメラ13は、第1及び第2サイドカメラ11,12と同種のカメラであってもよく、異なるタイプのカメラであってもよい。なお、図1の第1及び第2サイドカメラ11,12と、バックカメラ13は、便宜上実際のものよりも大きく記載されている。
 (複数のモニタ)
 自動車100に設けられている複数のモニタは、図2及び図3に示すように、第1サイドミラー代替モニタ21と、第2サイドミラー代替モニタ22と、ルームミラー代替モニタ23と、ナビゲーションモニタ24と、センターコンソールモニタ25と、メーターパネル26とを含む。これらのモニタは、制御部30と有線又は無線により電気的に接続され、制御部30から受信した画像を表示可能に構成されている。上記複数のモニタは、それぞれ車体に対して着脱可能に構成されていてもよい。
 第1サイドミラー代替モニタ21は、第1サイドカメラ11が設けられている運転席側の前方ドア110近傍の位置に配置され、例えば液晶や有機EL(Electroluminescence)等を用いた表示装置である。
 また、第1サイドミラー代替モニタ21は、複数のカメラ11,12,13が撮像した画像を制御部30から受信し、受信した画像を表示可能に構成されている。さらに、第1サイドミラー代替モニタ21は、当該画像に画像処理を施した画像や、各種機能ボタン等も表示可能に構成されている。
 ここで、本実施形態に係る第1サイドミラー代替モニタ21は、制御部30の制御により、複数のカメラ11,12,13のうち第1サイドカメラ11が出力した画像を優先的に受信する。これにより、第1サイドミラー代替モニタ21は、主に運転席側の自動車100の後方及び後側方を写すサイドミラーを代替する機能を有する。
 第2サイドミラー代替モニタ22は、第2サイドカメラ12が設けられている助手席側の前方ドア110近傍の位置に配置され、例えば、液晶や有機EL等を用いた表示装置である。
 また、第2サイドミラー代替モニタ22は、複数のカメラ11,12,13が生成した画像を制御部30から受信し、受信した画像を表示可能に構成されている。さらに、第2サイドミラー代替モニタ22は、当該画像に画像処理を施した画像や、各種機能ボタン等も表示可能に構成されている。
 ここで、本実施形態に係る第2サイドミラー代替モニタ22は、制御部30の制御により、複数のカメラ11,12,13のうち第2サイドカメラ12が生成した画像を優先的に受信する。これにより、第2サイドミラー代替モニタ22は、主に助手席側の自動車100の後方及び後側方を写すサイドミラーを代替する機能を有する。
 第2サイドミラー代替モニタ22は、第1サイドミラー代替モニタ21と同種のモニタであってもよく、異なるタイプのモニタであってもよい。
 ルームミラー代替モニタ23は、典型的には、車内において自動車100のフロントガラス又は天井に取り付けられる。
 ルームミラー代替モニタ23は、例えば、液晶や有機EL等を用いた表示装置であり、複数のカメラ11,12,13が生成した画像を制御部30から受信し、受信した画像を表示可能に構成されている。また、ルームミラー代替モニタ23は、当該画像に画像処理を施した画像や、各種機能ボタン等も表示可能に構成されている。
 ここで、本実施形態に係るルームミラー代替モニタ23は、制御部30の制御により、複数のカメラ11,12,13のうちバックカメラ13が生成した画像を優先的に受信する。これにより、ルームミラー代替モニタ23は、主に自動車100の後方を写すルームミラーを代替する機能を有する。なお、ルームミラー代替モニタ23は、第1及び第2サイドミラー代替モニタ21,22と同種のモニタであってもよく、異なるタイプのモニタであってもよい。また、ルームミラー代替モニタ23は、モニタとミラーとを任意に切り替える構成であってもよい。
 ナビゲーションモニタ24、センターコンソールモニタ25、メーターパネル26は、制御部30と電気的に接続され、複数のカメラ11,12,13が生成した画像を制御部30から受信し、受信した画像を表示可能に構成されている。
 ナビゲーションモニタ24は、典型的にはカーナビゲーション装置であり、地図情報やナビゲーション情報等を表示する。
 センターコンソールモニタ25は、自動車100のセンターコンソールに取り付けられたモニタであり、エアコンの温度や、オーディオの音量等をコントロールする統合コントロールパネルである。メーターパネル26は、主に自動車100の速度情報を表示するパネルである。なお、メーターパネル26は、自動車100に対して着脱自在に構成されていてもよい。
 (制御部)
 本実施形態に係る制御部30は、典型的には自動車100に搭載されているECU(Electronic Control Unit)であり、複数のカメラ11,12,13から出力された画像を受信し、当該画像を複数のモニタ21,22,23と、ナビゲーションモニタ24、センターコンソールモニタ25、メーターパネル26へ出力可能に構成されている。
 制御部30は、本実施形態に係る車載用情報処理装置に相当し、例えばCPU(Central Processing Unit)、RAM(Random Access Memory)及びROM(Read Only Memory)等のコンピュータに必要なハードウェアを有する。CPUがROMに予め記録されている本技術に係るプログラムをRAMにロードして実行することにより、本技術に係る情報処理方法が実行される。
 制御部30は、図3に示すように、モニタ異常検出部31と、モニタ出力切り替え部32と、モニタ異常アラート情報生成部33とを有する。制御部30は、例えば、ROMに記録されている上記プログラムを実行して、モニタ異常検出部31と、モニタ出力切り替え部32と、モニタ異常アラート情報生成部33としての機能を実現させると共に、車載用情報処理システム10全体の制御処理や、後述するモード切り替え等の処理を実行する。
 モニタ異常検出部31は、複数のモニタ21,22,23の例えば電流値の異常等に基づき、これらのモニタの異常(色調不良、明度不良、設定不良(未較正)、画像が表示されない等)の有無を検出可能に構成される。又は、単純に運転者によるマニュアルでの外部操作を検知する事でもよい。つまり、複数のモニタ21,22,23の異常の有無の検出は、必ずしも自動検出に限定する必要はなく、運転者が故障と認識し、これに伴う指示操作により検出されても良い。
 モニタ出力切り替え部32は、モニタ異常検出部31の検出結果に基づき、車載用情報処理システム10における画像の出力系統を切換え可能に構成されている。また、モニタ出力切り替え部32は、ユーザの入力操作に基づいて、出力系統を切換えることも可能である。
 モニタ異常アラート情報生成部33は、モニタ異常検出部31の検出結果に基づき、複数のモニタ21,22,23のうちいずれかのモニタで異常が発生していることを知らせるモニタ異常アラート情報を生成する。モニタ異常アラート情報生成部33は、生成したモニタ異常アラート情報をナビゲーションモニタ24、センターコンソールモニタ25、メーターパネル26へ出力可能に構成されている。
 (ユーザ入力部)
 ユーザ入力部40は、制御部30と電気的に接続され、各種ボタンや複数のモニタ21,22,23の表示画面上に表示されるタッチパネルなどで構成される。これにより、ユーザは、ユーザ入力部40を操作することにより、上述の車載用情報処理システム10の出力系統の切替えや、複数のカメラ11,12,13の視野角範囲の指定等の所望の処理を実行することが可能となる。
 本技術に係る車載用情報処理システム10は以上のような構成を有する。
 [情報処理方法]
 次に、制御部30の情報処理方法について説明する。図5は制御部30の情報処理方法の一例を示すフローチャートである。
 本実施形態に係る制御部30は、複数のモニタ21,22,23に正常に画像が表示される「通常モードM1」から、通常モードM1と出力系統が異なる「異常検出モードM2」へ切り替える制御を行う。以下、図5を参照しながら制御部30の情報処理方法について説明する。
 (通常モード)
 まず、制御部30は、図5に示すように、複数のカメラ11,12,13からの制御情報(画像等)を取得する(St101)。次に、モニタ異常検出部31が複数のモニタ21,22,23の異常の有無を検出する(St102)。
 続いて、モニタ異常検出部31が複数のモニタ21,22,23の異常を検出しなかった場合に(St102のNO)、制御部30は取得した画像を複数のモニタ21,22,23に出力し、画像が表示される(St103)。ここで、通常モードM1における制御部30は、複数のカメラ11,12,13から取得した画像を、複数のカメラ11,12,13と個々に対応する複数のモニタ21,22,23へ出力する。
 具体的には、通常モードM1の制御部30は、第1サイドカメラ11から取得した画像を第1サイドミラー代替モニタ21へ、第2サイドカメラ12から取得した画像を第2サイドミラー代替モニタ22へ、バックカメラ13から取得した画像をルームミラー代替モニタ23へ出力する。
 (異常検出モード)
 まず制御部30は、通常モードM1と同様に、複数のカメラ11,12,13からの制御情報(画像等)を取得し(St101)、モニタ異常検出部31が複数のモニタ21,22,23の異常の有無を検出する(St102)。
 続いて、モニタ異常検出部31が、複数のモニタ21,22,23のうちいずれかのモニタに異常を検出した場合に(St102のYES)、モニタ異常アラート情報生成部33がモニタ異常アラート情報を生成する(St104)。なお、モニタ異常検出部31は、複数のモニタ21,22,23のうちいずれかのモニタの異常を検出し、当該モニタに画像を出力可能か判定することも可能である。
 次いで、モニタ出力切り替え部32が、モニタ異常検出部31の検出結果に基づき、複数のカメラ11,12,13から取得した画像とモニタ異常アラート情報を、複数のモニタ21,22,23以外のモニタへ出力する。
 これにより、複数のカメラ11,12,13が取得した画像が複数のモニタ21,22,23で表示される通常モードM1から、当該画像が複数のモニタ21,22,23以外のモニタ(ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26)に表示される異常検出モードM2に切り替えられ(St105)、新たな出力先で画像が表示される(St103)。
 具体的には、例えば第1サイドミラー代替モニタ21で異常が発生した場合は、上記モニタ異常アラート情報と、第1サイドミラー代替モニタ21と対応している第1サイドカメラ11から取得した画像がナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26へ出力され、これらの表示装置で第1サイドカメラ11が撮像した画像とモニタ異常アラート情報が重畳表示される。
 [車載用情報処理システムの作用]
 次に、本実施形態に係る車載用情報処理システム10の作用について説明する。
 近年自動車等の車両において車載用のモニタシステムの活用が進められており、車載用ミラーの機能を代替するCMS(カメラモニタシステム)の開発が行われている。
 このような技術が実現されると、車両にミラーを取り付ける必要がなくなることから、車両のスタイリングの自由度が高まることに加えて、車両のエアロダイナミクスが向上することによる燃費の低減や、死角が減少することによる視認性の向上等が実現可能となる。
 一方、このようなCMSを用いることに関して懸念事項がいくつか存在し、特に、サイドミラーやルームミラー等の後写鏡を代替するモニタに異常が発生した場合に対処可能な知見が十分に得られていない問題がある。
 この問題を解消するため、本実施形態に係る車載用情報処理システム10は、上述のとおり、自動車100の後写鏡を代替する複数のモニタ21,22,23のうちいずれかのモニタで何等かの異常が発生した場合に、当該モニタが表示する予定であった画像を、後写鏡を代替するモニタ以外のモニタ24,25又は26に表示させることができる。
 これにより、後写鏡を代替するモニタ21,22又は23に異常が発生し、画像が表示されなくなったとしても、後写鏡を代替するモニタ以外のモニタ24,25又は26で自動車100の後方及び後側方を確実に確認することができる。
 つまり、後写鏡を代替するモニタ21,22又は23に異常が生じたとしても後写鏡を代替するモニタ以外のモニタ24,25又は26を介して自動車100の後方及び後側方をユーザへ提示することができ、異常が発生したモニタ21,22又は23が交換されるまでの暫定的な代替手段をユーザに提供することが可能となる。
 また、車載用情報処理システム10は、本来後写鏡を代替する機能を有していないモニタ24,25又は26に、後写鏡を代替するモニタ21,22又は23が表示する予定であった画像と、当該モニタの異常をユーザに認識させるモニタ異常アラート情報を重畳して表示させることができる。これにより、ユーザにモニタに異常が生じていることを効果的に注意喚起してモニタの早期交換を促し、モニタに異常が生じている状態の長期化を抑制することが可能となる。
 <第2の実施形態>
 [車載用情報処理システムの構成]
 図6は本実施形態に係る車載用情報処理システム200の構成例を示す機能ブロック図である。以下、第1実施形態と同様の構成については同様の符号を付し、その詳細な説明を省略するとともに第2サイドカメラ12及びバックカメラ13の図示を省略する。なお、本実施形態では、第1サイドカメラ11から画像が取得されることを代表して説明するがこれに限定されるものではない。
 本実施形態に係る車載用情報処理システム200は、制御部30がカメラ異常アラート情報生成部34を有する点と、第1サイドカメラ11が第1及び第2撮像素子111,114と、第1及び第2出力用IC(Integrated Circuit)112,115と、カメラ制御部117とを有する点で第1実施形態と異なる。なお、本実施形態では、第1サイドカメラ11だけではなく、第2サイドカメラ12とバックカメラ13も同様の構成とすることができる。
 第1撮像素子111は、例えばCCD(Charge Coupled Device)センサやCMOS(Complementary Metal Oxide Semiconductor)センサ等のイメージセンサである。第1撮像素子111は、所定のフレームレートで自動車100の後方及び後側方を撮像可能に構成され、撮像した画像を第1出力用IC112に出力する。第1撮像素子111は、裏面照射型のイメージセンサであっても良いし、画素部とロジック部が積層されている積層型のイメージセンサであっても良い。
 第1出力用IC112は、第1撮像素子111を駆動し、第1撮像素子111から出力された画像をカメラ制御部117へ出力するように構成されている。
 本実施形態では、第1撮像素子111と第1出力用IC112とで、第1サイドカメラ11の第1入出力系統113が構成されるものとなる。
 第2撮像素子114は、第1撮像素子111と同様にCCDセンサやCMOSセンサ等のイメージセンサである。第2撮像素子114は、所定のフレームレートで自動車100の後方及び後側方を撮像可能に構成され、撮像した画像を第2出力用IC115に出力する。
 第2出力用IC115は、第2撮像素子114を駆動し、第2撮像素子114から出力された画像をカメラ制御部117へ出力するように構成されている。
 本実施形態では、第2撮像素子114と第2出力用IC115とで、第1入出力系統113をバックアップする機能を有する第2入出力系統116が構成されるものとなる。
 本実施形態に係るカメラ制御部117は、第1サイドカメラ11のコントローラであり、第1及び第2入出力系統113,116から出力された画像を制御部30へ出力可能に構成されている。
 カメラ制御部117は、図6に示すように、入出力異常検出部118と、カメラ出力切り替え部119とを有する。カメラ制御部117は、例えばDSP(Digital Signal Processing)で構成され、プログラムエリアに格納されている動作プログラムを実行して、入出力異常検出部118と、カメラ出力切り替え部119としての機能を実現させると共に、第1サイドカメラ11全体の制御処理や、後述する入出力系統の切り替え等の処理を実行する。
 入出力異常検出部118は、第1及び第2入出力系統113,116の電流値等の異常に基づき、これらの異常の有無を検出する。具体的には、入出力異常検出部118は、第1入出力系統113の異常を検出し、検出結果をカメラ異常アラート情報生成部34と、カメラ出力切り替え部119へ出力可能に構成されている。
 また、入出力異常検出部118は、第2入出力系統116の異常の有無を検出し、異常があった場合に、第1サイドカメラ11からの画像の出力を停止(OFF)することもできる。
 カメラ出力切り替え部119は、入出力異常検出部118の検出結果に基づき、第1サイドカメラ11における画像の入出力系統を、第1入出力系統113から第2入出力系統116へ切換え可能に構成されている。
 カメラ異常アラート情報生成部34は、入出力異常検出部118の検出結果に基づき、第1サイドカメラ11の異常を知らせるカメラ異常アラート情報を生成する。また、カメラ異常アラート情報生成部34は、生成したカメラ異常アラート情報をナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26へ出力可能に構成されている。
 [情報処理方法]
 次に、本実施形態に係る車載用情報処理システム200の情報処理方法について説明する。図7は車載用情報処理システム200の情報処理方法の一例を示すフローチャートである。
 本実施形態に係る車載用情報処理システム200は、制御部30が第1実施形態で説明した「通常モードM1」から「異常検出モードM2」へ切り替える制御を行うことに加えて、カメラ制御部117が第1サイドカメラ11の入出力系統を切換える制御を行う。以下、図7を参照しながら車載用情報処理システム200の情報処理方法について説明する。
 (通常モード)
 (制御例1)
 本実施形態の通常モードM3では、まずカメラ制御部117が第1入出力系統113から画像を取得する(St201)。次に、入出力異常検出部118が第1入出力系統113の異常の有無を検出する(St202)。
 続いて、入出力異常検出部118が第1入出力系統113の異常を検出しなかった場合に(St202のYES)、カメラ制御部117は、第1入出力系統113から出力された画像を制御部30へ出力する。以下、上述の第1の実施形態で説明した工程(St102のNO→St103)を経て第1サイドミラー代替モニタ21に画像が表示される。
 次に、本実施形態の通常モードM3における別の制御例(制御例2及び3)について説明する。
 (制御例2)
 まず、制御例1と同様に、カメラ制御部117が第1入出力系統113から画像を取得し、(St201)、入出力異常検出部118が第1入出力系統113の異常の有無を検出する(St202)。
 続いて、入出力異常検出部118が第1入出力系統113の異常を検出した場合に(St202のNO)、入出力異常検出部118は当該検出結果をカメラ出力切り替え部119と、カメラ異常アラート情報生成部34に出力する。これにより、カメラ異常アラート情報生成部34がカメラ異常アラート情報を生成し(St203)、カメラ出力切り替え部119が第1入出力系統113から第2入出力系統116へ切り替える(St204)。
 次いで、カメラ制御部117が、第1入出力系統113の替わりに第2入出力系統116から画像を取得する(St205)。
 続いて、入出力異常検出部118が第2入出力系統116の異常の有無を検出し(St206)、異常を検出しなかった場合に(St206のYES)、第2入出力系統116から取得した画像を制御部30へ出力する。以下、制御部30は、上述の第1の実施形態で説明した工程(St102のNO→St103)を実行する。
 即ち、本制御例2では、入出力異常検出部118が第1サイドカメラ11の画像の入出力系統を第1入出力系統113から第2入出力系統116に切換え、制御部30が第2入出力系統116から取得された画像とカメラ異常アラート情報を第1サイドミラー代替モニタ21に出力する(St201→St202のNO→St203→St204→St205→St206のYES→St102のNO→St103)。
 これにより、第1サイドミラー代替モニタ21に、第2入出力系統116から出力された画像と、カメラ異常アラート情報とが重畳表示される。
 (制御例3)
 本制御例3では、カメラ制御部117及び制御部30により上記工程(St201→St202のNO→St203→St204→St205)が実行された後、入出力異常検出部118が第2入出力系統116の異常を検出し(St206のNO)、第1サイドカメラ11の画像の出力を停止(OFF)する(St207)。次いで、制御部30は、上述の第1の実施形態で説明した工程(St102のNO→St103)を実行する。
 即ち、本制御例3では、入出力異常検出部118が第1及び第2入出力系統113,116の異常を検出して、第1サイドカメラ11の画像の出力を停止し、制御部30が第1サイドミラー代替モニタ21にカメラ異常アラート情報のみを出力する(St201→St202のNO→St203→St204→St205→St206のNO→St207→St102のNO→St103)。
 これにより、第1サイドミラー代替モニタ21にカメラ異常アラート情報のみが表示される。
 (異常検出モード)
 次に、本実施形態に係る異常検出モードM4(制御例4~6)について説明する。
 (制御例4)
 本制御例4では、カメラ制御部117が上記工程(St201→St202のYES)を実行し、制御部30が上述の第1の実施形態で説明した工程(St102のYES→St104→St105→St103)を実行する。
 即ち、本制御例4では、モニタ異常検出部31が第1サイドミラー代替モニタ21の異常を検出したことにより、モニタ出力切り替え部32が車載用情報処理システム200における画像の出力系統を切換え、制御部30が第1入出力系統113から取得された画像と、モニタ異常アラート表示情報をナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26に出力する(St201→St202のYES→St102のYES→St104→St105→St103)。
 これにより、ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26で、第1入出力系統113から出力された画像と、モニタ異常アラート情報とが重畳表示される。
 (制御例5)
 本制御例5では、カメラ制御部117と制御部30が上記工程(St201→St202のNO→St203→St204→St205→St206のYES)と、上述の第1の実施形態で説明した工程(St102のYES→St104→St105→St103)を実行する。
 即ち、本制御例5では、入出力異常検出部118が、第1サイドカメラ11の画像の入出力系統を第1入出力系統113から第2入出力系統116に切換え、制御部30が第2入出力系統116から出力された画像と、カメラ異常アラート情報と、モニタ異常アラート情報をナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26に出力する(St201→St202のNO→St203→St204→St205→St206のYES→St102のYES→St104→St105→St103)。
 これにより、ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26に、第2入出力系統116から出力された画像と、カメラ異常アラート情報と、モニタ異常アラート情報が重畳表示される。
 (制御例6)
 本制御例6では、カメラ制御部117と制御部30が上記工程(St201→St202のNO→St203→St204→St205→St206のNO→St207)と、上述の第1の実施形態で説明した工程(St102のYES→St104→St105→St103)を実行する。
 即ち、本制御例6では、入出力異常検出部118が第1及び第2入出力系統113,116の異常を検出して、第1サイドカメラ11の画像の出力を停止し、制御部30が、ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26にカメラ異常アラート情報と、モニタ異常アラート情報を出力する(St201→St202のNO→St203→St204→St205→St206のNO→St207→St102のYES→St104→St105→St103)。
 これにより、ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26で、カメラ異常アラート情報と、モニタ異常アラート情報が重畳表示される。
 [車載用情報処理システムの作用]
 本実施形態に係る車載用情報処理システム200は、第1サイドカメラ11が第1入出力系統113と、第1入出力系統113をバックアップする機能を有する第2入出力系統116を有する構成である。
 従って、第1入出力系統113で異常が生じても、第2入出力系統116が第1入出力系統113の替わりに車両後方及び後側方を撮像することが可能となる。ゆえに、車両後方及び車両後側方を撮像する上でのカメラの信頼性を向上させることが可能となる。
 また、本実施形態では、後写鏡を代替するモニタ以外のモニタ(ナビゲーションモニタ24、センターコンソールモニタ25又はメーターパネル26)に、第1サイドカメラ11が撮像した画像とモニタ異常アラート情報だけではなく、カメラ異常アラート情報も重畳して表示することができる。
 これにより、ユーザにカメラに異常が生じていることを効果的に注意喚起してカメラの早期交換を促し、モニタだけではなくカメラに異常が生じている状態の長期化を抑制することも可能となる。
 [アラート表示について]
 図8は、本技術に係るカメラ及びモニタに異常が発生した場合のモニタに表示された画像の一例を示す模式図である。
 本技術において、ナビゲーションモニタ24、センターコンソールモニタ25、メーターパネル26は、モニタ異常アラート情報生成部33及びカメラ異常アラート情報生成部34により出力されたアラート情報を、図8に示すように、「CALL DEALLER」等の文字情報や、シンボルマークSMに変換して表示する。
 ここで、上記モニタには、図8に示すように、自動車100のボディーライン(自動車100の一部)が表示される第1撮像領域E1と、自動車100の一部以外の車外が表示される第2撮像領域E2とが形成され、文字情報やシンボルマークSMが第2撮像領域E2にて表示される。
 これにより、ユーザに対するアラート情報の視認性を向上させることが可能となる。また、上記モニタ24,25,26は、第2撮像領域E2の画角(領域面積)に応じて、上記文字情報とシンボルマークSMの配置を適宜変更して表示することもできる。なお、上記アラート情報は典型的にはユーザが運転を開始又は再開した時に常に表示されるが、表示されないように設定されてもよい。
 シンボルマークSMの種類は特に限定されないが、例えば、様々な国籍のユーザに対応可能なユニバーサルマーク(文字を含まないマーク)や、図8に示すようにスパナ又は金槌を模したシンボルマークとすることができる。
 <第3実施形態>
 図9は、本実施形態に係るカメラモニタシステム300の構成を示す模式図である。以下、第1実施形態と同様の構成については同様の符号を付し、その詳細な説明を省略する。
 本実施形態では、第1サイドミラー代替モニタ21と同様に、制御部30から出力された制御情報(画像、モニタ異常アラート情報、カメラ異常アラート情報等)を表示可能に構成された臨時モニタ21aと、第1サイドカメラ11とが共通の支持部材に支持され、これらが一対のカメラモニタシステム300を構成することが可能な点で、上記実施形態と異なる。なお、本実施形態では、第2サイドカメラ12とバックカメラ13もカメラモニタシステム300と同様なシステムを構成することができる。また、カメラモニタシステム300は、図9に示す構成に限定されるものではない。
 [カメラモニタシステムの構成]
 本実施形態に係るカメラモニタシステム300は、図9に示すように、支持部材310と、第1及び第2ジョイント部320,330とを有する。
 (支持部材)
 支持部材310は、スプリング固定式(ピンチ式)のクリップであり、図9に示すように第1及び第2板状部材311,312を有する。
 第1板状部材311は、図9に示すように第1及び第2主面311a,311bを有し、第1主面311aに第1ジョイント部320が設けられ、第2主面311bの端部に第1挟持部315が設けられている。
 第1挟持部315は図9に示すように、第1板状部材311の端部に設けられた第1凸部314と、第1凸部314に隣接して設けられた第1凹部313から構成されている。
 第2板状部材312は図9に示すように、第3及び第4主面312a,312bを有し、第3主面312aの端部に第2挟持部318が設けられ、第4主面312bに第2ジョイント部330が設けられている。
 第2挟持部318は図9に示すように、第2板状部材312の端部に設けられた第2凸部317と、第2凸部317に隣接して設けられた第2凹部316から構成されている。カメラモニタシステム300は、第1凸部314と第2凸部317、あるいは第1凹部313と第2凹部316とで被挟持物を挟持する機能を有する。
 第1及び第2凸部314,317を構成する材料は特に限定されないが、例えばポリブタンジエン系、ニトリル系又はクロロプレン系材料の合成ゴムからなるものとすることができる。また、本実施形態では、第1及び第2凹部313,316の表面に当該ゴムがコーティングされていてもよい。これにより、カメラモニタシステム300が取り付けられた場所に傷等が付けられることが抑制される。
 本実施形態に係る支持部材310は、図9に示すようなピンチ式のクリップに限定されるものではなく、例えば、板バネ式のクリップ等、更にはネジ等でクランプ調整して固定される構成であってもよい。
 (第1ジョイント部)
 第1ジョイント部320は、図9に示すように、ソケット321と第1中継部材322とを有する。本実施形態に係る第1ジョイント部320はピボット式の所謂自由雲台である。ソケット321は同図に示すように、略球状形状の収容部321aと、ソケット321を挿通している第1締め付けつまみ321bとを有する。
 第1中継部材322は図9に示すように、一方の端部が臨時モニタ21aの背面(画像表示面と反対側の面)にネジ等(図示略)により固定されているステーSに接続され、他方の端部に球状部材322aが設けられている。
 球状部材322aは図9に示すようにソケット321の収容部321a内において、所定の隙間を空けて着脱不能となるように収容されている。これにより、臨時モニタ21aはステーSと第1中継部材322を介して球状部材322aを中心に少なくともY軸周りの回動可能となる(図10参照)。また、球状部材322aは第1締め付けつまみ321bにより収容部321a内で固定されることもできる。
 なお、上記「ピボットジョイント」とは、2つの機械的な要素間の結合をいい、その要素が、もう1つの要素に対して、通常角度方向に位置が変わっていくことを意味する。またピボットジョイントには、例えばボールジョイントや、ユニバーサルジョイント(自在継手)等が含まれてもよい。
 (第2ジョイント部)
 第2ジョイント部330は図9に示すように、台座331と、第2中継部材332とを有する。第2中継部材332は同図に示すように、一方の端部が台座331に接続され、他方の端部が第1サイドカメラ11に接続されている。
 ここで、本実施形態に係る第2中継部材332は、図9に示すように、第2板状部材312の長手方向と直交するD軸周りに回動可能に構成されている。これにより、第1サイドカメラ11もD軸周りに回動可能となる。なお、本実施形態では、第2ジョイント部330に、第1ジョイント部320と同様にピボットジョイント方式が採用されてもよい。
 [カメラモニタシステムの作用]
 図10はカメラモニタシステム300の臨時モニタ21aの動作を示す模式図である。臨時モニタ21aは、図9及び図10に示すように、第1ジョイント部320を介して支持部材310に支持されつつ少なくともY軸周り回動可能に構成され、球状部材322aが第1締め付けつまみ321bにより収容部321a内で固定される。
 これにより、ユーザは臨時モニタ21aの位置(角度)を所望の位置(角度)で固定することができ、カメラモニタシステム300が設置された場所に左右されずに、臨時モニタ21aが表示した画像を確認することができる。つまり、カメラモニタシステム300は、第1サイドカメラ11と、後写鏡を代替するモニタ以外のモニタ24,25又は26とからなる入出力系統と同じように機能することが可能となる。
 従って、本実施形態では、臨時モニタ21aと第1サイドカメラ11とで構成されたカメラモニタシステム300が提供可能であることにより、上記実施形態で説明した「異常検出モードM2,M4」における新たな出力先となるモニタ24,25又は26に異常が発生し、例えば当該モニタに画像が表示されなくなったとしても、当該モニタが新しいモニタに交換されるまでの暫定的な代替手段をユーザに提供し、第1サイドカメラ11が撮像した車両後方及び後側方の画像を確実に確認することが可能となる。
 なお、カメラモニタシステム300は、第1サイドカメラ11と臨時モニタ21aとからなる構成に限定されるものではなく、第1サイドミラー代替モニタ21と、第1サイドカメラ11と同様に、自動車100の後方及び後側方を撮像し、撮像した画像を制御部30へ出力する臨時カメラとで構成されることも可能である。
 これにより、第1サイドカメラ11に異常が発生し、例えば画像を撮像することができなくなったとしても、異常が発生した第1サイドカメラ11が新しいカメラに交換されるまでの暫定的な代替手段をユーザに提供し、車両後方及び後側方の画像を確実に確認することが可能となる。なお、本実施形態では、第1サイドミラー代替モニタ21だけではなく、第2サイドミラー代替モニタ22及びルームミラー代替モニタ23もカメラモニタシステム300と同様なシステムを構成することができる。
 また、カメラモニタシステム300が取り付けられる場所は、典型的には自動車100のサイドウィンドウであるが、第1及び第2挟持部315,318とで挟持可能な場所であれば特に限定されるものではない。また、臨時モニタ21aと第1サイドカメラ11は一体として例示しているが、別体の分離タイプであっても良く、更にはモニタとして汎用のスマートフォン等を接続する構成でも良い。
 [変形例]
 以上、本技術の実施形態について説明したが、本技術は上述の実施形態に限定されるものではなく、本技術の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
 例えば上記実施形態の車載用情報処理システム10,200は、複数のカメラ11,12,13から出力された画像が共通の制御部30に出力される構成であるが、これに限られず、制御部30が複数のカメラ11,12,13とそれぞれ別箇に対応している構成であってもよい。
 また、上記実施形態の異常検出モードM2,M4では、後写鏡を代替するモニタ21,22,23に異常が発生した場合の新たな出力先が後写鏡を代替するモニタ以外のモニタ24,25,26となるが、これに限られず、後写鏡を代替するモニタ21,22,23間で車載用情報処理システム10,200の入出力系統が切り替えられてもよい。この場合、例えば、新たな出力先となったモニタ21,22又は23で複数のカメラ11,12,13により撮像された画像が二画面表示される。
 さらに、上記実施形態のカメラ異常アラート情報生成部34は、複数のカメラ11,12,13の入出力系統の異常に基づきカメラ異常アラート情報を生成するだけではなく、第3実施形態で説明した臨時カメラの異常(未較正、撮像不良等)に基づいてカメラ異常アラート情報を生成してもよい。
 加えて、上記実施形態の異常検出モードM2,M4における後写鏡を代替するモニタ以外のモニタは、ナビゲーションモニタ24、センターコンソールモニタ25、メーターパネル26に限定されず、HUD(Head-Up Display)、リアモニター、フリップダウンモニター、ヘッドレストモニター、サンバイザーモニター等が上記異常検出モードM2,M4における新たな出力先として採用されてもよい。特にリアモニターの様な通常使用時では運転者からの視認に適さない箇所に設置されるモニタの場合、車両に対して自由に着脱可能であることが望ましい。
 また、本技術における車載用情報処理システム10、200と、カメラモニタシステム300が適応可能な車両は自動車100のような乗用車に限定されず、自動二輪車や、バス等の大型乗用車等にも適用可能である。
 なお、本技術は以下のような構成もとることができる。
 (1)
 車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、前記第1のモニタの異常を検出した場合は、前記第1の画像を前記第1のモニタで表示する第1のモードから、前記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える制御部
 を具備する車載用情報処理装置。
 (2)
 上記(1)に記載の車載用情報処理装置であって、
 上記制御部は、上記第1のモニタの異常を知らせるモニタ異常アラート情報をさらに生成する
 車載用情報処理装置。
 (3)
 上記(1)又は(2)に記載の車載用情報処理装置であって、
 上記制御部は、上記第1のカメラの異常に基づき、上記第1のモードでは上記第1のモニタで上記第1のカメラの異常を知らせ、上記第2のモードでは上記第2のモニタで上記第1のカメラの異常を知らせるカメラ異常アラート情報をさらに生成する
 車載用情報処理装置。
 (4)
 上記(1)から(3)のいずれか一つに記載の車載用情報処理装置であって、
 上記制御部は、ユーザの入力操作に基づき、上記第1のモードから上記第2のモードへ切り替える
 車載用情報処理装置。
 (5)
 車両後方を含む所定領域を撮像する複数のカメラと、
 上記複数のカメラで撮像された画像を表示する複数のモニタと、
 上記複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える、制御部と
 を具備する車載用情報処理システム。
 (6)
 上記(5)に記載の車載用情報処理システムであって、
 上記第1のカメラは、
 上記車両後方を含む所定領域を撮像する第1及び第2の入出力系統と、
 上記第1の入出力系統の異常を検出する入出力異常検出部と、上記第1のカメラの画像の入出力系統を上記第1の入出力系統から上記第2の入出力系統へ切り替えるカメラ出力切り替え部とを備えるカメラ制御部と
を有する車載用情報処理システム。
 (7)
 上記(5)又は(6)に記載の車載用情報処理システムであって、
 上記制御部は、上記第2のモードにおいて上記第2のモニタで上記第1のモニタの異常を知らせるモニタ異常アラート情報と、上記第1のカメラの異常に基づき、上記第2のモードにおいて上記第2のモニタで上記第1のカメラの異常を知らせるカメラ異常アラート情報とを生成し、
 上記複数のモニタは、上記モニタ異常アラート情報及びカメラ異常アラート情報をシンボルマークとして表示する
 車載用情報処理システム。
 (8)
 上記(7)に記載の車載用情報処理システムであって、
 上記複数のモニタは、上記車両の一部が表示されている第1の撮像領域と、上記車両の一部以外の車外が表示されている第2の撮像領域とを含み、上記第2の撮像領域において上記シンボルマークを表示する
 車載用情報処理システム。
 (9)
 上記(7)又は(8)に記載の車載用情報処理システムであって、
 上記シンボルマークは、文字を含まないマークである
 車載用情報処理システム。
 (10)
 上記(5)から(9)のいずれか一つに記載の車載用情報処理システムであって、
 車体に着脱自在に設けられ、上記第1のカメラと上記第1のモニタとを支持し、上記第1のモニタに接続されるジョイントを有する支持部材とをさらに具備し、
 上記第1のモニタは、上記ジョイントを中心に少なくとも一軸周りに回動可能に構成されている
 車載用情報処理システム。
 (11)
 上記(5)から(10)のいずれか一つに記載の車載用情報処理システムであって、
 ユーザの入力操作に基づき、上記制御部に上記第1のモードから上記第2のモードへ切り替えさせるユーザ入力部をさらに具備する
 車載用情報処理システム。
 (12)
 上記(5)から(11)のいずれか一つに記載の車載用情報処理システムであって、
 上記第2のモニタは、ルームミラー代替モニタ、サイドミラー代替モニタ、ナビゲーションモニタ、センターコンソールモニタ又はメーターパネルのいずれかである
 車載用情報処理システム。
 (13)
 車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、
 上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードを、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える
 情報処理方法。
 (14)
 上記(1)から(4)のいずれか一つに記載の車載用情報処理装置に、
 車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出するステップと、
 上記第1のモニタの異常を検出した場合は、上記第1の画像を上記第1のモニタで表示する第1のモードから、上記第1の画像を上記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替えるステップと
 を実行させるプログラム。
 10・・・車載用情報処理装置
 11・・・第1サイドカメラ
 12・・・第2サイドカメラ
 13・・・バックカメラ
 21・・・第1サイドミラー代替モニタ
 21a・・臨時モニタ
 22・・・第2サイドミラー代替モニタ
 23・・・ルームミラー代替モニタ
 24・・・ナビゲーションモニタ
 25・・・センターコンソールモニタ
 26・・・メーターパネル
 30・・・制御部
 31・・・モニタ異常検出部
 32・・・モニタ出力切り替え部
 33・・・モニタ異常アラート情報生成部
 34・・・カメラ異常アラート情報生成部
 40・・・ユーザ入力部
 111・・第1撮像素子
 112・・第1出力用IC
 113・・第1入出力系統
 114・・第2撮像素子
 115・・第2出力用IC
 116・・第2入出力系統
 300・・カメラモニタシステム
 310・・支持部材
 320・・第1ジョイント部
 330・・第2ジョイント部

Claims (14)

  1.  車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、前記第1のモニタの異常を検出した場合は、前記第1の画像を前記第1のモニタで表示する第1のモードから、前記第1の画像を前記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える制御部
     を具備する車載用情報処理装置。
  2.  請求項1に記載の車載用情報処理装置であって、
     前記制御部は、前記第1のモニタの異常を知らせるモニタ異常アラート情報をさらに生成する
     車載用情報処理装置。
  3.  請求項1に記載の車載用情報処理装置であって、
     前記制御部は、前記第1のカメラの異常に基づき、前記第1のモードでは前記第1のモニタで前記第1のカメラの異常を知らせ、前記第2のモードでは前記第2のモニタで前記第1のカメラの異常を知らせるカメラ異常アラート情報をさらに生成する
     車載用情報処理装置。
  4.  請求項1に記載の車載用情報処理装置であって、
     前記制御部は、ユーザの入力操作に基づき、前記第1のモードから前記第2のモードへ切り替える
     車載用情報処理装置。
  5.  車両後方を含む所定領域を撮像する複数のカメラと、
     前記複数のカメラで撮像された画像を表示する複数のモニタと、
     前記複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、前記第1のモニタの異常を検出した場合は、前記第1の画像を前記第1のモニタで表示する第1のモードから、前記第1の画像を前記第1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える、制御部と
     を具備する車載用情報処理システム。
  6.  請求項5に記載の車載用情報処理システムであって、
     前記第1のカメラは、
     前記車両後方を含む所定領域を撮像する第1及び第2の入出力系統と、
     前記第1の入出力系統の異常を検出する入出力異常検出部と、前記第1のカメラの画像の入出力系統を前記第1の入出力系統から前記第2の入出力系統へ切り替えるカメラ出力切り替え部とを備えるカメラ制御部と
     を有する車載用情報処理システム。
  7.  請求項5に記載の車載用情報処理システムであって、
     前記制御部は、前記第2のモードにおいて前記第2のモニタで前記第1のモニタの異常を知らせるモニタ異常アラート情報と、前記第1のカメラの異常に基づき、前記第2のモードにおいて前記第2のモニタで前記第1のカメラの異常を知らせるカメラ異常アラート情報とを生成し、
     前記複数のモニタは、前記モニタ異常アラート情報及び前記カメラ異常アラート情報をシンボルマークとして表示する
     車載用情報処理システム。
  8.  請求項7に記載の車載用情報処理システムであって、
     前記複数のモニタは、前記車両の一部が表示されている第1の撮像領域と、前記車両の一部以外の車外が表示されている第2の撮像領域とを含み、前記第2の撮像領域において前記シンボルマークを表示する
     車載用情報処理システム。
  9.  請求項8に記載の車載用情報処理装置であって、
     前記シンボルマークは、文字を含まないマークである
     車載用情報処理システム。
  10.  請求項5に記載の車載用情報処理システムであって、
     車体に着脱自在に設けられ、前記第1のカメラと前記第1のモニタとを支持し、前記第1のモニタに接続されるジョイントを有する支持部材とをさらに具備し、
     前記第1のモニタは、前記ジョイントを中心に少なくとも一軸周りに回動可能に構成されている
     車載用情報処理システム。
  11.  請求項5に記載の車載用情報処理システムであって、
     ユーザの入力操作に基づき、前記制御部に前記第1のモードから前記第2のモードへ切り替えさせるユーザ入力部をさらに具備する
     車載用情報処理システム。
  12.  請求項5に記載の車載用情報処理システムであって、
     前記第2のモニタは、ルームミラー代替モニタ、サイドミラー代替モニタ、ナビゲーションモニタ、センターコンソールモニタ又はメーターパネルのいずれかである。
     車載用情報処理システム。
  13.  車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出し、
     前記第1のモニタの異常を検出した場合は、前記第1の画像を前記第1のモニタで表示する第1のモードを、前記第1の画像を前記1のモニタとは異なる第2のモニタで表示する第2のモードに切り替える
     情報処理方法。
  14.  車載用情報処理装置に、
     車両後方を含む所定領域を撮像する複数のカメラのうち第1のカメラで撮像された第1の画像を表示する第1のモニタの異常の有無を検出するステップと、
     前記第1のモニタの異常を検出した場合は、前記第1の画像を前記第1のモニタで表示する第1のモードから、前記第1の画像を前記1のモニタとは異なる第2のモニタで表示する第2のモードに切り替えるステップと
     を実行させるプログラム。
PCT/JP2017/017530 2016-05-24 2017-05-09 車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム WO2017203970A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/300,996 US11214269B2 (en) 2016-05-24 2017-05-09 In-vehicle information processing device, in-vehicle information processing system, and information processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016103106 2016-05-24
JP2016-103106 2016-05-24

Publications (1)

Publication Number Publication Date
WO2017203970A1 true WO2017203970A1 (ja) 2017-11-30

Family

ID=60411256

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/017530 WO2017203970A1 (ja) 2016-05-24 2017-05-09 車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム

Country Status (2)

Country Link
US (1) US11214269B2 (ja)
WO (1) WO2017203970A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019026134A (ja) * 2017-08-01 2019-02-21 三菱電機株式会社 カメラモニタリングシステム
JP2020150499A (ja) * 2019-03-15 2020-09-17 本田技研工業株式会社 運転支援装置、車両及び車両用制御装置
WO2021148158A1 (de) * 2020-01-20 2021-07-29 Marquardt Gmbh Bedien- und/oder anzeigevorrichtung

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6944308B2 (ja) 2017-08-18 2021-10-06 ソニーセミコンダクタソリューションズ株式会社 制御装置、制御システム、および制御方法
JP7074482B2 (ja) * 2018-01-17 2022-05-24 京セラ株式会社 画像処理装置、撮像システム、移動体、および画像処理方法
JP7210906B2 (ja) * 2018-05-31 2023-01-24 株式会社デンソー 車両の自動運転制御装置及びプログラム
CN112689579A (zh) * 2018-09-05 2021-04-20 株式会社小糸制作所 车辆用显示系统、车辆系统以及车辆

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004249836A (ja) * 2003-02-20 2004-09-09 Denso Corp 車両用表示制御システム
JP2007145241A (ja) * 2005-11-29 2007-06-14 Denso Corp 車両用表示装置
JP2010188902A (ja) * 2009-02-19 2010-09-02 Denso Corp 車外映像表示システムおよび車両
JP2011057015A (ja) * 2009-09-08 2011-03-24 Nippon Seiki Co Ltd 車両用表示装置
JP2011111028A (ja) * 2009-11-26 2011-06-09 Denso Corp 車載用表示システム
JP2011188134A (ja) * 2010-03-05 2011-09-22 Panasonic Corp 監視システム、その制御方法及び監視装置
JP2012089985A (ja) * 2010-10-18 2012-05-10 Fujitsu Ten Ltd 表示制御装置及び制御装置
JP2016074290A (ja) * 2014-10-06 2016-05-12 株式会社デンソー 車両用モニタシステム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2001243285A1 (en) * 2000-03-02 2001-09-12 Donnelly Corporation Video mirror systems incorporating an accessory module
DE10302671A1 (de) * 2003-01-24 2004-08-26 Robert Bosch Gmbh Verfahren und Vorrichtung zur Einstellung eines Bildsensorsystems
JP4770943B2 (ja) * 2009-02-19 2011-09-14 株式会社デンソー 車外映像表示システムおよび車両
JP2014061808A (ja) 2012-09-21 2014-04-10 Ichikoh Ind Ltd 後方視認装置
KR102321110B1 (ko) * 2015-04-17 2021-11-03 엘지전자 주식회사 촬영 장치 및 촬영 장치의 제어 방법

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004249836A (ja) * 2003-02-20 2004-09-09 Denso Corp 車両用表示制御システム
JP2007145241A (ja) * 2005-11-29 2007-06-14 Denso Corp 車両用表示装置
JP2010188902A (ja) * 2009-02-19 2010-09-02 Denso Corp 車外映像表示システムおよび車両
JP2011057015A (ja) * 2009-09-08 2011-03-24 Nippon Seiki Co Ltd 車両用表示装置
JP2011111028A (ja) * 2009-11-26 2011-06-09 Denso Corp 車載用表示システム
JP2011188134A (ja) * 2010-03-05 2011-09-22 Panasonic Corp 監視システム、その制御方法及び監視装置
JP2012089985A (ja) * 2010-10-18 2012-05-10 Fujitsu Ten Ltd 表示制御装置及び制御装置
JP2016074290A (ja) * 2014-10-06 2016-05-12 株式会社デンソー 車両用モニタシステム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019026134A (ja) * 2017-08-01 2019-02-21 三菱電機株式会社 カメラモニタリングシステム
JP2020150499A (ja) * 2019-03-15 2020-09-17 本田技研工業株式会社 運転支援装置、車両及び車両用制御装置
JP6990205B2 (ja) 2019-03-15 2022-01-12 本田技研工業株式会社 運転支援装置、車両及び車両用制御装置
WO2021148158A1 (de) * 2020-01-20 2021-07-29 Marquardt Gmbh Bedien- und/oder anzeigevorrichtung

Also Published As

Publication number Publication date
US20200317213A1 (en) 2020-10-08
US11214269B2 (en) 2022-01-04

Similar Documents

Publication Publication Date Title
WO2017203970A1 (ja) 車載用情報処理装置、車載用情報処理システム、情報処理方法及びプログラム
CN108621937B (zh) 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质
US20190100156A1 (en) System and method for controlling a display
US7537400B2 (en) Camera system for a motor vehicle
JP2014033448A (ja) 車両用のミラー代替システム
KR101795180B1 (ko) 페일 세이프 기능을 갖는 차량 측후방 모니터링 장치 및 방법
EP3547021A1 (en) Image pickup device, display system, and display method
WO2015136894A1 (ja) 車載用表示装置
WO2018079357A1 (ja) 電子ミラー装置
WO2018123546A1 (ja) 車両用視認装置
US11390216B2 (en) Electronic mirror system for a vehicle
KR101299120B1 (ko) 차량 내부 설치용 듀얼타입 측후방 주시 장치
CN210852234U (zh) 车内显示装置及汽车
JP2004136837A (ja) 車載用表示システム
US20080008364A1 (en) Video monitoring device for vehicle
JP2010188926A (ja) 車両後方表示装置および車両後方表示方法
CN111055766B (zh) 用于汽车后视显示的系统、控制器和方法
JP5098925B2 (ja) 車両用映像表示装置
JP5531561B2 (ja) 映像表示システム
JP2006131070A (ja) 車両周辺撮像装置
US20190092237A1 (en) Camera-display system for a vehicle
WO2018227545A1 (zh) 一种智能车载电子后视镜系统
JP2006327263A (ja) 表示装置
KR20220035403A (ko) 차량 탑재 시각 처리
JP3179907U (ja) 車両側後方撮像映像表示装置

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17802565

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 17802565

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP