WO2018100870A1 - 画像表示システム及び画像表示方法 - Google Patents

画像表示システム及び画像表示方法 Download PDF

Info

Publication number
WO2018100870A1
WO2018100870A1 PCT/JP2017/035996 JP2017035996W WO2018100870A1 WO 2018100870 A1 WO2018100870 A1 WO 2018100870A1 JP 2017035996 W JP2017035996 W JP 2017035996W WO 2018100870 A1 WO2018100870 A1 WO 2018100870A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
vehicle
captured
joint position
distance
Prior art date
Application number
PCT/JP2017/035996
Other languages
English (en)
French (fr)
Inventor
康兵 後藤
貴夫 今井
Original Assignee
株式会社東海理化電機製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社東海理化電機製作所 filed Critical 株式会社東海理化電機製作所
Publication of WO2018100870A1 publication Critical patent/WO2018100870A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present invention relates to an image display system and an image display method.
  • Patent Document 1 discloses a rear confirmation device and a confirmation method for displaying an image behind a vehicle.
  • the center part of the room monitor replaced by the inner mirror is the normal display range
  • the left and right end parts are the reduced display range
  • the rear part of the vehicle photographed by one rear camera is used.
  • Video is displayed on the room monitor. Then, when the driver's eyes are consciously moved, for example, when the eyes are directed to the right side, the reduced display range at the right end of the room monitor is enlarged in the left-right direction.
  • the boundary between the captured images becomes a joint and a blind portion occurs.
  • the visibility and visibility of the room monitor differ depending on the height and physique differences of the driver. For example, if the position of the driver's eyes is far from the room monitor, it is difficult to see the captured image of the rear of the vehicle displayed in the center. For this reason, it is difficult to set the joint position of the captured image, and a countermeasure has been desired.
  • the present invention provides an image display system and an image display method capable of making a plurality of synthesized images easy to see for a user.
  • an image display system includes an image acquisition unit that acquires a plurality of captured images, and an image composition unit that combines the plurality of captured images acquired by the image acquisition unit.
  • a display device that displays a plurality of photographed images synthesized by the image synthesis unit, a detection unit that detects the distance between the display device and the position of the user's eyes, and a plurality of values based on the distances detected by the detection unit
  • a position adjusting unit that adjusts a joint position for combining the captured images.
  • the image display system includes an image acquisition unit, an image composition unit, and a display device.
  • the image acquisition unit acquires a plurality of captured images.
  • the image composition unit synthesizes a plurality of captured images acquired by the image acquisition unit.
  • the display device displays a plurality of captured images combined by the image combining unit.
  • the image display system further includes a detection unit and a position adjustment unit.
  • the detection unit detects a distance between the display device and the position of the user's eyes.
  • the position adjustment unit adjusts a joint position where a plurality of captured images are combined based on the distance detected by the detection unit. For this reason, the joint position of the several picked-up image displayed on a display apparatus can be adjusted for every user based on the distance of a display apparatus and a user's eye position.
  • the image display system includes a first captured image at the rear of the vehicle at one end in the vehicle width direction, a second captured image at the rear of the vehicle at the middle in the vehicle width direction, and the rear of the vehicle at the other end in the vehicle width direction.
  • An image acquisition unit that acquires the third captured image
  • an image composition unit that combines the first captured image, the second captured image, and the third captured image acquired by the image acquisition unit, and a first image combined by the image composition unit.
  • a display device that displays the first photographed image, the second photographed image, and the third photographed image, a detection unit that detects a distance between the display device and the eye position of the driver seated in the driver's seat, and a detection unit that detects the distance
  • a position adjusting unit for adjusting a first joint position for combining the first photographed image and the second photographed image and a second joint position for synthesizing the second photographed image and the third photographed image based on the measured distance. It is equipped with.
  • the image display system includes an image acquisition unit, an image composition unit, and a display device.
  • the image acquisition unit acquires a first captured image behind the vehicle on one end side in the vehicle width direction, a second captured image behind the vehicle in the middle in the vehicle width direction, and a third captured image behind the vehicle on the other end side in the vehicle width direction.
  • the image composition unit synthesizes the first captured image, the second captured image, and the third captured image acquired by the image acquisition unit.
  • the display device displays the first captured image, the second captured image, and the third captured image combined by the image combining unit.
  • the image display system further includes a detection unit and a position adjustment unit.
  • the detection unit detects the distance between the display device and the position of the eyes of the driver seated in the driver's seat.
  • the position adjusting unit is configured to combine the first joint image and the second photographed image with the first photographed image and the second photographed image based on the distance detected by the detector, and to combine the second photographed image and the third photographed image. Adjust the joint position. Therefore, the first joint position and the second joint position displayed on the display device can be adjusted for each user based on the distance between the display device and the driver's eye position.
  • the position adjustment unit when the distance is longer than the reference value, the position adjustment unit is configured to connect the first joint position and the second joint position. And the distance between the first joint position and the second joint position is adjusted narrowly when the distance is shorter than the reference value.
  • the first joint position and the second joint position are Can be widened to make it easier to see the second captured image behind the vehicle.
  • the distance between the display device and the driver's eye position is short and the eye position is close, the distance between the first seam position and the second seam position is narrowed, and the first photographed image behind the vehicle.
  • the detection unit detects the distance in real time, and the position adjustment unit is detected in real time. Based on the measured distance, the first joint position and the second joint position are adjusted in real time.
  • the distance between the display device and the driver's eye position is detected in real time, the distance between the first joint position and the second joint position is real time. Can be adjusted.
  • the image display system according to the fifth embodiment of the present invention is the image display system according to any one of the second to fourth embodiments, wherein the display device is provided in the vehicle inner monitor.
  • the display device since the display device is provided in the vehicle inner monitor, the first photographed image, the second photographed image, and the third photographed image synthesized in the vehicle inner monitor are displayed on the driver. It can be easy to see every time.
  • An image display system is the image display system according to the second to fifth embodiments, wherein the first camera that captures the first captured image and the second camera that captures the second captured image. 2 cameras, and a third camera that captures a third captured image.
  • the image display system includes a first camera, a second camera, and a third camera.
  • the first camera captures the first captured image.
  • the second camera captures the second captured image.
  • the third camera captures a third captured image.
  • An image display system including these first to third cameras can be easily constructed.
  • the image display method includes a first captured image at the rear of the vehicle at one end in the vehicle width direction, a second captured image at the rear of the vehicle at the middle in the vehicle width direction, and the rear of the vehicle at the other end in the vehicle width direction. Acquiring the third captured image, detecting the distance between the display device and the position of the eyes of the driver seated in the driver's seat, and the first captured image and the second based on the detected distance.
  • a captured image is acquired.
  • the distance between the display device and the position of the eyes of the driver sitting in the driver's seat is detected.
  • the first joint position where the first photographed image and the second photographed image are combined and the second joint position where the second photographed image and the third photographed image are combined are adjusted.
  • the first photographed image, the second photographed image, and the third photographed image are synthesized at the adjusted first joint position and second joint position, and the plurality of photographed images are displayed on the display device. Therefore, the first joint position and the second joint position displayed on the display device can be adjusted for each driver based on the distance between the display device and the driver's eye position.
  • an image display system and an image display method capable of easily viewing a plurality of synthesized captured images according to a user.
  • FIG. 1 is a front view of a vehicle inner monitor to which an image display system and an image display method according to an embodiment of the present invention are applied, as viewed from a driver seated in a driver's seat. It is the top view which looked at the vehicle (automobile) with which the image display system and image display method which concern on this Embodiment are applied from the vehicle upper direction. It is a system block block diagram of the image display system which concerns on this Embodiment. It is a conceptual diagram explaining the detection method of the distance of the display apparatus and the position of a driver
  • a symbol FR appropriately shown indicates the front side of the vehicle inner monitor, and here, it is a direction that coincides with the vehicle front side when the vehicle inner monitor is mounted on the vehicle.
  • the symbol IN indicates the inner side in the width direction of the vehicle inner monitor, and is the direction that coincides with the inner side in the vehicle width direction.
  • Reference sign UP indicates the upward direction of the vehicle inner monitor, and is the direction that coincides with the upward direction of the vehicle.
  • the image display system and the image display method according to the present embodiment are mounted on a vehicle as an example, and each component will be described according to each direction of the vehicle. However, the application direction is limited to the present embodiment. is not.
  • the image display system 40 includes an image acquisition unit 42, an image composition unit 44, an image output unit 46, a display device 16, and a detection unit 20. And a position adjusting unit 48. Furthermore, the image display system 40 includes three cameras, ie, a first camera 22, a second camera 24, and a third camera 26 as an imaging unit.
  • the first camera 22 is attached to the left side 34 as one end side in the vehicle width direction of the vehicle 30, here the outside of the left front side door.
  • the first camera 22 captures a video on the left rear side of the vehicle and generates a first captured image.
  • the second camera 22 is mounted on the vehicle 30 in the middle of the vehicle rear portion 38 in the vehicle width direction, here inside the rear glass.
  • the second camera 22 captures an intermediate video at the rear of the vehicle and generates a second captured image.
  • the third camera 26 is attached to the right side 36 as the other side in the vehicle width direction of the vehicle 30, here the outside of the right front side door.
  • the third camera 26 captures a video on the right rear side of the vehicle, and generates a third captured image.
  • the image acquisition unit 42 acquires a plurality of captured images. More specifically, the image acquisition unit 42 outputs the first captured image output from the first camera 22 on the left rear side of the vehicle, the second captured image output from the second camera 24 at the center rear of the vehicle, and output from the third camera 26. The third captured image on the right rear side of the vehicle is acquired.
  • the image synthesis unit 44 synthesizes a plurality of captured images acquired by the image acquisition unit 42. Specifically, in the image composition unit 44, the second captured image is centered, the first captured image is connected to the left side of the second captured image, and the third captured image is connected to the right side of the second captured image. In addition, a composition process for displaying as one captured image is performed.
  • the image output unit 46 outputs a plurality of captured images combined by the image combining unit 44 to the display device 16.
  • the display device 16 a plurality of photographed images output from the image output unit 46 are displayed on a single display screen (not shown).
  • the display device 16 is incorporated in the vehicle inner monitor 10 mounted on the ceiling in the vehicle interior in the vehicle width direction of the windshield 32 of the vehicle 30 shown in FIG. 2 or in the vicinity thereof. More specifically, as shown in FIG. 1, the vehicle inner monitor 10 has a hollow rectangular parallelepiped monitor housing 12 in which the width direction is the longitudinal direction, the vertical direction is the short direction, and the front-rear direction is the thickness direction.
  • the monitor housing 12 is attached to the windshield or the vehicle interior ceiling via a support arm 14.
  • a rectangular opening (reference numeral is omitted) having a longitudinal direction in the width direction is formed on the rear wall of the monitor housing 12.
  • the display device 16 is incorporated in the monitor housing 12, and an effective area formed in a rectangular shape on the display screen of the display device 16 that matches the opening of the monitor housing 12 is exposed through the opening.
  • the display device 16 is configured by a liquid crystal display (LCD).
  • the display device 16 may be another display such as an organic electro-luminescence display (OELD).
  • OELD organic electro-luminescence display
  • a half mirror is arranged on the front surface of the display screen of the display device 16. When the half mirror is used, the vehicle inner monitor 10 functions as a vehicle inner mirror.
  • a switch 18 for switching on and off of the display device 16 is disposed below the opening of the monitor housing 12.
  • a second captured image of a plurality of captured images output from the image output unit 46 is displayed in the central portion 16 ⁇ / b> A of the display screen. Further, the first captured image of a plurality of captured images is displayed on the left side portion 16B of the display screen. And the 3rd picked-up image of a some picked-up image is displayed on the right part 16C of a display screen.
  • the boundary between the second photographed image and the first photographed image is a first joint position B1 where the photographed images are joined by the synthesis process, and is a part that becomes a blind. Similarly, the boundary between the second photographed image and the third photographed image is a part that becomes the second joint position B2.
  • the detection unit 20 is provided on the right side of the switch 18 below the opening of the monitor housing 12 in the present embodiment.
  • the vehicle 30 is a right-hand drive vehicle.
  • the detection unit 20 detects a distance L ⁇ b> 1 between the detection unit 20 and the position 50 of the eyes of the driver as a user seated in the driver's seat of the vehicle 30.
  • the arrangement position of the detection unit 20 can be regarded as substantially equivalent to the arrangement position of the display device 16. Accordingly, here, the distance L1 between the display screen 16 of the display device 16 and the eye position 50 is detected by the detection unit 20.
  • the detection unit 20 detects the detection unit 20 and the eye position 50 by being provided around the handle, the instrument panel, and the like. A distance L1 between the eye position 50 and the eye position 50 may be calculated.
  • the detection unit 20 a monocular camera, a stereo camera, a position sensor, or the like can be used practically.
  • the detection unit 20 is configured to detect the distance in real time, for example, at intervals of 5 to 10 seconds.
  • the detection unit 20 may operate at a real time interval, or may output a detection result at every real time interval in a constantly operating state.
  • the detection unit 20 may be configured to always output the detection result in the normal operation state, and the position adjustment unit 48 captures the detection result at a real time interval.
  • the vehicle rear side from the position p1
  • the eye position 50 moves to the eye position 52 as the eye position 52.
  • the distance L2 between the display device 16 and the eye position 52 is longer than the distance L1.
  • the distance L3 between the display device 16 and the eye position 54 is longer than the distance L1 when the height of the line of sight is a height h1 lower than the height h2.
  • the position B2 adjusts the first joint position B1 and the second joint displayed on the display device 16 shown in FIG. 1 based on the distances L1 to L3 detected by the detector 20.
  • the position B2 is adjusted. More specifically, for example, if a driver having a standard height and physique is the eye position 54, the distance L3 is set as a reference value, and the position adjusting unit 48 uses the first joint position B1 and the second joint as follows. The position of the eye position B2 is adjusted. At the eye position 52, the detection unit 20 detects the distance L2. In the position adjustment unit 48, since the distance L2 is longer than the reference value (distance L3), the first joint position B1 and the second joint position B2 are respectively moved in the arrow B direction on the outer side in the width direction.
  • the detection unit 20 detects the distance L1.
  • the distance L1 is shorter than the reference value (distance L3), the first joint position B1 and the second joint position B2 are moved in the direction of arrow A on the inner side in the width direction.
  • the position adjusting unit 48 adjusts the positions of the first joint position B1 and the second joint position B2 in accordance with the real-time interval of the detection unit 20.
  • the position adjustment unit 48 includes a table in which the interval between the first joint position B1 and the second joint position B2 is appropriately set for each distance between the display screen and the eye position. That is, the position adjustment unit 48 calls the interval stored in the table based on the detection result (distance) output from the detection unit 20. Note that the position adjustment unit 48 may be configured to calculate the interval by calculation processing using a preset calculation formula based on the detection result.
  • the image acquisition unit 42, the image synthesis unit 44, the image output unit 46, and the position adjustment unit 48 of the image display system 40 illustrated in FIG. 3 are omitted in the present embodiment, they are mounted as an integrated circuit on a mounting board.
  • a mounting board ing.
  • a printed circuit board (PCB: Print Circuit Board) is used as the mounting substrate.
  • the mounting board is configured to be housed inside the monitor housing 12.
  • FIGS. 1 to 4 are appropriately referred to.
  • a first photographed image is photographed using the first camera 22 shown in FIGS. 2 and 3
  • a second photographed image is photographed using the second camera 24, and the third
  • a third photographed image is photographed using the camera 26 (S1).
  • the first captured image is a video on the left rear side of the vehicle.
  • the second photographed image is a video at the rear center of the vehicle.
  • the third captured image is a video on the right rear side of the vehicle.
  • the first captured image, the second captured image, and the third captured image are acquired by the image acquisition unit 42 of the image display system 40 (S2).
  • the first captured image, the second captured image, and the third captured image acquired by the image acquisition unit 42 are combined in the image combining unit 44 (S3).
  • the synthesized first image, second image, and third image are output to the image output unit 46 (S9), and further output from the image output unit 46 to the display device 16 (S10).
  • the second captured image is displayed in the central portion 16A
  • the first captured image is displayed in the left portion 16B
  • the third captured image is displayed in the right portion 16C.
  • the boundary between the second photographed image and the first photographed image is the first joint position B1
  • the boundary between the second photographed image and the third photographed image is the second joint position B2.
  • the first joint position B1 and the second joint position B2 are both blind portions.
  • the process determines whether or not to continue displaying the captured image on the display device 16 (S11). For example, when the engine of the vehicle 30 is stopped, there is no need to check the rear of the vehicle, so that the display is not continued. At this time, a series of operations of the image display method ends. When the display is continued, the process returns to the first stage of the image display method.
  • step S4 whether the first joint position B1 and the second joint position B2 are switched in the first photographed image, the second photographed image, and the third photographed image displayed on the display device 16 after a preset time has elapsed. It is determined whether or not (S4).
  • the preset time is a real-time interval.
  • the detection unit 20 shown in FIGS. 1, 3 and 4 is used to display the display screen of the display device 16 and the position of the driver's eyes, for example, as shown in FIG. A distance L3 to 54 is detected (S5). Based on the detected distance L3, it is determined whether or not to switch the interval between the first joint position B1 and the second joint position B2 (S6). If the distance L3 is set to the reference value according to the above-described example, there is no need to switch the first joint position B1 and the second joint position B2, and the process returns to the previous stage of step S4.
  • the position adjusting unit 48 performs an adjustment to increase the interval between the first joint position B1 and the second joint position B2 (S7).
  • the position adjustment unit 48 performs an adjustment to narrow the interval between the first joint position B1 and the second joint position B2 (S7).
  • the first photographed image, the second photographed image, and the third photographed image obtained by the image obtaining unit 42 in step S2 are images. Synthesized (S8). The first captured image, the second captured image, and the third captured image are displayed on the display device 16 (S9 and S10).
  • the image display system 40 includes at least an image acquisition unit 42, an image composition unit 44, and the display device 16.
  • the image acquisition unit 42 acquires a plurality of captured images. Specifically, in the image acquisition unit 42, the first captured image is acquired from the first camera 22, the second captured image is acquired from the second camera 24, and the third captured image is acquired from the third camera 26.
  • the image synthesis unit 44 synthesizes a plurality of captured images acquired by the image acquisition unit 42.
  • the display device 16 has a plurality of photographed images synthesized by the image synthesizing unit 44, that is, in the vehicle inner monitor 10 shown in FIG.
  • the third captured image is displayed on the screen.
  • the second photographed image is a video at the rear center of the vehicle.
  • the first captured image is a video on the left rear side of the vehicle, and the third captured image is a video on the right rear side of the vehicle.
  • the image display system 40 further includes a detection unit 20 and a position adjustment unit 48.
  • the detection unit 20 detects distances L1, L2, and L3 between the display device 16 and, for example, eye positions 50, 52, and 54 of a driver as a user.
  • the position adjustment unit 48 based on the distances L1, L2, and L3 detected by the detection unit 20, combines the second captured image and the first captured image with the first joint position B1, the second captured image, and the third.
  • the second joint position B2 for combining the photographed image is adjusted.
  • the first joint position B1 and the second joint position B2 of the plurality of photographed images displayed on the display device 16 are set as the distance L1, between the display device 16 and the driver's eye positions 50, 52, 54, Adjustments can be made for each driver based on L2 and L3.
  • the image display system 40 it is possible to make it easy to see a plurality of synthesized captured images according to the driver. More specifically, if the driver's eye position 52 is far from the display screen of the display device 16, the distance between the first joint position B1 and the second joint position B2 is increased, and the vehicle is displayed on the central portion 16A. This makes it easier to see the second captured image behind. On the other hand, when close to the opposite, the interval between the first joint position B1 and the second joint position B2 is narrowed, and the first photographed image displayed on the left side 16B and the right part 16C are displayed on the left side behind the vehicle. The third photographed image on the right rear side of the vehicle can be made easier to see.
  • the distances L1, L2, and L3 between the display device 16 and the driver's eye positions 50, 52, and 54 are real-time. Detected.
  • interval of 1st joint position B1 and 2nd joint position B2 can be adjusted in real time.
  • the real-time interval is set to, for example, 5 to 10 seconds, the first joint position B1 and the second joint position B2 are appropriately followed by following the movement of the head of the driver who is driving the vehicle 30. The interval between and is adjusted.
  • the real-time interval is less than 5 seconds, the interval between the first joint position B1 and the second joint position B2 changes frequently, and the captured image fluctuates, making it difficult to see. If the real-time interval exceeds 10 seconds, the adjustment of the interval between the first joint position B1 and the second joint position B2 is not followed with respect to the change in the eye position.
  • the display device 16 since the display device 16 is provided in the vehicle inner monitor 10, the first captured image synthesized in the vehicle inner monitor 10, The second photographed image and the third photographed image can be easily viewed for each driver.
  • the image display system 40 includes a first camera 22, a second camera 24, and a third camera 26 as shown in FIGS.
  • the first camera 22 captures the first captured image.
  • the second camera 24 captures a second captured image.
  • the third camera 26 captures a third captured image.
  • the image display system 40 can be easily constructed including the first camera 22, the second camera 24 and the third camera 26.
  • a first captured image on the left rear side of the vehicle, a second captured image on the center rear of the vehicle, and a third captured image on the right rear side of the vehicle are acquired.
  • S2 distances L1, L2, and L3 between the display device 16 and the positions 50, 52, and 54 of the eyes of the driver sitting in the driver's seat are detected (see S5 and FIG. 4).
  • the position B2 is adjusted (S7).
  • the first photographed image, the second photographed image, and the third photographed image are synthesized at the adjusted first joint position B1 and second joint position B2 (S8), and the synthesized photographed image is displayed on the display device 16. Is done. Therefore, the first joint position B1 and the second joint position B2 displayed on the display device 16 are based on the distances L1, L2, and L3 between the display device 16 and the driver's eye positions 50, 52, and 54. Can be adjusted for each driver.
  • the display device of the image display system may be a display device attached to an instrument panel.
  • the display device is also used as an operation panel for a television monitor, navigation monitor, audio, or the like.
  • the image display system may further include a camera that captures the vehicle side surface direction and the vehicle front lower side, and the captured images may be combined and displayed on the display device.
  • the joint position is 3 or more.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

画像表示システム（４０）は、複数の撮影画像を取得する画像取得部（４２）と、複数の撮影画像を合成する画像合成部（４４）と、合成された撮影画像を表示する表示装置（１６）とを備えている。この画像表示システム（４０）は、更に検出部（２０）及び位置調整部（４８）を備えている。検出部（２０）は、表示装置（１６）とユーザの目の位置との距離を検出する。この検出された距離に基づいて、位置調整部（４８）は複数の撮影画像を合成する繋ぎ目位置を調整する。

Description

画像表示システム及び画像表示方法
　本発明は、画像表示システム及び画像表示方法に関する。
　下記特許文献１には、車両後方の映像を表示する後方確認装置及び確認方法が開示されている。この後方確認装置及び確認方法では、インナーミラーに置き代えられたルームモニタの中央部が通常表示範囲とされ、左右両端部が縮小表示範囲とされて、１つの後方カメラにより撮影された車両後方の映像がルームモニタに表示される。そして、運転者の目線の意識的な動き、例えば右側に目線を向けたとき、ルームモニタの右側端部の縮小表示範囲が左右方向に拡大される。
　ところで、自動車等の車両はミラーレス化の傾向にある。ミラーレス化では、後方カメラにより撮影された車両幅方向中間の車両後方の撮影画像と、左右サイドドアミラーに相当する左側及び右側カメラにより撮影された車両幅方向両端部の車両後方の撮影画像とが、画像合成されてルームモニタに表示される。つまり、ルームモニタでは、中央に後方カメラにより撮影された撮影画像が表示され、左側に左側カメラにより撮影された撮影画像が表示され、そして右側に右側カメラにより撮影された撮影画像が表示される。
　ルームモニタには３つの撮影画像が合成されて表示されるが、撮影画像同士の境界が繋ぎ目となり、ブラインドとなる部分が発生する。また、運転者の身長差や体格差により、ルームモニタの見え方や見易さが異なる。例えば、運転者の目の位置がルームモニタから遠いと中央に表示された車両後方の撮影画像が見難く、逆に近いと同一の車両後方の撮影画像が見易くなる。このため、撮影画像の繋ぎ目位置が設定し難く、対策が望まれていた。
特開２０１６－４９９５３号公報
　本発明は、上記事実を考慮し、合成された複数の撮影画像をユーザに合わせて見易くすることができる画像表示システム及び画像表示方法を提供する。
　上記課題を解決するため、本発明の第１実施態様に係る画像表示システムは、複数の撮影画像を取得する画像取得部と、画像取得部により取得された複数の撮影画像を合成する画像合成部と、画像合成部により合成された複数の撮影画像を表示する表示装置と、表示装置とユーザの目の位置との距離を検出する検出部と、検出部により検出された距離に基づいて、複数の撮影画像を合成する繋ぎ目位置を調整する位置調整部と、を備えている。
　第１実施態様に係る画像表示システムは、画像取得部と、画像合成部と、表示装置とを備える。画像取得部は複数の撮影画像を取得する。画像合成部は画像取得部により取得された複数の撮影画像を合成する。表示装置は画像合成部により合成された複数の撮影画像を表示する。
　ここで、画像表示システムは、検出部及び位置調整部を更に備える。検出部は、表示装置とユーザの目の位置との距離を検出する。位置調整部は、検出部により検出された距離に基づいて、複数の撮影画像を合成する繋ぎ目位置を調整する。このため、表示装置に表示される複数の撮影画像の繋ぎ目位置を、表示装置とユーザの目の位置との距離に基づいてユーザ毎に調整することができる。
　本発明の第２実施態様に係る画像表示システムは、車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像を取得する画像取得部と、画像取得部により取得された第１撮影画像、第２撮影画像及び第３撮影画像を合成する画像合成部と、画像合成部により合成された第１撮影画像、第２撮影画像及び第３撮影画像を表示する表示装置と、表示装置と運転席に着座状態の運転者の目の位置との距離を検出する検出部と、検出部により検出された距離に基づいて、第１撮影画像と第２撮影画像とを合成する第１繋ぎ目位置及び第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置を調整する位置調整部と、を備えている。
　第２実施態様に係る画像表示システムでは、画像取得部と、画像合成部と、表示装置とを備える。画像取得部は、車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像を取得する。画像合成部は、画像取得部により取得された第１撮影画像、第２撮影画像及び第３撮影画像を合成する。表示装置は、画像合成部により合成された第１撮影画像、第２撮影画像及び第３撮影画像を表示する。
　ここで、画像表示システムは、検出部及び位置調整部を更に備える。検出部は、表示装置と運転席に着座状態の運転者の目の位置との距離を検出する。位置調整部は、検出部により検出された距離に基づいて、第１撮影画像と第２撮影画像とを合成する第１繋ぎ目位置及び第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置を調整する。このため、表示装置に表示される第１繋ぎ目位置及び第２繋ぎ目位置を、表示装置と運転者の目の位置との距離に基づいてユーザ毎に調整することができる。
　本発明の第３実施態様に係る画像表示システムでは、第２実施態様に係る画像表示システムにおいて、位置調整部は、距離が基準値よりも長いとき、第１繋ぎ目位置と第２繋ぎ目位置との間隔を広く調整し、距離が基準値よりも短いとき、第１繋ぎ目位置と第２繋ぎ目位置との間隔を狭く調整する。
　第３実施態様に係る画像表示システムによれば、表示装置と運転者の目の位置との距離が長く目の位置が表示装置から遠いときに、第１繋ぎ目位置と第２繋ぎ目位置との間隔を広くして、車両後方の第２撮影画像を見易くさせることができる。
　一方、表示装置と運転者の目の位置との距離が短く目の位置が近いときに、第１繋ぎ目位置と第２繋ぎ目位置との間隔を狭くして、車両後方の第１撮影画像、第３撮影画像のそれぞれを見易くさせることができる。
　本発明の第４実施態様に係る画像表示システムは、第２実施態様又は第３実施態様に係る画像表示システムにおいて、検出部は、距離をリアルタイムに検出し、位置調整部は、リアルタイムに検出された距離に基づいて、第１繋ぎ目位置及び第２繋ぎ目位置をリアルタイムに調整する。
　第４実施態様に係る画像表示システムによれば、表示装置と運転者の目の位置との距離がリアルタイムに検出されるので、第１繋ぎ目位置と第２繋ぎ目位置との間隔をリアルタイムに調整することができる。
　本発明の第５実施態様に係る画像表示システムは、第２実施態様～第４実施態様のいずれか１つに係る画像表示システムにおいて、表示装置は、車両用インナーモニタに設けられている。
　第５実施態様に係る画像表示システムによれば、表示装置が車両用インナーモニタに設けられるので、車両用インナーモニタにおいて合成された第１撮影画像、第２撮影画像及び第３撮影画像を運転者毎に見易くすることができる。
　本発明の第６実施態様に係る画像表示システムは、第２実施態様～第５実施態様に係る画像表示システムにおいて、第１撮影画像を撮影する第１カメラと、第２撮影画像を撮影する第２カメラと、第３撮影画像を撮影する第３カメラと、を更に備えている。
　第６実施態様に係る画像表示システムは、第１カメラ、第２カメラ及び第３カメラを備える。第１カメラは第１撮影画像を撮影する。第２カメラは第２撮影画像を撮影する。第３カメラは第３撮影画像を撮影する。これらの第１～第３カメラを含んで画像表示システムを簡易に構築することができる。
　本発明の第７実施態様に係る画像表示方法は、車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像を取得するステップと、表示装置と運転席に着座状態の運転者の目の位置との距離を検出するステップと、検出された距離に基づいて、第１撮影画像と第２撮影画像とを合成する第１繋ぎ目位置及び第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置を調整するステップと、調整された第１繋ぎ目位置及び第２繋ぎ目位置において第１撮影画像、第２撮影画像及び第３撮影画像を合成するステップと、合成された第１撮影画像、第２撮影画像及び第３撮影画像を表示装置に表示するステップと、を備えている。
　第７実施態様に係る画像表示方法では、車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像が取得される。一方、表示装置と運転席に着座状態の運転者の目の位置との距離が検出される。検出された距離に基づいて、第１撮影画像と第２撮影画像とを合成する第１繋ぎ目位置及び第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置が調整される。調整された第１繋ぎ目位置及び第２繋ぎ目位置において第１撮影画像、第２撮影画像及び第３撮影画像が合成され、この複数の撮影画像が表示装置に表示される。
　このため、表示装置に表示される第１繋ぎ目位置及び第２繋ぎ目位置を、表示装置と運転者の目の位置との距離に基づいて運転者毎に調整することができる。
　本発明によれば、合成された複数の撮影画像をユーザに合わせて見易くすることができる画像表示システム及び画像表示方法を提供することができる。
本発明の実施の形態に係る画像表示システム及び画像表示方法が適用される車両用インナーモニタを運転席に着座状態の運転者から見た正面図である。 本実施の形態に係る画像表示システム及び画像表示方法が適用される車両（自動車）を車両上方から見た平面図である。 本実施の形態に係る画像表示システムのシステムブロック構成図である。 本実施の形態に係る画像表示システムの検出部による表示装置と運転者の目の位置との距離の検出方法を説明する概念図である。 本実施の形態に係る画像表示方法を説明するフローチャートである。
　以下、図１～図５を用いて、本発明の一実施の形態に係る画像表示システム及び画像表示方法を説明する。本実施の形態では、画像表示システム及び画像表示方法は自動車等の車両に適用されている。図中、適宜示される符号ＦＲは、車両用インナーモニタの前方側を示し、ここでは車両に車両用インナーモニタが装着された状態において車両前方側と一致する方向である。符号ＩＮは、車両用インナーモニタの幅方向内側を示し、車両幅方向内側に一致する方向である。そして、符号ＵＰは、車両用インナーモニタの上方向を示し、車両上方向と一致する方向である。なお、本実施の形態に係る画像表示システム及び画像表示方法は一例として車両に装着され、車両の各方向に合わせて各構成要素を説明するが、適用方向が本実施の形態に限定されるものではない。
　（画像表示システムの構成）
　まず最初に、図３に示されるように、本実施の形態に係る画像表示システム４０は、画像取得部４２と、画像合成部４４と、画像出力部４６と、表示装置１６と、検出部２０と、位置調整部４８とを含んで構成されている。さらに、画像表示システム４０は、撮像部としての第１カメラ２２、第２カメラ２４及び第３カメラ２６の３つのカメラを備えて構築されている。
　第１カメラ２２は、図２に示されるように、車両３０において車両幅方向一端側としての左側部３４、ここでは左側フロントサイドドアの外側に装着されている。第１カメラ２２では、車両後方左側の映像が撮影され、第１撮像画像が生成される。第２カメラ２２は、車両３０において車両後部３８の車両幅方向中間、ここではリアガラスの内側に装着されている。第２カメラ２２では、車両後方中間の映像が撮影され、第２撮像画像が生成される。第３カメラ２６は、車両３０において車両幅方向他端側としての右側部３６、ここでは右側フロントサイドドアの外側に装着されている。第３カメラ２６では、車両後方右側の映像が撮影され、第３撮影画像が生成される。
　図３に戻って、画像取得部４２は複数の撮影画像を取得する。詳しく説明すると、画像取得部４２では、第１カメラ２２から出力される車両後方左側の第１撮影画像、第２カメラ２４から出力される車両後方中央の第２撮影画像、第３カメラ２６から出力される車両後方右側の第３撮影画像が取得される。
　画像合成部４４は画像取得部４２により取得された複数の撮影画像を合成する。画像合成部４４では、具体的には、第２撮影画像を中央にして、第２撮影画像の左側に第１撮影画像を繋ぎ合わせ、かつ、第２撮像画像の右側に第３撮影画像を繋ぎ合わせ、１つの撮影画像として表示するための合成処理が行われる。
　画像出力部４６は画像合成部４４において合成された複数の撮影画像を表示装置１６に出力する。
　表示装置１６では、画像出力部４６から出力された複数の撮影画像が図示を省略した１つの表示画面に表示される。表示装置１６は、図２に示される車両３０のフロントガラス３２の車両幅方向中間の上部又はその近傍の車両室内の天井に装着された車両用インナーモニタ１０に組込まれている。詳しく説明すると、図１に示されるように、車両用インナーモニタ１０は、幅方向を長手方向とし、上下方向を短手方向とし、前後方向を厚さ方向とする中空直方体形状のモニタ筐体１２を有する。モニタ筐体１２は支持アーム１４を介してフロントガラス又は車両室内の天井に装着されている。モニタ筐体１２の後方側の壁には幅方向を長手方向とする矩形状の開口部（符号は省略する）が形成されている。
　表示装置１６はモニタ筐体１２の内部に組込まれ、このモニタ筐体１２の開口部と一致する、表示装置１６の表示画面の矩形状に形成された有効領域が開口部を通して露出されている。表示装置１６は、本実施の形態では、液晶ディスプレイ（LCD：Liquid Crystal Display）により構成されている。また、表示装置１６には、有機エレクトロルミネッセンスディスプレイ（OELD：Organic Electro-Luminescence Display）等の他のディスプレイが使用されてもよい。
　なお、図示を省略しているが、表示装置１６の表示画面の前面にはハーフミラーが配置されている。ハーフミラーが使用されるとき、車両用インナーモニタ１０は車両用インナーミラーとして機能する。また、特に配置位置が限定されるものではないが、モニタ筐体１２の開口部下側には表示装置１６のオン、オフを切換えるスイッチ１８が配設されている。
　図１に示される表示装置１６において、表示画面の中央部分１６Ａには、画像出力部４６（図３参照）から出力された複数の撮影画像の第２撮影画像が表示される。また、表示画面の左側部分１６Ｂには、複数の撮影画像の第１撮影画像が表示される。そして、表示画面の右側部分１６Ｃには、複数の撮影画像の第３撮影画像が表示される。
　第２撮影画像と第１撮影画像との境界は、合成処理により撮影画像同士を繋ぎ合わせた第１繋ぎ目位置Ｂ１であり、ブラインドとなる部位である。また、第２撮影画像と第３撮影画像との境界は、同様に、第２繋ぎ目位置Ｂ２となる部位である。
　図１に示されるように、検出部２０は、本実施の形態において、モニタ筐体１２の開口部下側であってスイッチ１８の右隣りに設けられている。車両３０はここでは右ハンドル車である。図４に示されるように、検出部２０は、この検出部２０と、車両３０の運転席に着座状態のユーザとしての運転者の目の位置５０との距離Ｌ１を検知する。本実施の形態では、検出部２０はモニタ筐体１２に表示装置１６と近接して配置されているので、検出部２０の配置位置は表示装置１６の配置位置と実質的に等価とみなせる。従って、ここでは、表示装置１６の特に表示画面と目の位置５０との距離Ｌ１が検出部２０により検知されることとする。
　この意味では、結果として距離Ｌ１が検出されればよいので、検出部２０は、ハンドル周り、インストルメントパネル等に設けて検出部２０と目の位置５０とを検出し、この検出結果から表示画面と目の位置５０との距離Ｌ１が演算により算出されてもよい。
　検出部２０には、単眼カメラ、ステレオカメラ、位置センサ等を実用的に使用することができる。
　また、本実施の形態では、検出部２０は、リアルタイムに、例えば５秒～１０秒間隔において距離を検出する構成とされている。例えば、検出部２０は、リアルタイム間隔において動作させてもよいし、常時動作状態においてリアルタイム間隔毎に検出結果を出力させてもよい。また、検出部２０は常時動作状態において検出結果を常時出力し、位置調整部４８がリアルタイム間隔に検出結果を取込む構成とされてもよい。
　ここで、図４に示されるように、目線の高さが同一の高さｈ２であっても、身長差や体格差により運転席を車両後方側へ移動させれば、位置ｐ１から車両後方側の位置ｐ２へ目の位置５０は目の位置５２として移動する。このとき、表示装置１６と目の位置５２との距離Ｌ２は距離Ｌ１よりも長くなる。また、同一の位置ｐ１であっても、目線の高さが高さｈ２よりも低い高さｈ１とされたとき、表示装置１６と目の位置５４との距離Ｌ３は距離Ｌ１よりも長くなる。
　図３に示される位置調整部４８は、検出部２０により検出された距離Ｌ１～Ｌ３等に基づいて、図１に示される表示装置１６に表示される第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２の位置を調整する。詳しく説明すると、例えば、標準の身長及び体格を有する運転者が目の位置５４とすると、距離Ｌ３が基準値とされ、位置調整部４８は以下のように第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２の位置を調整する。
　目の位置５２のとき、検出部２０は距離Ｌ２を検出する。位置調整部４８では、距離Ｌ２が基準値（距離Ｌ３）よりも長いので、第１繋ぎ目位置Ｂ１、第２繋ぎ目位置Ｂ２はそれぞれ幅方向外側の矢印Ｂ方向へ移動される。このため、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔が広く調整されるので、表示画面の中央部分１６Ａが幅方向へ広がり、第２撮影画像の表示範囲が広がる。
　また、目の位置５０のとき、検出部２０は距離Ｌ１を検出する。位置調整部４８では、距離Ｌ１が基準値（距離Ｌ３）よりも短いので、第１繋ぎ目位置Ｂ１、第２繋ぎ目位置Ｂ２はそれぞれ幅方向内側の矢印Ａ方向へ移動される。このため、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔が狭く調整されるので、表示画面の左側部分１６Ｂ及び右側部分１６Ｃが幅方向へ広がり、第１撮影画像及び第３撮影画像の表示範囲が幅方向へ広がり、第１撮影画像及び第３撮影画像の表示範囲が広がる。
　なお、位置調整部４８では、検出部２０のリアルタイムの間隔に合わせて、第１繋ぎ目位置Ｂ１、第２繋ぎ目位置Ｂ２のそれぞれの位置が調整される。
　位置調整部４８は、表示画面と目の位置との距離毎に、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔を適宜設定したテーブルを備えている。すなわち、位置調整部４８では、検出部２０から出力される検出結果（距離）に基づいて、テーブルに記憶された間隔が呼出される。
　なお、位置調整部４８は、検出結果に基づいて、予め設定された演算式を用いて演算処理により間隔を算出する構成としてもよい。
　図３に示される画像表示システム４０の画像取得部４２、画像合成部４４、画像出力部４６及び位置調整部４８は、本実施の形態において図示を省略したが、実装基板に集積回路として実装されている。実装基板として、例えば印刷回路基板（PCB：Print Circuit Board）が使用されている。実装基板はモニタ筐体１２の内部に収納される構成とされている。
　（画像表示方法）
　図５に示されるフローチャートを用いて、前述の画像表示システム４０による画像表示方法を説明する。この画像表示方法の説明では図１～図４が適宜参酌される。
　画像表示方法では、まず最初に、図２及び図３に示される第１カメラ２２を用いて第１撮影画像が撮影され、第２カメラ２４を用いて第２撮影画像が撮影され、そして第３カメラ２６を用いて第３撮影画像が撮影される（Ｓ１）。第１撮影画像は車両後方左側の映像である。第２撮影画像は車両後方中央の映像である。そして、第３撮影画像は車両後方右側の映像である。
　第１撮影画像、第２撮影画像及び第３撮影画像は、画像表示システム４０の画像取得部４２において取得される（Ｓ２）。画像取得部４２に取得された第１撮影画像、第２撮影画像及び第３撮影画像は、画像合成部４４において画像合成される（Ｓ３）。画像合成された第１撮影画像、第２撮影画像及び第３撮影画像は画像出力部４６に出力され（Ｓ９）、更に画像出力部４６から表示装置１６に出力される（Ｓ１０）。
　図１に示されるように、表示装置１６では、中央部分１６Ａに第２撮影画像が表示され、左側部分１６Ｂに第１撮影画像が表示され、右側部分１６Ｃに第３撮影画像が表示される。第２撮影画像と第１撮影画像との境界は第１繋ぎ目位置Ｂ１であり、第２撮影画像と第３撮影画像との境界は第２繋ぎ目位置Ｂ２である。第１繋ぎ目位置Ｂ１、第２繋ぎ目位置Ｂ２はいずれもブラインドとなる部分である。
　ここで、表示装置１６において、撮影画像の表示を継続するか否かが判断される（Ｓ１１）。例えば、車両３０のエンジンを停止したときには、車両後方の確認をする必要が無いので、表示の継続が行われない。このとき、画像表示方法の一連の動作は終了する。表示が継続されるときには、画像表示方法の初段に戻る。
　一方、予め設定された時間が経過し、表示装置１６に表示される第１撮影画像、第２撮影画像及び第３撮影画像において、第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２を切換えるか否かが判断される（Ｓ４）。ここで、予め設定された時間とは、リアルタイムの間隔である。切換える必要が無いときには、再度、ステップＳ４の前段に戻る。
　ステップＳ４において、切換える必要があるとき、図１、図３及び図４に示される検出部２０を用いて、図４に示されるように、表示装置１６の表示画面と運転者の例えば目の位置５４との距離Ｌ３が検出される（Ｓ５）。この検出された距離Ｌ３に基づいて、第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２の間隔を切換えるか否かが判断される（Ｓ６）。前述の例示に従って、距離Ｌ３が基準値とすれば、第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２を切換える必要が無いので、ステップＳ４の前段に戻る。
　一方、運転者において目の位置５２のとき、検出部２０により距離Ｌ２が検出される。距離Ｌ２は距離Ｌ３よりも長いので、位置調整部４８において第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔を広げる調整が行われる（Ｓ７）。また、運転者において目の位置５０のとき、検出部２０により距離Ｌ１が検出される。距離Ｌ１は距離Ｌ３よりも短いので、位置調整部４８において第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔を狭める調整が行われる（Ｓ７）。
　位置調整部４８において調整された第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２において、ステップＳ２により画像取得部４２において取得された第１撮影画像、第２撮影画像及び第３撮影画像が画像合成される（Ｓ８）。この第１撮影画像、第２撮影画像及び第３撮影画像は表示装置１６に表示される（Ｓ９及びＳ１０）。
　（本実施の形態の作用及び効果）
　本実施の形態に係る画像表示システム４０は、図３に示されるように、画像取得部４２と、画像合成部４４と、表示装置１６とを少なくとも備える。画像取得部４２は複数の撮影画像を取得する。具体的に、画像取得部４２では、第１カメラ２２から第１撮像画像が取得され、第２カメラ２４から第２撮像画像が取得され、第３カメラ２６から第３撮影画像が取得される。画像合成部４４は画像取得部４２により取得された複数の撮影画像を合成する。表示装置１６は画像合成部４４により合成された複数の撮影画像、すなわち図１に示される車両用インナーモニタ１０において中央部分１６Ａに第２撮像画像、左側部分１６Ｂに第１撮像画像、右側部分１６Ｃに第３撮像画像を表示する。第２撮影画像は車両後方中央の映像である。第１撮影画像は車両後方左側の映像、第３撮影画像は車両後方右側の映像である。
　ここで、画像表示システム４０は、図１及び図３に示されるように、検出部２０及び位置調整部４８を更に備える。図４に示されるように、検出部２０は、表示装置１６とユーザとしての運転者の例えば目の位置５０、５２、５４との距離Ｌ１、Ｌ２、Ｌ３を検出する。位置調整部４８は、検出部２０により検出された距離Ｌ１、Ｌ２、Ｌ３に基づいて、第２撮影画像と第１撮影画像とを合成する第１繋ぎ目位置Ｂ１、第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置Ｂ２を調整する。
　このため、表示装置１６に表示される複数の撮影画像の第１繋ぎ目位置Ｂ１、第２繋ぎ目位置Ｂ２を、表示装置１６と運転者の目の位置５０、５２、５４との距離Ｌ１、Ｌ２、Ｌ３に基づいて運転者毎に調整することができる。
　従って、本実施の形態に係る画像表示システム４０では、合成された複数の撮影画像を運転者に合わせて見易くすることができる。
　詳しく説明すると、運転者の目の位置５２が表示装置１６の表示画面から遠いと、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔を広げて、中央部分１６Ａに表示される車両後方の第２撮影画像を見易くすることができる。また、逆に近いと、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔を狭めて、左側部分１６Ｂに表示される車両後方左側の第１撮影画像及び右側部分１６Ｃに表示される車両後方右側の第３撮影画像を見易くすることができる。
　また、本実施の形態に係る画像表示システム４０では、図５のステップＳ４に示されるように、表示装置１６と運転者の目の位置５０、５２、５４との距離Ｌ１、Ｌ２、Ｌ３がリアルタイムに検出される。このため、表示装置１６において、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔をリアルタイムに調整することができる。
　特に、リアルタイム間隔が例えば５秒～１０秒とされているので、車両３０を運転中の運転者の頭部の動きに追従して、適宜、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔が調整される。リアルタイム間隔が５秒未満のときは、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔が頻繁に変化し、撮影画像が揺らいでしまい、かえって見難くなる。
また、リアルタイム間隔が１０秒を超えると、目の位置の変化に対して、第１繋ぎ目位置Ｂ１と第２繋ぎ目位置Ｂ２との間隔の調整が追従されない。
　さらに、本実施の形態に係る画像表示システム４０では、図１に示されるように、表示装置１６が車両用インナーモニタ１０に設けられるので、車両用インナーモニタ１０において合成された第１撮影画像、第２撮影画像及び第３撮影画像を運転者毎に見易くすることができる。
　また、本実施の形態に係る画像表示システム４０は、図２及び図３に示されるように、第１カメラ２２、第２カメラ２４及び第３カメラ２６を備える。第１カメラ２２は第１撮影画像を撮影する。第２カメラ２４は第２撮影画像を撮影する。第３カメラ２６は第３撮影画像を撮影する。これらの第１カメラ２２、第２カメラ２４及び第３カメラ２６を含んで画像表示システム４０を簡易に構築することができる。
　さらに、本実施の形態に係る画像表示方法では、図５に示されように、まず車両後方左側の第１撮影画像、車両後方中央の第２撮影画像及び車両後方右側の第３撮影画像が取得される（Ｓ２）。一方、表示装置１６と運転席に着座状態の運転者の目の位置５０、５２、５４との距離Ｌ１、Ｌ２、Ｌ３が検出される（Ｓ５及び図４参照）。検出された距離Ｌ１、Ｌ２、Ｌ３に基づいて、第１撮影画像と第２撮影画像とを合成する第１繋ぎ目位置Ｂ１及び第２撮影画像と第３撮影画像とを合成する第２繋ぎ目位置Ｂ２が調整される（Ｓ７）。調整された第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２において第１撮影画像、第２撮影画像及び第３撮影画像が合成され（Ｓ８）、この合成された撮影画像は表示装置１６に表示される。
　このため、表示装置１６に表示される第１繋ぎ目位置Ｂ１及び第２繋ぎ目位置Ｂ２を、表示装置１６と運転者の目の位置５０、５２、５４との距離Ｌ１、Ｌ２、Ｌ３に基づいて運転者毎に調整することができる。
　［上記実施の形態の補足説明］
　本発明は、上記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲において変形可能である。
　例えば、本発明では、画像表示システムの表示装置がインストルメントパネルに装着された表示装置とされてもよい。この場合、表示装置は、テレビジョンモニタ、ナビゲーションモニタ、オーディオ等の操作パネルとしても使用される。
　また、本発明は、画像表示システムにおいて、車両側面方向や車両前方下側を撮影するカメラを更に備え、これらの撮影画像を表示装置に合成して表示してもよい。この場合、繋ぎ目位置は３以上とされる。
　１０　車両用インナーモニタ
　１６　表示装置
　２０　検出部
　２２　第１カメラ
　２４　第２カメラ
　２６　第３カメラ
　３０　車両
　４０　画像表示システム
　４２　画像取得部
　４４　画像合成部
　４８　位置調整部
　５０、５２、５４　目の位置
　Ｌ１、Ｌ２、Ｌ３　距離

Claims (7)

  1. 　複数の撮影画像を取得する画像取得部と、
    　前記画像取得部により取得された前記複数の撮影画像を合成する画像合成部と、
    　前記画像合成部により合成された前記複数の撮影画像を表示する表示装置と、
    　前記表示装置とユーザの目の位置との距離を検出する検出部と、
    　前記検出部により検出された前記距離に基づいて、前記複数の撮影画像を合成する繋ぎ目位置を調整する位置調整部と、
    　を備えた画像表示システム。
  2. 　車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像を取得する画像取得部と、
    　前記画像取得部により取得された前記第１撮影画像、前記第２撮影画像及び前記第３撮影画像を合成する画像合成部と、
    　前記画像合成部により合成された前記第１撮影画像、前記第２撮影画像及び前記第３撮影画像を表示する表示装置と、
    　前記表示装置と運転席に着座状態の運転者の目の位置との距離を検出する検出部と、
    　前記検出部により検出された前記距離に基づいて、前記第１撮影画像と前記第２撮影画像とを合成する第１繋ぎ目位置及び前記第２撮影画像と前記第３撮影画像とを合成する第２繋ぎ目位置を調整する位置調整部と、
    　を備えた画像表示システム。
  3. 　前記位置調整部は、
    　前記距離が基準値よりも長いとき、前記第１繋ぎ目位置と前記第２繋ぎ目位置との間隔を広く調整し、
    　前記距離が基準値よりも短いとき、前記第１繋ぎ目位置と前記第２繋ぎ目位置との間隔を狭く調整する
    　請求項２に記載の画像表示システム。
  4. 　前記検出部は、前記距離をリアルタイムに検出し、
    　前記位置調整部は、リアルタイムに検出された前記距離に基づいて、前記第１繋ぎ目位置及び前記第２繋ぎ目位置をリアルタイムに調整する
    　請求項２又は請求項３に記載の画像表示システム。
  5. 　前記表示装置は、車両用インナーモニタに設けられている
    　請求項２～請求項４のいずれか１項に記載の画像表示システム。
  6. 　前記第１撮影画像を撮影する第１カメラと、
    　前記第２撮影画像を撮影する第２カメラと、
    　前記第３撮影画像を撮影する第３カメラと、
    　を更に備えた請求項２～請求項５のいずれか１項に記載の画像表示システム。
  7. 　車両幅方向一端側の車両後方の第１撮影画像、車両幅方向中間の車両後方の第２撮影画像及び車両幅方向他端側の車両後方の第３撮影画像を取得するステップと、
    　表示装置と運転席に着座状態の運転者の目の位置との距離を検出するステップと、
    　検出された前記距離に基づいて、前記第１撮影画像と前記第２撮影画像とを合成する第１繋ぎ目位置及び前記第２撮影画像と前記第３撮影画像とを合成する第２繋ぎ目位置を調整するステップと、
    　調整された前記第１繋ぎ目位置及び前記第２繋ぎ目位置において前記第１撮影画像、前記第２撮影画像及び前記第３撮影画像を合成するステップと、
    　合成された前記第１撮影画像、前記第２撮影画像及び前記第３撮影画像を前記表示装置に表示するステップと、
    　を備えた画像表示方法。
PCT/JP2017/035996 2016-12-01 2017-10-03 画像表示システム及び画像表示方法 WO2018100870A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016234408A JP2018091969A (ja) 2016-12-01 2016-12-01 画像表示システム及び画像表示方法
JP2016-234408 2016-12-01

Publications (1)

Publication Number Publication Date
WO2018100870A1 true WO2018100870A1 (ja) 2018-06-07

Family

ID=62242424

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/035996 WO2018100870A1 (ja) 2016-12-01 2017-10-03 画像表示システム及び画像表示方法

Country Status (2)

Country Link
JP (1) JP2018091969A (ja)
WO (1) WO2018100870A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110271419A (zh) * 2019-06-28 2019-09-24 马瑞利汽车电子(广州)有限公司 一种汽车仪表显示调节装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH115488A (ja) * 1997-06-18 1999-01-12 Nissan Motor Co Ltd 車両周辺状況表示装置
US7057500B1 (en) * 2004-04-23 2006-06-06 Belloso Gregorio M Rear view monitoring system for motor vehicles
JP2010287163A (ja) * 2009-06-15 2010-12-24 Alpine Electronics Inc 車載用画像表示装置および画像のトリミング方法
JP2016060411A (ja) * 2014-09-19 2016-04-25 株式会社Ｊｖｃケンウッド 確認支援装置および確認支援システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH115488A (ja) * 1997-06-18 1999-01-12 Nissan Motor Co Ltd 車両周辺状況表示装置
US7057500B1 (en) * 2004-04-23 2006-06-06 Belloso Gregorio M Rear view monitoring system for motor vehicles
JP2010287163A (ja) * 2009-06-15 2010-12-24 Alpine Electronics Inc 車載用画像表示装置および画像のトリミング方法
JP2016060411A (ja) * 2014-09-19 2016-04-25 株式会社Ｊｖｃケンウッド 確認支援装置および確認支援システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110271419A (zh) * 2019-06-28 2019-09-24 马瑞利汽车电子(广州)有限公司 一种汽车仪表显示调节装置

Also Published As

Publication number Publication date
JP2018091969A (ja) 2018-06-14

Similar Documents

Publication Publication Date Title
JP4780385B2 (ja) 周辺監視システム
JP6247450B2 (ja) 運転支援装置
JP6136114B2 (ja) 車両用インナーミラーシステム
US10053010B2 (en) Dynamic perspective shifting system and method
JP5983693B2 (ja) 表示機能付きミラー装置および表示切替方法
CN101585347B (zh) 汽车后视系统及具有该后视系统的汽车
JP5051263B2 (ja) 車両用後方視認システム
JP2015027852A (ja) 運転支援装置
JP2007104538A (ja) 車両用死角映像表示装置
US7256688B2 (en) Drive support display apparatus
WO2018047400A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2018159017A1 (ja) 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2016055782A5 (ja)
JP2011234095A (ja) 車両用視認支援装置
KR20160056279A (ko) 차량용 시계 지원 장치
US20200039435A1 (en) Onboard camera system for eliminating a-pillar blind areas of a mobile vehicle and image processing method thereof
JP2009262666A (ja) 車両用ヘッドアップディスプレイ装置の調整方法
US20150085117A1 (en) Driving assistance apparatus
JP2010137697A (ja) 車両の運転支援装置
EP3337166B1 (en) Vehicular display apparatus and vehicular display method
WO2018100870A1 (ja) 画像表示システム及び画像表示方法
JP6504086B2 (ja) 車両
EP3184364B1 (en) Rear view device for a vehicle
JP2016060411A (ja) 確認支援装置および確認支援システム
JP2010188926A (ja) 車両後方表示装置および車両後方表示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17875360

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17875360

Country of ref document: EP

Kind code of ref document: A1