WO2021192445A1 - 表示装置、表示方法、及び車両 - Google Patents

表示装置、表示方法、及び車両 Download PDF

Info

Publication number
WO2021192445A1
WO2021192445A1 PCT/JP2020/046362 JP2020046362W WO2021192445A1 WO 2021192445 A1 WO2021192445 A1 WO 2021192445A1 JP 2020046362 W JP2020046362 W JP 2020046362W WO 2021192445 A1 WO2021192445 A1 WO 2021192445A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
information
transparency
vehicle
display device
Prior art date
Application number
PCT/JP2020/046362
Other languages
English (en)
French (fr)
Inventor
肇 本間
睦 日向
雅弘 姉崎
裕忠 柳沼
綾乃 河江
愛絵 廣澤
コウミ バク
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Priority to CN202080098839.7A priority Critical patent/CN115315614A/zh
Priority to DE112020006958.3T priority patent/DE112020006958T5/de
Publication of WO2021192445A1 publication Critical patent/WO2021192445A1/ja
Priority to US17/947,879 priority patent/US20230017486A1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Arrangement of adaptations of instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J1/00—Windows; Windscreens; Accessories therefor
    • B60J1/02—Windows; Windscreens; Accessories therefor arranged at the vehicle front, e.g. structure of the glazing, mounting of the glazing
    • B60K35/22—
    • B60K35/28—
    • B60K35/29—
    • B60K35/60—
    • B60K35/81—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • B60K2360/167—
    • B60K2360/176—
    • B60K2360/1868—
    • B60K2360/1876—
    • B60K2360/21—
    • B60K2360/27—
    • B60K2360/332—
    • B60K2360/347—
    • B60K2360/349—
    • B60K2360/785—

Definitions

  • This disclosure relates to display devices, display methods, and vehicles.
  • Patent Document 1 discloses a technique for displaying information according to the attributes and preferences of the occupants of the moving body on the window of the moving body.
  • the non-limiting examples of the present disclosure contribute to the provision of display devices, display methods, and vehicles that highly integrate information display and entertainment elements.
  • the display device includes a transmissive display unit provided on the moving body, a display control unit that changes the transparency of the transmissive display unit based on traveling information related to the traveling of the moving body, and a display control unit. To be equipped.
  • the vehicle according to the embodiment of the present disclosure is provided with the above display device.
  • the transparency of the transparent display unit provided in the window of the moving body is changed based on the step of inputting the running information related to the running of the moving body and the input running information.
  • the figure which shows the structural example of the display system which concerns on embodiment of this disclosure The figure which shows the hardware configuration example of the ECU of an in-vehicle device
  • the figure which shows the configuration example of the function of the ECU of an in-vehicle device The figure for demonstrating an example of the display position determination method by the display position determination part.
  • the figure for demonstrating an example of the display position determination method by the display position determination part The figure for demonstrating an example of the display position determination method by the display position determination part.
  • Sectional view of display device The figure which shows the state which changes the transparency according to a vehicle speed
  • Diagram showing the state of performing AR fitting, AR makeup, etc. according to the change in transparency A diagram showing a state in which an AR image or the like is superimposed and displayed on a landscape through a window by increasing the transparency of the display device.
  • Diagram showing the state of displaying information such as hotspots A diagram showing a state in which different images are displayed inside and outside the vehicle.
  • a technique for displaying information according to the attributes and preferences of the occupants of the moving body is disclosed in the window of the moving body.
  • the conventional technique only superimposes an image or the like on a landscape or the like seen through a window of a moving body, so that there is a problem that the entertainment property of the window of the moving body is poor. Therefore, according to the display device of the present disclosure, information display and entertainment elements can be highly integrated.
  • FIG. 1 is a diagram showing a configuration example of a display system according to an embodiment of the present disclosure.
  • the display system 1 includes an in-vehicle device 30 mounted on each of the plurality of mobile bodies 3 and a center server 5 capable of communicating with the in-vehicle device 30.
  • the moving body 3 is, for example, a vehicle such as a passenger car, a freight car, a shared car, a motorcycle, or a railroad car.
  • the moving body 3 is not limited to a vehicle, and may be an aircraft, amusement equipment, or the like. Hereinafter, the case where the moving body 3 is a vehicle will be described.
  • the in-vehicle device 30 includes a DCM31 (Data Communication Module), an ECU (Electronic Control Unit) 32, a GPS (Global Positioning System) module 33, an ACC (ACCessory) switch 34, a sensor 35, an image pickup device 36, a display device 14, and the like.
  • the in-vehicle device 30 also includes, for example, a car navigation device, an audio device, an inverter, a motor, auxiliary equipment, and the like.
  • the DCM31 is a communication device that bidirectionally communicates with the center server 5 through the communication network NW.
  • the communication network NW is, for example, a mobile phone network having a large number of base stations as terminals, a satellite communication network using a communication satellite, or the like.
  • the DCM 31 is connected to the ECU 32 in a communicable manner through the in-vehicle network CAN (Controller Area Network) 38, transmits various information to the external device of the vehicle in response to the request from the ECU 32, and is also an external device of the vehicle. The information transmitted from is relayed to the ECU 32.
  • the external device is, for example, a center server 5, a V2X (Vehicle to Everything) communication device, or the like.
  • V2X is a communication technology that connects a car and various things.
  • V2X has communication such as V2V (Vehicle to Vehicle: between vehicles), V2P (Vehicle to Pedestrian: between vehicle pedestrians), V2I (Vehicle to Infrastructure: between road vehicles), V2N (Vehicle to Network: between vehicle networks), etc. included.
  • the ECU 32 is an electronic control unit that performs various control processes related to a predetermined function in the vehicle, and is, for example, a motor ECU, a hybrid ECU, an engine ECU, or the like.
  • the ECU 32 collects vehicle information and inputs it to the DCM 31, for example.
  • Vehicle information includes vehicle position information, speed information, vehicle state information, imaging information, and the like.
  • the vehicle position information is information indicating the current position of the vehicle, for example, information indicating the latitude and longitude in which the own vehicle is traveling.
  • the vehicle position information is transmitted from, for example, a car navigation device, a GPS module 33, or the like.
  • the speed information is information indicating the current speed of the vehicle transmitted from the vehicle speed sensor.
  • the vehicle state information is, for example, a signal indicating whether the ACC switch 34 is in the ON state or the OFF state.
  • the vehicle state information includes the operating state of the wiper, the state of the defogger, the accelerator opening, the amount of depression of the brake, the amount of steering of the steering wheel, and the information acquired from ADAS (Advanced Driver-Assistance Systems).
  • ADAS Advanced Driver-Assistance Systems
  • the imaging information is information indicating the content of the image captured by the imaging device 36.
  • the imaging information includes time information indicating the time when the image was generated.
  • the image pickup device 36 is a camera including an image pickup device such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor).
  • the image pickup device 36 includes, for example, an internal image pickup device that images the inside of the vehicle, an external image pickup device that images the outside of the vehicle, and the like.
  • the internal imaging device is arranged at a position where, for example, the face of the occupant in the driver's seat, the passenger seat, etc. of the vehicle, the face of the occupant in the rear seat, etc. can be imaged.
  • the location is the dashboard of the vehicle, the instrument panel in the driver's seat, the ceiling of the vehicle, and the like.
  • the number of internal imaging devices is not limited to one, and a plurality of internal imaging devices may be provided in the vehicle.
  • the internal imaging device outputs imaging information indicating the captured vehicle interior image.
  • the external imaging device is an omnidirectional camera, a panoramic camera, etc. that captures the scenery around the vehicle.
  • the scenery around the vehicle is, for example, the scenery in front of the vehicle, the scenery on the side of the vehicle (the driver's door side of the vehicle or the passenger's door side of the vehicle), the scenery behind the vehicle, and the like.
  • the landscape includes, for example, a road on which a vehicle is traveling, an object existing on the road, a sidewalk facing the road, an object existing on the sidewalk, and the like.
  • Objects existing on the roadway are, for example, passenger cars, motorcycles, buses, taxis, buildings, structures (advertisements, road signs, traffic lights, telephone poles, etc.), people, animals, falling objects, and the like.
  • Objects present on the sidewalk are, for example, pedestrians, animals, bicycles, workpieces, animals, falling objects, and the like.
  • the external image pickup device is arranged at a position where, for example, an image of a landscape outside the vehicle can be taken.
  • the positions are front grille, side mirrors, ceiling, rear bumper, etc.
  • the external imaging device outputs imaging information indicating the captured external image of the vehicle.
  • the GPS module 33 receives a GPS signal transmitted from a satellite and positions the vehicle on which the GPS module 33 is mounted.
  • the GPS module 33 is communicably connected to the ECU 32 through the CAN 38, and the vehicle position information is transmitted to the ECU 32.
  • the ACC switch 34 is a switch that turns on / off the accessory power supply of the vehicle according to the operation of the occupant.
  • the ACC switch 34 turns on / off the accessory power supply according to the operation of the power switch provided on the instrument panel near the steering of the driver's seat in the vehicle interior.
  • the power switch is, for example, a button-type switch for operating an ignition (not shown).
  • the output signal of the ACC switch 34 is an example of information indicating the start and stop of the vehicle. Specifically, when the output signal of the ACC switch 34 changes from an OFF signal to an ON signal, it indicates the start of the vehicle, and when the output signal of the ACC switch 34 changes from an ON signal to an OFF signal, the vehicle stops. Represents.
  • the ACC switch 34 is communicably connected to the ECU 32 and the like through the CAN 38, and its status signal (ON signal / OFF signal) is transmitted to the ECU 32.
  • the sensor 35 includes a sensor that detects the voltage applied to the inverter, a sensor that detects the voltage applied to the motor, a sensor that detects the vehicle speed, a sensor that detects the accelerator opening, a sensor that detects the steering amount of the steering wheel, and a brake. It is a sensor that detects the amount of operation. Further, the sensor 35 may include, for example, an acceleration sensor for detecting the acceleration of the vehicle, an angular velocity sensor (gyro sensor) for detecting the angular velocity of the vehicle, and the like. The detection information output from the sensor 35 is taken into the ECU 32 through the CAN 38.
  • the display device 14 is a transparent liquid crystal display, a transparent organic EL (Electroluminescence) display, etc., which have light transmission and dimmability.
  • the display device 14 is provided, for example, on the window of the vehicle.
  • Vehicle windows are windshields, side glass, rear glass, and the like.
  • the display device 14 is provided on, for example, a window provided on the entrance / exit door of the railway vehicle, a window provided near the seat of the railway vehicle, an aircraft cockpit window, an aircraft cabin window, and the like. May be good.
  • a configuration example of the display device 14 will be described later.
  • the center server 5 is a server that provides various services by collecting information from a plurality of vehicles and distributing information to the occupants of the plurality of vehicles.
  • Various services include, for example, a car sharing service, an authentication key service, a trunk delivery service, a B2C car sharing service, and an advertisement distribution service.
  • the center server 5 includes a communication device 51 and an information processing device 52.
  • the communication device 51 is a communication device that bidirectionally communicates with each of a plurality of vehicles through the communication network NW under the control of the information processing device 52.
  • the information processing device 52 executes various control processes in the center server 5.
  • the information processing device 52 includes, for example, a server computer including a CPU (Central Processing Unit), a RAM (Random Access Memory), a ROM (Read Only Memory), an auxiliary storage device, an input / output interface, and the like.
  • FIG. 2 is a diagram showing a hardware configuration example of the ECU of the in-vehicle device.
  • the ECU 32 includes an auxiliary storage device 32A, a memory device 32B, a CPU 32C, and an interface device 32D. These are connected to each other by a bus line 32E.
  • the auxiliary storage device 32A is an HDD (Hard Disk Drive), a flash memory, or the like that stores files and data required for processing by the ECU 32.
  • HDD Hard Disk Drive
  • flash memory or the like that stores files and data required for processing by the ECU 32.
  • the memory device 32B reads and stores the program from the auxiliary storage device 32A when the program is instructed to start.
  • the CPU 32C executes a program stored in the memory device 32B, and realizes various functions of the ECU 32 according to the program.
  • the interface device 32D is an interface that connects, for example, the CPU 32C to the DCM31 via the CAN 38, and connects the image pickup device 36, the sensor 35, and the like to the DCM 31 via the CAN 38.
  • FIG. 3 is a diagram showing a configuration example of the function of the ECU of the in-vehicle device.
  • the memory device 32B includes an information display program 331 that realizes the functions of the CPU 32C, and a display information DB 332 that records the display information displayed on the display device 14.
  • the display information includes image information, text information, and the like displayed on the screen of the display device 14.
  • the image information includes, for example, an AR (Augmented Reality) image, a VR (Virtual Reality) image, an MR (Mixed Reality) image, an SR (Substitutional Reality) image, and the like.
  • AR is a technology that gives new recognition by superimposing information on objects in real space.
  • VR is a technology that builds reality in virtual space.
  • MR is a technology that builds reality by mixing real space and virtual space.
  • SR is a technology that seamlessly replaces information recorded in the past with information currently available.
  • the text information is, for example, textual information regarding explanations and guidance of buildings, estates, and the like.
  • the display information DB 332 includes, for example, a plurality of corresponding positions and display information associated with each of the plurality of corresponding positions.
  • the corresponding position is, for example, position information represented by latitude and longitude.
  • past image information, text information, future image information, and the like are associated with each of a plurality of corresponding positions.
  • the past image information is, for example, image information that reproduces a building, a landscape, or the like that existed in the past.
  • the future image information is image information that reproduces a building to be constructed in the future.
  • the CPU 32C of the ECU 32 includes a vehicle information transmission / reception unit 321, an imaging information management unit 323, a display position determination unit 22, and a display control unit 26.
  • the vehicle information transmission / reception unit 321 has a function of receiving vehicle information and a function of transmitting vehicle information to the center server 5.
  • the display position determination unit 22 determines the display position of the display information on the display device 14.
  • an example of a method of determining the display position of the display information will be described.
  • the display position determining unit 22 extracts the occupant's face from the vehicle interior image transmitted from the internal imaging device, for example, and based on the position and orientation of the occupant's face in the vehicle and the vehicle position, the display device 14 Identify the position of the occupant who visually recognizes the screen.
  • the display position determination unit 22 specifies, for example, the position where the screen of the display device 14 is provided in the vehicle as the screen position. For example, since the position of the screen of the display device 14 is determined when the display device 14 is installed in the vehicle, the vehicle identification information corresponding to the vehicle is associated with the information indicating the screen position of the display device 14. , The associated information is recorded in the memory device 32B or the like.
  • the vehicle identification information includes a vehicle identification number (VehicleIndexNumber), a vehicle ID (Identifier), and the like.
  • the display position determination unit 22 reads out the screen position of the display device 14 by referring to the memory device 32B at the time of starting the in-vehicle device 30 and using the vehicle identification information. Thereby, it can be specified that the screen of the display device 14 is provided on, for example, a windshield, a side glass, or the like.
  • the display position determining unit 22 can specify that the display device 14 is arranged in, for example, an area near the upper left portion of the windshield, an area near the lower right portion of the windshield, and the like.
  • the display position determination unit 22 specifies the display position of the display information in the scenery through the display screen. Specifically, the display position determination unit 22 extracts a building or the like from two frames of the vehicle exterior image continuously captured, and based on the difference in position between the two frames of the building or the like in the vehicle exterior image, the stereo camera. The distance from the external image pickup device to the building etc. is calculated according to the principle of. Subsequently, the display position determining unit 22 identifies the position of the building or the like based on the distance from the external imaging device to the building or the like and the vehicle position.
  • the display position determination unit 22 determines whether or not the display information associated with the position of the building or the like exists in the display information DB 332 by referring to the display information DB 332, and if so, the display information DB 332.
  • the position of a building or the like is specified as a display position of display information.
  • the display position determination unit 22 may be configured to specify the display position of the display information by another method. For example, the display position determining unit 22 calculates the latitude and longitude ranges corresponding to the landscape region included in the vehicle exterior image based on the vehicle position and the imaging range of the external imaging device. Then, the display position determination unit 22 specifies the display position of the display information by searching the display information DB 332 for the display position of the display information within the calculated latitude and longitude ranges.
  • the display position determination unit 22 determines the display position of the display information based on the specified current position of the occupant, the screen position, the display position of the display information, and the like. A specific example of a method of determining a display position of display information will be described with reference to FIG.
  • FIGS. 4 to 6 is a diagram for explaining an example of a method of determining a display position by the display position determination unit.
  • a display device 14 provided on the window of the vehicle, an occupant u who visually recognizes the display device 14 in the vehicle interior, and a position p are shown.
  • the position p is a position outside the vehicle to which the display information is associated in the scenery seen from the occupant u via the display device 14.
  • the display position determination unit 22 determines the display position of the display information on the display device 14 based on the position of the occupant u, the position of the display device 14, and the position p.
  • the position of the occupant u is referred to as the "occupant position”
  • the position of the display device 14 is referred to as the "screen position”
  • the position p to which the display information is associated is referred to as the "information corresponding position p”.
  • the display position determination unit 22 has a display information d1 in which the intersection where the dotted line connecting the information correspondence position p in the landscape and the occupant position intersects the display device 14 is associated with the information correspondence position p in the landscape. It is determined as the center point of the display position of.
  • the display position determination unit 22 generates a display command indicating that the display information d1 is to be displayed at the determined display position on the display device 14, and inputs the display command to the display control unit 26. At this time, the display position determination unit 22 displays the display information d1 in the mode corresponding to the positional relationship between the information corresponding position p in the landscape and the occupant position. In addition, the display position determination unit 22 adds to pay attention to the display information d1 of the display device 14 before displaying the display information d1 in the mode corresponding to the positional relationship between the information corresponding position p in the landscape and the occupant position.
  • the viewpoint may be guided by the sound and the display by producing a decorative display, a blinking operation, a sound effect, or the like.
  • the display position determining unit 22 connects the information correspondence position p in the landscape with the occupant position.
  • the intersection where the dotted line intersects the display device 14 is determined as the center point of the display position of the display information d2 associated with the information correspondence position p in the landscape.
  • the display position determination unit 22 generates a display command indicating that the display information d2 is to be displayed at the determined display position, and inputs the display command to the display control unit 26.
  • the display mode of the display information d2 displayed thereby is different from the display mode of the display information d1 of FIG.
  • the display position determination unit 22 has the display information d3 in which the intersection where the dotted line connecting the information correspondence position p in the landscape and the occupant position intersects the display device 14 is associated with the information correspondence position p in the landscape. Determined as the center point of the display position.
  • the display position determination unit 22 generates a display command indicating that the display information d3 is to be displayed at the determined display position on the display device 14, and inputs the display command to the display control unit 26.
  • the display mode of the display information d3 displayed thereby is different from the display mode of the display information d2 of FIG.
  • the display position determination unit 22 determines the position in the display device 14 that overlaps with the information correspondence position p in the landscape when viewed from the occupant u, based on the occupant position, the screen position, and the information correspondence position p. It is determined as the display position of the display information d1, d2, d3. Then, the display position determining unit 22 issues a display command indicating that the determined display position is to display the display information d1, d2, d3 in the mode corresponding to the positional relationship between the information corresponding position p in the landscape and the occupant position. It is generated and input to the display control unit 26.
  • the display information d1, d2, d3 in an aspect as if it exists can be displayed at the actual information corresponding position p seen through the display device 14, so that the display information d1, d2, d3 can be displayed. It is possible to increase the immersive feeling of the occupants.
  • the imaging information management unit 323 inputs the imaging information transmitted from the imaging device 36 for a certain period of time, and embeds the time and vehicle position information in the transmitted imaging information to create an imaging information table (imaging information DB 3292). create.
  • the display control unit 26 acquires information-corresponding position p, occupant position, display position, speed information, vehicle position information, vehicle state information, imaging information, and the like, and performs display processing on the display device 14.
  • FIG. 7 is a diagram showing a hardware configuration example and a function configuration example of the information processing device of the center server.
  • the information processing device 52 includes a CPU 16 and a storage unit 520.
  • the CPU 16 has a communication processing unit 5201 that transmits and receives various information to and from each of the plurality of vehicles, an information display object extraction unit 5205, a vehicle identification unit 5212, a command transmission unit 5213, a map matching unit 5214, and a probe information generation.
  • a unit 5215 is provided.
  • the storage unit 520 includes a map information DB 520A, a probe information DB 520B, an information display object DB 520F, a vehicle information DB 520H, and an imaging information DB 520J.
  • the information display object extraction unit 5205 extracts an information display object from the image pickup information of the image pickup apparatus 36 stored in the probe information DB 520B and included in the probe information of each of the plurality of vehicles, based on the known image recognition process. Then, the information display object extraction unit 5205 attaches identification information unique to the extracted information display object, and then links the identification information with meta information such as an image of the information display object and position information of the information display object. Then, it is saved in the information display object DB520F. As a result, in the information display object DB520F, in addition to the information related to the information display object registered in advance such as the signboard and the digital signage on which the advertisement information of the predetermined advertiser is displayed, the information display object extraction unit 5205 extracts the information.
  • the position information of the information display object attached as meta information may be the vehicle position information itself included in the same probe information as the imaging information that is the extraction source, or the information display for the vehicle calculated from the imaging information.
  • the vehicle position information may be in consideration of the relative position information of the object.
  • the information display object extraction unit 5205 does not save the information related to the extracted information display object in the information display object DB 520F when the extracted information display object is the same as the information display object already registered in the information display object DB 520F. ..
  • processing by the information display object extraction unit 5205 may be executed in real time in response to probe information sequentially received from each of the plurality of vehicles by the communication processing unit 5201, and may be periodically accumulated to some extent. It may be executed for unprocessed probe information.
  • the vehicle identification unit 5212 identifies a vehicle that has passed through a geographical position or area for which imaging information is to be collected, based on the vehicle position information.
  • three-dimensional advanced dynamic map information dynamic map
  • the field for which this dynamic map is created can be an example of a geographical location or area for which imaging information is to be collected.
  • the vehicle identification unit 5212 determines a vehicle that has passed the position or area by collating the vehicle position with the position or area to be collected. do. Then, the vehicle information including the position information of the vehicle that has been determined to pass is selected from the vehicle information transmitted from each of the plurality of in-vehicle devices 30, and the vehicle identification information included in the selected vehicle information is extracted. The vehicle identification unit 5212 that has extracted the vehicle identification information transfers the extracted vehicle identification information to the command transmission unit 5213.
  • the command transmission unit 5213 that has input the vehicle identification information from the vehicle identification unit 5212 is assigned to the vehicle to which the vehicle identification information is assigned among the vehicle groups that are communicably connected to the center server 5 via the communication network NW.
  • an imaging information request command is transmitted.
  • the imaging information delivered in response to the imaging information request command is associated with the data collection target area information and recorded in the storage unit 520 as the imaging information DB 520J.
  • the map matching unit 5214 identifies the road link where the vehicle is currently located based on the map information DB 520A and the vehicle position information.
  • the map information DB520A is composed of GIS (Geographic Information System) data and the like.
  • GIS data includes nodes corresponding to intersections, road links connecting nodes, lines corresponding to features such as buildings and roads, polygons, and the like.
  • identification information that is, a link ID is defined in advance for each of a plurality of road links constituting the road network included in the map information DB 520A.
  • the map matching unit 5214 identifies the link ID of the road link where the vehicle is currently located by referring to the map information DB 520A.
  • the probe information generation unit 5215 generates probe information including vehicle information transmitted from the vehicle, time information, and a road link specified by the map matching unit 5214 at predetermined intervals. Then, the probe information generation unit 5215 stores the generated probe information in the probe information DB 520B.
  • FIG. 8 is a cross-sectional view of the display device 14.
  • the display device 14 is provided on the vehicle, for example, by being attached to the inside or outside of the window of the vehicle.
  • the method of arranging the display device 14 on the vehicle is not limited to this, and for example, the display device 14 is fixed to the frame of the vehicle so that the screen of the display device 14 faces the inside or the outside of the window of the vehicle. It may be provided. Further, the display device 14 may be provided embedded in the window of the vehicle. Further, the display device 14 may be provided so as to cover the entire area of the window of the vehicle, or may be provided so as to cover a part of the window of the vehicle.
  • the display device 14 shown in FIG. 8 has, for example, a structure in which an electron transmission control film 14a is sandwiched between two transparent OLEDs 14b1 and transparent OLEDs 14b2.
  • transparent OLEDs when the two transparent OLEDs 14b1 and the transparent OLED14b2 are not distinguished, they are referred to as "transparent OLEDs".
  • the electron transmission control film 14a is an example of a transmission type display unit whose transparency can be changed.
  • the transparent OLED 14b1 and the transparent OLED 14b2 are examples of a display information display unit capable of displaying display information.
  • the electron transmission control film 14a controls, for example, the shade of the landscape seen through the window of the vehicle or the shade of the image displayed on the transparent OLED by changing the transparency (visible light transmittance). be able to.
  • the electron transmission control film 14a may be one that can uniformly change the transparency of the entire electron transmission control film 14a, or may be one that can change the transparency of a part of the electron transmission control film 14a.
  • As a method of changing the transparency of the electron transmission control film 14a for example, an electrochromic method, a gas chromic method capable of faster dimming control than the electrochromic method, and the like can be exemplified.
  • Non-Patent Document 1 When changing the transparency of a part of the electron transmission control film 14a, a local dimming technique or a technique disclosed in Non-Patent Document 1 can be used (Non-Patent Document 1: https://www.jst.go.jp). /pr/announce/20171017-3/index.html).
  • the transparent OLED 14b1 is an example of a transparent display directed toward the first end surface side of the electron transmission control film 14a.
  • the first end surface side of the electron transmission control film 14a is, for example, the inside of a window.
  • the transparent OLED 14b2 is an example of a transparent display directed to the second end surface side of the electron transmission control film 14a opposite to the first end surface side.
  • the second end surface side of the electron transmission control film 14a is the outside of the vehicle.
  • the display device 14 may be provided with a transparent liquid crystal display instead of the transparent OLED.
  • the display device 14 By providing the display device 14 with two transparent OLEDs, it is possible to display different display information on the inside and outside of the window.
  • the transparency of the electron transmission control film 14a is lowered (for example, the visible light transmittance is 30% or less).
  • the transparent OLED14b1 can display the screen during game play, and the transparent OLED14b2 can enlarge and display the character of the screen.
  • the transparent OLED 14b1 has a high transparency of the electron transmission control film 14a.
  • An exercise instruction video image can be displayed, and a moving image of a person exercising in the vehicle can be displayed on the transparent OLED 14b2.
  • the transparent OLED 14b2 displays a navigation screen such as a map, and the transparent OLED 14b2 is distributed to the figure of a person driving in a vehicle or from an advertising company. It is also possible to display the advertisement video to be displayed.
  • a map is displayed on the transparent OLED 14b1 of the display device 14 provided on the windshield in a state where the electron transmission control film 14a has high transparency (for example, the visible light transmittance is 80% or more).
  • Display the navigation screen such as. Then, by not displaying the display information on the transparent OLED 14b2 of the display device 14, the navigation screen can be superimposed on the scenery through the windshield.
  • the two transparent OLEDs may display different display information, or may display the same or similar display information to each other.
  • the transparent OLED 14b1 displays only the instruction video image
  • the transparent OLED 14b2 displays the instruction video image with the transparency of the electron transmission control film 14a lowered.
  • the moving image of the person who is exercising may be displayed on two screens.
  • the configuration example of the display device 14 is not limited to the illustrated example.
  • the display device 14 may be configured to include only one of the two transparent OLEDs.
  • the transparency of the display device 14 can be changed based on the traveling information related to the traveling of the moving body.
  • the traveling information related to the traveling of the moving body is, for example, vehicle speed (vehicle speed) information, weather information around the current position of the vehicle, current time information, vehicle state information, traffic information, information indicating the vehicle traveling mode, and the like. Further, the transparency of the display device 14 can be changed stepwise or continuously. An example of changing the transparency will be described below.
  • the display control unit 26 uses, for example, table information in which the vehicle speed and the transparency are associated with each other.
  • the table information may be pre-recorded in the memory device 32B or may be distributed from the center server 5.
  • the display control unit 26 that has input the vehicle speed information refers to the table information, and for example, sets the first transparency in the first speed region and lowers the first transparency in the second speed range higher than the first speed range. 2 Make it transparent.
  • the first transparency is, for example, a state in which the visible light transmittance is 80%.
  • the second transparency is, for example, a state in which the visible light transmittance is 30%.
  • the first speed region is, for example, a speed from 0 km / h to 80 km / h.
  • the second speed region is, for example, a speed of 80 km / h or more.
  • the automatic driving mode when the vehicle is traveling in the town in the first speed region, the driver can visually recognize the scenery through the window even when it is necessary to avoid obstacles. , You can immediately perform operations to avoid obstacles.
  • the automatic driving mode when the vehicle is traveling on a bypass road, highway, etc. in the second speed region, there are few scenes to avoid obstacles, etc., so the scenery through the window is blocked, and the occupant can play music. You can concentrate on watching and reading.
  • the transparency may be changed stepwise according to the vehicle speed, or may be continuously changed according to the vehicle speed.
  • the transparency may be continuously lowered as the vehicle speed increases from 0 km / h to 80 km / h, for example.
  • the display control unit 26 increases the transparency in the distant portion (upper part of the window) where the landscape change is small, and conversely, the transparency is high in the portion where the landscape change is large (lower part of the window). May be configured to be low.
  • the display control unit 26 can change the transparency by using, for example, the weather information distributed on the Internet, the operating state information of the wiper, the operating state information of the defogger, and the like.
  • the weather information distributed on the Internet for example, the weather information distributed on the Internet
  • the operating state information of the wiper for example, the operating state information of the defogger
  • the display control unit 26 increases the transparency of the region below the center of the display device 14, for example, and is higher than the center of the display device 14. Reduce the transparency of the upper area.
  • the display control unit 26 sets the overall visible light transmittance of the display device 14 to a high transparency such as around 80%.
  • the display control unit 26 that has input the time information refers to the table information and sets the overall transparency of the display device 14 to around 50% in order to reduce glare of the driver and the like in the early morning and in the daytime. do. Further, the display control unit 26 sets the overall transparency of the display device 14 to around 80% in order to secure the field of view at night and at midnight.
  • the display control unit 26 may be configured to compare the brightness inside the vehicle with the brightness outside the vehicle and lower the transparency only when the brightness inside the vehicle is brighter than the brightness outside the vehicle.
  • the comparison between the brightness inside the car and the brightness outside the car is the average brightness level before the white balance adjustment of the outside shooting device that shoots the outside of the car during automatic driving and the average brightness before the white balance adjustment of the internal shooting device that shoots the inside of the car. It is done by comparison with the level.
  • the table information When changing the transparency based on the vehicle condition information, for example, prepare a plurality of table information for each type of vehicle condition information, and in each table information, for example, the transparency for the accelerator opening, the amount of depression of the brake, the amount of steering of the steering wheel, etc. Are associated with each other.
  • the table information may be pre-recorded in the memory device 32B or may be distributed from the center server 5.
  • the display control unit 26 which has input information on the accelerator opening, sets the transparency of the region below the center of the display device 14 to around 80%, and from the center of the display device 14.
  • the transparency of the upper area is set to around 30%.
  • the display control unit 26 which has input information regarding the accelerator opening, sets the overall transparency of the display device 14 to around 80%, for example, when the accelerator opening is large. As a result, for example, when the vehicle travels on a steep uphill with continuous curves such as a mountain road, the display device 14 is not shielded from light, which contributes to safe driving of the driver and superimposes the passenger on the landscape. You can enjoy the display image displayed by
  • the transparency of the region is set to around 80%, and the transparency of the region above the center of the display device 14 is set to around 30%.
  • the display control unit 26 which has input information regarding the amount of depression of the brake, sets the overall transparency of the display device 14 to 80, for example, when the number of times the brake is depressed during a certain period of time is large or the amount of depression of the brake during a certain period of time is large. Set to around%. As a result, for example, when a vehicle travels in an urban area with heavy traffic, the display device 14 is not shielded from light, which contributes to safe driving of the driver and allows passengers to display a display image superimposed on the landscape. Can be enjoyed.
  • the transparency of the region is set to around 80%, and the transparency of the region above the center of the display device 14 is set to around 30%.
  • the display control unit 26 which has input information regarding the steering amount of the steering wheel, sets the overall transparency of the display device 14 to 80, for example, when the steering wheel is steered a large number of times during a certain period of time or the steering amount of the steering wheel is large during a certain period of time. Set to around%.
  • the display device 14 is not shielded from light, which contributes to safe driving of the driver and displays a display image superimposed on the landscape. You can enjoy such things.
  • the display control unit 26 may change the transparency of the display device 14 according to the congestion situation of the road. Specifically, according to the traffic information delivered when the vehicle is traveling on the highway, if the road on which the vehicle is traveling is congested for several minutes, the vehicle speed will decrease for a short time. The transparency is set to around 80% so that passengers can enjoy the scenery through the window. On the other hand, if there is a traffic jam of several tens of minutes or more on the road on which the vehicle is traveling, it is forced to drive at a low speed for a relatively long time.
  • the display control unit 26 sets the transparency to around 30% in order to entertain the driver of the vehicle with the displayed image rather than the scenery through the window where the change is scarce, and when the traffic jam is resolved, the transparency is set to 30. Change from around% to around 80%.
  • the display control unit 26 When changing the transparency based on the information indicating the vehicle driving mode, the display control unit 26 changes the transparency depending on, for example, a manual driving mode or an automatic driving mode (including a driving support mode, a semi-automatic driving mode, etc.). Further, when the manual driving mode is selected, the display control unit 26 may change the transparency depending on the eco-driving mode in which fuel-saving driving is possible, the sports driving mode in which active driving is possible, and the like. In addition to this, the display control unit 26 may be configured to reduce the transparency of all windows, for example, when the vehicle is used as a completely private space, depending on the passenger's choice.
  • the display device 14 may be a combination of the electron transmission control film 14a and the head-up display.
  • the information projected from the head-up unit is projected onto the display device 14 provided on the window via a reflection mirror or the like so that the driver can visually recognize the information as a virtual image.
  • the operation can be finely assisted. For example, when the vehicle is traveling on a snowy road, the display device 14 sets the transparency of a part of the electron transmission control film 14a on which the virtual image is projected to be lower than the transparency of the other areas. Therefore, the virtual image that overlaps the snowy road can be clearly displayed.
  • the head-up display may be a special film close to a half mirror attached to a surface close to the passenger in order to make it easier to see the virtual image of the head-up display, or a special film as an intermediate layer inside the glass.
  • a head-up display using a special film close to a half mirror becomes almost a mirror when the outside of the vehicle is darker than the inside of the vehicle. That is, when the outside of the vehicle is darker than the inside of the vehicle, the inside of the vehicle is reflected through the half mirror.
  • the head-up display is displayed. It is better to use the display part of the above to display the image with the transparency partially reduced.
  • a HOE Holographic Optical Element
  • diffracts only a specific wavelength can be exemplified, and in this case, the above-mentioned image adjustment becomes unnecessary.
  • the display control unit 26 may change the transparency by using, for example, the information distributed by V2X communication.
  • V2X communication not only vehicle-to-vehicle communication but also communication between a vehicle and a person having a communication terminal, communication between a vehicle and a roadside machine, and the like are possible.
  • V2X communication provides information indicating the state of traffic signals, traffic regulation information, traffic obstacle information (information on road surface freezing, road flooding, falling objects on the road, etc.), position information of moving objects existing around the vehicle, and the like.
  • NS the information distributed by V2X communication.
  • the display control unit 26 may display the message information prompting the warning on the display device 14.
  • the display control unit 26 displays, for example, an image of a moving object approaching the vehicle in real time on the display device 14 by using the imaging information obtained from the external imaging device, and also around the vehicle.
  • the speed at which the moving body approaches the vehicle is estimated from the position of the existing moving body, the amount of movement of the moving body per unit time, and the like.
  • the display control unit 26 displays message information prompting a warning on the display device 14.
  • the display control unit 26 can determine the flooded place, the flooded amount, the detour that bypasses the flooded place, and the like and display it on the display device 14 by cooperating with the navigation device. ..
  • FIG. 9 is a diagram showing a state in which the transparency is changed according to the vehicle speed. As shown in FIG. 9, when the vehicle is stopped or the vehicle speed is a certain speed or less, the transparency is high and the scenery of the scenery through the window 2 can be enjoyed. Further, when the vehicle starts traveling or when the vehicle speed exceeds a certain speed, the transparency of the display device 14 becomes low. As described above, the transparency may be changed stepwise or continuously according to the vehicle speed.
  • FIG. 10 is a diagram showing a state in which a VR image or the like is displayed according to a change in transparency.
  • a VR image or the like is displayed according to a change in transparency.
  • a predetermined application is executed to enjoy the VR image on the display device 14.
  • a dynamic map distributed from the center server 5 can be used for the generation of the VR image.
  • the real world corresponding to the current position of the vehicle can be displayed as virtual reality.
  • FIG. 11 is a diagram showing a state in which AR fitting, AR makeup, etc. are performed according to changes in transparency.
  • AR fitting a technique of synthesizing an image of clothes with an image captured by a user captured by using a smartphone or the like is used (see, for example, Japanese Patent Application Laid-Open No. 2013-101529).
  • Non-Patent Document 2 the technology disclosed in Non-Patent Document 2 can be used (Non-Patent Document 2: https://bae.dentsutec.co.jp/articles/makeup/).
  • the transparency is lowered in conjunction with the vehicle speed so that the scenery through the window 2 cannot be seen, and the predetermined application is executed to try on the AR and make the AR on the display device 14. You can enjoy such things.
  • level 4 automatic driving is realized, there is a possibility that demand for AR fitting, AR makeup, etc. in a moving vehicle may increase sharply, and the display device 14 according to the present embodiment meets such needs. Is useful.
  • FIG. 12 is a diagram showing a state in which an AR image or the like is superimposed and displayed on a landscape through a window by increasing the transparency of the display device.
  • the scenery for example, the mountaintop
  • the display position determination unit 22 is used.
  • the transparency of the display device 14 is set to be high.
  • FIG. 13 is a diagram showing a state in which information such as hot spots is displayed. As shown in FIG. 13, it is also possible to superimpose the bird view 15 on the display device 14. Further, when information such as the hot spot 18 displayed on the bird view 15 is selected, the detailed contents of the information may be displayed on the screen of the display device 14.
  • the information is, for example, information directly related to the interests of the occupants, and specifically, advertisements of a specific company (such as company A17), event information, and the like.
  • FIG. 14 is a diagram showing a state in which different images are displayed inside and outside the vehicle. As shown in the lower part of FIG. 14, for example, when a person in a vehicle during automatic driving enjoys a game in which a character moves in conjunction with the movement of a person, the transparency of the electron transmission control film 14a is lowered.
  • the game screen can be displayed on the transparent OLED14b1, and the image of a person in the vehicle can be enlarged and displayed on the transparent OLED14b2.
  • the area with low transparency can be set to, for example, the entire traveling path.
  • a bird view or the like may be displayed, and the screens shown in FIGS. 10, 11, 12, and the like may be displayed in a highly transparent area.
  • the display device 14 may have a structure in which, for example, a transparent OLED is sandwiched from both sides by a light-shielding film (for example, an electron transmission control film 14a).
  • a light-shielding film for example, an electron transmission control film 14a.
  • the display device 14 has high transparency of the light-shielding film when the light-shielding film is OFF, so that the scenery can be seen from the inside of the vehicle through the two transparent displays.
  • the light-shielding film is ON, the transparency of the light-shielding film is low, so that separate images can be displayed inside and outside the vehicle.
  • a state of competing with a playset using a riding chair and calories burned by exercise are displayed inside the car, and an AR image in which a character decorated by an occupant moves according to the movement of the playset outside the car. Can be displayed. This makes it possible to have fun inside the car and appeal to the outside of the car, which enhances entertainment for both the occupants inside the car and the spectators outside the car.
  • the display device 14 may make the transparency when the vehicle enters a specific place different from the transparency before entering the place. For example, when the display control unit 26 uses the map information to detect that the vehicle has entered the tunnel, the display control unit 26 maintains the transparency of the display device 14 provided on the windshield in a low state so that the image can be enjoyed. However, the driver may be assisted in safe driving by increasing the transparency of the display device 14 provided on the windshield. Further, when the display control unit 26 detects that the vehicle has exited the tunnel by using it for map information, the display device 14 provided on the windshield does not change the transparency of the display device 14 provided on the side glass. By increasing the transparency of the vehicle, it may be easier for the driver to perform an avoidance operation against a pedestrian or the like jumping out.
  • the image displayed on the display device 14 may be changed according to the traveling information related to the traveling described above. For example, when the display control unit 26 detects that the vehicle has arrived in front of a specific building by using it for map information, the display control unit 26 acquires the character set in this building via the center server 5. It may be displayed on the display device 14.
  • the display device 14 displays, for example, object information such as an advertisement or a character when the vehicle enters a predetermined area, and displays the object information on the time zone in which the moving body is moving, the attributes of the user, and the like. It may be changed according to the situation. As a result, for example, it is possible to suppress the display of an image that is not desired to be shown to children, and even in a dark state such as at night, a character or the like associated with a building or the like can be visually recognized via the display device 14.
  • object information such as an advertisement or a character
  • the display device 14 is provided with at least a transparent display unit provided in the window of the moving body, and is provided with a display information display unit that superimposes and displays display information on the transparent display unit. It does not have to be. For example, by increasing the transparency, people in the vehicle can enjoy the scenery through the window, and by decreasing the transparency, it is possible to build an environment where they can concentrate on reading and listening to music. In addition, by increasing the transparency, for example, it is possible to show a person outside the vehicle a person who enjoys exercising or playing a game in the vehicle. As described above, according to the display device 14 according to the present embodiment, the entertainment property of the window of the moving body can be enhanced by changing the transparency according to the traveling state and the like.
  • the transparency can be changed and the display information of the display information display unit can be changed based on the traveling information. It will be possible. As a result, the entertainment property of the window of the moving body can be further enhanced.
  • the display device 14 by changing the transparency, images and the like can be supplied between people inside and outside the vehicle, so that face-to-face communication between people inside and outside the vehicle can be realized. Can function as a communication tool.
  • FIG. 15 is a flowchart showing a display method of the display device.
  • the step (S1) of inputting the traveling information related to the traveling of the moving body and the transparency of the transmissive display unit provided on the moving body are determined based on the input traveling information. It includes a step (S2) of changing, and a step (S3) of displaying display information so as to overlap the transparent display unit whose transparency is changed based on the input travel information.
  • the display device 14 includes a transmissive display unit provided on the window of the moving body, and determines the transparency of the transmissive display unit based on the traveling information related to the traveling of the moving body. change. As a result, the transparency changes according to the traveling state and the like, so that the entertainment property of the window of the moving body can be enhanced.
  • the display device 14 may be configured to change the transparency based on the traveling information indicating the speed of the moving body.
  • the display device 14 may be configured to decrease the transparency as the speed increases, or may be configured to increase the transparency as the speed increases.
  • the display device 14 may be configured to change the transparency stepwise with respect to a change in speed, or may be configured to continuously change the transparency with respect to a change in speed. You may.
  • the display device 14 may be configured to change the transparency based on the traveling information indicating the position of the moving body.
  • the display device 14 may be configured so that the transparency when the moving body enters the predetermined position is different from the transparency before the moving body enters the position.
  • the display device 14 shows traveling information indicating the weather around the moving object, traveling information indicating a time zone in which the moving object is moving, traveling information indicating notification to the user, and user attributes.
  • the transparency may be changed based on the traveling information or the like.
  • the driving information indicating the notification to the user is, for example, an Earthquake Early Warning, information indicating the magnitude level of an earthquake, a storm warning, or the like.
  • the display device 14 maintains the transparency in a low state when the magnitude level of the earthquake is relatively low, and changes the transparency from the low state to the high state when the magnitude level of the earthquake is relatively high, thereby surrounding the vehicle. The situation can be visually recognized by the driver or the like.
  • the driving information indicating the user's attributes is information on the occupants of the traveling vehicle, such as user ID, gender, date of birth, occupation, place of residence, and the like.
  • the display control unit 26 recognizes the face of the occupant in the vehicle by using the image pickup information when the child is in the vehicle. Then, after determining whether or not the vehicle is a child, if the vehicle is a child, the character is displayed on the display device 14 when the vehicle approaches the point where the character exists by using the map information. be able to.
  • the vehicle speed is high, the direction of the place where the character is boarding, the distance to the place, and the like may be displayed in advance on the screen of the display device 14 as character information or the like.
  • the display device 14 may be configured to change the transparency of a part of the entire transparent display unit based on the traveling information.
  • the display device 14 includes a display information display unit that superimposes display information on the transparent display unit, changes the transparency based on the traveling information, and displays the display information of the display information display unit. May be configured to change.
  • the display information display unit of the display device 14 changes the transparency, changes the AR image to an MR image, changes the MR image to an AR image, changes the MR image to a VR image, and changes the VR image.
  • the image may be changed to an MR image, the VR image may be changed to an AR image, or the AR image may be changed to a VR image.
  • the display control unit 26 may be incorporated in the ECU 32 or the display device 14. Further, the display control unit 26 may be configured so that the transparency when the moving body is stopped is higher than the transparency when the moving body is traveling. Further, the display control unit 26 may be configured to change the transparency based on the traveling information indicating the attributes of the pedestrian.
  • the display device 14 is not limited to the above configuration example, and the light transmission rate is electronically applied to a transparent liquid crystal display, a transparent organic EL display, a transparent micro LED, a transparent screen film for forming a projector image, or the like.
  • a structure in which a changing light control film or the like is laminated and laminated may be used.
  • the film to be laminated on the glass is arranged within, for example, 90% of the outer shape of the glass that can be visually recognized from the inside of the vehicle. As a result, when a person is trapped in the vehicle, it is possible to suppress the scattering of the glass generated when the window is broken and the person escapes.
  • the display information display unit may be configured to change the transparency so that the scenery through the transparent display unit can be easily seen, or to change the transparency so that the scenery through the transparent display unit becomes difficult to see.
  • One embodiment of the present disclosure is suitable for display devices and vehicles.
  • Display system 3 Mobile 5 Center server 14 Display device 14a Electronic transmission control film 22 Display position determination unit 26 Display control unit 30 In-vehicle device 32A Auxiliary storage device 32B Memory device 32D Interface device 32E Bus line 33 GPS module 34 ACC switch 35 Sensor 36 Imaging device 51 Communication equipment 52 Information processing device 321 Vehicle information transmission / reception unit 323 Imaging information management unit 520 Storage unit 5201 Communication processing unit 5205 Information display object extraction unit 5212 Vehicle identification unit 5213 Command transmission unit 5214 Map matching unit 5215 Probe information generation unit d1 Display information d2 Display information d3 Display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

表示装置、表示方法、及び車両を開示する。この装置は、移動体の窓（２）に設けられる透過型表示部（１４）を備え、移動体の走行に関わる走行情報に基づき、透過型表示部（１４）の透明度を変更する。

Description

表示装置、表示方法、及び車両
　本開示は、表示装置、表示方法、及び車両に関する。
　特許文献１には、移動体の窓に、移動体の乗員の属性や嗜好に応じた情報を表示させる技術が開示される。
特開２０１８－１６９２４４号公報
　本開示の非限定的な実施例は、情報表示及びエンターテイメント要素を高度に融合する表示装置、表示方法、及び車両の提供に資する。
　本開示の一実施例に係る表示装置は、移動体に設けられる透過型表示部と、前記移動体の走行に関わる走行情報に基づき、前記透過型表示部の透明度を変更する表示制御部と、を備える。
　本開示の一実施例に係る車両は、上記表示装置を備える。
　本開示の一実施例に係る表示方法は、移動体の走行に関わる走行情報を入力するステップと、入力した前記走行情報に基づき、前記移動体の窓に設けられる透過型表示部の透明度を変更するステップと、入力した前記走行情報に基づき、透明度が変更される前記透過型表示部と重なるように表示情報を表示させるステップと、を含む。
　本開示の一実施例における更なる利点及び効果は、明細書及び図面から明らかにされる。かかる利点及び／又は効果は、いくつかの実施形態並びに明細書及び図面に記載された特徴によってそれぞれ提供されるが、１つ又はそれ以上の同一の特徴を得るために必ずしも全てが提供される必要はない。
本開示の実施の形態に係る表示システムの構成例に示す図 車載機のＥＣＵのハードウェア構成例を示す図 車載機のＥＣＵの機能の構成例を示す図 表示位置決定部による表示位置の決定方法の一例を説明するための図 表示位置決定部による表示位置の決定方法の一例を説明するための図 表示位置決定部による表示位置の決定方法の一例を説明するための図 センタサーバの情報処理装置のハードウェア構成例と機能の構成例を示す図 表示装置の断面図 車速に応じて透明度を変化させる状態を示す図 透明度の変化に合わせてＶＲ画像などを表示させる状態を示す図 透明度の変化に合わせてＡＲ試着、ＡＲメイクなどを行う状態を示す図 表示装置の透明度を高くして窓越しの風景にＡＲ画像などを重畳表示させる状態を示す図 ホットスポットなどの情報を表示させる状態を示す図 車両内外で互いに異なる画像を表示させる状態を示す図 表示装置の表示方法を示すフローチャート
　従来、移動体の窓に、移動体の乗員の属性や嗜好に応じた情報を表示させる技術が開示される。従来の技術は、移動体の窓越しに見える風景などに対して画像などを重ねるだけであるため、移動体の窓のエンターテインメント性が乏しいという課題がある。そこで、本開示の表示装置によれば、情報表示及びエンターテイメント要素を高度に融合することができる。
　以下に添付図面を参照しながら、本開示の好適な実施形態について詳細に説明する。尚、本明細書及び図面において、実質的に同一の機能を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　（実施の形態）
　図１は本開示の実施の形態に係る表示システムの構成例に示す図である。表示システム１は、複数の移動体３のそれぞれに搭載される車載機３０と、車載機３０との通信が可能なセンタサーバ５とを備える。移動体３は、例えば乗用車、貨物車、乗合車、自動二輪車、鉄道車両などの車両である。なお、移動体３は車両に限定されず、航空機、遊戯設備などでもよい。以下では、移動体３が車両の場合について説明する。
　車載機３０は、ＤＣＭ３１（Data Communication Module）、ＥＣＵ（Electronic Control Unit）３２、ＧＰＳ（Global Positioning System）モジュール３３、ＡＣＣ（ACCessory）スイッチ３４、センサ３５、撮像装置３６、表示装置１４などを含む。なお、車載機３０は、これら以外にも例えば、カーナビゲーション装置、オーディオ装置、インバータ、モータ、補機類なども含む。
　ＤＣＭ３１は、通信ネットワークＮＷを通じて、センタサーバ５と双方向で通信を行う通信機器である。通信ネットワークＮＷは、例えば、多数の基地局を末端とする携帯電話網、通信衛星を利用する衛星通信網などである。またＤＣＭ３１は、車載ネットワークであるＣＡＮ（Controller Area Network）３８を通じて、ＥＣＵ３２と相互に通信可能に接続され、ＥＣＵ３２からの要求に応じて各種情報を車両の外部機器に送信し、また車両の外部機器から送信された情報をＥＣＵ３２に中継する。外部機器は、例えば、センタサーバ５、Ｖ２Ｘ（Vehicle to Everything）通信機器などである。Ｖ２Ｘは、車と様々な物をつなぐ通信技術である。Ｖ２Ｘには、Ｖ２Ｖ（Vehicle to Vehicle：車車間）、Ｖ２Ｐ（Vehicle to Pedestrian：車歩行者間）、Ｖ２Ｉ（Vehicle to Infrastructure：路車間）、Ｖ２Ｎ（Vehicle to Network：車ネットワーク間）などの通信が含まれる。
　ＥＣＵ３２は、車両における所定の機能に関する各種制御処理を行う電子制御ユニットであり、例えばモータＥＣＵ、ハイブリッドＥＣＵ、エンジンＥＣＵなどである。ＥＣＵ３２は、例えば、車両情報を収集してＤＣＭ３１に入力する。
　車両情報は、車両位置情報、速度情報、車両状態情報、撮像情報などである。車両位置情報は、車両の現在位置を示す情報であり、例えば、自車両が走行している緯度及び経度を示す情報である。車両位置情報は、例えば、カーナビゲーション装置、ＧＰＳモジュール３３などから送信される。速度情報は、車速センサから送信される車両の現在速度を示す情報である。車両状態情報は、例えば、ＡＣＣスイッチ３４がＯＮ状態であるかＯＦＦ状態であるかを示す信号などである。車両状態情報は、この他にも、ワイパーの動作状態、デフォッガの状態、アクセル開度、ブレーキの踏み込み量、ハンドルの操舵量、ＡＤＡＳ（Advanced Driver-Assistance Systems）から取得される情報などである。ＡＤＡＳは、道路交通の利便性を高めるため、運転手の運転操作を支援するシステムである。撮像情報は、撮像装置３６により撮像される画像の内容を示す情報である。撮像情報には、画像が生成されたときの時刻を示す時刻情報が含まれる。
　撮像装置３６は、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子を備えるカメラである。撮像装置３６は、例えば、車両内部を撮像する内部撮像装置、車両外部を撮像する外部撮像装置などを含む。
　内部撮像装置は、例えば、車両の運転席、助手席などに存在する乗員の顔、後部座席に存在する乗員の顔などを撮像できる位置に配置される。当該位置は、車両のダッシュボード、運転席の計器パネル、車両の天井などである。内部撮像装置は、１つに限定されず、車両内に複数設けられてもよい。内部撮像装置は、撮像した車内画像を示す撮像情報を出力する。
　外部撮像装置は、車両周囲の風景を撮像する全方向カメラ、パノラマカメラなどである。車両周囲の風景は、例えば、車両の前方の風景、車両の側方（車両の運転席ドア側又は車両の助手席ドア側）の風景、車両の後方の風景などである。風景には、例えば、車両が走行中の車道、当該車道に存在する物、当該車道に面した歩道、当該歩道に存在する物などが含まれる。車道に存在する物は、例えば、乗用車、バイク、バス、タクシー、建築物、工作物（広告、道路標識、信号機、電信柱など）、人、動物、落下物などである。歩道に存在する物は、例えば、歩行者、動物、自転車、工作物、動物、落下物などである。外部撮像装置は、例えば、車外の風景を撮像できる位置に配置される。当該位置は、フロントグリル、サイドミラー、天井、リアバンパーなどである。外部撮像装置は、撮像した車外画像を示す撮像情報を出力する。
　ＧＰＳモジュール３３は、衛星から送信されるＧＰＳ信号を受信し、ＧＰＳモジュール３３が搭載される車両の位置を測位する。ＧＰＳモジュール３３は、ＣＡＮ３８を通じてＥＣＵ３２と通信可能に接続され、車両位置情報は、ＥＣＵ３２に送信される。
　ＡＣＣスイッチ３４は、乗員の操作に応じて、車両のアクセサリ電源をＯＮ／ＯＦＦするスイッチである。例えば、ＡＣＣスイッチ３４は、車室内の運転席のステアリング近傍のインストルメンタルパネルに設けられるパワースイッチに対する操作に応じて、アクセサリ電源をＯＮ／ＯＦＦする。パワースイッチは、例えば、図示しないイグニッションを操作するボタン型スイッチである。ＡＣＣスイッチ３４の出力信号は、車両の起動及び停止を表す情報の一例である。具体的には、ＡＣＣスイッチ３４の出力信号が、ＯＦＦ信号からＯＮ信号になった場合、車両の起動を表し、ＡＣＣスイッチ３４の出力信号が、ＯＮ信号からＯＦＦ信号になった場合、車両の停止を表す。ＡＣＣスイッチ３４は、ＣＡＮ３８を通じてＥＣＵ３２などと通信可能に接続され、その状態信号（ＯＮ信号／ＯＦＦ信号）は、ＥＣＵ３２に送信される。
　センサ３５は、インバータに印加される電圧を検出するセンサ、モータに印加される電圧を検出するセンサ、車速を検出するセンサ、アクセル開度を検出するセンサ、ハンドルの操舵量を検出するセンサ、ブレーキ操作量を検出するセンサなどである。また、センサ３５は、例えば、車両の加速度を検出する加速度センサ、車両の角速度を検出する角速度センサ（ジャイロセンサ）などを含みうる。センサ３５から出力される検出情報は、ＣＡＮ３８を通じてＥＣＵ３２に取り込まれる。
　表示装置１４は、光透過性を備えると共に調光性を備えた透明液晶ディスプレイ、透明有機ＥＬ（Electroluminescence）ディスプレイなどである。表示装置１４は、例えば、車両の窓に設けられる。車両の窓は、フロントガラス、サイドガラス、リアガラスなどである。なお、表示装置１４は、車両の窓以外にも、例えば、鉄道車両の乗降扉に設けられる窓、鉄道車両の座席付近に設けられる窓、航空機の操縦室窓、航空機の客室窓などに設けてもよい。表示装置１４の構成例については後述する。
　センタサーバ５は、複数の車両から情報を収集すると共に、複数の車両の乗員に対して情報配信を行うことによって、各種サービスを提供するサーバである。各種サービスは、例えばカーシェアリングサービス、認証キーサービス、トランク配送サービス、Ｂ２Ｃカーシェアサービス、広告配信サービスなどである。
　センタサーバ５は、通信機器５１及び情報処理装置５２を備える。通信機器５１は、情報処理装置５２による制御の下、通信ネットワークＮＷを通じて、複数の車両のそれぞれと双方向で通信を行う通信デバイスである。情報処理装置５２は、センタサーバ５における各種制御処理を実行する。情報処理装置５２は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、補助記憶装置、入出力インタフェースなどを含む、サーバコンピュータで構成される。
　次に図２を参照して、車載機３０のＥＣＵ３２のハードウェア構成について説明する。図２は車載機のＥＣＵのハードウェア構成例を示す図である。ＥＣＵ３２は、補助記憶装置３２Ａ、メモリ装置３２Ｂ、ＣＰＵ３２Ｃ、及びインタフェース装置３２Ｄを備える。これらは、互いにバスライン３２Ｅで接続される。
　補助記憶装置３２Ａは、ＥＣＵ３２の処理に必要なファイルやデータなどを格納する、ＨＤＤ（Hard Disk Drive）、フラッシュメモリなどである。
　メモリ装置３２Ｂは、プログラムの起動指示があった場合に、補助記憶装置３２Ａからプログラムを読み出して格納する。ＣＰＵ３２Ｃは、メモリ装置３２Ｂに格納されたプログラムを実行し、プログラムに従ってＥＣＵ３２の各種機能を実現する。
　インタフェース装置３２Ｄは、例えば、ＣＰＵ３２Ｃを、ＣＡＮ３８を介してＤＣＭ３１に接続し、また撮像装置３６、センサ３５などを、ＣＡＮ３８を介して、ＤＣＭ３１に接続するインタフェースである。
　次に図３を参照して車載機３０のＥＣＵ３２の機能について説明する。図３は車載機のＥＣＵの機能の構成例を示す図である。
　メモリ装置３２Ｂは、ＣＰＵ３２Ｃの機能を実現する情報表示プログラム３３１と、表示装置１４に表示される表示情報が記録される表示情報ＤＢ３３２とを備える。表示情報は、表示装置１４の画面に表示される画像情報、テキスト情報などである。画像情報は、例えばＡＲ（Augmented Reality）画像、ＶＲ（Virtual Reality）画像、ＭＲ（Mixed Reality）画像、ＳＲ（Substitutional Reality）画像などである。ＡＲは現実空間の物体などに情報を重ねることで新たな認識を与える技術である。ＶＲは仮想空間上にリアリティ（実在感）を構築する技術である。ＭＲは現実空間と仮想空間を混合した上で、リアリティを構築する技術である。ＳＲは過去を記録した情報と現在得られる情報とシームレスに置換する技術である。テキスト情報は、例えば、建造物、地所などの解説や案内などに関する文字情報である。
　表示情報ＤＢ３３２は、例えば、複数の対応位置と、複数の対応位置のそれぞれに対応付けられた表示情報とを含む。対応位置は、例えば、緯度及び経度によって表される位置情報である。表示情報ＤＢ３３２には、例えば、複数の対応位置のそれぞれに、過去の画像情報、テキスト情報、将来の画像情報などが対応付けられる。過去の画像情報は、例えば、過去に存在していた建造物、風景などを再現した画像情報である。将来の画像情報は、将来建設される建造物を再現した画像情報である。
　ＥＣＵ３２のＣＰＵ３２Ｃは、車両情報送受信部３２１、撮像情報管理部３２３、表示位置決定部２２、及び表示制御部２６を備える。
　車両情報送受信部３２１は、車両情報を受信する機能と、車両情報をセンタサーバ５に送信する機能を有する。
　表示位置決定部２２は、表示装置１４における表示情報の表示位置を決定する。以下、表示情報の表示位置の決定方法の一例を説明する。
　まず、表示位置決定部２２は、例えば、内部撮像装置から送信される車内画像から乗員の顔を抽出し、車内における乗員の顔の位置及び向きと、車両位置とに基づいて、表示装置１４の画面を視認する乗員の位置を特定する。
　次に、表示位置決定部２２は、例えば、車両において、表示装置１４の画面が設けられる位置を、画面位置として特定する。例えば、表示装置１４の画面は、表示装置１４が車両に設置されたときに、その位置が決まるため、車両に対応する車両識別情報に、表示装置１４の画面位置を示す情報を紐づけておき、紐付けた情報をメモリ装置３２Ｂなどに記録しておく。車両識別情報は、車両識別番号（Vehicle Index Number）、車両ＩＤ（Identifier）などである。表示位置決定部２２は、車載機３０の起動時に、メモリ装置３２Ｂを参照することにより、車両識別情報を利用して、表示装置１４の画面位置を読み出す。これにより、表示装置１４の画面が、例えばフロントガラス、サイドガラスなどに設けられていることを特定できる。
　なお、表示装置１４の画面が設けられる位置をより細かく設定することも可能である。例えば、フロントガラスの一部領域に表示装置１４が設けられる場合、フロントガラスを車内側から前方に向かって平面視した全体領域を、例えば直交座標の第１象限から第４象限のそれぞれの領域に分けて、各領域の識別情報を、車両識別情報に紐づけておき、紐付けた情報をメモリ装置３２Ｂなどに記録しておくことでもよい。これにより、表示位置決定部２２は、表示装置１４が、例えば、フロントガラスの左上部寄りの領域、フロントガラスの右下部寄りの領域などに配置されていることを特定できる。
　次に、表示位置決定部２２は、表示画面越しの風景中での、表示情報の表示位置を特定する。具体的には、表示位置決定部２２は、連続して撮像される２フレームの車外画像から建造物などを抽出し、車外画像における建造物などの２フレーム間における位置の差に基づき、ステレオカメラの原理によって外部撮像装置から建造物などまでの距離を算出する。続いて、表示位置決定部２２は、外部撮像装置から建造物などまでの距離と、車両位置とに基づいて、建造物などの位置を特定する。そして、表示位置決定部２２は、表示情報ＤＢ３３２を参照することにより、建造物などの位置が対応付けられた表示情報が、表示情報ＤＢ３３２に存在するか否かを判定し、存在する場合、その建造物などの位置を、表示情報の表示位置として特定する。
　なお、表示位置決定部２２は、他の方法によって、表示情報の表示位置を特定するように構成してもよい。例えば、表示位置決定部２２は、車両位置と外部撮像装置の撮像範囲とに基づいて、車外画像に含まれる風景の領域に対応する緯度及び経度の範囲を算出する。そして、表示位置決定部２２は、算出した緯度及び経度の範囲内における、表示情報の表示位置を、表示情報ＤＢ３３２から検索することによって、表示情報の表示位置を特定する。
　最後に、表示位置決定部２２は、特定した乗員の現在位置、画面位置、表示情報の表示位置などに基づき、表示情報の表示位置を決定する。図４を参照して、表示情報の表示位置を決定する方法の具体例を説明する。
　図４から図６のそれぞれは表示位置決定部による表示位置の決定方法の一例を説明するための図である。図４から図６のそれぞれには、車両の窓に設けられる表示装置１４と、車室内で表示装置１４を視認する乗員ｕと、位置ｐとが示される。位置ｐは、表示装置１４を介して乗員ｕから見える風景の中で、表示情報が対応付けられている車両外の位置である。
　図４では、例えば、車両内の乗員ｕが、車両の右側後部の窓の後方寄りの位置に存在し、この位置から、表示装置１４を介して、車両外右前方の位置ｐを見る場合について説明する。この場合、表示位置決定部２２は、乗員ｕの位置と、表示装置１４の位置と、位置ｐと基づいて、表示装置１４における表示情報の表示位置を決定する。
　以下、乗員ｕの位置を「乗員位置」、表示装置１４の位置を「画面位置」、表示情報が対応付けられた位置ｐを「情報対応位置ｐ」と称する。
　図４において、表示位置決定部２２は、風景中の情報対応位置ｐと乗員位置とを結ぶ点線が、表示装置１４に交わる交点を、風景中の情報対応位置ｐに対応付けられた表示情報ｄ１の表示位置の中心点として決定する。
　そして、表示位置決定部２２は、表示装置１４に対して、決定した表示位置に、表示情報ｄ１を表示させることを示す表示指令を生成して、表示制御部２６に入力する。このとき、表示位置決定部２２は、風景中の情報対応位置ｐと乗員位置との位置関係に応じた態様の表示情報ｄ１を、表示させる。なお、表示位置決定部２２は、風景中の情報対応位置ｐと乗員位置との位置関係に応じた態様の表示情報ｄ１を表示させる前に、表示装置１４の表示情報ｄ１に着目させるための加飾表示、点滅動作、効果音などを出すことで、音と表示により視点を誘導するように構成してもよい。
　次に、図５に示すように、乗員ｕが、車両の右側後部の窓の前方寄りの位置に移動した場合、表示位置決定部２２は、風景中の情報対応位置ｐと乗員位置とを結ぶ点線が、表示装置１４に交わる交点を、風景中の情報対応位置ｐに対応付けられた表示情報ｄ２の表示位置の中心点として決定する。
　そして、表示位置決定部２２は、決定した表示位置に表示情報ｄ２を表示させることを示す表示指令を生成して、表示制御部２６に入力する。これにより表示される表示情報ｄ２の表示態様は、図４の表示情報ｄ１の表示態様とは異なる。
　その後、車両が前進すると、風景中の情報対応位置ｐが相対的に車両の右後方へ移動する。この場合、表示位置決定部２２は、風景中の情報対応位置ｐと乗員位置とを結ぶ点線が、表示装置１４に交わる交点を、風景中の情報対応位置ｐに対応付けられた表示情報ｄ３の表示位置の中心点として決定する。
　そして、表示位置決定部２２は、表示装置１４に対して、決定した表示位置に、表示情報ｄ３を表示させることを示す表示指令を生成して、表示制御部２６に入力する。これにより表示される表示情報ｄ３の表示態様は、図５の表示情報ｄ２の表示態様とは異なる。
　このように、表示位置決定部２２は、乗員位置、画面位置、及び情報対応位置ｐに基づき、乗員ｕから見て風景中の情報対応位置ｐと重なる位置を、表示装置１４の中での、表示情報ｄ１，ｄ２，ｄ３の表示位置として決定する。そして、表示位置決定部２２は、決定した表示位置に、風景中の情報対応位置ｐと乗員位置との位置関係に応じた態様の表示情報ｄ１，ｄ２，ｄ３を表示させることを示す表示指令を生成して、表示制御部２６に入力する。
　これにより、表示装置１４を介して見える現実の情報対応位置ｐに、あたかも存在しているかのような態様の表示情報ｄ１，ｄ２，ｄ３を表示させることができるので、表示情報ｄ１，ｄ２，ｄ３に対する乗員の没入感を高めることができる。
　撮像情報管理部３２３は、撮像装置３６から送信される撮像情報を、一定時間入力しながら、送信される撮像情報に、時刻、車両位置情報を埋め込む形で、撮像情報テーブル（撮像情報ＤＢ３２９２）を作成する。
　表示制御部２６は、情報対応位置ｐ、乗員位置、表示位置、速度情報、車両位置情報、車両状態情報、撮像情報などを取得し、表示装置１４の表示処理を行う。
　次に図７を用いてセンタサーバ５の情報処理装置５２のハードウェア構成例などを説明する。図７はセンタサーバの情報処理装置のハードウェア構成例と機能の構成例を示す図である。情報処理装置５２は、ＣＰＵ１６、及び記憶部５２０を備える。
　ＣＰＵ１６は、複数の車両のそれぞれとの間での各種情報の送受信を行う通信処理部５２０１、情報表示物抽出部５２０５、車両特定部５２１２、指令送信部５２１３、マップマッチング部５２１４、及びプローブ情報生成部５２１５を備える。記憶部５２０は、地図情報ＤＢ５２０Ａ、プローブ情報ＤＢ５２０Ｂ、情報表示物ＤＢ５２０Ｆ、車両情報ＤＢ５２０Ｈ、及び撮像情報ＤＢ５２０Ｊを備える。
　情報表示物抽出部５２０５は、プローブ情報ＤＢ５２０Ｂに格納される、複数の車両のそれぞれのプローブ情報に含まれる撮像装置３６の撮像情報から、既知の画像認識処理に基づき、情報表示物を抽出する。そして、情報表示物抽出部５２０５は、抽出した情報表示物に固有の識別情報を付した上で、識別情報に、当該情報表示物の画像、当該情報表示物の位置情報などのメタ情報を紐づけて、情報表示物ＤＢ５２０Ｆに保存する。これにより、情報表示物ＤＢ５２０Ｆには、所定の広告主の広告情報が表示される立て看板やデジタルサイネージなどの予め登録される情報表示物に関する情報の他に、情報表示物抽出部５２０５により抽出された情報表示物に関する情報が登録される。従って、情報表示物が充実化され、乗員の利便性が向上する。なお、メタ情報として付される情報表示物の位置情報は、抽出元である撮像情報と同じプローブ情報に含まれる車両位置情報そのものであってもよいし、撮像情報から算出される車両に対する情報表示物の相対的な位置情報を考慮した車両位置情報であってもよい。また、情報表示物抽出部５２０５は、抽出した情報表示物が、既に情報表示物ＤＢ５２０Ｆに登録される情報表示物と同じである場合、抽出した情報表示物に関する情報を情報表示物ＤＢ５２０Ｆに保存しない。また、情報表示物抽出部５２０５による当該処理は、通信処理部５２０１により複数の車両のそれぞれから逐次受信されるプローブ情報に対応し、リアルタイムに実行されてもよいし、定期的に、ある程度溜まった未処理のプローブ情報に対して実行されてもよい。
　車両特定部５２１２は、車両位置情報に基づき、撮像情報の収集対象の地理的な位置又はエリアを通過した車両を特定する。なお、車両の自動運転に利用される３次元の高度な動的地図情報（ダイナミックマップ）の作成には、実際に車両が走行するフィールドを撮像した最新の画像が必要になる。このダイナミックマップの作成対象となるフィールドが、撮像情報の収集対象の地理的な位置又はエリアの一例になり得る。
　車両特定部５２１２は、例えば、複数の車両のそれぞれから送信される車両位置情報を入力したとき、収集対象の位置又はエリアに車両位置を照合することによって、当該位置又はエリアを通過した車両を判定する。そして、複数の車載機３０のそれぞれから送信される車両情報の中から、通過を判定した車両の位置情報を含む車両情報を選択し、選択した車両情報に含まれる車両識別情報を抽出する。車両識別情報を抽出した車両特定部５２１２は、抽出した車両識別情報を指令送信部５２１３に転送する。
　車両特定部５２１２からの車両識別情報を入力した指令送信部５２１３は、通信ネットワークＮＷを介して、センタサーバ５と通信可能に接続される車両群のうち、当該車両識別情報が割り当てられた車両に対して、撮像情報要求指令を送信する。撮像情報要求指令に対して配信された撮像情報は、データ収集対象エリア情報と対応付けられて、撮像情報ＤＢ５２０Ｊとして記憶部５２０に記録される。
　マップマッチング部５２１４は、地図情報ＤＢ５２０Ａと、車両位置情報とに基づき、車両が現在位置する道路リンクを特定する。地図情報ＤＢ５２０Ａは、ＧＩＳ（Geographic Information System）データなどにより構成される。ＧＩＳデータは、交差点に対応するノード、ノード間を接続する道路リンク、建物や道路などの地物に対応するライン、ポリゴンなどを含む。例えば、地図情報ＤＢ５２０Ａに含まれる、道路網を構成する複数の道路リンクのそれぞれには、予め識別情報、すなわちリンクＩＤが規定されている。マップマッチング部５２１４は、地図情報ＤＢ５２０Ａを参照することによって、車両が現在位置する道路リンクのリンクＩＤを特定する。
　プローブ情報生成部５２１５は、所定周期ごとに、車両から送信された車両情報と、時刻情報と、マップマッチング部５２１４により特定された道路リンクとを含む、プローブ情報を生成する。そして、プローブ情報生成部５２１５は、生成したプローブ情報を、プローブ情報ＤＢ５２０Ｂに格納する。
　次に図８などを参照して、表示装置１４の構成例と、表示装置１４の表示例について説明する。
　図８は表示装置１４の断面図である。表示装置１４は、例えば、車両の窓の内側又は外側に貼り付ける形で、車両に設けられる。なお、表示装置１４の車両への配置方法は、これに限定されず、例えば、表示装置１４を車両のフレームに固定して、表示装置１４の画面を車両の窓の内側又は外側と向き合うように設けてもよい。また表示装置１４は、車両の窓の中に埋め込み形で設けてもよい。また、表示装置１４は、車両の窓の全体領域を覆うように設けてもよいし、車両の窓の一部領域を覆うように設けてもよい。
　図８に示す表示装置１４は、例えば、電子透過制御フィルム１４ａを、２つの透明ＯＬＥＤ１４ｂ１及び透明ＯＬＥＤ１４ｂ２で挟み込んだ構造を有する。以下では、２つの透明ＯＬＥＤ１４ｂ１及び透明ＯＬＥＤ１４ｂ２を区別しない場合、「透明ＯＬＥＤ」と称する。電子透過制御フィルム１４ａは、透明度を変更可能な透過型表示部の一例である。透明ＯＬＥＤ１４ｂ１及び透明ＯＬＥＤ１４ｂ２は、表示情報を表示可能な表示情報表示部の一例である。
　電子透過制御フィルム１４ａは、例えば、透明度（可視光透過率）を変更することにより、車両の窓越しに見える風景の濃淡を制御したり、透明ＯＬＥＤに表示される画像の濃淡を制御したりすることができる。電子透過制御フィルム１４ａは、電子透過制御フィルム１４ａの全体の透明度を均一に変更できるものでもよいし、電子透過制御フィルム１４ａの一部領域の透明度を変更できるものでもよい。電子透過制御フィルム１４ａの透明度を変更する方法としては、例えば、エレクトロクロミック方式、エレクトロクロミック方式よりも高速な調光制御が可能なガスクロミック方式などを例示できる。電子透過制御フィルム１４ａの一部領域の透明度を変更する場合、ローカルディミング技術や、非特許文献１に開示される技術を利用できる（非特許文献１：https://www.jst.go.jp/pr/announce/20171017-3/index.html）。
　透明ＯＬＥＤ１４ｂ１は、電子透過制御フィルム１４ａの第１端面側に向けられる透明ディスプレイの一例である。電子透過制御フィルム１４ａの第１端面側は、例えば、窓の内側である。透明ＯＬＥＤ１４ｂ２は、電子透過制御フィルム１４ａの第１端面側とは反対側の第２端面側に向けられる透明ディスプレイの一例である。電子透過制御フィルム１４ａの第２端面側は、車両の外側である。なお、表示装置１４は、透明ＯＬＥＤに代えて、透明液晶ディスプレイを備えるものでもよい。
　表示装置１４は、２つの透明ＯＬＥＤを備えることにより、窓の内側と外側で互いに異なる表示情報を表示させることができる。
　例えば、自動運転中の車両内で、ゲームを楽しむ乗員がいる場合、図８の左側に示すように、電子透過制御フィルム１４ａの透明度を低くした状態（例えば可視光透過率が３０％以下）で、透明ＯＬＥＤ１４ｂ１に例えばゲームのプレイ中の画面を表示させ、透明ＯＬＥＤ１４ｂ２に当該画面のキャラクタを拡大して表示させることができる。
　また、自動運転中の車両内で、ヨガ、シャドーボクシングなどのエクササイズを楽しむ乗員がいる場合、図８の右側に示すように、電子透過制御フィルム１４ａの透明度を高くした状態で、透明ＯＬＥＤ１４ｂ１にはエクササイズのインストラクションビデオ映像を表示させて、透明ＯＬＥＤ１４ｂ２には車両内で運動中の人の動画像を表示させることができる。
　また、電子透過制御フィルム１４ａの透明度を低くした状態で、透明ＯＬＥＤ１４ｂ２には、地図などのナビゲーション画面を表示させて、透明ＯＬＥＤ１４ｂ２には、車両内の運転中の人の姿や、広告会社から配信される広告映像などを表示させることも可能である。
　また、図８の右側に示すように、電子透過制御フィルム１４ａの透明度を高くした状態（例えば可視光透過率が８０％以上）で、フロントガラスに設けられた表示装置１４の透明ＯＬＥＤ１４ｂ１に、地図などのナビゲーション画面を表示させる。そして、当該表示装置１４の透明ＯＬＥＤ１４ｂ２に、表示情報を表示させないことで、フロントガラス越しの風景に、ナビゲーション画面を重ねて表示させることができる。
　また、２つの透明ＯＬＥＤには、それぞれに異なる表示情報を表示させてもよいし、互いに同一又は類似の表示情報を表示させてもよい。例えば、自動運転中の車両内で、エクササイズを楽しむ乗員がいる場合、電子透過制御フィルム１４ａの透明度を低くした状態で、透明ＯＬＥＤ１４ｂ１に、インストラクションビデオ映像のみを表示させ、透明ＯＬＥＤ１４ｂ２に、インストラクションビデオ映像と運動中の人の動画像とを２画面表示させてもよい。
　なお、表示装置１４の構成例は、図示例に限定されるものではない。例えば、表示装置１４は、２つの透明ＯＬＥＤの内、一方の透明ＯＬＥＤのみ備えるように構成してもよい。
　表示装置１４の透明度は、移動体の走行に関わる走行情報に基づき変えることができる。移動体の走行に関わる走行情報は、例えば、車両の速度（車速）情報、車両の現在位置周囲の天候情報、現在時間情報、車両状態情報、交通情報、車両走行モードを示す情報などである。また、表示装置１４の透明度は、段階的に変えることも、連続的に変えることもできる。以下では、透明度を変える例について説明する。
　車速に基づき透明度を変更する場合、表示制御部２６は、例えば、車速と透明度を対応付けたテーブル情報を用いる。当該テーブル情報は、メモリ装置３２Ｂに予め記録されたものでもよいし、センタサーバ５から配信されるものでもよい。車速情報を入力した表示制御部２６は、当該テーブル情報を参照し、例えば、第１速度領域では第１透明度にして、第１速度範囲よりも高い第２速度範囲では、第１透明度より低い第２透明度にする。第１透明度は、例えば可視光透過率が８０％の状態である。第２透明度は、例えば可視光透過率が３０％の状態である。第１速度領域は、例えば時速０ｋｍ/ｈから時速８０ｋｍ/ｈまでの速度である。第２速度領域は、例えば時速８０ｋｍ/ｈ以上の速度である。これにより、例えば、自動運転モードで、第１速度領域で車両が町中を走行しているときに、障害物などの回避を必要とする場合でも、運転手は窓越しの風景を視認できるため、障害物などを避ける操作を即座に行うことができる。また、自動運転モードで、車両がバイパス道路、高速道路などを第２速度領域で走行中の場合、障害物などを避ける場面が少ないため、窓越しの風景などが遮られることで、乗員が音楽鑑賞や読書などに集中できる。なお、透明度は、車速に応じて段階的に変更させてもよいし、車速に応じて連続的に変更させてもよい。例えば、第１速度領域では、例えば車速が時速０ｋｍ/ｈから時速８０ｋｍ/ｈまで高くなるに従って、透明度が連続的に低くなるようにしてもよい。また、車速に基づき透明度を変更する場合、表示制御部２６は、風景変化が少ない遠方部分（窓の上部）は、透明度を高くし、逆に風景変化が多い部分（窓の下部）は、透明度を低くするように構成してもよい。
　天候に基づき透明度を変更する場合、表示制御部２６は、例えば、インターネットで配信される天気情報、ワイパーの動作状態情報、デフォッガの動作状態情報などを利用して、透明度を変更することができる。例えば、晴天時は、表示装置１４の全体の透明度を５０％付近に設定することで、運転手及び同乗者が眩しさを感じることなく、表示画像への没頭感を高めることができる。また、曇天時は、晴天時に比べて視認性が低下するため、表示制御部２６は、例えば、表示装置１４の中心よりも下側の領域の透明度を高くして、表示装置１４の中心よりも上側の領域の透明度を低くする。これにより、表示装置１４の一部領域が遮光されつつ、残りの領域が遮光されずに車外状況を確認できる状態となる。従って、雲の乱反射による眩しさを軽減しながら、交通状況を把握できるため、歩行者などの飛び出しなどに対して回避操作が可能である。また同乗者は表示画像などを楽しむことができる。また、雨天時は、曇天時よりも視認性が低下するため、表示制御部２６は、例えば、表示装置１４の全体の可視光透過率を８０％付近など、高い透明度に設定する。これにより、雨により視界が悪い状況でも、信号機、交差点、周囲の車両などが把握し易くなり、歩行者などの飛び出しなどに対して回避操作が可能である。また、フロントガラスに設けられる表示装置１４の透明度が高い状態でも、サイドガラスなどに設けられる表示装置１４の透明度を低い状態にすることで、同乗者は表示画像などを楽しむことができる。
　時刻に基づき透明度を変更する場合、例えば、早朝、日中、夜間、深夜などのそれぞれの時間帯と、これらの時間帯毎に異なる複数の透明度とを対応付けたテーブル情報を利用することで、時刻に応じて、透明度を変更することができる。当該テーブル情報は、メモリ装置３２Ｂに予め記録されたものでもよいし、センタサーバ５から配信されるものでもよい。例えば、時刻の情報を入力した表示制御部２６は、当該テーブル情報を参照し、早朝と日中では運転手などの眩しさを軽減するため、表示装置１４の全体の透明度を５０％付近に設定する。また、表示制御部２６は、夜間と深夜では、視界を確保するため、表示装置１４の全体の透明度を８０％付近に設定する。
　また、表示制御部２６は、車内の明るさと車外の明るさを比較して、車内の明るさが車外よりも明るいときにのみ、透明度を低くするように構成してもよい。車内の明るさと車外の明るさとの比較は、自動運転の際に車外を撮影する車外撮影装置のホワイトバランス調整前の平均輝度レベルと、車内を撮影する内部撮影装置のホワイトバランス調整前の平均輝度レベルとの比較により行われる。
　車両状態情報に基づき透明度を変更する場合、例えば、車両状態情報の種別毎にテーブル情報を複数用意し、それぞれのテーブル情報に、例えばアクセル開度、ブレーキの踏み込み量、ハンドルの操舵量などに対する透明度が対応付けられている。当該テーブル情報は、メモリ装置３２Ｂに予め記録されたものでもよいし、センタサーバ５から配信されるものでもよい。
　アクセル開度に関する情報を入力した表示制御部２６は、例えば、アクセル開度が小さい場合、表示装置１４の中心よりも下側の領域の透明度を８０％付近に設定し、表示装置１４の中心よりも上側の領域の透明度を３０％付近に設定する。これにより、例えば、高速道路などを一定速度で車両が巡航する場面では、表示装置１４の一部領域が遮光されるため、運転手に対する太陽光などの眩しさを軽減できる。また同乗者は、透明度が低い領域に表示される画像などを楽しむことができる。
　アクセル開度に関する情報を入力した表示制御部２６は、例えば、アクセル開度が大きい場合、表示装置１４の全体の透明度を８０％付近に設定する。これにより、例えば、山道のようにカーブが連続する急勾配の上り坂などを車両が走行する場合、表示装置１４が遮光されないため、運転手の安全運転に寄与すると共に、同乗者は風景に重畳して表示される表示画像などを楽しむことができる。
　ブレーキの踏み込み量に関する情報を入力した表示制御部２６は、例えば、一定時間中のブレーキの踏み込み回数が少なく、又は一定時間中のブレーキの踏み込み量が少ない場合、表示装置１４の中心よりも下側の領域の透明度を８０％付近に設定し、表示装置１４の中心よりも上側の領域の透明度を３０％付近に設定する。これにより、例えば、高速道路などを車両が巡航する場面では、表示装置１４の一部領域が遮光されるため、運転手に対する太陽光などの眩しさを軽減できる。また同乗者は残りの領域に表示される画像などを楽しむことができる。
　ブレーキの踏み込み量に関する情報を入力した表示制御部２６は、例えば、一定時間中のブレーキの踏み込み回数が多く、又は一定時間中のブレーキの踏み込み量が多い場合、表示装置１４の全体の透明度を８０％付近に設定する。これにより、例えば、交通量が多い市街地を車両が走行する場面では、表示装置１４が遮光されないため、運転手の安全運転に寄与すると共に、同乗者は風景に重畳して表示される表示画像などを楽しむことができる。
　ハンドルの操舵量に関する情報を入力した表示制御部２６は、例えば、一定時間中のハンドルの操舵回数が少なく、又は一定時間中のハンドルの操舵量が小さい場合、表示装置１４の中心よりも下側の領域の透明度を８０％付近に設定し、表示装置１４の中心よりも上側の領域の透明度を３０％付近に設定する。これにより、例えば、高速道路などを車両が巡航する場面では、表示装置１４の一部領域が遮光されるため、運転手に対する太陽光などの眩しさを軽減できる。また同乗者は残りの領域に表示される画像などを楽しむことができる。
　ハンドルの操舵量に関する情報を入力した表示制御部２６は、例えば、一定時間中のハンドルの操舵回数が多く、又は一定時間中のハンドルの操舵量が大きい場合、表示装置１４の全体の透明度を８０％付近に設定する。これにより、例えば、交通量が多い市街地を車両が走行する場面では、表示装置１４が遮光されないため、運転手の安全運転に寄与すると共に、同乗者は、風景に重畳して表示される表示画像などを楽しむことができる。
　交通情報に基づき透明度を変更する場合、表示制御部２６は、道路の混雑状況に応じて、表示装置１４の透明度を変更してもよい。具体的には、高速道路を走行時に配信される交通情報により、車両の走行中の道路で数分程度の渋滞が発生している場合、車速が短時間低下するため、表示制御部２６は、同乗者などが窓越しの風景を楽しむことができるように、透明度を８０％付近に設定する。一方、車両の走行中の道路で数十分以上の渋滞が発生している場合、比較的長い時間で低速での運転が強いられる。この場合、表示制御部２６は、変化が乏しい窓越しの風景よりも、表示画像により車両の運転手などを楽しませるため、透明度を３０％付近に設定し、渋滞が解消したとき、透明度を３０％付近から８０％付近に変更させる。
　車両走行モードを示す情報に基づき透明度を変更する場合、表示制御部２６は、例えば、手動運転モードか自動運転モード（運転支援モード、半自動運転モードなどを含む）かによって、透明度を変更させる。また表示制御部２６は、手動運転モードが選択されているときに、省燃費走行が可能なエコ運転モード、アクティブな運転が可能なスポーツ運転モードなどによって、透明度を変更させてもよい。この他にも、表示制御部２６は、乗客の選択により、例えば車両を完全なプライベート空間として利用する場合は、全ての窓の透明度を下げるように構成してもよい。
　なお、表示装置１４は、電子透過制御フィルム１４ａをヘッドアップディスプレイに組み合わせたものでもよい。この場合、ヘッドアップユニットから投射される情報を、反射ミラーなどを介して、窓に設けられた表示装置１４に投影することで、虚像として運転手に視認させることができる。このとき、電子透過制御フィルム１４ａの透明度を走行状態に応じて変化させることにより、運転を細やかにアシストできる。例えば、車両が雪道を走行している場合、表示装置１４は、電子透過制御フィルム１４ａの全体の内、虚像が投射される一部領域の透明度を、他の領域の透明度よりも低くすることで、雪道と重なる虚像を鮮明に表示させることができる。
　なお、ヘッドアップディスプレイには、ヘッドアップディスプレイの虚像を視認しやすくするために、ハーフミラーに近い特殊なフィルムを乗客に近い面に貼り合わせたものや、ガラス内部に中間層として特殊なフィルム状のものを挟んだものなどがある。特に、ハーフミラーに近い特殊なフィルムを用いたヘッドアップディスプレイは、車外が車内よりも暗い状態では、ほぼミラーとなる。すなわち、車外が車内よりも暗い状況下では、車内の様子がハーフミラー越しに映り込んでしまう。そのため、上記の透明ＯＬＥＤの輝度を高めることにより、透明ＯＬＥＤのコントラストは悪化するが、黒レベル（黒輝度）を上げるなどの映像調整、或いは、黒を含まない映像としたうえで、ヘッドアップディスプレイの表示部のみを、部分的に透過率を下げて画像の表示を行うといった使い方の方がよい。上述のハーフミラーの特性に近い特殊なフィルム以外には、特定波長のみを回折するＨＯＥ（Holographic Optical Element）を例示でき、この場合、上述の映像調整は不要となる。
　この他にも、表示制御部２６は、例えばＶ２Ｘ通信で配信される情報を利用して、透明度を変更させてもよい。Ｖ２Ｘ通信では、車車間通信だけでなく、車両と通信端末を有する人との通信、車両と路側機との通信などが可能である。Ｖ２Ｘ通信では、交通信号の状態を示す情報、交通規制情報、交通障害情報（路面凍結、道路冠水、道路上の落下物などに関する情報）、車両周囲に存在する移動物体の位置情報などが提供される。これらの情報を利用することで、例えば、表示装置１４を搭載した車両が右折する際、当該車両の後方から当該車両に接近する自転車、バイクなどの移動体が存在するとき、表示装置１４に当該移動体をリアルタイムに表示させることも可能である。また、当該移動体が車両までの距離が設定距離よりも小さくなると、表示制御部２６は、サイドガラスなどに設けられる電子透過制御フィルム１４ａの透明度を、低い状態から高い状態に切り替えることで、運転手に当該移動体を視認させることもできる。また、表示制御部２６は、車両への移動体の衝突を回避できないと判断される場合、警告を促すメッセージ情報を、表示装置１４に表示してもよい。具体的には、表示制御部２６は、例えば、外部撮像装置から得られる撮像情報を利用することにより、車両に接近する移動体の画像を、表示装置１４にリアルタイムに表示させると共に、車両周囲に存在する移動体の位置、当該移動体の単位時間当たりの移動量などから、移動体が車両に接近する速度を推定する。そして、表示制御部２６は、推定速度から、車両への移動体の衝突を回避できないと判断される場合、警告を促すメッセージ情報を、表示装置１４に表示する。また、表示制御部２６は、冠水情報を受信した場合、ナビゲーション装置と連携することにより、冠水場所、冠水量、冠水場所を迂回する迂回路などを割り出して、表示装置１４に表示させることもできる。
　次に図９などを参照して、表示装置１４の画面における透明度の変更例、表示情報の表示例を説明する。
　図９は車速に応じて透明度を変化させる状態を示す図である。図９に示すように、車両が停車しているとき又は車速が一定速度以下のときには、透明度が高く、窓２越しの風景の風景を楽しむことができる。また、車両が走行を開始したとき又は車速が一定速度を超えたときには、表示装置１４の透明が低くなる。なお、透明度は、前述したように、車速に応じて段階的に又は連続的に変化させてもよい。
　図１０は透明度の変化に合わせてＶＲ画像などを表示させる状態を示す図である。図１０に示すように、車速に連動して透明度を低下させることにより、窓２越しの風景が見えない状態にして、所定のアプリケーションが実行させることにより、表示装置１４上でＶＲ画像を楽しむことができる。なお、ＶＲ画像の生成には、例えばセンタサーバ５から配信されるダイナミックマップを利用することができる。これにより、車両の現在位置に対応した現実世界を仮想現実として表示できる。
　図１１は透明度の変化に合わせてＡＲ試着、ＡＲメイクなどを行う状態を示す図である。ＡＲ試着には、スマートフォンなどを利用して撮像したユーザの撮像画像に、衣服の画像を合成する技術が利用される（例えば特開2013-101529号公報参照）。ＡＲメイクには、例えば非特許文献２に開示される技術を利用できる（非特許文献２：https://bae.dentsutec.co.jp/articles/makeup/）。図１１に示すように、車速に連動して透明度を低下させることにより、窓２越しの風景が見えない状態にして、所定のアプリケーションが実行させることにより、表示装置１４上でＡＲ試着、ＡＲメイクなどを楽しむことができる。特にレベル４の自動運転が実現されると、移動中の車内でのＡＲ試着、ＡＲメイクなど需要が急激に高まる可能性があり、このようなニーズに対して本実施の形態に係る表示装置１４が有用である。
　図１２は表示装置の透明度を高くして窓越しの風景にＡＲ画像などを重畳表示させる状態を示す図である。図１２に示すように、例えば車両が徐行又は停車しているとき、表示位置決定部２２で決定された表示情報の表示位置を利用することで、運転手などが視認している風景（例えば山頂）に、ＡＲ画像３を表示させることができる。このとき表示装置１４の透明度が高い状態に設定されている。
　図１３はホットスポットなどの情報を表示させる状態を示す図である。図１３に示すように、表示装置１４にバードビュー１５を重畳表示させることも可能である。さらに、バードビュー１５に表示されるホットスポット１８などの情報が選択されたときに、表示装置１４の画面上に当該情報の詳細内容を表示させてもよい。当該情報は、例えば、乗員の興味に直結する情報であり、具体的には、特定の企業（Ａ社１７など）の広告、イベント情報などである。
　図１４は車両内外で互いに異なる画像を表示させる状態を示す図である。図１４の下側に示すように、例えば、自動運転中の車両内の人が、人の動きに連動してキャラクタが動くゲームを楽しむ場合、電子透過制御フィルム１４ａの透明度を低くした状態で、透明ＯＬＥＤ１４ｂ１にはゲーム画面を表示させて、透明ＯＬＥＤ１４ｂ２には車両内の人の画像を拡大して表示させることができる。
　この他にも、例えば、表示装置１４の一部領域の透明度を、その周囲の領域の透明度よりも低くさせるローカルディミングの機能を利用することで、透明度が低い領域には、例えば走行経路全体のバードビューなどを表示し、透明度が高い領域には、図１０、図１１、図１２などに示される画面を表示させてもよい。
　さらに、表示装置１４は、は、例えば透明ＯＬＥＤを両面から遮光フィルム（例えば電子透過制御フィルム１４ａ）で挟み込んだ構造のものでもよい。このように構成した場合、表示装置１４は、遮光フィルムがＯＦＦのとき、遮光フィルムの透明度が高いので、２枚の透明ディスプレイ越しに、車内から風景を望むことができる。一方、遮光フィルムがＯＮのとき、遮光フィルムの透明度が低いので、車内と車外に別々の画像を表示できる。このとき、車内には、例えば乗馬椅子を用いた遊具で競技している様子や、運動による消費カロリーなどを表示し、車外には、乗員がデコレーションしたキャラクタが遊具の動きに合わせた動くＡＲ画像を表示することが可能となる。これによって、車内での楽しみや車外へのアピールが可能となり、車内の乗員と車外の観客の双方にとってのエンターテイメント性が高まる。
　表示装置１４は、例えば、車両が特定の場所に進入したときの透明度を、当該場所に進入する前の透明度と異ならせてもよい。例えば、表示制御部２６は、地図情報に利用することで、車両がトンネルに進入したことを検出したとき、サイドガラスに設けられる表示装置１４の透明度を低い状態に維持することによって、画像を楽しめる状態にしつつ、フロントガラスに設けられる表示装置１４の透明度を高くすることによって、運転手の安全運転をアシストするようにしてもよい。また、表示制御部２６は、地図情報に利用することで、車両がトンネルから出たことを検出したとき、サイドガラスに設けられる表示装置１４の透明度は変えずに、フロントガラスに設けられる表示装置１４の透明度を高くすることにより、歩行者などの飛び出しなどに対して、運転手が回避操作を行い易くしてもよい。
　また、表示装置１４に表示される画像は、前述した走行に関わる走行情報に応じて、変化させてもよい。例えば、表示制御部２６は、地図情報に利用することで、車両が特定の建物の前に到着したことを検出したとき、この建物に設定されるキャラクタを、センタサーバ５経由で取得して、表示装置１４に表示させてもよい。
　また、表示装置１４は、例えば、車両が所定エリアに進入したときに、広告、キャラクタなどのオブジェクト情報を表示させて、このオブジェクト情報を、移動体が移動している時間帯、ユーザの属性などに応じて、変更してもよい。これにより、例えば、子供に見せたくない画像の表示を抑制でき、また、夜間のように街全体が暗い状態でも、建物などに紐付けられたキャラクタなどを表示装置１４に介して視認できる。
　なお、本実施の形態に係る表示装置１４には、移動体の窓に設けられる透過型表示部を少なくとも備えるものとし、透過型表示部に表示情報を重畳して表示させる表示情報表示部を備えていなくてもよい。例えば、透明度を高めることによって、車両内の人は窓越しの風景を楽しむことができ、透明度を低めることによって、読書や音楽鑑賞に集中できる環境を構築できる。また、透明度を高めることによって、例えば、車両外の人に対して、車内でエクササイズやゲームなどを楽しむ人の姿を見せつけるなどの演出も可能になる。このように、本実施の形態に係る表示装置１４によれば、透明度が走行状態などに応じて変化することで、移動体の窓のエンターテインメント性を高めることができる。ただし、透過型表示部に表示情報を重畳して表示させる表示情報表示部をさらに備えることによって、例えば、走行情報に基づき、透明度を変更すると共に、表示情報表示部の表示情報を変更することが可能になる。これにより、移動体の窓のエンターテインメント性をより一層高めることができる。
　また、眼鏡越しに周囲の人を出現可能なヘッドマウントディスプレイなどを装着した人は、個人のみが映像などを楽しめるが、眼鏡越しに出現する周囲の人と映像などを共有できず、眼鏡越しに出現する周囲の人とのフェイスツーフェイスのコミュニケーションがとれずに、楽しみを共有できない。本実施の形態に係る表示装置１４によれば、透明度の変化させることにより、車両内外の人同士でも映像などを供給できるため、車両内外の人同士のフェイスツーフェイスでのコミュニケーションを実現可能な新たなコミュニケーションツールとして機能し得る。
　図１５は表示装置の表示方法を示すフローチャートである。本実施の形態に係る表示装置１４の表示方法は、移動体の走行に関わる走行情報を入力するステップ（Ｓ１）と、入力した走行情報に基づき、移動体に設けられる透過型表示部の透明度を変更するステップ（Ｓ２）と、入力した走行情報に基づき、透明度が変更される透過型表示部と重なるように表示情報を表示させるステップ（Ｓ３）と、を含む。
　以上に説明したように、本実施の形態に係る表示装置１４は、移動体の窓に設けられる透過型表示部を備え、移動体の走行に関わる走行情報に基づき、透過型表示部の透明度を変更する。これにより、透明度が走行状態などに応じて変化することで、移動体の窓のエンターテインメント性を高めることができる。
　また本実施の形態に係る表示装置１４は、移動体の速度を示す走行情報に基づき、透明度を変更するように構成してもよい。
　また本実施の形態に係る表示装置１４は、速度が高くなるに従い、透明度を低めるように構成してもよいし、速度が高くなるに従い、透明度を高めるように構成してもよい。
　また本実施の形態に係る表示装置１４は、速度の変化に対して透明度を段階的に変更するように構成してもよいし、速度の変化に対して透明度を連続的に変更するように構成してもよい。
　また本実施の形態に係る表示装置１４は、移動体の位置を示す走行情報に基づき、透明度を変更するように構成してもよい。
　また本実施の形態に係る表示装置１４は、移動体が所定の位置が進入したときの透明度を、移動体が当該位置に進入する前の透明度と異ならせるように構成してもよい。
　また本実施の形態に係る表示装置１４は、移動体の周囲の天候を示す走行情報、移動体が移動している時間帯を示す走行情報、ユーザに対する報知を示す走行情報、ユーザの属性を示す走行情報などに基づき、透明度を変更するように構成してもよい。
　ユーザに対する報知を示す走行情報は、例えば、緊急地震速報、地震のマグニチュードレベルを表す情報、暴風警報などである。例えば、表示装置１４は、地震のマグニチュードレベルが比較的低い場合、透明度を低い状態に維持させ、地震のマグニチュードレベルが比較的高い場合、透明度を低い状態から高い状態に変更させることで、車両周囲の状況を運転手などに視認させることができる。
　ユーザの属性を示す走行情報は、走行する車両の乗員に関する情報であり、例えばユーザＩＤ、性別、生年月日、職業、居住地などである。例えば、地図上の特定の地点にアニメキャラクタの情報が埋め込まれている場合、子供が車両に搭乗しているときには、表示制御部２６は、撮像情報を用いて、車両内の乗員の顔を認識し、さらに子供であるか否かを判定した上で、子供である場合には、地図情報に利用してキャラクタが存在する地点に車両が近づいたときに、そのキャラクタを表示装置１４に表示させることができる。
　また車両の速度によっては、そのキャラクタの場所を短時間で通過してしまう場合がある。そのため、車速が高いときには、予めキャラクタが搭乗する場所の方角、その場所までの距離などを、表示装置１４の画面上に文字情報などで表示させてもよい。
　また本実施の形態に係る表示装置１４は、走行情報に基づき、透過型表示部の全体の内、一部領域の透明度を変更するように構成してもよい。
　また本実施の形態に係る表示装置１４は、透過型表示部に表示情報を重畳して表示させる表示情報表示部を備え、走行情報に基づき、透明度を変更すると共に、表示情報表示部の表示情報を変更するように構成してもよい。
　また本実施の形態に係る表示装置１４の表示情報表示部は、透明度の変更と共に、ＡＲ画像をＭＲ画像に変更し、ＭＲ画像をＡＲ画像に変更し、ＭＲ画像をＶＲ画像に変更し、ＶＲ画像をＭＲ画像に変更し、ＶＲ画像をＡＲ画像に変更し、又は、ＡＲ画像をＶＲ画像に変更するように構成してもよい。
　なお、表示制御部２６は、ＥＣＵ３２に組み込んでもよいし、表示装置１４に組み込んでもよい。また表示制御部２６は、移動体の停止時の透明度を移動体の走行中の透明度よりも高くするように構成してもよい。また表示制御部２６は、歩行者の属性を示す走行情報に基づき、透明度を変更するように構成してもよい。
　なお、表示装置１４は、上記の構成例に限定されず、透明液晶ディスプレイ、或いは、透明有機ＥＬディスプレイ、透明マイクロＬＥＤ、プロジェクタ映像を結像する透明スクリーンフィルムなどに、光透過率が電子的に変化する調光フィルムなどが、積層して張り合わせられた構造のものでもよい。ガラスに積層するフィルムは、車内から視認できるガラス外形の例えば９０％以内に配置する。これにより、人が車内で閉じ込められた際に、窓を割って脱出する際に発生するガラスの飛散抑制も兼ねることができる。
　また表示情報表示部は、透過型表示部越しの風景が見やすくなるように透明度を変更し、又は透過型表示部越しの風景が見にくくなるように透明度を変更するように構成しても良い。
　以上、図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。また、開示の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
　以上、本開示の具体例を詳細に説明したが、これらは例示にすぎず、請求の範囲を限定するものではない。請求の範囲に記載の技術には、以上に例示した具体例を様々に変形、変更したものが含まれる。
　２０２０年３月２３日出願の特願２０２０－０５０７５７の日本出願に含まれる明細書、図面および要約書の開示内容は、全て本願に援用される。
　本開示の一実施例は、表示装置及び車両に好適である。
　１　表示システム
　３　移動体
　５　センタサーバ
　１４　表示装置
　１４ａ　電子透過制御フィルム
　２２　表示位置決定部
　２６　表示制御部
　３０　車載機
　３２Ａ　補助記憶装置
　３２Ｂ　メモリ装置
　３２Ｄ　インタフェース装置
　３２Ｅ　バスライン
　３３　ＧＰＳモジュール
　３４　ＡＣＣスイッチ
　３５　センサ
　３６　撮像装置
　５１　通信機器
　５２　情報処理装置
　３２１　車両情報送受信部
　３２３　撮像情報管理部
　５２０　記憶部
　５２０１　通信処理部
　５２０５　情報表示物抽出部
　５２１２　車両特定部
　５２１３　指令送信部
　５２１４　マップマッチング部
　５２１５　プローブ情報生成部
　ｄ１　表示情報
　ｄ２　表示情報
　ｄ３　表示情報

Claims (20)

  1. 　移動体に設けられる透過型表示部と、
    　前記移動体の走行に関わる走行情報に基づき、前記透過型表示部の透明度を変更する表示制御部と、
    　を備える表示装置。
  2. 　前記移動体の速度を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  3. 　前記速度が高くなるに従い、前記透明度を低める請求項２に記載の表示装置。
  4. 　前記速度が高くなるに従い、前記透明度を高める請求項２に記載の表示装置。
  5. 　前記速度の変化に対して前記透明度を段階的に変更する請求項３に記載の表示装置。
  6. 　前記速度の変化に対して前記透明度を連続的に変更する請求項３に記載の表示装置。
  7. 　前記移動体の停止時の前記透明度を、前記移動体の走行中の前記透明度よりも高くする請求項２に記載の表示装置。
  8. 　前記移動体の位置を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  9. 　前記移動体が所定の位置が進入したときの前記透明度を、前記移動体が当該位置に進入する前の前記透明度と異ならせる請求項２に記載の表示装置。
  10. 　前記移動体の周囲の天候を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  11. 　前記移動体が移動している時間帯を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  12. 　ユーザに対する報知を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  13. 　ユーザの属性を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  14. 　歩行者の属性を示す前記走行情報に基づき、前記透明度を変更する請求項１に記載の表示装置。
  15. 　前記走行情報に基づき、前記透過型表示部の全体の内、一部領域の透明度を変更する請求項１に記載の表示装置。
  16. 　前記透過型表示部に表示情報を重畳して表示させる表示情報表示部を備え、
    　前記走行情報に基づき、前記透明度を変更すると共に、前記表示情報表示部の表示情報を変更する請求項１に記載の表示装置。
  17. 　前記表示情報表示部は、前記透明度の変更と共に、ＡＲ画像をＭＲ画像に変更し、ＭＲ画像をＡＲ画像に変更し、ＭＲ画像をＶＲ画像に変更し、ＶＲ画像をＭＲ画像に変更し、ＶＲ画像をＡＲ画像に変更し、又は、ＡＲ画像をＶＲ画像に変更する請求項１６に記載の表示装置。
  18. 　前記表示情報表示部は、前記透過型表示部越しの風景が見やすくなるように前記透明度を変更し、又は透過型表示部越しの風景が見にくくなるように前記透明度を変更する請求項１に記載の表示装置。
  19. 　請求項１に記載の表示装置を備えた車両。
  20. 　移動体の走行に関わる走行情報を入力するステップと、
    　入力した前記走行情報に基づき、前記移動体に設けられる透過型表示部の透明度を変更するステップと、
    　入力した前記走行情報に基づき、透明度が変更される前記透過型表示部と重なるように表示情報を表示させるステップと、
    　を含む表示方法。
PCT/JP2020/046362 2020-03-23 2020-12-11 表示装置、表示方法、及び車両 WO2021192445A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202080098839.7A CN115315614A (zh) 2020-03-23 2020-12-11 显示装置、显示方法及车辆
DE112020006958.3T DE112020006958T5 (de) 2020-03-23 2020-12-11 Anzeigevorrichtung, Anzeigeverfahren und Fahrzeug
US17/947,879 US20230017486A1 (en) 2020-03-23 2022-09-19 Display device, display method, and vehicle

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-050757 2020-03-23
JP2020050757A JP7426655B2 (ja) 2020-03-23 2020-03-23 表示装置、表示方法、及び車両

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/947,879 Continuation US20230017486A1 (en) 2020-03-23 2022-09-19 Display device, display method, and vehicle

Publications (1)

Publication Number Publication Date
WO2021192445A1 true WO2021192445A1 (ja) 2021-09-30

Family

ID=77848487

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/046362 WO2021192445A1 (ja) 2020-03-23 2020-12-11 表示装置、表示方法、及び車両

Country Status (5)

Country Link
US (1) US20230017486A1 (ja)
JP (1) JP7426655B2 (ja)
CN (1) CN115315614A (ja)
DE (1) DE112020006958T5 (ja)
WO (1) WO2021192445A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102397658B1 (ko) * 2021-09-30 2022-05-13 주식회사 유닉트 광고용 투명 디스플레이 장치
WO2023119596A1 (ja) * 2021-12-23 2023-06-29 日本電信電話株式会社 制御装置、制御方法、及びプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140063064A1 (en) * 2012-08-31 2014-03-06 Samsung Electronics Co., Ltd. Information providing method and information providing vehicle therefor
JP2014202859A (ja) * 2013-04-03 2014-10-27 パイオニア株式会社 広告表示装置、広告表示方法並びに広告表示用プログラム及び情報記録媒体
JP2016088187A (ja) * 2014-10-31 2016-05-23 三菱電機株式会社 車両用透過表示装置
JP2019188901A (ja) * 2018-04-20 2019-10-31 トヨタ自動車株式会社 表示制御装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013101529A (ja) 2011-11-09 2013-05-23 Sony Corp 情報処理装置、表示制御方法、およびプログラム
JP6809959B2 (ja) 2017-03-29 2021-01-06 株式会社ゼンリンデータコム 移動体情報提供サービスシステム、移動体情報提供サービスサーバー装置、移動体窓用装置及び移動体情報提供サービス方法
JP7207922B2 (ja) 2018-09-27 2023-01-18 第一工業製薬株式会社 共重合体および撥水撥油剤

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140063064A1 (en) * 2012-08-31 2014-03-06 Samsung Electronics Co., Ltd. Information providing method and information providing vehicle therefor
JP2014202859A (ja) * 2013-04-03 2014-10-27 パイオニア株式会社 広告表示装置、広告表示方法並びに広告表示用プログラム及び情報記録媒体
JP2016088187A (ja) * 2014-10-31 2016-05-23 三菱電機株式会社 車両用透過表示装置
JP2019188901A (ja) * 2018-04-20 2019-10-31 トヨタ自動車株式会社 表示制御装置

Also Published As

Publication number Publication date
DE112020006958T5 (de) 2023-02-02
US20230017486A1 (en) 2023-01-19
JP2021148690A (ja) 2021-09-27
CN115315614A (zh) 2022-11-08
JP7426655B2 (ja) 2024-02-02

Similar Documents

Publication Publication Date Title
KR102349159B1 (ko) 경로 제공 장치 및 그것의 경로 제공 방법
WO2021192469A1 (ja) 表示装置、表示方法、及び車両
KR102064223B1 (ko) 차량용 주행 시스템 및 차량
CN109895788A (zh) 安装在车辆上的车辆控制装置以及用于控制车辆的方法
CN107867296A (zh) 安装在车辆上的车辆控制装置和控制该车辆的方法
US20230017486A1 (en) Display device, display method, and vehicle
KR20190135392A (ko) 차량 제어 장치 및 그것을 포함하는 차량
US20210039671A1 (en) Path providing device and path providing method thereof
EP4083931A1 (en) Display device linked to vehicle and operating method thereof
KR20190039361A (ko) 컴퓨팅 디바이스
EP4026745A1 (en) Route provision apparatus and route provision method therefor
EP4012345A1 (en) Route providing apparatus and route providing method thereof
KR20220083675A (ko) 표시 시스템, 표시 장치, 표시 방법 및 이동 장치
US20220383556A1 (en) Image output device and method for controlling the same
KR101767507B1 (ko) 차량용 디스플레이 장치 및 그 제어 방법
US20230083637A1 (en) Image processing apparatus, display system, image processing method, and recording medium
KR102625688B1 (ko) 혼합 현실에 기반한 디스플레이 장치 및 경로 안내 시스템
KR20190038088A (ko) 차량에 구비된 차량 제어 장치
KR101916726B1 (ko) 차량에 구비된 차량 제어 장치 및 그의 제어방법
JP2021149752A (ja) 表示装置、表示方法、及び車両
KR20200023671A (ko) 차량에 구비된 차량용 로봇 및 차량용 로봇의 제어방법
KR101982535B1 (ko) 차량에 구비된 차량 제어 장치
JP2022167701A (ja) 情報処理装置、情報処理プログラム、情報処理方法及びモビリティサイネージシステム
CN117215061A (zh) 车辆用ar显示装置及其动作方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20927725

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 20927725

Country of ref document: EP

Kind code of ref document: A1