CN115298520A - 显示装置、显示方法及车辆 - Google Patents

显示装置、显示方法及车辆 Download PDF

Info

Publication number
CN115298520A
CN115298520A CN202080098828.9A CN202080098828A CN115298520A CN 115298520 A CN115298520 A CN 115298520A CN 202080098828 A CN202080098828 A CN 202080098828A CN 115298520 A CN115298520 A CN 115298520A
Authority
CN
China
Prior art keywords
display
vehicle
information
display device
transparency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080098828.9A
Other languages
English (en)
Inventor
本间肇
日向睦
姉崎雅弘
柳沼裕忠
河江绫乃
广泽爱绘
朴香玫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Automotive Electronic Systems Co ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN115298520A publication Critical patent/CN115298520A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J1/00Windows; Windscreens; Accessories therefor
    • B60J1/02Windows; Windscreens; Accessories therefor arranged at the vehicle front, e.g. structure of the glazing, mounting of the glazing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/77Retouching; Inpainting; Scratch removal
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/177Augmented reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/31Virtual images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77Instrument locations other than the dashboard
    • B60K2360/785Instrument locations other than the dashboard on or in relation to the windshield or windows
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明公开显示装置。该装置具备:显示部,设置于移动体的窗;以及显示控制部,基于从所述移动体的内部透过所述显示部看到的对象与所述移动体之间的位置关系,对与所述对象对应的虚拟对象在所述显示部中的显示进行控制。

Description

显示装置、显示方法及车辆
技术领域
本公开涉及显示装置、显示方法及车辆。
背景技术
专利文献1公开了将具有风景、建筑物等地理信息的照片与其拍摄地点建立对应关系的技术。根据专利文献1的技术,在电子地图管理服务器上,将具有地理信息的照片和拍摄照片的方位等信息,与地图上的拍摄地点连结,从而能够使移动电话、个人电脑等显示终端的利用者看到实际看着的方向的风景等。
现有技术文献
专利文献
专利文献1:日本发明专利第5334159号公报。
发明内容
本公开的非限定性的实施例有助于提供能够向移动体的乘员提供与风景等对象对应的虚拟对象的显示装置、显示方法及车辆。
解决问题的方案
本公开的一实施例的显示装置具备:显示部,设置于移动体;以及显示控制部,基于从所述移动体的内部透过所述显示部看到的对象与所述移动体之间的位置关系,对与所述对象对应的虚拟对象在所述显示部中的显示进行控制。
本公开的一实施例的车辆具备上述显示装置。
本公开的一实施例的显示方法包括:基于从移动体的内部透过设置于所述移动体的显示部窗看到的对象与所述移动体之间的位置关系,决定将与所述对象对应的虚拟对象在所述显示部显示时的显示位置的步骤;以及在所述显示位置显示所述虚拟对象的步骤。
根据说明书及附图可清楚呈现本公开的一实施例中的进一步的优点和效果。这些优点和/或效果分别由若干个实施方式以及说明书及附图所记载的特征提供,但未必需要为了得到一个或一个以上的相同的特征而全部提供。
附图说明
图1是表示本公开的实施方式的显示系统的结构例的图。
图2是表示车载设备的ECU(Electronic Control Unit,电子控制单元)的硬件结构例的图。
图3是表示车载设备的ECU的功能的结构例的图。
图4是表示中心服务器的信息处理装置的硬件结构例和功能的结构例的图。
图5是显示装置的剖面图。
图6是表示在车辆的窗所设置的显示装置显示的风景的图。
图7是表示对图6的山组合AR对象后的状态的图。
图8是表示在车辆的窗所设置的显示装置显示的风景的图。
图9是表示对桥梁基础的图像组合AR对象后的状态的图。
图10是表示在街道的风景显示图标型的AR对象的例子的图。
图11是表示在操作了图10的图标时呈现的优惠码的图像的一例的图。
图12是用于说明显示位置的决定方法的一例的图。
图13是用于说明显示位置的决定方法的一例的图。
图14是用于说明显示位置的决定方法的一例的图。
图15是用于说明显示系统的显示方法的流程图。
具体实施方式
以往,公开了一种将具有风景、建筑物等地理信息的照片与其拍摄地点建立对应关系的技术。现有技术存在以下课题:由于只是对风景等叠加照片,因此不能说对移动体的乘员提供了附加价值高的信息。对于这样的课题,根据本公开的显示装置,能够对移动体的乘员提供与风景等对象对应的虚拟对象。下面,参照附图对本公开的合适的实施方式详细地进行说明。此外,在本说明书及附图中,对于具有实质上相同功能的构成要素,赋予相同的附图标记从而省略重复说明。
(实施方式)
图1是表示本公开的实施方式的显示系统的结构例的图。显示系统1具备:在多个移动体3分别搭载的车载设备30;以及能够与车载设备30进行通信的中心服务器5。移动体3例如是轿车、货车、客车、摩托车、铁路车辆等车辆。此外,移动体3并不限定于车辆,也可以是飞机、游乐设备等。下面,对移动体3是车辆的情况进行说明。
车载设备30包括:DCM31(Data Communication Module,数字通信模块)、ECU(Electronic Control Unit,电子控制单元)32、GPS(Global Positioning System,全球定位系统)模块33、ACC(ACCessory,附件)开关34、传感器35、摄像装置36、显示装置14等。此外,车载设备30除了这些以外例如也包含汽车导航装置、音响设备、逆变器、电机、辅机类等。
DCM31是通过通信网络NW与中心服务器5双方向进行通信的通信设备。通信网络NW例如是以许多基站为末端的移动电话网、利用通信卫星的卫星通信网等。另外,DCM31通过作为车载网络的CAN(Controller Area Network,控制器局域网)38与ECU32以能够相互通信的方式连接,根据来自ECU32的请求,将各种信息向车辆的外部设备发送,另外,将从车辆的外部设备发送来的信息向ECU32中继。外部设备例如是中心服务器5、V2X(Vehicle toEverything,车对外界的信息交换)通信设备等。V2X是将车辆与各种物体连结的通信技术。V2X包括:V2V(Vehicle to Vehicle:车车间)、V2P(Vehicle to Pedestrian:车辆与行人间)、V2I(Vehicle to Infrastructure:道路与车辆间)、V2N(Vehicle to Network:车辆与网络间)等的通信。
ECU32是进行与车辆中的规定的功能有关的各种控制处理的电子控制单元,例如是电机ECU、混合ECU、发动机ECU等。ECU32例如收集车辆信息并向DCM31输入。
车辆信息是车辆位置信息、速度信息、车辆状态信息、摄像信息等。车辆位置信息是表示车辆的当前位置的信息,例如是表示本车辆正在行驶的纬度及经度的信息。车辆位置信息例如从汽车导航装置、GPS模块33等发送。速度信息是从车速传感器发送的表示车辆的当前速度的信息。车辆状态信息例如是表示ACC开关34是在接通状态还是在关闭状态的信号等。除此以外,车辆状态信息还会是刮水器的动作状态、除雾器的状态、油门开度、制动器的踩踏量、方向盘的转向操作量、从ADAS(Advanced Driver-Assistance Systems,高级驾驶员辅助系统)获取的信息等。ADAS是为了提高道路交通的便利性,对驾驶员的驾驶操作进行辅助的系统。摄像信息是表示由摄像装置36摄像的图像的内容的信息。摄像信息中包含表示生成图像时的时刻的时刻信息。
摄像装置36是具备CCD(Charge Coupled Device,电荷耦合器件)、CMOS(Complementary Metal Oxide Semiconductor,互补金属氧化物半导体)等摄像元件的相机。摄像装置36例如包含对车辆内部进行摄像的内部摄像装置、对车辆外部进行摄像的外部摄像装置等。
内部摄像装置例如配置于能够对车辆的驾驶席、副驾驶席等所存在的乘员的脸部、在后部座位所存在的乘员的脸部等进行摄像的位置。该位置是车辆的仪表板、驾驶席的仪器面板、车辆的顶棚等。内部摄像装置并不限于一个,也可以在车辆内设置多个。内部摄像装置输出表示摄像得到的车内图像的内容的摄像信息。
外部摄像装置是对车辆周围的风景进行摄像的全方向相机、全景相机等。车辆周围的风景例如是车辆的前方的风景、车辆的侧方(车辆的驾驶席门侧或车辆的副驾驶席门侧)的风景、车辆的后方的风景等。风景中例如包含:车辆行驶中的车道、存在于该车道的物、面对该车道的人行道、存在于该人行道的物等。存在于车道的物例如是轿车、摩托车、公共汽车、出租车、建筑物、结构物(广告、路标、红绿灯、电线杆等)、人、动物、坠落物等。存在于人行道的物例如是行人、动物、自行车、结构物、动物、坠落物等。外部摄像装置例如配置于能够对车外的风景进行摄像的位置。该位置是前格栅、侧视镜、顶棚、后保险杠等。外部摄像装置输出表示摄像得到的车外图像的内容的摄像信息。
GPS模块33接收从卫星发送来的GPS信号,对搭载有GPS模块33的车辆的位置进行测位。GPS模块33通过CAN38与ECU32以可通信的方式连接,将车辆位置信息向ECU32发送。
ACC开关34是根据乘员的操作将车辆的附件电源接通/关闭的开关。例如,ACC开关34根据针对在车室内的驾驶席的转向盘附近的仪表板所设置的动力开关的操作,进行附件电源的接通/关闭。动力开关例如是操作未图示的点火装置的按钮型开关。ACC开关34的输出信号是表示车辆的启动及停止的信息的一例。具体而言,在ACC开关34的输出信号从关闭信号变成接通信号的情况下,表示车辆的启动,在ACC开关34的输出信号从接通信号变成关闭信号的情况下,表示车辆的停止。ACC开关34通过CAN38与ECU32等以可通信的方式连接,其状态信号(接通信号/关闭信号)被发生到ECU32。
传感器35是检测施加于逆变器的电压的传感器、检测施加于电机的电压的传感器、检测车速的传感器、检测油门开度的传感器、检测方向盘的转向操作量的传感器、检测制动器操作量的传感器等。另外,传感器35例如可包含检测车辆的加速度的加速度传感器、检测车辆的角速度的角速度传感器(陀螺仪传感器)等。从传感器35输出的检测信息通过CAN38被ECU32捕获。
显示装置14是具备光透射性并且具备调光性的透明液晶显示器、透明有机EL(Electroluminescence,电致发光)显示器等。显示装置14例如设置于车辆的窗。车辆的窗是挡风玻璃、侧玻璃、后玻璃等。此外,显示装置14除了车辆的窗以外,例如还可以设置在:铁路车辆的乘降门所设置的窗、铁路车辆的座位附近所设置的窗、飞机的驾驶舱窗、飞机的客舱窗等。关于显示装置14的结构例,将在后面叙述。车辆的窗包括:车辆的前后左右的各个面和车辆的顶棚面全部由显示装置14或玻璃构成的窗。另外,车辆的窗包括:其整体由显示装置14(透明液晶显示器)构成,即不使用玻璃的窗(只由透明液晶显示器构成窗)。此外,显示装置14不限定于上述的结构例,也可以是在透明液晶显示器或者透明有机EL显示器、透明微型LED、成像投影仪影像的透明屏幕软片等上将透光率以电子方式变化的调光薄膜等层叠粘合而成的结构。层叠于玻璃的膜配置于从车内能够辨认的玻璃外形的例如90%以内。由此,也能够兼顾在人被关在车内时打破窗户逃生时产生的玻璃的飞溅抑制。
中心服务器5是从多个车辆收集信息并且向多个车辆的乘员进行信息分发来提供各种服务的服务器。各种服务例如是汽车共享服务、认证密钥服务、干线配送服务(trunkdelivery service)、B2C汽车共享服务、广告分发服务等。
中心服务器5具备通信设备51及信息处理装置52。通信设备51是在信息处理装置52的控制下通过通信网络NW与多个车辆分别进行双方向的通信的通信器件。信息处理装置52执行中心服务器5中的各种控制处理。信息处理装置52例如由包含CPU(CentralProcessing Unit,中央处理器)、RAM(Random Access Memory,随机存取存储器)、ROM(ReadOnly Memory,只读存储器)、辅助存储装置、输入输出接口等的服务器计算机构成。
接着,参照图2对车载设备30的ECU32的硬件结构进行说明。图2是表示车载设备的ECU的硬件结构例的图。ECU32具备:辅助存储装置32A、存储器装置32B、CPU32C及接口装置32D。这些装置通过总线32E相互连接。
辅助存储装置32A是保存ECU32的处理所需的文件、数据等的HDD(Hard DiskDrive,硬盘驱动器)、闪存等。在存在程序的启动指示的情况下,存储器装置32B从辅助存储装置32A读出程序并将其保存。CPU32C执行存储器装置32B所保存的程序,按照程序实现ECU32的各种功能。接口装置32D例如是将CPU32C通过CAN38与DCM31连接,而且将摄像装置36、传感器35等通过CAN38与DCM31连接的接口。
接着,参照图3对车载设备30的ECU32的功能进行说明。图3是表示车载设备的ECU的功能的结构例的图。
存储器装置32B具备记录显示装置14所显示的显示信息的显示信息DB332。显示信息是表示虚拟对象的内容的信息。关于虚拟对象的具体例,将在后面叙述。
ECU32的CPU32C具备:车辆信息收发部321、摄像信息管理部323、显示位置决定部22、以及进行显示装置14的显示处理的显示控制部26。
车辆信息收发部321具有接收车辆信息的功能、和将车辆信息向中心服务器5发送的功能。
显示位置决定部22决定显示装置14中的显示信息的显示位置。作为显示位置决定部22的利用的场景,例如可以考虑如下情况,即,为了在显示装置14中,在透过显示部的风景上重叠地显示显示信息而将显示信息与乘员的视线方向建立对应关系地显示的情况等。下面,对显示信息的显示位置的决定方法的一例进行说明。
首先,显示位置决定部22例如在从内部摄像装置发送来的车内图像中提取乘员的脸部,基于车内的乘员的脸部的位置及朝向、和车辆位置,确定辨认显示装置14的画面的乘员的位置。
接着,显示位置决定部22确定例如在车辆中设置显示装置14的画面的位置,作为画面位置。例如,显示装置14的画面是在将显示装置14设置于车辆时决定其位置的,因此对于与车辆对应的车辆识别信息,将表示显示装置14的画面位置的信息与其建立关联,并将建立关联的信息预先记录在存储器装置32B等中。车辆识别信息是车辆识别编号(VehicleIndex Number)、车辆ID(Identifier,识别符)等。显示位置决定部22通过在车载设备30的启动时参照存储器装置32B,从而利用车辆识别信息读出显示装置14的画面位置。由此,能够确定显示装置14的画面例如设置于挡风玻璃、侧玻璃等。
此外,对于设置显示装置14的画面的位置,也可更详细地进行设定。例如,也可以是,当在挡风玻璃的一部分区域设置显示装置14的情况下,将对挡风玻璃从车内侧朝向前方俯视时的整体区域,例如分为从正交坐标的第一象限到第四象限的各个区域,预先将各区域的识别信息与车辆识别信息建立关联,并将建立关联的信息预先记录在存储器装置32B等中。由此,显示位置决定部22能够确定显示装置14例如配置于挡风玻璃的靠左上部的区域、挡风玻璃的靠右下部的区域等。
接着,显示位置决定部22确定透过显示画面的风景中的、显示信息的显示位置。具体而言,显示位置决定部22从连续摄像的2帧的车外图像中提取建造物等,基于车外图像中的建造物等的2帧之间的位置之差,利用立体相机的原理计算从外部摄像装置到建造物等为止的距离。接着,显示位置决定部22基于从外部摄像装置到建造物等为止的距离和车辆位置,确定建造物等的位置。然后,显示位置决定部22通过参照显示信息DB332,判定在显示信息DB332中是否存在与建造物等的位置建立对应关系的显示信息。在存在该显示信息的情况下,显示位置决定部22将相应的建造物等的位置确定为显示信息的显示位置。
此外,显示位置决定部22也可以构成为,通过其他方法确定显示信息的显示位置。例如,显示位置决定部22基于车辆位置与外部摄像装置的摄像范围,计算与车外图像所含的风景的区域对应的纬度及经度的范围。然后,显示位置决定部22通过从显示信息DB332中检索计算出的纬度及经度的范围内的显示信息的显示位置,来确定显示信息的显示位置。
最后,显示位置决定部22基于所确定的乘员的当前位置、画面位置、显示信息的显示位置等,决定显示信息的显示位置。对于显示位置的决定方法的详细内容,将在后面叙述。
摄像信息管理部323以一边在规定时间内输入从摄像装置36发送来的摄像信息,一边在发送来的摄像信息中嵌入时刻、车辆位置信息的方式,制成摄像信息一览表(摄像信息DB3292)。
接着,使用图4对中心服务器的信息处理装置的硬件结构例等进行说明。图4是表示中心服务器的信息处理装置的硬件结构例和功能的结构例的图。信息处理装置52具备CPU16及存储部520。
CPU16具备:在与多个车辆的每个之间进行各种信息的收发的通信处理部5201、信息显示物提取部5205、车辆确定部5212、指令发送部5213、地图匹配部5214及探查信息生成部5215。存储部520具备:地图信息DB520A、探查信息DB520B、信息显示物DB520F、车辆信息DB520H及摄像信息DB520J。
信息显示物提取部5205基于已知的图像识别处理,从探查信息DB520B中保存的、多个车辆的各自的探查信息所含的摄像装置36的摄像信息中提取信息显示物。然后,信息显示物提取部5205在对所提取的信息显示物附加固有的识别信息的基础上,对识别信息,将该信息显示物的图像、该信息显示物的位置信息等元信息与其建立关联,并保存在信息显示物DB520F。由此,在信息显示物DB520F中,除了与显示规定的广告商的广告信息的招牌、数字标牌等预先登记的信息显示物有关的信息以外,还登记有与由信息显示物提取部5205提取的信息显示物有关的信息。从而,信息显示物被丰富化,提高了乘员的便利性。此外,作为元信息附加的信息显示物的位置信息既可以是与作为提取源的摄像信息相同的探查信息所含的车辆位置信息本身,也可以是考虑了根据摄像信息计算出的信息显示物相对于车辆的相对的位置信息后的位置信息。另外,在所提取的信息显示物与已经登记在信息显示物DB520F中的信息显示物相同的情况下,信息显示物提取部5205不将与所提取的信息显示物有关的信息保存在信息显示物DB520F。另外,对于信息显示物提取部5205进行的该处理,既可以与由通信处理部5201从多个车辆分别依次接收的探查信息对应而实时地执行,也可以针对某种程度积累的未处理的探查信息定期地执行。
车辆确定部5212基于车辆位置信息确定通过了摄像信息的收集对象的地理上的位置或区域的车辆。此外,在车辆的自动驾驶中利用的三维的高度动态地图信息(动态地图)的制成中,需要对车辆实际行驶的场地进行摄像得到的最新的图像。作为该动态地图的制成对象的场地可以是摄像信息的收集对象的地理上的位置或区域的一例。
车辆确定部5212例如在输入了从多个车辆分别发送来的车辆位置信息时,通过将车辆位置信息与收集对象的位置或区域对照,来判定通过了该位置或区域的车辆。然后,在从多个车载设备30分别发送来的车辆信息中,选择包含被判定通过的车辆位置信息的车辆信息,提取所选择的车辆信息所含的车辆识别信息。提取了车辆识别信息的车辆确定部5212将所提取的车辆识别信息向指令发送部5213转送。
输入了来自车辆确定部5212的车辆识别信息的指令发送部5213,对经由通信网络NW与中心服务器5以可通信的方式连接的车辆组中的、分配了该车辆识别信息的车辆,发送摄像信息请求指令。针对摄像信息请求指令而分发的摄像信息与数据收集对象区域信息建立对应地,作为摄像信息DB520J而在存储部520中记录。
地图匹配部5214基于地图信息DB520A和车辆位置信息,确定车辆当前所在的道路链路。地图信息DB520A由GIS(Geographic Information System,地理信息系统)数据等构成。GIS数据包括:与交叉口对应的节点、将节点之间连接的道路链路、与建筑物或道路等地上物对应的线、多边形等。例如,对地图信息DB520A所含的、构成道路网的多个道路链路的每一个道路链路,预先规定了识别信息即链路ID。地图匹配部5214通过参照地图信息DB520A,来确定车辆当前所在的道路链路的链路ID。
探查信息生成部5215按规定周期生成探查信息,该探查信息包含:从车辆发送来的车辆信息、时刻信息、和由地图匹配部5214确定的道路链路。然后,探查信息生成部5215将所生成的探查信息保存在探查信息DB520B。
接着,参照图5对显示装置14的结构例进行说明。图5是显示装置的剖面图。显示装置14例如以粘贴在车辆的窗的内侧或外侧的方式设置于车辆。此外,显示装置14向车辆的配置方法不限定于此,例如,也可以将显示装置14固定于车辆的框架,并以使显示装置14的画面面对车辆的窗的内侧或外侧的方式而设置。另外,显示装置14也可以以嵌入方式设置于车辆的窗之中。另外,显示装置14可以以覆盖车辆的窗的整个区域的方式而设置,也可以以覆盖车辆的窗的一部分区域的方式而设置。
显示装置14例如具有用两个的透明OLED14b1与透明OLED14b2将电子透射控制膜14a夹入而成的结构。下面,在不区别透明OLED14b1与透明OLED14b2这两者的情况下,称为“透明OLED”。电子透射控制膜14a是能够改变透明度的透射型显示部的一例。透明OLED14b1及透明OLED14b2是能够显示显示信息的显示信息显示部的一例。
电子透射控制膜14a例如能够通过改变透明度(可见光透射率),对透过车辆的显示部看到的风景的浓淡进行控制,或对透明OLED所显示的图像的浓淡进行控制。电子透射控制膜14a既可以是能够使电子透射控制膜14a的整体的透明度均匀地改变的,也可以是能够使电子透射控制膜14a的一部分区域的透明度改变的。作为改变电子透射控制膜14a的透明度的方法,例如可以示例电致变色方式、能够进行比电致变色方式高速的调光控制的气致变色方式等。在改变电子透射控制膜14a的一部分区域的透明度的情况下,能够利用局部调光技术、非专利文献1公开的技术(非专利文献1:https://www.jst.go.jp/pr/announce/20171017-3/index.html)。
透明OLED14b1是朝向电子透射控制膜14a的第一端面侧的透明显示器的一例。电子透射控制膜14a的第一端面侧例如是窗的内侧。透明OLED14b2是朝向与电子透射控制膜14a的第一端面侧相反侧的第二端面侧的透明显示器的一例。电子透射控制膜14a的第二端面侧是车辆的外侧。此外,显示装置14也可以代替透明OLED而具备透明液晶显示器。
显示装置14具备两个透明OLED,从而能够在窗的内侧和外侧显示互不相同的显示信息。
例如,当在自动驾驶中的车辆内存在喜欢游戏的乘员的情况下,如图5的左侧所示那样,能够在使电子透射控制膜14a的透明度低(例如,可见光透射率为30%以下)的状态下,在透明OLED14b1例如显示玩游戏过程中的画面,并在透明OLED14b2放大显示该游戏的角色。
另外,当在自动驾驶中的车辆内存在喜欢瑜伽、影子拳击(shadow boxing)等运动的乘员的情况下,如图5的左侧所示,能够在使电子透射控制膜14a的透明度低的状态下,在透明OLED14b1显示运动的教学视频影像,并在透明OLED14b2显示在车辆内运动中的人的动态图像。
另外,也能够在使电子透射控制膜14a的透明度低的状态下,在透明OLED14b2显示地图等导航画面,并在透明OLED14b2显示广告影像等。
另外,如图5的右侧所示,在使电子透射控制膜14a的透明度高(例如可见光透射率为80%以上)的状态下,在设置于挡风玻璃的显示装置14的透明OLED14b1显示地图等导航画面。而且,在该显示装置14的透明OLED14b2不显示显示信息,从而能够在透过挡风玻璃的风景上重叠导航画面而显示。
另外,既可以在两个透明OLED分别显示不同的显示信息,也可以显示彼此相同或类似的显示信息。例如,当在自动驾驶中的车辆内存在喜欢运动的乘员的情况下,也可以在使电子透射控制膜14a的透明度低的状态下,在透明OLED14b1只是显示教学视频影像,而在透明OLED14b2显示教学视频影像和运动中的人的动态图像两个画面。
此外,显示装置14的结构例不限定于图示例。例如,显示装置14也可以构成为,只具备两个透明OLED中的一个透明OLED。
可以基于与移动体的行驶有关的行驶信息改变显示装置14的透明度。与移动体的行驶有关的行驶信息例如是车辆的速度(车速)信息、车辆的当前位置周围的天气信息、当前时间信息、车辆状态信息、交通信息、表示车辆行驶模式的信息等。另外,显示装置14的透明度既可以阶段性地改变,也可以连续地改变。下面,对改变透明度的例子进行说明。
在基于车速改变透明度的情况下,显示控制部26例如使用将车速和透明度建立对应关系的一览表信息。该一览表信息既可以是预先记录在存储器装置32B中的一览表信息,也可以是由中心服务器5分发的一览表信息。输入了车速信息的显示控制部26参照该一览表信息,例如,在第一速度区域设为第一透明度,在比第一速度范围高的第二速度范围,设为比第一透明度低的第二透明度。第一透明度例如是可见光透射率为80%的状态。第二透明度例如是可见光透射率为30%的状态。第一速度区域例如是从时速0km/h到时速80km/h的速度。第二速度区域例如是时速80km/h以上的速度。由此,例如,当车辆在自动驾驶模式下以第一速度区域在市内行驶时,即使在需要回避障碍物等的情况下,驾驶员由于能够辨认透过显示部的风景,因此能够立即进行避开障碍物等的操作。另外,当车辆在自动驾驶模式下以第二速度区域在绕行道路、高速道路等行驶过程中的情况下,由于要避开障碍物等的场景少,因此通过遮蔽透过显示部的风景等,乘员能够将精力集中到音乐欣赏、或读书等。此外,透明度既可以根据车速阶段性地改变,也可以根据车速连续地改变。例如,在第一速度区域中,也可以随着车速从时速0km/h到时速80km/h变高,使透明度连续地变低。另外,在基于车速改变透明度的情况下,显示控制部26也可以构成为,使风景变化少的远方部分(窗的上部)的透明度高,相反地使风景变化多的部分(窗的下部)的透明度低。
在基于天气改变透明度的情况下,显示控制部26例如可以利用通过互联网分发的天气信息、雨刮器的动作状态信息、除雾器的动作状态信息等来改变透明度。例如,在晴天时,将显示装置14的整体的透明度设定为50%附近,从而不会使驾驶员及同乘人员感到眩光而能够提高对显示图像的沉浸感。另外,在阴天时,由于与晴天时相比辨认性降低,因此显示控制部26例如使显示装置14的比中心更靠下侧的区域的透明度高,并使显示装置14的比中心更靠上侧的区域的透明度低。由此,成为显示装置14的一部分区域被遮光的同时,剩余的区域不被遮光而能够确认车外状况的状态。从而,能够在减轻由于云的漫反射而产生的眩光的同时,把握交通状况,因此,能够对行人等的跳出等进行回避操作。而且同乘人员能够欣赏显示图像等。另外,在雨天时,由于与阴天时相比辨认性降低,因此,显示控制部26例如将显示装置14的整体的可见光透射率设为80%附近等高的透明度。由此,即使在由于下雨视野差的状况下,也能够容易地把握红绿灯、交叉口、周围的车辆等,对行人等的跳出等能够进行回避操作。另外,即使在设置于挡风玻璃的显示装置14的透明度高的状态下,通过使设置于侧玻璃等的显示装置14的透明度成为低的状态,从而能够使同乘人员欣赏显示图像等。
在基于时刻改变透明度的情况下,例如,通过利用将清晨、白天、晚间、午夜等各个时间段与按这些时间段而不同的多个透明度建立对应关系的一览表信息,能够根据时刻改变透明度。该一览表信息既可以是预先记录在存储器装置32B中的一览表信息,也可以是从中心服务器5分发的一览表信息。例如,输入了时刻的信息的显示控制部26参照该一览表信息,在清晨和白天,为了减轻驾驶员等的眩光,将显示装置14的整体的透明度设定为50%附近。另外,显示控制部26在晚间和午夜为了确保视野而将显示装置14的整体的透明度设定为80%附近。
另外,显示控制部26也可以构成为,对车内的亮度和车外的亮度进行比较,只在车内的亮度比车外的亮度高时,使透明度低。通过在自动驾驶时对车外进行拍摄的车外拍摄装置的白平衡调整前的平均辉度等级与对车内进行拍摄的内部拍摄装置的白平衡调整前的平均辉度等级的比较,进行车内的亮度与车外的亮度的比较。
在基于车辆状态信息改变透明度的情况下,例如,按车辆状态信息的每个种类准备多个一览表信息,对每个一览表信息例如对应针对油门开度、制动器的踩踏量、方向盘的转向操作量等的透明度。该一览表信息既可以是预先记录在存储器装置32B中的一览表信息,也可以是从中心服务器5分发的一览表信息。
输入了与油门开度有关的信息的显示控制部26例如在油门开度小的情况下,将显示装置14的比中心更靠下侧的区域的透明度设定为80%附近,并将显示装置14的比中心更靠上侧的区域的透明度设定为30%附近。由此,车辆在高速道路等以恒定速度巡航的场景中,由于显示装置14的一部分区域被遮光,因此,能够减轻针对驾驶员的太阳光等的眩光。另外,同乘人员能够欣赏在透明度低的区域所显示的图像等。
输入了与油门开度有关的信息的显示控制部26例如在油门开度大的情况下,将显示装置14的整体的透明度设定为80%附近。由此,例如,当车辆在如山道那样转弯连续的陡坡的上坡等行驶的情况下,显示装置14不被遮光,因此,有助于驾驶员的安全驾驶,并且同乘人员能够欣赏与风景重叠地显示的显示图像等。
输入了与制动器的踩踏量有关的信息的显示控制部26例如在规定时间内的制动器的踩踏次数少或规定时间内的制动器的踩踏量少的情况下,将显示装置14的比中心更靠下侧的区域的透明度设定为80%附近,并将显示装置14的比中心更靠上侧的区域的透明度设定为30%附近。由此,例如,车辆在高速道路等巡航的场景中,由于显示装置14的一部分区域被遮光,因此,能够减轻针对驾驶员的太阳光等的眩光。另外,同乘人员能够欣赏剩余的区域所显示的图像等。
输入了与制动器的踩踏量有关的信息的显示控制部26例如在规定时间内的制动器的踩踏次数多或规定时间内的制动器的踩踏量多的情况下,将显示装置14的整体的透明度设定为80%附近。由此,例如,车辆在交通量多的市区行驶的场景中,由于显示装置14不被遮光,因此,有助于驾驶员的安全驾驶,并且同乘人员能够欣赏与风景重叠地显示的显示图像等。
输入了与方向盘的转向操作量有关的信息的显示控制部26例如在规定时间内的方向盘的转向操作次数少或规定时间内的方向盘的转向操作量小的情况下,将显示装置14的比中心更靠下侧的区域的透明度设定为80%附近,并将显示装置14的比中心更靠上侧的区域的透明度设定为30%附近。由此,例如,车辆在高速道路等巡航的场景中,由于显示装置14的一部分区域被遮光,因此,能够减轻针对驾驶员的太阳光等的眩光。另外,同乘人员能够欣赏剩余的区域所显示的图像等。
输入了与方向盘的转向操作量有关的信息的显示控制部26例如在规定时间内的方向盘的转向操作次数多或规定时间内的方向盘的转向操作量大的情况下,将显示装置14的整体的透明度设定为80%附近。由此,例如,车辆在交通量多的市区行驶的场景中,由于显示装置14不被遮光,因此,有助于驾驶员的安全驾驶,并且同乘人员能够欣赏与风景重叠地显示的显示图像等。
在基于交通信息改变透明度的情况下,显示控制部26也可以根据道路的拥挤状况改变显示装置14的透明度。具体而言,根据在高速道路行驶时被分发的交通信息而在车辆行驶中的道路发生了数分钟左右的堵塞的情况下,由于车速在短时间降低,因此,显示控制部26将透明度设定为80%附近,以使同乘人员等能够欣赏透过显示部的风景。另一方面,在车辆行驶中的道路发生数十分钟以上的堵塞的情况下,在比较长的时间被迫以低速驾驶。在该情况下,显示控制部26为了利用显示图像使车辆的驾驶员等高兴,而将透明度设定为30%附近,在堵塞解除时,将透明度从30%附近改变为80%附近。
在基于表示车辆行驶模式的信息改变透明度的情况下,显示控制部26例如能够根据是手动驾驶模式还是自动驾驶模式(包括驾驶辅助模式、半自动驾驶模式等)改变透明度。另外,在选择了手动驾驶模式时,显示控制部26也可以根据能够省油行驶的环保驾驶模式、能够主动驾驶的运动驾驶模式等改变透明度。除此以外,显示控制部26也可以构成为,在通过乘客的选择例如将车辆作为完全的私人空间利用的情况下,降低全部的窗的透明度。
此外,显示装置14也可以是将电子透射控制膜14a与抬头显示器(head-updisplay)组合而成的装置。在该情况下,将从抬头单元投射的信息经由反射镜等投影到设置于窗的电子透射控制膜14a,从而能够作为虚像使驾驶员辨认。这时,通过根据行驶状态改变电子透射控制膜14a的透明度,从而能够细致地辅助驾驶。例如,车辆在雪道行驶的情况下,显示装置14通过使电子透射控制膜14a的整体之中投射了虚像的一部分区域的透明度比其他区域的透明度低,从而能够清楚地显示与雪道重叠的虚像。
此外,抬头显示器包括:为了容易辨认抬头显示器的虚像,而将接近半透明镜的特殊的膜粘贴于距乘客近的面而成的显示器、或在玻璃内部夹着作为中间层的特殊的膜状的层而成的显示器等。特别地,使用了接近半透明镜的特殊的膜的抬头显示器在车外比车内暗的状态下,几乎成为反射镜。即,在车外比车内暗的状况下,车内的情形透过半透明镜被反映。因此,通过提高上述的透明OLED的辉度,从而透明OLED的对比度虽然变差,但优选采用如下的使用方式,即,进行提高黑电平(黑亮度)等影像调整,或者设为不包含黑色的影像的基础上只将抬头显示器的显示部部分地降低透射率进行图像的显示之类的使用方式。除了上述的接近半透明镜的特性的特殊的膜以外,可以示例只将特定波长衍射的HOE(Holographic Optical Element,全息光学元件),在该情况下,不需要进行上述的影像调整。
除此以外,显示控制部26也可以例如利用通过V2X通信分发的信息改变透明度。V2X通信中,不只是能够进行车车间通信,也能够进行车辆与具有通信终端的人之间的通信、车辆与路边机之间的通信等。V2X通信中,提供表示交通信号的状态的信息、交通管制信息、交通障碍信息(与路面结冰、道路淹水、道路上的坠落物等有关的信息)、存在于车辆周围的移动物体的位置信息等。通过利用这些信息,例如,当在搭载了显示装置14的车辆进行右转时,存在从该车辆的后方接近该车辆的自行车、摩托车等移动体时,也能够使显示装置14实时地显示该移动体。另外,若该移动体到车辆的距离小于设定距离,则显示控制部26通过将设置于侧玻璃等的电子透射控制膜14a的透明度从低的状态切换为高的状态,从而也能够使驾驶员辨认该移动体。另外,显示控制部26也可以在判断为不能够回避移动体向车辆的碰撞的情况下,将提醒警告的消息信息显示在显示装置14。具体而言,显示控制部26例如通过利用从外部摄像装置得到的摄像信息,使显示装置14实时地显示接近车辆的移动体的图像,并且根据存在于车辆周围的移动体的位置、该移动体的每单位时间的移动量等,推断移动体接近车辆的速度。而且,在根据推断速度判断为不能够回避移动体向车辆的碰撞的情况下,显示控制部26将提醒警告消息信息显示在显示装置14。另外,显示控制部26也可以在接收到淹水信息的情况下,通过与导航装置协作,来推测淹水地点、淹水量、迂回淹水地点的迂回路线等,并显示在显示装置14。
另外,也可以根据虚拟对象的显示内容的形态、乘客的属性等改变显示装置14的透明度。关于虚拟对象的显示内容的具体例,将在后面叙述。
接着,参照图6~图11对虚拟对象等的显示例进行说明。此外,虚拟对象可以包括:增强现实的对象(AR对象)、虚拟现实的对象(VR对象)、代替现实(SR对象)、混合现实的对象(MR对象)等。AR(Augmented Reality,增强现实)是通过在现实空间的物体等上重叠信息来赋予新的认识的技术。VR(Virtual Reality,虚拟现实)是在虚拟空间上构建现实感(实在感)的技术。SR(Substitutional Reality,代替现实)是将记录了过去的信息与当前得到的信息无缝替换的技术。MR(Mixed Reality,混合现实)是在将现实空间与虚拟空间混合的基础上构建现实感的技术。AR对象是以关于特定的物体的空间信息为基础通过渲染(rendering)制成的图像在风景的图像中渐显乃至与风景的图像上叠加的物体。VR对象是虚拟化的物体,例如是基于高清3D地图制成的计算机图形图像、或对行驶时拍摄的视频嵌入的对象图像等。
图6是表示设置于车辆的窗的显示装置所显示的风景的图。图6中,作为透过显示部的风景的一例,示出山4的图像。此外,透过显示部的风景既可以是通过摄像装置摄像的风景的图像,也可以是乘员6从车内透过显示部看到的实际的风景。
图7是表示对图6的山组合了AR对象后的状态的图。通过对实际的山4组合了将太阳的形状变形后的AR对象7,从而能够提高乘员6对显示信息的沉浸感。
参照图8及图9对AR对象7的另外的显示例进行说明。图8是表示设置于车辆的窗的显示装置所显示的风景的图。图8中作为透过显示部的风景的一例,示出建设中的桥的基础8A(桥梁)。图9是表示对桥的基础的图像组合AR对象后的状态的图。通过对实际的基础8A组合完成后的铁桥的AR对象8B,从而能够提高乘员6对显示信息的沉浸感。另外,由于能够透过显示部看到未完成的铁桥,因此有助于通过吸引游客来振兴地区的城镇振兴(地区振兴)。
图10是表示在街道的风景显示图标型的AR对象的例子的图。图11是表示操作了图10的图标时呈现的与优惠码有关的AR对象的图。例如,若乘员点击图标9A,则能够显示图11所示的与优惠码有关的AR对象9B。
通过显示这样的AR对象,乘员对透过显示部的风景的兴趣大大增强。另外,由于也很大程度地有助于商店、企业等的PR,因此,即使未在实际的建筑物张贴物理性的广告,也能够对公共汽车等的旅客,宣传公司的产品等。另外,对于只在确定的期间(奥林匹克举办期间等)想要进行特别的广告之类的需要,也不用在建筑物设置物理性的广告,而能够在各种各样的区域打出广告,因此能够有效地提高购买性、吸引客户等。
此外,AR对象9B不限定于与优惠码有关,例如也可以是利用图案或文本表示在商店、企业等实施的宣传活动内容的AR对象,还可以是表示店铺的口碑评价的内容的AR对象。
另外,AR对象例如即使不是内容创作公司也可以是个人或广告商新制成的,还可以是定制(customize)已有的AR对象得到的。例如,通过利用在智能手机安装的专用的应用,能够自由地设定AR对象的设计、AR对象的显示位置、AR对象所显示的语言等。所设定的AR对象例如在中心服务器5上的地图信息(动态地图、3D高清地图等)中与建筑物、风景等的位置建立对应关系地被登记。而且,能够通过将该地图信息下载到车辆,并由显示控制部26将地图信息的位置与车辆的当前位置进行比较,在车辆进入到离地图信息内的特定的建筑物规定范围内时,对与该车辆位置对应的现实的对象组合AR对象,并显示于显示装置14。不只是AR对象,VR对象、MR对象等也能够同样地设定。另外,由于能够自由地定制AR对象,因此,通过构建在其他区域不存在的独特的图案的风景,从而也能够创造热点。此外,关于VR对象、MR对象等的显示方法,在下面进行补充说明。例如,将车辆行驶的空间内的物体(建筑物、道路等)设为虚拟地制成的3D空间(虚拟3D空间)整体内配置的VR对象(接近现实的对象、或者与现实不同的对象)。进而,基于在自动驾驶等中检测的人、摩托车、自行车等其他移动体的位置、运动矢量的传感数据,将人设为角色A,将摩托车设为角色B,而将这些设为上述的虚拟3D空间内的MR对象。在此基础上,将VR对象、MR对象配合实际的运动显示,将现实的信息显示在虚拟空间。这时,也可以构成,在接近现实的虚拟空间内配置的对象例如可以由建筑物的所有者以任意的形式提供。
另外,也可以基于与移动体的行驶有关的行驶信息改变VR对象、AR对象等。与移动体的行驶有关的行驶信息例如是车辆的速度(车速)、车辆的当前位置周围的天气、当前时间信息、车辆状态信息、交通信息、表示车辆行驶模式的信息等。下面,说明基于与移动体的行驶有关的行驶信息改变虚拟对象的具体例。
在基于时刻改变虚拟对象的情况下,例如,通过利用将清晨、深夜等各个时间段与按这些时间段而不同的多个按时间段的虚拟对象建立对应关系的一览表信息,能够根据时刻改变虚拟对象。该一览表信息既可以是预先记录在存储器装置32B中的一览表信息,也可以是从中心服务器5分发的一览表信息。例如,从GPS等输入了时刻信息的显示控制部26参照该一览表信息,如果在清晨,则将图7所示那样的太阳的图案的对象显示在山的表面。另外,显示控制部26如果在深夜,则例如在山顶附近显示月亮的图案的对象。
在基于车速改变虚拟对象的情况下,显示控制部26例如使用将车速和按多个按区域的虚拟对象建立对应关系的一览表信息。该一览表信息可以是预先记录在存储器装置32B中的一览表信息,也可以是从中心服务器5分发的一览表信息。输入了车速信息的显示控制部26参照该一览表信息,例如如果是车速为时速20km/h以下的第一速度区域,则将车辆的周围区域(例如距离车辆数十m以内的区域)所设置的建筑物等的广告作为虚拟对象显示。如果是车速超过时速20km/h的第二速度区域,则显示控制部26将距离车辆比较远的区域(例如距离车辆数十m以上的区域)所设置的建筑物等的广告作为虚拟对象显示。由此,在车辆以低速行驶的情况下,能够使乘员看到车辆附近的虚拟对象。在车辆以高速行驶的情况下,车辆附近的虚拟对象以短时间通过窗,因此,难以使乘员看到,但是,如果是距离车辆比较远的区域的虚拟对象,则可以使乘员看。
另外,当在挡风玻璃等显示虚拟对象的情况下,例如也可以是,在停车中显示虚拟对象,以侧刹车等制动装置的解除为触发,从驾驶上需要注意的部分的对象开始,伴随车速、加速度等的增大,使虚拟对象逐渐地成为非显示。由此,也能够向驾驶员提供广告等,而且能够抑制由于看漏在市区行驶中的车辆周围的障碍物等引起的事故的发生。
另外,当在挡风玻璃等显示虚拟对象的情况下,也可以是,在车辆在自动驾驶模式下以第二速度区域在绕行道路、高速道路等行驶时,由于要避开障碍物等的场景少,因此,显示与距离车辆比较远的区域的风景对应的虚拟对象,在车速从第二速度区域降低到第一速度区域时,使该对象成为非显示。由此,也能够向驾驶员提供广告等的同时,即使在由于堵塞、或高速道路的出入口等使得车速变低的场景,也能够抑制由于看漏行驶中的车辆周围的障碍物等引起的事故的发生。
在基于天气改变虚拟对象的情况下,显示控制部26例如可以利用通过互联网分发的天气信息、雨刮器的动作状态信息、除雾器的动作状态信息等,改变虚拟对象。例如,可以考虑,由于天气使得人的情趣变化,与此联动地将餐厅等的广告作为与天气对应的虚拟对象进行显示。例如,可以在晴天时对餐厅的广告设定与米饭类的菜单有关的虚拟对象,在雨天时对餐厅的广告设定与面类的菜单有关的虚拟对象。由此,不用在建筑物设置物理性的广告,而能够高效地提高吸引客户的能力、购买性等。另外,对于车辆的乘员,也能够得到如下效果,即,增加雨天时、阴天时的驾驶或旅游的乐趣的效果。
在基于车辆状态信息改变虚拟对象的情况下,例如,按车辆状态信息的每个种类准备多个一览表信息,对每个一览表信息例如对应针对油门开度、制动器的踩踏量、方向盘的转向操作量等的虚拟对象。该一览表信息既可以是预先记录在存储器装置32B中的一览表信息,也可以是从中心服务器5分发的一览表信息。
例如,由于车辆在高速道路上以恒定速度行驶而油门开度小的情况下,可以认为驾驶员比较放松地驾驶。在该情况下,显示控制部26显示如图10所示那样的虚拟对象。制动器的踩踏量少的情况、规定时间内的方向盘的转向操作次数少的情况、或规定时间内的方向盘的转向操作量小的情况也同样。
另一方面,在由于车辆在山道那样转弯连续的陡坡的上坡等行驶而油门开度大的情况下,可以认为,驾驶员的紧张感提高,驾驶后的疲劳感增加。在该情况下,显示控制部26将辅助驾驶的虚拟对象与市区的路标等重叠地显示在显示装置14。辅助驾驶的虚拟对象例如是向在车辆的当前位置附近存在的路边站、便利店、加油站、充电站等的引导、饮用水的优惠券代码等。此外,也可以使这些对象根据油门开度实时地变化。另外,制动器的踩踏量多的情况、规定时间内的方向盘的转向操作次数多的情况、或规定时间内的方向盘的转向操作量大的情况也同样。
在基于交通信息改变虚拟对象的情况下,显示控制部26也可以根据道路的拥挤状况改变显示装置14的虚拟对象。具体而言,在根据在高速道路行驶时被分发的交通信息而在车辆的预定通行的道路发生了数分钟左右的堵塞的情况下,可以认为车速在短时间降低。在该情况下,显示控制部26显示图7所示那样的AR对象,以使同乘人员等能够欣赏与透过显示部的风景对应的虚拟对象。另一方面,在发生了数十分钟以上的堵塞的情况下,可以认为在比较长的时间被迫以低速驾驶。在该情况下,显示控制部26在侧玻璃等上显示吸引同乘人员的兴趣的VR对象等。例如,在车辆的当前位置附近所存在的建筑物为改装中的情况下,可以将改建前的该建筑物的计算机图形图像、改建后的该建筑物的计算机图形图像等作为VR对象显示。
在基于表示车辆行驶模式的信息改变虚拟对象的情况下,显示控制部26例如也可以根据是手动驾驶模式还是自动驾驶模式(包括驾驶辅助模式、半自动驾驶模式等)改变虚拟对象。例如,显示控制部26在是手动驾驶模式的情况下,显示图7所示那样的AR对象,在是自动驾驶模式的情况下,显示街道的VR对象。
另外,显示控制部26例如也可以根据乘员的属性改变虚拟对象。例如,在地图信息中,对确定的地点嵌入受孩子欢迎的动漫人物的AR对象的情况下,显示控制部26使用摄像信息识别车辆内的乘员的脸部,进而判定是否是孩子。而且,在是孩子的情况下,显示控制部26在车辆接近地图上的存在动漫人物的地点时,将其动漫人物的AR对象在显示装置14显示。
另外,在不想让孩子看到的招牌等存在于市区的情况下,也可以利用虚拟对象覆盖实际的招牌,或置换为孩子喜欢的角色的虚拟对象等等。具体而言,例如,在中心服务器5中,预先将希望禁止孩子阅览的广告、招牌、标语等信息与孩子的年龄、性别、国籍等信息建立对应关系地登记。而且,也可以是,通过将这些建立了对应关系的一览表信息等与地图上的坐标相关联,从而在接近这些广告等存在的地点的车辆中乘坐的人之中存在与已登记的条件对应的孩子的情况下,显示控制部26通过利用虚拟对象将实际的广告覆盖来不使孩子看到。另外,显示控制部26也可以与显示位置决定部22协作,通过对成为对象的孩子的视线方向进行分析,而在视线的前方存在不想让孩子看到的广告等虚拟对象的情况下,代替该对象,显示动漫人物等替代的AR对象。另外,显示控制部26也可以与显示位置决定部22协作,在这些广告等接近孩子视线时,显示替代的AR对象等。
此外,既可以将显示控制部26装入于ECU32,也可以将显示控制部26装入于显示装置14。
参照图12至图14说明通过将人的视线方向对上现实的对象来显示AR对象等的例子。
图12至图14分别是用于说明显示位置的决定方法的一例的图。在图12至图14中,分别示出设置于车辆的窗的显示装置14、在车室内辨认显示装置14的乘员u、位置p。位置p是在经由显示装置14从乘员u看到的风景之中,与AR对象等显示信息建立对应关系的车辆外的位置。
图12中,例如对如下情况进行说明,即,对车辆内的乘员u存在于车辆的右侧后部的窗的靠后方的位置,从该位置经由显示装置14看到车辆外右前方的位置p的情况。在该情况下,显示位置决定部22基于乘员u的位置、显示装置14的位置、位置p,决定显示装置14中的显示信息的显示位置。
下面,将乘员u的位置称为“乘员位置”,将显示装置14的位置称为“画面位置”,将与显示信息建立对应关系的位置p称为“信息对应位置p”。
在图12中,显示位置决定部22将连结风景中的信息对应位置p和乘员位置的虚线与显示装置14交叉的交点,决定为与风景中的信息对应位置p建立对应关系的显示信息d1的显示位置的中心点。
然后,显示位置决定部22生成对显示装置14指示将显示信息d1显示在所决定的显示位置的显示指令,并向显示控制部26输入。这时,显示位置决定部22使与风景中的信息对应位置p和乘员位置之间的位置关系相应的形态的显示信息d1(虚拟对象)显示。此外,显示位置决定部22也可以构成为,通过在使与风景中的信息对应位置p和乘员位置之间的位置关系相应的形态的显示信息d1显示之前,输出用于引起对显示装置14的显示信息d1的关注的装饰显示、闪烁动作、效果音等,来通过声音和显示,引导视点。
接着,在如图13所示,在乘员u移动到靠车辆的右侧后部的窗的靠前方的位置的情况下,显示位置决定部22将连结风景中的信息对应位置p和乘员位置的虚线与显示装置14交叉的交点,决定为与风景中的信息对应位置p建立对应关系的显示信息d2的显示位置的中心点。
然后,显示位置决定部22生成指示将显示信息d2(虚拟对象)显示在所决定的显示位置的显示指令,并向显示控制部26输入。显示信息d2的显示形态与图12的显示信息d1的显示形态不同。
之后,若车辆前进,则风景中的信息对应位置p相对地向车辆的右后方移动。在该情况下,显示位置决定部22将连结风景中的信息对应位置p和乘员位置的虚线与显示装置14交叉的交点,决定为与风景中的信息对应位置p建立对应关系的显示信息d3的显示位置的中心点。
然后,显示位置决定部22生成对显示装置14指示将显示信息d3(虚拟对象)显示在所决定的显示位置的显示指令,并向显示控制部26输入。显示信息d3的显示形态与图13的显示信息d2的显示形态不同。
这样,显示位置决定部22基于乘员位置、画面位置及信息对应位置p,将从乘员u观察时与风景中的信息对应位置p重叠的位置,决定为显示装置14中的虚拟对象的显示位置。而且,显示位置决定部22生成指示将与风景中的信息对应位置p和乘员位置之间的位置关系相应的形态的虚拟对象显示在所决定的显示位置的显示指令,并向显示控制部26输入。
由此,能够在经由显示装置14看到的现实的信息对应位置p显示好像存在那样的形态的AR对象等,因此,能够使乘员不产生针对透过显示部的风景的不协调感,并提高沉浸感。
图15是用于说明显示系统的显示方法的流程图。显示系统1中,首先,进行虚拟对象的登记(步骤S1)。具体而言,希望对象的加工等的广告商、个人等通过利用智能手机、移动终端等中安装的专用应用新制成虚拟对象,或自由地定制沿车辆的行驶线设定的虚拟对象。由此,能够进行新的虚拟对象、加工后的虚拟对象等的设定。此外,定制例如包括:在对已有的建筑物摄像得到的图像附加虚拟化的广告;将该建筑物整体利用计算机图形描绘为虚构的建筑物;等。也可以在对已有的建筑物摄像得到的图像施加虚拟的花纹、或虚拟的角色等。定制的对象例如在中心服务器5上的地图信息中,与建筑物、风景等的位置建立对应关系地被登记。
接着,下载了该地图信息的显示控制部26对地图信息的位置和车辆的当前位置进行比较(步骤S2)。在车辆未进入到距离地图上的特定的建筑物规定范围内时(步骤S3:“否”),显示控制部26重复步骤S2以后的处理。在车辆进入到距离地图上的特定的建筑物规定范围内时(步骤S3:“是”),显示控制部26在与该车辆位置对应的现实的建筑物等组合AR对象,并显示在显示装置14。另外,显示控制部26使VR对象以与现实的建筑物重叠的方式显示(步骤S4)。
此外,虚拟对象也可以是其运动或形状配合移动体的速度、行驶位置等,发生变化的。另外,显示系统1也可以构成为,通过操作乘员移动终端应用(结算应用)或者触碰窗所显示的图标,能够选择多个虚拟对象。另外,显示装置14不限定于具有改变透明的功能,也可以不具有改变透明度的功能。
如以上说明的那样,本实施方式的显示装置构成为具备:显示部,设置于移动体的窗;以及显示控制部,基于从移动体的内部透过显示部看到的对象与移动体之间的位置关系,对与对象对应的虚拟对象在显示部中的显示进行控制。利用该结构,能够在城市景观保持往昔的风情的同时,对透过显示部看到的风景编入广告或用户自由地安排的AR对象等。从而,在实现地区振兴的区域、景观条例等严格而被限制广告的发布等的区域等,不会损害城市景观而能够在短时间想象独特的风景,并能够构建热点。特别地,在是旅游资源贫乏的城市的情况下,通过设定只在移动体的窗显示的稀有角色,从而能够促进轿车、公共汽车、出租车等的利用。另外,通过对透过显示部的风景下功夫,从而能够预期观光客的增加,因此能够提高吸引客户到住宿设施、娱乐设施等的能力。这样,通过向移动体的乘员提供附加价值高的信息,能够实现区域的竞争力的提高及就业的促进和加强。
另外,本实施方式的显示方法包括:基于从移动体的内部透过显示部看到的对象与移动体之间的位置关系,决定将与对象对应的虚拟对象显示在设置于移动体的窗的显示部时的显示位置的步骤;以及在显示位置显示虚拟对象的步骤。
以上,参照附图对各种实施方式进行了说明,但是,当然,本公开不限定于这些例子。只要是本领域技术人员,显然能够在权利要求所记载的范围内想到各种变更例或修改例,应当了解的是,这些变更例或修改例也属于本公开的技术的范围。另外,也可以在不脱离公开的主旨的范围内,将上述实施方式中的各构成要素任意地组合。
以上,对本公开的具体例详细地进行了说明,但是,这些只是示例子,不对权利要求的范围进行限定。在权利要求记载的技术中,包含对以上示例的具体例进行各种变形、变更后的内容。
在2020年3月23日提交的日本专利申请特愿2020-050764号中包含的说明书、附图以及说明书摘要的公开内容全部引用于本申请。
工业实用性
本公开的一实施例适用于显示装置及车辆。
附图标记说明
1 显示系统
3 移动体
4 山
5 中心服务器
6 乘员
7 对象
8A 基础
8B 对象
9A 图标
9B 对象
14 显示装置
14a 电子透射控制膜
22 显示位置决定部
26 显示控制部
30 车载设备
32A 辅助存储装置
32B 存储器装置
32D 接口装置
33 GPS模块
34 ACC开关
35 传感器
36 摄像装置
51 通信设备
52 信息处理装置
321 车辆信息收发部
323 摄像信息管理部
520 存储部
5201 通信处理部
5205 信息显示物提取部
5212 车辆确定部
5213 指令发送部
5214 地图匹配部
5215 探查信息生成部

Claims (13)

1.一种显示装置,具备:
显示部,设置于移动体;以及
显示控制部,基于从所述移动体的内部透过所述显示部看到的对象与所述移动体之间的位置关系,对与所述对象对应的虚拟对象在所述显示部中的显示进行控制。
2.如权利要求1所述的显示装置,其中,
所述虚拟对象是增强现实的对象。
3.如权利要求2所述的显示装置,其中,
对透过所述显示部的对象附加所述增强现实的对象进行显示。
4.如权利要求3所述的显示装置,其中,
在透过所述显示部的对象上重叠所述增强现实的对象进行显示。
5.如权利要求3所述的显示装置,其中,
在透过所述显示部的对象的位置显示所述增强现实的对象。
6.如权利要求2所述的显示装置,其中,
所述增强现实的对象是对现实空间中的对象进行加工而成的对象。
7.如权利要求2所述的显示装置,其中,
在所述移动体的乘员针对透过所述显示部的风景的视线方向上显示所述增强现实的对象。
8.如权利要求1所述的显示装置,其中,
所述虚拟对象是虚拟现实的对象。
9.如权利要求8所述的显示装置,其中,
所述虚拟现实的对象是对现实空间中的对象进行加工而成的对象。
10.如权利要求1所述的显示装置,其中,
所述虚拟对象是与广告有关的对象。
11.如权利要求1所述的显示装置,其中,
根据所述移动体的乘员的属性而改变所述虚拟对象。
12.一种车辆,具备权利要求1所述的显示装置。
13.一种显示方法,包括以下步骤:
基于从移动体的内部透过设置于所述移动体的显示部窗看到的对象与所述移动体之间的位置关系,决定将与所述对象对应的虚拟对象显示在所述显示部时的显示位置的步骤;以及
在所述显示位置显示所述虚拟对象的步骤。
CN202080098828.9A 2020-03-23 2020-12-24 显示装置、显示方法及车辆 Pending CN115298520A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020050764A JP7437630B2 (ja) 2020-03-23 2020-03-23 表示装置、表示方法、及び車両
JP2020-050764 2020-03-23
PCT/JP2020/048570 WO2021192469A1 (ja) 2020-03-23 2020-12-24 表示装置、表示方法、及び車両

Publications (1)

Publication Number Publication Date
CN115298520A true CN115298520A (zh) 2022-11-04

Family

ID=77848486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080098828.9A Pending CN115298520A (zh) 2020-03-23 2020-12-24 显示装置、显示方法及车辆

Country Status (5)

Country Link
US (1) US20230014553A1 (zh)
JP (1) JP7437630B2 (zh)
CN (1) CN115298520A (zh)
DE (1) DE112020006955T5 (zh)
WO (1) WO2021192469A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7236478B2 (ja) * 2020-10-28 2023-03-09 株式会社日本総合研究所 情報処理システム、コンピュータプログラム、及び表示方法
US11914835B2 (en) * 2020-11-16 2024-02-27 Samsung Electronics Co., Ltd. Method for displaying user interface and electronic device therefor
JP2023017645A (ja) * 2021-07-26 2023-02-07 トヨタ自動車株式会社 車両用表示制御装置及び車両用表示制御方法
US20230120284A1 (en) * 2021-10-15 2023-04-20 Hyundai Mobis Co., Ltd. System for controlling vehicle display by transfering external interest information

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3931335B2 (ja) * 2003-09-26 2007-06-13 マツダ株式会社 車両用情報提供装置
JP3931336B2 (ja) 2003-09-26 2007-06-13 マツダ株式会社 車両用情報提供装置
JP6064510B2 (ja) * 2012-10-19 2017-01-25 トヨタ自動車株式会社 情報提供装置および情報提供方法
US10129439B2 (en) * 2016-03-23 2018-11-13 GM Global Technology Operations LLC Dynamically colour adjusted visual overlays for augmented reality systems
US10870351B2 (en) * 2018-12-12 2020-12-22 Here Global B.V. Method and apparatus for augmented reality based on localization and environmental conditions

Also Published As

Publication number Publication date
JP7437630B2 (ja) 2024-02-26
JP2021148691A (ja) 2021-09-27
US20230014553A1 (en) 2023-01-19
WO2021192469A1 (ja) 2021-09-30
DE112020006955T5 (de) 2023-01-05

Similar Documents

Publication Publication Date Title
JP7437630B2 (ja) 表示装置、表示方法、及び車両
KR102046468B1 (ko) 차량용 사이드 미러
US20230017486A1 (en) Display device, display method, and vehicle
JP7237992B2 (ja) 困難な運転状態下でのランドマークによる強化されたナビゲーション指示
US20240071074A1 (en) Ar service platform for providing augmented reality service
US11590902B2 (en) Vehicle display system for displaying surrounding event information
US11840173B2 (en) External facing communications for autonomous vehicles
CN113544757A (zh) 信息处理装置、信息处理方法,以及移动体装置
KR20220125148A (ko) 영상 출력 장치 및 그것의 제어 방법
KR20190072239A (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
US20230375362A1 (en) Reachability User Experience Interfaces for Autonomous Vehicles
EP4372314A1 (en) Route guiding device and route guiding system based on augmented reality and mixed reality
JP2021149752A (ja) 表示装置、表示方法、及び車両
US20240177418A1 (en) Mixed reality-based display device and route guide system
JP2022167701A (ja) 情報処理装置、情報処理プログラム、情報処理方法及びモビリティサイネージシステム
CN117215061A (zh) 车辆用ar显示装置及其动作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20240409

Address after: Kanagawa Prefecture, Japan

Applicant after: Panasonic Automotive Electronic Systems Co.,Ltd.

Country or region after: Japan

Address before: Osaka, Japan

Applicant before: PANASONIC INTELLECTUAL PROPERTY MANAGEMENT Co.,Ltd.

Country or region before: Japan

TA01 Transfer of patent application right