CN107107834A - 投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序 - Google Patents

投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序 Download PDF

Info

Publication number
CN107107834A
CN107107834A CN201580070191.1A CN201580070191A CN107107834A CN 107107834 A CN107107834 A CN 107107834A CN 201580070191 A CN201580070191 A CN 201580070191A CN 107107834 A CN107107834 A CN 107107834A
Authority
CN
China
Prior art keywords
projection
image
driver
view data
visuognosis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580070191.1A
Other languages
English (en)
Inventor
藤田广大
伊藤大介
伊藤研治
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN107107834A publication Critical patent/CN107107834A/zh
Pending legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85—Arrangements for transferring vehicle- or driver-related data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/18—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical projection, e.g. combination of mirror and condenser and objective
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/166—Navigation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/176—Camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/184—Displaying the same information on different displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55—Remote control arrangements
    • B60K2360/56—Remote control arrangements using mobile devices
    • B60K2360/566—Mobile devices displaying vehicle information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589—Wireless data transfers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/60—Structural details of dashboards or instruments
    • B60K2360/66—Projection screens or combiners
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0149—Head-up displays characterised by mechanical features
    • G02B2027/0161—Head-up displays characterised by mechanical features characterised by the relative positioning of the constitutive elements
    • G02B2027/0163—Electric or electronic control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种能够由同乘者轻松地共享汽车驾驶者的视场内的图像的投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序。HUD具备：摄像图像数据获取部(51)，从拍摄前挡风玻璃(1)前方的摄像部(8)获取摄像图像数据；投影用图像数据生成部(52)，对已获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据投影用图像数据对从光源单元(40A)射出的光进行调制而投影到组合器(2)；驾驶者视觉辨认图像数据生成部(53)，生成将投影用图像数据叠加于摄像图像数据而成的驾驶者视觉辨认图像数据；以及通信部(47)，向具有显示部且配置于汽车内的电子设备(9)发送驾驶者视觉辨认图像数据。

Description

投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以 及驾驶者视觉辨认图像共享程序
技术领域
本发明涉及一种投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序。
背景技术
已知将汽车的前挡风玻璃或配置于前挡风玻璃的近前附近的组合器用作屏幕，并将投影光投影到该屏幕而显示图像的汽车用HUD(平视显示器)装置(例如参照专利文献1)。根据该HUD，用户能够将通过从HUD投影出的投影光显示在前挡风玻璃等的图像与位于该前挡风玻璃等的背面侧的本车辆前方的风景叠加而进行视觉辨认。
专利文献1中记载有具有作为驾驶者用显示器的HUD和同乘者用显示器的汽车。该汽车中，通过利用HUD和同乘者用显示器来改变所显示的信息量，从而能够给乘坐汽车的每个人提供适当的信息。
专利文献2中记载有如下系统，所述系统虽然与HUD无关，但通过将头戴式显示器的佩戴者所看的影像传送至与头戴式显示器无线连接的外部设备，从而使得佩戴者以外的人能够确认该影像。
现有技术文献
专利文献
专利文献1：日本特开2013-154712号公报
专利文献2：日本特开2003-287708号公报
发明内容
发明所要解决的问题
搭载于汽车内的HUD设计成最容易由驾驶者看到投影到前挡风玻璃的图像(用于通知前方的危险物的警告信息等)，而坐在副驾驶座的同乘者很难明确地确认该图像。若能够由同乘者确认警告等信息，则能够提高安全性，但迄今为止尚未提供这种产品。
为了使同乘者也看到所投影的图像，可以考虑在汽车内设置2台HUD。但是，很难在有限的空间内配置2台HUD。并且，汽车的制造成本会增加。
专利文献1中记载的系统中，同乘者用显示器上仅显示从外部中心接收的内容，同乘者无法共享驾驶者所看的图像。
专利文献2中记载的系统与使用了HUD的系统无关，因此并未考虑到关于将HUD搭载于汽车内的情况的课题。
本发明是鉴于上述情况而完成的，其目的在于提供一种能够由同乘者轻松地共享汽车驾驶者的视场内的场景的投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序。
用于解决问题的手段
本发明的投影型显示装置，其搭载于汽车内，所述投影型显示装置具备：摄像图像数据获取部，从搭载于上述汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到投影面；驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送部，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
本发明的电子设备，其具备：通信部，与投影型显示装置进行通信；获取部，经由上述通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据；显示部，显示基于图像数据的图像；以及显示控制部，将基于上述驾驶者视觉辨认图像数据的图像显示在上述显示部，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
本发明的驾驶者视觉辨认图像共享方法，其具备如下步骤：摄像图像数据获取步骤，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成步骤，对通过上述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；投影步骤，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；驾驶者视觉辨认图像数据生成步骤，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送步骤，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
本发明的驾驶者视觉辨认图像共享方法，其具备如下步骤：经由与投影型显示装置进行通信的通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据的步骤；以及将基于上述驾驶者视觉辨认图像数据的图像显示在显示部的步骤，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据上述投影用图像数据对从上述光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
本发明的驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：摄像图像数据获取步骤，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成步骤，对通过上述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；投影步骤，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；驾驶者视觉辨认图像数据生成步骤，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送步骤，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
本发明的驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：经由与投影型显示装置进行通信的通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据的步骤；以及将基于上述驾驶者视觉辨认图像数据的图像显示在显示部的显示控制步骤，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据上述投影用图像数据对从上述光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
发明效果
根据本发明，能够提供能够由同乘者轻松地共享汽车驾驶者的视场内的场景的投影型显示装置、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序。
附图说明
图1是表示本发明的投影型显示装置的一种实施方式的HUD的结构的图。
图2是表示图1所示的显示单元4的结构例的图。
图3是表示显示单元4的系统控制部48的功能块和表示电子设备9的内部结构的块的图。
图4是用于说明图1所示的HUD和电子设备9的工作的流程图。
图5是用于说明图4的工作的图。
图6是用于说明图4的工作的图。
图7是用于说明图1所示的HUD和电子设备9的工作的第一变形例的流程图。
图8是用于说明图7的工作的图。
图9是用于说明图1所示的HUD和电子设备9的工作的第二变形例的流程图。
图10是用于说明图9的工作的图。
图11是用于说明图9的工作的图。
具体实施方式
以下，参照附图对本发明的实施方式进行说明。
图1是表示本发明的投影型显示装置的一种实施方式的HUD的结构的图。该HUD搭载于汽车内使用。
图1所示的HUD具备：显示单元4，内置于汽车的仪表盘3；投影单元，包含扩散板5、反射镜6和放大镜7；以及组合器2，粘贴于汽车的前挡风玻璃1的内表面。
扩散板5用于使从显示单元4射出的对应于投影用图像数据的光扩散而对该光进行面光源化。
反射镜6使通过扩散板5扩散的光向放大镜7侧反射。
放大镜7将基于通过反射镜6反射来的光的图像放大而投影到组合器2。
组合器2是从放大镜7投影出的光被投影的存在于汽车内的投影面，且反射该光。汽车驾驶者通过观察由组合器2反射出的光，能够视觉辨认与驾驶相关的信息等。并且，组合器2具有反射从放大镜7投影出的光的同时透射来自前挡风玻璃1的外部(外界)的光的功能。因此，驾驶者能够将基于从放大镜7投影出的光的图像和前挡风玻璃1外的外界的景色叠加而进行视觉辨认。
前挡风玻璃1的上方设有拍摄汽车的行进方向即前挡风玻璃1的前方的景色的摄像部8。摄像部8与显示单元4通过有线或无线连接，由摄像部8拍摄而得到的摄像图像数据被输出至显示单元4。摄像部8可以是HUD专用的，也可以是例如以碰撞防止系统等其他目的搭载于汽车内的摄像部。
汽车内存在同乘者携带的电子设备9。电子设备9为例如安装有CPU(CentralProcessing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、操作部以及显示部等的便携式计算机。电子设备例如为智能手机、带相机的移动电话以及平板终端(移动信息终端)等。
图2是表示图1所示的显示单元4的结构例的图。
显示单元4具备光源单元40A、光调制元件44、驱动光调制元件44的驱动部45、投影光学系统46、通信部47以及综合控制整体的系统控制部48。
光源单元40A具备：光源控制部40；射出红色光的红色光源即R光源41r；射出绿色光的绿色光源即G光源41g；射出蓝色光的蓝色光源即B光源41b；分色棱镜43；设置在R光源41r与分色棱镜43之间的准直透镜42r；设置在G光源41g与分色棱镜43之间的准直透镜42g；以及设置在B光源41b与分色棱镜43之间的准直透镜42b。
分色棱镜43是用于将分别从R光源41r、G光源41g以及B光源41b射出的光引导至同一光路的光学部件。作为具有这种功能的光学部件，并不限于分色棱镜。例如，也可以使用十字分色镜。
分色棱镜43使被准直透镜42r平行光化的R光透射而向光调制元件44射出。并且，分色棱镜43使被准直透镜42g平行光化的G光反射而向光调制元件44射出。并且，分色棱镜43使被准直透镜42b平行光化的B光反射而向光调制元件44射出。
R光源41r、G光源41g以及B光源41b可分别使用激光和LED(发光二极管(LightEmitting Diode))等发光元件。本实施方式中，以包含R光源41r、G光源41g和B光源41b这三个光源的HUD为例，但光源的数量也可以是两个或四个以上。
光源控制部40进行如下控制：将R光源51r、G光源51g以及B光源51b各自的发光量设定为预先确定的发光量模式，并根据该发光量模式，从R光源51r、G光源51g以及B光源51b依次射出光。
光调制元件44对从分色棱镜43射出的光进行调制，并向投影光学系统46射出对应于投影用图像数据的光(红色图像光、蓝色图像光以及绿色图像光)。
作为光调制元件44，例如能够使用LCOS(硅基液晶(Liquid crystal onsilicon))、DMD(数字微镜器件(Digital Mirror Device))、MEMS(微机电系统(MicroElectro Mechanical Systems))元件以及液晶显示元件等。
驱动部45根据从系统控制部48输入的投影用图像数据驱动光调制元件44，并向投影光学系统46射出对应于投影用图像数据的光(红色图像光、蓝色图像光以及绿色图像光)。
投影光学系统46是用于将从光调制元件44射出的光投影到扩散板5的光学系统。由光调制元件44、投影光学系统46、扩散板5、反射镜6和放大镜7构成投影部，所述投影部根据投影用图像数据对从光源单元40A射出的光进行调制而投影到作为投影面的组合器2。
通信部47为用于与存在于汽车内的电子设备9进行近距离无线通信的接口。作为该接口，例如可使用依照蓝牙(注册商标)的通信接口。当然也可以使用其他通信接口。
系统控制部48控制光源控制部40和驱动部45。
图3是表示显示单元4的系统控制部48的功能块和表示电子设备9的内部结构的块的图。
如图3所示，系统控制部48具备摄像图像数据获取部51、投影用图像数据生成部52、驾驶者视觉辨认图像数据生成部53以及电子设备检测部54。
摄像图像数据获取部51从摄像部8获取由摄像部8拍摄而得到的摄像图像数据，并输出至投影用图像数据生成部52和驾驶者视觉辨认图像数据生成部53。
投影用图像数据生成部52通过公知的图像分析处理，对由摄像图像数据获取部51获取的摄像图像数据进行分析而生成投影用图像数据。投影用图像数据生成部52将已生成的投影用图像数据输出至驱动部45和驾驶者视觉辨认图像数据生成部53。
具体而言，投影用图像数据生成部52根据摄像图像数据检测行人、电线杆、行道树、事故车辆等障碍物或危险物。当投影用图像数据生成部52检测出障碍物或危险物时，生成用于通知检测出的障碍物或危险物的投影用图像数据。
摄像图像数据相当于前挡风玻璃1前方的景色。而且，预先确定有若将光调制元件44的哪个像素设为有效(使光反射或透射而向投影光学系统46射出的状态)，则图像被投影到摄像图像数据(前挡风玻璃1前方的景色)的哪个区域这一关系。因此，只要得知根据摄像图像数据检测出的障碍物或危险物的区域，则还能够确定应将哪种投影用图像数据输出至驱动部45。
投影用图像数据生成部52还生成投影用图像数据，所述投影用图像数据表示用于对汽车的行驶速度和目的地进行导航的指南信息。
驾驶者视觉辨认图像数据生成部53生成将由投影用图像数据生成部52生成的投影用图像数据叠加于由摄像图像数据获取部51获取的摄像图像数据而成的驾驶者视觉辨认图像数据，并将已生成的驾驶者视觉辨认图像数据经由通信部47发送至存在于汽车内的电子设备9。通信部47作为向存在于汽车内的电子设备9发送驾驶者视觉辨认图像数据的发送部而发挥作用。
电子设备检测部54检测存在于汽车内的电子设备。例如，电子设备检测部54对由搭载于汽车内的导航系统用GPS(全球定位系统(Global Positioning System))接收器接收的汽车的位置信息和由搭载于电子设备9的后述GPS接收器66接收的位置信息进行比较。电子设备检测部54经由通信部47获取电子设备9的位置信息。
只要两个位置信息没有较大的差异，则电子设备检测部54判定为通信中的电子设备9存在于汽车内。若两个位置信息存在较大差异，则电子设备检测部54判定为通信中的电子设备9存在于汽车外。当电子设备检测部54判定为电子设备9存在于汽车内时，对于通信部47，允许其与该电子设备9之间的数据的接收和发送。由此，成为能够在存在于汽车内的电子设备9和HUD之间接收和发送数据的状态。
电子设备9具备：控制部61；通信部62；包含闪存或ROM(只读存储器(Read OnlyMemory))等存储介质的存储部63；用于输入各种信息的操作部64；显示基于图像数据的图像的显示部65；以及GPS接收器66。
控制部61以执行存储于存储部63的ROM中的程序的处理器为主体而构成。控制部61获取由通信部62接收的驾驶者视觉辨认图像数据，并将基于已获取的驾驶者视觉辨认图像数据的图像显示在显示部65。控制部61作为获取部和显示控制部发挥作用。
通信部62为用于与包含图1所示的HUD在内的其他电子设备进行近距离无线通信的通信接口。
存储部63存储经由通信部62接收的数据，或存储电子设备9的工作所需的数据。
操作部64为用于向控制部61输入各种指示的接口，由各种按钮或搭载于显示部65的触摸屏等构成。
图4是用于说明图1所示的HUD和电子设备9的工作的流程图。在图4的说明中，参照图5、图6的显示例，还说明具体的处理内容。
图5是表示在HUD尚未启动的状态下驾驶者所看的场景的图。图5的例子中，通过行驶中的汽车的前挡风玻璃1，可视觉辨认行人101和建筑102。
HUD已启动的状态下，同乘者携带电子设备9而乘坐汽车。由此，在显示单元4的通信部47与电子设备9的通信部62之间进行协商，并由电子设备检测部54检测出电子设备9的存在。而且，能够在HUD的通信部47与电子设备9的通信部62之间接收和发送数据。
若HUD启动，则摄像图像数据获取部51获取由摄像部8拍摄的摄像图像数据。(步骤S1)。
接着，投影用图像数据生成部52对由摄像图像数据获取部51获取的摄像图像数据进行分析(步骤S2)，根据分析结果而生成投影用图像数据(步骤S3)。
图5的例子中，行人101被分析为障碍物或危险物，并生成用于通知该障碍物或危险物的存在及其存在位置的投影用图像数据。并且，投影用图像数据生成部52生成用于显示汽车的行驶速度和导航信息的投影用图像数据。
接着，投影用图像数据生成部52将通过步骤S3生成的投影用图像数据输入至驱动部45。驱动部45根据从投影用图像数据生成部52输入的投影用图像数据驱动光调制元件44，并对从光源单元40A射出的光进行调制。通过该调制，基于投影用图像数据的图像被投影到组合器2(步骤S4)。
如图6所示，通过步骤S4的处理，基于投影用图像数据的图像111～113投影到组合器2。图像111为用于通知障碍物或危险物的存在的警告标记。图像112为表示被认为是障碍物或危险物的区域的框图像。图像113为表示汽车的行驶速度和导航信息的图像。驾驶者通过将投影到组合器2的图像111和图像112与外界的景色叠加而进行视觉辨认，从而会更容易察觉行人101。
接着，驾驶者视觉辨认图像数据生成部53生成将通过步骤S3生成的投影用图像数据叠加于由摄像图像数据获取部51获取的摄像图像数据而成的驾驶者视觉辨认图像数据(步骤S5)。驾驶者视觉辨认图像数据生成部53将通过步骤S5生成的驾驶者视觉辨认图像数据经由通信部47发送至存在于汽车内的电子设备9(步骤S6)。
电子设备9的控制部61获取经由通信部62从HUD发送来的驾驶者视觉辨认图像数据(步骤S7)。而且，控制部61将基于已获取的驾驶者视觉辨认图像数据的图像显示在显示部65(步骤S8)。
由此，如图6所示，电子设备9的显示部65中显示虚像(图像111、112以及113)被叠加于由摄像部8拍摄的被摄体图像的图像。即，电子设备9的显示部65中实时显示相当于驾驶者所看的场景的图像。
如此，驾驶者能够将投影到组合器2的图像111、112和前挡风玻璃1前方的外界的景色叠加而进行视觉辨认，因此会更容易察觉行人101等危险状况。HUD的投影部设计成最容易由驾驶者视觉辨认投影到组合器2的图像111和图像112。因此，很难由驾驶者以外的人视觉辨认图像111和图像112。但是，根据图1的HUD，通过电子设备9的显示部65，同乘者也能够实时地确认驾驶者所看的场景。因此，例如即使在驾驶者未发现行人101时，同乘者也能够发现行人101，能够期待同乘者使驾驶者引起注意等的应对。
并且，图1所示的HUD中，可以考虑到由于R光源41r、G光源41g、B光源41b或光调制元件44的故障，在组合器2中未显示例如图像111或图像112的情况。这种状况下，驾驶者很难发现行人101等危险状况。
根据图1所示的HUD，即使在R光源41r、G光源41g、B光源41b或光调制元件44产生故障时，显示部65中也一定会显示基于投影图像数据的图像，因此同乘者能够发现危险状况，从而能够提高安全性。并且，通过由驾驶者和同乘者共享所看的信息，能够掌握同乘者看到而驾驶者未看到的状况，能够由驾驶者和同乘者发现HUD的故障。
图1所示的HUD为使用同乘者携带的电子设备9，使同乘者看到相当于驾驶者所看的场景的图像的系统。因此，无需在汽车内设置专用的显示装置，能够实现低成本化。
另外，也可以将用于与驾驶者进行信息共享的应用程序安装于电子设备9，并由同乘者启动该应用程序，从而进行如上述那样的处理。该情况下，也可以在启动应用程序时，由电子设备9的控制部61实施与HUD的配对，并通知HUD的电子设备检测部54电子设备9存在于汽车内。
图7是用于说明图1所示的HUD和电子设备9的工作的第一变形例的流程图。在图7的说明中，参照图8的显示例，还说明具体的处理内容。
电子设备9的控制部61判定对于显示在显示部65的图像是否指定有特定区域(步骤S11)。
在显示在电子设备9的显示部65的基于驾驶者视觉辨认图像数据的图像中显示有自己想去的目的地时，同乘者为了将该目的地告知驾驶者而在图像上指定目的地附近(例如图8的建筑102)的区域。
由此，电子设备9的控制部61判定为从基于驾驶者视觉辨认图像数据的图像中指定有特定区域(步骤S11：是)，并将表示该特定区域的指定信息经由通信部62发送至HUD的通信部47(步骤S12)。电子设备9的控制部61作为第一发送部发挥作用。
指定信息为表示显示在显示部65中的驾驶者视觉辨认图像数据中的上述特定区域的坐标的信息。另外，驾驶者视觉辨认图像数据的各像素的坐标与摄像图像数据的各像素的坐标对应。
HUD的投影用图像数据生成部52获取从电子设备9发送来的由通信部47接收的指定信息(步骤S13)。而且，投影用图像数据生成部52在对摄像图像数据进行分析生成的投影用图像数据上附加用于强调摄像图像数据中的基于指定信息的区域的数据(步骤S14)。
摄像图像数据相当于前挡风玻璃1前方的景色。而且，预先确定有若将光调制元件44的哪个像素设为有效(使光反射或透射而向投影光学系统46射出的状态)，则图像被投影到摄像图像数据(前挡风玻璃1前方的景色)的哪个区域这一关系。因此，只要存在指定信息，则能够生成用于将图像投影到由该指定信息指定的摄像图像数据的区域的数据。
接着，投影用图像数据生成部52将通过步骤S14生成的投影用图像数据输入至驱动部45。由此，基于附加有上述数据的投影用图像数据的图像被投影到组合器2(步骤S15)。
例如如图8所示，通过步骤S15的处理，基于投影用图像数据的图像121追加投影于图6的例子中。图像121为表示与由电子设备9的用户从显示在显示部65中的图像中指定的特定区域对应的区域的框图像。图像121为一例，只要是能够向驾驶者传达建筑102被指定这一情况的图像，则可以是任何图像。
如上所述，当显示在电子设备9的显示部65的图像中显示有自已想去的目的地时，同乘者指定该目的地，从而能够在组合器2中强调显示该目的地。驾驶者能够与外界的景色一同确认表示特定区域的图像121，能够轻松地识别同乘者的目的地。根据该结构，例如在出租车的乘客将目的地传达给驾驶者时是有效的。
图9是用于说明图1所示的HUD和电子设备9的工作的第二变形例的流程图。在图9的说明中，参照图10、图11的显示例，还说明具体的处理内容。
若操作部64被操作而进行菜单显示指示，则电子设备9的控制部61例如如图10所示那样将菜单130显示在显示部65。菜单130中显示有多个图标，而图10的例子中显示有卫生间图标131。
电子设备9的控制部61判定是否选择出显示在显示部65的菜单130中所含的任何图标(步骤S21)。
若由同乘者选择出菜单130中所含的卫生间图标131，则控制部61将指示追加被投影到组合器2的图像的指示信息，经由通信部62发送至HUD的通信部47(步骤S22)。另外，该指示信息根据每个选择出的图标而不同，与指示信息对应的图像数据被存储于HUD的未图示的存储器中。电子设备9的控制部61作为第二发送部发挥作用。
HUD的投影用图像数据生成部52获取由通信部47接收的指示信息(步骤S23)。而且，投影用图像数据生成部52在对摄像图像数据进行分析而生成的投影用图像数据上附加用于将基于已获取的指示信息的图像进行投影的数据(与指示信息对应而存储于存储器的图像数据)(步骤S24)。
接着，投影用图像数据生成部52将通过步骤S24生成的投影用图像数据输入至驱动部45。由此，基于附加有上述图像数据的投影用图像数据的图像被投影到组合器2(步骤S25)。
例如，如图10所示，组合器2中，图像141(图例中为卫生间标记)追加投影于图6的例子中。驾驶者能够通过投影到组合器2的图像141识别同乘者处于想去卫生间这一状况。
另外，控制部61也可以将由电子设备9的用户输入的任意文本信息与指示信息一同发送至HUD。而且，HUD的投影用图像数据生成部52在通过对摄像图像数据进行分析而生成的投影用图像数据上附加与指示信息对应的图像数据和用于显示与该指示信息同时发送来的文本信息的图像数据。图10的例中，与图像141一同显示有“A先生/女士”这一文本图像142。由此，驾驶者能够容易得知是谁想去卫生间。
对与文本输入对应的结构进行说明。该结构中，如图11所示，电子设备9的控制部61将文字输入框150显示在显示部65。若欲追加投影于组合器2的消息被输入至文字输入框150，则控制部61将指示追加消息的指示信息发送至HUD。
若投影用图像数据生成部52获取该指示信息，则生成附加有用于显示基于指示信息的图像(消息)的数据的投影用图像数据。由此，如图11所示，文本图像161被追加投影。
通过如上述那样，在汽车行驶中，同乘者能够对驾驶者表达意图。例如，3排座椅的汽车中，对于坐在最后方座位的同乘者来说有时还存在很难与驾驶者进行对话的情况。因此，图11所示的结构成为有效。并且，对于很难进行对话的残疾人士来说也成为有效的结构。
还能够作为用于使计算机执行本实施方式的系统控制部48和控制部61进行的各处理的程序而提供。这种程序中，将该程序记录于计算机能够读取的非临时性(non-transitory)记录介质中。
这种“计算机能够读取的记录介质”例如包含CD-ROM(光盘只读存储器(CompactDisc-ROM))等光学介质、存储卡等磁记录介质等。并且，也能够通过经由网络的下载而提供这种程序。
如以上说明，本说明书中公开有以下事项。
所公开的投影型显示装置，其搭载于汽车内，所述投影型显示装置具备：摄像图像数据获取部，从搭载于上述汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对通过上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到投影面；驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送部，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
所公开的投影型显示装置中，上述投影用图像数据生成部从上述电子设备获取指定信息，并在上述投影用图像数据上附加用于强调上述摄像图像数据中的基于上述指定信息的区域的数据，所述指定信息表示从显示在上述显示部的基于上述驾驶者视觉辨认图像数据的图像中指定的特定区域。
所公开的投影型显示装置中，上述投影用图像数据生成部从上述电子设备获取指示信息，并在上述投影用图像数据上附加用于将基于上述指示信息的图像进行投影的数据，所述指示信息指示追加被投影到上述投影面的图像。
所公开的电子设备，其具备：通信部，与投影型显示装置进行通信；获取部，经由上述通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据；显示部，显示基于图像数据的图像；以及显示控制部，将基于上述驾驶者视觉辨认图像数据的图像显示在上述显示部，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
所公开的电子设备，其还具备第一发送部，所述第一发送部将指定信息经由上述通信部发送至上述投影型显示装置，所述指定信息表示从显示在上述显示部的基于上述驾驶者视觉辨认图像数据的图像中指定的特定区域。
所公开的电子设备，其具备第二发送部，所述第二发送部将指示信息经由上述通信部发送至上述投影型显示装置，所述指示信息指示追加被投影到上述投影面的图像。
所公开的驾驶者视觉辨认图像共享方法，其具备：摄像图像数据获取步骤，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成步骤，对通过上述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；投影步骤，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；驾驶者视觉辨认图像数据生成步骤，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送步骤，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
所公开的驾驶者视觉辨认图像共享方法，其还具备从上述电子设备获取指定信息的步骤，所述指定信息表示显示在上述电子设备的显示部的基于上述驾驶者视觉辨认图像数据的图像中指定的特定区域，上述投影用图像数据生成步骤中，在上述投影用图像数据上附加用于强调上述摄像图像数据中的基于上述指定信息的区域的数据。
所公开的驾驶者视觉辨认图像共享方法，其还具备从上述电子设备获取指示信息的步骤，所述指示信息指示追加被投影到上述投影面的图像，上述投影用图像数据生成步骤中，在上述投影用图像数据上附加用于将基于上述指示信息的图像进行投影的数据。
所公开的驾驶者视觉辨认图像共享方法，其具备如下步骤：经由与投影型显示装置进行通信的通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据的步骤；以及将基于上述驾驶者视觉辨认图像数据的图像显示在显示部的步骤，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据上述投影用图像数据对从上述光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
所公开的驾驶者视觉辨认图像共享方法，其还具备将指定信息经由上述通信部发送至上述投影型显示装置的步骤，所述指定信息表示从显示在上述显示部的基于上述驾驶者视觉辨认图像数据的图像中指定的特定区域。
所公开的驾驶者视觉辨认图像共享方法，其还具备根据操作部的操作而将指示信息经由上述通信部发送至上述投影型显示装置的步骤，所述指示信息指示追加被投影到上述投影面的图像。
所公开的驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：摄像图像数据获取步骤，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成步骤，对通过上述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；投影步骤，根据上述投影用图像数据对从光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；驾驶者视觉辨认图像数据生成步骤，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据；以及发送步骤，向电子设备发送上述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于上述汽车内。
所公开的驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：经由与投影型显示装置进行通信的通信部，从上述投影型显示装置获取上述驾驶者视觉辨认图像数据的步骤；以及将基于上述驾驶者视觉辨认图像数据的图像显示在显示部的显示控制步骤，所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄上述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由上述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据上述投影用图像数据对从上述光源单元射出的光进行调制而投影到存在于上述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将上述投影用图像数据叠加于上述摄像图像数据而成的驾驶者视觉辨认图像数据。
工业实用性
本发明尤其适用于车载用HUD，便利性高且有效。
符号说明
8-摄像部，9-电子设备，44-光调制元件，45-驱动部，47-通信部，51-摄像图像数据获取部，52-投影用图像数据生成部，53-驾驶者视觉辨认图像数据生成部，61-控制部，62-通信部，65-显示部。

Claims (14)

1.一种投影型显示装置，其搭载于汽车内，所述投影型显示装置具备：
摄像图像数据获取部，从搭载于所述汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；
投影用图像数据生成部，对由所述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；
投影部，根据所述投影用图像数据对从光源单元射出的光进行调制而投影到投影面；
驾驶者视觉辨认图像数据生成部，生成将所述投影用图像数据叠加于所述摄像图像数据而成的驾驶者视觉辨认图像数据；以及
发送部，向电子设备发送所述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于所述汽车内。
2.根据权利要求1所述的投影型显示装置，其中，
所述投影用图像数据生成部从所述电子设备获取指定信息，并在所述投影用图像数据中附加用于强调所述摄像图像数据中的基于所述指定信息的区域的数据，所述指定信息表示从显示在所述显示部的基于所述驾驶者视觉辨认图像数据的图像中指定的特定区域。
3.根据权利要求1或2所述的投影型显示装置，其中，
所述投影用图像数据生成部从所述电子设备获取指示信息，并在所述投影用图像数据中附加用于将基于所述指示信息的图像进行投影的数据，所述指示信息指示追加被投影到所述投影面的图像。
4.一种电子设备，其具备：
通信部，与投影型显示装置进行通信；
获取部，经由所述通信部，从所述投影型显示装置获取驾驶者视觉辨认图像数据；
显示部，显示基于图像数据的图像；以及
显示控制部，将基于所述驾驶者视觉辨认图像数据的图像显示在所述显示部，
所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由所述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；投影部，根据所述投影用图像数据对从光源单元射出的光进行调制而投影到存在于所述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将所述投影用图像数据叠加于所述摄像图像数据而成的所述驾驶者视觉辨认图像数据。
5.根据权利要求4所述的电子设备，其中，
其还具备第一发送部，所述第一发送部将指定信息经由所述通信部发送至所述投影型显示装置，所述指定信息表示从显示在所述显示部的基于所述驾驶者视觉辨认图像数据的图像中指定的特定区域。
6.根据权利要求5所述的电子设备，其中，
其具备第二发送部，所述第二发送部将指示信息经由所述通信部发送至所述投影型显示装置，所述指示信息指示追加被投影到所述投影面的图像。
7.一种驾驶者视觉辨认图像共享方法，其具备如下步骤：
摄像图像数据获取步骤，从搭载于汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；
投影用图像数据生成步骤，对通过所述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；
投影步骤，根据所述投影用图像数据对从光源单元射出的光进行调制而投影到存在于所述汽车内的投影面；
驾驶者视觉辨认图像数据生成步骤，生成将所述投影用图像数据叠加于所述摄像图像数据而成的驾驶者视觉辨认图像数据；以及
发送步骤，向电子设备发送所述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于所述汽车内。
8.根据权利要求7所述的驾驶者视觉辨认图像共享方法，其中，
其还具备从所述电子设备获取指定信息的步骤，所述指定信息表示从显示在所述电子设备的显示部的基于所述驾驶者视觉辨认图像数据的图像中指定的特定区域，
所述投影用图像数据生成步骤中，在所述投影用图像数据中附加用于强调所述摄像图像数据中的基于所述指定信息的区域的数据。
9.根据权利要求7或8所述的驾驶者视觉辨认图像共享方法，其中，
其还具备从所述电子设备获取指示信息的步骤，所述指示信息指示追加被投影到所述投影面的图像，
所述投影用图像数据生成步骤中，在所述投影用图像数据中附加用于将基于所述指示信息的图像进行投影的数据。
10.一种驾驶者视觉辨认图像共享方法，其具备如下步骤：
经由与投影型显示装置进行通信的通信部，从所述投影型显示装置获取驾驶者视觉辨认图像数据的步骤；以及
将基于所述驾驶者视觉辨认图像数据的图像显示在显示部的步骤，
所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由所述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据所述投影用图像数据对从所述光源单元射出的光进行调制而投影到存在于所述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将所述投影用图像数据叠加于所述摄像图像数据而成的所述驾驶者视觉辨认图像数据。
11.根据权利要求10所述的驾驶者视觉辨认图像共享方法，其中，
其还具备将指定信息经由所述通信部发送至所述投影型显示装置的步骤，所述指定信息表示从显示在所述显示部的基于所述驾驶者视觉辨认图像数据的图像中指定的特定区域。
12.根据权利要求11所述的驾驶者视觉辨认图像共享方法，其中，
其还具备根据操作部的操作而将指示信息经由所述通信部发送至所述投影型显示装置的步骤，所述指示信息指示追加被投影到所述投影面的图像。
13.一种驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：
摄像图像数据获取步骤，从搭载于汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；
投影用图像数据生成步骤，对通过所述摄像图像数据获取步骤获取的摄像图像数据进行分析而生成投影用图像数据；
投影步骤，根据所述投影用图像数据对从光源单元射出的光进行调制而投影到存在于所述汽车内的投影面；
驾驶者视觉辨认图像数据生成步骤，生成将所述投影用图像数据叠加于所述摄像图像数据而成的驾驶者视觉辨认图像数据；以及
发送步骤，向电子设备发送所述驾驶者视觉辨认图像数据，该电子设备具有显示基于图像数据的图像的显示部且存在于所述汽车内。
14.一种驾驶者视觉辨认图像共享程序，其用于使计算机执行如下步骤：
经由与投影型显示装置进行通信的通信部，从所述投影型显示装置获取驾驶者视觉辨认图像数据的步骤；以及
将基于所述驾驶者视觉辨认图像数据的图像显示在显示部的显示控制步骤，
所述投影型显示装置具有：摄像图像数据获取部，从搭载于汽车内且拍摄所述汽车的行进方向的摄像部获取摄像图像数据；投影用图像数据生成部，对由所述摄像图像数据获取部获取的摄像图像数据进行分析而生成投影用图像数据；光源单元；投影部，根据所述投影用图像数据对从所述光源单元射出的光进行调制而投影到存在于所述汽车内的投影面；以及驾驶者视觉辨认图像数据生成部，生成将所述投影用图像数据叠加于所述摄像图像数据而成的所述驾驶者视觉辨认图像数据。
CN201580070191.1A 2014-12-22 2015-11-10 投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序 Pending CN107107834A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014258977 2014-12-22
JP2014-258977 2014-12-22
PCT/JP2015/081632 WO2016103938A1 (ja) 2014-12-22 2015-11-10 投写型表示装置、電子機器、運転者視認画像共有方法、及び運転者視認画像共有プログラム

Publications (1)

Publication Number Publication Date
CN107107834A true CN107107834A (zh) 2017-08-29

Family

ID=56149972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580070191.1A Pending CN107107834A (zh) 2014-12-22 2015-11-10 投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序

Country Status (4)

Country Link
US (1) US20170269363A1 (zh)
JP (1) JPWO2016103938A1 (zh)
CN (1) CN107107834A (zh)
WO (1) WO2016103938A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019218789A1 (zh) * 2018-05-14 2019-11-21 京东方科技集团股份有限公司 用于演示车载抬头显示装置的功能的方法、系统及计算机可读存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3403146A4 (en) * 2016-01-15 2019-08-21 iRobot Corporation AUTONOMOUS MONITORING ROBOT SYSTEMS
KR20220048501A (ko) * 2020-10-12 2022-04-20 현대자동차주식회사 차량의 예측 속도 안내 장치 및 안내 방법
CN113960795B (zh) * 2021-09-18 2023-03-28 福耀玻璃工业集团股份有限公司 显示车窗及车辆

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003527989A (ja) * 1999-08-27 2003-09-24 ダイムラークライスラー アクチエンゲゼルシャフト 自動車の少なくとも一人の乗員に対して透視図法の画像を表示する方法および表示装置
CN101107556A (zh) * 2005-02-11 2008-01-16 宝马股份公司 通过合成红外线影像和可见光影像可视化汽车周围环境的方法和装置
JP2008118317A (ja) * 2006-11-02 2008-05-22 Casio Comput Co Ltd 投影装置
JP2010102572A (ja) * 2008-10-24 2010-05-06 Honda Motor Co Ltd 車両の周辺監視装置
JP2011101118A (ja) * 2009-11-04 2011-05-19 Denso It Laboratory Inc 認証システム及び認証方法
CN103064238A (zh) * 2011-10-18 2013-04-24 扬明光学股份有限公司 车用投影系统
CN103458797A (zh) * 2011-03-29 2013-12-18 富士胶片株式会社 光声成像方法和光声成像装置
JP2014013989A (ja) * 2012-07-04 2014-01-23 Alpine Electronics Inc 拡張現実システム
JP2014216714A (ja) * 2013-04-23 2014-11-17 本田技研工業株式会社 車両内での情報共有のための情報提供装置、携帯端末、及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009020089A (ja) * 2007-06-12 2009-01-29 Panasonic Corp ナビゲーション装置、ナビゲーション方法、及びナビゲーション用プログラム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003527989A (ja) * 1999-08-27 2003-09-24 ダイムラークライスラー アクチエンゲゼルシャフト 自動車の少なくとも一人の乗員に対して透視図法の画像を表示する方法および表示装置
CN101107556A (zh) * 2005-02-11 2008-01-16 宝马股份公司 通过合成红外线影像和可见光影像可视化汽车周围环境的方法和装置
JP2008118317A (ja) * 2006-11-02 2008-05-22 Casio Comput Co Ltd 投影装置
JP2010102572A (ja) * 2008-10-24 2010-05-06 Honda Motor Co Ltd 車両の周辺監視装置
JP2011101118A (ja) * 2009-11-04 2011-05-19 Denso It Laboratory Inc 認証システム及び認証方法
CN103458797A (zh) * 2011-03-29 2013-12-18 富士胶片株式会社 光声成像方法和光声成像装置
CN103064238A (zh) * 2011-10-18 2013-04-24 扬明光学股份有限公司 车用投影系统
JP2014013989A (ja) * 2012-07-04 2014-01-23 Alpine Electronics Inc 拡張現実システム
JP2014216714A (ja) * 2013-04-23 2014-11-17 本田技研工業株式会社 車両内での情報共有のための情報提供装置、携帯端末、及びプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019218789A1 (zh) * 2018-05-14 2019-11-21 京东方科技集团股份有限公司 用于演示车载抬头显示装置的功能的方法、系统及计算机可读存储介质
US11376961B2 (en) 2018-05-14 2022-07-05 Boe Technology Group Co., Ltd. Method and system for demonstrating function of vehicle-mounted heads up display, and computer-readable storage medium

Also Published As

Publication number Publication date
JPWO2016103938A1 (ja) 2017-09-21
WO2016103938A1 (ja) 2016-06-30
US20170269363A1 (en) 2017-09-21

Similar Documents

Publication Publication Date Title
CN107107761B (zh) 投影型显示装置以及驾驶辅助方法
US10169923B2 (en) Wearable display system that displays a workout guide
JP6528139B2 (ja) 表示制御装置及び表示制御プログラム
US10395116B2 (en) Dynamically created and updated indoor positioning map
JP5935640B2 (ja) 情報処理装置、表示制御方法及びプログラム
US10013951B2 (en) Display control device, display device, display control program, display control method, and recording medium
KR102627636B1 (ko) 헤드 마운트 디스플레이의 사용자에게 알림을 제공하기 위한 방법 및 장치
CN108068698A (zh) 车辆系统以及车辆
US11562550B1 (en) Vehicle and mobile device interface for vehicle occupant assistance
CN106394553A (zh) 驾驶员辅助设备及其控制方法
KR20120127830A (ko) 차량용 단말을 위한 사용자 인터페이스 방법 및 장치
CN107107834A (zh) 投影型显示装置、电子设备、驾驶者视觉辨认图像共享方法以及驾驶者视觉辨认图像共享程序
WO2023060049A1 (en) Vehicle and mobile device interface for vehicle occupant assistance
CN107107759A (zh) 投影型显示装置、安全驾驶辅助方法以及安全驾驶辅助程序
CN107851423B (zh) 投影型显示装置及投影控制方法
CN107924668A (zh) 投影型显示装置
CN110031975B (zh) 在车辆中校准增强现实眼镜的方法和系统与增强现实眼镜
US10412354B2 (en) Projection type display device and projection control method
CN109789782A (zh) 投影型显示装置、投影显示方法、及投影显示程序
CN109564727A (zh) 用于对车辆警告错误行驶状况的方法、设备和系统
JP2021026442A (ja) 情報処理装置、システム、情報処理方法およびプログラム
WO2024106317A1 (en) Information processing device and information processing method for presenting virtual content to a user
JP2019064422A (ja) ヘッドアップディスプレイ装置
EP4130663A1 (en) Positioning apparatus and method
WO2021029042A1 (ja) 情報提供システム、情報端末、および情報提供方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170829

WD01 Invention patent application deemed withdrawn after publication