CN112534490A - 模拟驾驶装置和影像控制装置 - Google Patents

模拟驾驶装置和影像控制装置 Download PDF

Info

Publication number
CN112534490A
CN112534490A CN201980052217.8A CN201980052217A CN112534490A CN 112534490 A CN112534490 A CN 112534490A CN 201980052217 A CN201980052217 A CN 201980052217A CN 112534490 A CN112534490 A CN 112534490A
Authority
CN
China
Prior art keywords
visual field
simulated
user
driving
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980052217.8A
Other languages
English (en)
Other versions
CN112534490B (zh
Inventor
桑名润平
小野浩
伊藤诚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Softcom Co ltd
Honda Motor Co Ltd
University of Tsukuba NUC
Original Assignee
Japan Softcom Co ltd
Honda Motor Co Ltd
University of Tsukuba NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2018149509A external-priority patent/JP7097551B2/ja
Priority claimed from JP2018188459A external-priority patent/JP7064195B2/ja
Application filed by Japan Softcom Co ltd, Honda Motor Co Ltd, University of Tsukuba NUC filed Critical Japan Softcom Co ltd
Publication of CN112534490A publication Critical patent/CN112534490A/zh
Application granted granted Critical
Publication of CN112534490B publication Critical patent/CN112534490B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • G09B9/02Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/052Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles characterised by provision for recording or measuring trainee's performance
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/24Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A63F13/245Constructional details thereof, e.g. game controllers with detachable joystick handles specially adapted to a particular type of game, e.g. steering wheels
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525Changing parameters of virtual cameras
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/803Driving vehicles or craft, e.g. cars, airplanes, ships, robots or tanks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供模拟驾驶装置等,使视觉功能降低者能够准确地掌握驾驶时等的危险性并能够体验视野缺损对驾驶产生的影响。模拟驾驶装置(1)的控制器(6)存储用户(M)的视野缺损信息数据和模拟影像数据,执行将模拟影像数据显示在屏幕(8)上的模拟影像显示控制。控制器(6)在模拟影像显示控制的执行过程中存储关联影像数据,在模拟影像显示控制的结束后,将关联影像数据再现显示在屏幕(8)上,该关联影像数据是在同一影像内以用户(M)的观察点(O)为中心的状态下将用户(M)的观察点(O)、视野缺损信息数据和模拟影像数据内的物体的影像彼此相关联所得到的数据。

Description

模拟驾驶装置和影像控制装置
技术领域
本发明涉及模拟体验车辆驾驶的模拟驾驶装置等。
背景技术
以往,作为模拟驾驶装置,已知有专利文献1所记载的模拟驾驶装置。在采用该模拟驾驶装置的情况下,用户通过佩戴眼镜型装置,作为模拟驾驶行驶模式而执行视觉功能降低模拟模式。该视觉功能降低模拟模式是用于供健康的用户模拟体验因青光眼而发生视野缺损、视觉功能有所降低的人(以下,称为“视觉功能降低者”)驾驶四轮车辆时的状态的模式。
在该视觉功能降低模拟模式的执行过程中,通过眼镜型装置,在打开左眼侧和右眼侧的一个眼镜部的遮板的同时,关闭另一个眼镜部的遮板,在该遮板内显示视觉障碍图像数据。由此,用户成为用一个眼睛看到通常图像、同时用另一个眼睛看到与视觉功能降低者相同的图像的状态。
此外,在专利文献2中记载了如下技术:在通过驾驶模拟器虚拟体验驾驶时,通过响应于车辆的用户希望变更的控制特性的变更(车辆的调谐(tuning))来变更驾驶模拟器的控制数据,用户能够在实际的行驶前体验调谐的效果。
现有技术文件
专利文献
专利文献1:日本特开2017-217226号公报
专利文献2:日本特开2009-174879号公报
发明内容
发明要解决的课题
一般而言,视觉功能降低者在实际上驾驶车辆的情况下,处于一边发挥被称作填补(Filling-in)的大脑的补充功能一边观察车辆前方的交通状态的状态。因此,由于在视觉功能降低者通过上述专利文献1的模拟驾驶装置体验视觉功能降低模拟模式的情况下,会与自身实际上驾驶时的观察方式不同,因此有可能不能将该体验时的观察状态认为是自身驾驶时的观察状态。其结果,会产生视觉功能降低者无法准确地掌握自身在驾驶时的危险性的问题。此外,不仅是模拟驾驶装置,还期待使视觉功能降低者能够准确地掌握因自身的视觉功能降低引起的危险性的装置。
并且,在汽车的驾驶中,以75岁以上的老年人为对象强化了对认知功能的确认。在老年人更新驾照时,有义务进行认知功能检查。此外,规定了被认为在认知功能下降的情况下容易发生的闯红灯、逆向行驶等18项违规行为,即使不在更新时,在做出了相应行为的情况下,也要接受认知功能检查。通过了认知功能检查的老年人在老年人学习时,使用驾驶模拟器来确认驾驶所需的身体能力等。
对要进行驾驶的老年人进行与认知功能有关的检查,但与眼睛有关的检查限于视力检查,没有进行与因眼疾引起的视野障碍有关的检查。视野障碍(视野缺损或视野狭窄)是由青光眼、视网膜色素变性、老年黄斑变性、脑血管障碍等疾病引起的,有时在视野的一部分中难以看清或发生缺损。在视野的哪个位置处难以看清或发生缺损的个人差别较大,视野狭窄即视野缺损的位置或程度多种多样。如果视野缺损严重,则本人能够识别,但如果视野缺损较轻,则也存在本人无法察觉的情况或者难以察觉的情况。
图19A、19B是视野缺损的一例的说明图,图19A是视野缺损没有波及到红绿灯的状态的说明图,图19B是视野波及到红绿灯的状态的说明图。
在图19A、19B中,在视野201的区域的上部有缺损202的情况下,如图19A所示,在驾驶员实际上看到的视野中产生了缺损区域203。在图19A所示的状态下,虽然看到了红绿灯204,但是,当汽车行驶而接近红绿灯204时,红绿灯204与缺损区域203重叠,变得看不到红绿灯204。实际上,在该情形中,虽然在图19A的状况中是绿灯,但是在图19B的状况中会成为红灯,会造成驾驶员不踩刹车而闯红灯的结果。
图20A、20B是视野缺损的另一例的说明图,图20A是无视野缺损的状态的说明图,图20B是在视野的下部有视野缺损的状态的说明图。在图20A、20B中,在视野206的区域的下部(下半部分)有缺损207的情况下,如图20A所示,即使有儿童208跑出,当如图20B所示,儿童208进入缺损区域209时,驾驶员也看不到儿童208。实际上在该情形下,会造成不踩刹车而碾压所跑出的孩子的结果。特别是,当在下部有缺损207时,在视线位于上部的红绿灯的状况下,特别容易产生看不到行人的问题。
这样,认为存在容易因视野缺损引起的事故场面,但在过去的报告中,并没有通过进行事故历史的研究等去核实实际上发生了事故的场景。
因此,在驾驶模拟器中,研究这样的视野缺损对驾驶产生的影响、特别是与交通事故之间的因果关系时,需要再现缺损状态的视野。作为再现缺损状态的视野的方法,可以考虑如下方法:如专利文献1所记载的技术那样,涂黑视野的一部分而模拟缺损的状态,或者使用遮蔽了缺损部位的眼镜(针孔眼镜)。
但是,视野缺损的患者即使不移动头,仅通过移动眼睛,视线也移动,从而视野移动,但是在使用了针孔眼镜的情况下,如果不移动头,则视线、视野不会移动。因此,很难讲通过针孔眼镜可以再现视野缺损的状况。
图21A、21B是关于填补的说明图,图21A是大脑的填补功能不起作用的状态下所能够看到的像的说明图,图21B是在图21A中填补功能起作用的情况下所能够看到的像的说明图。
并且,在实际的视野缺损中,会产生被称作所谓“填补”的现象,即,虽然看不到缺损区域,但是并不会像图21A所示那样看成黑色,而是如图21B所示那样由脑来自动补充看不到的区域的现象。填补是指,即使有一只眼睛看不到的地方(盲点、死角),人脑也会利用另一只眼睛所看到的像自动地进行补充的功能、过程和现象。因此,即使在双眼都有视野缺损的地方的情况下,也会根据周围的风景生成信息而校正成宛如看得见一样。
在专利文献1所记载的技术中没有考虑填补,视野缺损的患者实际上所能看到的图像并不是如专利文献1所记载的那样的风景的一部分被遮掩图像涂黑的图像,而是通过填补功能补充了看不到的部分后的图像、影像。
因此,视野缺损的患者并不一定会意识到视野缺损,并且,即使使用专利文献1所记载的技术或针孔眼镜,也无法准确地再现现实。作为驾驶模拟器,如专利文献1、2所记载的技术那样,已知有能够响应于设定来变更控制特性的技术,但是,能够再现或虚拟地体验考虑了填补的视野缺损的技术是未知的。
本发明是为了解决上述课题而完成的,其目的在于提供一种使视觉功能降低者能够准确地掌握驾驶时等的危险性并能够体验视野缺损对驾驶产生的影响的模拟驾驶装置等。
用于解决课题的手段
为了达成上述目的,本发明的第1方面的发明是一种模拟驾驶装置,其模拟地体验车辆驾驶,模拟驾驶装置的特征在于,具有:输出接口;操作部,其供用户操作以驾驶模拟车辆;操作状态取得部,其取得用户对操作部进行操作的操作状态;观察点取得部,其取得用户的观察点;视野缺损信息数据存储部,其存储表示用户的视野缺损的发生状态的视野缺损信息数据;模拟影像数据存储部,其存储对模拟行驶环境进行影像化所得到的模拟影像数据;关联影像数据生成部,其根据用户对操作部进行操作的操作状态、视野缺损信息数据和用户的观察点,生成将视野缺损信息数据与模拟影像数据彼此相关联得到的数据即关联影像数据;以及影像数据显示控制部,其执行使输出接口显示关联影像数据的影像数据显示控制。
根据该模拟驾驶装置,可取得用户对操作部进行操作的操作状态,根据用户对操作部进行操作的操作状态、视野缺损信息数据和用户的观察点来生成将视野缺损信息数据与模拟影像数据彼此相关联所得到的数据即关联影像数据,执行使输出接口显示关联影像数据的影像数据显示控制(另外,本说明书中的“取得操作状态”和“取得观察点”等的“取得”不限于通过传感器等直接检测该操作状态和观察点,还包含根据其他参数来计算它们的值)。
第2方面的发明在第1方面的模拟驾驶装置中,其特征在于,模拟影像数据由如下数据构成,该数据具有由固定物的影像构成的背景部和由在该背景部内移动的移动体的影像构成的非背景部,关联影像数据生成部根据用户对操作部进行操作的操作状态、视野缺损信息数据和用户的观察点,在显示与发生了视野缺损的区域重叠的背景部的图像的同时对与发生了该视野缺损的区域重叠的非背景部的图像进行变更,由此来生成关联影像数据。
根据该模拟驾驶装置,可提供能够体验视野缺损对驾驶产生的影响的模拟驾驶装置。
第3方面的发明在第2方面的模拟驾驶装置中,其特征在于,视野缺损信息数据由以观察点为中心的视野中的能见性的敏感度的分布的信息构成。
根据该模拟驾驶装置,与使用双态的视野缺损的信息的情况相比,通过使用敏感度的分布信息作为视野缺损的信息,能够再现实际的视野缺损的状态。
第4方面的发明在第3方面的模拟驾驶装置中,其特征在于,关联影像数据生成部根据敏感度的分布来变更非背景部的图像的透明度或对比度。
根据该模拟驾驶装置,与不根据敏感度的分布来变更透明度的情况相比,能够更加接近在实际的视野狭窄的状态下看到所显示的影像的状况。
第5方面的发明在第1方面的模拟驾驶装置中,其特征在于,视野缺损信息数据是将用户的视野缺损的发生状态与该用户的视野区域相关联所得到的数据,关联影像数据生成部具有:模拟影像显示控制部,其根据用户对操作部进行操作的操作状态来执行使输出接口显示在模拟影像数据存储部中所存储的模拟影像数据的模拟影像显示控制;以及数据生成部,其在该模拟影像显示控制的执行过程中,生成如下数据来作为关联影像数据,该数据是,在同一影像内以用户的观察点为中心的状态下,将由观察点取得部取得的用户的观察点、视野缺损信息数据和模拟影像数据内的物体的影像彼此相关联所得到的数据,模拟驾驶装置还具有关联影像数据存储部,关联影像数据存储部存储该关联影像数据,影像数据显示控制部在模拟影像显示控制结束后,执行使输出接口再现显示关联影像数据的影像再现控制以作为影像数据显示控制。
根据该模拟驾驶装置,可在模拟影像显示控制的执行中,在同一影像内以用户的观察点为中心的状态下将由观察点取得部所取得的用户的观察点、视野缺损信息数据和模拟影像数据内的物体的影像彼此相关联所得的数据作为关联影像数据而生成,将该关联影像数据存储到关联影像数据存储部中。然后,在模拟影像显示控制结束后,执行使输出接口再现显示关联影像数据的影像再现控制作为影像数据显示控制。在该情况下,由于视野缺损信息数据是将用户的视野缺损的状态与用户的视野区域相关联所得到的数据,因此在模拟影像显示控制的执行过程中发生了模拟影像数据内的物体与用户的发生了视野缺损的视野区域重叠的状态时,在影像再现控制的执行过程中再现显示了这样的重叠状态。由此,用户能够确认出由于模拟影像数据内的物体与自身的发生了视野缺损的视野区域重叠而发生了实际上看不到模拟影像数据内的物体的状态。其结果,发生了视野缺损、视觉功能有所降低的用户能够准确地掌握自身在驾驶时的危险性。
第6方面的发明在第5方面的模拟驾驶装置中,其特征在于,具有:危险状态判定部,其在模拟影像显示控制的执行过程中判定是否发生了模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的模拟危险状态;以及危险状态显示部,其在影像再现控制的执行过程中或结束后,使输出接口显示危险状态判定部对模拟危险状态的发生的判定结果。
根据该模拟驾驶装置,可在模拟影像显示控制的执行过程中,判定是否发生了模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的模拟危险状态,在影像再现控制的执行中或结束后,使输出接口显示模拟危险状态的发生的判定结果。由此,视觉功能有所降低的用户能够准确地掌握自身在车辆驾驶时是否会发生危险状态。
第7方面的发明在第5方面或第6方面的模拟驾驶装置中,其特征在于,具有:重叠状况参数取得部,其在模拟影像显示控制的执行过程中取得重叠状况参数,重叠状况参数表示模拟影像数据内的物体与视野缺损信息数据中的视野缺损的发生区域重叠的重叠状况的发生状态;相关性模型存储部,其存储相关性模型,该相关性模型表示该重叠状况参数与危险程度之间的相关性,该危险程度表示发生模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的模拟危险状态的可能性;驾驶时危险程度判定部,其使用该相关性模型和用户的重叠状况参数来判定该用户驾驶车辆时的危险程度;以及驾驶时危险程度显示部,其在影像再现控制的执行过程中或结束后,使输出接口显示驾驶时危险程度判定部对车辆驾驶时的危险程度进行判定的判定结果。
根据该模拟驾驶装置,可在模拟影像显示控制的执行过程中取得重叠状况参数,可使用相关性模型和用户的重叠状况参数来判定用户在车辆驾驶时的危险程度。该重叠状况参数表示模拟影像数据内的物体与视野缺损信息数据中的视野缺损的发生区域重叠的重叠状况的发生状态。此外,相关性模型表示发生重叠状况参数与危险程度之间的相关性,该危险程度表示发生模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的危险状态的可能性。因此,通过使用这样的相关性模型和用户的重叠状况参数,能够高精度地判定用户在车辆驾驶时的危险程度。并且,由于在影像再现控制的执行中或结束后,使输出接口显示驾驶时危险程度判定部对车辆驾驶时的危险程度的判定结果,因此,视觉功能有所降低的用户能够准确地掌握自身在车辆驾驶时的危险程度。
为了达成上述的目的,本发明的第8方面的影像控制装置的特征在于,具有:输出接口;视野缺损信息数据存储部,其存储将用户的视野缺损的发生状态与该用户的视野区域相关联所得到的数据即视野缺损信息数据;动态图像影像数据存储部,其存储包含物体的动态图像影像数据;动态图像显示控制部,其执行使输出接口显示该动态图像影像数据存储部中所存储的动态图像影像数据的动态图像显示控制;观察点取得部,其在该动态图像显示控制的执行过程中,取得用户的观察点;关联影像数据存储部,其在动态图像显示控制的执行过程中,将如下数据作为关联影像数据存储起来,该数据是,在同一影像内以用户的观察点为中心的状态下将用户的观察点、视野缺损信息数据和动态图像影像数据内的物体的影像彼此相关联所得到的数据;以及影像再现控制部,其在动态图像显示控制结束后,执行使输出接口再现显示关联影像数据的影像再现控制。
根据该影像控制装置,可执行使输出接口显示动态图像影像数据存储部中所存储的动态图像影像数据的动态图像显示控制。在该动态图像显示控制的执行过程中,取得用户的观察点,在同一影像内以用户的观察点为中心的状态下将用户的观察点、视野缺损信息数据和动态图像影像数据内的物体的影像彼此相关联所得的数据作为关联影像数据存储起来。然后,在动态图像显示控制的结束后,执行使输出接口再现显示关联影像数据的影像再现控制。在该情况下,视野缺损信息数据是将用户的视野缺损的状态与用户的视野区域相关联所得到的数据,因此,在动态图像显示控制的执行过程中发生了动态图像影像数据内的物体与用户的发生了视野缺损的视野区域重叠的状态时,在影像再现控制的执行过程中再现显示这样的重叠状态。由此,用户能够确认出发生了动态图像影像数据内的物体与自身的发生了视野缺损的视野区域重叠的状态、即实际上看不到动态图像影像数据内的物体的状态。其结果,发生了视野缺损且视觉功能有所降低的用户能够准确地掌握自身在步行时等的危险性。
附图说明
图1是示出本发明的一个实施方式的模拟驾驶装置的结构的图。
图2是示出模拟驾驶装置的电气结构的框图。
图3是示出用户的视野缺损信息数据的一例的图。
图4是示出模拟行驶控制的流程图。
图5是示出模拟影像显示控制中的动态图像影像的一例的图。
图6是示出再现显示控制的流程图。
图7是示出视野影像数据的一例的图。
图8是示出从图7的状态起经过了时间时的视野影像数据的一例的图。
图9是示出视野影像数据的另一例的图。
图10是示出从图9的状态起经过了时间时的视野影像数据的一例的图。
图11是示出用于危险度判定的映射图的一例的图。
图12是示出危险发生次数的显示例的图。
图13是示出驾驶危险度的显示例的图。
图14是示出第2实施方式的模拟驾驶装置的各功能的框图。
图15A是由模拟驾驶装置显示的影像的一例的说明图、是不存在视野狭窄的状态下的影像的说明图。
图15B是视线位于中央并且视野的左半部分发生了缺损的状态下的影像的说明图。
图15C是与图15B相比视线向左侧进行了移动的情况下的影像的说明图。
图16A是由模拟驾驶装置显示的影像的另一例的说明图、即不存在视野狭窄的状态下的影像的说明图。
图16B是视线位于中央并且视野的中心部以外发生了缺损的状态的影像的说明图。
图16C是与图16B相比视线向右侧进行了移动的情况下的影像的说明图。
图17是视野的信息的一例的说明图。
图18是第2实施方式的视野狭窄影像的显示处理的流程图的说明图。
图19A是视野缺损的一例的说明图、是红绿灯没有进入视野缺损中的状态的说明图。
图19B是视野缺损的一例的说明图、是红绿灯进入到视野缺损中的状态的说明图。
图20A是视野缺损的另一例的说明图、是不存在视野缺损的状态下的说明图。
图20B是视野缺损的另一例的说明图、是在视野的下部有视野缺损的状态的说明图。
图21A是大脑的填补的功能不起作用的状态下看到的像的说明图。
图21B是在图21A中填补功能起作用的情况下看到的像的说明图。
具体实施方式
以下,参照附图,对本发明的第1实施方式的模拟驾驶装置进行说明。如图1所示,本实施方式的模拟驾驶装置1是用户M落座于驾驶座2上并进行模拟驾驶的四轮车辆类型的装置,作为模拟车辆的一部分,具有驾驶座2、方向盘3、油门踏板4和制动踏板5。
在模拟驾驶中,该方向盘3由用户M在变更模拟车辆的行进路线时操作。在该方向盘3上设置有转向角传感器11(参照图2),该转向角传感器11检测在模拟驾驶中用户M操作方向盘3时的转向角,并将表示该转向角的检测信号输出到控制器6。
此外,在模拟驾驶中,油门踏板4由用户M在使模拟车辆加速时等操作。在该油门踏板4上设置有油门传感器12(参照图2),该油门传感器12检测用户M对油门踏板4的踩踏量,并将表示该踩踏量的检测信号输出到控制器6。
并且,在模拟驾驶中,制动踏板5由用户M在使模拟车辆制动时操作。在该制动踏板5上设置有制动器传感器13(图2参照),该制动器传感器13检测用户M对制动踏板5的踩踏量,将表示该踩踏量的检测信号输出到控制器6。
另外,在本实施方式中,方向盘3、油门踏板4和制动踏板5相当于操作部,转向角传感器11、油门传感器12和制动器传感器13相当于操作状态取得部。
并且,模拟驾驶装置1具有控制器6、投影仪7、屏幕8和视线检测装置10等。该视线检测装置10(观察点取得部)根据用户M的眼球运动来检测用户M的视线,并将表示该用户M的视线的检测信号输出到控制器6。控制器6根据该视线检测装置10的检测信号来确定用户M的观察点O。另外,在以下的说明中,将视线检测装置10和上述3个传感器11~13统称作“各种传感器10~13”。
控制器6是笔记本型个人计算机类型的控制器,具有存储器、内存和键盘(均未图示)等。在该控制器6的存储器和内存中存储有模拟驾驶控制用的程序、影像数据和声音数据等。
此外,在后述的模拟驾驶控制的执行开始前,用户M的视野缺损信息数据被从外部输入到控制器6,并存储到内存中。该视野缺损信息数据是按照用户M的每个视野区域来表示用户M的视野缺损的发生状态的数据,是根据例如医疗机构等的检查结果来生成的。因此,对于视野缺损信息数据,在执行模拟驾驶时,按照每个用户将不同的数据输入到控制器6中。
例如,视野缺损信息数据如图3所示那样构成。在采用该图所示的视野缺损信息数据的情况下,以用户M的观察点(注视点)O为中心设定了左上19个、左下19个、右上19个和右下19个共计76个视野区域。此外,这些视野区域被划分为无敏感度区域31、低敏感度区域32、中敏感度区域33和高敏感度区域34这4个阶段的敏感度区域。
该无敏感度区域31是图中的用涂黑表示的区域,相当于用户M的视网膜几乎不具有敏感度的区域。此外,高敏感度区域34是图中的用涂白表示的区域,相当于用户M的视网膜具有正常的敏感度的区域。并且,低敏感度区域32和中敏感度区域33均是用灰色色调表示的区域。低敏感度区域32具有无敏感度区域31与中敏感度区域33之间的敏感度,用比中敏感度区域33更深的灰色色调表示。此外,中敏感度区域33是具有低敏感度区域32与高敏感度区域34之间的敏感度的区域。另外,视野区域的总数和敏感度区域的等级数不限于上述内容,可以采用使两者的数量增加和减少的结构。
在该控制器6中,通过由操作员操作键盘等输入部来执行后述的模拟驾驶控制等。在该模拟驾驶控制的执行过程中,控制器6根据上述各种传感器10~13的检测信号来将影像信号和声音信号输出到投影仪7和扬声器(未图示)。由此来控制投影仪7和扬声器的动作状态。
此外,控制器6在模拟驾驶控制的执行过程中,通过将上述视野缺损信息数据与模拟影像中的交通参与者和信号等影像重叠,生成作为动态图像影像数据的视野影像数据(参照图7~10),并将该视野影像数据存储到内存中。
另外,在本实施方式中,控制器6相当于视野缺损信息数据存储部、模拟影像数据存储部、关联影像数据生成部、影像数据显示控制部、数据生成部、关联影像数据存储部、危险状态判定部、危险状态显示部、重叠状况参数取得部、相关性模型存储部、驾驶时危险程度判定部和驾驶时危险程度显示部。
另一方面,在上述的模拟驾驶控制的执行过程中,当从控制器6输入了影像信号时,投影仪7相应地将模拟行驶影像显示在屏幕8上(参照图5)。此外,如后所述,在执行模拟驾驶控制之后执行了再现控制时,投影仪7将在上述的模拟驾驶控制中存储于控制器6内的视野影像数据显示在屏幕8上(参照图7~10)。另外,在本实施方式中,投影仪7和屏幕8相当于输出接口。
接着,参照图4,对模拟行驶控制进行说明。该模拟行驶控制对用户M的模拟行驶状态进行控制,由控制器6按照规定的控制周期执行。
首先,判定模拟行驶中标志F_RUN是否为“1”(图4/步骤1)。在该判定为否定时(图4/步骤1……否),判定是否执行了模拟行驶控制的开始动作(图4/步骤2)。在该情况下,模拟行驶控制的开始动作通过操作员对控制器6的输入部的操作来执行。
在该判定为否定时(图4/步骤2……否),直接结束本处理。另一方面,在该判定为肯定时(图4/步骤2……是),为了表示应当执行模拟行驶控制的情况,将模拟行驶中标志F_RUN设定为“1”(图4/步骤3)。
在以这样的方式将模拟行驶中标志F_RUN设定为“1”时,或者在上述的判定为肯定(图4/步骤1……是)且在前一次以前的控制定时将模拟行驶中标志F_RUN设定为“1”时,执行模拟影像显示控制(图4/步骤4)。
在该模拟影像显示控制中,根据上述各种传感器10~13的检测信号和控制器6内的模拟驾驶控制用的影像数据,例如由投影仪7将如图5所示的动态图像影像20显示在屏幕8上。该动态图像影像20表示模拟车辆的前方的行驶环境,具体而言,以用户M的观察点O为中心来显示模拟车辆的行驶线21、交通参与者[其他车辆22、行人(未图示)]和红绿灯23等。
接着,执行声音控制(图4/步骤5)。在该声音控制中,根据上述模拟驾驶控制用的声音数据来将声音信号供给到扬声器。由此,可从扬声器输出例如模拟车辆的行驶声、发动机声和制动器声等。
接下来,将视野影像数据存储到控制器6的内存中(图4/步骤6)。如上所述,该视野影像数据是动态图像影像数据,例如,如图7~图10所示,成为以用户M的观察点O为中心将动态图像影像20内的交通参与者(例如其他车辆24)及红绿灯23的图像数据与视野缺损信息数据重叠所得的数据。
然后,存储重叠时间(图4/步骤7)。在该情况下,作为重叠时间,存储第1重叠时间t1~第3重叠时间t3。该第1重叠时间t1是在模拟行驶控制的执行过程中因交通参与者和红绿灯等位于视野缺损信息数据中的无敏感度区域31而发生了两者的重叠状态时的发生时间的累积值。
此外,该第2重叠时间t2是在模拟行驶控制的执行过程中因交通参与者和红绿灯等位于视野缺损信息数据中的低敏感度区域32而发生了两者的重叠状态时的发生时间的累积值。并且,第3重叠时间t3是在模拟行驶控制的执行过程中因交通参与者和红绿灯等位于视野缺损信息数据中的中敏感度区域33而发生了两者的重叠状态时的发生时间的累积值。
接着,存储危险发生次数(图4/步骤8)。如以下所叙述的那样执行该危险发生次数的存储处理。首先,在模拟行驶控制的执行过程中,对是否发生了模拟车辆与交通参与者及障碍物接触的接触事故、以及是否发生了模拟车辆差一点就与交通参与者及障碍物接触的危险状态或闯红灯的状态等事故未遂状态进行判定。然后,通过在发生了接触事故时累计该接触事故的发生次数计算出事故发生次数。此外,通过在发生了事故未遂状态时累计该事故未遂状态的发生次数,计算出事故未遂次数。然后,事故发生次数和事故未遂次数被作为危险发生次数存储到控制器6的内存中。
接下来,判定模拟行驶是否已结束(图4/步骤9)。在该情况下,在模拟驾驶控制用的影像数据已经被再现显示到了最后或虽然仍处于模拟行驶的执行过程中但是由于某些原因操作员对控制器6的输入部进行操作而执行了模拟行驶的中止动作时,判定为模拟行驶已结束。
在该判定为否定时(图4/步骤9……否),直接结束本处理。另一方面,在该判定为肯定时(图4/步骤9……是),为了表示应当结束模拟行驶控制,将模拟行驶中标志F_RUN设定为“0”(图4/步骤10)。然后,结束本处理。
接着,参照图6,对再现显示控制进行说明。该再现显示控制用于对上述的视野影像数据进行再现显示并且显示模拟行驶中的危险发生次数等,在模拟行驶控制的执行后,由控制器6按照规定的控制周期执行该再现显示控制。
如该图所示,首先,对判定结果显示标志F_DISPLAY是否为“1”进行判定(图6/步骤21)。在该判定为否定时(图6/步骤21……否),判定再现控制执行标志F_PLAY是否为“1”(图6/步骤22)。
在该判定为否定时(图6/步骤22……否),判定是否已通过操作员对控制器6的输入部的操作而执行了再现动作(图6/步骤23)。在该判定为否定时(图6/步骤23……否),直接结束本处理。
另一方面,在该判定为肯定时(图6/步骤23……是)、即已经执行了再现动作时,为了表示该情况,将再现控制执行标志F_PLAY设定为“1”(图6/步骤24)。
接下来,执行影像再现控制(图6/步骤25)。在该影像再现控制中,例如如图7~10所示,在执行模拟行驶控制的过程中存储于控制器6的内存中的视野影像数据在屏幕8上被再现显示。在该情况下,通过连续再现或静态图像的逐帧播放再现等方法来再现显示视野影像数据。
该图7示出其他车辆24的图像进入用户M的视野区域之前的状态,图8示出随着时间的经过,其他车辆24的图像从图7所示的状态起进入了用户M的视野区域中的无敏感度区域31的状态。即,示出了其他车辆24的图像与无敏感度区域31相互重叠的状态。另外,在图8中,为了容易理解,用白色的虚线表示无敏感度区域31内的其他车辆24,但是,在实际的视野影像数据中,成为不显示无敏感度区域31内的其他车辆24的状态。
此外,图9示出红绿灯23的图像进入中敏感度区域33的状态,图10示出随着时间的经过,红绿灯23的图像从图9所示的状态起进入用户M的视野区域中的无敏感度区域31的状态。即,示出了其他车辆24的图像与无敏感度区域31相互重叠的状态。另外,在图10中,为了容易理解,用白色虚线表示无敏感度区域31内的红绿灯23,但在实际的视野影像数据中,成为不显示无敏感度区域31内的红绿灯23的状态。此外,在以上的图7~10中,为了容易理解,省略其他车辆24和红绿灯23以外的风景图像。
如该图8、10所示,在其他车辆24及红绿灯23的图像与用户M的无敏感度区域31重叠的情况下,用户M在模拟驾驶中能够理解/掌握发生了实际上看不到其他车辆24和红绿灯23的状态。如上所述,在执行影像再现控制之后,结束本处理。
另一方面,在上述的判定为肯定(图6/步骤22……是)且再现控制执行标志F_PLAY为“1”时,判定视野影像数据的影像再现是否已结束(图6/步骤26)。在该情况下,在视野影像数据已经被再现显示至最后时,判定为模拟行驶已结束。
在该判定为否定时(图6/步骤26……否),如上述那样执行影像再现控制(图6/步骤25)。然后,结束本处理。
另一方面,在该判定为肯定(图6/步骤26……是)且视野影像数据的影像再现已结束时,为了表示该情况,将再现控制执行标志F_PLAY设定为“0”。与此同时,为了表示应当显示危险发生次数等的情况,将判定结果显示标志F_DISPLAY设定为“1”(图6/步骤27)。
接下来,计算重叠比例(图6/步骤28)。在该情况下,作为重叠比例,计算出第1比例~第3比例的3个值。该第1比例是在模拟行驶控制的执行过程中,其他车辆或红绿灯等与无敏感度区域31重叠的比例,具体而言,作为上述第1重叠时间t1相对于模拟行驶控制的总执行时间t_all的百分比[(t1/t_all)×100]而计算出。
此外,第2比例是在模拟行驶控制的执行过程中,其他车辆或红绿灯等与低敏感度区域32重叠的比例,具体而言,作为上述第2重叠时间t2相对于模拟行驶控制的总执行时间t_all的百分比[(t2/t_all)×100]而计算出。并且,第3比例是在模拟行驶控制的执行过程中,其他车辆或红绿灯等与中敏感度区域33重叠的比例,具体而言,作为上述第3重叠时间t3相对于模拟行驶控制的总执行时间t_all的百分比[(t3/t_all)×100]而计算出。
接下来,通过下式(1)计算危险指标值Xref(图6/步骤29)。
[式1]
Figure BDA0002935762520000141
在该式(1)中,m1~m3是权重系数,设定成1≧m1>m2>m3>0成立。如上式(1)所示,危险指标值Xref作为对在模拟行驶控制的执行过程中其他车辆或红绿灯等与无敏感度区域31、低敏感度区域32及中敏感度区域33重叠的程度实施加权所得的值而计算出。即,危险指标值Xref作为表示重叠状况的发生状态的重叠状况参数而计算出。此外,上述的加权系数m1~m3例如是根据发生了视野缺损的大量用户如上述那样执行了模拟行驶控制时的统计结果、或这些用户的实际的事故历史等来设定。
接着,执行危险度判定(图6/步骤30)。具体而言,通过根据如上述那样计算出的危险指标值Xref来对图11所示的映射图进行检索,判定用户M在驾驶时的危险度(以下,称作“驾驶危险度”)位于“低”、“中”、“高”中的哪个区域。该危险度表示模拟驾驶中的用户发生接触事故和事故未遂中的至少一方的可能性的高低。
此外,在该图中,X1、X2是被设定成X1<X2成立的规定阈值,这些规定阈值X1、X2例如是根据发生了视野缺损的多个用户如上述那样执行了模拟行驶控制时的统计结果或这些用户的实际的事故历史等来设定。
然后,显示危险发生次数(图6/步骤31)。具体而言,将模拟行驶控制中的用户M的事故的发生次数和事故未遂的发生次数在图12所示的状态下显示在屏幕8上。在该情况下,也可以显示事故和事故未遂中的一方的发生次数。
接下来,显示驾驶危险度(图6/步骤32)。具体而言,将用户M的模拟行驶控制中的、上述无敏感度区域31、低敏感度区域32和中敏感度区域33的重叠比例的计算结果和驾驶危险度的判定结果在图13所示的状态下显示在屏幕8上。然后,结束本处理。
另一方面,在上述的判定为肯定(图6/步骤21……是)且判定结果显示标志F_DISPLAY为“1”时、即在前一次以前的控制定时显示了危险发生次数和驾驶危险度时,对判定结果显示是否已结束进行判定(图6/步骤33)。具体而言,在通过操作员对控制器6的输入部的操作而执行了判定结果显示的结束动作时,判定为判定结果显示已结束。
在该判定为否定时(图6/步骤33……否),在如上述那样显示危险发生次数和驾驶危险度之后,结束本处理。
另一方面,在该判定为肯定时(图6/步骤33……是),为了表示判定结果显示已结束,将判定结果显示标志F_DISPLAY设定为“0”(图6/步骤34)。然后,结束本处理。
如上所述,根据本实施方式的模拟驾驶装置1,可在将用户M的视野缺损的状态与用户M的视野区域建立关联所得的视野缺损信息数据(图3)输入到控制器6之后,执行模拟行驶控制。在该模拟行驶控制的执行过程中,由视线检测装置10检测用户M的观察点O,生成如下数据来作为关联影像数据(图7~10),并存储到控制器6的内存中,该数据是,在同一影像内以用户M的观察点O为中心的状态下将用户M的观察点O、视野缺损信息数据与模拟影像数据内的物体的影像彼此关联所得到的数据。
然后,在模拟行驶控制的结束后,执行影像再现控制。在该影像再现控制中,将关联影像数据再现显示在屏幕8上。该关联影像数据如上述那样是在同一影像内以用户M的观察点O为中心的状态下将视野缺损信息数据与用户M的观察点O及模拟影像数据内的其他车辆24及红绿灯23等的影像彼此关联所得到的数据。因此,用户M能够确认出发生了模拟影像数据内的其他车辆24及红绿灯23等与自身的发生了视野缺损的视野区域重叠的状态、即发生了模拟影像数据内的其他车辆24和红绿灯23等实际上变得看不到的状态。其结果,发生了视野缺损的用户即视觉功能有所降低的用户M能够准确地掌握自身在驾驶时的危险性。
此外,在模拟行驶控制的执行过程中,判定是否发生了模拟车辆与模拟行驶环境内的其他物体之间的接触事故和事故未遂状态,在影像再现控制的结束后,将该发生次数再现显示在屏幕8上(图12)。由此,视觉功能有所降低的用户M能够准确地掌握自身在车辆驾驶时是否发生危险状态。
并且,在模拟行驶控制的执行过程中,计算危险指标值Xref,并使用危险指标值Xref和映射图(图11)来判定用户M在车辆驾驶时的危险程度。危险指标值Xref是作为对其他车辆或红绿灯等与无敏感度区域31、低敏感度区域32及中敏感度区域33重叠的程度实施加权得到的值而被计算出的,因此,该危险指标值Xref表示模拟影像数据内的其他车辆或红绿灯等与视野缺损信息数据中的无敏感度区域31、低敏感度区域32及中敏感度区域33重叠的重叠状况的发生状态。此外,映射图是作为适当地表示危险指标值Xref与驾驶时的危险程度的相关性的映射图而生成的。因此,通过使用这样的危险指标值Xref和映射图,能够高精度地判定视觉功能有所降低的用户M在车辆驾驶时的危险程度。
除此以外,由于在影像再现控制的结束后,将其他车辆或红绿灯等与无敏感度区域31、低敏感度区域32及中敏感度区域33重叠的重叠比例和驾驶危险度如图13所示那样显示在屏幕8上,因此,视觉功能有所降低的用户M能够准确地掌握自身在车辆驾驶时的危险程度。
另外,第1实施方式是使用四轮车类型作为模拟车辆的例子,但也可以取而代之,使用各种模拟车辆。例如,作为模拟车辆,也可以使用二轮车、三轮车和六轮以上的车辆。
此外,第1实施方式是使用投影仪7和屏幕8作为输出接口的例子,但是,本发明的输出接口不限于此,只要能够显示模拟影像数据和关联影像数据即可。例如,作为输出接口,也可以使用液晶显示器、有机EL显示器、3D全息装置、头戴式显示器。
并且,第1实施方式是使用方向盘3、油门踏板4和制动踏板5作为操作部的例子,但本发明的操作部不限于此,只要是由用户用来进行操作以驾驶模拟车辆的操作部即可。例如,在模拟车辆为二轮车类型时,选别器握柄和制动杆等相当于操作部。
另一方面,第1实施方式是使用传感器11~13来作为操作状态取得部的例子,但本发明的操作状态取得部不限于此,只要是取得用户对操作部进行操作的操作状态的操作状态取得部即可。例如,在操作部是二轮车的选别器握柄和制动杆的情况下,也可以使用检测它们的操作量的传感器。
此外,第1实施方式是使用视线检测装置10来作为观察点取得部的例子,但是,本发明的观察点取得部不限于此,只要是能够检测用户的观察点的观察点取得部即可。
并且,第1实施方式是使用笔记本型个人计算机类型的控制器6来作为模拟影像显示控制部和影像再现控制部的例子,但是,本发明的模拟影像显示控制部和影像再现控制部不限于此,只要能够执行模拟影像显示控制和影像再现控制即可。例如,作为模拟影像显示控制部和影像再现控制部,可以使用台式电脑和控制电路等,可以将个人计算机和服务器组合使用。
此外,第1实施方式是使用危险指标值Xref来作为重叠状况参数的例子,但是,本发明的重叠状况参数不限于此,只要是能够表示模拟影像数据内的物体与视野缺损信息数据中的视野缺损的发生区域重叠的重叠状况的发生状态即可。例如,作为重叠状况参数,可以使用式(1)的仅右边第1项(m1·t1/t_all)、或值t1/t_all、右边的第1项与第2项之和[(m1·t1/t_all)+(m2·t2/t_all)],也可以可以使用三者之比t1/t_all、t2/t_all、t3/t_all。此外,也可以使用第1重叠时间t1~第3重叠时间t3作为重叠状况参数。
另一方面,第1实施方式是使用图11的映射图作为相关性模型的例子,但是,本发明的相关性模型不限于此,只要是能够表示重叠状况参数与危险程度之间的相关性即可。例如,作为相关性模型,可以使用将重叠状况参数与危险程度之间的相关性表示在直角坐标轴上的线图。
此外,第1实施方式是在影像再现控制的结束后显示事故和事故未遂的发生次数(图12)的例子,但是,也可以在影像再现控制的执行过程中显示该事故和事故未遂的发生次数。在该情况下,可以构成为在每次发生事故和事故未遂时使事故和事故未遂的发生次数递增,可以构成为从最开始起显示总发生次数。
并且,第1实施方式是在影像再现控制的结束后显示驾驶危险度和重叠比例(图13)的例子,但是,也可以在影像再现控制的执行过程中显示驾驶危险度和重叠比例。在该情况下,可以构成为在每次发生重叠状态时重新运算驾驶危险度和重叠比例。
另一方面,在第1实施方式的上述模拟驾驶装置1中,可以通过省略与模拟车辆相关的结构3~5和传感器11~13来构成本发明的影像控制装置。在该情况下,投影仪7和屏幕8相当于输出接口,视线检测装置10相当于观察点取得部。并且,控制器6相当于视野缺损信息数据存储部、动态图像影像数据存储部、动态图像显示控制部、关联影像数据存储部和影像再现控制部。
在该影像控制装置中,在控制器6的内存中,替代上述的模拟驾驶控制用的影像数据而存储有通常的风景影像等动态图像数据。然后,在将用户的上述视野缺损信息数据存储到内存中之后,不执行上述的图6的模拟行驶控制而执行动态图像显示控制。
在该动态图像显示控制中,控制器6的内存中的动态图像数据经由投影仪7显示在屏幕8上。然后,在动态图像显示控制的执行过程中,根据上述视线检测装置10的检测信号来取得用户的观察点,与上述的图4的步骤6同样地,将视野影像数据存储到控制器6的内存中。该视野影像数据成为以用户的观察点O为中心将动态图像影像内的物体的图像数据与视野缺损信息数据(例如图3)重叠所得到的视野影像数据。
在以这样的方式执行动态图像显示控制之后,与上述的影像再现控制(图6/步骤25)同样地执行影像再现控制。由此,与上述的图7~10同样,用户能够确认出风景影像内的物体与用户的视野区域中的无敏感度区域31、低敏感度区域32及中敏感度区域33等重叠的状态。其结果,视觉功能有所降低的用户能够准确地掌握自身在歩行时等的危险性。
接着,对本发明的第2实施方式的模拟驾驶装置进行说明。本实施方式的模拟驾驶装置1的机械结构和电气结构与第1实施方式的模拟驾驶装置1相同,仅控制处理的内容不同,因此,以下,以不同点为中心进行说明。此外,对与第1实施方式相同的结构标注相同的标号并省略其说明。
(第2实施方式的控制部的说明)
图14是示出第2实施方式的模拟驾驶装置1所具备的各功能的框图。在图14中,模拟驾驶装置1的控制器6具有与外部进行信号的输入输出等的输入输出接口I/O。
(与模拟驾驶装置1的控制器6连接的信号输出元件)
模拟驾驶装置1的控制器6被输入有来自转向角传感器11、油门传感器12、制动器传感器13、视线检测装置10和其他未图示的传感器等的信号输出元件的输出信号。
另外,在本实施方式中,控制器6相当于视野缺损信息数据存储部、模拟影像数据存储部、关联影像数据生成部和影像数据显示控制部。
(与模拟驾驶装置1的控制器6连接的被控制要素)
模拟驾驶装置1的控制器6与投影仪7或其他未图示的控制要素连接。控制器6向投影仪7等输出这些控制要素的控制信号。投影仪7将图像(影像)显示(投影)在屏幕8上。
(模拟驾驶装置1的控制器6的功能)
模拟驾驶装置1的控制器(驾驶模拟程序)6具有执行与来自所述信号输出要素的输入信号对应的处理并向所述各控制要素输出控制信号的功能。即,控制器6具有以下的功能。
图15A~15C是由模拟驾驶装置1显示的影像的一例的说明图,图15A是不存在视野狭窄的状态的影像的说明图,图15B是视线位于中央并且视野的左半部分发生了缺损的状态的影像的说明图,图15C是与图15B相比视线向左侧进行了移动的情况下的影像的说明图。
图16A~16C是由模拟驾驶装置1显示的影像的另一例的说明图,图16A是不存在视野狭窄的状态的影像的说明图,图16B是视线位于中央并且视野的中心部以外发生了缺损的状态的影像的说明图,图16C是与图16B相比视线向右侧进行了移动的情况下的影像的说明图。
C1:模拟器影像存储部
模拟器影像存储部C1存储模拟驾驶装置1的影像。在图15A、图16A中,第2实施方式的模拟器影像存储部C1存储如下影像,该影像具有由建筑物或道路等固定物影像化而成的背景部131、和由在背景部131内移动的汽车、自行车或行人等移动体影像化而成的非背景部132。另外,如专利文献2等所记载的那样,模拟驾驶装置1的影像可以使用以往公知的各种影像,因此,省略详细的说明。
C2:视野分布数据存储部(视野狭窄信息的存储部)
作为视野狭窄的信息的存储部的一例的视野分布数据存储部C2存储视野的分布数据。在图15A~15C、图16A~16C中,作为一例,实施例的视野分布数据存储部C2将如图15B、15C所示那样视野136的左半部分136a发生了缺损的信息、和如图16B、16C所示那样视野136的中央部以外136b发生了缺损(向心性视野狭窄)的信息作为视野的分布数据(视野狭窄的信息)存储起来。
图17是视野的信息的一例的说明图。另外,视野狭窄的信息不限于图15B、15C、图16B、16C所示的情况。发生了缺损的区域的位置、数量和大小能够根据想要体验的视野狭窄的状况来任意变更。此外,不限于发生了缺损的部分(不可见部分)/可见部分那样的双态信息。在图17中,将用自动视野计从视野缺损的患者等计测到的视网膜的确定的部位的敏感度的分布数据作为视野的分布数据的一例存储起来。另外,视野狭窄可以通过使用市场上出售的公知的视野计来检测,可以通过任意的装置、方法来检测包含视野狭窄在内的视野状况。
在图17所示的一例中,在视野136中的各像素区域中,黑色较深的部分是敏感度较差、几乎看不到的部分,黑色较浅的部分(接近白色的部分)是敏感度较好、可以看到的部分。然后,该中间深度的部分(灰色的部分)是敏感度处于中间的部分。在实际的视野缺损中,较少处于能看到和看不到的双态状况,而具有如下情况:存在能清晰地看到的部分(敏感度较好的部分)、完全看不到的部分(敏感度较差的部分)、稍微看得到的部分(敏感度中间)。因此,也可以使用这样的敏感度分布的数据。
另外,敏感度的等级(敏感度的分类)能够根据模拟驾驶装置1的规格或设计等来任意变更,可以设为2个等级,还可以设为3个等级以上的多个等级。此外,敏感度分布的细微程度(像素的大小)也能够根据设计或规格等来任意变更。
因此,第2实施方式的视野狭窄的信息根据由自动视野计检测出的视野的信息,根据通过设计等而预先规定的敏感度的分类(等级或细微程度)而生成,并预先保存到视野分布数据存储部C2中。
另外,作为视野狭窄的信息,还可以使用利用模拟驾驶装置1的使用者(用户)自身的视野狭窄的信息,并且还可以使用他人的视野狭窄的信息或典型的视野狭窄状态的信息来使健康者体验视野狭窄的状态下的驾驶。
C3:视线检测部
视线检测部C3根据视线检测装置10的检测结果来检测用户M的视线。视线检测部C3如图15B、15C、图16B、16C的视线位置(观察点)137所示那样检测用户M的视线。
C4:方向盘操作量检测部
方向盘操作量检测部C4根据转向角传感器11的检测结果来检测用户M对方向盘3的操作量。
C5:油门操作量检测部
油门操作量检测部C5根据油门传感器12的检测结果来检测用户M对油门踏板4的操作量(踩踏量)。
C6:制动器操作量检测部
制动器操作量检测部C6根据制动器传感器13的检测结果来检测用户M对制动踏板5的操作量(踩踏量)。
另外,在本实施方式中,方向盘3、油门踏板4和制动踏板5相当于操作部,转向角传感器11、油门传感器12和制动器传感器13相当于操作状态取得部。
C7:狭窄影像生成部
狭窄影像生成部C7根据以视线位置(观察点)137为中心的视野136中的视野分布数据来对模拟器影像存储部C1的影像进行加工而生成狭窄状态影像141(图15B、图15C、图16B、图16C)。第2实施方式的狭窄影像生成部C7根据用户M的视线位置137、视野分布数据和方向盘3、油门踏板4、制动踏板5的操作量,以在模拟驾驶装置1的虚拟空间中行驶的方式生成并更新狭窄状态影像。在图15A~15C、图16A~16C中,针对模拟驾驶装置1的影像(图15A、图16A),根据左半部分136a发生了缺损或中央部以外136b发生了缺损的视野136,以视线(观察点)137为中心来变更(加工)缺损区域的影像。
这时,为了使填补得到再现,不对背景部131进行加工,而以针对非背景部132删除与缺损的区域136a、136b重叠的部分的方式对影像进行加工,从而生成狭窄状态影像141(图15B、图16B)。然后,当视线137移动时,如图15C、图16C所示,对应着视线137使缺损区域136a、136b发生变动,并更新成如下狭窄状态影像(视野狭窄影像)141,在该狭窄状态影像中,不删除变得不再与变动后的缺损区域136a、136b重叠的非背景部(轻型卡车或摩托车)132。
此外,在非背景部(轻型货车或摩托车)处于多个敏感度部分中的情况(例如,轻型货车的前半部分位于敏感度较好的部分,后半部分位于敏感度较差的部分的情况)下,可以构成为在该对象的任意位置变更透明度或对比度。
此外,根据方向盘3的操作量使模拟驾驶装置1的影像131、132的朝向左右发生变动、根据油门踏板4的操作量进行前进、加速、并根据制动踏板5的操作量进行减速,从而对速度进行计算并更新模拟驾驶装置1的影像。另外,根据方向盘3、油门、制动器的操作来更新影像这一方式本身与现有公知的模拟驾驶装置1相同,因此,省略进一步的详细说明。然后,根据模拟驾驶装置1的影像、视线137和视野分布数据来生成视野狭窄影像141并对其进行更新,该模拟驾驶装置1的影像是根据方向盘3等的操作而更新的。
C8:影像显示部
影像显示部C8将由狭窄影像生成部C7生成的视野狭窄影像141经由投影仪7投影(显示)在屏幕8上。
(流程图的说明)
图18是第2实施方式的视野狭窄影像的显示处理的流程图的说明图。根据模拟驾驶装置1的控制器6所存储的程序来进行图18的流程图的各步骤的处理。此外,该处理与模拟驾驶装置1的其他各种处理同时执行。图18所示的流程图通过模拟驾驶装置1的启动(接通电源)而开始。
在图18的步骤51中,读入模拟驾驶装置1的数据(影像)131、132。然后,进入步骤52。
在步骤52中,读入视野分布数据(视野的数据)136。然后,进入步骤53。在步骤53中,开始视线137的检测。然后,进入步骤54。
在步骤54中,根据视线和视野分布数据36来生成显示图像(视野狭窄影像141)并显示。然后,进入步骤55。
在步骤55中,判别是否进行了方向盘3的输入。在“是”的情况下,进入步骤56,在“否”的情况下,进入步骤57。
在步骤56中,根据方向盘3的输入(操作量)来更新显示图像(视野狭窄影像141)。然后,返回步骤55。
在步骤57中,判别是否进行了油门踏板4、制动踏板5的输入。在“是”的情况下,进入步骤58,在“否”的情况下,进入步骤60。
在步骤58中,计算模拟驾驶装置1在虚拟空间中的行驶速度。然后,进入步骤59。在步骤59中,根据速度来更新图像(视野狭窄影像141)。然后,返回步骤55。
在步骤60中,判别是否存在视线137的变动。在“是”的情况下,进入步骤61,在“否”的情况下,进入步骤62。
在步骤61中,根据视线137的变动来更新图像(视野狭窄影像141)。然后,返回步骤55。在步骤62中,判别是否进行了使模拟驾驶装置1结束的输入。在“否”的情况下,返回步骤55,在“是”的情况下,使模拟驾驶装置1结束。
(第2实施方式的作用)
在具有上述结构的第2实施方式的模拟驾驶装置1中,根据视野狭窄的视野(视野区域)136的数据来生成视野狭窄图像141。在视野狭窄图像141中,显示视野狭窄的状态下的影像,即使是视野无疾病的用户M,也能够体验视野狭窄的状态下的驾驶。因此,如图15B、图16B所示,能够体验在看不到驾驶轻型卡车或二轮车等的状态下进行驾驶的情况,能够体验视野狭窄对驾驶产生的影响。因此,能够启发或启示视野狭窄的状态下的驾驶是危险的。
特别是,在第2实施方式的模拟驾驶装置1中,针对背景部131和非背景部132,在非背景部132与缺损区域136a、136b重叠的情况下删除非背景部132,不删除背景部131。因此,能够再现进行了填补的状态。由此,与没有再现填补的情况相比,能够再现出更接近实际的视野狭窄状态的状态。
此外,在第2实施方式的模拟驾驶装置1中对视线137进行检测,根据视线137的变动来使缺损区域136a、136b移动从而对视野狭窄图像141进行更新。因此,可以不移动颈部,在视线发生了移动的情况下,可以像使用针孔眼镜的情况那样对视野狭窄图像141进行更新。因此,与使用针孔眼镜的情况相比,能够再现更接近实际的视野狭窄的驾驶状态的状态。
并且,在如图17所示的视野区域136中,针对每个像素使用敏感度不同的视野数据,例如以使敏感度较高的部分的影像较亮且使敏感度较低的部分的影像较暗的方式生成视野狭窄图像141,由此能够再现出更加实际的视野狭窄的状态。即,还可以构成为根据敏感度来变更背景部131和非背景部132双方的亮度或者仅变更非背景部132的亮度。
此外,例如,也可以根据视野缺损部分的敏感度的程度来变更人或车等对象(非背景部132)的透明度。即,对于敏感度较好的部分,以几乎不透明的方式显示对象,而对于敏感度较差的部分,以接近透明的方式显示对象。
(变更例)
以上,详细叙述了本发明的第2实施方式,但本发明不限于上述第2实施方式,能够在权利要求所记载的本发明的主旨的范围内进行各种变更。以下,例示本发明的变更例(H01)~(H06)。
(H01)在上述第2实施方式中,例示了应用于汽车的模拟驾驶装置1的结构,但不限于此。例如,也可以应用于体验飞机的驾驶的飞行模拟器、体验二轮车的驾驶的模拟驾驶装置1、体验铁路车辆的驾驶的模拟器、体验视野有疾病的行人的步行的模拟器等。
(H02)在上述第2实施方式中,作为模拟驾驶装置1的结构,例示了使用投影仪7和屏幕8的结构,但是,还可以变更为显示在电视或监视器等显示装置上的结构,或者变更为头戴式显示器等由用户M佩戴的类型的显示装置。
(H03)在上述第2实施方式中,作为视线检测装置10,不限于所例示的结构,还可以采用眼镜型的结构。此外,在使用头戴式显示器的情况下,也可以采用内置在头戴式显示器中的结构。
(H04)在上述第2实施方式中,作为输入部件的一例,例示了使用方向盘3、油门踏板4、制动踏板5的结构,但是不限于此。还可以追加离合器踏板、侧制动器、转向灯等输入部件。
(H05)在上述第2实施方式中,作为模拟驾驶装置1的影像数据,例示了在具有背景部131和非背景部132的影像数据中生成背景部131的影像的结构,但是不限于此。例如,还可以构成为将由照相机拍摄到的图像或实际上能够看到的图像作为背景部131,以使生成的非背景部132与真实的图像重叠的方式显示影像。
(H06)在上述第2实施方式中,设建筑物等固定物为背景部131,但不限于此。例如,如红绿灯那样随着时间上的推移而如绿、黄、红那样不断变化的物体也可以不作为固定物,而作为移动体来处理。在视野缺损的患者中,例如,在通过有红绿灯的十字路口的情况下,存在红绿灯的灯与缺损区域重叠而无法识别的情况、通过填补而没能补充红绿灯自身(红绿灯整体)而误认为是无红绿灯的十字路口、其结果导致闯红灯的情况。因此,通过将红绿灯作为移动体并作为非背景部132来处理,能够模拟实际的患者所识别的状况。
标号说明
1:模拟驾驶装置;3:方向盘(操作部);4:油门踏板(操作部);5:制动踏板(操作部);6:控制器(视野缺损信息数据存储部、模拟影像数据存储部、关联影像数据生成部、影像数据显示控制部、数据生成部、关联影像数据存储部、危险状态判定部、危险状态显示部、重叠状况参数取得部、相关性模型存储部、驾驶时危险程度判定部、驾驶时危险程度显示部);7:投影仪(输出接口);8:屏幕(输出接口);10:视线检测装置(观察点取得部);11:转向角传感器(操作状态取得部);12:油门传感器(操作状态取得部);13:制动器传感器(操作状态取得部);M:用户;O:用户的观察点;Xref:危险指标值(重叠状况参数);131:影像、背景部;132:影像、非背景部;136:视野;137:观察点;141:狭窄影像。

Claims (8)

1.一种模拟驾驶装置,其模拟地体验车辆驾驶,其特征在于,该模拟驾驶装置具有:
输出接口;
操作部,其由用户操作以驾驶模拟车辆;
操作状态取得部,其取得所述用户对所述操作部进行操作的操作状态;
观察点取得部,其取得所述用户的观察点;
视野缺损信息数据存储部,其存储表示所述用户的视野缺损的发生状态的视野缺损信息数据;
模拟影像数据存储部,其存储对模拟行驶环境进行影像化所得到的模拟影像数据;
关联影像数据生成部,其根据所述用户对所述操作部进行操作的所述操作状态、所述视野缺损信息数据和所述用户的所述观察点,生成将所述视野缺损信息数据与所述模拟影像数据彼此相关联而得到的数据、即关联影像数据;以及
影像数据显示控制部,其执行使所述输出接口显示所述关联影像数据的影像数据显示控制。
2.根据权利要求1所述的模拟驾驶装置,其特征在于,
所述模拟影像数据由如下数据构成,该数据具有由固定物的影像构成的背景部和由在该背景部内移动的移动体的影像构成的非背景部,
所述关联影像数据生成部根据所述用户对所述操作部进行操作的所述操作状态、所述视野缺损信息数据和所述用户的所述观察点,在显示与发生了所述视野缺损的区域重叠的所述背景部的图像的同时,对与发生了该视野缺损的区域重叠的所述非背景部的图像进行变更,由此来生成所述关联影像数据。
3.根据权利要求2所述的模拟驾驶装置,其特征在于,
所述视野缺损信息数据由以所述观察点为中心的视野中的能见性的敏感度的分布的信息构成。
4.根据权利要求3所述的模拟驾驶装置,其特征在于,
所述关联影像数据生成部根据所述敏感度的分布来变更所述非背景部的所述图像的透明度或对比度。
5.根据权利要求1所述的模拟驾驶装置,其特征在于,
所述视野缺损信息数据是将所述用户的所述视野缺损的所述发生状态与该用户的视野区域相关联而得到的数据,
所述关联影像数据生成部具有:
模拟影像显示控制部,其根据所述用户对所述操作部进行操作的所述操作状态来执行使所述输出接口显示在所述模拟影像数据存储部中所存储的所述模拟影像数据的模拟影像显示控制;以及
数据生成部,其在该模拟影像显示控制的执行过程中,生成如下数据来作为所述关联影像数据,该数据是,在同一影像内以所述用户的所述观察点为中心的状态下,将由所述观察点取得部取得的所述用户的观察点、所述视野缺损信息数据和所述模拟影像数据内的物体的影像彼此相关联而得到的数据,
所述模拟驾驶装置还具有关联影像数据存储部,所述关联影像数据存储部存储该关联影像数据,
作为所述影像数据显示控制,所述影像数据显示控制部在所述模拟影像显示控制结束后,执行使所述输出接口再现显示所述关联影像数据的影像再现控制。
6.根据权利要求5所述的模拟驾驶装置,其特征在于,该模拟驾驶装置具有:
危险状态判定部,其在所述模拟影像显示控制的执行过程中判定是否发生了所述模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的模拟危险状态;以及
危险状态显示部,其在所述影像再现控制的执行过程中或结束后,使所述输出接口显示所述危险状态判定部对所述模拟危险状态的发生的判定结果。
7.根据权利要求5或6所述的模拟驾驶装置,其特征在于,该模拟驾驶装置具有:
重叠状况参数取得部,其在所述模拟影像显示控制的执行过程中取得重叠状况参数,该重叠状况参数表示所述模拟影像数据内的物体与所述视野缺损信息数据中的所述视野缺损的发生区域重叠的重叠状况的发生状态;
相关性模型存储部,其存储相关性模型,该相关性模型表示该重叠状况参数与危险程度之间的相关性,该危险程度表示发生所述模拟车辆与模拟行驶环境内的其他物体接触和即将接触中的至少一方的模拟危险状态的可能性;
驾驶时危险程度判定部,其使用该相关性模型和所述用户的所述重叠状况参数来判定该用户驾驶车辆时的危险程度;以及
驾驶时危险程度显示部,其在所述影像再现控制的执行过程中或结束后,使所述输出接口显示所述驾驶时危险程度判定部对驾驶所述车辆时的危险程度进行判定的判定结果。
8.一种影像控制装置,其特征在于,该影像控制装置具有:
输出接口;
视野缺损信息数据存储部,其存储将用户的视野缺损的发生状态与该用户的视野区域相关联而得到的数据、即视野缺损信息数据;
动态图像影像数据存储部,其存储包含物体的动态图像影像数据;
动态图像显示控制部,其执行使所述输出接口显示该动态图像影像数据存储部中所存储的所述动态图像影像数据的动态图像显示控制;
观察点取得部,其在该动态图像显示控制的执行过程中,取得所述用户的观察点;
关联影像数据存储部,其在所述动态图像显示控制的执行过程中,将如下数据作为关联影像数据存储起来,该数据是,在同一影像内以所述用户的观察点为中心的状态下将所述用户的观察点、所述视野缺损信息数据和所述动态图像影像数据内的所述物体的影像彼此相关联而得到的数据;以及
影像再现控制部,其在所述动态图像显示控制结束后,执行使所述输出接口再现显示所述关联影像数据的影像再现控制。
CN201980052217.8A 2018-08-08 2019-07-18 模拟驾驶装置 Active CN112534490B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018149509A JP7097551B2 (ja) 2018-08-08 2018-08-08 運転シミュレーション装置および運転シミュレーションプログラム
JP2018-149509 2018-08-08
JP2018-188459 2018-10-03
JP2018188459A JP7064195B2 (ja) 2018-10-03 2018-10-03 模擬運転装置及び模擬運転方法
PCT/JP2019/028221 WO2020031647A1 (ja) 2018-08-08 2019-07-18 模擬運転装置及び映像制御装置

Publications (2)

Publication Number Publication Date
CN112534490A true CN112534490A (zh) 2021-03-19
CN112534490B CN112534490B (zh) 2022-11-08

Family

ID=69414794

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980052217.8A Active CN112534490B (zh) 2018-08-08 2019-07-18 模拟驾驶装置

Country Status (4)

Country Link
US (1) US20210256867A1 (zh)
EP (1) EP3809396A4 (zh)
CN (1) CN112534490B (zh)
WO (1) WO2020031647A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114190891A (zh) * 2021-12-02 2022-03-18 杭州极智医疗科技有限公司 基于眼动跟踪与沉浸式驾驶平台的单侧忽略评估系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111798717B (zh) * 2020-07-03 2022-05-03 福建百信信息技术有限公司 一种支持vr驾驶培训的电动车控制系统和方法
JP2024048773A (ja) * 2022-09-28 2024-04-09 マツダ株式会社 運転者状態判定装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0830186A (ja) * 1994-07-18 1996-02-02 Hitachi Denshi Ltd 模擬視界装置
CN1886639A (zh) * 2003-12-01 2006-12-27 沃尔沃技术公司 用于展现信息的方法和系统
JP2008139553A (ja) * 2006-12-01 2008-06-19 National Agency For Automotive Safety & Victim's Aid 運転適性診断方法、運転適性診断の評価基準決定方法、運転適性診断プログラム
JP2009151187A (ja) * 2007-12-21 2009-07-09 Toyota Motor Corp 安全運転教示システム
US20090181349A1 (en) * 2008-01-10 2009-07-16 Richard Harkness Driver Training System
CN103370226A (zh) * 2011-03-31 2013-10-23 本田技研工业株式会社 驾驶支援装置
JP2014228725A (ja) * 2013-05-23 2014-12-08 ソニー株式会社 情報処理装置及び記憶媒体
CN107031651A (zh) * 2016-01-14 2017-08-11 马自达汽车株式会社 驾驶辅助装置
CN107224261A (zh) * 2016-03-23 2017-10-03 香港中文大学 利用虚拟现实的视觉障碍检测系统
JP2018045067A (ja) * 2016-09-14 2018-03-22 本田技研工業株式会社 模擬運転装置及び模擬運転方法
CN107945613A (zh) * 2018-01-19 2018-04-20 吉首大学 一种辅助汽车驾驶学习的模型

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009174879A (ja) 2008-01-21 2009-08-06 Mazda Motor Corp 車両の制御特性設定システム及び車両の制御特性設定方法
JP2010002714A (ja) * 2008-06-20 2010-01-07 Toyota Motor Corp シミュレータ装置、運転課題提供方法
JP5825713B2 (ja) * 2011-09-15 2015-12-02 一般財団法人日本自動車研究所 車両用危険場面再現装置
US9349300B2 (en) * 2011-10-31 2016-05-24 Lifelong Driver Llc Senior driver training
US20150104757A1 (en) * 2013-10-15 2015-04-16 Mbfarr, Llc Driving assessment and training method and apparatus
JP6347158B2 (ja) * 2014-06-06 2018-06-27 大日本印刷株式会社 表示端末装置、プログラム及び表示方法
US11956414B2 (en) * 2015-03-17 2024-04-09 Raytrx, Llc Wearable image manipulation and control system with correction for vision defects and augmentation of vision and sensing
JP6719119B2 (ja) 2016-06-08 2020-07-08 国立大学法人東海国立大学機構 画像表示装置、および、コンピュータプログラム
JP2018010310A (ja) * 2017-08-24 2018-01-18 ソニー株式会社 プログラム、情報処理装置及び情報処理方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0830186A (ja) * 1994-07-18 1996-02-02 Hitachi Denshi Ltd 模擬視界装置
CN1886639A (zh) * 2003-12-01 2006-12-27 沃尔沃技术公司 用于展现信息的方法和系统
JP2008139553A (ja) * 2006-12-01 2008-06-19 National Agency For Automotive Safety & Victim's Aid 運転適性診断方法、運転適性診断の評価基準決定方法、運転適性診断プログラム
JP2009151187A (ja) * 2007-12-21 2009-07-09 Toyota Motor Corp 安全運転教示システム
US20090181349A1 (en) * 2008-01-10 2009-07-16 Richard Harkness Driver Training System
CN103370226A (zh) * 2011-03-31 2013-10-23 本田技研工业株式会社 驾驶支援装置
JP2014228725A (ja) * 2013-05-23 2014-12-08 ソニー株式会社 情報処理装置及び記憶媒体
CN107031651A (zh) * 2016-01-14 2017-08-11 马自达汽车株式会社 驾驶辅助装置
CN107224261A (zh) * 2016-03-23 2017-10-03 香港中文大学 利用虚拟现实的视觉障碍检测系统
JP2018045067A (ja) * 2016-09-14 2018-03-22 本田技研工業株式会社 模擬運転装置及び模擬運転方法
CN107945613A (zh) * 2018-01-19 2018-04-20 吉首大学 一种辅助汽车驾驶学习的模型

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘硕; 刘文超: "单眼视力障碍者机动车驾驶安全性与可行性研究", 《汽车与安全》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114190891A (zh) * 2021-12-02 2022-03-18 杭州极智医疗科技有限公司 基于眼动跟踪与沉浸式驾驶平台的单侧忽略评估系统
CN114190891B (zh) * 2021-12-02 2023-11-10 杭州极智医疗科技有限公司 基于眼动跟踪与沉浸式驾驶平台的单侧忽略评估系统

Also Published As

Publication number Publication date
US20210256867A1 (en) 2021-08-19
CN112534490B (zh) 2022-11-08
EP3809396A1 (en) 2021-04-21
EP3809396A4 (en) 2021-09-01
WO2020031647A1 (ja) 2020-02-13

Similar Documents

Publication Publication Date Title
CN112534490B (zh) 模拟驾驶装置
US20060164597A1 (en) Visual training device and visual training method
CN111290571B (zh) 评估模拟的车辆相关特征
CN113421346A (zh) 一种增强驾驶感的ar-hud抬头显示界面的设计方法
Ma et al. Does augmented-reality head-up display help? A preliminary study on driving performance through a VR-simulated eye movement analysis
CN108039084A (zh) 基于虚拟现实的汽车视野评价方法及系统
CN106331681A (zh) 一种头戴显示器的图像显示方法
Pala et al. Analysis of street-crossing behavior: comparing a CAVE simulator and a head-mounted display among younger and older adults
US11938819B2 (en) Evaluation of a simulated vehicle-related feature
JP7097551B2 (ja) 運転シミュレーション装置および運転シミュレーションプログラム
JP7064195B2 (ja) 模擬運転装置及び模擬運転方法
JP6719119B2 (ja) 画像表示装置、および、コンピュータプログラム
CN113525402B (zh) 高级辅助驾驶及无人驾驶视场智能响应方法及系统
Smith et al. Augmented mirrors: depth judgments when augmenting video displays to replace automotive mirrors
US20210295731A1 (en) Information processing apparatus, information processing system, information processing method, and computer program
CN111291447B (zh) 评估模拟的车辆功能特征
KR20170039514A (ko) 운전 적성검사 시스템
JP2021171564A (ja) 視野検査システム、視野検査装置、および視野検査プログラム
Schinko et al. Building a Driving Simulator with Parallax Barrier Displays.
Kumar et al. How do different cueing strategies affect drivers' perceived workload
CN114190891B (zh) 基于眼动跟踪与沉浸式驾驶平台的单侧忽略评估系统
Schöner et al. Verification of stereoscopic projection systems for quantitative distance and speed perception tasks
CN116597288B (zh) 一种注视点渲染方法、系统、计算机及可读存储介质
Mestre Perceptual calibration in virtual reality applications
Mortimer et al. Hector-VR®: a mixed-reality driving simulator for older drivers

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant