CN111923918A - 在交通工具中辅助虚拟现实的方法和相关的控制装置 - Google Patents
在交通工具中辅助虚拟现实的方法和相关的控制装置 Download PDFInfo
- Publication number
- CN111923918A CN111923918A CN201910391442.6A CN201910391442A CN111923918A CN 111923918 A CN111923918 A CN 111923918A CN 201910391442 A CN201910391442 A CN 201910391442A CN 111923918 A CN111923918 A CN 111923918A
- Authority
- CN
- China
- Prior art keywords
- virtual reality
- vehicle
- control data
- data
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 8
- 238000004891 communication Methods 0.000 claims description 29
- 230000033001 locomotion Effects 0.000 claims description 27
- 238000004378 air conditioning Methods 0.000 claims description 21
- 230000009467 reduction Effects 0.000 claims description 7
- 238000005282 brightening Methods 0.000 claims description 5
- 238000009423 ventilation Methods 0.000 claims description 5
- 238000013500 data storage Methods 0.000 claims description 2
- 230000015654 memory Effects 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000005265 energy consumption Methods 0.000 description 2
- 230000004438 eyesight Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 201000003152 motion sickness Diseases 0.000 description 2
- 230000004310 photopic vision Effects 0.000 description 2
- 239000004576 sand Substances 0.000 description 2
- 230000004296 scotopic vision Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 208000012886 Vertigo Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 231100000889 vertigo Toxicity 0.000 description 1
- 238000010792 warming Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0001—Details of the control system
- B60W2050/0043—Signal treatments, identification of variables or parameters, parameter estimation or state estimation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0062—Adapting control system settings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及一种用于在交通工具中辅助虚拟现实的方法。所述方法包括：获取与在虚拟现实装置中显示的虚拟现实相关联的第一特征数据；基于获取的第一特征数据生成用于在交通工具中的功能系统的第一控制数据；和发送第一控制数据，以用于操控交通工具中的功能系统。此外，本发明还涉及相关的控制装置、数据处理装置和交通工具。进一步地，本发明还涉及一种用于运行交通工具的方法。根据本发明，在交通工具中的虚拟现实体验能够得到良好的改善。
Description
技术领域
本发明涉及虚拟现实技术领域。更具体地，本发明涉及一种用于在交通工具中辅助虚拟现实的方法、一种用于在交通工具中辅助虚拟现实的控制装置、一种数据处理装置和一种带有所述控制装置或数据处理装置的交通工具。此外，本发明还涉及一种用于运行交通工具的方法。
背景技术
当今，虚拟现实(Virtual Reality，VR)已经在诸多领域中得以应用，例如娱乐游戏、房产开发、教育训练、工业仿真等。然而，至今虚拟现实装置仅有限地应用于交通工具中。
在文献CN105344101A中涉及一种基于虚拟现实技术的赛车模拟游戏。然而，该赛车模拟游戏仅局限于固定安装在游戏厅中的游戏装置，脱离实际的交通工具，功能单一并且缺乏与用户的交互。
在文献CN206193684U中涉及一种虚拟现实系统，通过设置于车辆车体上的动作捕捉装置中的多个光学标记物，将动作捕捉装置的光学信息反射或者发送到虚拟现实系统的动作捕捉相机，再输出到服务器进行处理并通过头显呈现给用户。然而，该虚拟现实系统无法实现车辆与用户之间的交互，效果有限。
现有的虚拟现实体验通常是用户手持VR头显或者头戴VR头显，通过VR头显来体验VR场景。然而，特别是在交通工具中至今虚拟现实体验还存在一些问题，例如缺乏沉浸感以及容易产生眩晕感。
发明内容
本发明的任务在于，改善在交通工具中的虚拟现实的体验。
按照本发明的第一方面，描述了一种用于在交通工具中辅助虚拟现实的方法。所述方法包括：获取与在虚拟现实装置中显示的虚拟现实相关联的第一特征数据；基于获取的第一特征数据生成用于在交通工具中的功能系统的第一控制数据；和发送第一控制数据，以用于操控交通工具中的功能系统。
根据本发明，交通工具中的功能系统能够与在虚拟现实装置中显示的虚拟现实相关联地或者说相匹配地进行响应，使得用户能够从视觉、听觉、触觉和/或嗅觉上体验虚拟现实，从而进一步改善用户体验。
此外，也可能的是，仅需适当地控制原本就装配在交通工具中的功能系统即可，无需为虚拟现实额外地装配附加昂贵的设备，从而能够以成本有利的方式改善虚拟现实体验。
在一些实施例中，所述第一特征数据可以包括表征在虚拟现实装置中显示的虚拟现实的如下至少一个特征的数据：虚拟现实中的天气状态、虚拟现实中物体的运动、虚拟现实中的场景、虚拟现实中的明暗程度和虚拟现实中的氛围。
在一些实施例中，天气状态可以包括如下参数中的至少一个：温度、湿度、风速、降雨、降雪、冰雹、雾霾和沙尘暴。
在一些实施例中，虚拟现实中物体的运动可以包括如下参数中的至少一个：物体的速度、物体的加速度和物体的姿态。
在一些实施例中，场景可以包括如下参数中的至少一个：冰川、大海、田野、草原、森林、海滩、荒漠、都市、动物园、海底世界、电影院、KTV、会议室和商场。
在一些实施例中，明暗程度可以包括如下参数中的至少一个：暗视觉范围、中间视觉范围和明视觉范围。
在一些实施例中，氛围可以包括如下参数中的至少一个：轻松、激烈、严肃和安静。
在一些实施例中，第一控制数据能用于操控交通工具中如下功能系统中的至少一个：座椅系统、窗户系统、声音系统、空调系统、灯光系统和驾驶员辅助系统。
在一些实施例中，所述步骤“基于获取的第一特征数据生成用于在交通工具中的功能系统的第一控制数据”包括：
根据在虚拟现实装置中显示的虚拟现实中物体的运动来生成第一控制数据，以用于促使座椅系统实施如下动作中的至少一个：沿纵向移动、沿纵向转动、沿横向移动、沿横向转动、沿竖直方向移动、沿竖直方向转动(例如倾斜、推背和振动)；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景来生成第一控制数据，以用于促使窗户系统实施如下动作中的至少一个：在打开方向上运动和在关闭方向上运动；和/或
根据在虚拟现实装置中显示的虚拟现实中的场景和/或氛围来生成第一控制数据，以用于促使声音系统和/或窗户系统和/或空调系统实施如下动作中的至少一个：主动降噪和主动增噪；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景和/或氛围来生成第一控制数据，以用于促使空调系统实施如下动作中的至少一个：调温、调湿和通风；和/或
根据在虚拟现实装置中显示的虚拟现实中的明暗程度和/或场景和/或氛围来生成第一控制数据，以用于促使灯光系统实施如下动作中的至少一个：调暗、调亮和提供灯光氛围。
在一些实施例中，当氛围是严肃或者安静时或者当场景是会议室时，所述第一控制数据促使声音系统和/或窗户系统和/或空调系统实施主动降噪。
在一些实施例中，当氛围是严肃或者安静时或者当场景是会议室时，所述第一控制数据促使声音系统产生关于外界噪音的反向声波。由此，可以借助声音系统来中和噪音，从而实现降噪效果。此外，还可以促使关闭窗户，从而使得外界噪声得到进一步抑制。此外，也还可以促使关闭空调，从而进一步降低车辆内部的噪音产生。
在一些实施例中，所述第一特征数据包括表征用户在虚拟现实装置中显示的虚拟现实中的操作的数据。
在一些实施例中，所述操作包括如下操作中的至少一个：查看地图、指定导航路径、指定兴趣点以及购买服务或商品。
在一些实施例中，根据用户在虚拟现实装置中显示的虚拟现实中的操作来生成第一控制数据，以用于促使驾驶员辅助系统显示或实施新的导航路径。
在一些实施例中，在发送第一控制数据之前，对第一控制数据进行检查，仅当检查结果是肯定时，才允许发送第一控制数据。
在一些实施例中，所述检查包括：-安全检查，在所述安全检查中检查第一控制数据对功能系统的操控是否符合交通工具的行驶安全；和/或
-冲突检查，在所述冲突检查中检查第一控制数据对功能系统的操控是否与交通工具的当前运行状态和/或交通工具当前所在区域的交通规则和/或用户预设定状态相冲突。
在一些实施例中，在安全检查中，禁止发送如下第一控制数据，所述第一控制数据会引起交通工具经过危险地段或者施工地段；和/或在冲突检查中，当交通工具当前的能量剩余低于预定阈值时，禁止发送如下第一控制数据，所述第一控制数据会引起交通工具能耗增加。
根据本发明，虚拟现实的改善的体验与交通工具安全且可靠的行驶能够彼此协调地进行。在不违背交通工具安全且可靠的行驶的前提下充分地改善虚拟现实体验。
在一些实施例中，所述方法还包括：
-获取与交通工具的方位和/或运行状态相关联的第二特征数据；
-基于获取的第二特征数据生成用于在虚拟现实装置中显示的虚拟现实的第二控制数据；和
-发送第二控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
在一些实施例中，所述方法还包括：
-获取与在交通工具中的虚拟现实用户的运动和/或表情相关联的第三特征数据；
-基于获取的第三特征数据生成用于在虚拟现实装置中显示的虚拟现实的第三控制数据；和
-发送第三控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
在一些实施例中，所述方法还包括：与远程通信设备和/或处于交通工具内的便携式智能设备进行交互。
通过这样的方式，一方面，使得所述用户产生与所处运动直接联系的感受；另一方面，所述用户在观看虚拟现实时接收到的视觉画面与实际所感受的运动彼此协调，从而不发生晕动症。
按照本发明的第二方面，描述了一种用于在交通工具中实现虚拟现实的控制装置。所述控制装置能够经由第一通信连接与虚拟现实装置进行交互，并且所述控制装置能够经由第二通信连接与功能系统进行交互，其中，所述控制装置构造用于：从用于虚拟现实的数据存储器中获取与在虚拟现实装置中显示的虚拟现实相关联的第一特征数据；基于获取的第一特征数据生成用于在交通工具中的功能系统的第一控制数据；发送所述第一控制数据，以用于与在虚拟现实装置中显示的虚拟现实相关联地操控交通工具中的功能系统。
在一些实施例中，所述第一特征数据包括表征在虚拟现实装置中显示的虚拟现实的如下至少一个特征的数据：虚拟现实中的天气状态、虚拟现实中物体的运动、虚拟现实中的场景、虚拟现实中的明暗程度和虚拟现实中的氛围。
在一些实施例中，第一控制数据能用于操控交通工具中如下功能系统中的至少一个：座椅系统、窗户系统、声音系统、空调系统、灯光系统和驾驶员辅助系统。
在一些实施例中，所述控制装置构造用于：根据在虚拟现实装置中显示的虚拟现实中物体的运动来生成第一控制数据，以用于促使座椅系统实施如下动作中的至少一个：沿纵向移动、沿纵向转动、沿横向移动、沿横向转动、沿竖直方向移动、沿竖直方向转动；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景来生成第一控制数据，以用于促使窗户系统实施如下动作中的至少一个：在打开方向上运动和在关闭方向上运动；和/或
根据在虚拟现实装置中显示的虚拟现实中的场景和/或氛围来生成第一控制数据，以用于促使声音系统和/或窗户系统和/或空调系统实施如下动作中的至少一个：主动降噪和主动增噪；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景和/或氛围来生成第一控制数据，以用于促使空调系统实施如下动作中的至少一个：调温、调湿和通风；和/或
根据在虚拟现实装置中显示的虚拟现实中的明暗程度和/或场景和/或氛围来生成第一控制数据，以用于促使灯光系统实施如下动作中的至少一个：调暗、调亮和提供灯光氛围。
在一些实施例中，所述控制装置构造用于：当氛围是严肃或者安静时或者当场景是会议室时，生成第一控制数据，以用于促使声音系统和/或窗户系统和/或空调系统实施主动降噪。
在一些实施例中，所述第一特征数据包括表征用户在虚拟现实装置中显示的虚拟现实中的操作的数据。
在一些实施例中，所述控制装置构造用于：根据用户在虚拟现实装置中显示的虚拟现实中的操作来生成第一控制数据，以用于促使驾驶员辅助系统显示或实施新的导航路径。
在一些实施例中，所述控制装置构造用于：在发送第一控制数据之前，对第一控制数据进行检查，仅当检查结果是肯定时，才允许发送第一控制数据。
在一些实施例中，所述检查包括：安全检查，在所述安全检查中检查第一控制数据对功能系统的操控是否符合交通工具的行驶安全；和/或
冲突检查，在所述冲突检查中检查第一控制数据对功能系统的操控是否与交通工具的当前运行状态和/或交通工具当前所在区域的交通规则和/或用户预设定状态相冲突。
在一些实施例中，在安全检查中，禁止发送如下第一控制数据，所述第一控制数据会引起交通工具经过危险地段或者施工地段；和/或
在冲突检查中，当交通工具当前的能量剩余低于预定阈值时，禁止发送如下第一控制数据，所述第一控制数据会引起交通工具能耗增加。
在一些实施例中，所述控制装置构造用于：获取与交通工具的方位和/或运行状态相关联的第二特征数据；基于获取的第二特征数据生成用于在虚拟现实装置中显示的虚拟现实的第二控制数据；和发送第二控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
在一些实施例中，所述控制装置构造用于：获取与在交通工具中的虚拟现实用户的运动和/或表情相关联的第三特征数据；基于获取的第三特征数据生成用于在虚拟现实装置中显示的虚拟现实的第三控制数据；和发送第三控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
按照本发明的第三方面，描述了一种数据处理装置，包括：一个或多个处理器；以及一个或多个存储器，所述一个或多个存储器被配置为存储一系列计算机可执行的指令以及与所述一系列计算机可执行的指令相关联的计算机可访问的数据。当所述一系列计算机可执行的指令被所述一个或多个处理器执行时，使得所述一个或多个处理器进行如本发明第一方面所述的方法。
按照本发明的第四方面，描述了一种交通工具。所述交通工具包括根据本发明第二方面所述的控制装置或者包括根据本发明第三方面所述的数据处理装置。
在一些实施例中，交通工具包括陆地交通工具、航空交通工具或者水上交通工具，其中，陆地交通工具特别是指机动车、轨道车辆、摩托车等，航空交通工具特别是指飞机、飞艇等，水上交通工具特别是指轮船、游艇等。
按照本发明的第五方面，描述一种用于运行交通工具的方法。所述方法包括：在交通工具中的虚拟现实装置中显示虚拟现实；执行根据本发明第一方面所述的方法；在交通工具中的用于功能系统的控制单元基于第一控制数据操控所配设的执行装置。
附图说明
以下借助于附图示意性地阐述本发明的实施例。图中：
图1示出按照本发明的一个实施例的示意图；
图2示出按照本发明的在交通工具中辅助虚拟现实的系统的一个实施例的方框图；
图3示出按照本发明的用于在交通工具中辅助虚拟现实的方法的一个实施例的流程图。
具体实施方式
以下将参照附图描述本公开，其中的附图示出了本公开的若干实施例。然而应当理解的是，本公开可以以多种不同的方式呈现出来，并不局限于下文描述的实施例；事实上，下文描述的实施例旨在使本公开的公开更为完整，并向本领域技术人员充分说明本公开的保护范围。还应当理解的是，本文公开的实施例能够以各种方式进行组合，从而提供更多额外的实施例。
应当理解的是，本文中的用语仅用于描述特定的实施例，并不旨在限定本公开。本文使用的所有术语(包括技术术语和科学术语)除非另外定义，均具有本领域技术人员通常理解的含义。为简明和/或清楚起见，公知的功能或结构可以不再详细说明。
在本文中，用语“A或B”包括“A和B”以及“A或B”，而不是排他地仅包括“A”或者仅包括“B”，除非另有特别说明。
在本文中，用语“示例性的”意指“用作示例、实例或说明”。在此示例性描述的任意实现方式并不一定要被解释为比其它实现方式优选的或有利的。而且，本公开不受在上述技术领域、背景技术、发明内容或具体实施方式中所给出的任何所表述的或所暗示的理论所限定。
另外，仅仅为了参考的目的，还可以在本文中使用“第一”、“第二”等类似术语，并且“第一”、“第二”也可以涉及多个“第一”、“第二”。例如，除非上下文明确指出，否则涉及结构或元件的词语“第一”、“第二”和其它此类数字词语并没有暗示顺序或次序。
还应理解，“包括/包含”一词在本文中使用时，说明存在所指出的特征、整体、步骤、操作、单元和/或组件，但是并不排除存在或增加一个或多个其它特征、整体、步骤、操作、单元和/或组件以及/或者它们的组合。
图1示出按照本发明的一个实施例的示意图。在该实施例中，交通工具涉及机动车1。机动车中的人员2(以下也称为用户、即虚拟现实用户)分别戴有用于实现虚拟现实的虚拟现实装置3。在此，所述虚拟现实装置3是头戴式显示器，即头显。
在图1中，机动车中戴有虚拟现实装置的用户2通常可以包括乘坐机动车的人员，例如坐在副驾驶位置上的人员、坐在后排位置上的人员。在自动驾驶模式下，机动车中戴有虚拟现实装置的用户2也包括坐在驾驶位置上的驾驶员。在这种情况下，机动车可以按照驾驶员对于目的地、行程等参数的预先设定进行自动行驶，而在行驶中基本上无需驾驶员的介入。在自动驾驶模式中，如果机动车识别出需要驾驶员接管机动车，则可以通知驾驶员摘下虚拟现实装置来操纵机动车。
在其他实施例中，交通工具还可以涉及其他任意的带有可移动舱体的设备、例如飞行器、船舶和碰碰车。
接下去结合图2和3详细阐述按照本发明的在交通工具中辅助虚拟现实的系统和方法。
如图2所示，所述系统可以包括虚拟现实装置3、控制装置4和功能系统5。在虚拟现实装置3和控制装置4之间设有第一通信连接8，虚拟现实装置3和控制装置4可以经由所述第一通信连接8彼此交互。在控制装置4和功能系统5之间设有第二通信连接9，控制装置4和功能系统5可以经由所述第二通信连接9彼此交互。
在当前实施例中，所述虚拟现实装置3可以构成为如上所述的头显。通过头显能够向眼睛发送光学信号，能够实现虚拟现实、增强现实、混合现实等不同效果。在本公开中，不应限制性地理解虚拟现实，在此虚拟现实应理解为包含了“增强现实”和“混合现实”。
在当前实施例中，控制装置4可以包括交通工具自身装载的计算机，例如车载计算机(Head Unit)。附加地或备选地，控制装置4还可以包括交通工具操控模块。交通工具操控模块例如可以构成为机动车1的整车控制器(有时也称为车身域控制器)。在交通工具操控模块和车载计算机之间可以经由可行的通信连接方式彼此交互。换句话说，根据不同实施例，根据本发明的控制装置4可以构成为车载计算机或者构成为整车控制器，或者构成为车载计算机和整车控制器的组合。
在当前实施例中，功能系统5可以包括：座椅系统501、窗户系统502、声音系统503、空调系统504、灯光系统505和驾驶员辅助系统506。在此，功能系统5中的各子系统可以分别包括各自的控制单元、传感器、执行器以及通信连接。可选地，功能系统5中的各子系统可以经由可行的通信连接与控制装置4的车载计算机直接通信连接。可选地，功能系统5中的各子系统也可以经由可行的通信连接与控制装置4的整车控制器直接通信连接。示例性地，例如灯光系统505可以经由以太网总线与车载计算机直接通信连接，从车载计算机处接收指令并相应进行执行；而驾驶员辅助系统506则可以经由FlexRay总线与整车控制器直接通信连接，从整车控制器处接收指令并相应进行执行。
附加地或备选地，所述系统还可以包括远程通信单元6和便携式智能设备7。远程通信单元6例如可以是云端服务器。便携式智能设备7例如可以是智能手机或平板电脑等。
附加地或备选地，在控制装置4和远程通信单元6之间可以设有第三通信连接10，控制装置4和远程通信单元6可以经由所述第三通信连接10彼此交互。在控制装置4和便携式智能设备7之间可以设有第四通信连接11，控制装置4和便携式智能设备7可以经由所述第四通信连接11彼此交互。
在此，各通信连接例如可以涉及有线连接(例如MHL/HDMI数据线、局域互联网(LIN)总线、控制器局域网(CAN)总线、FlexRay总线或以太网总线)。此外，各通信连接例如也可以涉及无线连接，所述无线连接可以是按照如下标准的无线连接，例如按照GSM、CDMA、LTE、NR、IEEE802.11a、IEEE802.11b、IEEE802.11ac、IEEE802.11ad、IEEE802.11g、IEEE802.11h、IEEE802.11n的WLAN或蓝牙、尤其是蓝牙V2.0、蓝牙V3.0或蓝牙V4.0。上述示例并非是限制性的，仅用于阐述根据本发明的各通信连接。在具体实现中可以根据具体应用场景灵活适配。
图3示出按照本发明的用于在交通工具中辅助虚拟现实的方法的流程图，尤其是示出按照本发明的控制装置用于在交通工具中辅助虚拟现实的方法的流程图。
按照本发明，所述方法包括：获取101与在虚拟现实装置中显示的虚拟现实相关联的第一特征数据；基于获取的第一特征数据生成102用于在交通工具中的功能系统的第一控制数据；和发送103第一控制数据，以用于操控交通工具中的功能系统。
在当前实施例中，第一特征数据可以是存储在用于虚拟现实的数据存储器中的数据。这些第一特征数据可以与虚拟现实数据一同存储在虚拟现实装置中。当然，第一特征数据也可以与虚拟现实数据分开地存储在不同位置。当在虚拟现实装置中显示虚拟现实时，可以从虚拟现实装置中获取相关的第一特征数据。第一特征数据可以表征在虚拟现实装置中显示的虚拟现实的当前状态，例如可以涉及虚拟现实中的天气状态、运动、场景、明暗程度、氛围。备选地或附加地，第一特征数据还可以涉及用户在虚拟现实中的主动操作。
在此，天气状态可以包括如下参数中的至少一个：温度、湿度、风速、降雨、降雪、冰雹、雾霾和沙尘暴。运动可以包括如下参数中的至少一个：速度、加速度和姿态。场景可以包括如下参数中的至少一个：冰川、大海、田野、草原、森林、海滩、荒漠、都市、动物园、海底世界、电影院、KTV、会议室和商场。明暗程度可以包括如下参数中的至少一个：暗视觉范围、中间视觉范围和明视觉范围。氛围可以包括如下参数中的至少一个：轻松、激烈、严肃和安静。操作可以包括如下操作中的至少一个：查看地图、确定导航路径、指定兴趣点以及购买服务或商品。
在此，第一控制数据可以促使座椅系统实施如下动作中的至少一个：沿纵向移动、沿纵向转动、沿横向移动、沿横向转动、沿竖直方向移动和沿竖直方向转动(例如推背和振动)。第一控制数据可以促使窗系统实施如下动作中的至少一个：在打开方向上运动和在关闭方向上运动。第一控制数据可以促使声音系统实施如下动作中的至少一个：主动降噪、主动增噪和播放音乐。第一控制数据可以促使空调系统实施如下动作中的至少一个：调温、调湿和通风。第一控制数据可以促使灯光系统实施如下动作中的至少一个：调暗、调亮和提供灯光氛围。第一控制数据可以促使自动导航系统显示或实施新的导航路径。
接下去，以示例性的例子来进一步阐述本发明。
例子一：虚拟现实游戏。用户可以借助头显在机动车内体验基于虚拟现实的赛车游戏。在此，用户可以借助手机作为方向盘(基于在控制装置4和手机7之间的第四通信连接11)来操控在虚拟现实中自身赛车的行驶。在游戏中，随着赛车的行驶，场景可以阶段性地变换，例如一开始处于冰川中，然后进入热带森林中。在此，可以基于场景的变化操控空调系统，以更真实地匹配于显示的虚拟现实，实现沉浸式的体验。具体地，当处于冰川场景中时，可以发送第一控制数据，以促使空调系统执行降温并吹冷风；当处于热带森林场景中时，可以发送第一控制数据，以促使空调系统执行升温并加湿。此外。在游戏中，随着赛车的行驶，赛车自身的运动(例如加速、减速、转弯)和/或姿态(例如前倾、后倾、左倾和右倾等)也会随着用户的操控以及场景的变换而发生变化。在此，可以基于运动和/或姿态的变化来操控座椅系统和/或窗户系统，以更真实地匹配于显示的虚拟现实，实现沉浸式的体验。具体地，当赛车加速时，可以发送第一控制数据，以促使座椅系统在机动车的纵向上朝前移动，以便给用户的背部施加推力，从而模拟推背感。同时，第一控制数据还可以促使窗户进一步打开，从而使得用户真实地体验到因赛车而产生的风。此外，当赛车发生碰撞时，还可以发送第一控制数据，以促使座椅系统产生振动。
例子二：虚拟现实会议。用户可以借助头显在机动车内体验基于虚拟现实的会议。在会议中，随着会议的进行，氛围会发生变化，当氛围是严肃或者安静时，可以发送第一控制数据，以促使声音系统实施主动降噪。具体地，可以借助车辆的声音系统产生关于外界噪音的反向声波，将噪音中和，从而实现降噪效果。此外，还可以促使关闭窗户，从而使得外界噪声得到进一步抑制。当然还可以促使关闭空调，从而进一步降低车辆内部的噪音产生。
例子三：虚拟现实旅行。用户可以借助头显在机动车内体验基于虚拟现实的旅行。在旅途中，可以为用户显示沿途的兴趣点，这些兴趣点(例如名胜古迹、加油站、大型百货商场)可以由用户预先设定。当用户在现实的虚拟现实中(例如在3D数字地图中)观察到在距离当前位置不到2公里处具有感兴趣的景点时，可以在虚拟现实装置中显示的兴趣点上进行操作，由此生成第一控制数据，以用于促使驾驶员辅助系统(例如自动导航系统)实施新的导航路径，以使得车辆临时改变行程，中途行驶到该景点处进行参观。这在完全自动驾驶中是特别有利的，乘员只需在虚拟现实中进行操作，无需摘下头显来更改导航路径，改善了用户体验，增强了趣味性。
附加地或备选地，所述方法还可以包括：在发送第一控制数据之前，对第一控制数据进行检查，仅当检查结果是肯定时，才允许发送第一控制数据。
在此，所述检查可以包括安全检查，在所述安全检查中检查第一控制数据对功能系统的操控是否符合交通工具的行驶安全。例如当交通工具实施的新的导航路径需要经过危险地段或者施工地段时，禁止发送第一控制数据，从而禁止操控驾驶员辅助系统实施新的导航路径。在此，可以语音提示相关用户自行驾驶到目的地，或者提示相关用户改变当前路径。
在此，所述检查可以包括冲突检查，在所述冲突检查中检查第一控制数据对功能系统的操控是否与交通工具的当前运行状态和/或交通工具当前所在区域的交通规则和/或用户预设定状态相冲突。例如当交通工具当前的能量不足(燃料不足或者电量不足)时，禁止发送如下第一控制数据，所述第一控制数据会引起交通工具能耗增大(例如给空调升温或降温)，或者所述第一控制数据会引起交通工具行驶更长的路。
附加地或备选地，所述方法还可以包括：获取与交通工具的方位和/或运行状态相关联的第二特征数据；
-基于获取的第二特征数据生成用于在虚拟现实装置中显示的虚拟现实的第二控制数据用户；和
-发送第二控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
附加地或备选地，所述方法还可以包括：获取与在交通工具中的虚拟现实用户的运动和/或表情相关联的第三特征数据；
-基于获取的第三特征数据生成用于在虚拟现实装置中显示的虚拟现实的第三控制数据；和
-发送第三控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
本实施例中，在头显中还可以设置有头显姿态传感器，例如：加速度传感器和陀螺仪中的一种或多种，用于检测头显的姿态，例如：转头、低头、仰头等姿态。
本实施例中，机动车1内还可以设有车辆位置传感器和车辆姿态传感器，车辆位置传感器采集机动车1的位置数据，车辆姿态传感器采集机动车1的姿态数据；其中，车辆的姿态数据包括：俯仰角度、偏航角度及倾斜角度等。
本实施例中，控制装置4可以从各传感器中接收各种特征数据，并据此生成相应的控制数据，以便操控虚拟现实画面中的视角和/或运动与机动车1内用户的视角和/或运动相匹配。通过这样的方式，一方面，使得所述用户产生与所处运动直接联系的感受；另一方面，所述用户在观看虚拟现实时接收到的视觉画面与实际所感受的运动彼此协调，从而不发生晕动症。
本发明不限于所示的实施例，而是包括或者延及可落入所附权利要求书的有效范围内的所有技术上的等效物。在说明书中所选择的位置说明如例如上、下等参照直接的描述以及示出的附图并且在位置变化时按照意义能转用到新的位置上。
Claims (15)
1.一种用于在交通工具(1)中辅助虚拟现实的方法，其特征在于，所述方法包括：
-获取(101)与在虚拟现实装置(3)中显示的虚拟现实相关联的第一特征数据；
-基于获取的第一特征数据生成(102)用于在交通工具(1)中的功能系统(5)的第一控制数据；和
-发送(103)第一控制数据，以用于操控交通工具(1)中的功能系统(5)。
2.根据权利要求1所述的方法，其特征在于，所述第一特征数据包括表征在虚拟现实装置中显示的虚拟现实的如下至少一个特征的数据：虚拟现实中的天气状态、虚拟现实中物体的运动、虚拟现实中的场景、虚拟现实中的明暗程度和虚拟现实中的氛围。
3.根据权利要求1或2所述的方法，其特征在于，第一控制数据能用于操控交通工具(1)中如下功能系统(5)中的至少一个：座椅系统(501)、窗户系统(502)、声音系统(503)、空调系统(504)、灯光系统(505)和驾驶员辅助系统(506)。
4.根据权利要求1至3之一所述的方法，其特征在于，所述步骤“基于获取的第一特征数据生成用于在交通工具中的功能系统的第一控制数据”包括：
根据在虚拟现实装置(3)中显示的虚拟现实中物体的运动来生成第一控制数据，以用于促使座椅系统(501)实施如下动作中的至少一个：沿纵向移动、沿纵向转动、沿横向移动、沿横向转动、沿竖直方向移动、沿竖直方向转动；和/或
根据在虚拟现实装置(3)中显示的虚拟现实中的天气状态和/或场景来生成第一控制数据，以用于促使窗户系统(502)实施如下动作中的至少一个：在打开方向上运动和在关闭方向上运动；和/或
根据在虚拟现实装置(3)中显示的虚拟现实中的场景和/或氛围来生成第一控制数据，以用于促使声音系统(503)和/或窗户系统(502)和/或空调系统(504)实施如下动作中的至少一个：主动降噪和主动增噪；和/或
根据在虚拟现实装置(3)中显示的虚拟现实中的天气状态和/或场景和/或氛围来生成第一控制数据，以用于促使空调系统(504)实施如下动作中的至少一个：调温、调湿和通风；和/或
根据在虚拟现实装置(3)中显示的虚拟现实中的明暗程度和/或场景和/或氛围来生成第一控制数据，以用于促使灯光系统(505)实施如下动作中的至少一个：调暗、调亮和提供灯光氛围，
优选地，当氛围是严肃或者安静时或者当场景是会议室时，所述第一控制数据促使声音系统(503)和/或窗户系统(502)和/或空调系统(504)实施主动降噪。
5.根据权利要求1至4之一所述的方法，其特征在于，所述第一特征数据包括表征用户在虚拟现实装置(3)中显示的虚拟现实中的操作的数据，优选地，根据用户在虚拟现实装置中显示的虚拟现实中的操作来生成第一控制数据，以用于促使驾驶员辅助系统(506)显示或实施新的导航路径。
6.根据权利要求1至5之一所述的方法，其特征在于，所述方法还包括：
-获取与交通工具的方位和/或运行状态相关联的第二特征数据；
-基于获取的第二特征数据生成用于在虚拟现实装置中显示的虚拟现实的第二控制数据；和
-发送第二控制数据，以用于操控在虚拟现实装置中显示的虚拟现实，和/或所述方法还包括：
-获取与在交通工具中的虚拟现实用户的运动和/或表情相关联的第三特征数据；
-基于获取的第三特征数据生成用于在虚拟现实装置中显示的虚拟现实的第三控制数据；和
-发送第三控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
7.一种用于在交通工具中实现虚拟现实的控制装置(4)，其特征在于，所述控制装置(4)能够经由第一通信连接(8)与虚拟现实装置(3)进行交互，并且所述控制装置(4)能够经由第二通信连接(9)与功能系统(5)进行交互，
其中，所述控制装置(4)构造用于：
从用于虚拟现实的数据存储器中获取与在虚拟现实装置(3)中显示的虚拟现实相关联的第一特征数据；
基于获取的第一特征数据生成用于在交通工具(1)中的功能系统(5)的第一控制数据；
发送所述第一控制数据，以用于与在虚拟现实装置(3)中显示的虚拟现实相关联地操控交通工具(1)中的功能系统(5)。
8.根据权利要求7所述的控制装置，其特征在于，所述第一特征数据包括表征在虚拟现实装置中显示的虚拟现实的如下至少一个特征的数据：虚拟现实中的天气状态、虚拟现实中物体的运动、虚拟现实中的场景、虚拟现实中的明暗程度和虚拟现实中的氛围。
9.根据权利要求7或8所述的控制装置，其特征在于，第一控制数据能用于操控交通工具中如下功能系统中的至少一个：座椅系统(501)、窗户系统(502)、声音系统(503)、空调系统(504)、灯光系统(505)和驾驶员辅助系统(506)。
10.根据权利要求7至9之一所述的控制装置，其特征在于，所述控制装置构造用于：
根据在虚拟现实装置中显示的虚拟现实中物体的运动来生成第一控制数据，以用于促使座椅系统实施如下动作中的至少一个：沿纵向移动、沿纵向转动、沿横向移动、沿横向转动、沿竖直方向移动、沿竖直方向转动；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景来生成第一控制数据，以用于促使窗户系统实施如下动作中的至少一个：在打开方向上运动和在关闭方向上运动；和/或
根据在虚拟现实装置中显示的虚拟现实中的场景和/或氛围来生成第一控制数据，以用于促使声音系统和/或窗户系统和/或空调系统实施如下动作中的至少一个：主动降噪和主动增噪；和/或
根据在虚拟现实装置中显示的虚拟现实中的天气状态和/或场景和/或氛围来生成第一控制数据，以用于促使空调系统实施如下动作中的至少一个：调温、调湿和通风；和/或
根据在虚拟现实装置中显示的虚拟现实中的明暗程度和/或场景和/或氛围来生成第一控制数据，以用于促使灯光系统实施如下动作中的至少一个：调暗、调亮和提供灯光氛围。
11.根据权利要求7至10之一所述的控制装置，其特征在于，所述控制装置构造用于：当氛围是严肃或者安静时或者当场景是会议室时，生成第一控制数据，以用于促使声音系统和/或窗户系统和/或空调系统实施主动降噪。
12.根据权利要求7至11之一所述的控制装置，其特征在于，所述第一特征数据包括表征用户在虚拟现实装置中显示的虚拟现实中的操作的数据，优选地，所述控制装置构造用于：根据用户在虚拟现实装置中显示的虚拟现实中的操作来生成第一控制数据，以用于促使驾驶员辅助系统显示或实施新的导航路径。
13.根据权利要求7至12之一所述的控制装置，其特征在于，所述控制装置构造用于：
-获取与交通工具的方位和/或运行状态相关联的第二特征数据；
-基于获取的第二特征数据生成用于在虚拟现实装置中显示的虚拟现实的第二控制数据；和
-发送第二控制数据，以用于操控在虚拟现实装置中显示的虚拟现实，和/或所述控制装置构造用于：
-获取与在交通工具中的虚拟现实用户的运动和/或表情相关联的第三特征数据；
-基于获取的第三特征数据生成用于在虚拟现实装置中显示的虚拟现实的第三控制数据；和
-发送第三控制数据，以用于操控在虚拟现实装置中显示的虚拟现实。
14.一种数据处理装置，包括：
一个或多个处理器；以及
一个或多个存储器，所述一个或多个存储器被配置为存储一系列计算机可执行的指令以及与所述一系列计算机可执行的指令相关联的计算机可访问的数据，
其特征在于，当所述一系列计算机可执行的指令被所述一个或多个处理器执行时，使得所述一个或多个处理器进行如权利要求1至6之一所述的方法。
15.一种交通工具，其特征在于，所述交通工具包括根据权利要求7至13之一所述的控制装置或者包括根据权利要求14所述的数据处理装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910391442.6A CN111923918A (zh) | 2019-05-13 | 2019-05-13 | 在交通工具中辅助虚拟现实的方法和相关的控制装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910391442.6A CN111923918A (zh) | 2019-05-13 | 2019-05-13 | 在交通工具中辅助虚拟现实的方法和相关的控制装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111923918A true CN111923918A (zh) | 2020-11-13 |
Family
ID=73282452
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910391442.6A Pending CN111923918A (zh) | 2019-05-13 | 2019-05-13 | 在交通工具中辅助虚拟现实的方法和相关的控制装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111923918A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114633623A (zh) * | 2022-03-31 | 2022-06-17 | 广州小鹏汽车科技有限公司 | 车辆控制方法、车辆和存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105843380A (zh) * | 2016-03-17 | 2016-08-10 | 广东小天才科技有限公司 | 一种用于虚拟现实场景的环境温度模拟方法及装置 |
| CN106267817A (zh) * | 2016-10-08 | 2017-01-04 | 浙江拓客网络科技有限公司 | 用于游戏的虚拟现实系统 |
| CN106484982A (zh) * | 2016-09-30 | 2017-03-08 | 理原车辆技术研发（苏州）有限公司 | 汽车产品开发过程中基于虚拟现实的设计方法及vr系统 |
| US20170078638A1 (en) * | 2013-10-03 | 2017-03-16 | Honda Motor Co., Ltd. | System and method for dynamic in-vehicle virtual reality |
| CN107945604A (zh) * | 2017-12-07 | 2018-04-20 | 中国航空工业集团公司西安航空计算技术研究所 | 一种基于虚拟现实技术的交通安全沉浸式体验系统 |
| DE102017211521A1 (de) * | 2017-07-06 | 2019-01-10 | Bayerische Motoren Werke Aktiengesellschaft | Steuerung von Fahrzeugfunktionen aus einer virtuellen Realität |
-
2019
- 2019-05-13 CN CN201910391442.6A patent/CN111923918A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20170078638A1 (en) * | 2013-10-03 | 2017-03-16 | Honda Motor Co., Ltd. | System and method for dynamic in-vehicle virtual reality |
| CN105843380A (zh) * | 2016-03-17 | 2016-08-10 | 广东小天才科技有限公司 | 一种用于虚拟现实场景的环境温度模拟方法及装置 |
| CN106484982A (zh) * | 2016-09-30 | 2017-03-08 | 理原车辆技术研发（苏州）有限公司 | 汽车产品开发过程中基于虚拟现实的设计方法及vr系统 |
| CN106267817A (zh) * | 2016-10-08 | 2017-01-04 | 浙江拓客网络科技有限公司 | 用于游戏的虚拟现实系统 |
| DE102017211521A1 (de) * | 2017-07-06 | 2019-01-10 | Bayerische Motoren Werke Aktiengesellschaft | Steuerung von Fahrzeugfunktionen aus einer virtuellen Realität |
| CN107945604A (zh) * | 2017-12-07 | 2018-04-20 | 中国航空工业集团公司西安航空计算技术研究所 | 一种基于虚拟现实技术的交通安全沉浸式体验系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114633623A (zh) * | 2022-03-31 | 2022-06-17 | 广州小鹏汽车科技有限公司 | 车辆控制方法、车辆和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11835954B2 (en) | Driving control apparatus, driving control method, and program | |
| US10766500B2 (en) | Sensory stimulation system for an autonomous vehicle | |
| US9902403B2 (en) | Sensory stimulation for an autonomous vehicle | |
| US9616901B2 (en) | Mobile object, system, and storage medium | |
| KR101730321B1 (ko) | 운전자 보조 장치 및 그 제어방법 | |
| EP3357780B1 (en) | Driving control device, driving control method, and program | |
| CN108657089B (zh) | 用于自动驾驶机动车辆的娱乐装置 | |
| KR101895485B1 (ko) | 운전 보조 장치 및 그 제어 방법 | |
| CN109426255A (zh) | 基于无人机的无人驾驶车辆控制方法、装置及存储介质 | |
| CN111480194B (zh) | 信息处理装置、信息处理方法、程序、显示系统和移动物体 | |
| CN113544757B (zh) | 信息处理装置、信息处理方法，以及移动体装置 | |
| WO2022260922A1 (en) | Stages of component controls for autonomous vehicles | |
| CN111923918A (zh) | 在交通工具中辅助虚拟现实的方法和相关的控制装置 | |
| KR101850857B1 (ko) | 디스플레이 장치 및 이를 포함하는 차량 | |
| KR101893815B1 (ko) | 차량용 어라운드 뷰 제공 장치 및 차량 | |
| WO2023042418A1 (ja) | 車両制御システム、車両制御方法およびプログラム | |
| WO2023074126A1 (ja) | 情報処理装置、情報処理方法、プログラムおよび情報処理システム | |
| CN116278743A (zh) | 用于具有自动驾驶功能的车辆的控制系统和服务器 | |
| KR20230091870A (ko) | 카메라 모듈, 정보 처리 시스템, 정보 처리 방법 및 정보 처리 장치 | |
| JP2022088089A (ja) | 制御装置、車両、およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |