CN115390253A - 一种场景展示方法、装置、电子设备及存储介质 - Google Patents

一种场景展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115390253A
CN115390253A CN202211146099.7A CN202211146099A CN115390253A CN 115390253 A CN115390253 A CN 115390253A CN 202211146099 A CN202211146099 A CN 202211146099A CN 115390253 A CN115390253 A CN 115390253A
Authority
CN
China
Prior art keywords
information
rotation
head
parameter information
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211146099.7A
Other languages
English (en)
Inventor
杨培
许国军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Luxshare Precision Technology Nanjing Co Ltd
Original Assignee
Luxshare Precision Technology Nanjing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Luxshare Precision Technology Nanjing Co Ltd filed Critical Luxshare Precision Technology Nanjing Co Ltd
Priority to CN202211146099.7A priority Critical patent/CN115390253A/zh
Publication of CN115390253A publication Critical patent/CN115390253A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种场景展示方法、装置、电子设备及存储介质。该方法包括:获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将目标参数信息作为当前转动时刻对应的待使用参数信息;基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度;根据空间转动角度和设定的观景位置信息,从目标车辆当前行驶信息所对应的全景视角数据中,调取出与当前转动时刻相对应的目标视角数据并展示。本发明实现提高视角跟随的准确性,进而达到提高乘车舒适性的效果。

Description

一种场景展示方法、装置、电子设备及存储介质
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种场景展示方法、装置、电子设备及存储介质。
背景技术
由于近年来AR(Augmented Reality,增强现实)/VR(Virtual Reality,虚拟现实)技术的快速发展,VR设备的应用场景越来越广泛,用户对VR设备的需求也越来越大,若是将VR设备应用到行车领域,可能会为乘车用户带来困扰,如使用VR设备时容易晕车、无法欣赏车外风景等。
目前,为了提高乘客的乘车体验,通常利用AR技术在车辆的前挡风玻璃上实现AR导航、提示功能,帮助驾驶者更好的去安全驾驶,由于驾驶者在开车的过程中,注意力高度集中,往往不会晕车,但是作为乘客却会存在因长时间坐车导致晕车的情况。
发明内容
本发明提供了一种场景展示方法、装置、电子设备及存储介质,以实现提高视角跟随的准确性,进而达到提高乘车舒适性的技术效果。
根据本发明的一方面,提供了一种场景展示方法,该方法包括:
获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;
基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息;其中,所述前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的;
基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度;
根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
根据本发明的另一方面,提供了一种场景展示装置,该装置包括:
头部转动信息获取模块,用于获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;
目标参数信息确定模块,用于基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息;其中,所述前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的;
空间转动角度确定模块,用于基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度;
目标视角数据展示模块,用于根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的场景展示方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的场景展示方法。
本发明实施例的技术方案,通过获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将目标参数信息作为当前转动时刻对应的待使用参数信息;基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度;根据空间转动角度和设定的观景位置信息,从目标车辆当前行驶信息所对应的全景视角数据中,调取出与当前转动时刻相对应的目标视角数据,并展示,解决了现有技术中通过将虚拟视角数据在车辆前挡风玻璃上进行投影展示,导致用户虚拟技术体验效果低,乘车舒适性差的问题,实现了视角的实时追踪和视图数据的展示,提高了视角跟随的准确性和VR体验效果,进而达到提高用户乘车舒适性的技术效果。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例一提供的一种场景展示方法的流程图;
图2是根据本发明实施例二所提供的场景展示系统的结构示意图;
图3是根据本发明实施例三提供的一种场景展示装置的结构示意图;
图4是实现本发明实施例的场景展示方法的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
图1是根据本发明实施例一提供的一种场景展示方法的流程图,本实施例可适用于虚拟现实场景展示情况,该方法可以由场景展示装置来执行,该场景展示装置可以采用硬件和/或软件的形式实现,该场景展示装置可应用于头显设备。如图1所示,该方法包括:
S110、获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息。
其中,头显设备是指头戴式显示设备,例如头显设备可以为VR(Virtual Reality,虚拟现实)头显设备、AR(Augmented Reality,增强现实)头显设备或MR(Mixed Reality,混合现实)头显设备等。在本技术方案中,获取任一转动时刻的头部转动信息,并确定任一转动时刻的目标视角数据进行展示的方式均相同,以其中任一转动时刻作为当前转动时刻进行说明。头部转动信息可以为头部转动角速度或转动加速度。
需要说明的是当用户乘坐目标车辆时,可以通过佩戴头显设备进行VR、AR或MR的观景,在观景的过程中,随着用户头部的转动,眼睛观看的视野也随着发生变化,相应的,为用户展示的观景数据会随着头部转动发生变化。
在实际应用中,可以利用配置在头显设备中的惯性测量单元(InertialMeasurement Unit,IMU)检测用户头部于当前转动时刻在三维空间(如X、Y、Z轴)中的加速度信号和/或角速度信号等,作为头部转动信息。
具体来说,获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息,包括:在用户佩戴头显设备进行虚拟观景的过程中,获取头显设备中传感器于当前转动时刻检测到的用户头部对应的转动角速度;将转动角速度作为头部转动信息。
其中,传感器可以为陀螺仪,用于检测物体的角速度。转动角速度可以为三维空间中的角速度,包括X轴、Y轴、Z轴三个方向的角速度信息。
在本实施例中,可以在用户乘车并佩戴头显设备进行虚拟观景的过程中,利用头显设备中的陀螺仪检测用户头部在当前转动时刻的转动角速度,并将转动角速度作为头部转动信息,以基于头部转动信息解算头部的姿态,实现视角追踪。
S120、基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息。
其中,前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的。待使用参数信息可以为四元组参数集合,如(q0,q1,q2,q3)。头部转动信息中包括第一轴角速度、第二轴角速度和第三轴角速度,第一轴角速度可以表示为X轴方向的角速度,第二轴角速度可以表示为Y轴方向的角速度,第三轴角速度可以表示为Z轴方向的角速度。
在本实际应用中,可以通过当前转动时刻的转动角速度和前一转动时刻所对应的待使用参数信息,解算得到当前转动时刻对应的目标参数信息,例如,可以预先设置解算得到目标参数信息的计算函数,进而将待使用参数信息、第一轴角速度、第二轴角速度和第三轴角速度等输入计算函数中,输出当前转动时刻对应的目标参数信息,当接收到当前转动时刻的下一转动时刻的头部转动信息时,将当前转动时刻的目标参数信息作为当前转动时刻对应的待使用参数信息,以确定下一转动时刻的目标参数信息。
具体来说,在基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息的过程中,可以基于前一转动时刻对应的待使用参数信息、第一轴角速度、第二轴角速度、第三轴角速度和预设变动系数,确定当前转动时刻对应的目标参数信息。
其中,预设变动系数可以为预设的变动因数,可以由技术人员根据实际工作情况进行设定,例如,可以设置为0.5。目标参数信息中包括与待使用参数信息中四个参数所对应的数值。
为了清楚地介绍本技术方案,可以将四元组集合中的四个参数分别用q0,q1,q2,q3表示,那么前一转动时刻t-1的待使用参数信息中四个参数值可以分别用q0t-1,q1t-1,q2t-1,q3t-1表示。第一轴角速度、第二轴角速度和第三轴角速度分别用wx,wy,wz表示。预设变动系数可以用halt_T进行表示。确定当前转动时刻t的目标参数信息的实现方式为:
q0t=q0t-1+(-wx*q1t-1-wy*q2t-1-wz*q3t-1)*halt_T
q1t=q1t-1+(wx*q0t-1+wz*q2t-1-wy*q3t-1)*halt_T
q2t=q2t-1+(wy*q0t-1-wz*q1t-1+wx*q3t-1)*halt_T
q3t=q3t-1+(wz*q0t-1+wy*q1t-1-wx*q2t-1)*halt_T
其中,q0t、q1t、q2t和q3t分别为当前转动时刻t下的参数值,可以将这四个参数值作为目标参数信息,当接收到t+1转动时刻的头部转动信息时,可以将q0t、q1t、q2t和q3t作为t+1转动时刻所对应的待使用参数信息,用于和t+1转动时刻的头部转动信息综合确定t+1转动时刻对应的目标参数信息。
需要说明的是,当t=1时,q0t、q1t、q2t和q3t可以表示为用户头部在第一个转动时刻所对应的目标参数信息,此时未存在第一个转动时刻之前时刻的待使用参数信息,需要为q0赋予初始值得到q00,为q1赋予初始值得到q10,为q0赋予初始值得到q20,为q0赋予初始值得到q30。进一步的,可以基于q00、q10、q20和q30以及t=1时的头部转动信息,分别确定q0t、q1t、q2t和q3t,作为t=1时的目标参数信息。
可选的,确定初始参数信息的实现方式可以是:当检测到头显设备由非工作状态变化为工作状态时,基于初始参数信息更新当前转动时刻的前一转动时刻所对应的待使用参数信息,以基于更新后的待使用参数信息确定当前转动时刻对应的目标参数信息。
其中,初始参数信息中包括第一初始值、第二初始值、第三初始值和第四初始值,可以由技术人员根据实际工作进行设定,本技术方案不做限定。观景位置信息可以理解为用户所处的观景位置,如,主驾驶座位或副驾驶座位。
在本实施例中,可以当检测到头显设备由非工作状态变化为工作状态时,认为头显设备中存储的观景位置信息进行了初始化,即用户开始使用头显设备进行虚拟观景,此时可以为当前转动时刻的前一转动时刻所对应的待使用参数信息赋予初始值,即将预设的初始参数信息作为该前一转动时刻所对应的待使用参数信息,以当接收到当前转动时刻的头部转动信息时,可以基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息。
需要说明的是,当头显设备由非工作状态变化为工作状态时,此时的观景位置信息可以理解为用户预先好的,那么在用户调整观景位置时,相应的所展示的视角数据也发生了变化,为了提高场景展示的准确性,以及更满足用户使用体验,还可以当观景位置发生更新时,基于初始参数信息更新当前转动时刻的前一转动时刻所对应的待使用参数信息,以基于重新调整的待使用参数信息确定目标参数信息。
可选的,确定初始参数信息的实现方式还可以是:当接收到用户在头显设备的位置更新页面所输入的待使用观景位置时,基于待使用观景位置对设定的观景位置信息进行更新,并基于初始参数信息更新当前转动时刻的前一转动时刻所对应的待使用参数信息。
其中,位置更新页面可以配置在头显设备中,是用于对观景位置进行选择的页面,可以显示有不同观景位置对应的控件等,显示方式可以是以文字、图标等形式,另外,位置更新页面上显示有观景位置的修改框,可以增加、删减等。
在本实施例中,用户可以在位置更新页面触发相应观景位置的控件,可以将触发控件所对应的观景位置作为待使用观景位置。进一步的,可以将待使用观景位置作为新设定好的观景位置信息,此时,在观景位置发生变化时,可以将初始参数信息作为当前转动时刻的前一转动时刻所对应的待使用参数信息,以基于重新调整的待使用参数信息确定目标参数信息。
S130、基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度。
其中,目标参数信息中包括第一参数值、第二参数值、第三参数值和第四参数值,例如,q0t、q1t、q2t和q3t。空间转动角度可以理解为欧拉角,可以用于表征定点(头部)转动刚体位置的3个独立角参量,如绕X轴转动、绕Y轴转动、绕Z轴转动所对应的角度。
在本实施例中,可以利用目标参数信息,解算得到用户头部在当前转动时刻的空间转动角度。具体来说,基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度的实现方式可以是:将第一参数值、第二参数值、第三参数值和第四参数值作为纵向反正弦函数的入参,得到当前转动时刻对应的纵摇角;将第一参数值、第二参数值、第三参数值和第四参数值作为横向反正切函数的入参,得到当前转动时刻对应的横摇角;将第一参数值、第二参数值、第三参数值和第四参数值作为垂向反正切函数的入参,得到当前转动时刻对应的垂摇角;基于纵摇角、横摇角和垂摇角,确定空间转动角度。
其中,纵向反正弦函数可以为理解为asin函数,用于确定绕x轴旋转的角度的函数。横向反正切函数可以为理解为atan函数,用于确定绕y轴旋转的角度的函数。垂向反正切函数可以为理解为atan函数,用于确定绕z轴旋转的角度的函数。
在本实施例中,可以将第一参数值、第二参数值、第三参数值和第四参数值作为纵向反正弦函数的入参,得到当前转动信息对应的纵摇角,例如,纵摇角pitch=asinf(-2.0f*(q1t*q3t-q0t*q2t)),f表示浮点数,q0t表示第一参数值,q1t表示第二参数值、q2t表示第三参数值,q3t表示第四参数值。将第一参数值、第二参数值、第三参数值和第四参数值作为横向反正切函数的入参,得到当前转动信息对应的横摇角,例如,横摇角yaw=atan2f(q1t*q2t+q0t*q3t,0.5f-q2t*q2t-q3t*q3t)。将第一参数值、第二参数值、第三参数值和第四参数值作为垂向反正切函数的入参,得到当前转动信息对应的垂摇角,例如,垂摇角roll=atan2f(q0t*q1t+q2t*q3t,0.5f-q1t*q1t-q2t*q2t)。进一步的,可以将纵摇角、横摇角和垂摇角作为空间转动角度,以通过空间转动角度计算当前转动时刻所对应的视角数据。
S140、根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
需要说明的是,为了使用户可以更好的观看车辆周身的环境信息,以及对车辆的行驶信息进行监控,缓解用户乘车压力,可以利用目标车辆上的摄像装置拍摄目标车辆所对应的全景数据,例如,目标车辆的前后左右四个方位分别部署四个摄像头(如鱼眼摄像头),以目标车辆为中心,分别进行拍摄,得到四个视角的数据,基于四个方位的视角数据构建360全景视角,即全景视角数据。可以理解的是,在目标车辆行驶的过程中,车辆外部的环境数据发生变化,车辆的当前行驶信息不同,所对应的全景视角数据可能存在不同。
在本实施例中,可以以设定的观景位置信息作为观景中心,从目标车辆当前行驶信息所对应的全景视角数据中,基于空间转动角度计算出此时需为用户展示的视角数据,得到当前转动时刻相对应的目标视角数据,并将目标视角数据进行渲染展示。例如,观景位置信息为主驾驶位置,那么可以在3D空间构建主驾驶或副驾驶视角初始位置,在初始位置的基础上,佩戴头显设备的用户头部可能发生转动,随着头部转动,所为用户的展示视角数据发生变化,可以将空间转动角度所对应的目标视角数据送给unity应用进行3D空间渲染,在显示界面上进行展示。可选的,还可以将目标车辆的当前行驶信息展示在显示界面上,以供用户对车辆的行驶状态进行实时监控。
需要说明的是,设定的观景位置信息可以根据用户需求在位置更新页面上进行修改,也可以通过手柄按键的方式,更新观景位置信息,实现动态切换用户第一观景视角的技术效果。
可选的,所述方法还包括:基于目标车辆的当前行驶信息以及预设的参考行驶数据,确定目标车辆对应的行驶检测结果;若行驶检测结果为异常,则生成预警提示信息,以基于预警提示信息进行告警提示。
其中,当前行驶信息中可以包括但不限于车速,道路坡度信息和路况信息等。参考行驶数据包括车速区间、道路坡度阈值和障碍物信息中至少一项。车速区间可以包括高速门限值、低速门限值、瞬时速度波动门限值等。
在本实施例中,可以接收目标车辆中各个传感器在当前时刻所检测到的车辆状态信息,例如,车速、行驶道路坡度、障碍物信息等等,作为当前行驶信息。例如,利用车速传感器检测车速、利用加速度传感器检测车辆行驶加速度、利用陀螺仪传感器检测车辆转动角速度、利用磁力计传感器测量磁场强度和方向、利用毫米波传感器进行障碍物检测等,接收各传感器所上传的数据,得到当前行驶信息。进一步的,可以将当前行驶信息与预设的参考行驶数据进行分析比对,确定目标车辆是否存在行驶风险,如将车速与预设车速区间的上下限阈值进行比对,确定车辆的车速状态,例如,如果车速超出高速门限值,那么可以认为车辆可能存在超速行驶风险,即行驶检测结果为异常,为了提高行车安全性,可以生成高速行驶的预警信息提示给用户进行预警提示。或者,如果车速低于低速门限值时,可以认为车辆行驶速度缓慢,也可以认为行驶检测结果为异常,向用户发出低速行驶的提示信息,以使用户对车辆行驶状况进行监控。为了进一步提高行车安全性,可以通过毫米波传感器和目标车辆上摄像装置综合进行障碍物检测,当检测到障碍物时,进行障碍物的预警提示。例如,可以利用毫米波传感器实时进行障碍物的目标检测,如果在车身某个方位检测到障碍物,可以通过目标车辆上的摄像装置进行确认,若基于摄像装置拍摄数据检测到存在障碍物,即行驶检测结果为异常,此时可以通过头显设备进行预警提示。
需要说明的是,为了进一步提高用户佩戴头显设备时的乘车舒适性,可以基于车辆的运动状态调整座椅的状态,以使用户的触觉适应的车辆的运动状态,如,车辆加速向前行驶,可以给用户座椅向后的作用力,防止出现用户因车辆运动导致不舒适的情况。
可选的,所述方法还包括:确定目标车辆对应的行驶加速度;当行驶加速度超过预设加速度阈值时,确定与行驶加速度相对应的反向加速度;基于反向加速度生成座椅调节指令,以基于座椅调节指令控制目标用户的座椅运动。
在实际应用中,可以基于目标车辆上配备的加速度传感器检测车辆行驶加速度,也可以利用车速传感器检测车速,进而基于当前车速解算行驶加速度。如果行驶加速度超过预设加速度阈值,那么可以给予用户所乘座椅一个与行驶加速度反方向的作用力,或加速度,控制座椅缓冲,此时可以与行驶加速度相对应的反向加速度,并生成座椅调节指令,可以将座椅调节指令发送至座椅调节电机,通过电机运作为座椅施加反向加速度,以使座椅发生缓冲,提高用户的乘车舒适性,防止晕车。
本实施例的技术方案,通过获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将目标参数信息作为当前转动时刻对应的待使用参数信息;基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度;根据空间转动角度和设定的观景位置信息,从目标车辆当前行驶信息所对应的全景视角数据中,调取出与当前转动时刻相对应的目标视角数据,并展示,解决了现有技术中通过将虚拟视角数据在车辆前挡风玻璃上进行投影展示,导致用户虚拟技术体验效果低,乘车舒适性差的问题,实现了通过基于用户在乘车过程中佩戴头显设备时所对应的当前头部转动信息,以及前一转动时刻所对应的待使用参数信息,解算得到当前转动时刻对应的目标参数信息,并基于目标参数信息确定用户头部在空间坐标系下的转动角度,进而从目标车辆当前行驶信息所对应的全景视角数据中调取出空间转动角度和设定的观景位置信息下的目标视角数据,并在头显设备中进行展示,实现视角的实时追踪和视图数据的展示,提高视角跟随的准确性和AR体验效果,进而达到提高用户乘车舒适性的技术效果。
实施例二
作为上述实施例的一可选实施例,图2是根据本发明实施例二所提供的场景展示系统的结构示意图。具体的,可以参见下述具体内容。
参见图2,本技术方案可以由VR头显设备、3D座椅、车载处理器和车载设备处理模块共同实现。其中,VR头显设备中包括IMU传感器、座椅控制模块、观景位置确定模块、VR显示模块和头显无线通信模块。IMU传感器,用于检测佩戴VR头显设备的用户的头部转动信息(如转动角速度)。座椅控制模块,用于基于当前行驶信息生成座椅控制指令,并将座椅控制指令发送至座椅,控制电机和马达。观景位置确定模块,用于接收用户选择的观景位置模式,并将观景位置信息发送至车载处理器。头显无线通信模块,用于与座椅和车载处理器通信,以使保证数据安全传输。VR头显模块,用于接收车载设备处理器发送的目标视角数据并渲染展示。座椅中包括电机控制模块和超宽线性马达,用于接收控制电机和马达的座椅控制指令,调节座椅缓冲。车载处理器中包括目标视角数据确定模块、传感器处理模块、头部转动角度确定模块和车载无线通信模块。头部转动角度确定模块,用于接收VR头显设备发送的头部转动信息,并基于头部转动信息确定头部空间转动角度(如欧拉角)。目标视角数据确定模块,用于基于接收的全景视角数据和观景位置信息,确定目标视角数据,并将目标视角数据发送至VR头显设备。传感器处理模块,用于接收车载设备处理器发送的当前行驶信息,并将当前行驶信息发送至VR头显设备。头显无线通信模块,用于与VR头显设备和车载设备处理器通信,以使保证数据安全传输。车载设备处理器中包括前、后、左、右摄像头,前后左右4个摄像头可以为是鱼眼摄像头,大视场角,以车子为中心,构建360全景视角,生成全景视角数据。车载设备处理器中还包括各种车载传感器,如车速传感器、加速度传感器、陀螺仪传感器、磁力计传感器、毫米波传感器等。
在实际应用中,可以利用车载360全景技术,通过目标车辆前后左右4个摄像头构建360全景视角,在用户佩戴VR头显设备时,可以将VR头显设备与车载处理器器建立无线连接。进一步的,车载处理器通过实时获取目标车辆前、后、左、右摄像头拍摄的全景视角数据,通过蓝牙获取其他各种传感器数据(当前行驶信息)。车载处理器通过全景摄像头融合技术,建立车外360度视角,以及通过WIFI获取VR头显IMU数据(即转动角速度),进而转动角速度解算得到空间转动角度,以基于空间转动角度和360度视角数据进行3DOF(Degree OfFreedom,自由度)追踪,实现模拟用户第一视角。示例性的,当用户的头部发生转动时,此时在以用户观景位置信息对应的空间坐标系下由坐标1变成了新坐标2(包括绕X轴、Y轴、Z轴的旋转角度),即当前转动时刻的空间转动角度。具体来说。可以利用IMU检测得到当前转动时刻t的转动角速度,如wx,wy,wz。进一步的,可以计算基于转动角速度计算得到当前转动时刻t的四元数(如q0t、q1t、q2t和q3t),即目标参数信息。实现方式为:
q0t=q0t-1+(-wx*q1t-1-wy*q2t-1-wz*q3t-1)*halt_T
q1t=q1t-1+(wx*q0t-1+wz*q2t-1-wy*q3t-1)*halt_T
q2t=q2t-1+(wy*q0t-1-wz*q1t-1+wx*q3t-1)*halt_T
q3t=q3t-1+(wz*q0t-1+wy*q1t-1-wx*q2t-1)*halt_T
其中,q0t、q1t、q2t和q3t分别为当前转动时刻t下的参数值,可以将这四个参数值作为目标参数信息,q0t-1,q1t-1,q2t-1,q3t-1分别为前一转动时刻t-1下的四个参数值,即待使用参数信息。当接收到t+1转动时刻的头部转动信息时,可以将q0t、q1t、q2t和q3t作为t+1转动时刻所对应的待使用参数信息,用于和t+1转动时刻的头部转动角速度综合确定t+1转动时刻对应的目标参数信息。
需要说明的是,当t=1时,q0t、q1t、q2t和q3t可以表示为用户头部在第一个转动时刻所对应的目标参数信息,此时未存在第一个转动时刻之前时刻的待使用参数信息,需要为q0赋予初始值得到q00,为q1赋予初始值得到q10,为q0赋予初始值得到q20,为q0赋予初始值得到q30。进一步的,可以基于q00、q10、q20和q30以及t=1时的头部转动信息,分别确定q0t、q1t、q2t和q3t,作为t=1时的目标参数信息。
还需要说明的是,可以当检测到头显设备由非工作状态变化为工作状态时,将初始参数信息作为当前转动时刻的前一转动时刻所对应的待使用参数信息;还可以当接收到用户在头显设备的位置更新页面所输入的待使用观景位置时,基于待使用观景位置对设定的观景位置信息进行更新,并将初始参数信息作为当前转动时刻的前一转动时刻所对应的待使用参数信息。示例性的,用户可以根据需要,在VR头显显示界面设置第一视角模式,如主驾驶或副驾驶,根据乘客设定的视角模式,在3D空间构建主驾驶或副驾驶视角初始位置。或者用户可以通过手柄按键,动态切换第一视角模式,可以将用户选中的视角位置作为第一视角模式。
在上述方案的基础上,在得到当前转动时刻t的目标参数信息q0t、q1t、q2t和q3t之后,可以将q0t作为第一参数值,q1t作为第二参数值、q2t作为第三参数值,q3t作为第四参数值,进一步的,将第一参数值、第二参数值、第三参数值和第四参数值作为纵向反正弦函数的入参,得到转动时刻t对应的纵摇角,例如,纵摇角pitch=asinf(-2.0f*(q1t*q3t-q0t*q2t)),f表示浮点数。将第一参数值、第二参数值、第三参数值和第四参数值作为横向反正切函数的入参,得到转动时刻t对应的横摇角,例如,横摇角yaw=atan2f(q1t*q2t+q0t*q3t,0.5f-q2t*q2t-q3t*q3t)。将第一参数值、第二参数值、第三参数值和第四参数值作为垂向反正切函数的入参,得到转动时刻t对应的垂摇角,例如,垂摇角roll=atan2f(q0t*q1t+q2t*q3t,0.5f-q1t*q1t-q2t*q2t)。进一步的,可以将纵摇角、横摇角和垂摇角作为空间转动角度,可以通过WIFI将空间转动角度所对应的目标视角数据送给VR头显设备中的unity应用进行3D空间渲染,在显示模块上进行展示。
在上述方案的基础上,车载处理器可以将车辆各种传感器数据检测到的当前行驶信息传送给VR头显设备,VR头显设备实时获取车辆当前行驶信息,可以通过将车速与设置车速报警门限值(如高速门限值、低速门限值、瞬间速度波动门限值,或短期内车速波动门限)进行比较,若车速超过相关门限值,可以生成预警提示信息,并通过VR头显进行预警提示,以提示用户车辆当前行驶情况。还可以通过超声波传感器(如毫米波雷达)和摄像头综合进行障碍物检测,例如,如果超声波传感器在车身某个方位检测到障碍物时,可以基于摄像头拍摄的全景视角数据进行确认,若存在障碍物,则进行预警提示。此种方式的好处是:既能够提高障碍物检测的准确性,又使用户能够对车辆行驶状态进行监控,以便及时作出预防措施,保证行车安全性。
在上述方案的基础上,本技术方案中可以通过实时检测车辆当前速度,根据车辆加速、减速情况,计算得到行驶加速度,如果行驶加速度超过设定的加速度阈值,实时控制电机和马达给3D座椅反向加速度,提高乘客舒适度,有效防止晕车。可选的,本技术方案中还可以根据车外检测、卧室、客厅等场景设置3D座椅工作模式,也可以通过手动方式在VR头显界面上调整座椅位置,满足用户使用体验。
在本实施例中,用户可以通过车载VR头显设备进行3D视角建模,构建各种3D虚拟场景(如卧室、客厅、汽车内饰等)。用户可以以各种视角观看车外景色,不仅可以帮助用户进行行车监测,还可以缓解用户晕车问题。还可以通过在座椅中配置电机、超宽线性马达等,进而通过监测车辆运行状况调试座椅,调节用户座椅的运动缓冲,提高用户体验感和乘车舒适性。
本实施例的技术方案,通过获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将目标参数信息作为当前转动时刻对应的待使用参数信息;基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度;根据空间转动角度和设定的观景位置信息,从目标车辆当前行驶信息所对应的全景视角数据中,调取出与当前转动时刻相对应的目标视角数据,并展示,解决了现有技术中通过将虚拟视角数据在车辆前挡风玻璃上进行投影展示,导致用户虚拟技术体验效果低,乘车舒适性差的问题,实现了通过基于用户在乘车过程中佩戴头显设备时所对应的当前头部转动信息,以及前一转动时刻所对应的待使用参数信息,解算得到当前转动时刻对应的目标参数信息,并基于目标参数信息确定用户头部在空间坐标系下的转动角度,进而从目标车辆当前行驶信息所对应的全景视角数据中调取出空间转动角度和设定的观景位置信息下的目标视角数据,并在头显设备中进行展示,实现视角的实时追踪和视图数据的展示,提高视角跟随的准确性和AR体验效果,进而达到提高用户乘车舒适性的技术效果。
实施例三
图3是根据本发明实施例三提供的一种场景展示装置的结构示意图。如图3所示,该装置包括:头部转动信息获取模块310、目标参数信息确定模块320、空间转动角度确定模块330和目标视角数据展示模块340。
其中,头部转动信息获取模块310,用于获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;目标参数信息确定模块320,用于基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息;其中,所述前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的;空间转动角度确定模块330,用于基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度;目标视角数据展示模块340,用于根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
本实施例的技术方案,通过获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;基于头部转动信息和前一转动时刻所对应的待使用参数信息,确定当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将目标参数信息作为当前转动时刻对应的待使用参数信息;基于目标参数信息,确定用户头部在当前转动时刻的空间转动角度;根据空间转动角度和设定的观景位置信息,从目标车辆当前行驶信息所对应的全景视角数据中,调取出与当前转动时刻相对应的目标视角数据,并展示,解决了现有技术中通过将虚拟视角数据在车辆前挡风玻璃上进行投影展示,导致用户虚拟技术体验效果低,乘车舒适性差的问题,实现了通过基于用户在乘车过程中佩戴头显设备时所对应的当前头部转动信息,以及前一转动时刻所对应的待使用参数信息,解算得到当前转动时刻对应的目标参数信息,并基于目标参数信息确定用户头部在空间坐标系下的转动角度,进而从目标车辆当前行驶信息所对应的全景视角数据中调取出空间转动角度和设定的观景位置信息下的目标视角数据,并在头显设备中进行展示,实现视角的实时追踪和视图数据的展示,提高视角跟随的准确性和AR体验效果,进而达到提高用户乘车舒适性的技术效果。
在上述装置的基础上,可选的,所述头部转动信息获取模块310,包括转动角速度确定单元和头部转动信息确定单元。
转动角速度确定单元,用于在用户佩戴头显设备进行虚拟观景的过程中,获取所述头显设备中传感器于当前转动时刻检测到的所述用户头部对应的转动角速度;
头部转动信息确定单元,用于将所述转动角速度作为所述头部转动信息。
在上述装置的基础上,可选的,所述装置还包括参数信息更新模块,所述参数信息更新模块,用于当检测到所述头显设备由非工作状态变化为工作状态时,基于初始参数信息更新所述当前转动时刻的前一转动时刻所对应的待使用参数信息,以基于更新后的待使用参数信息确定所述当前转动时刻对应的目标参数信息;
其中,所述初始参数信息中包括第一初始值、第二初始值、第三初始值和第四初始值。
在上述装置的基础上,可选的,所述参数信息更新模块包括参数信息更新单元,所述参数信息更新单元,用于当接收到用户在所述头显设备的位置更新页面所输入的待使用观景位置时,基于所述待使用观景位置对设定的观景位置信息进行更新,并基于初始参数信息更新所述当前转动时刻的前一转动时刻所对应的待使用参数信息。
在上述装置的基础上,可选的,所述头部转动信息中包括第一轴角速度、第二轴角速度和第三轴角速度,所述目标参数信息确定模块320,还用于基于所述前一转动时刻对应的待使用参数信息、所述第一轴角速度、所述第二轴角速度、所述第三轴角速度和预设变动系数,确定所述当前转动时刻对应的目标参数信息。
在上述装置的基础上,可选的,所述目标参数信息中包括第一参数值、第二参数值、第三参数值和第四参数值,所述空间转动角度确定模块330,包括纵摇角确定单元、横摇角确定单元、垂摇角确定单元和空间转动角度确定单元。
纵摇角确定单元,用于将所述第一参数值、第二参数值、第三参数值和第四参数值作为纵向反正弦函数的入参,得到所述当前转动时刻对应的纵摇角;
横摇角确定单元,用于将所述第一参数值、第二参数值、第三参数值和第四参数值作为横向反正切函数的入参,得到所述当前转动时刻对应的横摇角;
垂摇角确定单元,用于将所述第一参数值、第二参数值、第三参数值和第四参数值作为垂向反正切函数的入参,得到所述当前转动时刻对应的垂摇角;
空间转动角度确定单元,用于基于所述纵摇角、所述横摇角和所述垂摇角,确定所述空间转动角度。
在上述装置的基础上,可选的,所述装置还包括告警提示模块,所述告警提示模块包括行驶检测结果确定单元和告警提示单元。
行驶检测结果确定单元,用于基于目标车辆的当前行驶信息以及预设的参考行驶数据,确定所述目标车辆对应的行驶检测结果;其中,所述参考行驶数据包括车速区间、道路坡度阈值和障碍物信息中至少一项;
告警提示单元,用于若所述行驶检测结果为异常,则生成预警提示信息,以基于所述预警提示信息进行告警提示。
在上述装置的基础上,可选的,所述装置还包括座椅调节模块,所述座椅调节模块包括行驶加速度确定单元、反向加速度确定单元和座椅调节单元。
行驶加速度确定单元,用于确定所述目标车辆对应的行驶加速度;
反向加速度确定单元,用于当所述行驶加速度超过预设加速度阈值时,确定与所述行驶加速度相对应的反向加速度;
座椅调节单元,用于基于所述反向加速度生成座椅调节指令,以基于所述座椅调节指令控制所述目标用户的座椅运动。
本发明实施例所提供的场景展示装置可执行本发明任意实施例所提供的场景展示方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4是实现本发明实施例的场景展示方法的电子设备的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图4所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如场景展示方法。
在一些实施例中,场景展示方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的场景展示方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行场景展示方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与目标用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向目标用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),目标用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与目标用户的交互;例如,提供给目标用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自目标用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形目标用户界面或者网络浏览器的目标用户计算机,目标用户可以通过该图形目标用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (11)

1.一种场景展示方法,其特征在于,包括:
获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;
基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息;其中,所述前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的;
基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度;
根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
2.根据权利要求1所述的方法,其特征在于,所述获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息,包括:
在用户佩戴头显设备进行虚拟观景的过程中,获取所述头显设备中传感器于当前转动时刻检测到的所述用户头部对应的转动角速度;
将所述转动角速度作为所述头部转动信息。
3.根据权利要求1所述的方法,其特征在于,还包括:
当检测到所述头显设备由非工作状态变化为工作状态时,基于初始参数信息更新所述当前转动时刻的前一转动时刻所对应的待使用参数信息,以基于更新后的待使用参数信息确定所述当前转动时刻对应的目标参数信息;
其中,所述初始参数信息中包括第一初始值、第二初始值、第三初始值和第四初始值。
4.根据权利要求3所述的方法,其特征在于,还包括:
当接收到用户在所述头显设备的位置更新页面所输入的待使用观景位置时,基于所述待使用观景位置对设定的观景位置信息进行更新,并基于初始参数信息更新所述当前转动时刻的前一转动时刻所对应的待使用参数信息。
5.根据权利要求1所述的方法,其特征在于,所述头部转动信息中包括第一轴角速度、第二轴角速度和第三轴角速度,所述基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,包括:
基于所述前一转动时刻对应的待使用参数信息、所述第一轴角速度、所述第二轴角速度、所述第三轴角速度和预设变动系数,确定所述当前转动时刻对应的目标参数信息。
6.根据权利要求1所述的方法,其特征在于,所述目标参数信息中包括第一参数值、第二参数值、第三参数值和第四参数值,所述基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度,包括:
将所述第一参数值、第二参数值、第三参数值和第四参数值作为纵向反正弦函数的入参,得到所述当前转动时刻对应的纵摇角;
将所述第一参数值、第二参数值、第三参数值和第四参数值作为横向反正切函数的入参,得到所述当前转动时刻对应的横摇角;
将所述第一参数值、第二参数值、第三参数值和第四参数值作为垂向反正切函数的入参,得到所述当前转动时刻对应的垂摇角;
基于所述纵摇角、所述横摇角和所述垂摇角,确定所述空间转动角度。
7.根据权利要求1所述的方法,其特征在于,还包括:
基于目标车辆的当前行驶信息以及预设的参考行驶数据,确定所述目标车辆对应的行驶检测结果;其中,所述参考行驶数据包括车速区间、道路坡度阈值和障碍物信息中至少一项;
若所述行驶检测结果为异常,则生成预警提示信息,以基于所述预警提示信息进行告警提示。
8.根据权利要求1所述的方法,其特征在于,还包括:
确定所述目标车辆对应的行驶加速度;
当所述行驶加速度超过预设加速度阈值时,确定与所述行驶加速度相对应的反向加速度;
基于所述反向加速度生成座椅调节指令,以基于所述座椅调节指令控制所述目标用户的座椅运动。
9.一种场景展示装置,其特征在于,包括:
头部转动信息获取模块,用于获取目标车辆中佩戴头显设备的用户头部在当前转动时刻的头部转动信息;
目标参数信息确定模块,用于基于所述头部转动信息和前一转动时刻所对应的待使用参数信息,确定所述当前转动时刻对应的目标参数信息,以在接收到下一转动时刻的头部转动信息时,将所述目标参数信息作为所述当前转动时刻对应的待使用参数信息;其中,所述前一转动时刻所对应的待使用参数信息是基于在更新观景位置信息时所预设的初始参数信息确定的;
空间转动角度确定模块,用于基于所述目标参数信息,确定所述用户头部在当前转动时刻的空间转动角度;
目标视角数据展示模块,用于根据所述空间转动角度和设定的观景位置信息,从所述目标车辆当前行驶信息所对应的全景视角数据中,调取出与所述当前转动时刻相对应的目标视角数据,并展示。
10.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-8中任一项所述的场景展示方法。
11.一种计算机可读存储介质,其特征在于:所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-8中任一项所述的场景展示方法。
CN202211146099.7A 2022-09-20 2022-09-20 一种场景展示方法、装置、电子设备及存储介质 Pending CN115390253A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211146099.7A CN115390253A (zh) 2022-09-20 2022-09-20 一种场景展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211146099.7A CN115390253A (zh) 2022-09-20 2022-09-20 一种场景展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115390253A true CN115390253A (zh) 2022-11-25

Family

ID=84127182

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211146099.7A Pending CN115390253A (zh) 2022-09-20 2022-09-20 一种场景展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115390253A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117278733A (zh) * 2023-11-22 2023-12-22 潍坊威龙电子商务科技有限公司 全景摄像在vr头显中的显示方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117278733A (zh) * 2023-11-22 2023-12-22 潍坊威龙电子商务科技有限公司 全景摄像在vr头显中的显示方法及系统
CN117278733B (zh) * 2023-11-22 2024-03-19 潍坊威龙电子商务科技有限公司 全景摄像在vr头显中的显示方法及系统

Similar Documents

Publication Publication Date Title
US11181976B2 (en) Perception based predictive tracking for head mounted displays
WO2021197189A1 (zh) 基于增强现实的信息显示方法、系统、装置及投影设备
US10775634B2 (en) Method for calculating the movement data of the head of a driver of a transportation vehicle, data glasses and transportation vehicle for use in the method, and computer program
US20170228931A1 (en) Limited field of view in virtual reality
JP2021113818A (ja) 測位方法及び装置、自動運転車両、電子機器、並びに記憶媒体
CN113370982A (zh) 路面颠簸区域的检测方法、装置、电子设备及存储介质
CN113483774B (zh) 导航方法、装置、电子设备及可读存储介质
JP2020003898A (ja) 情報処理装置、情報処理方法、及びプログラム
CN115390253A (zh) 一种场景展示方法、装置、电子设备及存储介质
KR20180059366A (ko) 가상 현실 기기 상에서의 이미지 줌인 및 줌아웃을 위한 방법 및 장치
US20210146934A1 (en) Vehicle operation assistance device, vehicle operation assistance method, and program
CN111767844A (zh) 用于三维建模的方法和装置
CN116257205A (zh) 图像抖动补偿方法、装置、抬头显示设备、载具及介质
TW202414030A (zh) 場景展示方法、裝置、電子設備及儲存介質
CN112546613B (zh) 一种设备控制方法、装置、设备及存储介质
JP7379253B2 (ja) 挙動推定システム及び挙動推定方法
WO2024002028A1 (zh) 一种车辆控制方法、系统及ar头显
CN116069161A (zh) 导航显示方法、头戴设备、存储介质及电子设备
CN114461072A (zh) 一种显示方法、装置、电子设备和存储介质
JP2019057009A (ja) 情報処理装置及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination