TW202414030A - 場景展示方法、裝置、電子設備及儲存介質 - Google Patents
場景展示方法、裝置、電子設備及儲存介質 Download PDFInfo
- Publication number
- TW202414030A TW202414030A TW111146321A TW111146321A TW202414030A TW 202414030 A TW202414030 A TW 202414030A TW 111146321 A TW111146321 A TW 111146321A TW 111146321 A TW111146321 A TW 111146321A TW 202414030 A TW202414030 A TW 202414030A
- Authority
- TW
- Taiwan
- Prior art keywords
- information
- rotation
- head
- target
- rotation moment
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000001133 acceleration Effects 0.000 claims description 42
- 230000006870 function Effects 0.000 claims description 27
- 238000004590 computer program Methods 0.000 claims description 17
- 238000001514 detection method Methods 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 14
- 230000033001 locomotion Effects 0.000 claims description 7
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 230000000694 effects Effects 0.000 abstract description 14
- 238000012545 processing Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 201000003152 motion sickness Diseases 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 101001121408 Homo sapiens L-amino-acid oxidase Proteins 0.000 description 2
- 102100026388 L-amino-acid oxidase Human genes 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 101000827703 Homo sapiens Polyphosphoinositide phosphatase Proteins 0.000 description 1
- 102100023591 Polyphosphoinositide phosphatase Human genes 0.000 description 1
- 101100012902 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) FIG2 gene Proteins 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000003449 preventive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Controls And Circuits For Display Device (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
本發明提供了一種場景展示方法、裝置、電子設備及儲存介質。該方法包括:獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將目標參數訊息作為當前轉動時刻對應的待使用參數訊息;基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度;根據空間轉動角度和設定的觀景位置訊息,從目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與當前轉動時刻相對應的目標視角數據並展示目標視角數據。本發明實現提高視角跟隨的準確性,進而達到提高乘車舒適性的效果。
Description
本發明涉及虛擬實境技術領域,例如涉及一種場景展示方法、裝置、電子設備及儲存介質。
由於近年來擴增實境/虛擬實境(Augmented Reality/Virtual Reality,AR/VR)技術的快速發展,VR設備的應用場景越來越廣泛,使用者對VR設備的需求也越來越大,若是將VR設備應用到行車領域,可能會為乘車使用者帶來困擾,如使用VR設備時容易暈車以及無法欣賞車外風景等。
為了提高乘客的乘車體驗,利用AR技術在車輛的前擋風玻璃上實現AR導航、以及提示功能,幫助駕駛者更好的去安全駕駛,由於駕駛者在開車的過程中,注意力高度集中,往往不會暈車,但是作為乘客卻會存在因長時間坐車導致暈車的情況。
本發明提供了一種場景展示方法、裝置、電子設備及儲存介質,以實現提高視角跟隨的準確性,進而達到提高乘車舒適性的功效。
本發明提供了一種場景展示方法,該方法包括:
獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;
基於所述頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定所述當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將所述目標參數訊息作為所述當前轉動時刻對應的待使用參數訊息,其中,所述前一轉動時刻所對應的待使用參數訊息是基於在更新觀景位置訊息時所預設的初始參數訊息確定的;
基於所述目標參數訊息,確定所述使用者頭部在當前轉動時刻的空間轉動角度;
根據所述空間轉動角度和設定的觀景位置訊息,從所述目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與所述當前轉動時刻相對應的目標視角數據,並展示所述目標視角數據。
本發明還提供了一種場景展示裝置,該裝置包括:
頭部轉動訊息獲取模組,設置為獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;
目標參數訊息確定模組,設置為基於所述頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定所述當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將所述目標參數訊息作為所述當前轉動時刻對應的待使用參數訊息,其中,所述前一轉動時刻所對應的待使用參數訊息是基於在更新觀景位置訊息時所預設的初始參數訊息確定的;
空間轉動角度確定模組,設置為基於所述目標參數訊息,確定所述使用者頭部在當前轉動時刻的空間轉動角度;
目標視角數據展示模組,設置為根據所述空間轉動角度和設定的觀景位置訊息,從所述目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與所述當前轉動時刻相對應的目標視角數據,並展示所述目標視角數據。
本發明還提供了一種電子設備,所述電子設備包括:
至少一個處理器;以及
與所述至少一個處理器通訊連接的記憶體;其中,
所述記憶體儲存有可被所述至少一個處理器執行的電腦程式,所述電腦程式被所述至少一個處理器執行,以使所述至少一個處理器能夠執行本發明任一實施例所述的場景展示方法。
本發明還提供了一種電腦可讀儲存介質,所述電腦可讀儲存介質儲存有電腦指令,所述電腦指令用於使處理器執行時實現本發明任一實施例所述的場景展示方法。
本發明實施例的技術手段,通過獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將目標參數訊息作為當前轉動時刻對應的待使用參數訊息;基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度;根據空間轉動角度和設定的觀景位置訊息,從目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與當前轉動時刻相對應的目標視角數據,並展示目標視角數據,解決了通過將虛擬視角數據在車輛前擋風玻璃上進行投影展示,導致使用者虛擬技術體驗效果低、乘車舒適性差的問題,實現了視角的即時追蹤和視圖數據的展示,提高了視角跟隨的準確性和VR體驗效果,進而達到提高使用者乘車舒適性的功效。
下面將結合本發明實施例中的圖式,對本發明實施例中的技術手段進行描述,所描述的實施例僅僅是本發明一部分的實施例。
本發明的說明書和申請專利範圍及上述圖式中的術語「第一」、「第二」等是用於區別類似的對象,而不必用於描述特定的順序或先後次序。這樣使用的數據在適當情況下可以互換,以便這裡描述的本發明的實施例能夠以除了在這裡圖示或描述的那些以外的順序實施。此外,術語「包括」和「具有」以及他們的任何變形,意圖在於覆蓋不排他的包含,例如,包含了一系列步驟或單元的過程、方法、系統、產品或設備不必限於清楚地列出的那些步驟或單元,而是可包括沒有清楚地列出的或對於這些過程、方法、產品或設備固有的其它步驟或單元。
[實施例一]
圖1是根據本發明實施例一提供的一種場景展示方法的流程圖,本實施例可適用於虛擬實境場景展示情況,該方法可以由場景展示裝置來執行,該場景展示裝置可以採用硬件及/或軟體的形式實現,該場景展示裝置可應用於頭顯設備。如圖1所示,該方法包括以下步驟。
S110、獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息。
頭顯設備是指頭戴式顯示設備,例如頭顯設備可以為虛擬實境(Virtual Reality,VR)頭顯設備、擴增實境(Augmented Reality,AR)頭顯設備或混和實境(Mixed Reality,MR)頭顯設備等。在本技術手段中,獲取任一轉動時刻的頭部轉動訊息,並確定任一轉動時刻的目標視角數據進行展示的方式均相同,以其中任一轉動時刻作為當前轉動時刻進行說明。頭部轉動訊息可以為頭部轉動角速度或轉動加速度。
當使用者乘坐目標車輛時,可以通過佩戴頭顯設備進行VR、AR或MR的觀景,在觀景的過程中,隨著使用者頭部的轉動,眼睛觀看的視野也隨著發生變化,相應的,為使用者展示的觀景數據會隨著頭部轉動發生變化。
在實際應用中,可以利用配置在頭顯設備中的慣性測量單元(Inertial Measurement Unit,IMU)檢測使用者頭部於當前轉動時刻在三維空間(如X、Y、Z軸)中的加速度訊號及/或角速度訊號等,作為頭部轉動訊息。
獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息,包括:在使用者佩戴頭顯設備進行虛擬觀景的過程中,獲取頭顯設備中感測器於當前轉動時刻檢測到的使用者頭部對應的轉動角速度;將轉動角速度作為頭部轉動訊息。
感測器可以為陀螺儀,用於檢測物體的角速度。轉動角速度可以為三維空間中的角速度,包括X軸、Y軸、Z軸三個方向的角速度訊息。
在本實施例中,可以在使用者乘車並佩戴頭顯設備進行虛擬觀景的過程中,利用頭顯設備中的陀螺儀檢測使用者頭部在當前轉動時刻的轉動角速度,並將轉動角速度作為頭部轉動訊息,以基於頭部轉動訊息解算頭部的姿態,實現視角追蹤。
S120、基於所述頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定所述當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將所述目標參數訊息作為所述當前轉動時刻對應的待使用參數訊息。
前一轉動時刻所對應的待使用參數訊息是基於在更新觀景位置訊息時所預設的初始參數訊息確定的。待使用參數訊息可以為四元組參數集合,如
。頭部轉動訊息中包括第一軸角速度、第二軸角速度和第三軸角速度,第一軸角速度可以表示為X軸方向的角速度,第二軸角速度可以表示為Y軸方向的角速度,第三軸角速度可以表示為Z軸方向的角速度。
在本實際應用中,可以通過當前轉動時刻的轉動角速度和前一轉動時刻所對應的待使用參數訊息,解算得到當前轉動時刻對應的目標參數訊息,例如,可以預先設置解算得到目標參數訊息的計算函數,進而將待使用參數訊息、第一軸角速度、第二軸角速度和第三軸角速度等輸入到計算函數中,輸出當前轉動時刻對應的目標參數訊息,當接收到當前轉動時刻的下一轉動時刻的頭部轉動訊息時,將當前轉動時刻的目標參數訊息作為當前轉動時刻對應的待使用參數訊息,以確定下一轉動時刻的目標參數訊息。
在基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息的過程中,可以基於前一轉動時刻對應的待使用參數訊息、第一軸角速度、第二軸角速度、第三軸角速度和預設變動係數,確定當前轉動時刻對應的目標參數訊息。
預設變動係數可以為預設的變動因數,可以由所屬技術領域中具有通常知識者根據實際工作情況進行設定,例如,可以設置為0.5。目標參數訊息中包括與待使用參數訊息中四個參數所對應的數值。
為了介紹本技術手段,可以將四元組集合中的四個參數分別用q0、q1、q2、q3表示,那麼前一轉動時刻t-1的待使用參數訊息中四個參數值可以分別用
表示。第一軸角速度、第二軸角速度和第三軸角速度分別用
,
,
表示。預設變動係數可以用
進行表示。確定當前轉動時刻t的目標參數訊息的實現方式為:
其中,
、
、
和
分別為當前轉動時刻t下的參數值,可以將這四個參數值作為目標參數訊息,當接收到
轉動時刻的頭部轉動訊息時,可以將
、
、
和
作為
作為
轉動時刻所對應的待使用參數訊息,用於和t+1轉動時刻的頭部轉動訊息綜合確定t+1轉動時刻對應的目標參數訊息。
當
時,
、
、
和
可以表示為使用者頭部在第一個轉動時刻所對應的目標參數訊息,此時未存在第一個轉動時刻之前時刻的待使用參數訊息,需要為
賦予初始值得到
,為
賦予初始值得到
,為
賦予初始值得到
,為
賦予初始值得到
。可以基於
、
、
和
以及
時的頭部轉動訊息,分別確定
、
、
和
,作為
時的目標參數訊息。
可選的,確定初始參數訊息的實現方式可以是:當檢測到頭顯設備由非工作狀態變化為工作狀態時,基於初始參數訊息更新當前轉動時刻的前一轉動時刻所對應的待使用參數訊息,以基於更新後的待使用參數訊息確定當前轉動時刻對應的目標參數訊息。
初始參數訊息中包括第一初始值、第二初始值、第三初始值和第四初始值,可以由所屬技術領域中具有通常知識者根據實際工作進行設定,本技術手段不做限定。觀景位置訊息可以理解為使用者所處的觀景位置,如,主駕駛座位或副駕駛座位。
在本實施例中,可以當檢測到頭顯設備由非工作狀態變化為工作狀態時,認為頭顯設備中儲存的觀景位置訊息進行了初始化,即使用者開始使用頭顯設備進行虛擬觀景,此時可以為當前轉動時刻的前一轉動時刻所對應的待使用參數訊息賦予初始值,即將預設的初始參數訊息作為該前一轉動時刻所對應的待使用參數訊息,以當接收到當前轉動時刻的頭部轉動訊息時,可以基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息。
當頭顯設備由非工作狀態變化為工作狀態時,此時的觀景位置訊息可以理解為使用者預先設定好的,那麼在使用者調整觀景位置時,相應的所展示的視角數據也發生了變化,為了提高場景展示的準確性,以及更滿足使用者使用體驗,還可以當觀景位置發生更新時,基於初始參數訊息更新當前轉動時刻的前一轉動時刻所對應的待使用參數訊息,以基於重新調整的待使用參數訊息確定目標參數訊息。
可選的,確定初始參數訊息的實現方式還可以是:當接收到使用者在頭顯設備的位置更新頁面所輸入的待使用觀景位置時,基於待使用觀景位置對設定的觀景位置訊息進行更新,並基於初始參數訊息更新當前轉動時刻的前一轉動時刻所對應的待使用參數訊息。
位置更新頁面可以配置在頭顯設備中,是用於對觀景位置進行選擇的頁面,可以顯示有不同觀景位置對應的控件等,顯示方式可以是以文字、圖標等形式,另外,位置更新頁面上顯示有觀景位置的修改框,可以增加、刪減等。
在本實施例中,使用者可以在位置更新頁面觸發相應觀景位置的控件,可以將觸發控件所對應的觀景位置作為待使用觀景位置。可以將待使用觀景位置作為新設定好的觀景位置訊息,此時,在觀景位置發生變化時,可以將初始參數訊息作為當前轉動時刻的前一轉動時刻所對應的待使用參數訊息,以基於重新調整的待使用參數訊息確定目標參數訊息。
S130、基於所述目標參數訊息,確定所述使用者頭部在當前轉動時刻的空間轉動角度。
目標參數訊息中包括第一參數值、第二參數值、第三參數值和第四參數值,例如,
、
、
和
。空間轉動角度可以理解為歐拉角,可以用於表徵定點(頭部)轉動剛體位置的3個獨立角參量,如繞X軸轉動、繞Y軸轉動、以及繞Z軸轉動所對應的角度。
在本實施例中,可以利用目標參數訊息,解算得到使用者頭部在當前轉動時刻的空間轉動角度。基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度的實現方式可以是:將第一參數值、第二參數值、第三參數值和第四參數值作為縱向反正弦函數的入參,得到當前轉動時刻對應的縱搖角;將第一參數值、第二參數值、第三參數值和第四參數值作為橫向反正切函數的入參,得到當前轉動時刻對應的橫搖角;將第一參數值、第二參數值、第三參數值和第四參數值作為垂向反正切函數的入參,得到當前轉動時刻對應的垂搖角;基於縱搖角、橫搖角和垂搖角,確定空間轉動角度。
縱向反正弦函數可以為理解為asin函數,用於確定繞x軸旋轉的角度的函數。橫向反正切函數可以為理解為atan函數,用於確定繞y軸旋轉的角度的函數。垂向反正切函數可以為理解為atan函數,用於確定繞z軸旋轉的角度的函數。
在本實施例中,可以將第一參數值、第二參數值、第三參數值和第四參數值作為縱向反正弦函數的入參,得到當前轉動時刻對應的縱搖角,例如,縱搖角
,
表示浮點數,
表示第一參數值,
表示第二參數值、
表示第三參數值,
表示第四參數值。將第一參數值、第二參數值、第三參數值和第四參數值作為橫向反正切函數的入參,得到當前轉動時刻對應的橫搖角,例如,橫搖角
。將第一參數值、第二參數值、第三參數值和第四參數值作為垂向反正切函數的入參,得到當前轉動時刻對應的垂搖角,例如,垂搖角
。可以將縱搖角、橫搖角和垂搖角作為空間轉動角度,以通過空間轉動角度計算當前轉動時刻所對應的視角數據。
S140、根據所述空間轉動角度和設定的觀景位置訊息,從所述目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與所述當前轉動時刻相對應的目標視角數據,並展示所述目標視角數據。
為了使使用者可以更好的觀看車輛周身的環境訊息,以及對車輛的行駛訊息進行監控,緩解使用者乘車壓力,可以利用目標車輛上的攝影裝置拍攝目標車輛所對應的全景數據,例如,目標車輛的前後左右四個方位分別部署四個攝影機(如魚眼攝影機),以目標車輛為中心,分別進行拍攝,得到四個視角的數據,基於四個方位的視角數據構建360全景視角,即全景視角數據。在目標車輛行駛的過程中,車輛外部的環境數據發生變化,車輛的當前行駛訊息不同,所對應的全景視角數據可能存在不同。
在本實施例中,可以以設定的觀景位置訊息作為觀景中心,從目標車輛當前行駛訊息所對應的全景視角數據中,基於空間轉動角度計算出此時需為使用者展示的視角數據,得到當前轉動時刻相對應的目標視角數據,並將目標視角數據進行渲染展示。例如,觀景位置訊息為主駕駛位置,那麼可以在三維(Three Dimensions,3D)空間構建主駕駛或副駕駛視角初始位置,在初始位置的基礎上,佩戴頭顯設備的使用者頭部可能發生轉動,隨著頭部轉動,為使用者展示的視角數據發生變化,可以將空間轉動角度所對應的目標視角數據送給unity應用進行3D空間渲染,在顯示界面上進行展示。可選的,還可以將目標車輛的當前行駛訊息展示在顯示界面上,以供使用者對車輛的行駛狀態進行即時監控。
設定的觀景位置訊息可以根據使用者需求在位置更新頁面上進行修改,也可以通過手柄按鍵的方式,更新觀景位置訊息,實現動態切換使用者第一觀景視角的功效。
可選的,所述方法還包括:基於目標車輛的當前行駛訊息以及預設的參考行駛數據,確定目標車輛對應的行駛檢測結果;若行駛檢測結果為異常,則生成預警提示訊息,以基於預警提示訊息進行告警提示。
當前行駛訊息中可以包括但不限於車速、道路坡度訊息和路況訊息等。參考行駛數據包括車速區間、道路坡度閾值和障礙物訊息中至少一項。車速區間可以包括高速門限值、低速門限值、瞬時速度波動門限值等。
在本實施例中,可以接收目標車輛中多個感測器在當前時刻所檢測到的車輛狀態訊息,例如,車速、行駛道路坡度、以及障礙物訊息等等,作為當前行駛訊息。例如,利用車速感測器檢測車速、利用加速度感測器檢測車輛行駛加速度、利用陀螺儀感測器檢測車輛轉動角速度、利用磁力計感測器測量磁場強度和方向、利用毫米波感測器進行障礙物檢測等,接收多個感測器所上傳的數據,得到當前行駛訊息。可以將當前行駛訊息與預設的參考行駛數據進行分析比對,確定目標車輛是否存在行駛風險,如將車速與預設車速區間的上下限閾值進行比對,確定車輛的車速狀態,例如,如果車速超出高速門限值,那麼可以認為車輛可能存在超速行駛風險,即行駛檢測結果為異常,為了提高行車安全性,可以生成高速行駛的預警訊息並提示給使用者進行預警提示。或者,如果車速低於低速門限值時,可以認為車輛行駛速度緩慢,也可以認為行駛檢測結果為異常,向使用者發出低速行駛的提示訊息,以使使用者對車輛行駛狀況進行監控。為了提高行車安全性,可以通過毫米波感測器和目標車輛上攝影裝置綜合進行障礙物檢測,當檢測到障礙物時,進行障礙物的預警提示。例如,可以利用毫米波感測器實時進行障礙物的目標檢測,如果在車身一個方位檢測到障礙物,可以通過目標車輛上的攝影裝置進行確認,若基於攝影裝置的拍攝數據檢測到存在障礙物,即行駛檢測結果為異常,此時可以通過頭顯設備進行預警提示。
為了提高使用者佩戴頭顯設備時的乘車舒適性,可以基於車輛的運動狀態調整座椅的狀態,以使使用者的觸覺適應車輛的運動狀態,如,車輛加速向前行駛,可以給使用者座椅向後的作用力,防止出現使用者因車輛運動導致不舒適的情況。
可選的,所述方法還包括:確定目標車輛對應的行駛加速度;當行駛加速度超過預設加速度閾值時,確定與行駛加速度相對應的反向加速度;基於反向加速度生成座椅調節指令,以基於座椅調節指令控制目標使用者的座椅運動。
在實際應用中,可以基於目標車輛上配備的加速度感測器檢測車輛行駛加速度,也可以利用車速感測器檢測車速,進而基於當前車速解算行駛加速度。如果行駛加速度超過預設加速度閾值,那麼可以給予使用者所乘座椅一個與行駛加速度反方向的作用力,或加速度,控制座椅緩衝,此時可以確定與行駛加速度相對應的反向加速度,並生成座椅調節指令,可以將座椅調節指令發送至座椅調節電機,通過電機運作為座椅施加反向加速度,以使座椅發生緩衝,提高使用者的乘車舒適性,防止暈車。
本實施例的技術手段,通過獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將目標參數訊息作為當前轉動時刻對應的待使用參數訊息;基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度;根據空間轉動角度和設定的觀景位置訊息,從目標車輛當前行駛訊息所對應的全景視角數據中,調取出與當前轉動時刻相對應的目標視角數據,並展示,解決了通過將虛擬視角數據在車輛前擋風玻璃上進行投影展示,導致使用者虛擬技術體驗效果低,乘車舒適性差的問題,實現了通過基於使用者在乘車過程中佩戴頭顯設備時所對應的當前頭部轉動訊息,以及前一轉動時刻所對應的待使用參數訊息,解算得到當前轉動時刻對應的目標參數訊息,並基於目標參數訊息確定使用者頭部在空間坐標系下的轉動角度,進而從目標車輛當前行駛訊息所對應的全景視角數據中調取出空間轉動角度和設定的觀景位置訊息下的目標視角數據,並在頭顯設備中進行展示,實現視角的即時追蹤和視圖數據的展示,提高視角跟隨的準確性和AR體驗效果,進而達到提高使用者乘車舒適性的功效。
[實施例二]
作為上述實施例的一可選實施例,圖2是根據本發明實施例二所提供的場景展示系統的結構示意圖。可以參見下述內容。
參見圖2,本技術手段可以由VR頭顯設備、3D座椅、車載處理器和車載設備處理模組共同實現。其中,VR頭顯設備中包括IMU感測器、座椅控制模組、觀景位置確定模組、VR顯示模組和頭顯無線通訊模組。IMU感測器,設置為檢測佩戴VR頭顯設備的使用者的頭部轉動訊息(如轉動角速度)。座椅控制模組,設置為基於當前行駛訊息生成座椅控制指令,並將座椅控制指令發送至座椅,控制電機和馬達。觀景位置確定模組,設置為接收使用者選擇的觀景位置模式,並將觀景位置訊息發送至車載處理器。頭顯無線通訊模組,設置為與座椅和車載處理器通訊,以保證數據安全傳輸。VR顯示模組,設置為接收車載處理器發送的目標視角數據並渲染展示。座椅中包括電機控制模組和超寬線性馬達,設置為接收控制電機和馬達的座椅控制指令,以及調節座椅緩衝。車載處理器中包括目標視角數據確定模組、感測器處理模組、頭部空間轉動角度確定模組和車載無線通訊模組。頭部空間轉動角度確定模組,設置為接收VR頭顯設備發送的頭部轉動訊息,並基於頭部轉動訊息確定頭部空間轉動角度(如歐拉角)。目標視角數據確定模組,設置為基於接收的全景視角數據和觀景位置訊息,確定目標視角數據,並將目標視角數據發送至VR頭顯設備。感測器處理模組,設置為接收車載設備處理模組發送的當前行駛訊息,並將當前行駛訊息發送至VR頭顯設備。車載無線通訊模組,設置為與VR頭顯設備和車載設備處理模組通訊,以保證數據安全傳輸。車載設備處理模組中包括前、後、左、右攝影機,前後左右4個攝影機可以為魚眼攝影機,大視場角,以車子為中心,構建360全景視角,生成全景視角數據。車載設備處理模組中還包括多種車載感測器,如車速感測器、加速度感測器、陀螺儀感測器、磁力計感測器、以及毫米波感測器等。
在實際應用中,可以利用車載360全景技術,通過目標車輛的前後左右4個攝影機構建360全景視角,在使用者佩戴VR頭顯設備時,可以將VR頭顯設備與車載處理器建立無線連接。車載處理器通過即時獲取目標車輛前、後、左、右攝影機拍攝的全景視角數據,通過藍牙獲取其他多種感測器數據(當前行駛訊息)。車載處理器通過全景攝影機融合技術,建立車外360度視角,以及通過無線保真(Wireless Fidelity,WIFI)獲取VR頭顯IMU數據(即轉動角速度),進而基於轉動角速度解算得到空間轉動角度,以基於空間轉動角度和360度視角數據進行三自由度(Three Degree Of Freedom,3DOF)追蹤,實現模擬使用者第一視角。示例性的,當使用者的頭部發生轉動時,此時在以使用者觀景位置訊息對應的空間坐標系下由坐標1變成了新坐標2(包括繞X軸、Y軸、Z軸的旋轉角度),即當前轉動時刻的空間轉動角度。可以利用IMU檢測得到當前轉動時刻
的轉動角速度,如
,
,
。可以基於轉動角速度計算得到當前轉動時刻
的四元數(如
、
、
和
),即目標參數訊息。實現方式為:
其中,
、
、
和
分別為當前轉動時刻
下的參數值,可以將這四個參數值作為目標參數訊息,
,
,
,
分別為前一轉動時刻
下的四個參數值,即待使用參數訊息。當接收到
轉動時刻的頭部轉動訊息時,可以將
、
、
和
作為
轉動時刻所對應的待使用參數訊息,用於和
轉動時刻的頭部轉動角速度綜合確定
轉動時刻對應的目標參數訊息。
當
時,
、
、
和
可以表示為使用者頭部在第一個轉動時刻所對應的目標參數訊息,此時未存在第一個轉動時刻之前時刻的待使用參數訊息,需要為
賦予初始值得到
,為
賦予初始值得到
,為
賦予初始值得到
,為
賦予初始值得到
。可以基於
、
、
和
以及
時的頭部轉動訊息,分別確定
、
、
和
,作為
時的目標參數訊息。
可以當檢測到頭顯設備由非工作狀態變化為工作狀態時,將初始參數訊息作為當前轉動時刻的前一轉動時刻所對應的待使用參數訊息;還可以當接收到使用者在頭顯設備的位置更新頁面所輸入的待使用觀景位置時,基於待使用觀景位置對設定的觀景位置訊息進行更新,並將初始參數訊息作為當前轉動時刻的前一轉動時刻所對應的待使用參數訊息。示例性的,使用者可以根據需要,在VR頭顯顯示界面設置第一視角模式,如主駕駛或副駕駛,根據乘客設定的視角模式,在3D空間構建主駕駛或副駕駛視角初始位置。或者使用者可以通過手柄按鍵,動態切換第一視角模式,可以將使用者選中的視角位置作為第一視角模式。
在上述方案的基礎上,在得到當前轉動時刻
的目標參數訊息
、
、
和
之後,可以將
作為第一參數值,
作為第二參數值、
作為第三參數值,
作為第四參數值,將第一參數值、第二參數值、第三參數值和第四參數值作為縱向反正弦函數的入參,得到轉動時刻
對應的縱搖角,例如,縱搖角
,
表示浮點數。將第一參數值、第二參數值、第三參數值和第四參數值作為橫向反正切函數的入參,得到轉動時刻
對應的橫搖角,例如,橫搖角
。將第一參數值、第二參數值、第三參數值和第四參數值作為垂向反正切函數的入參,得到轉動時刻
對應的垂搖角,例如,垂搖角
。可以將縱搖角、橫搖角和垂搖角作為空間轉動角度,可以通過WIFI將空間轉動角度所對應的目標視角數據傳送給VR頭顯設備中的unity應用進行3D空間渲染,在顯示模組上進行展示。
在上述方案的基礎上,車載處理器可以將車輛的多種感測器數據檢測到的當前行駛訊息傳送給VR頭顯設備,VR頭顯設備即時獲取車輛當前行駛訊息,可以通過將車速與設置的車速報警門限值(如高速門限值、低速門限值、瞬間速度波動門限值,或短期內車速波動門限)進行比較,若車速超過相關門限值,可以生成預警提示訊息,並通過VR頭顯進行預警提示,以提示使用者車輛的當前行駛情況。還可以通過超聲波感測器(如毫米波雷達)和攝影機綜合進行障礙物檢測,例如,如果超聲波感測器在車身一個方位檢測到障礙物時,可以基於攝影機拍攝的全景視角數據進行確認,若存在障礙物,則進行預警提示。此種方式的好處是:既能夠提高障礙物檢測的準確性,又使使用者能夠對車輛行駛狀態進行監控,以便及時作出預防措施,保證行車安全性。
在上述方案的基礎上,本技術手段中可以通過即時檢測車輛當前速度,根據車輛加速、減速情況,計算得到行駛加速度,如果行駛加速度超過設定的加速度閾值,即時控制電機和馬達給3D座椅反向加速度,提高乘客舒適度,有效防止暈車。可選的,本技術手段中還可以根據車外檢測、臥室、客廳等場景設置3D座椅工作模式,也可以通過手動方式在VR頭顯界面上調整座椅位置,滿足使用者使用體驗。
在本實施例中,使用者可以通過車載VR頭顯設備進行3D視角建模,構建多種3D虛擬場景(如臥室、客廳、汽車內飾等)。使用者可以以多種視角觀看車外景色,不僅可以幫助使用者進行行車監測,還可以緩解使用者暈車問題。還可以通過在座椅中配置電機、超寬線性馬達等,進而通過監測車輛運行狀況調試座椅,調節使用者座椅的運動緩衝,提高使用者體驗感和乘車舒適性。
本實施例的技術手段,通過獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將目標參數訊息作為當前轉動時刻對應的待使用參數訊息;基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度;根據空間轉動角度和設定的觀景位置訊息,從目標車輛當前行駛訊息所對應的全景視角數據中,調取出與當前轉動時刻相對應的目標視角數據,並展示,解決了通過將虛擬視角數據在車輛前擋風玻璃上進行投影展示,導致使用者虛擬技術體驗效果低,乘車舒適性差的問題,實現了通過基於使用者在乘車過程中佩戴頭顯設備時所對應的當前頭部轉動訊息,以及前一轉動時刻所對應的待使用參數訊息,解算得到當前轉動時刻對應的目標參數訊息,並基於目標參數訊息確定使用者頭部在空間坐標系下的轉動角度,進而從目標車輛當前行駛訊息所對應的全景視角數據中調取出空間轉動角度和設定的觀景位置訊息下的目標視角數據,並在頭顯設備中進行展示,實現視角的即時追蹤和視圖數據的展示,提高視角跟隨的準確性和AR體驗效果,進而達到提高使用者乘車舒適性的功效。
〔實施例三〕
圖3是根據本發明實施例三提供的一種場景展示裝置的結構示意圖。如圖3所示,該裝置包括:頭部轉動訊息獲取模組310、目標參數訊息確定模組320、空間轉動角度確定模組330和目標視角數據展示模組340。
頭部轉動訊息獲取模組310,設置為獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;目標參數訊息確定模組320,設置為基於所述頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定所述當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將所述目標參數訊息作為所述當前轉動時刻對應的待使用參數訊息,其中,所述前一轉動時刻所對應的待使用參數訊息是基於在更新觀景位置訊息時所預設的初始參數訊息確定的;空間轉動角度確定模組330,設置為基於所述目標參數訊息,確定所述使用者頭部在當前轉動時刻的空間轉動角度;目標視角數據展示模組340,設置為根據所述空間轉動角度和設定的觀景位置訊息,從所述目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與所述當前轉動時刻相對應的目標視角數據,並展示所述目標視角數據。
本實施例的技術手段,通過獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息;基於頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息時,將目標參數訊息作為當前轉動時刻對應的待使用參數訊息;基於目標參數訊息,確定使用者頭部在當前轉動時刻的空間轉動角度;根據空間轉動角度和設定的觀景位置訊息,從目標車輛當前行駛訊息所對應的全景視角數據中,調取出與當前轉動時刻相對應的目標視角數據,並展示所述目標視角數據,解決了通過將虛擬視角數據在車輛前擋風玻璃上進行投影展示,導致使用者虛擬技術體驗效果低,乘車舒適性差的問題,實現了通過基於使用者在乘車過程中佩戴頭顯設備時所對應的當前頭部轉動訊息,以及前一轉動時刻所對應的待使用參數訊息,解算得到當前轉動時刻對應的目標參數訊息,並基於目標參數訊息確定使用者頭部在空間坐標系下的轉動角度,進而從目標車輛當前行駛訊息所對應的全景視角數據中調取出空間轉動角度和設定的觀景位置訊息下的目標視角數據,並在頭顯設備中進行展示,實現視角的即時追蹤和視圖數據的展示,提高視角跟隨的準確性和AR體驗效果,進而達到提高使用者乘車舒適性的功效。
在上述裝置的基礎上,可選的,所述頭部轉動訊息獲取模組310,包括轉動角速度確定單元和頭部轉動訊息確定單元。
轉動角速度確定單元,設置為在使用者佩戴頭顯設備進行虛擬觀景的過程中,獲取所述頭顯設備中感測器於當前轉動時刻檢測到的所述使用者頭部對應的轉動角速度;
頭部轉動訊息確定單元,設置為將所述轉動角速度作為所述頭部轉動訊息。
在上述裝置的基礎上,可選的,所述裝置還包括參數訊息更新模組,所述參數訊息更新模組,設置為當檢測到所述頭顯設備由非工作狀態變化為工作狀態時,基於初始參數訊息更新所述當前轉動時刻的前一轉動時刻所對應的待使用參數訊息,以基於更新後的待使用參數訊息確定所述當前轉動時刻對應的目標參數訊息;
其中,所述初始參數訊息中包括第一初始值、第二初始值、第三初始值和第四初始值。
在上述裝置的基礎上,可選的,所述參數訊息更新模組包括參數訊息更新單元,所述參數訊息更新單元,設置為當接收到使用者在所述頭顯設備的位置更新頁面所輸入的待使用觀景位置時,基於所述待使用觀景位置對設定的觀景位置訊息進行更新,並基於初始參數訊息更新所述當前轉動時刻的前一轉動時刻所對應的待使用參數訊息。
在上述裝置的基礎上,可選的,所述頭部轉動訊息中包括第一軸角速度、第二軸角速度和第三軸角速度,所述目標參數訊息確定模組320,設置為基於所述前一轉動時刻對應的待使用參數訊息、所述第一軸角速度、所述第二軸角速度、所述第三軸角速度和預設變動係數,確定所述當前轉動時刻對應的目標參數訊息。
在上述裝置的基礎上,可選的,所述目標參數訊息中包括第一參數值、第二參數值、第三參數值和第四參數值,所述空間轉動角度確定模組330,包括縱搖角確定單元、橫搖角確定單元、垂搖角確定單元和空間轉動角度確定單元。
縱搖角確定單元,設置為將所述第一參數值、第二參數值、第三參數值和第四參數值作為縱向反正弦函數的入參,得到所述當前轉動時刻對應的縱搖角;
橫搖角確定單元,設置為將所述第一參數值、第二參數值、第三參數值和第四參數值作為橫向反正切函數的入參,得到所述當前轉動時刻對應的橫搖角;
垂搖角確定單元,設置為將所述第一參數值、第二參數值、第三參數值和第四參數值作為垂向反正切函數的入參,得到所述當前轉動時刻對應的垂搖角;
空間轉動角度確定單元,設置為基於所述縱搖角、所述橫搖角和所述垂搖角,確定所述空間轉動角度。
在上述裝置的基礎上,可選的,所述裝置還包括告警提示模組,所述告警提示模組包括行駛檢測結果確定單元和告警提示單元。
行駛檢測結果確定單元,設置為基於目標車輛的當前行駛訊息以及預設的參考行駛數據,確定所述目標車輛對應的行駛檢測結果;其中,所述參考行駛數據包括車速區間、道路坡度閾值和障礙物訊息中至少一項;
告警提示單元,設置為若所述行駛檢測結果為異常,則生成預警提示訊息,以基於所述預警提示訊息進行告警提示。
在上述裝置的基礎上,可選的,所述裝置還包括座椅調節模組,所述座椅調節模組包括行駛加速度確定單元、反向加速度確定單元和座椅調節單元。
行駛加速度確定單元,設置為確定所述目標車輛對應的行駛加速度;
反向加速度確定單元,設置為當所述行駛加速度超過預設加速度閾值時,確定與所述行駛加速度相對應的反向加速度;
座椅調節單元,設置為基於所述反向加速度生成座椅調節指令,以基於所述座椅調節指令控制所述目標使用者的座椅運動。
本發明實施例所提供的場景展示裝置可執行本發明任意實施例所提供的場景展示方法,具備執行方法相應的功能模組和效果。
〔實施例四〕
圖4是實現本發明實施例的場景展示方法的電子設備的結構示意圖。電子設備旨在表示多種形式的數位電腦,諸如,筆記型電腦、桌上型電腦台、工作台、個人數位助理、伺服器、刀鋒伺服器、大型電腦、和其它適合的電腦。電子設備還可以表示多種形式的行動裝置,諸如,個人數位處理、行動電話、智慧型手機、可穿戴設備(如頭盔、眼鏡、手錶等)和其它類似的計算裝置。本說明書所示的部件、其等的連接和關係、以及其等的功能僅僅作為示例,並且不意在限制本說明書中描述的及/或者要求的本發明的實現。
如圖4所示,電子設備10包括至少一個處理器11,以及與至少一個處理器11通訊連接的記憶體,如唯讀記憶體(Read-Only Memory,ROM)12、隨機存取記憶體(Random Access Memory,RAM)13等,其中,記憶體儲存有可被至少一個處理器執行的電腦程式,處理器11可以根據儲存在ROM12中的電腦程式或者從記憶單元18加載到RAM13中的電腦程式,來執行多種適當的動作和處理。在RAM 13中,還可儲存電子設備10操作所需的多種程序和數據。處理器11、ROM 12以及RAM 13通過總線14彼此相連。輸入/輸出(Input/Output,I/O)接口15也連接至總線14。
電子設備10中的多個部件連接至I/O接口15,包括:輸入單元16,例如鍵盤、滑鼠等;輸出單元17,例如多種類型的顯示器、揚聲器等;記憶單元18,例如硬碟、光碟等;以及通訊單元19,例如網卡、數據機、無線通訊收發機等。通訊單元19允許電子設備10通過諸如因特網的電腦網路及/或多種電信網路與其他設備交換訊息/數據。
處理器11可以是多種具有處理和計算能力的通用及/或專用處理組件。處理器11的一些示例包括但不限於中央處理單元(Central Processing Unit,CPU)、圖形處理單元(Graphics Processing Unit,GPU)、多種專用的人工智慧(Artificial Intelligence ,AI)計算晶片、多種運行機器學習模型算法的處理器、數位訊號處理器(Digital Signal Processor,DSP)、以及任何適當的處理器、控制器、微控制器等。處理器11執行上文所描述的多個方法和處理,例如場景展示方法。
在一些實施例中,場景展示方法可被實現為電腦程式,其被有形地包含於電腦可讀儲存介質,例如記憶單元18。在一些實施例中,電腦程式的部分或者全部可以經由ROM 12及/或通訊單元19而被載入及/或安裝到電子設備10上。當電腦程式加載到RAM 13並由處理器11執行時,可以執行上文描述的場景展示方法的一個或多個步驟。備選地,在其他實施例中,處理器11可以通過其他任何適當的方式(例如,借助於固件)而被配置為執行場景展示方法。
本說明書中以上描述的系統和技術的多種實施方式可以在數位電子電路系統、積體電路系統、現場可程式化邏輯閘陣列(Field Programmable Gate Array,FPGA)、特殊應用積體電路(Application Specific Integrated Circuit,ASIC)、專用標準產品(Application Specific Standard Parts,ASSP)、系統單晶片(System on Chip,SOC)、複雜可程式化邏輯裝置(Complex Programmable Logic Device,CPLD)、電腦軟體、韌體、軟體、及/或其等的組合中實現。這些多種實施方式可以包括:實施在一個或者多個電腦程式中,該一個或者多個電腦程式可在包括至少一個可程式邏輯控制器的可程式系統上執行及/或解釋,該可程式邏輯控制器可以是專用或者通用可程式邏輯控制器,可以從記憶系統、至少一個輸入裝置、和至少一個輸出裝置接收數據和指令,並且將數據和指令傳輸至該記憶系統、該至少一個輸入裝置、和該至少一個輸出裝置。
用於實施本發明的方法的電腦程式可以採用一個或多個程式語言的任何組合來編寫。這些電腦程式可以提供給通用電腦、專用電腦或其他可程式化數據處理裝置的處理器,使得電腦程式當由處理器執行時使流程圖及/或方塊圖中所規定的功能/操作被實施。電腦程式可以完全在機器上執行、部分地在機器上執行,作為獨立軟體包部分地在機器上執行且部分地在遠程機器上執行或完全在遠程機器或伺服器上執行。
在本發明的上下文中,電腦可讀儲存介質可以是有形的介質,其可以包含或儲存以供指令執行系統、裝置或設備使用或與指令執行系統、裝置或設備結合地使用的電腦程式。電腦可讀儲存介質可以包括但不限於電子的、磁性的、光學的、電磁的、紅外線的、或半導體系統、裝置或設備,或者上述內容的任何合適組合。備選地,電腦可讀儲存介質可以是機器可讀訊號介質。機器可讀儲存介質包括基於一個或多個線的電氣連接、攜帶式電腦硬碟、硬碟、RAM、ROM、可抹除可程式唯讀記憶體(Erasable Programmable Read-Only Memory,EPROM)、快閃記憶體、光纖、光碟唯讀記憶體(Compact Disc Read Only Memory,CD-ROM)、光學儲存設備、磁性儲存設備、或上述內容的任何合適組合。儲存介質可以是非暫態(non-transitory)儲存介質。
為了提供與目標使用者的交互,可以在電子設備上實施此處描述的系統和技術,該電子設備具有:用於向目標使用者顯示訊息的顯示裝置(例如,陰極射線管(Cathode Ray Tube,CRT)或者液晶顯示器(Liquid Crystal Display,LCD)監視器);以及鍵盤和指向裝置(例如,滑鼠或者軌跡球),目標使用者可以通過該鍵盤和該指向裝置來將輸入提供給電子設備。其它種類的裝置還可以用於提供與目標使用者的交互;例如,提供給目標使用者的反饋可以是任何形式的感測反饋(例如,視覺反饋、聽覺反饋、或者觸覺反饋);並且可以用任何形式(包括聲輸入、語音輸入或者、觸覺輸入)來接收來自目標使用者的輸入。
可以將此處描述的系統和技術實施在包括後台部件的計算系統(例如,作為數據伺服器)、或者包括中間件部件的計算系統(例如,應用伺服器)、或者包括前端部件的計算系統(例如,具有圖形目標使用者界面或者網路瀏覽器的目標使用者電腦,目標使用者可以通過該圖形目標使用者界面或者該網路瀏覽器來與此處描述的系統和技術的實施方式交互)、或者包括這種後台部件、中間件部件、或者前端部件的任何組合的計算系統中。可以通過任何形式或者介質的數位數據通訊(例如,通訊網路)來將系統的部件相互連接。通訊網路的示例包括:區域網路(Local Area Network,LAN)、廣域網路(Wide Area Network,WAN)、區塊鏈網路和網際網路。
計算系統可以包括客戶端和伺服器。客戶端和伺服器一般遠離彼此並且通常通過通訊網路進行交互。通過在相應的電腦上運行並且彼此具有客戶端-伺服器關係的電腦程式來產生客戶端和伺服器的關係。伺服器可以是雲端伺服器,又稱為雲端運算伺服器或雲端主機,是雲端計算伺服體系中的一項主機產品,以解決了傳統物理主機與虛擬專用伺服器(Virtual Private Server,VPS)服務中,存在的管理難度大,業務擴展性弱的缺陷。
可以使用上面所示的多種形式的流程,重新排序、增加或刪除步驟。例如,本發明中記載的多個步驟可以並行地執行也可以順序地執行也可以不同的次序執行,只要能夠實現本發明的技術手段所期望的結果,本說明書在此不進行限制。
上述實施方式,並不構成對本發明保護範圍的限制。根據設計要求和其他因素,可以進行多種修改、組合、子組合和替代。
本發明要求在2022年09月20日提交中國專利局、申請號為202211146099.7的中國專利申請的優先權,該申請的全部內容通過引用結合在本發明中。
〔圖1〕是根據本發明實施例一提供的一種場景展示方法的流程圖。
〔圖2〕是根據本發明實施例二所提供的場景展示系統的結構示意圖。
〔圖3〕是根據本發明實施例三提供的一種場景展示裝置的結構示意圖。
〔圖4〕是實現本發明實施例的場景展示方法的電子設備的結構示意圖。
Claims (11)
- 一種場景展示方法,其特徵係包括: 獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息; 基於該頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定該當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息的情況下,將該目標參數訊息作為該當前轉動時刻對應的待使用參數訊息,其中,該前一轉動時刻所對應的待使用參數訊息是基於在更新觀景位置訊息的情況下所預設的初始參數訊息確定的; 基於該目標參數訊息,確定該使用者頭部在該當前轉動時刻的空間轉動角度; 根據該空間轉動角度和設定的觀景位置訊息,從該目標車輛的當前行駛訊號所對應的全景視角數據中,調取出與該當前轉動時刻相對應的目標視角數據,並展示該目標視角數據。
- 如請求項1所述之方法,其中,該獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息,包括: 在使用者佩戴該頭顯設備進行虛擬觀景的過程中,獲取該頭顯設備中感測器於該當前轉動時刻檢測到的該使用者頭部對應的轉動角速度; 將該轉動角速度作為該頭部轉動訊息。
- 如請求項1所述之方法,其中,還包括: 在檢測到該頭顯設備由非工作狀態變化為工作狀態的情況下,基於該初始參數訊息更新該當前轉動時刻的前一轉動時刻所對應的待使用參數訊息,以基於更新後的待使用參數訊息確定該當前轉動時刻對應的目標參數訊息; 其中,該初始參數訊息中包括第一初始值、第二初始值、第三初始值和第四初始值。
- 如請求項3所述之方法,其中,還包括: 在接收到使用者在該頭顯設備的位置更新頁面所輸入的待使用觀景位置的情況下,基於該待使用觀景位置對設定的觀景位置訊號進行更新,並基於該初始參數訊號更新該當前轉動時刻的前一轉動時刻所對應的待使用參數訊息。
- 如請求項1所述之方法,其中,該頭部轉動訊息中包括第一軸角速度、第二軸角速度和第三軸角速度,該基於該頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定該當前轉動時刻對應的目標參數訊息,包括: 基於該前一轉動時刻所對應的待使用參數訊息、該第一軸角速度、該第二軸角速度、該第三軸角速度和預設變動係數,確定該當前轉動時刻對應的目標參數訊息。
- 如請求項1所述之方法,其中,該目標參數訊息中包括第一參數值、第二參數值、第三參數值和第四參數值,該基於該目標參數訊息,確定該使用者頭部在該當前轉動時刻的空間轉動角度,包括: 將該第一參數值、該第二參數值、該第三參數值和該第四參數值作為縱向反正弦函數的入參,得到該當前轉動時刻對應的縱搖角; 將該第一參數值、該第二參數值、該第三參數值和該第四參數值作為橫向反正切函數的入參,得到該當前轉動時刻對應的橫搖角; 將該第一參數值、該第二參數值、該第三參數值和該第四參數值作為垂向反正切函數的入參,得到該當前轉動時刻對應的垂搖角; 基於該縱搖角、該橫搖角和該垂搖角,確定該空間轉動角度。
- 如請求項1所述之方法,其中,還包括: 基於該目標車輛的當前行駛訊號以及預設的參考行駛數據,確定該目標車輛對應的行駛檢測結果,其中,該參考行駛數據包括以下至少之一:車速區間、道路坡度閾值和障礙物訊息; 在該行駛檢測結果為異常的情況下,生成預警提示訊號,以基於該預警提示訊號進行告警提示。
- 如請求項1所述之方法,其中,還包括: 確定該目標車輛對應的行駛加速度; 在該行駛加速度超過預設加速度閾值的情況下,確定與該行駛加速度相對應的反向加速度; 基於該反向加速度生成座椅調節指令,以基於該座椅調節指令控制該目標使用者的座椅運動。
- 一種場景展示裝置,其特徵係,包括: 頭部轉動訊息獲取模組,設置為獲取目標車輛中佩戴頭顯設備的使用者頭部在當前轉動時刻的頭部轉動訊息; 目標參數訊息確定模組,設置為基於該頭部轉動訊息和前一轉動時刻所對應的待使用參數訊息,確定該當前轉動時刻對應的目標參數訊息,以在接收到下一轉動時刻的頭部轉動訊息的情況下,將該目標參數訊息作為該當前轉動時刻對應的待使用參數訊息,其中,該前一轉動時刻所對應的待使用參數訊號是基於在更新觀景位置訊號的情況下所預設的初始參數訊息確定的; 空間轉動角度確定模組,設置為基於該目標參數訊息,確定該使用者頭部在該當前轉動時刻的空間轉動角度; 目標視角數據展示模組,設置為根據該空間轉動角度和設定的觀景位置訊息,從該目標車輛的當前行駛訊息所對應的全景視角數據中,調取出與該當前轉動時刻相對應的目標視角數據,並展示該目標視角數據。
- 一種電子設備,其特徵係,包括: 至少一個處理器;以及 與該至少一個處理器通訊連接的記憶體;其中, 該記憶體儲存有可被該至少一個處理器執行的電腦程式,該電腦程式被該至少一個處理器執行,以使該至少一個處理器能夠執行請求項1至8中任一項所述之場景展示方法。
- 一種電腦可讀儲存介質,其特徵係,該電腦可讀儲存介質儲存有電腦指令,該電腦指令用於使處理器執行時實現請求項1至8中任一項所述之場景展示方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211146099.7A CN115390253A (zh) | 2022-09-20 | 2022-09-20 | 一种场景展示方法、装置、电子设备及存储介质 |
CN202211146099.7 | 2022-09-20 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202414030A true TW202414030A (zh) | 2024-04-01 |
Family
ID=84127182
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111146321A TW202414030A (zh) | 2022-09-20 | 2022-12-02 | 場景展示方法、裝置、電子設備及儲存介質 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN115390253A (zh) |
TW (1) | TW202414030A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117278733B (zh) * | 2023-11-22 | 2024-03-19 | 潍坊威龙电子商务科技有限公司 | 全景摄像在vr头显中的显示方法及系统 |
-
2022
- 2022-09-20 CN CN202211146099.7A patent/CN115390253A/zh active Pending
- 2022-12-02 TW TW111146321A patent/TW202414030A/zh unknown
Also Published As
Publication number | Publication date |
---|---|
CN115390253A (zh) | 2022-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11691079B2 (en) | Virtual vehicle control method in virtual scene, computer device, and storage medium | |
CN107771309B (zh) | 处理三维用户输入的方法 | |
WO2021197189A1 (zh) | 基于增强现实的信息显示方法、系统、装置及投影设备 | |
EP3384365B1 (en) | Teleportation in an augmented and/or virtual reality environment | |
JP6110007B2 (ja) | ヘッドマウントディスプレイのための知覚に基づく予測追跡 | |
US10620720B2 (en) | Input controller stabilization techniques for virtual reality systems | |
US10359863B2 (en) | Dragging virtual elements of an augmented and/or virtual reality environment | |
JP5996814B1 (ja) | 仮想空間の画像をヘッドマウントディスプレイに提供する方法及びプログラム | |
US20170228931A1 (en) | Limited field of view in virtual reality | |
US8878875B2 (en) | Absolute image orientation displacement monitoring and manipulation apparatus | |
CN106970697B (zh) | 界面交互装置及方法 | |
JP6290754B2 (ja) | 仮想空間表示装置、仮想空間表示方法及びプログラム | |
JP2008040832A (ja) | 複合現実感提示システム及びその制御方法 | |
US10649616B2 (en) | Volumetric multi-selection interface for selecting multiple objects in 3D space | |
WO2021197190A1 (zh) | 基于增强现实的信息显示方法、系统、装置及投影设备 | |
TW202414030A (zh) | 場景展示方法、裝置、電子設備及儲存介質 | |
WO2024002297A1 (zh) | 车载机械臂的控制的方法、装置、车载显示设备及车辆 | |
KR20180059366A (ko) | 가상 현실 기기 상에서의 이미지 줌인 및 줌아웃을 위한 방법 및 장치 | |
WO2022014429A1 (ja) | 情報処理方法、プログラム、及びシステム | |
JPWO2019102676A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP6613099B2 (ja) | 仮想現実空間を立体的に表示するためのプログラム、コンピュータ及びヘッドマウントディスプレイシステム | |
WO2024113839A1 (zh) | 机械臂的控制方法、车辆以及电子设备 | |
WO2023184140A1 (zh) | 显示方法、装置及系统 | |
CN117087578A (zh) | 姿态调整方法、系统、装置、电子设备和可读存储介质 | |
CN117596380A (zh) | 增强现实设备显示方法、增强现实设备和可读存储介质 |