TWI777333B - 用於設置虛擬對象的空間位置的方法和電子設備 - Google Patents
用於設置虛擬對象的空間位置的方法和電子設備 Download PDFInfo
- Publication number
- TWI777333B TWI777333B TW109144907A TW109144907A TWI777333B TW I777333 B TWI777333 B TW I777333B TW 109144907 A TW109144907 A TW 109144907A TW 109144907 A TW109144907 A TW 109144907A TW I777333 B TWI777333 B TW I777333B
- Authority
- TW
- Taiwan
- Prior art keywords
- electronic device
- virtual object
- spatial position
- initial
- posture
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000008859 change Effects 0.000 claims abstract description 71
- 206010034719 Personality change Diseases 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 8
- 238000006073 displacement reaction Methods 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 8
- 230000003190 augmentative effect Effects 0.000 description 7
- 238000003825 pressing Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000009466 transformation Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
一種用於設置虛擬對象的空間位置的方法和電子設備，方法包括：確定要設置空間位置的虛擬對象；獲得虛擬對象的初始空間位置；獲得電子設備的位置訊號，位置訊號包括：電子設備在初始時刻的初始位置以及電子設備的新的位置，和/或，電子設備的位置變化訊號；以及根據虛擬對象的初始空間位置、電子設備的初始位置、以及電子設備的新的位置來設置虛擬對象的空間位置，或者根據虛擬對象的初始空間位置以及電子設備的位置變化訊號來設置虛擬對象的空間位置。
Description
本發明涉及擴增實境或虛擬實境技術領域，尤其涉及一種用於設置虛擬對象的空間位置的方法和電子設備。
本部分的陳述僅僅是為了提供與本申請的技術方案有關的背景資訊，以幫助理解，其對於本申請的技術方案而言並不一定構成現有技術。
虛擬實境(Virtual Reality)技術是一種可以創建和體驗虛擬世界的計算機仿真技術，它利用計算機生成一種包含虛擬對象(例如，圖標、圖片、文字、表情符號、虛擬的三維物體、三維場景模型、一段動畫、一段視頻、等等)的模擬環境，使用戶能夠沉浸到該環境中。擴增實境(Augmented Reality)技術是一種將虛擬訊號與真實世界巧妙融合的技術，其可以將計算機生成的虛擬對象放置到通過電子設備(例如，手機、平板電腦、智能眼鏡、AR眼鏡、智能頭盔、智能手錶等)觀察到的真實世界中，從而使得虛擬對象與真實世界互為補充，實現對真實世界的“增強”。
為了實現良好的虛擬實境或擴增實境效果，經常需要將虛擬對象放置到空間中的準確位置並且經常需要調整虛擬對象的位置。在現有技術的一種方案中，可以在初始時在手機的視野中的預設位置或者選中位置處放置虛擬對象，然後通過用戶在手機屏幕上對虛擬對象的操作(例如，對虛擬對象的拖拽操作)來設置虛擬對象在三維空間中的位置。然而，手機屏幕上的操作是在二維平面上的操作，這使得其難以準確地或者方便地設置虛擬對象在三維空間中的位置。
因此，需要一種能夠方便、快捷地設置虛擬對象的空間位置的方法。
本發明提供一種用於設置虛擬對象的空間位置的方法和電子設備，克服了現有技術中操作的局限性和不便性，能夠方便、快捷地設置虛擬對象的空間位置。
本發明的一個方面涉及一種用於設置虛擬對象的空間位置的方法，包括：確定要設置空間位置的虛擬對象；獲得該虛擬對象的初始空間位置；獲得電子設備的位置訊號，該位置訊號包括：該電子設備在初始時刻的初始位置以及該電子設備的新的位置，和/或，該電子設備的位置變化訊號；以及根據該虛擬對象的初始空間位置、該電子設備的初始位置、以及該電子設備的新的位置來設置該虛擬對象的空間位置，或者根據該虛擬對象的初始空間位置以及該電子設備的位置變化訊號來設置該虛擬對象的空間位置。
在本發明之一實施例中，上述之方法更包括獲得該電子設備的姿態訊號，其中，該電子設備的位置和姿態訊號包括：該電子設備在初始時刻的初始位置和姿態以及該電子設備的新的位置和姿態，和/或，該電子設備的位置和姿態變化訊號；以及其中，該設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置、該電子設備的初始位置和姿態、以及該電子設備的新的位置和姿態來設置該虛擬對象的空間位置，或者根據該虛擬對象的初始空間位置以及該電子設備的位置和姿態變化訊號來設置該虛擬對象的空間位置。
在本發明之一實施例中，上述之電子設備的位置和姿態訊號包括：該電子設備在初始時刻的初始位置和姿態以及該電子設備的新的位置和姿態，和/或，該電子設備在初始時刻的初始位置和姿態以及該電子設備的位置和姿態變化訊號，以及其中，該設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號，設置該虛擬對象的空間位置。
在本發明之一實施例中，上述之根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的
位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置以及該電子設備的該初始位置和姿態，確定該虛擬對象相對於該電子設備的位置；以及根據該電子設備的新的位置和姿態以及該虛擬對象相對於該電子設備的位置，設置該虛擬對象的空間位置。
在本發明之一實施例中，上述之根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置以及該電子設備的該初始位置和姿態，確定該虛擬對象相對於該電子設備的位置；根據該電子設備的位置和姿態變化訊號以及該虛擬對象相對於該電子設備的位置，確定該虛擬對象的空間位置變化訊號；以及根據該虛擬對象的初始空間位置以及該虛擬對象的空間位置變化訊號，設置該虛擬對象的空間位置。
在本發明之一實施例中，上述之虛擬對象相對於該電子設備的位置始終保持不變。
在本發明之一實施例中，上述之虛擬對象相對於該電子設備的位置包括該虛擬對象相對於該電子設備的方向以及該虛擬對象相對於該電子設備的距離或深度；以及其中，該方法還包括：基於來自用戶的輸入訊號改變該虛擬對象相對於該電子設備的距離或深度。
在本發明之一實施例中，上述之電子設備的顯示媒介上呈現有選擇圖標，以及其中，該確定要設置空間位置的虛擬對象包括：當某個虛擬對象呈現於該選擇圖標所在的位置，並且接收到用戶的選擇指令時，將該虛擬對象確定為要設置空間位置的虛擬對象。
在本發明之一實施例中，上述之電子設備的位置變化訊號或姿態變化訊號是該電子設備在該初始時刻之後的位置變化訊號或姿態變化訊號。
本發明的另一個方面涉及一種存儲媒體，其中存儲有計算機程式，在該計算機程式被處理器執行時，能夠用於實現上述的方法。
本發明的再一個方面涉及一種電子設備，其包括處理器和存儲器，該存儲器中存儲有計算機程式，在該計算機程式被處理器執行時，能夠用於實現上述的方法。
本發明可以根據電子設備本身在三維空間中的位置或位姿變化來相應地調整虛擬對象在三維空間中的位置，克服了現有技術中通過二維平面(例如手機螢幕)進行操作的局限性和不便性，因此使得用戶能夠方便、快捷地設置虛擬對象的空間位置。
101~106:步驟流程
201:虛擬對象
202:電子設備
601~607:步驟流程
701~704:步驟流程
圖1是根據本申請的一個實施例的用於通過電子設備設置虛擬對象的空間位置的步驟流程圖。
圖2是根據一個實施例的座標變換示意圖。
圖3是圖2之(部分A或區域A)的局部放大示意圖。
圖4是當電子設備發生平移時虛擬對象的位置改變。
圖5是當電子設備進一步發生旋轉時虛擬對象的位置改變。
圖6是根據本申請的另一個實施例的用於通過電子設備設置虛擬對象的空間位置的步驟流程圖。
圖7是根據本申請的再一個實施例的用於通過電子設備設置虛擬對象的空間位置的的步驟流程圖。
為了使本發明的目的、技術方案及優點更加清楚明白，以下結合附圖通過具體實施例對本發明進一步詳細說明。應當理解，此處所描述的具體實施例僅用以解釋本發明，並不用於限制本發明。
本申請中的電子設備例如可以是手機、平板電腦、智慧眼鏡、AR/VR眼鏡、AR/VR頭盔、智慧手錶等，其具有圖像顯示媒介(例如，螢幕)，並且可選地可以具有圖像採集器件(例如，攝像頭)。在本申請的一些實施例中以手機為例進行了描述，但可以理解，這並非限制。在本申請的一些實施例中以擴增實境應用為例進行了描述，但可以理解，這並非限制，本申請的方案也可以適用於虛擬實境應用。
為讓本發明之上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式，作詳細說明如下。
圖1示出了根據本申請的一個實施例的用於通過電子設備設置虛擬對象的空間位置的方法，其包括如下步驟：
步驟101：確定要設置空間位置的虛擬對象。
在一個實施例中，電子設備的用戶可以選擇在電子設備的顯示媒介上呈現的某個虛擬對象以便設置其在空間中的位置。可以根據電子設備在空間中的位置和姿態訊號(統稱為位姿訊號)在電子設備的顯示媒介上呈現空間中已經存在的一個或多個虛擬對象，該一個或多個虛擬對象可以具有相應的空間位置。在擴增實境應用中，還可以在電子設備的顯示媒介上呈現通過電子設備的圖像採集器件採集到的空間的實景圖像，並且可以將虛擬對象與該實景圖像一起呈現在電子設備的顯示媒介上，從而實現擴增實境效果。用戶可以通過對電子設備進行操作來選擇在其顯示媒介上呈現的某個虛擬對象。在一個實施例中，用戶可以直接對電子設備的顯示媒介上呈現的某個虛擬對象進行操作(例如，單擊或雙擊該虛擬對象)來將其確定為要設置空間位置的虛擬對象。在一個實施例中，用戶可以先對電子設備的顯示媒介上呈現的某個虛擬對象進行操作以選中該虛擬對象，然後通過其他操作(例如，點擊電子設備的顯示媒介上呈現的某個虛擬按鍵，或者按壓電子設備上的某個物理按鍵)來將該虛擬對象確定為要設置空間位置的虛擬對象。在一個實施例中，可以在電子設備的顯示媒介上呈現一個用於標識選擇區域或者選擇點的選擇圖標(例如，圓環、十字星等)，用戶可以調整電子設備的位置或姿態以使得某個虛擬對象呈現於該選擇圖標所在的位置，此時，如果用戶對電子設備執行相應的操作(例如，點擊電子設備的顯示媒介上呈現的某個虛擬按鍵，或者按壓電子設備上的某個物理按鍵)，可以將該虛擬對象確定為要設置空間位置的虛擬對象。
在一個實施例中，可以將用戶剛剛添加到空間中的虛擬對象確定為要設置空間位置的虛擬對象。當用戶將某個虛擬對象添加到空間中時，該虛擬對象可以具有相對於電子設備的預設的或者隨機的位
置。
步驟102：獲得所述虛擬對象的初始空間位置。
虛擬對象的初始空間位置可以是其在空間的某一座標系中的位置(例如，座標)，該空間座標系例如可以是場所座標系(例如，針對某個房間、建築物、園區等建立的座標系)或者世界座標系。與虛擬對象的初始空間位置有關的訊號可以存儲於電子設備，也可以存儲於能夠被電子設備訪問的其他裝置，例如伺服器。
步驟103：獲得電子設備在初始時刻的初始位置和姿態。
可以以現有的以及未來可能出現的各種方式來確定電子設備在空間中的位置和姿態訊號(位姿訊號)。例如，電子設備可以通過其上的圖像採集器件對周圍場景進行視覺識別來確定其在空間中的位姿訊號。電子設備也可以通過與空間中佈置的標誌點(例如，視覺標誌點或者無線信號標誌點)進行交互來確定其在該空間中的位姿訊號。電子設備還可以使用內置的各種傳感器(例如，磁力傳感器、方向傳感器、重力傳感器、陀螺儀、加速度傳感器、衛星定位信號接收器等)來測量或跟蹤其位姿訊號。
所述初始時刻例如可以是確定要設置空間位置的虛擬對象的時刻，但也可以是在該時刻之後的其他時刻。例如，在確定要設置空間位置的虛擬對象之後，用戶可以通過電子設備執行某一操作來指示初始時刻。在初始時刻之後，電子設備的位置或姿態變化會對虛擬對象的空間位置產生影響。在一個實施例中，用戶可以通過一個操作確定要設置空間位置的虛擬對象，並可以將該操作的執行時刻作為初始時刻。在另一個實施例中，用戶可以通過一個操作確定要設置空間位置的虛擬對象，之後，用戶可以執行另一操作(例如，按下電子設備的某個虛擬按鍵或物理按鍵)來指示開始設置或調整虛擬對象的空間位置，並可以將該另一操作的執行時刻作為初始時刻。
步驟104：根據所述虛擬對象的初始空間位置以及所述電子設備的初始位置和姿態，確定所述虛擬對象相對於所述電子設備的位置。
在一個實施例中，虛擬對象的空間位置可以由該虛擬對象在空間座標系中的座標來表示。可以為電子設備本身設置一個以其為原點的電子設備座標系，電子設備座標系隨著電子設備的平移和旋轉而在空間座標系中發生平移和旋轉。電子設備或者電子設備座標系在空間座標系中的位置和姿態可以由旋轉矩陣R與位移向量t來表示，其中旋轉矩陣R為空間座標系與電子設備座標系之間的旋轉矩陣，其可以用於表示電子設備在空間座標系中的姿態訊號，位移向量t可以用於表示電子設備座標系的原點或者電子設備在空間座標系中的位置訊號。
圖2示出了根據一個實施例的座標變換示意圖，其中示出了虛擬對象201、電子設備202、以Oa為座標原點的空間座標系、以Ob或者電子設備202為座標原點的電子設備座標系。虛擬對象201具有在空間座標系中的位置座標。根據電子設備202在空間座標系中的位置和姿態，可以獲得空間座標系與電子設備座標系之間的旋轉矩陣R與位移向量t。基於虛擬對象201在空間座標系中的位置座標以及空間座標系與電子設備座標系之間的旋轉矩陣R與位移向量t，可以獲得虛擬對象201在電子設備座標系中的位置座標，也即虛擬對象201相對於電子設備202的位置訊號。使用旋轉矩陣R和位移向量t進行座標系變換是本領域的現有技術，在此不再贅述。
在確定了虛擬對象201相對於電子設備202的位置訊號之後，可以假設在虛擬對象201和電子設備202之間建立了一個由圖3中的虛線所示的“剛性連接”。如此，當電子設備202發生平移或旋轉而導致其在空間座標系中的位置或姿態發生改變時，相應地，由於所述剛性連接的存在，虛擬對象201在空間座標系中的位置也會發生改變，同時，虛擬對象201相對於電子設備202的位置始終保持不變。圖4示出了當電子設備202發生平移時虛擬對象201的位置改變。如圖4所示，當電子設備202在空間座標系中發生平移而改變位置時，虛擬對象201也會在空間座標系中發生同樣的平移並導致同樣的位置變化。圖5示出了當電子設備202進一步發生旋轉時虛擬對象201的位置改變。如圖5所示，當電子設備202在空間座標系中發生旋轉而改變姿態時，虛擬對象201
會在空間座標系中發生相應的位置變化，該位置變化取決於電子設備202的具體旋轉方式以及虛擬對象相對於所述電子設備的位置。
步驟105：在所述電子設備的位置或姿態發生改變後獲得所述電子設備的新的位置和姿態。
如上文所提到的，可以使用現有的以及未來可能出現的各種方式來確定電子設備在空間座標系中的新的位置和姿態訊號，其也對應於電子設備座標系的新的位置和姿態訊號。電子設備在空間座標系中的新的位置和姿態可以由空間座標系與新的電子設備座標系之間的旋轉矩陣R與位移向量t來表示。
步驟106：根據所述電子設備的新的位置和姿態以及所述虛擬對象相對於所述電子設備的位置，設置所述虛擬對象的空間位置。
重新參見圖2所示的座標變換示意圖，基於虛擬對象201相對於電子設備202的位置訊號(也即，虛擬對象201在電子設備座標系中的位置座標)以及空間座標系與新的電子設備座標系之間的旋轉矩陣R與位移向量t，可以進行座標變換以獲得虛擬對象201在空間座標系中的當前位置座標，並可以將該當前位置座標設置為虛擬對象201的新的空間位置。為虛擬對象201設置的新的空間位置可以被記錄或存儲。
在一個實施例中，用戶可以通過在電子設備上執行某個操作(例如，按下電子設備的某個虛擬按鍵或物理按鍵)來指示開始設置虛擬對象的空間位置，從而，虛擬對象的空間位置被配置為可以隨著電子設備的位置或姿態變化而發生變化。在將虛擬對象移動到期望的空間位置時，用戶可以在電子設備上執行另一操作以指示設置操作完成，並可以相應地解除對虛擬對象的選擇或者解除虛擬對象與電子設備之間的假設的剛性連接，從而，當電子設備的位置或姿態繼續發生變化時，不會改變虛擬對象的空間位置。
在一個實施例中，用戶可以通過按下電子設備的某個虛擬按鍵或物理按鍵來指示開始設置虛擬對象的空間位置，之後，用戶可以保持按壓所述按鍵並移動電子設備。當用戶將虛擬對象移動到期望的空間位置時，可以釋放所述按鍵以完成對虛擬對象的空間位置的設置。在
釋放所述按鍵之後，虛擬對象的空間位置可以被配置為不再隨著電子設備的位置或姿態變化而發生變化。
在電子設備的位置或姿態發生改變的過程中，可以在電子設備的顯示媒介上呈現虛擬對象，如此可以有利於用戶更直觀地設置虛擬對象的空間位置。
在一個實施例中，由於虛擬對象相對於電子設備的位置始終保持不變，因此在電子設備的位置或姿態發生改變的過程中，可以始終在電子設備的顯示媒介上的相同位置處呈現虛擬對象。
在另一個實施例中，在電子設備的位置和姿態發生改變的過程中，可以根據電子設備在空間座標系中的新的位置和姿態以及虛擬對象相對於電子設備的位置，更新虛擬對象在空間座標系中的位置，之後，可以根據電子設備在空間座標系中的位置和姿態以及虛擬對象在空間座標系中的位置，在電子設備的顯示媒介上的相應位置處呈現該虛擬對象。可以理解，由於虛擬對象相對於電子設備的位置始終不變，因此，始終會在電子設備的顯示媒介上的相同位置處呈現所述虛擬對象。
在一個實施例中，電子設備的顯示媒介上可以呈現通過電子設備的圖像採集器件採集到的空間的實景圖像，從而實現擴增實境應用。在另一個實施例中，電子設備的顯示媒介上也可以不呈現通過電子設備的圖像採集器件採集到的空間的實景圖像，從而實現虛擬實境應用。在虛擬實境應用中，電子設備中可以不具有圖像採集器件。
在圖1所示的實施例中，根據電子設備的新的位置和姿態以及虛擬對象相對於電子設備的位置，來設置虛擬對象的空間位置，但是，也可以根據電子設備的位置和姿態變化訊號以及虛擬對象相對於電子設備的位置，確定虛擬對象的空間位置變化訊號，從而設置虛擬對象的空間位置。圖6示出了根據本申請的另一個實施例的用於通過電子設備設置虛擬對象的空間位置的方法，其包括如下步驟(部分步驟與圖1所示的步驟類似，在此不再詳細解釋)：
步驟601：確定要設置空間位置的虛擬對象。
步驟602：獲得所述虛擬對象的初始空間位置。
步驟603：獲得電子設備在初始時刻的初始位置和姿態。
步驟604：根據所述虛擬對象的初始空間位置以及所述電子設備的初始位置和姿態，確定所述虛擬對象相對於所述電子設備的位置。
如上文提到的，虛擬對象相對於電子設備的位置可以由虛擬對象在電子設備座標系中的位置座標來表示。
步驟605：獲得所述電子設備在所述初始時刻之後的位置和姿態變化訊號。
可以使用現有的以及未來可能出現的各種方式來確定電子設備在空間中的位置和姿態變化訊號。例如，電子設備還可以使用內置的各種傳感器(例如，磁力傳感器、方向傳感器、重力傳感器、陀螺儀、加速度傳感器、衛星定位信號接收器等)通過例如慣性導航、視覺里程計、SLAM、VSLAM、SFM等來測量或跟蹤其位置變化和/或姿態變化。
步驟606：根據所述電子設備的位置和姿態變化訊號以及所述虛擬對象相對於所述電子設備的位置，確定所述虛擬對象的空間位置變化訊號。
在一個實施例中，根據電子設備的位置和姿態變化訊號，可以確定電子設備所經歷的平移變化和旋轉變化。電子設備的平移可以導致虛擬對象的空間位置發生同樣的平移，參見圖4所示。電子設備的旋轉可以導致虛擬對象的空間位置發生與該旋轉對應的空間位置變化，參見圖5所示，該空間位置變化取決於電子設備的具體旋轉方式以及虛擬對象相對於電子設備的位置。
步驟607：根據所述虛擬對象的初始空間位置以及所述虛擬對象的空間位置變化訊號，設置所述虛擬對象的空間位置。
根據虛擬對象的初始空間位置以及虛擬對象的空間位置變化訊號，可以計算出虛擬對象的當前空間位置。虛擬對象的當前空間位置可以被設置為虛擬對象的新的空間位置，並且可以被記錄或者存儲。
圖1和圖6所示的兩種方法的區別在於，根據圖1所示的方法，並不需要始終跟蹤電子設備的位置和姿態變化，只需要確定電子設備的初始位置和姿態以及最終位置和姿態即可；而根據圖6所示的方法，並不需要確定電子設備的最終位置和姿態，只需要跟蹤其位置和姿態變化訊號即可。可以理解，這兩種方法的實際原理是類似的，因為根據電子設備的初始位置和姿態以及最終位置和姿態，可以計算出其位置和姿態變化訊號；相應地，根據電子設備的初始位置和姿態以及其位置和姿態變化訊號，也可以計算出電子設備的最終位置和姿態。因此，在一個更具一般性的實施例中，提供了一種用於設置虛擬對象的空間位置的方法，其包括：確定要設置空間位置的虛擬對象；獲得所述虛擬對象的初始空間位置；獲得電子設備在初始時刻的初始位置和姿態；獲得所述電子設備的新的位置和姿態或者所述電子設備在所述初始時刻後的位置和姿態變化訊號；以及根據所述虛擬對象的初始空間位置、所述電子設備的初始位置和姿態、以及所述電子設備的新的位置和姿態或者所述電子設備在所述初始時刻之後的位置和姿態變化訊號，設置所述虛擬對象的空間位置。
在上文的一些實施例中，在調整或設置虛擬對象的空間位置的過程中，在電子設備和虛擬對象之間建立了假設的“剛性連接”，但是需要強調的是，這並非對本發明的限制。在本申請的其他一些實施例中，在確定要設置空間位置的虛擬對象之後，可以根據電子設備的新的位置或位姿或者電子設備的位置或位姿變化訊號以其他任何期望的方式或規則來設置虛擬對象的空間位置。
在一個實施例中，可以根據虛擬對象的初始空間位置以及電子設備的初始位置和姿態，確定虛擬對象相對於電子設備的位置，其包括虛擬對象相對於電子設備的方向以及虛擬對象相對於電子設備的距離或深度。在調整或設置虛擬對象的空間位置的過程中，電子設備的用戶可以通過電子設備的操作元件來提供輸入訊號，以改變或調整虛擬對象相對於電子設備的距離或深度，同時，虛擬對象相對於電子設備的方向保持不變。也即，在圖3中的虛線所示的“剛性連接”相對於電子設備的
方向保持不變的情況下，改變該“剛性連接”的長度。電子設備的操作元件可以是電子設備的顯示媒介上呈現的虛擬操作元件，也可以是電子設備上具有的物理操作元件。在一個實施例中，操作元件可以是在電子設備的顯示媒介上呈現的滑動條，通過拖動滑動條的滑塊，可以改變虛擬對象相對於電子設備的距離或深度。虛擬對象相對於電子設備的距離可以是指虛擬對象到電子設備的直線距離。虛擬對象相對於電子設備的深度例如可以是指虛擬對象相對於電子設備所處的平面或者電子設備的圖像採集器件的成像平面的垂直距離。本領域技術人員可以理解，由於虛擬對象相對於電子設備的方向保持不變，因此設置虛擬對象相對於電子設備的距離實際上會相應地設置虛擬對象相對於電子設備的深度，反之亦然，因此，設置距離和設置深度在很多情況下具有相同的效果。可以在設置虛擬對象相對於電子設備的距離或深度時，在電子設備的顯示媒介上實時地顯示當前設置的距離或深度的數值。在一些實施例中，可以根據虛擬對象相對於電子設備的距離或深度來改變所呈現的虛擬對象的大小或尺寸。
在一個實施例中，可以僅考慮電子設備的位置訊號，並根據電子設備的位置或者位置變化來改變虛擬對象的空間位置。在一種方式中，可以根據電子設備的初始位置以及電子設備的新的位置來確定電子設備的位移，從而對虛擬對象的初始空間位置進行更改。在另一種方式中，可以跟蹤電子設備的位置變化訊號並根據電子設備的位置變化訊號對虛擬對象的初始空間位置進行更改。圖7示出了根據本申請的一個實施例的用於通過電子設備設置虛擬對象的空間位置的方法，其根據電子設備的位置或者位置變化來改變虛擬對象的空間位置，並包括如下步驟：步驟701：確定要設置空間位置的虛擬對象；步驟702：獲得所述虛擬對象的初始空間位置；步驟703：獲得電子設備的位置訊號，所述位置訊號包括：所述電子設備在初始時刻的初始位置以及所述電子設備的新的位置，和/或，所述電子設備的位置變化訊號；以及
步驟704：根據所述虛擬對象的初始空間位置、所述電子設備的初始位置、以及所述電子設備的新的位置來設置所述虛擬對象的空間位置，或者根據所述虛擬對象的初始空間位置以及所述電子設備的位置變化訊號來設置所述虛擬對象的空間位置。在一個實施例中，當根據電子設備的位置或位姿變化來改變虛擬對象的空間位置時，電子設備的位置變化量(也即位移量)與虛擬對象的位置變化量是相同的。在另一個實施例中，當根據電子設備的位置或位姿變化來改變虛擬對象的空間位置時，可以設置電子設備的位置變化量與虛擬對象的位置變化量之間的縮放比例。在一種情況下，可以使得電子設備的位置變化量大於虛擬對象的位置變化量，這種情況適合於通過電子設備對虛擬對象的空間位置進行精細調整。在另一種情況下，可以使得電子設備的位置變化量小於虛擬對象的位置變化量，這種情況適合於通過電子設備的小的位移變化對虛擬對象的空間位置進行大幅度調整。
在本發明的一個實施例中，可以以計算機程式的形式來實現本發明。計算機程式可以存儲於各種存儲媒體(例如，硬盤、光盤、閃存等)中，當該計算機程式被處理器執行時，能夠用於實現本發明的方法。
在本發明的另一個實施例中，可以以電子設備的形式來實現本發明。該電子設備包括處理器和存儲器，在存儲器中存儲有計算機程式，當該計算機程式被處理器執行時，能夠用於實現本發明的方法。
本文中針對“各個實施例”、“一些實施例”、“一個實施例”、或“實施例”等的參考指代的是結合所述實施例所描述的特定特徵、結構、或性質包括在至少一個實施例中。因此，短語“在各個實施例中”、“在一些實施例中”、“在一個實施例中”、或“在實施例中”等在整個本文中各處的出現並非必須指代相同的實施例。此外，特定特徵、結構、或性質可以在一個或多個實施例中以任何合適方式組合。因此，結合一個實施例中所示出或描述的特定特徵、結構或性質可以整體地或部分地與一個或多個其他實施例的特徵、結構、或性質無限制地組合，只要該組合不是不符合邏輯的或不能工作。本文中出現的類似於“根據A”、“基於A”、“通
過A”或“使用A”的表述意指非排他性的，也即，“根據A”可以涵蓋“僅僅根據A”，也可以涵蓋“根據A和B”，除非特別聲明其含義為“僅僅根據A”。在本申請中為了清楚說明，以一定的順序描述了一些示意性的操作步驟，但本領域技術人員可以理解，這些操作步驟中的每一個並非是必不可少的，其中的一些步驟可以被省略或者被其他步驟替代。這些操作步驟也並非必須以所示的方式依次執行，相反，這些操作步驟中的一些可以根據實際需要以不同的順序執行，或者並行執行，只要新的執行方式不是不符合邏輯的或不能工作。
由此描述了本發明的至少一個實施例的幾個方面，可以理解，對本領域技術人員來說容易地進行各種改變、修改和改進。這種改變、修改和改進意於在本發明的精神和範圍內。雖然本發明已經通過優選實施例進行了描述，然而本發明並非局限於這裡所描述的實施例，在不脫離本發明範圍的情況下還包括所作出的各種改變以及變化。
雖然本發明以前述實施例揭露如上，然其並非用以限定本發明，任何熟習相像技藝者，在不脫離本發明之精神和範圍內，所作更動與潤飾之等效替換，仍為本發明之專利保護範圍內。
701~704:步驟流程
Claims (14)
- 一種用於設置虛擬對象的空間位置的方法，包括：確定要設置空間位置的虛擬對象；獲得該虛擬對象的初始空間位置；獲得該電子設備的位置和姿態訊號，其中，該電子設備的位置和姿態訊號包括：該電子設備在初始時刻的初始位置和姿態以及該電子設備的新的位置和姿態，和/或，該電子設備的位置和姿態變化訊號；根據該虛擬對象的初始空間位置、該電子設備的初始位置和姿態、以及該電子設備的新的位置和姿態來設置該虛擬對象的空間位置，或者根據該虛擬對象的初始空間位置以及該電子設備的位置和姿態變化訊號來設置該虛擬對象的空間位置。
- 一種用於設置虛擬對象的空間位置的方法，包括：確定要設置空間位置的虛擬對象；獲得該虛擬對象的初始空間位置；獲得該電子設備的位置和姿態訊號，其中該電子設備的位置和姿態訊號包括：該電子設備在初始時刻的初始位置和姿態以及該電子設備的新的位置和姿態，和/或，該電子設備在初始時刻的初始位置和姿態以及該電子設備的位置和姿態變化訊號；根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號，設置該虛擬對象的空間位置。
- 如申請專利範圍第2項所述之用於設置虛擬對象的空間位置的方法，其中該根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置以及該電子設備的該初始位置和姿態，確定該虛擬對象相對於該電子設備的位置；以及根據該電子設備的新的位置和姿態以及該虛擬對象相對於該電子設備的位置，設置該虛擬對象的空間位置。
- 如申請專利範圍第2項所述之用於設置虛擬對象的空間位置的方法，其中該根據該虛擬對象的初始空間位置、該電子設備的該初始位置和姿態、以及該電子設備的新的位置和姿態或者該電子設備在該初始時刻之後的位置和姿態變化訊號設置該虛擬對象的空間位置包括：根據該虛擬對象的初始空間位置以及該電子設備的該初始位置和姿態，確定該虛擬對象相對於該電子設備的位置；根據該電子設備的位置和姿態變化訊號以及該虛擬對象相對於該電子設備的位置，確定該虛擬對象的空間位置變化訊號；以及根據該虛擬對象的初始空間位置以及該虛擬對象的空間位置變化訊號，設置該虛擬對象的空間位置。
- 如申請專利範圍第3或4項所述之用於設置虛擬對象的空間位置的方法，其中該虛擬對象相對於該電子設備的位置始終保持不變。
- 如申請專利範圍第3或4項所述之用於設置虛擬對象的空間位置的方法，其中該虛擬對象相對於該電子設備的位置包括該虛擬對象相對於該電子設備的方向以及該虛擬對象相對於該電子設備的距離或深度；以及其中，該方法還包括：基於來自用戶的輸入訊號改變該虛擬對象相對於該電子設備的距離或深度。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中在該初始時刻之後，該電子設備的位置或姿態變化對該虛擬對象的空間位置產生影響。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中在該電子設備的顯示媒介上呈現有選擇圖標，以及其中，該確定要設置空間位置的虛擬對象包括：當某個虛擬對象呈現於該選擇圖標所在的位置，並且接收到用戶的選擇指令時，將該虛擬對象確定為要設置空間位置的虛擬對象。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中，當該電子設備的某個虛擬按鍵或物理按鍵 被用戶按壓時，隨著該電子設備的位置或姿態變化而設置該虛擬對象的空間位置；以及其中，當該虛擬按鍵或物理按鍵被用戶釋放時，該虛擬對象的空間位置被配置為不再隨著該電子設備的位置或姿態變化而發生變化。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中該電子設備的位置變化訊號或姿態變化訊號是該電子設備在該初始時刻之後的位置變化訊號或姿態變化訊號。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中該電子設備的位置變化量與該虛擬對象的位置變化量相等。
- 如申請專利範圍第1-4項中任一項所述之用於設置虛擬對象的空間位置的方法，其中該電子設備的位置變化量與該虛擬對象的位置變化量不相等。
- 一種存儲媒體，其中存儲有計算機程式，在該計算機程式被處理器執行時，能夠用於實現如申請專利範圍第1-12項中任一項所述之方法。
- 一種電子設備，包括處理器和與該處理器電信連接的存儲器，該存儲器中存儲有計算機程式，在該計算機程式被處理器執行時，能夠用於實現如申請專利範圍第1-12項中任一項所述之方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911322368.9A CN113012214A (zh) | 2019-12-20 | 2019-12-20 | 用于设置虚拟对象的空间位置的方法和电子设备 |
| CNCN201911322368.9 | 2019-12-20 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW202125203A TW202125203A (zh) | 2021-07-01 |
| TWI777333B true TWI777333B (zh) | 2022-09-11 |
Family
ID=76382113
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW109144907A TWI777333B (zh) | 2019-12-20 | 2020-12-18 | 用於設置虛擬對象的空間位置的方法和電子設備 |
Country Status (3)
| Country | Link |
|---|---|
| CN (1) | CN113012214A (zh) |
| TW (1) | TWI777333B (zh) |
| WO (1) | WO2021121061A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114415839A (zh) * | 2022-01-27 | 2022-04-29 | 歌尔科技有限公司 | 一种信息显示方法、装置、设备及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103391357A (zh) * | 2012-05-09 | 2013-11-13 | 北京千橡网景科技发展有限公司 | 与移动终端相关的方法和装置 |
| CN103858073A (zh) * | 2011-09-19 | 2014-06-11 | 视力移动技术有限公司 | 增强现实系统的免触摸界面 |
| CN107861682A (zh) * | 2017-11-03 | 2018-03-30 | 网易（杭州）网络有限公司 | 虚拟对象的移动控制方法和装置 |
| CN108543309A (zh) * | 2018-04-03 | 2018-09-18 | 网易（杭州）网络有限公司 | 在增强现实中控制虚拟控制对象移动的方法、装置及终端 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5116424B2 (ja) * | 2007-10-09 | 2013-01-09 | 任天堂株式会社 | ゲームプログラムおよびゲーム装置 |
| KR20140068410A (ko) * | 2012-11-28 | 2014-06-09 | 삼성전자주식회사 | 물리 엔진 기반의 사용자 인터페이스를 제공하는 방법 및 그 전자 장치 |
| US20180210628A1 (en) * | 2017-01-23 | 2018-07-26 | Snap Inc. | Three-dimensional interaction system |
| CN108520552A (zh) * | 2018-03-26 | 2018-09-11 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN109782901A (zh) * | 2018-12-06 | 2019-05-21 | 网易（杭州）网络有限公司 | 增强现实交互方法、装置、计算机设备及存储介质 |
-
2019
- 2019-12-20 CN CN201911322368.9A patent/CN113012214A/zh active Pending
-
2020
- 2020-12-07 WO PCT/CN2020/134218 patent/WO2021121061A1/zh active Application Filing
- 2020-12-18 TW TW109144907A patent/TWI777333B/zh not_active IP Right Cessation
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103858073A (zh) * | 2011-09-19 | 2014-06-11 | 视力移动技术有限公司 | 增强现实系统的免触摸界面 |
| CN103391357A (zh) * | 2012-05-09 | 2013-11-13 | 北京千橡网景科技发展有限公司 | 与移动终端相关的方法和装置 |
| CN107861682A (zh) * | 2017-11-03 | 2018-03-30 | 网易（杭州）网络有限公司 | 虚拟对象的移动控制方法和装置 |
| CN108543309A (zh) * | 2018-04-03 | 2018-09-18 | 网易（杭州）网络有限公司 | 在增强现实中控制虚拟控制对象移动的方法、装置及终端 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021121061A1 (zh) | 2021-06-24 |
| TW202125203A (zh) | 2021-07-01 |
| CN113012214A (zh) | 2021-06-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12079942B2 (en) | Augmented and virtual reality | |
| US10657716B2 (en) | Collaborative augmented reality system | |
| US11275481B2 (en) | Collaborative augmented reality system | |
| Arth et al. | The history of mobile augmented reality | |
| KR101433305B1 (ko) | 증강 현실 환경을 위한 모바일 디바이스 기반 콘텐츠 맵핑 | |
| US10423234B2 (en) | Facilitate user manipulation of a virtual reality environment | |
| US20180350145A1 (en) | Augmented Reality Devices and Methods Thereof for Rendering Virtual Objects | |
| EP2814000B1 (en) | Image processing apparatus, image processing method, and program | |
| KR20220035380A (ko) | 증강 현실 장면들을 위한 시스템 및 방법 | |
| US20160054791A1 (en) | Navigating augmented reality content with a watch | |
| CN115335894A (zh) | 用于虚拟和增强现实的系统和方法 | |
| US11532138B2 (en) | Augmented reality (AR) imprinting methods and systems | |
| JP2016122392A (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
| US20230405475A1 (en) | Shooting method, apparatus, device and medium based on virtual reality space | |
| TWI777333B (zh) | 用於設置虛擬對象的空間位置的方法和電子設備 | |
| WO2019095360A1 (zh) | 虚拟场景中菜单处理方法、装置及存储介质 | |
| JP6152888B2 (ja) | 情報処理装置、その制御方法、及びプログラム、並びに、情報処理システム、その制御方法、及びプログラム | |
| US9912872B2 (en) | Method for controlling a graphical interface for displaying images of a three-dimensional object | |
| CN113421343B (zh) | 基于增强现实观测设备内部结构的方法 | |
| CN113010005A (zh) | 用于设置虚拟对象在空间中的位置的方法和电子设备 | |
| Asiminidis | Augmented and Virtual Reality: Extensive Review | |
| Oravec | Interaction with 3D Objects in Augmented Reality on Android Platform | |
| CN117591054A (zh) | 显示方法、头戴式显示设备、计算设备以及存储介质 | |
| JP6744543B2 (ja) | 情報処理システム、その制御方法、及びプログラム | |
| Kozlíková et al. | Spatial Interaction for the Post-Processing of 3D CFD Datasets |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GD4A | Issue of patent certificate for granted invention patent | ||
| MM4A | Annulment or lapse of patent due to non-payment of fees |