TWI782332B - 一種擴增實境資料呈現方法、設備及儲存媒體 - Google Patents

一種擴增實境資料呈現方法、設備及儲存媒體 Download PDF

Info

Publication number
TWI782332B
TWI782332B TW109133816A TW109133816A TWI782332B TW I782332 B TWI782332 B TW I782332B TW 109133816 A TW109133816 A TW 109133816A TW 109133816 A TW109133816 A TW 109133816A TW I782332 B TWI782332 B TW I782332B
Authority
TW
Taiwan
Prior art keywords
virtual object
real
special effect
target
effect data
Prior art date
Application number
TW109133816A
Other languages
English (en)
Other versions
TW202117502A (zh
Inventor
侯欣如
Original Assignee
中國商北京市商湯科技開發有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中國商北京市商湯科技開發有限公司 filed Critical 中國商北京市商湯科技開發有限公司
Publication of TW202117502A publication Critical patent/TW202117502A/zh
Application granted granted Critical
Publication of TWI782332B publication Critical patent/TWI782332B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本揭露涉及一種擴增實境資料呈現方法、電子設備及儲存媒體,所述方法包括:獲取擴增實境AR設備的位置資訊;在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料;基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。

Description

一種擴增實境資料呈現方法、設備及儲存媒體
本揭露基於申請號為201910979920.5、申請日為2019年10月15日的中國專利申請提出,並要求該中國專利申請的優先權,該中國專利申請的全部內容在此以引入方式併入本揭露。本揭露涉及擴增實境技術領域,涉及一種擴增實境資料呈現方法、設備及儲存媒體。
擴增實境(Augmented Reality,AR)技術,透過將實體資訊(視覺資訊、聲音、觸覺等)透過模擬後,疊加到真實世界中,從而將真實的環境和虛擬的物體即時地在同一個畫面或空間呈現。對AR設備呈現的擴增實境場景的效果的最佳化,愈發重要。
有鑑於此,本揭露至少提供一種擴增實境資料呈現方法、設備及儲存媒體。
本揭露的技術方案依如下方式實現: 第一方面,本揭露提供了一種擴增實境資料呈現方法,包括:獲取擴增實境AR設備的位置資訊;在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料;基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。透過這種方法,每個目標實境區域具有關聯的虛擬物件,關聯的該虛擬物件可以位於該目標實境區域內,也可以位於目標實境區域外,本揭露實施例中在AR設備位於目標實境區域後,展示與該目標實境區域關聯的虛擬物件的特效資料,滿足了在不同實境區域進行虛擬物件展示的個人化需求。
在一種可能的實施方式中,所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內的虛擬物件的特效資料;和/或,獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料。在上述實施方式中,虛擬物件的特效資料可以位於目標實境區域的位置範圍內,也可以位於目標實境區域的位置範圍外,因此,位於目標實境區域內的AR設備可以展示包含目標實境區域內的虛擬物件的特效資料的擴增實境資料,也可以展示包含目標實境區域外的虛擬物件的特效資料的擴增實境資料,增加了虛擬物件的特效資料呈現的多樣性。
在一種可能的實施方式中,所述獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料,包括:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外、且符合預設條件的虛擬物件的特效資料;其中,所述預設條件包括以下至少一種:所述虛擬物件在實境場景中對應的地理位置到所述目標實境區域的距離在設定距離範圍內;所述AR設備的拍攝角度位於設定角度範圍內。這裡,在位於目標實境區域內的AR設備呈現目標實境區域外的虛擬物件的特效資料的情況下,透過限定位於目標實境區域外的虛擬物件的呈現條件,可以使得虛擬物件的呈現更加符合實境場景,比如,在實境場景下,在距離某個位置較遠,或者視覺角度沒有朝向該位置的情況下,可能就無法觀察到該位置處的實體物件。
在一種可能的實施方式中,所述檢測出所述位置資訊位於目標實境區域的位置範圍內,包括:在所述位置資訊的地理座標落入所述目標實境區域的地理座標範圍內的情況下,檢測出所述位置資訊位於所述目標實境區域的位置範圍內。
在另外一種可能的實施方式中,所述檢測出所述位置資訊位於目標實境區域的位置範圍內,包括:基於所述AR設備的位置資訊和所述虛擬物件在實境場景中對應的地理位置資訊,確定所述AR設備與所述虛擬物件在實境場景中對應的地理位置之間的距離;在確定的距離小於設定距離閾值的情況下,確定所述位置資訊位於所述目標實境區域的位置範圍內。上述兩種實施方式中提供了兩種不同的檢測位置資訊位於目標實境區域的位置範圍內的方法,在一些實施例中可以根據區域劃定的難易程度來確定使用哪種方式,比如若預先設置區域的位置座標範圍比較方便,則基於預設的目標實境區域的位置座標範圍來判斷,否則,可以基於距離的方式來判斷。
在一種可能的實施方式中,所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:檢測所述AR設備的拍攝角度;獲取與所述目標實境區域和所述拍攝角度共同關聯的虛擬物件的特效資料。除了根據位置資訊獲取虛擬物件的特效資料外,還可以增加虛擬物件的特效資料與AR設備的拍攝角度之間的關聯關係,由此提高虛擬物件的特效資料與目標實境區域之間的關聯的緊密度。
在一種可能的實施方式中,所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:獲取所述AR設備在實境場景的位姿數據,其中,所述位姿數據包括位置資訊和/或拍攝角度;基於所述AR設備在實境場景的位姿數據、和所述虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,確定與所述目標實境區域匹配的所述虛擬物件的特效資料。這裡,由於三維場景模型可以還原實境場景,預先基於該三維場景模型構建的虛擬物件的位姿數據,在實境場景下的融入性更好,本揭露實施例從預先基於該三維場景模型構建的虛擬物件的位姿數據中,確定出與AR設備在實境場景的位姿數據相匹配的虛擬物件的特效資料,從而使得展示出來的虛擬物件的特效資料能夠較好地融入實境場景。
第二方面,本揭露提供了另一種擴增實境場景呈現方法,包括:檢測擴增實境AR設備的拍攝角度;獲取與所述拍攝角度關聯的虛擬物件的特效資料;基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。透過這種方法,虛擬物件可以與AR設備的拍攝角度關聯,可以根據虛擬物件的類型來設置關聯的拍攝角度,比如,對於煙花特效,可以與拍攝星空時對應的角度範圍關聯。這樣,可以使得虛擬物件更加符合實境場景,並且識別方式簡單高效。另外,可以根據AR設備的拍攝角度的不同,獲取不同的虛擬物件的特效資料,由此可以在同一AR設備中,在不同的拍攝角度下,展示包含不同虛擬物件的特效資料的擴增實境資料,最佳化擴增實境場景呈現的效果。
第三方面,本揭露提供了一種擴增實境資料呈現裝置,包括:第一獲取模組,配置為獲取擴增實境AR設備的位置資訊,並傳輸至第二獲取模組;第二獲取模組,配置為在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料,並傳輸至第一展示模組;第一展示模組,配置為基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
在一種可能的實施方式中,所述第二獲取模組,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內的虛擬物件的特效資料;和/或,獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料。
在一種可能的實施方式中,所述第二獲取模組,在獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料時,配置為:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外、且符合預設條件的虛擬物件的特效資料;其中,所述預設條件包括以下至少一種:所述虛擬物件在實境場景中對應的地理位置到所述目標實境區域的距離在設定距離範圍內;所述AR設備的拍攝角度位於設定角度範圍內。
在一種可能的實施方式中,所述第二獲取模組,在檢測出所述位置資訊位於目標實境區域的位置範圍內時,配置為:在所述位置資訊的地理座標落入所述目標實境區域的地理座標範圍內的情況下,檢測出所述位置資訊位於所述目標實境區域的位置範圍內。
在一種可能的實施方式中,所述第二獲取模組,在檢測出所述位置資訊位於目標實境區域的位置範圍內時,配置為:基於所述AR設備的位置資訊和所述虛擬物件在實境場景中對應的地理位置資訊,確定所述AR設備與所述虛擬物件在實境場景中對應的地理位置之間的距離;在確定的距離小於設定距離閾值的情況下,確定所述位置資訊位於所述目標實境區域的位置範圍內。
在一種可能的實施方式中,所述第二獲取模組,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為:檢測所述AR設備的拍攝角度;獲取與所述目標實境區域和所述拍攝角度共同關聯的虛擬物件的特效資料。
在一種可能的實施方式中,所述第二獲取模組,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為:獲取所述AR設備在實境場景的位姿數據;基於所述AR設備在實境場景的位姿數據、和所述虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,確定與所述目標實境區域關聯的所述虛擬物件的特效資料。
第四方面,本揭露提供一種擴增實境資料呈現裝置,包括:檢測模組,配置為檢測擴增實境AR設備的拍攝角度,並傳輸至第三獲取模組;第三獲取模組,配置為獲取與所述拍攝角度關聯的虛擬物件的特效資料,並傳輸至第二展示模組;第二展示模組,配置為基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
第五方面,本揭露提供一種電子設備,包括:處理器、記憶體和匯流排,所述記憶體儲存有所述處理器可執行的機器可讀指令,當電子設備運行時,所述處理器與所述記憶體之間透過匯流排通訊,所述機器可讀指令被所述處理器執行時執行如上述第一方面或任一實施方式、或執行如上述第二方面所述的擴增實境資料呈現方法的步驟。
第六方面,本揭露提供一種電腦可讀儲存媒體,該電腦可讀儲存媒體上儲存有電腦程式,該電腦程式被處理器運行時執行如上述第一方面或任一實施方式、或執行如上述第二方面所述的擴增實境資料呈現方法的步驟。
本揭露提供了一種電腦程式產品,包括電腦可讀代碼,當所述電腦可讀代碼在電子設備中運行時,所述電子設備中的處理器執行用於實現上述一個或多個實施例中伺服器執行上述方法。
根據本揭露提供的一種擴增實境資料呈現方法,每個目標實境區域具有關聯的虛擬物件,關聯的該虛擬物件可以位於該目標實境區域內,也可以位於目標實境區域外,本揭露實施例中在AR設備位於目標實境區域後,展示與該目標實境區域關聯的虛擬物件的特效資料,滿足了在不同實境區域進行虛擬物件展示的個人化需求。
關於上述擴增實境資料呈現裝置、電子設備、及電腦可讀儲存媒體的效果描述參見上述擴增實境資料呈現方法的說明,這裡不再贅述。
為使本揭露的上述目的、特徵和優點能更明顯易懂,下文特舉較佳實施例,並配合所附附圖,作詳細說明如下。
為使本揭露實施例的目的、技術方案和優點更加清楚,下面將結合本揭露實施例中的附圖,對本揭露實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例僅僅是本揭露一部分實施例,而不是全部的實施例。通常在此處附圖中描述和示出的本揭露實施例的元件可以以各種不同的配置來佈置和設計。因此,以下對在附圖中提供的本揭露的實施例的詳細描述並非旨在限制要求保護的本揭露的範圍,而是僅僅表示本揭露的選定實施例。基於本揭露的實施例,本領域技術人員在沒有做出進步性勞動的前提下所獲得的所有其他實施例,都屬於本揭露保護的範圍。
本揭露可適用於支援AR技術的電子設備(如手機、平板、AR眼鏡等)或伺服器,或者其組合,在本揭露應用於伺服器的情況下,該伺服器可以與其他具有通訊功能且具有攝影機的電子設備連接,其連接方式可以是有線連接或無線連接,無線連接例如可以為藍牙連接、無線寬頻(Wireless Fidelity,WIFI)連接等。
AR設備中呈現擴增實境場景,即為在AR設備中展示融入到實境場景的虛擬物件,可以是直接將虛擬物件的呈現畫面渲染出來,使之與實境場景融合,比如呈現一套虛擬的茶具,使之顯示效果是放置在實境場景中的真實桌面上,也可以是將虛擬物件的呈現特效與實境場景圖像融合後,展示融合後的顯示畫面;選擇何種呈現方式取決於AR設備的設備類型和採用的畫面呈現技術,比如,一般地,由於從AR眼鏡中可以直接看到實境場景(並非成像後的實境場景圖像),因此AR眼鏡可以採用直接將虛擬物件的呈現畫面渲染出來的呈現方式;對於手機、平板電腦等移動終端設備,由於在移動終端設備中展示的是對實境場景成像後的畫面,因此可以採用將實境場景圖像與虛擬物件的呈現特效進行融合處理的方式,來展示擴增實境效果。
本揭露實施例中,為每個目標實境區域關聯了可以在該目標實境區域展示的虛擬物件的特效資料,目標實境區域關聯的該虛擬物件可以位於該目標實境區域內,也可以位於目標實境區域外,可以滿足在不同目標實境區域進行虛擬物件展示的個人化需求。
下面對本揭露實施例所涉及的一種擴增實境資料呈現方法進行詳細介紹。
參見第1圖所示,為本揭露實施例所提供的一種擴增實境資料呈現方法的流程示意圖,包括以下幾個步驟: S101、獲取擴增實境AR設備的位置資訊。
S102、在檢測出位置資訊位於目標實境區域的位置範圍內的情況下,獲取與目標實境區域關聯的虛擬物件的特效資料。
S103、基於虛擬物件的特效資料,在AR設備中展示包括虛擬物件的特效資料的擴增實境資料。
檢測AR設備的位置資訊位於目標實境區域的位置範圍內,可以執行以下方法中的任意一種方法: 方法一、位置資訊的地理座標落入目標實境區域的地理座標範圍內,可以檢測出位置資訊位於目標實境區域的位置範圍內。
在一些實施例中,可以預先儲存或者預先設置目標實境區域的地理座標範圍,然後檢測AR設備的位置資訊對應的地理座標是否在目標實境區域的地理座標範圍內,若是,則確定AR設備的位置資訊位於目標實境區域的位置範圍內,若否,則確定AR設備的位置資訊不在目標實境區域的位置範圍內。
這裡,與目標實境區域關聯的虛擬物件的特效資料,能夠在該目標實境區域內的AR設備中,虛擬物件實際融入到的實境場景位置並不一定在該目標實境區域,比如,在某大廈樓頂,可以看到對面大廈樓頂的虛擬物件特效畫面。若AR設備的位置資訊不在目標實境區域的位置範圍內,則不在該AR設備上呈現與該目標實境區域關聯的虛擬物件的特效資料,比如,AR設備進入圓明園遺址區域後,可以呈現還原後的圓明園特效畫面,對於不在該圓明園遺址區域內的AR設備,不進行還原後的圓明園特效畫面的呈現。
方法二、基於AR設備的位置資訊和虛擬物件在實境場景中對應的地理位置資訊,確定AR設備與虛擬物件在實境場景中對應的地理位置之間的距離,然後在確定的距離小於設定距離的情況下,確定位置資訊位於目標實境區域的位置範圍內。
上述方法二適用於虛擬物件位於目標實境區域內的情況,這裡,目標實境區域是指以虛擬物件在實境場景中對應的地理位置為中心,以設定距離為半徑的區域,檢測AR設備的位置資訊是否在目標實境區域內,可以理解為檢測AR設備的位置與虛擬物件之間的距離是否小於設定距離。
該方法提供了直接基於AR設備與虛擬物件在實境場景中的地理位置之間的距離,來判斷是否在AR設備呈現該虛擬物件的方式,利用的是AR設備的地理位置座標資訊和虛擬物件在實境場景中對應的地理位置座標資訊。
在一種可能的實施方式中,與目標實境區域關聯的虛擬物件可以是虛擬物體、聲音、以及氣味當中的一種或多種。
本揭露一示例中,獲取的與目標實境場景關聯的虛擬物件的特效資料可以包括:獲取在實境場景中對應的地理位置區域位於目標實境區域的位置範圍內的虛擬物件的特效資料(簡稱為第一虛擬物件的特效資料);和/或獲取在實境場景中對應的地理位置位於目標實境場景區域的位置範圍外的虛擬物件的特效資料(簡稱為第二虛擬物件的特效資料)。
其中,在獲取的目標實境場景關聯的虛擬物件的特效資料同時包括上述第一虛擬物件的特效資料和上述第二虛擬物件的特效資料的情況下,與目標實境場景關聯的虛擬物件的特效資料可以包括多個虛擬物件的特效資料。
另外,不同目標實境區域可以關聯同一虛擬物件的特效資料。示例性的,如第2圖所示,在第2圖所示實境場景中,區域A、區域B、以及區域C為三個不同的目標實境區域,虛擬物件的特效資料為圖中的虛擬物體S的特效資料。其中,虛擬物體S在實境場景中對應的地理位置位於區域A內,且區域A、區域B、以及區域C均關聯了虛擬物體S,則當AR設備位於區域A、區域B、以及區域C三個目標實境區域中的任意一個區域的情況下,都可以在AR設備中呈現關聯的虛擬物體S的特效資料。
在一些實施例中,在獲取在實境場景中對應的地理位置位於目標實境區域的位置範圍外的虛擬物件的特效資料的情況下,可以是獲取在實境場景中對應的地理位置位於目標實境區域的位置範圍外、且符合預設條件的虛擬物件的特效資料。
其中,預設條件包括以下至少一種: 虛擬物件在實境場景中對應的地理位置到目標實境區域的距離在設定距離範圍內; AR設備的拍攝角度位於設定角度範圍內。
示例性的,如第3A圖所示,若目標實境區域為圖中內圓的圓形區域,則距離目標實境區域在設定距離範圍內的區域為外圓和內圓之間的區域,又例如第3B圖所示,若目標實境區域為圖中的矩形區域,則距離目標實境區域在設定距離範圍內的區域為圖中的陰影部分區域。
在一些實施例中,虛擬物件可以與在實境場景中所處的目標實境區域關聯,也可以不關聯,當與所處的目標實境區域關聯時,在AR設備位於該目標實境區域內時,可以呈現該虛擬物件的特效資料,當與所處的目標實境區域不關聯時,在AR設備位於該目標實境區域內時,可以不呈現該虛擬物件的特效資料。
在另外一種可能的實施方式中,在獲取與目標實境區域關聯的虛擬物件的特效資料時,還可以先檢測AR設備的拍攝角度,然後獲取與目標實境區域和拍攝角度共同關聯的虛擬物件的特效資料。
在一些實施例中,每一個虛擬物件的特效資料可以預先綁定拍攝角度範圍,獲取與目標實境區域和拍攝角度共同關聯的虛擬物件的特效資料,可以包括:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內、且預先綁定的拍攝角度範圍包括AR設備的拍攝角度的虛擬物件的特效資料。
應用場景示例性的可以如第4圖所示,在第4圖中虛擬物件在實境場景中對應的地理位置和AR設備的位置資訊在同一目標實境區域內,且AR設備的拍攝角度在虛擬物件預先綁定的拍攝角度範圍內,則在這種情況下,AR設備展示的擴增實境資料中包含有虛擬物件的特效資料。
其中,AR設備的拍攝位姿數據可以透過多種方式獲取,比如當AR設備配置有檢測位置的定位元件和檢測拍攝角度的角速度感測器時,可以透過定位元件和角速度感測器來確定AR設備的拍攝位姿數據;當AR設備配置有圖像採集元件,比如攝影機時,可以透過攝影機採集的實境場景圖像來確定拍攝角度。
上述角速度感測器,比如可以包括陀螺儀、慣性測量單元(Inertial Measurement Unit,IMU)等;上述定位元件,比如可以包括全球定位系統(Global Positioning System,GPS)、全球導航衛星系統(Global Navigation Satellite System,GLONASS)、無線保真(Wireless Fidelity,WiFi)定位技術的定位元件。
在一種可能的實施方式中,獲取與目標實境區域關聯的虛擬物件的特效資料,可以先獲取AR設備在實境場景的位姿數據,然後基於AR設備在實境場景中的位姿數據、以及虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,確定與目標實境區域關聯的虛擬物件的特效資料。
這裡,基於AR設備的拍攝位姿數據,以及提前設置好的虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,來確定虛擬物件在實境場景中的呈現特效資料,這裡,由於三維場景模型可以表徵實境場景,基於該三維場景模型所構建好的虛擬物件的位姿數據能夠較好地融入實境場景,從該虛擬物件在三維場景模型中的位姿數據中,確定出與AR設備的位姿數據相匹配的呈現特效資料,即可以在AR設備中展示出逼真的擴增實境場景的效果。
其中,虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據可以包括虛擬物件在三維場景模型中的位置資訊(例如可以為座標,且該座標是唯一的)和/或對應的姿態資訊。虛擬物件的特效資料可以是虛擬物件的呈現狀態,例如,虛擬物件可以是靜態或動態展示的虛擬物體、某種聲音等。在虛擬物件為動態物件的情況下,虛擬物件在三維場景中的位姿數據可以包括多組位置資訊(比如地理位置座標資訊)和/或對應的姿態資訊(虛擬物件的展示姿態)。在一種場景下,這多組位置資訊和/或姿態資訊可以對應一段動畫影片資料,每組位置資訊和/或姿態資訊可以對應這段動畫影片資料中的一幀畫面。
為了方便進行虛擬物件特效資料的渲染,還原虛擬物件在三維場景模型下的展示特效,可以將包含了虛擬物件的展示特效和三維場景模型的展示畫面中的三維場景模型進行透明處理,這樣,在後續渲染階段,可以將包含了虛擬物件的展示特效和透明化處理後的三維場景模型的展示畫面渲染出來,並使得實境場景與三維場景模型對應,如此,便可以在現實世界中得到虛擬物件在三維場景模型下的展示特效。
在一些實施例中,當AR設備在實境場景的位姿數據確定後,可以在虛擬物件在三維場景模型中的多組位置資訊(比如地理位置座標資訊)和/或對應的姿態資訊(虛擬物件的展示姿態)中,確定出與AR設備的位姿數據相匹配的虛擬物件的一組位置資訊和/或姿態資訊。比如,在虛擬物件在構建的大廈模型場景下的多組位置資訊和姿態資訊中,確定出與AR設備的位姿數據所匹配的虛擬物件的一組位置和姿態。
在基於虛擬物件的特效資料,在擴增實境AR設備中展示包括虛擬物件的特效資料的擴增實境資料的情況下,可以根據AR設備的類型的不同,以及虛擬物件的特效資料的類型的不同,將每種特效資料分別進行展示,或者,將多種特效資料相結合展示。
(1)、在虛擬物件包括聲音的情況下,虛擬物件的特效資料可以是固定頻率的聲音,展示包括虛擬物件的特效資料的擴增實境資料可以是播放與目標實境區域關聯的聲音。
例如,若與該目標實境區域關聯的虛擬物件的特效資料為某段聲音,在檢測到AR設備的位置資訊位於目標實境區域的位置範圍情況下,可以獲取與該目標實境區域關聯的聲音,並在AR設備中播放該段聲音。
(2)、在虛擬物件包括實境場景氣味的情況下,可以是在識別AR設備的位置資訊位於目標實境區域的位置範圍之後,確定與該目標實境區域關聯的氣味的類型、以及釋放氣味的時間長度,並將確定出的氣味的類型、以及釋放氣味的時間長度發送到第三方控制氣味釋放的設備中,並指示第三方控制氣味釋放的設備以該時間長度釋放對應類型的氣味。
(3)、在虛擬物件包括虛擬物體的呈現畫面的情況下,虛擬物件的特效資料可以是虛擬物體的呈現畫面,該呈現畫面可以是靜態的也可以是動態的,擴增實境資料可以包括擴增實境圖像。基於AR設備類型的不同,擴增實境圖像可以對應有不同的呈現方法。
一種可能的呈現方法,可以應用在AR眼鏡上,可以基於預先設置的虛擬物體在實境場景中的位置資訊,在AR眼鏡的鏡片的對應位置上展示虛擬物體。在使用者透過展示有虛擬物體的AR眼鏡的鏡片觀看實境場景的情況下,可以在虛擬物體在實境場景中的位置處觀看到虛擬物體。
另外一種可能的呈現方法,可以應用在手機、平板電腦等電子設備上,在展示包括虛擬物件的特效資料的擴增實境資料的情況下,在AR設備基於實境場景生成實境場景圖像之後,在AR設備上展示的擴增實境資料可以是在實境場景圖像中疊加虛擬物體的圖像之後的圖像。
本揭露還提供了另外一種擴增實境場景呈現方法,如第5圖所示,為本揭露提供的另外一種擴增實境場景呈現方法的流程示意圖,包括以下幾個步驟: S501、檢測擴增實境AR設備的拍攝角度。
其中,AR設備內可以內置角速度感測器,此時可以基於AR設備內的角速度感測器來獲取拍攝角度,角速度感測器,比如可以包括陀螺儀、慣性測量單元(Inertial Measurement Unit,IMU)等。
或者,當AR設備配置有圖像採集元件,比如攝影機時,可以透過攝影機採集的實境場景圖像來確定拍攝角度。
S502、獲取與拍攝角度關聯的虛擬物件的特效資料。
在一些實施例中,每一個虛擬物件的特效資料可以預先設置有拍攝範圍,在獲取與拍攝角度關聯的虛擬物件的特效資料的情況下,可以是基於每一個虛擬物件的特效資料所預先設置的拍攝範圍,確定對應的預先設置的拍攝範圍中包含有AR設備的拍攝角度的目標虛擬物件的特效資料,並將該目標虛擬物件的特效資料確定為與AR設備的拍攝角度關聯的虛擬物件的特效資料。示例性的,在同一面牆的不同高度位置處可以對應部署不同的虛擬畫像,每一幅虛擬畫像可以有預先設置的拍攝範圍,例如虛擬畫像A的預先設置的拍攝範圍為30°~60°,若AR設備的拍攝角度為40°,則可以將虛擬畫像A確定為與該拍攝角度關聯的虛擬物件的特效資料。
S503、基於虛擬物件的特效資料,在AR設備中展示包括虛擬物件的特效資料的擴增實境資料。
在本步驟中,基於虛擬物件的特效資料,在AR設備中展示包括虛擬物件的特效資料的擴增實境資料的方法與上述步驟103中的方法相同,在此將暫時不再贅述。
本領域技術人員可以理解,在本揭露實施例的上述方法中,各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定,各步驟的執行順序應當以其功能和可能的內在邏輯確定。
基於相同的構思,本揭露實施例還提供了一種擴增實境資料呈現裝置,參見第6圖所示,為本揭露實施例提供的擴增實境資料呈現裝置的架構示意圖,包括第一獲取模組601、第二獲取模組602、以及第一展示模組603,其中: 第一獲取模組601,配置為獲取擴增實境AR設備的位置資訊,並傳輸至第二獲取模組602; 第二獲取模組602,配置為在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料,並傳輸至第一展示模組603; 第一展示模組603,配置為基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
一種可能的實施方式中,所述第二獲取模組602,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為: 獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內的虛擬物件的特效資料;和/或, 獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料。
一種可能的實施方式中,所述第二獲取模組602,在獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料時,配置為: 獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外、且符合預設條件的虛擬物件的特效資料; 其中,所述預設條件包括以下至少一種: 所述虛擬物件在實境場景中對應的地理位置到所述目標實境區域的距離在設定距離範圍內; 所述AR設備的拍攝角度位於設定角度範圍內。
一種可能的實施方式中,所述第二獲取模組602,在檢測出所述位置資訊位於目標實境區域的位置範圍內時,配置為: 在所述位置資訊的地理座標落入所述目標實境區域的地理座標範圍內的情況下,檢測出所述位置資訊位於所述目標實境區域的位置範圍內。
一種可能的實施方式中,所述第二獲取模組602,在檢測出所述位置資訊位於目標實境區域的位置範圍內時,配置為: 基於所述AR設備的位置資訊和所述虛擬物件在實境場景中對應的地理位置資訊,確定所述AR設備與所述虛擬物件在實境場景中對應的地理位置之間的距離; 在確定的距離小於設定距離閾值的情況下,確定所述位置資訊位於所述目標實境區域的位置範圍內。
一種可能的實施方式中,所述第二獲取模組602,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為: 檢測所述AR設備的拍攝角度; 獲取與所述目標實境區域和所述拍攝角度共同關聯的虛擬物件的特效資料。
一種可能的實施方式中,所述第二獲取模組602,在獲取與所述目標實境區域關聯的虛擬物件的特效資料時,配置為: 獲取所述AR設備在實境場景的位姿數據; 基於所述AR設備在實境場景的位姿數據、和所述虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,確定與所述目標實境區域關聯的所述虛擬物件的特效資料。
基於相同的構思,本揭露實施例還提供了另外一種擴增實境資料呈現裝置,參見第7圖所示,為本揭露實施例提供的擴增實境資料呈現裝置的架構示意圖,包括檢測模組701、第三獲取模組702、以及第二展示模組703,其中: 檢測模組701,配置為檢測擴增實境AR設備的拍攝角度,並傳輸至第三獲取模組702; 第三獲取模組702,配置為獲取與所述拍攝角度關聯的虛擬物件的特效資料,並傳輸至第二展示模組703; 第二展示模組703,配置為基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
在一些實施例中,本揭露實施例提供的裝置具有的功能或包含的範本可以配置為執行上文方法實施例描述的方法,其實現可以參照上文方法實施例的描述,為了簡潔,這裡不再贅述。
基於同一技術構思,本揭露實施例還提供了一種電子設備。參照第8圖所示,為本揭露實施例提供的電子設備的結構示意圖,包括處理器801、記憶體802、和匯流排803。其中,記憶體802配置為儲存執行指令,包括記憶體8021和外部記憶體8022;這裡的記憶體8021也稱內記憶體,配置為暫時存放處理器801中的運算資料,以及與硬碟等外部記憶體8022交換的資料,處理器801透過記憶體8021與外部記憶體8022進行資料交換,當電子設備800運行時,處理器801與記憶體802之間透過匯流排803通訊,使得處理器801在執行以下指令:
獲取擴增實境AR設備的位置資訊; 在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料;
基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
其中,處理器801執行的處理過程可參照上述方法實施例中的描述,這裡不再展開說明。
基於同一技術構思,本揭露實施例還提供了一種電子設備。參照第9圖所示,為本揭露實施例提供的電子設備的結構示意圖,包括處理器901、記憶體902、和匯流排903。其中,記憶體902配置為儲存執行指令,包括記憶體9021和外部記憶體9022;這裡的記憶體9021也稱內記憶體,配置為暫時存放處理器901中的運算資料,以及與硬碟等外部記憶體9022交換的資料,處理器901透過記憶體9021與外部記憶體9022進行資料交換,當電子設備900運行時,處理器901與記憶體902之間透過匯流排903通訊,使得處理器901在執行以下指令: 檢測擴增實境AR設備的拍攝角度; 獲取與所述拍攝角度關聯的虛擬物件的特效資料; 基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
其中,處理器901執行的處理過程可參照上述方法實施例中的描述,這裡不再展開說明。
此外,本揭露實施例還提供一種電腦可讀儲存媒體,該電腦可讀儲存媒體上儲存有電腦程式,該電腦程式被處理器運行時執行上述方法實施例中所述的擴增實境資料呈現方法的步驟。
本揭露實施例所提供的擴增實境資料呈現方法的電腦程式產品,包括儲存了程式碼的電腦可讀儲存媒體,所述程式碼包括的指令可用於執行上述方法實施例中所述的擴增實境資料呈現方法的步驟,可參見上述方法實施例,在此不再贅述。
所屬領域的技術人員可以清楚地瞭解到,為描述的方便和簡潔,上述描述的系統和裝置的工作過程,可以參考前述方法實施例中的對應過程,在此不再贅述。在本揭露所提供的幾個實施例中,應該理解到,所揭露的系統、裝置和方法,可以透過其它的方式實現。以上所描述的裝置實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,又例如,多個單元或元件可以結合或者可以集成到另一個系統,或一些特徵可以忽略,或不執行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是透過一些通訊介面,裝置或單元的間接耦合或通訊連接,可以是電性,機械或其它的形式。
所述作為分離元件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的元件可以是或者也可以不是物理單元,即可以位於一個地方,或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例方案的目的。
另外,在本揭露各個實施例中的各功能單元可以集成在一個處理單元中,也可以是各個單元單獨物理存在,也可以兩個或兩個以上單元集成在一個單元中。
所述功能如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時,可以儲存在一個處理器可執行的非易失的電腦可讀取儲存媒體中。基於這樣的理解,本揭露的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的部分可以以軟體產品的形式體現出來,該電腦軟體產品儲存在一個儲存媒體中,包括若干指令用以使得一台電腦設備(可以是個人電腦,伺服器,或者網路設備等)執行本揭露各個實施例所述方法的全部或部分步驟。而前述的儲存媒體包括:隨身碟、移動硬碟、唯讀記憶體(Read-Only Memory,ROM)、隨機存取記憶體(Random Access Memory,RAM)、磁碟或者光碟等各種可以儲存程式碼的媒體。
以上僅為本揭露的實施方式,但本揭露的保護範圍並不局限於此,任何熟悉本技術領域的技術人員在本揭露揭露的技術範圍內,可輕易想到變化或替換,都應涵蓋在本揭露的保護範圍之內。因此,本揭露的保護範圍應以請求項的保護範圍為准。 工業實用性
本揭露涉及一種擴增實境資料呈現方法、電子設備及儲存媒體,所述方法包括:獲取擴增實境AR設備的位置資訊;在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料;基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。透過這種方法,可以在不同位置資訊的AR設備中,展示包含不同虛擬物件的特效資料的擴增實境資料,提升了擴增實境場景的展示效果。
S101,S102,S103:步驟 S:虛擬物體 A,B,C:區域 S501,S502,S503:步驟 601:第一獲取模組 602:第二獲取模組 603:第一展示模組 701:檢測模組 702:第三獲取模組 703:第二展示模組 800:電子設備 801:處理器 802:記憶體 8021:內記憶體 8022:外部記憶體 803:匯流排 900:電子設備 901:處理器 902:記憶體 9021:內記憶體 9022:外部記憶體 903:匯流排
第1圖示出了本揭露實施例所提供的一種擴增實境資料呈現方法的流程示意圖; 第2圖示出了本揭露實施例所提供的一種目標位置區域示意圖; 第3A圖示出了本揭露實施例所提供的一種距離目標實境區域在設定距離範圍內的區域的示意圖; 第3B圖示出了本揭露實施例所提供的另一種距離目標實境區域在設定距離範圍內的區域的示意圖; 第4圖示出了本揭露實施例所提供的一種拍攝角度示意圖; 第5圖示出了本揭露實施例所提供的另外一種擴增實境場景呈現方法的流程示意圖; 第6圖示出了本揭露實施例所提供的一種擴增實境資料呈現裝置的架構示意圖; 第7圖示出了本揭露      實施例所提供的另外一種擴增實境資料呈現裝置; 第8圖示出了本揭露實施例所提供的一種電子設備的結構示意圖; 第9圖示出了本揭露實施例所提供的另外一種電子設備的結構示意圖。
S101,S102,S103:步驟

Claims (9)

  1. 一種擴增實境資料呈現方法,包括:獲取擴增實境AR設備的位置資訊;在檢測出所述位置資訊位於目標實境區域的位置範圍內的情況下,獲取與所述目標實境區域關聯的虛擬物件的特效資料;所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:檢測所述AR設備的拍攝角度;獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內、且預先綁定的拍攝角度範圍包括所述AR設備的拍攝角度的虛擬物件的特效資料;基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
  2. 根據請求項1所述的方法,其中,所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內的虛擬物件的特效資料;獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料。
  3. 根據請求項2所述的方法,其中,所述獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外的虛擬物件的特效資料,包括:獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍外、且符合預設條件的虛擬物件的特效資料;其中,所述預設條件包括以下至少一種:所述虛擬物件在實境場景中對應的地理位置到所述目標實境區域的距離在 設定距離範圍內;所述AR設備的拍攝角度位於設定角度範圍內。
  4. 根據請求項2或3所述的方法,其中,所述檢測出所述位置資訊位於目標實境區域的位置範圍內,包括:在所述位置資訊的地理座標落入所述目標實境區域的地理座標範圍內的情況下,檢測出所述位置資訊位於所述目標實境區域的位置範圍內。
  5. 根據請求項2或3所述的方法,其中,所述檢測出所述位置資訊位於目標實境區域的位置範圍內,包括:基於所述AR設備的位置資訊和所述虛擬物件在實境場景中對應的地理位置資訊,確定所述AR設備與所述虛擬物件在實境場景中對應的地理位置之間的距離;在確定的距離小於設定距離閾值的情況下,確定所述位置資訊位於所述目標實境區域的位置範圍內。
  6. 根據請求項1所述的方法,其中,所述獲取與所述目標實境區域關聯的虛擬物件的特效資料,包括:獲取所述AR設備在實境場景的位姿數據;基於所述AR設備在實境場景的位姿數據、和所述虛擬物件在用於表徵實境場景的三維場景模型中的位姿數據,確定與所述目標實境區域關聯的所述虛擬物件的特效資料。
  7. 一種擴增實境場景呈現方法,包括:檢測擴增實境AR設備的拍攝角度;獲取在實境場景中對應的地理位置位於所述目標實境區域的位置範圍內、且預先綁定的拍攝角度範圍包括所述AR設備的拍攝角度的虛擬物件的特效資料; 基於所述虛擬物件的特效資料,在所述AR設備中展示包括所述虛擬物件的特效資料的擴增實境資料。
  8. 一種電子設備,包括:處理器、記憶體和匯流排,所述記憶體儲存有所述處理器可執行的機器可讀指令,當電子設備運行時,所述處理器與所述記憶體之間透過匯流排通訊,所述機器可讀指令被所述處理器執行時執行如請求項1至6任一所述的擴增實境資料呈現方法,或執行如請求項7所述的擴增實境資料呈現方法的步驟。
  9. 一種電腦可讀儲存媒體,該電腦可讀儲存媒體上儲存有電腦程式,該電腦程式被處理器運行時執行如請求項1至6任一所述的擴增實境資料呈現方法,或執行如請求項7所述的擴增實境資料呈現方法的步驟。
TW109133816A 2019-10-15 2020-09-29 一種擴增實境資料呈現方法、設備及儲存媒體 TWI782332B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910979920.5A CN110716646A (zh) 2019-10-15 2019-10-15 一种增强现实数据呈现方法、装置、设备及存储介质
CN201910979920.5 2019-10-15

Publications (2)

Publication Number Publication Date
TW202117502A TW202117502A (zh) 2021-05-01
TWI782332B true TWI782332B (zh) 2022-11-01

Family

ID=69212607

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109133816A TWI782332B (zh) 2019-10-15 2020-09-29 一種擴增實境資料呈現方法、設備及儲存媒體

Country Status (5)

Country Link
KR (1) KR102414587B1 (zh)
CN (1) CN110716646A (zh)
SG (1) SG11202013125WA (zh)
TW (1) TWI782332B (zh)
WO (1) WO2021073278A1 (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110716646A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、设备及存储介质
CN113262478B (zh) * 2020-02-17 2023-08-25 Oppo广东移动通信有限公司 增强现实处理方法及装置、存储介质和电子设备
CN111538920A (zh) * 2020-03-24 2020-08-14 天津完美引力科技有限公司 内容的呈现方法及装置、系统、存储介质、电子装置
CN111627117B (zh) * 2020-06-01 2024-04-16 上海商汤智能科技有限公司 画像展示特效的调整方法、装置、电子设备及存储介质
CN111625102A (zh) * 2020-06-03 2020-09-04 上海商汤智能科技有限公司 一种建筑物展示方法及装置
CN111639613B (zh) * 2020-06-04 2024-04-16 上海商汤智能科技有限公司 一种增强现实ar特效生成方法、装置及电子设备
CN111638797A (zh) * 2020-06-07 2020-09-08 浙江商汤科技开发有限公司 一种展示控制方法及装置
CN111569414B (zh) * 2020-06-08 2024-03-29 浙江商汤科技开发有限公司 虚拟飞行器的飞行展示方法、装置、电子设备及存储介质
CN111665945B (zh) * 2020-06-10 2023-11-24 浙江商汤科技开发有限公司 一种游览信息展示方法及装置
CN111815779A (zh) * 2020-06-29 2020-10-23 浙江商汤科技开发有限公司 对象展示方法及装置、定位方法及装置以及电子设备
CN111833457A (zh) * 2020-06-30 2020-10-27 北京市商汤科技开发有限公司 图像处理方法、设备及存储介质
CN112148188A (zh) * 2020-09-23 2020-12-29 北京市商汤科技开发有限公司 增强现实场景下的交互方法、装置、电子设备及存储介质
CN112150318A (zh) * 2020-09-23 2020-12-29 北京市商汤科技开发有限公司 增强现实信息交互方法、装置、电子设备和存储介质
CN112215965B (zh) * 2020-09-30 2024-02-20 杭州灵伴科技有限公司 基于ar的场景导览方法、设备以及计算机可读存储介质
CN112802097A (zh) * 2020-12-30 2021-05-14 深圳市慧鲤科技有限公司 一种定位方法、装置、电子设备及存储介质
CN112817454A (zh) * 2021-02-02 2021-05-18 深圳市慧鲤科技有限公司 一种信息展示方法、装置、相关设备及存储介质
CN113359983A (zh) * 2021-06-03 2021-09-07 北京市商汤科技开发有限公司 增强现实数据呈现方法、装置、电子设备及存储介质
CN113359984A (zh) * 2021-06-03 2021-09-07 北京市商汤科技开发有限公司 瓶体的特效呈现方法、装置、计算机设备及存储介质
CN113393516B (zh) * 2021-06-17 2022-05-24 贝壳找房(北京)科技有限公司 用于打散ar场景中的虚拟物体的方法和装置
CN114401442B (zh) * 2022-01-14 2023-10-24 北京字跳网络技术有限公司 视频直播及特效控制方法、装置、电子设备及存储介质
CN114390214B (zh) * 2022-01-20 2023-10-31 脸萌有限公司 一种视频生成方法、装置、设备以及存储介质
CN114390215B (zh) * 2022-01-20 2023-10-24 脸萌有限公司 一种视频生成方法、装置、设备以及存储介质
CN115002442B (zh) * 2022-05-24 2024-05-10 北京字节跳动网络技术有限公司 一种图像展示方法、装置、电子设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201447372A (zh) * 2012-12-19 2014-12-16 Lockheed Corp 用於擴增實境裝置之即時導正系統、方法及電腦程式產品
TW201502860A (zh) * 2013-02-14 2015-01-16 Qualcomm Inc 用於頭部安裝顯示器之基於人體手勢的區域及空間選擇
CN104571532A (zh) * 2015-02-04 2015-04-29 网易有道信息技术(北京)有限公司 一种实现增强现实或虚拟现实的方法及装置
TWM521784U (zh) * 2015-12-14 2016-05-11 Nat Taichung University Science & Technology 結合體感操作之虛實整合購物系統
TW201636683A (zh) * 2015-04-07 2016-10-16 Univ Southern Taiwan Sci & Tec 擴充實境成像方法及其裝置
TW201715476A (zh) * 2015-10-26 2017-05-01 行政院原子能委員會核能研究所 運用擴增實境技術之導航系統
CN107728782A (zh) * 2017-09-21 2018-02-23 广州数娱信息科技有限公司 交互方法及交互系统、服务器
US20180095635A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8502835B1 (en) * 2009-09-02 2013-08-06 Groundspeak, Inc. System and method for simulating placement of a virtual object relative to real world objects
US9274595B2 (en) * 2011-08-26 2016-03-01 Reincloud Corporation Coherent presentation of multiple reality and interaction models
KR101370747B1 (ko) * 2011-10-06 2014-03-14 백유경 사용자에게 여행 장소와 연관된 대중 문화 컨텐트를 제공하기 위한 방법, 시스템, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
JP6056178B2 (ja) * 2012-04-11 2017-01-11 ソニー株式会社 情報処理装置、表示制御方法及びプログラム
EP2983138A4 (en) * 2013-04-04 2017-02-22 Sony Corporation Display control device, display control method and program
CN106445088B (zh) * 2015-08-04 2020-05-22 上海宜维计算机科技有限公司 现实增强的方法及系统
WO2017201329A1 (en) * 2016-05-20 2017-11-23 Magic Leap, Inc. Contextual awareness of user interface menus
KR101940720B1 (ko) * 2016-08-19 2019-04-17 한국전자통신연구원 공간 기반 증강현실을 위한 콘텐츠 저작 장치 및 그 방법
CN107529091B (zh) * 2017-09-08 2020-08-04 广州华多网络科技有限公司 视频剪辑方法及装置
CN109840947B (zh) * 2017-11-28 2023-05-09 广州腾讯科技有限公司 增强现实场景的实现方法、装置、设备及存储介质
US20190251750A1 (en) * 2018-02-09 2019-08-15 Tsunami VR, Inc. Systems and methods for using a virtual reality device to emulate user experience of an augmented reality device
CN110716646A (zh) * 2019-10-15 2020-01-21 北京市商汤科技开发有限公司 一种增强现实数据呈现方法、装置、设备及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201447372A (zh) * 2012-12-19 2014-12-16 Lockheed Corp 用於擴增實境裝置之即時導正系統、方法及電腦程式產品
TW201502860A (zh) * 2013-02-14 2015-01-16 Qualcomm Inc 用於頭部安裝顯示器之基於人體手勢的區域及空間選擇
TWI534654B (zh) * 2013-02-14 2016-05-21 高通公司 用於在一頭部安裝裝置上選擇一擴充實境物件之方法及電腦可讀媒體與用於選擇一擴充實境物件之頭部安裝裝置
CN104571532A (zh) * 2015-02-04 2015-04-29 网易有道信息技术(北京)有限公司 一种实现增强现实或虚拟现实的方法及装置
TW201636683A (zh) * 2015-04-07 2016-10-16 Univ Southern Taiwan Sci & Tec 擴充實境成像方法及其裝置
TWI572899B (zh) * 2015-04-07 2017-03-01 南臺科技大學 擴充實境成像方法及其裝置
TW201715476A (zh) * 2015-10-26 2017-05-01 行政院原子能委員會核能研究所 運用擴增實境技術之導航系統
TWM521784U (zh) * 2015-12-14 2016-05-11 Nat Taichung University Science & Technology 結合體感操作之虛實整合購物系統
US20180095635A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
CN107728782A (zh) * 2017-09-21 2018-02-23 广州数娱信息科技有限公司 交互方法及交互系统、服务器

Also Published As

Publication number Publication date
KR20210046592A (ko) 2021-04-28
SG11202013125WA (en) 2021-05-28
KR102414587B1 (ko) 2022-06-29
WO2021073278A1 (zh) 2021-04-22
CN110716646A (zh) 2020-01-21
TW202117502A (zh) 2021-05-01

Similar Documents

Publication Publication Date Title
TWI782332B (zh) 一種擴增實境資料呈現方法、設備及儲存媒體
US11321870B2 (en) Camera attitude tracking method and apparatus, device, and system
US20210118236A1 (en) Method and apparatus for presenting augmented reality data, device and storage medium
TW202113759A (zh) 三維場景工程類比與實景融合系統及方法
US20150193971A1 (en) Methods and Systems for Generating a Map including Sparse and Dense Mapping Information
JP7026819B2 (ja) カメラの位置決め方法および装置、端末並びにコンピュータプログラム
JP6476657B2 (ja) 画像処理装置、画像処理方法、およびプログラム
WO2019059992A1 (en) RENDERING VIRTUAL OBJECTS BASED ON LOCATION DATA AND IMAGE DATA
CN111610998A (zh) Ar场景内容的生成方法、展示方法、装置及存储介质
TWI783472B (zh) Ar場景內容的生成方法、展示方法、電子設備及電腦可讀儲存介質
JP6711137B2 (ja) 表示制御プログラム、表示制御方法および表示制御装置
US20200394847A1 (en) Method and device for synchronizing augmented reality coordinate systems
CN112348968B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN109448050B (zh) 一种目标点的位置的确定方法及终端
JP2017212510A (ja) 画像管理装置、プログラム、画像管理システム及び情報端末
WO2022252688A1 (zh) 增强现实数据呈现方法、装置、电子设备及存储介质
CN111815783A (zh) 虚拟场景的呈现方法及装置、电子设备及存储介质
KR101914660B1 (ko) 자이로 센서를 기반으로 증강현실 컨텐츠의 표시를 제어하는 방법 및 그 장치
JP2016139199A (ja) 画像処理装置、画像処理方法、およびプログラム
EP3882846A1 (en) Method and device for collecting images of a scene for generating virtual reality data
KR101939530B1 (ko) 지형정보 인식을 기반으로 증강현실 오브젝트를 표시하는 방법 및 그 장치
CN113209610A (zh) 虚拟场景画面展示方法、装置、计算机设备及存储介质
KR102614102B1 (ko) 실물 객체에 대한 정밀한 추적을 위한 자동화된 캘리브레이션 시스템, 캘리브레이션 방법 및 캘리브레이션 방법을 기초로 이미지 내에서 실물 객체를 추적하고 실물 객체에 가상 모델을 증강하는 방법
CN112729327B (zh) 一种导航方法、装置、计算机设备及存储介质
US20240087157A1 (en) Image processing method, recording medium, image processing apparatus, and image processing system