TWI764672B - 背景天空盒構建方法以及電子裝置 - Google Patents

背景天空盒構建方法以及電子裝置

Info

Publication number
TWI764672B
TWI764672B TW110113284A TW110113284A TWI764672B TW I764672 B TWI764672 B TW I764672B TW 110113284 A TW110113284 A TW 110113284A TW 110113284 A TW110113284 A TW 110113284A TW I764672 B TWI764672 B TW I764672B
Authority
TW
Taiwan
Prior art keywords
skybox
frame
content
depth
objects
Prior art date
Application number
TW110113284A
Other languages
English (en)
Other versions
TW202235964A (zh
Inventor
陳俊霖
武景龍
Original Assignee
宏達國際電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 宏達國際電子股份有限公司 filed Critical 宏達國際電子股份有限公司
Application granted granted Critical
Publication of TWI764672B publication Critical patent/TWI764672B/zh
Publication of TW202235964A publication Critical patent/TW202235964A/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels

Abstract

本公開的實施例提供一種背景天空盒構建方法以及一種電子裝置。所述方法包含：獲得第一內容幀且重新投影第一內容幀，其中重新投影的第一內容幀與第一視角相對應且包含多個第一物件；反應於判定第一內容幀具有表徵各第一物件的深度的第一深度圖，基於各第一物件的深度將第一物件劃分為N個第一組，其中N為正整數；基於N個第一組構建N個天空盒層中的每一個的第一部分，其中各天空盒層的第一部分與第一視角相對應；以及將重新投影的第一內容幀與N個天空盒層組合以產生第一視覺內容且輸出第一視覺內容。

Description

背景天空盒構建方法以及電子裝置
本發明是有關於一種用於改善視覺體驗的機制，且特別是有關於一種背景天空盒（skybox）構建方法和一種電子裝置。
在提供虛擬實境（virtual reality；VR）服務期間，讓使用者感到身臨其境是至關重要的。在一些情況下，當幀率由於某些原因（例如，重場景渲染）而下降時，可使用類似於重新投影的技術（例如，非同步時間扭曲（asynchronous time wrap；ATW）、非同步空間扭曲（asynchronous space wrap；ASW）等）來表示丟失幀以維持VR體驗。然而，使用這些重新投影技術，視覺內容中可能存在黑邊，使得沉浸式體驗將受到負面影響。
相同的問題出現在遠端VR串流媒體內，這是因為流媒體導致的較長時延也會在重新投影之後引入這樣的黑邊。
有鑑於此，本發明提供一種背景天空盒構建方法和電子裝置，其可用於解決上述技術問題。
本公開的實施例提供一種適用於電子裝置的背景天空盒構建方法。所述方法包含：獲得第一內容幀且重新投影第一內容幀，其中經重新投影的第一內容幀與第一視角相對應且包含多個第一物件；反應於判定第一內容幀具有表徵各第一物件的深度的第一深度圖，基於各第一物件的深度將第一物件劃分為N個第一組，其中N為正整數；基於N個第一組構建N個天空盒層中的每一個的第一部分，其中各天空盒層的第一部分與第一視角相對應；以及將經重新投影的第一內容幀與N個天空盒層組合以產生第一視覺內容且輸出第一視覺內容。
本公開的實施例提供一種電子裝置，其包含儲存電路和處理器。儲存電路儲存程式碼。處理器連接到儲存電路且存取程式碼以執行：獲得第一內容幀且重新投影第一內容幀，其中經重新投影的第一內容幀與第一視角相對應且包含多個第一物件；反應於判定第一內容幀具有表徵各第一物件的深度的第一深度圖，基於各第一物件的深度將第一物件劃分為N個第一組，其中N為正整數；基於N個第一組構建N個天空盒層中的每一個的第一部分，其中各天空盒層的第一部分與第一視角相對應；以及將重新投影的第一內容幀與N個天空盒層組合以產生第一視覺內容且輸出第一視覺內容。
在圖1中，電子裝置100包含儲存電路102和處理器104。儲存電路102為固定或移動隨機存取記憶體（random access memory；RAM）、唯讀記憶體（read-only memory；ROM）、快閃記憶體、硬碟或任何其它類似裝置中的一個或組合，且其記錄可由處理器104執行的多個模組。
處理器104可與儲存電路102連接，且處理器104可為例如圖形處理單元（graphic processing unit；GPU）、通用處理器、專用處理器、常規處理器、數位訊號處理器（digital signal processor；DSP）、多個微處理器、與DSP核心相關聯的一或多個微處理器、控制器、微控制器、專用積體電路（Application Specific Integrated Circuit；ASIC）、現場可程式設計閘陣列（Field Programmable Gate Array；FPGA）電路、任何其它類型的積體電路（integrated circuit；IC）、狀態機等。
在本公開的實施例中，處理器104可存取儲存在儲存電路102中的模組和/或程式碼以實施本公開中所提供的背景天空盒構建方法，這將在下文中進一步論述。
參看圖2，其繪示根據本公開的實施例的背景天空盒構建方法的流程圖。本實施例的方法可由圖1中的電子裝置100執行，且下文將使用圖1中所繪示的元件來描述圖2中的各步驟的細節。
首先，在步驟S210中，處理器104可獲得第一內容幀且重新投影第一內容幀。在實施例中，第一內容幀可為與由處理器104提供的VR服務相關的圖像幀中的一個，且經重新投影的第一內容幀可與第一視角相對應且包含多個第一物件（例如，VR物件）。
更具體地說，如在上文中所提及，處理器104可能需要透過在一些場景中執行ASW或ATW來重新投影第一內容幀。舉例來說，當使用者以特定視角觀看第一內容幀時，電子裝置100可向使用者提供/顯示第一內容幀。然而，在較低幀率條件或其類似條件下，可能存在一些丟失幀。假設次於第一內容幀的內容幀丟失，且使用者在與次於第一內容幀的內容幀相對應的時點處將他的/她的視角改變為第一視角，處理器104可能需要重新投影第一內容幀。
然而，經重新投影的第一內容幀中可能存在一些黑邊。如果將經重新投影的第一內容幀直接顯示給使用者，那麼使用者的VR體驗可由於看到黑邊而受到影響。因此，本公開的方法可用於解決這一問題，這將在下文中進行論述。
具體地說，在步驟S220中，處理器104可判斷第一內容幀是否具有表徵各第一物件的深度的第一深度圖。如果是，那麼處理器104可繼續進行到步驟S230；如果否，那麼處理器104可繼續進行到步驟S240，其中步驟S240的細節將稍後論述。
在步驟S230中，處理器104可基於各第一物件的深度將第一物件劃分為N個第一組，其中N為正整數。在一個實施例中，處理器104可首先獲得N個深度閾值（由
Figure 02_image001
-
Figure 02_image003
表示），其中N個深度閾值可基於設計者的要求而決定，但本公開不限於此。
在一個實施例中，深度閾值中的第j個深度閾值（即，
Figure 02_image005
）可大於深度閾值中的第（j-1）個深度閾值（即，
Figure 02_image007
），其中j在2至N的範圍內。也就是說，
Figure 02_image001
-
Figure 02_image003
可以昇冪排列，但本公開不限於此。
接著，在判定N個第一組中的第i個（其中i在1至N的範圍內）第一組（由
Figure 02_image009
表示）期間，處理器104可將深度小於
Figure 02_image011
的第一物件定義為屬於
Figure 02_image009
。也就是說，
Figure 02_image009
將包含深度小於
Figure 02_image011
的第一物件。
在此情況下，
Figure 02_image013
將包含深度小於
Figure 02_image001
的第一物件，
Figure 02_image015
將包含深度小於
Figure 02_image017
的第一物件，且
Figure 02_image019
將包含深度小於
Figure 02_image003
的第一物件等等。另外，在
Figure 02_image001
-
Figure 02_image003
以昇冪排列的情況下，
Figure 02_image021
將包含屬於
Figure 02_image023
的所有第一物件和深度在
Figure 02_image007
與
Figure 02_image005
之間的其它第一物件。在一些情況下，
Figure 02_image019
可包含所有第一物件，但本公開不限於此。
然後，在步驟S250中，處理器104可基於N個第一組構建N個天空盒層中的每一個的第一部分，其中各天空盒層的第一部分可與第一視角相對應。在本公開的實施例中，天空盒層的第j個天空盒層（表示為
Figure 02_image025
）可環繞天空盒層的第（j-1）個天空盒層（表示為
Figure 02_image027
）。也就是說，
Figure 02_image025
可理解為在
Figure 02_image027
的外部，或
Figure 02_image025
比
Figure 02_image027
離用戶更遠，但本公開不限於此。
在一個實施例中，在構建第i個天空盒層（即，
Figure 02_image029
）的第一部分期間，處理器104可將第i個第一組（即，
Figure 02_image009
）中的第一物件映射到
Figure 02_image029
上。在這種情況下，屬於
Figure 02_image009
的第一物件將在
Figure 02_image029
上顯示。
在步驟S260中，處理器104可將經重新投影的第一內容幀與N個天空盒層組合以產生第一視覺內容且輸出第一視覺內容。
在一個實施例中，在將經重新投影的第一內容幀與N個天空盒層組合期間，處理器104可使用經重新投影的第一內容幀作為第一視覺內容的前景且使用N個天空盒層作為第一視覺內容的背景。
從另一個角度看，因為各天空盒層的第一部分與使用者的第一視角相對應，所以可將步驟S250理解為構建使用者正在注視的背景部分，但本公開不限於此。因此，最初存在於經重新投影的第一內容幀中的黑邊將由N個天空盒層填充，以使得第一視覺內容中將不存在黑邊。
在一個實施例中，如果電子裝置100是獨立的VR HMD，那麼處理器104可顯示第一視覺內容以供使用者觀看。在另一實施例中，如果電子裝置100是VR系統的主機，那麼電子裝置100可向VR系統的HMD提供第一視覺內容以供使用者觀看。因此，用戶的VR體驗將不受黑邊影響。
返回參考步驟S240，因為第一內容幀可包含第一眼部幀（例如，用於左眼的幀）和第二眼部幀（例如，用於右眼的幀），所以處理器104可基於第一眼部幀和第二眼部幀產生表徵各第一物件的深度的第一深度圖且繼續進行到步驟S230。在各種實施例中，用於處理器104基於第一眼部幀和第二眼部幀產生第一深度圖的機制可以是本領域中的任何相關演算法，在此將不進一步論述。
在一個實施例中，處理器104可判斷處理負載（例如，處理器104的負載）是否低於負載閾值。如果是，那麼表示處理器104因足夠空閒而可以基於第一眼部幀和第二眼部幀產生第一深度圖，且因此處理器104可基於第一眼部幀和第二眼部幀產生表徵各第一物件的深度的第一深度圖。
另一方面，反應於判定處理負載不低於負載閾值，其表示處理器104可能太忙而不能基於第一眼部幀和第二眼部幀產生第一深度圖。在這種情況下，處理器104可基於所有第一物件來構建第N個天空盒層（即，
Figure 02_image031
）的第一部分。也就是說，當處理負載過高時，處理器104可僅構建
Figure 02_image031
（其可為離用戶最遠的天空盒層）的第一部分，但本公開不限於此。
在其它實施例中，因為使用者可能在使用VR服務時環顧四周，且因此本公開的實施例可隨著使用者視角的變化逐漸地逐層構建天空盒層中的每一個。
舉例來說，處理器104可獲得第二內容幀且可重新投影第二內容幀，其中經重新投影的第二內容幀可與不同於第一視角的第二視角相對應，且經重新投影的第二內容幀可包含多個第二物件。反應於判定第二內容幀具有表徵各第二物件的深度的第二深度圖，處理器104可基於各第二物件的深度將第二物件劃分為N個第二組，且基於N個第二組構建各天空盒層的第二部分，其中各天空盒層的第二部分與第二視角相對應。接著，處理器104可將重新投影的第二內容幀與N個天空盒層組合以產生第二視覺內容且輸出第二視覺內容。上述技術手段的細節可參考上述實施例中的教示，在此將不重複。
簡單來說，當使用者的視角改變為第二視角時，處理器104可相應地構建各天空盒層的第二部分，以使得第二視覺內容中不會有黑邊，但本公開不限於此。
然而，不同VR場景可與不同背景相對應。因此，在一些實施例中，在構建各天空盒層的第二部分之前，處理器104可判定第二內容幀和第一內容幀是否與不同場景相對應。反應於判定第二內容幀和第一內容幀與不同場景相對應，處理器104可重置N個天空盒層。
也就是說，當處理器104判定VR環境已經改變為新場景時，處理器104可重置/清除先前構建的天空盒層，且隨著使用者視角的變化逐漸構建與新場景相對應的天空盒層，但本公開不限於此。
綜上所述，在重新投影第一內容幀之後，本公開的實施例可基於第一內容幀中的第一物件的深度來分離第一內容幀中的第一物件，且相應地將第一物件映射到對應的天空盒層。然後，經重新投影的第一內容幀可與天空盒層組合以產生沒有黑邊的第一視覺內容。因此，可改善用戶的VR體驗。
雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100:電子裝置 102:儲存電路 104:處理器 S210,S220,S230,S240,S250,S260:步驟
圖1繪示根據本公開的示例性實施例的電子裝置的示意圖。 圖2繪示根據本公開的實施例的背景天空盒構建方法的流程圖。
S210,S220,S230,S240,S250,S260:步驟

Claims (20)

  1. 一種背景天空盒構建方法，適用於電子裝置，包括： 獲得第一內容幀且重新投影所述第一內容幀，其中經重新投影的所述第一內容幀與第一視角相對應且包括多個第一物件； 反應於判定所述第一內容幀具有表徵各所述第一物件的深度的第一深度圖，基於各所述第一物件的所述深度將所述多個第一物件劃分為N個第一組，其中N為正整數； 基於所述N個第一組構建N個天空盒層中的每一個的第一部分，其中各所述天空盒層的所述第一部分與所述第一視角相對應；以及 將經重新投影的所述第一內容幀與所述N個天空盒層組合以產生第一視覺內容且輸出所述第一視覺內容。
  2. 如請求項1所述的背景天空盒構建方法，其中所述N個第一組中的第i個第一組包括深度小於N個深度閾值中的第i個深度閾值的所述多個第一物件，其中i在1至N的範圍內，其中所述多個深度閾值中的第j個深度閾值大於所述多個深度閾值中的第（j-1）個深度閾值，其中j在2至N的範圍內。
  3. 如請求項1所述的背景天空盒構建方法，其中基於所述N個第一組構建所述N個天空盒層中的每一個的所述第一部分的所述步驟包括： 將所述多個第一組中的第i個第一組中的所述多個第一物件映射到第i個天空盒層上。
  4. 如請求項1所述的背景天空盒構建方法，其中所述多個天空盒層中的第j個天空盒層環繞所述多個天空盒層中的第（j-1）個天空盒層，其中j在2至N的範圍內。
  5. 如請求項1所述的背景天空盒構建方法，其中所述第一內容幀包括第一眼部幀以及第二眼部幀，且所述方法更包括： 反應於判定所述第一內容幀沒有深度圖，基於所述第一眼部幀以及所述第二眼部幀產生表徵各所述第一物件的所述深度的所述第一深度圖。
  6. 如請求項5所述的背景天空盒構建方法，更包括： 反應於判定處理負載低於負載閾值，基於所述第一眼部幀以及所述第二眼部幀產生表徵各所述第一物件的所述深度的所述第一深度圖；以及 反應於判定所述處理負載不低於所述負載閾值，基於所有所述多個第一物件構建第N個天空盒層的所述第一部分。
  7. 如請求項1所述的背景天空盒構建方法，其中經重新投影的所述第一內容幀用作所述第一視覺內容的前景，且所述N個天空盒層用作所述第一視覺內容的背景。
  8. 如請求項1所述的背景天空盒構建方法，其中所述電子裝置是虛擬實境（VR）系統的主機或獨立的虛擬實境頭戴式顯示器。
  9. 如請求項1所述的背景天空盒構建方法，更包括： 獲得第二內容幀且重新投影所述第二內容幀，其中經重新投影的所述第二內容幀與第二視角相對應，且包括多個第二物件； 反應於判定所述第二內容幀具有表徵各所述第二物件的深度的第二深度圖，基於各所述第二物件的所述深度將所述多個第二物件劃分為N個第二組； 基於所述N個第二組構建各所述天空盒層的第二部分，其中各所述天空盒層的所述第二部分與所述第二視角相對應；以及 將經重新投影的所述第二內容幀與所述N個天空盒層組合以產生第二視覺內容且輸出所述第二視覺內容。
  10. 如請求項9所述的背景天空盒構建方法，其中在構建各所述天空盒層的所述第二部分的所述步驟之前，所述方法更包括： 反應於判定所述第二內容幀以及所述第一內容幀與不同場景相對應，重置所述N個天空盒層。
  11. 一種電子裝置，包括： 儲存電路，其儲存程式碼；以及 處理器，其連接到所述儲存電路且存取所述程式碼以執行： 獲得第一內容幀且重新投影所述第一內容幀，其中經重新投影的所述第一內容幀與第一視角相對應且包括多個第一物件； 反應於判定所述第一內容幀具有表徵各所述第一物件的深度的第一深度圖，基於各所述第一物件的所述深度將所述多個第一物件劃分為N個第一組，其中N為正整數； 基於所述N個第一組構建N個天空盒層中的每一個的第一部分，其中各所述天空盒層的所述第一部分與所述第一視角相對應；以及 將經重新投影的所述第一內容幀與所述N個天空盒層組合以產生第一視覺內容且輸出所述第一視覺內容。
  12. 如請求項11所述的電子裝置，其中所述N個第一組中的第i個第一組包括深度小於N個深度閾值中的第i個深度閾值的所述多個第一物件，其中ⅰ在1至N的範圍內，其中所述多個深度閾值中的第j個深度閾值大於所述多個深度閾值中的第（j-1）個深度閾值，其中j在2至N的範圍內。
  13. 如請求項11所述的電子裝置，其中當基於所述N個第一組構建N個天空盒層中的每一個的所述第一部分時，所述處理器將所述多個第一組中的第i個第一組中的所述多個第一物件映射到第i個天空盒層上。
  14. 如請求項11所述的電子裝置，其中所述多個天空盒層中的第j個天空盒層環繞所述多個天空盒層中的第（j-1）個天空盒層，其中j在2至N的範圍內。
  15. 如請求項11所述的電子裝置，其中所述第一內容幀包括第一眼部幀以及第二眼部幀，且所述處理器還執行： 反應於判定所述第一內容幀沒有深度圖，基於所述第一眼部幀以及所述第二眼部幀產生表徵各所述第一物件的所述深度的所述第一深度圖。
  16. 如請求項15所述的電子裝置，其中所述處理器還執行： 反應於判定處理負載低於負載閾值，基於所述第一眼部幀以及所述第二眼部幀產生表徵各所述第一物件的所述深度的所述第一深度圖；以及 反應於判定所述處理負載不低於所述負載閾值，基於所有所述多個第一物件構建第N個天空盒層的所述第一部分。
  17. 如請求項11所述的電子裝置，其中經重新投影的所述第一內容幀用作所述第一視覺內容的前景，且所述N個天空盒層用作所述第一視覺內容的背景。
  18. 如請求項11所述的電子裝置，其中所述電子裝置是虛擬實境（VR）系統的主機或獨立的虛擬實境頭戴式顯示器。
  19. 如請求項11所述的電子裝置，其中所述處理器還執行： 獲得第二內容幀且重新投影所述第二內容幀，其中經重新投影的所述第二內容幀與第二視角相對應且包括多個第二物件； 反應於判定所述第二內容幀具有表徵各所述第二物件的深度的第二深度圖，基於各所述第二物件的所述深度將所述多個第二物件劃分為N個第二組； 基於所述N個第二組構建各所述天空盒層的第二部分，其中各所述天空盒層的所述第二部分與所述第二視角相對應；以及 將經重新投影的所述第二內容幀與所述N個天空盒層組合以產生第二視覺內容且輸出所述第二視覺內容。
  20. 如請求項19所述的電子裝置，其中在構建各所述天空盒層的所述第二部分之前，所述處理器還執行： 反應於判定所述第二內容幀以及所述第一內容幀與不同場景相對應，重置所述N個天空盒層。
TW110113284A 2021-03-08 2021-04-13 背景天空盒構建方法以及電子裝置 TWI764672B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US17/195,562 US11205310B1 (en) 2021-03-08 2021-03-08 Background skybox constructing method and electronic device
US17/195,562 2021-03-08

Publications (2)

Publication Number Publication Date
TWI764672B true TWI764672B (zh) 2022-05-11
TW202235964A TW202235964A (zh) 2022-09-16

Family

ID=78918334

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110113284A TWI764672B (zh) 2021-03-08 2021-04-13 背景天空盒構建方法以及電子裝置

Country Status (3)

Country Link
US (1) US11205310B1 (zh)
CN (1) CN115049802A (zh)
TW (1) TWI764672B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1296873C (zh) * 2004-07-15 2007-01-24 浙江大学 基于相对深度计算的画中游方法
CN105704476A (zh) * 2016-01-14 2016-06-22 东南大学 一种基于边缘修复的虚拟视点图像频域快速获取方法
CN109005314A (zh) * 2018-08-27 2018-12-14 维沃移动通信有限公司 一种图像处理方法及终端
CN109671115A (zh) * 2017-10-16 2019-04-23 三星电子株式会社 使用深度值估计的图像处理方法和装置
CN109785429A (zh) * 2019-01-25 2019-05-21 北京极智无限科技有限公司 一种三维重建的方法和装置
CN110889384A (zh) * 2019-11-30 2020-03-17 北京城市网邻信息技术有限公司 场景切换方法及装置、电子设备和存储介质
US20200342652A1 (en) * 2019-04-25 2020-10-29 Lucid VR, Inc. Generating Synthetic Image Data for Machine Learning

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8319825B1 (en) * 2008-06-16 2012-11-27 Julian Urbach Re-utilization of render assets for video compression
WO2018021067A1 (ja) * 2016-07-29 2018-02-01 ソニー株式会社 画像処理装置および画像処理方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1296873C (zh) * 2004-07-15 2007-01-24 浙江大学 基于相对深度计算的画中游方法
CN105704476A (zh) * 2016-01-14 2016-06-22 东南大学 一种基于边缘修复的虚拟视点图像频域快速获取方法
CN109671115A (zh) * 2017-10-16 2019-04-23 三星电子株式会社 使用深度值估计的图像处理方法和装置
CN109005314A (zh) * 2018-08-27 2018-12-14 维沃移动通信有限公司 一种图像处理方法及终端
CN109785429A (zh) * 2019-01-25 2019-05-21 北京极智无限科技有限公司 一种三维重建的方法和装置
US20200342652A1 (en) * 2019-04-25 2020-10-29 Lucid VR, Inc. Generating Synthetic Image Data for Machine Learning
CN110889384A (zh) * 2019-11-30 2020-03-17 北京城市网邻信息技术有限公司 场景切换方法及装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN115049802A (zh) 2022-09-13
TW202235964A (zh) 2022-09-16
US11205310B1 (en) 2021-12-21

Similar Documents

Publication Publication Date Title
US10679426B2 (en) Method and apparatus for processing display data
KR102221937B1 (ko) 임의의 뷰 생성
WO2020140720A1 (zh) 虚拟现实场景的渲染方法、装置及设备
US9460553B2 (en) Point-based global illumination directional importance mapping
CN111598986B (zh) 虚拟流体表面的渲染方法、装置、设备及存储介质
JP2009505184A (ja) 深さバッファ付き表示装置を使用したレイ・トレーシングのためのシステムおよび方法
CN108043027B (zh) 存储介质、电子装置、游戏画面的显示方法和装置
JP7005712B2 (ja) 圧縮された画像を生成するための方法、システムおよび媒体
US20230230311A1 (en) Rendering Method and Apparatus, and Device
CN111968214A (zh) 一种体积云渲染方法、装置、电子设备及存储介质
JP5372241B2 (ja) 画像表示装置
TWI764672B (zh) 背景天空盒構建方法以及電子裝置
WO2020036214A1 (ja) 画像生成装置、画像生成方法及びプログラム
JP2018032112A (ja) データ処理装置、データ処理方法およびコンピュータプログラム
CN107977923B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
JP2003233836A (ja) モデリング時の距離成分を用いてレンダリング陰影処理を行う画像処理装置とその方法
CN115035231A (zh) 阴影烘焙方法、装置、电子设备和存储介质
CN116635900A (zh) 时延弹性化的云渲染
US11189081B2 (en) Image generation apparatus, image generation method and storage medium
CN115803782A (zh) 具有实时深度图的感受几何结构的增强现实效果
CN107038737B (zh) 立体棋牌绘制方法和装置
EP3437072A1 (en) System and method for rendering points without gaps
US11043035B2 (en) Methods and systems for simulating image capture in an extended reality system
JP2007072881A (ja) 画像表示システム
CN117173317A (zh) 模型阴影的处理方法、装置、设备及存储介质