TW201702807A - 根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置 - Google Patents

根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置 Download PDF

Info

Publication number
TW201702807A
TW201702807A TW105120643A TW105120643A TW201702807A TW 201702807 A TW201702807 A TW 201702807A TW 105120643 A TW105120643 A TW 105120643A TW 105120643 A TW105120643 A TW 105120643A TW 201702807 A TW201702807 A TW 201702807A
Authority
TW
Taiwan
Prior art keywords
distance
video content
descending
degree
version
Prior art date
Application number
TW105120643A
Other languages
English (en)
Inventor
法蘭柯斯 古拉得
雷奈德 多里
胡利安 弗雷瑞奧
Original Assignee
湯姆生特許公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 湯姆生特許公司 filed Critical 湯姆生特許公司
Publication of TW201702807A publication Critical patent/TW201702807A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/363—Image reproducers using image projection screens
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/15—Processing image signals for colour aspects of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0127—Head-up displays characterised by optical features comprising devices increasing the depth of field
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)

Abstract

本發明係為一種處理部分沉浸式視訊內容之方法，在使用者裝置上處理一沉浸式視訊內容(10)之第一部分(13)，例如待顯示部分。至於激發使用者目光投向沉浸式視訊內容之參考部分(20)，該方法包括判定第一部分或第一部分之子部分(40；41)與至少一參考部分間之距離，及處理第一部分或其子部分在視覺上之遞降版本，距離(42；43)越大，視覺品質遞降程度越高。

Description

根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置
本發明相關偽觸覺回饋領域，尤其在消費沈浸式視訊內容時，尤其具有頭戴顯示器(HMD)或行動裝置如數位板或智慧型手機。
沈浸式視訊內容係製作成顯示在使用者周圍的視訊內容，以使使用者感覺身處在內容的中心。沈浸式視訊內容通常係呈現在晶洞或洞穴中，在此類裝置中，內容係整個投影在壁面螢幕上，及使用者係藉由旋轉頭部來發現內容。
頭戴顯示器(HMD)係穿戴在頭上或作為頭盔一部分的顯示裝置，其在單眼前方(單目HMD)或在各眼前方(雙目HMD)具有小型顯示光學器件。頭戴顯示器係有利地調適用以消費沈浸式內容。在此一裝置中只顯示視訊的一部分，根據使用者頭部姿勢，例如藉由一整合運動單元量測(包括有一旋轉儀)來更新視訊內容的顯示部分。
最初在數十年前提出這類裝置，但最近，其價格以及效能特別由於螢幕進展已顯著地變動。此類裝置的到來允許使用者藉由頭部旋轉來觀看4π球面弧度內容。若此一新特點可看作關於在內容中沉浸的真正提升，則由於使用者正只注視內容的一部分，他/她可能未注視他/她在一給定時刻應該注視的方向。實際上，由於使用者可凝視他/她的全部周圍，因此他/她會漏掉影片解說的一些重要精彩部分，原因在於他/她在影片解說事件發生時正注意在內容的另一部分。
根據先前技術，已知為要使使用者目光投向他/她必須看的方向，強制虛擬相機平移係極有效率的解決方法，然而，為吾人所熟知，此解決方法有令大部分人感到噁心的缺點，結果劣化使用者的經驗品質。
本發明的目的為要克服此等先前技術缺點中的至少一者。
較明確地，本發明的目的為鼓勵使用者注意看沈浸式視訊內容中的一判定參考部分。
本發明相關一種處理第一部分沈浸式視訊內容的方法，該方法包括有以下步驟：- 判定該第一部分與沈浸式視訊內容的至少一參考部分之間的第一距離；- 處理該第一部分的版本，稱為遞降版本，將一視覺品質遞降應用到該第一部分以得到遞降版本，該遞降版本係有關視訊內容在視覺上的品質遞降，第一距離越大，視覺品質遞降程度越高。
根據一特殊特徵，將第一部分分割成子部分，判定各該子部分與該至少一參考部分之間的第二距離，第二距離越大，用於各該子部分的遞降程度越高。
有利地，遞降程度係隨著時間增加。
根據一特定特徵，第一距離屬於一距離群組，包括有：- 該第一部分的中心與該至少一參考部分的中心之間的歐幾里德距離(Euclidian distance)，- 在該至少一參考部分的任一點與該第一部分的任一點之間，其距離集當中的最短歐幾里德距離，- 在該至少一參考部分的任一點與該第一部分的任一點之間，其距離的平均歐幾里德距離。
根據一特殊特徵，將第一部分分割成子部分，判定各該子部分與該至少一參考部分之間的第二距離，第二距離越大，用於各該子部分的遞降程度越高。
本發明亦相關一種處理裝置，配置用以處理一沈浸式視訊內容的第一部分，該裝置包括有：- 判定構件，用以判定該第一部分與至少一參考部分之間的第一距離；- 處理構件，用以處理該第一部分的版本，稱為遞降版本，該遞降版本係有關視訊內容在視覺上的遞降，該第一距離越大，遞降程度越高；有利地，該裝置進一步將該遞降版本傳送到一顯示裝置。
本發明亦相關一種處理裝置，配置用以處理一沈浸式視訊內容的第一部分，該裝置包括有至少一處理器，配置用以：- 判定該第一部分與至少一參考部分之間的第一距離；- 處理該第一部分的版本，稱為遞降版本，該遞降版本係有關視訊內容在視覺上的遞降，該第一距離越大，遞降程度越高。
視需要，該裝置尚包括一發送器，將該遞降版本傳送到一顯示裝置。
本發明亦相關一種電腦程式產品，包括有程式碼指令，當一電腦上執行該程式時，由至少一處理器用以執行上述處理一部分沈浸式視訊內容的方法。
本發明亦相關一種(非暫態)處理器可讀取媒體，具有指令儲存其中，用以令一處理器至少執行上述處理一部分沈浸式視訊內容的方法。
10‧‧‧沉浸式視訊內容
11‧‧‧使用者
12‧‧‧方向
13‧‧‧(視訊內容)第一部分
20‧‧‧參考部分
21,31‧‧‧第一距離
40,41‧‧‧矩形子部分
42,43‧‧‧第二距離
50‧‧‧第一部分視訊內容處理方法
51‧‧‧第一距離判定步驟
52‧‧‧第一部分遞降步驟
53‧‧‧遞降版本產生步驟
60,70‧‧‧沈浸式視訊內容第一部分處理裝置
61‧‧‧第一部分選擇單元
62‧‧‧影像品質遞降單元
63‧‧‧控制器
64‧‧‧顯示單元
71‧‧‧微處理器(或CPU)
72‧‧‧圖形卡
720‧‧‧圖形處理器單元(或GPU)
721‧‧‧圖形隨機存取記憶體(GRAM)
7210‧‧‧視訊內容的第一部分
73‧‧‧不變性記憶體，屬ROM(唯讀記憶體)類型
730‧‧‧程式
74‧‧‧隨機存取記憶體或RAM
740‧‧‧暫存器
741‧‧‧視訊內容資料
742‧‧‧參考部分的資訊表示
75‧‧‧I/O(輸入/輸出)裝置
76‧‧‧滙流排
77‧‧‧電源
80‧‧‧初始步驟
81‧‧‧視訊內容第一部分選擇步驟
82‧‧‧在控制器檢測到事件時即執行步驟
83‧‧‧第一距離判定步驟及第一部分遞降步驟
84‧‧‧參考部分得到步驟
以下將參考附圖以描述本發明，一旦閱讀以下說明，本發明的其他特定特徵及優點將明朗化，圖中：圖1係根據本發明原理的一特定實施例以圖顯示一沈浸式視訊內容的第一部分；圖2係根據本發明原理的一特定實施例以顯示圖1中第一部分的位置，一參考部分在沈浸式視訊內容內的位置，及該二部分之間的第一距離；圖3A及3B顯示圖2的第一距離與應用到圖1中第一部分的遞降程度之間的關係；圖4係根據本發明原理的一特定實施例以顯示圖3A及3B的遞降程度係計算用於圖1中第一部分的子部分；圖5係根據本發明原理的一特定實施例以顯示一處理方法，根據圖2的第一距離以處理圖1的第一部分；圖6係根據本發明原理的一特定實施例以圖顯示一系統結構，配置用以處理圖1的第一部分，該系統包括有一視訊部分選擇單元及一影像品質遞降單元；圖7係根據一特殊實施例以顯示一系統結構，配置用以處理圖1的第一部 分；圖8係根據一特殊實施例以顯示處理一部分視訊內容的方法，實施在圖6或圖7的一處理裝置中。
茲參考附圖以描述本發明技術主題，其中從頭到尾使用相似參考數字符號以表示相似元件。在以下說明中，為說明目的，提出許多特定細節，為要提供技術主題的徹底理解。不用此等特定細節當然亦可實施技術主題實施例。
將參考一處理方法的一特殊範例以說明本發明原理，利用局部顯示裝置如HMD(頭戴顯示器)以處理一沈浸式視訊內容的第一部分，使第一部分的視覺品質遞降。由於視覺品質遞降程度係隨著第一部分與參考部分之間的距離增加，因此，越靠近參考部分，使用者要朝向參考部分旋轉他/她的頭部，他/她的經驗品質將越佳。使用者經歷此視覺品質遞降具有激發他/她把目光投向一參考部分(較少品質遞降)的優點。
圖1顯示一沈浸式視訊內容的特殊實施例，沈浸式視訊及矩形視訊具有不同本質，矩形視訊內容可視為一函數，其使位在使用者前方的一矩形框中各平面坐標(x,y)關聯到一顏色的表示法。一沈浸式視訊內容係可視為一函數，其將位在使用者周圍的球形框中各極坐標(θ,φ)關聯到一顏色的表示法，在兩情況中，視訊係一影像時間序列，常稱為訊框，一訊框的資料表示係組織為一矩形(10)。用於矩形視訊，轉換係直接的，當資料矩形與螢幕矩形不具有相同尺寸時，剪裁步驟係必需的。在沈浸式視訊內容的情形，需要一投影映射函數，將資料矩形中的平面坐標關聯到投影球體中的極坐標。在圖1，投影映射模式係圓柱形，將沈浸式視訊內容(10)投影為環繞使用者(11)的圓柱面。為要注意看內容，使用者必須四周轉動他/她的頭部，他/她的視野並不涵蓋整個內容。根據一變化，投影映射模式係球形，在另一變化中，投影映射模式係立方體的。
在局部顯示裝置如HMD的情形，只顯示沈浸式內容(10)的一部分(13)，此部分稱為第一部分，對應到使用者的視野。在任何時間，使用者正使他/她的裝置定向朝判定沈浸式視訊內容顯示部分的方向(12)。
在觀察時段的任何時間，得到沈浸式視訊內容的至少一參 考部分，此至少一參考部分具有一值得注意的趣味或重要性，此一參考部分係視訊影像的一區，比內容小且通常比顯示部分小。一參考部分係由於任何習知2D幾何形狀描述格式來表現，例如係位在沈浸式視訊內容的參考框中的一2D點，其他用以表現此類參考部分的形狀範例係矩形及橢圓形(圓形係橢圓形的特殊例子)。矩形(例如藉由一2D點來描述)係一寬度及一高度，橢圓形在其邊上係由一中心及二半徑或二中心及一半徑來描述。一參考部分的形狀描述係不限於此等範例，卻亦可藉由任何2D表面描述來說明，如依可縮放向量圖形(SVG)或依超文字標記語言5(HTML5)格式所描述。
根據一特殊範例，內容創作者已在內容內辨識至少一參考部分用於至少一段時間作為影片解說的精彩部分，他/她不想要觀看者錯過它。因此，他/她想要激發觀看者將目光投向此參考部分的方向。在此範例的第一變化中，從一觀察時段到另一觀察時段，參考部分集皆相同，無關於已知有關使用者的事。根據此範例的補充變化，參考部分集係取決於使用者的設定檔，從一使用者到另一使用者係各異。內容觀看時段的條件(例如當天的時間)亦係修改參考部分集的參數，換句話說，從一觀看時段到另一觀看時段，用於一沈浸式視訊內容的參考部分集係各異。
根據另一範例，一或多個參考部分係藉由一感興趣區檢測演算法來判定，此一演算法分析視訊的影像以自動地形成一些區域，估計其用於使用者係更有趣或更重要，例如，此一演算法計算一顯著影像圖以檢測高度顯著區。此一演算法的另一範例檢測影像序列中的移動以辨識移動物件。根據一變化，演算法的參數係取決於使用者的設定檔或取決於觀看時段的條件，在此變化中，從一觀看時段到另一觀看時段，用於一沈浸式視訊內容的參考部分集係各異。
視訊內容資料係無關緊要地從伺服器中串流，或從儲存在儲存裝置如磁碟或記憶棒的檔案中讀取。用以傳送沈浸式視訊內容的鏈接可係有線的(例如基於通用標準滙流排(USB)或高畫質多媒體介面(HDMI))，或無線的(例如Wi-Fi或藍芽)，並無關緊要。亦可藉由一3D引擎，從根據虛擬相機位在此3D場景的位置描述以即時產生沈浸式視訊內容，根據此範例，第一部分(13)對應到虛擬相機在任何瞬間擷取的部分3D 場景。
根據一範例，將參考部分的形狀及時機描述無關緊要地插入沈浸式視訊內容中、視訊流資料中，或視訊檔案中，在此範例編碼的另一變化中，此描述係由第二伺服器提供，或登錄在一分開檔案中。
圖2顯示沈浸式視訊內容(10)的一範例，其上待顯示部分(13)係一觀察視窗，在第一部分外面辨識到一參考部分。在此範例中，採用一橢圓形狀，參考部分可對應到尚未發生的一影片解說精彩部分。在此一情形中，本發明原理具有以下優點：激發使用者目光投向事件發生預備中的參考部分。
計算在第一部分與參考部分之間的第一距離(21)，根據圖2的範例，第一距離(21)係在參考部分的中心在一邊與待顯示部分的中心在另一邊之間的歐幾里德距離。根據另一範例，第一部分的每一點係與參考部分的每一點關聯，如圖3A及3B所繪示，計算一距離用於所有此等點對耦，及第一距離(31)對應到其中最短者。根據此範例的一變化，第一距離對應到所有此等距離的平均。
每次檢測到參考部分的移動或顯示部分的移動即有利地計算第一距離，在另一變化中，較常計算第一距離例如用於每一視訊框。
根據一特殊實施例，在同時間得到數個參考部分，在一特殊變化中，由於上述範例中的一者，第一距離係在各參考部分與第一部分之間得到的最短第一距離。根據另一變化，第一距離係利用先前範例中的一者得到的第一距離的平均。
根據第一距離使第一部分的視覺品質遞降，如在圖3A及3B所顯示，第一距離越大，視覺品質遞降程度越高，結果，使用者的經驗品質調降。此第一部分視覺品質遞降具有激發使用者目光投向參考部分(較少遞降)的優點。
利用熟諳此藝者習知的任何視覺品質遞降方法有利地得到第一部分的視覺品質遞降，此一視覺品質遞降方法調降使用者的視覺經驗品質。一視覺品質遞降具有一程度參數，根據一變化，程度參數係從0.0(無任何修改)變化到1.0(第一部分的最糟品質)。一視覺品質遞降範例係向下褪色：影像的色彩係在程度0未改變及逐漸變暗直到在程度1的黑 色。此一方法的補充範例係向上褪色：影像的色彩係逐漸變亮直到白色，根據此一視覺品質遞降方法的其他變化，將影像的色飽和向上或向下修改。影像模糊及影像雜訊係視覺品質遞降方法的其他範例，此後者範例在於影像的亮度及/或色彩資訊中引入一隨機變化，引入的變化越多，雜訊程度越高。在程度1，表現在影像上的物件係不再能辨識。影像像素化及數個影像壓縮方法係視覺品質遞降的其他範例，根據另一變化，遞降的程度參數例如係從0變化到255，或從-100變化到100。
根據另一實施例，用於一給定第一距離的遞降程度係隨著時間增加，例如，觀看時段一開始並無參考部分，原因在於影片解說在此時刻並無任何精彩部分，一會兒之後，辨識到一參考部分以激發使用者目光投向它。若使用者正在看別處，則第一距離(稱為dist)係高的，計算一遞降程度(稱為lev)用於此第一距離dist，第一部分在此瞬間係毫無遞降。為要避免第一部分的視覺品質突然跳越，根據此實施例，將視覺品質遞降程度設成極低值，例如設成零。接著，用於此第一距離dist，視覺品質遞降程度的確逐漸增加直到程度lev，當遞降程度已達到程度lev就不再增加。例如，若選擇的遞降方法係褪色，用於給定第一距離dist，第一部分將隨著時間成為越來越暗，只有縮減第一距離(例如由於使用者的頭部朝參考部分移動)，才會衰減此作用。
圖4顯示本發明原理的另一實施例，其中第一部分係分割成子部分，例如，第一部分的子部分具有一像素大小並係組織為正則網格，根據另一範例，子部分係不同大小的六邊形。在圖4，第一部分(13)係分割成矩形子部分(如40及41)，計算一第二距離用於各子部分(如42及43)，計算第二距離係藉由使用任何用於第一距離計算的方法。在圖4，子部分40係比子部分41離參考部分更遠，用於子部分(40)的視覺品質遞降程度係比用於子部分(41)者更高。在此範例，一子部分位置越靠近第一部分(13)的右邊及底邊，遞降程度就越高，此範例產生第一部分的視覺品質梯度。此實施例(單獨或與上述視覺品質遞降程度的逐漸增加結合)具有看似招手的優點，其驅使使用者將他/她的凝視導向第一部分較少遞降的子部分，及無意識地將他/她的頭部旋轉朝向參考部分。
為使前後連貫，有利地使用相同距離方法以計算每一子部 分的第二距離，根據一變化，使用不同距離計算方法用於至少二子部分，然而此變化在距離集及子部分遞降程度中造成不連貫。
圖6係以圖顯示一裝置的第一硬體實施例(60)，配置用以處理視訊內容的第一部分。裝置(60)至少包括一視訊部分選擇單元(61)、一影像品質遞降單元(62)，及控制器(63)。有利地，該系統係連接到一顯示裝置(64)，第一部分係傳送到該顯示裝置。根據一特殊實施例，裝置(60)係HMD(頭戴顯示器)或數位板或智慧型手機，在此範例中，控制器中的一者係HMD的慣性感測器系統，慣性感測器系統例如包括三個旋轉儀，一者用於俯仰，一者用於偏航，及一者用於滾轉。根據另一實施例，控制器包括至少一慣性測量單元(IMU)。在另一範例中，裝置(60)係機上盒或個人電腦，及控制器係操縱桿、操縱墊、滑鼠、遙控器，或鍵盤。在一些變化中，使用相機以定出控制器裝置在空間的位置。影像品質遞降單元(62)係配置用以例如經由一無線鏈接以接收及傳送一部分沈浸式視訊的資料表示(表現為一影像或表現為一影像序列)。根據另一範例，影像品質遞降單元(62)係配置用以經由一有線鏈接(例如根據USB或HDMI標準)以接收及傳送資料。
圖7係以圖顯示一裝置的第二硬體實施例(70)，在此範例中，裝置(70)包括以下元件，藉由一位址及資料滙流排(76)(其亦傳送一時鐘信號)以互相連接：- 一微處理器(71)(或CPU)，- 一圖形卡(72)，包括有：‧數個圖形處理器單元(或GPU)(720)，‧一圖形隨機存取記憶體(GRAM)(721)，- 一ROM(唯讀記憶體)類型的不變性記憶體(73)，- 一隨機存取記憶體或RAM(74)，- 數個控制器(63)(如慣性測量單元(IMU))，- 一或數個I/O(輸入/輸出)元件(75)，例如一觸覺介面、滑鼠、網路攝影機等，及- 一電源(77)。
有利地，裝置(70)係連接到一或多個顯示螢幕類型的顯示 裝置，直接連接到圖形卡(72)，用以顯示圖形卡中所計算的影像。
請注意到記憶體(721)、(73)及(74)的說明所使用的”暫存器”一詞，在各提及的記憶體中，指明低容量的記憶區(一些二進資料)以及大容量記憶區(能用於待儲存的整個程式，或所計算資料或待顯示資料的全部資料表示或部分資料表示)兩者。
當開關打開時，微處理器(71)下載及執行RAM(74)中所含程式的指令。
隨機存取記憶體(74)明顯地包括：- 在一暫存器(740)中，微處理器(71)的作業程式，負責裝置(70)開機，- 沈浸式視訊內容的影像資料(741)表示(例如RGB資料或YUV資料)，- 參考部分的資訊(742)表示，相關視訊內容的時戳。
根據一特殊實施例，實施方法步驟(特定用於本發明並將說明如下)的演算法係有利地儲存在圖形卡(72)的記憶體GRAM(721)(與實施此等步驟的裝置(70)關聯)中。當開關打關及一旦將資料(741)及資訊(742)下載到RAM(74)中，圖形卡(72)的圖形處理器(720)便將此等參數下載到GRAM(721)中，並依”著色器(shader)”類型的微程式形式以執行此等演算法的指令(例如使用HLSL(高階著色器語言)或GLSL(OpenGL著色語言)。
隨機存取記憶體GRAM(721)明顯地包括一暫存器(7210)中視訊內容待顯示部分的資料表示。
根據另一變化，RAM(74)的一部分係由CPU(71)指定用於演算法的儲存，然而此變化在影像組成中造成較大潛伏時間，因資料係必須從隨機存取記憶體(74)經過滙流排(76)傳送到圖形卡(72)，因此其傳輸容量通常係比圖形卡中從GPU到GRAM(反之亦然)的資料傳輸可用的傳輸容量差。
根據另一變化，電源(77)係在裝置(70)的外部。
圖5係根據一非限定的有利實施例以圖顯示一第一方法實施例，如在處理裝置如裝置(60)或(70)所實施。
該方法在入口取得二資料：第一部分(13)，代表一沈浸式視訊內容的一部分，及相同沈浸式視訊內容的一參考部分(20)。第一部分及參考部分係與其在沈浸式視訊內容的參考訊框內的位置及形狀描述關 聯。
第一步驟(51)係在於判定第一部分與參考部分之間的第一距離，根據一有利變化，此第一距離係一純量值，正規化在0.0與1.0之間。根據另一變化，第一距離係以像素測量，或係以度或以弳測量的角距離。第二步驟(52)使用步驟(51)的結果，在步驟(52)，根據所提供的第一距離以計算視覺品質遞降程度：第一距離越大，視覺品質遞降程度越高。根據此程度，第一部分的影像係在視覺上遞降。步驟(52)正使用任何上述視覺品質遞降方法，在此步驟產生第一部分的影像的一遞降版本(53)。
圖8係根據一非限定的有利實施例以圖顯示一第二方法實施例，如在處理裝置如裝置(60)或(70)所實施。
在一初始化步驟(80)期間，更新處理裝置(60)或(70)的不同參數，尤其，依任一方式將特定用於控制器的參數初始化，例如，若裝置(60)或(70)係頭戴顯示器(HMD)，則藉由將裝置的位置與一世界固定參考框中的一世界參考方向作比較以判定三角度的最初第一集合。例如，此參考框的確使用水平軸及垂直軸具有例如朝北或朝向一相關相機的方位。初始地並未辨識任何參考部分，換句話說，在應用的最開端並無任何用以激發使用者目光投向的參考部分。
沈浸式視訊內容係與一投影映射模式關聯，例如圓柱形(如在圖1所繪示)、立方體的，或球形。此投影映射模式定義其自己參考訊框中的一內容參考方向。根據一變化，在此內容參考方向與初始化步驟(80)期間所選擇世界參考方向之間建立一對應。
在步驟(81)期間係根據控制器的參數以選擇視訊內容的第一部分，首次執行此步驟係使用此等參數的預設值，在此步驟使用控制器的參數以判定第一部分在沈浸式視訊內容訊框中的位置。在一實施例中，其中顯示器係裝置(60)或(70)的固有元件如頭載顯示器(HMD)，一面根據此位置，另一面根據顯示螢幕的特性(例如形狀及視野)，”切出”及選擇沈浸式視訊內容的第一部分。根據一變化，當控制器中的至少一者檢測到一事件(82)時執行此步驟，例如，若使用者正使用一操縱桿以瀏覽沈浸式視訊內容，則在使用者正操作他/她的操縱桿時執行步驟(81)。根據另一變化，若裝置(60)或(70)係HMD，則例如在其慣性測量單元檢測到HMD位 置的一變更時執行步驟(81)。根據另一變化，較常執行步驟(81)例如用於沈浸式視訊內容的各訊框。步驟(81)的執行自動地引起下一步驟(83)的執行。
在步驟(83)期間，執行圖5所示方法的兩步驟，判定第一部分與一參考部分之間的第一距離，及遞降第一部分的品質。在此步驟(83)係根據第一距離以計算遞降程度：第一距離越大，視覺品質遞降程度越高。若無任何參考部分，則將第一距離設成零，結果，影像品質係毫無遞降，否則，計算待顯示部分與參考部分之間的第一距離。根據一特殊範例，此第一距離係沈浸式視訊內容的參考框中在第一部分的中心(例如形心)與參考部分的中心(用於另一範例，重心)之間的最短歐幾里德距離(Euclidian distance)。根據另一實施例，此第一距離係第一部分的任一點與參考部分的任一點之間的最短距離，一旦計算第一距離，即遵循以下原則選擇一遞降程度：第一距離越大，遞降程度越高。此選擇係取決於選擇用以在視覺上遞降影像品質的手段。根據一變化，第一部分的色彩係向下褪色，根據另一變化，如圖3A及3B所繪示，將一些雜訊引入待顯示部分中。在步驟(83)，使用選擇的遞降手段以使顯示部分在視覺上遞降。
在任何時間，參考部分可變更(84)，此一變更例如係在內容資料流內得到，根據第二範例，此資訊係從一遠程伺服器中得到。根據第三範例，參考部分係藉由一感興趣區域檢測演算法來定義，在此範例中，由於沈浸式視訊內容的影像序列藉由此一演算法的分析，因此得到對應的資訊。用於此一感興趣區域檢測演算法執行的程式係有利地儲存在一裝置(70)的GRAM(621)的一暫存器中，或根據一變化，係下載在RAM(64)的一暫存器中。當檢測到參考部分的一變更時執行步驟(83)。
根據另一實施例，用於一給定第一距離的遞降程度係隨著時間增加，例如，開始觀察時段並無參考部分，原因在於影片解說中在此時刻並無任何精彩部分。一會兒之後，辨識到一參考部分以激發使用者目光投向它，若使用者正看向別處，則第一距離(稱為dist)係高的。用於此距離dist，計算一遞降程度(稱為lev)，第一部分在此瞬間係毫無遞降，為避免第一部分的視覺品質突然跳越，根據此實施例，將視覺品質遞降程度設成極低值，例如設成零。接著，用於此第一距離dist，視覺品質遞降程 度的確逐漸增加直到程度lev，當遞降程度已達到程度lev時就不再增加。例如，若選擇的遞降方法係像素化，則用於給定的距離dist，第一部分將隨著時間成為越來越像素化，用於裝置(60)或(70)係HMD的範例，只有使用者頭部朝向參考部分的移動(其係一控制器事件(63))才會藉由觸發步驟(81)來衰減此作用，結果並觸發步驟(83)。
根據另一實施例，在步驟(83)，第一部分係分割成子部分，根據一變化，子部分具有一像素大小並係組織為正則網格。根據另一變化，子部分係不同大小的正方形，正方形集合覆蓋沈浸式視訊內容的整個區。在此步驟(83)計算一第二距離用於各子部分，第二距離係藉由使用用於第一距離所述距離中的一者來判定。根據一變化，為求前後連貫，使用相同距離來計算每一子部分的第二距離，步驟(83)的此變化係單獨實施，或與在其中逐漸增加視覺品質遞降程度的變化結合來實施。
當然，本發明係不限於上述實施例。
尤其，本發明係不限於處理沈浸式視訊內容的方法，卻亦延伸到顯示所處理第一部分的任何方法，及延伸到實施此顯示方法的任何裝置。用以產生第一部分及子部分所需計算的實作係不限於著色器(shader)類型微程式的實作，卻亦延伸到任何程式類型的實作，例如可由CPU類型微處理器執行的程式。本發明方法的用途係不限於實況利用，卻亦延伸到其他任何利用，例如用於錄製工作室中的處理，被稱為後製處理。
本文中說明的實作例如可實現在一方法或過程、裝置、軟體程式、資料流，或信號中。即若只在單一形式實作的情境中討論(例如只討論作為方法或裝置)，所討論特點的實作亦可實現在其他形式(例如程式)中。裝置例如可實現在適當硬體、軟體及韌體中，方法例如可實現在一裝置如處理器中，處理器通常指數個處理元件，例如包括有電腦、微處理器、積體電路或可程式邏輯元件。處理器亦包括通訊裝置如智慧型手機、數位板、電腦、行動電話、可攜式/個人數位助理器("PDA")，及有助於終端用戶之間資訊通訊的其他裝置。
本文中所述各種處理過程及特點的實作可具體實現在各式各樣不同設備或應用程式中，尤其係與以下各項關聯的設備或應用程式：資料編碼、資料解碼、視野生成、紋理處理，及影像及相關紋理資訊 及/或深度資訊的其他處理。此類設備的範例包括編碼器、解碼器、後處理器(處理解碼器來的輸出)、前處理器(提供輸入到編碼器)、視訊編碼器、視訊解碼器、視訊編解碼器、網站伺服器、機上盒、膝上型電腦、個人電腦、手機、PDA，及其他通訊裝置。顯然地，該設備可係移動式，甚至安裝在汽車中。
此外，該等方法可由一處理器正執行的指令來實施，及此類指令(及/或一實作所產生的資料值)係可儲存在一處理器可讀取媒體如積體電路、軟體載體，或其他儲存裝置如硬碟、光碟片(“CD”)、光學磁碟(例如DVD，常稱為多樣化數位光碟或數位影碟)、隨機存取記憶體(“RAM”)，或唯讀記憶體(“ROM”)上。該等指令可形成一應用程式，有形具體化在一處理器可讀取媒體上，指令例如係可在硬體、韌體、軟體或其組合中，指令例如係可在作業系統、分開的應用程式，或二者的組合中找到。因此一處理器的特徵例如可兼作配置用以實施一處理過程的裝置，及包括有處理器可讀取媒體(如儲存裝置)的裝置，該處理器可讀取媒體具有指令用以實施一處理過程。此外，一處理器可讀取媒體可儲存(在指令外添加或代替指令)一實作產生的資料值。
如熟諳此藝者所明白，實作可產生各式各樣格式化用以攜帶資訊的信號，其例如係可儲存或傳送，資訊例如可包括用以執行一方法的指令，或所述實作中的一者所產生的資料。例如，可將一信號格式化用以攜帶作為資料，作為規則用以寫入或讀取所述一實施例的語法，或用以攜帶作為資料，作為所述一實施例寫成的實際語法值。可將此一信號例如格式化作為一電磁波(例如使用頻譜的一射頻部分)或作為一基頻信號。格式化例如可包括編碼一資料流及利用已編碼資料流以調變一載波。信號攜帶的資訊例如可係類比或數位資訊，如所知，信號係可透過各式各樣有線或無線鏈接來傳送，信號係可儲存在一處理器可讀取媒體上。
已說明數個實作，然而，應瞭解可作出各種修改，例如可將不同實作的元件結合、增補、修改或移除用以產生其他實作。此外，本領域的普通技術人員應瞭解其他結構或過程係可替代用於該等揭示者，如所揭示實作，作為結果的實作將依至少大體上相同的(數個)方式，執行至少大體上相同的(數個)功能，以達成至少大體上相同的(數個)結果，因此， 本發明涵蓋此等及其他實作。
10‧‧‧沉浸式視訊內容
13‧‧‧第一部分
20‧‧‧參考部分
40,41‧‧‧第一部分之子部分
42,43‧‧‧距離

Claims (15)

  1. 一種呈現沈浸式視訊內容之方法，呈現一沈浸式視訊內容(10)之第一部分(13)，其特徵在於該方法包括：- 從至少一控制器中得到參數，該等參數係代表用以呈現之第一部分，該第一部分係沈浸式內容之一部分；- 判定該第一部分(13)與沈浸式視訊內容之至少一參考部分(20)間之第一距離(21；31)；- 藉由根據該第一距離(21；31)以遞降該第一部分之視覺品質，處理該第一部分(13)之版本，稱為遞降版本(53)，第一距離(21；31)越大，視覺品質遞降程度越高；- 呈現該第一部分遞降版本(53)。
  2. 如申請專利範圍第1項之方法，其中該第一部分(13)係分割成子部分(40；41)，判定各該子部分與該至少一參考部分(20)間之第二距離(42；43)，第二距離(42；43)越大，用於各該子部分(40；41)之遞降程度越高。
  3. 如申請專利範圍第1或2項之方法，其中該遞降程度係隨著時間增加。
  4. 如申請專利範圍第1或2項之方法，其中該第一距離(31)屬於一距離群組，包括有：- 在該第一部分之中心與該至少一參考部分之中心間之歐幾里德距離(Euclidian distance)，- 在該至少一參考部分之任一點與該第一部分之任一點間，其距離集當中之最短歐幾里德距離，- 在該至少一參考部分之任一點與該第一部分之任一點間，其距離之平均歐幾里德距離。
  5. 如申請專利範圍第1或2項之方法，其中該第一部分之視覺遞降屬於一視覺遞降群組，包括有：- 模糊，- 向下或向上褪色，- 向下或向上色飽和， - 雜訊，- 像素化。
  6. 如申請專利範圍第1或2項之方法，其中根據數個參考部分以判定該第一距離(31)。
  7. 如申請專利範圍第1或2項之方法，尚包括將該遞降版本(53)傳送至一顯示裝置。
  8. 如申請專利範圍第1或2項之方法，其中使用者係透過控制器元件(63)以控制該第一部分(13)之位置。
  9. 一種呈現裝置(60；70)，配置用以呈現一沈浸式視訊內容(10)之第一部分(13)，其特徵在於該裝置包括：- 得到構件，用以從至少一控制器中得到參數，該等參數代表用以呈現之第一部分，該第一部分係目前呈現之一部分沈浸式內容；- 一判定處理器，配置用以判定該第一部分與至少一參考部分間之第一距離；- 一遞降版本處理器，配置用以根據該第一距離以遞降該第一部分之視覺品質，用以處理該第一部分之版本，稱為遞降版本，該第一距離越大，遞降程度越高。- 一呈現處理器，配置用以呈現該第一部分遞降版本。
  10. 如申請專利範圍第9項之裝置，其中該第一部分係分割成子部分，判定各該子部分與該至少一參考部分間之第二距離，第二距離越大，用於各該子部分之遞降程度越高。
  11. 如申請專利範圍第9或10項之裝置，其中該遞降程度係隨著時間增加。
  12. 如申請專利範圍第9或10項之裝置，其中該第一距離屬於一距離計算方式群組，包括有：- 在該第一部分之中心與該至少一參考部分之中心間之歐幾里德距離，- 在該至少一參考部分之任一點與該第一部分之任一點間之最短歐幾里德距離或平均歐幾里德距離。
  13. 如申請專利範圍第9或10項之裝置，其中該第一部分之視覺遞降屬於一視覺遞降群組，包括有： - 模糊，- 向下或向上褪色，- 向下或向上色飽合，- 雜訊，- 像素化。
  14. 如申請專利範圍第9或10項之裝置，其中根據數個參考部分以判定該第一距離。
  15. 如申請專利範圍第9或10項之裝置，尚包括將該遞降版本傳送至一顯示裝置。
TW105120643A 2015-06-30 2016-06-30 根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置 TW201702807A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
EP15306058.7A EP3113159A1 (en) 2015-06-30 2015-06-30 Method and device for processing a part of an immersive video content according to the position of reference parts

Publications (1)

Publication Number Publication Date
TW201702807A true TW201702807A (zh) 2017-01-16

Family

ID=53724157

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105120643A TW201702807A (zh) 2015-06-30 2016-06-30 根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置

Country Status (9)

Country Link
US (1) US10298903B2 (zh)
EP (2) EP3113159A1 (zh)
JP (1) JP2017016657A (zh)
KR (1) KR20170003441A (zh)
CN (1) CN106331687B (zh)
CA (1) CA2933651A1 (zh)
MX (1) MX364891B (zh)
RU (1) RU2722584C2 (zh)
TW (1) TW201702807A (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10139902B2 (en) * 2015-09-16 2018-11-27 Colopl, Inc. Method and apparatus for changing a field of view without synchronization with movement of a head-mounted display
WO2018123801A1 (ja) * 2016-12-28 2018-07-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置
EP3602244A1 (en) * 2017-03-23 2020-02-05 InterDigital CE Patent Holdings Method and apparatus for providing immersive reality content
US11182639B2 (en) 2017-04-16 2021-11-23 Facebook, Inc. Systems and methods for provisioning content
EP3389281B1 (en) * 2017-04-16 2020-12-30 Facebook, Inc. Systems and methods for provisioning content
EP3389282B1 (en) * 2017-04-16 2020-05-13 Facebook, Inc. Systems and methods for provisioning content
US10348964B2 (en) 2017-05-23 2019-07-09 International Business Machines Corporation Method and system for 360 degree video coverage visualization
FR3067199B1 (fr) * 2017-06-06 2020-05-22 Sagemcom Broadband Sas Procede de transmission d'une video immersive
CN112406706B (zh) * 2020-11-20 2022-07-22 上海华兴数字科技有限公司 车辆景象的显示方法、装置、可读存储介质及电子设备
CN113256777B (zh) * 2021-06-28 2021-09-28 山东捷瑞数字科技股份有限公司 一种基于计算机图形学实现的球幕播放及调整方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3569981B2 (ja) * 1994-10-26 2004-09-29 ソニー株式会社 探索方法および音声認識装置
US5850352A (en) * 1995-03-31 1998-12-15 The Regents Of The University Of California Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images
US6356664B1 (en) 1999-02-24 2002-03-12 International Business Machines Corporation Selective reduction of video data using variable sampling rates based on importance within the image
JP3350654B2 (ja) * 1999-12-03 2002-11-25 株式会社ナムコ 画像生成システム及び情報記憶媒体
JP4409719B2 (ja) * 2000-05-09 2010-02-03 株式会社バンダイナムコゲームス ゲーム装置および情報記憶媒体
JP3648130B2 (ja) 2000-05-15 2005-05-18 日本電信電話株式会社 映像一覧方法及び映像一覧処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP3715222B2 (ja) * 2000-12-27 2005-11-09 株式会社ソニー・コンピュータエンタテインメント 描画方法、描画装置、描画処理プログラム、描画処理プログラムを記録した記録媒体、および描画処理プログラム実行装置
US7027655B2 (en) 2001-03-29 2006-04-11 Electronics For Imaging, Inc. Digital image compression with spatially varying quality levels determined by identifying areas of interest
JP2002330440A (ja) 2001-05-01 2002-11-15 Sony Corp 画像伝送方法、画像伝送方法のプログラム、画像伝送方法のプログラムを記録した記録媒体及び画像伝送装置
JP3959354B2 (ja) * 2003-01-10 2007-08-15 株式会社東芝 画像生成装置、画像生成方法、及び画像生成プログラム
US7292257B2 (en) * 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
JP2006280731A (ja) * 2005-04-01 2006-10-19 Aruze Corp ゲームプログラム、ゲーム装置及び記録媒体
GB2447245B (en) 2007-03-05 2011-12-28 Snell & Wilcox Ltd Video transmission
JP5296337B2 (ja) * 2007-07-09 2013-09-25 任天堂株式会社 画像処理プログラム、画像処理装置、画像処理システムおよび画像処理方法
US8957835B2 (en) * 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
GB2467898A (en) 2008-12-04 2010-08-18 Sharp Kk Display with automatic screen parameter adjustment based on the position of a detected viewer
JP5732988B2 (ja) * 2011-04-08 2015-06-10 ソニー株式会社 画像処理装置、表示制御方法及びプログラム
US9897805B2 (en) 2013-06-07 2018-02-20 Sony Interactive Entertainment Inc. Image rendering responsive to user actions in head mounted display
WO2013106243A1 (en) * 2012-01-12 2013-07-18 West Kanye Omari Multiple screens for immersive audio/video experience
US20130300634A1 (en) * 2012-05-09 2013-11-14 Nokia Corporation Method and apparatus for determining representations of displayed information based on focus distance
WO2013179426A1 (ja) * 2012-05-30 2013-12-05 パイオニア株式会社 表示装置、ヘッドマウントディスプレイ、表示方法及び表示プログラム、並びに記録媒体
JP6007600B2 (ja) * 2012-06-07 2016-10-12 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US20140092006A1 (en) * 2012-09-28 2014-04-03 Joshua Boelter Device and method for modifying rendering based on viewer focus area from eye tracking
US9997199B2 (en) * 2014-12-05 2018-06-12 Warner Bros. Entertainment Inc. Immersive virtual reality production and playback for storytelling content
KR102234477B1 (ko) * 2015-01-15 2021-04-01 한국전자통신연구원 영상 품질에 기초한 파노라마 영상 생성 장치 및 방법

Also Published As

Publication number Publication date
US10298903B2 (en) 2019-05-21
KR20170003441A (ko) 2017-01-09
MX364891B (es) 2019-05-10
RU2722584C2 (ru) 2020-06-01
CA2933651A1 (en) 2016-12-30
EP3113160A1 (en) 2017-01-04
EP3113159A1 (en) 2017-01-04
CN106331687B (zh) 2020-06-30
JP2017016657A (ja) 2017-01-19
US20170006275A1 (en) 2017-01-05
RU2016125455A (ru) 2017-12-28
CN106331687A (zh) 2017-01-11
MX2016008602A (es) 2017-05-09

Similar Documents

Publication Publication Date Title
TW201702807A (zh) 根據參考部分之位置以處理部分沈浸式視訊內容之方法及 裝置
US11523103B2 (en) Providing a three-dimensional preview of a three-dimensional reality video
US10681341B2 (en) Using a sphere to reorient a location of a user in a three-dimensional virtual reality video
US20180165830A1 (en) Method and device for determining points of interest in an immersive content
CN111198610B (zh) 一种全景视频的视场控制方法、装置、设备及存储介质
US20200401362A1 (en) Screen sharing for display in vr
US11032535B2 (en) Generating a three-dimensional preview of a three-dimensional video
US11347306B2 (en) Method and apparatus for controlling a discrepant aiming direction of a camera
US10964085B2 (en) Method and apparatus for inciting a viewer to rotate toward a reference direction when consuming an immersive content item
JP2018514977A (ja) 周辺イメージを処理する方法及びデバイス
US10152818B2 (en) Techniques for stereo three dimensional image mapping
JP7447266B2 (ja) ボリュメトリック画像データに関するビューの符号化及び復号
EP3322186A1 (en) Method and device for transmitting data representative of an image
EP3330839A1 (en) Method and device for adapting an immersive content to the field of view of a user
CN111200748A (zh) 全景视频的视场控制方法、装置、电子设备及存储介质
CN111200749A (zh) 全景视频的播放控制方法、装置、电子设备及存储介质