JP6973709B2 - 仮想現実(vr)コンテンツを伝送するための方法、ネットワーク要素、vrコンテンツサーバ、端末装置およびプログラム - Google Patents
仮想現実(vr)コンテンツを伝送するための方法、ネットワーク要素、vrコンテンツサーバ、端末装置およびプログラム Download PDFInfo
- Publication number
- JP6973709B2 JP6973709B2 JP2019566899A JP2019566899A JP6973709B2 JP 6973709 B2 JP6973709 B2 JP 6973709B2 JP 2019566899 A JP2019566899 A JP 2019566899A JP 2019566899 A JP2019566899 A JP 2019566899A JP 6973709 B2 JP6973709 B2 JP 6973709B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- qos
- transmission priority
- fov
- packets
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 81
- 230000005540 biological transmission Effects 0.000 claims description 206
- 238000012545 processing Methods 0.000 claims description 42
- 230000015654 memory Effects 0.000 claims description 35
- 238000004891 communication Methods 0.000 claims description 8
- 230000001052 transient effect Effects 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 claims description 3
- 230000003796 beauty Effects 0.000 claims 5
- 230000006870 function Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 17
- 230000004886 head movement Effects 0.000 description 15
- 238000013507 mapping Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 5
- 239000000543 intermediate Substances 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 239000000969 carrier Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/61—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/756—Media network packet handling adapting media to device capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/765—Media network packet handling intermediate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/376—Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/633—Control signals issued by server directed to the network components or client
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/38—Image reproducers using viewer tracking for tracking vertical translational head movements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
本願は、2017年6月8日に出願された「A Method and System for Transmitting Virtual Reality (VR) Content」と題する米国特許出願15/617,859に基づく優先権を主張するものであり、当該特許出願はその全体が参照により本明細書に組み込まれる。
Claims (25)
- 仮想現実(VR)コンテンツを伝送するためのネットワーク要素による方法であって、
ポリシおよび課金制御(PCC)ルールを受信する段階であって、前記PCCルールは、前記ネットワーク要素が単一のVRコンテンツシーンの複数のVRコンテンツパケットに対するサービス品質(QoS)伝送優先度を決定するように促すQoS処理ルールを含み、前記QoS処理ルールは、前記ネットワーク要素がVRコンテンツサーバから前記複数のVRコンテンツパケットに対する複数の前記QoS伝送優先度を取得することを可能にするVRコンテンツサーバアドレスを含む、受信する段階と、
前記VRコンテンツサーバにより伝送される前記複数のVRコンテンツパケットおよび前記複数のVRコンテンツパケットに対する前記複数のQoS伝送優先度を受信する段階であって、前記複数のQoS伝送優先度は、第1の複数の前記VRコンテンツパケットに対応する第1QoS伝送優先度および第2の複数の前記VRコンテンツパケットに対応する第2QoS伝送優先度を含む、受信する段階と、
前記第1QoS伝送優先度に基づく前記第1の複数の前記VRコンテンツパケットおよび前記第2QoS伝送優先度に基づく前記第2の複数の前記VRコンテンツパケットを伝送する段階であって、前記第2QoS伝送優先度は、前記第1QoS伝送優先度とは異なる、伝送する段階と
を備える、方法。 - 複数のVRコンテンツ領域はユーザの視界(FOV)に関連する前記単一のVRコンテンツシーンの異なる複数の部分に画定される、
請求項1に記載の方法。 - 前記複数のQoS伝送優先度が前記複数のVRコンテンツ領域の前記VRコンテンツパケットにそれぞれ対応する、
請求項2に記載の方法。 - 第3QoS伝送優先度を有する第3の複数のVRコンテンツパケットを破棄する段階をさらに備える、
請求項1から3の何れか1項に記載の方法。 - 前記第1QoS伝送優先度に基づく前記第1の複数の前記VRコンテンツパケットおよび前記第2QoS伝送優先度に基づく前記第2の複数の前記VRコンテンツパケットは、前記VRコンテンツサーバと前記ネットワーク要素との間における単一のフローを介して前記VRコンテンツサーバにより送信される、
請求項1から4の何れか1項に記載の方法。 - VRコンテンツを伝送するための仮想現実(VR)コンテンツサーバによる方法であって、
単一のVRコンテンツシーンに対するVRコンテンツ要求を受信する段階であって、前記VRコンテンツ要求は端末の見通し線に関する情報を含む、受信する段階と、
前記端末の見通し線に関する前記情報に基づいて、前記VRコンテンツ要求に対する視界識別子(FOV ID)を取得する段階と、
前記FOV IDに基づいて、過去にエンコードされた複数のVRコンテンツパケットを複数組の複数のVRコンテンツパケットから選択する段階と、
複数のVRコンテンツパケットに対するサービス品質(QoS)伝送優先度を決定する段階であって、前記QoS伝送優先度は、第1の複数の前記VRコンテンツパケットに対する第1QoS伝送優先度、および第2の複数の前記VRコンテンツパケットに対する第2QoS伝送優先度を含む、決定する段階と、
前記複数のVRコンテンツパケットおよび前記QoS伝送優先度を伝送する段階と
を備える、方法。 - 前記QoS伝送優先度を決定する段階は、ネットワークデータの情報を受信する段階を含み、
前記QoS伝送優先度を決定する段階は、ネットワーク状態に基づいて前記QoS伝送優先度を決定する段階を含む、
請求項6に記載の方法。 - 前記ネットワークデータは、スループット情報、遅延情報、パケット損失情報およびエラー率情報のうち少なくとも1つを含む、
請求項7に記載の方法。 - QoS処理ルールをネットワーク要素に送信する段階をさらに備え、前記QoS処理ルールは、前記ネットワーク要素がQoS情報に基づいて複数のQoS伝送優先度を使用するように促す、
請求項6から8の何れか一項に記載の方法。 - 前記QoS処理ルールは、リソースアドレスおよび宛先アドレスのうち少なくとも1つを含む、
請求項9に記載の方法。 - VR端末装置から前記VRコンテンツ要求を受信する前に、前記単一のVRコンテンツシーンのインデックスを前記端末装置に送信する段階であって、前記インデックスは、端末の見通し線に関する少なくとも2つの視界識別子(FOV ID)を含み、前記VRコンテンツ要求における前記FOV IDは、前記端末の見通し線に従って前記インデックスから選択される、送信する段階をさらに備える、
請求項6から10の何れか1項に記載の方法。 - VRコンテンツ要求を受信する前に、前記複数組の複数のVRコンテンツパケットをエンコードする段階であって、第1のセットは第1予想FOV IDに対応し、第2のセットは第2予想FOV IDに対応し、第3セットは第3予想FOV IDに対応する、エンコードする段階をさらに備える、
請求項6から11の何れか1項に記載の方法。 - 前記第1予想FOV ID、前記第2予想FOV IDおよび前記第3予想FOV IDは、最後の端末の見通し線に関連する最後に取得されるFOV IDに基づいて予測される、
請求項12に記載の方法。 - 前記端末の見通し線に関する前記情報は、前記端末の見通し線に関するFOV ID、または前記端末の見通し線情報である、
請求項6から13の何れか1項に記載の方法。 - 前記複数のVRコンテンツパケットおよび前記QoS伝送優先度は、単一のチャネルを介してネットワーク要素に伝送される、
請求項6から14の何れか1項に記載の方法。 - 仮想現実(VR)コンテンツを受信するための端末装置による方法であって、
VRコンテンツシーンのインデックスを受信する段階であって、前記インデックスは端末の見通し線に関連する少なくとも2つの視界識別子(FOV ID)を含む、受信する段階と、
端末の見通し線に基づいて前記インデックスからFOV IDを選択する段階と、
前記VRコンテンツシーンのために選択された前記FOV IDを含むVRコンテンツ要求を送信する段階と、
前記VRコンテンツシーンの選択された前記FOV IDに対応する第1QoSを有する複数のVRコンテンツパケットを受信する段階と、
第2のQoSまたはより低いQoSを有し、前記VRコンテンツシーンの異なるFOV IDも有する複数のVRコンテンツパケットを受信する段階と
を備える、方法。 - 前記複数のVRコンテンツパケットは異なる複数のサービス品質(QoS)伝送優先度を有し、前記方法は、前記複数のQoS伝送優先度に基づいて前記複数のVRコンテンツパケットを表示する段階をさらに含む、
請求項16に記載の方法。 - 前記複数のVRコンテンツパケットは、第1QoS伝送優先度に対応する第1の複数の前記VRコンテンツパケット、第2QoS伝送優先度に対応する第2の複数の前記VRコンテンツパケット、および第3QoS伝送優先度に対応する第3の複数の前記VRコンテンツパケットを含み、前記複数のQoS伝送優先度に基づいて前記複数のVRコンテンツパケットを表示する前記段階は、前記第1の複数の前記VRコンテンツパケットおよび前記第2の複数の前記VRコンテンツパケットを表示する段階を有する、
請求項17に記載の方法。 - 前記FOV IDと前記端末の見通し線との間の関係を送信する段階をさらに備える、請求項16から18の何れか1項に記載の方法。
- ネットワーク要素であって、
命令を含む非一時的メモリと、
前記非一時的メモリと通信する1または複数のプロセッサと
を備え、
前記1または複数のプロセッサは、
ポリシおよび課金制御(PCC)ルールを受信する命令であって、前記PCCルールは、単一のVRコンテンツシーンの複数のVRコンテンツパケットに対するサービス品質(QoS)伝送優先度を決定するように前記ネットワーク要素を促すQoS処理ルールを含み、前記QoS処理ルールは、前記ネットワーク要素がVRコンテンツサーバから前記複数のVRコンテンツパケットに対する複数の前記QoS伝送優先度を取得することを可能にするVRコンテンツサーバアドレスを含む、受信する命令と、
前記VRコンテンツサーバにより伝送される前記複数のVRコンテンツパケットおよび前記複数のVRコンテンツパケットに対する前記複数のQoS伝送優先度を受信する命令であって、前記複数のQoS伝送優先度は、第1の複数の前記VRコンテンツパケットに対応する第1QoS伝送優先度および第2の複数の前記VRコンテンツパケットに対応する第2QoS伝送優先度を含む、受信する命令と、
前記第1QoS伝送優先度に基づく前記第1の複数の前記VRコンテンツパケットおよび前記第2QoS伝送優先度に基づく前記第2の複数の前記VRコンテンツパケットを伝送する命令であって、前記第2QoS伝送優先度は前記第1QoS伝送優先度とは異なる、伝送する命令と
を実行するように構成される、
ネットワーク要素。 - 前記1または複数のプロセッサはさらに、第3QoS伝送優先度を有する第3の複数のVRコンテンツパケットを破棄する命令を実行するように構成される、請求項20に記載のネットワーク要素。
- 命令を含む非一時的メモリ、および前記非一時的メモリと通信する1または複数のプロセッサを備え、
前記1または複数のプロセッサは、
単一のVRコンテンツシーンに対するVRコンテンツ要求を受信する命令であって、前記VRコンテンツ要求は端末の見通し線に関する情報を含む、受信する命令と、
前記端末の見通し線に関する前記情報に基づいて、前記VRコンテンツ要求に対する視界識別子(FOV ID)を取得する命令と、
前記FOV IDに基づいて、過去にエンコードされた複数のVRコンテンツパケットを複数組の複数のVRコンテンツパケットから選択する命令と、
複数のVRコンテンツパケットに対するサービス品質(QoS)伝送優先度を決定する命令であって、前記QoS伝送優先度は、第1の複数の前記VRコンテンツパケットに対する第1QoS伝送優先度、および第2の複数の前記VRコンテンツパケットに対する第2QoS伝送優先度を含む、決定する命令と、
前記複数のVRコンテンツパケットおよび前記QoS伝送優先度を伝送する命令と
を実行するように構成される、
仮想現実(VR)コンテンツサーバ。 - 前記1または複数のプロセッサはさらに、ネットワークデータ情報を受信する命令を実行するように構成され、前記QoS伝送優先度を決定する命令は、ネットワーク状態に基づいてQoS伝送優先度を決定することを含む、
請求項22に記載の仮想現実(VR)コンテンツサーバ。 - 命令を含む非一時的メモリ、および前記非一時的メモリと通信する1または複数のプロセッサを備え、
前記1または複数のプロセッサは、
VRコンテンツシーンのインデックスを受信する命令であって、前記インデックスは端末の見通し線に関連する少なくとも2つの視界識別子(FOV ID)を含む、受信する命令と、
端末の見通し線に基づいて前記インデックスからFOV IDを選択する命令と、
前記VRコンテンツシーンのために選択された前記FOV IDを含むVRコンテンツ要求を送信する命令と、
前記VRコンテンツシーンの選択された前記FOV IDに対応する第1QoSを有する複数のVRコンテンツパケットを受信する命令と、
第2のQoSまたはより低いQoSを有し、前記VRコンテンツシーンの異なるFOV IDも有する複数のVRコンテンツパケットを受信する命令と
を実行するように構成される、
端末装置。 - 実行される場合に、コンピュータが請求項1、6および16の何れか一項に記載の方法を実行することを可能にする、コンピュータ可読記憶媒体に記録されたプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/617,859 | 2017-06-08 | ||
US15/617,859 US10477105B2 (en) | 2017-06-08 | 2017-06-08 | Method and system for transmitting virtual reality (VR) content |
PCT/CN2018/087940 WO2018223839A1 (en) | 2017-06-08 | 2018-05-23 | A method and system for transmitting virtual reality (vr) content |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020522944A JP2020522944A (ja) | 2020-07-30 |
JP6973709B2 true JP6973709B2 (ja) | 2021-12-01 |
Family
ID=64564257
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019566899A Active JP6973709B2 (ja) | 2017-06-08 | 2018-05-23 | 仮想現実(vr)コンテンツを伝送するための方法、ネットワーク要素、vrコンテンツサーバ、端末装置およびプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US10477105B2 (ja) |
EP (1) | EP3625961A4 (ja) |
JP (1) | JP6973709B2 (ja) |
KR (2) | KR20200014355A (ja) |
CN (2) | CN112887843B (ja) |
WO (1) | WO2018223839A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10330935B2 (en) * | 2016-09-22 | 2019-06-25 | Apple Inc. | Predictive, foveated virtual reality system |
US10623791B2 (en) | 2018-06-01 | 2020-04-14 | At&T Intellectual Property I, L.P. | Field of view prediction in live panoramic video streaming |
US10812774B2 (en) | 2018-06-06 | 2020-10-20 | At&T Intellectual Property I, L.P. | Methods and devices for adapting the rate of video content streaming |
US10616621B2 (en) * | 2018-06-29 | 2020-04-07 | At&T Intellectual Property I, L.P. | Methods and devices for determining multipath routing for panoramic video content |
US11019361B2 (en) | 2018-08-13 | 2021-05-25 | At&T Intellectual Property I, L.P. | Methods, systems and devices for adjusting panoramic view of a camera for capturing video content |
US10560759B1 (en) * | 2018-10-23 | 2020-02-11 | At&T Intellectual Property I, L.P. | Active network support on adaptive virtual reality video transmission |
CN111565422B (zh) | 2019-02-13 | 2022-04-05 | 华为技术有限公司 | 策略控制方法、装置及系统 |
CN113452474B (zh) * | 2020-03-27 | 2022-12-02 | 华为技术有限公司 | 扩展现实数据传输方法及装置 |
EP4062571A4 (en) * | 2020-03-27 | 2023-01-04 | Samsung Electronics Co., Ltd. | IMAGE DISPLAY APPARATUS AND DATA PACKET LOSS MANAGEMENT METHOD |
CN113747510A (zh) * | 2020-05-28 | 2021-12-03 | 华为技术有限公司 | 通信方法及装置 |
US11677840B2 (en) | 2021-01-11 | 2023-06-13 | Cisco Technology, Inc. | Preserving transmission properties of real-time scenes in an environment when an increasing number of users join a session |
US11895170B2 (en) | 2021-03-09 | 2024-02-06 | Cisco Technology, Inc. | Synchronicity for virtual reality/augmented reality interactive sessions in wireless networks |
US11917011B2 (en) | 2022-01-10 | 2024-02-27 | Meta Platforms Technologies, Llc | Resilient rendering for augmented-reality devices |
WO2023136754A1 (en) * | 2022-01-12 | 2023-07-20 | Telefonaktiebolaget Lm Ericsson (Publ) | Application server node, network node, core network node, and methods in a wireless communications network |
US11758104B1 (en) | 2022-10-18 | 2023-09-12 | Illuscio, Inc. | Systems and methods for predictive streaming of image data for spatial computing |
CN117348932B (zh) * | 2023-12-04 | 2024-03-15 | 中科亿海微电子科技(苏州)有限公司 | 支持axi深度乱序传输的从机装置及工作方法 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8146142B2 (en) * | 2004-09-03 | 2012-03-27 | Intel Corporation | Device introduction and access control framework |
KR20070119905A (ko) * | 2006-06-16 | 2007-12-21 | 삼성에스디아이 주식회사 | 연료 전지용 막-전극 어셈블리 및 이를 포함하는 연료 전지시스템 |
JP4111231B2 (ja) * | 2006-07-14 | 2008-07-02 | 富士ゼロックス株式会社 | 立体表示システム |
US7630314B2 (en) * | 2006-12-05 | 2009-12-08 | Latitue Broadband, Inc. | Methods and systems for dynamic bandwidth management for quality of service in IP Core and access networks |
WO2009049684A1 (en) * | 2007-10-19 | 2009-04-23 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods and apparatuses for notifying an application function of resource restrictions relating to a communication session |
US9407718B2 (en) * | 2010-07-01 | 2016-08-02 | Broadcom Corporation | Method and system for service discovery and deployment in an IP multimedia network |
US8718837B2 (en) * | 2011-01-28 | 2014-05-06 | Intouch Technologies | Interfacing with a mobile telepresence robot |
JP2014515599A (ja) * | 2011-03-25 | 2014-07-03 | セダーズ−シナイ メディカル センター | 炎症性腸疾患における腸の肉芽腫および低骨密度を診断および処置する方法 |
US10514541B2 (en) * | 2012-12-27 | 2019-12-24 | Microsoft Technology Licensing, Llc | Display update time reduction for a near-eye display |
CN103533367B (zh) * | 2013-10-23 | 2015-08-19 | 传线网络科技(上海)有限公司 | 一种无参考视频质量评价方法及装置 |
EP3033907B1 (en) * | 2014-01-08 | 2018-09-19 | Huawei Technologies Co., Ltd. | Method and system of quality of service (qos) negotiation for network assisted adaptive streaming |
US9699437B2 (en) * | 2014-03-03 | 2017-07-04 | Nextvr Inc. | Methods and apparatus for streaming content |
ES2642263T3 (es) * | 2014-12-23 | 2017-11-16 | Nokia Technologies Oy | Control de contenido de realidad virtual |
CN106162513B (zh) * | 2015-04-09 | 2020-03-17 | 上海诺基亚贝尔股份有限公司 | 支持优先级的接近业务直接通信的方法和装置 |
US10575008B2 (en) | 2015-06-01 | 2020-02-25 | Apple Inc. | Bandwidth management in devices with simultaneous download of multiple data streams |
CN106303404A (zh) * | 2015-06-29 | 2017-01-04 | 北京智谷睿拓技术服务有限公司 | 可视化内容传输控制方法、发送方法、及其装置 |
US10217877B2 (en) * | 2015-07-27 | 2019-02-26 | Lg Electronics Inc. | Solar cell |
CN105898138A (zh) | 2015-12-18 | 2016-08-24 | 乐视致新电子科技(天津)有限公司 | 全景视频播放方法及装置 |
CN106919248A (zh) | 2015-12-26 | 2017-07-04 | 华为技术有限公司 | 应用于虚拟现实的内容传输方法以及设备 |
EP3456090B1 (en) * | 2016-05-12 | 2021-03-31 | Convida Wireless, Llc | Connecting to virtualized mobile core networks |
US11395020B2 (en) * | 2016-09-08 | 2022-07-19 | Telefonaktiebolaget Lm Ericsson (Publ) | Bitrate control in a virtual reality (VR) environment |
CN106454321A (zh) | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
-
2017
- 2017-06-08 US US15/617,859 patent/US10477105B2/en active Active
-
2018
- 2018-05-23 WO PCT/CN2018/087940 patent/WO2018223839A1/en unknown
- 2018-05-23 JP JP2019566899A patent/JP6973709B2/ja active Active
- 2018-05-23 KR KR1020197038556A patent/KR20200014355A/ko active Application Filing
- 2018-05-23 EP EP18812834.2A patent/EP3625961A4/en not_active Withdrawn
- 2018-05-23 KR KR1020217026574A patent/KR102419114B1/ko active IP Right Grant
- 2018-05-23 CN CN202110163038.0A patent/CN112887843B/zh active Active
- 2018-05-23 CN CN201880031808.2A patent/CN110622506B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
JP2020522944A (ja) | 2020-07-30 |
CN110622506A (zh) | 2019-12-27 |
US10477105B2 (en) | 2019-11-12 |
CN112887843A (zh) | 2021-06-01 |
KR20200014355A (ko) | 2020-02-10 |
WO2018223839A1 (en) | 2018-12-13 |
EP3625961A4 (en) | 2020-04-01 |
KR102419114B1 (ko) | 2022-07-07 |
KR20210106034A (ko) | 2021-08-27 |
EP3625961A1 (en) | 2020-03-25 |
US20180359189A1 (en) | 2018-12-13 |
CN110622506B (zh) | 2021-02-12 |
CN112887843B (zh) | 2022-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6973709B2 (ja) | 仮想現実(vr)コンテンツを伝送するための方法、ネットワーク要素、vrコンテンツサーバ、端末装置およびプログラム | |
US10231014B2 (en) | Virtual reality (VR) video distribution using edge resources | |
WO2015101237A1 (en) | Methods, devices, and systems for allocating service nodes in a network | |
US10924388B1 (en) | Multi-path routing | |
US11979450B2 (en) | Communication method and apparatus | |
CN107534981B (zh) | 资源重分配 | |
US11640368B2 (en) | Acceleration system for facilitating processing of API calls | |
WO2020135461A1 (zh) | 一种视频同步显示的方法、装置及系统 | |
US11070466B2 (en) | Method for link aggregation and related devices | |
US10929953B2 (en) | Method and apparatus for selecting communication interface in wireless communication system | |
CN114339928B (zh) | 无线路由器及其数据传输方法 | |
US10713935B2 (en) | Control service for controlling devices with body-action input devices | |
US11265356B2 (en) | Network assistance functions for virtual reality dyanmic streaming | |
JP2023109707A (ja) | ビデオ分析システムおよびデータ配信方法 | |
US20220303852A1 (en) | Systems and methods for device-assisted seamless transfer between edge computing systems in a wireless network | |
US9497088B2 (en) | Method and system for end-to-end classification of level 7 application flows in networking endpoints and devices | |
CN114846810A (zh) | 通信方法及装置 | |
US20230076650A1 (en) | Image content transmission method and apparatus using edge computing service | |
US20240284493A1 (en) | Systems and methods for facilitating delay aware scheduling of network data communications | |
US20240259869A1 (en) | Systems and methods of prioritized data discard for wireless communication | |
US20240284259A1 (en) | Systems and methods for mapping protocol data units to communication channels according to data metrics | |
US20240236190A9 (en) | Method, apparatus and computer program product providing quality of service management for extended reality applications | |
WO2023246752A1 (zh) | 通信方法和通信装置 | |
CN115460266A (zh) | 会话建立方法、装置、计算机设备、终端以及存储介质 | |
TW202344117A (zh) | 使用互補上行鏈路的系統和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200106 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200106 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210302 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210531 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211005 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211020 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6973709 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |