CN108271042B - 一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 - Google Patents
一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 Download PDFInfo
- Publication number
- CN108271042B CN108271042B CN201810133524.6A CN201810133524A CN108271042B CN 108271042 B CN108271042 B CN 108271042B CN 201810133524 A CN201810133524 A CN 201810133524A CN 108271042 B CN108271042 B CN 108271042B
- Authority
- CN
- China
- Prior art keywords
- user
- cable television
- television network
- data
- cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 50
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000033001 locomotion Effects 0.000 claims abstract description 56
- 230000002457 bidirectional effect Effects 0.000 claims abstract description 44
- 230000004886 head movement Effects 0.000 claims abstract description 20
- 238000005516 engineering process Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 12
- 210000003128 head Anatomy 0.000 description 66
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004880 explosion Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6118—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving cable transmission, e.g. using a cable modem
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2383—Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
- H04N21/6168—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving cable transmission, e.g. using a cable modem
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种基于有线电视网络的视频数据传输方法、云VR系统实现方法以及云VR系统,其包括:获取在VR应用运行环境下的VR应用画面数据;将所述视频码流数据转换成射频信号数据流;解码所述射频信号数据流以获得当前的VR画面数据并显示;采集并发送用户头部运动信息以及用户控制信息;通过双向有线电视网络向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流;解调所述数据流并发送至云端服务器中;解析出操作指令并生成新的VR应用画面数据。本发明基于云计算的模式实现云端VR应用运行并终端进行VR画面展示的方案降低用户使用VR业务的门槛。
Description
技术领域
本发明属于视频数据传输技术领域,具体的说是涉及一种基于有线电视网络的视频数据传输方法、云VR系统实现方法以及云VR系统。
背景技术
VR(虚拟现实)技术是一种可以创建和体验虚拟世界的计算机仿真系统的技术,其利用计算机生成一种模拟环境,利用多源信息融合的交互式三维动态视景和实体行为的系统仿真使用户沉浸到该环境中。具体的VR系统一般是通过利用高性能计算机、VR应用、VR头显设备以及VR操控设备实现,在运行VR应用时通过VR操控设备进行VR应用的控制,并通过VR头显给用户;其中,所述VR头显,是一种头戴式显示设备,能够将人的对外界的视觉、听觉封闭,引导用户产生一种身在虚拟环境中的感觉;其显示原理是左右眼屏幕分别显示左右眼的图像,人眼获取这种带有差异的信息后在脑海中产生立体感;具体过程为:VR系统利用高性能计算机实现VR应用的运行,并通过HDMI接口将运行产生的VR画面展现在VR头显设备上;使用者通过操作VR操控设备,向VR应用发出操作指令,实现与VR应用互动,通常VR操控设备通过USB接口连接高性能计算机。
但是上述系统尚存在下述不足之处:
1.当使用上述VR系统时,每个VR使用者都需要配置一台高性能计算机和VR头显设备以及VR操控设备;但是通常高性能计算机的价格比较昂贵且笨重,使得使用者运行VR应用的成本较高,使用环境受到限制。
2.当使用上述VR系统时,每个VR使用者都需要维护一台VR应用运行环境,这就要求VR使用者有较高的it维护能力,进而提高了VR使用者使用门槛。
3.当使用上述VR系统时,每个VR使用者都需要通过网络或线下渠道获取VR应用,通常VR应用都比较大,下载过程漫长,例如5GB、10GB、20GB,使用者无法满足用户所见即所得的用户体验。
发明内容
本发明的实施例提供了一种基于有线电视网络的视频数据传输方法、云VR系统实现方法以及云VR系统,以解决背景技术中所述的问题。
为了实现上述目的,本发明的技术方案:
一种基于有线电视网络的视频数据传输方法,其特征在于,包括:
获取在VR应用运行环境下的VR应用画面数据,其中,所述VR应用运行环境部署于云端服务器中,用于运行所述VR应用并获取画面数据,将画面数据编码成视频码流数据后通过下行有线电视网络发送;
将所述视频码流数据转换成射频信号数据流;
解码所述射频信号数据流以获得当前的VR画面数据并显示;
采集并发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;
采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
通过双向有线电视网络向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流;
解调所述数据流并发送至云端服务器中;
解析出操作指令并生成新的VR应用画面数据。
进一步的,
所述下行有线电视网络包括但不限于单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中的任意一种。
进一步的,
解码所述射频信号数据流以获得当前的VR画面数据并显示的过程包括:
用户侧的本地端接收所述射频信号数据流后解码生成连续的VR画面数据并通过VR头显设备进行显示。
进一步的,
所述用户头部运动信息与所述用户控制信息的发送过程均包括:用户侧的本地端接收到用户头部运动信息和或所述用户控制信息后,基于多个回传通道向云端服务器发送,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道。
进一步的,
所述回传通道为USB回传通道,所述USB回传通道创建过程包括:
本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;
EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端;
EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据。
一种基于有线电视网络的云VR系统,其特征在于,包括:
云VR应用模块,其具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;
IPQAM,其用于将所述视频码流数据转换成射频信号数据流;
用户侧的本地端,其用于解码所述射频信号数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;
VR头显设备,用于显示所述VR画面数据并采集用户头部运动信息;
用户侧的操控设备,其用于采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
有线电视网络,其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
云端服务器,用于自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据。
进一步的,
所述下行有线电视网络包括但不限于单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中的任意一种。
进一步的,
所述回传通道为USB回传通道,所述USB回传通道创建过程包括:
本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;
EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端
EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据。
进一步的,
所述用户侧的本地端是指有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并将视频数据流进行解码后送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。
一种基于有线电视网络的云VR系统实现方法,其特征在于,包括:
在云端部署云VR应用模块,所述云VR应用模块具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;通过IPQAM将所述视频码流数据转换成射频信号数据流;
通过有线电视网络中的机顶盒接收并解码所述射频信号中的视频数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;所述有线电视网络其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
用户利用VR头显设备显示所述VR画面数据并采集用户头部运动信息;同时采集用户侧外设即用户侧的操控设备的用户控制信息并发送至云端,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
利用云端服务器自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据以更新所述VR应用运行环境中的VR应用画面数据。
进一步的,
所述有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并视频数据流进行解码送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。
与现有技术相比,本发明的有益效果:
本发明基于云计算的模式实现云端VR应用运行并在终端进行VR画面展示的方案,具体的,其利用广电有线电视网络能够提供低成本的单向大带宽传输能力的特点实现实时VR画面的下行传输;利用双向有线电视网络的数据传输能力实现控制信息的回传,实现VR应用的控制,解决了用户必须购买高性能计算机、维护VR运行环境、下载VR游戏才能使用VR应用的问题,降低用户使用VR业务的门槛。
附图说明
图1为本发明所述对应的基于有线电视网络的视频数据传输方法步骤流程图;
图2为本发明所述对应的基于有线电视网络的云VR系统结构示意例图;
图3为本发明所述机顶盒时延优化方法的示例图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前VR(虚拟现实)技术所存在的3大门槛:a、价格门槛,说到VR技术就不得不说到价格,通常一套体验良好的VR设备由VR头显、VR计算机组成,而目前市场上最为优秀的VR设备是HTC Vive售价7000元左右,Oculus rift通过各种渠道进入国内基本上也要4000-5000元,但是比如HTC Vive和Oculus rift还需要配置一台10000元左右的计算机作为运行VR的运算单元,因此配置一套不错的VR设备,消费者要花费14000-17000元的代价,高昂的价格就把很多喜欢新鲜事物的消费者挡在了门外;b、使用复杂度门槛,VR的火爆对很多老百姓而言可以说“突如其来”,VR并没有给用户,甚至是开发者很多适应和培育时间;用户拿到VR设备后,并不能像普通数码设备一样插上就用,反而需要用户花了近一周才正常用起来自己的设备;相对复杂的设备连接,对硬件设备、操作系统、平台软件以及与VR应用匹配的要求都超出了用户的预期,使得很多用户对VR设备敬而远之;c、内容门槛,VR的发展使得用户有机会领略到VR的风采,但是用户获取VR内容的代价和烦恼也是很多。首先,VR设备和内容分发体系是紧密绑定的,HTC的设备无法运行Oculus体系的内容,同理,Oculus的设备也同样只能玩适配自己的VR游戏,这导致内容提供商为了适配多个VR体系付出更多的工作;其次,内容渠道单一,用户不得不从SteamVR、HTC VivePort、Oculus Home等仅有的几个内容平台获取内容,价格和下载时间都无法保证良好的用户体验;动辄十几个G,甚至几十个G的VR游戏,使得用户需要下载一两天才能完成游戏,往往游戏下好了,兴趣也没有了。同时,VR用户数量的不足,无法支持VR内容的成本回收,使得VR内容开发陷入一个死循环,也导致内容提供商不愿意投入大量资源开发VR精品内容。
为了解决上述问题,申请人发现可以基于有线电视网络创建云VR技术方案,其基于云计算的模式实现云端VR应用运行,终端VR画面展示,在本方案中,利用广电有线网络能够提供低成本的单向大带宽传输能力的特点实现实时VR画面的下行传输;利用双向有线网络的数据传输能力实现控制信息的回传,实现VR应用的控制,解决了用户必须购买高性能计算机、维护VR运行环境、下载VR游戏才能使用VR应用的问题,降低用户使用VR业务的门槛。之所以利用有线电视网络实现上述目的,是因为有线电视网络是利用有线电视铺设的同轴电缆进行数据信号传递的网络。有线电视网络的优势在于广播传输模式,也就是利用IPQAM设备实现将IP网络传输的视频转为射频数据,由广播源以单向、大带宽的方式下发视频数据至终端。近年来,基于广电有线网络的双向传输技术已经成熟,例如EOC、CMTS等方式。基于双向网络既能够提供互联网宽带业务,也可以实现面向VOD业务的点播信息的数据通信,配合单向大带宽传输视频的特点提供适合广电运营商的特色业务。由于有线网络大量传输视频的特性和长期延续的单向数据传输技术体系,导致广电有线网络维持了单向下行和双向这两个物理网络共存的特点,而下行网络带宽很大,单向传输大数据量的视频内容具有很大的优势,而双向网络带宽受限,相对于电信运营商而言网络品质略逊。
基于上述原理,本发明的实施例提供了一种基于有线电视网络的视频数据传输方法、云VR系统实现方法以及云VR系统,以解决背景技术中所述的问题。
如图1所示的一种基于有线电视网络的视频数据传输方法,其特征在于,包括:
获取在VR应用运行环境下的VR应用画面数据,其中,所述VR应用运行环境部署于云端服务器中,用于运行所述VR应用并获取画面数据,将画面数据编码成视频码流数据后通过下行有线电视网络发送;将所述视频码流数据转换成射频信号数据流;解码所述射频信号数据流以获得当前的VR画面数据并显示;采集并发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;通过双向有线电视网络向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流;解调所述数据流并发送至云端服务器中;解析出操作指令并生成新的VR应用画面数据。
进一步的,所述下行有线电视网络包括但不限于单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中的任意一种。优选采用单向下行有线电视网络,但是根据有线网络传输的特点,也可以采用有线电视网络的双向通道(EoC通道)实现VR画面视频的下行和操控指令的上行,不过由于有线网络通常建设双向网络时,所提供的带宽不大,无法承载大规模用户运营需求,因此采用有线网络的双向通道实现云VR支撑的方式在理论上是可行的,但是投入现实的运营生产活动还是处于进一步研发阶段。
进一步的,解码所述射频信号数据流以获得当前的VR画面数据并显示的过程包括:用户侧的本地端接收所述射频信号数据流后解码生成连续的VR画面数据并通过VR头显设备进行显示。
进一步的,所述用户头部运动信息与所述用户控制信息的发送过程包括:用户侧的本地端接收到用户头部运动信息和或所述用户控制信息后,基于多个回传通道向云端服务器发送,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道。
进一步的,所述回传通道为USB回传通道,所述USB回传通道创建过程包括:本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端;EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据。
本发明还要一种基于有线电视网络的云VR系统,其特征在于,包括:
云VR应用模块,其具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;
IPQAM,其用于将所述视频码流数据转换成射频信号数据流;
用户侧的本地端,其用于解码所述射频信号数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;
VR头显设备,用于显示所述VR画面数据并采集用户头部运动信息;
用户侧的操控设备,其用于采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
有线电视网络,其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
云端服务器,用于自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据。
进一步的,所述下行有线电视网络包括但不限于单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中任意一种。
进一步的,所述回传通道为USB回传通道,所述USB回传通道创建过程包括:本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据。
进一步的,所述用户侧的本地端是指有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并将视频数据流进行解码后送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。另由于有线电视网络的同轴电缆传输方式就是射频传输,因此需要利用IPQAM是将通过ip网络传输的视频数据转换成机顶盒可以接收的射频信号,使得机顶盒才能够接收数据。
综上所述,由于多数广电有线网络的发展具有单向下行和双向这两个物理网络共存的工作环境,本发明利用单向下行网络传输VR实施互动视频,利用虚拟USB技术双向网络映射VR头显的头部运动信息和VR控制器的信令,实现了使用者可以实时的看到头部动作或控制器操作在VR头显里变化,视频下行传输和数据上行传输是通过不同的网络承载,并可以同步实时响应,其中下行网络通常是利用IPQAM设备,通过FTTB或FTTH的方式传输,上行网络可以是EOC或FTTH。同时当有线电视网络具有足够的双向传输能力时,在本发明利用双向网络传输VR实施互动视频,和映射VR头显的头部运动信息和VR控制器的信令,实现了使用者可以实时的看到头部动作或控制器操作在VR头显里变化,视频下行传输和数据上行传输是通过同一个物理网络承载,并实现同步实时响应;双向网络可以是EOC或FTTH。
本发明还要提供一种基于有线电视网络的云VR系统实现方法,其特征在于,包括:
在云端部署云VR应用模块,所述云VR应用模块具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;通过IPQAM将所述视频码流数据转换成射频信号数据流;
通过有线电视网络中的机顶盒接收并解码所述射频信号中的视频数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;所述有线电视网络其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
用户利用VR头显设备显示所述VR画面数据并采集用户头部运动信息;同时通过用户侧的操作端采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
利用云端服务器自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据以更新所述VR应用运行环境中的VR应用画面数据。
上述基于有线网络的云VR系统或实现方法的工作原理:将云VR服务器部署于运营商的云端机房,通过有线电视网络与用户端连接后,进行下述步骤:(1)VR应用模块部署于云VR服务器中,云VR服务器运行VR应用后,云VR系统实时的采集到VR应用运行的画面,并将连续的VR应用画面编码成视频流,并通过网络,如IP网络发送到IPQAM设备;(2)IPQAM将从IP网络接收到的视频码流转换为射频信号输出到用户侧的机顶盒上;(3)机顶盒收到VR视频码流后,将码流解码成连续VR画面;(4)通过VR头显进行显示;(5)用户VR应用画面,在转动头显的不同角度所产生的头部运动信息通过USB接口返回机顶盒;(6)同时使用者也可以使用操作端或者其他控制类外设,对VR应用进行操作,并将控制信息通过USB接口返回机顶盒;(7)由于机顶盒与云端建立多个USB回传通道,在云端为每个终端的USB设备映射一个远程虚拟USB设备;则机顶盒可以通过IP网络将USB回传数据发送的双向有线网络传输用户侧设备EOC终端;(8)EOC终端将机顶盒发来的数据流调制为射频信号数据流,通过同轴电缆输出到EOC局端;(9)EOC局端将射频信号的数据解调后,得到数据信息并通过IP网络发送的机房的云VR服务器;(10)云VR服务器将数据送入对应的虚拟USB设备,完成对VR应用的操作,并生成新的VR画面更新步骤(1)中的VR画面数据。
进一步的,
所述有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并视频数据流进行解码送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。
上述基于有线网络的云VR实现方案,其通过采用服务端渲染、采集和编码,利用广电的下行网络传输视频内容到终端机顶盒,终端机顶盒通过EOC/ONU上行回传VR头显的操作指令。终端机顶盒收到视频数据后,解码显示到头盔。
进一步的,还设置了针对云VR业务的机顶盒时延优化方法,由于传统机顶盒播放视频为每收到一帧解码一帧显示一帧的方式,但是在VR画面展示时发现,由于视频编码、网络传输和机顶盒解码的累计时延较高,如果针对用户的每一个细微动作都通过更新一帧VR画面进行展示,将导致画面显示时延过大,因此本方案针对机顶盒端利用本地插帧的方式对时延进行了优化处理,如图3所示具体步骤为:(1)当机顶盒收到一个真实画面帧并显示于VR头显后,(2)用户头部发生转头或位移动作时,机顶盒会利用当前真实帧的位置进行位移插入帧显示,使得用户看到的画面就想真实移动一样的感觉,(3)并以一定帧率进行插入多次,(4)当下一个真实帧到来后进行真实更新,这样保证了使用者更低时延的体验。
综上可知,本发明通过利用广播有线网络的低成本下行通道,实现了将复杂的VR应用运算转移到云端进行运行,而对于数据量较小操控指令通过双向通道由终端发送到云端,使用者只需购买VR头显和机顶盒即可使用VR业务;因此,本技术方案既充分利用了具有大量资源额有线网络下行带宽,又不大量占用资源紧张的双向通道,并实现VR业务的低成本提供。同时将传统VR系统复杂的维护难度从用户侧转移到云端来实现云VR技术,用户通过简单的打开机顶盒、选择应用就可以实现VR业务的访问,降低了用户的使用难度;另由于云VR的应用是运行在云端,用户也无需下载VR应用到本地,彻底的实现了所见即所得的便利,可以说基于有线网络的云VR技术将用户使用VR业务的门槛降到了最低。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。
Claims (8)
1.一种基于有线电视网络的视频数据传输方法,其特征在于,包括:
获取在VR应用运行环境下的VR应用画面数据,其中,所述VR应用运行环境部署于云端服务器中,用于运行所述VR应用并获取画面数据,将画面数据编码成视频码流数据后通过下行有线电视网络发送;
将所述视频码流数据转换成射频信号数据流;
解码所述射频信号数据流以获得当前的VR画面数据并显示;
采集并发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;
采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
通过双向有线电视网络向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流;
解调所述数据流并发送至云端服务器中;
解析出操作指令并生成新的VR应用画面数据;
所述用户头部运动信息与所述用户控制信息的发送过程包括:用户侧的本地端接收到用户头部运动信息和或所述用户控制信息后,基于多个回传通道向云端服务器发送,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
所述回传通道为USB回传通道,所述USB回传通道创建过程包括:
本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;
EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端;
EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据。
2.根据权利要求1所述的视频数据传输方法,其特征在于:
所述下行有线电视网络包括单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中的任意一种。
3.根据权利要求1所述的视频数据传输方法,其特征在于:
解码所述射频信号数据流以获得当前的VR画面数据并显示的过程包括:用户侧的本地端接收所述射频信号数据流后解码生成连续的VR画面数据并通过VR头显设备进行显示。
4.一种基于有线电视网络的云VR系统,其特征在于,包括:
云VR应用模块,其具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;
IPQAM,其用于将所述视频码流数据转换成射频信号数据流;
用户侧的本地端,其用于解码所述射频信号数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;
VR头显设备,用于显示所述VR画面数据并采集用户头部运动信息;
用户侧的操控设备,其用于采集并发送用户控制信息,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
有线电视网络,其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建所述本地端与云端服务器所对应的数据传输通道;
所述回传通道为USB回传通道,所述USB回传通道创建过程包括:
本地端将所述用户头部运动信息与所述用户控制信息发送至双向有线电视网络传输用户侧所对应的EOC终端;
EOC终端将本地端发来的数据流调制为射频信号数据流发送至EOC局端
EOC局端解调射频信号数据流后将得到数据信息发送至云端服务器,所述云端服务器用于基于虚拟USB技术创建对应的虚拟USB设备以基于解析出的操作指令作用于VR应用,并生成新的VR应用画面数据;
云端服务器,用于自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据。
5.根据权利要求4所述的云VR系统,其特征在于:
所述下行有线电视网络包括单向下行有线电视网络以及双向通道有线电视网络即有线电视网络的EOC通道中的任意一种。
6.根据权利要求4所述的云VR系统,其特征在于:
所述用户侧的本地端是指有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并将视频数据流进行解码后送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。
7.一种基于有线电视网络的云VR系统实现方法,其特征在于,包括:
在云端部署云VR应用模块,所述云VR应用模块具有VR应用运行环境,其中,所述VR应用运行环境部署于云端服务器中,用于运行VR应用画面数据并编码成视频码流数据后通过下行有线电视网络发送;通过IPQAM将所述视频码流数据转换成射频信号数据流;
通过有线电视网络中的机顶盒接收并解码所述射频信号中的视频数据流以获得当前的VR画面数据以及发送用户头部运动信息,其中,所述用户头部运动信息是用户在当前所显示的VR画面数据下所产生的头部运动数据;所述有线电视网络其具有下行有线电视网络以及向云端服务器发送用户头部运动信息以及用户控制信息所对应的数据流的双向通道有线电视网络;其中所述双向通道有线电视网络具有多个回传通道以向云端服务器发送数据,其中,所述回传通道用于在所述有线电视网络上创建本地端与云端服务器所对应的数据传输通道;
用户利用VR头显设备显示所述VR画面数据并采集用户头部运动信息;同时采集用户侧外设即用户侧的操控设备的用户控制信息并发送至云端,其中,所述用户控制信息是用户对云端服务器中VR应用的操作指令;
利用云端服务器自有线电视网络的EOC端所解调的数据流中解析出操作指令并生成新的VR应用画面数据以更新所述VR应用运行环境中的VR应用画面数据。
8.根据权利要求7所述的云VR系统实现方法,其特征在于:
所述有线电视网络中的机顶盒,其通过预装的程序接收所述射频信号中的视频数据流,并视频数据流进行解码送至VR头显进行显示;所述机顶盒从VR头显实时获得头部运动信息,并通过所在的有线电视网络发送到云端;所述机顶盒还与用户侧的操控设备通信以通过所在的有线电视网络发送用户控制信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810133524.6A CN108271042B (zh) | 2018-02-09 | 2018-02-09 | 一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810133524.6A CN108271042B (zh) | 2018-02-09 | 2018-02-09 | 一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108271042A CN108271042A (zh) | 2018-07-10 |
CN108271042B true CN108271042B (zh) | 2020-04-24 |
Family
ID=62774024
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810133524.6A Active CN108271042B (zh) | 2018-02-09 | 2018-02-09 | 一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108271042B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109587470A (zh) * | 2018-10-23 | 2019-04-05 | 嘉兴玄视信息科技有限公司 | 一种基于虚拟现实一体机的3d电视及一体机控制系统 |
CN110743162A (zh) * | 2019-09-29 | 2020-02-04 | 深圳市九洲电器有限公司 | 一种云游戏运行方法和系统 |
CN112383797B (zh) * | 2020-10-19 | 2022-09-13 | 深圳市九洲电器有限公司 | 视频数据传输方法、机顶盒、存储介质及装置 |
CN113542849B (zh) * | 2021-07-06 | 2023-06-30 | 腾讯科技(深圳)有限公司 | 视频数据处理方法及装置、电子设备、存储介质 |
CN113794870A (zh) * | 2021-09-26 | 2021-12-14 | 北京三月雨文化传播有限责任公司 | 一种基于有线电视网络视频数据的云vr系统及其使用方法 |
CN117555420B (zh) * | 2023-11-09 | 2024-08-06 | 深圳优立全息科技有限公司 | 基于射频发射器的设备交互方法及相关装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102056016A (zh) * | 2010-09-21 | 2011-05-11 | 顾海涛 | Pon、ipqam结构的双向数字电视点播实现装置 |
CN103001779A (zh) * | 2012-09-29 | 2013-03-27 | 吉视传媒股份有限公司 | 网络数据传输系统中的数据接收终端 |
CN106792133A (zh) * | 2016-12-30 | 2017-05-31 | 北京华为数字技术有限公司 | 虚拟现实服务器、视频数据传输方法及系统 |
CN106899860A (zh) * | 2015-12-21 | 2017-06-27 | 优必达公司 | 通过网络传送媒体的系统及方法 |
CN106993181A (zh) * | 2016-11-02 | 2017-07-28 | 大辅科技(北京)有限公司 | 多vr/ar设备协同系统及协同方法 |
CN107332853A (zh) * | 2017-07-12 | 2017-11-07 | 浙江核聚通信技术有限公司 | 混合cdn视频流分发网络的方法和系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9374626B2 (en) * | 2013-07-17 | 2016-06-21 | Intel Corporation | Use of digital TV bandwidth for web cache pre-loading |
-
2018
- 2018-02-09 CN CN201810133524.6A patent/CN108271042B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102056016A (zh) * | 2010-09-21 | 2011-05-11 | 顾海涛 | Pon、ipqam结构的双向数字电视点播实现装置 |
CN103001779A (zh) * | 2012-09-29 | 2013-03-27 | 吉视传媒股份有限公司 | 网络数据传输系统中的数据接收终端 |
CN106899860A (zh) * | 2015-12-21 | 2017-06-27 | 优必达公司 | 通过网络传送媒体的系统及方法 |
CN106993181A (zh) * | 2016-11-02 | 2017-07-28 | 大辅科技(北京)有限公司 | 多vr/ar设备协同系统及协同方法 |
CN106792133A (zh) * | 2016-12-30 | 2017-05-31 | 北京华为数字技术有限公司 | 虚拟现实服务器、视频数据传输方法及系统 |
CN107332853A (zh) * | 2017-07-12 | 2017-11-07 | 浙江核聚通信技术有限公司 | 混合cdn视频流分发网络的方法和系统 |
Non-Patent Citations (1)
Title |
---|
有线电视接入网络双向改造技术应用分析;赵志豪;《中国优秀硕士学位论文全文数据库 信息科技辑》;20140515;I136-454 * |
Also Published As
Publication number | Publication date |
---|---|
CN108271042A (zh) | 2018-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108271042B (zh) | 一种基于有线电视网络的视频数据传输方法、云vr系统实现方法以及云vr系统 | |
CN102883135B (zh) | 屏幕共享及控制方法 | |
CN102308551B (zh) | 虚拟用户端设备 | |
US20130057556A1 (en) | Avatars in Social Interactive Television | |
CN110139113B (zh) | 视频资源的传输参数分发方法及装置 | |
US20200092600A1 (en) | Method and apparatus for presenting video information | |
CN201465328U (zh) | 基于流媒体传输的远程医疗教学系统 | |
CN106227492B (zh) | 拼接墙与移动智能终端互联方法和装置 | |
US20200304552A1 (en) | Immersive Media Metrics For Rendered Viewports | |
CN105577819A (zh) | 一种虚拟化桌面的分享系统、分享方法以及分享装置 | |
CN102611873A (zh) | 一种可实现2d/3d视频通讯、传输优化的方法和系统 | |
US20200145716A1 (en) | Media information processing method and apparatus | |
CN105472368A (zh) | 一种面向集群终端的立体视频直播系统 | |
CN108200394A (zh) | 一种支持多路图像传输的无人机系统 | |
CN113438495A (zh) | Vr直播方法、装置、系统、设备及存储介质 | |
CN115174942A (zh) | 一种自由视角切换方法及交互式自由视角播放系统 | |
CN106412617B (zh) | 远程调试控制方法及装置 | |
CN103067746A (zh) | 一种酒店视频服务系统与方法 | |
CN103402077A (zh) | 一种公网ip网内动态调整码流速率的视音频传输策略方法 | |
CN113660509A (zh) | 基于云渲染的三维模型处理系统以及方法 | |
CN102710968A (zh) | 云电视系统中视频流同步方法 | |
CN109963088A (zh) | 基于增强现实ar的网络直播方法、装置及系统 | |
CN207475725U (zh) | 融合单向和双向信号进行转换传播的节点系统集成装置 | |
CN113794870A (zh) | 一种基于有线电视网络视频数据的云vr系统及其使用方法 | |
CN205081880U (zh) | 一种网络可视化分布式任务协作装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |