CN109862019B - 数据处理方法、装置以及系统 - Google Patents

数据处理方法、装置以及系统 Download PDF

Info

Publication number
CN109862019B
CN109862019B CN201910131866.9A CN201910131866A CN109862019B CN 109862019 B CN109862019 B CN 109862019B CN 201910131866 A CN201910131866 A CN 201910131866A CN 109862019 B CN109862019 B CN 109862019B
Authority
CN
China
Prior art keywords
video data
data
user
code rate
regional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910131866.9A
Other languages
English (en)
Other versions
CN109862019A (zh
Inventor
高立鑫
盛兴东
朱琳
李储存
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201910131866.9A priority Critical patent/CN109862019B/zh
Publication of CN109862019A publication Critical patent/CN109862019A/zh
Application granted granted Critical
Publication of CN109862019B publication Critical patent/CN109862019B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开提供了一种数据处理方法,包括:获取视频数据,所述视频数据包括与多个区域对应的区域视频数据;其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率;以及基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流。

Description

数据处理方法、装置以及系统
技术领域
本公开涉及一种数据处理方法、一种数据处理装置以及一种数据处理系统。
背景技术
随着电子技术的快速发展,各种各样的电子设备越来越多地应用于生活和工作等诸多场景。在电子设备播放视频时通常涉及到视频传输,特别是对于直播视频来说,视频传输的实效性显得尤其重要。因此如何减小视频传输的延时成为亟需解决的问题。
发明内容
本公开的一个方面提供了一种数据处理方法,包括:获取视频数据,所述视频数据包括与多个区域对应的区域视频数据,其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,以及基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流。
可选地,上述方法还包括:获取用户数据,基于所述用户数据确定每个所述区域视频数据所具有的码率中的特定码率,从已生成的与每个所述区域视频数据对应的至少一个数据流中获取与所述特定码率对应的数据流,以及将与所述特定码率对应的数据流传输给用户。
可选地,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对所述中间区域视频数据的关注度高于对所述边缘区域视频数据的关注度,所述将与所述特定码率对应的数据流传输给用户,包括:将与所述中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与所述边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
可选地,上述方法还包括:确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率。所述基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流。
可选地,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。所述确定与所述多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与所述多个区域对应的区域视频数据中的所述当前目标视频数据,和/或根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据。
本公开的另一个方面提供了一种数据处理装置,包括:第一获取模块、生成模块。其中,第一获取模块获取视频数据,所述视频数据包括与多个区域对应的区域视频数据,其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,生成模块基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流。
可选地,上述装置还包括:第二获取模块、第一确定模块、第三获取模块、传输模块。其中,第二获取模块获取用户数据,第一确定模块基于所述用户数据确定每个所述区域视频数据所具有的码率中的特定码率,第三获取模块从已生成的与每个所述区域视频数据对应的至少一个数据流中获取与所述特定码率对应的数据流,传输模块将与所述特定码率对应的数据流传输给用户。
可选地,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对所述中间区域视频数据的关注度高于对所述边缘区域视频数据的关注度,所述将与所述特定码率对应的数据流传输给用户,包括:将与所述中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与所述边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
可选地,上述装置还包括:第二确定模块,确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率。所述基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流。
可选地,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。所述确定与所述多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与所述多个区域对应的区域视频数据中的所述当前目标视频数据,和/或根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据。
本公开的另一个方面提供了一种数据处理系统,包括:处理器;以及存储器,用于存储可执行指令,其中,当所述指令被所述处理器执行时,使得所述处理器执行:获取视频数据,所述视频数据包括与多个区域对应的区域视频数据,其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,以及基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流。
可选地,上述处理器还用于:获取用户数据,基于所述用户数据确定每个所述区域视频数据所具有的码率中的特定码率,从已生成的与每个所述区域视频数据对应的至少一个数据流中获取与所述特定码率对应的数据流,以及将与所述特定码率对应的数据流传输给用户。
可选地,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对所述中间区域视频数据的关注度高于对所述边缘区域视频数据的关注度,所述将与所述特定码率对应的数据流传输给用户,包括:将与所述中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与所述边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
可选地,上述处理器还用于:确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率。所述基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流。
可选地,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。所述确定与所述多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与所述多个区域对应的区域视频数据中的所述当前目标视频数据,和/或根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据。
本公开的另一方面提供了一种非易失性可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开实施例的数据处理方法和数据处理系统的应用场景;
图2示意性示出了根据本公开实施例的数据处理方法的流程图;
图3示意性示出了根据本公开另一实施例的数据处理方法的流程图;
图4示意性示出了根据本公开实施例的视频区域的示意图;
图5示意性示出了根据本公开再一实施例的数据处理方法的流程图;
图6示意性示出了根据本公开另一实施例的视频区域的示意图;
图7示意性示出了根据本公开实施例的数据处理系统的框图;
图8示意性示出了根据本公开实施例的数据处理装置的框图;
图9示意性示出了根据本公开另一实施例的数据处理装置的框图;
图10示意性示出了根据本公开再一实施例的数据处理装置的框图;以及
图11示意性示出了根据本公开实施例的用于实现数据处理的计算机系统的方框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种数据处理方法,包括:获取视频数据,视频数据包括与多个区域对应的区域视频数据,其中,与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,以及基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流。
可见,在本公开实施例的技术方案中,通过获取视频数据,该视频数据包括多个区域视频数据,并基于每个区域视频数据及其码率生成至少一个数据流。其中,通过生成每个区域视频数据对应的至少一个数据流,避免在对每个区域视频数据进行编码过程中,由于区域视频数据的码率改变而重新初始化编码器造成延时,以此实现减小视频传输的延时。
图1示意性示出了根据本公开实施例的数据处理方法和数据处理系统的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,该应用场景100例如可以包括用户110以及穿戴式设备120。
根据本公开实施例,穿戴式设备120例如可以是能够穿戴于用户110身体部位的电子设备,该穿戴式设备120例如可以是虚拟现实头盔。在本公开实施例中,该穿戴式设备120例如可以穿戴于用户110的头部。
其中,用户110能够通过穿戴式设备120观看视频数据130,该视频数据130例如可以是VR(Virtual Reality)全景视频数据。其中,例如通过服务器生成视频数据130对应的数据流,并将该数据流发送至穿戴式设备120中,由穿戴式设备120基于该数据流生成视频数据130,并播放视频数据130给用户110观看。
根据本公开实施例,视频数据130的播放通常需要高清晰大分辨率的图像才能有比较好的显示效果。但对于一些视频,特别是直播视频数据来说,视频数据对实时性要求较高,因此需要尽可能降低视频数据的码率,减小数据流从服务器传输至穿戴式设备120造成的传输延时。因此,通常通过将视频图像划分成多个区域,并针对不同的区域预设不同的码率,针对不同区域单独编码形成与不同区域对应的数据流。
根据本公开实施例,码率例如可以是数据传输时单位时间传送的数据位数,码率的单位可以是kb/s(千比特每秒),码率越大,表示单位时间内数据的取样率越大,数据精度越高,对应的数据流就越接近原始数据。
其中,该视频数据130例如由多个区域视频数据组成,例如由区域视频数据131、区域视频数据132等组成。其中,服务器通过生成每个区域视频数据对应的多个不同码率的数据流(例如区域视频数据131具有与多个码率对应的多个数据流),再根据用户的需求将相应码率(区域视频数据131的多个码率中的一个码率)对应的数据流传输给用户110,并通过穿戴式设备120基于该数据流生成视频数据以供用户110观看。
在本公开实施例中,视频数据130例如包括多帧图像,多帧图像例如为M1、M2、M3……、Mn,将每一帧图像划分为多个区域(每一帧图像划分的规则例如相同),例如一帧图像M1划分为m1、m2、m3、m4等多个区域,一帧图像M2也划分为m1、m2、m3、m4等多个区域,……,一帧图像Mn也划分为m1、m2、m3、m4等多个区域。多帧图像中的区域m1形成相应的“区域视频数据”,多帧图像中的区域m2形成相应的“区域视频数据”,区域m3、m4也相同。
例如,服务器生成区域视频数据131对应的三个数据流,该三个数据流对应的码率分别为高码率、中码率、低码率。同样地,服务器例如生成区域视频数据132对应的三个数据流,该三个数据流对应的码率分别为高码率、中码率、低码率。其中,高码率例如可以为4096kb/s、中码率例如可以为2048kb/s、低码率例如可以为1024kb/s。其中,区域视频数据131例如为用户较为关注的部分,此时,服务器可以将区域视频数据131对应的高码率数据流传输给穿戴式设备120,而区域视频数据132例如为用户关注度较低的部分,此时,服务器可以将区域视频数据132对应的低码率数据流传输给穿戴式设备120。穿戴式设备120基于区域视频数据131对应的高码率数据流和区域视频数据132对应的低码率数据流生成视频数据130(由于区域视频数据131的码率高于区域视频数据132的码率,因此区域视频数据131的清晰度高于区域视频数据132的清晰度),并播放该用户110观看。本领域技术人员可以理解,上述“高码率”、“中码率”、“低码率”的具体数值仅为便于理解本方案所做出的举例,本申请不限制码率的具体数值。
可见,在本公开实施例的技术方案中,首先通过生成每个区域视频数据对应的多个数据流,其次根据用户需求将每个区域视频数据对应的一个数据流传输给用户,最后基于数据流生成相应的视频数据,由此提高视频数据传输的速度。
下面结合图1的应用场景,参考图2~图6来描述根据本公开示例性实施方式的数据处理方法。需要注意的是,上述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施方式在此方面不受任何限制。相反,本发明的实施方式可以应用于适用的任何场景。
图2示意性示出了根据本公开实施例的数据处理方法的流程图。
如图2所示,该方法包括操作S210~S220。
在操作S210,获取视频数据,视频数据包括与多个区域对应的区域视频数据,其中,与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率。
根据本公开实施例,视频数据例如可以是直播视频数据。例如通过实时采集直播视频数据后,服务器能够对该直播视频数据进行处理,例如通过编码器对视频数据进行编码,生成相应的数据流,并将数据流传输至客户端进行播放。
其中,视频数据例如包括多个区域视频数据。其中,可以是每个区域视频数据对应有多个码率,或者多个区域视频数据中的部分区域视频数据具有多个码率。
在操作S220,基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流。
在本公开实施例中,每个区域视频数据对应有至少一个码率。即,有些区域视频数据具有一个码率,有些区域视频数据则具有多个码率。服务器能够对每个区域视频数据进行处理,生成与至少一个码率对应的至少一个数据流。
例如,视频数据包括区域视频数据A、区域视频数据B、区域视频数据C。其中,区域视频数据A例如具有多个码率,分别为码率a1、码率a2、码率a3,区域视频数据B例如具有多个码率,分别为码率b1、码率b2、码率b3,区域视频数据C例如具有一个码率,例如为码率c1。其中,服务器能够生成关于区域视频数据A的与码率a1、码率a2、码率a3对应的三个数据流,生成关于区域视频数据B的与码率b1、码率b2、码率b3对应的三个数据流,生成关于区域视频数据C的与码率c1对应的一个数据流。
其中,关于区域视频数据中与多个码率对应的多个数据流能够作为待选数据流,本公开实施例可以根据用户的需求从多个待选数据流中确定出所需的数据流并传输给用户。
可见,在本公开实施例的技术方案中,通过获取视频数据,该视频数据包括多个区域视频数据,并基于每个视频数据及其码率生成至少一个数据流。其中,通过生成每个区域视频数据对应的至少一个数据流,避免在对每个区域视频数据进行编码过程中,由于区域视频数据的码率改变而重新初始化编码器造成延时,以此减小视频传输的延时。
图3示意性示出了根据本公开另一实施例的数据处理方法的流程图。
如图3所示,该方法包括操作S210~S220、以及S310~S340。其中,操作S210~S220如上从参考图2中的操作相同或类似,在此不再赘述。
在操作S310,获取用户数据。
根据本公开实施例,用户数据例如可以是视点数据,该视点数据能够表征用户对多个区域视频数据中的每个区域视频数据的关注度。例如可以用户眼睛直视或者头部朝向的区域对应的区域视频数据为用户关注度较高的区域视频数据。
在操作S320,基于用户数据确定每个区域视频数据所具有的码率中的特定码率。
在本公开实施例中,用户对每个区域视频数据的关注度可以不同。每个区域视频数据对应的特定码率例如取决于用户对该区域视频数据的关注度。例如,用户关注度越高的区域视频数据对应的特定码率越大。其中,码率越大的区域视频数据,其对应的数据流的流量越大,传输速度越慢,但在该数据流传输给用户后,基于该数据流生成并展示给用户观看的视频的清晰度越高,显示效果越好。
举例来说,例如对于区域视频数据A、区域视频数据B、区域视频数据C,区域视频数据A具有的多个码率从大至小依次为码率a1、码率a2、码率a3,区域视频数据B具有的多个码率从大至小依次为码率b1、码率b2、码率b3,区域视频数据C具有的码率为码率c1。其中,例如用户对区域视频数据A的关注度较大,对区域视频数据B的关注度较小,此时例如确定区域视频数据A的特定码率为码率a1,确定区域视频数据B的特定码率为码率b2,确定区域视频数据C的特定码率为码率c1
在操作S330,从已生成的与每个区域视频数据对应的至少一个数据流中获取与特定码率对应的数据流。
根据本公开实施例,服务器根据每个区域视频数据对应的至少一个码率生成的对应的数据流,在确定区域视频数据的特定码率后,获取特定码率对应的数据流。例如,获取区域视频数据A的特定码率a1对应的数据流,获取区域视频数据B的特定码率b2对应的数据流,获取区域视频数据C的特定码码率c1对应的数据流。
在操作S340,将与特定码率对应的数据流传输给用户。
根据本公开实施例,将每个区域视频数据的特定码率对应的数据流流传输给用户。例如将区域视频数据A的特定码率a1对应的数据流,区域视频数据B的特定码率b2对应的数据流,区域视频数据C的特定码码率c1对应的数据流传输给用户端,用户端能够根据接收到的数据流生成视频并播放该视频。
图4示意性示出了根据本公开实施例的视频区域的示意图。
如图4所示,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对中间区域视频数据的关注度高于对边缘区域视频数据的关注度。
为了便于理解,本公开实施例的中间区域视频数据例如包括多个区域视频数据,例如如图4所示的多个区域A1。边缘区域视频数据例如包括多个区域B1。其中,用户对区域A1的关注度例如高于对区域B1的关注度。
根据本公开实施例,将与特定码率对应的数据流传输给用户,包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
其中,每个区域A1例如具有的多个码率从大至小依次为码率a1、码率a2、码率a3,每个区域B1例如具有的多个码率从大至小依次为码率b1、码率b2、码率b3。其中,用户对中间区域视频数据(区域A1)的关注度较高,每个区域A1的第一码率例如为大码率a1,用户对边缘区域视频数据(区域B1)的关注度较低,每个区域B1的第二码率例如为中码率b2。此时,服务器可以将区域A1的码率a1对应的数据流传输给用户,将区域B1的码率b2对应的数据流传输给用户。
另外,除了中间区域视频数据(区域A1)和边缘区域视频数据(区域B1)之外,本公开实施例还可以包括其他区域视频数据,例如还包括区域C1。用户对该区域C1的关注度低于区域A1和区域B1,因此该区域C1例如具有小码率c1,服务器可以将该区域C1的码率c1对应的数据流传输给用户。
可以理解,对于不同的区域来说,传输给用户的数据流对应的码率不同。例如区域A1的数据流对应的码率较大,与区域A1相邻的区域B1的数据流对应中等码率,距离区域A1较远的区域C1的数据流对应的码率较小。通过不同区域间码率呈梯度下降,可以减小区域间画面接缝明显的问题。
图5示意性示出了根据本公开再一实施例的数据处理方法的流程图。
如图5所示,该方法包括操作S210~S220、以及S510。其中,操作S210~S220如上从参考图2中的操作相同或类似,在此不再赘述。
在操作S510,确定与多个区域对应的区域视频数据中的目标视频数据,其中,目标视频数据具有多个码率。
图6示意性示出了根据本公开另一实施例的视频区域的示意图。
如图6所示,目标视频数据例如为用户最为关注的区域视频数据,例如该目标视频数据为如图6所示的区域A2,表示用户当前正在注视该区域A2,该区域A2例如包括多个码率,该多个码率例如从大到小依次为码率a1、码率a2、码率a3
其中,操作S220中的基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流,包括:基于目标视频数据及其多个码率生成与目标视频数据对应的多个数据流。
根据本公开实施例,根据该目标视频数据具有的多个码率生成多个数据流,在将视频数据传输给用户时,可以从该目标视频数据具有的多个数据流中选择码率高的对应的数据流传输给用户。
在本公开实施例中,除了目标视频数据外的其他区域例如是用户关注度较低的区域(例如图6中的区域C2),该其他区域可以具有一个码率,服务器可以仅生成一个码率对应的数据流,并将该数据流传输给用户,而不必像目标视频数据那样生成多个数据流造成资源浪费。
但是,本公开还可以包括较佳的实施例。例如,如图6所示,由于用户的关注度可能随时变化(例如用户在观看视频时头部转动或者眼睛转动),即,下一时刻的目标视频数据(区域A2)可能发生变化。一般来说,下一时刻的目标视频数据可能变为与区域A2相邻的区域B2(区域B2例如可以包括多个区域),因此与目标视频数据(区域A2)相邻的区域B2可以具有多个码率,在当前目标视频数据为区域A2时,服务器可以将区域B2具有的多个码率中的中等码率对应的数据流传输给用户。当下一时刻的目标视频数据变化为区域B2中的至少一个区域时,可以从下一时刻的目标视频数据(区域B2)中对应的多个码率中选择高码率对应的数据流传输给用户,以此避免由于目标视频数据变化来不及生成数据流而造成传输延时。
根据本公开实施例,目标视频数据包括:之前目标视频数据和当前目标视频数据。其中,操作S510中的确定与多个区域对应的区域视频数据中的目标视频数据,包括以下至少一项。
(1)根据用户数据确定与多个区域对应的区域视频数据中的当前目标视频数据。
其中,用户数据例如可以是视点数据,该视点数据能够表征用户对多个区域视频数据中的每个区域视频数据的关注度。例如可以将用户眼睛直视的区域对应的区域视频数据确定为当前目标视频数据。
(2)根据之前目标视频数据预测与多个区域对应的区域视频数据中的当前目标视频数据。
或者,还可以根据之前目标视频数据来预测当前目标视频数据。由于之前目标视频数据能够表征用户观看视频时用户的观看状态(例如眼睛或者头部转动的情况),因此可以根据之前目标视频数据预测当前目标视频数据。举例来说,可以将上一时刻的目标视频数据作为当前目标视频数据(由于用户的眼睛或者头部的转动频率一般不会过高)。
可以理解,上述图4和图6所举例的区域划分是为便于理解本方案所作出的一种举例,在实际应用中,本领域技术人员可根据实际需求制定划分规则。即,图4和图6所示的区域划分示例不应作为本公开的限制。
图7示意性示出了根据本公开实施例的数据处理系统的框图。
如图7所示,本公开实施例的数据处理系统700包括处理器710以及存储器720,存储器720用于存储可执行指令,其中,当指令被处理器710执行时,使得处理器710执行:获取视频数据,视频数据包括与多个区域对应的区域视频数据,其中,与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,以及基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流。
根据本公开实施例,上述处理器还用于:获取用户数据,基于用户数据确定每个区域视频数据所具有的码率中的特定码率,从已生成的与每个区域视频数据对应的至少一个数据流中获取与特定码率对应的数据流,以及将与特定码率对应的数据流传输给用户。
根据本公开实施例,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对中间区域视频数据的关注度高于对边缘区域视频数据的关注度,将与特定码率对应的数据流传输给用户,包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
根据本公开实施例,上述处理器还用于:确定与多个区域对应的区域视频数据中的目标视频数据,其中,目标视频数据具有多个码率。基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流,包括:基于目标视频数据及其多个码率生成与目标视频数据对应的多个数据流。
根据本公开实施例,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。确定与多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与多个区域对应的区域视频数据中的当前目标视频数据,和/或根据之前目标视频数据预测与多个区域对应的区域视频数据中的当前目标视频数据。
图8示意性示出了根据本公开实施例的数据处理装置的框图。
如图8所示,数据处理装置800包括第一获取模块810以及生成模块820。
第一获取模块810可以用于获取视频数据,视频数据包括与多个区域对应的区域视频数据;其中,与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率。根据本公开实施例,第一获取模块810例如可以执行上文参考图2描述的操作S210,在此不再赘述。
生成模块820可以用于基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流。根据本公开实施例,生成模块820例如可以执行上文参考图2描述的操作S220,在此不再赘述。
图9示意性示出了根据本公开另一实施例的数据处理装置的框图。
如图9所示,数据处理装置900包括第一获取模块810、生成模块820、第二获取模块910、第一确定模块920、第三获取模块930以及传输模块940。其中,第一获取模块810以及生成模块820如上参考图8描述的模块相同或类似,在此不再赘述。
第二获取模块910可以用于获取用户数据。根据本公开实施例,第二获取模块910例如可以执行上文参考图3描述的操作S310,在此不再赘述。
第一确定模块920可以用于基于用户数据确定每个区域视频数据所具有的码率中的特定码率。根据本公开实施例,第一确定模块920例如可以执行上文参考图3描述的操作S320,在此不再赘述。
第三获取模块930可以用于从已生成的与每个区域视频数据对应的至少一个数据流中获取与特定码率对应的数据流。根据本公开实施例,第三获取模块930例如可以执行上文参考图3描述的操作S330,在此不再赘述。
传输模块940可以用于将与特定码率对应的数据流传输给用户。
根据本公开实施例,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对中间区域视频数据的关注度高于对边缘区域视频数据的关注度。将与特定码率对应的数据流传输给用户,包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
根据本公开实施例,传输模块940例如可以执行上文参考图3描述的操作S340,在此不再赘述。
图10示意性示出了根据本公开再一实施例的数据处理装置的框图。
如图10所示,数据处理装置1000包括第一获取模块810、生成模块820以及第二确定模块1010。其中,第一获取模块810以及生成模块820如上参考图8描述的模块相同或类似,在此不再赘述。
第二确定模块1010可以用于确定与多个区域对应的区域视频数据中的目标视频数据,其中,目标视频数据具有多个码率。
根据本公开实施例,基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流,包括:基于目标视频数据及其多个码率生成与目标视频数据对应的多个数据流。
根据本公开实施例,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。确定与多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与多个区域对应的区域视频数据中的当前目标视频数据,和/或根据之前目标视频数据预测与多个区域对应的区域视频数据中的当前目标视频数据。
根据本公开实施例,第二确定模块1010例如可以执行上文参考图5描述的操作S510,在此不再赘述。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,第一获取模块810、生成模块820、第二获取模块910、第一确定模块920、第三获取模块930、传输模块940以及第二确定模块1010中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,第一获取模块810、生成模块820、第二获取模块910、第一确定模块920、第三获取模块930、传输模块940以及第二确定模块1010中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,第一获取模块810、生成模块820、第二获取模块910、第一确定模块920、第三获取模块930、传输模块940以及第二确定模块1010中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图11示意性示出了根据本公开实施例的用于实现数据处理的计算机系统的方框图。图11示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图11所示,实现控制的计算机系统1100包括处理器1101、计算机可读存储介质1102。该系统1100可以执行根据本公开实施例的方法。
具体地,处理器1101例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器1101还可以包括用于缓存用途的板载存储器。处理器1101可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质1102,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质1102可以包括计算机程序1103,该计算机程序1103可以包括代码/计算机可执行指令,其在由处理器1101执行时使得处理器1101执行根据本公开实施例的方法或其任何变形。
计算机程序1103可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序1103中的代码可以包括一个或多个程序模块,例如包括1103A、模块1103B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器1101执行时,使得处理器1101可以执行根据本公开实施例的方法或其任何变形。
根据本发明的实施例,第一获取模块810、生成模块820、第二获取模块910、第一确定模块920、第三获取模块930、传输模块940以及第二确定模块1010中的至少一个可以实现为参考图11描述的计算机程序模块,其在被处理器1101执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现:
一种数据处理方法,包括:获取视频数据,视频数据包括与多个区域对应的区域视频数据,其中,与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率,以及基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流。
根据本公开的实施例,上述方法还包括:获取用户数据,基于用户数据确定每个区域视频数据所具有的码率中的特定码率,从已生成的与每个区域视频数据对应的至少一个数据流中获取与特定码率对应的数据流,以及将与特定码率对应的数据流传输给用户。
根据本公开的实施例,具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对中间区域视频数据的关注度高于对边缘区域视频数据的关注度,将与特定码率对应的数据流传输给用户,包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
根据本公开的实施例,上述方法还包括:确定与多个区域对应的区域视频数据中的目标视频数据,其中,目标视频数据具有多个码率。基于每个区域视频数据及其码率生成与每个区域视频数据对应的至少一个数据流,包括:基于目标视频数据及其多个码率生成与目标视频数据对应的多个数据流。
根据本公开的实施例,上述目标视频数据包括:之前目标视频数据和当前目标视频数据。确定与多个区域对应的区域视频数据中的目标视频数据,包括:根据用户数据确定与多个区域对应的区域视频数据中的当前目标视频数据,和/或根据之前目标视频数据预测与多个区域对应的区域视频数据中的当前目标视频数据。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。

Claims (8)

1.一种数据处理方法,包括:
获取视频数据,所述视频数据包括与多个区域对应的区域视频数据;其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率;
确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率;以及
基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流,
其中,所述目标视频数据包括:之前目标视频数据和当前目标视频数据,所述之前目标视频数据的时刻在所述当前目标视频数据的时刻之前,所述之前目标视频数据表征用户的观看状态;
其中,所述确定与所述多个区域对应的区域视频数据中的目标视频数据包括:根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据,
所述方法还包括:针对与每个所述区域视频数据对应的至少一个数据流,将所述至少一个数据流中的码率为特定码率的数据流传输给用户,
其中,所述将所述至少一个数据流中的码率为特定码率的数据流传输给用户包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户,中间区域与边缘区域相邻。
2.根据权利要求1所述的方法,还包括:
获取用户数据;
基于所述用户数据确定每个所述区域视频数据所具有的码率中的特定码率;
从已生成的与每个所述区域视频数据对应的至少一个数据流中获取与所述特定码率对应的数据流,以便将与所述特定码率对应的数据流传输给用户。
3.根据权利要求2所述的方法,其中:
具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对所述中间区域视频数据的关注度高于对所述边缘区域视频数据的关注度;
所述将与所述特定码率对应的数据流传输给用户,包括:将与所述中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与所述边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
4.根据权利要求1所述的方法,其中:
所述确定与所述多个区域对应的区域视频数据中的目标视频数据,还包括:
根据用户数据确定与所述多个区域对应的区域视频数据中的所述当前目标视频数据。
5.一种数据处理装置,包括:
第一获取模块,获取视频数据,所述视频数据包括与多个区域对应的区域视频数据;其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率;
第二确定模块,确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率;以及
生成模块,基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流,
其中,所述目标视频数据包括:之前目标视频数据和当前目标视频数据,所述之前目标视频数据的时刻在所述当前目标视频数据的时刻之前,所述之前目标视频数据表征用户的观看状态;
其中,所述确定与所述多个区域对应的区域视频数据中的目标视频数据包括:根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据,
所述装置还包括:传输模块,针对与每个所述区域视频数据对应的至少一个数据流,将所述至少一个数据流中的码率为特定码率的数据流传输给用户,
其中,所述将所述至少一个数据流中的码率为特定码率的数据流传输给用户包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户,中间区域与边缘区域相邻。
6.根据权利要求5所述的装置,还包括:
第二获取模块,获取用户数据;
第一确定模块,基于所述用户数据确定每个所述区域视频数据所具有的码率中的特定码率;
第三获取模块,从已生成的与每个所述区域视频数据对应的至少一个数据流中获取与所述特定码率对应的数据流,以便将与所述特定码率对应的数据流传输给用户。
7.根据权利要求6所述的装置,其中:
具有多个码率的至少一个区域视频数据包括:中间区域视频数据和边缘区域视频数据,其中,用户对所述中间区域视频数据的关注度高于对所述边缘区域视频数据的关注度;
所述将与所述特定码率对应的数据流传输给用户,包括:将与所述中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与所述边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户。
8.一种数据处理系统,包括:
处理器;以及
存储器,用于存储可执行指令,其中,当所述指令被所述处理器执行时,使得所述处理器执行:
获取视频数据,所述视频数据包括与多个区域对应的区域视频数据;其中,所述与多个区域对应的区域视频数据中的至少一个区域视频数据具有多个码率;
确定与所述多个区域对应的区域视频数据中的目标视频数据,其中,所述目标视频数据具有多个码率;以及
基于每个所述区域视频数据及其码率生成与每个所述区域视频数据对应的至少一个数据流,包括:基于所述目标视频数据及其多个码率生成与所述目标视频数据对应的多个数据流,
其中,所述目标视频数据包括:之前目标视频数据和当前目标视频数据,所述之前目标视频数据的时刻在所述当前目标视频数据的时刻之前,所述之前目标视频数据表征用户的观看状态;
其中,所述确定与所述多个区域对应的区域视频数据中的目标视频数据包括:根据所述之前目标视频数据预测与所述多个区域对应的区域视频数据中的所述当前目标视频数据,
针对与每个所述区域视频数据对应的至少一个数据流,将所述至少一个数据流中的码率为特定码率的数据流传输给用户,
其中,所述将所述至少一个数据流中的码率为特定码率的数据流传输给用户包括:将与中间区域视频数据所具有的多个码率中的第一码率对应的数据流传输给用户,以及将与边缘区域视频数据所具有的多个码率中的第二码率对应的数据流传输给用户,中间区域与边缘区域相邻。
CN201910131866.9A 2019-02-20 2019-02-20 数据处理方法、装置以及系统 Active CN109862019B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910131866.9A CN109862019B (zh) 2019-02-20 2019-02-20 数据处理方法、装置以及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910131866.9A CN109862019B (zh) 2019-02-20 2019-02-20 数据处理方法、装置以及系统

Publications (2)

Publication Number Publication Date
CN109862019A CN109862019A (zh) 2019-06-07
CN109862019B true CN109862019B (zh) 2021-10-22

Family

ID=66898548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910131866.9A Active CN109862019B (zh) 2019-02-20 2019-02-20 数据处理方法、装置以及系统

Country Status (1)

Country Link
CN (1) CN109862019B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110784745B (zh) * 2019-11-26 2021-12-07 科大讯飞股份有限公司 一种视频传输方法、装置、系统、设备及存储介质
CN111629212B (zh) * 2020-04-30 2023-01-20 网宿科技股份有限公司 一种对视频进行转码的方法和装置
CN113645500B (zh) * 2021-10-15 2022-01-07 北京蔚领时代科技有限公司 虚拟现实视频流数据处理系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015014773A1 (en) * 2013-07-29 2015-02-05 Koninklijke Kpn N.V. Providing tile video streams to a client
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
CN106550240A (zh) * 2016-12-09 2017-03-29 武汉斗鱼网络科技有限公司 一种带宽节省方法和系统
CN106612426A (zh) * 2015-10-26 2017-05-03 华为技术有限公司 一种多视点视频传输方法及装置
CN107666611A (zh) * 2017-09-13 2018-02-06 维沃移动通信有限公司 一种码率控制方法及移动终端
CN108063976A (zh) * 2017-11-20 2018-05-22 北京奇艺世纪科技有限公司 一种视频处理方法及装置
CN108495141A (zh) * 2018-03-05 2018-09-04 网宿科技股份有限公司 一种音视频的合成方法及系统
CN108632674A (zh) * 2017-03-23 2018-10-09 华为技术有限公司 一种全景视频的播放方法和客户端
CN108810427A (zh) * 2017-05-02 2018-11-13 北京大学 基于视点的全景视频内容表示的方法及装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100574441C (zh) * 2007-12-14 2009-12-23 武汉大学 一种感兴趣区域的率失真优化帧内刷新与码率分配方法
CN101252687B (zh) * 2008-03-20 2010-06-02 上海交通大学 实现多通道联合的感兴趣区域视频编码及传输的方法
US8396114B2 (en) * 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
KR101987820B1 (ko) * 2012-10-05 2019-06-11 삼성전자주식회사 고 해상도 컨텐츠를 처리하는 컨텐츠 처리 장치 및 그 방법
US20140161199A1 (en) * 2012-12-06 2014-06-12 Xiaomi Inc. Method and apparatus for processing video image
US10212437B2 (en) * 2013-07-18 2019-02-19 Qualcomm Incorporated Device and method for scalable coding of video information
CN103974084B (zh) * 2014-05-07 2017-02-08 南京邮电大学 流媒体数据块缓存方法及文件推荐方法、流媒体服务器
CN104125405B (zh) * 2014-08-12 2018-08-17 罗天明 基于眼球追踪和自动对焦系统的图像感兴趣区域提取方法
CN104967871B (zh) * 2015-07-01 2018-06-26 上海国茂数字技术有限公司 一种视频编码码流的统计复用系统及方法
CN106101847A (zh) * 2016-07-12 2016-11-09 三星电子(中国)研发中心 全景视频交互传输的方法和系统
CN109005455B (zh) * 2017-06-07 2021-01-22 杭州海康威视系统技术有限公司 视频数据处理方法及装置
CN109257584B (zh) * 2018-08-06 2020-03-10 上海交通大学 360度视频传输的用户观看视点序列预测方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015014773A1 (en) * 2013-07-29 2015-02-05 Koninklijke Kpn N.V. Providing tile video streams to a client
CN104735464A (zh) * 2015-03-31 2015-06-24 华为技术有限公司 一种全景视频交互传输方法、服务器和客户端
CN106612426A (zh) * 2015-10-26 2017-05-03 华为技术有限公司 一种多视点视频传输方法及装置
CN106550240A (zh) * 2016-12-09 2017-03-29 武汉斗鱼网络科技有限公司 一种带宽节省方法和系统
CN108632674A (zh) * 2017-03-23 2018-10-09 华为技术有限公司 一种全景视频的播放方法和客户端
CN108810427A (zh) * 2017-05-02 2018-11-13 北京大学 基于视点的全景视频内容表示的方法及装置
CN107666611A (zh) * 2017-09-13 2018-02-06 维沃移动通信有限公司 一种码率控制方法及移动终端
CN108063976A (zh) * 2017-11-20 2018-05-22 北京奇艺世纪科技有限公司 一种视频处理方法及装置
CN108495141A (zh) * 2018-03-05 2018-09-04 网宿科技股份有限公司 一种音视频的合成方法及系统

Also Published As

Publication number Publication date
CN109862019A (zh) 2019-06-07

Similar Documents

Publication Publication Date Title
US11706403B2 (en) Positional zero latency
US10469820B2 (en) Streaming volumetric video for six degrees of freedom virtual reality
EP3606082B1 (en) Panoramic video playback method and client terminal
CN105915937B (zh) 一种全景视频播放方法及设备
CN109862019B (zh) 数据处理方法、装置以及系统
US9819716B2 (en) Method and system for video call using two-way communication of visual or auditory effect
US9516225B2 (en) Apparatus and method for panoramic video hosting
US9723223B1 (en) Apparatus and method for panoramic video hosting with directional audio
US9258525B2 (en) System and method for reducing latency in video delivery
US20180341323A1 (en) Methods and apparatuses for handling virtual reality content
CN104735464A (zh) 一种全景视频交互传输方法、服务器和客户端
WO2019084959A1 (zh) 无人机的移动终端和云端平台的交互方法及装置
US20220417486A1 (en) Method and apparatus for processing three-dimensional video, readable storage medium and electronic device
CN114979652A (zh) 一种视频处理方法、装置、电子设备及存储介质
US11223662B2 (en) Method, system, and non-transitory computer readable record medium for enhancing video quality of video call
US20140082208A1 (en) Method and apparatus for multi-user content rendering
CN114445600A (zh) 一种特效道具的展示方法、装置、设备及存储介质
CN108960130B (zh) 视频文件智能处理方法和装置
CN108235119B (zh) 视频处理方法及装置、电子设备和计算机可读介质
JP2020187706A (ja) 画像処理装置、画像処理システム、画像処理方法およびプログラム
US20230206575A1 (en) Rendering a virtual object in spatial alignment with a pose of an electronic device
US20160165282A1 (en) Method and device for post processing of a video stream
US20200374567A1 (en) Generation apparatus, reproduction apparatus, generation method, reproduction method, control program, and recording medium
CN109064551B (zh) 电子设备的信息处理方法和装置
CN115733576A (zh) 点云媒体文件的封装与解封装方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant