CN104602008B - 视频编码方法、装置和系统 - Google Patents

视频编码方法、装置和系统 Download PDF

Info

Publication number
CN104602008B
CN104602008B CN201510018745.5A CN201510018745A CN104602008B CN 104602008 B CN104602008 B CN 104602008B CN 201510018745 A CN201510018745 A CN 201510018745A CN 104602008 B CN104602008 B CN 104602008B
Authority
CN
China
Prior art keywords
video
server
sub
coding
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510018745.5A
Other languages
English (en)
Other versions
CN104602008A (zh
Inventor
胡兴华
曾新海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201510018745.5A priority Critical patent/CN104602008B/zh
Publication of CN104602008A publication Critical patent/CN104602008A/zh
Priority to EP15877667.4A priority patent/EP3244621B1/en
Priority to PCT/CN2015/096578 priority patent/WO2016112756A1/zh
Priority to US15/638,710 priority patent/US10536732B2/en
Application granted granted Critical
Publication of CN104602008B publication Critical patent/CN104602008B/zh
Priority to US16/703,701 priority patent/US10924783B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种视频编码方法、装置和系统,该方法包括:接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流;将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将所述传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像;将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流;将每个编码服务器输出的编码视频流合并以获得目标视频流。本发明提供的视频编码方法、装置和系统极大地提高了编码效率,使得新的编码技术可以快速应用到民用领域。

Description

视频编码方法、装置和系统
技术领域
本发明涉及视频处理技术领域,特别是涉及一种视频编码方法、装置和系统。
背景技术
视频编码是指通过特定的压缩技术,将某个视频格式的文件转换成另一种视频格式文件的方式。目前客户端可以在采集视频原始采集数据后,在客户端实时压缩编码并上传到视频服务器,视频服务器再通过CDN(Content Delivery Network,内容分发网络)将视频流下发给用户。
然而,目前的视频编码方法,对进行视频编码的客户端所在的设备的硬件配置有很高要求,编码效率低,尤其是一些新出现的视频编码技术,比如H.265,在降低视频质量、分辨率的前提下才可以勉强在客户端进行视频编码,难以应用到民用领域。其中H.265是ITU-T VCEG继H.264之后所制定的新的视频编码标准;ITU全称为InternationalTelecommunication Union,意为国际电信联盟;VCEG全称为Video Coding ExpertsGroup,意为视频编码专家组。
发明内容
基于此,有必要针对目前的视频编码方法对客户端所在的设备的硬件配置要求高,编码效率低的问题,提供一种视频编码方法、装置和系统。
一种视频编码方法,所述方法包括:
接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流;
将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将所述传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像;
将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流;
将每个编码服务器输出的编码视频流合并以获得目标视频流。
一种视频编码装置,所述装置包括:
接收模块,用于接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流;
管理模块,用于将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将所述传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像;
分发模块,用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流;
合流模块,用于将每个编码服务器输出的编码视频流合并以获得目标视频流。
一种视频编码系统,所述系统包括分发服务器、管理服务器、编码服务器和合流服务器;所述分发服务器与所述编码服务器连接,所述编码服务器与所述合流服务器连接,且所述管理服务器分别与所述分发服务器、所述编码服务器和所述合流服务器连接;
所述分发服务器用于接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流;
所述管理服务器用于将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将所述传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像;
所述分发服务器还用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器;
所述编码服务器用于接收来自分发服务器的子区域图像,并据以进行第二编码方式的编码而输出编码视频流;
所述合流服务器用于将每个编码服务器输出的编码视频流合并以获得目标视频流。
上述视频编码方法、装置和系统,通过将视频原始采集数据的每个视频帧图像划分为多个子区域图像,并发送给多个编码服务器进行分布式地编码,最后将每个编码服务器输出的编码视频流合并从而获得目标视频流。这样原本必须由单台设备才能进行的编码,可以通过多台编码服务器来协作编码,极大地提高了编码效率。而且编码请求端不需要进行最终复杂的第二编码方式的编码,对编码请求端的硬件要求低,可以使得新的编码技术可以快速应用到民用领域。
附图说明
图1为一个实施例中视频编码系统的环境图;
图2为一个实施例中用于实现分发服务器、管理服务器和合流服务器的功能的服务器的结构框图;
图3为一个实施例中视频编码方法的流程示意图;
图4为一个实施例中将视频原始采集数据的其中一个视频帧图像四等分的示意图;
图5为一个实施例中将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流的步骤的流程示意图;
图6为一个实施例中视频原始采集数据的各个视频帧图像的示意图;
图7为一个实施例中将每个编码服务器输出的编码视频流合并以获得目标视频流的步骤的流程示意图;
图8为一个实施例中视频编码装置的结构框图;
图9为另一个实施例中视频编码装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
目前H.265格式是新的视频编码格式,将视频编码为H.265格式比编码为H.264格式所消耗的资源要多得多,这导致H.265格式目前还难以应用到民用领域。可以采用X265编码器将视频编码为H.265格式,而X265编码器是多线程的,本发明将X265编码器的架构进行改造,将多线程的框架改成多进程的,使其能够部署在不同的编码服务器上同时进行H.265格式的编码。
如图1所示,在一个实施例中,提供了一种视频编码系统100,该视频编码系统包括分发服务器102、管理服务器104、编码服务器106和合流服务器108。分发服务器102通过网络与编码请求端110连接,而合流服务器108则通过网络与编码请求端110所指定的用户端连接。该视频编码系统100用于实现一种视频编码方法。其中分发服务器、管理服务器和合流服务器可以是同一个服务器,也可以是各自独立的服务器。编码服务器为至少2个,且一个编码服务器可以是物理上独立的服务器,也可以是多个物理服务器虚拟而成的一个逻辑服务器。
如图2所示,在一个实施例中,提供了一种服务器,用于实现图1中的分发服务器、管理服务器和合流服务器的功能。该服务器包括通过系统总线连接的处理器、内存、存储介质和网络接口。其中,该服务器的存储介质存储有操作系统和一种视频编码装置,该视频编码装置用于实现一种视频编码方法。该服务器的处理器被配置为执行一种视频编码方法。该服务器的内存为存储介质中的视频编码装置提供运行环境。该服务器可以是一个独立的服务器,或者可以是多个可互联通信的服务器组成的服务器群,视频编码装置的各个功能模块可分别分布在服务器群中的各个服务器上。
如图3所示,在一个实施例中,提供了一种视频编码方法,本实施例以该方法应用于如图1所示的视频编码系统来举例说明。该方法具体包括如下步骤:
步骤302,接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流。
编码请求端是指具有编码需求而请求对视频进行编码的终端。编码请求端可以是客户端,比如视频通话客户端或者视频互动客户端等;编码请求端也可以是业务运营端,比如赛事直播运营端或者电视直播运营端等。
编码请求端包括或者连接有视频采集设备,视频采集设备比如可以是摄像机、摄像头或者支持D3D(全称Direct 3D,是基于微软公司的通用对象模式COM(Common ObjectMode)的三维图形应用程序编程接口)的显卡。视频原始采集数据是指编码请求端采集到的未经过压缩编码的视频原始数据。视频原始采集数据可以是摄像机或摄像头采集的视频数据,也可以是支持D3D的显卡所输出的D3D游戏视频数据。
编码请求端可以直接将视频原始采集数据发送给分发服务器,由分发服务器接收。或者,编码请求端也可以对视频原始采集数据进行第一编码方式的压缩编码,从而获得适合传输的传输视频流后,将传输视频流传输给分发服务器,由分发服务器接收。
这里第一编码方式所需资源要低于下述的第二编码方式所需资源。在一个实施例中,第一编码方式为编码为H.264格式的编码方式;第二编码方式为编码为H.265格式的编码方式。这里将视频原始采集数据编码成H.265格式相比编码成H.264格式所需资源要多很多。
具体是否要将视频原始采集数据进行第一编码方式的压缩编码再传输,可以根据实际需要选择。若编码请求端为客户端,目前的通信网络还难以实现视频原始采集数据的实时传输,需要将视频原始采集数据进行第一编码方式的压缩编码再传输给分发服务器。若编码请求端为业务运营端,在网络状态良好时或者实时性要求不高时可以直接将视频原始采集数据发送给分发服务器。
步骤304,将视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
视频原始采集数据包括若干视频帧图像。若分发服务器接收到的是视频原始采集数据,则分发服务器向管理服务器发送编码请求,由管理服务器根据该编码请求而将视频原始采集数据的每个视频帧图像划分为多个子区域图像。或者,若分发服务器接收到的是传输视频流,则分发服务器将传输视频流进行解码而获得视频原始采集数据,从而向管理服务器发送编码请求,由管理服务器根据该编码请求而将解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
子区域图像是指将一个视频帧图像划分为多个区域后该划分的区域中的图像。优选地,管理服务器可以在将视频原始采集数据的每个视频帧图像划分为多个子区域图像时采用均匀划分,使得划分出的各个子区域图像的大小一致。比如,管理服务器可以对视频原始采集数据的每个视频帧图像进行二等分、三等分、四等分、八等分等。举例来说,参照图4,视频原始采集数据的其中一个视频帧图像400,可以四等分为四个子区域图像分别为401、402、403和404。
步骤306,将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流。
视频原始采集数据的每个视频帧图像所划分出子区域图像的数量可以等于编码服务器的数量,这样每个视频帧图像都可以分配给其中一个编码服务器,由相应的编码服务器采用第二编码方式对该子区域图像进行编码,顺序输出形成编码视频流,编码服务器将编码视频流输出给合流服务器。当然视频原始采集数据的每个视频帧图像所划分出子区域图像的数量也可以不等于编码服务器的数量,此时可以根据各个编码服务器的负载情况来调度划分出的子区域图像给当前负载最低的编码服务器。
管理服务器可以根据分发服务器所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器,每个编码服务器接收来自分发服务器的子区域图像,根据管理服务器下发的编码子任务而对接收到的子区域图像进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。比如一个子区域图像可以携带有[1,2]这样的数组,用于表示该子区域图像在视频原始采集数据的第一个视频帧图像中的顺序第二个子区域图像。
在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理服务器可以记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。比如一个子区域图像可以携带有1.2这样的图像标识,而管理服务器可以记录图像标识1.2对应视频原始采集数据中的第一个视频帧图像中的第二个子区域图像。
步骤308,将每个编码服务器输出的编码视频流合并以获得目标视频流。
合流服务器可从管理服务器获取合流策略,从而根据该合流策略而将每个编码服务器输出的编码视频流合并以获得目标视频流。这里合流是指将多个编码视频流合并而获得目标视频流的过程。目标视频流则是指将视频原始采集数据采用第二编码方式进行编码而获得的最终的视频流。合流策略包括如何将编码视频流合并而获得目标视频流的方案。合流策略可以包括子区域图像编码而成的编码图像所对应的位置信息。
在一个实施例中,步骤308之后,还包括:将目标视频流返回给编码请求端;或者,向编码请求端所指定的用户端发送目标视频流。具体地,合流服务器将目标视频流返回给编码请求端还是编码请求端所指定的用户端,可根据实际需要来由编码请求端在向分发服务器发送视频原始采集数据或者传输视频流时指定。编码请求端可以在发送视频原始采集数据或者传输视频流时携带目标终端的地址,从而使得合流服务器在获得目标视频流之后发送给该目标终端。若该目标终端的地址为编码请求端的地址,则合流服务器会返回目标视频流给编码请求端。
上述视频编码方法,通过将视频原始采集数据的每个视频帧图像划分为多个子区域图像,并发送给多个编码服务器进行分布式地编码,最后将每个编码服务器输出的编码视频流合并从而获得目标视频流。这样原本必须由单台设备才能进行的编码,可以通过多台编码服务器来协作编码,极大地提高了编码效率。而且编码请求端不需要进行最终复杂的第二编码方式的编码,对编码请求端的硬件要求低,可以使得新的编码技术可以快速应用到民用领域。
如图5所示,在一个实施例中,步骤306具体包括如下步骤:
步骤502,按照子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址。
具体地,本实施例中每个视频帧图像中采用相同的划分方式划分获得子区域图像。子区域图像所属的视频帧图像是指该子区域图像从该视频帧图像中划分出来。相同位置处划分出的子区域图像,是指这些子区域图像都是从所属的视频帧图像中的相同的位置划分出来,比如若是将视频帧图像四等分,则每个视频帧图像的左上角的子区域图像就可以形成一个子区域图像流数据。以子区域图像流数据为单位是指分别为每个子区域图像流数据分配不同的编码服务器地址。
举例来说,参照图6,视频原始采集数据600包括顺序排列的若干视频帧图像610、620、630、640……。其中每个视频帧图像进行四等分,每个视频帧图像从四个位置划分出四个子区域图像。这样视频原始采集数据600各个视频帧图像的左上角位置的子区域图像分别为611、621、631、641……,形成一个子区域图像流数据,管理服务器为该子区域图像流数据分配一个编码服务器地址。不同的子区域图像流数据分配不同的编码服务器地址,比如管理服务器为子区域图像612、622、632、642……所形成的子区域图像流数据分配另一个编码服务器地址。
步骤504,将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器,以进行第二编码方式的编码而输出编码视频流。
具体地,参照图6,分发服务器将一个子区域图像流数据611、621、631、641……传输给该子区域图像流数据被分配的编码服务器地址所对应的编码服务器,另一个子区域图像流数据612、622、632、642……则传输给其被分配的另一个编码服务器地址所对应的编码服务器。以此类推,将每个子区域图像流数据分别传输给不同的编码服务器。
管理服务器可以根据分发服务器所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器,每个编码服务器接收来自分发服务器的子区域图像,根据管理服务器下发的编码子任务而对接收到的子区域图像流数据进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理服务器可以记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。
本实施例中,从相同位置处划分出的子区域图像分配给相同的编码服务器地址,而不同位置处划分出的子区域图像则分配给不同的编码服务器地址,这样可以使得合流服务器实现高效地将每个编码服务器输出的编码视频流进行合并,进一步提高编码效率。
如图7所示,在一个实施例中,步骤308具体包括以下步骤:
步骤702,获取每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息。
具体地,每个编码服务器输出的编码视频流中的编码图像,与输入该编码服务器的子区域图像流数据中的子区域图像是对应的,编码图像的位置信息也就是相应的子区域图像的位置信息。
合流服务器可以获取每个视频帧图像所划分出的子区域图像所携带的位置信息,或者获取每个视频帧图像所划分出的子区域图像所携带的图像标识所对应的位置信息。
步骤704,根据位置信息而将每个编码服务器输出的编码视频流合并以获得目标视频流。
具体地,合流服务器按照原始采集数据的每个视频帧图像被划分为多个子区域图像的划分方式,将每个编码服务器输出的编码视频流合并以获得目标视频流。
参照图6,子区域图像611、612、613以及614,在编码后获得编码图像后也是按照图6中子区域图像的位置关系进行合并,以此类推,其它编码图像也按照相应的子区域图像在相应的视频帧图像中的位置关系进行合并,获得目标视频流。
本实施例中,按照每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息,来对每个编码服务器输出的编码视频流合并从而获得目标视频流,可以实现高效地将每个编码服务器输出的编码视频流进行合并,进一步提高编码效率。
如图8所示,在一个实施例中,提供了一种视频编码装置800,具有实现上述视频编码方法的各个功能。该视频编码装置800包括:接收模块802、管理模块804、分发模块806和合流模块808。
接收模块802,用于接收编码请求端发来的视频原始采集数据,或者,接收编码请求端发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流。
编码请求端是指具有编码需求而请求对视频进行编码的终端。编码请求端可以是客户端,比如视频通话客户端或者视频互动客户端等;编码请求端也可以是业务运营端,比如赛事直播运营端或者电视直播运营端等。
编码请求端包括或者连接有视频采集设备,视频采集设备比如可以是摄像机、摄像头或者支持D3D的显卡。视频原始采集数据是指编码请求端采集到的未经过压缩编码的视频原始数据。视频原始采集数据可以是摄像机或摄像头采集的视频数据,也可以是支持D3D的显卡所输出的D3D游戏视频数据。
编码请求端可以直接将视频原始采集数据发送出去,接收模块802用于接收该视频原始采集数据。或者,编码请求端也可以对视频原始采集数据进行第一编码方式的压缩编码,从而获得适合传输的传输视频流后,将传输视频流发送出去,接收模块802则用于接收该传输视频流。
这里第一编码方式所需资源要低于下述的第二编码方式所需资源。在一个实施例中,第一编码方式为编码为H.264格式的编码方式;第二编码方式为编码为H.265格式的编码方式。这里将视频原始采集数据编码成H.265格式相比编码成H.264格式所需资源要多很多。
具体是否要将视频原始采集数据进行第一编码方式的压缩编码再传输,可以根据实际需要选择。若编码请求端为客户端,目前的通信网络还难以实现视频原始采集数据的实时传输,需要将视频原始采集数据进行第一编码方式的压缩编码再发送出去。若编码请求端为业务运营端,在网络状态良好时或者实时性要求不高时可以直接将视频原始采集数据发送出去。
管理模块804,用于将视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
视频原始采集数据包括若干视频帧图像。若接收模块802接收到的是视频原始采集数据,则接收模块802用于向管理模块804发送编码请求,管理模块804用于根据该编码请求而将视频原始采集数据的每个视频帧图像划分为多个子区域图像。或者,若接收模块802接收到的是传输视频流,则接收模块802用于将传输视频流进行解码而获得视频原始采集数据,从而向管理模块804发送编码请求,管理模块804用于根据该编码请求而将解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
子区域图像是指将一个视频帧图像划分为多个区域后该划分的区域中的图像。优选地,管理模块804可以用于在将视频原始采集数据的每个视频帧图像划分为多个子区域图像时采用均匀划分,使得划分出的各个子区域图像的大小一致。比如,管理模块804可以用于对视频原始采集数据的每个视频帧图像进行二等分、三等分、四等分、八等分等。举例来说,参照图4,视频原始采集数据的其中一个视频帧图像400,可以四等分为四个子区域图像分别为401、402、403和404。
分发模块806,用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以进行第二编码方式的编码而输出编码视频流。
视频原始采集数据的每个视频帧图像所划分出子区域图像的数量可以等于编码服务器的数量,这样每个视频帧图像都可以分配给其中一个编码服务器,由相应的编码服务器采用第二编码方式对该子区域图像进行编码,顺序输出形成编码视频流。编码服务器将编码视频流输出给合流模块808。当然视频原始采集数据的每个视频帧图像所划分出子区域图像的数量也可以不等于编码服务器的数量,此时分发模块806可用于根据各个编码服务器的负载情况来调度划分出的子区域图像给当前负载最低的编码服务器。
管理模块804可以根据分发模块806所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器,每个编码服务器接收来自分发模块806的子区域图像,根据管理模块804下发的编码子任务而对接收到的子区域图像进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理模块804可以用于记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。
合流模块808,用于将每个编码服务器输出的编码视频流合并以获得目标视频流。
合流模块808可用于从管理服务器获取合流策略,从而根据该合流策略而将每个编码服务器输出的编码视频流合并以获得目标视频流。这里合流是指将多个编码视频流合并而获得目标视频流的过程。目标视频流则是指将视频原始采集数据采用第二编码方式进行编码而获得的最终的视频流。合流策略包括如何将编码视频流合并而获得目标视频流的方案。合流策略可以包括子区域图像编码而成的编码图像所对应的位置信息。
如图9所示,在一个实施例中,视频编码装置800还包括目标视频流处理模块810,用于将目标视频流返回给编码请求端;或者,用于向编码请求端所指定的用户端发送目标视频流。具体地,合流模块808用于将目标视频流返回给编码请求端还是编码请求端所指定的用户端,可根据实际需要来由编码请求端在向分发模块806发送视频原始采集数据或者传输视频流时指定。编码请求端可以在发送视频原始采集数据或者传输视频流时携带目标终端的地址,从而合流模块808用于在获得目标视频流之后发送给该目标终端。若该目标终端的地址为编码请求端的地址,则合流模块808用于返回目标视频流给编码请求端。
上述视频编码装置800,通过将视频原始采集数据的每个视频帧图像划分为多个子区域图像,并发送给多个编码服务器进行分布式地编码,最后将每个编码服务器输出的编码视频流合并从而获得目标视频流。这样原本必须由单台设备才能进行的编码,可以通过多台编码服务器来协作编码,极大地提高了编码效率。而且编码请求端不需要进行最终复杂的第二编码方式的编码,对编码请求端的硬件要求低,可以使得新的编码技术可以快速应用到民用领域。
在一个实施例中,管理模块804还用于按照子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址。且分发模块806还用于将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器,以进行第二编码方式的编码而输出编码视频流。
具体地,本实施例中每个视频帧图像中采用相同的划分方式划分获得子区域图像。子区域图像所属的视频帧图像是指该子区域图像从该视频帧图像中划分出来。相同位置处划分出的子区域图像,是指这些子区域图像都是从所属的视频帧图像中的相同的位置划分出来,比如若是将视频帧图像四等分,则每个视频帧图像的左上角的子区域图像就可以形成一个子区域图像流数据。以子区域图像流数据为单位是指分别为每个子区域图像流数据分配不同的编码服务器地址。
参照图6,视频原始采集数据600包括顺序排列的若干视频帧图像610、620、630、640……。其中每个视频帧图像进行四等分,每个视频帧图像从四个位置划分出四个子区域图像。这样视频原始采集数据600各个视频帧图像的左上角位置的子区域图像分别为611、621、631、641……,形成一个子区域图像流数据,管理模块804用于为该子区域图像流数据分配一个编码服务器地址。不同的子区域图像流数据分配不同的编码服务器地址,比如管理模块804为子区域图像612、622、632、642……所形成的子区域图像流数据分配另一个编码服务器地址。
分发模块806用于将一个子区域图像流数据611、621、631、641……传输给该子区域图像流数据被分配的编码服务器地址所对应的编码服务器,另一个子区域图像流数据612、622、632、642……则传输给其被分配的另一个编码服务器地址所对应的编码服务器。以此类推,将每个子区域图像流数据分别传输给不同的编码服务器。
管理模块804可以用于根据分发模块806所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器,每个编码服务器接收来自分发模块806的子区域图像,根据管理模块804下发的编码子任务而对接收到的子区域图像流数据进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理模块804可以用于记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。
本实施例中,从相同位置处划分出的子区域图像分配给相同的编码服务器地址,而不同位置处划分出的子区域图像则分配给不同的编码服务器地址,这样可以使得合流模块808实现高效地将每个编码服务器输出的编码视频流进行合并,进一步提高编码效率。
在一个实施例中,合流模块808还用于获取每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息;根据位置信息而将每个编码服务器输出的编码视频流合并以获得目标视频流。
具体地,每个编码服务器输出的编码视频流中的编码图像,与输入该编码服务器的子区域图像流数据中的子区域图像是对应的,编码图像的位置信息也就是相应的子区域图像的位置信息。
合流模块808可以用于获取每个视频帧图像所划分出的子区域图像所携带的位置信息,或者获取每个视频帧图像所划分出的子区域图像所携带的图像标识所对应的位置信息。
合流模块808用于按照原始采集数据的每个视频帧图像被划分为多个子区域图像的划分方式,将每个编码服务器输出的编码视频流合并以获得目标视频流。参照图6,子区域图像611、612、613以及614,在编码后获得编码图像后合流模块808也是按照图6中子区域图像的位置关系进行合并,以此类推,其它编码图像也按照相应的子区域图像在相应的视频帧图像中的位置关系进行合并,获得目标视频流。
本实施例中,按照每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息,来对每个编码服务器输出的编码视频流合并从而获得目标视频流,可以实现高效地将每个编码服务器输出的编码视频流进行合并,进一步提高编码效率。
参照图1,在一个实施例中,提供了一种视频编码系统100,包括分发服务器102、管理服务器104、编码服务器106和合流服务器108。其中分发服务器102与编码服务器106连接,编码服务器106与合流服务器108连接,且管理服务器104分别与分发服务器102、编码服务器106和合流服务器108连接。
分发服务器102用于接收编码请求端110发来的视频原始采集数据,或者,接收编码请求端110发来的对视频原始采集数据进行第一编码方式的压缩编码而获得的传输视频流。
编码请求端110是指具有编码需求而请求对视频进行编码的终端。编码请求端110可以是客户端,比如视频通话客户端或者视频互动客户端等;编码请求端110也可以是业务运营端,比如赛事直播运营端或者电视直播运营端等。
编码请求端110包括或者连接有视频采集设备,视频采集设备比如可以是摄像机、摄像头或者支持D3D的显卡。视频原始采集数据是指编码请求端110采集到的未经过压缩编码的视频原始数据。视频原始采集数据可以是摄像机或摄像头采集的视频数据,也可以是支持D3D的显卡所输出的D3D游戏视频数据。
编码请求端110可以用于直接将视频原始采集数据发送给分发服务器102,由分发服务器102接收。或者,编码请求端110也可以对视频原始采集数据进行第一编码方式的压缩编码,从而获得适合传输的传输视频流后,将传输视频流传输给分发服务器102,由分发服务器102接收。
这里第一编码方式所需资源要低于下述的第二编码方式所需资源。在一个实施例中,第一编码方式为编码为H.264格式的编码方式;第二编码方式为编码为H.265格式的编码方式。这里将视频原始采集数据编码成H.265格式相比编码成H.264格式所需资源要多很多。
具体是否要将视频原始采集数据进行第一编码方式的压缩编码再传输,可以根据实际需要选择。若编码请求端110为客户端,目前的通信网络还难以实现视频原始采集数据的实时传输,编码请求端110用于将视频原始采集数据进行第一编码方式的压缩编码再传输给分发服务器102。若编码请求端110为业务运营端,在网络状态良好时或者实时性要求不高时编码请求端110可以用于直接将视频原始采集数据发送给分发服务器102。
管理服务器104用于将视频原始采集数据的每个视频帧图像划分为多个子区域图像,或者,将传输视频流解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
视频原始采集数据包括若干视频帧图像。若分发服务器102接收到的是视频原始采集数据,则分发服务器102用于向管理服务器104发送编码请求,管理服务器104用于根据该编码请求而将视频原始采集数据的每个视频帧图像划分为多个子区域图像。或者,若分发服务器102接收到的是传输视频流,则分发服务器102用于将传输视频流进行解码而获得视频原始采集数据,从而向管理服务器104发送编码请求,管理服务器104用于根据该编码请求而将解码获得的视频原始采集数据的每个视频帧图像划分为多个子区域图像。
子区域图像是指将一个视频帧图像划分为多个区域后该划分的区域中的图像。优选地,管理服务器104可以用于在将视频原始采集数据的每个视频帧图像划分为多个子区域图像时采用均匀划分,使得划分出的各个子区域图像的大小一致。比如,管理服务器104可以用于对视频原始采集数据的每个视频帧图像进行二等分、三等分、四等分、八等分等。举例来说,参照图4,视频原始采集数据的其中一个视频帧图像400,可以四等分为四个子区域图像分别为401、402、403和404。
分发服务器102还用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器106。视频原始采集数据的每个视频帧图像所划分出子区域图像的数量可以等于编码服务器106的数量,这样每个视频帧图像都可以分配给其中一个编码服务器106。当然视频原始采集数据的每个视频帧图像所划分出子区域图像的数量也可以不等于编码服务器的数量,此时分发服务器102可用于根据各个编码服务器106的负载情况来调度划分出的子区域图像给当前负载最低的编码服务器106。
编码服务器106用于接收来自分发服务器102的子区域图像,并据以进行第二编码方式的编码而输出编码视频流。
编码服务器106用于采用第二编码方式对从分发服务器102接收到的子区域图像进行编码,顺序输出形成编码视频流。编码服务器106用于将编码视频流输出给合流服务器108。
管理服务器104可以用于根据分发服务器102所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器106,每个编码服务器106用于接收来自分发服务器102的子区域图像,根据管理服务器104下发的编码子任务而对接收到的子区域图像进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理服务器104可以用于记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。
合流服务器108用于将每个编码服务器106输出的编码视频流合并以获得目标视频流。
合流服务器108可从用于管理服务器104获取合流策略,从而根据该合流策略而将每个编码服务器106输出的编码视频流合并以获得目标视频流。这里合流是指将多个编码视频流合并而获得目标视频流的过程。目标视频流则是指将视频原始采集数据采用第二编码方式进行编码而获得的最终的视频流。合流策略包括如何将编码视频流合并而获得目标视频流的方案。合流策略可以包括子区域图像编码而成的编码图像所对应的位置信息。
在一个实施例中,合流服务器108还用于将目标视频流返回给编码请求端110;或者,用于向编码请求端110所指定的用户端120发送目标视频流。具体地,合流服务器108用于将目标视频流返回给编码请求端110还是编码请求端110所指定的用户端120,可根据实际需要来由编码请求端110在向分发服务器102发送视频原始采集数据或者传输视频流时指定。编码请求端110可以在发送视频原始采集数据或者传输视频流时携带目标终端的地址,从而使得合流服务器108在获得目标视频流之后发送给该目标终端。若该目标终端的地址为编码请求端110的地址,则合流服务器108用于返回目标视频流给编码请求端110。
上述视频编码系统100,通过将视频原始采集数据的每个视频帧图像划分为多个子区域图像,并发送给多个编码服务器106进行分布式地编码,最后将每个编码服务器106输出的编码视频流合并从而获得目标视频流。这样原本必须由单台设备才能进行的编码,可以通过多台编码服务器106来协作编码,极大地提高了编码效率。而且编码请求端110不需要进行最终复杂的第二编码方式的编码,对编码请求端110的硬件要求低,可以使得新的编码技术可以快速应用到民用领域。
在一个实施例中,管理服务器104还用于按照子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址。分发服务器102还用于将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器106。
具体地,本实施例中每个视频帧图像中采用相同的划分方式划分获得子区域图像。相应的视频帧图像是指该子区域图像被划分出来的视频帧图像。子区域图像所属的视频帧图像是指该子区域图像从该视频帧图像中划分出来。相同位置处划分出的子区域图像,是指这些子区域图像都是从所属的视频帧图像中的相同的位置划分出来,比如若是将视频帧图像四等分,则每个视频帧图像的左上角的子区域图像就可以形成一个子区域图像流数据。以子区域图像流数据为单位是指分别为每个子区域图像流数据分配不同的编码服务器地址。
参照图6,视频原始采集数据600包括顺序排列的若干视频帧图像610、620、630、640……。其中每个视频帧图像进行四等分,每个视频帧图像从四个位置划分出四个子区域图像。这样视频原始采集数据600各个视频帧图像的左上角位置的子区域图像分别为611、621、631、641……,形成一个子区域图像流数据,管理服务器104为该子区域图像流数据分配一个编码服务器地址。不同的子区域图像流数据分配不同的编码服务器地址,比如管理服务器104为子区域图像612、622、632、642……所形成的子区域图像流数据分配另一个编码服务器地址。
具体地,参照图6,分发服务器102将一个子区域图像流数据611、621、631、641……传输给该子区域图像流数据被分配的编码服务器地址所对应的编码服务器106,另一个子区域图像流数据612、622、632、642……则传输给其被分配的另一个编码服务器地址所对应的编码服务器106。以此类推,将每个子区域图像流数据分别传输给不同的编码服务器106。
管理服务器104可以用于根据分发服务器102所发送的编码请求生成编码子任务,并将编码子任务下发给每个编码服务器106,每个编码服务器106接收来自分发服务器102的子区域图像,根据管理服务器104下发的编码子任务而对接收到的子区域图像流数据进行第二编码方式的编码而获得编码图像,顺序输出编码图像而形成编码视频流。
在一个实施例中,每个视频帧图像所划分出的子区域图像携带有位置信息,该位置信息用于确定该子区域图像在视频原始采集数据中的视频帧图像中的位置。在一个实施例中,每个视频帧图像所划分出的子区域图像可以携带有图像标识,而管理服务器104可以记录图像标识相对应的位置信息,该位置信息用于确定子区域图像在视频原始采集数据中的视频帧图像中的位置。
本实施例中,从相同位置处划分出的子区域图像分配给相同的编码服务器地址,而不同位置处划分出的子区域图像则分配给不同的编码服务器地址,这样可以使得合流服务器108实现高效地将每个编码服务器106输出的编码视频流进行合并,进一步提高编码效率。
在一个实施例中,合流服务器108还用于获取每个编码服务器106输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息;根据位置信息而将每个编码服务器106输出的编码视频流合并以获得目标视频流。
具体地,每个编码服务器106输出的编码视频流中的编码图像,与输入该编码服务器106的子区域图像流数据中的子区域图像是对应的,编码图像的位置信息也就是相应的子区域图像的位置信息。
合流服务器108可以用于获取每个视频帧图像所划分出的子区域图像所携带的位置信息,或者获取每个视频帧图像所划分出的子区域图像所携带的图像标识所对应的位置信息。
具体地,合流服务器108按照原始采集数据的每个视频帧图像被划分为多个子区域图像的划分方式,将每个编码服务器106输出的编码视频流合并以获得目标视频流。
本实施例中,按照每个编码服务器106输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息,来对每个编码服务器106输出的编码视频流合并从而获得目标视频流,可以实现高效地将每个编码服务器106输出的编码视频流进行合并,进一步提高编码效率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种视频编码方法,所述方法包括:
接收客户端发来的视频原始采集数据;
将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像;所述子区域图像携带有图像标识;
将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以使所述编码服务器进行第二编码方式的编码而输出编码视频流;
从管理服务器获取合流策略,根据所述合流策略将每个编码服务器输出的编码视频流合并以获得目标视频流;所述合流策略包括与所述图像标识相对应的位置信息;所述位置信息表示所述子区域图像在所述视频原始采集数据中的视频帧图像中的位置;
将所述目标视频流返回给所述客户端。
2.根据权利要求1所述的方法,其特征在于,所述将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以使所述编码服务器进行第二编码方式的编码而输出编码视频流,包括:
按照所述子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址;
将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器,以使所述编码服务器进行第二编码方式的编码而输出编码视频流。
3.根据权利要求1所述的方法,其特征在于,所述从管理服务器获取合流策略,根据所述合流策略将每个编码服务器输出的编码视频流合并以获得目标视频流,包括:
从管理服务器获取每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息;
根据所述位置信息而将每个编码服务器输出的编码视频流合并以获得目标视频流。
4.根据权利要求1所述的方法,其特征在于,所述第二编码方式为编码为H.265格式的编码方式。
5.一种视频编码装置,其特征在于,所述装置包括:
接收模块,用于接收客户端发来的视频原始采集数据;
管理模块,用于将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像;所述子区域图像携带有图像标识;
分发模块,用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器,以使所述编码服务器进行第二编码方式的编码而输出编码视频流;
合流模块,用于从管理服务器获取合流策略,根据所述合流策略将每个编码服务器输出的编码视频流合并以获得目标视频流;所述合流策略包括与所述图像标识相对应的位置信息;所述位置信息表示所述子区域图像在所述视频原始采集数据中的视频帧图像中的位置;
目标视频流处理模块,用于将所述目标视频流返回给所述客户端。
6.根据权利要求5所述的装置,其特征在于,所述管理模块还用于按照所述子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址;
所述分发模块还用于将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器,以使所述编码服务器进行第二编码方式的编码而输出编码视频流。
7.根据权利要求5所述的装置,其特征在于,所述合流模块还用于从管理服务器获取每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息;根据所述位置信息而将每个编码服务器输出的编码视频流合并以获得目标视频流。
8.根据权利要求5所述的装置,其特征在于,所述第二编码方式为编码为H.265格式的编码方式。
9.一种视频编码系统,其特征在于,所述系统包括分发服务器、管理服务器、编码服务器和合流服务器;所述分发服务器与所述编码服务器连接,所述编码服务器与所述合流服务器连接,且所述管理服务器分别与所述分发服务器、所述编码服务器和所述合流服务器连接;
所述分发服务器用于接收客户端发来的视频原始采集数据;
所述管理服务器用于将所述视频原始采集数据的每个视频帧图像划分为多个子区域图像;所述子区域图像携带有图像标识;
所述分发服务器还用于将每个视频帧图像所划分出的子区域图像传输给多个编码服务器;
所述编码服务器用于接收来自分发服务器的子区域图像,以使所述编码服务器进行第二编码方式的编码而输出编码视频流;
所述合流服务器用于从管理服务器获取合流策略,根据所述合流策略将每个编码服务器输出的编码视频流合并以获得目标视频流;所述合流策略包括与所述图像标识相对应的位置信息;所述位置信息表示所述子区域图像在所述视频原始采集数据中的视频帧图像中的位置;
所述合流服务器还用于将所述目标视频流返回给所述客户端。
10.根据权利要求9所述的系统,其特征在于,所述管理服务器还用于按照所述子区域图像在所属的视频帧图像中的位置,以从相同位置处划分出的子区域图像所形成的子区域图像流数据为单位分配编码服务器地址;
所述分发服务器还用于将每个子区域图像流数据分别传输给被分配的编码服务器地址所对应的编码服务器。
11.根据权利要求9所述的系统,其特征在于,所述合流服务器还用于从管理服务器获取每个编码服务器输出的编码视频流中的编码图像所对应的子区域图像相对于所属视频帧图像的位置信息;根据所述位置信息而将每个编码服务器输出的编码视频流合并以获得目标视频流。
12.根据权利要求9所述的系统,其特征在于,所述第二编码方式为编码为H.265格式的编码方式。
13.一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述方法的步骤。
14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至4中任一项所述方法的步骤。
CN201510018745.5A 2015-01-14 2015-01-14 视频编码方法、装置和系统 Active CN104602008B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201510018745.5A CN104602008B (zh) 2015-01-14 2015-01-14 视频编码方法、装置和系统
EP15877667.4A EP3244621B1 (en) 2015-01-14 2015-12-07 Video encoding method, system and server
PCT/CN2015/096578 WO2016112756A1 (zh) 2015-01-14 2015-12-07 视频编码方法、系统和服务器
US15/638,710 US10536732B2 (en) 2015-01-14 2017-06-30 Video coding method, system and server
US16/703,701 US10924783B2 (en) 2015-01-14 2019-12-04 Video coding method, system and server

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510018745.5A CN104602008B (zh) 2015-01-14 2015-01-14 视频编码方法、装置和系统

Publications (2)

Publication Number Publication Date
CN104602008A CN104602008A (zh) 2015-05-06
CN104602008B true CN104602008B (zh) 2018-03-20

Family

ID=53127452

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510018745.5A Active CN104602008B (zh) 2015-01-14 2015-01-14 视频编码方法、装置和系统

Country Status (4)

Country Link
US (2) US10536732B2 (zh)
EP (1) EP3244621B1 (zh)
CN (1) CN104602008B (zh)
WO (1) WO2016112756A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104602008B (zh) * 2015-01-14 2018-03-20 腾讯科技(深圳)有限公司 视频编码方法、装置和系统
CN106060582B (zh) * 2016-05-24 2019-06-11 广州华多网络科技有限公司 视频传输系统、方法及装置
CN110692041B (zh) 2017-07-14 2023-09-15 伊鲁米那股份有限公司 协调的应用处理
CN110519652B (zh) 2018-05-22 2021-05-18 华为软件技术有限公司 Vr视频播放方法、终端及服务器
CN109640111B (zh) * 2019-01-29 2021-02-02 视联动力信息技术股份有限公司 一种图片传输方法、装置和可读介质
CN110418177B (zh) * 2019-04-19 2021-06-11 腾讯科技(深圳)有限公司 视频编码方法、装置、设备和存储介质
CN114143365A (zh) * 2020-08-14 2022-03-04 华为技术有限公司 一种媒体信息传输方法及装置
WO2022033379A1 (zh) * 2020-08-14 2022-02-17 华为技术有限公司 一种媒体信息传输方法及装置
CN112023377B (zh) * 2020-09-14 2021-11-09 成都拟合未来科技有限公司 一种健身练习实时互动方法、系统、终端及介质
CN112261441A (zh) * 2020-10-12 2021-01-22 康佳集团股份有限公司 一种视频数据的处理方法、系统、设备及存储介质
CN113473106A (zh) * 2021-06-18 2021-10-01 青岛小鸟看看科技有限公司 图像传输方法、图像显示及处理设备、及图像传输系统
US11758108B2 (en) 2021-06-18 2023-09-12 Qingdao Pico Technology Co., Ltd. Image transmission method, image display device, image processing device, image transmission system, and image transmission system with high-transmission efficiency
CN115209079B (zh) * 2022-02-23 2023-05-02 北京拙河科技有限公司 一种适用于高速摄像机长时间存储数据的方法和设备
CN114245133A (zh) * 2022-02-23 2022-03-25 北京拙河科技有限公司 视频分块编码方法、编码传输方法、系统和设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1211136A (zh) * 1998-07-08 1999-03-17 国家科学技术委员会高技术研究发展中心 Hdtv视频编码器中用于子图象间数据传输的装置及其方法
CN102045312A (zh) * 2009-10-21 2011-05-04 三星电子(中国)研发中心 自适应转码方法和系统
CN102811373A (zh) * 2011-05-30 2012-12-05 上海圣炅商务咨询有限公司 移动终端向互联网以及移动互联网进行视频直播的方法
CN102938839A (zh) * 2012-11-13 2013-02-20 浙江宇视科技有限公司 一种监控前端设备以及编码服务器

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5138447A (en) * 1991-02-11 1992-08-11 General Instrument Corporation Method and apparatus for communicating compressed digital video signals using multiple processors
FR2796698B1 (fr) * 1999-07-19 2001-10-12 Vernet Sa Dispositif a papillon(s) de mise en communication et d'isolement de conduits de fluide
WO2006078594A1 (en) * 2005-01-19 2006-07-27 Thomson Licensing Method and apparatus for real time parallel encoding
CN101098483A (zh) * 2007-07-19 2008-01-02 上海交通大学 以图像组结构为并行处理单元的视频集群转码系统
US20090037967A1 (en) * 2007-08-01 2009-02-05 Oren Barkan Video upload system
US20100225655A1 (en) * 2009-03-06 2010-09-09 Microsoft Corporation Concurrent Encoding/Decoding of Tiled Data
CN101587431B (zh) * 2009-04-08 2011-03-16 广东威创视讯科技股份有限公司 一种可以跨屏实现多屏播放视频的方法
CN101562706B (zh) * 2009-05-22 2012-04-18 杭州华三通信技术有限公司 一种图像拼接方法和设备
US9338467B1 (en) * 2010-07-19 2016-05-10 Google Inc. Parallel video transcoding
US20120114034A1 (en) * 2010-11-08 2012-05-10 Mediatek Inc. Method and Apparatus of Delta Quantization Parameter Processing for High Efficiency Video Coding
CN102123279B (zh) * 2010-12-28 2013-01-23 乐视网信息技术(北京)股份有限公司 一种分布式实时转码方法与系统
US20120192225A1 (en) * 2011-01-25 2012-07-26 Youtoo Technologies, LLC Administration of Content Creation and Distribution System
JP2013145954A (ja) * 2012-01-13 2013-07-25 Toyota Central R&D Labs Inc 分散情報処理装置
US9510033B1 (en) * 2012-05-07 2016-11-29 Amazon Technologies, Inc. Controlling dynamic media transcoding
CN102724560B (zh) * 2012-06-28 2016-03-30 广东威创视讯科技股份有限公司 视频数据显示方法及其装置
KR20140098608A (ko) * 2013-01-31 2014-08-08 한국전자통신연구원 스트리밍 기반 게임 영상 제공 장치 및 방법
US9112939B2 (en) * 2013-02-12 2015-08-18 Brightcove, Inc. Cloud-based video delivery
US20160142723A1 (en) * 2013-06-28 2016-05-19 Hewlett-Packard Development Company, L.P. Frame division into subframes
US8879858B1 (en) * 2013-10-01 2014-11-04 Gopro, Inc. Multi-channel bit packing engine
US9451296B2 (en) * 2014-08-19 2016-09-20 At&T Intellectual Property I, L.P. Extracting data from advertisement files for ad insertion
CN104602008B (zh) * 2015-01-14 2018-03-20 腾讯科技(深圳)有限公司 视频编码方法、装置和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1211136A (zh) * 1998-07-08 1999-03-17 国家科学技术委员会高技术研究发展中心 Hdtv视频编码器中用于子图象间数据传输的装置及其方法
CN102045312A (zh) * 2009-10-21 2011-05-04 三星电子(中国)研发中心 自适应转码方法和系统
CN102811373A (zh) * 2011-05-30 2012-12-05 上海圣炅商务咨询有限公司 移动终端向互联网以及移动互联网进行视频直播的方法
CN102938839A (zh) * 2012-11-13 2013-02-20 浙江宇视科技有限公司 一种监控前端设备以及编码服务器

Also Published As

Publication number Publication date
CN104602008A (zh) 2015-05-06
US10536732B2 (en) 2020-01-14
US10924783B2 (en) 2021-02-16
EP3244621A1 (en) 2017-11-15
US20200107057A1 (en) 2020-04-02
EP3244621A4 (en) 2018-09-19
US20170302978A1 (en) 2017-10-19
EP3244621B1 (en) 2023-05-03
WO2016112756A1 (zh) 2016-07-21

Similar Documents

Publication Publication Date Title
CN104602008B (zh) 视频编码方法、装置和系统
CN111479112B (zh) 一种视频编码方法、装置、设备和存储介质
CN102571726B (zh) 多媒体数据共享的方法、系统及状态判定服务器
CN103873568A (zh) 基于云计算实现远程虚拟桌面显示的系统及方法
JP2020512772A5 (ja) Vrビデオ用に画像解像度を最適化してビデオストリーミングの帯域幅を最適化する画像処理のための方法及びストリーミングサーバ
Chen et al. T-gaming: A cost-efficient cloud gaming system at scale
CN106254458B (zh) 一种基于云机器人视觉的图像处理方法、平台及系统
JP2016527791A (ja) 画像処理方法及び装置
CN101682765B (zh) 确定用于光场数据结构的图像分布的方法
CN108449633A (zh) 基于nfv的机顶盒云化框架及业务实现方法
CN103650001A (zh) 动画分发服务器、动画播放装置、控制方法、程序、及记录介质
CN111614967B (zh) 虚拟形象直播方法、装置、电子设备及存储介质
CN106717007A (zh) 云端流媒体服务的系统、使用静止图像压缩技术进行云端流媒体服务的方法及其设备
CN106454388A (zh) 一种用于确定直播设置信息的方法与设备
CN111479162A (zh) 直播数据传输方法、装置以及计算机可读存储介质
CN110784757A (zh) 直播客户端中的游戏直播方法及装置、介质、电子设备
CN105872601A (zh) 视频播放方法、装置及系统
CN108306965A (zh) 摄像头的数据处理方法及装置、存储介质、摄像头
CN111263113A (zh) 数据包的发送方法及装置、数据包的处理方法及装置
CN116980604A (zh) 视频编码方法、视频解码方法及相关设备
CN114640860B (zh) 一种网络数据处理与传输方法及系统
CN115250377B (zh) 视频处理方法、处理平台、电子设备及存储介质
Pan et al. Vmp360: Adaptive 360° video streaming based on optical flow estimated qoe
CN111818300B (zh) 一种数据存储、查询方法、装置、计算机设备及存储介质
CN104995661A (zh) 用于视觉搜索的直方图映射的基于上下文的编码的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190808

Address after: 518000 Nanshan District science and technology zone, Guangdong, Zhejiang Province, science and technology in the Tencent Building on the 1st floor of the 35 layer

Co-patentee after: Tencent cloud computing (Beijing) limited liability company

Patentee after: Tencent Technology (Shenzhen) Co., Ltd.

Address before: Shenzhen Futian District City, Guangdong province 518000 Zhenxing Road, SEG Science Park 2 East Room 403

Patentee before: Tencent Technology (Shenzhen) Co., Ltd.