CN104853208B - 一种视频编码方法和装置 - Google Patents
一种视频编码方法和装置 Download PDFInfo
- Publication number
- CN104853208B CN104853208B CN201510243002.8A CN201510243002A CN104853208B CN 104853208 B CN104853208 B CN 104853208B CN 201510243002 A CN201510243002 A CN 201510243002A CN 104853208 B CN104853208 B CN 104853208B
- Authority
- CN
- China
- Prior art keywords
- video image
- split screen
- macro block
- image
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供了一种视频编码方法和装置,其中,所述方法包括:获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向各终端发送编码后的视频图像数据。通过本发明提供的视频编码方案,即便是在编码后的视频图像数据在传输中某一片组对应的视频图像数据丢失,也仅会造成该片组对应的一个分屏区域的视频图像数据丢失,影响该分屏区域的视频图像的质量,并不会影响其他分屏区域的图像质量。
Description
技术领域
本发明涉及视频处理技术领域,特别是涉及一种视频编码方法和装置。
背景技术
在多点视频会议系统中,均会设置一个视频混合器,所设置的视频混合器用于将从各终端收到的视频图像混合成一帧视频图像,然后,将混合后的该帧视频图像编码后回传给各终端。在混合后的一帧视频图像上可以显示各终端对应的与会场景,用户可以同时看到参与多点视频会议中的各终端对应的会场场景。目前,较为常用的编码方式为H.264视频编码,H.264是一种高性能的视频编码技术,相应地,较为常用的视频混合器则为H.264视频编码器。
目前,在多点视频会议中,H.264视频编码器在完成一帧视频图像混合后,在对混合后的该帧视频图像进行H.264编码时多采用按照光栅扫描的顺序将视频图像中的宏块分成多个片,然后将分割成的各片分别进行编码。如图1所示,现有的这种按照光栅扫描顺序对混合视频图像进行分割的方式,当混合后的视频图像被分割成多个视频分片后,视频分片0中包含两个与会场景的视频图像,视频分片1中包含四个与会场景的视频图像,视频分片2中包含两个与会场景的视频图像,也即,一个视频分片中可能会包含多个与会场景的视频图像。
现有的这种分割混合后的视频图像的方式,将分割后的各分片视频图像进行编码后,在数据传输过程中,若编码后的某个分片的视频图像数据丢失,则意味着与该分片中包含的与会场景相关的多个与会场景的视频图像的质量均变差。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的视频编码方法和装置。
为了解决上述问题,本发明公开了一种视频编码方法,包括:获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据。
为了解决上述问题,本发明还公开了一种视频编码装置,包括:获取模块,用于获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;划分模块,用于将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;编码模块,用于对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据。
与现有技术相比,本发明包括以下优点:
本发明提供的视频编码方案,将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组,对各图像片组的子视频图像进行编码,生成编码后的视频图像数据发送给各终端。通过本发明提供的视频编码方案,将每个分屏区域即各终端对应的子视频图像单独划分成一个片组进行编码,这样,即便是在编码后的视频图像数据在传输中某一片组对应的视频图像数据丢失,也仅会造成该片组对应的一个分屏区域的视频图像数据丢失,影响该分屏区域的视频图像的质量,并不会影响其他分屏区域的图像质量。
附图说明
图1是现有技术中的一种将混合后的视频图像分割成多个片的示例图;
图2是根据本发明实施例一的一种视频编码方法的步骤流程图;
图3是根据本发明实施例二的一种视频编码方法的步骤流程图;
图4是根据本发明实施例三的一种视频编码方法的步骤流程图;
图5是根据本发明实施例四的一种视频编码装置的结构框图;
图6是根据本发明实施例五的一种视频编码装置的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
实施例一
参照图2,示出了本发明实施例一种视频编码方法的步骤流程图。
本实施例的视频编码方法包括以下步骤:
步骤S102:获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息。
其中,分屏区域的像素信息包括:分屏区域宽度像素值以及分屏区域高度像素值;分屏区域的排列信息包括:用于指示各分屏区域在整个混合后的视频图像中的排列顺序的信息,如:混合后的视频图像中共包含四个分屏区域,第一分屏区域在第二分屏区域的左侧,第三分屏区域在第一分屏区域的下方,第四分屏区域在第二分屏区域的下方、第三分屏区域的右侧。
需要说明的是,本实施例中仅是以多点视频会议视频流中的一帧视频图像为例对视频编码方法进行说明。本领域技术人员应该明了,本实施例中提供的视频编码方法适用于视频流中的各帧视频图像。
步骤S104:将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
本实施例中通过各分屏区域的像素信息和分屏区域的排列信息,将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。对于具体的划分方式可以由本领域技术人员根据实际需求进行设置,本实施例对此不作具体限制。
例如:可以依据获取的混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集,依据序列集将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
步骤S106:对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向各终端发送编码后的视频图像数据。
对图像片组的子视频图像进行编码,生成编码后的视频图像数据可以参照现有的相关技术实现,本实施例对此不作具体限制。
通过本实施例提供的视频编码方法,将每个分屏区域即各终端对应的子视频图像单独划分成一个片组进行编码,这样,即便是在编码后的视频图像数据在传输中某一片组对应的视频图像数据丢失,也仅会造成该片组对应的一个分屏区域的视频图像数据丢失,仅会影响一个分屏区域的视频图像的质量,并不会影响其他分屏区域的视频图像质量。
实施例二
参照图3,示出了本发明实施例二的一种视频编码方法的步骤流程图。
本实施例的视频编码方法具体包括以下步骤:
步骤S202:视频编码器获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息。
本实施例中的视频编码器可以为H.264视频编码器,也可以为其他任意适用类型的视频编码器。
H.264视频编码器的基本档次和扩展档次均支持FMO(Flexible MacroblockOrdering,灵活宏块排序)视频图像划分方式,该视频图像划分方式通过宏块分配映射技术,把视频图像中的宏块分配到不同的片组中,视频编码器可对每个片组中的视频图像进行独立解码。并且,每一个片组中可以包含一个或多个片,且每个片中所包含的宏块顺序在整个视频图像中可以不连续。基于H.264视频编码器在FMO模式下的上述特性,因此,H.264视频编码器在FMO模式下可以根据图像的纹理信息,将视频图像中的宏块划分到不同的片组。
本实施例中在FMO模式下对混合后的视频图像进行片组划分时,按照分屏区域对片组进行划分。
需要说明的是,视频编码器所获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息可以由发起多点视频会议系统的终端来决定,也可以由多点视频会议控制台来决定。
步骤S204:视频编码器获取混合后的视频图像的整体像素信息,依据整体像素信息确定混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息。
其中,混合后的视频图像的整体像素信息包括:混合后的视频图像的宽度像素值以及混合后的视频图像的高度像素值。每个宏块的大小可以由本领域技术人员根据实际需求进行设置,例如:将宏块设置成18×18像素、20×20像素等,优选地,在设置宏块大小时遵从现有规范将其设定为16×16像素。
需要说明的是,混合后的视频图像包含的宏块信息可以是混合后的视频图像包含的宏块的个数信息,也可以是混合后的视频图像每行包含的宏块的个数信息和混合后的视频图像每列包含的宏块个数的信息,还可以混合后的视频图像包含的各宏块对应的编号信息。对于每个分屏区域对应的子视频图像包含的宏块信息可以是每个子视频图像包含的宏块的个数信息,也可以是每个分屏区域每行包含的宏块的个数信息和每个分屏区域每列包含的宏块的个数信息,还可以是每个字视频图像包含的宏块对应的编号信息。
步骤S206:视频编码器依据分屏区域的排列信息、混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将混合后的视频图像中每个子视频图像划分入同一个图像片组。
分屏区域的排列信息包括:用于指示各分屏区域在整个混合后的视频图像中的排列顺序的信息,例如:混合后的视频图像中共包含四个分屏区域,第一分屏区域在第二分屏区域的左侧,第三分屏区域在第一分屏区域的下方,第四分屏区域在第二分屏区域的下方、第三分屏区域的右侧。
在确定分屏区域的排列信息、混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息后,本领域技术人员可以采用任意适当的方式将每个子视频图像划分入同一个图像片组。例如:依据分别确定各子视频区域图像包含的宏块对应的编号信息、以及混合后的视频图像包含的各宏块对应的编号信息对子视频区域图像进行划分,将划分后的每个子视频图像作为一个图像片组。再例如:依据子视频图像包含的宏块的个数信息和分屏区域的排列信息确定子视频图像的起始宏块以及结束宏块在混合后的视频图像中的位置,将起始宏块以及结束宏块组成的区域确定为子视频图像,将其作为一个图像片组。
一种优选的获取混合后的视频图像的整体像素信息,依据整体像素信息确定混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息,依据分屏区域的排列信息、混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将混合后的视频图像中每个子视频图像划分入同一个图像片组的方式如下:
S1:视频编码器获取混合后的视频图像的整体像素信息,依据整体像素信息和宏块的像素信息,确定混合后的视频图像每行包含的宏块的数量和列包含的宏块的个数。
例如:混合后的视频图像整体像素信息为:视频图像宽度像素值为1600像素,视频图像高度像素值为800像素,每个宏块的像素为16×16像素,混合后的视频图像每行包含的宏块的数量则为1600÷16=100个宏块,混合后的视频图像每列包含的宏块的数据则为800÷16=50个宏块。
S2:视频编码器依据各终端对应的分屏区域的像素信息和宏块的像素信息,确定各分屏区域对应的子视频图像每行包含的宏块的数量和每列包含的宏块的数量。
假设有四个分屏区域,第一分屏区域在第二分屏区域的左侧,第三分屏区域在第一分屏区域的下方,第四分屏区域在第二分屏区域的下方、第三分屏区域的右侧,四个分屏区域的大小均为800×400像素。则每个分屏区域每行包含的宏块的数量为50个,每列包含的宏块的数量为25个。
S3:视频编码器依据分屏区域的排列信息、混合后的视频图像每行包含的宏块的数量和每列包含的宏块的数量、各子视频图像每行包含的宏块的数量和每列包含的宏块的数量,分别确定各子视频图像左上角的宏块在混合后的视频图像中的位置信息和各子视频图像右下角的宏块在混合后的视频图像中的位置信息。
例如:对于第一分屏区域每行包含的宏块的数量为50个,每列包含的宏块的数量为25个,而其排列在混合视频图像的左上方,则该分屏区域左上角的宏块在混合后的视频图像中的位置即为第1行第1个宏块,该分屏区域右下角的宏块在混合后的视频图像中的位置即为第25行第50个宏块。对于第二个分屏区域左上角的宏块在混合后的视频图像中的位置即为第一行第51个宏块,该分屏区域右下角的宏块在混合后的视频图像中的位置即为第25行第100个宏块。
S4:视频编码器分别依据每个子视频图像左上角的宏块在混合后的视频图像中的位置信息和右下角的宏块在混合后的视频图像中的位置信息对子视频图像进行划分,将分屏区域对应的子视频图像划分入一个图像片组。
步骤S208:视频编码器将图像片组对应的视频图像划分成多个图像片,分别对每个图像片对应的视频图像进行解码,生成编码后的子视频图像数据。
对于将每个片组划分成多个图像片可以按照光栅扫描的顺序将一个图像片组划分成多个图像片;也可以预先设定图像片的像素信息以及图像片的排列顺序,依据设定的图像片的像素信息以及图像片的排列顺序将图像片组划分成多个图像片;还可以仅是简单将图像片组平均划分成两个图像片,当然还有其他适用的划分方式,本实施例不再一一列举。
步骤S210:视频编码器向各终端发送编码后的各子视频图像数据。
本实施例中,将每个图像片组划分成多个图像片,对每个图像片对应的视频图像进行解码后将每片的子视频图像数据分别向各终端发送,即便是某一数据包丢失也仅是会影响一个分屏区域下的一小部分视频图像的质量,而该分屏区域下的其他部分视频图像的质量并不会受影响,能够提升用户的视觉体验。
通过本实施例提供的视频编码方法,将每个分屏区域即各终端对应的子视频图像单独划分成一个片组进行编码,这样,即便是在编码后的视频图像数据在传输中某一片组对应的视频图像数据丢失,也仅会造成该片组对应的一个分屏区域的视频图像数据丢失,仅会影响一个分屏区域的视频图像的质量,并不会影响其他分屏区域的视频图像质量。
实施例三
参照图4,示出了本发明实施例三的一种视频编码方法的步骤流程图。
本实施例中是以将获取的混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集,依据序列参数集将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组为例,对本实施例的视频编码方法进行的说明。
本实施例的视频编码方法包括以下步骤:
步骤S302:视频编码器获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息。
步骤S304:视频编码器依据获取的混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集。
其中,序列参数集包括:分屏区域的数量、各分屏区域左上角的宏块在所述混合后的视频图像中的位置信息和右下角的宏块在所述混合后的视频图像中的位置信息。
假设获取到的混合后视频图像的像素宽度和高度分别为MixPicWidthInPels(图像像素宽度),MixPicHeightInPels(图像像素高度);分屏区域个数为N,按从左到右从上到下的顺序对混合后的视频图像中的各分屏依次标记为:0分屏、1分屏、…N-1分屏,且各分屏区域的像素宽度和高度分别表示为:RegionPicWidthInPels[i](第i个分屏区域图像像素宽度),RegionPicHeightInPels[i](第i个分屏区域图像像素高度),其中i=0,1,…,N-1。
则生成序列参数集的具体步骤如下:
S1:设置序列参数集(PPS)中Num_Slice_Groups_Minus1(图像中片组的个数)参数的值为N-1,即将混合后的视频图像分为N个片组,其中,PPS是文件格式的一种。
S2:设置序列参数集(PPS)中Slice_Group_Map_Type(片组映射类型)参数的值为2,即选取FMO模式2(前景模式)作为视频图像的片组划分模式。
S3:将MixPicWidthInPels和MixPicHeightInPels各除以16,获取以宏块为单位的混合后的视频图像的宽度MixPicWidthInMbs和视频图像高度MixPicHeightInMbs。
其中,MixPicWidthInMbs表示混合后的视频图像的宽度包含宏块的数量,MixPicHeightInMbs表示混合后的视频图像的高度包含宏块的数量。
本步骤中将MixPicWidthInPels和MixPicHeightInPels各除以16是由于本实施例中设置的宏块的像素信息为16×16像素。
S4:获取以宏块为单位的各分屏区域的宽度RegionPicWidthInMbs[i]和高度RegionPicHeightInMbs[i]。
其中,RegionPicWidthInMbs[i]表示第i个分屏区域的宽度包含宏块的数量,RegionPicHeightInMbs[i]表示第i个分屏区域的高度包含宏块的数量。
S5:获取分屏区域的起始宏块在混合后的视频图像中的位置RegionPicTopLeft[i]及结束宏块在混合后的视频图像中的位置RegionPicBottomRight[i]。
在确定了分屏区域的宽度和高度分别包含的宏块的数量、分屏区域的排列信息以及混合后的视频图像的宽度和高度分别包含的宏块的数量后,可以依据这些数据确定分屏区域的起始宏块、以及结束宏块在混合后的视频图像中的位置。
其中,RegionPicTopLeft[i]表示第i个分屏区域的左上角的宏块即起始宏块在视频图像中的位置,RegionPicBottomRight[i]表示第i个分屏区域的右下角的宏块即结束宏块在视频图像中的位置。
S6:设置序列参数集中前N-1个片组中的Top_Left[iGroup]和Bottom_Right[iGroup]的值分别为RegionPicTopLeft[i]和RegionPicBottomRight[i]。
对第N-1个片组的左上角对应的值和右下角对应的值确定为RegionPicTopLeft[i]和RegionPicBottomRight[i]。本实施例中,将片组的起始宏块的位置定义为左上角的值,片组的结束宏块的位置定义为右下角的值,视频编码器通过选定起始宏块以及结束宏块即可确定片组对应的子视频图像,完成按照各分屏区域对片组进行划分的过程。
本实施例中视频编码器是在灵活宏块排序模式中的前景模式下对视频图像进行的划分。
步骤S306:视频编码器依据序列参数集将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
步骤S308:视频编码器对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向各终端发送编码后的视频图像数据。
通过本实施例提供的视频编码方法,采用H.264基本档次对视频会议中的混合视频图像进行编码时,将混合后的视频图像中不同场景的视频图像即不同分屏区域的视频图像划分到不同片组进行编码,使混合后的视频图像中不同场景的视频图像数据可独立传输、解码,场景的视频图像数据不相互依赖。这样,在解码后的各场景的视频传输过程中,当某个场景的视频图像数据丢失时,不会影响其他场景的视频图像质量。从而提高了视频混合图像视频流鲁棒性,并提升了用户的视觉体验。
实施例四
参照图5,示出了本发明实施例四的一种视频编码装置的结构框图。本实施例的视频编码装置包括:获取模块502,用于获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;划分模块504,用于将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;编码模块506,用于对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据。
通过本实施例提供的视频编码装置,将每个分屏区域即各终端对应的子视频图像单独划分成一个片组进行编码,这样,即便是在编码后的视频图像数据在传输中某一片组对应的视频图像数据丢失,也仅会造成该片组对应的一个分屏区域的视频图像数据丢失,仅会影响一个分屏区域的视频图像的质量,并不会影响到其他的分屏区域的图像质量。
实施例五
参照图6,示出了本发明实施例五的一种视频解码装置的结构框图。
本实施例的视频解码装置包括:获取模块602,用于获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;划分模块604,用于将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;编码模块606,用于对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据。
优选地,划分模块604包括:宏块信息确认模块6042,用于获取混合后的视频图像的整体像素信息,依据整体像素信息确定混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息;片组划分模块6044,用于依据分屏区域的排列信息、混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将混合后的视频图像中每个子视频图像划分入同一个图像片组。
优选地,宏块信息确认模块6042包括:第一确认模块60422,用于获取混合后的视频图像的整体像素信息,依据整体像素信息和宏块的像素信息,确定混合后的视频图像每行包含的宏块的数量和列包含的宏块的个数;以及,第二确定模块60424,用于依据各终端对应的分屏区域的像素信息和宏块的像素信息,确定各分屏区域对应的子视频图像每行包含的宏块的数量和每列包含的宏块的数量;片组划分模块6044包括:位置信息确认模块60442,用于依据分屏区域的排列信息、混合后的视频图像每行包含的宏块的数量和每列包含的宏块的数量、各子视频图像每行包含的宏块的数量和每列包含的宏块的数量,分别确定各子视频图像左上角的宏块在混合后的视频图像中的位置信息和各子视频图像右下角的宏块在混合后的视频图像中的位置信息;子视频图像划分模块60444,用于分别依据每个子视频图像左上角的宏块在混合后的视频图像中的位置信息和右下角的宏块在混合后的视频图像中的位置信息对子视频图像进行划分,将分屏区域对应的子视频图像划分入一个图像片组。
优选地,划分模块604将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组时:依据获取的混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集,其中,序列参数集包括:分屏区域的数量、各分屏区域左上角的宏块在混合后的视频图像中的位置信息和右下角的宏块在混合后的视频图像中的位置信息;依据序列参数集将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
优选地,划分模块604将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组时,在灵活宏块排序模式中的前景模式下,将混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
优选地,各图像片组包含多个图像片,编码模块606对各图像片组的子视频图像进行编码,生成编码后的视频图像数据时,将图像片组对应的视频图像划分成多个图像片,分别对每个图像片对应的视频图像进行解码,生成编码后的子视频图像数据。
实施例的视频编码装置用于实现前述多个方法实施例中相应的视频编码方法,并且具有相应的方法实施的有益效果,在此不再赘述。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上对本发明所提供的一种视频编码方法和装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种视频编码方法,其特征在于,包括:
获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;
将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;
对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据;
将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组的步骤包括:
获取所述混合后的视频图像的整体像素信息,依据所述整体像素信息确定所述混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息;
依据所述分屏区域的排列信息、所述混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将所述混合后的视频图像中每个子视频图像划分入同一个图像片组。
2.根据权利要求1所述的方法,其特征在于,所述获取所述混合后的视频图像的整体像素信息,依据所述整体像素信息确定所述混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息的步骤包括:
获取所述混合后的视频图像的整体像素信息,依据所述整体像素信息和宏块的像素信息,确定所述混合后的视频图像每行包含的宏块的数量和列包含的宏块的个数;以及,
依据所述各终端对应的分屏区域的像素信息和宏块的像素信息,确定各分屏区域对应的子视频图像每行包含的宏块的数量和每列包含的宏块的数量;
所述依据所述分屏区域的排列信息、所述混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将所述混合后的视频图像中每个子视频图像划分入同一个图像片组的步骤包括:
依据所述分屏区域的排列信息、所述混合后的视频图像每行包含的宏块的数量和每列包含的宏块的数量、各子视频图像每行包含的宏块的数量和每列包含的宏块的数量,分别确定各子视频图像左上角的宏块在所述混合后的视频图像中的位置信息和各子视频图像右下角的宏块在所述混合后的视频图像中的位置信息;
分别依据每个子视频图像左上角的宏块在所述混合后的视频图像中的位置信息和右下角的宏块在所述混合后的视频图像中的位置信息对子视频图像进行划分,将分屏区域对应的子视频图像划分入一个图像片组。
3.根据权利要求1所述的方法,其特征在于,将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组的步骤包括:
依据获取的所述混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集,其中,所述序列参数集包括:分屏区域的数量、各分屏区域左上角的宏块在所述混合后的视频图像中的位置信息和右下角的宏块在所述混合后的视频图像中的位置信息;
依据所述序列参数集将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
4.根据权利要求1所述的方法,其特征在于,将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组的步骤包括:
在灵活宏块排序模式中的前景模式下,将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述各图像片组包含多个图像片,对每个图像片组的子视频图像进行编码,生成编码后的视频图像数据的步骤包括:
将图像片组对应的视频图像划分成多个图像片,分别对每个图像片对应的视频图像进行解码,生成编码后的子视频图像数据。
6.一种视频编码装置,其特征在于,包括:
获取模块,用于获取混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息;
划分模块,用于将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组;
编码模块,用于对各图像片组的子视频图像进行编码,生成编码后的视频图像数据,并向所述各终端发送所述编码后的视频图像数据;
所述划分模块包括:
宏块信息确认模块,用于获取所述混合后的视频图像的整体像素信息,依据所述整体像素信息确定所述混合后的视频图像包含的宏块信息,并分别确定每个分屏区域对应的子视频图像包含的宏块信息;
片组划分模块,用于依据所述分屏区域的排列信息、所述混合后的视频图像包含的宏块信息和各子视频图像包含的宏块信息,将所述混合后的视频图像中每个子视频图像划分入同一个图像片组。
7.根据权利要求6所述的装置,其特征在于,所述宏块信息确认模块包括:
第一确认模块,用于获取所述混合后的视频图像的整体像素信息,依据所述整体像素信息和宏块的像素信息,确定所述混合后的视频图像每行包含的宏块的数量和列包含的宏块的个数;以及,
第二确定模块,用于依据所述各终端对应的分屏区域的像素信息和宏块的像素信息,确定各分屏区域对应的子视频图像每行包含的宏块的数量和每列包含的宏块的数量;
所述片组划分模块包括:
位置信息确认模块,用于依据所述分屏区域的排列信息、所述混合后的视频图像每行包含的宏块的数量和每列包含的宏块的数量、各子视频图像每行包含的宏块的数量和每列包含的宏块的数量,分别确定各子视频图像左上角的宏块在所述混合后的视频图像中的位置信息和各子视频图像右下角的宏块在所述混合后的视频图像中的位置信息;
子视频图像划分模块,用于分别依据每个子视频图像左上角的宏块在所述混合后的视频图像中的位置信息和右下角的宏块在所述混合后的视频图像中的位置信息对子视频图像进行划分,将分屏区域对应的子视频图像划分入一个图像片组。
8.根据权利要求6所述的装置,其特征在于,所述划分模块将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组时:
依据获取的所述混合后的视频图像中的各终端对应的分屏区域的像素信息和分屏区域的排列信息生成序列参数集,其中,所述序列参数集包括:分屏区域的数量、各分屏区域左上角的宏块在所述混合后的视频图像中的位置信息和右下角的宏块在所述混合后的视频图像中的位置信息;
依据所述序列参数集将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
9.根据权利要求6所述的装置,其特征在于,所述划分模块将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组时,在灵活宏块排序模式中的前景模式下,将所述混合后的视频图像中的每个分屏区域对应的子视频图像划分入同一个图像片组。
10.根据权利要求6-9任一项所述的装置,其特征在于,所述各图像片组包含多个图像片,所述编码模块对各图像片组的子视频图像进行编码,生成编码后的视频图像数据时,将图像片组对应的视频图像划分成多个图像片,分别对每个图像片对应的视频图像进行解码,生成编码后的子视频图像数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510243002.8A CN104853208B (zh) | 2015-05-13 | 2015-05-13 | 一种视频编码方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510243002.8A CN104853208B (zh) | 2015-05-13 | 2015-05-13 | 一种视频编码方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104853208A CN104853208A (zh) | 2015-08-19 |
CN104853208B true CN104853208B (zh) | 2018-05-04 |
Family
ID=53852511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510243002.8A Active CN104853208B (zh) | 2015-05-13 | 2015-05-13 | 一种视频编码方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104853208B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106170003A (zh) * | 2016-09-19 | 2016-11-30 | 无锡纽微特科技有限公司 | 多方视频会议系统和多方视频会议数据传输方法 |
CN106341647B (zh) * | 2016-09-30 | 2019-07-23 | 宁波菊风系统软件有限公司 | 一种多方视频通话窗口的分屏方法 |
CN106713928B (zh) * | 2016-12-29 | 2020-04-10 | 深圳Tcl数字技术有限公司 | 视频编码与解码方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101095350A (zh) * | 2005-01-04 | 2007-12-26 | 诺基亚公司 | 用于低延迟视频混合的方法和系统 |
CN102934437A (zh) * | 2010-06-16 | 2013-02-13 | 西门子企业通讯有限责任两合公司 | 用于在宏块层面上混合视频流的方法和设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1180338A (zh) * | 1995-02-01 | 1998-04-29 | 麦克尼尔-Ppc公司 | 柔性管状包装 |
US7492387B2 (en) * | 2002-08-05 | 2009-02-17 | Chih-Lung Yang | Implementation of MPCP MCU technology for the H.264 video standard |
-
2015
- 2015-05-13 CN CN201510243002.8A patent/CN104853208B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101095350A (zh) * | 2005-01-04 | 2007-12-26 | 诺基亚公司 | 用于低延迟视频混合的方法和系统 |
CN102934437A (zh) * | 2010-06-16 | 2013-02-13 | 西门子企业通讯有限责任两合公司 | 用于在宏块层面上混合视频流的方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN104853208A (zh) | 2015-08-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Boev et al. | Classification and simulation of stereoscopic artifacts in mobile 3DTV content | |
EP2198610B1 (de) | Verfahren und vorrichtung zum erstellen eines kodierten ausgangsvideostroms aus mindestens zwei kodierten eingangsvideoströmen, sowie verwendung der vorrichtung | |
CN105704491B (zh) | 图像编码方法、解码方法、编码装置和解码装置 | |
CN105723719B (zh) | 用于多个图像的单个比特流生成方法和生成设备 | |
CN101888566B (zh) | 立体视频编码率失真性能估计方法 | |
DE112018005250T5 (de) | Punktwolkenkomprimierung | |
CN105791882A (zh) | 视频编码方法及装置 | |
CN108063976B (zh) | 一种视频处理方法及装置 | |
US10038890B2 (en) | Method and device for generating, storing, transmitting, receiving and reproducing depth maps by using the color components of an image belonging to a three-dimensional video stream | |
KR20160128403A (ko) | 개선된 스크린 콘텐츠 및 혼합된 콘텐츠 코딩 | |
CN107454468A (zh) | 对沉浸式视频进行格式化的方法、装置和流 | |
KR101946598B1 (ko) | 이미지 코딩, 디코딩 방법 및 장치 | |
CN104853208B (zh) | 一种视频编码方法和装置 | |
CN104756489A (zh) | 一种虚拟视点合成方法及系统 | |
TW201141240A (en) | Video image coded data display method, device, and communications system | |
KR20110136851A (ko) | 영상 변환 장치, 영상 출력 장치, 영상 변환 시스템, 영상, 기록 매체, 영상 변환 방법 및 영상 출력 방법 | |
US20100302235A1 (en) | efficient composition of a stereoscopic image for a 3-D TV | |
KR20110002488A (ko) | 입체 뷰잉 장치에 대한 플러그 앤 플레이 다중화기 | |
CN102026007A (zh) | 用于处理视频的方法和系统 | |
JP2012100129A (ja) | 画像処理方法及び画像処理装置 | |
CN104820577B (zh) | 显示装置及其显示信号输入系统、显示信号输入方法 | |
JP2022527883A (ja) | 点群の欠落した点の処理 | |
CN104244008B (zh) | 一种深度视频编码方法 | |
CN106303534A (zh) | 多种索引串与像素串融合复制方式的图像压缩方法和装置 | |
CN1689336A (zh) | 操纵压缩视频信号的子图像 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20230224 Address after: 100085 1st floor, building 1, yard 5, Shangdi East Road, Haidian District, Beijing Patentee after: DATANG MOBILE COMMUNICATIONS EQUIPMENT Co.,Ltd. Patentee after: CITIC Mobile Communication Technology Co.,Ltd. Address before: No.29 Xueyuan Road, Haidian District, Beijing 100191 Patentee before: DATANG MOBILE COMMUNICATIONS EQUIPMENT Co.,Ltd. |
|
TR01 | Transfer of patent right |