CN113301342A - 视频编码方法、网络直播方法、装置和终端设备 - Google Patents

视频编码方法、网络直播方法、装置和终端设备 Download PDF

Info

Publication number
CN113301342A
CN113301342A CN202110523492.2A CN202110523492A CN113301342A CN 113301342 A CN113301342 A CN 113301342A CN 202110523492 A CN202110523492 A CN 202110523492A CN 113301342 A CN113301342 A CN 113301342A
Authority
CN
China
Prior art keywords
quantization parameter
coded
image
image block
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110523492.2A
Other languages
English (en)
Other versions
CN113301342B (zh
Inventor
马学睿
方周
朱经腾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Cubesili Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Cubesili Information Technology Co Ltd filed Critical Guangzhou Cubesili Information Technology Co Ltd
Priority to CN202110523492.2A priority Critical patent/CN113301342B/zh
Publication of CN113301342A publication Critical patent/CN113301342A/zh
Application granted granted Critical
Publication of CN113301342B publication Critical patent/CN113301342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供了一种视频编码方法、网络直播方法、装置和终端设备,视频编码方法包括获取当前帧图像,并确定当前帧图像中的感兴趣区域;对当前帧图像进行划分,以得到若干图像块;对于每一待编码图像块,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;若是,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数,根据量化参数进行视频图像编码。该方法能使各图像块的量化参数更加准确,提升画质质量。

Description

视频编码方法、网络直播方法、装置和终端设备
技术领域
本申请涉及视频编码技术领域,具体涉及一种视频编码方法、网络直播方法、装置、终端设备和存储介质。
背景技术
视频编码技术是有效传输和存储多媒体信息的关键技术之一,例如目前火爆的网络直播就是以视频编码技术为基础,为观众提供稳定可靠且清晰的图像画面。
码率控制技术是视频编码技术的一个分支,其在视频通信以及流媒体传输中控制着输出流,使之满足信道带宽和缓冲区的约束,在此基础上尽可能保证视频质量的失真最小。码率控制具有两个步骤,第一个步骤为码率分配,第二个步骤为计算量化参数。编码器根据分配的码率以及量化参数进行编码。
而对于某一个视频(尤其是直播视频)中图像画面而言,观众往往更加关注图像画面中的部分区域并忽略其他区域,即具有感兴趣区域,因此就更加追求感兴趣区域的画面质量。然而,目前的视频编码方法常会忽略感兴趣区域,造成的画面质量不佳。
申请内容
有鉴于此,本申请实施例中提供了一种视频编码方法、网络直播方法、装置、终端设备和存储介质,以克服现有技术中编码后画面质量不佳的问题。
第一方面,本申请实施例提供了一种视频编码方法,该方法包括:
获取当前帧图像,并确定所述当前帧图像中的感兴趣区域;
对所述当前帧图像进行划分,以得到若干图像块;
对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
若是,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数。
第二方面,本申请实施例提供了一种视频编码装置,该装置包括:
图像获取模块,用于获取当前帧图像;
区域确定模块,用于确定所述当前帧图像中的感兴趣区域;
图像划分模块,用于对所述当前帧图像进行划分,以得到若干图像块;
参数获取模块,用于对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
参数判断模块,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
参数确定模块,用于当所述初始量化参数小于或等于感兴趣区域的量化参数时,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数。
第三方面,本申请实施例还提供了一种网络直播方法,该方法以直播端设备为执行主体进行描述的,所述方法包括:
响应开播指令,采集主播视频图像;
获取所述主播视频图像中的感兴趣区域;
对所述主播视频图像进行划分,以得到若干图像块;
对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
若是,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
根据所述待编码图像块编码时的量化参数对所述主播视频图像进行编码;
将编码后的主播视频图像发送至服务器。
第四方面,本申请实施例还提供了一种网络直播装置,所述装置包括:
视频图像采集模块,用于响应开播指令采集主播视频图像;
区域获取模块,用于获取所述主播视频图像中的感兴趣区域;
第一图像划分模块,用于对所述主播视频图像进行划分,以得到若干图像块;
第一参数获取模块,用于对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
第一参数判断模块,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
第一参数确定模块,用于当所述初始量化参数小于或等于感兴趣区域的量化参数时,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
第一视频图像编码模块,用于根据所述待编码图像块编码时的量化参数对所述主播视频图像进行编码;
视频图像发送模块,用于将编码后的主播视频图像发送至服务器。
第五方面,本申请实施例提供了一种终端设备,包括:存储器;一个或多个处理器,与所述存储器耦接;一个或多个应用程序,其中,一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个应用程序配置用于执行上述第一方面提供的视频编码方法,和/或第三方面提供的网络直播方法。
第六方面,本申请实施例提供了一种计算机可读取存储介质,计算机可读取存储介质中存储有程序代码,程序代码可被处理器调用执行上述第一方面提供的视频编码方法,和/或第三方面提供的网络直播方法。
本申请实施例提供的视频编码方法、装置、终端设备和存储介质,首先获取当前帧图像,在当前帧图像中选择感兴趣区域,该区域为编码中需要重点关注的区域;然后对当前帧图像进行划分,以得到若干图像块;对于若干图像块中每一待编码图像块进行编码时,先判断其是否在感兴趣区域,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;若是,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数。
视频编码方法中感兴趣区域内的图像块的量化参数是通过初始量化参数、周围已编码图像块的量化参数、平均量化参数以及感兴趣区域的量化参数之间的比较结果而确定,可以使得各图像块的量化参数更加准确,能够更加合理的分配码率,提升画质质量,特别是感兴趣区域的画质质量。
本申请实施例中提供的网络直播方法、装置、终端设备和存储介质因采用了本申请实施例中提供的视频编码方法,因此该网络直播方法在视频编码时可以提高直播视频图像编码的质量,从而提高了直播中用户的观众体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的视频编码方法的应用场景(即网络直播系统结构)示意图;
图2为本申请一个实施例提供的视频编码方法的流程示意图;
图3为本申请一个实施例提供图像划分形成图像块的结构示意图;
图4为本申请另一个实施例提供视频编码方法的流程示意图;
图5为本申请另一个实施例提供的视频编码方法的流程示意图;
图6为本申请一个实施例中提供视频编码装置的结构示意图;
图7为本申请一个实施例中提供的终端设备的结构示意图;
图8为本申请一个实施例中提供的计算机可读存储介质的结构示意图;
图9为本申请一个实施例中提供的网络直播装置的结构示意图。
具体实施方式
下面将对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为了更详细说明本申请,下面结合附图对本申请提供的一种视频编码方法、装置、终端设备和计算机存储介质,进行具体地描述。
请参考图1,图1示出了本申请实施例提供的视频编码方法的应用场景的示意图,该应用场景包括本申请实施例提供的服务器102、直播端设备104和客户端设备106。其中,其中服务器102、直播端设备104和客户端设备106之间设置有网络。网络用于在服务器102、直播端设备104和客户端设备106之间提供通信链路的介质。网络可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。服务器102能够与直播端设备104以及客户端设备106进行通信,为直播端设备104或/和客户端设备106提供直播服务。例如,直播端设备104可以将直播间的直播视频流发送给服务器102,用户可以通过客户端设备106访问服务器102以观看直播间的直播视频。又例如,服务器102也可以在用户订阅的直播间开播时向该用户的客户端设备106发送通知消息。直播视频流可以是当前正在直播平台中直播的视频流或者直播完成后形成的完整视频流。
在一些实施场景中,直播端设备104和客户端设备106可以互换使用。例如,主播可以使用直播端设备104来为观众提供直播视频服务,也可以作为用户查看其他主播提供的直播视频。又例如,用户可以使用客户端设备106观看所关注的主播提供的直播视频,也可以作为主播为其他观众提供直播视频服务。
本实施例中,直播端设备104和客户端设备106都是一种终端设备,可以是具有显示屏的各种电子设备,包括但不限于智能手机、个人数字助理、平板电脑、个人计算机、笔记本电脑、虚拟现实终端设备、增强现实终端设备等。其中,直播端设备104和客户端设备106中可以安装有用于提供互联网直播服务的互联网产品,例如,互联网产品可以是计算机或智能手机中使用的与互联网直播服务相关的应用程序APP、Web网页、小程序等。
可以理解,图1所示的应用场景仅为一种可行的示例,在其它可行的实施例中,该应用场景也可以仅包括图1所示的部分组件或者还可以包括其它的组成部分。例如,图1所示的应用场景还可以包括用于采集主播的直播视频帧的视频采集终端108,视频采集终端108可以直接安装或集成于直播端设备104,也可以独立于直播端设备104等,本实施例在此不做限制。
应该理解,直播端设备104、客户端设备106、网络和服务器102的数目仅仅是示意性的。根据实现需要,可以具有任意数目的直播端设备104、客户端设备106、网络和服务器102。比如服务器可以是多个服务器组成的服务器集群等。其中,直播端设备104、客户端设备106通过网络与服务器交互,以接收或发送消息等。服务器102可以是提供各种服务的服务器。其中直播端设备104可以用来执行本申请实施例中提供的一种视频编码方法的步骤,从而完成对视频编码,具体实施方式可以是当用户打开直播端设备104上的直播软件(例如YY软件)进行直播时,视频采集终端108采集视频图像,对采集的图像进行人脸识别,然后执行本申请实施例中提供的视频编码方法的步骤;当直播端设备104完成对视频编码后可以通过服务器102将编码后的视频传输给客户端设备106,客户端设备106对接收到的编码后的视频进行解码并播放,以供用户观看。
基于此,本申请实施例中提供了一种视频编码方法。请参阅图2,图2示出了本申请实施例提供的一种视频编码方法的流程示意图,以该方法应用于图1中的直播端设备104为例进行说明,包括以下步骤:
步骤S110,获取当前帧图像,并确定当前帧图像中的感兴趣区域。
其中,视频是由多帧图像组成,帧是指视频数据中一副静止的图像。对视频进行编码就是对各帧图像进行编码。其次,视频可以是彩色视频或黑白视频。
当前帧图像为需要编码的视频中任意一帧图像。
感兴趣区域(ROI,Regionof interst)即为从当前帧图像中选择的一个图像区域,这个区域也是编码处理中所关注的重点区域。感兴趣区域可以是当前帧图像中任意个一个区域,其区域大小或尺寸可以根据实际需求确定。
进一步地,确定感兴趣区域可以有多种实施方式,下面对其中的一种实施方式进行描述。
在一个实施例中,响应于区域选择指令,在当前帧图像中形成感兴趣区域。
具体地,区域选择指令可以包括感兴趣区域相关参数,例如包括区域的大小或尺寸(例如长、宽以及高)、区域的起点位置、区域的坐标等。其中,感兴趣区域的表示方式可以是多种多样的,只要能准确确定其位置以及尺寸即可。
在一种可选的实施方式中,可以采用数组(x,y,h,w)来表示感兴趣区域,其中x代表感兴趣区域的左上角的横坐标,y表示感兴趣区域的左上角的纵坐标,h表示高度,w表示宽度。
此外,区域选择指令是基于用户的一些操作或根据某些信息形成的。在本实施例中,给出了两种区域指令形成方式,相关描述如下。
第一种形成方式为:响应于针对区域选择的点击操作,呈现区域选择的工具栏;区域选择的工具栏中可以设置一些工具(例如框选工具),可以采用这些工具来选择感兴趣区域;也可以是在工具栏中直接输入感兴趣区域相关参数来选择感兴趣区域。当用户使用工具栏工具或直接输入感兴趣区域相关参数来选择感兴趣区域就可以生成区域选择指令。
第二种形成方式为:在获取当前帧图像后,基于当前帧图像,采用人脸识别技术选择包含用户脸部信息的区域,以形成区域选择指令。其中,用户脸部信息包括以下至少之一:眼部、发部、耳朵、嘴巴、鼻子、眉毛、胡子、脸型。眼部可以包括眼睛及眼镜,发部可以包括头发及帽子等。
步骤S120,对当前帧图像进行划分,以得到若干图像块。
在本实施例中,将当前帧图像划分成若干图像块,然后分别对每一个图像块进行编码,从而完成对整个当前帧图像的编码。
其中,每个图像块的大小是根据编码器类型确定的,例如对于×264编码器,其划分形成的块为16×16大小的图像块。
步骤S130,对于若干图像块中每一待编码图像块,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数。
具体地,在完成块划分后,对每一个图像块进行编码。其编码顺序为从当前帧图像的左上角的第一个图像块开始。可以将未编码的图像块称为待编码图像块,在对待编码图像块进行编码时先判断该待编码图像块是否在感兴趣区域,如果是,则获取该待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数。如果待编码图像块不在感兴趣区域,则对该待编码图像块进行编码时可以采用现有技术中任意一种编码方式。
其中,周围已编码图像块为处于待编码图像块周围的已编码图像块,该周围已编码图像块为紧邻该待编码图像块,通常是指位于该待编码图像块的左边,左上,上边和右上位置。
为了便于理解,给出一个详细的实施例。请参照图3,假设X为待编码图像块,当编码图像块X时,图像块A、图像块B、图像块C和图像块D分别为图像块X左边块,上边块,左上块以及右上块,这些图像块都为已编码图像块。可以根据这些已编码图像块的量化参数来对当前图像块的量化参数进行调整。
对于每一个周围已编码图像块而言,都有一个量化参数。要获得周围已编码图像块的平均量化参数可以获取每一个周围已编码图像块的量化参数,根据各周围已编码图像块的量化参数计算得到平均量化参数。
另外,待编码图像块的初始量化参数是指在对待编码图像块进行编码时给该待编码图像块赋予的初始值。初始量化参数可以是采用编码器的码率控制算法初步计算得到。
步骤S140,当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数。
其中,第一预设阈值和第二预设阈值是预先设置的值。第一预设阈值的最大值通常设置为略大于设定的感兴趣区域的量化参数的最大值,主要用来确定设定的感兴趣区域的量化参数是否超过编码器规定的最大参数。通常情况下第一预设阈值的取值为感兴趣区域的量化参数的最大值加1,即第一预设阈值通常是52。
第二预设阈值主要用来确定周围已编码图像块的量化参数取值范围,以免周围已编码图像块的量化参数过大。申请人经过相关实验发现:如果周围已编码图像块的量化参数(即QP值)过大,那么就不能对当前图像块的量化参数进行调整,否则容易出现花屏的现象。第二预设阈值是根据大量实验确定的,第二预设阈值可以为47时。
设定的感兴趣区域的量化参数是指感兴趣区域所要达到的目标量化参数,通常是预先设定的。具体地,QP值越大,编码形成的图像质量就越差;QP值越小,编码形成的图像质量就越好,因此如果想要感兴趣区域的图像质量好,那么通常需要设置一个尽量小的QP值,在这里就是QProi。通常情况下,QProi的取值是根据编码器的内部多个参数综合确定的,其取值范围为[0,51]。
步骤S150,若是,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数。
具体的,量化参数调整是编码中非常关键的步骤,为了使得编码后图像质量好,就需要将图像的量化参数调整到尽量小。而图像是由多个图像块组成的,图像的量化参数调整是通过每个图像块量化参数进行调整的。可以将待编码图像块中正在进行编码的图像块记为当前图像块。在本实施例中,当初始量化参数小于或等于感兴趣区域的量化参数时,说明当前图像块的量化参数已经达到感兴趣区域的量化参数,但当前图像块的量化参数也会影响到后面待编码图像块的量化参数的调整并且量化参数调整需要逐步进行,另外当前图像块的量化参数也不能与周围已编码图像块的量化参数差异过大,为了调整效果更佳好,将当前图像块的量化参数要调到尽量小,因此可以基于小于平均量化参数的周围已编码图像块的量化参数来确定当前图像块编码时的量化参数,这样可以使得编码后图像效果更佳。
可选地,在基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数时,可以选择小于平均量化参数的周围已编码图像块的量化参数作为待编码图像块编码时的量化参数;也可以是先选择出小于平均量化参数的周围已编码图像块的量化参数,然后对选择出的量化参数进行校正,然后将校正后的量化参数来作为待编码图像块编码时的量化参数,其中校正后的量化参数小于校正前的量化参数。
在一种优选的实施方式中,在执行步骤S150,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数,包括:选择周围已编码图像块的量化参数中最小量化参数作为待编码图像块编码时的量化参数。
其中,最小量化参数为周围已编码图像块的量化参数最小值。在本实施例中,选择最小量化参数作为待编码图像块(即当前图像块)编码时的量化参数,可以使得当前图像块的量化参数尽可能的调到最小,从而使得编码后图像效果更佳。
为了便于理解,给出一个详细的实施例。假设当前图像块的初始量化参数为QPcur,周围已编码图像块的平均量化参数为QPavg,周围已编码图像块的最小量化参数为QPmin,设定的感兴趣区域的量化参数为QProi,第一预设阈值为52,第二预设阈值为47。当QProi<52,QPavg<47时,来判断QPcur是否小于或等于QProi,当QPcur≤QProi时,令QPcur=QPmin,从而得到当前图像块编码时的量化参数。
步骤S160,根据待编码图像块编码时的量化参数进行视频图像编码。
在本实施例中,根据待编码图像块编码时的量化参数即可完成对视频图像的编码。
本实施例提供的视频编码方法,首先获取当前帧图像,在当前帧图像中选择感兴趣区域,该区域为编码中需要重点关注的区域;然后对当前帧图像进行划分,以得到若干图像块;对于若干图像块中每一待编码图像块进行编码时,先判断其是否在感兴趣区域,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;若是,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数,根据待编码图像块编码时的量化参数进行视频图像编码。
视频编码方法中感兴趣区域内的图像块的量化参数是通过初始量化参数、周围已编码图像块的量化参数、平均量化参数以及感兴趣区域的量化参数之间的比较结果而确定,可以使得各图像块的量化参数更加准确,能够更加合理的分配码率,提升画质质量,特别是感兴趣区域的画质质量。
除了步骤S140~步骤S150中提到的对待编码图像块的量化参数调整方式之外,本申请实施例中还提供了其他的方式,具体描述如下:
在一个实施例中,如图4所示,还包括:
步骤S170,当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数大于平均量化参数时,将平均量化参数作为待编码图像块编码时的量化参数。
具体而言,当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数大于平均量化参数时,说明初始量化参数没有达到感兴趣区域的量化参数需要对初始量化参数进行调整,并且周围已编码图像块的平均量化参数优于感兴趣区域的量化参数,此时将平均量化参数赋值给待编码图像块中当前图像块,从而得到当前图像块的最终量化参数。采用平均量化参数来作为当前图像块编码时的量化参数,一方面可以使当前图像块的量化参数优于感兴趣区域的量化参数达到调整目的,另一方面也可以使当前图像块的量化参数与周围已编码图像块的量化参数差异不大,从而避免了出现花屏的现象。
为了便于理解给出一个详细的实施例。假设当前图像块的初始量化参数为QPcur,周围已编码图像块的平均量化参数为QPavg,设定的感兴趣区域的量化参数为QProi,第一预设阈值为52,第二预设阈值为47。当QProi<52,QPavg<47,且QPavg<QProi<QPcur时,令QPcur=QPavg,从而得到当前图像块编码时的量化参数。
在一个实施例中,如图4所示,还包括:
步骤S180,当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数小于平均量化参数时,对平均量化参数进行校正。
其中校正后的平均量化参数小于平均量化参数。
步骤S190,将校正后的平均量化参数作为待编码图像块编码时的量化参数。
具体地,当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数小于平均量化参数时,说明初始量化参数没有达到感兴趣区域的量化参数需要对初始量化参数进行调整,并且周围已编码图像块的平均量化参数差于感兴趣区域的量化参数,此时将平均量化参数进行校正,从而得到校正后的平均量化参数,然后将校正后的平均量化参数赋值给待编码图像块中当前图像块,从而得到当前图像块编码时的量化参数。采用校正后的平均量化参数来作为当前图像块编码时的量化参数,其中校正后的平均量化参数是以平均量化参数为基础进行校正的,一方面可以使当前图像块的量化参数尽可能接近感兴趣区域的量化参数从而达到调整目的,另一方面也可以使当前图像块的量化参数与周围已编码图像块的量化参数差异不大,从而避免了出现花屏的现象。
其中,平均量化参数的校正通常是采用平均量化参数减去一个预设值,即校正后的平均量化参数等于平均量化参数与预设值之差。预设值可以是任意正整数,例如预设值可以是1。
为了便于理解给出一个详细的实施例。假设当前图像块的初始量化参数为QPcur,周围已编码图像块的平均量化参数为QPavg,设定的感兴趣区域的量化参数为QProi,第一预设阈值为52,第二预设阈值为47。当QProi<52,QPavg<47,且QProi<QPavg<QPcur时,令QPcur=QPavg-1,从而得到当前图像块编码时的量化参数。
在一些实施例中,请参照图4,还包括:
步骤S1110,当初始量化参数大于感兴趣区域的量化参数,且小于平均量化参数时,对初始量化参数进行校正。
其中校正后的初始量化参数小于初始量化参数。
步骤S1120,将校正后的初始量化参数作为待编码图像块编码时的量化参数。
具体地,当初始量化参数大于感兴趣区域的量化参数,且小于平均量化参数时,说明初始量化参数没有达到感兴趣区域的量化参数需要对初始量化参数进行调整,并且周围已编码图像块的平均量化参数差于感兴趣区域的量化参数和初始量化参数,此时将初始量化参数进行校正,从而得到校正后的初始量化参数,然后将校正后的初始量化参数赋值给待编码图像块中当前图像块,从而得到当前图像块编码时的量化参数。采用校正后的初始量化参数来作为当前图像块编码的量化参数,可以使当前图像块的量化参数尽可能接近感兴趣区域的量化参数从而达到调整目的。
其中,初始量化参数的校正通常是采用初始量化参数减去一个预设值,即校正后的初始量化参数等于初始量化参数与预设值之差。预设值可以是任意正整数,例如预设值可以是1。
为了便于理解给出一个详细的实施例。假设当前图像块的初始量化参数为QPcur,周围已编码图像块的平均量化参数为QPavg周围已编码图像块,设定的感兴趣区域的量化参数为QProi,第一预设阈值为52,第二预设阈值为47。当QProi<52,QPavg<47,且QProi<QPcur<QPavg时,令QPcur=QPcur-1,从而得到当前图像块编码时的量化参数。
在一个实施例中,还包括:当感兴趣区域的量化参数大于或等于第一预设阈值,和/或平均量化参数大于或等于第二预设阈值时,将初始量化参数作为待编码图像块编码时的量化参数。
具体而言,当感兴趣区域的量化参数大于或等于第一预设阈值时说明感兴趣区域的量化参数超过编码器规定的最大参数,此时不需要对待编码图像块中当前图像块的量化参数进行调整。当平均量化参数大于或等于第二预设阈值时说明周围已编码图像块的量化参数过大,此时不需要对当前图像块的量化参数进行调整,否则容易出现花屏(类似马赛克)的现象。
为了便于理解给出一个详细的实施例。假设当前图像块的初始量化参数为QPcur,周围已编码图像块的平均量化参数为QPavg,设定的感兴趣区域的量化参数为QProi,第一预设阈值为52,第二预设阈值为47。当QProi>52,和/或QPavg>47时,令QPcur=QPcur,从而得到当前图像块编码时的量化参数。
为了便于理解本申请提供的视频编码方法,给出一个具体的实施例。请参照图5,步骤S1,通过人脸识别技术获得当前帧图像中人脸区域,在此使用(x,y,h,w)数组表示,其中x代表人脸区域的左上角的横坐标,y表示人脸区域的左上角的纵坐标,h表示高度,w表示宽度,其中当前帧图像中人脸区域为感兴趣的区域。
步骤S2,将人脸区域(x,y,h,w)以及设定的人脸区域QP值(即QProi)传入编码器,QProi的范围为[0,51],具体取值根据视频质量需要进行设定,设定的越小,质量需求越高。
步骤S3,将当前帧图像划分为16×16的图像块进行编码,从当前帧图像的左上角的第一个图像块进行编码。并且将正在进行编码的图像块称为当前图像块,判断当前图像块是否在人脸区域(x,y,h,w)内。当当前图像块在人脸区域时,获取当前图像块的QP值(即QPcur)以及周围已编码图像块的QP值(包括左边块,上边块,左上块以及右上块)。其中QPcur是由编码器的码率控制算法初步计算得到,而周围已编码图像块的QP值则是编码器中保存值。
步骤S4,根据获取到的周围已编码图像块的QP值求平均值(即QPavg)和最小QP值(即QPmin)。
步骤S5,若QProi小于52并且QPavg小于47,则执行步骤S6,否则直接执行步骤S13。
步骤S6,若QPcur小于QProi,则执行步骤S7,否则执行步骤S8。
步骤S7,将QPmin赋值给QPcur,然后直接执行步骤S13。
步骤S8,若QPavg小于QProi,则执行步骤S9,否则执行步骤S10。
步骤S9,将QPavg赋值给QPcur,然后直接执行步骤S13。
步骤S10,若QPavg小于QPcur,则执行步骤S11,否则执行步骤S12。
步骤S11,将QPavg-1赋值给QPcur,然后直接执行步骤S13。
步骤S12,将QPcur-1赋值给QPcur,然后直接执行步骤S13。
步骤S13,继续执行编码的其它操作,直到循环编码完成所有的图像块。
应该理解的是,虽然图2、图4至图5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且图2、图4至图5中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
上述本申请公开的实施例中详细描述了一种视频编码方法,对于本申请公开的上述方法可采用多种形式的设备实现,因此本申请还公开了对应上述方法的视频编码装置,下面给出具体的实施例进行详细说明。
请参阅图6,为本申请实施例公开的一种视频编码装置,主要包括:
图像获取模块610,用于获取当前帧图像;
区域确定模块620,用于确定当前帧图像中的感兴趣区域;
图像划分模块630,用于对当前帧图像进行划分,以得到若干图像块;
参数获取模块640,用于对于若干图像块中每一待编码图像块,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
参数判断模块650,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;
参数确定模块660,用于当初始量化参数小于或等于感兴趣区域的量化参数时,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数。
视频图像编码模块670,用于根据待编码图像块编码时的量化参数进行视频图像编码。
在一个实施例中,参数确定模块660,用于当初始量化参数小于或等于感兴趣区域的量化参数时,选择所述周围已编码图像块的量化参数中最小量化参数作为所述待编码图像块编码时的量化参数。
在一个实施例中,参数确定模块660,用于当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数大于平均量化参数时,将平均量化作为待编码图像块编码时的量化参数。
在一个实施例中,参数确定模块660,用于当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数小于平均量化参数时,对平均量化参数进行校正;将校正后的平均量化参数作为待编码图像块编码时的量化参数,其中校正后的平均量化参数小于平均量化参数。
在一个实施例中,参数确定模块660,用于当初始量化参数大于感兴趣区域的量化参数,且小于平均量化参数时,对初始量化参数进行校正;将校正后的初始量化参数作为待编码图像块编码时的量化参数,其中校正后的初始量化参数小于初始量化参数。
在一个实施例中,参数确定模块660,用于当感兴趣区域的量化参数大于或等于第一预设阈值,和/或平均量化参数大于或等于第二预设阈值时,将所初始量化参数作为待编码图像块编码时的量化参数。
在一个实施例中,区域确定模块620,用于响应于区域选择指令,在当前帧图像中形成感兴趣区域。
关于视频编码装置的具体限定可以参见上文中对于方法的限定,在此不再赘述。上述装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于终端设备中的处理器中,也可以以软件形式存储于终端设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
请参考图7,图7其示出了本申请实施例提供的一种终端设备的结构框图。该终端设备70可以是计算机设备。本申请中的终端设备70可以包括一个或多个如下部件:处理器72、存储器74以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存储器74中并被配置为由一个或多个处理器72执行,一个或多个应用程序配置用于执行上述应用于终端设备的方法实施例中所描述的方法,也可以配置用于执行上述应用于视频编码方法实施例中所描述的方法,和/或执行网络直播方法实施例所描述的方法。
处理器72可以包括一个或者多个处理核。处理器72利用各种接口和线路连接整个终端设备70内的各个部分,通过运行或执行存储在存储器74内的指令、程序、代码集或指令集,以及调用存储在存储器74内的数据,执行终端设备70的各种功能和处理数据。可选地,处理器72可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器72可集成中央处理器(Cen tralProcessingUnit,CPU)、埋点数据的上报验证器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器72中,单独通过一块通信芯片进行实现。
存储器74可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器74可用于存储指令、程序、代码、代码集或指令集。存储器74可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端设备70在使用中所创建的数据等。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的终端设备的限定,具体的终端设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
综上,本申请实施例提供的终端设备用于实现前述方法实施例中相应的视频编码方法,并具有相应的方法实施例的有益效果,在此不再赘述。
请参阅图8,其示出了本申请实施例提供的一种计算机可读取存储介质的结构框图。该计算机可读取存储介质80中存储有程序代码,程序代码可被处理器调用执行上述视频编码方法实施例中所描述的方法,也可以被处理器调用执行上述视频编码方法实施例中所描述的方法,和/或执行网络直播方法实施例所描述的方法。
计算机可读取存储介质80可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读取存储介质80包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读取存储介质80具有执行上述方法中的任何方法步骤的程序代码82的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码82可以例如以适当形式进行压缩。
进一步地,本申请实施例中还提供了一种网络直播方法,其中网络直播方法可应用于网络直播系统,网络直播系统结构示意图如图1所示,网络直播系统包括服务器102、直播端设备104和客户端设备106。其中,其中服务器102、直播端设备104和客户端设备106之间设置有网络。服务器102能够与直播端设备104以及客户端设备106进行通信,为直播端设备104或/和客户端设备106提供直播服务。
其中,直播端设备104可以来执行网络直播方法,具体过程为:直播端设备106响应开播指令,采集主播视频图像;获取主播视频图像中的感兴趣区域;对主播视频图像进行划分,以得到若干图像块;对于若干图像块中每一待编码图像块,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;若是,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数;根据待编码图像块编码时的量化参数对主播视频图像进行编码;将编码后的主播视频图像发送至服务器102。服务器102可以将编码后的主播视频图像发送至直播端设备104的直播间对应的所有客户端设备106,客户端设备106在接收到编码后的主播视频图像后对其进行解码,在解码后播放直播视频图像以便用户查看。
其中,开播指令通常是根据主播相关操作(例如打开直播软件中开播图标等)产生的。主播视频图像是指包括主播信息(例如主播行为动作等)的视频图像,该视频图像通常是通过视频采集器(例如摄像头)采集的,该视频采集器可以是直播端设备104自带的摄像头,也可以是独立于直播端设备104的摄像头。
此外,网直播方法还包括视频编码方法实施例中任一个实施例所描述的方法,具体的参照图2、图3以及图5中以直播端设备为例进行描述的方法步骤(即步骤S110至步骤S1120,以及步骤S1至步骤S13),在此不再赘述。
该直播端设备104采用了本申请实施例提供的视频编码方法,可以提高直播视频图像编码的质量,从而提高了直播中用户的观众体验。
本申请还提供了一种网络直播装置900,该网络直播装置包括:
视频图像采集模块910,用于响应开播指令采集主播视频图像;
区域获取模块920,用于获取主播视频图像中的感兴趣区域;
第一图像划分模块930,用于对主播视频图像进行划分,以得到若干图像块;
第一参数获取模块940,用于对于若干图像块中每一待编码图像块,若待编码图像块处于感兴趣区域内,则获取待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
第一参数判断模块950,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且平均量化参数小于第二预设阈值时,判断初始量化参数是否小于或等于感兴趣区域的量化参数;
第一参数确定模块960,用于当初始量化参数小于或等于感兴趣区域的量化参数时,基于小于平均量化参数的周围已编码图像块的量化参数,确定待编码图像块编码时的量化参数;
第一视频图像编码模块970,用于根据待编码图像块编码时的量化参数对主播视频图像进行编码;
视频图像发送模块980,用于将编码后的主播视频图像发送至服务器。
在一个实施例中,第一参数确定模块960,用于当初始量化参数小于或等于感兴趣区域的量化参数时,选择所述周围已编码图像块的量化参数中最小量化参数作为所述待编码图像块编码时的量化参数。
在一个实施例中,第一参数确定模块960,用于当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数大于平均量化参数时,将平均量化作为待编码图像块编码时的量化参数。
在一个实施例中,第一参数确定模块960,用于当初始量化参数大于感兴趣区域的量化参数和平均量化参数,且感兴趣区域的量化参数小于平均量化参数时,对平均量化参数进行校正;将校正后的平均量化参数作为待编码图像块编码时的量化参数,其中校正后的平均量化参数小于平均量化参数。
在一个实施例中,第一参数确定模块960,用于当初始量化参数大于感兴趣区域的量化参数,且小于平均量化参数时,对初始量化参数进行校正;将校正后的初始量化参数作为待编码图像块编码时的量化参数,其中校正后的初始量化参数小于初始量化参数。
在一个实施例中,第一参数确定模块960,用于当感兴趣区域的量化参数大于或等于第一预设阈值,和/或平均量化参数大于或等于第二预设阈值时,将所初始量化参数作为待编码图像块编码时的量化参数。
在一个实施例中,区域获取模块920,用于响应于区域选择指令,在主播视频图像中形成感兴趣区域。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (12)

1.一种视频编码方法,其特征在于,所述方法包括:
获取当前帧图像,并确定所述当前帧图像中的感兴趣区域;
对所述当前帧图像进行划分,以得到若干图像块;
对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
若是,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
根据所述待编码图像块编码时的量化参数进行视频图像编码。
2.根据权利要求1所述的方法,其特征在于,所述基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数,包括:
选择所述周围已编码图像块的量化参数中最小量化参数作为所述待编码图像块编码时的量化参数。
3.根据权利要求1所述的方法,其特征在于,还包括:
当所述初始量化参数大于所述感兴趣区域的量化参数和所述平均量化参数,且所述感兴趣区域的量化参数大于所述平均量化参数时,将所述平均量化作为所述待编码图像块编码时的量化参数。
4.根据权利要求1所述的方法,其特征在于,还包括:
当所述初始量化参数大于感兴趣区域的量化参数和所述平均量化参数,且所述感兴趣区域的量化参数小于所述平均量化参数时,对所述平均量化参数进行校正,其中所述校正后的平均量化参数小于所述平均量化参数;
将校正后的平均量化参数作为所述待编码图像块编码时的量化参数。
5.根据权利要求1所述的方法,其特征在于,还包括:
当所述初始量化参数大于感兴趣区域的量化参数,且小于所述平均量化参数时,对所述初始量化参数进行校正,其中所述校正后的初始量化参数小于所述初始量化参数;
将校正后的初始量化参数作为所述待编码图像块编码时的量化参数。
6.根据权利要求1所述的方法,其特征在于,还包括:
当所述感兴趣区域的量化参数大于或等于第一预设阈值,和/或所述平均量化参数大于或等于第二预设阈值时,将所述初始量化参数作为所述待编码图像块编码时的量化参数。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述确定感兴趣区域,包括:
响应于区域选择指令,在所述当前帧图像中形成所述感兴趣区域。
8.一种网络直播方法,其特征在于,所述方法包括:
响应开播指令,采集主播视频图像;
获取所述主播视频图像中的感兴趣区域;
对所述主播视频图像进行划分,以得到若干图像块;
对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
若是,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
根据所述待编码图像块编码时的量化参数对所述主播视频图像进行编码;
将编码后的主播视频图像发送至服务器。
9.一种视频编码装置,其特征在于,所述装置包括:
图像获取模块,用于获取当前帧图像;
区域确定模块,用于确定所述当前帧图像中的感兴趣区域;
图像划分模块,用于对所述当前帧图像进行划分,以得到若干图像块;
参数获取模块,用于对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
参数判断模块,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
参数确定模块,用于当所述初始量化参数小于或等于感兴趣区域的量化参数时,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
视频图像编码模块,用于根据所述待编码图像块编码时的量化参数进行视频图像编码。
10.一种网络直播装置,其特征在于,所述装置包括:
视频图像采集模块,用于响应开播指令采集主播视频图像;
区域获取模块,用于获取所述主播视频图像中的感兴趣区域;
第一图像划分模块,用于对所述主播视频图像进行划分,以得到若干图像块;
第一参数获取模块,用于对于所述若干图像块中每一待编码图像块,若所述待编码图像块处于所述感兴趣区域内,则获取所述待编码图像块的初始量化参数、周围已编码图像块的量化参数和平均量化参数;
第一参数判断模块,用于当设定的感兴趣区域的量化参数小于第一预设阈值,且所述平均量化参数小于第二预设阈值时,判断所述初始量化参数是否小于或等于感兴趣区域的量化参数;
第一参数确定模块,用于当所述初始量化参数小于或等于感兴趣区域的量化参数时,基于小于所述平均量化参数的周围已编码图像块的量化参数,确定所述待编码图像块编码时的量化参数;
第一视频图像编码模块,用于根据所述待编码图像块编码时的量化参数对所述主播视频图像进行编码;
视频图像发送模块,用于将编码后的主播视频图像发送至服务器。
11.一种终端设备,其特征在于,包括:
存储器;一个或多个处理器,与所述存储器耦接;一个或多个应用程序,其中,一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个应用程序配置用于执行如权利要求1-7任一项所述的方法,和/或权利要求8所述的方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-7任一项所述的方法,和/或权利要求8所述的方法。
CN202110523492.2A 2021-05-13 2021-05-13 视频编码方法、网络直播方法、装置和终端设备 Active CN113301342B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110523492.2A CN113301342B (zh) 2021-05-13 2021-05-13 视频编码方法、网络直播方法、装置和终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110523492.2A CN113301342B (zh) 2021-05-13 2021-05-13 视频编码方法、网络直播方法、装置和终端设备

Publications (2)

Publication Number Publication Date
CN113301342A true CN113301342A (zh) 2021-08-24
CN113301342B CN113301342B (zh) 2022-07-22

Family

ID=77321969

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110523492.2A Active CN113301342B (zh) 2021-05-13 2021-05-13 视频编码方法、网络直播方法、装置和终端设备

Country Status (1)

Country Link
CN (1) CN113301342B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115002512A (zh) * 2022-05-23 2022-09-02 北京市商汤科技开发有限公司 视频转码方法及装置、电子设备和存储介质
WO2023142591A1 (zh) * 2022-01-27 2023-08-03 腾讯科技(深圳)有限公司 视频编码及解码方法、装置、计算机设备和存储介质
CN117395424A (zh) * 2023-12-11 2024-01-12 深圳市视晶无线技术有限公司 一种用于视频无线传输监控系统的视频优化方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103841418A (zh) * 2012-11-22 2014-06-04 中国科学院声学研究所 一种3g网络中视频监控器码率控制的优化方法及系统
WO2018103243A1 (zh) * 2016-12-09 2018-06-14 武汉斗鱼网络科技有限公司 一种带宽节省方法、系统、直播终端及可读取存储介质
CN109379594A (zh) * 2018-10-31 2019-02-22 北京佳讯飞鸿电气股份有限公司 视频编码压缩方法、装置、设备和介质
CN110495174A (zh) * 2018-04-04 2019-11-22 深圳市大疆创新科技有限公司 编码方法、装置、图像处理系统和计算机可读存储介质
CN111479112A (zh) * 2020-06-23 2020-07-31 腾讯科技(深圳)有限公司 一种视频编码方法、装置、设备和存储介质
CN111479113A (zh) * 2020-04-15 2020-07-31 腾讯科技(深圳)有限公司 码率控制方法和装置、存储介质和电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103841418A (zh) * 2012-11-22 2014-06-04 中国科学院声学研究所 一种3g网络中视频监控器码率控制的优化方法及系统
WO2018103243A1 (zh) * 2016-12-09 2018-06-14 武汉斗鱼网络科技有限公司 一种带宽节省方法、系统、直播终端及可读取存储介质
CN110495174A (zh) * 2018-04-04 2019-11-22 深圳市大疆创新科技有限公司 编码方法、装置、图像处理系统和计算机可读存储介质
CN109379594A (zh) * 2018-10-31 2019-02-22 北京佳讯飞鸿电气股份有限公司 视频编码压缩方法、装置、设备和介质
CN111479113A (zh) * 2020-04-15 2020-07-31 腾讯科技(深圳)有限公司 码率控制方法和装置、存储介质和电子设备
CN111479112A (zh) * 2020-06-23 2020-07-31 腾讯科技(深圳)有限公司 一种视频编码方法、装置、设备和存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023142591A1 (zh) * 2022-01-27 2023-08-03 腾讯科技(深圳)有限公司 视频编码及解码方法、装置、计算机设备和存储介质
CN115002512A (zh) * 2022-05-23 2022-09-02 北京市商汤科技开发有限公司 视频转码方法及装置、电子设备和存储介质
CN115002512B (zh) * 2022-05-23 2023-11-28 北京市商汤科技开发有限公司 视频转码方法及装置、电子设备和存储介质
CN117395424A (zh) * 2023-12-11 2024-01-12 深圳市视晶无线技术有限公司 一种用于视频无线传输监控系统的视频优化方法
CN117395424B (zh) * 2023-12-11 2024-03-22 深圳市视晶无线技术有限公司 一种用于视频无线传输监控系统的视频优化方法

Also Published As

Publication number Publication date
CN113301342B (zh) 2022-07-22

Similar Documents

Publication Publication Date Title
CN113301342B (zh) 视频编码方法、网络直播方法、装置和终端设备
CN102625106B (zh) 场景自适应的屏幕编码码率控制方法及其系统
JP4414345B2 (ja) ビデオストリーミング
CN110430441B (zh) 一种云手机视频采集方法、系统、装置及存储介质
CN112839184B (zh) 图像处理方法、装置、电子设备及存储介质
CN109729353B (zh) 一种视频编码方法、装置、系统及介质
CN107295423B (zh) 一种用于移动终端视频直播的自适应编码和传输方法
WO2021057477A1 (zh) 视频编解码方法和相关装置
CN114979755A (zh) 投屏方法、装置、终端设备及计算机可读存储介质
CN114786040B (zh) 数据通信方法、系统、电子设备和存储介质
CN111970565A (zh) 视频数据处理方法、装置、电子设备及存储介质
CN114245196B (zh) 一种录屏推流方法、装置、电子设备及存储介质
US8681860B2 (en) Moving picture compression apparatus and method of controlling operation of same
CN112423074B (zh) 音视频同步处理方法、装置、电子设备及存储介质
EP3920537A1 (en) Video decoding method and apparatus, video encoding method and apparatus, storage medium and electronic device
WO2015176489A1 (zh) 画面亮度调整方法、多点控制单元mcu及终端
CN106254873B (zh) 一种视频编码方法及视频编码装置
CN112183227B (zh) 一种智能泛人脸区域的编码方法和设备
CN116962613A (zh) 数据传输方法及装置、计算机设备、存储介质
CN113141352B (zh) 多媒体数据的传输方法、装置、计算机设备和存储介质
CN114615458A (zh) 一种云会议中实时合屏快速出图的方法和装置
CN115442615A (zh) 一种视频编码方法、装置、电子设备及存储介质
CN113160342B (zh) 基于反馈的编码方法及装置、存储介质、电子设备
CN109819318B (zh) 一种图像处理、直播方法、装置、计算机设备及存储介质
CN112702632B (zh) 直播节目注入方法、装置、系统、存储介质和计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant