CN112839227B - 一种图像编码方法、装置、设备和介质 - Google Patents

一种图像编码方法、装置、设备和介质 Download PDF

Info

Publication number
CN112839227B
CN112839227B CN201911158106.3A CN201911158106A CN112839227B CN 112839227 B CN112839227 B CN 112839227B CN 201911158106 A CN201911158106 A CN 201911158106A CN 112839227 B CN112839227 B CN 112839227B
Authority
CN
China
Prior art keywords
image
original image
key
images
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911158106.3A
Other languages
English (en)
Other versions
CN112839227A (zh
Inventor
吴辉
余恒乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Uniview Technologies Co Ltd
Original Assignee
Zhejiang Uniview Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Uniview Technologies Co Ltd filed Critical Zhejiang Uniview Technologies Co Ltd
Priority to CN201911158106.3A priority Critical patent/CN112839227B/zh
Publication of CN112839227A publication Critical patent/CN112839227A/zh
Application granted granted Critical
Publication of CN112839227B publication Critical patent/CN112839227B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例公开了一种图像编码方法、装置、设备和介质。所述方法包括:识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;对所述关键区域图像和所述其他区域图像进行编码。本发明实施例通过根据物体在原始图像序列中的尺寸,分别在物体的关键原始图像和其他原始图像中,截取物体的关键区域图像和其他区域图像,并对关键区域图像和其他区域图像进行编码,由于关键区域图像和其他区域图像的大小远小于整帧原始图像,实现了降低编码所需码率的技术效果。

Description

一种图像编码方法、装置、设备和介质
技术领域
本发明实施例涉及图像处理技术领域,尤其涉及一种图像编码方法、装置、设备和介质。
背景技术
监控领域在近几年发生了巨大的变革,数字化和高清化使得图像的清晰度得到全面的提升,监控设备也是越来越普及,在金融、交通以及学校等各个领域都得到全面的应用,可以说是无处不在,但是这也导致了一个问题,用户的隐私容易被侵犯。目前的方案中既要保证隐私保护最小化原则又要兼顾码率大小,这给我们带来了挑战。
现有的方案是对特征区域进行隐私遮盖,通过单独对隐私区域进行jpeg编码,但是这种方法码率节约效果差,并且对于运动的物体无法进行隐私遮盖,这同时造成了码率的浪费。
发明内容
本发明实施例提供一种图像编码方法、装置、设备和介质,以解决现有对视频中目标进行隐私遮盖时,码率节约效果差且造成码率浪费的问题。
第一方面,本发明实施例提供了一种图像编码方法,所述方法包括:
识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
对所述关键区域图像和所述其他区域图像进行编码。
第二方面,本发明实施例提供了一种图像编码装置,所述装置包括:
关键原始图像确定模块,用于识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
区域截取模块,用于根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
区域图像编码模块,用于对所述关键区域图像和所述其他区域图像进行编码。
第三方面,本发明实施例提供了一种设备,所述设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例中任一所述的图像编码方法。
第四方面,本发明实施例提供了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例中任一所述的图像编码方法。
本发明实施例通过根据物体在原始图像序列中的尺寸,分别在物体的关键原始图像和其他原始图像中,截取物体的关键区域图像和其他区域图像,并对关键区域图像和其他区域图像进行编码,由于关键区域图像和其他区域图像的大小远小于整帧原始图像,实现了降低编码所需码率的技术效果。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1是本发明实施例一提供的一种图像编码方法的流程图;
图2为本发明实施例二提供的一种图像编码方法的流程图;
图3为本发明实施例三提供的一种图像编码装置的结构示意图;
图4为本发明实施例四提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明实施例,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明实施例相关的结构而非全部结构。
实施例一
图1是本发明实施例一提供的一种图像编码方法的流程图。本实施例适用于对视频数据中包括的帧图像进行编码的情况,该方法可以由本发明实施例提供的图像编码装置来执行,所述图像编码装置可以由软件和/或硬件的方式来实现。如图1所示,该方法可以包括:
步骤101、识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像。
其中,原始图像序列包括视频图像序列,其由至少两帧原始图像组成,原始图像中的物体包括但不限于人物、车辆、动物或者其他运动物体,物体的数量可以为一个也可以为多个。物体的关键原始图像指的是首次识别到该物体,且同时识别到有其他物体消失的原始图像,一个物体的关键原始图像数量为一个或者零。
具体的,获取原始图像序列中连续帧的原始图像,将连续的原始图像输入到预设的目标识别模型中以识别不同帧原始图像中物体的像素点位置,其中,目标识别模型是根据目标识别算法训练得到的。识别各帧原始图像中的物体后,根据连续帧的原始图像中各物体的存在情况,来确定各物体的关键原始图像。
可选的,识别原始图像序列中的物体还包括:将连续的原始图像输入到预设的运动检测模型中以检测物体的运动信息,例如运动方向、运动速度以及运动加速度等,其中,运动检测模型是根据运动检测算法训练得到的。
可选的,根据识别结果确定原始图像序列中的关键原始图像,包括:
若所述原始图像序列中上一原始图像中存在第一物体且不存在第二物体,当前原始图像中存在第二物体且不存在第一物体,则确定所述当前原始图像为所述第二物体的关键原始图像。
其中,第一物体和第二物体为任意两个相异物体,本实施例并不对第一物体以及第二物体的具体信息进行任何限定。
通过识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像,为后续在物体的关键原始图像中截取关键区域图像奠定了基础。
步骤102、根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像。
其中,物体在原始图像序列中的尺寸指的是原始图像中物体像素点的外切矩形面积。物体的其他原始图像指的是该物体的原始图像中除去该物体的关键原始图像后剩余的其他帧原始图像,可见若物体不存在关键原始图像,则该物体的原始图像仅包括其他原始图像。
具体的,根据步骤101中识别的物体像素点在各帧原始图像中的位置,确定物体像素点在各帧原始图像中外切矩形的面积,即物体尺寸。由于物体像素点在各帧原始图像中的位置不同,因此物体像素点在各帧原始图像中外切矩形的面积不同,即物体尺寸也不同。根据获取的物体在各帧原始图像中的尺寸,确定该物体的截图尺寸,在一种实施方式中,若物体既存在关键原始图像又存在其他原始图像,则根据该物体的截图尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;在另一种实施方式中,若物体不存在关键原始图像,即仅存在其他原始图像,则在物体的其他原始图像中截取物体的其他区域图像。
可选的,步骤102包括:
针对每一物体,将该物体在所述原始图像序列中的最大尺寸作为该物体的截图尺寸;根据该物体的截图尺寸,从包括该物体的原始图像中截取该物体的区域图像;将从该物体的关键原始图像中截取的区域图像作为该物体的关键区域图像,并将从该物体的其他原始图像中截取的区域图像作为该物体的其他区域图像。
通过根据物体在原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像,为后续对得到的关键区域图像和其他区域图像进行编码奠定了基础。
步骤103、对所述关键区域图像和所述其他区域图像进行编码。
具体的,编码时按照时序的先后顺序,按批次的将各帧原始图像中经过截取得到的区域图像输入到视频编码器中进行编码,例如,将第1帧原始图像中经过截取得到的区域图像输入到视频编码器中进行编码,再将第2帧原始图像中经过截取得到的区域图像输入到视频编码器中进行编码,再将第3帧原始图像中经过截取得到的区域图像输入到视频编码器中进行编码,以此类推。
可选的,步骤103包括:
将任一原始图像中各物体的关键区域图像和/或其他区域图像进行拼接,得到该原始图像的区域拼接图像;对所述区域拼接图像进行编码。
具体的,每帧的原始图像中可能存在一个物体也可能存在多个物体,若存在多个物体时,将截取多个物体对应的多个区域图像组成一幅拼接图像,再将拼接图像输入到视频编码器中进行编码。同时,由于可能存在多个物体,在每帧的原始图像中截取的区域图像,可能包括:仅存在关键区域图像、仅存在其他区域图像或者既存在关键区域图像又存在其他区域图像,对于关键区域图像和其他区域图像,视频编码器采用不同的编码格式进行编码。
示例性的,以某帧原始图像中存在16个物体为例,将对该帧截取得到的16个区域图像以4×4的方式拼接出一幅拼接图像,拼接图像中各物体的区域图像位置是固定的,例如该帧原始图像中物体A的区域图像位于拼接图像的相对坐标(1,1)处,若下一帧原始图像中物体A还存在,则下一帧原始图像中物体A的区域图像还位于拼接图像的相对坐标(1,1)处。
通过对关键区域图像和其他区域图像进行编码,由于关键区域图像和其他区域图像的大小远小于整帧原始图像,实现了降低编码所需码率的技术效果。
本发明实施例提供的技术方案,通过根据物体在原始图像序列中的尺寸,截取在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像,并对关键区域图像和其他区域图像进行编码,由于关键区域图像和其他区域图像的大小远小于整帧原始图像,实现了降低编码所需码率的技术效果。
在上述实施例的基础上,步骤102中“在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像”之后,包括:
将所述关键区域图像和其他区域图像中除物体像素点外的第一像素点填充为预设颜色。
具体的,根据确定的不同帧原始图像中物体像素点位置,以及关键区域图像和其他区域图像中全部像素点位置,确定关键区域图像和其他原始图像中除物体像素点以外的第一像素点位置,并将第一像素点填充为预设颜色,其中预设颜色可选的为灰色。
通过将所述关键区域图像和其他区域图像中除物体像素点外的第一像素点填充为预设颜色,由于对第一像素点颜色的涂抹,实现了降低对第一像素点编码所需码率的技术效果。
在上述实施例的基础上,步骤103中“对所述关键区域图像进行编码”之前,包括:
将所述关键区域图像中除物体像素点外的第二像素点的量化参数设置为最大量化参数;其中所述最大量化参数根据预设编码标准确定。
其中,量化参数是衡量图像是否失真的一个重要参数,图像的量化参数越大则表示图像的失真越严重,图像质量越差,即编码所需码率越低;图像的量化参数越小则表示图像的失真越小,图像质量越高,即编码所需码率越高。
具体的,根据确定的不同帧原始图像中物体像素点位置,以及关键区域图像中全部像素点位置,确定关键区域图像中除物体像素点以外的第二像素点位置,并将第二像素点设置为最大量化参数,最大量化参数是根据预设编码标准确定的,例如H.264编码标准中最大量化参数为51。
通过将所述关键区域图像中除物体像素点外的第二像素点的量化参数设置为最大量化参数,由于设置为最大量化参数后的图像质量差,实现了降低对第二像素点编码所需码率的技术效果。
在上述实施例的基础上,所述方法还包括:
对所述物体像素点进行量化参数保护,以使所述物体像素点的量化参数小于所述第二像素点的量化参数。
具体的,通过进行量化参数保护可以使得物体像素点的量化参数小于所述第二像素点的量化参数,进而保证物体像素点失真度降低,并且保证图像解码后物体像素点的恢复效果。量化参数保护的方式可以是将物体像素点的量化参数设置为较小的固定值,也可以是根据第二像素点量化参数相应减去某个固定值得到物体像素点的量化参数,本实施例并不对具体的量化参数保护方式进行限定。
通过对所述物体像素点进行量化参数保护,以使所述物体像素点的量化参数小于所述第二像素点的量化参数,实现了保证物体像素点失真度降低,并且保证图像解码后物体像素点的恢复效果。
在上述实施例的基础上,所述方法还包括:
若所述原始图像序列中上一原始图像中存在第一物体,且当前原始图像中不存在第一物体,则为当前原始图像的区域拼接图像添加与所述第一物体相关联的标识符,以停止对所述第一物体的其他区域图像的编码操作。具体的,若所述原始图像序列中上一原始图像中存在第一物体,且当前原始图像中不存在第一物体,则说明在当前原始图像中第一物体已消失,进而在当前原始图像的区域拼接图像标识位中,添加与第一物体相关联的标识符,以使得视频编码器根据标识符,停止对第一物体的其他区域图像的编码操作。
通过当第一物体消失时,为当前原始图像的区域拼接图像添加与所述第一物体相关联的标识符,使得视频编辑器根据标识符停止对第一物体的其他区域图像的编码操作,进而节省了编码码率。
实施例二
图2为本发明实施例二提供的一种图像编码方法的流程图。本实施例为上述实施例一提供了一种具体实现方式,如图2所示,该方法可以包括:
步骤201、识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像。
可选的,若所述原始图像序列中上一原始图像中存在第一物体且不存在第二物体,当前原始图像中存在第二物体且不存在第一物体,则确定所述当前原始图像为所述第二物体的关键原始图像。
示例性的,若原始图像序列中第10帧原始图像中存在物体A且不存在物体B,第11帧原始图像中存在物体B且不存在物体A,则确定第11帧原始图像为物体B的关键原始图像。
步骤202、针对每一物体,将该物体在所述原始图像序列中的最大尺寸作为该物体的截图尺寸。
示例性的,假设物体A存在于原始图像序列中的第20帧原始图像到第200帧原始图像中,其中在第100帧时物体A像素点的外切矩形面积最大为“10cm×8cm”,即物体A的尺寸最大,则将“10cm×8cm”的尺寸作为物体A的截图尺寸。
步骤203、根据该物体的截图尺寸,从包括该物体的原始图像中截取该物体的区域图像。
具体的,根据步骤201中的识别结果,在每帧原始图像中根据步骤202确定的每一物体的截图尺寸,分别截取每一物体的区域图像。
可选的,在步骤203中,所述该物体位于该物体的区域图像的居中位置。
通过在截取区域图像时,使得每一物体都位于各自区域图像的居中位置,使得对区域图像进行编码时降低编码所需的码率。
步骤204、将从该物体的关键原始图像中截取的区域图像作为该物体的关键区域图像,并将从该物体的其他原始图像中截取的区域图像作为该物体的其他区域图像。
具体的,对于每一物体,将从每一物体的关键原始图像中截取的区域图像作为对应物体的关键区域图像,将从每一物体的其他原始图像中截取的区域图像作为对应物体的其他区域图像,若某物体不存在关键原始图像,则该物体截取的区域图像全部为其他区域图像。
步骤205、采用第一编码方式对所述关键区域图像进行编码,并采用第二编码方式对所述其他区域图像进行编码;其中,所述第一编码方式和所述第二编码方式不同,所述第一编码方式为帧内编码。
具体的,对于每一帧原始图像,若只存在一个物体,则将该物体的区域图像输入到视频编码器中进行编码,若该物体的区域图像是关键区域图像则采用帧内编码方式进行编码,若该物体的区域图像是其他区域图像则采用PSKIP编码方式进行编码;对于每一帧原始图像,若存在多个物体,则将多个物体的区域图像拼接得到的拼接图像输入到视频编码器中进行编码,对于拼接图像中的关键区域图像采用帧内编码方式进行编码,对于拼接图像中的其他区域图像采用PSKIP编码方式进行编码。
本发明实施例提供的技术方案,通过针对每一物体,将该物体在原始图像序列中的最大尺寸作为该物体的截图尺寸,保证了每一物体的区域图像都可以被完整的截取到;通过采用第一编码方式对关键区域图像进行编码,并采用第二编码方式对其他区域图像进行编码,其中,第一编码方式和第二编码方式不同,第一编码方式为帧内编码,使得在编码过程中避免因关键区域图像与前帧编码图像的差异过大导致编码率增大的问题,减少了编码所需的编码率。
在上述实施例的基础上,步骤205之后,包括:
将运动信息以及物体的像素点位置进行SEI(Supplemental EnhancementInformation,补充增强信息)打包,得到打包数据;将得到的区域图像编码数据以及所述打包数据发送给解码端,供解码端根据所述区域图像编码数据以及所述打包数据进行去马赛克操作。
具体的,解码端将获取的区域图像编码数据进行解码,得到区域图像视频,并对所述打包数据进行解析,得到运动信息以及物体的像素点位置,进而根据区域图像视频、运动信息以及物体的像素点位置,将原始视频中打码后的物体进行替换,得到无码视频。
通过解码端根据区域图像编码数据以及打包数据进行去马赛克操作,实现了对物体的去马赛克效果。
实施例三
图3为本发明实施例三提供的一种图像编码装置的结构示意图,可执行本发明任一实施例所提供的一种图像编码方法,具备执行方法相应的功能模块和有益效果。如图3所示,该装置可以包括:
关键原始图像确定模块31,用于识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
区域截取模块32,用于根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
区域图像编码模块33,用于对所述关键区域图像和所述其他区域图像进行编码。
在上述实施例的基础上,所述关键原始图像确定模块31,具体用于:
若所述原始图像序列中上一原始图像中存在第一物体且不存在第二物体,当前原始图像中存在第二物体且不存在第一物体,则确定所述当前原始图像为所述第二物体的关键原始图像。
在上述实施例的基础上,所述区域图像编码模块33,具体用于:
将任一原始图像中各物体的关键区域图像和/或其他区域图像进行拼接,得到该原始图像的区域拼接图像;
对所述区域拼接图像进行编码。
在上述实施例的基础上,所述区域截取模块32,具体用于:
针对每一物体,将该物体在所述原始图像序列中的最大尺寸作为该物体的截图尺寸;
根据该物体的截图尺寸,从包括该物体的原始图像中截取该物体的区域图像;
将从该物体的关键原始图像中截取的区域图像作为该物体的关键区域图像,并将从该物体的其他原始图像中截取的区域图像作为该物体的其他区域图像。
在上述实施例的基础上,所述区域图像编码模块33,具体用于:
采用第一编码方式对所述关键区域图像进行编码,并采用第二编码方式对所述其他区域图像进行编码;
其中,所述第一编码方式和所述第二编码方式不同,所述第一编码方式为帧内编码。
在上述实施例的基础上,所述该物体位于该物体的区域图像的居中位置。
在上述实施例的基础上,所述装置还包括颜色填充模块,具体用于:
将所述关键区域图像和其他区域图像中除物体像素点外的第一像素点填充为预设颜色。
在上述实施例的基础上,所述装置还包括量化参数设置模块,具体用于:
将所述关键区域图像中除物体像素点外的第二像素点的量化参数设置为最大量化参数;其中所述最大量化参数根据预设编码标准确定。
在上述实施例的基础上,所述装置还包括量化参数保护模块,具体用于:
对所述物体像素点进行量化参数保护,以使所述物体像素点的量化参数小于所述第二像素点的量化参数。
在上述实施例的基础上,所述装置还包括停止截图指令生成模块,具体用于:
若所述原始图像序列中上一原始图像中存在第一物体,且当前原始图像中不存在第一物体,则为当前原始图像的区域拼接图像添加与所述第一物体相关联的标识符,以停止对所述第一物体的其他区域图像的编码操作。本发明实施例所提供的一种图像编码装置,可执行本发明任一实施例所提供的一种图像编码方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任一实施例提供的一种图像编码方法。
实施例四
图4为本发明实施例四提供的一种设备的结构示意图。图4示出了适于用来实现本发明实施方式的示例性设备400的框图。图4显示的设备400仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图4所示,设备400以通用计算设备的形式表现。设备400的组件可以包括但不限于:一个或者多个处理器或者处理单元401,系统存储器402,连接不同系统组件(包括系统存储器402和处理单元401)的总线403。
总线403表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
设备400典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备400访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器402可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)404和/或高速缓存存储器405。设备400可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统406可以用于读写不可移动的、非易失性磁介质(图4未显示,通常称为“硬盘驱动器”)。尽管图4中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线403相连。存储器402可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块407的程序/实用工具408,可以存储在例如存储器402中,这样的程序模块407包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块407通常执行本发明所描述的实施例中的功能和/或方法。
设备400也可以与一个或多个外部设备409(例如键盘、指向设备、显示器410等)通信,还可与一个或者多个使得用户能与该设备400交互的设备通信,和/或与使得该设备400能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口411进行。并且,设备400还可以通过网络适配器412与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器412通过总线403与设备400的其它模块通信。应当明白,尽管图中未示出,可以结合设备400使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元401通过运行存储在系统存储器402中的程序,从而执行各种功能应用以及数据处理,例如实现本发明实施例所提供的图像编码方法,包括:
识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
对所述关键区域图像和所述其他区域图像进行编码。
实施例五
本发明实施例五还提供了一种计算机可读存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种图像编码方法,该方法包括:
识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
对所述关键区域图像和所述其他区域图像进行编码。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的一种图像编码方法中的相关操作。本发明实施例的计算机可读存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (12)

1.一种图像编码方法,其特征在于,所述方法包括:
识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
对所述关键区域图像和所述其他区域图像进行编码,用于对所述物体进行隐私遮盖;
其中,根据识别结果确定原始图像序列中的关键原始图像,包括:
若所述原始图像序列中上一原始图像中存在第一物体且不存在第二物体,当前原始图像中存在第二物体且不存在第一物体,则确定所述当前原始图像为所述第二物体的关键原始图像。
2.根据权利要求1所述的方法,其特征在于,对所述关键区域图像和所述其他区域图像进行编码,包括:
将任一原始图像中各物体的关键区域图像和/或其他区域图像进行拼接,得到该原始图像的区域拼接图像;
对所述区域拼接图像进行编码。
3.根据权利要求1所述的方法,其特征在于,根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像,包括:
针对每一物体,将该物体在所述原始图像序列中的最大尺寸作为该物体的截图尺寸;
根据该物体的截图尺寸,从包括该物体的原始图像中截取该物体的区域图像;
将从该物体的关键原始图像中截取的区域图像作为该物体的关键区域图像,并将从该物体的其他原始图像中截取的区域图像作为该物体的其他区域图像。
4.根据权利要求1所述的方法,其特征在于,对所述关键区域图像和所述其他区域图像进行编码,包括:
采用第一编码方式对所述关键区域图像进行编码,并采用第二编码方式对所述其他区域图像进行编码;
其中,所述第一编码方式和所述第二编码方式不同,所述第一编码方式为帧内编码。
5.根据权利要求3所述的方法,其特征在于,所述该物体位于该物体的区域图像的居中位置。
6.根据权利要求1所述的方法,其特征在于,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像之后,包括:
将所述关键区域图像和其他区域图像中除物体像素点外的第一像素点填充为预设颜色。
7.根据权利要求1所述的方法,其特征在于,对所述关键区域图像进行编码之前,包括:
将所述关键区域图像中除物体像素点外的第二像素点的量化参数设置为最大量化参数;其中所述最大量化参数根据预设编码标准确定。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
对所述物体像素点进行量化参数保护,以使所述物体像素点的量化参数小于所述第二像素点的量化参数。
9.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若所述原始图像序列中上一原始图像中存在第一物体,且当前原始图像中不存在第一物体,则为当前原始图像的区域拼接图像添加与所述第一物体相关联的标识符,以停止对所述第一物体的其他区域图像的编码操作。
10.一种图像编码装置,其特征在于,所述装置包括:
关键原始图像确定模块,用于识别原始图像序列中的物体,并根据识别结果确定物体的关键原始图像;
区域截取模块,用于根据物体在所述原始图像序列中的尺寸,在物体的关键原始图像和其他原始图像中截取物体的关键区域图像和其他区域图像;
区域图像编码模块,用于对所述关键区域图像和所述其他区域图像进行编码,用于对所述物体进行隐私遮盖;
其中,关键原始图像确定模块,具体用于:
若所述原始图像序列中上一原始图像中存在第一物体且不存在第二物体,当前原始图像中存在第二物体且不存在第一物体,则确定所述当前原始图像为所述第二物体的关键原始图像。
11.一种设备,其特征在于,所述设备还包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-9中任一所述的图像编码方法。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-9中任一所述的图像编码方法。
CN201911158106.3A 2019-11-22 2019-11-22 一种图像编码方法、装置、设备和介质 Active CN112839227B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911158106.3A CN112839227B (zh) 2019-11-22 2019-11-22 一种图像编码方法、装置、设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911158106.3A CN112839227B (zh) 2019-11-22 2019-11-22 一种图像编码方法、装置、设备和介质

Publications (2)

Publication Number Publication Date
CN112839227A CN112839227A (zh) 2021-05-25
CN112839227B true CN112839227B (zh) 2023-03-14

Family

ID=75921780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911158106.3A Active CN112839227B (zh) 2019-11-22 2019-11-22 一种图像编码方法、装置、设备和介质

Country Status (1)

Country Link
CN (1) CN112839227B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113923476B (zh) * 2021-09-30 2024-03-26 支付宝(杭州)信息技术有限公司 一种基于隐私保护的视频压缩方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007158680A (ja) * 2005-12-05 2007-06-21 Victor Co Of Japan Ltd 追尾撮像装置およびこれを利用した追尾撮像システム
CN107493452A (zh) * 2017-08-09 2017-12-19 广东欧珀移动通信有限公司 视频画面处理方法、装置和终端
JP2018158390A (ja) * 2017-03-22 2018-10-11 京セラドキュメントソリューションズ株式会社 画像処理装置、裁断領域設定方法
CN108986117A (zh) * 2018-07-18 2018-12-11 北京优酷科技有限公司 视频图像分割方法及装置
CN109005409A (zh) * 2018-07-27 2018-12-14 浙江工业大学 一种基于目标检测与跟踪的智能视频编码方法
CN109040780A (zh) * 2018-08-07 2018-12-18 北京优酷科技有限公司 一种视频处理方法及服务器
CN109429065A (zh) * 2017-09-05 2019-03-05 联咏科技股份有限公司 视频编码装置及视频编码方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007158680A (ja) * 2005-12-05 2007-06-21 Victor Co Of Japan Ltd 追尾撮像装置およびこれを利用した追尾撮像システム
JP2018158390A (ja) * 2017-03-22 2018-10-11 京セラドキュメントソリューションズ株式会社 画像処理装置、裁断領域設定方法
CN107493452A (zh) * 2017-08-09 2017-12-19 广东欧珀移动通信有限公司 视频画面处理方法、装置和终端
CN109429065A (zh) * 2017-09-05 2019-03-05 联咏科技股份有限公司 视频编码装置及视频编码方法
CN108986117A (zh) * 2018-07-18 2018-12-11 北京优酷科技有限公司 视频图像分割方法及装置
CN109005409A (zh) * 2018-07-27 2018-12-14 浙江工业大学 一种基于目标检测与跟踪的智能视频编码方法
CN109040780A (zh) * 2018-08-07 2018-12-18 北京优酷科技有限公司 一种视频处理方法及服务器

Also Published As

Publication number Publication date
CN112839227A (zh) 2021-05-25

Similar Documents

Publication Publication Date Title
US10110936B2 (en) Web-based live broadcast
CN110189336B (zh) 图像生成方法、系统、服务器及存储介质
US10455259B2 (en) Enhanced text rendering and readability in images
CN109697724B (zh) 视频图像分割方法及装置、存储介质、电子设备
CN113344826B (zh) 图像处理方法、装置、电子设备及存储介质
CN104837052A (zh) 播放多媒体数据的方法及装置
CN107992366B (zh) 对多个目标对象进行检测和跟踪的方法、系统和电子设备
US10360687B2 (en) Detection and location of active display regions in videos with static borders
CN113068040A (zh) 一种图像压缩方法、装置、电子设备及可读存储介质
CN110363748B (zh) 关键点的抖动处理方法、装置、介质及电子设备
CN114266860B (zh) 三维人脸模型建立方法、装置、电子设备及存储介质
CN102714691B (zh) 信息显示装置、显示控制用集成电路、显示控制程序及显示控制方法
CN112685762A (zh) 具有隐私保护的图像处理方法、装置、电子设备及介质
CN111368593B (zh) 一种马赛克处理方法、装置、电子设备及存储介质
CN112839227B (zh) 一种图像编码方法、装置、设备和介质
CN107301220B (zh) 数据驱动视图的方法、装置、设备及存储介质
CN113780163A (zh) 一种页面加载时间的检测方法、装置、电子设备及介质
CN110969640A (zh) 视频图像的分割方法、终端设备以及计算机可读存储介质
CN111698533A (zh) 一种视频处理方法、装置、设备和存储介质
US10542176B2 (en) Enhancing graph visualization with supplemental data
CN111063011A (zh) 一种人脸图像处理方法、装置、设备和介质
CN115147318A (zh) 隐私遮挡方法及装置
CN111696154B (zh) 坐标定位方法、装置、设备及存储介质
CN114356475A (zh) 一种显示处理方法、装置、设备及存储介质
CN112288774B (zh) 移动侦测方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant