WO2015042976A1 - 图像编码、解码方法和系统以及终端 - Google Patents

Abstract

本发明提供了图像编码方法和图像解码方法，以及图像编码、解码方法和系统，以及终端，其中，图像编码方法包括：判断待传输至接收终端的视频序列中，当前图像帧的人脸图像中是否存在至少一个正脸图像；若存在至少一个正脸图像，则将至少一个正脸图像中的每个正脸图像沿正脸图像的双眼连线的中垂线进行分割，并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数据；通过第一编码方式对正脸图像中的任一半正脸图像和差异数据进行编码得到正脸信息，并将正脸信息传输至接收终端。通过本申请的技术方案，能够在进行图像传输过程中，进一步减小传输所占的带宽，提高用户对于图像传输的体验，并且能够使得图像接收端恢复原图像帧。

Description

图像编码、 解码方法和系统以及终端 技术领域

本发明涉及图像处理技术领域， 具体而言， 涉及图像编码方法， 图像解码方法， 图像编 码、 解码方法和系统， 以及终端。 背景技术

视频通信系统在发送端通常需要对待传输的视频序列进行编码来减少所需占用的带宽。 现有技术中通过编码方法来减少视频通信所需占用的带宽主要采用如下两种方式：

一种编码方法是对图像帧的各个部分都采用相同的编码算法 （如 JPEG2000 ) 进行编码。 通过这种编码方法编码后的信息量依然非常大， 仍然无法给用户带来流畅的视频通信体验。

另一种编码方法是区分图像帧中的人脸区域和背景区域， 对人脸区域和背景区域采用不 同的编码算法或者直接丟掉背景信息。

这种编码方法考虑到通信双方 （相比于背景信息） 更加关注对方的面部信息， 对人脸区 域和背景区域采用不同的编码算法或者直接丟掉背景信息， 目的是减少编码后的信息量。 然 而这种编码方法还是存在以下二点不足：

1. 接收端不能恢复原图像帧。 这是因为这种编码方法没有将人脸区域在原图像帧中的位 置和大小 （如对于矩形的人脸区域， 即长和宽） 通过网络通信模块传送给接收端。

2. 对所有的人脸图像使用相同的编码算法编码， 并且也没有为人脸图像给出具体的编码 算法。 事实上， 人脸具有相当复杂的细节变化， 比如眼和嘴可以是开的也可以是闭的； 人脸 可以有或者没有带眼镜。 此外人脸还会依据成像角度、 光照、 图像的成像条件 （如摄像设备 的焦距、 成像距离等） 等的变化而变化。 因此， 使用相同的编码算法来编码所有的人脸 （而 不管其成像角度等信息） 并不高效， 没有充分地考虑人脸的成像角度等信息， 难以进一步降 低图像帧编码后的信息量， 无法给用户带来更加流畅的视频通信体验。 发明内容

本发明正是基于上述问题， 提出了一种图像处理技术， 能够在进行图像传输过程中， 进 一步减小传输所占的带宽， 提高用户对于图像传输的体验， 并且能够使得图像接收端恢复原 图像帧。

有鉴于此， 本发明提出了一种图像编码方法， 包括： 步骤 102， 判断待传输至接收终端 的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 步骤 104， 若存在至 少一个正脸图像， 则将所述至少一个正脸图像中的每个正脸图像沿所述正脸图像的双眼连线 的中垂线进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数 据； 步骤 106， 通过第一编码方式对所述正脸图像中的任一半正脸图像和所述差异数据进行 编码得到正脸信息， 并将所述正脸信息传输至所述接收终端。

在该技术方案中， 图像的编码操作可以由一个发送终端来完成， 发送终端作为图像的发 送和编码终端， 接收终端则作为图像的接收和解码终端， 但是， 本领域技术人员应当理解， 发送终端也可以具有与接收终端相同的接收和解码的功能， 同时， 接收终端也可以具有与发 送终端相同的发送和编码的功能。 以下仅针对发送终端作为图像的发送和编码终端， 且接收 终端作为图像的接收和解码终端的情况进行描述。 发送终端和接收终端可以应用于多种场景， 比如， 发送终端可以是视频通信过程中的视 频发送方， 则接收终端可以是视频通信过程中的视频接收方。 发送终端也可以是监控系统中 的一个图像采集设备， 比如摄像头， 则接收终端可以是该监控系统中的显示器， 用于接收摄 像头采集到的图像。

在发送终端将视频序列 （也可以是图片 ） 传输至接收终端时， 发送终端判断当前图像帧 中是否存在正脸图像， 由于正脸图像沿双眼连线的中垂线进行平分得到的一半图像与另一半 图像 （即左半边脸和右半边脸） 几乎是对称的， 因此在判定当前图像帧中存在正脸图像时， 可以只获取对正脸图像平分后的一半图像， 然后计算一半图像与另一半图像的差异数据， 并 只对这一半图像和差异数据进行编码 （可以通过压缩算法， 如 JPEG2000 对上述一半图像进 行压缩， 然后对差异数据进行压缩） ， 而在正常情况下， 人的左半边脸和右半边脸几乎是对 称的， 因此差异数据中包含的信息量非常少 （接近于 0 ) ， 因此在传输正脸图像时， 可以只 传输半边脸的图像和一个极小的差异数据， 相当于将图像的压缩率提高了一倍， 很大程度上 降低了图像传输所占用的带宽。

在上述技术方案中， 优选地， 还包括： 通过所述第一编码方式对所述当前图像帧的人脸 图像中非正脸图像进行编码得到非正脸信息， 并通过第二编码方式对所述当前图像帧中非人 脸图像进行编码得到非人脸信息， 将所述非正脸信息和所述非人脸信息传输至所述接收终 端。

在该技术方案中， 通过第一编码方式编码后的图像质量， 要优于采用第二编码方式编码 后的图像质量， 即， 编码后的正脸信息和非正脸信息 （两者均为人脸信息） 的图像质量优于 非人脸信息 （例如背景信息） 的质量。 当然， 在网络条件不好 （比如带宽非常有限） 的情况 下， 可以直接丟弃非人脸信息， 不对其进行编码。 从而使得接收终端能够以较高的还原度还 原正脸信息和非正脸信息， 并且极大地减少了非人脸信息传输过程中所占用的带宽， 使得图 像传输所占用的整体带宽也降低了。

在上述技术方案中， 优选地， 还包括： 通过第一标识对所述正脸信息进行标记， 通过第 二标识对所述非正脸信息进行标记， 通过第三标识对所述非人脸信息进行标记， 将所述第一 标识、 所述第二标识和所述第三标识传输至所述接收终端。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点的灰度值， 那么就可以根据一半正脸图像的像素点的灰度值与差异数据的差值得出另一半 正脸图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码 非正脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人 脸信息得到非人脸图像。

在上述技术方案中， 优选地， 还包括： 通过第二编码方式对所述当前图像帧中人脸图像 中非正脸图像， 以及所述当前图像帧中非人脸图像进行编码得到次要信息， 将所述次要信息 传输至所述接收终端。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 通过第一标识对所述正脸信息进行标记， 通过第 二标识对所述非正脸信息和所述非人脸信息进行标记， 将所述第一标识和所述第二标识传输 至所述接收终端。 在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 所述步骤 106 还包括： 在所述当前图像帧的人脸图像中不 存在正脸图像时， 通过第一预设编码方式对所述人脸图像进行编码得到人脸信息， 并通过第 二编码方式对所述当前图像帧中的非人脸图像进行编码得到非人脸信息， 将所述人脸信息和 所述非人脸信息传输至所述接收终端。

在该技术方案中， 若发送终端判定当前图像帧中不存在正脸图像， 可以判定当前图像帧 中的所有人脸图像 （其中只包含非正脸图像） 优先级较高， 从而通过第一编码方式对其进行 编码， 以使接收终端能够以较高的还原度还原出人脸图像， 而以较低的还原度还原出非人脸 信息。

在上述技术方案中， 优选地， 还包括： 通过第一标识对所述人脸信息进行标记， 通过第 二标识对所述非人脸信息进行标记， 将所述第一标识和所述第二标识传输至所述接收终端。

在该技术方案中， 接收终端在接收到人脸信息和非人脸信息时， 可以根据不同信息的标 识对不同信息进行区别处理。

在上述技术方案中， 优选地， 还包括： 获取所述人脸图像在所述当前图像帧中的尺寸信 息与位置信息， 并将所述位置信息与所述尺寸信息传输至所述接收终端。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。

在上述技术方案中， 优选地， 还包括： 判断所述当前图像帧的下一图像帧中的人脸图像 是否按照预设方式进行了移动， 若按照所述预设方式进行了移动， 则根据所述预设方式生成 相应的移动指令， 并将所述移动指令传输至所述接收终端， 以使所述接收终端以所述预设方 式移动所述接收终端的当前图像帧中的人脸图像， 并将移动后的所述接收终端的当前图像帧 作为所述接收终端的下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

本申请还提出了一种图像解码方法， 包括： 步骤 202， 接收来自发送终端的正脸信息， 其中， 所述正脸信息包含所述发送终端的当前图像帧中的人脸图像中每个正脸图像的一半正 脸图像和所述一半正脸图像与另一半正脸图像的差异数据； 步骤 204， 通过第一解码方式对 所述正脸信息进行解码， 得到所述每个正脸图像中一半正脸图像和所述差异数据； 步骤 206 , 根据所述一半正脸图像和所述差异数据得到所述另一半正脸图像， 并根据所述一半正脸 图像和所述另一半正脸图像得到所述正脸图像。

在该技术方案中， 接收终端在接收到发送终端发送正脸信息后， 可以通过第一解码方式 (与第一编码方式相对应） 来解码正脸信息， 得到发送终端所传输的图像帧中正脸图像的一 半正脸图像和差异数据， 进而根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差 异数据是一半正脸图像和另一半正脸图像的像素点灰度值差值， 那么可以根据上述一半正脸 图像的像素点灰度值与差异数据的差值得到另一半正脸图像， 最后将一半正脸图像和另一半 正脸图像合并， 得到一张完整的正脸图像。 从而保证了图像帧的还原度， 并且由于只需发送 终端传输一半正脸图像的数据和极小的差异数据， 降低了图像帧在传输过程中所占用的带 宽。

在上述技术方案中， 优选地， 还包括： 接收来自所述发送终端的非正脸信息和非人脸信 息， 通过第一解码方式对所述非正脸信息进行解码得到所述当前图像帧的人脸图像中的非正 脸图像， 通过第二解码方式对所述非人脸信息进行解码得到所述当前图像帧中的非人脸图 像。

在该技术方案中， 接收终端在接收到发送终端的正脸信息后， 还可以从发送终端接收非 正脸信息和非人脸信息， 然后通过第一解码方式解码正脸信息和非正脸信息， 通过第二解码 方式 （与第二编码方式相对应） 解码非人脸信息， 其中， 发送终端通过第一编码方式得到的 正脸信息和非正脸信息的图像质量， 要高于通过第二编码方式得到的非人脸信息的图像质 量， 从而接收终端可以以较高的还原度还原正脸图像和非正脸图像， 并以较低的还原度还原 非人脸图像。

在上述技术方案中， 优选地， 还包括： 根据来自所述发送终端的第一标识确定所述正脸 信息， 根据来自所述发送终端的第二标识确定所述非正脸信息和所述非人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点灰度值， 那么就可以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸 图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正 脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信 息得到非人脸图像。

在上述技术方案中， 优选地， 还包括： 接收来自所述发送终端的非正脸信息和非人脸信 息， 通过第二解码方式对所述非正脸信息和所述非人脸信息进行解码， 得到所述当前图像帧 的人脸图像中的非正脸图像以及所述当前图像帧中的非人脸图像。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 根据来自所述发送终端的第一标识确定所述正脸 信息， 根据来自所述发送终端的第二标识确定所述非正脸信息和所述非人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 接收来自所述发送终端的所述人脸图像的尺寸信 息与位置信息， 并根据所述尺寸信息和所述位置信息确定所述人脸图像在所述当前图像帧中 的尺寸与位置。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。 在上述技术方案中， 优选地， 还包括： 接收来自所述发送终端的移动指令， 并根据所述 移动指令对应的预设方式移动所述当前图像帧中的人脸图像， 并将移动后的所述当前图像帧 作为所述当前图像帧的下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

本申请还提出了一种图像编码、 解码方法， 包括上述任一项所述的图像编码方法和图像 解码方法。

本申请还提出了一种终端， 包括： 判断单元， 用于判断待传输至接收终端的视频序列 中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 差异计算单元， 用于在所述判断 单元判定存在至少一个正脸图像时， 将所述至少一个正脸图像中的每个正脸图像沿所述正脸 图像的双眼连线的中垂线进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸 图像的差异数据； 编码单元， 用于通过第一编码方式对所述正脸图像中的任一半正脸图像和 所述差异数据进行编码得到正脸信息； 传输单元， 用于将所述正脸信息传输至所述接收终 端。

在该技术方案中， 终端可以是用于图像的发送和编码的发送终端 （为与接收终端区分， 以下将该终端称为发送终端） ， 接收终端则作为图像的接收和解码终端， 但是， 本领域技术 人员应当理解， 发送终端也可以具有与接收终端相同的接收和解码的功能， 同时， 接收终端 也可以具有与发送终端相同的发送和编码的功能。 以下仅针对发送终端作为图像的发送和编 码终端， 且接收终端作为图像的接收和解码终端的情况进行描述。

发送终端和接收终端可以应用于多种场景， 比如， 发送终端可以是视频通信过程中的视 频发送方， 则接收终端可以是视频通信过程中的视频接收方。 发送终端也可以是监控系统中 的一个图像采集设备， 比如摄像头， 则接收终端可以是该监控系统中的显示器， 用于接收摄 像头采集到的图像。

在发送终端将视频序列 （也可以是图片 ） 传输至接收终端时， 发送终端判断当前图像帧 中是否存在正脸图像， 由于正脸图像沿双眼连线的中垂线进行平分得到的一半图像与另一半 图像 （即左半边脸和右半边脸） 几乎是对称的， 因此在判定当前图像帧中存在正脸图像时， 可以只获取对正脸图像平分后的一半图像， 然后计算一半图像与另一半图像的差异数据， 并 只对这一半图像和差异数据进行编码 （可以通过压缩算法， 如 JPEG2000 对上述一半图像进 行压缩， 然后对差异数据进行压缩） ， 而在正常情况下， 人的左半边脸和右半边脸几乎是对 称的， 因此差异数据中包含的信息量非常少 （接近于 0 ) ， 因此在传输正脸图像时， 可以只 传输半边脸的图像和一个极小的差异数据， 相当于将图像的压缩率提高了一倍， 很大程度上 降低了图像传输所占用的带宽。

在上述技术方案中， 优选地， 所述编码单元还用于通过所述第一编码方式对所述当前图 像帧的人脸图像中非正脸图像进行编码得到非正脸信息， 并通过第二编码方式对所述当前图 像帧中非人脸图像进行编码得到非人脸信息； 所述传输单元还用于将所述非正脸信息和所述 非人脸信息传输至所述接收终端。

在该技术方案中， 通过第一编码方式编码后的图像质量， 要优于采用第二编码方式编码 后的图像质量， 即， 编码后的正脸信息和非正脸信息 （两者均为人脸信息） 的图像质量优于 非人脸信息 （例如背景信息） 的质量。 当然， 在网络条件不好 （比如带宽非常有限） 的情况 下， 可以直接丟弃非人脸信息， 不对其进行编码。 从而使得接收终端能够以较高的还原度还 原正脸信息和非正脸信息， 并且极大地减少了非人脸信息传输过程中所占用的带宽， 使得图 像传输所占用的整体带宽也降低了。

在上述技术方案中， 优选地， 还包括： 标记单元， 用于通过第一标识对所述正脸信息进 行标记， 通过第二标识对所述非正脸信息进行标记， 通过第三标识对所述非人脸信息进行标 记， 其中， 所述传输单元还用于将将所述第一标识、 所述第二标识和所述第三标识传输至所 述接收终端。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点灰度值， 那么就可以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸 图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正 脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信 息得到非人脸图像。

在上述技术方案中， 优选地， 所述编码单元还用于通过第二编码方式对所述当前图像帧 中人脸图像中非正脸图像， 以及所述当前图像帧中非人脸图像进行编码得到次要信息； 所述 传输单元还用于将所述次要信息传输至所述接收终端。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 标记单元， 用于通过第一标识对所述正脸信息进 行标记， 通过第二标识对所述非正脸信息进行标记和所述非人脸信息进行标记， 其中， 所述 传输单元还用于将所述第一标识和所述第二标识传输至所述接收终端。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 所述编码单元还用于在所述判断单元判定所述当前图像帧 的人脸图像中不存在正脸图像时， 通过第一预设编码方式对所述人脸图像进行编码得到人脸 信息， 并通过第二编码方式对所述当前图像帧中的非人脸图像进行编码得到非人脸信息； 所 述传输单元还用于将所述人脸信息和所述非人脸信息传输至所述接收终端。

在该技术方案中， 若发送终端判定当前图像帧中不存在正脸图像， 可以判定当前图像帧 中的所有人脸图像 （其中只包含非正脸图像） 优先级较高， 从而通过第一编码方式对其进行 编码， 以使接收终端能够以较高的还原度还原出人脸图像， 而以较低的还原度还原出非人脸 信息。

在上述技术方案中， 优选地， 还包括： 标记单元， 用于通过第一标识对所述人脸信息进 行标记， 通过第二标识对所述非人脸信息进行标记， 其中， 所述传输单元还用于将所述第一 标识和所述第二标识传输至所述接收终端。

在该技术方案中， 接收终端在接收到人脸信息和非人脸信息时， 可以根据不同信息的标 识对不同信息进行区别处理。

在上述技术方案中， 优选地， 还包括： 获取单元， 用于获取所述人脸图像在所述当前图 像帧中的尺寸信息与位置信息， 其中， 所述传输单元还用于将所述位置信息与所述尺寸信息 传输至所述接收终端。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。

在上述技术方案中， 优选地， 还包括： 指令生成单元， 其中， 所述判断单元还用于判断 所述当前图像帧的下一图像帧中的人脸图像是否按照预设方式进行了移动； 所述指令生成单 元在所述判断单元判定按照所述预设方式进行了移动， 根据所述预设方式生成相应的移动指 令； 所述传输单元还用于将所述移动指令传输至所述接收终端， 以使所述接收终端以所述预 设方式移动所述接收终端的当前图像帧中的人脸图像， 并将移动后的所述接收终端的当前图 像帧作为所述接收终端的下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

本申请还提出了一种终端， 包括： 接收单元， 用于接收来自发送终端的正脸信息， 其 中， 所述正脸信息包含所述发送终端的当前图像帧中的人脸图像中每个正脸图像的一半正脸 图像和所述一半正脸图像与另一半正脸图像的差异数据； 解码单元， 用于通过第一解码方式 对所述正脸信息进行解码， 得到所述每个正脸图像中一半正脸图像和所述差异数据； 图像处 理单元， 用于所述一半正脸图像和所述差异数据得到所述另一半正脸图像， 并根据所述一半 正脸图像和所述另一半正脸图像得到所述正脸图像。

在该技术方案中， 终端 （为与发送终端区分， 以下将该终端称为接收终端） 可以用于接 收发送终端的信息， 并进行解码得到相应的图像， 接收终端在接收到发送终端发送正脸信息 后， 可以通过第一解码方式 （与第一编码方式相对应） 来解码正脸信息， 得到发送终端所传 输的图像帧中正脸图像的一半正脸图像和差异数据， 进而根据一半正脸图像和差异数据计算 出另一半正脸图像， 比如差异数据是一半正脸图像和另一半正脸图像的像素点灰度值差值， 那么可以根据上述一半正脸图像的像素点灰度值与差异数据的差值得到另一半正脸图像， 最 后将一半正脸图像和另一半正脸图像合并， 得到一张完整的正脸图像。 从而保证了图像帧的 还原度， 并且由于只需发送终端传输一半正脸图像的数据和极小的差异数据， 降低了图像帧 在传输过程中所占用的带宽。

在上述技术方案中， 优选地， 所述接收单元用于接收来自所述发送终端的非正脸信息和 非人脸信息； 所述解码单元用于通过第一解码方式对所述非正脸信息进行解码得到所述当前 图像帧的人脸图像中的非正脸图像， 通过第二解码方式对所述非人脸信息进行解码得到所述 当前图像帧中的非人脸图像。

在该技术方案中， 接收终端在接收到发送终端的正脸信息后， 还可以从发送终端接收非 正脸信息和非人脸信息， 然后通过第一解码方式解码正脸信息和非正脸信息， 通过第二解码 方式 （与第二编码方式相对应） 解码非人脸信息， 其中， 发送终端通过第一编码方式得到的 正脸信息和非正脸信息的图像质量， 要高于通过第二编码方式得到的非人脸信息的图像质 量， 从而接收终端可以以较高的还原度还原正脸图像和非正脸图像， 并以较低的还原度还原 非人脸图像。

在上述技术方案中， 优选地， 还包括： 标识识别单元， 用于根据来自所述发送终端的第 一标识确定所述正脸信息， 根据来自所述发送终端的第二标识确定所述非正脸信息和所述非 人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点灰度值， 那么就可以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸 图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正 脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信 息得到非人脸图像。

在上述技术方案中， 优选地， 所述接收单元用于接收来自所述发送终端的非正脸信息和 非人脸信息； 所述解码单元用于通过第二解码方式对所述非正脸信息和所述非人脸信息进行 解码， 得到所述当前图像帧的人脸图像中的非正脸图像以及所述当前图像帧中的非人脸图 像。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 标识识别单元， 用于根据来自所述发送终端的第 一标识确定所述正脸信息， 根据来自所述发送终端的第二标识确定所述非正脸信息和所述非 人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 位置确定单元， 其中， 所述接收单元还用于接收 来自所述发送终端的所述人脸图像的尺寸信息与位置信息， 所述位置确定单元用于根据所述 尺寸信息和所述位置信息确定所述人脸图像在所述当前图像帧中的尺寸与位置。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。

在上述技术方案中， 优选地， 还包括： 图像帧确定单元， 其中， 所述接收单元还用于接 收来自所述发送终端的移动指令， 所述图像帧确定单元用于根据所述移动指令对应的预设方 式移动所述当前图像帧中的人脸图像， 并将移动后的所述当前图像帧作为所述当前图像帧的 下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

本申请还提出了一种图像编码、 解码系统， 包括上述任一项所述的两种终端。 根据本发明的实施方式， 还提供了一种存储在非易失性机器可读介质上的程序产品， 用 于图像编码， 所述程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 判断待 传输至接收终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 若存 在至少一个正脸图像， 则将所述至少一个正脸图像中的每个正脸图像沿所述正脸图像的双眼 连线的中垂线进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异 数据； 通过第一编码方式对所述正脸图像中的任一半正脸图像和所述差异数据进行编码得到 正脸信息， 并将所述正脸信息传输至所述接收终端。

根据本发明的实施方式， 还提出了一种存储在非易失性机器可读介质上的程序产品， 用 于图像解码， 所述程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 接收来 自发送终端的正脸信息， 其中， 所述正脸信息包含所述发送终端的当前图像帧中的人脸图像 中每个正脸图像的一半正脸图像和所述一半正脸图像与另一半正脸图像的差异数据； 通过第 一解码方式对所述正脸信息进行解码， 得到所述每个正脸图像中一半正脸图像和所述差异数 据； 根据所述一半正脸图像和所述差异数据得到所述另一半正脸图像， 并根据所述一半正脸 图像和所述另一半正脸图像得到所述正脸图像。

根据本发明的实施方式， 还提出了一种存储在非易失性机器可读介质上的程序产品， 用 于图像编码、 解码， 包括上述两种程序产品。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像编码的程 序产品， 所述程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 判断待传输 至接收终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 若存在至 少一个正脸图像， 则将所述至少一个正脸图像中的每个正脸图像沿所述正脸图像的双眼连线 的中垂线进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数 据； 通过第一编码方式对所述正脸图像中的任一半正脸图像和所述差异数据进行编码得到正 脸信息， 并将所述正脸信息传输至所述接收终端。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像解码的程 序产品， 所述程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 接收来自发 送终端的正脸信息， 其中， 所述正脸信息包含所述发送终端的当前图像帧中的人脸图像中每 个正脸图像的一半正脸图像和所述一半正脸图像与另一半正脸图像的差异数据； 通过第一解 码方式对所述正脸信息进行解码， 得到所述每个正脸图像中一半正脸图像和所述差异数据； 根据所述一半正脸图像和所述差异数据得到所述另一半正脸图像， 并根据所述一半正脸图像 和所述另一半正脸图像得到所述正脸图像。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像编码、 解 码的程序产品， 所述程序产品包括上述两种程序产品。

根据本发明的实施方式， 还提供了一种机器可读程序， 所述程序使机器执行如上所述技 术方案中任一所述的图像编码、 解码方法。

根据本发明的实施方式， 还提供了一种存储有机器可读程序的存储介质， 其中， 所述机 器可读程序使得机器执行如上所述技术方案中任一所述的图像编码、 解码方法。

通过以上技术方案， 可以在进行图像传输过程中， 进一步减小传输所占的带宽， 提高用 户对于图像传输的体验， 并且能够使得图像接收端恢复原图像帧。 附图说明

图 1示出了根据本发明的实施例的图像编码方法的示意流程图；

图 2示出了根据本发明的实施例的图像解码方法的示意流程图；

图 3示出了根据本发明的一个实施例的终端的示意框图；

图 4示出了根据本发明的另一个实施例的终端的示意框图； 图 5示出了根据本发明的实施例的图像编码方法的具体示意流程图；

图 6示出了根据本发明的实施例的图像解码方法的具体示意流程图。 具体实施方式

为了能够更清楚地理解本发明的上述目的、 特征和优点， 下面结合附图和具体实施方式 对本发明进行进一步的详细描述。 需要说明的是， 在不冲突的情况下， 本申请的实施例及实 施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本发明， 但是， 本发明还可以采用 其他不同于在此描述的其他方式来实施， 因此， 本发明的保护范围并不受下面公开的具体实 施例的限制。

图 1示出了根据本发明的实施例的图像编码方法的示意流程图。

如图 1 所示， 根据本发明的实施例的图像编码方法包括： 步骤 102， 判断待传输至接收 终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 步骤 104， 若存 在至少一个正脸图像， 则将至少一个正脸图像中的每个正脸图像沿正脸图像的双眼连线的中 垂线进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数据； 步 骤 106， 通过第一编码方式对正脸图像中的任一半正脸图像和差异数据进行编码得到正脸信 息， 并将正脸信息传输至接收终端。

在该技术方案中， 图像的编码操作可以由一个发送终端来完成， 发送终端作为图像的发 送和编码终端， 接收终端则作为图像的接收和解码终端， 但是， 本领域技术人员应当理解， 发送终端也可以具有与接收终端相同的接收和解码的功能， 同时， 接收终端也可以具有与发 送终端相同的发送和编码的功能。 以下仅针对发送终端作为图像的发送和编码终端， 且接收 终端作为图像的接收和解码终端的情况进行描述。

发送终端和接收终端可以应用于多种场景， 比如， 发送终端可以是视频通信过程中的视 频发送方， 则接收终端可以是视频通信过程中的视频接收方。 发送终端也可以是监控系统中 的一个图像采集设备， 比如摄像头， 则接收终端可以是该监控系统中的显示器， 用于接收摄 像头采集到的图像。

在发送终端将视频序列 （也可以是图片 ） 传输至接收终端时， 发送终端判断当前图像帧 中是否存在正脸图像， 由于正脸图像沿双眼连线的中垂线进行平分得到的一半图像与另一半 图像 （即左半边脸和右半边脸） 几乎是对称的， 因此在判定当前图像帧中存在正脸图像时， 可以只获取对正脸图像平分后的一半图像， 然后计算一半图像与另一半图像的差异数据， 并 只对这一半图像和差异数据进行编码 （可以通过压缩算法， 如 JPEG2000 对上述一半图像进 行压缩， 然后对差异数据进行压缩） ， 而在正常情况下， 人的左半边脸和右半边脸几乎是对 称的， 因此差异数据中包含的信息量非常少 （接近于 0 ) ， 因此在传输正脸图像时， 可以只 传输半边脸的图像和一个极小的差异数据， 相当于将图像的压缩率提高了一倍， 很大程度上 降低了图像传输所占用的带宽。

在上述技术方案中， 优选地， 还包括： 通过第一编码方式对当前图像帧的人脸图像中非 正脸图像进行编码得到非正脸信息， 并通过第二编码方式对当前图像帧中非人脸图像进行编 码得到非人脸信息， 将非正脸信息和非人脸信息传输至接收终端。

在该技术方案中， 通过第一编码方式编码后的图像质量， 要优于采用第二编码方式编码 后的图像质量， 即， 编码后的正脸信息和非正脸信息 （两者均为人脸信息） 的图像质量优于 非人脸信息 （例如背景信息） 的质量。 当然， 在网络条件不好 （比如带宽非常有限） 的情况 下， 可以直接丟弃非人脸信息， 不对其进行编码。 从而使得接收终端能够以较高的还原度还 原正脸信息和非正脸信息， 并且极大地减少了非人脸信息传输过程中所占用的带宽， 使得图 像传输所占用的整体带宽也降低了。 在上述技术方案中， 优选地， 还包括： 通过第一标识对正脸信息进行标记， 通过第二标 识对非正脸信息进行标记， 通过第三标识对非人脸信息进行标记， 将第一标识、 第二标识和 第三标识传输至接收终端。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点灰度值， 那么就可以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸 图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正 脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信 息得到非人脸图像。

在上述技术方案中， 优选地， 还包括： 通过第二编码方式对当前图像帧中人脸图像中非 正脸图像， 以及当前图像帧中非人脸图像进行编码得到次要信息， 将次要信息传输至接收终 端。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 通过第一标识对正脸信息进行标记， 通过第二标 识对非正脸信息和非人脸信息进行标记， 将第一标识和第二标识传输至接收终端。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 步骤 106 还包括： 在当前图像帧的人脸图像中不存在正脸 图像时， 通过第一预设编码方式对人脸图像进行编码得到人脸信息， 并通过第二编码方式对 当前图像帧中的非人脸图像进行编码得到非人脸信息， 将人脸信息和非人脸信息传输至接收 终端。

在该技术方案中， 若发送终端判定当前图像帧中不存在正脸图像， 可以判定当前图像帧 中的所有人脸图像 （其中只包含非正脸图像） 优先级较高， 从而通过第一编码方式对其进行 编码， 以使接收终端能够以较高的还原度还原出人脸图像， 而以较低的还原度还原出非人脸 信息。

在上述技术方案中， 优选地， 还包括： 通过第一标识对人脸信息进行标记， 通过第二标 识对非人脸信息进行标记， 将第一标识和第二标识传输至接收终端。

在该技术方案中， 接收终端在接收到人脸信息和非人脸信息时， 可以根据不同信息的标 识对不同信息进行区别处理。 其中， 标识可以是 01 比特序列， 比如通过 00标记正脸， 通过 01代表非正脸， 通过 10标记非人脸。

在上述技术方案中， 优选地， 还包括： 获取人脸图像在当前图像帧中的尺寸信息与位置 信息， 并将位置信息与尺寸信息传输至接收终端。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。

在上述技术方案中， 优选地， 还包括： 判断当前图像帧的下一图像帧中的人脸图像是否 按照预设方式进行了移动， 若按照预设方式进行了移动， 则根据预设方式生成相应的移动指 令， 并将移动指令传输至接收终端， 以使接收终端以预设方式移动接收终端的当前图像帧中 的人脸图像， 并将移动后的接收终端的当前图像帧作为接收终端的下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

图 2示出了根据本发明的实施例的图像解码方法的示意流程图。

如图 2 所示， 根据本发明的实施例的图像解码方法包括： 步骤 202， 接收来自发送终端 的正脸信息， 其中， 正脸信息包含发送终端的当前图像帧中的人脸图像中每个正脸图像的一 半正脸图像和一半正脸图像与另一半正脸图像的差异数据； 步骤 204， 通过第一解码方式对 正脸信息进行解码， 得到每个正脸图像中一半正脸图像和差异数据； 步骤 206， 根据一半正 脸图像和差异数据得到另一半正脸图像， 并根据一半正脸图像和另一半正脸图像得到正脸图 像。

在该技术方案中， 接收终端在接收到发送终端发送正脸信息后， 可以通过第一解码方式 (与第一编码方式相对应） 来解码正脸信息， 得到发送终端所传输的图像帧中正脸图像的一 半正脸图像和差异数据， 进而根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差 异数据是一半正脸图像和另一半正脸图像的像素点灰度值差值， 那么可以根据上述一半正脸 图像的像素点灰度值与差异数据的差值得到另一半正脸图像， 最后将一半正脸图像和另一半 正脸图像合并， 得到一张完整的正脸图像。 从而保证了图像帧的还原度， 并且由于只需发送 终端传输一半正脸图像的数据和极小的差异数据， 降低了图像帧在传输过程中所占用的带宽。

在上述技术方案中， 优选地， 还包括： 接收来自发送终端的非正脸信息和非人脸信息， 通过第一解码方式对非正脸信息进行解码得到当前图像帧的人脸图像中的非正脸图像， 通过 第二解码方式对非人脸信息进行解码得到当前图像帧中的非人脸图像。

在该技术方案中， 接收终端在接收到发送终端的正脸信息后， 还可以从发送终端接收非 正脸信息和非人脸信息， 然后通过第一解码方式解码正脸信息和非正脸信息， 通过第二解码 方式 （与第二编码方式相对应） 解码非人脸信息， 其中， 发送终端通过第一编码方式得到的 正脸信息和非正脸信息的图像质量， 要高于通过第二编码方式得到的非人脸信息的图像质 量， 从而接收终端可以以较高的还原度还原正脸图像和非正脸图像， 并以较低的还原度还原 非人脸图像。

在上述技术方案中， 优选地， 还包括： 根据来自发送终端的第一标识确定正脸信息， 根 据来自发送终端的第二标识确定非正脸信息和非人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信 息， 并以与第一编码方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的 差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素 点灰度值， 那么就可以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸 图像。 同理， 接收终端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正 脸信息得到非正脸图像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信 息得到非人脸图像。

在上述技术方案中， 优选地， 还包括： 接收来自发送终端的非正脸信息和非人脸信息， 通过第二解码方式对非正脸信息和非人脸信息进行解码， 得到当前图像帧的人脸图像中的非 正脸图像以及当前图像帧中的非人脸图像。

在该技术方案中， 发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编 码， 然后通过第二编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级 高于非正脸图像和非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正 脸图像， 而以较低的还原度还原出非正脸图像和非人脸图像。

在上述技术方案中， 优选地， 还包括： 根据来自发送终端的第一标识确定正脸信息， 根 据来自发送终端的第二标识确定非正脸信息和非人脸信息。

在该技术方案中， 接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据 不同信息的标识对不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正 脸图像和相应的差异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后 通过第二解码方式解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。 其中， 标 识可以是 01比特序列， 比如通过 00标记正脸， 通过 01代表非正脸， 通过 10标记非人脸。

在上述技术方案中， 优选地， 还包括： 接收来自发送终端的人脸图像的尺寸信息与位置 信息， 并根据尺寸信息和位置信息确定人脸图像在当前图像帧中的尺寸与位置。

在该技术方案中， 发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信 息， 从而在将编码后的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息 也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图 像在图像帧中的尺寸和位置， 从而准确地还原发送终端发送的原图像帧。

在上述技术方案中， 优选地， 还包括： 接收来自发送终端的移动指令， 并根据移动指令 对应的预设方式移动当前图像帧中的人脸图像， 并将移动后的当前图像帧作为当前图像帧的 下一图像帧。

在该技术方案中， 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸 图像只是按照预设方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生 了水平移动 （比如水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或 者在原垂直平面内发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如 针对水平移动可以生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了 数据传输量。

本申请还提出了一种图像编码、 解码方法， 包括上述任一项的图像编码方法和图像解码 方法。

图 3示出了根据本发明的一个实施例的终端的示意框图。

如图 3 所示， 根据本发明的一个实施例的终端 300 包括： 判断单元 302， 用于判断待传 输至接收终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 差异计 算单元 304， 用于在判断单元 302 判定存在至少一个正脸图像时， 将至少一个正脸图像中的 每个正脸图像沿正脸图像的双眼连线的中垂线进行分割， 并计算分割后的正脸图像中一半正 脸图像与另一半正脸图像的差异数据； 编码单元 306， 用于通过第一编码方式对正脸图像中 的任一半正脸图像和差异数据进行编码得到正脸信息； 传输单元 308， 用于将正脸信息传输 至接收终端。

终端 300 可以是用于图像的发送和编码的发送终端 （为与接收终端区分， 以下将该终端

300 称为发送终端） ， 接收终端则作为图像的接收和解码终端， 但是， 本领域技术人员应当 理解， 发送终端也可以具有与接收终端相同的接收和解码的功能， 同时， 接收终端也可以具 有与发送终端相同的发送和编码的功能。 以下仅针对发送终端作为图像的发送和编码终端， 且接收终端作为图像的接收和解码终端的情况进行描述。 发送终端和接收终端可以应用于多种场景， 比如， 发送终端可以是视频通信过程中的视 频发送方， 则接收终端可以是视频通信过程中的视频接收方。 发送终端也可以是监控系统中 的一个图像采集设备， 比如摄像头， 则接收终端可以是该监控系统中的显示器， 用于接收摄 像头采集到的图像。

在发送终端将视频序列 （也可以是图片 ） 传输至接收终端时， 发送终端判断当前图像帧 中是否存在正脸图像， 由于正脸图像沿双眼连线的中垂线进行平分得到的一半图像与另一半 图像 （即左半边脸和右半边脸） 几乎是对称的， 因此在判定当前图像帧中存在正脸图像时， 可以只获取对正脸图像平分后的一半图像， 然后计算一半图像与另一半图像的差异数据， 并 只对这一半图像和差异数据进行编码 （可以通过压缩算法， 如 JPEG2000 对上述一半图像进 行压缩， 然后对差异数据进行压缩） ， 而在正常情况下， 人的左半边脸和右半边脸几乎是对 称的， 因此差异数据中包含的信息量非常少 （接近于 0 ) ， 因此在传输正脸图像时， 可以只 传输半边脸的图像和一个极小的差异数据， 相当于将图像的压缩率提高了一倍， 很大程度上 降低了图像传输所占用的带宽。

优选地， 编码单元 306 还用于通过第一编码方式对当前图像帧的人脸图像中非正脸图像 进行编码得到非正脸信息， 并通过第二编码方式对当前图像帧中非人脸图像进行编码得到非 人脸信息； 传输单元 308还用于将非正脸信息和非人脸信息传输至接收终端。

通过第一编码方式编码后的图像质量， 要优于采用第二编码方式编码后的图像质量， 即， 编码后的正脸信息和非正脸信息 （两者均为人脸信息） 的图像质量优于非人脸信息 （例 如背景信息） 的质量。 当然， 在网络条件不好 （比如带宽非常有限） 的情况下， 可以直接丟 弃非人脸信息， 不对其进行编码。 从而使得接收终端能够以较高的还原度还原正脸信息和非 正脸信息， 并且极大地减少了非人脸信息传输过程中所占用的带宽， 使得图像传输所占用的 整体带宽也降低了。

优选地， 还包括： 标记单元 310， 用于通过第一标识对正脸信息进行标记， 通过第二标 识对非正脸信息进行标记， 通过第三标识对非人脸信息进行标记， 其中， 传输单元 308 还用 于将将第一标识、 第二标识和第三标识传输至接收终端。

接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据不同信息的标识对 不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信息， 并以与第一编码 方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的差异数据， 然后根据 一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素点灰度值， 那么就可 以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸图像。 同理， 接收终 端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正脸信息得到非正脸图 像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信息得到非人脸图像。

优选地， 编码单元 306 还用于通过第二编码方式对当前图像帧中人脸图像中非正脸图 像， 以及当前图像帧中非人脸图像进行编码得到次要信息； 传输单元 308 还用于将次要信息 传输至接收终端。

发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编码， 然后通过第二 编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级高于非正脸图像和 非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正脸图像， 而以较低 的还原度还原出非正脸图像和非人脸图像。

优选地， 还包括： 标记单元 310， 用于通过第一标识对正脸信息进行标记， 通过第二标 识对非正脸信息进行标记和非人脸信息进行标记， 其中， 传输单元 308 还用于将第一标识和 第二标识传输至接收终端。

接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据不同信息的标识对 不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正脸图像和相应的差 异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后通过第二解码方式 解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。

优选地， 编码单元 306还用于在判断单元 302判定当前图像帧的人脸图像中不存在正脸 图像时， 通过第一预设编码方式对人脸图像进行编码得到人脸信息， 并通过第二编码方式对 当前图像帧中的非人脸图像进行编码得到非人脸信息； 传输单元 308 还用于将人脸信息和非 人脸信息传输至接收终端。

若发送终端判定当前图像帧中不存在正脸图像， 可以判定当前图像帧中的所有人脸图像 (其中只包含非正脸图像） 优先级较高， 从而通过第一编码方式对其进行编码， 以使接收终 端能够以较高的还原度还原出人脸图像， 而以较低的还原度还原出非人脸信息。

优选地， 还包括： 标记单元 310， 用于通过第一标识对人脸信息进行标记， 通过第二标 识对非人脸信息进行标记， 其中， 传输单元 308还将第一标识和第二标识传输至接收终端。

接收终端在接收到人脸信息和非人脸信息时， 可以根据不同信息的标识对不同信息进行 区别处理。 其中， 标识可以是 01比特序列， 比如通过 00标记正脸， 通过 01代表非正脸， 通 过 10标记非人脸。

优选地， 还包括： 获取单元 312， 用于获取人脸图像在当前图像帧中的尺寸信息与位置 信息， 其中， 传输单元 308还用于将位置信息与尺寸信息传输至接收终端。

发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信息， 从而在将编码后 的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图像在图像帧中的尺寸 和位置， 从而准确地还原发送终端发送的原图像帧。

优选地， 还包括： 指令生成单元 314， 其中， 判断单元 302 还用于判断当前图像帧的下 一图像帧中的人脸图像是否按照预设方式进行了移动； 指令生成单元在判断单元判定按照预 设方式进行了移动， 根据预设方式生成相应的移动指令； 传输单元 308 还用于将移动指令传 输至接收终端， 以使接收终端以预设方式移动接收终端的当前图像帧中的人脸图像， 并将移 动后的接收终端的当前图像帧作为接收终端的下一图像帧。

若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸图像只是按照预设 方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生了水平移动 （比如 水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或者在原垂直平面内 发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如针对水平移动可以 生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将 下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了数据传输量。

图 4示出了根据本发明的另一个实施例的终端的示意框图。

如图 4 所示， 根据本发明的另一个实施例的终端 400 包括： 接收单元 402， 用于接收来 自发送终端的正脸信息， 其中， 正脸信息包含发送终端的当前图像帧中的人脸图像中每个正 脸图像的一半正脸图像和一半正脸图像与另一半正脸图像的差异数据； 解码单元 404， 用于 通过第一解码方式对正脸信息进行解码， 得到每个正脸图像中一半正脸图像和差异数据； 图 像处理单元 406， 用于一半正脸图像和差异数据得到另一半正脸图像， 并根据一半正脸图像 和另一半正脸图像得到正脸图像。

终端 400 (为与发送终端区分， 以下将该终端 400 称为接收终端） 可以用于接收发送终 端的信息， 并进行解码得到相应的图像， 接收终端在接收到发送终端发送正脸信息后， 可以 通过第一解码方式 （与第一编码方式相对应） 来解码正脸信息， 得到发送终端所传输的图像 帧中正脸图像的一半正脸图像和差异数据， 进而根据一半正脸图像和差异数据计算出另一半 正脸图像， 比如差异数据是一半正脸图像和另一半正脸图像的像素点灰度值差值， 那么可以 根据上述一半正脸图像的像素点灰度值与差异数据的差值得到另一半正脸图像， 最后将一半 正脸图像和另一半正脸图像合并， 得到一张完整的正脸图像。 从而保证了图像帧的还原度， 并且由于只需发送终端传输一半正脸图像的数据和极小的差异数据， 降低了图像帧在传输过 程中所占用的带宽。

优选地， 接收单元 402 用于接收来自发送终端的非正脸信息和非人脸信息； 解码单元 404 用于通过第一解码方式对非正脸信息进行解码得到当前图像帧的人脸图像中的非正脸图 像， 通过第二解码方式对非人脸信息进行解码得到当前图像帧中的非人脸图像。

接收终端在接收到发送终端的正脸信息后， 还可以从发送终端接收非正脸信息和非人脸 信息， 然后通过第一解码方式解码正脸信息和非正脸信息， 通过第二解码方式 （与第二编码 方式相对应） 解码非人脸信息， 其中， 发送终端通过第一编码方式得到的正脸信息和非正脸 信息的图像质量， 要高于通过第二编码方式得到的非人脸信息的图像质量， 从而接收终端可 以以较高的还原度还原正脸图像和非正脸图像， 并以较低的还原度还原非人脸图像。

优选地， 还包括： 标识识别单元 408， 用于根据来自发送终端的第一标识确定正脸信 息， 根据来自发送终端的第二标识确定非正脸信息和非人脸信息。

接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据不同信息的标识对 不同信息进行区别处理。 比如接收终端可以根据第一标识识别出正脸信息， 并以与第一编码 方式相对应的第一解码方式解码正脸信息， 得到一半正脸图像和相应的差异数据， 然后根据 一半正脸图像和差异数据计算出另一半正脸图像， 比如差异数据是像素点灰度值， 那么就可 以根据一半正脸图像的像素点灰度值与差异数据的差值得出另一半正脸图像。 同理， 接收终 端也可以根据第二标识识别出非正脸信息， 并以第一解码方式解码非正脸信息得到非正脸图 像， 根据第三标识识别出非人脸信息， 并以第二解码方式解码非人脸信息得到非人脸图像。

优选地， 接收单元 402 用于接收来自发送终端的非正脸信息和非人脸信息； 解码单元 404 用于通过第二解码方式对非正脸信息和非人脸信息进行解码， 得到当前图像帧的人脸图 像中的非正脸图像以及当前图像帧中的非人脸图像。

发送终端也可以根据用户设置仅通过第一编码方式对正脸图像进行编码， 然后通过第二 编码方式对非正脸图像和非人脸图像进行编码 （相当于正脸图像的优先级高于非正脸图像和 非人脸图像的优先级） ， 从而使得接收终端可以以较高的还原度还原出正脸图像， 而以较低 的还原度还原出非正脸图像和非人脸图像。

优选地， 还包括： 标识识别单元 408， 用于根据来自发送终端的第一标识确定正脸信 息， 根据来自发送终端的第二标识确定非正脸信息和非人脸信息。

接收终端在接收到正脸信息、 非正脸信息和非人脸信息时， 可以根据不同信息的标识对 不同信息进行区别处理。 比如通过第一解码方式解码正脸信息得到一半正脸图像和相应的差 异数据， 然后根据一半正脸图像和差异数据计算出另一半正脸图像， 然后通过第二解码方式 解码非正脸信息和非人脸信息， 得到非正脸图像和非人脸图像。 其中， 标识可以是 01 比特序 列， 比如通过 00标记正脸， 通过 01代表非正脸， 通过 10标记非人脸。

优选地， 还包括： 位置确定单元 410， 其中， 接收单元 402 还用于接收来自发送终端的 人脸图像的尺寸信息与位置信息， 位置确定单元 410 用于根据尺寸信息和位置信息确定人脸 图像在当前图像帧中的尺寸与位置。

发送终端还可以获取人脸图像在当前图像帧中的尺寸信息和位置信息， 从而在将编码后 的图像发送至接收终端的同时， 将其中人脸图像的尺寸信息和位置信息也发送至接收终端， 使得接收终端可以根据接收到的尺寸信息和位置信息准确地确定人脸图像在图像帧中的尺寸 和位置， 从而准确地还原发送终端发送的原图像帧。

优选地， 还包括： 图像帧确定单元 412， 其中， 接收单元 402 还用于接收来自发送终端 的移动指令， 图像帧确定单元 412 用于根据移动指令对应的预设方式移动当前图像帧中的人 脸图像， 并将移动后的当前图像帧作为当前图像帧的下一图像帧。 若当前图像帧的下一图像帧中的人脸图像相对于当前图像帧中的人脸图像只是按照预设 方式进行了移动， 比如视频通信过程中， 视频发送端的用户的头像仅发生了水平移动 （比如 水平靠近摄像头， 或水平远离摄像头） ， 或者在竖直方向上发生移动， 或者在原垂直平面内 发生了转动， 那么发送终端可以针对每种移动方式生成相应的指令， 比如针对水平移动可以 生成水平移动指令， 使得接收终端中的人脸图像也发送相应的水平移动， 而无需发送终端将 下一图像帧传输至接收终端， 在不影响用户体验的情况下， 有效地降低了数据传输量。

本申请还提出了一种图像编码、 解码系统， 包括上述如图 3所示的终端 300和如图 4所 示的终端 400

图 5示出了根据本发明的实施例的图像编码方法的具体示意流程图。

如图 5所示， 根据本发明的实施例的图像编码方法的具体包括：

步骤 502， 发送终端 （可以是如图 3 所示的终端 300 ) 获取 （比如从图像采集设备中获 取） 待发送至接收终端 （可以是如图 4所示的终端 400 ) 的视频序列。

步骤 504， 发送终端判断视频序列的当前图像帧中是否含有人脸图像， 若存在人脸图像 则进入步骤 506， 若不存在人脸图像， 则进入步骤 514

步骤 506， 若存在人脸图像， 则获取人脸图像在当前图像帧中的位置信息 （比如坐标） 和尺寸信息 （比如长、 宽数值） ， 位置信息和尺寸信息所占的数据量很小， 通过传输较小数 据量的信息， 就可以使得接收终端以较高的还原度还原原图像帧。

步骤 508， 判断人脸图像中是否含有正脸图像， 具体地， 可以根据处于水平的双眼的距 离自相应待识别的人脸图像中截取出相应人脸部分， 然后根据所截取出的相应人脸部分生成 与所述人脸部分相应的镜像人脸， 根据所述人脸部分与镜像人脸对应各像素点灰度值的灰度 值计算两图像之间的差异信息， 将将计算出的差异信息与预设的阀值进行比较以判断所述待 识别的人脸图像包含的人脸是否为正脸。

步骤 510， 若人脸图像中不存在正脸图像 （即人脸图像都是非正脸图像， 其中具体可以 是侧脸图像， 或者是正脸图像， 但是左半边脸和右半边脸的差距较大） ， 则通过第一编码方 式对人脸图像进行编码， 通过第二编码方式对非人脸图像进行编码， 并对编码后的信息进行 标记。

步骤 512， 若存在正脸图像， 则获取正脸图像的一半图像 （具体可以是沿着人脸图像中 双眼连线的中垂线分割图像， 取分割后的两份图像中的一份） ， 并计算一半图像图另一半图 像的差异数据， 通过第一编码方式对差异数据和所取的一半图像进行编码， 通过第二编码方 式对非正脸图像和非人脸图像进行编码， 对编码后的信息进行标记。

步骤 514， 若当前图像帧中不存在人脸图像 （说明都是背景图像） ， 则通过第二编码方 式对当前图像帧中的图像进行编码。

步骤 516， 发送终端将编码后的将编码后的信息、 位置信息、 尺寸信息传输至接收终端 (若有标记信息也将标记信息传输至接收终端） 。

图 6示出了根据本发明的实施例的图像解码方法的具体示意流程图。

如图 6所示， 根据本发明的实施例的图像解码方法具体包括：

步骤 602， 接收终端接收发送终端发送的当前图像帧的相关信息， 即编码后的图像信息。 步骤 604， 根据不同信息分别对应的标识， 确定不同类型的信息， 比如标识 00对应的信 息为正脸信息。

步骤 606， 对于非正脸信息和非人脸信息， 根据其编码方式以相应的解码方式进行解码。 步骤 608， 对于正脸信息， 以相应的解码方式进行解码， 得到一半正脸图像和差异数 据， 根据一半正脸图像和差异数据计算出另一半图像。

步骤 610， 将一半正脸图像和另一半正脸图像合成为一张正脸图像。

步骤 612， 根据尺寸信息和位置信息显示正脸图像、 非正脸图像和非人脸图像， 从而完 成对当前图像帧的还原。

根据本发明的实施方式， 还提供了一种存储在非易失性机器可读介质上的程序产品， 用 于图像编码， 程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 判断待传输 至接收终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 若存在至 少一个正脸图像， 则将至少一个正脸图像中的每个正脸图像沿正脸图像的双眼连线的中垂线 进行分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数据； 通过第 一编码方式对正脸图像中的任一半正脸图像和差异数据进行编码得到正脸信息， 并将正脸信 息传输至接收终端。

根据本发明的实施方式， 还提出了一种存储在非易失性机器可读介质上的程序产品， 用 于图像解码， 程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 接收来自发 送终端的正脸信息， 其中， 正脸信息包含发送终端的当前图像帧中的人脸图像中每个正脸图 像的一半正脸图像和一半正脸图像与另一半正脸图像的差异数据； 通过第一解码方式对正脸 信息进行解码， 得到每个正脸图像中一半正脸图像和差异数据； 根据一半正脸图像和差异数 据得到另一半正脸图像， 并根据一半正脸图像和另一半正脸图像得到正脸图像。

根据本发明的实施方式， 还提出了一种存储在非易失性机器可读介质上的程序产品， 用 于图像编码、 解码， 包括上述两种程序产品。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像编码的程 序产品， 程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 判断待传输至接 收终端的视频序列中， 当前图像帧的人脸图像中是否存在至少一个正脸图像； 若存在至少一 个正脸图像， 则将至少一个正脸图像中的每个正脸图像沿正脸图像的双眼连线的中垂线进行 分割， 并计算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数据； 通过第一编 码方式对正脸图像中的任一半正脸图像和差异数据进行编码得到正脸信息， 并将正脸信息传 输至接收终端。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像解码的程 序产品， 程序产品包括用于使计算机系统执行以下步骤的机器可执行指令： 接收来自发送终 端的正脸信息， 其中， 正脸信息包含发送终端的当前图像帧中的人脸图像中每个正脸图像的 一半正脸图像和一半正脸图像与另一半正脸图像的差异数据； 通过第一解码方式对正脸信息 进行解码， 得到每个正脸图像中一半正脸图像和差异数据； 根据一半正脸图像和差异数据得 到另一半正脸图像， 并根据一半正脸图像和另一半正脸图像得到正脸图像。

根据本发明的实施方式， 还提供了一种非易失机器可读介质， 存储有用于图像编码、 解 码的程序产品， 程序产品包括上述两种程序产品。

根据本发明的实施方式， 还提供了一种机器可读程序， 程序使机器执行如上技术方案中 任一的图像编码、 解码方法。

根据本发明的实施方式， 还提供了一种存储有机器可读程序的存储介质， 其中， 机器可 读程序使得机器执行如上技术方案中任一的图像编码、 解码方法。

以上结合附图详细说明了本发明的技术方案， 考虑到相关技术中， 图像编码方式没有充 分地考虑人脸的成像角度等信息， 难以进一步降低图像帧编码后的信息量， 而且无法恢复原 图像帧。 通过本申请的技术方案， 能够在进行图像传输过程中， 进一步减小传输所占的带 宽， 提高用户对于图像传输的体验， 并且能够使得图像接收端恢复原图像帧。

在本发明中， 术语 "第一" 、 "第二" 、 "第三" 仅用于描述目的， 而不能理解为指示 或暗示相对重要性。 术语 "多个" 指两个或两个以上， 除非另有明确的限定。

以上所述仅为本发明的优选实施例而已， 并不用于限制本发明， 对于本领域的技术人员 来说， 本发明可以有各种更改和变化。 凡在本发明的精神和原则之内， 所作的任何修改、 等 同替换、 改进等， 均应包含在本发明的保护范围之内。

Claims

权 利 要 求 书

1. 一种图像编码方法， 其特征在于， 包括：

步骤 102 , 判断待传输至接收终端的视频序列中， 当前图像帧的人脸图像中是否 存在至少一个正脸图像；

步骤 104 , 若存在至少一个正脸图像， 则将所述至少一个正脸图像中的每个正脸 图像沿所述正脸图像的双眼连线的中垂线进行分割， 并计算分割后的正脸图像中一半 正脸图像与另一半正脸图像的差异数据；

步骤 106 , 通过第一编码方式对所述正脸图像中的任一半正脸图像和所述差异数 据进行编码得到正脸信息， 并将所述正脸信息传输至所述接收终端。

2. 根据权利要求 1 所述的图像编码方法， 其特征在于， 还包括： 通过第二编码 方式对所述当前图像帧中人脸图像中非正脸图像， 以及所述当前图像帧中非人脸图像 进行编码得到次要信息， 将所述次要信息传输至所述接收终端。

3. 根据权利要求 2 所述的图像编码方法， 其特征在于， 还包括： 通过第一标识 对所述正脸信息进行标记， 通过第二标识对所述非正脸信息和所述非人脸信息进行标 记， 将所述第一标识和所述第二标识传输至所述接收终端。

4. 根据权利要求 1 至 3 中任一项所述的图像编码方法， 其特征在于， 还包括： 获取所述人脸图像在所述当前图像帧中的尺寸信息与位置信息， 并将所述位置信息与 所述尺寸信息传输至所述接收终端。

5. 根据权利要求 1 至 3 中任一项所述的图像编码方法， 其特征在于， 还包括： 判断所述当前图像帧的下一图像帧中的人脸图像是否按照预设方式进行了移动， 若按 照所述预设方式进行了移动， 则根据所述预设方式生成相应的移动指令， 并将所述移 动指令传输至所述接收终端， 以使所述接收终端以所述预设方式移动所述接收终端的 当前图像帧中的人脸图像， 并将移动后的所述接收终端的当前图像帧作为所述接收终 端的下一图像帧。

6. 一种图像解码方法， 其特征在于， 包括：

步骤 202 , 接收来自发送终端的正脸信息， 其中， 所述正脸信息包含所述发送终 端的当前图像帧中的人脸图像中每个正脸图像的一半正脸图像和所述一半正脸图像与 另一半正脸图像的差异数据；

步骤 204 , 通过第一解码方式对所述正脸信息进行解码， 得到所述每个正脸图像 中一半正脸图像和所述差异数据；

步骤 206 , 根据所述一半正脸图像和所述差异数据得到所述另一半正脸图像， 并 根据所述一半正脸图像和所述另一半正脸图像得到所述正脸图像。

7. 根据权利要求 6 所述的图像解码方法， 其特征在于， 还包括： 接收来自所述 发送终端的非正脸信息和非人脸信息， 通过第二解码方式对所述非正脸信息和所述非 人脸信息进行解码， 得到所述当前图像帧的人脸图像中的非正脸图像以及所述当前图 像帧中的非人脸图像。

8. 根据权利要求 7 所述的图像解码方法， 其特征在于， 还包括： 根据来自所述 发送终端的第一标识确定所述正脸信息， 根据来自所述发送终端的第二标识确定所述 非正脸信息和所述非人脸信息。

9. 根据权利要求 6 至 8 中任一项所述的图像解码方法， 其特征在于， 还包括： 接收来自所述发送终端的所述人脸图像的尺寸信息与位置信息， 并根据所述尺寸信息 和所述位置信息确定所述人脸图像在所述当前图像帧中的尺寸与位置。

10. 根据权利要求 6至 8 中任一项所述的图像解码方法， 其特征在于， 还包括： 接收来自所述发送终端的移动指令， 并根据所述移动指令对应的预设方式移动所述当 前图像帧中的人脸图像， 并将移动后的所述当前图像帧作为所述当前图像帧的下一图 像帧。

1 1. 一种图像编码、 解码方法， 其特征在于， 包括权利要求 1至 5 中任一项所述 的图像编码方法， 以及权利要求 6至 10中任一项所述的图像解码方法。

12. 一种终端， 其特征在于， 包括：

判断单元， 用于判断待传输至接收终端的视频序列中， 当前图像帧的人脸图像中 是否存在至少一个正脸图像；

差异计算单元， 用于在所述判断单元判定存在至少一个正脸图像时， 将所述至少 一个正脸图像中的每个正脸图像沿所述正脸图像的双眼连线的中垂线进行分割， 并计 算分割后的正脸图像中一半正脸图像与另一半正脸图像的差异数据；

编码单元， 用于通过第一编码方式对所述正脸图像中的任一半正脸图像和所述差 异数据进行编码得到正脸信息；

传输单元， 用于将所述正脸信息传输至所述接收终端。

13. 根据权利要求 12 所述的终端， 其特征在于， 所述编码单元还用于通过第二 编码方式对所述当前图像帧中人脸图像中非正脸图像， 以及所述当前图像帧中非人脸 图像进行编码得到次要信息； 所述传输单元还用于将所述次要信息传输至所述接收终 端。

14. 根据权利要求 13所述的终端， 其特征在于， 还包括：

标记单元， 用于通过第一标识对所述正脸信息进行标记， 通过第二标识对所述非 正脸信息进行标记和所述非人脸信息进行标记，

其中， 所述传输单元还用于将所述第一标识和所述第二标识传输至所述接收终 端。

15. 根据权利要求 12至 14中任一项所述的终端， 其特征在于， 还包括： 获取单元， 用于获取所述人脸图像在所述当前图像帧中的尺寸信息与位置信息， 其中， 所述传输单元还用于将所述位置信息与所述尺寸信息传输至所述接收终 端。

16. 根据权利要求 12至 14中任一项所述的终端， 其特征在于， 还包括： 指令生 成单元，

其中， 所述判断单元还用于判断所述当前图像帧的下一图像帧中的人脸图像是否 按照预设方式进行了移动； 所述指令生成单元在所述判断单元判定按照所述预设方式 进行了移动， 根据所述预设方式生成相应的移动指令； 所述传输单元还用于将所述移 动指令传输至所述接收终端， 以使所述接收终端以所述预设方式移动所述接收终端的 当前图像帧中的人脸图像， 并将移动后的所述接收终端的当前图像帧作为所述接收终 端的下一图像帧。

17. 一种终端， 其特征在于， 包括：

接收单元， 用于接收来自发送终端的正脸信息， 其中， 所述正脸信息包含所述发 送终端的当前图像帧中的人脸图像中每个正脸图像的一半正脸图像和所述一半正脸图 像与另一半正脸图像的差异数据；

解码单元， 用于通过第一解码方式对所述正脸信息进行解码， 得到所述每个正脸 图像中一半正脸图像和所述差异数据；

图像处理单元， 用于所述一半正脸图像和所述差异数据得到所述另一半正脸图 像， 并根据所述一半正脸图像和所述另一半正脸图像得到所述正脸图像。

18. 根据权利要求 17所述的终端， 其特征在于， 所述接收单元用于接收来自所述 发送终端的非正脸信息和非人脸信息； 所述解码单元用于通过第二解码方式对所述非 正脸信息和所述非人脸信息进行解码， 得到所述当前图像帧的人脸图像中的非正脸图 像以及所述当前图像帧中的非人脸图像。

19. 根据权利要求 18所述的终端， 其特征在于， 还包括：

标识识别单元， 用于根据来自所述发送终端的第一标识确定所述正脸信息， 根据 来自所述发送终端的第二标识确定所述非正脸信息和所述非人脸信息。

20. 根据权利要求 17至 19中任一项所述的终端， 其特征在于， 还包括： 位置确定单元，

其中， 所述接收单元还用于接收来自所述发送终端的所述人脸图像的尺寸信息与 位置信息， 所述位置确定单元用于根据所述尺寸信息和所述位置信息确定所述人脸图 像在所述当前图像帧中的尺寸与位置。

21. 根据权利要求 17至 19中任一项所述的终端， 其特征在于， 还包括： 图像帧确定单元，

其中， 所述接收单元还用于接收来自所述发送终端的移动指令， 所述图像帧确定 单元用于根据所述移动指令对应的预设方式移动所述当前图像帧中的人脸图像， 并将 移动后的所述当前图像帧作为所述当前图像帧的下一图像帧。

22.一种图像编码、 解码系统， 其特征在于， 包括权利要求 12至 16 中任一项所 述的终端， 以及权利要求 17至 21中任一项所述的终端。