CN108965882A - 一种编解码方法及装置 - Google Patents

一种编解码方法及装置 Download PDF

Info

Publication number
CN108965882A
CN108965882A CN201810601923.0A CN201810601923A CN108965882A CN 108965882 A CN108965882 A CN 108965882A CN 201810601923 A CN201810601923 A CN 201810601923A CN 108965882 A CN108965882 A CN 108965882A
Authority
CN
China
Prior art keywords
image
code stream
concealed
region
corresponding code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810601923.0A
Other languages
English (en)
Other versions
CN108965882B (zh
Inventor
林聚财
殷俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN201810601923.0A priority Critical patent/CN108965882B/zh
Publication of CN108965882A publication Critical patent/CN108965882A/zh
Application granted granted Critical
Publication of CN108965882B publication Critical patent/CN108965882B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4405—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video stream decryption

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种编码方法及装置，所述方法包括：将第二图像、每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型进行编码，得到每个码流；将每个码流写入保留字段中。在本发明实施例中，针对高级权限用户，其可以获取保留字段中的数据，从而获取每个码流，对编码处理后的每个第三图像、每个待隐藏区域的位置信息进行解码。基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像。然后根据每个待隐藏区域的位置信息，可以将第二图像和每个第三图像进行融合，从而得到恢复后的原始图像。实现对隐藏区域的恢复。

Description

一种编解码方法及装置
技术领域
本发明涉及编解码技术领域，尤其涉及一种编解码方法及装置。
背景技术
随着经济社会的日益发展，对多媒体的安全隐私要求日益凸显，为了实现媒体的安全隐私，我们通常需要对图像或视频中关键的人脸区域、车牌区域等进行各种方式的保护，其主要目的是当别人播放视频时无法根据视频解码得到的图像视频观察到用户期望隐藏的内容，同时要保证清晰观看非隐藏内容。
现有区域隐藏编码方案主要包括以下步骤：(1)对视频的I帧和P帧进行解码，以分别获取I帧块的帧内预测模式和P帧块的运动向量；(2)根据I帧块的帧内预测模式并结合I帧的隐私区域范围判断I帧块是否是I帧补偿块，如果是则转入步骤(4)，否则过程结束；(3)根据P帧块的运动向量并结合P帧的隐私区域范围判断P帧块是否是P帧补偿块，如果是则转入步骤(4)，否则过程结束；(4)获取并存储I帧补偿块或P帧补偿块的亮度值；(5)再次对视频的I帧和P帧进行解码，在解码过程中扰乱I帧或P帧的隐私区域中I帧块或P帧块的非零系数符号位，并获取和存储I帧补偿块或P帧补偿块的错误亮度值；(6)将步骤(4)获取的亮度值减去步骤(5)获取的错误亮度值，并根据H.264标准对差值进行整数变换和量化，以生成压缩域补偿信号，并对压缩域补偿信号进行熵编码。
根据现有区域隐藏编码方案可知，对于隐藏区域的宏块，需要对原始码流中变换量化后的残差信息中的AC分量进行随机的抽取并将残差做少量修改，比如残差符号的修改，然后将原始残差和修改后的残差的插值进一步传递过去，通过这种方式将隐藏区域的纹理在解码端解码时显示成非真正原始纹理。这种方法区域隐藏效果好，但是存在的问题是，这种方法对于隐藏区域的隐藏是单向不可逆的，无法在需要时对隐藏区域进行恢复。
发明内容
本发明实施例提供了一种编解码方法及装置，用以解决现有技术中无法在需要时对隐藏区域进行恢复的问题。
本发明实施例提供了一种编码方法，所述方法包括：
将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；
将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；
针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
进一步地，所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
进一步地，所述保留字段包括：
辅助增强信息SEI中有效载重payload为保留字类型的payload_type；或
保留字的网络抽象层单元NALU。
进一步地，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
进一步地，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
进一步地，如果所述保留字段为保留字的NALU，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
进一步地，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
进一步地，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中之后，所述方法还包括：
对所述保留字段中的数据进行加密处理。
另一方面，本发明实施例提供了一种解码方法，所述方法包括：
对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流；
基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像；
根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
进一步地，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对第二图像对应的码流中的SEI的保留字payload中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
进一步地，如果所述保留字段为保留字的NALU，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
进一步地，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析之前，所述方法还包括：
判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；
如果是，对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解密处理，并进行后续步骤，如果否，直接进行后续步骤。
再一方面，本发明实施例提供了一种编码装置，所述装置包括：
更新模块，用于将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；
编码模块，用于将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；
第一融合模块，用于针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
进一步地，所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
进一步地，所述保留字段包括：
辅助增强信息SEI中payload为保留字类型的payload_type；或
保留字的网络抽象层单元NALU。
进一步地，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述第一融合模块，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
进一步地，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
进一步地，如果所述保留字段为保留字的NALU，所述第一融合模块，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
进一步地，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
进一步地，所述装置还包括：
加密模块，用于对所述保留字段中的数据进行加密处理。
再一方面，本发明实施例提供了一种解码装置，所述装置包括：
解析模块，用于对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流；
解码模块，用于基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像；
第二融合模块，用于根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
进一步地，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述解析模块，具体用于对第二图像对应的码流中的SEI的保留字payload中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
进一步地，如果所述保留字段为保留字的NALU，所述解析模块，具体用于对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
进一步地，所述装置还包括：
解密模块，用于判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；如果是，对编码处理后的第二图像对应的码流中的保留字段中的数据进行解密处理，并触发解析模块，如果否，直接触发解析模块。
本发明实施例提供了一种编码方法及装置，所述方法包括：将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
在本发明实施例中，针对高级权限用户，其可以获取保留字段中的数据，从而获取每个第三图像对应的码流、每个第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流，对所述通道号和编码类型分别对应的码流进行解析，得到每个第三图像对应的通道号和编码类型，基于所述通道号和编码类型，对编码处理后的每个第三图像进行解码，并对每个待隐藏区域的位置信息对应的码流进行解码处理。并且可以获取保存的第二图像对应的通道号和编码类型，基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像。然后根据每个待隐藏区域的位置信息，可以将第二图像和每个第三图像进行融合，从而得到恢复后的原始图像。实现对隐藏区域的恢复。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例1提供的编码过程示意图；
图2为本发明实施例6提供的解码过程示意图；
图3为本发明实施例9提供的编解码过程示意图；
图4为本发明实施例提供的编码装置结构示意图；
图5为本发明实施例提供的解码装置结构示意图。
具体实施方式
下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
实施例1：
图1为本发明实施例提供的一种编码过程示意图，该过程包括以下步骤：
S101：将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像。
本发明实施例提供的编码方法应用于电子设备，该电子设备可以是PC、个人电脑等设备，也可以是图像采集设备，只要电子设备中包含编码器即可。
电子设备针对待编码的第一图像，可以获取第一图像中的待隐藏区域，待隐藏区域可以是人脸区域、机动车区域、车牌区域等等。待隐藏区域的数量可以是一个，也可以是多个，在本发明实施例中，不对待隐藏区域的数量进行限定。根据需要，还可以对待隐藏区域进行自定义设置，例如，可以将图像中的某个人脸区域作为一个待隐藏区域；也可以将某个人脸图像和某个机动车区域作为一个待隐藏区域。其中，获取第一图像中的待隐藏区域的过程属于现有技术，在此不对该过程进行赘述。
电子设备中保存有预设的第一像素值，将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像。第二图像中除每个待隐藏区域外的背景区域显示出原始图像信息，每个待隐藏区域显示隐藏后的图像信息。
电子设备中保存有预设的第二像素值，预设的第二像素值和预设的第一像素值可以相同也可以不同。针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像。第三图像中该待隐藏区域显示出原始图像信息，该待隐藏区域之外的部分显示隐藏后的图像信息。
另外，在确定第二图像时，也可以对第一图像中每个待隐藏区域进行其他的模糊处理，例如马赛克处理等，只要能对第二图像中的每个待隐藏区域进行隐藏即可。在确定每个第三图像时，针对每个待隐藏区域，也可以对第一图像中该除待隐藏区域之外的区域进行其他的模糊处理，例如马赛克处理等，只要能对第三图像中的除该待隐藏区域之外的区域进行隐藏即可。
S102：将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流。
电子设备在确定出第二图像和每个第三图像之后，可以采用对应的编码通道对第二图像和每个第三图像进行编码。另外，电子设备还可以获取每个待隐藏区域的位置信息，例如获取每个待隐藏区域的最小外接矩形，针对每个待隐藏区域，该待隐藏区域的位置信息可以是待隐藏区域的最小外接矩形起始像素点的坐标信息(x，y)和最小外接矩形的宽高(width，height)。电子设备也可以采用对应的编码通道对每个待隐藏区域的位置信息也进行编码。电子设备对第二图像、每个第三图像以及每个待隐藏区域的位置信息进行编码，得到对应的每个码流。其中，第二图像、每个第三图像以及每个待隐藏区域的位置信息分别对应的编码通道可以相同，较佳的，可以采用不同的编码通道对第二图像、每个第三图像以及每个待隐藏区域的位置信息分别进行编码。例如，电子设备采用N个编码通道分别对第二图像和每个第三图像进行编码，采用第N+1个编码通道对每个待隐藏区域的位置信息进行编码。
其中，每个编码通道的编码类型可以是相同的，也可以是不同的。例如，对第二图像编码的编码通道的编码类型为H.264，对第三图像编码的编码通道的编码类型为H.265等等。
另外，对于视频中的每帧第一图像，都需要分解成第二图像和每个第三图像进行后续编码，在采用N个编码通道分别对第二图像和每个第三图像进行编码时，需要对第二图像和每个第三图像进行连续独立编码。即如果当前第一图像为第i帧图像，在对第i帧图像对应的第二图像和每个第三图像进行编码时，需要以第i-1帧图像对应的每个编码通道的第二图像和每个第三图像为参考，进行编码。
S103：针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
第三图像是基于对应的待隐藏区域来确定的，电子设备对第二图像、每个第三图像以及每个待隐藏区域的位置信息编码后，针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。在本发明实施例中，第二图像对应的码流标准可以是任何一种包括保留字的码流标准，保留字段可以是JPEG中的app头，可以是AVS/AVS2中的扩展数据定义，包括已有标准和未来H.266或AV1等标准中的各个扩展保留字段区域。并且电子设备采用现有的技术手段可以将第二图像对应的通道号和编码类型进行保存。
针对普通权限用户，无法获取保留字段中的数据，只能基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像，解码后的第二图像中每个待隐藏区域无法显示出原始的图像信息。
在本发明实施例中，针对高级权限用户，其可以获取保留字段中的数据，从而获取每个第三图像对应的码流、每个第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流，对所述通道号和编码类型分别对应的码流进行解析，得到每个第三图像对应的通道号和编码类型，基于所述通道号和编码类型，对编码处理后的每个第三图像进行解码，并对每个待隐藏区域的位置信息对应的码流进行解码处理。并且可以获取保存的第二图像对应的通道号和编码类型，基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像。然后根据每个待隐藏区域的位置信息，可以将第二图像和每个第三图像进行融合，从而得到恢复后的原始图像。实现对隐藏区域的恢复。
实施例2：
在上述实施例的基础上，在本发明实施例中，所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
在本发明实施例中，待隐藏区域的位置信息包括待隐藏区域的最小外接矩形区域的顶点坐标信息，例如，待隐藏区域的最小外接矩形区域的顶点分别为A，B，C，D。四个顶点的坐标信息分别为A(x1，y1)，B(x2，y2)，C(x3，y3)，D(x4，y4)。
或者待隐藏区域的位置信息包括待隐藏区域掩膜图。待隐藏区域掩膜图可以进行任意不规则区域的表示，无论待隐藏区域的形状如何，只要将待隐藏区域和非待隐藏区域用不同的像素值表示即可。例如，待隐藏区域掩膜图中非待隐藏区域的像素值为0，待隐藏区域的像素值为255。需要说明的是，本发明实施例中不对待隐藏区域的数量进行限定，当待隐藏区域的数量为多个时，只要保证任意两个待隐藏区域的像素值不同即可。例如，待隐藏区域的数量为3个，则待隐藏区域掩膜图中非待隐藏区域的像素值为0，第一个待隐藏区域的像素值为64，第二个待隐藏区域的像素值为128，第三个待隐藏区域的像素值为255。上述具体的像素值仅是其中的一个例子，本发明实施例不对具体的像素值进行限定，只要能够区分出每个待隐藏区域即可。
如果待隐藏区域的位置信息包括待隐藏区域的最小外接矩形区域的顶点坐标信息，则将顶点坐标信息进行编码，并写入第二图像对应的码流中的保留字段中，此时不需要基于通道号和编码类型进行编码，只需采用现有的编码方法，将顶点坐标信息编码成对应的码流即可；如果待隐藏区域的位置信息包括待隐藏区域掩膜图，则将待隐藏区域掩膜图进行编码，并写入第二图像对应的码流中的保留字段中，此时需要确定对待隐藏区域掩膜图进行编码的通道号和编码类型，并将通道号和编码类型进行编码形成码流，并写入第二图像对应的码流标准中的保留字段中，在解码时，可以基于待隐藏区域掩膜图对应的通道号和编码类型，对待隐藏区域掩膜图进行解码，得到待隐藏区域的位置信息。
另外，在本发明实施例中，所述保留字段包括：
辅助增强信息(Supplement Enhancement Information，SEI)中payload为保留字类型的payload_type；或
保留字的网络抽象层单元(Network Abstract Layer Unit，NALU)。
实施例3：
在上述各实施例的基础上，在本发明实施例中，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
在本发明实施例中，采用编码通道1对第二图像进行编码，采用编码通道2-N分别对每个第三图像进行编码，采用编码通道N+1对每个待隐藏区域的位置信息进行编码，此时的待隐藏区域的位置信息为待隐藏区域掩膜图。将编码后每个第三图像对应的码流，每个第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流以及待隐藏区域的位置信息对应的通道号和编码类型对应的码流写入第二图像对应的码流标准的SEI保留字的payload中。
具体的，每个第三图像对应的每个码流、每个待隐藏区域的位置信息对应的每个码流、以及每个第三图像和每个待隐藏区域的位置信息分别对应的通道号和编码类型对应的码流中包括多个NALU，每个NALU包括NALU head和NALU body两部分内容。针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU中的NALU head数据和NALU body数据，以及该第三图像对应的待隐藏区域的位置信息对应的通道号和编码类型对应的码流中的NALU head数据和NALU body数据写入第二图像对应的码流标准中的SEI保留字的payload中。payload用payload_type和payload size表示，payload_type表示该payload的类型，payload size表示该payload的大小。其中，表示该payload的payload_type为保留字段中的值。
所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
实施例4：
在上述各实施例的基础上，在本发明实施例中，如果所述保留字段为保留字的NALU，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
在本发明实施例中，每个第三图像对应的每个码流、每个待隐藏区域的位置信息对应的每个码流、以及每个第三图像和每个待隐藏区域的位置信息分别对应的通道号和编码类型对应的码流中包括多个NALU，每个NALU包括NALU head和NALU body两部分内容。针对每个第三图像，去除该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU中的NALU head数据，去除该第三图像对应的待隐藏区域的位置信息对应的通道号和编码类型对应的码流中的NALU head数据，并保留每个NALU的NALU body中的数据。然后将每个NALU的NALU body中的数据写入第二图像对应的码流标准中的保留字的NALU，其中，每个NALU的NALU head采用第二图像对应的码流标准中的保留字的NALU head。保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
其中，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
实施例5：
为了保证数据的安全性，在上述各实施例的基础上，在本发明实施例中，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中之后，所述方法还包括：
对所述保留字段中的数据进行加密处理。
在本发明实施例中，可以采用现有的数据加密算法对保留字段中的数据进行加密处理。其中数据加密算法可以是AES算法、RSA/ECC算法、Diffie-hellman算法、SHA-1/SHA-256算法等等。
实施例6：
在上述各实施例的基础上，本发明实施例提供了一种解码方法，图2为本发明实施例提供的解码过程示意图，该过程包括以下步骤：
S201：对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流。
本发明实施例提供的解码方法应用于电子设备，该电子设备可以是PC、个人电脑等设备，也可以是图像采集设备，只要电子设备中包含解码器即可。
针对普通权限用户，无法获取保留字段中的数据，只能基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像，解码后的第二图像中每个待隐藏区域无法显示出原始的图像信息。
而对于高级权限用户，可以获取保留字段中的数据，具体的，高级权限用户可以向电子设备发送恢复隐藏区域的指示信息，电子设备接收到指示信息后，电子设备中的编码器将对编码处理后的第二图像对应的码流标准中的保留字段中的数据发送到解码器，解码器可以对编码处理后的第二图像对应的码流中的保留字段中的数据进行解析，从而获取保留字段中的每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流。
S202：基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像。
通过对每个第三图像对应的通道号和编码类型对应的码流进行解析，可以得到通道号和编码类型，基于每个第三图像对应的通道号和编码类型，分别对每个第三图像对应的码流进行解码处理，从而得到解码处理后的每个第三图像。
如果待隐藏区域的位置信息为待隐藏区域的最小外接矩形区域的顶点坐标信息，则直接对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息；如果待隐藏区域的位置信息为待隐藏区域掩膜图，则需要解析出待隐藏区域的位置信息对应的通道号和编码类型，基于通道号和编码类型对待隐藏区域的位置信息对应的码流进行解码，得到每个待隐藏区域的位置信息。
并且，基于电子设备采用现有的技术手段保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像。
S203：根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
在得到解码处理后的第二图像、每个第三图像以及每个待隐藏区域的位置信息之后，根据每个待隐藏区域的位置信息，可以将解码处理后的第二图像和解码处理后的每个第三图像进行融合，从而得到完整图像，该完整图像中可以显示出每个待隐藏区域的原始图像信息和非待隐藏区域的原始图像信息。
其中，每个待隐藏区域的位置信息可以是待隐藏区域的最小外接矩形区域的顶点坐标信息；或者是待隐藏区域掩膜图。根据每个待隐藏区域的位置信息，可以将每个第三图像中的待隐藏区域，对应融合到第二图像中，从而得到恢复后的完整图像。
由于在本发明实施例中，针对高级权限用户，其可以获取保留字段中的数据，从而获取每个第三图像对应的码流、每个第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流，对所述通道号和编码类型分别对应的码流进行解析，得到每个第三图像对应的通道号和编码类型，基于所述通道号和编码类型，对编码处理后的每个第三图像进行解码，并对每个待隐藏区域的位置信息对应的码流进行解码处理。并且可以获取保存的第二图像对应的通道号和编码类型，基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像。然后根据每个待隐藏区域的位置信息，可以将第二图像和每个第三图像进行融合，从而得到恢复后的原始图像。实现对隐藏区域的恢复。
实施例7：
在上述各实施例的基础上，在本发明实施例中，保留字段包括：辅助增强信息SEI中payload为保留字类型的payload_type；或保留字的网络抽象层单元NALU。
如果所述保留字段为SEI中payload为保留字类型的payload_type，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对第二图像对应的码流中的SEI的payload中的数据进行解析，得到每个第三图像对应的码流、每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的NALU head中的数据，所述每个NALU的NALU body中的数据。如果待隐藏区域的位置信息为待隐藏区域掩膜图，通过解析还可以得到待隐藏区域的位置信息对应的通道号和编码类型对应的码流中的每个NALU的NALU head中的数据和NALU body中的数据。
由于在编码时，针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。在解码时，高级权限用户可以对第二图像对应的码流标准中的SEI的payload中的数据进行解析，得到每个NALU的NALU head中的数据，每个NALU的NALU body中的数据，基于每个NALU的NALU head中的数据，每个NALU的NALU body中的数据可以确定第三图像对应的通道号和编码类型，进而基于通道号和编码类型，分别对该第三图像对应的码流进行解码处理，得到解码处理后的第三图像，对该第三图像对应的待隐藏区域的位置信息对应的码流进行解码处理，得到待隐藏区域的位置信息。并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像。最后，根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
实施例8：
在上述各实施例的基础上，在本发明实施例中，如果所述保留字段为保留字的NALU，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
由于在编码时，针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，在解码时，高级权限用户可以对保留字的NALU中的数据进行解析，获取每个NALU的NALU head中的数据，每个NALU的NALU body中的数据，基于每个NALU的NALU head中的数据，每个NALU的NALU body中的数据可以确定第三图像对应的通道号和编码类型，进而基于通道号和编码类型，分别对该第三图像对应的码流进行解码处理，得到解码处理后的第三图像，对该第三图像对应的待隐藏区域的位置信息对应的码流进行解码处理，得到待隐藏区域的位置信息。并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像。最后，根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
实施例9：
在上述各实施例的基础上，在本发明实施例中，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析之前，所述方法还包括：
判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；
如果是，对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解密处理，并进行后续步骤，如果否，直接进行后续步骤。
由于在编码时，针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中之后，可以对保留字段中的数据进行加密处理。从而保证数据的安全，因此在解码时，对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析之前，先判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理，如果是，则先对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解密处理，再进行后续解码的过程，如果否，直接进行后续解码的过程。
其中，对数据进行加密和解密的过程属于现有技术，在此不对该过程进行赘述。
图3为本发明实施例提供的编解码过程示意图，如图3所示，在编码端，基于原始的编码图像，获取每个待隐藏区域的位置信息，基于每个待隐藏区域的位置信息，对原始图像进行分解，也就是得到第二图像和每个第三图像。将第二图像采用编码通道1进行编码，将每个第三图像分别采用编码通道2-N中对应的通道进行编码，每个待隐藏区域的位置信息采用编码通道N+1进行编码，然后以通道1为主码流进行码流融合，也就是将每个第三图像对应的码流、每个第三图像对应的每个待隐藏区域的位置信息对应的码流以及每个第三图像分别对应的通道号和编码类型对应的码流、每个第三图像分别对应的每个待隐藏区域的位置信息分别对应的通道号和编码类型对应的码流写入第二图像对应的码流中的保留字段中。
在解码端，码流进行解混合，也就是对保留字段中的数据进行解析，获取每个第三图像以及每个待隐藏区域的位置信息分别对应的码流、通道号和编码类型。也就是得到通道2-N+1，以及每个通道的编码类型。然后基于通道号2-N和通道号2-N对应的编码类型，分别对每个第三图像对应的码流进行解码处理，得到解码处理后的每个第三图像，也就是图3中的无隐藏解码重建图。基于通道N+1和对应的解码类型，对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息。并基于通道号1和对应编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像，也就是图3中的隐藏解码重建图。
图4为本发明实施例提供的编码装置结构示意图，该装置包括：
更新模块41，用于将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；
编码模块42，用于将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；
第一融合模块43，用于针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
所述保留字段包括：
辅助增强信息SEI中payload为保留字类型的payload_type；或
保留字的网络抽象层单元NALU。
如果所述保留字段为SEI中payload为保留字类型的payload_type，所述第一融合模块43，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
如果所述保留字段为保留字的NALU，所述第一融合模块43，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
所述装置还包括：
加密模块44，用于对所述保留字段中的数据进行加密处理。
图5为本发明实施例提供的解码装置结构示意图，该装置包括：
解析模块51，用于对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流；
解码模块52，用于基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像；
第二融合模块53，用于根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
如果所述保留字段为SEI中payload为保留字类型的payload_type，所述解析模块51，具体用于对第二图像对应的码流中的SEI的保留字payload中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
如果所述保留字段为保留字的NALU，所述解析模块51，具体用于对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
所述装置还包括：
解密模块54，用于判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；如果是，对编码处理后的第二图像对应的码流中的保留字段中的数据进行解密处理，并触发解析模块51，如果否，直接触发解析模块51。
在本发明实施例中，针对高级权限用户，其可以获取保留字段中的数据，从而获取每个第三图像对应的码流、每个第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流，对所述通道号和编码类型分别对应的码流进行解析，得到每个第三图像对应的通道号和编码类型，基于所述通道号和编码类型，对编码处理后的每个第三图像进行解码，并对每个待隐藏区域的位置信息对应的码流进行解码处理。并且可以获取保存的第二图像对应的通道号和编码类型，基于保存的第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码后的第二图像。然后根据每个待隐藏区域的位置信息，可以将第二图像和每个第三图像进行融合，从而得到恢复后的原始图像。实现对隐藏区域的恢复。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (24)

1.一种编码方法，其特征在于，所述方法包括：
将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；
将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；
针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
2.如权利要求1所述的方法，其特征在于，所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
3.如权利要求1所述的方法，其特征在于，所述保留字段包括：
辅助增强信息SEI中有效载重payload为保留字类型的payload_type；或
保留字的网络抽象层单元NALU。
4.如权利要求3所述的方法，其特征在于，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
5.如权利要求4所述的方法，其特征在于，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
6.如权利要求3所述的方法，其特征在于，如果所述保留字段为保留字的NALU，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中包括：
将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
7.如权利要求6所述的方法，其特征在于，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
8.如权利要求1所述的方法，其特征在于，所述将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中之后，所述方法还包括：
对所述保留字段中的数据进行加密处理。
9.一种基于权利要求1-8任一项所述的编码方法的解码方法，其特征在于，所述方法包括：
对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流；
基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像；
根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
10.如权利要求9所述的方法，其特征在于，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对第二图像对应的码流中的SEI的保留字payload中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
11.如权利要求9所述的方法，其特征在于，如果所述保留字段为保留字的NALU，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流包括：
对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
12.如权利要求9所述的方法，其特征在于，所述对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析之前，所述方法还包括：
判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；
如果是，对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解密处理，并进行后续步骤，如果否，直接进行后续步骤。
13.一种编码装置，其特征在于，所述装置包括：
更新模块，用于将第一图像中每个待隐藏区域内像素点的像素值更新为预设的第一像素值，得到第二图像；针对每个待隐藏区域，将第一图像中除该待隐藏区域之外的像素点的像素值更新为预设的第二像素值，得到对应的第三图像；
编码模块，用于将第二图像、每个第三图像以及每个待隐藏区域的位置信息分别采用对应的编码通道进行编码，得到对应的每个码流；
第一融合模块，用于针对每个第三图像，将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流写入第二图像对应的码流标准中的保留字段中。
14.如权利要求13所述的装置，其特征在于，所述待隐藏区域的位置信息包括：
待隐藏区域的最小外接矩形区域的顶点坐标信息；或
待隐藏区域掩膜图。
15.如权利要求13所述的装置，其特征在于，所述保留字段包括：
辅助增强信息SEI中payload为保留字类型的payload_type；或
保留字的网络抽象层单元NALU。
16.如权利要求15所述的装置，其特征在于，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述第一融合模块，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的SEI保留字的payload中，其中，表示所述payload的payload_type为保留字段中的值。
17.如权利要求16所述的装置，其特征在于，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
表示所述payload的payload_type为大于181的值。
18.如权利要求15所述的装置，其特征在于，如果所述保留字段为保留字的NALU，所述第一融合模块，具体用于将该第三图像对应的码流、该第三图像对应的待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据写入第二图像对应的码流标准中的保留字的NALU，其中，所述保留字的NALU采用第二图像对应的码流标准中的保留字段进行表示。
19.如权利要求18所述的装置，其特征在于，所述第二图像对应的码流标准包括：H.264标准或H.265标准；
如果第二图像对应的码流标准为H.264标准，所述第二图像对应的码流标准中的保留字段为22-31中的值；
如果第二图像对应的码流标准为H.265标准，所述第二图像对应的码流标准中的保留字段为41-63中的值。
20.如权利要求13所述的装置，其特征在于，所述装置还包括：
加密模块，用于对所述保留字段中的数据进行加密处理。
21.一种基于权利要求13-20任一项所述的编码装置的解码装置，其特征在于，所述装置包括：
解析模块，用于对编码处理后的第二图像对应的码流标准中的保留字段中的数据进行解析，获取每个第三图像以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流；
解码模块，用于基于所述通道号和编码类型，分别对每个第三图像进行解码处理，并对每个待隐藏区域的位置信息对应的码流进行解码处理，得到每个待隐藏区域的位置信息、解码处理后的每个第三图像，并基于第二图像对应的通道号和编码类型，对编码处理后的第二图像进行解码处理，得到解码处理后的第二图像；
第二融合模块，用于根据每个待隐藏区域的位置信息，将解码处理后的第二图像和解码处理后的每个第三图像进行融合，得到恢复后的完整图像。
22.如权利要求21所述的装置，其特征在于，如果所述保留字段为SEI中payload为保留字类型的payload_type，所述解析模块，具体用于对第二图像对应的码流中的SEI的保留字payload中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
23.如权利要求21所述的装置，其特征在于，如果所述保留字段为保留字的NALU，所述解析模块，具体用于对保留字的NALU中的数据进行解析，得到每个第三图像、以及每个第三图像对应的每个待隐藏区域的位置信息、通道号和编码类型分别对应的码流中的每个NALU的数据。
24.如权利要求21所述的装置，其特征在于，所述装置还包括：
解密模块，用于判断编码处理后的第二图像对应的码流标准中的保留字段中的数据是否经过加密处理；如果是，对编码处理后的第二图像对应的码流中的保留字段中的数据进行解密处理，并触发解析模块，如果否，直接触发解析模块。
CN201810601923.0A 2018-06-12 2018-06-12 一种编解码方法及装置 Active CN108965882B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810601923.0A CN108965882B (zh) 2018-06-12 2018-06-12 一种编解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810601923.0A CN108965882B (zh) 2018-06-12 2018-06-12 一种编解码方法及装置

Publications (2)

Publication Number Publication Date
CN108965882A true CN108965882A (zh) 2018-12-07
CN108965882B CN108965882B (zh) 2020-08-14

Family

ID=64488479

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810601923.0A Active CN108965882B (zh) 2018-06-12 2018-06-12 一种编解码方法及装置

Country Status (1)

Country Link
CN (1) CN108965882B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112241669A (zh) * 2019-07-18 2021-01-19 杭州海康威视数字技术股份有限公司 目标识别方法、装置、系统及设备、存储介质
CN112241735A (zh) * 2019-07-18 2021-01-19 杭州海康威视数字技术股份有限公司 一种图像处理方法、装置及系统
CN113453012A (zh) * 2021-06-25 2021-09-28 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及电子设备
WO2021233429A1 (en) * 2020-05-22 2021-11-25 Beijing Bytedance Network Technology Co., Ltd. Filler payload handling in sub-bitstream extraction process
CN113709523A (zh) * 2020-05-21 2021-11-26 联咏科技股份有限公司 用于编码及解码私密数据的方法及图像处理装置
CN114140558A (zh) * 2021-11-29 2022-03-04 北京达佳互联信息技术有限公司 图像数据处理方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001128173A (ja) * 1999-10-28 2001-05-11 Victor Co Of Japan Ltd オブジェクト符号化装置
US20110194688A1 (en) * 2008-06-03 2011-08-11 Thales Method and System Making it Possible to Protect After Compression the Confidentiality of the Data of a Video Stream During Its Transmission
CN103268588A (zh) * 2013-05-24 2013-08-28 上海大学 基于载体图像校验码的加密域无损可逆信息隐藏方法
CN106341664A (zh) * 2016-09-29 2017-01-18 浙江宇视科技有限公司 一种数据处理方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001128173A (ja) * 1999-10-28 2001-05-11 Victor Co Of Japan Ltd オブジェクト符号化装置
US20110194688A1 (en) * 2008-06-03 2011-08-11 Thales Method and System Making it Possible to Protect After Compression the Confidentiality of the Data of a Video Stream During Its Transmission
CN103268588A (zh) * 2013-05-24 2013-08-28 上海大学 基于载体图像校验码的加密域无损可逆信息隐藏方法
CN106341664A (zh) * 2016-09-29 2017-01-18 浙江宇视科技有限公司 一种数据处理方法及装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112241669A (zh) * 2019-07-18 2021-01-19 杭州海康威视数字技术股份有限公司 目标识别方法、装置、系统及设备、存储介质
CN112241735A (zh) * 2019-07-18 2021-01-19 杭州海康威视数字技术股份有限公司 一种图像处理方法、装置及系统
CN113709523A (zh) * 2020-05-21 2021-11-26 联咏科技股份有限公司 用于编码及解码私密数据的方法及图像处理装置
CN113709523B (zh) * 2020-05-21 2024-02-13 联咏科技股份有限公司 用于编码及解码私密数据的方法及图像处理装置
WO2021233429A1 (en) * 2020-05-22 2021-11-25 Beijing Bytedance Network Technology Co., Ltd. Filler payload handling in sub-bitstream extraction process
US11778204B2 (en) 2020-05-22 2023-10-03 Beijing Bytedance Network Technology Co., Ltd. Handling of coded video in sub-bitstream extraction process
US11968375B2 (en) 2020-05-22 2024-04-23 Beijing Bytedance Network Technology Co., Ltd. Scaling window in subpicture sub-bitstream extraction process
US12063371B2 (en) 2020-05-22 2024-08-13 Beijing Bytedance Technology Co., Ltd. Subpicture sub-bitstream extraction improvements
CN113453012A (zh) * 2021-06-25 2021-09-28 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及电子设备
CN113453012B (zh) * 2021-06-25 2023-02-28 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及电子设备
CN114140558A (zh) * 2021-11-29 2022-03-04 北京达佳互联信息技术有限公司 图像数据处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN108965882B (zh) 2020-08-14

Similar Documents

Publication Publication Date Title
CN108965882A (zh) 一种编解码方法及装置
CN108833921A (zh) 一种编解码方法及装置
CN104185998B (zh) 用于视频的密码访问控制的方法和系统
KR101271461B1 (ko) 감시영상의 프라이버시 정보 보호 장치 및 방법
Abdul et al. Biometric security through visual encryption for fog edge computing
CN106341664B (zh) 一种数据处理方法及装置
US8447034B2 (en) Method and system making it possible to protect after compression the confidentiality of the data of a video stream during its transmission
CN101465724B (zh) 一种加密的Huffman编码方法,及其解码方法
JP6964647B2 (ja) オブジェクトのプライバシが保護されるイメージフレームのシーケンスをエンコーディング及びデコーディングする方法及びデバイス
CN103826128A (zh) 一种加密域h.264/avc视频可逆数据隐藏方法
CN103442253B (zh) 一种加密域h.264/avc视频数据隐藏方法
CN104717553B (zh) 用于对压缩视频进行解码的设备和方法
CN102843558A (zh) H.264/avc压缩域视频加密/解密装置及其加密/解密方法
CN103605950A (zh) 一种可信二维码中签名的隐藏方法及系统
CN101389005A (zh) 一种对图像特定位置进行遮挡的方法及装置
CN102724552B (zh) 一种图像编码方法、图像解码方法及装置
EP3482565B1 (en) Streaming piracy detection method and system
CN102932650B (zh) 视频数据完整性保护和验证方法、设备和系统
CN113422882B (zh) 图像压缩编码的分级加密方法、系统、设备与存储介质
CN106408495B (zh) 一种基于混沌理论的高psnr脆弱水印方法
CN109640095A (zh) 一种结合量子密钥分发的视频加密系统
CN108848382A (zh) 一种编解码方法及装置
CN103747261A (zh) 基于运动参考结构的h.264压缩域分层感知加密方法
US20160337673A1 (en) Protection of privacy in a video stream by means of a redundant slice
CN113709523B (zh) 用于编码及解码私密数据的方法及图像处理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant