CN110278438A - 视频中嵌入隐藏编码的方法及装置 - Google Patents

视频中嵌入隐藏编码的方法及装置 Download PDF

Info

Publication number
CN110278438A
CN110278438A CN201910536506.7A CN201910536506A CN110278438A CN 110278438 A CN110278438 A CN 110278438A CN 201910536506 A CN201910536506 A CN 201910536506A CN 110278438 A CN110278438 A CN 110278438A
Authority
CN
China
Prior art keywords
video
video frame
frame
pixel
adaptability
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910536506.7A
Other languages
English (en)
Inventor
杨铮
张凯
赵毅
黄可宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN201910536506.7A priority Critical patent/CN110278438A/zh
Publication of CN110278438A publication Critical patent/CN110278438A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例提供一种视频中嵌入隐藏编码的方法及装置，所述方法包括：从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；将视频帧的颜色空间转换至均匀颜色空间；基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；基于第二适应性亮度变化量，获得嵌码后的视频帧；将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。在视频内部适应地嵌入对人眼隐藏的二维编码，同时保证视频内的二维编码可以使用智能设备识别并解码。

Description

视频中嵌入隐藏编码的方法及装置
技术领域
本发明涉及图像处理技术领域，尤其涉及一种视频中嵌入隐藏编码的方法及装置。
背景技术
在视频内嵌入二维码以植入额外信息变得越来越流行。二维码中可以包含额外的信息(例如购物网站链接)，用户可以通过智能手机的摄像头扫描屏幕中视频嵌入的二维码，获得并转到二维码中包含的链接信息。这实际上提供了一种屏幕与相机间通信的方式。
然而，这样嵌入二维码存在一些问题。第一，嵌入二维码会占用宝贵的屏幕空间，同时会遮挡原视频的内容；第二，正是由于上一点，嵌入的二维码往往被设定为较小尺寸，但这导致用户使用摄像头拍摄二维码需要靠近屏幕才能正确识别，这降低了用户体验，同时也限制了其应用场景不适合户外、高层电子显示屏；第三，二维码仅在机器间通信存在价值，对人眼来说没有意义，属于一种视觉干扰，使得用户的观感体验不友好。
发明内容
本发明实施例提供一种视频中嵌入隐藏编码的方法及装置，用以解决现有技术中在视频中嵌入二维码会遮挡部分屏幕空间的缺陷，实现视频中二维码的隐藏嵌入。
本发明实施例提供一种视频中嵌入隐藏编码的方法，包括：
从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；
将视频帧的颜色空间转换至均匀颜色空间；
基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；
基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；
基于第二适应性亮度变化量，获得嵌码后的视频帧；
将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
进一步，所述从原始视频中提取多个视频帧图像，基于对视频帧图像的扩充，将原始视频的帧率提高至预设帧率值的步骤，包括：
从原始视频中提取若干视频帧图像；
将每一视频帧复制若干份，将复制得到的视频帧插入对应被复制视频帧其后，将原始视频的帧率提高至预设帧率值。
进一步，所述将视频帧的颜色空间转换至均匀颜色空间的步骤，包括：
将视频帧从原始的颜色空间转换至包含亮度分量的CIELAB颜色空间。
进一步，所述基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量的步骤，包括：
基于下式计算视频帧中位置为(i，j)的像素所对应互补帧嵌码时合适的亮度变化量
其中，L*(i，j)为视频帧中位置为(i，j)的像素的亮度；ΔE00为预设期望色差；kL为参数因子。
进一步，所述基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量的步骤，包括：
基于下式计算对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量
S(i，j)是滑动窗口M(i，j)在视频帧中实际覆盖的像素数量；Texture(i，j)为纹理复杂度，Texture(i，j)越大，表示像素(i，j)周围的纹理越复杂；α(i，j)为纹理缩小比率；TextureMax为视频帧中所有Texture(i，j)的最大值；α(i，j)∈[k，1]，k是最低缩放因子。
进一步，所述基于第二适应性亮度变化量，获得嵌码后的视频帧的步骤，包括：
对原始视频中所有视频帧，基于作为位置为(i，j)的互补像素的亮度变化量，基于互补帧的嵌码方式进行嵌码；
对一对互补帧中位置为(i，j)的互补像素，对所述互补像素分别进行互补的亮度调节，亮度调节值为
进一步，所述根据将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频，包括：
将嵌码后的视频帧转换回原始视频初始的颜色空间，并保存为新的视频帧图像文件；
将新的视频帧图像文件以预设帧率进行压缩，生成嵌入隐藏编码的目标视频。
本发明实施例提供一种视频中嵌入隐藏编码的装置，包括：包括：
扩展模块，用于从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；
转换模块，用于将视频帧的颜色空间转换至均匀颜色空间；
计算模块，用于基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；
调整模块，用于基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；
嵌码模块，用于基于第二适应性亮度变化量，获得嵌码后的视频帧；
生成模块，用于将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
本发明实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一项所述视频中嵌入隐藏编码方法的步骤。
本发明实施例提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述任一项所述视频中嵌入隐藏编码方法的步骤。
本发明实施例提供的视频中嵌入隐藏编码的方法及装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明视频中嵌入隐藏编码的方法实施例整体流程示意图；
图2为本发明视频中嵌入隐藏编码的方法实施例中计算视频帧像素周围的纹理复杂程度的示意图；
图3为本发明视频中嵌入隐藏编码的装置的实施例结构示意图；
图4为本发明一种电子设备实施例结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为解决现有技术中的至少一个技术问题，本发明实施例提供一种视频中嵌入隐藏编码的方法。如图1所示，所述视频中嵌入隐藏编码的方法包括以下步骤。
步骤S1，从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值。
其中，可以从视频文件中提取视频帧V1,V2,…,Vn，然后对提取的视频帧，通过将每一视频帧复制若干份插入其后的方式，将视频帧的帧率扩展至较高帧率。称扩帧之后的视频帧序列为V′1,V′2,…,V′n。
步骤S2，将视频帧的颜色空间转换至均匀颜色空间。
需要说明的是，读取视频帧图像文件V′1,V′2,…,V′n，将视频帧图像从原始的颜色空间转换至包含亮度分量的CIELAB(CIE 1976L*a*b*均匀颜色空间)均匀颜色空间。
步骤S3，基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量。
CIELAB的均匀性仍然并非完美。正因为如此，面向CIELAB颜色空间的色差公式才不断被更新，以作为对其不均匀性的修正。本发明使用CIEDE2000色差公式修正的CIELAB颜色空间来进行亮度变化量计算，即：不是固定亮度变化量而是应当固定色差ΔE00，然后去计算合适的亮度变化量
步骤S4，基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量。
纹理会影响人眼的感知。在纹理简单的地方细微的变化更容易被人眼察觉。本发明在上述的基于原像素亮度L*(i，j)进行适应性调整的基础之上，还根据原视频帧的纹理进行进一步的适应性调整。本发明在视频帧纹理较简单的地方适度地降低亮度调整量以防止在纹理简单的地方嵌入的编码更容易被发现，最终得到
步骤S5，基于第二适应性亮度变化量，获得嵌码后的视频帧。
使用作为位置为(i，j)的互补像素的亮度变化量，然后使用互补帧的嵌码方式进行嵌码，得到嵌码后的视频帧V″1,V″2,…,V″n。
步骤S6，将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
将新的视频帧图像文件V″1,V″2,…,V″n转换回原来的颜色空间，并以较高的帧率压制,生成嵌入了隐藏编码的视频文件，即为目标视频文件。
本发明实施例提供的视频中嵌入隐藏编码的方法，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
在本发明上述实施例的基础上，提供一种视频中嵌入隐藏编码的方法，所述从原始视频中提取多个视频帧图像，基于对视频帧图像的扩充，将原始视频的帧率提高至预设帧率值的步骤，包括：
从原始视频中提取若干视频帧图像；
将每一视频帧复制若干份，将复制得到的视频帧插入对应被复制视频帧其后，将原始视频的帧率提高至预设帧率值。
视频文件是将一系列静态帧图像压缩得到的，在视频被播放时，视频帧图像被以固定的帧率顺序显示，人眼就看到了动态的画面。为了对视频帧进行处理，首先需要从视频文件中提取视频帧V1,V2,…,Vn。为了利用人眼无法识别高频率亮度变化的特性使得之后嵌入的编码对人眼隐藏，需要使得目标视频的帧率达到120FPS。然而由于目前视频的帧率普遍为30FPS左右，因此需要再对视频帧进行扩充。例如对于30FPS的原视频，扩充的方式是将每一帧复制3份插在其后，即形成V1,V1,V1,V1,V2,V2,V2,V2,…,Vn,Vn,Vn,Vn的视频帧序列。称扩帧之后的视频帧序列为V′1,V′2,…,V′n，有符号表示取上整。
本发明实施例提供的视频中嵌入隐藏编码的方法及装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
在本发明任一上述实施例的基础上，提供一种视频中嵌入隐藏编码的方法，所述将视频帧的颜色空间转换至均匀颜色空间的步骤，包括：
将视频帧从原始的颜色空间转换至包含亮度分量的CIELAB颜色空间。
上述实施例得到的视频帧V′1,V′2,…,V′n是以RGB、YUV等颜色空间图像文件的形式存储。由于之后嵌入编码过程是通过对视频帧在亮度上调整完成的，因此需要将视频帧转换到一个包含亮度分量的颜色空间。本发明选择使用CIE 1976 L*a*b*均匀颜色空间(简称CIELAB颜色空间)进行亮度调整，其中的L*即为亮度分量。
本发明实施例提供的视频中嵌入隐藏编码的方法及装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
在本发明任一上述实施例的基础上，提供一种视频中嵌入隐藏编码的方法，所述基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量的步骤，包括：
基于下式计算视频帧中位置为(i，j)的像素所对应互补帧嵌码时合适的亮度变化量
其中，L*(i，j)为视频帧中位置为(i，j)的像素的亮度；ΔE00为预设期望色差；kL为参数因子，一般为1。
尽管CIELAB作为目前最先进的均匀颜色空间，致力于使颜色分布更均匀，然而，其均匀性仍然并非完美。正因为如此，面向CIELAB颜色空间的色差公式才不断被更新，以作为对其不均匀性的修正。本发明使用CIEDE2000色差公式修正的CIELAB颜色空间来进行亮度变化量计算，即：不是固定亮度变化量ΔL，而是应当固定色差ΔE，然后去计算合适的亮度变化量ΔL。
假设ΔE00为期望的色差。由于CIEDE2000色差公式如下：
在这里ΔC′和ΔH′都为0。因此以上公式可以简化为：
从而合适的亮度变化量ΔL′可以由ΔE00计算得到：
ΔL′＝kLsLΔE00
由于在CIEDE2000色差公式中，有：
这里表示两种颜色的亮度的平均值。由于在本发明的嵌码机制中，我们使用互补的亮度调整，因此互补帧相同位置的像素的亮度的平均值恰好等于原始像素的亮度。假设L*(i，j)是原视频帧中位置为(i，j)的像素的亮度，设是互补帧嵌码时合适的亮度变化量，则有：
上述公式显示，在某一特定的色差ΔE00下，不同的原像素亮度L*(i，j)会得到不同的亮度调整量这一过程实现了基于单个像素的适应性亮度变化量计算。
本发明实施例提供的视频中嵌入隐藏编码的方法及装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
在本发明任一上述实施例的基础上，提供视频中嵌入隐藏编码的方法，所述基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量的步骤，包括：
基于下式计算对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量
S(i，j)是滑动窗口M(i，j)在视频帧中实际覆盖的像素数量；Texture(i，j)为纹理复杂度，Texture(i，j)越大，表示像素(i，j)周围的纹理越复杂；α(i，j)为纹理缩小比率；TextureMax为视频帧中所有Texture(i，j)的最大值；α(i，j)∈[k，1]，k是最低缩放因子。
其中，纹理会影响人眼的感知。在纹理简单的地方细微的变化更容易被人眼察觉。本发明在上述的基于原像素亮度L*(i，j)进行适应性调整的基础之上，还根据原视频帧的纹理进行进一步的适应性调整。本发明在视频帧纹理较简单的地方适度地降低亮度调整量以防止在纹理简单的地方嵌入的编码更容易被发现。
如图2所示，本发明使用一个像素面积为9×9的滑动窗口来计算视频帧局部的灰度共生矩阵，并以此计算滑动窗口中心的像素周围的纹理复杂程度。像素的灰度直接使用其在CIE 1976 L*a*b*颜色空间中的亮度L*表示。设M(i，j)是中心像素坐标为(i，j)的9×9区域的灰度共生矩阵，设S(i，j)是滑动窗口实际覆盖的像素数量。大部分情况下滑动窗口覆盖的像素数量为9×9＝81，但当滑动窗口超出视频帧的边界时S(i，j)会相应减小。则标准化的纹理复杂度为：
Texture(i，j)越大，表示像素(i，j)周围的纹理越复杂。假设视频帧中所有Texture(i，j)的最大值为TextureMax。本发明定义纹理缩小比率α为：
上述公式的实际作用是把Texture(i，j)映射到α(i，j)∈[k，1]，其中k是最低缩放因子，可以通过实验确定一个固定的合适值。然后本发明定义最终的亮度变化量为：
这样就把上一部计算得到的进一步在纹理简单的地方进行适当的缩小，最终得到
本发明实施例提供的视频中嵌入隐藏编码的方法及装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
在本发明任一上述实施例的基础上，提供视频中嵌入隐藏编码的方法，所述基于第二适应性亮度变化量，获得嵌码后的视频帧的步骤，包括：
对原始视频中所有视频帧，基于作为位置为(i，j)的互补像素的亮度变化量，基于互补帧的嵌码方式进行嵌码；
对一对互补帧中位置为(i，j)的互补像素，对所述互补像素分别进行互补的亮度调节，亮度调节值为
本发明实施例最终使用作为位置为(i，j)的互补像素的亮度变化量，然后使用互补帧的嵌码方式进行嵌码。对一对互补帧中位置为(i，j)的互补像素，本发明对它们分别进行互补的亮度调节来表示比特1或来表示比特0。在对所有原视频帧完成了这一过程之后，本发明就成功地将二维编码嵌入到了原视频帧中，得到嵌码后的视频帧V″1,V″2,…,V″n。
在本发明任一上述实施例的基础上，提供视频中嵌入隐藏编码的方法，所述根据将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频，包括：
将嵌码后的视频帧转换回原始视频初始的颜色空间，并保存为新的视频帧图像文件；
将新的视频帧图像文件以预设帧率进行压缩，生成嵌入隐藏编码的目标视频。
将嵌码之后的视频帧V″1,V″2,…,V″n从CIE 1976 L*a*b*颜色空间转换回原来的颜色空间，并保存为新的视频帧图像文件。将新的视频帧图像文件V″1,V″2,…,V″n以120FPS的帧率压制,生成嵌入了隐藏编码的视频文件,即为目标视频文件。
为解决现有技术中的至少一个技术问题，本发明实施例提供一种视频中嵌入隐藏编码的装置。如图3所示，所述频中嵌入隐藏编码的装置，包括：
扩展模块31，用于从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值。
其中，可以从视频文件中提取视频帧V1,V2,…,Vn，然后对提取的视频帧，通过将每一视频帧复制若干份插入其后的方式，将视频帧的帧率扩展至较高帧率。称扩帧之后的视频帧序列为V′1,V′2,…,V′n。
转换模块32，用于将视频帧的颜色空间转换至均匀颜色空间。
需要说明的是，读取视频帧图像文件V′1,V′2,…,V′n，将视频帧图像从原始的颜色空间转换至包含亮度分量的CIELAB(CIE 1976 L*a*b*均匀颜色空间)均匀颜色空间。
计算模块33，用于基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量。
CIELAB的均匀性仍然并非完美。正因为如此，面向CIELAB颜色空间的色差公式才不断被更新，以作为对其不均匀性的修正。本发明使用CIEDE2000色差公式修正的CIELAB颜色空间来进行亮度变化量计算，即：不是固定亮度变化量而是应当固定色差ΔE00，然后去计算合适的亮度变化量
调整模块34，用于基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量。
纹理会影响人眼的感知。在纹理简单的地方细微的变化更容易被人眼察觉。本发明在上述的基于原像素亮度L*(i，j)进行适应性调整的基础之上，还根据原视频帧的纹理进行进一步的适应性调整。本发明在视频帧纹理较简单的地方适度地降低亮度调整量以防止在纹理简单的地方嵌入的编码更容易被发现，最终得到
嵌码模块35，用于基于第二适应性亮度变化量，获得嵌码后的视频帧。
使用作为位置为(i，j)的互补像素的亮度变化量，然后使用互补帧的嵌码方式进行嵌码，得到嵌码后的视频帧V″1,V″2,…,V″n。
生成模块36，用于将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
将新的视频帧图像文件V″1,V″2,…,V″n转换回原来的颜色空间，并以较高的帧率压制,生成嵌入了隐藏编码的视频文件，即为目标视频文件。
本发明实施例提供的视频中嵌入隐藏编码的装置，利用人眼无法识别高频率亮度变化的特性，基于包含亮度分量的均匀颜色空间，在视频内部适应地嵌入对人眼隐藏的二维编码，但视频内的二维编码仍然可以使用摄像头捕捉，从而保证视频内的二维编码可以使用智能设备识别并解码。
图4示例了一种电子设备的实体结构示意图，如图4所示，该电子设备可以包括：处理器(processor)410、通信接口(Communications Interface)420、存储器(memory)430和通信总线440，其中，处理器410，通信接口420，存储器430通过通信总线440完成相互间的通信。处理器410可以调用存储器430中的逻辑指令，以执行如下方法：从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；将视频帧的颜色空间转换至均匀颜色空间；基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；基于第二适应性亮度变化量，获得嵌码后的视频帧；将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
此外，上述的存储器430中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明实施例还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各实施例提供的传输方法，例如包括：从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；将视频帧的颜色空间转换至均匀颜色空间；基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；基于第二适应性亮度变化量，获得嵌码后的视频帧；将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种视频中嵌入隐藏编码的方法，其特征在于，包括：
从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；
将视频帧的颜色空间转换至均匀颜色空间；
基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；
基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；
基于第二适应性亮度变化量，获得嵌码后的视频帧；
将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
2.根据权利要求1所述的视频中嵌入隐藏编码的方法，其特征在于，所述从原始视频中提取多个视频帧图像，基于对视频帧图像的扩充，将原始视频的帧率提高至预设帧率值的步骤，包括：
从原始视频中提取若干视频帧图像；
将每一视频帧复制若干份，将复制得到的视频帧插入对应被复制视频帧其后，将原始视频的帧率提高至预设帧率值。
3.根据权利要求1所述的视频中嵌入隐藏编码的方法，其特征在于，所述将视频帧的颜色空间转换至均匀颜色空间的步骤，包括：
将视频帧从原始的颜色空间转换至包含亮度分量的CIELAB颜色空间。
4.根据权利要求3所述的视频中嵌入隐藏编码的方法，其特征在于，所述基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量的步骤，包括：
基于下式计算视频帧中位置为(i，j)的像素所对应互补帧嵌码时合适的亮度变化量
其中，L*(i，j)为视频帧中位置为(i，j)的像素的亮度；ΔE00为预设期望色差；kL为参数因子。
5.根据权利要求4所述的视频中嵌入隐藏编码的方法，其特征在于，所述基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量的步骤，包括：
基于下式计算对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量
S(i，j)是滑动窗口M(i，j)在视频帧中实际覆盖的像素数量；Texture(i，j)为纹理复杂度，Texture(i，j)越大，表示像素(i，j)周围的纹理越复杂；α(i，j)为纹理缩小比率；TextureMax为视频帧中所有Texture(i，j)的最大值；α(i，j)∈[k，1]，k是最低缩放因子。
6.根据权利要求5所述的视频中嵌入隐藏编码的方法，其特征在于，所述基于第二适应性亮度变化量，获得嵌码后的视频帧的步骤，包括：
对原始视频中所有视频帧，基于作为位置为(i，j)的互补像素的亮度变化量，基于互补帧的嵌码方式进行嵌码；
对一对互补帧中位置为(i，j)的互补像素，对所述互补像素分别进行互补的亮度调节，亮度调节值为
7.根据权利要求1所述的视频中嵌入隐藏编码的方法，其特征在于，所述根据将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频，包括：
将嵌码后的视频帧转换回原始视频初始的颜色空间，并保存为新的视频帧图像文件；
将新的视频帧图像文件以预设帧率进行压缩，生成嵌入隐藏编码的目标视频。
8.一种视频中嵌入隐藏编码的装置，其特征在于，包括：
扩展模块，用于从原始视频中提取多个视频帧，基于对视频帧的扩充，将原始视频的帧率提高至预设帧率值；
转换模块，用于将视频帧的颜色空间转换至均匀颜色空间；
计算模块，用于基于预设期望色差，计算视频帧中各像素点的第一适应性亮度变化量；
调整模块，用于基于视频帧中各像素点的第一适应性亮度变化量和视频帧的纹理，对第一适应性亮度变化量进行调整计算视频帧中各像素点的第二适应性亮度变化量；
嵌码模块，用于基于第二适应性亮度变化量，获得嵌码后的视频帧；
生成模块，用于将嵌码后的视频帧转换回原始视频初始的颜色空间，并生成嵌码后的目标视频。
9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述视频中嵌入隐藏编码方法的步骤。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至7任一项所述视频中嵌入隐藏编码方法的步骤。
CN201910536506.7A 2019-06-20 2019-06-20 视频中嵌入隐藏编码的方法及装置 Pending CN110278438A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910536506.7A CN110278438A (zh) 2019-06-20 2019-06-20 视频中嵌入隐藏编码的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910536506.7A CN110278438A (zh) 2019-06-20 2019-06-20 视频中嵌入隐藏编码的方法及装置

Publications (1)

Publication Number Publication Date
CN110278438A true CN110278438A (zh) 2019-09-24

Family

ID=67961169

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910536506.7A Pending CN110278438A (zh) 2019-06-20 2019-06-20 视频中嵌入隐藏编码的方法及装置

Country Status (1)

Country Link
CN (1) CN110278438A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI817551B (zh) * 2022-06-10 2023-10-01 友達光電股份有限公司 畫面加密系統及畫面加密方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101950405A (zh) * 2010-08-10 2011-01-19 浙江大学 一种基于视频内容的水印添加方法
CN102905127A (zh) * 2012-08-09 2013-01-30 山东师范大学 一种视频水印实现方法
CN104168484A (zh) * 2014-08-19 2014-11-26 河海大学 一种基于视觉注意机制的视频水印方法
CN104469377A (zh) * 2013-09-24 2015-03-25 无锡中科智能信息处理研发中心有限公司 一种基于视频隐写的h.264文件鉴权播放方法
CN104881699A (zh) * 2015-05-29 2015-09-02 上海交通大学 基于时域心理视觉调制的二维码内嵌系统及显示方法
CN107205155A (zh) * 2017-05-24 2017-09-26 上海交通大学 基于人眼视觉在空域上融合特性的二维码隐藏画面系统
CN107295344A (zh) * 2017-05-12 2017-10-24 杨铮 一种视频中嵌入图形码的方法及装置
CN107318030A (zh) * 2017-05-12 2017-11-03 杨铮 一种在视频中嵌入图形码的方法和装置
CN107888925A (zh) * 2017-11-03 2018-04-06 清华大学深圳研究生院 一种视频数字隐藏信息的嵌入方法和检测方法
CN109803143A (zh) * 2018-10-16 2019-05-24 曙光云计算集团有限公司 一种对视频进行帧内信息隐藏的方法以及装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101950405A (zh) * 2010-08-10 2011-01-19 浙江大学 一种基于视频内容的水印添加方法
CN102905127A (zh) * 2012-08-09 2013-01-30 山东师范大学 一种视频水印实现方法
CN104469377A (zh) * 2013-09-24 2015-03-25 无锡中科智能信息处理研发中心有限公司 一种基于视频隐写的h.264文件鉴权播放方法
CN104168484A (zh) * 2014-08-19 2014-11-26 河海大学 一种基于视觉注意机制的视频水印方法
CN104881699A (zh) * 2015-05-29 2015-09-02 上海交通大学 基于时域心理视觉调制的二维码内嵌系统及显示方法
CN107295344A (zh) * 2017-05-12 2017-10-24 杨铮 一种视频中嵌入图形码的方法及装置
CN107318030A (zh) * 2017-05-12 2017-11-03 杨铮 一种在视频中嵌入图形码的方法和装置
CN107205155A (zh) * 2017-05-24 2017-09-26 上海交通大学 基于人眼视觉在空域上融合特性的二维码隐藏画面系统
CN107888925A (zh) * 2017-11-03 2018-04-06 清华大学深圳研究生院 一种视频数字隐藏信息的嵌入方法和检测方法
CN109803143A (zh) * 2018-10-16 2019-05-24 曙光云计算集团有限公司 一种对视频进行帧内信息隐藏的方法以及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANRAN WANG等: "InFrame++: Achieve Simultaneous Screen-Human Viewing and Hidden Screen-Camera Communication", 《IN PROCEEDINGS OF THE 13TH ANNUAL INTERNATIONAL CONFERENCE ON MOBILE SYSTEMS, APPLICATIONS, AND SERVICES (MOBISYS’15)》 *
KAI ZHANG等: "ChromaCode: A Fully Imperceptible Screen-Camera Communication System", 《MOBICOM"18》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI817551B (zh) * 2022-06-10 2023-10-01 友達光電股份有限公司 畫面加密系統及畫面加密方法

Similar Documents

Publication Publication Date Title
KR101625362B1 (ko) 입력 이미지 데이터를 출력 이미지 데이터로 변환하기 위한 방법, 입력 이미지 데이터를 출력 이미지 데이터로 변환하기 위한 이미지 변환 유닛, 이미지 프로세싱 장치, 디스플레이 디바이스
CN107680056B (zh) 一种图像处理方法及装置
CN109147005B (zh) 一种用于红外图像的自适应染色方法、系统、存储介质、终端
CN109919866B (zh) 图像处理方法、装置、介质及电子设备
CN113518185B (zh) 视频转换处理方法、装置、计算机可读介质及电子设备
CN106780417A (zh) 一种光照不均图像的增强方法及系统
Hessel et al. An extended exposure fusion and its application to single image contrast enhancement
CN113129391B (zh) 基于多曝光图像特征分布权重的多曝光融合方法
WO2015173570A1 (en) Compressing high dynamic range images
CN111429357A (zh) 训练数据确定方法、视频处理方法、装置、设备及介质
CN113596573B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN113039576A (zh) 图像增强系统和方法
WO2019090580A1 (en) System and method for image dynamic range adjusting
Sun et al. Brightness preserving image enhancement based on a gradient and intensity histogram
CN114298935B (zh) 图像增强方法、装置及计算机可读存储介质
CN110278438A (zh) 视频中嵌入隐藏编码的方法及装置
Meylan Tone mapping for high dynamic range images
JP2006331445A (ja) 画像処理装置及び画像処理方法
Zhao et al. Learning tone curves for local image enhancement
Luzardo et al. Fully-automatic inverse tone mapping algorithm based on dynamic mid-level tone mapping
CN111383289A (zh) 图像处理方法、装置、终端设备及计算机可读存储介质
WO2016026650A1 (en) Methods and apparatus for mapping input image
Lin et al. Tri-histogram equalization based on first order statistics
CN110941413B (zh) 显示画面的生成方法及相关装置
Zolliker et al. Image fusion for optimizing gamut mapping

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190924