CN117714712B - 视频会议的数据隐写方法、设备及存储介质 - Google Patents
视频会议的数据隐写方法、设备及存储介质 Download PDFInfo
- Publication number
- CN117714712B CN117714712B CN202410143407.3A CN202410143407A CN117714712B CN 117714712 B CN117714712 B CN 117714712B CN 202410143407 A CN202410143407 A CN 202410143407A CN 117714712 B CN117714712 B CN 117714712B
- Authority
- CN
- China
- Prior art keywords
- index
- video frame
- image
- conference
- steganography
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000004364 calculation method Methods 0.000 claims description 11
- 230000006835 compression Effects 0.000 abstract description 10
- 238000007906 compression Methods 0.000 abstract description 10
- 230000000694 effects Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 10
- 230000008859 change Effects 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000014759 maintenance of location Effects 0.000 description 5
- 238000013507 mapping Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请公开了一种视频会议的数据隐写方法、设备及存储介质,该视频会议的数据隐写方法包括:对目标视频会议进行分类,得到目标视频会议的会议场景类型;基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。可以在确保待隐写数据不会因压缩而失真的同时,保证视频图像不会因为待隐写数据的嵌入影响视频图像的观看效果。
Description
技术领域
本申请涉及数据处理技术领域,特别是涉及一种视频会议的数据隐写方法、设备及存储介质。
背景技术
随着网络通讯技术的发展与普及,线上视频会议已成为日常商务、教育和娱乐的重要组成部分,通过线上视频会议可突破位置等外部环境的限制,实现无障碍沟通。
而用户对视频内容的安全性和隐私性的需求也日益增加,尤其是在敏感信息交流和保密通信中,如何在视频会议中有效而隐蔽地隐写数据成为了一个关键问题。
发明内容
为了解决上述问题,本申请至少提供一种视频会议的数据隐写方法、设备及存储介质。
本申请第一方面提供了一种视频会议的数据隐写方法,方法包括:对目标视频会议进行分类,得到目标视频会议的会议场景类型;基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。
在一实施例中,基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数,包括:对视频帧进行区域划分,得到多个图像区域;获取与会议场景类型匹配的隐写推荐指数分配策略;按照隐写推荐指数分配策略对多个图像区域进行重要指数分配,得到视频帧中各个图像区域的会议场景类型指数;基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数。
在一实施例中,基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数,包括:对各个图像区域进行图像特征提取,基于各个图像区域提取到的图像特征,计算视频帧中各个图像区域的图像特征指数;结合会议场景类型指数和图像特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。
在一实施例中,基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数,包括:确定目标视频会议对应的编码算法,获取编码算法针对视频帧的编码特征;基于视频帧的编码特征参,计算视频帧中各个图像区域的编码特征指数;结合会议场景类型指数和编码特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。
在一实施例中,基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数,包括:获取视频帧中各个图像区域的图像特征指数和编码特征指数;对会议场景类型指数、图像特征指数和编码特征指数进行加权计算,得到视频帧中各个图像区域的隐写推荐指数。
在一实施例中,对会议场景类型指数、图像特征指数和编码特征指数进行加权计算,得到视频帧中各个图像区域的隐写推荐指数,包括:获取与会议场景类型匹配的权重参数;按照权重参数,对会议场景类型指数、图像特征指数和编码特征指数进行加权计算,得到视频帧中各个图像区域的隐写推荐指数。
在一实施例中,将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码,包括:分析视频帧的颜色分布;基于视频帧的颜色分布,确定待隐写数据对应的目标颜色通道;将待隐写数据写入至隐写区域的目标颜色通道中,并对写入待隐写数据的视频帧进行编码。
在一实施例中,视频帧对应多个候选颜色通道;基于视频帧的颜色分布,确定待隐写数据对应的目标颜色通道,包括:基于视频帧的颜色分布,计算各个候选颜色通道的第一分数;确定目标视频会议对应的编码算法,获取编码算法针对各个候选颜色通道的数据损失率;基于数据损失率,计算各个候选颜色通道的第二分数;结合第一分数和第二分数,计算得到各个候选颜色通道的通道分数;选取通道分数最大的候选颜色通道作为待隐写数据对应的目标颜色通道。
本申请第二方面提供了一种视频会议的数据隐写装置,装置包括:场景分类模块,用于对目标视频会议进行分类,得到目标视频会议的会议场景类型;推荐指数确定模块,用于基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;区域选取模块,用于选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;数据隐写模块,用于将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。
本申请第三方面提供了一种电子设备,包括存储器和处理器,处理器用于执行存储器中存储的程序指令,以实现上述视频会议的数据隐写方法。
本申请第四方面提供了一种计算机可读存储介质,其上存储有程序指令,程序指令被处理器执行时实现上述视频会议的数据隐写方法。
上述方案,通过对目标视频会议进行分类,得到目标视频会议的会议场景类型;基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码,可以在确保待隐写数据不会因压缩而失真的同时,保证视频图像不会因为待隐写数据的嵌入影响视频图像的观看效果。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本申请的实施例,并与说明书一起用于说明本申请的技术方案。
图1是本申请的一示例性实施例示出的视频会议的数据隐写方法涉及的一种实施环境的示意图;
图2是本申请的一示例性实施例示出的视频会议的数据隐写方法的流程图;
图3是本申请的一示例性实施例示出的获取会议场景类型的示意图;
图4是本申请的一示例性实施例示出的会议场景类型指数分配的示意图;
图5是本申请的一示例性实施例示出的视频会议的数据隐写装置的框图;
图6是本申请的一示例性实施例示出的电子设备的结构示意图;
图7是本申请的一示例性实施例示出的计算机可读存储介质的结构示意图。
具体实施方式
下面结合说明书附图,对本申请实施例的方案进行详细说明。
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、接口、技术之类的具体细节,以便透彻理解本申请。
本文中术语“和/或”,仅仅是一种描述关联对象的关联信息,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。此外,本文中的“多”表示两个或者多于两个。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
下面对本申请实施例所提供的视频会议的数据隐写方法进行说明。
请参考图1,其示出了本申请一个实施例提供的方案实施环境的示意图。该方案实施环境可以包括终端110和服务器120,终端110和服务器120之间相互通信连接。
终端110可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。
服务器120可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
在一个示例中,终端110包括终端110-1、终端110-2和终端110-3,终端110-1、终端110-2和终端110-3上设置有带有视频会议功能的应用程序的客户端,用户通过带有视频会议功能的客户端可以加入视频会议,例如,终端110-1、终端110-2和终端110-3可以通过视频会议的会议标识、会议链接等方式,进入相同的视频会议,然后,终端110-1、终端110-2和终端110-3可以通过该视频会议进行图像、文本、文件、语音等数据的传输,服务器120将该视频会议中传输的数据分享给该视频会议中的每个参会对象。
需要说明的是,图1中终端110的数量仅是示意性说明,实际应用场景中可以含有更多或更少的终端,本申请对此不进行限定。
本申请实施例提供的视频会议的数据隐写方法,各步骤的执行主体可以是终端110,如终端110中安装运行的目标应用程序的客户端,也可以是服务器120,或者由终端110和服务器120交互配合执行,即将方法的一部分步骤交由终端110执行而另一部分步骤则交由服务器120执行。
可以理解的是,在本申请的具体实施方式中,涉及到用户图像、用户音频、用户账号信息等相关的数据,当本申请的实施例运用到具体产品或技术中时,需要获得用户许可或者同意,且相关数据的收集、使用和处理需要守相关国家和地区的相关法律法规和标准。
请参阅图2,图2是本申请的一示例性实施例示出的视频会议的数据隐写方法的流程图。该视频会议的数据隐写方法可以应用于图1所示的实施环境,并由该实施环境中的服务器具体执行。应理解的是,该方法也可以适用于其它的示例性实施环境,并由其它实施环境中的设备具体执行,本实施例不对该方法所适用的实施环境进行限制。
如图2所示,视频会议的数据隐写方法至少包括步骤S210至步骤S240,详细介绍如下:
步骤S210:对目标视频会议进行分类,得到目标视频会议的会议场景类型。
其中,目标视频会议是指需要进行数据隐写的线上视频会议。
对目标视频会议进行分类,得到目标视频会议的会议场景类型,如教育讲座会议、多人讨论会议、演讲会议、室内会议、室外会议等。
示例性地,可以基于预先训练完成的场景识别模型,对目标视频会议的视频帧进行场景识别处理,得到目标视频会议的会议场景类型。
举例说明,请参阅图3,图3为本申请一示例性实施例示出的获取会议场景类型的示意图,如图3所示,在目标视频会议执行过程中进行视频帧抽取,如每间隔预设时间进行视频帧抽取,或者对关键帧进行抽取等,将抽取得到的视频帧输入至场景识别模型中,场景识别模型对视频帧进行帧图像特征提取,如颜色特征、纹理特征、布局特征等,场景识别模型基于提取到的帧图像特征进行场景分类,得到目标视频会议的会议场景类型。
示例性地,还可以通过获取目标视频会议执行过程中各个参会对象传输的文本信息、语音信息、目标视频会议的标题信息等,通过对这些信息进行关键词提取,得到目标视频会议的会议场景类型。
会议场景类型的确定方式可以根据实际情况进行灵活选择,本申请对此不进行限定。
步骤S220:基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数。
其中,视频帧中含有多个图像区域,如前景区域、背景区域、移动对象区域、演示文档展示区域等,可以按照预设的区域划分标准对视频帧进行区域划分,以得到多个图像区域。
由于不同会议场景类型的目标视频会议存在不同的特点,因此,不同会议场景类型对应的视频帧中的各个图像区域的隐写推荐指数也不相同。
示例性地,可以是获取各个图像区域与隐写推荐指数之间的映射关系表,根据映射关系表查询各个图像区域的隐写推荐指数。如映射关系表表明:背景区域对应的隐写推荐指数为0.9,移动对象区域对应的隐写推荐指数为0.6;前景区域对应的隐写推荐指数为0.7。
其中,映射关系表可以是预先设定的,也可以是根据实际情况灵活确定的,如不同的会议场景类型、视频帧的图像内容、网络传输速率、编码算法等对应不同的映射关系表。
示例性地,还可以根据会议场景类型确定视频帧中各个图像区域的区域重要程度,按照区域重要程度为各个图像区域分配隐写推荐指数。
例如,可以是区域重要程度和隐写推荐指数呈负相关,即图像区域越重要,则该图像区域的隐写推荐指数越低,以避免因为隐写数据的插入而影响后续的视频观看体验。
其中,区域重要程度与隐写推荐指数之间的相关关系可以是预先设定的,也可以是根据实际情况灵活确定的,如根据会议场景类型、视频帧的图像内容、网络传输速率、采用的编码算法等,灵活确定区域重要程度与隐写推荐指数之间的相关关系。
当然,除了上述根据会议场景类型确定视频帧中各个图像区域的隐写推荐指数之外,还可以进一步综合考虑其它因素确定各个图像区域的隐写推荐指数,本申请对此不进行限定。
步骤S230:选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域。
其中,隐写区域是指可以进行信息嵌入的区域。
示例性地,隐写推荐指数满足预设条件的图像区域可以是:视频帧中隐写推荐指数最高的图像区域。
示例性地,隐写推荐指数满足预设条件的图像区域可以是:视频帧中隐写推荐指数大于指数阈值的图像区域。其中,指数阈值可以是预先设定的,也可以是根据实际情况灵活计算的,例如,根据待隐写数据的大小、会议场景类型、采用的编码算法、网络传输速率等,灵活计算指数阈值。
示例性地,隐写推荐指数满足预设条件的图像区域可以是:按照隐写推荐指数的大小,对各个图像区域进行降序排序后,排序前N的图像区域。其中,N可以是预先设定的,也可以是根据实际情况灵活计算的,例如,根据待隐写数据的大小、会议场景类型、采用的编码算法、网络传输速率等,灵活计算指数阈值。
需要说明的是,根据隐写推荐指数选取隐写区域的方式可以根据实际应用情况灵活调整,本申请对此不进行限定。
步骤S240:将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。
将待隐写数据写入至视频帧中的隐写区域中,再采用编码算法对写入待隐写数据的视频帧进行编码,实现待隐写数据的嵌入。
本申请通过考虑不同会议场景类型的特点,根据不同的会议场景类型灵活确定视频帧中各个图像区域的隐写推荐指数,以提高后续选取的隐写区域的准确性,可以有效适用与多种会议场景,提高视频会议中数据隐写的效果。
接下来对本申请的部分实施例进行详细说明。
在一些实施方式中,步骤S220中基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数,包括:对视频帧进行区域划分,得到多个图像区域;获取与会议场景类型匹配的隐写推荐指数分配策略;按照隐写推荐指数分配策略对多个图像区域进行重要指数分配,得到视频帧中各个图像区域的会议场景类型指数;基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数。
不同的会议场景类型对应不同的隐写推荐指数分配策略,即针对同一图像区域,若会议场景类型不同,则分配得到的会议场景类型指数也可能不同。
举例说明,请参阅图4,图4为本申请一示例性实施例示出的会议场景类型指数分配的示意图,如图4所示,对视频帧进行区域划分,得到多个图像区域,具体包括背景区域、文档演示区域、参会对象区域1、参会对象区域2和邻接区域,根据与会议场景类型匹配的隐写推荐指数分配策略,为这些图像区域进行重要指数分配,得到视频帧中各个图像区域的会议场景类型指数。
例如,若目标视频会议对应的会议场景类型为多人讨论会议,则表明目标视频会议中的两名参会对象处于讨论状态,此时可以分配背景区域、文档演示区域或邻接区域更高的会议场景类型指数,分配参会对象区域1和参会对象区域2更低的会议场景类型指数,以避免隐写数据写入对参会对象区域1和参会对象区域2的图像内容造成影响,实现数据隐写的前提下保证视频图像的观看效果。
若检测到目标视频会议的会议场景类型转换为单人演讲会议,则表明目标视频会议中存在正在演讲的参会对象,以左侧参会对象为例,此时可以分配如参会对象区域1更低的会议场景类型指数,分配参会对象区域2、文档演示区域或邻接区域更高的会议场景类型指数。
若检测到目标视频会议的会议场景类型转换为文档演示会议,则表明目标视频会议中在进行文档演示,此时可以分配背景区域或邻接区域更高的会议场景类型指数,分配文档演示区域更低的会议场景类型指数,以避免隐写数据写入对文档演示区域的图像内容造成影响,实现数据隐写的前提下保证视频图像的观看效果。
若检测到目标视频会议的会议场景类型转换为敏感信息交流会议,则表明目标视频会议中参会对象在进行敏感信息交流,此时为了保证隐写数据的隐藏强度,避免因为后续的图像编码对隐写数据造成破坏,可以分配参会对象区域1、参会对象区域2更高的会议场景类型指数,以保证数据隐写传输过程中隐写数据的完整性。
按照隐写推荐指数分配策略对多个图像区域进行重要指数分配,得到视频帧中各个图像区域的会议场景类型指数之后,再根据会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数。
例如,可以直接将会议场景类型指数作为对应图像区域的隐写推荐指数,或者,还可以进一步其它影响因素综合确定隐写推荐指数。
对综合考虑多维度因素计算隐写推荐指数的部分实施例进行举例:
在一些实施方式中,基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数,包括:对各个图像区域进行图像特征提取,基于各个图像区域提取到的图像特征,计算视频帧中各个图像区域的图像特征指数;结合会议场景类型指数和图像特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。
其中,图像特征包括但不限于视觉特征(如颜色特征、亮度特征)、图像内容动态变化率、图像内容对目标视频会议的影响力、参会对象之间的互动频率等中的一种或多种组合。
对各个图像区域进行图像特征提取,再根据各个图像区域提取到的图像特征,计算视频帧中各个图像区域的图像特征指数。
例如,图像内容对目标视频会议的影响力越大,则对应图像区域的图像特征指数越小;图像内容对目标视频会议的影响力越小,则对应图像区域的图像特征指数越大。
以图像内容动态变化率为例进行详细说明:编码算法(如H.264、HEVC)在处理动态场景时,会在连续的帧间进行数据预测和压缩。在动态变化的区域中隐写数据可能会因编码算法的帧间预测而受到影响。因此,选择在静态或动态变化较小的区域中进行数据隐藏,可以减少编码算法对隐写数据的干扰。
另外,除了从视频帧维度出发考虑各个图像区域的图像内容动态变化率之外,还可以从整个目标视频会议维度出发,分析目标视频会议的图像内容动态变化趋势,从而可以选择在视频帧图像内容相对静态的时刻进行数据隐藏,减少由于编码算法对动态内容的调整导致的数据损失。
根据会议场景类型指数和图像特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。
可以是选取会议场景类型指数和图像特征指数中的一者作为隐写推荐指数,如选取最大值或最小值作为隐写推荐指数,具体选取方式可以根据实际应用场景确定,如根据会议场景类型、网络传输速率、用户需求等。
还可以是对会议场景类型指数和图像特征指数进行加权计算,将加权计算结果作为隐写推荐指数。
举例说明:
假设,会议场景类型指数为Ws,图像特征包括视觉特征、图像内容动态变化率、图像内容对目标视频会议的影响力、参会对象之间的互动频率,各个图像特征分别对应一个图像特征指数,其中,图像内容对目标视频会议的影响力对应的图像特征指数表示为Wr、图像内容动态变化率对应的图像特征指数表示为Wd、视觉特征对应的图像特征指数表示为Wv、参会对象之间的互动频率对应的图像特征指数表示为Wi,Ws、Wr、Wd、Wv、Wi的取值范围为0至1,则隐写推荐指数的计算方式可以参见公式1:
公式1:
其中,为对应的权重参数。
需要说明的是,上述公式1仅是示例性说明,实际情况中可以选取更多或更少的图像特征综合计算隐写推荐指数,本申请对此不进行限定。
在一些实施方式中,基于会议场景类型指数,确定视频帧中各个图像区域的隐写推荐指数,包括:确定目标视频会议对应的编码算法,获取编码算法针对视频帧的编码特征;基于视频帧的编码特征参,计算视频帧中各个图像区域的编码特征指数;结合会议场景类型指数和编码特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。
其中,编码特征包括但不限于图像压缩过程中的区域细节保留度、颜色保真度、动态范围保留度、噪点压缩度、编码效率等中的一种或多种组合。
获取编码算法针对视频帧的编码特征,再根据各个图像区域提取到的图像特征,计算视频帧中各个图像区域的图像特征指数。
例如,确定编码算法对背景区域和前景区域的图像压缩情况,以得到区域细节保留度,若区域细节保留度的影响越高,则对应图像区域的图像特征指数越大;区域细节保留度的影响越小,则对应图像区域的图像特征指数越小。
根据会议场景类型指数和编码特征指数,计算得到视频帧中各个图像区域的隐写推荐指数。可以是选取会议场景类型指数和编码特征指数中的一者作为隐写推荐指数;还可以是对会议场景类型指数和编码特征指数进行加权计算,计算方式可以参见上述实施例中的公式1,在此不作赘述。
在一些实施方式中,还可以确定视频帧的帧类型,根据帧类型计算视频帧中各个图像区域的隐写推荐指数。
例如,帧类型包括关键帧和非关键帧,如针对关键帧,应分配关键图像区域(如参会对象区域、文档演示区域等)更小的隐写推荐指数,从而分配非关键区域(如背景区域)更大的隐写推荐指数,以保证隐写输入的嵌入不会影响视频图像质量;针对非关键帧,若待隐写数据较为重要,则可以分配关键图像区域(如参会对象区域、文档演示区域等)更大的隐写推荐指数,以保证待隐写数据不会因为后续编码被损坏。
在一些实施方式中,若目标视频会议对应的场景中部署有多摄像头,则需要考虑每个摄像头视角之间的图像差异,以保证数据隐写在多摄像头视角下的一致性,如选择在所有摄像头视角下相同的图像区域作为隐写区域。
在一些实施方式中,还可以根据网络传输速率、视频帧的分辨率、待隐写数据的安全性需求、待隐写数据与视频帧图像内容的相关性、多媒体内容与待隐写数据的同步性、对待隐写数据进行隐写过程中的资源消耗等。如对待隐写数据进行隐写过程中的资源消耗越高,则减小对应图像区域的隐写推荐指数。
在一些实施方式中,综合考虑上述各个因素,如获取视频帧中各个图像区域的图像特征指数和编码特征指数;对会议场景类型指数、图像特征指数和编码特征指数进行加权计算,得到视频帧中各个图像区域的隐写推荐指数。
需要说明的是,上述加权计算涉及的权重参数,可以是预先设定的,也可以是根据实际应用情况灵活确定的。
示例性地,获取与会议场景类型匹配的权重参数;按照权重参数,对会议场景类型指数、图像特征指数和编码特征指数进行加权计算,得到视频帧中各个图像区域的隐写推荐指数。
例如,在教育培训会议中,待隐写数据与视频帧图像内容的相关性,则赋予该因素更大的权重;而在业务会议中,待隐写数据的安全性需求可能更为重要,则赋予该因素更大的权重。
举例说明,常见的编码算法(如H.264或HEVC)通常会优先保留脸部区域的清晰度和细节。因此,若待隐写数据的安全性需求较高,在保证视频图像的观看质量的前提下,可以在脸部周围区域而非直接脸部进行数据隐藏,确保即使在压缩后,写入的数据仍然保持稳定。
具体应用场景说明:在教育培训会议中,教师的脸部是关注的焦点,可以在教师脸部周围的区域进行待隐写数据的隐藏。其中,在选择教师脸部周围的区域进行数据隐藏时,可以综合考虑这些区域的视觉显著性。例如,可以选择脸部附近但不是视觉焦点的区域,如教师的衣领区域或背景中靠近脸部的部分,以在不干扰主要视觉内容的同时进行数据隐藏,避免影响教师脸部区域的视觉质量,且由于编码算法倾向于保留脸部区域的细节,隐藏在这些区域附近的数据在编码过程中也会得到较好的保护,降低了因编码导致的数据损坏或失真的风险。
计算得到每个图像区域的隐写推荐指数之后,选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域。然后,将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。
在一些实施方式中,步骤S240中将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码,包括:分析视频帧的颜色分布;基于视频帧的颜色分布,确定待隐写数据对应的目标颜色通道;将待隐写数据写入至隐写区域的目标颜色通道中,并对写入待隐写数据的视频帧进行编码。
统计视频帧的颜色分布,以选择视觉上不显著的颜色通道作为目标颜色通道。
示例性地,对含有隐写区域的多个连续视频帧生成颜色直方图,分析连续视频帧的颜色直方图,确定隐写区域中各个颜色通道的显著性,选择显著性最小的颜色通道作为目标颜色通道。
示例性地,视频帧对应多个候选颜色通道;基于视频帧的颜色分布,确定待隐写数据对应的目标颜色通道,包括:基于视频帧的颜色分布,计算各个候选颜色通道的第一分数;确定目标视频会议对应的编码算法,获取编码算法针对各个候选颜色通道的数据损失率;基于数据损失率,计算各个候选颜色通道的第二分数;结合第一分数和第二分数,计算得到各个候选颜色通道的通道分数;选取通道分数最大的候选颜色通道作为待隐写数据对应的目标颜色通道。
其中,第一分数可以是上述实施例中通过颜色直方图的统计方式计算得到的。
不同的编码算法对不同颜色通道的处理可能有所不同,导致不同编码算法针对各个候选颜色通道的数据损失率也不同,如一些编码算法可能在图像压缩过程中更倾向于保留亮度信息而牺牲其它颜色信息。获取编码算法针对各个候选颜色通道的数据损失率,基于数据损失率,计算各个候选颜色通道的第二分数。
例如,选择在编码过程中较少受损的颜色通道作为目标颜色通道进行数据隐藏,如检测到目标视频会议对应的编码算法针对亮度通道在压缩后保留更多细节,将亮度通道作为目标颜色通道。
除了考虑数据损失率之外,还可以考虑各个候选颜色通道的稳定性、人眼对各个候选颜色通道的视觉敏感度、各个候选颜色通道进行编码后的数据完整性等因素。
将待隐写数据写入至隐写区域的目标颜色通道中,并对写入待隐写数据的视频帧进行编码。
在一些实施方式中,还可以测试待隐写数据嵌入后的视频流的嵌入效果,嵌入效果根据视频图像质量和待隐藏数据的隐蔽性同时确定,可以根据视频流的嵌入效果,对后续数据隐写方式进行调整,如加权参数的调整、计算隐写推荐指数所需要考虑的因素的调整等。
另外需要说明的是,本申请的数据隐写方法是根据目标视频会议的变化而实时调整的,如目标视频会议的不同时刻可能对应不同的会议场景类型,以根据目标视频会议的变动情况,灵活调整数据隐写的策略,提高数据隐写的准确性。
本申请提供的视频会议的数据隐写方法,通过对目标视频会议进行分类,得到目标视频会议的会议场景类型;基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码,可以在确保待隐写数据不会因压缩而失真的同时,保证视频图像不会因为待隐写数据的嵌入影响视频图像的观看效果。
图5是本申请的一示例性实施例示出的视频会议的数据隐写装置的框图。如图5所示,该示例性的视频会议的数据隐写装置500包括:场景分类模块510、推荐指数确定模块520、区域选取模块530和数据隐写模块540。具体地:
场景分类模块510,用于对目标视频会议进行分类,得到目标视频会议的会议场景类型;
推荐指数确定模块520,用于基于会议场景类型,确定目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;
区域选取模块530,用于选取视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;
数据隐写模块540,用于将待隐写数据写入至视频帧的隐写区域中,并对写入待隐写数据的视频帧进行编码。
需要说明的是,上述实施例所提供的视频会议的数据隐写装置与上述实施例所提供的视频会议的数据隐写方法属于同一构思,其中各个模块和单元执行操作的具体方式已经在方法实施例中进行了详细描述,此处不再赘述。上述实施例所提供的视频会议的数据隐写装置在实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能,本处不对此进行限制。
请参阅图6,图6是本申请电子设备一实施例的结构示意图。电子设备600包括存储器601和处理器602,处理器602用于执行存储器601中存储的程序指令,以实现上述任一视频会议的数据隐写方法实施例中的步骤。在一个具体的实施场景中,电子设备600可以包括但不限于:微型计算机、服务器,此外,电子设备600还可以包括笔记本电脑、平板电脑等移动设备,在此不做限定。
具体而言,处理器602用于控制其自身以及存储器601以实现上述任一视频会议的数据隐写方法实施例中的步骤。处理器602还可以称为中央处理单元(Central ProcessingUnit,CPU)。处理器602可能是一种集成电路芯片,具有信号的处理能力。处理器602还可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。另外,处理器602可以由集成电路芯片共同实现。
请参阅图7,图7是本申请计算机可读存储介质一实施例的结构示意图。计算机可读存储介质700存储有能够被处理器运行的程序指令710,程序指令710用于实现上述任一视频会议的数据隐写方法实施例中的步骤。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
上文对各个实施例的描述倾向于强调各个实施例之间的不同之处,其相同或相似之处可以互相参考,为了简洁,本文不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法和装置,可以通过其它的方式实现。例如,以上所描述的装置实施方式仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性、机械或其它的形式。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (9)
1.一种视频会议的数据隐写方法,其特征在于,方法包括:
对目标视频会议进行分类,得到所述目标视频会议的会议场景类型;
基于所述会议场景类型,确定所述目标视频会议对应的视频帧中各个图像区域的隐写推荐指数;
选取所述视频帧中隐写推荐指数满足预设条件的图像区域,作为隐写区域;
基于所述视频帧的颜色分布确定所述隐写区域对应的目标颜色通道,将待隐写数据写入至所述视频帧的隐写区域的目标颜色通道中,并对写入所述待隐写数据的视频帧进行编码。
2.根据权利要求1所述的方法,其特征在于,所述基于所述会议场景类型,确定所述目标视频会议对应的视频帧中各个图像区域的隐写推荐指数,包括:
对所述视频帧进行区域划分,得到多个图像区域;
获取与所述会议场景类型匹配的隐写推荐指数分配策略;
按照所述隐写推荐指数分配策略对所述多个图像区域进行重要指数分配,得到所述视频帧中各个图像区域的会议场景类型指数;
基于所述会议场景类型指数,确定所述视频帧中各个图像区域的隐写推荐指数。
3.根据权利要求2所述的方法,其特征在于,所述基于所述会议场景类型指数,确定所述视频帧中各个图像区域的隐写推荐指数,包括:
对所述各个图像区域进行图像特征提取,基于所述各个图像区域提取到的图像特征,计算所述视频帧中各个图像区域的图像特征指数;
结合所述会议场景类型指数和所述图像特征指数,计算得到所述视频帧中各个图像区域的隐写推荐指数。
4.根据权利要求2所述的方法,其特征在于,所述基于所述会议场景类型指数,确定所述视频帧中各个图像区域的隐写推荐指数,包括:
确定所述目标视频会议对应的编码算法,获取所述编码算法针对所述视频帧的编码特征;
基于所述视频帧的编码特征参,计算所述视频帧中各个图像区域的编码特征指数;
结合所述会议场景类型指数和所述编码特征指数,计算得到所述视频帧中各个图像区域的隐写推荐指数。
5.根据权利要求2所述的方法,其特征在于,所述基于所述会议场景类型指数,确定所述视频帧中各个图像区域的隐写推荐指数,包括:
获取所述视频帧中各个图像区域的图像特征指数和编码特征指数;
对所述会议场景类型指数、所述图像特征指数和所述编码特征指数进行加权计算,得到所述视频帧中各个图像区域的隐写推荐指数。
6.根据权利要求5所述的方法,其特征在于,所述对所述会议场景类型指数、所述图像特征指数和所述编码特征指数进行加权计算,得到所述视频帧中各个图像区域的隐写推荐指数,包括:
获取与所述会议场景类型匹配的权重参数;
按照所述权重参数,对所述会议场景类型指数、所述图像特征指数和所述编码特征指数进行加权计算,得到所述视频帧中各个图像区域的隐写推荐指数。
7.根据权利要求1所述的方法,其特征在于,所述视频帧对应多个候选颜色通道;所述基于所述视频帧的颜色分布确定所述隐写区域对应的目标颜色通道,包括:
基于所述视频帧的颜色分布,计算各个候选颜色通道的第一分数;
确定所述目标视频会议对应的编码算法,获取所述编码算法针对各个候选颜色通道的数据损失率;
基于所述数据损失率,计算所述各个候选颜色通道的第二分数;
结合所述第一分数和所述第二分数,计算得到所述各个候选颜色通道的通道分数;
选取通道分数最大的候选颜色通道作为所述待隐写数据对应的目标颜色通道。
8.一种电子设备,其特征在于,所述电子设备包括存储器和处理器,处理器用于执行存储器中存储的程序指令,以实现如权利要求1-7任一项所述方法中的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有程序指令,所述程序指令能够被处理器执行以实现如权利要求1-7任一项所述方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410143407.3A CN117714712B (zh) | 2024-02-01 | 2024-02-01 | 视频会议的数据隐写方法、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410143407.3A CN117714712B (zh) | 2024-02-01 | 2024-02-01 | 视频会议的数据隐写方法、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117714712A CN117714712A (zh) | 2024-03-15 |
CN117714712B true CN117714712B (zh) | 2024-05-07 |
Family
ID=90155615
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410143407.3A Active CN117714712B (zh) | 2024-02-01 | 2024-02-01 | 视频会议的数据隐写方法、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117714712B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6122403A (en) * | 1995-07-27 | 2000-09-19 | Digimarc Corporation | Computer system linked by using information in data objects |
US6557103B1 (en) * | 1998-04-13 | 2003-04-29 | The United States Of America As Represented By The Secretary Of The Army | Spread spectrum image steganography |
CN1677438A (zh) * | 2004-03-31 | 2005-10-05 | 松下电器产业株式会社 | 在数据码流中隐藏数据的方法及装置 |
CN104837011A (zh) * | 2015-05-04 | 2015-08-12 | 中国科学院信息工程研究所 | 一种内容自适应的视频隐写分析方法 |
CN108416013A (zh) * | 2018-03-02 | 2018-08-17 | 北京奇艺世纪科技有限公司 | 视频匹配、检索、分类和推荐方法、装置及电子设备 |
CN109391844A (zh) * | 2018-11-20 | 2019-02-26 | 国网安徽省电力有限公司信息通信分公司 | 基于视频会议场景的视频质量诊断方法和系统 |
CN110381369A (zh) * | 2019-07-19 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 推荐信息植入位置的确定方法、装置、设备及存储介质 |
CN110766096A (zh) * | 2019-10-31 | 2020-02-07 | 北京金山云网络技术有限公司 | 视频分类方法、装置及电子设备 |
CN112804058A (zh) * | 2021-03-17 | 2021-05-14 | 浙江华创视讯科技有限公司 | 一种会议数据加解密方法、装置、存储介质及电子设备 |
CN114339258A (zh) * | 2021-12-28 | 2022-04-12 | 中国人民武装警察部队工程大学 | 一种基于视频载体的信息隐写方法及装置 |
CN115550691A (zh) * | 2021-06-29 | 2022-12-30 | 阿里巴巴新加坡控股有限公司 | 一种视频处理方法、视频传输方法、视频查看方法和装置 |
CN116579908A (zh) * | 2023-07-13 | 2023-08-11 | 江苏无痕防伪科技有限公司 | 一种在图像中植入加密隐藏信息的方法及装置 |
CN117278762A (zh) * | 2023-09-20 | 2023-12-22 | 深圳市艾宝科技有限公司 | 一种安全可溯源视频编解码系统 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030009670A1 (en) * | 2001-04-02 | 2003-01-09 | Digimarc Corporation | Background watermark processing |
US8019175B2 (en) * | 2005-03-09 | 2011-09-13 | Qualcomm Incorporated | Region-of-interest processing for video telephony |
WO2007086860A1 (en) * | 2006-01-27 | 2007-08-02 | Thomson Licensing | Closed-captioning system and method |
-
2024
- 2024-02-01 CN CN202410143407.3A patent/CN117714712B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6122403A (en) * | 1995-07-27 | 2000-09-19 | Digimarc Corporation | Computer system linked by using information in data objects |
US6557103B1 (en) * | 1998-04-13 | 2003-04-29 | The United States Of America As Represented By The Secretary Of The Army | Spread spectrum image steganography |
CN1677438A (zh) * | 2004-03-31 | 2005-10-05 | 松下电器产业株式会社 | 在数据码流中隐藏数据的方法及装置 |
CN104837011A (zh) * | 2015-05-04 | 2015-08-12 | 中国科学院信息工程研究所 | 一种内容自适应的视频隐写分析方法 |
CN108416013A (zh) * | 2018-03-02 | 2018-08-17 | 北京奇艺世纪科技有限公司 | 视频匹配、检索、分类和推荐方法、装置及电子设备 |
CN109391844A (zh) * | 2018-11-20 | 2019-02-26 | 国网安徽省电力有限公司信息通信分公司 | 基于视频会议场景的视频质量诊断方法和系统 |
CN110381369A (zh) * | 2019-07-19 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 推荐信息植入位置的确定方法、装置、设备及存储介质 |
CN110766096A (zh) * | 2019-10-31 | 2020-02-07 | 北京金山云网络技术有限公司 | 视频分类方法、装置及电子设备 |
CN112804058A (zh) * | 2021-03-17 | 2021-05-14 | 浙江华创视讯科技有限公司 | 一种会议数据加解密方法、装置、存储介质及电子设备 |
CN115550691A (zh) * | 2021-06-29 | 2022-12-30 | 阿里巴巴新加坡控股有限公司 | 一种视频处理方法、视频传输方法、视频查看方法和装置 |
CN114339258A (zh) * | 2021-12-28 | 2022-04-12 | 中国人民武装警察部队工程大学 | 一种基于视频载体的信息隐写方法及装置 |
CN116579908A (zh) * | 2023-07-13 | 2023-08-11 | 江苏无痕防伪科技有限公司 | 一种在图像中植入加密隐藏信息的方法及装置 |
CN117278762A (zh) * | 2023-09-20 | 2023-12-22 | 深圳市艾宝科技有限公司 | 一种安全可溯源视频编解码系统 |
Non-Patent Citations (3)
Title |
---|
The UU-Net: Reversible Face De-Identification for Visual Surveillance Video Footage;Senior Member;《IEEE Transactions on Circuits and Systems for Video Technology ( Volume: 32, Issue: 2, February 2022)》;20210315;全文 * |
多媒体隐写研究进展;张卫明;《中国图象图形学报》;20220616;全文 * |
隐写分析――原理、现状与展望;梁小萍, 何军辉, 李健乾, 黄继武;中山大学学报(自然科学版);20041125(06);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN117714712A (zh) | 2024-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Fang et al. | A video saliency detection model in compressed domain | |
US9396409B2 (en) | Object based image processing | |
Yang et al. | An objective assessment method based on multi-level factors for panoramic videos | |
CN112312231B (zh) | 一种视频图像编码方法、装置、电子设备及介质 | |
CN111985281B (zh) | 图像生成模型的生成方法、装置及图像生成方法、装置 | |
US20170099410A1 (en) | Image processing method and apparatus | |
EP3513326B1 (en) | Methods, systems, and media for detecting stereoscopic videos by generating fingerprints for multiple portions of a video frame | |
CN110310231B (zh) | 一种将第一动态范围视频转换为第二动态范围视频的设备及其方法 | |
US11854164B2 (en) | Method for denoising omnidirectional videos and rectified videos | |
CN107071333A (zh) | 视频图像处理方法和视频图像处理装置 | |
Katsigiannis et al. | Interpreting MOS scores, when can users see a difference? Understanding user experience differences for photo quality | |
Xian et al. | A content-oriented no-reference perceptual video quality assessment method for computer graphics animation videos | |
CN113573044B (zh) | 视频数据处理方法、装置、计算机设备及可读存储介质 | |
CN114531564A (zh) | 处理方法及电子设备 | |
Tran et al. | Impacts of retina-related zones on quality perception of omnidirectional image | |
CN117714712B (zh) | 视频会议的数据隐写方法、设备及存储介质 | |
Sinno et al. | Quality measurement of images on mobile streaming interfaces deployed at scale | |
CN116980604A (zh) | 视频编码方法、视频解码方法及相关设备 | |
CN114945097B (zh) | 视频流处理方法及装置 | |
US10764578B2 (en) | Bit rate optimization system and method | |
US20240119637A1 (en) | Image synthesis method and system | |
CN117640877B (zh) | 线上会议的画面重构方法及电子设备 | |
CN118138709A (zh) | 视频会议的帧率调整方法、设备及存储介质 | |
US20170188052A1 (en) | Video format discriminating method and system | |
CN116596752B (zh) | 脸部图像替换方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |