CN109379642A - 一种用于添加和检测视频水印的方法与设备 - Google Patents

一种用于添加和检测视频水印的方法与设备 Download PDF

Info

Publication number
CN109379642A
CN109379642A CN201811533390.3A CN201811533390A CN109379642A CN 109379642 A CN109379642 A CN 109379642A CN 201811533390 A CN201811533390 A CN 201811533390A CN 109379642 A CN109379642 A CN 109379642A
Authority
CN
China
Prior art keywords
information
watermark
video
sequence
frames
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811533390.3A
Other languages
English (en)
Other versions
CN109379642B (zh
Inventor
梁文昭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lianshang Xinchang Network Technology Co Ltd
Original Assignee
Lianshang Xinchang Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lianshang Xinchang Network Technology Co Ltd filed Critical Lianshang Xinchang Network Technology Co Ltd
Priority to CN201811533390.3A priority Critical patent/CN109379642B/zh
Publication of CN109379642A publication Critical patent/CN109379642A/zh
Application granted granted Critical
Publication of CN109379642B publication Critical patent/CN109379642B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请的目的是提供一种添加和检测视频水印的方法与设备。其中,一种用于在视频中添加水印的方法,包括:获取待处理的视频信息;根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。通过该方法添加的视频水印的抗攻击性更强。

Description

一种用于添加和检测视频水印的方法与设备
技术领域
本申请涉及通信领域,尤其涉及一种用于添加和检测视频水印的技术。
背景技术
数字水印,是一种有效的数字产品版权保护和数据安全维护技术。近年来数字水印技术取得了很大的发展。视频水印就是加载在数字视频上的数字水印。视频水印利用视频数据中普遍存在的冗余数据和随机性把表征版权的信息嵌入到原始视频数据中,从而保护数字产品版权或完整性,确保版权所有者的合法权益。
但是随着技术的不断发展,人们可以利用图像修复等算法去除添加到视频数据中的视频水印。从而破坏了对视频数据的完整性以及版权的保护。
发明内容
本申请的一个目的是提供一种用于添加和检测视频水印的方法与设备。
根据本申请的一个方面,提供了一种用于在视频中添加水印的方法,该方法包括:
获取待处理的视频信息;
根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;
在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
根据本申请的另一个方面,提供了一种用于检测视频中水印的方法,其中,该方法包括:
从待处理的视频信息中提取第一水印序列信息;
从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息;
根据所述第二水印序列信息对所述视频信息进行检测。
根据本申请的另一个方面,提供了一种用于检测视频中水印的方法,其中,该方法包括:
从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息中各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;
将所述基础水印序列在所述第一水印序列信息上移动匹配;
若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。
根据本申请的一个方面,提供了一种用于在视频中添加水印的设备,其中,该设备包括:
获取模块,用于获取待处理的视频信息;
确定模块,用于根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;
添加模块,用于在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
根据根据本申请的另一个方面,提供了用于检测视频中水印的设备,其中,该设备包括:
第一提取模块,用于从待处理的视频信息中提取第一水印序列信息;
第二提取模块,用于从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息;
识别模块,用于根据所述第二水印序列信息对所述视频信息进行检测。
根据本申请的另一个方面,提供了一种用于检测视频中水印的设备,其中,该设备包括检测模块,用于:
从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息中各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;
将所述基础水印序列在所述第一水印序列信息上移动匹配;
若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。
根据本申请的一个方面,提供了一种用于在视频中添加水印的设备,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行:
获取待处理的视频信息;
根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;
在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
根据本申请的一个方面,提供了一种用于检测视频中水印的设备,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行:
从待处理的视频信息中提取第一水印序列信息;
从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息;
根据所述第二水印序列信息对所述视频信息进行检测。
根据本申请的一个方面,提供了一种用于检测视频中水印的设备,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行:
从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息中各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;
将所述基础水印序列在所述第一水印序列信息上移动匹配;
若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。
根据本申请的一个方面,提供了存储指令的计算机可读介质,所述指令在被执行时使得系统进行:
获取待处理的视频信息;
根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;
在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
根据本申请的另一个方面,提供了存储指令的计算机可读介质,所述指令在被执行时使得系统进行:
从待处理的视频信息中提取第一水印序列信息;
从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息;
根据所述第二水印序列信息对所述视频信息进行检测。
根据本申请的另一个方面,提供了存储指令的计算机可读介质,所述指令在被执行时使得系统进行:
从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息中各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;
将所述基础水印序列在所述第一水印序列信息上移动匹配;
若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。
与现有技术相比,本申请通过根据待添加的视频水印的水印序列信息确定该视频信息中待添加水印的视频帧序列。使得所述水印序列信息中的水印信息与所述视频帧序列视频帧存在对应关系。基于所述水印序列信息中各水印信息的序列关系、所述视频帧序列中各视频帧间的序列关系以及水印信息与视频帧间的对应关系,使最后添加到视频信息中的视频水印的抗攻击性更强,增强了对视频信息的版权保护,从而提高了用户体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1示出根据本申请一个实施例的一种用于在视频中添加水印的方法流程图;
图2示出根据本申请一个实施例的一种用于在视频中添加水印的方法中步骤S14的子流程图;
图3示出根据本申请另一个实施例的一种用于检测视频中水印的方法流程图;
图4示出根据本申请另一个实施例的一种用于检测视频中水印的方法流程图;
图5示出根据本申请一个实施例的一种用于在视频中添加水印的设备的模块示意图;
图6示出根据本申请一个实施例的一种用于在视频中添加水印的设备的生成模块的结构示意图;
图7示出根据本申请另一个实施例的一种用于检测视频中水印的设备的模块示意图;
图8示出根据本申请另一个实施例的一种用于检测视频中水印的设备的模块示意图;
图9示出可被用于实施本申请中所述的各个实施例的示例性系统。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(例如,中央处理器(Central Processing Unit,CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RandomAccess Memory,RAM)和/或非易失性内存等形式,如只读存储器(Read Only Memory,ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(Phase-Change Memory,PCM)、可编程随机存取存储器(Programmable Random Access Memory,PRAM)、静态随机存取存储器(Static Random-Access Memory,SRAM)、动态随机存取存储器(Dynamic Random AccessMemory,DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互(例如通过触摸板进行人机交互)的移动电子产品,例如智能手机、平板电脑等,所述移动电子产品可以采用任意操作系统,如android操作系统、iOS操作系统等。其中,所述网络设备包括一种能够按照事先设定或存储的指令,自动进行数值计算和信息处理的电子设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit,ASIC)、可编程逻辑器件(Programmable Logic Device,PLD)、现场可编程门阵列(Field Programmable Gate Array,FPGA)、数字信号处理器(Digital Signal Processor,DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云;在此,云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地,所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然,本领域技术人员应能理解上述设备仅为举例,其他现有的或今后可能出现的设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本申请的描述中,“多个”的含义是两个或者更多,除非另有明确具体的限定。
有鉴于目前利用图像修复等算法去除添加到视频数据中的视频水印的问题,本申请提供一种用于在视频中添加水印的方法,下面结合附图进行说明。
图1示出了根据本申请一个实施例的一种用于在视频中添加水印的方法,该方法包括步骤S11、步骤S12以及步骤S13。在步骤S11中,添加设备获取待处理的视频信息;在步骤S12中,添加设备根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;在步骤S13中,添加设备在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。其中,视频信息的获取以及后续的确定、添加等过程可以由用户设备或网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备;所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云。在此,我们以添加设备统称以上完成获取、确定、添加等过程的用户设备或网络设备。当然,本领域技术人员应能理解上述添加设备仅为举例,其他现有的或今后可能出现的添加设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。在一些实施例中,所述水印序列信息为显性水印的水印序列信息;在另一些实施例中,所述水印序列信息为非显性水印的水印序列信息。其中,水印序列信息包括水印信息的形态、顺序以及在图像位置等信息,其中,水印信息的形态信息包括水印序列信息中各水印信息对应图案的形状、大小以及姿态(如旋转角度等)等信息,水印信息的顺序指水印序列信息中各水印信息的排列顺序,水印信息的图像位置信息包括水印序列信息中各水印信息在视频帧对应的图像坐标系中的位置信息,在此,视频帧对应图像坐标系以左上角为原点,向左向下分别延伸坐标轴建立。
具体地,在步骤S11中,添加设备获取待处理的视频信息。其中,视频信息是由一帧一帧的视频图像帧组成的,在一些实施例中,视频信息包括视频帧序列信息。所述视频帧序列信息用于标记视频图像帧的顺序,例如,用视频帧序列信息标记视频图像帧的播放顺序。
在步骤S12中,添加设备根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配。水印包括纸质水印以及数字水印,其中,数字水印是指镶嵌在其他数据(宿主数据)中具有可鉴别性的数字信号或模式,并且不影响宿主数据的可用性。例如,台标就是数字水印的一种形式。在一些实施例中,水印序列信息包括水印信息的形态、顺序以及在图像位置等信息。在一些实施例中,所述视频帧序列是指所述视频信息中待添加水印的视频帧对应的视频帧序列信息(为了便于说明,在接下来的说明中将待添加水印统称为目标标记信息)。在一些实施例中,所述相邻的任两个视频帧包括所述两个视频帧在该视频帧序列中的位置相邻。但是,该两个视频帧在该视频信息中的位置可能相邻,也可能间隔其他视频帧,例如,添加设备根据视频信息对应的水印序列信息(如包含1至N的水印序列,其中,1至N仅为代指具有不同形态或者图像位置的水印信息),从视频信息的多个图像帧中按照一定规律(如从第一帧连续抽取或者从第一帧开始间隔一帧抽取),确定对应的视频帧序列(如第1帧至第N帧、第N+1帧至第2N帧…等视频帧序列或者第1、3…2N-1帧、第2N+1、2N+3…4N-1帧等视频帧序列),其中,在一些实施例中,各视频帧序列的顺序与水印序列信息相同,如在连续抽取确定的视频帧序列信息时,1对应的水印信息与第1帧、第N+1帧…第kN+1帧视频帧信息对应,2对应的水印信息与第2帧、第N+2帧…第kN+2帧视频帧信息对应……。若视频信息包含多余的不足N帧的视频帧序列信息,在此,舍弃该多余的视频帧信息或者以水印序列信息相同的顺序确定对应的视频帧序列信息。在另一些实施例中,相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系可能相逆,其原理与上述顺序相同时相同,在此不做赘述。
在步骤S13中,添加设备在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。在一些实施例中,确定视频信息中待添加水印的视频帧序列后,按照视频帧序列中每个视频帧与水印序列中每个水印信息的对应关系,在每个视频帧上添加对应的水印信息,即可获得添加水印后的视频信息。在一些实施例中,视频帧序列中的视频帧的数量是水印序列信息中水印信息的数量的一倍或者多倍。当所述视频帧数量是所述水印信息数量的多倍时,所述水印序列信息被循环使用。例如,水印序列信息包括N个水印信息,视频帧序列包括k*N个视频帧。则该视频帧序列可按顺序分为k组,每组包括N个视频帧;该水印序列信息被循环使用在这k组视频帧序列中。
例如,在某电视台播放的电视节目中添加该电视台的台标X。该台标X为三角形图案。则该电视节目作为待处理的视频信息,该台标X作为目标标记信息。该台标X包括平均分割的三个水印信息(例如,分别为a、b、c),并且,所述a、b、c个水印信息在所述水印序列信息中按照前后顺序排列。根据该水印序列信息确定所述电视节目视频中需要添加水印的视频帧序列。例如,该电视节目视频有三十帧,需要在节目开始以及节目结束时添加台标X。则,可确定视频信息中待添加水印的视频帧序列为前三帧和后三帧。根据视频帧序列中的视频帧与水印序列信息中的水印信息间的顺序对应关系,将水印信息添加到对应的视频帧中。由于视频信息中添加水印的视频帧间存在视频帧序列,所述视频帧序列是按照与视频信息对应的水印序列信息确定的,既根据所述水印序列信息中一个或多个水印信息,确定视频信息中添加水印信息的视频帧序列。可在视频信息的不同位置的视频帧上添加特定的水印信息,并且,添加水印的视频帧间存在序列关系。由于是在视频序列中不同的视频帧上添加水印序列信息中的不同水印信息,这样添加的水印不容易被去除,抗攻击性更强。
在一些实施例中,该方法还包括步骤S14(未示出),在步骤S14中,添加设备根据拟添加至所述视频信息的目标标记信息生成所述视频信息对应的水印序列信息。在一些实施例中,所述目标标记信息包括待添加到视频信息中的水印图案信息,例如,台标。所述水印序列信息包括一个或多个按序排列的水印信息。通过将目标标记信息生成水印序列信息,可在视频信息中的不同视频帧上添加对应的水印信息。例如,多个水印信息形成一个目标标记信息,其中,多个水印信息根据各自不同形态以及图像位置信息拼在一起可以组成目标标记信息等。这样在视频信息上添加水印的抗攻击性更强。在一些实施例中,所述将目标标记信息生成其对应的水印序列信息可通过将目标标记信息拆解成不可拆分的最小单元组成的多个标记信息,根据多个标记对应的形态及在目标标记信息中对应位置,生成对应的水印信息。
在一些实施例中,所述水印序列信息满足以下至少一项:所述水印序列信息中的水印信息包括所述目标标记信息的部分或全部;所述水印序列信息中的水印信息包括所述目标标记信息的部分或全部的缩小处理结果;所述水印序列信息中的多个水印信息按序组成所述目标标记信息。
水印序列信息是由待添加的目标标记信息生成的。在一些实施例中,水印序列信息中的水印信息包括目标标记信息的全部,例如,将目标标记信息的全部生成水印序列信息。其中,该水印序列信息中可包括一个或多个水印信息,所述一个或多个水印信息组成所述目标标记信息的全部;在另一些实施例中,水印序列信息中的水印信息包括目标标记信息的部分,例如,只将目标标记信息的部分生成水印序列信息。其中,该水印序列信息包括一个或多个水印信息。所述一个或多个水印信息组成所述目标标记信息的部分。因此,在一些实施例中,可针对目标标记信息生成需要的水印序列信息。例如,当目标标记信息的全部都有必要添加到视频信息中时,将该目标标记信息全部生成水印序列信息;当该目标标记信息中只有部分需要添加到视频信息中进行标记时,可有针对性将目标标记信息中的部分生成水印序列信息。
例如,运用图像分割技术分割出目标标记信息中需要生成水印序列信息的部分,并将该部分进行标记,并将该部分生成水印序列信息。这样,在一些实施例中,用户可根据需要将目标标记信息的全部或部分添加到视频信息中。例如,在视频的前半部分需要添加目标标记信息的前半部分,视频的后半部分需要添加该目标标记信息的后半部分。可将该目标标记信息的前半部分生成水印序列信息,再根据该水印序列信息将其中的水印信息添加到前半部分视频信息中对应的视频序列中。进一步地,可将该目标标记信息的后半部分生成水印序列信息,再根据该水印序列信息将其中的水印信息添加到后半部分视频信息中对应的视频序列中。可灵活处理目标标记信息,根据需要添加目标标记信息的部分或全部。相比于现有的直接将水印添加到视频中的做法,实用性更强。
在一些实施例中,所述水印序列信息中的水印信息包括所述目标标记信息的部分或全部的缩小处理结果。同上一实施例中介绍的,水印序列信息中的水印信息包括所述目标标记信息的部分或全部,在此不做赘述介绍。本实施例与上一实施例不同的是,本实施例中水印序列信息中的水印信息包括目标标记信息的部分或全部的缩小处理。例如,受视频信息大小的限制,或者为了使添加到视频信息中的水印大小适应于视频画面的大小。水印序列信息中水印信息需要进行缩小处理。本实施例以实际需要出发,对水印序列信息中的水印信息进行缩小处理。实用性得到进一步的提高。
在一些实施例中,所述水印序列信息中的多个水印信息按序组成所述目标标记信息。例如,水印序列信息包括多个水印信息,所述多个水印信息按序排列组成目标标记信息。例如,现将“abc”的目标标记信息生成其对应的水印序列信息,该水印序列信息包括“a”“b”“c”三个水印信息,并且,所述三个水印信息按照“a”“b”“c”的顺序排列在所述水印序列信息中。由于水印序列信息中的多个水印信息是以一定的顺序关系添加到视频帧序列中的视频帧中的,在视频帧序列中一个视频帧上展现的不是目标标记信息本身。因此,可防止攻击者将整个目标标记信息去除。并且,本实施例中水印序列信息中的多个水印信息存在的序列关系,结合视频帧序列中的视频帧的序列关系,以及水印序列信息中的水印信息与视频帧序列中的视频帧间的对应关系,更是大大增加了在视频信息中添加的水印的抗攻击性。
一些实施例中,所述步骤S14包括:添加设备根据所述拟添加至所述视频信息的目标标记信息及所述视频信息,生成所述视频信息对应的水印序列信息。在一些实施例中,可以根据目标标记信息生成视频信息对应的水印序列信息,例如,根据目标标记信息的形状、颜色等生成视频信息对应的水印序列信息;但在另一些实施例中,需要根据目标标记信息以及视频信息生成水印序列信息。例如,根据视频信息的大小(例如,视频帧的多少)确定水印序列信息中水印信息的数量;或者,根据视频信息中视频段的重要程度确定需要在该视频信息的哪些视频帧上添加水印。进一步地,根据需要添加的视频帧确定水印序列信息,例如,确定该水印序列信息中水印信息的数量。本实施例考虑到在添加水印时需要结合视频信息自身的需要生成水印序列信息,有针对性的进行水印的添加。更有利于对视频信息进行保护以及权属证明。
图2示出了步骤S14的子流程图,所述步骤S14包括步骤S141和步骤S142。在步骤S141中,添加设备根据所述视频信息的视频相关信息确定所述视频信息对应的水印序列信息中的水印信息的数量要求信息;在步骤S142中,添加设备根据所述拟添加至所述视频信息的目标标记信息,以及所述数量要求信息,生成所述视频信息对应的水印序列信息,其中所述水印序列信息中的水印数量信息满足所述数量要求信息。在一些实施例中,视频相关信息包括视频时长信息、视频重要程度信息。在一些实施例中,数量要求信息包括定量信息或者数量阈值信息。例如,水印序列信息中的水印信息需要达到的定量信息,或者,水印序列信息中的水印信息的数量需要大于或等于数量阈值信息。其中,在一些实施例中,根据视频相关信息确定所述数量阈值信息。进一步地,根据目标标记信息、数量要求信息生成视频信息对应的水印序列信息。
例如,视频信息a的播放频率为15帧/s,时长为60s。则该视频信息XX共有900个视频帧,属于时长短小的视频信息。首先,该视频信息XX对应的水印序列信息中水印信息的数量不能多于900个。其次,为了水印序列信息在该视频信息中能够更好的循环使用,该视频信息a的视频帧数量最好是其对应的水印序列信息中水印信息的整数倍。因此,该视频信息a对应的水印序列信息中水印信息的数量要求信息可以是900的整除数。例如,9、100、450……进一步地,根据水印信息的数量要求信息以及目标标记信息生成该视频信息a对应的水印序列信息。例如,水印信息的数量要求信息为100个,则可根据该数量要求信息将目标标记信息分割成100份。具体地,可以结合目标标记信息进行分割。例如,平均分割或者按照等差序列等序列关系进行分割。
又例如,视频信息b的播放频率为15帧/s,时长为60min。则该视频信息b共有54000个视频帧,属于时长较长的视频信息。为了适应视频信息b的时长,以便在该是视频信息b的更多视频帧上添加水印。该视频信息b对应的水印序列信息中水印信息的数量也应相应的增加。例如,视频信息b对应的水印序列信息中水印信息的数量不少于100个或者200个。
再例如,视频信息c是对作品X的介绍视频。该作品X是用户甲的作品。用户甲想要在该视频信息c中添加水印以保护其对作品X的相关介绍不被篡改。则在该视频信息c上添加水印时,可针对视频信息c中出现作品X的相关介绍时进行添加水印的工作。具体为,根据视频信息c的视频相关信息。例如,在1min至10min以及20min至35min处是对作品X相关内容的介绍。那么,1min至10min以及20min至35min可看做是该视频信息c中的重要部分。进一步地,根据1min至10min以及20min至35min的视频信息确定水印序列中水印信息的数量要求信息。例如,1min至10min的视频信息中包括500个视频帧;20min至35min中包括750个视频帧。可分别根据500个视频帧和750个视频帧确定水印信息的数量要求信息。例如,若想要每50个视频帧生成一个目标标记信息,则水印序列信息中水印信息的数量可以为50。50个水印信息分别被在500个视频帧以及750个视频帧中循环使用。根据视频信息的视频重要程度确定水印信息的数量要求信息,可以只在视频信息中的重要部分添加水印。节约资源的同时也提高了效率。
在一些实施例中,所述步骤S142包括:添加设备将所述拟添加至所述视频信息的目标标记信息分解为满足所述数量要求信息的多个水印信息;按所述多个水印信息中各个水印信息在所述目标标记信息中的顺序信息,将所述多个水印信息生成所述视频信息对应的水印序列信息。在一些实施例中,所述目标标记信息的分解过程可以通过图像分割技术实现。图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。它是由图像处理到图像分析的关键步骤。现有的图像分割方法主要分以下几类:基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。从数学角度来看,图像分割是将数字图像划分成互不相交的区域的过程。图像分割的过程也是一个标记过程,即把属于同一区域的像索赋予相同的编号。
例如,根据视频信息的视频相关信息确定出水印序列信息中水印信息的数量要求信息后。则可通过图像分割技术将目标标记信息分割成满足所述数量要求信息的多个水印信息。例如,数量要求信息为50个。则将目标标记信息分割成50个水印信息。其中,所述50个水印信息可按照顺序排列组成该目标标记信息。进一步地,该50个水印信息在所述目标标记信息生成的水印序列信息中的排列顺序与其在目标标记信息中的排列顺序相同。将目标标记信息分割成满足数量要求信息的多个水印信息,该多个水印信息以特定的顺序组成该目标标记信息,进一步地,按照上述顺序生成水印序列信息。即水印序列信息中的多个水印信息有顺序要求,该顺序要求是组成其对应的目标标记信息的条件。多个水印信息间的排列使其可以按照一定的顺序分别添加到视频序列的不同视频帧上。并且能够达到水印序列信息中的水印信息的顺序与视频帧序列中视频帧的顺序相对应。以提高添加水印的抗攻击性。
在一些实施例中,所述水印序列信息还包括所述水印序列信息中各水印信息在对应视频帧中的拟添加位置信息;其中,所述步骤S13包括:添加设备根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。视频帧为影像动画中的最小单位,如单幅影像画面。
例如,确定了目标标记信息,根据该目标标记信息生成了视频信息对应的水印序列信息后,则可进一步的确定视频帧中需要添加个水印信息的拟添加位置信息。其中,水印序列信息包括一个或多个按序排列的水印信息,以及每个水印信息的拟添加位置信息。例如,在视频帧的左上角或者右下角添加对应的水印信息,或者在视频帧的某一具体坐标位置上添加对应的水印信息。进一步地,根据每个水印信息的拟添加位置在视频序列中的每个视频帧的对应位置上添加对应的水印信息。
在一些实施例中,所述方法还包括步骤S14(未示出)。在步骤S14中,添加设备确定在所述视频帧序列的每个视频帧中添加水印信息的拟添加位置信息;其中,所述步骤S13包括:根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。在一些实施例中,可以按照视频帧上坐标位置的等间距的递增、水印信息在水印序列中的顺序或者水印信息在目标标记信息中的位置信息等来确定该拟添加位置信息。
例如,视频帧序列包括需要添加水印信息的一个或多个视频帧。视频帧序列中的一个或多个视频帧的顺序关系与水印序列信息中一个或多个水印信息的顺序关系相同。以便在视频帧序列的视频帧上添加对应的水印信息,使得该一个或多个水印信息在视频信息上能够以目标标记信息的形式呈现出来。除了达到呈现目标标记信息的目的外,还需要在视频信息的特定位置上呈现目标标记信息的。因此,需要确定视频序列中每个视频帧中添加水印信息的拟添加位置信息。进一步地,根据该拟添加位置信息在视频帧的特定位置上添加水印信息。
在一些实施例中,所述步骤S14包括:添加设备根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,确定在所述视频帧序列中除所述首个视频帧外的其余视频帧中添加水印信息的拟添加位置信息。
例如,现需将一个形状为等边三角形的目标标记信息添加到视频信息X中。该视频信息X的视频序列中包括100个视频帧。为了方便添加,将该等边三角形的目标标记信息分割成5个水印信息(例如,abcde)。并生成包括该5个水印信息(abcde)的水印序列信息。其中,所述水印信息“abcde”按序排列。首先,可先确定在视频帧序列中首个视频帧中添加水印信息a的拟添加位置信息。例如,确定将水印信息a添加到首个视频帧的右上角位置。进一步地,再根据在首个视频帧的拟添加位置信息确定其余四个视频帧的拟添加位置信息。例如,水印信息b在该视频帧序列中第二个视频帧上的拟添加位置信息在该首个视频帧的拟添加位置信息的右边。水印信息c在该视频帧序列中第三个视频帧上的拟添加位置信息在该第二个视频帧的拟添加位置信息的右边。水印信息d在该视频帧序列中第四个视频帧上的拟添加位置信息在该第三个视频帧的拟添加位置信息的右边。水印信息e在该视频帧序列中第五个视频帧上的拟添加位置信息在该第四个视频帧的拟添加位置信息的右边。因而,在一些实施例中,可以通过确定视频帧序列中首个视频帧的水印信息拟添加位置,计算出其余视频帧的拟添加位置信息。无需确定每一个视频帧上的拟添加位置信息。例如,根据与首个视频帧上的拟添加位置信息的相对位置计算得出第二个视频帧上的拟添加位置信息,后一个视频帧再依次根据与前一个视频帧上的拟添加位置信息的相对位置确定拟添加位置信息。当然了,在另一些实施例中,也可以确定视频帧序列中每一个视频帧的水印信息拟添加位置信息。
在一些实施例中,所述步骤S14包括:添加设备根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,以及所述其余视频帧在所述水印序列信息中对应水印信息的水印相关信息,确定在所述其余视频帧中添加水印信息的拟添加位置信息。在一些实施例中,视频序列中首个视频帧的的拟添加位置信息可以是预先设定的;在另一些实施例中,视频帧序列中首个视频帧的拟添加位置信息可以是实时确定。在一些实施例中,所述水印相关信息包括水印信息在水印序列信息中的顺序信息,以根据该顺序信息将该水印信息添加到视频帧序列中对应的视频帧上。进一步地,根据该水印信息的拟添加位置信息将该水印信息添加到该视频帧的对应位置上。以在视频信息的特定位置上形成目标标记信息。并且,该目标标记信息按照一定的序列分布在该视频信息的不同视频帧上。该序列包括水印信息的序列排列以及视频序列中视频帧的序列排列的结合。使得添加后的水印的抗攻击性更强。
例如,水印序列信息中包括N个按序排列的水印信息。视频帧序列中包括K*N个按序排列的视频帧。其中,N个水印信息可在K*N个视频帧中循环使用。例如,以N个水印信息为一组,循环添加到该视频帧序列中。其中,每一组水印信息中的水印信息与视频帧序列中每一组视频帧的顺序关系相同。用户设备预先确定了视频序列中首个视频帧的拟添加位置信息(例如,首个视频帧的左上角)。进一步地,视频序列中其余视频帧与水印序列中的其余水印信息存在顺序对应关系,根据该顺序对应关系,将其余的N-1个水印信息分别添加到其余的K*N-1个视频帧中。
在一些实施例中,所述水印相关信息包括以下至少一项:对应水印信息在所述水印序列信息中的顺序信息;对应水印信息相对所述水印序列信息中首个水印的相对位置信息;对应水印信息相对所述水印序列信息中相邻水印的相对位置信息。在一些实施例中,相对位置信息包括相对于首个水印的方位信息或者具体坐标位置信息;在另一些实施例中,相对位置信息包括相对于相邻水印的方位信息或者具体坐标位置信息。
例如,确定好视频序列中首个视频帧的拟添加位置信息后,需要确定其他视频帧中对应水印信息的拟添加位置信息。在一些实施例中,可根据对应水印信息在水印序列信息中的顺序信息。如前面介绍的,水印序列信息中包括多个水印信息时,所述多个水印信息按序排列。视频帧序列中的视频帧也是按序排列。视频帧序列中的每个视频帧有其对应的水印信息。当确定好首个视频帧的拟添加位置信息后,可根据水印信息的顺序信息将水印信息按序添加到对应的视频帧上。例如,其余视频帧的拟添加位置信息与首个视频帧上的拟添加位置信息是相同,则在确定首个视频帧的拟添加位置信息后,可进一步地根据水印信息在水印序列信息中的顺序信息将其余的水印信息添加到其余的视频帧中。
再例如,确定好视频帧序列中首个视频帧的拟添加位置信息后,对于其余水印信息的拟添加位置信息可根据其相对于首个水印的拟添加位置信息确定。如前面所述,当水印序列信息中包括多个水印信息时,该多个水印信息存在顺序关系。因此,可通过确定其余每个水印信息相对于首个水印信息的相对位置信息确定其余水印信息的拟添加位置信息。例如,首个水印信息的拟添加位置信息的坐标为(0,15)。通过计算得出按序排列的第二个水印信息相对于首个水印的距离为水平1,则可确定该第二个水印信息的拟添加位置信息的坐标为(1,15)。进一步地,第三个水印信息相对于首个水印信息的水平距离为2,则可确定该第三个水印信息的拟添加位置信息的坐标为(2,15)。以此类推,直到确定出水印序列信息中最后一个水印信息的拟添加位置信息。
又例如,确定好视频帧序列中首个视频帧的拟添加位置信息后,对于其余水印信息的拟添加位置信息可根据其相对于相邻水印的拟添加位置信息确定。如前面所述,当水印序列信息中包括多个水印信息时,该多个水印信息存在顺序关系。因此,可通过确定其余每个水印信息相对于相邻水印信息的相对位置信息确定其余水印信息的拟添加位置信息。例如,首个水印信息的拟添加位置信息的坐标为(0,15)。通过计算得出按序排列的第二个水印信息相对于首个水印的距离为水平1,则可确定该第二个水印信息的拟添加位置信息的坐标为(1,15)。进一步地,第三个水印信息相对于第二个水印信息的水平距离为1,则可确定该第三个水印信息的拟添加位置信息的坐标为(2,15)。以此类推,直到确定出水印序列信息中最后一个水印信息的拟添加位置信息。
上文主要针对目前利用图像修复等算法去除添加到视频数据中的视频水印的问题,介绍了本申请提供的用于添加视频水印的方法。此外,现有检测视频水印的过程必须在已知添加的视频水印的前提下进行,从而使视频水印的检测受到诸多条件限制。有鉴于此,本申请还提供一种用于检测视频水印的方法,下面结合附图进行介绍。
如图3所示,根据本申请的另一个方面提出了一种用于检测视频中水印的方法,其中,该方法包括步骤S21、步骤S22以及步骤S23。在步骤S21中,检测设备从待处理的视频信息中提取第一水印序列信息。在步骤S22中,检测设备从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息。在步骤S23中,根据所述第二水印序列信息对所述视频信息进行检测。其中,所述第一水印序列信息的提取以及后续的第二水印序列信息的提取、切分等过程可以由用户设备、网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备。在此,我们以检测设备统称以上完成第一水印序列信息的提取以及后续的第二水印序列信息的提取、切分等过程的用户设备和网络设备。当然,本领域技术人员应能理解上述检测设备仅为举例,其他现有的或今后可能出现的检测设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
具体而言,在步骤S21中,检测设备从待处理的视频信息中提取第一水印序列信息。在一些实施例中,所述第一水印序列信息包括添加到所述视频信息中的所有水印序列信息。其中,所述第一水印序列信息包括一个或多个水印信息。在另一些实施例中,所述第一水印序列信息包括添加到所述视频信息中的部分水印序列信息。其中,所述第一水印序列信息中包括一个或多个水印信息。
在步骤S22中,检测设备从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息。在一些实施例中,所述第二水印序列信息包括长度为N的连续子序列,该连续子序列的水印信息与第一水印序列信息中某一部分序列中水印信息相同,以第一水印序列信息中的相同部分的起始位置和结束位置为端点,可以将第一水印序列信息切分为多个子序列。其中,每个子序列与该连续子序列的匹配度大于或等于预定的第一匹配阈值信息。例如,按照基础水印序列的长度信息(例如,N),从第一水印序列信息第一个水印信息开始截取长度为N的连续子序列,检测该第一水印序列信息中是否存在与截取的连续子序列相同的序列,若存在,则以序列的起始位置与结束位置为端点,将该第一水印序列信息切分为多个子序列,其中,可能存在一定数量的子序列与截取的子序列相同,可能还存在一些被切分出来与截取的子序列不同的子序列,基于不同的子序列与截取的子序列间的匹配度,判断截取的子序列是否满足该连续子序列的切分,若满足将该连续子序列作为第二水印序列信息,否则,继续尝试从该第一水印序列信息第二个水印信息开始截取长度为N的连续子序列并检测,直至找到第二水印序列或遍历该第一水印序列信息中的所有长度为N的连续子序列。
例如,检测设备从待处理的视频信息中提取第一水印序列信息“12345126451234512375”。现按照长度为5的基础水印序列“12345”从该第一水印序列信息的第一个水印信息开始截取长度为5的连续子序列“12345”。进一步地,检测该第一水印序列中是否存在与截取的连续子序列相同的序列。若存在,例如该第一水印序列信息中存在与连续子序列“12345”相同的序列,则以该连续子序列的起始位置与结束位置为端点,将该第一水印序列信息切分成多个子序列。例如,将该第一水印序列信息切分成“12345”“12645”“12345”以及“12375”的子序列。其中,子序列“12645”和“12375”与截取的子序列“12345”不同。基于子序列“12645”和“12375”与截取的子序列“12345”间的匹配度,判断截取的子序列是否满足该连续子序列的切分,若满足将该连续子序列作为第二水印序列信息。例如,预设该第一匹配阈值信息为70%。“12645”和“12375”与“12345”的匹配度均为80%。匹配度大于该第一匹配阈值信息。则将截取的连续子序列“12345”作为第二水印序列信息。匹配度小于该第一匹配阈值信息,则继续尝试从该第一水印序列信息第二个水印信息开始截取长度为N的连续子序列并检测,直至找到第二水印序列或遍历该第一水印序列信息中的所有长度为N的连续子序列。因此,在本实施例中,可以在不知道添加到视频信息中的目标标记信息的水印序列信息的情况下,通过从第一水印序列信息中截取连续子序列,并将该连续子序列在该第一水印序列信息中进行迭代匹配的方式进行视频水印的检测。通用性更强。
在步骤S23中,根据所述第二水印序列信息对所述视频信息进行检测。在一些实施例中,可根据该第二水印序列信息识别视频信息的权属信息。所述权属信息包括该视频信息的所有者信息或者版权归属信息。在另一实施例中,可根据该第二水印序列信息识别视频信息是否被修改。
在一些实施例中,所述步骤S13包括:根据所述第二水印序列信息识别所述视频信息的权属信息;或者,根据所述第二水印序列信息确定所述视频信息是否被修改。在一些实施例中,所述权属信息包括所述视频信息的所有者信息或者所述视频信息的版权归属信息。在一些实施例中,可以根据所述第二水印序列信息识别所述视频信息的权属信息,例如,基础水印序列与视频权属信息之间存在映射关系,其中,所述基础水印序列与所述第二水印序列信息间存在对应关系,基于该映射关系视频所述视频信息的权属信息;在另一些实施例中,可以根据所述第二水印序列信息确定所述视频信息是否被修改,例如,将所述第二水印序列信息与所述视频信息上的多个子序列进行匹配,根据匹配度确定所述视频信息是否被修改。
在一些实施例中,所述根据所述第二水印序列信息识别所述视频信息的权属信息,包括:基于基础水印序列与视频权属信息的映射关系,确定所述第二水印序列信息对应的权属信息。在一些实施例中,所述视频权属信息包括但不限于所述视频信息的所有者信息或者所述视频信息的版权归属信息。在一些实施例中,所述基础水印序列包括但不限于已知的与视频权属信息存在映射关系的水印序列信息。
例如,所述第二水印序列信息与所述基础水印序列信息相同或者匹配度达到一定的要求。因此,所述第二水印序列信息可以等同的看做是基础水印序列。在一些实施例中,基础水印序列包括已知的添加到视频信息中的多个水印信息以及所述多个水印信息的序列组合关系。例如,等差递增等序列组合关系。并且,该基础水印序列与所有者信息存在映射关系。或者,该基础水印序列与视频信息的版权归属存在映射关系。因此,在确定了第二水印序列信息后,结合上述映射关系可以确定视频信息的权属信息。
在一些实施例中,所述根据所述第二水印序列信息确定所述视频信息是否被修改,包括:若所述多个子序列中存在一个子序列与所述第二水印序列信息的匹配度小于预定的第二匹配阈值信息,确定所述视频信息已被修改。在一些实施例中,上述第一匹配阈值信息用于确定提取的子序列是否为第二水印序列信息。所述第二匹配阈值信息用于确定所述视频信息是否被修改。例如,将每个子序列与所述第二匹配阈值信息进行比较,若匹配度低于预设的第二匹配阈值信息,则确定该子序列被修改。一般情况下,该第一匹配阈值信息小于该第二匹配阈值信息。例如,第一匹配阈值信息为80%,第二匹配阈值信息不低于80%。可根据需要提高第二匹配阈值信息的高度,以提高检测的精度。
根据本申请的另一个方面,提出了一种用于检测视频中水印的方法,其中,该方法包括步骤S31、步骤S32以及步骤S33。在步骤S31中,检测设备从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;在步骤S32中,检测设备将所述基础水印序列在所述第一水印序列信息上移动匹配;在步骤S33中,若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。其中,所述第一水印序列信息的提取以及后续的移动匹配等过程可以由用户设备、网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备。在此,我们以检测设备统称以上完成第一水印序列信息的提取以及后续的移动匹配等过程的用户设备和网络设备。当然,本领域技术人员应能理解上述检测设备仅为举例,其他现有的或今后可能出现的添加设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在一些实施例中,所述第一水印序列信息包括从视频信息中提取的全部或部分水印序列信息。所述基础水印序列信息包括已知的水印序列信息。例如,已知所述基础水印序列信息中各水印在视频帧中的拟添加位置信息。第一水印序列信息可被切分成一个或多个子序列。其中,每个子序列中包括一个或多个水印信息。每个水印信息有其对应的在视频帧上的拟添加位置信息。在已知水印间的排列顺序以及每个水印在其对应的视频帧上的拟添加位置后。将基础水印序列在所述第一水印序列信息上移动匹配,例如,通过卷积算法实现移动匹配。当然,本领域技术人员应能理解,以上所述的卷积算法仅为举例,其他现有的或今后可能出现的算法如能适用于本申请,也包含在本申请的保护范围内,并以引用的方式包含于此。在移动匹配的过程中,若子序列上水印提取位置与基础序列中的水印拟添加位置相同,则说明该子序列没有被修改;若不相同,则说明该子序列被修改了。本实施例的目的是考虑到实际当中可能存在已知添加到视频信息中的水印序列信息的情况。例如,视频信息所有者自己在视频信息中添加水印。后续的检查该视频信息是否被修改时,可以将提取的第一水印序列信息与已知的基础水印序列进行匹配对比。从而检测视频信息是否被修改。
上文主要对本申请提供的方法进行了介绍,本申请还提供对应的设备,这些设备包括能够执行上述各方法示例中各个步骤的单元或模块,这些单元或模块可以通过硬件、软件或软硬结合的方式来实现,本申请并不限定。下面结合图5至图7分别对本申请提供的设备进行介绍。
图5示出了根据本申请一个实施例的一种用于在视频中添加水印的设备,该设备包括能够执行图1所示方法中各个步骤的单元或模块,具体地,该设备包括获取模块、确定模块以及添加模块。获取模块,用于获取待处理的视频信息;确定模块,用于根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相同;添加模块,用于在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。其中,视频信息的获取以及后续的确定、添加等过程可以由用户设备或网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备;所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云。在此,我们以添加设备统称以上完成获取、确定、添加等过程的用户设备或网络设备。当然,本领域技术人员应能理解上述添加设备仅为举例,其他现有的或今后可能出现的添加设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。在一些实施例中,所述水印序列信息为显性水印的水印序列信息;在另一些实施例中,所述水印序列信息为非显性水印的水印序列信息。其中,水印序列信息包括水印信息的形态、顺序以及在图像位置等信息,其中,水印信息的形态信息包括水印序列信息中各水印信息对应图案的形状、大小以及姿态(如旋转角度等)等信息,水印信息的顺序指水印序列信息中各水印信息的排列顺序,水印信息的图像位置信息包括水印序列信息中各水印信息在视频帧对应的图像坐标系中的位置信息,在此,视频帧对应图像坐标系以左上角为原点,向左向下分别延伸坐标轴建立。
具体地,获取模块,用于获取待处理的视频信息。其中,视频信息是由一帧一帧的视频图像帧组成的,在一些实施例中,视频信息包括视频帧序列信息。所述视频帧序列信息用于标记视频图像帧的顺序,例如,用视频帧序列信息标记视频图像帧的播放顺序。
确定模块,用于根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相同。水印包括纸质水印以及数字水印,其中,数字水印是指镶嵌在其他数据(宿主数据)中具有可鉴别性的数字信号或模式,并且不影响宿主数据的可用性。例如,台标就是数字水印的一种形式。在一些实施例中,水印序列信息包括水印信息的形态、顺序以及在图像位置等信息。在一些实施例中,所述视频帧序列是指所述视频信息中待添加水印的视频帧对应的视频帧序列信息(为了便于说明,在接下来的说明中将待添加水印统称为目标标记信息)。在一些实施例中,所述相邻的任两个视频帧包括所述两个视频帧在该视频帧序列中的位置相邻。但是,该两个视频帧在该视频信息中的位置可能相邻,也可能间隔其他视频帧,例如,添加设备根据视频信息对应的水印序列信息(如包含1至N的水印序列,其中,1至N仅为代指具有不同形态或者图像位置的水印信息),从视频信息的多个图像帧中按照一定规律(如从第一帧连续抽取或者从第一帧开始间隔一帧抽取),确定对应的视频帧序列(如第1帧至第N帧、第N+1帧至第2N帧…等视频帧序列或者第1、3…2N-1帧、第2N+1、2N+3…4N-1帧等视频帧序列),其中,各视频帧序列的顺序与水印序列信息相同,如在连续抽取确定的视频帧序列信息时,1对应的水印信息与第1帧、第N+1帧…第kN+1帧视频帧信息对应,2对应的水印信息与第2帧、第N+2帧…第kN+2帧视频帧信息对应……。若视频信息包含多余的不足N帧的视频帧序列信息,在此,舍弃该多余的视频帧信息或者以水印序列信息相同的顺序确定对应的视频帧序列信息。
添加模块,用于在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。在一些实施例中,确定视频信息中待添加水印的视频帧序列后,按照视频帧序列中每个视频帧与水印序列中每个水印信息的对应关系,在每个视频帧上添加对应的水印信息,即可获得添加水印后的视频信息。在一些实施例中,视频帧序列中的视频帧的数量是水印序列信息中水印信息的数量的一倍或者多倍。当所述视频帧数量是所述水印信息数量的多倍时,所述水印序列信息被循环使用。例如,水印序列信息包括N个水印信息,视频帧序列包括k*N个视频帧。则该视频帧序列可按顺序分为k组,每组包括N个视频帧;该水印序列信息被循环使用在这k组视频帧序列中。
在此,有关在视频帧序列与水印序列信息的关系示例与图1所示方法中的示例相对应,可以参考图1中的详细介绍,此处不做赘述。
在一些实施例中,该设备还包括生成模块(未示出),生成模块,用于根据拟添加至所述视频信息的目标标记信息生成所述视频信息对应的水印序列信息。在一些实施例中,所述目标标记信息包括待添加到视频信息中的水印图案信息,例如,台标。所述水印序列信息包括一个或多个按序排列的水印信息。通过将目标标记信息生成水印序列信息,可在视频信息中的不同视频帧上添加对应的水印信息。例如,多个水印信息形成一个目标标记信息,其中,多个水印信息根据各自不同形态以及图像位置信息拼在一起可以组成目标标记信息等。这样在视频信息上添加水印的抗攻击性更强。在一些实施例中,所述将目标标记信息生成其对应的水印序列信息可通过将目标标记信息拆解成不可拆分的最小单元组成的多个标记信息,根据多个标记对应的形态及在目标标记信息中对应位置,生成对应的水印信息。
在一些实施例中,所述水印序列信息满足以下至少任一项:所述水印序列信息中水印信息包括所述目标标记信息的部分或全部;所述水印序列信息中水印信息包括所述目标标记信息的部分或全部的缩小处理结果;所述水印序列信息中多个水印信息按序组成所述目标标记信息。
水印序列信息是由待添加的目标标记信息生成的。在一些实施例中,水印序列信息中的水印信息包括目标标记信息的全部,例如,将目标标记信息的全部生成水印序列信息。其中,该水印序列信息中可包括一个或多个水印信息,所述一个或多个水印信息组成所述目标标记信息的全部;在另一些实施例中,水印序列信息中的水印信息包括目标标记信息的部分,例如,只将目标标记信息的部分生成水印序列信息。其中,该水印序列信息包括一个或多个水印信息。所述一个或多个水印信息组成所述目标标记信息的部分。因此,在一些实施例中,可针对目标标记信息生成需要的水印序列信息。例如,当目标标记信息的全部都有必要添加到视频信息中时,将该目标标记信息全部生成水印序列信息;当该目标标记信息中只有部分需要添加到视频信息中进行标记时,可有针对性将目标标记信息中的部分生成水印序列信息。
在此,有关水印序列信息的示例与图1所述方法还包括步骤S14的情况下的示例相对应,可以参考图1中的详细介绍,此处不做赘述。
一些实施例中,所述生成模块用于根据所述拟添加至所述视频信息的目标标记信息及所述视频信息,生成所述视频信息对应的水印序列信息。在一些实施例中,可以根据目标标记信息生成视频信息对应的水印序列信息,例如,根据目标标记信息的形状、颜色等生成视频信息对应的水印序列信息;但在另一些实施例中,需要根据目标标记信息以及视频信息生成水印序列信息。例如,根据视频信息的大小(例如,视频帧的多少)确定水印序列信息中水印信息的数量;或者,根据视频信息中视频段的重要程度确定需要在该视频信息的哪些视频帧上添加水印。进一步地,根据需要添加的视频帧确定水印序列信息,例如,确定该水印序列信息中水印信息的数量。本实施例考虑到在添加水印时需要结合视频信息自身的需要生成水印序列信息,有针对性的进行水印的添加。更有利于对视频信息进行保护以及权属证明。
图6示出了生成模块的结构示意图,该生成模块包括能够执行图2所示方法中各个步骤的单元或模块,具体地,所述生成模块包括第一生成模块和第二生成模块。第一生成模块,用于根据所述视频信息的视频相关信息确定所述视频信息对应的水印序列信息中的水印信息的数量要求信息;第二生成模块,用于根据所述拟添加至所述视频信息的目标标记信息,以及所述数量要求信息,生成所述视频信息对应的水印序列信息,其中,所述水印序列信息中的水印数量信息满足所述数量要求信息。在一些实施例中,视频相关信息包括视频时长信息、视频重要程度信息。在一些实施例中,数量要求信息包括定量信息或者数量阈值信息。例如,水印序列信息中的水印信息需要达到的定量信息,或者,水印序列信息中的水印信息的数量需要大于或等于数量阈值信息。其中,在一些实施例中,根据视频相关信息确定所述数量阈值信息。进一步地,根据目标标记信息、数量要求信息生成视频信息对应的水印序列信息。
在此,有关视频相关信息的示例与图2所述方法中步骤S14的子流程图的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述第二生成模块用于将所述拟添加至所述视频信息的目标标记信息分解为满足所述数量要求信息的多个水印信息;按所述多个水印信息中各个水印信息在所述目标标记信息中的顺序信息,将所述多个水印信息生成所述视频信息对应的水印序列信息。在一些实施例中,所述目标标记信息的分解过程可以通过图像分割技术实现。图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。它是由图像处理到图像分析的关键步骤。现有的图像分割方法主要分以下几类:基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。从数学角度来看,图像分割是将数字图像划分成互不相交的区域的过程。图像分割的过程也是一个标记过程,即把属于同一区域的像索赋予相同的编号。
在此,有关数量要求信息的示例与图2所述方法中步骤S14的子流程图的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述水印序列信息还包括所述水印序列信息中各水印信息在对应视频帧中的拟添加位置信息;其中,所述添加模块用于根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。视频帧为影像动画中的最小单位,如单幅影像画面。
在此,有关拟添加位置信息的示例与图2所述方法中步骤S14的子流程图的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述设备还包括添加位置模块(未示出)。添加位置模块用于确定在所述视频帧序列的每个视频帧中添加水印信息的拟添加位置信息;其中,所述添加模块用于根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。在一些实施例中,可以按照视频帧上坐标位置的等间距的递增、水印信息在水印序列中的顺序或者水印信息在目标标记信息中的位置信息等来确定该拟添加位置信息。
在此,有关拟添加位置信息的示例与图2所述方法中步骤S14的子流程图的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述添加位置模块用于根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,确定在所述视频帧序列中除所述首个视频帧外的其余视频帧中添加水印信息的拟添加位置信息。
在此,有关首个视频帧中添加水印信息的示例与图2所述方法的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述添加位置模块用于根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,以及所述其余视频帧在所述水印序列信息中对应水印信息的水印相关信息,确定在所述其余视频帧中添加水印信息的拟添加位置信息。在一些实施例中,视频序列中首个视频帧的的拟添加位置信息可以是预先设定的;在另一些实施例中,视频帧序列中首个视频帧的拟添加位置信息可以是实时确定。在一些实施例中,所述水印相关信息包括水印信息在水印序列信息中的顺序信息,以根据该顺序信息将该水印信息添加到视频帧序列中对应的视频帧上。进一步地,根据该水印信息的拟添加位置信息将该水印信息添加到该视频帧的对应位置上。以在视频信息的特定位置上形成目标标记信息。并且,该目标标记信息按照一定的序列分布在该视频信息的不同视频帧上。该序列包括水印信息的序列排列以及视频序列中视频帧的序列排列的结合。使得添加后的水印的抗攻击性更强。
在此,有关其余视频帧中的水印序列信息的示例与图2所述方法的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
在一些实施例中,所述水印相关信息包括以下至少任一项:对应水印信息在所述水印序列信息中的顺序信息;对应水印信息相对所述水印序列信息中首个水印的相对位置信息;对应水印信息相对所述水印序列信息中相邻水印的相对位置信息。在一些实施例中,相对位置信息包括相对于首个水印的方位信息或者具体坐标位置信息;在另一些实施例中,相对位置信息包括相对于相邻水印的方位信息或者具体坐标位置信息。
在此,有关水印相关信息的示例与图2所述方法的示例相对应,可以参考图2中的详细介绍,此处不做赘述。
如图7所示,根据本申请的另一个方面提出了一种用于检测视频中水印的设备,该设备包括能够执行图3所示方法中各个步骤的单元或模块,具体地,该设备包括第一提取模块、第二提取模块以及识别模块。第一提取模块用于从待处理的视频信息中提取第一水印序列信息。第二提取模块用于从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息。识别模块,用于根据所述第二水印序列信息对所述视频信息进行检测。其中,所述第一水印序列信息的提取以及后续的第二水印序列信息的提取、切分等过程可以由用户设备、网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备。在此,我们以检测设备统称以上完成第一水印序列信息的提取以及后续的第二水印序列信息的提取、切分等过程的用户设备和网络设备。当然,本领域技术人员应能理解上述检测设备仅为举例,其他现有的或今后可能出现的检测设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
具体而言,第一提取模块用于从待处理的视频信息中提取第一水印序列信息。在一些实施例中,所述第一水印序列信息包括添加到所述视频信息中的所有水印序列信息。其中,所述第一水印序列信息包括一个或多个水印信息。在另一些实施例中,所述第一水印序列信息包括添加到所述视频信息中的部分水印序列信息。其中,所述第一水印序列信息中包括一个或多个水印信息。
第二提取模块,用于从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息。在一些实施例中,所述第二水印序列信息包括长度为N的连续子序列,该连续子序列的水印信息与第一水印序列信息中某一部分序列中水印信息相同,以第一水印序列信息中的相同部分的起始位置和结束位置为端点,可以将第一水印序列信息切分为多个子序列。其中,每个子序列与该连续子序列的匹配度大于或等于预定的第一匹配阈值信息。例如,按照基础水印序列的长度信息(例如,N),从第一水印序列信息第一个水印信息开始截取长度为N的连续子序列,检测该第一水印序列信息中是否存在与截取的连续子序列相同的序列,若存在,则以序列的起始位置与结束位置为端点,将该第一水印序列信息切分为多个子序列,其中,可能存在一定数量的子序列与截取的子序列相同,可能还存在一些被切分出来与截取的子序列不同的子序列,基于不同的子序列与截取的子序列间的匹配度,判断截取的子序列是否满足该连续子序列的切分,若满足将该连续子序列作为第二水印序列信息,否则,继续尝试从该第一水印序列信息第二个水印信息开始截取长度为N的连续子序列并检测,直至找到第二水印序列或遍历该第一水印序列信息中的所有长度为N的连续子序列。
在此,有关第二水印序列信息的示例与图3所述方法的示例相对应,可以参考图3中的详细介绍,此处不做赘述。
识别模块,用于根据所述第二水印序列信息对所述视频信息进行检测。在一些实施例中,可根据该第二水印序列信息识别视频信息的权属信息。所述权属信息包括该视频信息的所有者信息或者版权归属信息。在另一实施例中,可根据该第二水印序列信息识别视频信息是否被修改。
在一些实施例中,所述识别模块用于:根据所述第二水印序列信息识别所述视频信息的权属信息;或者,根据所述第二水印序列信息确定所述视频信息是否被修改。在一些实施例中,所述权属信息包括所述视频信息的所有者信息或者所述视频信息的版权归属信息。在一些实施例中,可以根据所述第二水印序列信息识别所述视频信息的权属信息,例如,基础水印序列与视频权属信息之间存在映射关系,其中,所述基础水印序列与所述第二水印序列信息间存在对应关系,基于该映射关系视频所述视频信息的权属信息;在另一些实施例中,可以根据所述第二水印序列信息确定所述视频信息是否被修改,例如,将所述第二水印序列信息与所述视频信息上的多个子序列进行匹配,根据匹配度确定所述视频信息是否被修改。
在此,有关第二水印序列信息的示例与图3所述方法的示例相对应,可以参考图3中的详细介绍,此处不做赘述。
在一些实施例中,所述根据所述第二水印序列信息识别所述视频信息的权属信息,包括:基于基础水印序列与视频权属信息的映射关系,确定所述第二水印序列信息对应的权属信息。在一些实施例中,所述视频权属信息包括但不限于所述视频信息的所有者信息或者所述视频信息的版权归属信息。在一些实施例中,所述基础水印序列包括但不限于已知的与视频权属信息存在映射关系的水印序列信息。
在此,有关识别权属信息的示例与图3所述方法的示例相对应,可以参考图3中的详细介绍,此处不做赘述。
在一些实施例中,所述根据所述第二水印序列信息确定所述视频信息是否被修改,包括:若所述多个子序列中存在一个子序列与所述第二水印序列信息的匹配度小于预定的第二匹配阈值信息,确定所述视频信息已被修改。在一些实施例中,上述第一匹配阈值信息用于确定提取的子序列是否为第二水印序列信息。所述第二匹配阈值信息用于确定所述视频信息是否被修改。例如,将每个子序列与所述第二匹配阈值信息进行比较,若匹配度低于预设的第二匹配阈值信息,则确定该子序列被修改。一般情况下,该第一匹配阈值信息小于该第二匹配阈值信息。例如,第一匹配阈值信息为80%,第二匹配阈值信息不低于80%。可根据需要提高第二匹配阈值信息的高度,以提高检测的精度。
根据本申请的另一个方面,提出了一种用于检测视频中水印的设备,该设备包括能够执行图3所示方法中各个步骤的单元或模块,具体地,如图8所示,该设备包括一一提取模块、匹配模块以及一一确定模块。其中,所述一一提取模块用于从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;所述匹配模块用于将所述基础水印序列在所述第一水印序列信息上移动匹配;所述一一确定模块用于:若所述第一水印序列信息可切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。其中,所述第一水印序列信息的提取以及后续的移动匹配等过程可以由用户设备、网络设备等完成。其中,用户设备包括但不限于手机、平板、电脑等计算设备。在此,我们以检测设备统称以上完成第一水印序列信息的提取以及后续的移动匹配等过程的用户设备和网络设备。当然,本领域技术人员应能理解上述检测设备仅为举例,其他现有的或今后可能出现的添加设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在一些实施例中,所述第一水印序列信息包括从视频信息中提取的全部或部分水印序列信息。所述基础水印序列信息包括已知的水印序列信息。例如,已知所述基础水印序列信息中各水印在视频帧中的拟添加位置信息。第一水印序列信息可被切分成一个或多个子序列。其中,每个子序列中包括一个或多个水印信息。每个水印信息有其对应的在视频帧上的拟添加位置信息。在已知水印间的排列顺序以及每个水印在其对应的视频帧上的拟添加位置后。将基础水印序列在所述第一水印序列信息上移动匹配,例如,通过卷积算法实现移动匹配。当然,本领域技术人员应能理解,以上所述的卷积算法仅为举例,其他现有的或今后可能出现的算法如能适用于本申请,也包含在本申请的保护范围内,并以引用的方式包含于此。在移动匹配的过程中,若子序列上水印提取位置与基础序列中的水印拟添加位置相同,则说明该子序列没有被修改;若不相同,则说明该子序列被修改了。本实施例的目的是考虑到实际当中可能存在已知添加到视频信息中的水印序列信息的情况。例如,视频信息所有者自己在视频信息中添加水印。后续的检查该视频信息是否被修改时,可以将提取的第一水印序列信息与已知的基础水印序列进行匹配对比。从而检测视频信息是否被修改。
本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机代码,当所述计算机代码被执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品,当所述计算机程序产品被计算机设备执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储器,用于存储一个或多个计算机程序;
当所述一个或多个计算机程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如前任一项所述的方法。
图9示出了可被用于实施本申请中所述的各个实施例的示例性系统;
如图9所示在一些实施例中,系统300能够作为各所述实施例中的任意一个设备。在一些实施例中,系统300可包括具有指令的一个或多个计算机可读介质(例如,系统存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如,(一个或多个)处理器305)。
对于一个实施例,系统控制模块310可包括任意适当的接口控制器,以向(一个或多个)处理器305中的至少一个和/或与系统控制模块310通信的任意适当的设备或组件提供任意适当的接口。
系统控制模块310可包括存储器控制器模块330,以向系统存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
系统存储器315可被用于例如为系统300加载和存储数据和/或指令。对于一个实施例,系统存储器315可包括任意适当的易失性存储器,例如,适当的DRAM。在一些实施例中,系统存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例,系统控制模块310可包括一个或多个输入/输出(I/O)控制器,以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如,NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如,闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如,一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为系统300被安装在其上的设备的一部分的存储资源,或者其可被该设备访问而不必作为该设备的一部分。例如,NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为系统300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。系统300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器(例如,存储器控制器模块330)的逻辑封装在一起。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑封装在一起以形成系统级封装(SiP)。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例,(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上系统(SoC)。
在各个实施例中,系统300可以但不限于是:服务器、工作站、台式计算设备或移动计算设备(例如,膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中,系统300可具有更多或更少的组件和/或不同的架构。例如,在一些实施例中,系统300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是,本申请可在软件和/或软件与硬件的组合体中被实施,例如,可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中,本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地,本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中,例如,RAM存储器,磁或光驱动器或软磁盘及类似设备。另外,本申请的一些步骤或功能可采用硬件来实现,例如,作为与处理器配合从而执行各个步骤或功能的电路。
另外,本申请的一部分可被应用为计算机程序产品,例如计算机程序指令,当其被计算机执行时,通过该计算机的操作,可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解,计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等,相应地,计算机程序指令被计算机执行的方式包括但不限于:该计算机直接执行该指令,或者该计算机编译该指令后再执行对应的编译后程序,或者该计算机读取并执行该指令,或者该计算机读取并安装该指令后再执行对应的安装后程序。在此,计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个系统传送到另一系统的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如,光纤、同轴等))和能传播能量波的无线(未有导的传输)介质,诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制,计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如,计算机可读存储介质包括,但不限于,易失性存储器,诸如随机存储器(RAM,DRAM,SRAM);以及非易失性存储器,诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM);以及磁性和光学存储设备(硬盘、磁带、CD、DVD);或其它现在已知的介质或今后开发的能够存储供计算机系统使用的计算机可读信息/数据。
在此,根据本申请的一个实施例包括一个装置,该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言,显然本申请不限于上述示范性实施例的细节,而且在不背离本申请的精神或基本特征的情况下,能够以其他的具体形式实现本申请。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本申请的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。

Claims (18)

1.一种用于在视频中添加水印的方法,其特征在于所述方法包括:
获取待处理的视频信息;
根据所述视频信息对应的水印序列信息,确定所述视频信息中待添加水印的视频帧序列,其中,所述视频帧序列中每个视频帧在所述水印序列信息中存在对应的水印信息,并且相邻的任两个视频帧在所述视频帧序列中的顺序关系与该两个视频帧分别对应的水印信息在所述水印序列信息中的顺序关系相匹配;
在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据拟添加至所述视频信息的目标标记信息生成所述视频信息对应的水印序列信息。
3.根据权利要求2所述方法,其特征在于,所述水印序列信息满足以下至少一项:
所述水印序列信息中的水印信息包括所述目标标记信息的部分或全部;
所述水印序列信息中的水印信息包括所述目标标记信息的部分或全部的缩小处理结果;
所述水印序列信息中的多个水印信息按序组成所述目标标记信息。
4.根据权利要求2或3所述的方法,其特征在于,所述根据拟添加至所述视频信息的目标标记信息生成所述视频信息对应的水印序列信息包括:
根据所述拟添加至所述视频信息的目标标记信息及所述视频信息,生成所述视频信息对应的水印序列信息。
5.根据权利要求4所述的方法,其特征在于,所述根据拟添加至所述视频信息的目标标记信息生成所述视频信息对应的水印序列信息包括:
根据所述视频信息的视频相关信息确定所述视频信息对应的水印序列信息中的水印信息的数量要求信息;
根据所述拟添加至所述视频信息的目标标记信息,以及所述数量要求信息,生成所述视频信息对应的水印序列信息,其中,所述水印序列信息中的水印数量信息满足所述数量要求信息。
6.根据权利要求5所述的方法,其特征在于,所述根据所述拟添加至所述视频信息的目标标记信息,以及所述数量要求信息,生成所述视频信息对应的水印序列信息,其中,所述水印序列信息中的水印数量信息满足所述数量要求信息包括:
将所述拟添加至所述视频信息的目标标记信息分解为满足所述数量要求信息的多个水印信息;
按所述多个水印信息中各个水印信息在所述目标标记信息中的顺序信息,将所述多个水印信息生成所述视频信息对应的水印序列信息。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述水印序列信息还包括所述水印序列信息中各水印信息在对应视频帧中的拟添加位置信息;
其中,所述在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息包括:
根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
8.根据权利要求1至6中任一项所述的方法,其特征在于,所述方法还包括:
确定在所述视频帧序列的每个视频帧中添加水印信息的拟添加位置信息;
其中,所述在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息包括:
根据所述拟添加位置信息,在所述视频帧序列中的每个视频帧上添加该视频帧在所述水印序列信息中的对应水印信息,以获得添加水印后的所述视频信息。
9.根据权利要求8所述的方法,其特征在于,所述确定在所述视频帧序列的每个视频帧中添加水印信息的拟添加位置信息包括:
根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,确定在所述视频帧序列中除所述首个视频帧外的其余视频帧中添加水印信息的拟添加位置信息。
10.根据权利要求9所述的方法,其特征在于,所述根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,确定在所述视频帧序列中除所述首个视频帧外的其余视频帧中添加水印信息的拟添加位置信息包括:
根据所述视频帧序列的首个视频帧中添加水印信息的拟添加位置信息,以及所述其余视频帧在所述水印序列信息中对应水印信息的水印相关信息,确定在所述其余视频帧中添加水印信息的拟添加位置信息。
11.根据权利要求10所述的方法,其特征在于,所述水印相关信息包括以下至少一项:
对应水印信息在所述水印序列信息中的顺序信息;
对应水印信息相对所述水印序列信息中首个水印的相对位置信息;
对应水印信息相对所述水印序列信息中相邻水印的相对位置信息。
12.一种用于检测视频中水印的方法,其特征在于,所述方法包括:
从待处理的视频信息中提取第一水印序列信息;
从所述第一水印序列信息中提取第二水印序列信息,其中,所述第一水印序列信息能够基于所述第二水印序列信息被切分为多个子序列,所述多个子序列中每个子序列与所述第二水印序列信息的匹配度大于或等于预定的第一匹配阈值信息;
根据所述第二水印序列信息对所述视频信息进行检测。
13.根据权利要求12所述的方法,其特征在于,所述根据所述第二水印序列信息对所述视频信息进行检测包括:
根据所述第二水印序列信息识别所述视频信息的权属信息;或者,
根据所述第二水印序列信息确定所述视频信息是否被修改。
14.根据权利要求13所述的方法,其特征在于,所述根据所述第二水印序列信息识别所述视频信息的权属信息,包括:
基于基础水印序列与视频权属信息的映射关系,确定所述第二水印序列信息对应的权属信息。
15.根据权利要求13所述的方法,其特征在于,所述根据所述第二水印序列信息确定所述视频信息是否被修改,包括:
若所述多个子序列中存在一个子序列与所述第二水印序列信息的匹配度小于预定的第二匹配阈值信息,确定所述视频信息已被修改。
16.一种用于检测视频中水印的方法,其特征在于,所述方法包括:
从待处理的视频信息中提取第一水印序列信息,其中,所述第一水印序列信息包括所述第一水印序列信息中各水印从视频帧中被提取的提取位置信息,所述视频信息已基于对应的基础水印序列信息进行添加水印处理,所述基础水印序列信息包括所述各水印在视频帧中的拟添加位置信息;
将所述基础水印序列在所述第一水印序列信息上移动匹配;
若所述第一水印序列信息能够切分为一个或多个子序列,使得每个子序列中各水印的提取位置信息分别与所述基础水印序列信息中的拟添加位置信息相匹配,则确定所述视频信息未被修改;否则,确定所述视频信息被修改。
17.一种设备,其特征在于,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行如权利要求1至16中任一项所述方法的操作。
18.一种存储指令的计算机可读介质,所述指令在被执行时使得系统进行如权利要求1至16中任一项所述方法的操作。
CN201811533390.3A 2018-12-14 2018-12-14 一种用于添加和检测视频水印的方法与设备、计算机可读介质 Active CN109379642B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811533390.3A CN109379642B (zh) 2018-12-14 2018-12-14 一种用于添加和检测视频水印的方法与设备、计算机可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811533390.3A CN109379642B (zh) 2018-12-14 2018-12-14 一种用于添加和检测视频水印的方法与设备、计算机可读介质

Publications (2)

Publication Number Publication Date
CN109379642A true CN109379642A (zh) 2019-02-22
CN109379642B CN109379642B (zh) 2020-12-08

Family

ID=65373712

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811533390.3A Active CN109379642B (zh) 2018-12-14 2018-12-14 一种用于添加和检测视频水印的方法与设备、计算机可读介质

Country Status (1)

Country Link
CN (1) CN109379642B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110996020A (zh) * 2019-12-13 2020-04-10 浙江宇视科技有限公司 Osd叠加方法、装置及电子设备
CN111818387A (zh) * 2020-06-30 2020-10-23 北京市地铁运营有限公司地铁运营技术研发中心 一种轨道交通用显示内容识别方法、识别装置、识别系统及计算机可读存储介质
CN111918021A (zh) * 2019-05-10 2020-11-10 意法半导体股份有限公司 显示系统以及相关的车辆和方法
CN112383836A (zh) * 2020-10-19 2021-02-19 深圳市九洲电器有限公司 视频校验系统及方法
CN112492248A (zh) * 2019-09-11 2021-03-12 杭州海康威视数字技术股份有限公司 视频校验方法和设备
WO2022083237A1 (zh) * 2020-10-20 2022-04-28 深圳市前海手绘科技文化有限公司 一种视频中添加水印的方法
CN115883923A (zh) * 2023-02-21 2023-03-31 北京瑞博星航科技有限公司 基于时间贯序光谱指纹的终端播放状态监测系统和方法

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060215876A1 (en) * 2001-03-22 2006-09-28 Victor Company Of Japan, Ltd. Apparatus for embedding and reproducing watermark into and from contents data
CN101258753A (zh) * 2005-09-09 2008-09-03 汤姆森许可贸易公司 视频水印检测
CN101389009A (zh) * 2007-09-14 2009-03-18 华为技术有限公司 一种水印信息的嵌入、检测方法及装置
CN101489133A (zh) * 2009-01-16 2009-07-22 华中科技大学 一种抗几何攻击的实时视频水印方法
CN101951520A (zh) * 2010-10-21 2011-01-19 上海交通大学 自适应h.264压缩域视频水印嵌入与提取方法
CN102946531A (zh) * 2012-08-24 2013-02-27 南京大学 一种结合gop帧结构的视频水印方法与系统
CN103237271A (zh) * 2013-04-02 2013-08-07 北京中视广信科技有限公司 大容量视频数字水印的嵌入和检测方法及其系统
CN103440610A (zh) * 2013-07-24 2013-12-11 北京印刷学院 一种在数字媒体上水印嵌入的方法和装置
CN103533458A (zh) * 2013-10-30 2014-01-22 中国科学院自动化研究所 一种视频水印的嵌入和提取方法
CN104462884A (zh) * 2014-12-22 2015-03-25 北京邮电大学 软件水印的嵌入和提取方法
US20180018748A1 (en) * 2014-08-20 2018-01-18 Verance Corporation Content management based on dither-like watermark embedding
CN108108632A (zh) * 2017-11-30 2018-06-01 中车青岛四方机车车辆股份有限公司 一种多因素文件水印生成提取方法和系统
CN108495120A (zh) * 2018-01-31 2018-09-04 华为技术有限公司 一种视频帧检测、处理方法、装置及系统
WO2018208997A1 (en) * 2017-05-09 2018-11-15 Verimatrix, Inc. Systems and methods of preparing multiple video streams for assembly with digital watermarking

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060215876A1 (en) * 2001-03-22 2006-09-28 Victor Company Of Japan, Ltd. Apparatus for embedding and reproducing watermark into and from contents data
CN101258753A (zh) * 2005-09-09 2008-09-03 汤姆森许可贸易公司 视频水印检测
CN101389009A (zh) * 2007-09-14 2009-03-18 华为技术有限公司 一种水印信息的嵌入、检测方法及装置
CN101489133A (zh) * 2009-01-16 2009-07-22 华中科技大学 一种抗几何攻击的实时视频水印方法
CN101951520A (zh) * 2010-10-21 2011-01-19 上海交通大学 自适应h.264压缩域视频水印嵌入与提取方法
CN102946531A (zh) * 2012-08-24 2013-02-27 南京大学 一种结合gop帧结构的视频水印方法与系统
CN103237271A (zh) * 2013-04-02 2013-08-07 北京中视广信科技有限公司 大容量视频数字水印的嵌入和检测方法及其系统
CN103440610A (zh) * 2013-07-24 2013-12-11 北京印刷学院 一种在数字媒体上水印嵌入的方法和装置
CN103533458A (zh) * 2013-10-30 2014-01-22 中国科学院自动化研究所 一种视频水印的嵌入和提取方法
US20180018748A1 (en) * 2014-08-20 2018-01-18 Verance Corporation Content management based on dither-like watermark embedding
CN104462884A (zh) * 2014-12-22 2015-03-25 北京邮电大学 软件水印的嵌入和提取方法
WO2018208997A1 (en) * 2017-05-09 2018-11-15 Verimatrix, Inc. Systems and methods of preparing multiple video streams for assembly with digital watermarking
CN108108632A (zh) * 2017-11-30 2018-06-01 中车青岛四方机车车辆股份有限公司 一种多因素文件水印生成提取方法和系统
CN108495120A (zh) * 2018-01-31 2018-09-04 华为技术有限公司 一种视频帧检测、处理方法、装置及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
吴玉环: ""基于指代冗余的矩阵编码文本水印算法"", 《吴玉环》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918021A (zh) * 2019-05-10 2020-11-10 意法半导体股份有限公司 显示系统以及相关的车辆和方法
US11250808B2 (en) 2019-05-10 2022-02-15 Stmicroelectronics S.R.L. Display system and related vehicle and method
CN111918021B (zh) * 2019-05-10 2022-09-02 意法半导体股份有限公司 显示系统以及相关的车辆和方法
CN112492248A (zh) * 2019-09-11 2021-03-12 杭州海康威视数字技术股份有限公司 视频校验方法和设备
CN110996020A (zh) * 2019-12-13 2020-04-10 浙江宇视科技有限公司 Osd叠加方法、装置及电子设备
CN111818387A (zh) * 2020-06-30 2020-10-23 北京市地铁运营有限公司地铁运营技术研发中心 一种轨道交通用显示内容识别方法、识别装置、识别系统及计算机可读存储介质
CN112383836A (zh) * 2020-10-19 2021-02-19 深圳市九洲电器有限公司 视频校验系统及方法
WO2022083237A1 (zh) * 2020-10-20 2022-04-28 深圳市前海手绘科技文化有限公司 一种视频中添加水印的方法
CN115883923A (zh) * 2023-02-21 2023-03-31 北京瑞博星航科技有限公司 基于时间贯序光谱指纹的终端播放状态监测系统和方法

Also Published As

Publication number Publication date
CN109379642B (zh) 2020-12-08

Similar Documents

Publication Publication Date Title
CN109379642A (zh) 一种用于添加和检测视频水印的方法与设备
CN103198293B (zh) 用于指纹识别视频的系统和方法
Singh et al. Video frame and region duplication forgery detection based on correlation coefficient and coefficient of variation
Song et al. Protection of image ROI using chaos-based encryption and DCNN-based object detection
Al-Qershi et al. Evaluation of copy-move forgery detection: datasets and evaluation metrics
US20150086067A1 (en) Methods for scene based video watermarking and devices thereof
Jolfaei et al. A 3D object encryption scheme which maintains dimensional and spatial stability
Huang et al. RGB-D salient object detection by a CNN with multiple layers fusion
CN107221346B (zh) 一种用于确定ar视频的识别图片的方法与设备
CN109493259A (zh) 一种用于通过计算设备处理侵权案件的方法与设备
Papakostas et al. Efficient and accurate computation of geometric moments on gray-scale images
Wang et al. Hybrid fire detection using hidden Markov model and luminance map
CN112752158B (zh) 一种视频展示的方法、装置、电子设备及存储介质
Lin et al. A reversible watermarking for authenticating 2D vector graphics based on bionic spider web
US10949523B2 (en) Method and electronic device for providing image-based CAPTCHA challenge
CN107770046A (zh) 一种用于拼图的方法与设备
CN110248165B (zh) 标签显示方法、装置、设备及存储介质
CN103093127B (zh) 基于数独和多重数字水印的动态版权保护系统及实现方法
Hassan et al. Illumination invariant stationary object detection
Xu et al. A deep learning framework supporting model ownership protection and traitor tracing
CN109345416A (zh) 一种用于记录作品间的引用关系的方法与设备
CN108513037A (zh) 多媒体处理方法及其装置、存储介质、电子产品
Cui et al. Research on region selection strategy for visible watermark embedding
CN116883916A (zh) 一种基于深度学习的会议异常行为检测方法及系统
US20210166073A1 (en) Image generation method and computing device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant