CN115225869A - 一种监控数据的定向处理方法及装置 - Google Patents

一种监控数据的定向处理方法及装置 Download PDF

Info

Publication number
CN115225869A
CN115225869A CN202211145348.0A CN202211145348A CN115225869A CN 115225869 A CN115225869 A CN 115225869A CN 202211145348 A CN202211145348 A CN 202211145348A CN 115225869 A CN115225869 A CN 115225869A
Authority
CN
China
Prior art keywords
byte
data
frame
matrix
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211145348.0A
Other languages
English (en)
Other versions
CN115225869B (zh
Inventor
张奇惠
刘家明
王立峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Wise Security Technology Co Ltd
Original Assignee
Guangzhou Wise Security Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Wise Security Technology Co Ltd filed Critical Guangzhou Wise Security Technology Co Ltd
Priority to CN202211145348.0A priority Critical patent/CN115225869B/zh
Publication of CN115225869A publication Critical patent/CN115225869A/zh
Application granted granted Critical
Publication of CN115225869B publication Critical patent/CN115225869B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10—Complex mathematical operations
    • G06F17/16—Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Computer Security & Cryptography (AREA)
  • Pure & Applied Mathematics (AREA)
  • Algebra (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种监控数据的定向处理方法及装置。本申请实施例提供的技术方案，通过提取帧视频帧数据中的第一指定字节位置的字节数据，生成第一字节段；提取音频帧数据中第二指定字节位置的字节数据，生成第二字节段；基于第一字节段构建第一矩阵，按照设定矩阵变换规则变换得到第一变换字节段，将第一变换字节段替换第二指定字节位置的各个字节数据，得到加密音频帧，基于第二字节段构建第二矩阵，按照设定矩阵变换规则变换得到得到第二变换字节段，按照时间戳顺序将第二变换字节段替换第一指定字节位置的各个字节数据，得到加密视频帧。采用上述技术手段，能够监控数据的破解难度，提升监控数据处理的安全性，避免用户隐私泄露。

Description

一种监控数据的定向处理方法及装置
技术领域
本申请涉及数据处理技术领域，尤其涉及一种监控数据的定向处理方法及装置。
背景技术
目前，在生活中随处可见的区域安装了监控摄像头，以实时监控对应区域发生的事情。用户可以在私人生活区域安装监控摄像头，监控摄像头将采集到的视频、音频传输至用户的手机，实现用户对私人生活区域的远程管控。
但是，传统的视频流、音频流处理方式一般都是采用简单的对称或者非对称加密算法分别进行加密，由于视频、音频等监控数据中可能涉及到用户的隐私信息，简单的数据加密方式容易导致数据被轻易破解窃取。影响监控数据传输、存储的安全性，造成用户隐私泄露的情况。
发明内容
本申请提供一种监控数据的定向处理方法及装置，增加监控数据的破解难度，提升监控数据处理的安全性，避免用户隐私泄露，解决现有监控数据容易被破解导致用户隐私泄露的技术问题。
在第一方面，本申请提供了一种监控数据的定向处理方法，包括：
识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；
定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；
基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
进一步地，所述指定特征包括用户人脸特征和用户声纹特征；
所述识别目标视频流和目标音频流，包括：
基于人脸识别算法识别目标视频流，基于声纹识别算法识别目标音频流。
进一步地，所述基于所述第一字节段构建第一矩阵，包括:
将所述第一字节段平均拆分成设定数量的子段落，并对取余部分的子段落使用设定字节数据补充，以使各个所述子段落包含的字节量相同，
基于各个所述子段落构建与所述设定数量对应行数的第一矩阵，各个所述子段落在所述第一矩阵中按照所述时间戳顺序排序。
进一步地，所述确定对应时间戳顺序的目标视频流和目标音频流，包括：
将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐。
进一步地，所述将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐，还包括：
对所述目标视频流或者所述目标音频流中的未对齐片段，使用指定字节段作为一帧数据补充对齐所述目标视频流和所述目标音频流。
进一步地，每一帧所述视频帧数据的所述第一指定字节位置为一个或者多个，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述第一指定字节位置以设定间隔位置分布；
每一帧所述音频帧数据的所述第二指定字节位置为一个或者多个，在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述第二指定字节位置以设定间隔位置分布。
进一步地，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段，包括：
按照所述第一指定字节位置在所述视频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第一字节子段落，按照所述时间戳顺序串联各个所述第一字节子段落，生成第一字节段落；
在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段，包括：
按照所述第二指定字节位置在所述音频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第二字节子段落，按照所述时间戳顺序串联各个所述第二字节子段落，生成第一字节段落。
在第二方面，本申请提供了一种监控数据的定向处理装置，包括：
识别模块，用于识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；
提取模块，用于定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；
加密模块，用于基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
在第三方面，本申请提供了一种电子设备，包括：
存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的监控数据的定向处理方法。
在第四方面，本申请提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的监控数据的定向处理方法。
本申请通过识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；定位目标视频流的每一帧视频帧数据中的第一指定字节位置，提取第一指定字节位置的字节数据，按照时间戳顺序生成第一字节段；定位目标音频流的每一帧音频帧数据中的第二指定字节位置，提取第二指定字节位置的字节数据，按照时间戳顺序生成第二字节段；基于第一字节段构建第一矩阵，按照设定矩阵变换规则处理第一矩阵，得到第一变换矩阵，基于第一变换矩阵得到第一变换字节段，按照时间戳顺序将第一变换字节段的各个字节数据替换第二指定字节位置的各个字节数据，得到加密音频帧，基于第二字节段构建第二矩阵，按照设定矩阵变换规则处理第二矩阵，得到第二变换矩阵，基于第二变换矩阵得到第二变换字节段，按照时间戳顺序将第二变换字节段的各个字节数据替换第一指定字节位置的各个字节数据，得到加密视频帧。采用上述技术手段，能够监控数据的破解难度，提升监控数据处理的安全性，避免用户隐私泄露，保障用户隐私安全。
附图说明
图1是本申请实施例一提供的一种监控数据的定向处理方法的流程图；
图2是本申请实施例一中目标音频流的加密处理示意图；
图3是本申请实施例一中目标视频流的加密处理示意图；
图4是本申请实施例一中的矩阵构建流程图；
图5是本申请实施例一中的第一矩阵变换示意图；
图6是本申请实施例一中的第二矩阵变换示意图；
图7是本申请实施例二提供的一种监控数据的定向处理装置的结构示意图；
图8是本申请实施例三提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作（或步骤）描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一：
图1给出了本申请实施例一提供的一种监控数据的定向处理方法的流程图，本实施例中提供的监控数据的定向处理方法可以由监控数据的定向处理设备执行，该监控数据的定向处理设备可以通过软件和/或硬件的方式实现，该监控数据的定向处理设备可以是两个或多个物理实体构成，也可以是一个物理实体构成。一般而言，该监控数据的定向处理设备可以是服务器主机、编码设备、电脑等流媒体数据处理设备。
下述以该监控数据的定向处理设备为执行监控数据的定向处理方法的主体为例，进行描述。参照图1，该监控数据的定向处理方法具体包括：
S110、识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流。
本申请实施例的监控数据的定向处理方法，旨在通过对待处理的监控数据（即目标视频流和目标音频流）进行检测识别，判断待处理的监控数据是否包含用户的隐私信息。若是，则提取视频流和音频流中相应的字节数据，进行两者之间的字节数据交叉替换加密，实现视频流和音频流的安全加密，增大视频流和音频流的破解难度，在监控数据存储、传输场景中，保障监控数据的存储、传输安全性，避免用户隐私信息被轻易窃取。
具体地，在监控场景中，对于需要传输或者存储的音频流和视频流，定义这部分视频流为目标视频流，音频流为目标音频流。目标音频流和目标视频流在进行加密处理时，首先判断其是否包含用户隐私信息，对于包含用户隐私信息的情况，可以采用本申请实施例的监控数据定向处理方法，以保障用户隐私信息的存储、传输安全性。此外，对于不包含用户隐私的信息，则可以采用常规的信息加密机制，避免增加太多的信息加密成本，在保障信息加密处理效率的同时提升了信息处理的安全性。
示例性地，在实际监控数据存储场景中，监控数据指当前设备准备存储、传输的监控视频流或者音频流。例如，监控摄像头采集到视频流、音频流后，将视频流、音频流发送至设备处理器，设备处理器对视频流、音频流进行加密处理后存储至本地数据库或者传输给目标设备。并且，在监控数据中包含有用户隐私信息（即用户人脸特征、声纹特征）的情况下，采用监控数据的定向处理方法进行信息加密，保障信息存储、传输的安全性，避免信息被轻易破解窃取，导致用户隐私泄露的情况。
基于此，在加密处理目标视频流和目标音频流时，首先识别其是否包含用户隐私信息。其中，基于人脸识别算法识别目标视频流，基于声纹识别算法识别目标音频流。设备端预先配置用户人脸特征和用户声纹特征，定义这部分用户特征数据为指定特征。用户通过上传自身的人脸信息、声纹信息，将这部分人脸信息、声纹信息作为指定特征数据配置至监控数据的定向处理设备，以用于后续监控数据加密包含用户隐私信息的监控数据时，进行监控数据的识别。
可以理解的是，对于包含用户人脸特征和/或声纹特征的目标视频流或者目标音频流，由于其涉及用户隐私信息。为了保护用户隐私信息，本实施例通过对包含有隐私信息的监控数据进行相对更安全的加密机制，以提高监控数据的破解难度，进而提高监控数据加密存储、传输的安全性，降低用户隐私泄露的风险。
具体地，在识别目标音频流的情况下，则使用指定特征数据的声纹特征进行检测匹配；在识别目标视频流的情况下，则使用指定特征数据的人脸特征进行检测匹配。
对于声纹特征的识别，通过将目标音频流提取的声纹特征与指定特征数据的声纹比对，两者匹配即可确定该目标音频流包含指定特征，即用户隐私信息。
在人脸识别目标视频流时，将视频流输入预构建的目标检测模型检测，基于目标检测模型的输出结果判断目标视频流是否包含指定特征。目标检测模型预先根据指定特征数据的人脸特征构建的训练数据集进行训练构建。
目标检测模型可以采用YOLOv3目标检测模型等神经网络模型。在训练目标检测模型时，通过收集包含用户人脸特征（即用户肖像）的图像数据构建训练数据集。进一步设计目标检测模型的神经网络结构和损失函数，使用标注了指定目标的训练数据集训练目标检测模型的网络参数。在模型训练完成之后，保存模型结构和参数，以用于后续进行指定目标检测，确定用户人脸特征。
YOLOv3目标检测模型主要由卷积层和池化层构成，网络中层的命名规则由其类别和在网络中第几次出现的编号构成，例如conv8表示网络中的第8个卷积层，upsamplling表示网络中的上采样层，网络中每层的输出特征图尺寸表示为“分辨率宽×分辨率高×通道数”，经过多层卷积层级池化层，最终得到图像中各个目标的矩形框及分类，以完成目标的检测。池化层是一种图像下采样操作，虽然会减少卷积特征层的参数，加快模型运算速度，但是会对上一层的卷积特征图造成语义信息的损失。YOLOv3目标检测网络考虑到计算资源问题，在本申请实施例中的YOLOv3目标检测网络的基础骨架为tiny-darknet，其参数只有4M，体量小适合落地。
基于该目标检测模型的检测结果，即可确定目标视频流是否包含用户人脸特征，即是否包含用户隐私信息。进而根据检测结果，在确定目标视频流包含用户人脸特征的情况下，适应性选择相应的加密机制加密存储监控数据。
需要说明的是，本申请实施例在目标视频流或者目标音频流任意一者包含指定特征时，则对所有监控数据（即目标视频流和目标音频流）进行定向处理加密。以此可以保障整个监控数据存储的安全性，避免信息疏漏识别而导致监控数据轻易泄露的情况。
可选地，在一个实施例中，在目标视频流包含用户人脸的情况下，还将目标视频流更新至训练数据集，基于更新后的训练数据集迭代训练目标检测模型。
可以理解的是，对于识别到用户人脸特征的目标视频流，由于该目标视频流包含用户人脸特征，为了使目标检测模型更精准、快速地识别检测用户人脸特征，则通过将目标视频流加入训练数据集进行目标检测模型的迭代训练，可以进一步提升目标检测模型的检测精度和效率，优化监控视频流的加密传输效率。
之后，在识别到目标视频流或者目标音频流包含指定特征的情况下，首先确定目标视频流和目标音频流之间各帧数据对应的时间戳顺序，以便于后续逐帧数据进行加密。
由于目标音频流和目标视频流在进行加密处理时，会通过数字编码技术逐帧转换成二进制字符串形式的数字编码数据。每一帧视频帧和音频帧包含对应的时间戳信息，以便于确定各帧数据之间的顺序。相应地，在加密处理目标视频流和目标音频流时，为了便于后续按照时间戳顺序逐帧数据进行字节数据的交叉替换，本申请实施例通过将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐，以用于后续进行字节数据的逐帧替换。并且，对所述目标视频流或者所述目标音频流中的未对齐片段，使用指定字节段作为一帧数据补充对齐所述目标视频流和所述目标音频流。
可以理解的是，为了将视频帧和音频帧按照时间戳顺序进行字节数据的交叉替换，则需要将目标视频流和目标音频流按照时间戳顺序对齐每一帧数据。并且，对于目标视频流和目标音频流未对齐的情况，如音频帧数据缺失的情况，则使用指定字节段表示一帧数据，缺失多少帧数据就补齐多少指定字节段。以此将目标视频流和目标音频流对齐，使得每一个时间戳都有对应的音频帧和视频帧数据。
S120、定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段。
进一步地，基于已对齐的目标视频流和目标音频流，本申请实施例通过逐个视频帧和音频帧提取字节数据，通过矩阵变换后，即可进行两者之间的字节数据的交叉替换。
其中，在采集视频帧的字节数据时，通过定位目标视频流中每一帧视频帧的指定字节位置，定义该指定字节位置为第一指定字节位置。可以理解的是，视频帧编码后以二进制字符串的形式存储，通过选择二进制字符串上的第一指定字节位置，即可提取该位置上的字节数据。例如，以第N个字节位置为第一指定字节位置，在提取字节数据时，从一帧视频帧的二进制字符串中按照字节顺序找到第N个字节位置，以此提取到该位置的字节数据。以此类推，逐个视频帧提取字节数据，进而按照各帧视频帧的时间戳顺序将提取到的字节数据串联成字符串，定义为第一字节段。
同样地，在采集音频帧的字节数据时，通过定位目标音频流中每一帧音频帧的指定字节位置，定义该指定字节位置为第二指定字节位置。可以理解的是，音频帧编码后以二进制字符串的形式存储，通过选择二进制字符串上的第二指定字节位置，即可提取该位置上的字节数据。例如，以第M个字节位置为第二指定字节位置，在提取字节数据时，从一帧音频帧的二进制字符串中按照字节顺序找到第N个字节位置，以此提取到该位置的字节数据。以此类推，逐个音频帧提取字节数据，进而按照各帧音频帧的时间戳顺序将提取到的字节数据串联成字符串，定义为第二字节段。
可选地，每一帧所述视频帧数据的所述第一指定字节位置为一个或者多个，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述第一指定字节位置以设定间隔位置分布。每一帧所述音频帧数据的所述第二指定字节位置为一个或者多个，在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述第二指定字节位置以设定间隔位置分布。
具体地，若第一指定字节位置、第二指定字节位置为一个，则参照上述字节数据采集方式采集字节数据。若第一指定字节位置、第二指定字节位置为多个，则在采集字节数据过程中，按照一帧数据中字符串的字节位置顺序，逐一从各个指定字节位置提取字节数据。需要说明的是，通过间隔分布设置指定字节位置，可以使得提取到的字节数据更加分散、多样，以此进行字节交叉加密，可以提升数据交叉加密的复杂度，提升加密数据被破解的难度。
进一步地，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段，包括：
按照所述第一指定字节位置在所述视频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第一字节子段落，按照所述时间戳顺序串联各个所述第一字节子段落，生成第一字节段落；
对于一帧视频帧数据包含多个第一指定字节位置的情况，可以按照各个字节数据在字符串中的排列位置顺序提取字节数据，将提取到的字节数据串联为第一字节子段落。也可以按照设定字节提取顺序，如倒序提取，先提取奇数位置再提取偶数位置等字节数据提取顺序，依序提取字节数据并串联为第一字节子段落。进而对于每个视频帧数据提取到的第一字节子段落，将其按照时间戳顺序串联为第一字节段。通过设定不同字节提取顺序提取字节数据生成字节子段落，可以使得提取到的字节数据更加分散、多样，以此进行字节交叉加密，可以提升数据交叉加密的复杂度，提升加密数据被破解的难度。
对应地，在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段，包括：
按照所述第二指定字节位置在所述音频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第二字节子段落，按照所述时间戳顺序串联各个所述第二字节子段落，生成第一字节段落。
对于一帧音频帧数据包含多个第二指定字节位置的情况，可以按照各个字节数据在字符串中的排列位置顺序提取字节数据，将提取到的字节数据串联为第二字节子段落。也可以按照设定字节提取顺序，如倒序提取，先提取奇数位置再提取偶数位置等字节数据提取顺序，依序提取字节数据并串联为第二字节子段落。进而对于每个音频帧数据提取到的第二字节子段落，将其按照时间戳顺序串联为第二字节段。
S130、基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
之后，对于提取到的第一字节段和第二字节段，通过矩阵变换处理字节段，即可用于监控数据的交叉加密处理。其中，如图2所示，对于从目标视频流各个视频帧数据提取到的第一字节段，通过矩阵变换为第一变换字节段，将第一变换字节段的各个字节数据按照时间戳顺序替换目标音频流中各帧音频帧上第二指定字节位置的字节数据，以此得到交叉加密处理后的加密音频帧。可以理解的是，由于目标视频流和目标音频流按照时间戳顺序进行对齐，以此提取到的字节数据的数量与指定字节位置的数量相同。因此，在加密音频流时，对于第一变换字节段中的字节数据，按顺序提取并替换一帧音频帧中第二指定字节位置的字节数据，以此完成一帧音频帧的交叉加密。以此类推，按照时间戳顺序逐帧处理音频帧数据，将第一变换字节段上的字节数据按顺序替换至对应的音频帧数据的第二指定字节位置上，完成目标音频流的交叉加密。
同样的，如图3所示，对于从目标音频流各个音频帧数据提取到的第二字节段，通过矩阵变换为第二变换字节段，将第二变换字节段的各个字节数据按照时间戳顺序替换目标视频流中各帧视频帧上第一指定字节位置的字节数据，以此得到交叉加密处理后的加密视频帧。可以理解的是，由于目标音频流和目标视频流按照时间戳顺序进行对齐，以此提取到的字节数据的数量与指定字节位置的数量相同。因此，在加密视频流时，对于第二变换字节段中的字节数据，按顺序提取并替换一帧视频帧中第一指定字节位置的字节数据，以此完成一帧视频帧的交叉加密。以此类推，按照时间戳顺序逐帧处理视频帧数据，将第二变换字节段上的字节数据按顺序替换至对应的视频帧数据的第一指定字节位置上，完成目标视频流的交叉加密。
需要说明的是，本申请实施例在对字节段进行矩阵变换时，并不会减少字节数据数量，因此，可以确保字节交叉替换加密时，变换字节段的字节数据刚好提供给指定字节位置。
具体地，如图4所示，本申请实施例基于第一字节段构建第一矩阵的流程包括：
S1301、将所述第一字节段平均拆分成设定数量的子段落，并对取余部分的子段落使用设定字节数据补充，以使各个所述子段落包含的字节量相同，
S1302、基于各个所述子段落构建与所述设定数量对应行数的第一矩阵，各个所述子段落在所述第一矩阵中按照所述时间戳顺序排序。
通过将第一字节段平均拆分成设定数量个子段落，每一个子段落为第一矩阵的一行，以此构成设定数量行数的矩阵。并且，由于第一字节段在平均拆分的时候，可能存在取余部分不够平均分配的情况，此时可以采用设定字节数据补充，以保障矩阵的完整构建。
进一步地，对于已构建的第一矩阵，本申请实施例使用设定矩阵变换规则进行第一矩阵的变换处理。矩阵变换规则根据实际需要设定，具体可以是将矩阵中各行元素对调位置，将矩阵与另一个矩阵相乘，或者将矩阵乘以某一个常数等方式。本申请实施例对具体的矩阵变换规则不做固定限制，在此不多赘述。
示例性地，如图5所示，对第一矩阵的矩阵变换进行示例性描述。假设第一字节段为“a1,a2,a3,b1,b2,b3,c1,c2,c3”，将其按照时间戳顺序拆分为三段“a1,a2,a3”、“b1,b2,b3”和“c1,c2,c3”，将其按照时间戳顺序排序构建矩阵P，进而将矩阵P中的元素沿着对角线对调的矩阵变换规则进行变换，得到矩阵P´，以此完成第一矩阵向第一变换矩阵的变换。进而基于该第一变换矩阵，得到第一变换字节段为“c3，c2,c1,b3,b2,b1,a3,a2,a1”。
进一步地，如图6所示，对第二矩阵的矩阵变换进行示例性描述。假设第二字节段为“A1,A2,A3,B1,B2,B3,C1,C2,C3”，将其按照时间戳顺序拆分为三段“A1,A2,A3”、“B1,B2,B3”和“C1,C2,C3”，将其按照时间戳顺序排序构建矩阵N，进而将矩阵N中的元素沿着对角线对调的矩阵变换规则进行变换，得到矩阵N´，以此完成第二矩阵向第二变换矩阵的变换。进而基于该第二变换矩阵，得到第二变换字节段为“C3，C2,C1,B3,B2,B1,A3,A2,A1”。
则基于该第一变换字节段和第二变换字节段，在进行交叉加密时，通过第一变换字节段、第二变换字节段交叉替换视频帧和音频帧的字节数据。其中，假设在目标视频流上各个视频帧的第一指定字节位置提取到的第一字节段为“a1,a2,a3,b1,b2,b3,c1,c2,c3”，在目标音频流上各个音频帧的第二指定字节位置提取到的第二字节段为“A1,A2,A3,B1,B2,B3,C1,C2,C3”。则按照上述矩阵变换方式，可以得到第一变换字节段“c3，c2,c1,b3,b2,b1,a3,a2,a1”，第二变换字节段“C3，C2,C1,B3,B2,B1,A3,A2,A1”。进而在视频流加密时，依序提取第二变换字节段“C3，C2,C1,B3,B2,B1,A3,A2,A1”上的各个字节数据替换目标视频流上视频帧的第一指定字节位置的字节数据，按照时间戳顺序，将“C3”替换“a1”,“C2”替换“a2”....,“A1”替换“c3”，以此类推，完成目标视频流各帧数据的加密，得到加密视频帧。同样地，在音频流加密时，依序提取第一变换字节段“c3，c2,c1,b3,b2,b1,a3,a2,a1”上的各个字节数据替换目标音频流上音频帧的第二指定字节位置的字节数据，按照时间戳顺序，将“c3”替换“A1”,“c2”替换“A2”....,“a1”替换“C3”，以此类推，完成目标音频流各帧数据的加密，得到加密音频帧。
至此，通过交叉替换字节数据，使得目标视频流和目标音频流的各帧数据的字节得到加密修改，以此来提升加密视频流、音频流的破解难度，提升数据传输、存储的安全性。
进一步地，为了提升加密监控数据的破解难度，本申请实施例还基于第一字节段和第二字节段合并得到的填充数据，对加密视频帧和加密音频帧进行再次加密处理，提升数据处理的安全性和保密性。
在将第一字节段和第二字节段合并时，按照设定的字节合并规则合并得到填充数据。设定的字节合并规则可以是将第一字节段和第二字节段首尾合并、将第二字节段分段若干段插入第一字节段的设定字节位置中等方式。本申请实施例对具体的字节合并规则不做固定限制，在此不多赘述。
可选地，在合并第一字节段和第二字节段时，将所述第二字节段的逐个字节数据依序插入所述第一字节段中的字节间隔位置中。以此得到的填充数据中，按照字节排列位置，奇数位来自第一字节段，偶数位来自第二字节段。通过合并第一字节段和第二字节段构成填充数据，以此进行加密视频帧和加密音频帧的再次加密处理，可以进一步提升数据破解难度，增加数据处理的安全性。
之后，基于该填充数据，使用设定的字节填充规则将其填充至加密视频帧和加密音频帧中，得到最终的交叉加密数据。
具体地，所述使用所述填充数据以及设定字节填充规则处理所述加密音频帧和所述加密视频帧，包括：
依序提取所述填充数据的一个字节数据并按照时间戳顺序填充至所述加密视频帧的一帧视频帧数据的第一目标字节位置中，并在完成所述加密视频帧的字节填充后，依序提取所述填充数据的一个字节数据并按照时间戳顺序填充至所述加密音频帧的一帧音频帧数据的第二目标字节位置中。
可以理解的是，填充数据通过第一字节段和第二字节段合并，其包含的字节数据与第一目标字节位置和第二目标字节位置的数量对应。则在使用填充数据填充处理加密视频帧和加密音频帧时，首先依序逐个提取填充数据中的一个字节数据，将其按照时间戳顺序填充至视频帧数据的第一目标字节位置中，每一帧视频帧数据填充一个字节数据，以此类推，完成视频帧数据的填充处理。同样地，按照上述视频帧数据的填充方式，进一步提取填充数据中剩余的字节数据，将其按照时间戳顺序填充至音频帧数据的第二目标字节位置中，每一帧音频帧数据填充一个字节数据，以此类推，完成音频帧数据的填充处理。
实际应用中，基于该填充数据，也可以先填充处理加密音频帧再填充处理加密视频帧。或者使用填充数据奇数位上的字节数据填充至加密音频帧，偶数位上的字节数据填充至加密视频帧。本申请实施例对具体的填充方式不做固定限制，在此不多赘述。需要说明的是，上述第一目标字节位置和第二目标字节位置根据实际填充需求设置，其可以是代表一帧数据的字符串上的任意位置。
可选地，所述使用所述填充数据以及设定字节填充规则处理所述加密音频帧和所述加密视频帧，包括：
将所述填充数据填充至所述加密视频帧的每一帧视频帧数据的第三目标字节位置中，将所述填充数据填充至所述加密音频帧的每一帧音频帧数据的第四目标字节位置中。
不同于上述使用一个填充数据处理加密音频帧和加密视频帧的所有帧数据，此处对于加密音频帧和加密视频帧的每一帧数据，均使用完整的填充数据进行填充处理。即对于加密视频帧的每一帧视频帧数据，将填充数据上的各个字节数据填充至其第三目标字节位置。其中，若第三目标字节位置为一个，则将填充数据的所有数据均填充至该第三目标字节位置。若第三目标字节位置为多个，则将填充数据拆分为对应的多个分段数据，逐个分段数据填充至对应的第三目标字节位置。以此可以使得填充加密得到的帧数据更为复杂，更加难以破解，提升数据加密安全性。
同样的，对于加密音频帧的每一帧音频帧数据，将填充数据上的各个字节数据填充至其第四目标字节位置。其中，若第四目标字节位置为一个，则将填充数据的所有数据均填充至该第四目标字节位置。若第四目标字节位置为多个，则将填充数据拆分为对应的多个分段数据，逐个分段数据填充至对应的第四目标字节位置。
至此，基于上述第一字节段和第二字节段合并的填充数据，结合字节填充规则填充处理加密视频帧和加密音频帧后，即可得到最终的交叉加密数据。以此通过双重的加密机制加密得到的交叉加密数据，可以进一步提升数据的破解难度，保障用户隐私的安全性。
在一个实施例中，还可以根据目标视频流和目标音频流的数据量选择对应的设定字节填充规则，结合填充数据处理所述加密音频帧和所述加密视频帧。
为了进一步提升数据破解难度，本申请实施例还根据目标视频流和目标音频流的数据量，适应性选择设定字节填充规则以填充处理对应的加密视频帧和加密音频帧。可以理解的是，对于数据量较小的目标视频流和目标音频流，使用较复杂的字节填充规则会增大数据加密处理时长，降低数据处理效率。而对于数据量较大的目标视频流和目标音频流，使用简单的字节填充规则会导致数据被轻易破解，影响数据处理的安全性。基于此，本申请实施例根据不同的数据量区间设定相应的字节填充规则，当目标视频流和目标音频流的数据量达到对应数据量区间时，则适应该数据量区间对应的字节填充规则进行数据的填充处理，以此在保障数据处理效率的同时，提升数据加密的安全性。
之后，基于上述加密得到的交叉加密数据，后续在数据存储、传输场景中需要对其进行解密时，则基于上述字节填充规则解密交叉加密数据，得到加密视频帧、加密音频帧和对应填充数据。进而提取加密视频帧和加密音频帧上指定字节位置（第一指定字节位置和第二指定字节位置）的字节数据，得到第一变换字节段和第二变换字节段。第一变换字节段和第二变换字节段通过逆矩阵变换还原为第一矩阵和第二矩阵。基于第一矩阵和第二矩阵得到第一字节段和第二字节段，将第一字节段替换第一指定字节位置上的字节数据，还原加密视频帧得到目标视频流的各帧视频帧数据，将第二字节段替换第二指定字节位置上的字节数据，还原加密音频帧得到目标音频流的各帧音频帧数据，以此完成监控数据的解密还原。
上述，通过识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；定位目标视频流的每一帧视频帧数据中的第一指定字节位置，提取第一指定字节位置的字节数据，按照时间戳顺序生成第一字节段；定位目标音频流的每一帧音频帧数据中的第二指定字节位置，提取第二指定字节位置的字节数据，按照时间戳顺序生成第二字节段；基于第一字节段构建第一矩阵，按照设定矩阵变换规则处理第一矩阵，得到第一变换矩阵，基于第一变换矩阵得到第一变换字节段，按照时间戳顺序将第一变换字节段的各个字节数据替换第二指定字节位置的各个字节数据，得到加密音频帧，基于第二字节段构建第二矩阵，按照设定矩阵变换规则处理第二矩阵，得到第二变换矩阵，基于第二变换矩阵得到第二变换字节段，按照时间戳顺序将第二变换字节段的各个字节数据替换第一指定字节位置的各个字节数据，得到加密视频帧。采用上述技术手段，能够监控数据的破解难度，提升监控数据处理的安全性，避免用户隐私泄露，保障用户隐私安全。
实施例二：
在上述实施例的基础上，图7为本申请实施例二提供的一种监控数据的定向处理装置的结构示意图。参考图7，本实施例提供的监控数据的定向处理装置具体包括：识别模块21、提取模块22和加密模块23。
其中，识别模块21用于识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；
提取模块22用于定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；
加密模块23用于基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
具体地，所述指定特征包括用户人脸特征和用户声纹特征；识别模块21用于基于人脸识别算法识别目标视频流，基于声纹识别算法识别目标音频流。
具体地，加密模块23用于用于将所述第一字节段平均拆分成设定数量的子段落，并对取余部分的子段落使用设定字节数据补充，以使各个所述子段落包含的字节量相同，基于各个所述子段落构建与所述设定数量对应行数的第一矩阵，各个所述子段落在所述第一矩阵中按照所述时间戳顺序排序。
具体地，识别模块21将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐。其中，对所述目标视频流或者所述目标音频流中的未对齐片段，使用指定字节段作为一帧数据补充对齐所述目标视频流和所述目标音频流。每一帧所述视频帧数据的所述第一指定字节位置为一个或者多个，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述第一指定字节位置以设定间隔位置分布；每一帧所述音频帧数据的所述第二指定字节位置为一个或者多个，在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述第二指定字节位置以设定间隔位置分布。
在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，提取模块22用于按照所述第一指定字节位置在所述视频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第一字节子段落，按照所述时间戳顺序串联各个所述第一字节子段落，生成第一字节段落；
在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，提取模块22用于按照所述第二指定字节位置在所述音频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第二字节子段落，按照所述时间戳顺序串联各个所述第二字节子段落，生成第一字节段落。
上述，通过识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；定位目标视频流的每一帧视频帧数据中的第一指定字节位置，提取第一指定字节位置的字节数据，按照时间戳顺序生成第一字节段；定位目标音频流的每一帧音频帧数据中的第二指定字节位置，提取第二指定字节位置的字节数据，按照时间戳顺序生成第二字节段；基于第一字节段构建第一矩阵，按照设定矩阵变换规则处理第一矩阵，得到第一变换矩阵，基于第一变换矩阵得到第一变换字节段，按照时间戳顺序将第一变换字节段的各个字节数据替换第二指定字节位置的各个字节数据，得到加密音频帧，基于第二字节段构建第二矩阵，按照设定矩阵变换规则处理第二矩阵，得到第二变换矩阵，基于第二变换矩阵得到第二变换字节段，按照时间戳顺序将第二变换字节段的各个字节数据替换第一指定字节位置的各个字节数据，得到加密视频帧。采用上述技术手段，能够监控数据的破解难度，提升监控数据处理的安全性，避免用户隐私泄露，保障用户隐私安全。
本申请实施例二提供的监控数据的定向处理装置可以用于执行上述实施例一提供的监控数据的定向处理方法，具备相应的功能和有益效果。
实施例三：
本申请实施例三提供了一种电子设备，参照图8，该电子设备包括：处理器31、存储器32、通信模块33、输入装置34及输出装置35。该电子设备中处理器的数量可以是一个或者多个，该电子设备中的存储器的数量可以是一个或者多个。该电子设备的处理器、存储器、通信模块、输入装置及输出装置可以通过总线或者其他方式连接。
存储器32作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请任意实施例所述的监控数据的定向处理方法对应的程序指令/模块（例如，监控数据的定向处理装置中的识别模块、提取模块和加密模块）。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据设备的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
通信模块33用于进行数据传输。
处理器31通过运行存储在存储器中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的监控数据的定向处理方法。
输入装置34可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置35可包括显示屏等显示设备。
上述提供的电子设备可用于执行上述实施例一提供的监控数据的定向处理方法，具备相应的功能和有益效果。
实施例四：
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种监控数据的定向处理方法，该监控数据的定向处理方法包括：识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的监控数据的定向处理方法，还可以执行本申请任意实施例所提供的监控数据的定向处理方法中的相关操作。
上述实施例中提供的监控数据的定向处理装置、存储介质及电子设备可执行本申请任意实施例所提供的监控数据的定向处理方法，未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的监控数据的定向处理方法。
上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由权利要求的范围决定。

Claims (10)

1.一种监控数据的定向处理方法，其特征在于，包括：
识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；
定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；
基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
2.根据权利要求1所述的监控数据的定向处理方法，其特征在于，所述指定特征包括用户人脸特征和用户声纹特征；
所述识别目标视频流和目标音频流，包括：
基于人脸识别算法识别目标视频流，基于声纹识别算法识别目标音频流。
3.根据权利要求1所述的监控数据的定向处理方法，其特征在于，所述基于所述第一字节段构建第一矩阵，包括:
将所述第一字节段平均拆分成设定数量的子段落，并对取余部分的子段落使用设定字节数据补充，以使各个所述子段落包含的字节量相同，
基于各个所述子段落构建与所述设定数量对应行数的第一矩阵，各个所述子段落在所述第一矩阵中按照所述时间戳顺序排序。
4.根据权利要求1所述的监控数据的定向处理方法，其特征在于，所述确定对应时间戳顺序的目标视频流和目标音频流，包括：
将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐。
5.根据权利要求4所述的监控数据的定向处理方法，其特征在于，所述将所述目标视频流的视频帧数据和所述目标音频流的音频帧数据按照时间戳顺序对齐，还包括：
对所述目标视频流或者所述目标音频流中的未对齐片段，使用指定字节段作为一帧数据补充对齐所述目标视频流和所述目标音频流。
6.根据权利要求1所述的监控数据的定向处理方法，其特征在于，每一帧所述视频帧数据的所述第一指定字节位置为一个或者多个，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述第一指定字节位置以设定间隔位置分布；
每一帧所述音频帧数据的所述第二指定字节位置为一个或者多个，在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述第二指定字节位置以设定间隔位置分布。
7.根据权利要求6所述的监控数据的定向处理方法，其特征在于，在一帧所述视频帧数据包含多个所述第一指定字节位置的情况下，所述提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段，包括：
按照所述第一指定字节位置在所述视频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第一字节子段落，按照所述时间戳顺序串联各个所述第一字节子段落，生成第一字节段落；
在一帧所述音频帧数据包含多个所述第二指定字节位置的情况下，所述提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段，包括：
按照所述第二指定字节位置在所述音频帧数据的排列位置顺序或者设定字节提取顺序提取字节数据，得到第二字节子段落，按照所述时间戳顺序串联各个所述第二字节子段落，生成第一字节段落。
8.一种监控数据的定向处理装置，其特征在于，包括：
识别模块，用于识别目标视频流和目标音频流，在目标视频流或者目标音频流包含指定特征的情况下，确定对应时间戳顺序的目标视频流和目标音频流；
提取模块，用于定位所述目标视频流的每一帧视频帧数据中的第一指定字节位置，提取所述第一指定字节位置的字节数据，按照所述时间戳顺序生成第一字节段；定位所述目标音频流的每一帧音频帧数据中的第二指定字节位置，提取所述第二指定字节位置的字节数据，按照所述时间戳顺序生成第二字节段；
加密模块，用于基于所述第一字节段构建第一矩阵，按照设定矩阵变换规则处理所述第一矩阵，得到第一变换矩阵，基于所述第一变换矩阵得到第一变换字节段，按照时间戳顺序将所述第一变换字节段的各个字节数据替换所述第二指定字节位置的各个字节数据，得到加密音频帧，基于所述第二字节段构建第二矩阵，按照设定矩阵变换规则处理所述第二矩阵，得到第二变换矩阵，基于所述第二变换矩阵得到第二变换字节段，按照时间戳顺序将所述第二变换字节段的各个字节数据替换所述第一指定字节位置的各个字节数据，得到加密视频帧。
9.一种电子设备，其特征在于，包括：
存储器以及一个或多个处理器；
所述存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7任一所述的监控数据的定向处理方法。
10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7任一所述的监控数据的定向处理方法。
CN202211145348.0A 2022-09-20 2022-09-20 一种监控数据的定向处理方法及装置 Active CN115225869B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211145348.0A CN115225869B (zh) 2022-09-20 2022-09-20 一种监控数据的定向处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211145348.0A CN115225869B (zh) 2022-09-20 2022-09-20 一种监控数据的定向处理方法及装置

Publications (2)

Publication Number Publication Date
CN115225869A true CN115225869A (zh) 2022-10-21
CN115225869B CN115225869B (zh) 2022-12-20

Family

ID=83617740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211145348.0A Active CN115225869B (zh) 2022-09-20 2022-09-20 一种监控数据的定向处理方法及装置

Country Status (1)

Country Link
CN (1) CN115225869B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080107261A1 (en) * 2004-02-23 2008-05-08 Stefan Kistner Method for Protecting Confidential Data
CN101197987A (zh) * 2006-12-08 2008-06-11 上海全景数字技术有限公司 数字电视节目的录制、回放方法与系统
CN106209896A (zh) * 2016-07-29 2016-12-07 网宿科技股份有限公司 基于音视频格式的流媒体加密方法和模块
CN110399741A (zh) * 2019-07-29 2019-11-01 深圳前海微众银行股份有限公司 数据对齐方法、设备及计算机可读存储介质
CN110851869A (zh) * 2019-11-14 2020-02-28 深圳前海微众银行股份有限公司 敏感信息处理方法、设备及可读存储介质
CN113489982A (zh) * 2021-07-28 2021-10-08 广东博华超高清创新中心有限公司 一种基于avs3编码框架下的数字水印版权保护方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080107261A1 (en) * 2004-02-23 2008-05-08 Stefan Kistner Method for Protecting Confidential Data
CN101197987A (zh) * 2006-12-08 2008-06-11 上海全景数字技术有限公司 数字电视节目的录制、回放方法与系统
CN106209896A (zh) * 2016-07-29 2016-12-07 网宿科技股份有限公司 基于音视频格式的流媒体加密方法和模块
CN110399741A (zh) * 2019-07-29 2019-11-01 深圳前海微众银行股份有限公司 数据对齐方法、设备及计算机可读存储介质
CN110851869A (zh) * 2019-11-14 2020-02-28 深圳前海微众银行股份有限公司 敏感信息处理方法、设备及可读存储介质
CN113489982A (zh) * 2021-07-28 2021-10-08 广东博华超高清创新中心有限公司 一种基于avs3编码框架下的数字水印版权保护方法

Also Published As

Publication number Publication date
CN115225869B (zh) 2022-12-20

Similar Documents

Publication Publication Date Title
CN112104570B (zh) 流量分类方法、装置、计算机设备和存储介质
EP4105821A1 (en) Face liveness detection method, system and apparatus, computer device, and storage medium
US12015692B2 (en) Enhanced encryption for face-related data
EP4179690A1 (en) Image distribution using composite re-encrypted images
CN114915805B (zh) 基于双重加密机制的视频流传输方法及安全芯片装置
CN112784823B (zh) 人脸图像识别方法、装置、计算设备和介质
CN110933040B (zh) 基于区块链的数据上链方法、装置、设备及介质
WO2022001092A1 (zh) 一种数据处理方法、装置及设备
US11676418B1 (en) Enhanced storage and data retrieval for face-related data
CN113766085B (zh) 图像处理方法及相关装置
Jiang et al. A low-cost image encryption method to prevent model stealing of deep neural network
CN102982288B (zh) 在便携式终端中执行数据的加密和解密的设备和方法
CN115134080B (zh) 基于安全加密芯片的数据传输方法及装置
CN112702623A (zh) 视频处理方法、装置、设备及存储介质
CN115225869B (zh) 一种监控数据的定向处理方法及装置
CN115242548B (zh) 一种隐私数据定向加密方法、装置、电子设备及存储介质
CN115114667A (zh) 一种安全芯片的隐私信息处理分类方法及装置
CN113452724B (zh) 基于互联网的分离式存储的电子签章加密防护系统及方法
CN113452783B (zh) 区块链云架构的数字化paas开放平台系统及实现方法
CN114268468A (zh) 网络流量处理系统、方法、装置、计算机设备和存储介质
CN115086718A (zh) 一种视频流加密方法及装置
CN110059630B (zh) 隐私保护的可验证外包监控视频行人再识别方法
CN111049921A (zh) 基于区块链技术的图像处理系统、方法、装置及存储介质
CN115225935B (zh) 一种视频流、音频流字节交叉加密方法及装置
CN112182636A (zh) 一种联合建模训练的实现方法、装置、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant