CN115426507B - 基于目标检测的隐私视频传输、播放方法、装置及设备 - Google Patents

基于目标检测的隐私视频传输、播放方法、装置及设备 Download PDF

Info

Publication number
CN115426507B
CN115426507B CN202210908662.3A CN202210908662A CN115426507B CN 115426507 B CN115426507 B CN 115426507B CN 202210908662 A CN202210908662 A CN 202210908662A CN 115426507 B CN115426507 B CN 115426507B
Authority
CN
China
Prior art keywords
target
information
image
frame image
privacy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210908662.3A
Other languages
English (en)
Other versions
CN115426507A (zh
Inventor
陈辉
张智
熊章
张青军
杜沛力
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ningbo Xingxun Intelligent Technology Co ltd
Original Assignee
Ningbo Xingxun Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo Xingxun Intelligent Technology Co ltd filed Critical Ningbo Xingxun Intelligent Technology Co ltd
Priority to CN202210908662.3A priority Critical patent/CN115426507B/zh
Publication of CN115426507A publication Critical patent/CN115426507A/zh
Application granted granted Critical
Publication of CN115426507B publication Critical patent/CN115426507B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • H04N21/23476Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption by partially encrypting, e.g. encrypting the ending portion of a movie
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4408Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video stream encryption, e.g. re-encrypting a decrypted video stream for redistribution in a home network

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明属于视频图像数据处理技术领域,解决了现有AI看护设备采集的婴幼儿产品的视频图像涉及其他人员的隐私信息,所导致用户体验不佳的技术问题,提供了一种目标检测的隐私视频传输、播放方法、装置及设备。该方法包括:获取基础视频中存在隐私信息的各目标帧图像和各目标帧图像对应的各原始帧头信息;对各目标帧图像进行目标检测,得到各目标帧图像的隐私信息;将各隐私信息与对应的原始帧头信息进行编码加密,得到各目标帧图像的各目标帧头信息;利用各目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;本发明利用帧头信息和隐私信息共同编码加密,防止视频传输和播放时隐私泄露。

Description

基于目标检测的隐私视频传输、播放方法、装置及设备
技术领域
本发明涉及视频数据处理技术领域,尤其基于目标检测的隐私视频传输、播放方法、装置及设备。
背景技术
随着城市化进程不断深入,年轻父母因为没办法亲力亲为照顾婴幼儿,因此会由老人代为照顾婴幼儿,这导致年轻父母无法更好的关注到婴幼儿的成长,为解决这一问题,年轻父母选择采用AI看护设备进行婴幼儿辅助看护。
然而现有技术中,AI看护设备主要是基于摄像头实时采集婴幼儿场景的视频图像进行目标分析来确定婴幼儿的状态;然而婴幼儿的看护离不开监护人的照顾,同时,婴幼儿环境常常出现其他人物,从而导致AI看护设备采集的婴幼儿场景的视频图像常常存在其他人员的隐私信息,无论是视频图像在传回服务器端进行技术分析还是其他平台传播时,均会造成隐私泄露,不仅给观看者造成视觉不适,还给涉及隐私的人员带来不良体验。
发明内容
有鉴于此,本发明实施例提供了一种目标检测的隐私视频传输、播放方法、装置及设备,用以解决现有AI看护设备采集的婴幼儿产品的视频图像涉及其他人员的隐私信息,所导致用户体验不佳的技术问题。
本发明采用的技术方案是:
本发明提供了一种基于目标检测的隐私视频传输方法,所述方法包括:
S1:获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
S2:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
S3:将各所述隐私信息与对应的所述原始帧头信息进行编码加密,得到各所述目标帧图像的各目标帧头信息;
S4:利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频。
优选地,所述S1包括:
S11:获取婴幼儿睡眠时的基础视频;
S12:对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
S13:提取各所述目标帧图像的各所述原始帧头信息。
优选地,所述S12包括:
S121:获取对所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
S122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
S123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检查,得到其他帧目标图像;
其中,所述目标帧图像包括所述首帧目标图像和所述其他帧目标图像。
优选地,所述S3包括:
S31:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的所述隐私信息的类别信息和位置信息;
S32:将各所述目标帧图像的所述类别信息、所述位置信息和所述原始帧头信息进行编码加密,得到各所述目标帧头信息。
本发明还提供了一种基于上述任一项所述的基于目标检测的隐私视频传输方法的播放方法,其特征在于,所述方法包括:
S5:获取所述目标视频各帧图像的帧头信息;
S6:根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
S7:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
优选地,所述S7包括:
S71:获取各所述隐私信息的类别信息和位置信息;
S72:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
S73:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像;
S74:对各所述局部屏蔽图像进行解码播放。
本发明还提供了一种基于上述任一项所述的基于目标检测的隐私视频传输方法的传输装置,包括:
图像采集模块:用于获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
图像分析模块:用于对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
图像加密模块:用于将各所述隐私信息与对应的所述原始帧头信息进行编码加密,得到各所述目标帧图像的各目标帧头信息;
图像合并模块:用于利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频。
本发明还提供了一种基于上述任一项所述的基于目标检测的隐私视频播放方法的播放装置,所述装置包括:
图像信息采集模块:用于获取所述目标视频各帧图像的帧头信息;
隐私图像筛选模块:用于根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
图像加密播放模块:用于根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
本发明还提供了一种电子设备,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现上述任一项所述的方法。
本发明还提供了一种介质,其上存储有计算机程序指令,当所述计算机程序指令被处理器执行时实现上述任一项所述的方法。
综上所述,本发明的有益效果如下:
本发明提供的一种目标检测的隐私视频传输、播放方法、装置及设备,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,这些均在本发明的保护范围内。
图1为本发明实施例1中目标检测的隐私视频传输方法的流程示意图;
图2为本发明实施例2中目标检测的隐私视频播放方法的流程示意图;
图3为本发明实施例3中目标检测的隐私视频传输装置的结构示意图;
图4为本发明实施例4中目标检测的隐私视频播放装置的结构示意图;
图5为本发明实施例5中的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。在本发明的描述中,需要理解的是,术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本申请和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。如果不冲突,本发明以及实施例中的各个特征可以相互结合,均在本发明的保护范围之内。
实施例1
请参见图1,图1为本发明实施例1中一种基于目标检测的隐私视频传输方法,所述方法包括:
S1:获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
S2:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
S3:将各所述隐私信息与对应的所述原始帧头信息进行编码加密,得到各所述目标帧图像的各目标帧头信息;
S4:利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频。
具体的,利用AI看护设备辅助婴幼儿看护时,在看护设备的摄像头端采集婴幼儿场景的基础视频,并在将该基础视频传输至APP端或服务器端前,对基础视频进行目标检测,确定存在隐私信息的各帧图像记为各目标帧图像,隐私信息为非目标婴幼儿外的其他目标人物,至少包括以下之一:其他婴幼儿、目标婴儿的看护人等,在确定基础视频中存在隐私信息的各目标帧图像后,对各目标帧图像中原始帧头信息进行重新编码,具体是对各目标帧图像的原始帧头信息和对应的隐私信息共同进行编码加密,得到新的目标帧头信息去替换对应的原始帧头信息,从而以加密方式将隐私信息增加至帧头信息,通过解密帧头信息中的隐私信息来进行播放端的隐私屏蔽选择,防止隐私信息泄露所导致用户体验不佳的问题,同时,通过将隐私信息与帧头信息绑定,使得播放端能够确定每一帧图像的隐私信息,进而有针对性的选择屏蔽处理,既保留了基础视频画面完整性,如用户自己可以选择屏蔽隐私信息仅查看婴幼儿画面,也可以选择不屏蔽隐私信息查看全部画面,又能避免隐私泄露,在App端将带有隐私信息的目标视频传输至服务器或者对外交流传播时,服务器或者其他接收端可以选择隐私信息屏蔽,只查看仅包含目标婴幼儿画面的视频图像,实现隐私信息保护的灵活性。
在一实施例中,所述S1包括:
S11:获取婴幼儿睡眠时的基础视频;
S12:对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
S13:提取各所述目标帧图像的各所述原始帧头信息。
具体的,在摄像头端,对摄像头采集的基础视频的各帧图像进行目标检测,筛选出各帧图像中除目标婴幼儿还包括其他活体的各目标帧图像,其他活体包括:其他婴幼儿、家庭其他成员等,将基础视频的各目标帧图像的原始帧头信息提取出来重新编码,具体是将帧头信息和隐私信息一起编码加密,从而将隐私信息添加至帧头信息中,避免因为屏蔽隐私信息破坏基础视频的原始图像数据。
在一实施例中,所述S12包括:
S121:获取对所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
S122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
S123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检查,得到其他帧目标图像;
其中,所述目标帧图像包括所述首帧目标图像和所述其他帧目标图像。
具体的,对基础视频的各帧图像进行目标检测,采用抽帧检测方式,从而可以减少隐私信息排查所需要的计算机算力,具体是设置第一间隔时间和第二间隔时间来对基础视频进行抽帧检测,在未检测到隐私信息前,采用第一间隔时间进行基础视频的各帧图像检测,直至第一次检测出隐私信息对应的图像,记为首帧目标图像,然后依据第二间隔时间继续对基础视频的剩余各帧图像进行抽帧检测,直到最后一次检测出隐私信息对应的图像,将第一次检测出隐私信息对应的图像和最后一次检测出隐私信息对应的图像之间的所有图像记为各目标帧图像,将除首帧目标图像之外的所有目标帧图像记为其他帧目标图像,通过抽帧检测方式可以减低计算机的算力消耗,第一间隔时间小于第二间隔时间,可以进一步加快各目标帧图像的筛选。
在一实施例中,所述第一间隔时间和所述第二间隔时间为单位时间的整数倍,所述单位时间为相邻两帧图像的间隔时间。
在一实施例中,若所述第一间隔时间为n倍单位时间,n为大于等于1的正整数,所述S122包括:
S1221:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到第一个目标帧图像;
S1221:若n等于1,则第一个所述目标帧图像为所述首帧目标图像;
S1222:若n等于2,则将第一个所述目标帧图像的前一帧图像作为所述首帧目标图像;
S1223:若n大于2,则以第三间隔时间对第一个所述目标图像与前一个被检测选中的检测帧图像之间的其他帧图像进行目标检测,得到所述首帧目标图像,其中,所述第三间隔时间为2个单位时间。
具体的,当第一间隔时间为单位时间时,即对基础视频的每一帧图像均进行检查,从而得到首帧目标图像,当第一间隔时间为2个单位时间时,即对基础视频进行每间隔一帧图像检测一次,可以减少数据处理量,提供检测效率;将检测到的第一个目标帧图像的前一帧作为首帧图像,可以避免隐私信息不全;当第一间隔时间大于2个单位时间时,将以第一间隔时间检测的最后两帧图像之间的其他帧图像以第三间隔时间进行抽帧检测,第三间隔时间优选1个单位时间或2个单位时间,从而确定出首帧目标图像;通过设置第三间隔时间可以快速完成不存在隐私信息的各帧图像检测,然后对小范围的多帧图像进行首帧目标图像定位,进一步节约计算机资源和提高检测效率。
在一实施例中,采用同样的方法来确定其他帧图像的末帧目标图像,提高检测效率的同时防止隐私信息不全。
在一实施例中,所述S3包括:
S31:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的所述隐私信息的类别信息和位置信息;
S32:将各所述目标帧图像的所述类别信息、所述位置信息和所述原始帧头信息进行编码加密,得到各所述目标帧头信息。
具体的,对各目标帧图像进行目标检测,确定各目标帧图像的隐私信息对应的类别信息和位置信息,位置信息为机器检测到隐私信息对应的目标的检测框位置,类别信息为该隐私信息属于目标的哪些隐私,如面部、身体其他部位、隐私目标所携带的信息等,将隐私信息的类别信息和位置信息与该目标帧图像的帧头共同进行编码加密后作为该目标帧图像的目标帧头信息,以便。
采用本实施例的一种目标检测的隐私视频传输方法,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
实施例2
请参见图2,图2为本发明实施例2基于实施例1一种基于目标检测的隐私视频传输方法提供的播放方法的流程示意图,所述播放方法包括:
S5:获取所述目标视频各帧图像的帧头信息;
S6:根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
S7:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
具体的,App端接收到摄像头端传输过来的婴幼儿看护的目标视频,在播放该目标视频时,在帧头文件解码解密时,针对头文件中的隐私信息对应的图像进行屏蔽,然后播放;屏蔽方式包括以下之一:打马赛克、模糊处理等。
在一实施例中,所述S7包括:
S71:获取各所述隐私信息的类别信息和位置信息;
S72:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
S73:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像;
S74:对各所述局部屏蔽图像进行解码播放。
具体的,在播放视频时,针对隐私信息可以根据类别信息进行选择性屏蔽,如隐私信息为监控区域出现其他婴幼儿,此时可以选择不屏蔽,也可以选择屏蔽部分;又如:App端播放时(即看护人直接播放)可以选择不屏蔽,以完整画面进行播放,其他位置播放时(服务器端、其他平台):则可以选择隐私信息屏蔽的播放方法,实现视频不同功能需求时的差异化播放,提高播放的灵活性。
采用本实施例的一种目标检测的隐私视频传输方法,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
实施例3
本发明还提供了一种基于目标检测的隐私视频传输装置,请参见图3,包括:
图像采集模块:用于获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
图像分析模块:用于对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
图像加密模块:用于将各所述隐私信息与对应的所述原始帧头信息进行编码加密,得到各所述目标帧图像的各目标帧头信息;
图像合并模块:用于利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频。
在一实施例中,所述图像采集模块包括:
视频采集单元:获取婴幼儿睡眠时的基础视频;
目标检测单元:对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
信息提取单元:提取各所述目标帧图像的各所述原始帧头信息。
在一实施例中,所述目标检测单元包括:
时间间隔单元:获取对所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
第一检测单元:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
第二检测单元:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检查,得到其他帧目标图像;
其中,所述目标帧图像包括所述首帧目标图像和所述其他帧目标图像。
在一实施例中,所述图像加密模块包括:
信息分析单元:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的所述隐私信息的类别信息和位置信息;
图像编码单元:将各所述目标帧图像的所述类别信息、所述位置信息和所述原始帧头信息进行编码加密,得到各所述目标帧头信息。
采用本实施例的基于目标检测的隐私视频传输装置,采用本实施例的一种目标检测的隐私视频传输方法,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
实施例4
一种基于目标检测的隐私视频播放装置,请参见图4,所述装置包括:
图像信息采集模块:用于获取所述目标视频各帧图像的帧头信息;
隐私图像筛选模块:用于根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
图像加密播放模块:用于根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
在一实施例中,所述S7包括:
S71:获取各所述隐私信息的类别信息和位置信息;
S72:根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
S73:对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像;
S74:对各所述局部屏蔽图像进行解码播放。
采用本实施例的一种目标检测的隐私视频播放装置,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
实施例3
本发明提供了一种电子设备和介质,如图5所示,包括至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令。
具体地,上述处理器可以包括中央处理器(CPU),或者特定集成电路(ApplicationSpecific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个集成电路,电子设备至少包括以下之一:摄像头、具有摄像头的移动设备、具有摄像头的穿戴设备。
存储器可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器可在数据处理装置的内部或外部。在特定实施例中,存储器是非易失性固态存储器。在特定实施例中,存储器包括只读存储器(ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器通过读取并执行存储器中存储的计算机程序指令,以实现上述实施例方式一中任意一种目标检测的隐私视频传输、播放方法。
在一个示例中,电子设备还可包括通信接口和总线。其中,处理器、存储器、通信接口通过总线连接并完成相互间的通信。
通信接口,主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
总线包括硬件、软件或两者,将电子设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
综上所述,本发明实施例提供了一种目标检测的隐私视频传输、播放方法、装置及设备,对采集的基础视频各帧图像进行目标检测,确定存在隐私信息的各目标帧图像;提取各目标帧图像的原始帧头信息和对应隐私信息,将该隐私信息与帧头信息重新进行一起编码加密,以便将隐私信息存储在帧头信息中,巧妙的利用帧头信息的加密来将需要屏蔽的隐私信息以加密方式存储,在对基础视频进行播放时,当完成帧头信息解码后,若存在需要屏蔽的隐私信息,则针对隐私信息进行后期播放屏蔽,如局部模糊、局部马赛克等,既能达到隐私信息屏蔽效果,又能避免原始基础视频被破话,这样有利于在必要时刻进行视频完整性应用,如用户自己观看时可以不屏蔽全画面播放,后台技术人员观看时,可以选择隐私信息全部屏蔽播放,从而实现同一视频的不同播放对象的不同播放效果,提高用户体验效果。
需要明确的是,本发明并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本发明的方法过程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本发明的精神后,作出各种改变、修改和添加,或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时,本发明的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (7)

1.一种基于目标检测的隐私视频传输方法,其特征在于,所述方法包括:
S1:获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
S2:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
S3:将各所述隐私信息与对应的所述原始帧头信息共同进行编码加密,得到各所述目标帧图像的各目标帧头信息;
S4:利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
其中,所述S1包括:
S11:获取婴幼儿睡眠时的基础视频;
S12:对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
S13:提取各所述目标帧图像的各所述原始帧头信息;
其中,所述S3包括:
S31:对各所述目标帧图像进行目标检测,得到各所述目标帧图像的所述隐私信息的类别信息和位置信息;
S32:将各所述目标帧图像的所述类别信息、所述位置信息和所述原始帧头信息共同进行编码加密,得到各所述目标帧头信息。
2.根据权利要求1所述的基于目标检测的隐私视频传输方法,其特征在于,所述S12包括:
S121:获取对所述基础视频进行目标检测的第一间隔时间和第二间隔时间,所述第一间隔时间小于所述第二间隔时间;
S122:根据所述第一间隔时间对所述基础视频进行非目标婴幼儿的其他活体目标检测,得到首帧目标图像;
S123:得到所述首帧目标图像之后,按所述第二间隔时间继续对所述基础视频进行非目标婴幼儿的其他活体目标检查,得到其他帧目标图像;
其中,所述目标帧图像包括所述首帧目标图像和所述其他帧目标图像。
3.根据权利要求1或2所述的基于目标检测的隐私视频传输方法,其特征在于,所述方法包括:
S5:获取所述目标视频各帧图像的帧头信息;
S6:根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
S7:根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放。
4.一种基于目标检测的隐私视频传输装置,其特征在于,包括:
图像采集模块:用于获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息;
图像分析模块:用于对各所述目标帧图像进行目标检测,得到各所述目标帧图像的隐私信息;
图像加密模块:用于将各所述隐私信息与对应的所述原始帧头信息共同进行编码加密,得到各所述目标帧图像的各目标帧头信息;
图像合并模块:用于利用各所述目标帧头信息替换所述基础视频中各所述目标帧图像的原始帧头信息,得到对隐私信息以加密方式屏蔽的目标视频;
其中,所述获取基础视频中存在隐私信息的各目标帧图像和各所述目标帧图像对应的各原始帧头信息包括:
获取婴幼儿睡眠时的基础视频;
对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
提取各所述目标帧图像的各原始帧头信息;
其中,所述将各所述隐私信息与对应的所述原始帧头信息共同进行编码加密,得到各所述目标帧图像的各目标帧头信息包括:
对各所述目标帧图像进行目标检测,得到各所述目标帧图像的所述隐私信息的类别信息和位置信息;
将各所述目标帧图像的所述类别信息、所述位置信息和所述原始帧头信息共同进行编码加密,得到各所述目标帧头信息。
5.根据权利要求4所述的基于目标检测的隐私视频传输装置,其特征在于,所述装置包括:
图像信息采集模块:用于获取所述目标视频各帧图像的帧头信息;
隐私图像筛选模块:用于根据各所述帧头信息,确定包含隐私信息的各所述目标帧图像;
图像加密播放模块:用于根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放;
所述获取所述目标视频各帧图像的帧头信息包括:
获取婴幼儿睡眠时的基础视频;
对所述基础视频的各帧图像进行目标检测,得到包含非目标婴幼儿的其他活体目标的各所述目标帧图像;
提取各所述目标帧图像的各所述原始帧头信息;
所述根据各所述帧头信息中的隐私信息,对各所述目标帧图像中与所述隐私信息对应的图像进行屏蔽播放包括:
获取各所述隐私信息的类别信息和位置信息;
根据各所述类别信息,对各所述目标帧图像进行筛选,得到各待屏蔽帧图像;
对各所述待屏蔽帧图像与对应的所述位置信息的图像进行屏蔽处理,得到与各所述待屏蔽帧图像对应的各局部屏蔽图像;
对各所述局部屏蔽图像进行解码播放。
6.一种电子设备,其特征在于,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现如权利要求1-3中任一项所述的方法。
7.一种介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求1-3中任一项所述的方法。
CN202210908662.3A 2022-07-29 2022-07-29 基于目标检测的隐私视频传输、播放方法、装置及设备 Active CN115426507B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210908662.3A CN115426507B (zh) 2022-07-29 2022-07-29 基于目标检测的隐私视频传输、播放方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210908662.3A CN115426507B (zh) 2022-07-29 2022-07-29 基于目标检测的隐私视频传输、播放方法、装置及设备

Publications (2)

Publication Number Publication Date
CN115426507A CN115426507A (zh) 2022-12-02
CN115426507B true CN115426507B (zh) 2023-12-05

Family

ID=84197057

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210908662.3A Active CN115426507B (zh) 2022-07-29 2022-07-29 基于目标检测的隐私视频传输、播放方法、装置及设备

Country Status (1)

Country Link
CN (1) CN115426507B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014295A (zh) * 2010-11-19 2011-04-13 嘉兴学院 一种网络敏感视频检测方法
CN106096334A (zh) * 2016-06-02 2016-11-09 中国传媒大学 超媒体数据的加密方法及加密装置、解密方法及解密装置
CN108200382A (zh) * 2017-12-15 2018-06-22 北京奇虎科技有限公司 一种视频监控的方法和装置
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备和可读存储介质
CN111062859A (zh) * 2018-10-17 2020-04-24 奇酷互联网络科技(深圳)有限公司 视频监控方法、移动终端以及存储介质
CN111277728A (zh) * 2020-02-13 2020-06-12 浙江大华技术股份有限公司 视频检测方法及装置、计算机可读的存储介质、电子装置
EP3672244A1 (en) * 2018-12-20 2020-06-24 Axis AB Methods and devices for encoding and decoding a sequence of image frames in which the privacy of an object is protected
CN111429330A (zh) * 2020-03-31 2020-07-17 上海兑观信息科技技术有限公司 一种监控视频隐私保护方法和系统
CN112351275A (zh) * 2019-08-06 2021-02-09 浙江宇视科技有限公司 一种基于原始图像的特征区域隐私保护的方法及装置
CN112839244A (zh) * 2019-11-22 2021-05-25 北京大学 一种基于码流级别的监控视频分级加解密方法及系统
CN113051592A (zh) * 2021-03-31 2021-06-29 深圳市声扬科技有限公司 文件加密方法、装置、电子设备及存储介质
CN113259718A (zh) * 2021-04-27 2021-08-13 深圳市锐明技术股份有限公司 视频流的加密方法、装置、通信设备及存储介质
CN113489990A (zh) * 2021-06-30 2021-10-08 杭州海康威视数字技术股份有限公司 视频编码方法、装置、电子设备及存储介质
CN114666624A (zh) * 2022-04-07 2022-06-24 乾三(北京)科技有限公司 一种视频文件加密和解密方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160285834A1 (en) * 2014-11-10 2016-09-29 Qualcomm Incorporated Techniques for encrypting fields of a frame header for wi-fi privacy
CN108206930A (zh) * 2016-12-16 2018-06-26 杭州海康威视数字技术股份有限公司 基于隐私遮蔽显示图像的方法及装置

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014295A (zh) * 2010-11-19 2011-04-13 嘉兴学院 一种网络敏感视频检测方法
CN106096334A (zh) * 2016-06-02 2016-11-09 中国传媒大学 超媒体数据的加密方法及加密装置、解密方法及解密装置
CN108200382A (zh) * 2017-12-15 2018-06-22 北京奇虎科技有限公司 一种视频监控的方法和装置
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备和可读存储介质
CN111062859A (zh) * 2018-10-17 2020-04-24 奇酷互联网络科技(深圳)有限公司 视频监控方法、移动终端以及存储介质
EP3672244A1 (en) * 2018-12-20 2020-06-24 Axis AB Methods and devices for encoding and decoding a sequence of image frames in which the privacy of an object is protected
CN112351275A (zh) * 2019-08-06 2021-02-09 浙江宇视科技有限公司 一种基于原始图像的特征区域隐私保护的方法及装置
CN112839244A (zh) * 2019-11-22 2021-05-25 北京大学 一种基于码流级别的监控视频分级加解密方法及系统
CN111277728A (zh) * 2020-02-13 2020-06-12 浙江大华技术股份有限公司 视频检测方法及装置、计算机可读的存储介质、电子装置
CN111429330A (zh) * 2020-03-31 2020-07-17 上海兑观信息科技技术有限公司 一种监控视频隐私保护方法和系统
CN113051592A (zh) * 2021-03-31 2021-06-29 深圳市声扬科技有限公司 文件加密方法、装置、电子设备及存储介质
CN113259718A (zh) * 2021-04-27 2021-08-13 深圳市锐明技术股份有限公司 视频流的加密方法、装置、通信设备及存储介质
CN113489990A (zh) * 2021-06-30 2021-10-08 杭州海康威视数字技术股份有限公司 视频编码方法、装置、电子设备及存储介质
CN114666624A (zh) * 2022-04-07 2022-06-24 乾三(北京)科技有限公司 一种视频文件加密和解密方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于LINUX与H.264的安全视频监控系统;刘凯;网络技术安全与应用;103-105 *

Also Published As

Publication number Publication date
CN115426507A (zh) 2022-12-02

Similar Documents

Publication Publication Date Title
CN103093419B (zh) 一种检测图像清晰度的方法及装置
CN108668097B (zh) 一种实现家园互通的远程幼儿查看系统和方法
US20090046160A1 (en) Camera shake correcting device
CN107277484A (zh) 图像处理设备、图像处理方法和计算机可读存储介质
DK151744B (da) Fremgangsmaade til behandling af et informationssignal og indretninger til udoevelse af fremgangsmaaden
CN113194359B (zh) 自动抓取婴儿精彩视频集锦的方法、装置、设备及介质
CN104918016B (zh) 一种多媒体多信息同步重现的系统
CN115426507B (zh) 基于目标检测的隐私视频传输、播放方法、装置及设备
CN104067615A (zh) 编码装置和编码方法以及解码装置和解码方法
JP2012203770A (ja) 作業分析システム
CN113038272B (zh) 婴儿视频自动剪辑的方法、装置、设备及存储介质
CN109640096B (zh) 一种基于视频解码电磁泄漏的隐蔽通信方法
TWI336077B (en) Optical information detecting method, optical information detector, data sampling method
CN104809382A (zh) 具有归还和面部识别以及图像分析的图书管理系统
CN115426498A (zh) 以数据加密和光学遮挡进行隐私屏蔽的方法、装置及设备
TW201215104A (en) Letterbox margin processing method, letterbox margin processing apparatus and video processing system
CN114494321A (zh) 婴幼儿睡眠呼吸实时监测方法、装置、设备及存储介质
CN115391816A (zh) 基于光学屏蔽隐私信息的婴幼儿看护方法、装置及设备
CN111160279B (zh) 利用小样本生成目标识别模型的方法、装置、设备及介质
JP5470302B2 (ja) 集団行動判定装置、方法及びプログラム
CN107563788A (zh) 共享广告牌的分级方法及服务器
CN115937753A (zh) 基于私密行为信息提取的图像处理方法、装置及设备
ES2549607T3 (es) Aparato y procedimiento para la eliminación de defectos virtuales de placas sensibles a los rayos X
CN109660743A (zh) 一种制冷型红外热像仪高动态范围成像的实现方法
CN116389668B (zh) 用于数字视频图像信号的编码方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant