CN105007395B - 一种连续记录视频、影像的隐私处理方法 - Google Patents
一种连续记录视频、影像的隐私处理方法 Download PDFInfo
- Publication number
- CN105007395B CN105007395B CN201510439137.1A CN201510439137A CN105007395B CN 105007395 B CN105007395 B CN 105007395B CN 201510439137 A CN201510439137 A CN 201510439137A CN 105007395 B CN105007395 B CN 105007395B
- Authority
- CN
- China
- Prior art keywords
- video
- picture
- privacy
- image
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开的一种连续记录视频、影像的隐私处理方法，该方法通过从连续实时视频中获取视频片段，对视频片段进行画面分割得到画面片段，然后提取该画面片段的特征信息，去除一些干扰的非特征信息，有利于提高识别判断的精准度，并根据提取的特征信息进行隐私识别，对于特定的场所，例如洗手间等环境，当视频内容显示用户进入时，将自动休眠暂停录制，或者自动对画面进行模糊处理，从而对特定场所进行隐私保护。
Description
技术领域
本发明涉及视频处理方法，尤其是一种连续记录视频、影像的隐私处理方法。
背景技术
随着智能穿戴技术的发展，人们通过智能穿戴设备获取视频得到普及，公民的个人隐私保护问题也越来越受到关注，在记录这些视频时，对视频的隐私区域进行保护为保护个人隐私的有效手段，因此需要对视频进行隐私识别，目的是识别出视频中涉及隐私内容的部分进行模糊处理或停止拍摄记录处理，而现有的视频识别算法，通常是利用单纯的视频场景分割方法来进行识别，或通过单纯的人体肤色进行识别，容易造成失真的识别，识别准确率低，依然存在缺陷需要持续发展改善，且现有的分析算法不能对连续的视频进行不间断的识别，不能满足业务需求。
发明内容
为了解决上述技术问题，本发明提供一种适用于连续记录视频、影像的隐私处理方法，该方法处理过程更容易实现，有效提高准确率。
为了实现上述目的，本发明所采用的技术方案是：
一种连续记录视频、影像的隐私处理方法，该方法包括，
从连续实时视频中获取视频片段；
对提取的视频片段进行画面分割得到画面片段；
针对分割得到的每个画面片段分别执行：提取该画面片段的特征信息，并根据提取的特征信息进行包括场景识别和人体隐私识别的判断；
根据判断出的场景特征和人体特征，确定检测的视频片段是否包含隐私的视频内容，并进行隐私处理；
所述场景识别过程包括，根据从画面片段中提取的特征信息，通过调用场景检测器对该特征信息进行场景分析运算，得出场景类型，然后调用场景处理器依据场景类型进行处理，确定所处的场景，并建立场景数据表进行记录，当下一次从连续实时视频中检测到相同的特征信息时，直接从场景数据表中提取相应的位置信息；
上述的场景识别过程中，还结合由智能穿戴设备内置的位置传感器获取的位置信息来判断用户所处的场景；
所述人体隐私识别过程包括，根据从画面片段中提取的特征信息，通过调用隐私检测器对该特征信息进行人脸和人体肤色图像分析运算，得出隐私类型，然后调用隐私处理器依据隐私类型进行处理，对画面中的人脸、裸露的肤色面积、人体器官特征以及人体姿态进行识别，并建立隐私数据表进行记录。
该方法中，从连续实时视频中获取视频片段的具体方法，包括：
对连续实时视频进行等时间间隔提取N个关键帧，对于连续实时视频中除提取的N个关键帧之外的视频帧，相邻关键帧之间的视频帧以中心位置的视频帧为代表，定义为中心帧；
将各中心帧与相近的关键帧分别进行对比确定相似度；
选取与关键帧相似度最低的中心帧，以该中心帧所对应的视频帧作为提取的视频片段。
该方法中，所述视频片段进行画面分割生成画面片段的过程是程序依据对画面内容的变化情况进行判断；
若判断画面的特征信息出现显著的差异，则确定该画面内容变化的位置作为分割点，完成画面分割；
若判断画面的特征信息持续出现相同的内容，则确定该画面内容连续不变化，输出该画面内容为画面片段。
优选的，在对画面内容的变化情况进行判断时，还结合由智能穿戴设备获取的用户的生理数据和位置信息进行比对，通过对所述特征信息的检测，判断分析用户视频内容的行为。
优选的，所述画面片段的特征信息包括画面的亮度、画面的对比度、场景图像、人体图像中的至少一种。
优选的，在所述视频片段完成画面分割生成画面片段后，建立片段文件，将生成的画面片段保存在该片段文件中。
该方法中，所述连续实时视频通过智能穿戴设备进行记录获取，该隐私处理方法的过程在智能穿戴设备上完成，或者通过智能穿戴设备将连续实时视频上传至云端服务器，再由云端服务器对连续实时视频进行隐私识别处理。
本发明的有益效果：通过从连续实时视频中获取视频片段，对视频片段进行画面分割得到画面片段，然后提取该画面片段的特征信息，去除一些干扰的非特征信息，有利于提高识别判断的精准度，并根据提取的特征信息进行隐私识别，对于特定的场所，例如洗手间等环境，当视频内容显示用户进入时，将自动休眠暂停录制，或者自动对画面进行模糊处理，从而对特定场所进行隐私保护。
附图说明
下面结合附图对本发明的具体实施方式做进一步的说明。
图1是本发明的连续实时视频的隐私处理方法的流程图；
图2是本发明中场景识别的流程图；
图3是本发明中人体隐私识别的流程图；
图4是本发明中场景数据表的实施例；
图5是本发明中隐私数据表的实施例。
具体实施方式
参照图1-4，本发明提供的一种连续记录视频、影像的隐私处理方法，该方法步骤包括，从连续实时视频中获取视频片段；对提取的视频片段进行画面分割得到画面片段；针对分割得到的每个画面片段分别执行：提取该画面片段的特征信息，并根据提取的特征信息进行包括场景识别和人体隐私识别的判断；根据判断出的场景特征和人体特征，确定检测的视频片段是否包含隐私的视频内容，并进行隐私处理。
该方法步骤中，从连续实时视频中获取视频片段的具体方法，包括：对连续实时视频进行等时间间隔提取N个关键帧，对于连续实时视频中除提取的N个关键帧之外的视频帧，相邻关键帧之间的视频帧以中心位置的视频帧为代表，定义为中心帧；将各中心帧与相近的关键帧分别进行对比确定相似度；选取与关键帧相似度最低的中心帧，以该中心帧所对应的视频帧作为提取的视频片段，从而完成视频片段的提取，即实现将连续实时视频转化为视频片段形式进行识别，有利于提高后续识别判断的准确度。
所述视频片段进行画面分割生成画面片段的过程是，依据对画面内容的变化情况进行判断；若判断画面的特征信息出现显著的差异，则确定该画面内容变化的位置作为分割点，完成画面分割；若判断画面的特征信息持续出现相同的内容，则确定该画面内容连续不变化，输出该画面内容为画面片段，即在重复画面内容中选取其中之一的画面为输出的画面片段。
在对画面内容的变化情况进行判断时，还结合由智能穿戴设备获取的用户的生理数据和位置信息进行比对，通过对所述特征信息的检测，判断分析用户视频内容的行为，通过上述获取的信息，有利于辅助进行识别判断，从而对相应内容片段进行行为的标记，便于后续大数据的维护。例如，通过获取位置信息可得知用户位于某一位置的洗手间，则优选判断该视频内容涉及隐私，则进行相应的标记处理。
在所述视频片段完成画面分割生成画面片段后，建立片段文件，将生成的画面片段保存在该片段文件中，具体地，将片段文件按标记顺序命名区分开来，便于后续用户进行快速查找。
上述方法步骤中，所述场景识别过程包括，根据从画面片段中提取的特征信息，通过调用场景检测器对该特征信息进行场景分析运算，得出场景类型，然后调用场景处理器依据场景类型进行处理，确定所处的场景，并建立场景数据表进行记录，当下一次从连续实时视频中检测到相同的特征信息时，直接从场景数据表中提取相应的位置信息，如图4所示为场景数据表的一种实施例，列出场景特征和对应的场景处理动作。
采用的场景检测器是基于目前成熟的基础图像分析算法，判断室内或室外场景，对物件进行识别，来判断场景内是否有些标志的物件，例如厕所、卫生间、洗浴房的特征物件。
上述方法步骤中，画面片段的特征信息包括画面的亮度、画面的对比度、场景图像、人体图像中的至少一种。例如：用户从室内走到室外，这个时候画面的亮度有巨大的变化，程序通过分析画面的内容来对视频进行分割。优选的，还结合由智能穿戴设备内置的位置传感器获取的位置信息来判断用户所处的场景，有效提高识别判断的准确度，对于特定的场所，例如洗手间等环境，当用户进入时，视频将自动休眠暂停录制，或者自动对画面进行模糊处理，对特定场所进行隐私保护。
对场景的识别，比如用户在阅读、用餐，行走、会议、交谈、驾驶、坐车、跑步、踢球等，这些各类日常的活动，其画面也有显著的差异和特征，因此，首先通过画面分割以区分场景的差异，能排除一些非场景特征的干扰，更有利于对场景识别的准确性。
该方法步骤中，所述人体隐私识别过程包括，根据从画面片段中提取的特征信息，通过调用隐私检测器对该特征信息进行人脸和人体肤色图像分析运算，得出隐私类型，然后调用隐私处理器依据隐私类型进行处理，对画面中的人脸、裸露的肤色面积、人体器官特征以及人体姿态进行识别，并建立隐私数据表进行记录。该隐私检测器是基于目前的人脸和人体肤色图像分析算法来实现。如图5所示为隐私数据表的一种实施例，列出隐私特征和对应的隐私处理动作。
本发明中的连续实时视频是通过智能穿戴设备实时记录人活动的过程，该隐私处理方法的过程在没有网络的情况下是在智能穿戴设备上完成的，如果有网络则通过智能穿戴设备将连续实时视频上传至云端服务器，再由云端服务器对连续实时视频进行隐私识别处理。
以上所述，只是本发明的较佳实施例而已，本发明并不局限于上述实施方式，只要其以相同的手段达到本发明的技术效果，都应属于本发明的保护范围。
Claims (7)
1.一种连续记录视频、影像的隐私处理方法，其特征在于：该方法包括，
从连续实时视频中获取视频片段；
对提取的视频片段进行画面分割得到画面片段；
针对分割得到的每个画面片段分别执行：提取该画面片段的特征信息，并根据提取的特征信息进行包括场景识别和人体隐私识别的判断；
根据判断出的场景特征和人体特征，确定检测的视频片段是否包含隐私的视频内容，并进行隐私处理；
所述场景识别过程包括，根据从画面片段中提取的特征信息，通过调用场景检测器对该特征信息进行场景分析运算，得出场景类型，然后调用场景处理器依据场景类型进行处理，确定所处的场景，并建立场景数据表进行记录，当下一次从连续实时视频中检测到相同的特征信息时，直接从场景数据表中提取相应的位置信息；上述的场景识别过程中，还结合由智能穿戴设备内置的位置传感器获取的位置信息来判断用户所处的场景；
所述人体隐私识别过程包括，根据从画面片段中提取的特征信息，通过调用隐私检测器对该特征信息进行人脸和人体肤色图像分析运算，得出隐私类型，然后调用隐私处理器依据隐私类型进行处理，对画面中的人脸、裸露的肤色面积、人体器官特征以及人体姿态进行识别，并建立隐私数据表进行记录。
2.根据权利要求1所述的一种连续记录视频、影像的隐私处理方法，其特征在于：从连续实时视频中获取视频片段的具体方法，包括：对连续实时视频进行等时间间隔提取N个关键帧，对于连续实时视频中除提取的N个关键帧之外的视频帧，相邻关键帧之间的视频帧以中心位置的视频帧为代表，定义为中心帧；将各中心帧与相近的关键帧分别进行对比确定相似度；选取与关键帧相似度最低的中心帧，以该中心帧所对应的视频帧作为提取的视频片段。
3.根据权利要求1所述的一种连续记录视频、影像的隐私处理方法，其特征在于：所述视频片段进行画面分割生成画面片段的过程是程序依据对画面内容的变化情况进行判断；
若判断画面的特征信息出现显著的差异，则确定该画面内容变化的位置作为分割点，完成画面分割；
若判断画面的特征信息持续出现相同的内容，则确定该画面内容连续不变化，输出该画面内容为画面片段。
4.根据权利要求3所述的一种连续记录视频、影像的隐私处理方法，其特征在于：在对画面内容的变化情况进行判断时，还结合由智能穿戴设备获取的用户的生理数据和位置信息进行比对，通过对所述特征信息的检测，判断分析用户视频内容的行为。
5.根据权利要求1-4任一所述的一种连续记录视频、影像的隐私处理方法，其特征在于：所述画面片段的特征信息包括画面的亮度、画面的对比度、场景图像、人体图像中的至少一种。
6.根据权利要求1所述的一种连续记录视频、影像的隐私处理方法，其特征在于：在所述视频片段完成画面分割生成画面片段后，建立片段文件，将生成的画面片段保存在该片段文件中。
7.根据权利要求1所述的一种连续记录视频、影像的隐私处理方法，其特征在于：所述连续实时视频通过智能穿戴设备进行记录获取，该隐私处理方法的过程在智能穿戴设备上完成，或者通过智能穿戴设备将连续实时视频上传至云端服务器，再由云端服务器对连续实时视频进行隐私识别处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510439137.1A CN105007395B (zh) | 2015-07-22 | 2015-07-22 | 一种连续记录视频、影像的隐私处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510439137.1A CN105007395B (zh) | 2015-07-22 | 2015-07-22 | 一种连续记录视频、影像的隐私处理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105007395A CN105007395A (zh) | 2015-10-28 |
| CN105007395B true CN105007395B (zh) | 2018-02-16 |
Family
ID=54379901
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510439137.1A Expired - Fee Related CN105007395B (zh) | 2015-07-22 | 2015-07-22 | 一种连续记录视频、影像的隐私处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105007395B (zh) |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105657270A (zh) * | 2016-01-29 | 2016-06-08 | 宇龙计算机通信科技(深圳)有限公司 | 摄制视频的处理方法、装置和设备 |
| CN105916003B (zh) * | 2016-06-06 | 2018-10-23 | 武汉斗鱼网络科技有限公司 | 房间关闭状态下利用超管实现视频流监控的方法及系统 |
| CN106295398A (zh) * | 2016-07-29 | 2017-01-04 | 维沃移动通信有限公司 | 隐私信息的保护方法及其移动终端 |
| US9854206B1 (en) * | 2016-12-22 | 2017-12-26 | TCL Research America Inc. | Privacy-aware indoor drone exploration and communication framework |
| US10586070B2 (en) | 2017-11-14 | 2020-03-10 | International Business Machines Corporation | Privacy protection in captured image for distribution |
| CN108235054A (zh) * | 2017-12-15 | 2018-06-29 | 北京奇虎科技有限公司 | 一种直播视频数据的处理方法和装置 |
| CN108052916A (zh) * | 2017-12-23 | 2018-05-18 | 宁波亿拍客网络科技有限公司 | 一种受限的涉及隐私信息及特定信息分析处理系统 |
| CN108091332A (zh) * | 2017-12-27 | 2018-05-29 | 盯盯拍（深圳）技术股份有限公司 | 基于行车记录仪的语音处理方法以及基于行车记录仪的语音处理装置 |
| CN111241872B (zh) * | 2018-11-28 | 2023-09-22 | 杭州海康威视数字技术股份有限公司 | 视频图像遮挡方法及装置 |
| CN109743580A (zh) * | 2018-12-24 | 2019-05-10 | 秒针信息技术有限公司 | 一种视频处理方法及装置、存储介质和处理器 |
| CN109743579A (zh) * | 2018-12-24 | 2019-05-10 | 秒针信息技术有限公司 | 一种视频处理方法及装置、存储介质和处理器 |
| CN109729431B (zh) * | 2018-12-26 | 2021-02-09 | 维沃移动通信有限公司 | 视频的隐私保护方法和终端设备 |
| CN111885339A (zh) * | 2020-07-01 | 2020-11-03 | 海尔优家智能科技（北京）有限公司 | 隐私处理方法及装置、计算机可读的存储介质、电子介质 |
| CN114302194B (zh) * | 2021-01-14 | 2023-05-05 | 海信视像科技股份有限公司 | 一种显示设备及多设备切换时的播放方法 |
| CN112822419A (zh) * | 2021-01-28 | 2021-05-18 | 上海盛付通电子支付服务有限公司 | 一种用于生成视频信息的方法与设备 |
| CN115379260B (zh) * | 2022-08-19 | 2023-11-03 | 杭州华橙软件技术有限公司 | 视频的隐私处理方法、装置、存储介质及电子装置 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101167086A (zh) * | 2005-05-31 | 2008-04-23 | 实物视频影像公司 | 用于安全应用的人体检测和跟踪 |
| CN101286238A (zh) * | 2008-05-06 | 2008-10-15 | 苏州纳米技术与纳米仿生研究所 | 仿生智能监控系统 |
| CN101610396A (zh) * | 2008-06-16 | 2009-12-23 | 北京智安邦科技有限公司 | 具有隐私保护的智能视频监控设备模组和系统及其监控方法 |
| CN102034107A (zh) * | 2010-12-02 | 2011-04-27 | 西安电子科技大学 | 基于鲁棒视觉注意特征与稀疏表示的不良图像判别方法 |
| CN201965714U (zh) * | 2010-12-29 | 2011-09-07 | 羊恺 | 基于人脸识别的家用智能预警安防系统 |
| CN102930553A (zh) * | 2011-08-10 | 2013-02-13 | 中国移动通信集团上海有限公司 | 不良视频内容识别方法及装置 |
| CN103473494A (zh) * | 2013-09-03 | 2013-12-25 | 小米科技有限责任公司 | 一种运行应用的方法、装置和终端设备 |
| CN104616026A (zh) * | 2015-01-20 | 2015-05-13 | 衢州学院 | 一种面向智能视频监控的监控场景类型辨识方法 |
-
2015
- 2015-07-22 CN CN201510439137.1A patent/CN105007395B/zh not_active Expired - Fee Related
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101167086A (zh) * | 2005-05-31 | 2008-04-23 | 实物视频影像公司 | 用于安全应用的人体检测和跟踪 |
| CN101286238A (zh) * | 2008-05-06 | 2008-10-15 | 苏州纳米技术与纳米仿生研究所 | 仿生智能监控系统 |
| CN101610396A (zh) * | 2008-06-16 | 2009-12-23 | 北京智安邦科技有限公司 | 具有隐私保护的智能视频监控设备模组和系统及其监控方法 |
| CN102034107A (zh) * | 2010-12-02 | 2011-04-27 | 西安电子科技大学 | 基于鲁棒视觉注意特征与稀疏表示的不良图像判别方法 |
| CN201965714U (zh) * | 2010-12-29 | 2011-09-07 | 羊恺 | 基于人脸识别的家用智能预警安防系统 |
| CN102930553A (zh) * | 2011-08-10 | 2013-02-13 | 中国移动通信集团上海有限公司 | 不良视频内容识别方法及装置 |
| CN103473494A (zh) * | 2013-09-03 | 2013-12-25 | 小米科技有限责任公司 | 一种运行应用的方法、装置和终端设备 |
| CN104616026A (zh) * | 2015-01-20 | 2015-05-13 | 衢州学院 | 一种面向智能视频监控的监控场景类型辨识方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105007395A (zh) | 2015-10-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105007395B (zh) | 一种连续记录视频、影像的隐私处理方法 | |
| Nagrani et al. | Seeing voices and hearing faces: Cross-modal biometric matching | |
| Liciotti et al. | Person re-identification dataset with rgb-d camera in a top-view configuration | |
| Mahapatra et al. | Coherency based spatio-temporal saliency detection for video object segmentation | |
| CN106682108A (zh) | 一种基于多模态卷积神经网络的视频检索方法 | |
| JP6516832B2 (ja) | 画像検索装置、システム及び方法 | |
| JP2021101384A (ja) | 画像処理装置、画像処理方法およびプログラム | |
| EP2490171A1 (en) | Clothing feature extraction device, person retrieval device, and processing method thereof | |
| CN104298964B (zh) | 一种人体行为动作快速识别方法及装置 | |
| CN107909033A (zh) | 基于监控视频的嫌疑人快速追踪方法 | |
| CN105183758A (zh) | 一种连续记录视频、影像的内容识别方法 | |
| CN103996046A (zh) | 基于多视觉特征融合的人员识别方法 | |
| JP2022168070A (ja) | 人物検出システム | |
| CN109887234A (zh) | 一种防儿童走失方法、装置、电子设备及存储介质 | |
| CN109948450A (zh) | 一种基于图像的用户行为检测方法、装置和存储介质 | |
| CN110533026A (zh) | 基于计算机视觉的电竞图像数字与图标信息获取方法 | |
| CN114937232A (zh) | 医废处理人员防护用具穿戴检测方法、系统和设备 | |
| Kurita et al. | Refego: Referring expression comprehension dataset from first-person perception of ego4d | |
| Choi et al. | The arm-swing is discriminative in video gait recognition for athlete re-identification | |
| CN110852172B (zh) | 一种基于Cycle Gan图片拼贴并增强的扩充人群计数数据集的方法 | |
| JP2012033054A (ja) | 顔画像サンプル採取装置、顔画像サンプル採取方法、プログラム | |
| KR102617756B1 (ko) | 속성 기반 실종자 추적 장치 및 방법 | |
| Stefański et al. | The problem of detecting boxers in the boxing ring | |
| CN117079342A (zh) | 一种基于两阶段目标检测的人提箱交互检测方法及系统 | |
| Shemshaki et al. | Lip segmentation using geometrical model of color distribution |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180216 Termination date: 20180722 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |