CN103747346B - 一种多媒体视频播放的控制方法及多媒体视频播放器 - Google Patents

Abstract

本发明公开了一种多媒体视频播放的控制方法及多媒体视频播放器，其中，所述方法包括：采集正在观看当前视频的用户的面部图像信息；根据所述用户的面部图像信息判断该用户的媒体播放权限是否允许观看当前播放的视频，如果允许则继续播放，如果不允许，则停止播放。本发明基于人脸识别技术，可以通过观看用户图像的不同，区分用户类型，并根据各类用户的播放权限对影像是否播放、暂停进行控制，从而更好的保护个人隐私。

Description

一种多媒体视频播放的控制方法及多媒体视频播放器

技术领域

本发明涉及通信领域，具体涉及一种多媒体视频播放的控制方法及多媒体视频播放器。

背景技术

近年来，利用计算机、图像处理、模式识别等技术实现身份验证也越来越成为当前模式识别和人工智能领域的一个研究热点。人脸识别技术是利用计算机图像分析、模型理论、人工智能及模式识别技术的非接触式高端模式识别技术，人脸识别技术可以从复杂的图像场景中检测出特征人脸信息，并进行匹配识别。如今，人脸识别技术本身已经趋于成熟，人脸检测的速度较快，准确度也较可靠。

如今，多媒体视频播放系统已经成为在很多场合不可或缺的基础硬件设备，可以为不同的人群服务。通常，多媒体视频播放系统只能根据用户的需要为用户播放各种多媒体视频，当有多人同时观看时，并不能自动调整音量大小，也不能对观看用户进行识别，当周围有不适合观看内容的人存在时，比如有些私人邮件和限制级电影是不允许一些用户观看的，无法自动暂停播放当前的视频内容。

发明内容

本发明需要解决的技术问题是提供一种多媒体视频播放的控制方法及多媒体视频播放器，根据观看用户的播放权限控制视频的播放或暂停，以更好的保护个人隐私。

为了解决上述技术问题，本发明提供了一种多媒体视频播放的控制方法，包括：

采集正在观看当前视频的用户的面部图像信息；

根据所述用户的面部图像信息判断该用户的媒体播放权限是否允许观看当前播放的视频，如果允许则继续播放，如果不允许，则停止播放。

进一步地，所述方法还包括：对观看用户进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；

所述根据所述用户的面部图像信息判断该用户的观看权限是否允许观看当前视频，包括：

将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放。

进一步地，所述采集正在观看当前视频的用户的面部图像信息之前，还包括：

判断所述用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，对所述用户的面部图像信息进行采集。

进一步地，所述方法还包括：

设置用户人数与音量等级的对应关系；

根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

进一步地，根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。

为了解决上述技术问题，本发明还提供了一种多媒体视频播放器，包括：

采集模块，用于采集正在观看当前视频的用户的面部图像信息；

控制模块，用于根据所述用户的面部图像信息判断该用户的媒体播放权限是否允许观看当前播放的视频，如果允许则继续播放，如果不允许，则停止播放；

播放模块，用于根据控制模块的控制，对当前播放的视频暂停播放或继续播放。

进一步地，所述多媒体视频播放器还包括：数据库，用于保存各类用户的人脸识别信息以及各类用户的媒体播放权限；

所述控制模块，还用于对观看用户进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；

所述控制模块，用于根据所述用户的面部图像信息判断该用户的观看权限是否允许观看当前视频，包括：

将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放。

进一步地，所述多媒体视频播放器还包括与所述采集模块相连的判决模块，用于在采集正在观看当前视频的用户的面部图像信息之前，判断所述用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，通知采集模块采集所述用户的面部图像信息。

进一步地，所述控制模块，还用于设置用户人数与音量等级的对应关系，根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

进一步地，所述控制模块，用于根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。

与现有技术相比，本发明提供的多媒体视频播放的控制方法及多媒体视频播放器，基于人脸识别技术，可以通过观看用户图像的不同，区分用户类型，并根据各类用户的播放权限对影像是否播放、暂停进行控制，从而更好的保护个人隐私；同时采用人脸识别技术，统计观看人数，对音量进行智能控制，更加有效的利用资源。

附图说明

图1是实施例中多媒体视频播放的控制方法流程图；

图2是实施例中用户视线与摄像头所在的中轴线的夹角示意图；

图3是实施例中多媒体视频播放器的结构图；

图4是一个应用示例中多媒体视频播放器的结构图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。

实施例：

如图1所示，本实施例提供了一种多媒体视频播放的控制方法，包括以下步骤：

S101：采集正在观看当前视频的用户的面部图像信息；

在步骤S101之前，本方法还设置了播放视频的等级，对观看用户进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；比如，私人邮件和限制级电影可以根据用户实际情况设置等级，比如根据年龄来确定用户分类。

S102：根据所述用户的面部图像信息判断该用户的媒体播放权限是否允许观看当前播放的视频，如果允许则继续播放，如果不允许，则停止播放。

其中，具体包括：

将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放。

例如，观看视频的有老人、一个男性成年和两个小女孩，通过对他们的人脸识别，获取每个人的媒体播放权限，如果有哪个人的媒体播放权限不允许播放当前播放的视频，则停止播放当前视频。

此外，因为，有可能摄像头前的人群是流动的，在观看视频的人群也是变化的，有些用户只是在摄像头前短暂停留并非是在观看视频，虽然观看者是看向正在播放的视频方向，但很大可能性是在看其他物体。因此在步骤S101之前，还可以先确定当前用户是否在观看视频，如果是，再采集该用户的面部图像信息，具体包括：

判断所述用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，采集该正在观看当前视频的用户的面部图像信息。

如图2所示，摄像头水平向前方向具有一条中轴线，采集的用户的面部图像信息是用户的目光到摄像头直线投影到中轴线所在平面，投影线与中轴线的夹角设为a，设定一个夹角值b。当a≤b时，采集的用户的面部图像信息；当a>b时，不采集的用户的面部图像信息。该图说明，当人体视线与摄像头所在的中轴线的夹角如果小于b时，摄像头默认当前用户是在观看视频，从而采集的用户的面部图像信息进行相应的操作。该中轴线应当是一个三维空间的中轴线，因为用户可能是从显示器所辐射的平面内投影视线，所以中轴线与之的夹角也是辐射一定范围的三维空间。

优选地，所述方法还包括：设置用户人数与音量等级的对应关系；

根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

比如，音量有10个等级，从小到大音量越来越高，用户人数为1时对应音量等级1，用户人数从2到5时，对应音量等级2等等；统计当前观看视频的用户人数，如果用户人数为1则音量调至等级1，如果用户人数增加至3人，则将音量调至等级2，如果用户人数又减少至1人，则将音量再调回等级1，所以，本实施例可以根据当前观看视频的人数将音量调高或调低，可以实时自动的调节音量。

其中，根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。

在本实施例中，通过先判断人脸总面积的二分之一或者二分之一以上出现在面部图像信息中，确认这个用户是在观看视频，从而计算正在观看视频的人数，然后根据人数的多少来调节音量。同时对于采集到人脸面积大于二分之一的用户，通过后台数据库查询该用户的媒体播放权限。

如图3所示，本实施例提供了一种多媒体视频播放器，包括：

采集模块，用于采集正在观看当前视频的用户的面部图像信息；

控制模块，用于根据所述用户的面部图像信息判断该用户的媒体播放权限是否允许观看当前播放的视频，如果允许则继续播放，如果不允许，则停止播放；

播放模块，用于根据控制模块的控制，对当前播放的视频暂停播放或继续播放。

其中，所述多媒体视频播放器还包括：数据库，用于保存各类用户的人脸识别信息以及各类用户的媒体播放权限；

所述控制模块，还用于对观看用户进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；

其中，所述控制模块，用于根据所述用户的面部图像信息判断该用户的观看权限是否允许观看当前视频，包括：

将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放。

其中，所述多媒体视频播放器还包括与所述采集模块相连的判决模块，用于在采集正在观看当前视频的用户的面部图像信息之前，判断所述用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，通知采集模块采集所述用户的面部图像信息。

作为一种优选方式，所述控制模块，还用于设置用户人数与音量等级的对应关系，根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

其中，所述控制模块，用于根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。

在一个应用示例中，采用上述实施例中的多媒体视频播放器，其中，如图4所示，采集模块，包括：摄像头、传感器；控制模块，包括：人像识别模块、显示调控模块、音量调控模块；播放模块，包括：液晶显示器、扬声器。

设备的一个或多个传感器可以从周围环境收集数据，感应人体接近或远离，寻找其他人类的存在，触发摄像头采集面部图像信息，摄像头的信号输出端连接人像识别模块，摄像头对观看多媒体播放器播放的人进行摄像，将视频信息传送给人像识别模块，以便人像识别模块对视频信息进行分析。摄像头和红外线识别的数据可以是面部数据、热感图或其他属性。

该多媒体视频播放器还包括与人像识别模块相连的人脸特征数据库，在数据库中设置了播放视频的等级，对观看用户进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；比如，私人邮件和限制级电影可以根据用户实际情况设置等级，比如根据年龄来确定用户分类。

人像识别模块对采集某一用户的面部图像信息进行人脸图像预处理、特征点提取，并与数据库存储的人脸识别信息进行比对，判断所述用户的类型，以及该类型用户的媒体播放权限，由此控制显示调控模块，显示调控模块与显示器相连，控制播放或暂停。

人像识别模块对于在运动检测过程中，采用差分图像、二值化处理以及滤波处理技术，通过主成分分析法（Principal Component Analysis，PCA）的面相识别方法来实现相邻两帧间的目标匹配。

PCA能够找到人脸分布的主要成分，或是一组脸部图像协方差矩阵的特征向量。这些特征向量可以看作是一组特征的集合，其中的元素能够组合起来描述人脸图像的变化。脸部图像I（x,y）可以看作是N²的矩阵，或是N²维的向量。如果N=256，那么这张图像可以表示为一个65,536维的向量，一组图像就会在这个空间上映射为一些点。由于脸部图像在总体上都是相似的，并不是随机分布在整个空间上，而是根据一定的统计性分布在一个相当小的低维子空间上。主成分分析就是在整个图像空间里找到能够表示人脸分布的向量。这些向量定义了图像空间的子空间，也就是人脸空间。每一个向量的长度是N²描述了一个N*N的图像，是原始图像的一个线性组合。

一张归一化的脸部数字图像可以由图像上点x=(x1,x2)的函数来表示，为每一点x=(x1,x2)处的灰度值。例如一组样本图像假设M的值非常大，那么平均脸可以表示为：

记每张图像与平均脸的差为：

为了能够得到主要的成分，从这些大向量中寻找M′个正交向量μ_n和与其相对应的特征值λ_n，这些向量可以用来描述数据的分布。向量μ_n和值λ_n是协方差矩阵C的特征向量和特征值：

其中，矩阵而且，矩阵C是(N²)×(N²)的。通过首先计算一个非常小的M矩阵，用所得到的向量的线性组合来确定特征向量。通过这样的分析，可以将计算量由原来的N²减少到M。根据特征值从大到小进行排序，取出与其相对应的前M′个正交特征向量作为基，也就是主要成分，用它们的权重和来表示每一张脸部图像。对于任意一张人脸图像，有

其中

重建错误可以相应的表示为：

主要成分扩张了原来N²维图像空间的一个M′维子空间，矩阵L中的M′特征向量是根据特征值的大小得到的。一张新的脸部图像I通过计算映射到人脸空间中，得到权重集。该权重集形成了一个向量Ω^T=[W₁，W₂，...，W_M′]，把每个特征向量作为脸部图像的基，描述了在表示输入图像时每个特征向量的贡献。向量Ω^T就可以用来确定输入的图像属于数据库中人脸的哪一类。确定输入图像类别的方法是求Euclidian（欧几里得）距离ε_k=||Ω-Ω_k||的最小值，其中Ω_k是描述第k类人脸的向量。当这个最小值ε_k属于某个已知阈值θ_ε时，这个人脸图像就属于第k类；否则这个图像属于未知。

在人像识别模块中，摄像头水平向前方向具有一条中轴线，提取的视频信息，是观看者的目光到摄像头直线投影到中轴线所在平面，投影线与中轴线的夹角设为a，设定一个夹角值b。当a≤b时，采集观看用户的面部图像信息；当a>b时，不采集观看用户的面部图像信息。因为虽然观看者是看向多媒体播放器方向，但很大可能性是在看除了多媒体播放器以外的其他物体。

人像识别模块还对采集的面部图像信息进行分析比对，将人脸总面积的1/2或者1/2以上出现在视频信息中算作是在观看影像，对观看影像的人数进行统计，设统计值为x，并且在人像识别模块中设定一个判别值y。当x>y时，音量应该调高；当x=y时，音量在合适位置；当x<y时，音量应该调低。人像识别模块连接音量调控模块，音量调控模块连接扬声器，人像识别模块将统计结果传送给音量调控模块，音量调控模块控制扬声器执行相应的操作。

从上述实施例可以看出，相对于现有技术，上述实施例中提供的多媒体视频播放的控制方法及多媒体视频播放器，基于人脸识别技术，可以通过观看用户图像的不同，区分用户类型，并根据各类用户的播放权限对影像是否播放、暂停进行控制，从而更好的保护个人隐私；同时采用人脸识别技术，统计观看人数，对音量进行智能控制，更加有效的利用资源。

本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成，所述程序可以存储于计算机可读存储介质中，如只读存储器、磁盘或光盘等。可选地，上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现。相应地，上述实施例中的各模块/单元可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。

以上所述仅为本发明的优选实施例而已，并非用于限定本发明的保护范围。根据本发明的发明内容，还可有其他多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种多媒体视频播放的控制方法，包括：

对观看用户根据年龄进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；

判断用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，采集正在观看当前视频的用户的面部图像信息；

将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放，如果允许则继续播放，如果不允许，则停止播放。

2.如权利要求1所述的方法，其特征在于：所述方法还包括：

设置用户人数与音量等级的对应关系；

根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

3.如权利要求2所述的方法，其特征在于：

根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。

4.一种多媒体视频播放器，包括：

数据库，用于保存各类用户的人脸识别信息以及各类用户的媒体播放权限；

判决模块，用于判断用户视线与摄像头所在的中轴线的夹角是否小于或等于预设阈值；如果是，则认为所述用户是观看当前视频的用户，通知采集模块采集所述用户的面部图像信息；

采集模块，用于采集正在观看当前视频的用户的面部图像信息；

控制模块，用于对观看用户根据年龄进行分类，将各类用户的人脸识别信息保存在数据库中；并为各类用户设置媒体播放权限，所述媒体播放权限包括：允许播放一个或多个等级的视频；还用于将所述用户的面部图像信息和所述数据库中的人脸识别信息比对，判断所述用户的类型，并根据所述用户的媒体播放权限判断当前播放的视频是否允许被播放，如果允许则继续播放，如果不允许，则停止播放；

播放模块，用于根据控制模块的控制，对当前播放的视频暂停播放或继续播放。

5.如权利要求4所述的多媒体视频播放器，其特征在于：

所述控制模块，还用于设置用户人数与音量等级的对应关系，根据采集的用户的面部图像信息，统计当前观看视频的用户人数，将音量调至与该用户人数对应的音量等级上。

6.如权利要求5所述的多媒体视频播放器，其特征在于：

所述控制模块，用于根据采集的用户的面部图像信息，统计当前观看视频的用户人数，包括：

对采集的用户的面部图像信息进行分析比对，从中选择出人脸总面积的1/2或者1/2以上出现在所述面部图像信息中的用户，将选择出的用户的人数统计为当前观看视频的人数。