CN103324283A - 基于人脸识别控制视频播放的方法及其终端 - Google Patents

Abstract

本发明公开了一种基于人脸识别控制视频播放的方法，包括：采集人脸图像；分析人脸图像并提取人脸图像的当前中心位置；比对所述当前中心位置和初始中心位置以得到人脸的运动位移；判断运动位移的绝对值是否大于预设值；根据判断结果控制视频的播放。与现有技术相比，本发明基于人脸识别控制视频播放的方法实现了根据人脸的运动位移的绝对值判断出用户是否观看视频，进而控制视频的播放及停止，避免用户操作，节省了时间并提高了用户体验。本发明同时公开了一种基于人脸识别控制视频播放的终端。

Description

基于人脸识别控制视频播放的方法及其终端

技术领域

本发明涉及人脸识别技术领域，更具体地涉及一种基于人脸识别控制视频播放的方法及其终端。

背景技术

目前，手机等移动终端能为用户提供更加丰富的多媒体内容，用户可以通过移动终端观看流媒体节目，或者播放存储在本地的视频节目等。一般情况下，用户观看视频时可能会遇到用户不感兴趣的内容，此时用户可能会转动头部使视线离开屏幕，不再观看视频，如果此时继续播放，则浪费电池电量，为此用户需要主动去关闭视频，而这种手动控制视频播放的方法操作繁琐、浪费时间且用户体验不好。

因此，有必要提供一种能根据用户的观看状态来自动控制视频播放的基于人脸识别控制视频播放的方法及其终端来克服上述缺陷。

发明内容

本发明的目的是提供一种基于人脸识别控制视频播放的方法，以实现根据用户的观看状态自动控制视频的播放及停止，避免用户操作、节省时间，进而提高用户体验。

本发明的另一目的是提供一种基于人脸识别控制视频播放的终端，以实现根据用户的观看状态自动控制视频的播放及停止，避免用户操作、节省时间，进而提高用户体验。

为实现上述目的，本发明提供了一种基于人脸识别控制视频播放的方法，包括以下步骤：

采集人脸图像；

分析所述人脸图像并提取所述人脸图像的当前中心位置；

比对所述当前中心位置与初始中心位置以得到人脸的运动位移；

判断所述运动位移的绝对值是否大于预设值；

根据判断结果控制视频的播放。

与现有技术相比，本发明基于人脸识别控制视频播放的方法首先采集人脸图像，再分析人脸图像并提取人脸图像的当前中心位置，之后将当前中心位置与初始中心位置进行比对以得到人脸的运动位移，最后判断该运动位移的绝对值是否大于预设值并根据判断结果控制视频的播放，由于人脸的运动位移为采集的人脸图像的当前中心位置与初始中心位置的比对结果，故该运动位移的绝对值可以表示当前的人脸图像相对于初始的人脸图像的偏转程度，即头部的偏转程度，如当用户抬头时，运动位移的绝对值可以代表用户抬头的幅度大小；当运动位移的绝对值大于预设值时，认为用户的抬头幅度过大，用户的视线离开屏幕，不再观看视频，此时控制视频停止播放，从而实现了根据运动位移的绝对值判断出用户是否观看视频，进而控制视频的播放及停止，避免了用户操作，节省时间并提高了用户体验。

较佳地，所述“分析所述人脸图像并提取所述人脸图像的当前中心位置”具体包括：

分析所述人脸图像以得到眼睛的位置；

根据所述眼睛的位置计算出瞳距；

提取所述瞳距的中心点的位置并作为所述当前中心位置。

较佳地，所述“采集人脸图像”之前还包括：

采集正面人脸图像；

提取所述正面人脸图像的中心位置以作为所述初始中心位置。

较佳地，所述“分析所述人脸图像并提取所述人脸图像的中心位置”之后还包括：

将所述当前中心位置与上一张人脸图像的中心位置进行比对以识别出用户的转头动作。

较佳地，所述转头动作为抬头、低头、左转或右转。

相应地，本发明还提供了一种基于人脸识别控制视频播放的终端，包括：

采集模块，用于采集人脸图像；

分析模块，用于分析所述人脸图像并提取所述人脸图像的当前中心位置；

比对模块，用于比对所述当前中心位置与初始中心位置以得到人脸的运动位移；

判断模块，用于判断所述运动位移的绝对值是否大于预设值；

控制模块，用于根据判断结果控制视频的播放。

具体地，所述分析模块包括：

分析单元，用于分析所述人脸图像以得到眼睛的位置；

计算单元，用于根据所述眼睛的位置计算出瞳距；

提取单元，用于提取所述瞳距的中心点的位置并作为所述当前中心位置。

较佳地，所述基于人脸识别控制视频播放的终端还包括：

设置模块，用于采集正面人脸图像、并提取所述正面人脸图像的中心位置以作为所述初始中心位置。

较佳地，所述基于人脸识别控制视频播放的终端还包括：

识别模块，用于将所当前述中心位置与上一张人脸图像的中心位置进行比对以识别出用户的转头动作。

较佳地，所述转头动作为抬头、低头、左转或右转。

通过以下的描述并结合附图，本发明将变得更加清晰，这些附图用于解释本发明的实施例。

附图说明

图1为本发明基于人脸识别控制视频播放的方法一实施例的工作流程图。

图2为图1中所采集的4张人脸图像，其中图片1为正面人脸图像。

图3为对时刻1采集到的人脸图像及下一张人脸图像的中心位置的分析图。

图4为某一时间段内的人脸图像的中心位置的位置坐标图。

图5为本发明基于人脸识别控制视频播放的终端一实施例的结构框图。

具体实施方式

现在参考附图描述本发明的实施例，附图中类似的元件标号代表类似的元件。

请参考图1，描述了本发明基于人脸识别控制视频播放的方法一实施例的工作流程。如图1所示，包括以下步骤：

步骤S101，播放视频，采集正面人脸图像、提取正面人脸图像的中心位置以作为初始中心位置；其中正面人脸图像即为用户观看视频、处于最佳位置状态时的人脸图像，其中“提取正面人脸图像的中心位置以作为初始中心位置”的具体过程为：首先分析正面人脸图像以得到眼睛的位置，然后根据眼睛的位置计算出瞳距，将瞳距的中心点作为初始中心位置，如图2中图片1所示，其中图片1代表采集到的正面人脸图像，图片1中的点A（x1，y1）为正面人脸图像的中心位置（即初始中心位置）的坐标，图片1中的虚线代表平面内的坐标系；

步骤S102，实时采集人脸图像；

步骤S103，分析采集到的人脸图像并提取人脸图像的当前中心位置；

步骤S104，将提取的当前中心位置与上一张人脸图像的中心位置进行比对以识别出用户的转头动作，若存在转头动作，则执行步骤S105，反之，执行步骤S109；其中用户的转头动作为抬头、低头、左转或右转等，将前后两张人脸图像的中心位置进行比对，可以得到中心位置的移动方向，即头部的转动方向，如中心位置向上移动时，代表抬头，中心位置向左移动时，代表头部左转，需要注意的是，本实施例中用户的转头动作是以前一张图片的人脸图像作为基准的，而若以正面人脸图像作为比较基准，则有可能用户实际低头时，识别出来的转动动作为抬头；请参考图2中的图片2至图片4，图片2、3、4代表依次采集到的包含人脸图像的图片，将图片1至图片4的中心位置放置于同一坐标系内，图片2中的点B（x2，y2）为用户抬头一定角度（如15度）后中心位置的坐标，图片3中的点C（x3，y3）为用户抬头另一角度（如30度）后中心位置的坐标，图片4中的点D（x4，y4）为用户低头一定角度（如10度）后中心位置的坐标，将图片3与图片2的中心位置进行比对后，可以识别出用户动作为抬头，将图片4与图片3的中心位置进行比对后，可以识别出用户动作为低头，若是将图片2、3、4与图片1中的中心位置进行比对，则识别出来的用户转头动作均为抬头；其它转头动作的分析与抬头时类似，此处不再说明；

需要注意的是，当用户的头部相对于移动终端没有转动，而只有平移时，如用户的头部在某一竖直面内只有上下或左右平移、而没有偏转时，此时人脸图像的中心位置仍会发生变化；

步骤S105，将当前中心位置与初始中心位置进行比对以得到人脸的运动位移；其中运动位移的方向可以代表人脸的转动方向，运动位移的大小（即绝对值）可以代表人脸的转动程度，运动位移的绝对值越大，则说明人脸的转动程度越大，请参考图3，图3中的点E（x5，y5）为某一时刻1采集的人脸图像的中心位置的坐标，图3中的点F（x6，y6）为时刻1的下一时刻采集的人脸图像的中心位置的坐标，从而相邻的两张人脸图像的中心位置由点E（x5，y5）移动至点F（x6，y6），其运动方向即为转头动作的方向（如向左），而点E和点F之间的距离即代表转头动作的偏转程度（如向左偏转30度）；

步骤S106，判断运动位移的绝对值是否大于预设值，若判断结果为是，执行步骤S107，反之，执行步骤S108;运动位移的绝对值大于预设值时，规定用户转头动作的偏转程度已经使得用户不能观看到视频，即此时用户没有观看视频，停止播放视频，反之，运动位移的绝对值不大于预设值时，规定用户此时仍可以观看到视频，继续播放视频；

步骤S107，停止播放视频；

步骤S108，继续播放视频；

步骤S109，保持当前播放状态，如播放或暂停。

需要注意的是，用户的转头动作除了以上提到的，还可以是左上、左下等其它方向的偏转。如图4所示，图4中的各个点为某一段时间内采集到的人脸图像的中心位置的坐标，中心位置的运动位移的方向有很多种，当运动位移的绝对值不大于预设值时，默认为用户正在观看视频。理论上，只要人脸图像的中心位置处于以预设值为半径、以初始中心位置为圆心的圆形区域中，都视为用户观看视频；此外，本发明基于人脸识别控制视频播放的方法中，摄像头采集的人脸图像均可以识别出双眼，当采集到的人脸图像不能识别出双眼时，如用户头部偏转程度过大时，此时的人脸图像中不能识别出双眼，将默认为用户当前没有观看视频，控制移动终端停止播放视频。

请参考图5，描述了本发明基于人脸识别控制视频播放的终端一实施例的结构框图。如图5所示，基于人脸识别控制视频播放的终端100包括：

设置模块10，用于采集正面人脸图像、提取所述正面人脸图像的中心位置以作为初始中心位置；

采集模块11，用于实时采集人脸图像；

分析模块12，用于分析所述人脸图像并提取所述人脸图像的当前中心位置；其中分析模块12具体包括分析单元121、计算单元122和提取单元123，分析单元121用于分析人脸图像以得到眼睛的位置，计算单元122用于根据眼睛的位置计算出瞳距，提取单元123用于提取瞳距的中心点的位置并作为当前中心位置；

识别模块13，用于将所述当前中心位置与上一张人脸图像的中心位置进行比对以识别出人脸的转头动作，其中转头动作为抬头、低头、左转或右转；

比对模块14，用于将所述当前中心位置与初始中心位置进行比对以得到人脸的运动位移；

判断模块15，用于判断所述运动位移的绝对值是否大于预设值；

控制模块16，用于根据判断结果控制视频的播放。

本发明基于人脸识别控制视频播放的终端100工作时，首先通过设置模块10获取初始中心位置，之后采集模块11实时采集人脸图像、分析模块12对采集到的人脸图像进行分析并提取当前中心位置，然后识别模块13将提取的当前中心位置信息与上一张图片的中心位置进行比对以识别出人脸的转头动作，当有转头动作时，比对模块14将提取的当前中心位置与初始中心位置进行比对以得到人脸的运动位移，判断模块15判断运动位移的绝对值是否大于预设值，最后控制模块16根据判断模块15的判断结果控制视频停止播放或继续播放，即当判断模块15的判断结果为是时，则停止播放，反之，则继续播放，从而实现了根据人脸图像中心位置的运动位移判断出用户是否观看视频，进而控制视频的播放及停止，避免了用户操作，节省了电池电量，方便了用户再次观看，提高了用户体验。

以上结合最佳实施例对本发明进行了描述，但本发明并不局限于以上揭示的实施例，而应当涵盖各种根据本发明的本质进行的修改、等效组合。

Claims (10)

1.一种基于人脸识别控制视频播放的方法，其特征在于，包括以下步骤：

采集人脸图像；

分析所述人脸图像并提取所述人脸图像的当前中心位置；

比对所述当前中心位置和初始中心位置以得到人脸的运动位移；

判断所述运动位移的绝对值是否大于预设值；

根据判断结果控制视频的播放。

2.如权利要求1所述的基于人脸识别控制视频播放的方法，其特征在于，所述“分析所述人脸图像并提取所述人脸图像的当前中心位置”具体包括：

分析所述人脸图像以得到眼睛的位置；

根据所述眼睛的位置计算出瞳距；

提取所述瞳距的中心点的位置并作为所述当前中心位置。

3.如权利要求1所述的基于人脸识别控制视频播放的方法，其特征在于，所述“采集人脸图像”之前还包括：

采集正面人脸图像；

提取所述正面人脸图像的中心位置以作为所述初始中心位置。

4.如权利要求1所述的基于人脸识别控制视频播放的方法，其特征在于，所述“分析所述人脸图像并提取所述人脸图像的当前中心位置”之后还包括：

将所述当前中心位置与上一张人脸图像的中心位置进行比对以识别出用户的转头动作。

5.如权利要求4所述的基于人脸识别控制视频播放的方法，其特征在于，所述转头动作为抬头、低头、左转或右转。

6.一种基于人脸识别控制视频播放的终端，其特征在于，包括：

采集模块，用于采集人脸图像；

分析模块，用于分析所述人脸图像并提取所述人脸图像的当前中心位置；

比对模块，用于比对所述当前中心位置与初始中心位置以得到人脸的运动位移；

判断模块，用于判断所述运动位移的绝对值是否大于预设值；

控制模块，用于根据判断结果控制视频的播放。

7.如权利要求6所述的基于人脸识别控制视频播放的终端，其特征在于，所述分析模块包括：

分析单元，用于分析所述人脸图像以得到眼睛的位置；

计算单元，用于根据所述眼睛的位置计算出瞳距；

提取单元，用于提取所述瞳距的中心点的位置并作为所述当前中心位置。

8.如权利要求6所述的基于人脸识别控制视频播放的终端，其特征在于，还包括：

设置模块，用于采集正面人脸图像、并提取所述正面人脸图像的中心位置以作为所述初始中心位置。

9.如权利要求6所述的基于人脸识别控制视频播放的终端，其特征在于，还包括：

识别模块，用于将所述当前中心位置与上一张人脸图像的中心位置进行比对以识别出用户的转头动作。

10.如权利要求9所述的基于人脸识别控制视频播放的终端，其特征在于，

所述转头动作为抬头、低头、左转或右转。

Images