CN104866809B - 画面播放方法和装置 - Google Patents

画面播放方法和装置 Download PDF

Info

Publication number
CN104866809B
CN104866809B CN201410064770.2A CN201410064770A CN104866809B CN 104866809 B CN104866809 B CN 104866809B CN 201410064770 A CN201410064770 A CN 201410064770A CN 104866809 B CN104866809 B CN 104866809B
Authority
CN
China
Prior art keywords
picture
face image
playing
image
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410064770.2A
Other languages
English (en)
Other versions
CN104866809A (zh
Inventor
侯方
吴永坚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201410064770.2A priority Critical patent/CN104866809B/zh
Publication of CN104866809A publication Critical patent/CN104866809A/zh
Application granted granted Critical
Publication of CN104866809B publication Critical patent/CN104866809B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

一种画面播放方法,包括以下步骤:拍摄画面播放屏幕前方图像;识别出拍摄的图像中的人脸图像;获取所述人脸图像在所述画面播放屏幕中的方向与当前播放画面在所述画面播放屏幕中的方向;计算所述人脸图像的方向与所述当前播放画面的方向的偏差;当所述偏差超过阈值时,旋转当前播放的画面以使所述当前播放画面的方向与所述人脸图像的方向一致。上述方法可实时调整当前播放画面在画面播放屏幕中的方向,以使当前播放画面的方向与人脸图像的方向一致,不需要人工调整画面播放屏幕的位置,观看者即可方便而实时地从正向视角观看播放的画面。此外,还提供一种画面播放装置。

Description

画面播放方法和装置
技术领域
本发明涉及计算机技术领域,特别是涉及一种画面播放方法和装置。
背景技术
随着移动终端技术和移动互联网技术的发展,移动终端的应用越来越广泛的普及到人们的日常生活与工作中。移动终端的便携性使得人们可在移动过程中可以方便地应用移动终端的功能,例如,通过移动终端进行图片阅览、视频会议、视频通话、视频观看等活动。
当用户使用移动终端观看图片或视频时,用户需要手动摆正移动终端屏幕的位置,以便于从正向视角观看视频画面。而移动过程中产生的不平稳性,例如人体行走时的摆动或交通工具行驶过程中的晃动等导致的不平稳性,可致使移动终端播放的画面不停地颤动或旋转,从而使得观看者不能从正向视角观看播放的画面。
现有的画面播放软件在移动终端产生晃动或旋转时,只支持根据重力陀螺仪的感应结果将播放的画面顺时针或逆时针旋转90度,由于移动终端的位置可能相对于观看者的脸部发生了倾斜,虽然将播放画面旋转90度,但观看者还是不能从正向视角观看播放的画面。
发明内容
基于此,有必要提供一种可自动调整播放画面方向使得观看者可从正向视角观看播放画面的画面播放方法。
一种画面播放方法,包括以下步骤:
拍摄画面播放屏幕前方图像;
识别出拍摄的图像中的人脸图像;
获取所述人脸图像在所述画面播放屏幕中的方向与当前播放画面在所述画面播放屏幕中的方向;
计算所述人脸图像的方向与所述当前播放画面的方向的偏差;
当所述偏差超过阈值时,旋转当前播放的画面以使所述当前播放画面的方向与所述人脸图像的方向一致。
此外,还有必要提供一种可自动调整播放画面方向使得观看者可从正向视角观看播放画面的画面播放装置。
一种画面播放装置,包括:
图像拍摄模块,用于拍摄画面播放屏幕前方图像;
图像识别模块,用于识别出拍摄的图像中的人脸图像;
方向获取模块,用于获取所述人脸图像在所述画面播放屏幕中的方向与当前播放画面在所述画面播放屏幕中的方向;
方向偏差计算模块,用于计算所述人脸图像的方向与所述当前播放画面的方向的偏差;
画面旋转模块,用于当所述偏差超过阈值时,旋转当前播放的画面以使所述当前播放画面的方向与所述人脸图像的方向一致。
上述画面播放方法和装置,可实时拍摄画面播放屏幕前方图像,识别出拍摄的图像中的人脸图像在画面播放屏幕中的方向,并可实时调整当前播放画面在画面播放屏幕中的方向,以使当前播放画面的方向与人脸图像的方向一致,不需要人工调整画面播放屏幕的位置,观看者即可方便而实时地从正向视角观看播放的画面。
附图说明
图1为一个实施例中的一种画面播放方法的流程示意图;
图2为一个实施例中图1的步骤S106的流程示意图;
图3为一个实施例中的一种画面播放装置的结构示意图;
图4为另一实施例中的一种画面播放装置的结构示意图;
图5为又一实施例中的一种画面播放装置的结构示意图;
图6为能实现本发明实施例的一个计算机装置1000的模块图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明中的步骤虽然用标号进行了排列,但并不用于限定步骤的先后次序,除非明确说明了步骤的次序或者某步骤的执行需要其他步骤作为基础,否则步骤的相对次序是可以调整的。
如图1所示,在一个实施例中,一种画面播放方法,包括以下步骤:
步骤S102,拍摄画面播放屏幕前方图像。
在一个实施例中,在步骤S102之前,上述画面播放方法还包括步骤:获取播放画面的指令,加载指令指定播放的画面数据,解码加载的画面数据,播放解码后的画面。播放的画面可为单独的图片或视频中的图片。
在获取到播放画面的指令之后,步骤S102可被启动执行。
在播放画面的同时,步骤S102~步骤S110可循环执行直到画面停止播放。
在一个实施例中,步骤S102可通过移动终端上安装的摄像头拍摄画面播放屏幕前方图像。
步骤S104,识别出拍摄的图像中的人脸图像。
在一个实施例中,可预先训练用于判断图像是否为人脸图像的分类器,包括以下步骤:采集万级以上数量的人脸图像样本与非人脸图像样本;提取人脸图像样本与非人脸图像样本中的Haar特征;通过自适应boosting分类器选取最佳人脸Haar特征、人脸Haar特征相应的权重以及用于分类的阈值;根据选取的人脸Haar特征、人脸Haar特征相应的权重和阈值构成人脸级联强分类器,该人脸级联强分类器可将图像分为两类:包含人脸的图像和不包含人脸的图像。
在一个实施例中,步骤S104可以用多个窗口截取上述拍摄的图像,其中的任意两个窗口的大小不同或位置不同。在一个实施例中,上述的用于截取图像的窗口的中心点可均匀覆盖上述拍摄的图像,并且可根据预设值变化窗口的大小以及窗口的角度。进一步的,步骤S104可提取截取的图像的Haar特征,通过上述人脸级联强分类器判断截取的图像的Haar特征是否符合人脸Haar特征,以判断截取的图像中是否包含人脸;进一步的,可综合所有窗口截取的图像是否包含人脸的判断结果以及窗口的大小和位置判断拍摄的图像中人脸的位置和大小。
步骤S106,获取人脸图像在画面播放屏幕中的方向与当前播放的画面在画面播放屏幕中的方向。
步骤S108,计算人脸图像的方向与当前播放画面的方向的偏差。
步骤S110,当偏差超过阈值时,旋转当前播放的画面以使当前播放画面的方向与人脸图像的方向一致。
在一个实施例中,可预先在画面播放屏幕中建立坐标系:以画面播放屏幕中的某一点为坐标原点,以经过该坐标原点的两条具有方向的直线作为x轴和y轴建立坐标系。例如,可以画面播放屏幕左下角为坐标原点、并以左下角的两条边分别作为x轴和y轴建立坐标系。步骤S106可获取人脸图像和当前播放的画面在画面播放屏幕中建立的坐标系中的方向作为人脸图像和当前播放的画面在画面播放屏幕中的方向。
如图2所示,在一个实施例中,步骤S106包括:
步骤S202,识别出人脸图像的两个方位点在画面播放屏幕中建立的坐标系的坐标,根据人脸图像的两个方位点坐标确定人脸图像的方向。
步骤S204,获取当前播放画面的两个方位点坐标,根据当前播放画面的两个方位点坐标确定当前播放的画面的方向,确定当前播放的画面方向的两个方位点之间的相对方位与确定人脸图像方向的两个方位点之间的相对方位一致。
所谓方位点为自身包含了方位信息的点,例如人脸中的左眼点、右眼点、鼻子点等,其中左眼点、右眼点、鼻子点可分别视为左眼区域、右眼区域、鼻子区域的中心点;以及例如,当前播放画面的左上角顶点、右上角顶点、右下角顶点、左下角顶点和中心点等等,都是画面中的方位点。若选取人脸图像中的左眼点坐标和右眼点坐标来确定人脸图像的方向,则可选取当前播放画面的左上角顶点坐标和右上角顶点坐标来确定当前播放画面的方向。因为左眼点与右眼点之间的相对方位和左上角顶点与右上角顶点之间的相对方位是一致的。相应的,也可以选取左下角顶点坐标和右下角顶点坐标来确定当前播放画面的方向。
在一个实施例中,步骤S202可识别出人脸图像的左眼点和右眼点,并获取左眼点和右眼点在画面播放屏幕中建立的坐标系中的坐标以计算方向。步骤S204可获取当前播放画面左下角顶点和右下角顶点(或,左上角顶点和右上角顶点等平行于当前播放的画面顶边或底边的直线上的两个点)在画面播放屏幕中建立的坐标系中的坐标以计算方向。
在另一个实施例中,步骤S202可识别出人脸图像的顶端点和底端点,并获取顶端点和底端点在画面播放屏幕中建立的坐标系中的坐标以计算方向。顶端点可为人脸图像中额头区域的中心点,底端点可为人脸图像中下巴区域的中心点。步骤S204可获取当前播放画面左上角顶点和左下角顶点(或,右上角顶点和右下角顶点等平行于当前播放的画面左侧边或右侧边的直线上的两个点)在画面播放屏幕中建立的坐标系中的坐标以计算方向。
在一个实施例中,根据两个方位点坐标计算方向的步骤(包括根据人脸图像的两个方位点坐标确定人脸图像的方向,以及根据当前播放画面的两个方位点坐标计算当前播放画面的方向)包括:根据两个方位点坐标计算经过该两个方位点的直线的倾斜角,用该倾斜角表示方向。
步骤S108可计算经过人脸图像的两个方位点的直线与经过当前播放画面的两个方位点的直线之间的夹角。在一个实施例中上,可计算该夹角为:经过人脸图像的两个方位点的直线的倾斜角度数与经过当前播放画面的两个方位点的直线的倾斜角度数的差值。
本实施例中,步骤S110可将当前播放的画面围绕其中心点逆时针或顺时针旋转,旋转的角度等于该差值或与该差值互补,以使当前播放画面的方向与人脸图像的方向一致且旋转的角度小于等于90°。
若差值大于0°而小于等于90°,则将当前播放画面绕其中心点逆时针旋转差值大小的度数;若差值大于等于-90°而小于0°,则将当前播放画面绕其中心点顺时针旋转差值绝对值大小的度数;若差值大于90°而小于180°,则将当前播放画面绕其中心点顺时针旋转差值的补角的度数;若差值大于-180°而小于-90°,则将当前播放的画面绕其中心点逆时针旋转与差值互补的度数。
上述画面播放方法使得当前播放画面旋转尽可能小的角度而达到与人脸图像的方向一致,避免当前播放画面的旋转角度过大而导致观看者观看体验差的问题。
在另一个实施例中,根据两个方位点坐标计算方向的步骤(根据人脸图像的两个方位点坐标确定人脸图像的方向,以及根据当前播放画面的两个方位点坐标计算当前播放画面的方向)包括:根据两个方位点坐标计算该两个方位点确定的向量的坐标,用该向量坐标表示方向,当前播放画面的向量的起点和终点分别与人脸图像的向量的起点和终点相对应。例如,若分别以人脸图像的左眼点和右眼点为人脸图像向量的起点和终点,则可分别以当前播放画面左上角顶点和右上角顶点为当前播放画面向量的起点和终点。
步骤S108可计算人脸图像的两个方位点确定的向量与当前播放画面的两个方位点确定的向量之间的夹角。步骤S110可将当前播放的画面围绕其中心点逆时针或顺时针旋转,旋转的角度等于该夹角度数,以使当前播放画面的方向与人脸图像的方向一致且旋转的角度小于等于180°。
定义当前播放画面的向量到人脸图像的向量的角度为当前播放画面的向量绕着向量起点(即坐标原点)按逆时针方向旋转到与人脸图像的向量重合时所转过的角度。若当前播放画面的向量到人脸图像的向量的角度大于等于0°而小于180°时,则将当前播放画面绕其中心点逆时针旋转上述两向量之间的夹角大小的度数。若当前播放画面的向量到人脸图像的向量的角度大于等于180°而小于360°时,则将当前播放画面绕其中心点顺时针旋转上述两向量之间的夹角大小的度数。
上述画面播放方法,用人脸图像的两个方位点确定的向量表示人脸图像的方向,并用当前播放画面中与该两个方位点相对应两个方位点确定的向量表示当前播放画面的方向,可清楚地区分人脸图像的方向与当前播放画面的方向是完全相同(此时两向量方向相同)还是完全相反(此时两个向量的方向相反),避免用两个方向点确定的直线表示方向引起的不能区分方向是完全相同还是完全相反的问题,可避免用户看到完全倒立的播放画面。
而且上述画面播放方法使得当前播放画面旋转尽可能小的角度而达到与人脸图像的方向一致,避免当前播放画面的旋转角度过大而导致观看者观看体验差的问题。
在一个实施例中,上述画面播放方法还包括:当当前播放画面的方向与人脸图像的方向的偏差超过阈值时,缩放当前播放画面,使得当前播放画面的全景在旋转后最大化显示。
在一个实施例中,可获取当前播放画面旋转后当前播放画面的对角线所在直线,进一步获取该直线与画面播放窗口的重合线段的长度,缩放当前播放画面以使当前播放画面的对角线长度与重合线段的长度相等。
上述画面播放方法,随着当前播放画面的旋转而缩放当前播放画面的大小,使得观看者既可以方便而实时地从正向视角观看播放的画面,又可以随时观看到播放画面的全景,提高观看体验舒适度。
如图3所示,在一个实施例中,一种画面播放装置,其特征在于,包括图像拍摄模块302、图像识别模块304、方向获取模块306、方向偏差计算模块308和画面旋转模块310,其中:
图像拍摄模块302用于拍摄画面播放屏幕前方图像。
如图4所示,在一个实施例中,上述画面播放装置还包括指令获取模块402、数据加载模块404、解码模块406和播放模块408,其中:
指令获取模块402用于获取播放画面的指令;数据加载模块404用于加载指令指定播放的画面数据;解码模块406用于解码加载的画面数据;播放模块408用于播放解码后的画面。播放的画面可为单独的图片或视频中的图片。
在指令获取模块402获取到播放画面的指令之后,图像拍摄模块302可被启动执行。
在播放模块408播放画面的同时,图像拍摄模块302、图像识别模块304、方向获取模块306、方向偏差计算模块308和画面旋转模块310可循环执行直到画面停止播放。
在一个实施例中,图像拍摄模块302可通过移动终端上安装的摄像头拍摄画面播放屏幕前方图像。
图像识别模块304用于识别出拍摄的图像中的人脸图像。
在一个实施例中,上述画面播放装置还包括离线训练模块,用于训练用于判断图像是否为人脸图像的分类器。在一个实施例中,离线训练模块用于采集万级以上数量的人脸图像样本与非人脸图像样本,提取人脸图像样本与非人脸图像样本中的Haar特征,通过自适应boosting分类器选取最佳人脸Haar特征、人脸Haar特征相应的权重以及用于分类的阈值,根据选取的人脸Haar特征、人脸Haar特征相应的权重和阈值构成人脸级联强分类器;该人脸级联强分类器可将图像分为两类:包含人脸的图像和不包含人脸的图像。
在一个实施例中,图像识别模块304可以用多个口截取上述拍摄的图像,其中的任意两个窗口的大小不同或位置不同。在一个实施例中,上述的用于截取图像的窗口的中心点可均匀覆盖上述拍摄的图像,并且可根据预设值变化窗口的大小以及窗口的角度。进一步的,图像识别模块304可提取截取的图像的Haar特征,通过上述人脸级联强分类器判断截取的图像的Haar特征是否符合人脸Haar特征,以判断截取的图像中是否包含人脸;进一步的,图像识别模块304可综合所有窗口截取的图像是否包含人脸的判断结果以及窗口的大小和位置判断拍摄的图像中人脸的位置和大小。
方向获取模块306用于获取人脸图像在画面播放屏幕中的方向与当前播放的画面在画面播放屏幕中的方向。
方向偏差计算模块308用于计算人脸图像的方向与当前播放画面的方向的偏差。
画面旋转模块310用于当偏差超过阈值时,旋转当前播放的画面以使当前播放画面的方向与人脸图像的方向一致。
在一个实施例中,上述画面播放方法还包括坐标系建立模块(图中未示出),用于在画面播放屏幕中建立坐标系。坐标系建立模块可以画面播放屏幕中的某一点为坐标原点,以经过该坐标原点的两条具有方向的直线作为x轴和y轴建立坐标系。例如,坐标系建立模块可以画面播放屏幕左下角为坐标原点、并以左下角的两条边分别作为x轴和y轴建立坐标系。方向获取模块306可获取人脸图像和当前播放的画面在画面播放屏幕中建立的坐标系中的方向作为人脸图像和当前播放的画面在画面播放屏幕中的方向。
在一个实施例中,方向获取模块306用于识别出人脸图像的两个方位点在画面播放屏幕中建立的坐标系的坐标,根据人脸图像的两个方位点坐标确定人脸图像的方向。方向获取模块306还用于获取当前播放画面的两个方位点坐标,根据当前播放画面的两个方位点坐标确定当前播放的画面的方向,确定当前播放的画面方向的两个方位点之间的相对方位与确定人脸图像方向的两个方位点之间的相对方位一致。
所谓方位点为自身包含了方位信息的点,例如人脸中的左眼点、右眼点、鼻子点等,其中左眼点、右眼点、鼻子点可分别视为左眼区域、右眼区域、鼻子区域的中心点;以及例如,当前播放画面的左上角顶点、右上角顶点、右下角顶点、左下角顶点和中心点等等,都是画面中的方位点。方向获取模块306若选取人脸图像中的左眼点坐标和右眼点坐标来确定人脸图像的方向,则可选取当前播放画面的左上角顶点坐标和右上角顶点坐标来确定当前播放画面的方向。因为左眼点与右眼点之间的相对方位和左上角顶点与右上角顶点之间的相对方位是一致的。相应的,方向获取模块306也可以选取左下角顶点坐标和右下角顶点坐标来确定当前播放画面的方向。
在一个实施例中,方向获取模块306可识别出人脸图像的左眼点和右眼点,并获取左眼点和右眼点在画面播放屏幕中建立的坐标系中的坐标以计算方向。并且,方向获取模块306可获取当前播放画面左下角顶点和右下角顶点(或,左上角顶点和右上角顶点等平行于当前播放的画面顶边或底边的直线上的两个点)在画面播放屏幕中建立的坐标系中的坐标以计算方向。
在另一个实施例中,方向获取模块306可识别出人脸图像的顶端点和底端点,并获取顶端点和底端点在画面播放屏幕中建立的坐标系中的坐标以计算方向。顶端点可为人脸图像中额头区域的中心点,底端点可为人脸图像中下巴区域的中心点。并且,方向获取模块306可获取当前播放画面左上角顶点和左下角顶点(或,右上角顶点和右下角顶点等平行于当前播放的画面左侧边或右侧边的直线上的两个点)在画面播放屏幕中建立的坐标系中的坐标以计算方向。
在一个实施例中,方向获取模块306根据两个方位点坐标计算方向(包括根据人脸图像的两个方位点坐标确定人脸图像的方向,以及根据当前播放画面的两个方位点坐标计算当前播放画面的方向)的过程包括:根据两个方位点坐标计算经过该两个方位点的直线的倾斜角,用该倾斜角表示方向。
方向偏差计算模块308可计算经过人脸图像的两个方位点的直线与经过当前播放画面的两个方位点的直线之间的夹角。在一个实施例中上,方向偏差计算模块308可计算该夹角为:经过人脸图像的两个方位点的直线的倾斜角度数与经过当前播放画面的两个方位点的直线的倾斜角度数的差值。
本实施例中,画面旋转模块310可将当前播放的画面围绕其中心点逆时针或顺时针旋转,旋转的角度等于该差值或与该差值互补,以使当前播放画面的方向与人脸图像的方向一致且旋转的角度小于等于90°。
若差值大于0°而小于等于90°,则画面旋转模块310将当前播放画面绕其中心点逆时针旋转差值大小的度数;若差值大于等于-90°而小于0°,则画面旋转模块310将当前播放画面绕其中心点顺时针旋转差值绝对值大小的度数;若差值大于90°而小于180°,则画面旋转模块310将当前播放画面绕其中心点顺时针旋转差值的补角的度数;若差值大于-180°而小于-90°,则画面旋转模块310将当前播放的画面绕其中心点逆时针旋转与差值互补的度数。
上述画面播放装置使得当前播放画面旋转尽可能小的角度而达到与人脸图像的方向一致,避免当前播放画面的旋转角度过大而导致观看者观看体验差的问题。
在另一个实施例中,方向获取模块306根据两个方位点坐标计算方向(包括根据人脸图像的两个方位点坐标确定人脸图像的方向,以及根据当前播放画面的两个方位点坐标计算当前播放画面的方向)的过程包括:根据两个方位点坐标计算该两个方位点确定的向量的坐标,用该向量坐标表示方向,当前播放画面的向量的起点和终点分别与人脸图像的向量的起点和终点相对应。例如,方向获取模块306若分别以人脸图像的左眼点和右眼点为人脸图像向量的起点和终点,则可分别以当前播放画面左上角顶点和右上角顶点为当前播放画面向量的起点和终点。
方向偏差计算模块308可计算人脸图像的两个方位点确定的向量与当前播放画面的两个方位点确定的向量之间的夹角。画面旋转模块310可将当前播放的画面围绕其中心点逆时针或顺时针旋转,旋转的角度等于该夹角度数,以使当前播放画面的方向与人脸图像的方向一致且旋转的角度小于等于180°。
定义当前播放画面的向量到人脸图像的向量的角度为当前播放画面的向量绕着向量起点(即坐标原点)按逆时针方向旋转到与人脸图像的向量重合时所转过的角度。若当前播放画面的向量到人脸图像的向量的角度大于等于0°而小于180°时,则画面旋转模块310将当前播放画面绕其中心点逆时针旋转上述两向量之间的夹角大小的度数。若当前播放画面的向量到人脸图像的向量的角度大于等于180°而小于360°时,则画面旋转模块310将当前播放画面绕其中心点顺时针旋转上述两向量之间的夹角大小的度数。
上述画面播放装置,用人脸图像的两个方位点确定的向量表示人脸图像的方向,并用当前播放画面中与该两个方位点相对应两个方位点确定的向量表示当前播放画面的方向,可清楚地区分人脸图像的方向与当前播放画面的方向是完全相同(此时两向量方向相同)还是完全相反(此时两个向量的方向相反),避免用两个方向点确定的直线表示方向引起的不能区分方向是完全相同还是完全相反的问题,可避免用户看到完全倒立的播放画面。
而且上述画面播放装置使得当前播放画面旋转尽可能小的角度而达到与人脸图像的方向一致,避免当前播放画面的旋转角度过大而导致观看者观看体验差的问题。
如图5所示,在一个实施例中,上述画面播放装置还包括画面缩放模块502,用于当当前播放画面的方向与人脸图像的方向的偏差超过阈值时,缩放当前播放画面,使得当前播放画面的全景在旋转后最大化显示。
在一个实施例中,画面缩放模块502可获取当前播放画面旋转后当前播放画面的对角线所在直线,进一步获取该直线与画面播放窗口的重合线段的长度,缩放当前播放画面以使当前播放画面的对角线长度与重合线段的长度相等。
上述画面播放装置,随着当前播放画面的旋转而缩放当前播放画面的大小,使得观看者既可以方便而实时地从正向视角观看播放的画面,又可以随时观看到播放画面的全景,提高观看体验舒适度。
上述画面播放方法和装置,可实时拍摄画面播放屏幕前方图像,识别出拍摄的图像中的人脸图像在画面播放屏幕中的方向,并可实时调整当前播放画面在画面播放屏幕中的方向,以使当前播放画面的方向与人脸图像的方向一致,不需要人工调整画面播放屏幕的位置,观看者即可方便而实时地从正向视角观看播放的画面。
图6为能实现本发明实施例的一个计算机系统1000的模块图。该计算机系统1000只是一个适用于本发明的计算机环境的示例,不能认为是提出了对本发明的使用范围的任何限制。计算机系统1000也不能解释为需要依赖于或具有图示的示例性的计算机系统1000中的一个或多个部件的组合。
图6中示出的计算机系统1000是一个适合用于本发明的计算机系统的例子。具有不同子系统配置的其它架构也可以使用。例如有大众所熟知的笔记本、个人数字助理、智能电话、平板电脑、便携式媒体播放器、机顶盒等类似设备可以适用于本发明的一些实施例。但不限于以上所列举的设备。
如图6所示,计算机系统1000包括处理器1010、存储器1020和系统总线1022。包括存储器1020和处理器1010在内的各种系统组件连接到系统总线1022上。处理器1010是一个用来通过计算机系统中基本的算术和逻辑运算来执行计算机程序指令的硬件。存储器1020是一个用于临时或永久性存储计算程序或数据(例如,程序状态信息)的物理设备。系统总线1020可以为以下几种类型的总线结构中的任意一种,包括存储器总线或存储控制器、外设总线和局部总线。处理器1010和存储器1020可以通过系统总线1022进行数据通信。其中存储器1020包括只读存储器(ROM)或闪存(图中都未示出),以及随机存取存储器(RAM),RAM通常是指加载了操作系统和应用程序的主存储器。
计算机系统1000还包括显示接口1030(例如,图形处理单元)、显示设备1040(例如,液晶显示器)、音频接口1050(例如,声卡)以及音频设备1060(例如,扬声器)。显示设备1040和音频设备1060是用于体验多媒体内容的媒体设备。
计算机系统1000一般包括一个存储设备1070。存储设备1070可以从多种计算机可读介质中选择,计算机可读介质是指可以通过计算机系统1000访问的任何可利用的介质,包括移动的和固定的两种介质。例如,计算机可读介质包括但不限于,闪速存储器(微型SD卡),CD-ROM,数字通用光盘(DVD)或其它光盘存储、磁带盒、磁带、磁盘存储或其它磁存储设备,或者可用于存储所需信息并可由计算机系统1000访问的任何其它介质。
计算机系统1000还包括输入装置1080和输入接口1090(例如,IO控制器)。用户可以通过输入装置1080,如键盘、鼠标、显示装置1040上的触摸面板设备,输入指令和信息到计算机系统1000中。输入装置1080通常是通过输入接口1090连接到系统总线1022上的,但也可以通过其它接口或总线结构相连接,如通用串行总线(USB)。
计算机系统1000可在网络环境中与一个或者多个网络设备进行逻辑连接。网络设备可以是个人电脑、服务器、路由器、智能电话、平板电脑或者其它公共网络节点。计算机系统1000通过局域网(LAN)接口1100或者移动通信单元1110与网络设备相连接。局域网(LAN)是指在有限区域内,例如家庭、学校、计算机实验室、或者使用网络媒体的办公楼,互联组成的计算机网络。WiFi和双绞线布线以太网是最常用的构建局域网的两种技术。WiFi是一种能使计算机系统1000间交换数据或通过无线电波连接到无线网络的技术。移动通信单元1110能在一个广阔的地理区域内移动的同时通过无线电通信线路接听和拨打电话。除了通话以外,移动通信单元1110也支持在提供移动数据服务的2G,3G或4G蜂窝通信系统中进行互联网访问。
应当指出的是,其它包括比计算机系统1000更多或更少的子系统的计算机系统也能适用于发明。例如,计算机系统1000可以包括能在短距离内交换数据的蓝牙单元,用于照相的图像传感器或摄像头等,以及用于测量加速度的加速计。
如上面详细描述的,适用于本发明的计算机系统1000能执行画面播放方法的指定操作。显示接口1030可加载并解码画面数据并控制画面的播放。显示设备1040显示播放的画面。摄像头可拍摄画面播放屏幕前方图像;计算机系统1000可通过处理器1010运行在计算机可读介质中的软件指令来执行以下操作:识别出拍摄的图像中的人脸图像、获取人脸图像在画面播放屏幕中的方向与当前播放画面在画面播放屏幕中的方向、并计算人脸图像的方向与当前播放画面的方向的偏差,当偏差超过阈值时,指示显示接口1030旋转当前播放的画面以使当前播放画面的方向与人脸图像的方向一致。这些软件指令可以从存储设备1070或者通过局域网接口1100从另一设备读入到存储器1020中。存储在存储器1020中的软件指令使得处理器1010执行上述的画面播放方法中的步骤。此外,通过硬件电路或者硬件电路结合软件指令也能同样实现本发明。因此,实现本发明并不限于任何特定硬件电路和软件的组合。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (6)

1.一种画面播放方法,包括以下步骤:
拍摄画面播放屏幕前方图像;
识别出拍摄的图像中的人脸图像;
获取所述人脸图像在所述画面播放屏幕中的方向与当前播放画面在所述画面播放屏幕中的方向;
计算所述人脸图像在所述画面播放屏幕中的方向与所述当前播放画面在所述画面播放屏幕中的方向的偏差;
当所述偏差超过阈值时,旋转当前播放的画面以使所述当前播放画面在所述画面播放屏幕中的方向与所述人脸图像在所述画面播放屏幕中的方向一致;
所述方法还包括:
获取预设数量的人脸图像样本与非人脸图像样本;
提取所述人脸图像样本与非人脸图像样本中的Haar特征;
通过自适应boosting分类器选取最佳人脸Haar特征、人脸Haar特征相应的权重以及用于分类的阈值;
根据选取的所述最佳人脸Haar特征、人脸Haar特征相应的权重和用于分类的阈值构成人脸图像的分类器;
所述识别出拍摄的图像中的人脸图像还包括:
通过多个窗口截取上述拍摄的图像,任意两个所述窗口的大小不同或位置不同;其中,用于截取图像的窗口的中心点均匀覆盖上述拍摄的图像;所述窗口的大小以及窗口的角度根据预设值变化;
提取截取的图像的Haar特征;
通过所述人脸图像的分类器判断截取的图像的Haar特征是否符合人脸Haar特征;
综合所有窗口截取的图像是否包含人脸的判断结果以及窗口的大小和位置判断拍摄的图像中人脸的位置和大小;
获取所述人脸图像在所述画面播放屏幕中的方向与当前播放的画面在所述画面播放屏幕中的方向的步骤包括:
识别出人脸图像的两个方位点在画面播放屏幕中建立的坐标系的坐标,根据所述人脸图像的两个方位点坐标计算该人脸图像上的两个方位点确定的第一向量的坐标,用该第一向量的坐标表示所述人脸图像的方向;
获取当前播放画面的两个方位点坐标,根据所述当前播放画面的两个方位点坐标计算该当前播放画面的两个方位点确定的第二向量的坐标,用该第二向量的坐标表示所述当前播放画面的方向,确定当前播放的画面方向的两个方位点之间的相对方位与确定人脸图像方向的两个方位点之间的相对方位一致;
计算所述人脸图像在所述画面播放屏幕中的方向与所述当前播放画面在所述画面播放屏幕中的方向的偏差的步骤包括:计算所述人脸图像的两个方位点确定的向量与所述当前播放画面的两个方位点确定的向量之间的夹角。
2.根据权利要求1所述的画面播放方法,其特征在于,所述方法还包括:当所述偏差超过阈值时,缩放当前播放的画面,使得当前播放画面的全景在旋转后最大化显示。
3.一种画面播放装置,其特征在于,包括:
图像拍摄模块,用于拍摄画面播放屏幕前方图像;
图像识别模块,用于识别出拍摄的图像中的人脸图像;
方向获取模块,用于获取所述人脸图像在所述画面播放屏幕中的方向与当前播放画面在所述画面播放屏幕中的方向;
方向偏差计算模块,用于计算所述人脸图像在所述画面播放屏幕中的方向与所述当前播放画面在所述画面播放屏幕中的方向的偏差;
画面旋转模块,用于当所述偏差超过阈值时,旋转当前播放的画面以使所述当前播放画面在所述画面播放屏幕中的方向与所述人脸图像在所述画面播放屏幕中的方向一致;
所述画面播放装置还包括:
离线训练模块,用于获取预设数量的人脸图像样本与非人脸图像样本,提取人脸图像样本与非人脸图像样本中的Haar特征,通过自适应boosting分类器选取最佳人脸Haar特征、人脸Haar特征相应的权重以及用于分类的阈值,根据选取的最佳人脸Haar特征、人脸Haar特征相应的权重和用于分类的阈值构成人脸图像的分类器;所述人脸图像的分类器将图像分为两类:包含人脸的图像和不包含人脸的图像;
所述图像识别模块,还用于通过多个窗口截取上述拍摄的图像,任意两个所述窗口的大小不同或位置不同;其中,用于截取图像的窗口的中心点均匀覆盖上述拍摄的图像;所述窗口的大小以及窗口的角度根据预设值变化;
所述图像识别模块,还用于提取截取的图像的Haar特征,通过所述人脸图像的分类器判断截取的图像的Haar特征是否符合人脸Haar特征,以判断截取的图像中是否包含人脸;
所述图像识别模块,还用于综合所有窗口截取的图像是否包含人脸的判断结果以及窗口的大小和位置判断拍摄的图像中人脸的位置和大小;
所述方向获取模块用于识别出人脸图像的两个方位点在画面播放屏幕中建立的坐标系的坐标,根据所述人脸图像的两个方位点坐标计算该人脸图像的两个方位点确定的第一向量的坐标,用该第一向量的坐标表示所述人脸图像的方向;
所述方向获取模块还用于获取当前播放画面的两个方位点坐标,根据所述当前播放画面的两个方位点坐标计算该当前播放画面的两个方位点确定的第二向量的坐标,用该第二向量的坐标表示所述当前播放画面的方向,确定当前播放的画面方向的两个方位点之间的相对方位与确定人脸图像方向的两个方位点之间的相对方位一致;
所述方向偏差计算模块还用于计算所述人脸图像的两个方位点确定的向量与所述当前播放画面的两个方位点确定的向量之间的夹角。
4.根据权利要求3所述的画面播放装置,其特征在于,所述装置还包括:
画面缩放模块,用于当所述偏差超过阈值时,缩放当前播放的画面,使得当前播放画面的全景在旋转后最大化显示。
5.一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至2中任一项所述的方法的步骤。
6.一种移动终端,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如权利要求1至2中任一项所述的方法的步骤。
CN201410064770.2A 2014-02-25 2014-02-25 画面播放方法和装置 Active CN104866809B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410064770.2A CN104866809B (zh) 2014-02-25 2014-02-25 画面播放方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410064770.2A CN104866809B (zh) 2014-02-25 2014-02-25 画面播放方法和装置

Publications (2)

Publication Number Publication Date
CN104866809A CN104866809A (zh) 2015-08-26
CN104866809B true CN104866809B (zh) 2021-05-11

Family

ID=53912630

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410064770.2A Active CN104866809B (zh) 2014-02-25 2014-02-25 画面播放方法和装置

Country Status (1)

Country Link
CN (1) CN104866809B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017054185A1 (zh) * 2015-09-30 2017-04-06 华为技术有限公司 一种展示全景视觉内容的方法、装置及终端
CN108875556B (zh) * 2018-04-25 2021-04-23 北京旷视科技有限公司 用于人证核验的方法、装置、系统及计算机存储介质
CN109640164A (zh) * 2018-11-02 2019-04-16 重庆爱奇艺智能科技有限公司 一种用于多个虚拟现实设备间的播放方法与装置
CN116095405A (zh) * 2021-11-05 2023-05-09 华为技术有限公司 视频播放方法和装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101989126A (zh) * 2009-08-07 2011-03-23 深圳富泰宏精密工业有限公司 手持式电子装置及其屏幕画面自动旋转方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102063887A (zh) * 2010-11-19 2011-05-18 天津三星电子显示器有限公司 一种自动调节显示器可视范围的方法及其显示器
CN103581423A (zh) * 2012-08-09 2014-02-12 中兴通讯股份有限公司 屏幕翻转方法及装置、移动终端
CN103049084B (zh) * 2012-12-18 2016-01-27 深圳国微技术有限公司 一种可根据人脸方向来调整显示方向的电子设备及其方法
CN103092344A (zh) * 2013-01-11 2013-05-08 深圳市金立通信设备有限公司 一种控制终端屏幕画面旋转的方法及终端
CN103116756B (zh) * 2013-01-23 2016-07-27 北京工商大学 一种人脸检测与跟踪方法及装置
CN103176693B (zh) * 2013-02-18 2016-02-10 联宝(合肥)电子科技有限公司 一种自动变换终端屏幕画面方向的方法及装置
CN103179278B (zh) * 2013-03-21 2015-05-13 广东欧珀移动通信有限公司 一种控制屏幕旋转的方法和装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101989126A (zh) * 2009-08-07 2011-03-23 深圳富泰宏精密工业有限公司 手持式电子装置及其屏幕画面自动旋转方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
改进的AdaBoost人脸检测方法;柯丽等;《光电工程》;20120131;第39卷(第1期);第113-118页 *

Also Published As

Publication number Publication date
CN104866809A (zh) 2015-08-26

Similar Documents

Publication Publication Date Title
US11943532B2 (en) Enhanced image capture
WO2021008456A1 (zh) 图像处理方法、装置、电子设备及存储介质
US10529052B2 (en) Virtual lens simulation for video and photo cropping
AU2020202562B2 (en) Enhanced image capture
CN112087574B (zh) 增强的图像捕获
EP3146708B1 (en) Enhanced image capture
CN107770452B (zh) 一种拍照方法及终端和相关介质产品
KR20180073327A (ko) 영상 표시 방법, 저장 매체 및 전자 장치
US20160050368A1 (en) Video processing apparatus for generating paranomic video and method thereof
CN105939497B (zh) 媒体串流系统及媒体串流方法
CN104866809B (zh) 画面播放方法和装置
US10447926B1 (en) Motion estimation based video compression and encoding
CN105721739B (zh) 屏幕影像画面防抖系统及方法
CN113038165B (zh) 确定编码参数组的方法、设备及存储介质
CN111880711B (zh) 显示控制方法、装置、电子设备及存储介质
US10582125B1 (en) Panoramic image generation from video
US10165186B1 (en) Motion estimation based video stabilization for panoramic video from multi-camera capture device
CN114741559A (zh) 确定视频封面的方法、设备及存储介质
US11044419B2 (en) Image processing device, imaging processing method, and program
US20180063428A1 (en) System and method for virtual reality image and video capture and stitching
CN107147775B (zh) 一种信息处理方法及电子设备
CN113139919A (zh) 特效显示方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant