CN111880710B - 屏幕旋转方法及相关产品 - Google Patents

Abstract

本申请实施例提供一种屏幕旋转方法及相关产品，该屏幕旋转方法包括：终端设备开启旋屏检测模块；通过所述旋屏检测模块判断用户是否有旋转屏幕的意图，在当前显示界面悬浮显示缩略图；若是，执行屏幕旋转操作，隐藏所述缩略图，关闭所述旋屏检测模块。本申请实施例可以避免用户感受到明显的旋转卡顿。

Description

屏幕旋转方法及相关产品

技术领域

本申请涉及屏幕显示技术领域，具体涉及一种屏幕旋转方法及相关产品。

背景技术

目前，手机、平板电脑等终端设备都配置有智能旋屏功能，可以横屏状态下自动旋转屏幕。智能旋屏主要是通过摄像头持续检测人脸旋转方向，当检测到人脸方向旋转时，旋转屏幕，使屏幕保证与人脸方向一致。在摄像头持续检测人脸旋转方向的过程中，检测到人脸方向旋转需要一段时间，因此实际的屏幕旋转动作会带来滞后，给用户带来明显的旋转卡顿。

发明内容

本申请实施例提供一种屏幕旋转方法及相关产品，可以避免用户感受到明显的旋转卡顿。

本申请实施例的第一方面提供了一种屏幕旋转方法，包括：

开启旋屏检测模块；

通过所述旋屏检测模块判断用户是否有旋转屏幕的意图，在当前显示界面悬浮显示缩略图；

若是，执行屏幕旋转操作，隐藏所述缩略图，关闭所述旋屏检测模块。

本申请实施例的第二方面提供了一种屏幕旋转装置，包括：

启动单元，用于开启旋屏检测模块；

判断单元，用于通过所述旋屏检测模块判断用户是否有旋转屏幕的意图；

显示单元，用于在当前显示界面悬浮显示缩略图；

处理单元，用于在所述判断单元判断用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏所述缩略图，关闭所述旋屏检测模块。

本申请实施例的第三方面提供了一种终端设备，包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如本申请实施例第一方面中的步骤指令。

本申请实施例的第四方面提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。

本申请实施例的第五方面提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。

本申请实施例中，开启旋屏检测模块后，通过旋屏检测模块判断用户是否有旋转屏幕的意图，并在当前显示界面悬浮显示缩略图；在判断出用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏缩略图，关闭旋屏检测模块。在判断用户是否有旋转屏幕的意图的同时，可以在当前显示界面悬浮显示缩略图，从而转移用户注意力，避免在屏幕旋转过程中用户感受明显的旋转卡顿。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种屏幕旋转方法的流程示意图；

图2是本申请实施例提供的另一种屏幕旋转方法的流程示意图；

图3是本申请实施例提供的另一种屏幕旋转方法的流程示意图；

图4为本申请实施例提供的一种屏幕旋转装置的结构示意图；

图5是本申请实施例提供的一种终端设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

在本申请中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本申请所描述的实施例可以与其它实施例相结合。

本申请实施例所涉及到的终端设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(user equipment，UE)，移动台(mobile station，MS)，终端设备(terminaldevice)等等。为方便描述，上面提到的设备统称为终端设备。

请参阅图1，图1是本申请实施例提供的一种屏幕旋转方法的流程示意图。如图1所示，该屏幕旋转方法可以包括如下步骤。

101，终端设备开启旋屏检测模块。

本申请实施例中，旋屏检测模块可以旋屏检测模块包括摄像头、处理器等硬件，用于获取人脸图像，检测人脸图像中的人脸是否相对于屏幕发生旋转。一般而言，旋屏检测模块是持续在后台运行，因此容易频繁触发旋转，对硬件功耗要求较高。本申请实施例的方案，在需要时触发旋屏检测模块工作，工作完毕后关闭旋屏检测模块，可以有效减少硬件的功耗。

102，终端设备通过旋屏检测模块判断用户是否有旋转屏幕的意图，在当前显示界面悬浮显示缩略图；若是，则执行步骤103和步骤104，若否，则执行步骤104。

本申请实施例中，旋转屏幕的意图可以通过重力传感器传来的数据判断，也可以通过摄像头拍摄的人脸图像分析得到，还可以通过重力传感器传来的数据和摄像头拍摄的人脸图像分析得到。

其中，缩略图可以将原始图片缩小一定比例得到的。本申请实施例的缩略图可以是基于任意的用来吸引用户注意力的原始图片得到的。本申请实施例的原始图片可以是当前显示界面显示的界面图或背景图，还可以存储的某一张图片，还可以是当前显示界面显示的界面图或背景图的一部分。

当前显示界面显示的内容可以是静态画面，比如，显示的静态图片、文字等。对于动态画面，比如视频而言，视频内容本身就在时刻变化，足以引起用户的注意，因此不需要缩略图来转移用户注意力。而对于静态画面而言，用户往往有审美疲劳，在旋屏检测模块判断用户是否有旋转屏幕的意图的这一过程相对较为漫长，给用户以旋转卡顿的感觉，而缩略图可以较好的转移用户注意力，避免用户感受到明显的旋转卡顿。

需要说明的是，终端设备通过旋屏检测模块判断用户是否有旋转屏幕的意图的步骤与终端设备在当前显示界面悬浮显示缩略图的步骤可以同时执行。

可选的，步骤101与步骤102中的终端设备在当前显示界面悬浮显示缩略图的步骤可以同时执行。可以在开启旋屏检测模块的同时显示缩略图，从而可以在旋屏检测模块判断用户是否有旋转屏幕的意图的过程中通过显示缩略图来转移用户的注意力。一般而言，旋屏检测模块判断用户是否有旋转屏幕的意图的过程大约需要400毫秒(ms)左右，在这段时间内通过显示缩略图来转移用户的注意力。

其中，悬浮显示是一种显示效果。缩略图可以悬浮显示在显示界面上。悬浮显示的缩略图可以半透明的缩略图，避免在用户没有旋转屏幕的意图时对当前显示界面的内容的遮挡。悬浮显示的缩略图也可以是经过图像颜色增强(比如，将图像颜色调整为鲜亮的颜色)和图像亮度增强处理(将图像亮度增强)的缩略图，可以进一步吸引用户的注意力。缩略图可以显示在显示界面的任意位置，也可以显示在显示界面的用户当前注视的位置，当缩略图出现时，可以立刻吸引用户的注意力。缩略图也可以显示在显示界面上不遮挡关键内容的区域。比如，缩略图可以显示在显示界面的边界区域，避免在用户没有旋转屏幕的意图时对当前显示界面的内容的遮挡。

可选的，终端设备在当前显示界面悬浮显示缩略图的同时，还可以对当前显示界面进行虚化处理，在判断出用户有旋转屏幕的意图或者判断出用户没有旋转屏幕的意图后取消对当前显示界面的虚化处理。

可选的，步骤102中，终端设备在当前显示界面悬浮显示缩略图，包括：终端设备在当前显示界面悬浮跟随显示缩略图。

其中，悬浮跟随显示是在当前显示界面悬浮显示，并且缩略图悬浮显示的位置随着用户注视点的变化而变化。也即，在旋屏检测模块判断用户是否有旋转屏幕的意图的过程中，缩略图的位置跟随用户注视点的移动而移动，从而进一步吸引用户注意力。

可选的，步骤102中，终端设备通过旋屏检测模块判断用户是否有旋转屏幕的意图，具体可以还包括如下步骤：

(11)终端设备拍摄人脸图像，根据所述人脸图像计算人脸与机身的角度；

(12)终端设备若所述人脸与机身的角度大于第一阈值，终端设备确定用户有旋转屏幕的意图；

(13)终端设备若所述人脸与机身的角度小于所述第一阈值，终端设备确定用户没有旋转屏幕的意图。

当人脸与机身的角度等于第一阈值时，终端设备确定用户有旋转屏幕的意图或者确定用户没有旋转屏幕的意图。

本申请实施例中，旋屏检测模块可以包括摄像头和处理模块，其中摄像头用于拍摄人脸图像，处理模块用于计算人脸与机身的角度。

其中，人脸与机身的角度可以包括：人脸的双眼之间的连线与机身的宽度方向的夹角。

第一阈值可以预先进行设定并存储在终端设备的存储器(非易失性存储器)中。比如，第一阈值可以设置为30度。

本申请实施例中，旋转屏幕的意图不能仅仅通过重力传感器传来的数据判断，还需要通过摄像头拍摄的人脸图像分析得到。通过分析人脸与机身的角度可以更加准确判断用户是否有旋转屏幕的意图。

可选的，终端设备根据所述人脸图像计算人脸与机身的角度，包括：终端设备将所述人脸图像输入深度学习模型进行人脸检测和角度回归，得到人脸与机身的角度。

本申请实施例中，深度学习模型可以包括多任务卷积神经网络)(Multi-taskCascaded Convolutional Networks，MTCNN)、FaceBoxes、RetinaFace等人脸检测器。本申请实施例可以采用轻量化的模型，例如把RetinaFac的骨干网络改用小模型、通道数减少等方法，训练一个轻量化的Retinaface，用于旋屏检测模块，这就可以满足手机端的检测要求，且功耗会较低。同样角度回归模型也是可以使用Mobilenst-V1、MobilenetV2等小网络训练，输出人脸的翻转角用于判断人脸与机身的角度。当角度达到所设置的阀值时，就上报旋转信息，应用层根据上报信息进行旋转处理。

在设计深度学习模型的过程中，我们可以针对多种场景进一步进行优化，经过测试，对多种场景人脸检测的结果可达较高(比如，96％以上)的检测精度。

深度学习模型按照功能可以分为人脸检测模型和角度回归模型，以Retinaface模型作为人脸检测模型为例，Retinaface模型的原始结构采用4层金字塔结构每层金字塔检测不同尺寸的人脸。本申请实施例在Retinaface模型在原始结构的基础上简化模型结构，通过降低金字塔的层数和降低通道数得到精简的用于手机等终端设备的人脸检测模型。距离来说，本申请实施例的精简的人脸检测模型(精简的Retinaface模型)采用3层金字塔(比如，与原始结构相比，去掉最上层或者最下层的金字塔)，另外通道数(channels)缩小到原始结构的四分之一，得到精简的用于手机等终端设备的人脸检测模型。

类似的，基于相同的思路训练一个轻量级的角度回归模型用于手机等终端设备。

本申请实施例通过训练一个轻量级的人脸检测模型和轻量级的角度回归模型用于手机等终端设备，可以提高人脸检测的速度，快速计算人脸与机身的角度。轻量级的人脸检测模型和轻量级的角度回归模，不仅模型量轻，而且精度高，可以有效判断当前用户相对于机身的人脸角度，从而旋转屏幕。

本申请实施例不会长时间开启旋屏检测模块，因此在功耗上相对较低。

可选的，所述缩略图跟随机身旋转。

当机身旋转时，缩略图也跟随着旋转，可以在通过旋屏检测模块判断用户是否有旋转屏幕的意图的过程中，让缩略图产生与机身旋转同样的旋转效果，从而提高缩略图与屏幕显示内容的协调性，提高用户转屏体验。

103，终端设备执行屏幕旋转操作。

本申请实施例中，屏幕旋转操作是将当前显示的屏幕的内容顺时针或者逆时针旋转九十度并适应性调整显示内容的大小的操作。

可选的，在执行屏幕旋转操作的同时，可以在显示屏上增加旋转动画，旋转动画用于提示用户当前正在进行旋转操作。旋转动画可以预先进行配置，也可以根据当前显示的界面的内容匹配对应的旋转动画，可以提高旋转动画与当前显示的界面内容的匹配效果。

104，终端设备隐藏缩略图，关闭旋屏检测模块。

其中，在旋屏检测模块判断用户是否有旋转屏幕的意图的过程中，通过缩略图来转移用户注意力，在判断出用户有旋转屏幕的意图或者没有旋转屏幕的意图后，则执行屏幕旋转操作或者不执行屏幕旋转操作，此时不需要缩略图来转移用户注意力，则可以隐藏缩略图，避免缩略图对当前显示界面的显示内容的遮挡。

需要说明的是，步骤104可以在步骤102之后执行，也可以在步骤103之后执行。

终端设备隐藏缩略图和终端设备关闭旋屏检测模块可以同时进行。终端设备也可以先隐藏缩略图，后关闭旋屏检测模块，此处不再赘述。

本申请实施例中，开启旋屏检测模块后，通过旋屏检测模块判断用户是否有旋转屏幕的意图，并在当前显示界面悬浮显示缩略图；在判断出用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏缩略图，关闭旋屏检测模块。在判断用户是否有旋转屏幕的意图的同时，可以在当前显示界面悬浮显示缩略图，从而转移用户注意力，避免用户感受明显的旋转卡顿。

请参阅图2，图2是本申请实施例提供的另一种屏幕旋转方法的流程示意图。如图2所示，该屏幕旋转方法可以包括如下步骤。

201，终端设备开启旋屏检测模块。

202，终端设备通过旋屏检测模块判断用户是否有旋转屏幕的意图。

本申请实施例中步骤201和步骤202的具体实施例可以参见图1所示的步骤101至步骤102，此处不再赘述。

203，终端设备根据当前显示界面生成所述缩略图或者根据用户注视区域生成所述缩略图，在当前显示界面悬浮显示缩略图；若是，则执行步骤204和步骤205，若否，则执行步骤205。

本申请实施例中，用户注视区域是用户在终端设备的显示屏上注视的一块区域。可以通过眼球追踪模型确定用户注视区域。

可选的，步骤203中，终端设备根据用户注视区域生成所述缩略图，包括：

终端设备通过眼球追踪模型确定用户注视区域，生成包含所述用户注视区域的缩略图。

本申请实施例中，用户注视点的跟踪可以通过眼球追踪模型来实现。用户的眼球在显示屏上的视线落点可以称为用户注视点。终端设备可以通过眼球追踪算法来计算用户注视点在显示屏上的位置。为了保证眼球追踪功能的正常，终端设备可以周期性的输出注视点的位置。

眼球追踪模型可以是多元多次多项式函数模型。比如，以二元二次多项式函数模型为例：

其中，在眼球追踪过程中，Z_x指的是用户视线注视显示屏上的视线落点(即为用户注视点)的X轴坐标，Z_y指的是用户注视点的Y轴坐标。v_x指的是眼部特征数据中的X轴坐标；v_y指的是眼部特征数据中的Y轴坐标。a₀、b₀、a₁、b₁、a₂、b₂、a₃、b₃、a₄、b₄、a₅、b₅为眼球追踪模型的模型参数。这些模型参数在眼球追踪模型的标定过程中确定。

将眼部特征数据中的X轴坐标v_x、眼部特征数据中的Y轴坐标v_y输入该眼球追踪模型，即可得到用户注视点的X轴坐标和Y轴坐标。

眼部特征数据可以包括用户眼睛的瞳孔中心坐标、用户眼睛的角膜反射光斑中心坐标、用户眼睛的左眼角坐标、右眼角坐标中的一种或多种组合。

比如，眼部特征数据中的X轴坐标可以包括左眼角坐标的X轴坐标与眼球瞳孔中心坐标的X轴坐标的差值；眼部特征数据中的Y轴坐标可以包括左眼角坐标的Y轴坐标与眼球瞳孔中心坐标的Y轴坐标的差值。又比如，眼部特征数据中的X轴坐标可以包括右眼角坐标的X轴坐标与眼球瞳孔中心坐标的X轴坐标的差值；眼部特征数据中的Y轴坐标可以包括右眼角坐标的Y轴坐标与眼球瞳孔中心坐标的Y轴坐标的差值。

缩略图可以悬浮显示在显示界面上。悬浮显示的缩略图可以半透明的缩略图，避免在用户没有旋转屏幕的意图时对当前显示界面的内容的遮挡。悬浮显示的缩略图也可以是经过图像颜色增强(比如，将图像颜色调整为鲜亮的颜色)和图像亮度增强处理(将图像亮度增强)的缩略图，可以进一步吸引用户的注意力。缩略图可以显示在显示界面的任意位置，也可以显示在显示界面的用户当前注视的位置，当缩略图出现时，可以立刻吸引用户的注意力。缩略图也可以显示在显示界面上不遮挡关键内容的区域。比如，缩略图可以显示在显示界面的边界区域，避免在用户没有旋转屏幕的意图时对当前显示界面的内容的遮挡。

缩略图的形状可以设置为矩形，缩略图的尺寸可以设置为屏幕尺寸的一定比值，比如，缩略图的面积可以设置为屏幕面积的百分之一。

在当前显示界面显示包含用户注视区域的缩略图，由于用户注视区域往往为用户感兴趣的区域，可以通过缩略图有效转移用户注意力，避免用户感受明显的旋转卡顿。

在当前显示界面显示包含当前显示界面的缩略图，缩略图的原始图即为当前显示界面，可以很快的生成缩略图，提高缩略图生成的速度。

204，终端设备执行屏幕旋转操作。

205，终端设备隐藏缩略图，关闭旋屏检测模块。

本申请实施例中步骤204和步骤205的具体实施例可以参见图1所示的步骤103至步骤104，此处不再赘述。

本申请实施例中，开启旋屏检测模块后，通过旋屏检测模块判断用户是否有旋转屏幕的意图，并在当前显示界面悬浮显示缩略图；在判断出用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏缩略图，关闭旋屏检测模块。在判断用户是否有旋转屏幕的意图的同时，可以在当前显示界面悬浮显示缩略图，从而转移用户注意力，避免用户感受明显的旋转卡顿。

请参阅图3，图3是本申请实施例提供的另一种屏幕旋转方法的流程示意图。如图3所示，该屏幕旋转方法可以包括如下步骤。

301，终端设备通过传感器获取机身旋转角度。

302，若机身旋转角度大于第二阈值，终端设备生成机身旋转信号，机身旋转信号用于触发旋屏检测模块启动。

若机身旋转角度小于第二阈值，终端设备不生成机身旋转信号。当机身旋转角度等于第二阈值时，终端设备生成机身旋转信号或者不生成机身旋转信号。

本申请实施例中，第二阈值可以预先进行设定并存储在终端设备的存储器中。

可以通过角度传感器周期性的测量机身旋转角度，终端设备的处理器可以周期性的接收角度传感器上报的机身旋转角度，处理器判断机身旋转角度是否大于第二阈值。或者，传感器可以周期性的测量机身旋转角度并判断机身旋转角度大于第二阈值，若是，可以上报触发信号，触发信息用于触发处理器生成机身旋转信号，机身旋转信号用于触发旋屏检测模块启动。

本申请实施例的旋屏检测模块并不是持续工作，而是在机身旋转信号的触发下开启的，可以降低旋屏检测的硬件功耗。

303，终端设备开启旋屏检测模块。

304，终端设备通过旋屏检测模块判断用户是否有旋转屏幕的意图，在当前显示界面悬浮显示缩略图；若是，则执行步骤305和步骤306，若否，则执行步骤306。

305，终端设备执行屏幕旋转操作。

306，终端设备隐藏缩略图，关闭旋屏检测模块。

本申请实施例中的步骤303至步骤306的具体实施可以参见图1所示的步骤101至步骤104，此处步骤赘述。

本申请实施例中，开启旋屏检测模块后，通过旋屏检测模块判断用户是否有旋转屏幕的意图，并在当前显示界面悬浮显示缩略图；在判断出用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏缩略图，关闭旋屏检测模块。在判断用户是否有旋转屏幕的意图的同时，可以在当前显示界面悬浮显示缩略图，从而转移用户注意力，避免用户感受明显的旋转卡顿。

上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是，终端设备为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所提供的实施例描述的各示例的单元及算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

本申请实施例可以根据上述方法示例对终端设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

与上述一致的，请参阅图4，图4为本申请实施例提供的一种屏幕旋转装置的结构示意图，该屏幕旋转装置400应用于终端设备，该屏幕旋转装置400可以包括启动单元401、判断单元402、显示单元403和处理单元404，其中：

所述启动单元401，用于开启旋屏检测模块；

所述判断单元402，用于通过所述旋屏检测模块判断用户是否有旋转屏幕的意图；

所述显示单元403，用于在当前显示界面悬浮显示缩略图；

所述处理单元404，用于在所述判断单元402判断用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏所述缩略图，关闭所述旋屏检测模块。

其中，判断单元402和显示单元403可以在启动单元401开启旋屏检测模块后同时启动。

可选的，所述处理单元404，还用于在所述判断单元402判断用户没有旋转屏幕的意图的情况下，隐藏所述缩略图，关闭所述旋屏检测模块。

可选的，所述判断单元402通过所述旋屏检测模块判断用户是否有旋转屏幕的意图，具体为：拍摄人脸图像，根据所述人脸图像计算人脸与机身的角度；在所述人脸与机身的角度大于第一阈值的情况，确定用户有旋转屏幕的意图；在所述人脸与机身的角度小于所述第一阈值的情况，确定用户没有旋转屏幕的意图。

可选的，所述判断单元402根据所述人脸图像计算人脸与机身的角度，具体为：将所述人脸图像输入深度学习模型进行人脸检测和角度回归，得到人脸与机身的角度。

可选的，该屏幕旋转装置400还可以包括第一生成单元405。

所述第一生成单元405，用于在所述显示单元403在当前显示界面悬浮显示缩略图之前，根据当前显示界面生成所述缩略图或者根据用户注视区域生成所述缩略图。

其中，第一生成单元405可以在启动单元401开启旋屏检测模块后启动。

可选的，所述第一生成单元405根据用户注视区域生成所述缩略图，具体为：通过眼球追踪模型确定用户注视区域，生成包含所述用户注视区域的缩略图。

可选的，该屏幕旋转装置400还可以包括获取单元406和第二生成单元407。所述开启旋屏检测模块之前，所述方法还包括：

所述获取单元406，用于在所述启动单元401开启旋屏检测模块之前，通过传感器获取机身旋转角度；

所述第二生成单元407，用于在所述机身旋转角度大于第二阈值的情况下，生成机身旋转信号，所述机身旋转信号用于触发所述启动单元401开启所述旋屏检测模块。

可选的，所述缩略图跟随机身旋转。

本申请实施例中，开启旋屏检测模块后，通过旋屏检测模块判断用户是否有旋转屏幕的意图，并在当前显示界面悬浮显示缩略图；在判断出用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，隐藏缩略图，关闭旋屏检测模块。在判断用户是否有旋转屏幕的意图的同时，可以在当前显示界面悬浮显示缩略图，从而转移用户注意力，避免用户感受明显的旋转卡顿。

其中，本申请实施例中的启动单元401、判断单元402、处理单元404、第一生成单元405、获取单元406、第二生成单元407可以通过终端设备中的处理器来实现，本申请实施例中的显示单元403可以通过终端设备中的显示器来实现。

本申请实施例中，在计算得到配准图像块与参考图像块之间的像素位移的基础上，叠加使用迭代光流算法计算得到配准后的图像块对的亚像素级别位移，得到待配准图像与参考图像的图像位移。可以通过迭代光流算法对图像块配准的像素位移进行修正，减少由于搜索空间局限性带来的像素级别位移误差，进而提高图像块配准精度。

请参阅图5，图5是本申请实施例提供的一种终端设备的结构示意图，如图5所示，该终端设备500包括处理器501和存储器502，处理器501、存储器502可以通过通信总线503相互连接。通信总线503可以是外设部件互连标准(Peripheral Component Interconnect，简称PCI)总线或扩展工业标准结构(Extended Industry Standard Architecture，简称EISA)总线等。通信总线503可以分为地址总线、数据总线、控制总线等。为便于表示，图5中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。存储器502用于存储计算机程序，计算机程序包括程序指令，处理器501被配置用于调用程序指令，上述程序包括用于执行图1至图3所示的方法。

处理器501可以是通用中央处理器(CPU)，微处理器，特定应用集成电路(application-specific integrated circuit，ASIC)，或一个或多个用于控制以上方案程序执行的集成电路。

存储器502可以是只读存储器(read-only memory，ROM)或可存储静态信息和指令的其他类型的静态存储设备，随机存取存储器(random access memory，RAM)或者可存储信息和指令的其他类型的动态存储设备，也可以是电可擦可编程只读存储器(ElectricallyErasable Programmable Read-Only Memory，EEPROM)、只读光盘(Compact Disc Read-Only Memory，CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。存储器可以是独立存在，通过总线与处理器相连接。存储器也可以和处理器集成在一起。

该终端设备500还可以包括显示屏504，显示屏504用于在处理器501通过旋屏检测模块判断用户是否有旋转屏幕的意图的过程中显示缩略图。显示屏504可以是LED显示屏、OLED显示屏、LCD显示屏中的任一种。

此外，该终端设备500还可以包括通信接口、天线等通用部件，在此不再详述。

本申请实施例中，在计算得到配准图像块与参考图像块之间的像素位移的基础上，叠加使用迭代光流算法计算得到配准后的图像块对的亚像素级别位移，得到待配准图像与参考图像的图像位移。可以通过迭代光流算法对图像块配准的像素位移进行修正，减少由于搜索空间局限性带来的像素级别位移误差，进而提高图像块配准精度。

本申请实施例还提供一种计算机可读存储介质，其中，该计算机可读存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述方法实施例中记载的任何一种屏幕旋转方法的部分或全部步骤。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在申请明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件程序模块的形式实现。

所述集成的单元如果以软件程序模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器、随机存取器、磁盘或光盘等。

以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (7)

1.一种屏幕旋转方法，其特征在于，包括：

开启旋屏检测模块；

通过所述旋屏检测模块判断用户是否有旋转屏幕的意图；根据用户注视区域生成缩略图，包括：通过眼球追踪模型确定所述用户注视区域，生成包含所述用户注视区域的所述缩略图；在当前显示界面悬浮跟随显示所述缩略图；所述缩略图悬浮跟随显示的位置随着用户注视点的变化而变化；

若是，执行屏幕旋转操作，所述缩略图跟随机身旋转，隐藏所述缩略图，关闭所述旋屏检测模块。

2.根据权利要求1所述的方法，其特征在于，所述通过所述旋屏检测模块判断用户是否有旋转屏幕的意图，包括：

拍摄人脸图像，根据所述人脸图像计算人脸与机身的角度；

若所述人脸与机身的角度大于第一阈值，确定用户有旋转屏幕的意图；

若所述人脸与机身的角度小于所述第一阈值，确定用户没有旋转屏幕的意图。

3.根据权利要求2所述的方法，其特征在于，所述根据所述人脸图像计算人脸与机身的角度，包括：

将所述人脸图像输入深度学习模型进行人脸检测和角度回归，得到人脸与机身的角度。

4.根据权利要求1所述的方法，其特征在于，所述开启旋屏检测模块之前，所述方法还包括：

通过传感器获取机身旋转角度；

若所述机身旋转角度大于第二阈值，生成机身旋转信号，所述机身旋转信号用于触发所述旋屏检测模块启动。

5.一种屏幕旋转装置，其特征在于，包括：

启动单元，用于开启旋屏检测模块；

判断单元，用于通过所述旋屏检测模块判断用户是否有旋转屏幕的意图；

第一生成单元，用于根据用户注视区域生成缩略图，包括：通过眼球追踪模型确定所述用户注视区域，生成包含所述用户注视区域的所述缩略图；

显示单元，用于在当前显示界面悬浮跟随显示所述缩略图；所述缩略图悬浮跟随显示的位置随着用户注视点的变化而变化；

处理单元，用于在所述判断单元判断用户有旋转屏幕的意图的情况下，执行屏幕旋转操作，所述缩略图跟随机身旋转，隐藏所述缩略图，关闭所述旋屏检测模块。

6.一种终端设备，其特征在于，包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1~4任一项所述的方法。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1~4任一项所述的方法。

Images