CN109558008A - 控制方法、装置、计算机设备和存储介质 - Google Patents

控制方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN109558008A
CN109558008A CN201811458612.XA CN201811458612A CN109558008A CN 109558008 A CN109558008 A CN 109558008A CN 201811458612 A CN201811458612 A CN 201811458612A CN 109558008 A CN109558008 A CN 109558008A
Authority
CN
China
Prior art keywords
distance
terminal screen
user
current
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811458612.XA
Other languages
English (en)
Other versions
CN109558008B (zh
Inventor
凌其能
王敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201811458612.XA priority Critical patent/CN109558008B/zh
Publication of CN109558008A publication Critical patent/CN109558008A/zh
Application granted granted Critical
Publication of CN109558008B publication Critical patent/CN109558008B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种控制方法、装置、计算机设备和存储介质,方法包括:在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离;当用户与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离;当提示用户调整与终端屏幕的距离后,监测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤。上述方法可以节省终端的资源。

Description

控制方法、装置、计算机设备和存储介质
技术领域
本发明涉及终端领域,特别是涉及控制方法、装置、计算机设备和存储介质。
背景技术
随着科技的发展,终端能够支持的应用越来越多,功能也越来越强大,人们在日常生活和生产活动经常使用终端。例如利用手机阅读电子书以及观看视频等。目前,为了满足用户需求,终端上的应用通常同时开启多种功能,然而随着用户使用终端的时间增多以及终端上运行的应用日益增多,终端上运行的监测任务越来越多,消耗终端大量的资源。
发明内容
基于此,有必要针对上述终端上运行的监测任务越来越多,消耗了终端大量的资源的问题,提供一种控制方法、装置、计算机设备和存储介质。
一种控制方法,所述方法包括:在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离;当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,提示所述用户调整与所述终端屏幕的距离;当提示所述用户调整与所述终端屏幕的距离后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,停止所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤。
一种控制装置,所述装置包括:距离检测模块,用于在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离;距离调整提示模块,用于当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,提示所述用户调整与所述终端屏幕的距离;停止检测及返回模块,用于当提示所述用户调整与所述终端屏幕的距离后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,停止所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤。
在其中一个实施例中,所述装置还包括:调用模块,用于当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,继续调用所述追踪测距系统对所述用户的人脸与所述终端屏幕的距离进行检测。
在其中一个实施例中,所述提示所述用户调整与所述终端屏幕的距离包括对所述终端屏幕中显示的当前信息进行处理,所述对所述终端屏幕中显示的当前信息进行处理的方式包括以下方式的至少一种:对所述终端屏幕中显示的当前信息进行闪烁处理、对所述终端屏幕中显示的当前信息进行分割、对所述终端屏幕中显示的当前信息进行模糊处理、对所述终端屏幕中显示的当前信息进行变形以及在所述终端屏幕中显示的当前信息上添加干扰元素。
在其中一个实施例中,所述终端屏幕中显示的当前信息包括图像,所述距离调整提示模块用于对所述终端屏幕中显示的当前信息进行模糊处理,所述距离调整提示模块包括:参考像素点获取单元,用于获取所述终端屏幕中显示的当前图像,获取所述当前图像中的当前像素点,根据所述当前像素点的位置获取位于预设范围内的多个参考像素点;模糊像素值计算单元,用于根据所述多个参考像素点的像素值计算得到模糊像素值,将所述模糊像素值作为模糊处理得到的模糊图像中所述当前像素点的像素值。
在其中一个实施例中,所述装置还包括:恢复模块,用于当对所述终端屏幕中显示的当前信息进行处理后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,所述终端屏幕中显示的当前信息恢复清晰显示。
在其中一个实施例中,所述参考像素点获取单元用于:根据所述用户与所述终端屏幕的当前距离获取所述当前像素点对应的目标参考像素距离,其中,所述目标参考像素距离与所述用户与所述终端屏幕的当前距离成负相关关系;将与所述当前像素点的距离小于所述目标参考像素距离的像素点作为参考像素点。
在其中一个实施例中,所述距离调整提示模块用于对所述终端屏幕中显示的当前信息进行模糊处理,对所述终端屏幕中显示的当前信息进行模糊处理包括:根据所述用户与所述终端屏幕的当前距离确定对应的目标模糊处理参数,根据所述目标模糊处理参数对所述终端屏幕中显示的当前信息进行模糊处理,其中,所述目标模糊处理参数对应的模糊度与所述用户与所述终端屏幕的当前距离成负相关关系。
在其中一个实施例中,所述距离检测模块包括:属性信息获取单元,用于在终端的终端屏幕处于信息显示状态时,获取所述终端屏幕中显示的当前信息对应的目标属性信息,所述目标属性信息包括根据当前信息对应的观看对象的年龄进行分类得到的属性信息;快速开启模式进入单元,用于当所述目标属性信息满足预设类型时,进入护眼模式快速开启模式,其中,在所述护眼模式快速开启模式下,所述终端自动开启护眼模式或者自动展示护眼模式开启提示信息;距离检测单元,用于当所述护眼模式开启时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离。
在其中一个实施例中,所述距离检测模块用于:开启会话控制对象,所述会话控制对象配置有人脸追踪对应的配置信息;所述会话控制对象控制摄像头进行图像采集获取图像帧;对所述图像帧进行人脸检测,当所述图像帧中出现人脸时,在人脸设置虚拟锚点,根据所述虚拟锚点进行人脸跟踪,根据跟踪的人脸的当前位置以及所述摄像头的位置确定所述用户与所述终端屏幕的当前距离。
在其中一个实施例中,所述装置还包括:停止以及继续播放控制模块,用于当所述用户与所述终端屏幕的当前距离小于或等于第二预设距离时,自动停止播放所述终端屏幕中播放的当前信息,直至监测到所述用户与所述终端屏幕的当前距离大于第二预设距离时,从所述停止播放的位置开始继续播放所述当前信息。
在其中一个实施例中,所述距离调整提示模块用于:当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,调用语音提醒接口播放语音提醒信息,所述语音提醒信息包括护眼提醒信息。
一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行上述控制方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行上述控制方法的步骤。
上述控制方法、装置、计算机设备和存储介质,通过在人脸与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离,能够提醒用户保持与终端的距离,保护视力,而且在检测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,直至到达预设时长时,再重新利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,在减少监测任务,节省终端的资源的同时,也能够使提示的时机与用户与终端的当前距离变化协调。
附图说明
图1为一个实施例中提供的控制方法的应用环境图;
图2为一个实施例中控制方法的流程图;
图3A为一个实施例中计算终端屏幕与人脸的距离示意图;
图3B为一个实施例中播放视频时,展示提示用户提高与终端屏幕的距离的提示信息的示意图;
图4为一个实施例中不同条件下播放视频,对用户的人脸与终端屏幕的距离进行检测后剩余电量的示意图;
图5A为一个实施例中在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离的流程图;
图5B为一个实施例中在视频播放界面显示护眼模式的提示框的示意图;
图5C为一个实施例中在视频播放界面显示设置界面的示意图;
图5D为一个实施例中在视频播放界面提醒用户开启摄像头权限的提示框的示意图;
图5E为一个实施例中在视频播放界面显示去往摄像头权限设置页面设置允许视频应用拥有摄像头权限的提示框的示意图;
图6为一个实施例中利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离的流程图;
图7A为一个实施例中控制方法对应的流程图;
图7B为一个实施例中业务实现模块的架构图;
图8为一个实施例中控制方法的流程图;
图9为一个实施例中控制装置的结构框图;
图10为一个实施例中计算机设备的内部结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但除非特别说明,这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本申请的范围的情况下,可以将第一预设距离称为第二预设距离,且类似地,可将第二预设距离称为第一预设距离。
图1为一个实施例中提供的控制方法的应用环境图,如图1所示,在该应用环境中,包括终端110以及服务器120。终端110中的信息显示应用例如视频播放应用接收视频播放请求,从服务器120中获取视频播放请求对应的视频进行播放,当终端110在播放视频时,可以接收用户输入的护眼模式开启操作请求,终端110根据护眼模式开启操作请求开启护眼模式,利用终端110中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离,当用户与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离,当提示用户调整与终端屏幕的距离后,监测到用户与终端屏幕的当前距离大于第一预设距离时,停止执行利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至预设时间到达时,再次执行利用终端110中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤。
可以理解,上述应用环境仅是一个示例,在一些实施例中,视频还可以是终端本地存储的,或者显示的信息可以是任意需要用眼睛观看的信息,例如信息还可以是图片、文字中的一种或多种。
服务器120可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群,可以是提供云服务器、云数据库、云存储和CDN等基础云计算服务的云服务器。终端110可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱以及智能手表等,但并不局限于此。信息显示应用是用于显示信息的应用,例如图片浏览应用,视频播放应用或者阅读应用等。例如图片浏览应用可以是美图看看,视频播放应用可以是腾讯视频、爱奇艺视频等播放视频的应用。阅读应用可以是阅读新闻、小说、杂志等应用。终端110以及服务器120可以通过网络等通讯连接方式进行连接,本发明在此不做限制。
如图2所示,在一个实施例中,提出了一种控制方法,本实施例主要以该方法应用于上述图1中的终端110来举例说明。具体可以包括以下步骤:
步骤S202,在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离。
具体地,处于信息显示状态是指终端屏幕上正在显示信息,信息的类型可以是文字、图片以及视频中的一种或多种,具体不做限制。例如当前展示的信息可以包括视频,视频上包括视频帧图像以及对应的文字。追踪测距系统用于追踪需要追踪的目标对象,根据目标对象在空间中的位置进行测距。追踪测距系统既可以设置在终端中,也可以是独立于终端的追踪测距系统。例如追踪测距系统可以为VIO(Visual–Inertial Odometry,视觉惯性里程计)。实时是指追踪测距系统在开始追踪期间,会跟随着目标对象的移动而动态更新检测得到的距离。当前距离是指当前时间用户的人脸与终端屏幕的距离,随着人脸的移动,当前距离也在不断进行变换。终端将人户的人脸作为需要追踪的对象,对用户的人脸进行追踪,得到用户与终端屏幕的当前距离。
在一个实施例中,可以采用终端中用于实现AR(Augmented Reality,增强现实)功能的系统对用户的人脸与终端屏幕的距离进行检测。在使用AR功能的系统对用户的人脸与终端屏幕的距离进行检测时,开启人脸追踪对应的配置,关闭在设备所在的真实世界与虚拟3D坐标空间之间建立对应关系并对虚拟的内容进行建模的配置,这样既可以实现人脸追踪,又不必开启增强现实的功能。例如,可以使用ARkit框架对用户的人脸与终端屏幕的距离进行检测,其中,在进行检测时,开启FaceTrackingConfiguration对应的接口,但不开启WorldTrackingConfiguration对应的接口。其中,ARkit是一个由苹果公司开发的增强现实开发框架,通过调用终端的深度摄像头例如红外点阵摄像头进行拍摄,得到人脸的位置,根据人脸的位置与摄像头的位置得到人脸与终端屏幕的距离,FaceTrackingConfiguration是用于配置终端以使用摄像头跟踪面部的配置。WorldTrackingConfiguration是用于配置终端以使用后置摄像头,追踪设备的方向和位置以及检测真实世界平面的配置。
在一个实施例中,如图3A所示,计算距离时,在世界坐标系中,假设摄像头位于坐标的原点,即(0,0,0),而识别到脸部的位置假设为(a,b,c),将摄像头与人脸的距离作为用户的人脸与终端屏幕的距离,则用户的人脸与终端屏幕的距离d可以利用公式(1)得到。
步骤S204,当用户与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离。
具体地,第一预设距离可以根据需要进行配置,例如40厘米。当前信息是指终端屏幕中当前显示的信息。提示用户调整与终端屏幕的距离的方式可以根据需要进行设置,例如可以包括以下方式的一种或多种:1、降低终端屏幕中当前显示的信息的清晰度;2、对终端屏幕中当前显示的信息进行模糊处理,3、降低所述终端的显示屏的亮度;4、发出警示音或者显示醒目的图标,例如弹出提示框、黄色感叹号、爆炸图案等图形;5、闪烁所述显示屏的背光;6、将终端显示屏的色彩或者信息显示界面的色彩变更为特定色彩,例如黄色。
在一个实施例中,在进行模糊处理时,可以是对全部当前信息进行模糊处理,也可以是对部分当前信息进行模糊处理,例如可以是对图片进行模糊处理,不对文字进行模糊处理。模糊处理会使得模糊后的当前信息与模糊之前的当前信息相比,模糊后的当前信息对应的模糊度更高,使得用户不容易看清模糊处理后的当前信息。模糊处理的方式可以根据需要设置,例如可以是在当前信息上添加一些信息,例如可以是在当前信息上叠加一张半透明或者不透明的图片。对于图像类型的当前信息,可以对图像对应的像素值进行处理,减少图像的细节,得到模糊后的图片。
在一个实施例中,对于图像,可以获取图像中各个需要模糊处理的像素点对应的参考像素点,根据参考像素点得到需要模糊处理的像素点对应的模糊像素值,将模糊像素值作为模糊处理得到的模糊图像中该像素点的像素值。参考像素点可以包括与需要模糊处理的像素点的距离小于预设像素距离的像素点。例如,对于像素点A,可以将与像素点A相邻的像素点作为参考像素点,计算参考像素点的平均值作为A像素点的模糊像素值。这样,可以使得图像的细节丢失,从而达到模糊的效果。
步骤S206,当提示用户调整与终端屏幕的距离后,监测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤。
具体地,预设时长可以根据需要设置,例如可以为4秒。如果监测到用户与终端屏幕的当前距离大于第一预设距离时,则停止执行利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,并采用计时器进行计时,当到达预设时长时,如果终端的终端屏幕还处于信息显示状态,则再次利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测。
在一个实施例中,预设时长可以大于2秒但小于60秒。在这个时长范围内,既可以在人脸与终端屏幕的距离小于或等于第一预设距离时,及时提示用户调整与终端屏幕的距离,使得用户及时注意到与屏幕的距离过小,又不会频繁启动追踪测距系统,因此可以进一步节省终端资源。
如图3B所示,终端的视频应用中正在播放“xx儿歌01”视频,如果检测到用户与终端屏幕的当前距离小于或等于第一预设距离时,可以在当前视频的上方显示文字信息“靠太近我就会变得模糊哦,请远点看~”,这样,可以提示用户提高与终端屏幕的距离。当然还可以采用其他方式提醒用户提高与终端屏幕的距离。例如,采用语音方式等方式进行提醒。
在一个实施例中,如图4所示,为在其他测试条件均相同的情况下,持续使用追踪测距系统、在不同预设时长启动实施追踪测距系统以及不采用追踪测距系统(即护眼模式)对用户的人脸与终端屏幕的距离进行检测,在播放一集预设的45分钟的视频后,对应的剩余电量的示意图。如图4可以看出,如果持续采用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,则剩余电量仅为77%,电量消耗过大。而当预设时长分别为1S、2S、3S以及4S时,剩余电量依次为81%、85%、88%以及89%,故预设时长可以为3S,这样,既不会耗费过多的电量,又能够及时进行检测。其中,测试环境相同是指:相同的型号相同配置的首次使用的手机、起始电量均为100%、相同的手机参数设置例如视频播放的声音以及亮度保持一致,且除了播放视频之外没有启用其他额外的功能的情况。
上述控制方法,通过在人脸与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离,能够提醒用户保持与终端的距离,保护视力,而且在检测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,直至到达预设时长时,再重新利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,在减少监测任务,节省终端的资源的同时,也能够使提示的时机与用户与终端的当前距离变化协调。
例如,如果采用ARKit框架进行距离检测,会调用终端的GPU(GraphicsProcessing Unit,图形处理器),如果实时通过摄像头检测人脸的移动等,则会不断的调用GPU,这个过程非常的耗电。而如果每隔预设时长采用ARKit框架进行距离检测,则调用终端的CPU的次数将会大大减少,因此可以节省终端的电量。
在一个实施例中,当用户与终端屏幕的当前距离小于或等于第一预设距离时,继续调用追踪测距系统对用户的人脸与终端屏幕的距离进行检测。
具体地,在检测到用户与终端屏幕的当前距离小于或等于第一预设距离期间,可以实时不间断的采用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,此时,追踪系统可以实时跟踪人脸的位置,每隔预设频率采集一次图像帧,例如以30次每秒的频率采集图像帧进行距离检测。这样,在用户与终端屏幕的当前距离小于或等于第一预设距离期间,可以实时检测用户的人脸与终端屏幕的当前距离的变化,因此在用户与终端屏幕的当前距离大于第一预设距离时,能够及时的停止采用追踪测距系统对人脸进行检测。
在一个实施例中,提示用户调整与终端屏幕的距离包括对终端屏幕中显示的当前信息进行处理,对终端屏幕中显示的当前信息进行处理的方式包括以下方式的至少一种:对终端屏幕中显示的当前信息进行闪烁处理、对终端屏幕中显示的当前信息进行分割、对终端屏幕中显示的当前信息进行模糊处理、对终端屏幕中显示的当前信息进行变形以及在终端屏幕中显示的当前信息上添加干扰元素。
具体地,闪烁处理是指使信息进行闪烁,闪烁的频率可以是随机的也可以是预设的,例如每2秒中闪烁一次。对信息进行分割是指将信息分割为多个部分,对终端屏幕中显示的当前信息进行变形是指对信息进行扭曲变形,例如对文字进行钢性变形或非线性变形等等,当然也可以是对图像进行变形,例如对图像中的人物进行变形。在终端屏幕中显示的当前信息上添加干扰元素是指在信息的上文增加一些干扰人眼浏览信息的元素,例如线条或者圆形等。
在一个实施例中,当对终端屏幕中显示的当前信息进行处理后后,监测到用户与终端屏幕的当前距离大于第一预设距离时,终端屏幕中显示的当前信息恢复清晰显示。
具体地,在监测到用户与终端屏幕的当前距离大于第一预设距离时,则不会对终端屏幕中显示的当前信息进行处理,使得终端屏幕中显示的当前信息恢复清晰显示。恢复清晰显示是指当前信息是正常显示的信息,即可以不再对该当前信息进行处理,以去除处理的效果,使得当前信息恢复正常显示。例如,去除在信息上添加的干扰元素,不对信息进行变形或者不对信息进行闪烁处理等。
在一个实施例中,如果对终端屏幕中显示的当前信息进行处理后,当前信息不会变化,例如当前信息是一段文字或者播放的信息已经暂停,则终端屏幕中显示的当前信息恢复清晰显示可以是指对当前信息去除处理的效果,例如去掉覆盖在当前信息上的半透明或者不透明图片。如果对终端屏幕中显示的当前信息进行处理后,当前信息随着时间在不断变化,则终端屏幕中显示的当前信息恢复清晰显示是指对于当前显示的当前信息,不进行处理。例如,在进行直播时,如果检测到用户与终端屏幕的当前距离小于或等于第一预设距离,直播的视频也不会暂停,但可以不断的对直播中的视频图像进行模糊处理,使得播放的当前视频图像是模糊显示的,当监测到用户与终端屏幕的当前距离大于第一预设距离时,则停止进行模糊处理,使得播放的当前视频图像是清晰显示的。可以理解,这里的恢复清晰显示是相对于模糊处理的图像而言的,即当前图片恢复清晰显示可以是指这一个当前图片相对于对该当前图片进行模糊处理后得到的图片的清晰度高,但对该图像的分辨率可以不做要求,具体根据图像本身的分辨率确定,并不限制清晰显示的图像必须大于预设分辨率。
在一个实施例中,终端屏幕中显示的当前信息包括图像,例如视频中的图像。对于图像类型的信息,提示用户调整与终端屏幕的距离包括对终端屏幕中显示的当前信息进行模糊处理,对终端屏幕中显示的当前信息进行模糊处理包括:获取终端屏幕中显示的当前图像,获取当前图像中的当前像素点,根据当前像素点的位置获取位于预设范围内的多个参考像素点;根据多个参考像素点的像素值计算得到模糊像素值,将模糊像素值作为模糊处理得到的模糊图像中当前像素点的像素值。
具体地,当前像素点是指计算模糊像素值时当前的像素点,由于当前图像包括多个像素点,其中可以有多个像素点需要计算模糊像素值,因此当计算A像素点对应的模糊像素值时,A像素点为当前像素点,当计算B像素点对应的模糊像素值时,B像素点为当前像素点。预设范围可以根据需要设置。例如参考像素点可以是与当前像素点的位置的距离小于预设像素距离的像素点,也可以是处于当前像素点左上方的像素点等。预设范围可以为一个范围或多个范围。例如参考像素点可以是位于当前像素点的两个对角线的延长线上的像素点。模糊像素值是指对当前图像进行模糊处理得到的模糊图像中,该当前像素点的像素值。参考像素点是计算当前像素点的模糊像素值所要参考的像素点。模糊像素值是根据参考像素点的像素值统计得到的,例如可以是参考像素点的平均值、中位数或者众数等。
在一个实施例中,模糊像素值是根据参考像素点的像素值以及对应的权重进行加权求和得到的。参考像素点对应的权重可以是固定的也可以是根据参考像素点与当前像素点的距离确定。其中参考像素点与当前像素点的距离与权重可以成正相关关系也可以成负相关关系。如果成正相关关系,则参考像素点与当前像素点的距离越大,则权重越大,例如如果参考像素点与当前像素点为相邻的像素点,则权重可以为0.02,如果参考像素点为与当前像素点距离一个像素点的像素点,则权重可以为0.1。如果成负相关关系,则参考像素点与当前像素点的距离越大,则权重越小,例如,如果参考像素点与当前像素点为相邻的像素点,则权重可以为0.1,如果参考像素点为与当前像素点距离一个像素点的像素点,则权重可以为0.02。
在一个实施例中,根据当前像素点的位置获取位于预设范围内的多个参考像素点包括:根据用户与终端屏幕的当前距离获取当前像素点对应的目标参考像素距离,其中,目标参考像素距离与用户与终端屏幕的当前距离成负相关关系;将与当前像素点的距离小于目标参考像素距离的像素点作为参考像素点。
具体地,负相关关系是指:两个变量变动方向不同,一个变量由大到小变化时,另一个变量由小到大变化。正相关关系是指:两个变量变动方向相同,一个变量由大到小变化时,另一个变量由大到小变化。例如,假设包括两个变量a与b,则如果b变大时,a也变大,则a与b为正相关关系。如果b变小时,a变大,则a与b为负相关关系。参考像素距离与用户与终端屏幕的当前距离成负相关关系,则:用户与终端屏幕的当前距离越大,对应的目标参考像素距离越小;用户与终端屏幕的当前距离越小,则对应的目标参考像素距离越大。当将与当前像素点的距离小于目标参考像素距离的像素点作为参考像素点时,如果目标参考像素距离变大,则参考像素点的数量也变多,如果目标参考像素距离变小,则参考像素点的数量也变少。由于从整体上看,所参考的参考像素点越多,图像会失去更多的细节,因此模糊处理得到的图像的模糊度是越大的,因此在用户与终端屏幕的当前距离小于或等于第一预设距离的情况下,随着用户与终端屏幕的当前距离变小,当前信息的模糊度变大,用户越来越看不清当前显示的图片,从而使用户自觉远离终端,提高用户与终端屏幕的距离,更好地保护用户的视力。
在一个实施例中,提示用户调整与终端屏幕的距离包括对终端屏幕中显示的当前信息进行模糊处理,对终端屏幕中显示的当前信息进行模糊处理包括:根据用户与终端屏幕的当前距离确定对应的目标模糊处理参数,根据目标模糊处理参数对终端中显示的当前信息进行模糊处理,其中,目标模糊处理参数对应的模糊度与用户与终端屏幕的当前距离成负相关关系。
具体地,模糊度指对当前信息进行模糊的程度,模糊度越大,则越模糊。可以通过调整目标模糊处理参数调整模糊度。如果当前信息是文字,则可以调整文字对应的分辨率。如果当前信息是图片,则目标模糊处理参数可以是参考像素点的范围,参考像素点越多,则像素点的细节会丢失的更多,因此模糊度会越大。通过模糊处理参数对应的模糊度与用户与终端屏幕的当前距离成负相关关系,可以在用户与终端屏幕的当前距离小于或等于第一预设距离的情况下,随着用户与终端屏幕的当前距离变小,当前信息的模糊度变大,用户越来越看不清当前显示的图片,从而使自觉远离终端,提高用户与终端屏幕的距离,更好地保护用户的视力。
在一个实施例中,控制方法还包括:当用户与终端屏幕的当前距离小于或等于第二预设距离时,自动停止播放所述终端屏幕中播放的当前信息,直至监测到用户与终端屏幕的当前距离大于第二预设距离时,从停止播放的位置开始继续播放当前信息。
具体地,第二预设距离可以根据需要进行设置。例如可以为30厘米。第二预设距离可以与第一预设距离相同也可以不同。对于连续播放的信息,在检测到用户与终端屏幕的当前距离小于或等于第二预设距离时,自动停止播放当前的信息,直到监测到用户与终端屏幕的当前距离大于第二预设距离时,再从停止播放的位置开始继续播放当前信息,因此可以自适应的根据用户与终端屏幕的距离播放以及停止播放视。例如,如果是在播放视频时,检测到用户与终端屏幕的当前距离小于或等于第二预设距离,则暂停该视频的播放。当监测到用户与终端屏幕的当前距离大于第二预设距离时,继续播放该视频。
在一个实施例中,第二预设距离小于第一预设距离。这样,使得在对当前信息进行模糊处理后,如果用户的人脸与终端屏幕的当前距离继续降低,自动停止播放信息,增强提示用户提高人脸与终端屏幕的距离的提示强度,保护视力。
在一个实施例中,当用户与终端屏幕的当前距离小于或等于第一预设距离时,调用语音提醒接口播放语音提醒信息,语音提醒信息包括护眼提醒信息。
具体地,护眼提醒信息用于提示用户保护视力。当然语音提醒信息还可以包括其他信息,例如信息观看时长等信息。在当用户与终端屏幕的当前距离小于或等于第一预设距离时,通过播放语音提醒信息的方式,进一步提醒用户提高人脸与屏幕的距离。例如,语音提醒信息可以为“离屏幕距离过近,请离屏幕远一点儿”。
在一个实施例中,当用户与终端屏幕的当前距离小于或等于第一预设距离时,还可以获取权限验证提示信息,当用户权限验证通过时,终端屏幕中显示的当前信息恢复清晰显示。例如,当用户与终端屏幕的当前距离小于或等于第一预设距离时,显示获取指纹的提示信息,当接收到的指纹为预设指纹时,终端屏幕中显示的当前信息恢复清晰显示。
在一个实施例中,如图5A所示,步骤S202即在终端的终端屏幕处于信息显示状态时,利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离的步骤具体可以包括以下步骤:
步骤S502,在终端的终端屏幕处于信息显示状态时,获取终端屏幕中显示的当前信息对应的目标属性信息,目标属性信息包括根据当前信息对应的观看对象的年龄进行分类得到的属性信息。
具体,当前信息对应的目标属性信息用于描述当前信息的属性。观看对象是指观看信息的对象。信息可以根据观看对象的年龄信息进行分类。例如信息可以根据观看对象的年龄分为少儿视频以及非少儿视频,少儿视频是指该视频是针对少儿制作的视频,适宜观看对象是年龄小于预设年龄的少儿。
在一个实施例中,目标属性信息除了包括根据当前信息对应的观看对象的年龄进行分类得到的属性信息之外,还可以包括其他的属性信息,例如目标属性信息可以包括当前信息的题材,是属于喜剧题材的视频片还是犯罪类型的视频。
步骤S504,当目标属性信息满足预设类型时,进入护眼模式快速开启模式,其中,在护眼模式快速开启模式下,终端自动开启护眼模式或者自动展示护眼模式开启提示信息。
具体地,预设类型可以根据需要设置,预设类型可以有一个或多个。多个是指两个以上,包括多个。如果预设类型为多个,则可以是满足其中的一个或多个类型为满足。护眼模式开启提示信息用于提示用户是否开启护眼模式。如果用户根据护眼模式开启信息输入开启护眼模式对应的操作,则终端开启护眼模式。护眼模式快速开启模式下,终端也可以自动开启护眼模式。其中,自动开启护眼模式是指开启护眼模式的指令是自动触发的,无需用户的操作。但是如果在开启护眼模式的过程中,还需要其他的操作,则可以是手动也可以是自动的。例如,如果自动触发开启护眼模式的指令后,需要用户输入账号登录,则可以接收用户手动输入的账号和密码。如果自动触发启护眼模式的指令后,需要用户点击“允许应用访问摄像头”对应的按键,则可以在终端的屏幕上显示点击“允许应用访问摄像头”对应的按键,当接收到用户的点击操作时,开启护眼模式。
例如,当当前信息对应的目标属性信息为少儿视频类型,而预设类型为少儿视频时,则进入护眼模式快速开启模式。如图5B所示,在护眼模式快速开启模式下,如果该终端从未开启过护眼模式,则可以显示护眼模式的提示框,提醒用户是否需要开启护眼模式,如果接收到用户点击“开启”的操作,则开启护眼模式。如果终端开启过护眼模式,则可以自动触发开启护眼模式的指令。如果当前信息对应的目标属性信息为非少儿视频类型,则用户可以点击图5B中视频上方的设置控件“....”,在视频的上方显示设置界面,设置界面可以如图5C中视频上方的文本框所示,在设置界面上有“护眼模式”对应的开关,点击该开关后,进入护眼模式。
在接收到开启护眼模式的指令时,如果该应用没有访问摄像头的权限,如图5D所示,则可以弹框提醒用户开启摄像头权限。如果接收到点击“不允许的操作”,则可以如图5E所示,提示另一提醒框,提示用户去摄像头权限设置页面设置允许视频应用拥有摄像头权限。
步骤S506,当护眼模式开启时,利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离。
具体地,在护眼模式下,进入利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离的步骤,执行本发明各个实施例提供的控制方法。本发明实施例中,通过在播放预设类型的信息的情况下,进入护眼模式快速开启模式,能够在播放特定年龄段对应的信息时,提高开启护眼模式的效率以及护眼模式的使用率,更好的保护特定年龄段的观看对象的视力。
在一个实施例中,如图6所示,利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离具体可以包括以下步骤:
步骤S602,开启会话控制对象,会话控制对象配置有人脸追踪对应的配置信息。
具体地,会话控制(session)对象是用于跟踪会话过程的对象,用于存储特定会话所需的信息以及控制对应的流程。会话是指终端中的交互系统进行通讯的过程。会话控制对象中配置有人脸追踪对应的配置信息,因此可以对人脸进行追踪。
步骤S604,会话控制对象控制摄像头进行图像采集获取图像帧。
步骤S606,对图像帧进行人脸检测,当图像帧中出现人脸时,在人脸设置虚拟锚点,根据虚拟锚点进行人脸跟踪,根据跟踪的人脸的当前位置以及摄像头的位置确定用户与终端屏幕的当前距离。
具体地,虚拟锚点(Anchor)是用于确定位置的。摄像头是深度摄像头,图像帧的采集是实时的,如果图像帧中出现人脸,则终端可以创建虚拟锚点对象,添加到会话中。这样,虚拟锚点可以跟踪人脸,计算虚拟锚点的位置与摄像头位置的距离,作为用户的人脸与终端屏幕的距离。当人脸离开摄像头识别区域,则可以移除虚拟锚点,待摄像头识别到人脸时,再继续追踪人脸。
在一个实施例中,会话控制(session)对象可以是ARKit中的ARSession。例如可以是ARKit中的ARSCNView辅助视图中的ARSession,ARSession是管理增强现实体验所需的设备相机和运动处理的共享对象。在初始化ARSession时,可以加上人脸追踪对应的配置,例如FaceTrackingConfiguration配置。这样,在终端的终端屏幕处于信息显示状态时,开启ARSession,由于加上了人脸追踪对应的配置,因此ARSession的开启会自动触发摄像头进行人脸识别即跟踪。当有人脸出现在摄像头识别区域时,摄像头可以捕捉到人脸,并记录跟踪人脸在ARKit坐标系内的实时变化。
其中,ARSCNView继承于SceneKit框架中的SCNView,而SCNView又继承于UIKit框架中的UIView,UIkit是一款轻量级、模块化的前端框架,可快速构建强大的web前端界面,SceneKit是描述创建3D游戏并将3D内容添加到应用程序的框架。UIView在屏幕上定义了一个矩形区域和管理区域内容的接口。在运行时,一个视图对象控制该区域的渲染。SCNView是显示3D(three-dimensional,三维)模型对象的视图。ARSCNView视图有三个特点1、在设备相机上获取画面,并渲染到3D场景下进行展示;2、将ARKit三维坐标系与SceneKit的三维坐标系之间进行转换;3、将SceneKit上虚拟出来的物体在真实世界的坐标系中展示,并进行追踪。因此,ARSession中,加上FaceTrackingConfiguration对应的配置,关闭WorldTrackingConfiguration的配置,则可以进行人脸距离检测,且无需开启增强现实的功能。
在一个实施例中,如图7A所示,控制方法还可以包括以下步骤:
步骤S702,获取控制方法对应的业务实现模块,业务实现模块包括业务接口、实现控制方法的目标子模块集合以及子模块运行逻辑。
具体地,业务实现模块是用于实现控制方法的模块。业务接口用于供展示信息的应用调用,例如视频播放应用的播放模块调用。目标子模块集合是用于实现控制方法所有的子模块的集合。子模块运行逻辑中包括了子模块之间的运行顺序以及信息的流向。
步骤S704,将业务实现模块与终端中的应用程序的信息显示模块进行关联。
具体地,通过业务实现模块与终端中的应用程序的信息显示模块进行关联,这样,当信息显示模块运行时,可以调用业务接口,触发执行本发明实施例提供的控制方法。
步骤S706,当信息显示模块运行时,信息显示模块调用业务接口,触发根据子模块运行逻辑运行业务实现模块的目标子模块的步骤。
步骤S708,若对终端屏幕中显示的当前信息进行模糊处理,则将模糊处理得到的当前信息通过业务接口发送到信息显示模块,信息显示模块显示模糊处理得到的当前信息。
具体地,信息显示模块运行用于显示信息。可以是信息显示模块运行时,自动调用业务接口,也可以是信息显示模块运行且护眼模式启动时,信息显示模块调用业务接口。当信息显示模块调用业务接口要求获取对应的需要显示的信息时,触发根据子模块运行逻辑运行业务实现模块的目标子模块的步骤,以实现控制方法,因此,当用户与终端屏幕的当前距离小于或等于第一预设距离时,业务实现模块中的子模块对终端屏幕中显示的当前信息进行模糊处理,得到模糊处理后的信息,通过业务接口传输到信息显示模块进行显示。
业务实现模块的架构可以如图7B所示,子模块包括底层距离检测模块、数据处理模块、业务接口实现模块、外部接口接口协议对应的模块、数据持有模块以及语音提醒模块。底层距离检测模块用于检测人脸与终端屏幕的距离,其中底层距离检测模块可以将人脸距摄像头的距离作为检测人脸与终端屏幕的距离。数据处理模块将人脸与终端屏幕的当前距离数据转化为上层例如应用能够理解的状态数据,例如状态数据可以是模糊处理或者不进行模糊处理。业务接口实现模块中提供一系列接口供外部的业务模块调用,其中外部是指展示信息的应用。其中,业务接口实现模块中提供一系列接口例如可以包括开始人脸距离检测、停止人脸距离检测、开启语音提醒以及停止语音提醒等接口。外部接口协议对应的模块提供暴露给外部调用的方法列表。暴露给外部调用的方法列表例如可以包括是否进入护眼模式的方法、语音提醒播放与暂停的方法、检查护眼模式开关是否开启的方法以及当前终端是否支持护眼模式的方法。数据持有模块存储整体业务的需存储的本地持有化信息,本地持有化信息可以包括护眼模式开关当前的状态标识以及定时器的时间间隔等信息。语音提醒模块封装了语音SDK例如Apollo语音SDK,给业务接口提供语音播放的实现。语音SDK(Software Development Kit,软件开发工具包)可以是任意提供语音功能的SDK,其中,Apollo是一款自主开发的语意SDK的名称。当信息显示模块利用暴露给外部调用的方法列表得到已进入护眼模式的信息时,调用开始进行人脸检测的接口,触发底层距离模块根据定时间隔对用户的人脸与终端屏幕的距离进行检测,当用户与终端屏幕的当前距离小于或等于第一预设距离时,数据处理模块判断需要对信息进行模糊处理,业务接口实现模块可以调用模糊处理对应的接口对当前信息进行模糊处理,并发送模糊处理后的信息到信息显示模块进行显示,以及调用语音接口进行语音提醒。
本发明实施例中,通过获取业务实现模块,并将业务实现模块与信息显示模块关联,信息显示模块运行时,调用业务实现模块实现控制方法,因此可以实现业务实现模块与信息显示模块的解耦,信息显示应用无需了解业务实现模块的运行逻辑以及相关配置,也可以利用业务实现模块实现控制方法。
参见图8,以下以在视频播放应用播放视频时,采用ARKit框架进行距离检测对本发明实施例提供的控制方法进行说明。
1、当终端通过视频应用播放视频时,若播放的当前视频为少儿视频,则可以自动开启护眼模式,如果非少儿视频,如果接受到用户点击“设置”界面上护眼模式对应的控件的操作,则开启护眼模式。
2、在护眼模式下,定时器计算时长,当预设时长到达时,启动ARSession,对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离。
3、终端判断用户与终端屏幕的当前距离是否位于安全距离,其中安全距离是指用户在观看信息时,在不触发对信息进行模糊处理的前提下,人脸至屏幕的最小距离。
4、如果用户与终端屏幕的当前距离位于安全距离,则暂停利用ARSession对用户的人脸与终端屏幕的距离进行检测,使ARsession进入休眠模式,返回步骤2,即启用定时器计算时长,直至定时器确定预设时长到达时,启动ARSession对用户的人脸与终端屏幕的距离进行检测。
5、如果用户与终端屏幕的当前距离没有位于安全距离,则对视频的当前图像进行模糊处理以及暂停视频,并继续利用ARSession对用户的人脸与终端屏幕的距离进行检测,根据检测得到距离动态调整(即回调)用户的人脸与终端屏幕的当前距离,返回步骤3,直至用户与终端屏幕的当前距离位于安全距离时,终端屏幕中显示的当前视频恢复清晰显示,并继续播放当前视频,并返回步骤2。
6、如果接收到关闭护眼模式对应的操作以及当停止播放视频时,退出护眼模式。
如图9所示,在一个实施例中,提供了一种控制装置,该控制装置可以集成于上述的终端110中,具体可以包括距离检测模块902、距离调整提示模块904以及停止检测及返回模块906。
距离检测模块902,用于在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离;
距离调整提示模块904,用于当用户与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离;
停止检测及返回模块906,用于当提示用户调整与终端屏幕的距离后,监测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回执行利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤。
在其中一个实施例中,控制装置还包括:调用模块,用于当用户与终端屏幕的当前距离小于或等于第一预设距离时,继续调用追踪测距系统对用户的人脸与终端屏幕的距离进行检测。
在其中一个实施例中,提示用户调整与终端屏幕的距离包括对终端屏幕中显示的当前信息进行处理,对终端屏幕中显示的当前信息进行处理的方式包括以下方式的至少一种:对终端屏幕中显示的当前信息进行闪烁处理、对终端屏幕中显示的当前信息进行分割、对终端屏幕中显示的当前信息进行模糊处理、对终端屏幕中显示的当前信息进行变形以及在终端屏幕中显示的当前信息上添加干扰元素。
在其中一个实施例中,装置还包括:恢复模块,用于当当对终端屏幕中显示的当前信息进行处理后后,监测到用户与终端屏幕的当前距离大于第一预设距离时,终端屏幕中显示的当前信息恢复清晰显示。
在其中一个实施例中,所终端屏幕中显示的当前信息包括图像,距离调整提示模块用于对终端屏幕中显示的当前信息进行模糊处理,距离调整提示模块904包括:
参考像素点获取单元,用于获取终端屏幕中显示的当前图像,获取当前图像中的当前像素点,根据当前像素点的位置获取位于预设范围内的多个参考像素点。
模糊像素值计算单元,用于根据多个参考像素点的像素值计算得到模糊像素值,作为模糊处理得到的模糊图像中当前像素点的像素值。
在其中一个实施例中,参考像素点获取单元用于:
根据用户与终端屏幕的当前距离获取当前像素点对应的目标参考像素距离,其中,目标参考像素距离与用户与终端屏幕的当前距离成负相关关系。
将与当前像素点的距离小于目标参考像素距离的像素点作为参考像素点。
在一个实施例中,终端屏幕中显示的当前信息包括文字,提示所述用户调整与终端屏幕的距离包括以下方式的至少一种:对终端屏幕中显示的当前文字进行闪烁处理、对终端屏幕中显示的当前文字进行分割、对终端屏幕中显示的当前文字进行变形以及在终端屏幕中显示的当前文字上添加干扰元素。
在其中一个实施例中,距离调整提示模块904用于:根据用户与终端屏幕的当前距离确定对应的目标模糊处理参数,根据目标模糊处理参数提示用户调整与终端屏幕的距离,其中,目标模糊处理参数对应的模糊度与用户与终端屏幕的当前距离成负相关关系。
在其中一个实施例中,距离检测模块902包括:
属性信息获取单元,用于在终端的终端屏幕处于信息显示状态时,获取终端屏幕中显示的当前信息对应的目标属性信息,目标属性信息包括根据当前信息对应的观看对象的年龄进行分类得到的属性信息;
快速开启模式进入单元,用于当目标属性信息满足预设类型时,进入护眼模式快速开启模式,其中,在护眼模式快速开启模式下,终端自动开启护眼模式或者自动展示护眼模式开启提示信息;
距离检测单元,用于当护眼模式开启时,利用终端中的追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离。
在其中一个实施例中,距离检测模块902用于:
开启会话控制对象,会话控制对象配置有人脸追踪对应的配置信息;
会话控制对象控制摄像头进行图像采集获取图像帧;
对图像帧进行人脸检测,当图像帧中出现人脸时,在人脸设置虚拟锚点,根据虚拟锚点进行人脸跟踪,根据跟踪的人脸的当前位置以及摄像头的位置确定用户与终端屏幕的当前距离。
在其中一个实施例中,控制装置还包括:
停止以及继续播放控制模块,用于当用户与终端屏幕的当前距离小于或等于第二预设距离时,自动停止播放终端屏幕中播放的当前信息,直至监测到用户与终端屏幕的当前距离大于第二预设距离时,从停止播放的位置开始继续播放当前信息。
在其中一个实施例中,控制装置还用于:
获取控制装置对应的业务实现模块,业务实现模块包括业务接口、实现控制装置的目标子模块集合以及子模块运行逻辑;
将业务实现模块与终端中的应用程序的信息显示模块进行关联;
当信息显示模块运行时,信息显示模块调用业务接口,触发根据子模块运行逻辑运行业务实现模块的目标子模块的步骤;
若对终端屏幕中显示的当前信息进行模糊处理,则将模糊处理得到的当前信息通过业务接口发送到信息显示模块,信息显示模块显示模糊处理得到的当前信息。
在其中一个实施例中,控制装置还包括:提醒模块,用于当用户与终端屏幕的当前距离小于或等于第一预设距离时,调用语音提醒接口播放语音提醒信息,语音提醒信息包括护眼提醒信息。
图10示出了一个实施例中计算机设备的内部结构图。该计算机设备具体可以是图1中的终端110。如图10所示,该计算机设备包括该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、输入装置和显示屏。其中,存储器包括非易失性存储介质和内存储器。该计算机设备的非易失性存储介质存储有操作系统,还可存储有计算机程序,该计算机程序被处理器执行时,可使得处理器实现控制方法。该内存储器中也可储存有计算机程序,该计算机程序被处理器执行时,可使得处理器执行控制方法。计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,本申请提供的控制装置可以实现为一种计算机程序的形式,计算机程序可在如图10所示的计算机设备上运行。计算机设备的存储器中可存储组成该控制装置的各个程序模块,比如,图9所示的距离检测模块902、距离调整提示模块904以及停止检测及返回模块906。各个程序模块构成的计算机程序使得处理器执行本说明书中描述的本申请各个实施例的控制方法中的步骤。
例如,图10所示的计算机设备可以通过如图所示的控制装置中的距离检测模块902在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,得到用户与终端屏幕的当前距离;通过距离调整提示模块904当用户与终端屏幕的当前距离小于或等于第一预设距离时,提示用户调整与终端屏幕的距离;通过停止检测及返回模块906当提示用户调整与终端屏幕的距离后,监测到用户与终端屏幕的当前距离大于第一预设距离时,停止利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测,直至到达预设时长时,返回在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与终端屏幕的距离进行检测的步骤。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述控制方法的步骤。此处控制方法的步骤可以是上述各个实施例的控制方法中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时,使得处理器执行上述控制方法的步骤。此处控制方法的步骤可以是上述各个实施例的控制方法中的步骤。
应该理解的是,虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (15)

1.一种控制方法,所述方法包括:
在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离;
当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,提示所述用户调整与所述终端屏幕的距离;
当提示所述用户调整与所述终端屏幕的距离后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,停止所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,继续调用所述追踪测距系统对所述用户的人脸与所述终端屏幕的距离进行检测。
3.根据权利要求1所述的方法,其特征在于,所述提示所述用户调整与所述终端屏幕的距离包括对所述终端屏幕中显示的当前信息进行处理,所述对所述终端屏幕中显示的当前信息进行处理的方式包括以下方式的至少一种:
对所述终端屏幕中显示的当前信息进行闪烁处理、对所述终端屏幕中显示的当前信息进行分割、对所述终端屏幕中显示的当前信息进行模糊处理、对所述终端屏幕中显示的当前信息进行变形以及在所述终端屏幕中显示的当前信息上添加干扰元素。
4.根据权利要求3所述的方法,其特征在于,所述终端屏幕中显示的当前信息包括图像,所述对所述终端屏幕中显示的当前信息进行模糊处理包括:
获取所述终端屏幕中显示的当前图像,获取所述当前图像中的当前像素点,根据所述当前像素点的位置获取位于预设范围内的多个参考像素点;
根据所述多个参考像素点的像素值计算得到模糊像素值,将所述模糊像素值作为模糊处理得到的模糊图像中所述当前像素点的像素值。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
当对所述终端屏幕中显示的当前信息进行处理后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,所述终端屏幕中显示的当前信息恢复清晰显示。
6.根据权利要求4所述的方法,其特征在于,所述根据所述当前像素点的位置获取位于预设范围内的多个参考像素点包括:
根据所述用户与所述终端屏幕的当前距离获取所述当前像素点对应的目标参考像素距离,其中,所述目标参考像素距离与所述用户与所述终端屏幕的当前距离成负相关关系;
将与所述当前像素点的距离小于所述目标参考像素距离的像素点作为参考像素点。
7.根据权利要求3所述的方法,其特征在于,所述对所述终端屏幕中显示的当前信息进行模糊处理包括:
根据所述用户与所述终端屏幕的当前距离确定对应的目标模糊处理参数,根据所述目标模糊处理参数对所述终端屏幕中显示的当前信息进行模糊处理,其中,所述目标模糊处理参数对应的模糊度与所述用户与所述终端屏幕的当前距离成负相关关系。
8.根据权利要求1所述的方法,其特征在于,所述在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离包括:
在终端的终端屏幕处于信息显示状态时,获取所述终端屏幕中显示的当前信息对应的目标属性信息,所述目标属性信息包括根据当前信息对应的观看对象的年龄进行分类得到的属性信息;
当所述目标属性信息满足预设类型时,进入护眼模式快速开启模式,其中,在所述护眼模式快速开启模式下,所述终端自动开启护眼模式或者自动展示护眼模式开启提示信息;
当所述护眼模式开启时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离。
9.根据权利要求1所述的方法,其特征在于,所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离,包括:
开启会话控制对象,所述会话控制对象配置有人脸追踪对应的配置信息;
所述会话控制对象控制摄像头进行图像采集获取图像帧;
对所述图像帧进行人脸检测,当所述图像帧中出现人脸时,在人脸设置虚拟锚点,根据所述虚拟锚点进行人脸跟踪,根据跟踪的人脸的当前位置以及所述摄像头的位置确定所述用户与所述终端屏幕的当前距离。
10.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述用户与所述终端屏幕的当前距离小于或等于第二预设距离时,自动停止播放所述终端屏幕中播放的当前信息,直至监测到所述用户与所述终端屏幕的当前距离大于第二预设距离时,从停止播放的位置开始继续播放所述当前信息。
11.根据权利要求1所述的方法,其特征在于,所述提示所述用户调整与所述终端屏幕的距离包括:
当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,调用语音提醒接口播放语音提醒信息,所述语音提醒信息包括护眼提醒信息。
12.一种控制装置,所述装置包括:
距离检测模块,用于在终端的终端屏幕处于信息显示状态时,利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测,得到所述用户与所述终端屏幕的当前距离;
距离调整提示模块,用于当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,提示所述用户调整与所述终端屏幕的距离;
停止检测及返回模块,用于当提示所述用户调整与所述终端屏幕的距离后,监测到所述用户与所述终端屏幕的当前距离大于第一预设距离时,停止所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤,直至到达预设时长时,返回所述利用追踪测距系统对用户的人脸与所述终端屏幕的距离进行检测的步骤。
13.根据权利要求1所述的装置,其特征在于,所述装置还包括:
调用模块,用于当所述用户与所述终端屏幕的当前距离小于或等于第一预设距离时,继续调用所述追踪测距系统对所述用户的人脸与所述终端屏幕的距离进行检测。
14.一种计算机设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行权利要求1至11中任一项权利要求所述控制方法的步骤。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行权利要求1至11中任一项权利要求所述控制方法的步骤。
CN201811458612.XA 2018-11-30 2018-11-30 控制方法、装置、计算机设备和存储介质 Active CN109558008B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811458612.XA CN109558008B (zh) 2018-11-30 2018-11-30 控制方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811458612.XA CN109558008B (zh) 2018-11-30 2018-11-30 控制方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN109558008A true CN109558008A (zh) 2019-04-02
CN109558008B CN109558008B (zh) 2020-10-27

Family

ID=65868462

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811458612.XA Active CN109558008B (zh) 2018-11-30 2018-11-30 控制方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN109558008B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119630A (zh) * 2019-05-06 2019-08-13 珠海格力电器股份有限公司 电子设备的控制方法、装置、存储介质和处理器
CN110390745A (zh) * 2019-06-03 2019-10-29 浙江大华技术股份有限公司 闸机控制方法、系统、可读存储介质和设备
CN110897604A (zh) * 2019-12-26 2020-03-24 深圳市博盛医疗科技有限公司 一种减少3d视觉中三维畸变的腹腔镜系统及使用方法
CN111158481A (zh) * 2019-12-27 2020-05-15 腾讯科技(深圳)有限公司 一种提示方法、装置及计算机可读存储介质
CN111182388A (zh) * 2019-12-02 2020-05-19 广东小天才科技有限公司 一种基于智能音箱的屏幕显示控制方法及智能音箱
CN111429519A (zh) * 2020-03-27 2020-07-17 贝壳技术有限公司 三维场景显示方法、装置、可读存储介质及电子设备
CN112616046A (zh) * 2020-12-15 2021-04-06 青岛海信激光显示股份有限公司 激光投影设备及其提示方法
WO2021232827A1 (zh) * 2020-05-22 2021-11-25 北京百度网讯科技有限公司 一种控制视频播放的方法、装置、电子设备及存储介质
CN114253623A (zh) * 2021-11-19 2022-03-29 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN115356907A (zh) * 2022-08-23 2022-11-18 四川长虹电器股份有限公司 一种通过儿童手表进行视力检测的方法
CN115526809A (zh) * 2022-11-04 2022-12-27 山东捷瑞数字科技股份有限公司 一种图像处理方法、装置及电子设备和存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1467987A (zh) * 2002-06-27 2004-01-14 ŵ��ʿ�ֻ���ʽ���� 图像处理方法、图像处理程序以及储存该程序的存储媒体
CN103024163A (zh) * 2012-12-03 2013-04-03 广东欧珀移动通信有限公司 一种保护视力的处理方法、系统及移动终端
CN104052871A (zh) * 2014-05-27 2014-09-17 上海电力学院 移动终端护眼装置及方法
CN104932849A (zh) * 2014-03-21 2015-09-23 海信集团有限公司 一种设置应用场景的方法、设备和系统
CN105100899A (zh) * 2015-08-19 2015-11-25 上海斐讯数据通信技术有限公司 客户端监控电视观看模式的系统及方法
CN105357631A (zh) * 2015-11-23 2016-02-24 东莞酷派软件技术有限公司 一种终端使用时间的控制方法及相关设备
CN105472174A (zh) * 2016-01-29 2016-04-06 四川工业科技学院 一种通过控制移动终端与眼部距离的智能护眼方法
CN107256084A (zh) * 2017-05-24 2017-10-17 段杰 预防近视的处理方法及其终端
CN107454250A (zh) * 2017-07-07 2017-12-08 广东小天才科技有限公司 使用移动终端时的护眼方法、装置、移动终端及存储介质
CN107479694A (zh) * 2017-07-14 2017-12-15 广东欧珀移动通信有限公司 一种视力保护方法、装置、存储介质及移动终端

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1467987A (zh) * 2002-06-27 2004-01-14 ŵ��ʿ�ֻ���ʽ���� 图像处理方法、图像处理程序以及储存该程序的存储媒体
CN103024163A (zh) * 2012-12-03 2013-04-03 广东欧珀移动通信有限公司 一种保护视力的处理方法、系统及移动终端
CN104932849A (zh) * 2014-03-21 2015-09-23 海信集团有限公司 一种设置应用场景的方法、设备和系统
CN104052871A (zh) * 2014-05-27 2014-09-17 上海电力学院 移动终端护眼装置及方法
CN105100899A (zh) * 2015-08-19 2015-11-25 上海斐讯数据通信技术有限公司 客户端监控电视观看模式的系统及方法
CN105357631A (zh) * 2015-11-23 2016-02-24 东莞酷派软件技术有限公司 一种终端使用时间的控制方法及相关设备
CN105472174A (zh) * 2016-01-29 2016-04-06 四川工业科技学院 一种通过控制移动终端与眼部距离的智能护眼方法
CN107256084A (zh) * 2017-05-24 2017-10-17 段杰 预防近视的处理方法及其终端
CN107454250A (zh) * 2017-07-07 2017-12-08 广东小天才科技有限公司 使用移动终端时的护眼方法、装置、移动终端及存储介质
CN107479694A (zh) * 2017-07-14 2017-12-15 广东欧珀移动通信有限公司 一种视力保护方法、装置、存储介质及移动终端

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110119630A (zh) * 2019-05-06 2019-08-13 珠海格力电器股份有限公司 电子设备的控制方法、装置、存储介质和处理器
CN110390745B (zh) * 2019-06-03 2022-04-08 浙江大华技术股份有限公司 闸机控制方法、系统、可读存储介质和设备
CN110390745A (zh) * 2019-06-03 2019-10-29 浙江大华技术股份有限公司 闸机控制方法、系统、可读存储介质和设备
CN111182388A (zh) * 2019-12-02 2020-05-19 广东小天才科技有限公司 一种基于智能音箱的屏幕显示控制方法及智能音箱
CN110897604A (zh) * 2019-12-26 2020-03-24 深圳市博盛医疗科技有限公司 一种减少3d视觉中三维畸变的腹腔镜系统及使用方法
CN111158481A (zh) * 2019-12-27 2020-05-15 腾讯科技(深圳)有限公司 一种提示方法、装置及计算机可读存储介质
CN111158481B (zh) * 2019-12-27 2021-10-26 腾讯科技(深圳)有限公司 一种提示方法、装置及计算机可读存储介质
CN111429519A (zh) * 2020-03-27 2020-07-17 贝壳技术有限公司 三维场景显示方法、装置、可读存储介质及电子设备
WO2021232827A1 (zh) * 2020-05-22 2021-11-25 北京百度网讯科技有限公司 一种控制视频播放的方法、装置、电子设备及存储介质
CN112616046A (zh) * 2020-12-15 2021-04-06 青岛海信激光显示股份有限公司 激光投影设备及其提示方法
CN114253623A (zh) * 2021-11-19 2022-03-29 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN114253623B (zh) * 2021-11-19 2024-01-19 惠州Tcl移动通信有限公司 基于移动终端的屏幕放大处理方法、装置、终端及介质
CN115356907A (zh) * 2022-08-23 2022-11-18 四川长虹电器股份有限公司 一种通过儿童手表进行视力检测的方法
CN115526809A (zh) * 2022-11-04 2022-12-27 山东捷瑞数字科技股份有限公司 一种图像处理方法、装置及电子设备和存储介质
CN115526809B (zh) * 2022-11-04 2023-03-10 山东捷瑞数字科技股份有限公司 一种图像处理方法、装置及电子设备和存储介质

Also Published As

Publication number Publication date
CN109558008B (zh) 2020-10-27

Similar Documents

Publication Publication Date Title
CN109558008A (zh) 控制方法、装置、计算机设备和存储介质
US10127945B2 (en) Visualization of image themes based on image content
CN108171152A (zh) 深度学习人眼视线估计方法、设备、系统及可读存储介质
WO2021258989A1 (zh) 人脸防伪识别方法、装置、设备及存储介质
CN109325450A (zh) 图像处理方法、装置、存储介质及电子设备
CN109691054A (zh) 动画用户标识符
CN110326300A (zh) 信息处理设备、信息处理方法及程序
CN104782120A (zh) 基于面部运动的化身动画
CN109308173A (zh) 显示方法及装置、显示终端及计算机存储介质
Mahmood et al. Mobile cloud based-framework for sports applications
CN106612396A (zh) 一种拍照装置、终端及方法
Raiturkar et al. Decoupling light reflex from pupillary dilation to measure emotional arousal in videos
CN110502959A (zh) 性别判断方法、装置、存储介质及电子设备
US20140176416A1 (en) Capturing photos without a camera
CN113556603B (zh) 调整视频播放效果的方法及装置、电子设备
CN114051116A (zh) 一种驾考车辆的视频监控方法、装置以及系统
US11430158B2 (en) Intelligent real-time multiple-user augmented reality content management and data analytics system
CN112149599B (zh) 表情追踪方法、装置、存储介质和电子设备
CN109543563A (zh) 安全提示方法、装置、存储介质及电子设备
CN110543813B (zh) 一种基于场景的人脸画像、目光计数方法及系统
CN116229311B (zh) 视频处理方法、装置及存储介质
CN113763932B (zh) 语音处理方法、装置、计算机设备及存储介质
CN115484411A (zh) 拍摄参数的调整方法、装置、电子设备和可读存储介质
CN114724228A (zh) 表情生成方法、装置及电子设备、存储介质及程序产品
CN113596597A (zh) 一种游戏视频加速方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant