CN107885415A - 屏幕显示控制方法、装置及移动终端 - Google Patents

屏幕显示控制方法、装置及移动终端 Download PDF

Info

Publication number
CN107885415A
CN107885415A CN201610877948.4A CN201610877948A CN107885415A CN 107885415 A CN107885415 A CN 107885415A CN 201610877948 A CN201610877948 A CN 201610877948A CN 107885415 A CN107885415 A CN 107885415A
Authority
CN
China
Prior art keywords
display picture
terminal screen
screen
terminal
facial image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610877948.4A
Other languages
English (en)
Inventor
郑永进
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201610877948.4A priority Critical patent/CN107885415A/zh
Priority to PCT/CN2017/104451 priority patent/WO2018059552A1/zh
Publication of CN107885415A publication Critical patent/CN107885415A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

本发明提供了一种屏幕显示控制方法、装置及移动终端,其中,该方法包括:获取所述人脸图像在所述终端屏幕中的第一位置;根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动的第二位置。通过本发明,解决了相关技术中存在用户单手操作屏幕的方式每个界面需要单独定制,无法涵盖所有界面的问题,进而达到了提高用户单手操作的便捷性的效果。

Description

屏幕显示控制方法、装置及移动终端
技术领域
本发明涉及通信领域,具体而言,涉及一种屏幕显示控制方法、装置及移动终端。
背景技术
大屏幕手机在给用户带来视觉体验提升的同时,也给用户单手操控带来了诸多不便。随着5寸及以上大屏幕触控手机的普及,用户单手操作的便捷性问题也越来越显现。
相关技术中,主要通过以下方式来解决用户单手操作的便捷性问题:1)针对某些应用界面将功能按钮尽量放在屏幕下方便于用户触控;2)通过完成特定的触摸手势进入单手触控状态,平移或缩小画面供用户触控。
然而,上述方式存在以下问题:1)对每个界面需要单独定制,无法涵盖所有界面;2)需要增加操作步骤,无法自动处理,也容易误触发。
因此,相关技术中存在用户单手操作屏幕的方式每个界面需要单独定制,无法涵盖所有界面的问题。
发明内容
本发明实施例提供了一种屏幕显示控制方法、装置及移动终端,以至少解决相关技术中存在用户单手操作屏幕的方式每个界面需要单独定制,无法涵盖所有界面的问题。
根据本发明的一个实施例,提供了一种屏幕显示控制方法,包括:获取所述人脸图像在所述终端屏幕中的第一位置;根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动的第二位置。
可选地,获取所述人脸图像在所述终端屏幕中的所述第一位置之前,还包括:通过所述终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定所述参考位置。
可选地,获取所述人脸图像在所述终端屏幕中显示的所述第一位置包括:通过所述终端屏幕所在的终端的前置摄像头,获取所述人脸图像在所述终端屏幕中显示的所述第一位置。
可选地,根据所述第一位置与所述人脸图像在终端屏幕中的所述参考位置的所述相对位置,控制所述终端屏幕中所述显示画面移动的所述第二位置包括:确定与所述相对位置对应的所述终端屏幕上横向的第一向量和纵向的第二向量;根据确定的所述第一向量,控制所述显示画面的第一预设边缘横向移动至第一预设距离,其中,所述横向移动的方向与所述第一向量的方向相反;和/或,根据确定的所述第二向量,控制所述显示画面的第二预设边缘纵向移动至第二预设距离,其中,所述纵向移动的方向与所述第二向量的方向相反。
可选地,所述显示画面移动包括以下之一:所述显示画面整体平移,所述显示画面按照预设比例压缩移动,所述显示画面中的预设区域平移,所述显示画面中除所述预设区域外的其他区域按照预设比例进行压缩移动。
根据本发明的另一个实施例,提供了一种屏幕显示控制装置,包括:获取模块,用于获取所述人脸图像在所述终端屏幕中的第一位置;控制模块,用于根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动的第二位置。
可选地,所述获取模块,还用于在获取所述人脸图像在所述终端屏幕中的所述第一位置之前,通过所述终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定所述参考位置。
可选地,所述获取模块,还用于通过所述终端屏幕所在的终端的前置摄像头,获取所述人脸图像在所述终端屏幕中显示的所述第一位置。
可选地,所述控制模块包括:确定单元,用于确定与所述相对位置对应的所述终端屏幕上横向的第一向量和纵向的第二向量;控制单元,用于根据确定的所述第一向量,控制所述显示画面的第一预设边缘横向移动至第一预设距离,其中,所述横向移动的方向与所述第一向量的方向相反;和/或,用于根据确定的所述第二向量,控制所述显示画面的第二预设边缘纵向移动至第二预设距离,其中,所述纵向移动的方向与所述第二向量的方向相反。
可选地,所述显示画面移动包括以下之一:所述显示画面整体平移,所述显示画面按照预设比例压缩移动,所述显示画面中的预设区域平移,所述显示画面中除所述预设区域外的其他区域按照预设比例进行压缩移动。
根据本发明的又一个实施例,还提供了一种移动终端,该移动终端包括前述中任一项所述的装置。
根据本发明的又一个实施例,还提供了一种存储介质。该存储介质设置为存储用于执行以下步骤的程序代码:获取所述人脸图像在所述终端屏幕中的第一位置;根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动的第二位置。
可选地,存储介质还设置为存储用于执行以下步骤的程序代码:获取所述人脸图像在所述终端屏幕中的所述第一位置之前,还包括:通过所述终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定所述参考位置。
可选地,存储介质还设置为存储用于执行以下步骤的程序代码:获取所述人脸图像在所述终端屏幕中显示的所述第一位置包括:通过所述终端屏幕所在的终端的前置摄像头,获取所述人脸图像在所述终端屏幕中显示的所述第一位置。
可选地,存储介质还设置为存储用于执行以下步骤的程序代码:根据所述第一位置与所述人脸图像在终端屏幕中的所述参考位置的所述相对位置,控制所述终端屏幕中所述显示画面移动的所述第二位置包括:确定与所述相对位置对应的所述终端屏幕上横向的第一向量和纵向的第二向量;根据确定的所述第一向量,控制所述显示画面的第一预设边缘横向移动至第一预设距离,其中,所述横向移动的方向与所述第一向量的方向相反;和/或,根据确定的所述第二向量,控制所述显示画面的第二预设边缘纵向移动至第二预设距离,其中,所述纵向移动的方向与所述第二向量的方向相反。
可选地,存储介质还设置为存储用于执行以下步骤的程序代码:所述显示画面移动包括以下之一:所述显示画面整体平移,所述显示画面按照预设比例压缩移动,所述显示画面中的预设区域平移,所述显示画面中除所述预设区域外的其他区域按照预设比例进行压缩移动。
用户操作终端时,用户的人脸图像在终端屏幕中的位置移动与用户的操作意向,具有关联性。通过本发明,根据获取到的人脸图像在终端屏幕中的第一位置与人脸图像的参考位置,控制终端屏幕中的显示画面的移动位置,可以适用于屏幕的多种界面。因此,可以解决相关技术中存在用户单手操作屏幕的方式每个界面需要单独定制,无法涵盖所有界面的问题,达到提高用户单手操作的便捷性的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例的一种屏幕显示控制方法的移动终端的硬件结构框图;
图2是根据本发明实施例的屏幕显示控制方法的流程图;
图3是根据本发明优选实施例的手机的结构框图;
图4是根据本发明实施例优选实施例的手机初始位置正对脸部的示意图;
图5是根据本发明实施例优选实施例的手机顶边转向脸部的示意图;
图6是根据本发明实施例优选实施例的手机底边转向脸部的示意图;
图7是根据本发明实施例优选实施例的手机左侧转向脸部的示意图;
图8是根据本发明实施例优选实施例的手机右侧转向脸部的示意图;
图9是根据本发明实施例优选实施例的手机左上角转向脸部的示意图;
图10是根据本发明实施例优选实施例的手机右上角转向脸部的示意图;
图11是根据本发明实施例优选实施例的手机左下角转向脸部的示意图;
图12是根据本发明实施例优选实施例的手机右下角转向脸部的示意图;
图13是根据本发明实施例优选实施例的显示画面移动幅度和人脸图像相对中心区域偏移的关系的示意图;
图14是根据本发明实施例优选实施例的显示画面线性平移的示意图;
图15是根据本发明实施例优选实施例的显示画面线性压缩的示意图;
图16是根据本发明实施例优选实施例的显示画面平移加压缩的示意图;
图17是根据本发明优选实施例的屏幕显示控制方法的流程图;
图18是根据本发明实施例优选实施例的用户意图触摸屏幕左上区域屏幕显示控制方法的示意图;
图19是根据本发明实施例的屏幕显示控制装置的结构框图;
图20是根据本发明实施例的屏幕显示控制装置的控制模块194的结构框图;
图21是根据本发明实施例的移动终端的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
实施例1
本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例,图1是本发明实施例的一种屏幕显示控制方法的移动终端的硬件结构框图。如图1所示,移动终端10可以包括一个或多个(图中仅示出一个)处理器12(处理器12可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器14、以及用于通信功能的传输装置16。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,移动终端10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
存储器14可用于存储应用软件的软件程序以及模块,如本发明实施例中的屏幕显示控制方法对应的程序指令/模块,处理器12通过运行存储在存储器14内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器14可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器14可进一步包括相对于处理器12远程设置的存储器,这些远程存储器可以通过网络连接至移动终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置16用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端10的通信供应商提供的无线网络。在一个实例中,传输装置16包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置16可以为射频(RadioFrequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种运行于上述移动终端的屏幕显示控制方法,图2是根据本发明实施例的屏幕显示控制方法的流程图,如图2所示,该流程包括如下步骤:
步骤S202,获取人脸图像在终端屏幕中的第一位置;
步骤S204,根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动至第二位置。
通过上述步骤,根据获取到的人脸图像在终端屏幕中的第一位置与人脸图像的参考位置,控制终端屏幕中的显示画面的移动位置,解决了相关技术中存在用户单手操作屏幕的方式每个界面需要单独定制,无法涵盖所有界面的问题,提高了用户单手操作的便捷性。
可选地,人脸图像在终端屏幕中显示的参考位置可以采用多种方式多种进行确定,例如,可以通过终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定参考位置。这里预设参数可以是终端的中心位置,也可以是根据经验设定屏幕中的某一位置作为参考位置。
可选地,可以采用多种方式获取人脸图像在终端屏幕中显示的第一位置,例如,可以通过终端屏幕所在的终端的前置摄像头,获取人脸图像在终端屏幕中显示的第一位置。又例如,还可以通过其他的感知装置(例如,红外等)获取人脸图像在终端屏幕中显示的第一位置。
可选地,可以采用如下方式根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动至第二位置:确定与相对位置对应的终端屏幕上横向的第一向量和纵向的第二向量;根据确定的第一向量,控制显示画面的第一预设边缘横向移动至第一预设距离,其中,横向移动的方向与第一向量的方向相反;和/或,根据确定的第二向量,控制显示画面的第二预设边缘纵向移动至第二预设距离,其中,纵向移动的方向与第二向量的方向相反。
可选地,显示画面的移动可以包括以下之一:显示画面整体平移;显示画面按照预设比例压缩移动;显示画面中的预设区域平移,显示画面中除预设区域外的其他区域按照预设比例进行压缩移动。
基于上述实施例及优选实施方式,为说明方案的整个流程交互,在本优选实施例中,提供了一种屏幕显示控制方法,在该方法中,终端以手机为例进行说明。
用户在很多场合需要单手操控手机,按常规的握持习惯都是用大拇指触摸手机屏幕。由于大拇指长度有限,在触摸手机屏幕中间区域时会比较自如,而对于手机屏幕边缘区域往往无法触及,或者需要改变握持状态才能触及。
如果能将用户希望触及的边缘区域的内容自动移动到手机中间区域,用户只需点击中间区域即可完成操作,便会大大提高操控便捷性。
根据单手操控习惯,当用户希望点击距离拇指尖较远的边缘区域时,会将手机在原有平面基础上略微倾斜,使得该区域略靠近自己,相当于缩短了该区域与拇指尖的距离。如:希望点击手机左上角,会将左上角略转向自己。这种手机平面相对于用户脸部的变化,可以通过前置摄像头捕捉的人脸画面进行判断。即,用户希望触及某一边缘区域,在将该区域略转向自己的同时,前置摄像头捕捉的人脸画面也会随着向该区域逐渐移动。直观的体现就是开启前摄预览,将某一边缘区域略转向自己时,预览画面中的人脸就会随之往该区域平滑移动。当该移动超过一定阈值时,即可判断为用户希望触及该区域。
在本发明优选实施例中,前摄(前置摄像头)捕捉到人脸画面向某区域移动超过一定阈值后,就随之将该区域的画面及对应的触控点也逐渐向手机中间移动,便于用户触摸。
图3是根据本发明优选实施例的手机的结构框图,如图3所示,该手机包括:检测模块32和执行模块34。下面对该手机进行说明。
检测模块32利用前置摄像头进行人脸捕捉,判断用户希望触及的边缘区域。
当前摄捕捉到的人脸图像位于手机中间区域时,可以认为用户只需要正常点击手机中间区域,不需要点击边缘区域。即,此时手机平面基本正对用户脸部,如图4所示。
当前摄捕捉到的人脸图像向手机边缘区域移动且达到一定阈值时,认为用户希望点击该边缘区域,即,此时用户已按常规操作习惯略微转动手机,将该区域略微转向自己以增加拇指尖触及的可能性。该阈值可预设缺省值且可在设置中调整,达到阈值则表明该转动已超出触控中间区域时的手机抖动带来的转动,即排除误判的可能。如图5至图12为针对手机不同的边缘区域所作的示意。
当前摄捕捉到的人脸图像向手机边缘区域在超出阈值范围后移动时,执行模块执行显示画面及对应触控点的处理。
执行模块34将用户希望触及的边缘区域的显示画面及对应的触控点向手机中间区域平滑移动。用户只需点击中间区域即可完成操作。
该移动的幅度可以和前摄捕捉到的人脸图像超出阈值的程度相关。即人脸图像位置超出阈值越多,显示画面及对应的触控点移动的幅度越大;人脸图像位置超出阈值越少,显示画面及对应的触控点移动的幅度越小。人脸图像恢复到阈值范围内时,显示画面也恢复至原始无移动的状态。显示画面移动幅度和人脸图像相对中心区域偏移的关系如图13所示。
显示画面移动可以有多种方式,以下为典型的3种。
1)线性平移。即画面整体向用户希望触及的区域的反方向平移,超出屏幕的部分舍弃。如图14所示。
2)线性压缩。即画面整体向用户希望触及的区域的反方向压缩。如图15所示。
3)平移加压缩。即用户希望触及的区域的画面向反方向平移,其余区域压缩。如图16所示。
结合图4所示的手机的结构框图,对屏幕移动的过程进行说明。
图17是根据本发明优选实施例的屏幕显示控制方法的流程图,如图17所示,该流程包括如下步骤:
步骤S1702,前置摄像头捕捉人脸图像位置。
步骤S1704,判断捕捉的人脸图像位置是否超出预设阈值,如果是,执行步骤S1706,否则,执行步骤S1702。
步骤S1706,处理显示画面及对应的触控点。
下面通过具体算法对本优选实施例的屏幕显示控制方法进行说明。该算法用于计算显示画面移动幅度和人脸图像位置关系,该屏幕控制显示方法是在此算法下用户意图触摸屏幕左上区域(其他区域类似)时的判断及处理方法。
如图18所示,设前摄捕捉到的人脸图像中心坐标为(x,y),阈值为x∈[Xleft,Xright],y∈[Ydown,Yup],算法即为:
x<Xleft时,画面左边缘右移Xleft-x;
x>Xright时,画面右边缘左移x-Xright
y<Ydown时,画面下边缘上移Ydown-y;
y>Yup时,画面上边缘下移y-Yup
若手机分辨率为1080×1920,设定手机屏幕最左下角像素点坐标为(0,0),最右上角像素点坐标为(1080,1920)。则设定阈值Xleft=360,Xright=720,Ydown=600,Yup=1200。如图18所示。
用户意图触摸屏幕左上区域时的判断及处理步骤如下:
步骤1:检测模块利用前置摄像头进行人脸捕捉,缺省状态时手机正对用户脸部。对应图18中人脸图像中心坐标(x1,y1),此时360<x1<720,600<y1<1200。(x1,y1)处于阈值范围内,显示图像不需要做移动处理。
步骤2,用户逐渐将手机左上角转向自己,前摄捕捉到人脸图像也逐渐向手机左上移动并首先在x方向超出阈值。对应图18中人脸图像中心坐标(x2,y2),此时x2<360,600<y2<1200。x2值超出阈值范围,显示图像需要做右移处理。
步骤3,执行模块处理显示画面及对应的触控点向手机右侧移动。画面左边缘移动的幅度为360-x2,画面左边缘移至坐标横轴360-x2(跟随x2实时变化)处;画面纵向位置不变。即画面最左上角像素点坐标为(360-x2,1920)。
步骤4,如果用户仍无法触及步骤3中移动后的触控点,则继续将手机左上角转向自己,前摄捕捉到人脸图像也继续向手机左上移动并进而在y方向超出阈值。对应图18中人脸图像中心坐标(x3,y3),此时x3<360,y3>1200。X3、y3值均超出阈值范围,显示图像需要做右移及下移处理。
步骤5,执行模块处理显示画面及对应的触控点向手机右下移动。画面左边缘移动的幅度为360-x3,画面左边缘移至坐标横轴360-x3(跟随x3实时变化)处;画面上边缘移动的幅度为y3-1200,画面上边缘移至坐标纵轴3120-y3(跟随y3实时变化)处。即画面最左上角像素点坐标为(360-x3,3120-y3)。
步骤6,用户完成触控后,将手机屏幕逐渐恢复到原始的正对用户脸部的状态。前摄捕捉到人脸图像也逐渐向中心区域移动直至恢复到阈值范围内,显示画面也逐渐恢复至原始无移动的状态。
由于前置摄像头只需要捕捉人脸的位置,对拍摄的画面没有质量要求,即可以适当调低前摄的分辨率、帧率等配置参数,即不需要按摄像头可支持的最高分辨率和帧率等进行设置,从而可以降低亮屏操作时的整机功耗。
本优选实施例中利用用户常规操作习惯实现自动控制,不需要用户完成任何附加动作即可自动实现大屏手机的全界面触控,并通过设置阈值避免误触发。
本优选实施例中利用了人脸捕捉技术检测用户脸部相对于手机平面的位置变化,从而判断出用户意图触摸的屏幕区域,进而调节显示画面及对应的触控点以便于用户触控,适用于大屏手机。由于利用手机自带的前置摄像头进行人脸捕捉判断用户意图,不增加任何硬件成本。同时,本优选实施例的技术方案可以涵盖所有显示界面,横、竖屏操作都适用,左、右手操作都适用。通过本发明优选实施例的上述技术发难,将用户希望触及的边缘区域的内容自动移动到手机中间区域,用户只需点击中间区域即可完成操作,大大提高了操控便捷性。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
在本实施例中还提供了一种屏幕显示控制装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图19是根据本发明实施例的屏幕显示控制装置的结构框图,如图19所示,该装置包括:
获取模块192,用于获取人脸图像在终端屏幕中的第一位置;
控制模块194,连接至上述获取模块192,用于根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动的第二位置。
可选地,获取模块192,还可以用于在获取人脸图像在终端屏幕中的第一位置之前,通过终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定参考位置。
可选地,获取模块192,还可以用于通过终端屏幕所在的终端的前置摄像头,获取人脸图像在终端屏幕中显示的第一位置。
图20是根据本发明实施例的屏幕显示控制装置的控制模块194的结构框图,如图19所示,该控制模块194包括:
确定单元202,用于确定与相对位置对应的终端屏幕上横向的第一向量和纵向的第二向量;
控制单元204,连接至上述确定单元202,用于根据确定的第一向量,控制显示画面的第一预设边缘横向移动至第一预设距离,其中,横向移动的方向与第一向量的方向相反;和/或,用于根据确定的第二向量,控制显示画面的第二预设边缘纵向移动至第二预设距离,其中,纵向移动的方向与第二向量的方向相反。
可选地,显示画面移动可以包括以下之一:显示画面整体平移,显示画面按照预设比例压缩移动,显示画面中的预设区域平移,显示画面中除预设区域外的其他区域按照预设比例进行压缩移动。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
实施例3
图21是根据本发明实施例的移动终端的结构框图,如图21所示,该移动终端包括如19或20中任一所示的屏幕显示控制装置212。
实施例4
本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的程序代码:
S1,获取人脸图像在终端屏幕中的第一位置;
S2,根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动至第二位置。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:在获取人脸图像在终端屏幕中的第一位置之前,还包括:通过终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定参考位置。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:获取人脸图像在终端屏幕中显示的第一位置包括:通过终端屏幕所在的终端的前置摄像头,获取人脸图像在终端屏幕中显示的第一位置。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:
根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动至第二位置包括:
S1,确定与相对位置对应的终端屏幕上横向的第一向量和纵向的第二向量;
S2,根据确定的第一向量,控制显示画面的第一预设边缘横向移动至第一预设距离,其中,横向移动的方向与第一向量的方向相反;和/或,根据确定的第二向量,控制显示画面的第二预设边缘纵向移动至第二预设距离,其中,纵向移动的方向与第二向量的方向相反。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:显示画面的移动包括以下之一:显示画面整体平移,显示画面按照预设比例压缩移动;显示画面中的预设区域平移;显示画面中除预设区域外的其他区域按照预设比例进行压缩移动。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:获取人脸图像在终端屏幕中的第一位置;根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动的第二位置。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:获取人脸图像在终端屏幕中的第一位置之前,还包括:通过终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定参考位置。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:获取人脸图像在终端屏幕中显示的第一位置包括:通过终端屏幕所在的终端的前置摄像头,获取人脸图像在终端屏幕中显示的第一位置。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:根据第一位置与人脸图像在终端屏幕中的参考位置的相对位置,控制终端屏幕中显示画面移动的第二位置包括:确定与相对位置对应的终端屏幕上横向的第一向量和纵向的第二向量;根据确定的第一向量,控制显示画面的第一预设边缘横向移动至第一预设距离,其中,横向移动的方向与第一向量的方向相反;和/或,根据确定的第二向量,控制显示画面的第二预设边缘纵向移动至第二预设距离,其中,纵向移动的方向与第二向量的方向相反。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:显示画面移动包括以下之一:显示画面整体平移,显示画面按照预设比例压缩移动,显示画面中的预设区域平移,显示画面中除预设区域外的其他区域按照预设比例进行压缩移动。
可选地,在本实施例中,处理器根据存储介质中已存储的程序代码执行:本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (11)

1.一种屏幕显示控制方法,其特征在于,包括:
获取人脸图像在终端屏幕中的第一位置;
根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动至第二位置。
2.根据权利要求1所述的方法,其特征在于,在获取所述人脸图像在所述终端屏幕中的所述第一位置之前,还包括:
通过所述终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定所述参考位置。
3.根据权利要求1所述的方法,其特征在于,获取所述人脸图像在所述终端屏幕中显示的所述第一位置包括:
通过所述终端屏幕所在的终端的前置摄像头,获取所述人脸图像在所述终端屏幕中显示的所述第一位置。
4.根据权利要求1所述的方法,其特征在于,根据所述第一位置与所述人脸图像在终端屏幕中的所述参考位置的所述相对位置,控制所述终端屏幕中所述显示画面移动至所述第二位置包括:
确定与所述相对位置对应的所述终端屏幕上横向的第一向量和纵向的第二向量;
根据确定的所述第一向量,控制所述显示画面的第一预设边缘横向移动至第一预设距离,其中,所述横向移动的方向与所述第一向量的方向相反;和/或,根据确定的所述第二向量,控制所述显示画面的第二预设边缘纵向移动至第二预设距离,其中,所述纵向移动的方向与所述第二向量的方向相反。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述显示画面的移动包括以下之一:所述显示画面整体平移,所述显示画面按照预设比例压缩移动;所述显示画面中的预设区域平移;所述显示画面中除所述预设区域外的其他区域按照预设比例进行压缩移动。
6.一种屏幕显示控制装置,其特征在于,包括:
获取模块,用于获取人脸图像在终端屏幕中的第一位置;
控制模块,用于根据所述第一位置与所述人脸图像在终端屏幕中的参考位置的相对位置,控制所述终端屏幕中显示画面移动的第二位置。
7.根据权利要求6所述的装置,其特征在于,所述获取模块,还用于在获取所述人脸图像在所述终端屏幕中的所述第一位置之前,通过所述终端屏幕所在的终端的前置摄像头获取的人脸图像,或者,根据预设参数,确定所述参考位置。
8.根据权利要求6所述的装置,其特征在于,所述获取模块,还用于通过所述终端屏幕所在的终端的前置摄像头,获取所述人脸图像在所述终端屏幕中显示的所述第一位置。
9.根据权利要求6所述的装置,其特征在于,所述控制模块包括:
确定单元,用于确定与所述相对位置对应的所述终端屏幕上横向的第一向量和纵向的第二向量;
控制单元,用于根据确定的所述第一向量,控制所述显示画面的第一预设边缘横向移动至第一预设距离,其中,所述横向移动的方向与所述第一向量的方向相反;和/或,用于根据确定的所述第二向量,控制所述显示画面的第二预设边缘纵向移动至第二预设距离,其中,所述纵向移动的方向与所述第二向量的方向相反。
10.根据权利要求6至9中任一项所述的装置,其特征在于,所述显示画面移动包括以下之一:所述显示画面整体平移,所述显示画面按照预设比例压缩移动,所述显示画面中的预设区域平移,所述显示画面中除所述预设区域外的其他区域按照预设比例进行压缩移动。
11.一种移动终端,其特征在于,包括:权利要求6至10中任一项所述的装置。
CN201610877948.4A 2016-09-30 2016-09-30 屏幕显示控制方法、装置及移动终端 Pending CN107885415A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610877948.4A CN107885415A (zh) 2016-09-30 2016-09-30 屏幕显示控制方法、装置及移动终端
PCT/CN2017/104451 WO2018059552A1 (zh) 2016-09-30 2017-09-29 屏幕显示控制方法、装置及移动终端和计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610877948.4A CN107885415A (zh) 2016-09-30 2016-09-30 屏幕显示控制方法、装置及移动终端

Publications (1)

Publication Number Publication Date
CN107885415A true CN107885415A (zh) 2018-04-06

Family

ID=61763140

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610877948.4A Pending CN107885415A (zh) 2016-09-30 2016-09-30 屏幕显示控制方法、装置及移动终端

Country Status (2)

Country Link
CN (1) CN107885415A (zh)
WO (1) WO2018059552A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111079625A (zh) * 2019-12-11 2020-04-28 江苏国光信息产业股份有限公司 一种摄像头自动跟随人脸转动的控制方法
CN111914739A (zh) * 2020-07-30 2020-11-10 深圳创维-Rgb电子有限公司 智能跟随方法、装置、终端设备和可读存储介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112860353A (zh) * 2019-11-27 2021-05-28 佛山市云米电器科技有限公司 家电设备控制方法、移动终端及计算机可读存储介质
CN115933874B (zh) * 2022-11-23 2023-08-29 深圳市江元智造科技有限公司 一种基于人脸控制的智能滑动控制方法、系统和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010226542A (ja) * 2009-03-25 2010-10-07 Brother Ind Ltd 通信装置、通信システム、通信制御方法、通信制御プログラム
CN102073436A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
CN102073435A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
CN103135743A (zh) * 2011-11-22 2013-06-05 联想(北京)有限公司 一种电子设备的显示画面的调整方法及电子设备
CN103543821A (zh) * 2012-07-10 2014-01-29 中国移动通信集团公司 一种移动终端控制方法以及系统
CN103777760A (zh) * 2014-02-26 2014-05-07 北京百纳威尔科技有限公司 屏幕显示方向的切换方法及装置
CN104007908A (zh) * 2013-02-22 2014-08-27 三星电子株式会社 基于情境感知的屏幕滚动方法及其终端

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101859176A (zh) * 2009-04-08 2010-10-13 群康科技(深圳)有限公司 屏幕控制装置及其方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010226542A (ja) * 2009-03-25 2010-10-07 Brother Ind Ltd 通信装置、通信システム、通信制御方法、通信制御プログラム
CN102073436A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
CN102073435A (zh) * 2009-11-23 2011-05-25 英业达股份有限公司 画面操作方法及应用该方法的电子装置
CN103135743A (zh) * 2011-11-22 2013-06-05 联想(北京)有限公司 一种电子设备的显示画面的调整方法及电子设备
CN103543821A (zh) * 2012-07-10 2014-01-29 中国移动通信集团公司 一种移动终端控制方法以及系统
CN104007908A (zh) * 2013-02-22 2014-08-27 三星电子株式会社 基于情境感知的屏幕滚动方法及其终端
CN103777760A (zh) * 2014-02-26 2014-05-07 北京百纳威尔科技有限公司 屏幕显示方向的切换方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111079625A (zh) * 2019-12-11 2020-04-28 江苏国光信息产业股份有限公司 一种摄像头自动跟随人脸转动的控制方法
CN111079625B (zh) * 2019-12-11 2023-10-27 江苏国光信息产业股份有限公司 一种摄像头自动跟随人脸转动的控制方法
CN111914739A (zh) * 2020-07-30 2020-11-10 深圳创维-Rgb电子有限公司 智能跟随方法、装置、终端设备和可读存储介质

Also Published As

Publication number Publication date
WO2018059552A1 (zh) 2018-04-05

Similar Documents

Publication Publication Date Title
US10684673B2 (en) Apparatus and control method based on motion
US20160299604A1 (en) Method and apparatus for controlling a mobile device based on touch operations
CN104077145B (zh) 应用程序处理方法及系统
CN104932809B (zh) 用于控制显示面板的装置和方法
WO2018153074A1 (zh) 一种预览图像的显示方法及终端设备
CN107885415A (zh) 屏幕显示控制方法、装置及移动终端
KR20150022003A (ko) 단말 및 인터페이스 조작 관리 방법
WO2021035646A1 (zh) 可穿戴设备及其控制方法、识别手势的方法和控制系统
US8416189B2 (en) Manual human machine interface operation system and method thereof
TWI475496B (zh) 手勢控制裝置及於手勢控制裝置中設定及取消手勢操作區域之方法
WO2017185459A1 (zh) 一种图标移动方法以及装置
CN106648398B (zh) 一种显示控制方法及装置
US10754446B2 (en) Information processing apparatus and information processing method
EP4195664A1 (en) Image processing method, mobile terminal, and storage medium
CN112486346A (zh) 按键模式设置方法、装置及存储介质
CN113655929A (zh) 界面显示的适配处理方法、装置和电子设备
CN106598422B (zh) 混合操控方法及操控系统和电子设备
CN104978030A (zh) 基于左右手自动调节手机显示界面的软件及方法
WO2013101371A1 (en) Apparatus and method for automatically controlling display screen density
KR20160063075A (ko) 공간 인터랙션에서 모션 인식 방법 및 이를 위한 장치
CN111913674A (zh) 虚拟内容的显示方法、装置、系统、终端设备及存储介质
CN107024988A (zh) 一种基于用户动作执行操作的方法及装置
CN112947754B (zh) 头戴设备交互模式的切换方法及系统
CN109993059B (zh) 智能电子设备上基于单摄像头的双目视觉与物体识别技术
JP5449088B2 (ja) 情報入力装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180406