CN108388389B - 一种交互界面控制方法、移动终端及计算机存储介质 - Google Patents

一种交互界面控制方法、移动终端及计算机存储介质 Download PDF

Info

Publication number
CN108388389B
CN108388389B CN201810099370.3A CN201810099370A CN108388389B CN 108388389 B CN108388389 B CN 108388389B CN 201810099370 A CN201810099370 A CN 201810099370A CN 108388389 B CN108388389 B CN 108388389B
Authority
CN
China
Prior art keywords
mobile terminal
preset
control
mode
information set
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810099370.3A
Other languages
English (en)
Other versions
CN108388389A (zh
Inventor
张宇希
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201810099370.3A priority Critical patent/CN108388389B/zh
Publication of CN108388389A publication Critical patent/CN108388389A/zh
Application granted granted Critical
Publication of CN108388389B publication Critical patent/CN108388389B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds

Abstract

本发明提供一种交互界面控制方法,应用于移动终端,该交互界面控制方法,包括:响应接收到的控制指令;将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式;根据匹配的结果控制移动终端进入对应的模式。本发明还提供一种移动终端和计算机存储介质。借此,可以减少信息匹配的数量,提高到计算效率,同时,通过将进阶控制信息集合与基础控制信息集合进行关联,使得可以实现控制指令复用的目的,进而提高了用户的使用体验,和使用记忆的负担。

Description

一种交互界面控制方法、移动终端及计算机存储介质
技术领域
本发明涉及网络通信技术领域,尤其涉及一种交互界面控制方法、移动终端及计算机存储介质。
背景技术
现在越来越多的手机搭载面部识别功能,随着面部识别技术的发展,面部识别可以对人的表情进行较为精准的识别,面部识别功能很常见的使用在手机解锁上,但是手机解锁后,在锁屏上的很多快捷功能并不能被使用,一定程度上影响了用户效率。
发明内容
本发明的主要目的在于提出一种交互界面控制方法、移动终端及计算机存储介质,旨在解决用户无法灵活的对图标进行控制。
为实现上述目的,本发明提供一种交互界面控制方法,应用于移动终端,该交互界面控制方法,包括:响应接收到的控制指令;将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式;根据匹配的结果控制移动终端进入对应的模式。
可选地,响应接收到的控制指令的步骤,包括:接收输入的触摸控制操作;根据触摸控制操作控制移动终端获取当前图像;响应当前图像对应的控制指令。
可选地,控制指令为通过移动终端获取的当前图像,将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配的步骤,包括:根据预设的图像分割方法,将当前图像分割为多张子图像;根据预设选择规则确定多张子图像中的至少两张为待比对子图像;将待比对子图像与预设控制信息集合根据预设匹配规则进行匹配。
可选地,预设选择规则为判断子图像占当前图像的比例是否满足预设数值。
可选地,控制指令包含至少两个子控制指令,预设匹配规则为:将至少两个子控制指令与基础控制信息集合进行匹配;根据匹配结果控制是否与进阶控制信息集合进行匹配。
可选地,控制指令包含至少两个子控制指令,控制移动终端进入与基础模式符合预设关系的进阶模式的步骤,包括:获取子控制指令匹配到的基础控制信息集合中的基础控制信息的基础类型;根据基础类型确定与进阶控制信息集合满足匹配关系的另一子控制指令对应的控制内容。
可选地,根据匹配的结果控制移动终端进入对应的模式的步骤,包括:控制移动终端进入基础模式,以控制移动终端进入进阶模式。
可选地,方法还包括:响应接收到退出进阶模式指令,控制移动终端退出进阶模式,并处于基础模式;或响应接收到退出进阶模式指令,控制移动终端退出进阶模式和基础模式。
本发明另一实施例提供了一种移动终端,移动终端包括:触摸显示屏;处理器;存储器,与处理器连接,存储器包含控制指令,当处理器读取控制指令时,控制移动终端实现上述的交互界面控制方法。
本发明另一实施例提供了一种计算机存储介质,该计算机存储介质有一个或多个程序,一个或多个程序被一个或多个处理器执行,以实现上述的交互界面控制方法。
本发明提供的一种信息处理的方法、移动终端及存储介质,通过预先存储预设控制信息集合,将预设控制信息集合分为基础控制信息集合和进阶控制信息集合,在接收到用户输入的控制指令后,将该控制指令分别与预设控制信息集合进行匹配,当在基础控制信息集合中匹配到对应的指令后,再匹配进阶控制信息集合,当再次匹配到到对应的指令后,则控制终端进入到与与基础模式符合预设关系的进阶模式。通过此种方式,可以减少信息匹配的数量,提高到计算效率,同时,通过将进阶控制信息集合与基础控制信息集合进行关联,使得可以实现控制指令复用的目的,进而提高了用户的使用体验,和使用记忆的负担。
附图说明
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图;
图2为如图1所示的移动终端的通信网络系统示意图;
图3为本申请一实施例提供的信息处理方法的流程图;
图4为本申请一实施例提供的终端的结构组成示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在后续的描述中,使用用于表示元件的诸如"模块″、″部件″或″单元″的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,″模块″、″部件″或″单元″可以混合地使用。
终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(PerSonal Digital ASSiStant,PDA)、便捷式媒体播放器(Portable Media Player,PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端,以及诸如数字TV、台式计算机等固定终端。
后续描述中将以移动终端为例进行说明,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
请参阅图1,其为实现本发明各个实施例的一种移动终端的硬件结构示意图,该移动终端100可以包括:RF(Radio Frequency,射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图1中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图1对移动终端的各个部件进行具体的介绍:
射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将基站的下行信息接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global SyStem of Mobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA2000(CodeDiviSion Multiple AcceSS 2000,码分多址2000)、WCDMA(Wideband Code DiviSionMultiple AcceSS,宽带码分多址)、TD-SCDMA(Time DiviSion-SynchronouS CodeDiviSion Multiple AcceSS,时分同步码分多址)、FDD-LTE(Frequency DiviSionDuplexing-Long Term Evolution,频分双工长期演进)和TDD-LTE(Time DiviSionDuplexing-Long Term Evolution,分时双工长期演进)等。
WiFi属于短距离无线传输技术,移动终端通过WiFi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块102,但是可以理解的是,其并不属于移动终端的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
音频输出单元103可以在移动终端100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将射频单元101或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。
A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(GraphicS ProceSSing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
移动终端100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在移动终端100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid CryStal DiSplay,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107可包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作),并根据预先设定的程式驱动相应的连接装置。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位信息,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,并能接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种,具体此处不做限定。
进一步的,触控面板1071可覆盖显示面板1061,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图1中,触控面板1071与显示面板1061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元108用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
移动终端100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图1未示出,移动终端100还可以包括蓝牙模块等,在此不再赘述。
为了便于理解本发明实施例,下面对本发明的移动终端所基于的通信网络系统进行描述。
请参阅图2,图2为本发明实施例提供的一种通信网络系统架构图,该通信网络系统为通用移动通信技术的LTE系统,该LIE系统包括依次通讯连接的UE(USer Equipment,用户设备)201,E-UTRAN(Evolved UMTS TerreStrial Radio AcceSS Network,演进式UMTS陆地无线接入网)202,EPC(Evolved Packet Core,演进式分组核心网)203和运营商的IP业务204。
具体地,UE201可以是上述终端100,此处不再赘述。
E-UTRAN202包括eNodeB2021和其它eNodeB2022等。其中,eNodeB2021可以通过回程(backhaul)(例如X2接口)与其它eNodeB2022连接,eNodeB2021连接到EPC203,eNodeB2021可以提供UE201到EPC203的接入。
EPC203可以包括MME(Mobility Management Entity,移动性管理实体)2031,HSS(Home SubScriber Server,归属用户服务器)2032,其它MME2033,SGW(Serving Gate Way,服务网关)2034,PGW(PDN Gate Way,分组数据网络网关)2035和PCRF(Policy andCharging RuleS Function,政策和资费功能实体)2036等。其中,MME2031是处理UE201和EPC203之间信令的控制节点,提供承载和连接管理。HSS2032用于提供一些寄存器来管理诸如归属位置寄存器(图中未示)之类的功能,并且保存有一些有关服务特征、数据速率等用户专用的信息。所有用户数据都可以通过SGW2034进行发送,PGW2035可以提供UE 201的IP地址分配以及其它功能,PCRF2036是业务数据流和IP承载资源的策略与计费控制策略决策点,它为策略与计费执行功能单元(图中未示)选择及提供可用的策略和计费控制决策。
IP业务204可以包括因特网、内联网、IMS(IP Multimedia SubSyStem,IP多媒体子系统)或其它IP业务等。
虽然上述以LTE系统为例进行了介绍,但本领域技术人员应当知晓,本发明不仅仅适用于LTE系统,也可以适用于其他无线通信系统,例如GSM、CDMA2000、WCDMA、TD-SCDMA以及未来新的网络系统等,此处不做限定。
基于上述移动终端硬件结构以及通信网络系统,提出本发明方法各个实施例。
图3是本申请提供的信息处理的方法的一实施例300的流程图。该实施例的方法一旦被用户触发,则该实施例中的流程通过终端自动运行,其中,各个步骤在运行的时候可以是按照如流程图中的顺序先后进行,也可以是根据实际情况多个步骤同时进行,在此并不做限定,该信息处理的方法包括如下步骤:
步骤S310,响应接收到的控制指令;
步骤S320,将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式;
步骤S330,根据匹配的结果控制移动终端进入对应的模式。
通过上述实施方式,通过预先存储预设控制信息集合,将预设控制信息集合分为基础控制信息集合和进阶控制信息集合,在接收到用户输入的控制指令后,将该控制指令分别与预设控制信息集合进行匹配,当在基础控制信息集合中匹配到对应的指令后,再匹配进阶控制信息集合,当再次匹配到到对应的指令后,则控制终端进入到与与基础模式符合预设关系的进阶模式。通过此种方式,可以减少信息匹配的数量,提高到计算效率,同时,通过将进阶控制信息集合与基础控制信息集合进行关联,使得可以实现控制指令复用的目的,进而提高了用户的使用体验,和使用记忆的负担。
下面讲具体对上述事实方式中的每一步进行具体地解释说明。
在步骤S310中,响应接收到的控制指令。
具体地,控制指令为用户通过移动终端输入的用于控制具体控制模式的指令。其中,具体控制模式为移动终端通过图形用户界面向用户提供的不同的用于接收用户的触摸操作以执行不用响应的模式,举例而言,控制模式可以解锁模式,在解锁模式中,移动终端提供桌面界面,呈现安装于该移动终端上不同的应用图标;控制模式可以是具体的应用操作界面,在对应的应用操作界面中提供用于接收用户触摸操作的图形接口。
在本实施方式中,响应接收到的控制指令的具体方式可以通过如下步骤实现:
步骤S3101,接收输入的触摸控制操作;
步骤S3102,根据触摸控制操作控制移动终端获取当前图像;
步骤S3103,响应当前图像对应的控制指令。
通过上述实施方式,使得用户可以通过输入触摸控制指令控制移动终端获取当前的图像,通过将该当前图像与预设控制信息集合进行比对,以确定当前图像对应的控制指令,通过该控制指令控制移动终端进入对应的模式,进而实现了用户通过图像信息对移动终端进行控制的效果,方便了用户操作移动终端,提高了用户体验。
下面讲具体对上述事实方式中的每一步进行具体地解释说明。
在步骤S3101中,接收输入的触摸控制操作。
具体地,触摸控制操作为通过触摸移动终端上提供的输入设备而输入的控制指令。在本实施方式中,触摸控制操作为通过移动终端的触摸传感器进行的输入操作,举例而言,在触摸屏上点击/滑动/按压等操作,或,在移动终端上的指纹传感器/超声波传感器上进行的触摸操作等。在其他实施方式中,触摸控制操作为通过移动终端的物理按键进行的输入操作,例如,按压音量键,电源键或是其他设置的物理按键。在其他实施方式中,触摸控制操作为通过检测移动终端的状态变换实现触摸控制指令的输入,举例而言,通过重力传感器监测移动终端在预设方向上的加速度是否满足预设条件,如果满足预设条件,则确定接收到输入到触摸控制操作。
在本事实方式中,接收输入的触摸控制操作的步骤之前,还包括接收输入的亮屏操作指令,当移动终端监测到屏幕被点亮后,控制接收并确定接收到输入到触摸控制操作。
在其他实施方式中,也可以在黑屏状态下控制接收输入的触摸控制操作。
在步骤S3102中,根据触摸控制操作控制移动终端获取当前图像。
具体地,获取触摸控制操作后,确定该触摸控制操作对应的控制指令,根据该控制指令控制移动终端获取摄像头的图像获取权限,控制摄像头在不在移动终端的显示屏进行图像预览的前提下获取摄像头面前的当前图像。
在本实施方式中,获取摄像头面前的当前图像为获取前置摄像头的当前图像。在其他实施方式中,获取摄像头面前的当前图像为获取后置摄像头的当前图像。在其他实施方式中,获取摄像头面前的当前图像为前置摄像头和后置摄像头获取图像进行拼合后的当前图像。在其他实施方式中,获取摄像头面前的当前图像为与移动终端通过近场通信方式连接的外设摄像头获取的当前图像。
在步骤S3103中,响应当前图像对应的控制指令。
具体地,预先在移动终端中存储不同的图像与对应的控制指令,当移动终端获取到当前图像时,将该当前图像与预先存储到图像进行比对,当比对结果符合预设的匹配条件时,则获取该被匹配的预先存储的图像所对应的控制指令。
在步骤S320中,将接收到的控制指令与预设控制信息集合④根据预设匹配规则进行匹配。
具体地,控制指令包含至少两个子控制指令,子控制指令为根据预设的规则从接收到的单一触摸操作分离出的多个控制指令。预设控制信息集合中预先保存不同的用于控制移动终端做出不同响应的控制指令。预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,其中,基础模式为移动终端进入到其他模式的必须经过的模式,在本实施方式中,基础模式为解锁模式,即,控制移动终端从锁屏模式进入到解锁模式,在解锁模式下,用户可以对安装于移动终端上的应用程序进行控制。在其他实施方式中,基础模式为相机模式,在相机模式下,移动终端的图形用户界面提供了不同的拍照虚拟控件,举例而言,前后摄像头切换,滤镜模式等。进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式,举例而言,当基础模式为解锁模式时,进阶模式为具体的某个应用;当基础模式为相机模式时,进阶模式为滤镜选择界面。
其中,控制移动终端进入与基础模式符合预设关系的进阶模式的步骤包括如下步骤。
步骤1.获取子控制指令匹配到的基础控制信息集合中的基础控制信息的基础类型。具体地,不同的基础控制信息对应不用的基础类型,该类型可以是由开发者预先设定,也可以根据用户的需求进行自定义设置。
步骤2.根据基础类型确定与进阶控制信息集合满足匹配关系的另一子控制指令对应的控制内容。预先设置不同的基础类型对应的进阶控制信息所对应的具体的控制内容,也就是说,相同的进阶控制信息所对应的控制内容会因为不同的基础类型而不同,通过此种方式,可以减少存储的进阶控制信息的数量,仅通过增加数据表中的条目即可实现不同的功能。在本实施方式中,对应的控制内容为控制开启不同的应用程序或是应用程序中具体的控件。
需要说明的是,基础模式与进阶模式的具体内容可以是由开发者预先设定的操作模式,其中,操作模式可以为某个应用的图形用户界面;也可以在移动终端提供用户设置界面,在该设置界面中,用户可以根据需求设置基础模式与进阶模式的内容。进阶模式与基础模式的对应关系可以是由开发者预先设定的对应关系,也可以是移动终端提供用户设置界面,在该设置界面中,用户可以根据需求设置进阶模式与基础模式的对应关系。
在本实施方式中,将接收到的控制指令与预设控制信息集合④根据预设匹配规则进行匹配的步骤,包括:
步骤S3201,根据预设的图像分割方法,将当前图像分割为多张子图像;
步骤S3202,根据③预设选择规则确定多张子图像中的至少两张为待比对子图像;
步骤S3203,将待比对子图像与预设控制信息集合根据预设匹配规则进行匹配。
通过上述实施方式,将获取的当前图像根据预设的图像分割方法分割为多个子图像,再根据预设选择规则从多张子图像中确定数量小于或等于多张子图像数量的待比对子图像,再将待比对子图像分别与预设控制信息集合中的基础控制信息集合和进阶控制信息集合进行比对,通过此种方式,可以有效的降低数据计算量,提高计算效率,提高了现有的图像匹配算法中的计算冗余,提供了移动终端的运行效率。
下面讲具体对上述事实方式中的每一步进行具体地解释说明。
在步骤S3201中,根据预设的图像分割方法,将当前图像分割为多张子图像。首先,根据预设规则进行初步分割得到初步分割图像,其中,预设规则为:通过获取当前图像上的各个像素点的深度值,并将该深度值与预设深度值进行比对计算,确定在该预设深度值中的深度值所对应的像素点所形成的图像为初步分割图像,因为,用户输入的用于代表控制指令的当前图像一般会在一定的范围之内,在该范围之外的图像多数为背景图像,对这些背景图像的计算在本申请提供的交互界面控制方法中意义不大。其次,根据初步分割图像中的像素信息将初步分割图像分割为多张子图像,其中,在本实施方式中,像素信息可以为像素灰度值,根据图像不同区域之间的边缘上的像素灰度值的变化较为剧烈这一特定,通过灰度值的微分算子进行边缘检测,以将初步分割图像分割为多张子图像。在其他实施方式中,像素信息可以为像素的颜色值,通过将颜色值差值小于预设数值范围的不用颜色值所对应的像素确定为区域块的方式将初步分割图像分割为多张子图像。
在步骤S3202中,根据③预设选择规则确定多张子图像中的至少两张为待比对子图像。其中,预设选择规则为判断子图像占当前图像的比例是否满足预设数值。通过此种,方式可以进一步地确定在当前图像中属于用户输入的用于代表控制指令的图像,以提高移动终端的智能判断和处理效率。在本实施方式中,预设数值可以为35%,在其他实施方式中,该预设数值也可以是其他的数值,也可以是一个数值或是多个数值,具体可以根据用户的需求或是开发者的经验设置对应的经验值。
在步骤S3203中,将待比对子图像与预设控制信息集合根据预设匹配规则进行匹配。预设匹配规则为将至少两个子控制指令与基础控制信息集合进行匹配;根据匹配结果控制是否与进阶控制信息集合进行匹配。在本实施方式中,子控制指令为待比对子图像。在本实施方式中,根据匹配结果控制是否与进阶控制信息集合进行匹配的步骤,包括:当至少两个子控制指令与基础控制信息集合不匹配时,则停止判断流程,不再将至少两个子控制指令与进阶控制信息集合进行比对;当至少两个子控制指令与基础控制信息集合匹配时,则控制将除了与基础控制信息集合相匹配的子控制指令外的其他子控制指令与进阶控制信息集合进行比对。
通过上述实施方式,通过将控制移动终端先经过基础控制信息集合的匹配,当匹配成功后再进行进阶控制信息集合的匹配,可以增加移动终端的安全性,同时,通过此种方式还可以降低数据计算成本。
在其他实施方式中,预设匹配规则为将至少两个子控制指令与分别与基础控制信息集合和进阶控制信息集合进行匹配。
可选地,为了提高匹配的准确度,将待比对子图像按照预设优先级与基础控制信息集合进行匹配。在本实施方式中,预设优先级为根据待比对子图像的深度值确定,深度值约大,该深度值对应的待比对子图像的优先级越高,举例而言,当待比对子图像包括人脸图像和手势图像时,人脸图像的深度值大于手势图像的深度值,因此,人脸图像的优先级高于手势图像的优先级。在其他实施方式中,预设优先级为根据待比对子图像的面积确定,图像面积越大,该图像面积对应的待比对子图像的优先级越高。
在步骤S330中,根据匹配的结果控制移动终端进入对应的模式。
通过上述实施方式所提供的方法,获取控制指令所匹配基础模式和与基础类型相关的进阶模式,根据控制指令中的与基础模式对应的子控制指令控制移动终端进入基础模式,进而触发根据控制指令中的与进阶模式对应的子控制指令控制移动终端进入进阶模式。在本实施方式中,当移动终端未进入基础模式时,不响应与进阶模式对应的子控制指令,通过此种方式可以有效提供信息安全,防止当代表子控制指令的待比对子图像较为简单而被错误识别时,直接控制移动终端进入到对应的进阶模式中。
需要说明的是,虽然在控制逻辑上,移动终端先进入基础模式,然后再进入进阶模式,但是在图形用户界面的显示上,可以直接控制移动终端的图形用户界面显示与进阶模式对应的内容,通过此种方式可以减少图像的渲染次数,同时,给用户已顺畅的控制体验。
进一步地,当通过上述方法控制移动终端进入到进阶模式后,在本实施方式中,本申请一实施例提供的交互界面控制方法,还包括:响应接收到退出进阶模式指令,控制移动终端退出进阶模式,并处于基础模式。退出进阶模式指令可以是用户通过触摸触摸屏上的虚拟控件发出,例如,home键或是返回键或是快捷键等,也可以是通过指纹传感器接收到的触摸操作发出,也可以是其他方式,在此不做具体限定。举例而言,当基础模式为解锁模式,进阶模式为相机应用,则当接收到退出进阶模式指令时,控制移动终端进入到解锁模式,也就是说,控制移动终端退出相机应用,进入到桌面。
在其他实施方式中,本申请一实施例提供的交互界面控制方法,还包括:响应接收到退出进阶模式指令,控制移动终端退出进阶模式和基础模式。关于退出进阶模式指令的内容与上文相似,在此不做赘述。举例而言,当基础模式为解锁模式,进阶模式为相机应用,则当接收到退出进阶模式指令时,控制移动终端退出基相机应用和解锁模式,也就是说,控制移动终端进入到锁屏界面或是黑屏等。通过此种方式,使得用户只能够针对进阶模式下的内容进行操作,可以有效的增加用户对移动终端显示内容的控制,防止其他用户对进阶模式对应的内容之外的内容进行操作。
下面以基础模式为解锁,进阶模式为支付应用,当前图像为面带微笑人脸图像,基础控制信息集合为基本人脸图像,进阶控制信息集合为微笑相关的图像为例,说明上述提供的交互界面控制方法的实施过程:重力传感器检测到移动终端被抬起时,控制摄像头获取当前图像,通过将当前图像按照预设规则分割为人脸图像和微笑相关图像两个待比对子图像,将该两个待比对子图像与基础控制信息集合比对,确定匹配到基础控制信息集合中的基本人脸图像,进而控制微笑相关图像与进阶控制信息集合进行比对,匹配到对应的微笑相关的图像。进而控制移动终端解锁并进入到支付应用。
当然,本申请提供的交互界面控制方法还可以应用到其他的应用场景中。比如在解锁的状态下,获取当前图像,根据该当前图像控制进入到音乐播放器中的"我的最爱"选项中。
图4为本申请实施例提供的移动终端的结构组成示意图,移动终端400包括:
触摸显示屏401;处理器402;存储器403与处理器402连接,存储器402包括控制指令,当处理器402读取控制指令时控制终端实现如下步骤:
响应接收到的控制指令;
将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式;
根据匹配的结果控制移动终端进入对应的模式。
上述步骤具体的内容与前文中的内容相似,在此不做赘述。
本申请实施例还提供一种计算机存储介质,计算机存储介质有一个或多个程序,一个或多个程序被一个或多个处理器执行,以实现如下步骤:
响应接收到的控制指令;
将接收到的控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,预设控制信息集合包括基础控制信息集合和进阶控制信息集合,基础控制信息集合用于控制移动终端进入基础模式,进阶控制信息集合用于控制移动终端进入与基础模式符合预设关系的进阶模式;
根据匹配的结果控制移动终端进入对应的模式。
上述步骤具体的内容与前文中的内容相似,在此不做赘述。
本申请实施例还提供了一种计算机可读存储介质。这里的计算机可读存储介质存储有一个或者多个程序。其中,计算机可读存储介质可以包括易失性存储器,例如随机存取存储器;存储器也可以包括非易失性存储器,例如只读存储器、快闪存储器、硬盘或固态硬盘;存储器还可以包括上述种类的存储器的组合。
上述各实施方式中的对应的技术特征在不导致方案矛盾或不可实施的前提下,可以相互使用。
需要说明的是,在本文中,术语″包括″、″包含″或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句″包括一个......"限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。

Claims (9)

1.一种交互界面控制方法,应用于移动终端,其特征在于,所述交互界面控制方法,包括:
响应接收到的控制指令;
将接收到的所述控制指令与预设控制信息集合根据预设匹配规则进行匹配,其中,所述预设控制信息集合包括基础控制信息集合和进阶控制信息集合,所述基础控制信息集合用于控制所述移动终端进入基础模式,所述进阶控制信息集合用于控制所述移动终端进入与所述基础模式符合预设关系的进阶模式;其中,所述基础模式为解锁模式;
根据匹配的结果控制所述移动终端进入对应的模式;
所述控制指令为通过所述移动终端获取的当前图像,所述将接收到的所述控制指令与预设控制信息集合根据预设匹配规则进行匹配的步骤,包括:
根据预设的图像分割方法,将所述当前图像分割为多张子图像;其中,预设的图像分割方法中的预设规则为:通过获取当前图像上的各个像素点的深度值,并将该深度值与预设深度值进行比对计算,确定在该预设深度值中的深度值所对应的像素点所形成的图像为初步分割图像;
根据预设选择规则确定所述多张子图像中的至少两张为待比对子图像;
将所述待比对子图像按照预设优先级与预设控制信息集合根据预设匹配规则进行匹配;其中,预设优先级为根据待比对子图像的深度值确定,深度值越大,该深度值对应的待比对子图像的优先级越高。
2.如权利要求1所述的交互界面控制方法,其特征在于,所述响应接收到的控制指令的步骤,包括:
接收输入的触摸控制操作;
根据所述触摸控制操作控制所述移动终端获取当前图像;
响应所述当前图像对应的控制指令。
3.如权利要求1所述的交互界面控制方法,其特征在于,所述预设选择规则为判断所述子图像占所述当前图像的比例是否满足预设数值。
4.如权利要求1所述的交互界面控制方法,其特征在于,所述控制指令包含至少两个子控制指令,所述预设匹配规则为:将所述至少两个子控制指令与所述基础控制信息集合进行匹配;根据匹配结果控制是否与所述进阶控制信息集合进行匹配。
5.如权利要求1所述的交互界面控制方法,其特征在于,所述控制指令包含至少两个子控制指令,所述控制所述移动终端进入与所述基础模式符合预设关系的进阶模式的步骤,包括:
获取所述所述子控制指令匹配到的所述所述基础控制信息集合中的所述所述基础控制信息的基础类型;
根据所述基础类型确定与所述进阶控制信息集合满足匹配关系的另一所述子控制指令对应的控制内容。
6.如权利要求1所述的交互界面控制方法,其特征在于,所述根据匹配的结果控制所述移动终端进入对应的模式的步骤,包括:控制所述移动终端进入所述基础模式,以控制所述移动终端进入所述进阶模式。
7.如权利要求1所述的交互界面控制方法,其特征在于,所述方法还包括:
响应接收到退出进阶模式指令,控制所述移动终端退出所述进阶模式,并处于所述基础模式;或
响应接收到退出进阶模式指令,控制所述移动终端退出所述进阶模式和所述基础模式。
8.一种移动终端,其特征在于,所述移动终端包括:
触摸显示屏;
处理器;
存储器,与所述处理器连接,所述存储器包含控制指令,当所述处理器读取所述控制指令时,控制所述移动终端实现权利要求1-7任一项的所述交互界面控制方法。
9.一种计算机存储介质,其特征在于,所述计算机存储介质有一个或多个程序,所述一个或多个程序被一个或多个处理器执行,以实现权利要求1至7任一项的所述交互界面控制方法。
CN201810099370.3A 2018-01-31 2018-01-31 一种交互界面控制方法、移动终端及计算机存储介质 Active CN108388389B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810099370.3A CN108388389B (zh) 2018-01-31 2018-01-31 一种交互界面控制方法、移动终端及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810099370.3A CN108388389B (zh) 2018-01-31 2018-01-31 一种交互界面控制方法、移动终端及计算机存储介质

Publications (2)

Publication Number Publication Date
CN108388389A CN108388389A (zh) 2018-08-10
CN108388389B true CN108388389B (zh) 2021-09-07

Family

ID=63074913

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810099370.3A Active CN108388389B (zh) 2018-01-31 2018-01-31 一种交互界面控制方法、移动终端及计算机存储介质

Country Status (1)

Country Link
CN (1) CN108388389B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109147009B (zh) * 2018-08-13 2023-04-07 优视科技新加坡有限公司 一种基于图像的个性化操作的方法、装置和设备/终端/服务器
CN110069208A (zh) * 2019-05-31 2019-07-30 Oppo广东移动通信有限公司 触控操作方法及相关设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106873874A (zh) * 2017-01-20 2017-06-20 维沃移动通信有限公司 一种应用程序开启方法及移动终端
CN106919328A (zh) * 2015-12-28 2017-07-04 阿里巴巴集团控股有限公司 启动应用程序的方法、装置及电子设备
CN107179831A (zh) * 2017-06-30 2017-09-19 广东欧珀移动通信有限公司 启动应用的方法、装置、存储介质及终端

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9032510B2 (en) * 2012-09-11 2015-05-12 Sony Corporation Gesture- and expression-based authentication

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106919328A (zh) * 2015-12-28 2017-07-04 阿里巴巴集团控股有限公司 启动应用程序的方法、装置及电子设备
CN106873874A (zh) * 2017-01-20 2017-06-20 维沃移动通信有限公司 一种应用程序开启方法及移动终端
CN107179831A (zh) * 2017-06-30 2017-09-19 广东欧珀移动通信有限公司 启动应用的方法、装置、存储介质及终端

Also Published As

Publication number Publication date
CN108388389A (zh) 2018-08-10

Similar Documents

Publication Publication Date Title
CN109151169B (zh) 摄像头权限管理方法、移动终端及计算机可读存储介质
CN109348067B (zh) 一种调节屏幕显示亮度的方法、移动终端及计算机可读存储介质
CN108196750B (zh) 屏幕界面截图的方法、装置及计算机可读存储介质
CN109086582B (zh) 一种指纹认证方法、终端及计算机可读存储介质
CN109471579B (zh) 终端屏幕信息布局调整方法、装置、移动终端及存储介质
CN108833690B (zh) 权限管控方法、终端及计算机可读存储介质
CN107832032B (zh) 锁屏显示方法及移动终端
CN108958936B (zh) 应用程序切换方法、移动终端及计算机可读存储介质
CN107682541B (zh) 屏幕投影的音频控制方法、移动终端及存储介质
CN109309762B (zh) 消息处理方法、装置、移动终端以及存储介质
CN109889651B (zh) 一种通知消息处理方法、终端及计算机可读存储介质
CN108737639B (zh) 一种消息提示方法、终端及计算机可读存储介质
CN108388389B (zh) 一种交互界面控制方法、移动终端及计算机存储介质
CN108108082B (zh) 一种信息处理的方法、终端及计算机存储介质
CN108153477B (zh) 多点触摸操作方法、移动终端及计算机可读存储介质
CN107340958B (zh) 横竖屏切换方法及移动终端
CN110083294B (zh) 屏幕截取方法、终端和计算机可读存储介质
CN112076466A (zh) 游戏数据控制方法、移动终端及计算机可读存储介质
CN112612372A (zh) 一种触控事件调控方法、设备及计算机可读存储介质
CN109711850B (zh) 一种安全支付方法、设备及计算机可读存储介质
CN107728789B (zh) 一种单手操作模式的开启方法、终端及存储介质
CN107807876B (zh) 分屏显示方法、移动终端及存储介质
CN112532838B (zh) 一种图像处理方法、移动终端以及计算机存储介质
CN112578978B (zh) 一种窗口切换控制方法、设备及计算机可读存储介质
CN112333326B (zh) 一种投屏显示控制方法、设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant