CN112929483A

CN112929483A - 一种触摸屏盲操、快捷操作的方法

Info

Publication number: CN112929483A
Application number: CN201911235662.6A
Authority: CN
Inventors: 兰习刚
Original assignee: Individual
Current assignee: Shanghai Jinye Information Technology Co.,Ltd.
Priority date: 2019-12-05
Filing date: 2019-12-05
Publication date: 2021-06-08
Anticipated expiration: 2039-12-05
Also published as: CN112929483B

Abstract

本发明提出了一种触摸屏盲操、快捷操作的方法。包括以下步骤：用户进入系统进行盲操设定、基于用户已经设定好的盲操的命令集，当用户执行命令集中的特定操作时启动盲操模式（不容易因误碰而输入的复杂命令集可以直接执行相应操作），此时可以进入盲操操作、基于已经设定好的命令集，用户可直接在触摸屏输入相应命令，所输入的命令集有操作类命令、字符类命令和复杂轨迹类命令、系统成功识别用户在触摸屏录入的命令后，即播放用户已经录制好的行为集中的行为指令、用户在一定时间内没有任何命令，系统自动关闭盲操模式。优点：可实现盲操：在口袋中操作；临睡前不需要睁开眼睛操作；危险情况下更快、更隐蔽完成操作等；（2）可实现快捷操作。

Description

一种触摸屏盲操、快捷操作的方法

技术领域

本发明涉及一种触摸屏盲操、快捷操作的方法。

背景技术

随着科技的发展，智能手机、平板、新式电脑等操作终端层出不穷，目前这些终端大多采用触摸屏作为人机交互界面，触摸屏不仅可以展示文字、图案、视频等信息，也可及时响应用户的手指操作，如单击、双击、左右滑动、上下滑动、多点触控以及电子签名等。可以说目前触摸屏的功能已经十分强大。然而，目前用户与触摸屏的互动操作都需要在人盯着屏幕看的情况下完成，当人们不方便或不愿意查看屏幕，或者不方便、不愿点亮屏幕的情况下，例如遭遇违法犯罪需要不点亮屏幕进行悄悄报警时，或者夜晚害怕触摸屏点亮刺激眼睛时，或者手机处于口袋或者背包内不想拿出时，触摸屏设备功能就受到了限制，只能通过设备按钮完成音量大小、开关机等很少的操作，极大的限制了触摸屏的使用场景。

同时，当前触摸屏绝大部分操作都是通过解锁手机、屏幕点亮、进入应用的情况下实现操作的，一般需要至少操作两步才能完成，也给一些经常性操作带来不便。

发明内容

本发明提出一种操作简单、不用点亮屏幕而进行盲操的触摸屏盲操、快捷操作的方法。

本发明的技术方案是这样实现的：一种触摸屏盲操、快捷操作的方法包括以下步骤：

S100、用户进入系统进行盲操设定；

S110、常规盲操命令录入以实现命令集的设定；

S111、在系统中内置常用盲操命令，包括特定简单字符和特定手势；

S112、用户通过屏幕录入自定义盲操命令，包括特定字符和特定轨迹；

S120、设定操作命令对应的系统行为以实现行为集的设定；

S121、将常用的操作预制在系统内；

S122、用户选定某个操作命令并点击开始录制行为，系统自动记录用户的操作，并在用户再次操作时系统自动执行用户已录制的对应操作；

S130、系统设置盲操响应，使得系统识别用户行为成功后可以给用户一定反馈，反馈包括震动、响铃、语音播报；

S200、基于用户已经设定好的盲操的命令集，当用户执行命令集中的特定操作时启动盲操模式，此时可以进入盲操操作；

S300、基于已经设定好的命令集，用户可直接在触摸屏输入相应命令，所输入的命令集有操作类命令、字符类命令和复杂轨迹类命令，所对应的的识别方式为：

S310、操作类命令为当前触摸屏已经支持的触摸屏操作，其通过系统直接识别后反馈给命令集处理程序；

S320、字符类命令待用户录入后，可通过文字识别技术进行识别；

S330、复杂轨迹类命令录入后可以生成相应特征值或者图片，与命令集中的相应命令进行比对；

S400、系统成功识别用户在触摸屏录入的命令后，即播放用户已经录制好的行为集；

S500、用户在一定时间内没有任何命令，系统自动关闭盲操模式。

进一步地，特定简单字符包括单个阿拉伯数字和单个拉丁字母，多个阿拉伯数字或者字母或者其组合预留给用户自定义盲操命令。

进一步地，特定手势包括：单根或两根以上手指向一个上/下/左/右滑动、单根或两根以上手指从屏幕一侧向另一侧滑动、双击、多点多击。

进一步地，用户在屏幕上录入O以启动盲操模式。

进一步地，在S121中，常用的操作包括启动盲操模式、拨打报警电话、发送报警短信、切换下一曲目、切换上一曲目、声音大小控制、退出应用。

采用了上述技术方案，本发明的有益效果为：（1）可实现盲操：不用看触摸屏幕就可以完成相关操作；手机在口袋/背包里面时，不必拿出即可完成操作；昏暗环境下不需要点亮屏幕即可以完成操作；临睡前不需要睁开眼睛即可以完成相应操作；危险情况下更快、更隐蔽完成操作等；（2）可实现快捷操作：一次操作直达目的，原来操作方式为：解锁设备-找到应用-打开应用-进入相关功能页-完成操作；本发明的方法：操作 -完成操作。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明的各模块结构图；

图2为设置命令流程图；

图3为录制行为流程图；

图4为用户操作流程图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的一种触摸屏盲操、快捷操作的方法的具体实施例：本方法主要通过用户手指与触摸屏的互动完成特定操作。实现方法如下：

S100、用户首先进入系统完成盲操设定，主要设定如下：

S110、常规盲操操作命令录入，即命令集设定。

S111、系统内置盲操操作命令：系统会预置常用盲操命令，包括但不限于如下：

特定简单字符：单个阿拉伯数字、单个拉丁字母；其中多个阿拉伯数字或者字母或者其组合预留给用户自定义盲操命令；

特定手势：单/多指向左/右滑动:一/多个手指头触摸屏幕，从屏幕右/左侧向左/右侧滑动；单/多指向上/下滑动：一个/多个手指头触摸屏幕，从屏幕底/上部向上/下滑动；双击：单点快速点击两次屏幕；多点多击：多点触控屏幕并快速多次点击。不同触控点和不同点击次数组合不同命令。

S112、用户自定义盲操命令：用户可以自己通过在屏幕录入特定字符/轨迹来设定个性化盲操命令，具体举例如下：

110：用户在屏幕录入110数字组合，形成命令110.系统监测到用户在屏幕录入110时自动拨打报警电话或者发送报警短信；

WZ：用户在屏幕录入WZ，系统自动发送短信给特定用户；

￠：录入此轨迹系统关闭所有正在运行的应用。复杂轨迹类命令，需要对轨迹进行特殊处理生成特征值或者图片；

用户也可以在录入盲操命令后直接录制相关行为，或者以后再绑定相关行为集。

S120、设定操作命令对应系统行为，即行为集设定。

就是设定用户录入什么字符/轨迹系统完成相应系统行为。

比如说：用户在屏幕上录入o启动盲操；录入110直接拨打报警电话。系统行为分为两种：

S121、内置系统行为：一些经常使用的操作，系统进行预制。举例如下：

启动盲操；拨打报警电话；发送报警短信；切换下一曲目；切换上一曲目；声音大小控制；退出应用等等操作；

S122、用户录入行为：用户先选定某个操作命令，然后点击开始录制行为，进行相关操作，系统会记录用户的操作。当用户在触摸屏上输入相关操作命令后，系统自动执行用户已录制操作。举例如下：

例1：选择已录入的命令“MM” -开始录制-点击拨打电话-输入电话号码（18600000000）- 拨打-结束录制。下次用户在触摸屏输入MM时，直接拨打18600000000。

例2：选择已录入命令“ON”-开始录制-打开 “智能家居”App -打开“灯光控制”-依次打开“卧室灯”、“客厅灯”、“卫生间灯”-结束录制。下次用户在触摸屏输入“ON”，系统直接按照已录制的行为，依次执行相关操作。

为了便于系统反馈盲操结果，用户可以为每一种盲操行为设定一个名称（用于语音播报），或者特定短铃声。

S130、盲操响应设定：系统识别用户行为成功后，可以给予用户一定反馈，举例：静音、震动、响铃、语音播报（用户行为名称）。

S200、启动盲操：基于用户已经设定好的盲操命令集，当用户执行特定操作时启动盲操。举例如果用户设定“o”为启动盲操命令，当用户在触摸屏录入“o”时即进入盲操操作（不容易因误碰而输入的复杂命令集可以直接执行相应操作），或者其他用户设定盲操命令以启动盲操模式，触摸屏可以继续识别其他一些盲操命令。

复杂命令集，如多字符命令 “123”、复杂轨迹命令“￠”，可以直接作为启动盲操同时执行相应行为。

S300、输入命令：基于已经设定好的命令集，用户可直接在触摸屏输入相应命令。命令集有三种类型，识别方式分别如下：

S310、操作类命令：当前触摸屏已经支持的一些触摸屏操作比如单击、双击、多点触控、滑动类操作。此种操作可以系统（Android/IOS等）直接识别并反馈给命令集处理程序。命令集处理程序识别后进行相应处理。

S320、字符类命令：例如数字、字母、数字和字母组合，用户录入后，可以通过文字识别技术识别用户录入的是什么字符，识别成功后执行相应行为集。

S330、复杂轨迹类命令：比如“￠”等用户录入的一些复杂轨迹，可以生成相应特征值或者图片，与命令集里面相应命令比对。图片类轨迹命令，可以结合感知哈希算法、直方图、汉明距离或者其他图片相似度比较算法进行识别。识别成功后执行相应命令集。

S400、响应命令：系统成功识别用户在触摸屏录入的命令后，即播放用户已经录制好的行为集。比如拨打电话、发送短信等。命令相应成功可以根据设定好的盲操响应设定给予或者不给予用户特定反馈。

S500、关闭盲操：启动盲操后，如果用户在特定时间内没有输入任何命令，即关闭盲操。

其中：系统结构，如图1所示：

（1）命令集：

在触摸屏设备中，触摸屏系统会支持一部分交互操作，比如单击、双击、多点触控等操作。所有这些操作集成到本系统的“命令集”。

同时，用户还可以通过触摸屏录入数字、字母或者两者的混合，这些简单的数字、字母或其组合用户录入也很方便。其中识别度高单字符可以预置到系统“命令集”内，注意区分0和o，I和数字1等相似字符。其相关组合预留给用户自己设定命令，用户自定义的命令也会保存到“命令集”中。

除此之外，用户还可以自由设定一些复杂一些的轨迹图案，系统对用户轨迹的线条进行处理后，保存轨迹特征值和图片，也记录到“命令集”。

（2）命令识别器：

系统识别通过触摸屏录入的信息的功能模块称之为“命令识别器”，可以识别用户录入的不同形式的命令。

针对触摸屏已经支持的常规操作，比如单击、双击、多点触控等形式，由操作系统识别并反馈；

常规字符类命令数字、字母或者其组合，可通过文字识别程序，识别出相应字符命令。

针对复杂的用户轨迹图案类命令，可以通过汉明距离、直方图、感知哈希算法等等图象相似度处理算法识别出相应命令。

(3)行为集：

用户在设备上一系列的操作，记录相应指令行到“行为集”即行为集中为指令集。比如说用户打开通讯录-拨打电话，可以记录相应操作指令行（不同操作系统指令行程序不同），形成一个行为。也可以是用户打开某款app – 进入页面A – 点击功能按钮 B记录为相应操作指令行，形成行为集。

(4)命令与行为对应表：

用户输入什么命令，系统应该反馈什么的行为，记录到此对应表中。用户输入命令后，会根据命令到此表查询相应行为集并播放，从而完成用户操作。

（5）行为录制器：

记录用户每一个行为相应指令行的程序称之为行为录制器。比如说：打开短信 ->形成命令行 demo:\\sms\\

输入短信内容 - >形成命令行：demo:\\sms\\write 你好呀

发送短信到18600000000->形成命令行 : demo:\\sms\\send 18600000000

行为录制器记录相应指令，形成一个“行为”并保存到行为集。

（6）行为播放器：

根据“行为”内的指令行，向操作系统依次发送相应指令，从而实现相应操作。称之为“行为播放器”。

具体工作原理：

（1）用户首先进行设定，即录入相关“命令”，记录到“命令集”。（2）然后为此“命令”选择绑定已有“行为”。（3）如果“行为集”没有相应行为，可以通过“行为录制器”录制相关操作，形成一个“行为”，记录到“行为集”。（4）同时，在“命令与行为对应表”中记录此“命令”与“行为”的对应关系。

用户在触摸屏录入相应“命令”，“命令识别器”成功识别此项“命令”后，去“命令与行为对应表”找到对应“行为”。由“行为播放器”依次将此“行为”内的指令集程序发送给操作系统，从而实现用户的操作。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims

1.一种触摸屏盲操、快捷操作的方法，其特征在于，包括以下步骤：

S100、用户进入系统进行盲操设定；

S110、常规盲操命令录入以实现命令集的设定；

S120、设定操作命令对应的系统行为以实现行为集的设定；

S121、将常用的操作预制在系统内；

2.根据权利要求1所述的一种触摸屏盲操、快捷操作的方法，其特征在于，特定简单字符包括单个阿拉伯数字和单个拉丁字母，多个阿拉伯数字或者字母或者其组合预留给用户自定义盲操命令。

3.根据权利要求1或2所述的一种触摸屏盲操、快捷操作的方法，其特征在于，特定手势包括：单根或两根以上手指向一个上/下/左/右滑动、单根或两根以上手指从屏幕一侧向另一侧滑动、双击、多点多击。

4.根据权利要求1或2所述的一种触摸屏盲操、快捷操作的方法，其特征在于，用户在屏幕上录入O以启动盲操模式。

5.根据权利要求1或2所述的一种触摸屏盲操、快捷操作的方法，其特征在于，在S121中，常用的操作包括启动盲操模式、拨打报警电话、发送报警短信、切换下一曲目、切换上一曲目、声音大小控制、退出应用。