CN104915001A - 一种屏幕操控方法及装置 - Google Patents

Abstract

本发明公开了一种屏幕操控方法及装置，所述方法包括：周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；将确定出的操控指令轨迹映射到屏幕上；根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。从而使用户对电子设备的操控更加简捷，提高了体验效果。

Description

一种屏幕操控方法及装置

技术领域

本发明涉及电子设备领域，特别涉及一种屏幕操控方法及装置。

背景技术

经过近几年电子科技的发展，越来越多的智能电子设备走进了人们的工作和生活当中，尤其是基于触摸操控的电子娱乐设备，因为操控简捷，具有较高的体验效果，被越来越多的消费者所青睐。但是当前的触控电子设备通常需要对屏幕进行触摸操作，即便市面上存在一些通过识别近距离手势进行工作的电子设备无需进行触摸操作，例如跳舞游戏机，但是可识别的手势仅限于类似于左右切屏的简单动作，给用户的使用过程仍然带来诸多不便，体验效果较低。

发明内容

本发明提供一种屏幕操控方法及装置，用以方便用户对电子设备的操控，提高体验效果。

根据本发明实施例的第一方面，提供一种屏幕操控方法，可包括：

周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；

对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；

将确定出的操控指令轨迹映射到屏幕上；

根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。

优选地，所述周期性监测预设区域内用户肢体的移动轨迹，可包括：

周期性的对用户肢体的移动进行拍摄；从拍摄的图像中提取出用户肢体的移动轨迹。

优选地，所述确定出唯一的移动轨迹作为操控指令轨迹，可包括：

在识别出的所述预设区域内的所有肢体的移动轨迹中，确定出首先出现在所述预设区域内指定位置的肢体对应的移动轨迹作为操控指令轨迹。

优选地，所述将确定出的操控指令轨迹映射到屏幕上，可包括：

根据所述预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

优选地，所述根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作，可包括：

预设一个或多个操控指令轨迹的标识与操控指令的对应关系；

对所述映射到屏幕上的操控指令轨迹进行识别，确定所述操控指令轨迹的标识；

根据确定的标识所对应的操控指令进行工作。

优选地，所述方法还可包括：

在一个监测周期内，当监测到首先出现在所述预设区域内指定位置的用户肢体离开所述预设区域时，进入下一个监测周期；或者

当连续监测时长达到预设时长时，进入下一个监测周期。

优选地，所述操控指令可包括：

向左滑屏、向右滑屏、向上滑屏、向下滑屏、增大音量、减小音量、放大图像、缩小图像。

根据本发明实施例的第二方面，提供一种屏幕操控装置，可包括：

监测模块，用于周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；

确定模块，用于对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；

映射模块，用于将确定出的操控指令轨迹映射到屏幕上；

工作模块，根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。

优选地，所述监测模块可包括：

拍摄子模块，用于周期性的对肢体的移动进行拍摄；

提取子模块，用于从拍摄的图像中提取出肢体的移动轨迹。

优选地，所述确定模块可包括：

第一确定子模块，用于在识别出的所述预设区域内的所有肢体的移动轨迹中，确定出首先出现在所述预设区域内指定位置的肢体对应的移动轨迹作为操控指令轨迹。

优选地，所述映射模块可包括：

映射子模块，用于根据所述预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

优选地，所述工作模块可包括：

预设子模块，用于预设一个或多个操控指令轨迹的标识与操控指令的对应关系；

第二确定子模块，用于对所述映射到屏幕上的操控指令轨迹进行识别，确定所述操控指令轨迹的标识；

工作子模块，用于根据确定的标识所对应的操控指令进行工作。

优选地，所述装置还可包括：

第一刷新模块，用于在一个监测周期内，当监测到首先出现在所述预设区域内指定位置的肢体离开所述预设区域时，进入下一个监测周期；或者

第二刷新模块，用于当连续监测时长达到预设时长时，进入下一个监测周期。

本发明实施例提供的技术方案可产生以下有益效果：通过周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；将确定出的操控指令轨迹映射到屏幕上；根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。从而使用户对电子设备的操控更加简捷，提高了体验效果。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为本发明根据一示例性实施例示出的屏幕操控方法的流程图；

图2为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图3为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图4为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图5为本发明根据一示例性实施例示出的屏幕操控装置的框图；

图6为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图7为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图8为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图9为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图10为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

根据本发明实施例的第一方面，提供了一种屏幕操控方法，该方法可用于操控电子设备的程序或者通过屏幕操控的电子设备中，如图1所示，该方法包括步骤S101-S104：

在步骤S101中，周期性的监测预设区域内用户肢体的移动轨迹，预设区域位于可识别区域范围内。

其中，监测周期可以根据用户的实际需求进行设置，通常一个周期的持续时间为1-10秒，当一个监测周期结束时，立即进入下一个监测周期。设区域位于可识别区域的范围内，用户也可根据使用人数或体型等实际需要进行设置。用户肢体的移动轨迹包括用户手臂或脚部在预设区域内移动产生的轨迹。

在步骤S102中，对用户肢体在预设区域中发生的所有移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹。

其中，在一个监测周期内，可监测到一个用户产生的多个移动轨迹，也可监测到多个用户产生的移动轨迹，而最终需要确定出其中的一个移动轨迹，并以该移动轨迹为准生成相应的操控指令。

在步骤S103中，将确定出的操控指令轨迹映射到屏幕上。

即将用户通过非触摸操控生成的移动轨迹映射到屏幕上，供用户进行对照，以确定产生的移动轨迹是否正确。同时，后台程序可对屏幕上的轨迹进行识别，其中，模拟操作指令的生成例如可通过利用SendPointerSync函数实现。

在步骤S104中，根据预设的、映射到屏幕上的操控指令轨迹所对应的操控指令进行工作。

其中，操控指令轨迹与操控指令的对应关系可在设备生产过程中进行加载，也可通过用户设置来确定，或通过网络侧获取。例如，操控指令轨迹为从右到左的直线所对应的操控指令为向左滑屏，从右到左的直线所对应的操控指令为向右滑屏，从下到上的直线所对应的操控指令为向上滑屏，从上到下的直线所对应的操控指令为向下滑屏，从下到上的波浪线所对应的操控指令为增大音量，从上到下的波浪线所对应的操控指令为减小音量，从左上到右下的曲线所对应的操控指令为放大图像，从右下到左上的曲线所对应的操控指为缩小图像等。

上述技术方案实现了用户通过多种手势非触摸操控的方式对电子设备进行操控，从而使用户对电子设备的操控更加简捷，提高了体验效果。

在一个实施例中，如图2所示，步骤S101可实施为步骤S1011-S1012：

在步骤S1011中，周期性的对用户肢体的移动进行拍摄。

在步骤S1012中，从拍摄的图像中提取出用户肢体的移动轨迹。

其中，可通过可见光拍摄和/或红外拍摄的方式对用户肢体的移动进行拍摄，从而从每帧拍摄到的图像中识别出用户肢体，并将相邻帧的对同一用户肢体的识别结果进行对比，从而提取出在该时段内用户肢体的移动轨迹，提高了获取用户肢体移动轨迹的准确度。

在一个实施例中，步骤S102可实施为：

在识别出的预设区域内的所有肢体的移动轨迹中，确定出首先出现在所述预设区域内指定位置的肢体对应的移动轨迹作为操控指令轨迹。

其中，预设区域内的指定位置可以由用户根据自身情况(例如身高、使用人数)设定。在一个监测周期内，可监测到多个用户肢体产生的移动轨迹，此时，可将监测到的首先出现在该位置的用户肢体确定为要进行识别的肢体，进而获取该肢体产生的移动轨迹，并将该移动轨迹作为操控指令轨迹。

在一个实施例中，用户设置预设区域内的指定位置为高度高于1.6m的区域，如果在一个监测周期内，监测到预设区域内高于1.6m的区域先后出现多个用户肢体产生的移动轨迹，则将首次出现的用户肢体产生的移动轨迹确定为操控指令轨迹，这样一来使确定操控指令的过程更加智能。

在一个实施例中，步骤S103可实施为：

根据预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

即需要确定预设区域与屏幕之间的尺寸缩放比例，最终映射到屏幕上的操控指令轨迹也是由用户肢体产生的轨迹根据该比例缩放进行缩放的，从而使屏幕上的操控指令轨迹更加直观，不易造成误操控。

在一个实施例中，如图3所示，步骤S104可实施为步骤S1041-S1043：

在步骤S1041中，预设一个或多个操控指令轨迹的标识与操作指令的对应关系。

在步骤S1042中，对映射到屏幕上的操控指令轨迹进行识别，确定操控指令轨迹的标识。

在步骤S1043中，根据确定的标识所对应的操控指令进行工作。

在该实施例中，预先对多种操控指令进行标识处理，获取各操控指令对应的标识，当获取到操控指令轨迹时，可先确定该操控指令轨迹对应的标识，进而根据该标识对应的操控指令进行相应的工作。从实现了对各种操控指令轨迹进行统一的管理，提高了工作效率。

在一个实施例中，如图4所示，上述步骤S104之后还可包括步骤S105:

在步骤S105中，进入下一个监测周期。具体可以采用下面两种方式之一来实施：

方式一：

在一个监测周期内，当监测到首先出现在预设区域内指定位置的肢体离开预设区域时，进入下一个监测周期。

方式二：

当连续监测时长达到预设时长时，进入下一个监测周期。

通过上述两种实施方式实现进入下一个监测周期，使用户的操控过程更加智能快捷，还能够有效避免遗漏用户的操控指令。

在一个实施例中，所述操控指令包括：向左滑屏、向右滑屏、向上滑屏、向下滑屏、增大音量、减小音量、放大图像、缩小图像。与当前基于非触摸方式操控的屏幕相比，能够产生并执行的操控指令更加多样化，大大提高了用户的体验效果。

根据本发明实施例的第二方面，如图5所示，提供一种屏幕操控装置，可包括：

监测模块51，用于周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；

确定模块52，用于对用户肢体在预设区域中发生的所有移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；

映射模块53，用于将确定出的操控指令轨迹映射到屏幕上；

工作模块54，根据预设的、映射到屏幕上的操控指令轨迹所对应的操控指令进行工作。

在一个实施例中，如图6所示，监测模块51可包括：

拍摄子模块511，用于周期性的对用户肢体的移动进行拍摄；

提取子模块512，用于从拍摄的图像中提取出用户肢体的移动轨迹。

在一个实施例中，如图7所示，确定模块52可包括：

第一确定子模块521，用于在识别出的预设区域内的所有用户肢体的移动轨迹中，确定出首先出现在预设区域内指定位置的用户肢体对应的移动轨迹作为操控指令轨迹。

在一个实施例中，如图8所示，映射模块53可包括：

映射子模块531，用于根据预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

在一个实施例中，如图9所示，工作模块54可包括：

预设子模块541，用于预设一个或多个操控指令轨迹的标识与操控指令的对应关系；

第二确定子模块542，用于对映射到屏幕上的操控指令轨迹进行识别，确定操控指令轨迹的标识；

工作子模块543，用于根据确定的标识所对应的操控指令进行工作。

在一个实施例中，如图10所示，上述装置还可包括：

第一刷新模块55，用于在一个监测周期内，当监测到首先出现在预设区域内指定位置的肢体离开预设区域时，进入下一个监测周期；或者

第二刷新模块56，用于当连续监测时长达到预设时长时，进入下一个监测周期。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (13)

1.一种屏幕操控方法，其特征在于，包括：

周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；

对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；

将确定出的操控指令轨迹映射到屏幕上；

根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。

2.如权利要求1所述的方法，其特征在于，所述周期性监测预设区域内肢体的移动轨迹，包括：

周期性的对用户肢体的移动进行拍摄；从拍摄的图像中提取出用户肢体的移动轨迹。

3.如权利要求1所述的方法，其特征在于，所述确定出唯一的移动轨迹作为操控指令轨迹，包括：

在识别出的所述预设区域内的所有用户肢体的移动轨迹中，确定出首先出现在所述预设区域内指定位置的用户肢体对应的移动轨迹作为操控指令轨迹。

4.如权利要求1任一项所述的方法，其特征在于，所述将确定出的操控指令轨迹映射到屏幕上，包括：

根据所述预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

5.如权利要求1所述的方法，其特征在于，所述根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作，包括：

预设一个或多个操控指令轨迹的标识与操控指令的对应关系；

对所述映射到屏幕上的操控指令轨迹进行识别，确定所述操控指令轨迹的标识；

根据确定的标识所对应的操控指令进行工作。

6.如权利要求1所述的方法，其特征在于，所述方法还包括：

在一个监测周期内，当监测到首先出现在所述预设区域内指定位置的用户肢体离开所述预设区域时，进入下一个监测周期；或者

当连续监测时长达到预设时长时，进入下一个监测周期。

7.区权利要求1-6任一项所述的方法，其特征在于，所述操控指令包括：

向左滑屏、向右滑屏、向上滑屏、向下滑屏、增大音量、减小音量、放大图像、缩小图像。

8.一种屏幕操控装置，其特征在于，包括：

监测模块，用于周期性的监测预设区域内用户肢体的移动轨迹，所述预设区域位于可识别区域范围内；

确定模块，用于对所述用户肢体在预设区域中发生的所有所述移动轨迹进行识别，并从中确定出唯一的移动轨迹作为操控指令轨迹；

映射模块，用于将确定出的操控指令轨迹映射到屏幕上；

工作模块，用于根据预设的、映射到屏幕上的所述操控指令轨迹所对应的操控指令进行工作。

9.如权利要求8所述的装置，其特征在于，所述检测模块包括：

拍摄子模块，用于周期性的对用户肢体的移动进行拍摄；

提取子模块，用于从拍摄的图像中提取出用户肢体的移动轨迹。

10.如权利要求8所述的装置，其特征在于，所述确定模块包括：

第一确定子模块，用于在识别出的所述预设区域内的所有用户肢体的移动轨迹中，确定出首先出现在所述预设区域内指定位置的用户肢体对应的移动轨迹作为操控指令轨迹。

11.如权利要求8任一项所述的装置，其特征在于，所述映射模块包括：

映射子模块，用于根据所述预设区域与所述屏幕之间的尺寸比例，将确定出的操控指令轨迹映射到屏幕上。

12.如权利要求8所述的装置，其特征在于，所述工作模块包括：

预设子模块，用于预设一个或多个操控指令轨迹的标识与操控指令的对应关系；

第二确定子模块，用于对所述映射到屏幕上的操控指令轨迹进行识别，确定所述操控指令轨迹的标识；

工作子模块，用于根据确定的标识所对应的操控指令进行工作。

13.如权利要求8所述的装置，其特征在于，所述装置还包括：

第一刷新模块，用于在一个监测周期内，当监测到首先出现在所述预设区域内指定位置的用户肢体离开所述预设区域时，进入下一个监测周期；或者

第二刷新模块，用于当连续监测时长达到预设时长时，进入下一个监测周期。