CN109725813B - 基于标记图像运动轨迹的显示界面切换控制方法及系统 - Google Patents

Abstract

本发明公开了一种基于标记图像运动轨迹的显示界面切换控制方法及系统，通过获取的控制终端投射出的标记图像的运动轨迹生成控制指令，然后基于该控制指令对演示设备当前显示的显示界面进行控制，采用本发明提供的方案，突破了按键实现光标定位的迟钝性和不确定性，提高了可用性，演讲者即使在演讲场所内移动也可以对演示设备当前显示的显示界面进行控制，更利于演讲的互动性，提升了用户体验的满意度，另外，通过本发明提供的方案，用户通过移动控制终端投射出的图标图像便可对演示设备当前显示的显示界面进行控制，也增强了趣味性。

Description

基于标记图像运动轨迹的显示界面切换控制方法及系统

技术领域

本发明涉及通信技术领域，更具体地说，涉及一种基于标记图像运动轨迹的显示界面切换控制方法及系统。

背景技术

文稿演示是教学和会议中重要的一环。随着IT技术的不断发展，文稿演示的模式也日渐进步，基于PC机的电子文稿演示已成为当前文稿演示的主流方式，而文稿演示辅助设备则以键盘、鼠标为主。演讲时，演讲文稿在PC机上播放，通过与PC机相连的投影仪投射到屏幕上输出。在演讲的过程中，如果演讲人想要对屏幕上的显示内容进行控制，例如，切换显示界面、或者切换显示界面的弹出效果，则通常需要在PC机本地进行操作，也即演讲人不能离开PC机，限制了演讲者的活动范围，不利于演讲的互动性，所以，如何消除这些缺点，成为了目前基于电子文稿演示的演讲迫切需要解决的技术问题。

发明内容

为解决上述技术问题，本发明提供一种基于标记图像运动轨迹的显示界面切换控制方法及系统。

为实现上述目的，本发明所采用的具体技术方案如下：

一种基于标记图像运动轨迹的显示界面切换控制方法，包括：

获取控制终端投射出的标记图像的运动轨迹；

基于所述运动轨迹生成控制指令；

利用所述控制指令对所述演示设备当前显示的显示界面进行控制。

进一步地，在所述基于所述运动轨迹生成控制指令之前，还包括以下步骤：

所述控制终端接收无线通信功能开启指令，并在开启所述控制终端的无线通信功能后与所述演示设备建立连接。

进一步地，所述获取控制终端投射出的标记图像的运动轨迹包括：

对显示所述显示界面的显示屏幕进行拍摄，得到多张拍摄图片，每一所述拍摄图片中包含所述控制终端投射出的标记图像；

获取每一所述拍摄图片中的标记图像的位置信息；

基于所述位置信息得到所述标记图像的运动轨迹。

进一步地，利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄，或利用所述演示设备上的摄像模块对所述显示屏幕进行拍摄，或利用摄像设备对所述显示屏幕进行拍摄。

进一步地，当利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄时，所述基于所述运动轨迹生成控制指令包括：

所述控制终端根据所述运动轨迹生成控制指令；

所述利用所述控制指令对所述演示设备当前显示的显示界面进行控制包括：

所述控制终端将所述控制指令发送给所述演示设备，以供所述演示设备根据所述控制指令对当前显示的显示界面进行控制。

进一步地，当利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄时，所述基于所述运动轨迹生成控制指令包括：

所述控制终端将获取的所述标记图像的运动轨迹的数据发送给所述演示设备，以供所述演示设备根据接收到的数据生成控制指令，并根据所述控制指令对所述演示设备当前显示的显示界面进行控制。

进一步地，所述利用所述控制指令对所述演示设备当前显示的显示界面进行控制包括：

根据所述控制指令控制所述演示设备以当前的显示界面弹出效果将当前显示的显示界面切换成另一显示界面；

或，

根据所述控制指令控制所述演示设备切换显示界面的弹出效果，以供所述演示设备在接收到显示界面切换指令后以切换后的显示界面弹出效果实现显示界面的切换；

或

根据所述控制指令控制所述演示设备切换显示界面的弹出效果，并以切换后的弹出效果将当前显示的显示界面切换成另一显示界面。

进一步地，所述基于所述运动轨迹生成控制指令包括：

根据所述运动轨迹得到所述标记图像的平面移动方向，所述控制指令中包含所述平面移动方向；

所述根据所述控制指令控制所述演示设备切换显示界面的弹出效果包括：

基于所述平面移动方向控制所述演示设备切换显示界面的弹出效果。

进一步地，所述基于所述平面移动方向控制所述演示设备切换显示界面的弹出效果包括：

将所述演示设备的显示界面弹出效果切换为沿所述平面移动方向弹出显示界面的效果。

进一步地，本发明还提供一种基于标记图像运动轨迹的显示界面切换控制系统，包括显示界面控制模块以及用于与控制终端建立通信连接的通信模块，所述显示界面控制模块用于基于控制指令对当前显示的显示界面进行控制，所述控制指令为利用所述控制终端投射出的标记图像的运动轨迹生成的指令。

本发明提供的基于标记图像运动轨迹的显示界面切换控制方法及系统，通过获取的控制终端投射出的标记图像的运动轨迹生成控制指令，然后基于该控制指令对演示设备当前显示的显示界面进行控制，采用本发明提供的方案，突破了按键实现光标定位的迟钝性和不确定性，提高了可用性，演讲者即使在演讲场所内移动也可以对演示设备当前显示的显示界面进行控制，更利于演讲的互动性，提升了用户体验的满意度，另外，通过本发明提供的方案，用户通过移动控制终端投射出的图标图像便可对演示设备当前显示的显示界面进行控制，也增强了趣味性。

附图说明

下面将结合附图及实施例对本发明作进一步说明，附图中：

图1为本发明实施例提供的基于标记图像运动轨迹的显示界面切换控制方法的流程示意图；

图2为本发明实施例提供的获取标记图像运动轨迹的流程示意图；

图3为本发明实施例提供的整个显示界面弹出时的部分效果示意图；

图4为本发明实施例提供的部分显示界面弹出时的部分效果示意图；

图5为本发明实施例提供的标记图像在显示屏幕上平面移动方向的示意图；

图6为本发明实施例提供的演示设备的显示界面弹出效果的示意图；

图7为本发明实施例提供的基于标记图像运动轨迹的显示界面切换控制系统的结构示意图。

具体实施方式

为了使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述，应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

请参见图1所示，本实施例提供一种基于标记图像运动轨迹的显示界面切换控制方法，包括：

S101：获取控制终端投射出的标记图像的运动轨迹。

需要说明的是，本实施例中的控制终端可以是智能手机，也可以是智能可穿戴设备，例如智能手表，还可以是与演示设备专门配对的设备。本实施例中的控制终端应当具有激光发射功能，可以发射激光信号，从而投射出标记图像。

用户可以通过按压控制终端上的目标按钮可以触发控制终端投射出标记图像，这里的目标按钮可以是物理按钮，也可以是虚拟按钮，用户如果想要对演示设备显示的显示界面进行控制，则可以按压控制终端的目标按钮，投射出标记图像，通过移动控制终端从而控制标记图像的移动。

本实施例中获取控制终端投射出的标记图像的运动轨迹的步骤可以参见图2所示，包括：

S21：对演示设备的显示屏幕进行拍摄，得到多张拍摄图片，每一拍摄图片中包含控制终端投射出的标记图像。

通常情况下来说，演示设备包括主机以及与该主机相连的投影设备，本实施例中的显示屏幕主要是指投影设备的投影屏幕。

S22：获取每一拍摄图片中的标记图像的位置信息。

S23：基于位置信息得到标记图像的运动轨迹。

需要说明的是，在第一种示例中，可以通过控制终端上的摄像模块对演示设备的显示屏幕进行拍摄，也即控制终端可以获取得到标记图像的运动轨迹；在第二种示例中，可以通过演示设备上的摄像模块对显示屏幕进行拍摄，具体的，可以利用投影设备上的摄像模块进行拍摄，这样，演示设备就可以直接得到标记图像的运动轨迹，然后演示设备可以根据该运动轨迹生成控制指令，然后基于该控制指令对显示界面进行控制；在第三种示例中可以通过独立与演示设备和控制终端的第三方摄像设备对显示屏幕进行拍摄，从而得到标记图像的运动轨迹，摄像设备在得到标记图像的运动轨迹后，可以直接将该运动轨迹数据发送给演示设备。

S102：基于该运动轨迹生成控制指令。

对于上述的第一种示例，在步骤S102之前，控制终端可以接收无线通信功能开启指令，并在开启无线通信功能后与演示设备建立连接。本实施例中的控制终端与演示设备可以基于蓝牙通信，或者基于WIFI通信，或者基于NFC通信。

S103：利用所该控制指令对演示设备当前显示的显示界面进行控制。

应当理解的是，当利用控制终端上的摄像模块对显示屏幕进行拍摄时，可以由控制终端根据运动轨迹生成控制指令，再将该控制指令发送给演示设备，以供演示设备根据该控制指令对当前显示的显示界面进行控制；或者也可以由控制终端将获取的运动轨迹的数据发送给演示设备，以供演示设备根据接收到的运动轨迹数据生成控制指令，并根据该控制指令对当前显示的显示界面进行控制。

这里需要对本实施例中显示界面的切换以及显示界面弹出效果的切换进行说明，本实施例中所指的将当前的显示界面切换成另一显示界面包括两种方式，一种是将演示设备显示屏幕上显示的整个显示界面切换成另一显示界面，以演示设备播放PPT为例，也即是将当前显示的幻灯片切换为下一页，或者上一页幻灯片；另一种是将演示设备显示屏幕上显示的部分显示界面进行切换，一页PPT上通常包含多个元素，比如包含背景图片，以及背景图片上的标题、插图等等，假设演示设备显示屏幕上当前显示的显示界面为背景图片+标题，则根据该控制指令可以将显示屏幕上显示的显示界面切换为背景图片+标题+插图，也即是通过控制显示界面上部分元素的变化实现不同显示界面的切换。本实施例中所指的切换显示界面的弹出效果也包括两种：一种是切换演示设备显示屏幕上显示的整个显示界面的弹出效果，比如将整个显示界面以图3所示效果的中的任意一种效果弹出，另一种是切换演示设备上显示的部分显示界面的弹出效果，比如当前的显示界面为背景图片+标题，则根据该控制指令可以切换该显示界面上当前未显示出来的元素(也即部分显示界面)的弹出效果，比如当接收到插图显示指令时，可以以图4所示效果中的任意一种效果弹出插图这个元素。

对于步骤S103而言，可以包括以下控制方式中的至少一种：

(一)：根据控制指令控制演示设备以当前的显示界面弹出效果将当前显示的显示界面切换成另一显示界面。也即此时的控制指令只是用于控制显示界面内容的切换，也即此时的控制指令实质上是一种显示界面切换指令，比如将显示界面切换为下一页的界面，或者切换为上一页的界面。所以本实施例中的运动轨迹可以包括第一预设轨迹和第二预设轨迹，第一预设轨迹对应的控制指令可以为下一页界面切换指令，第二预设轨迹对应的控制指令可以为上一页界面切换指令，这个对应关系可以由开发人员灵活设置，这里的第一预设轨迹可以为左右摇摆运动轨迹，第二预设轨迹可以为上下摇摆运动轨迹，当然了第一预设轨迹和第二预设轨迹也可以是用户自定义的其他轨迹。

(二)：根据控制指令控制演示设备切换显示界面的弹出效果，以供演示设备在接收到显示界面切换指令后以切换后的显示界面弹出效果实现显示界面的切换。此时的控制指令只是用于实现显示界面弹出效果的切换，也是此时的控制指令实质上是一种弹出效果切换指令，若需要将当前显示的显示界面切换为另一显示界面，则需要另外下发显示界面切换指令。这里以控制终端生成控制指令为例进行具体说明，对于此种示例，控制终端上应当预先存储有运动轨迹和弹出效果切换指令的对应关系表，这个关系表可以是开发人员预先设置的，也可以是由用户自定义的，这个对应关系表中可以包括第三运动轨迹和第一弹出效果切换指令的对应关系，第四运动轨迹和第二弹出效果切换指令的对应关系，以及更多运动轨迹和弹出效果切换指令的对应关系，这里不再赘述，这里的第三运动轨迹和第四运动轨迹包括但不限于以下运动轨迹中的任意两种：矩形轨迹、圆形轨迹、三角形轨迹，第一弹出效果切换指令和第二弹出效果切换指令包括但不限于以下指令中的任意两种：抖动弹出效果切换指令、边缘进入切换指令、旋转进入切换指令。

可以理解的是，在一些实施例中，控制终端或者演示设备中可以同时存储有运动轨迹与弹出效果切换指令的对应关系以及运动轨迹与显示界面切换指令的对应关系。

(三)：根据控制指令控制演示设备切换显示界面的弹出效果，并以切换后的弹出效果将当前显示的显示界面切换成另一显示界面。也即此时的控制指令不仅用于切换弹出效果，还用于切换显示界面，也即此时的控制指令实质上是一种效果-内容切换指令。

在一些实施例中，可以将控制终端的运动轨迹与显示界面的弹出效果直接联系起来，也即步骤S102包括：

根据运动轨迹得到标记图像的平面移动方向，控制指令中包含该平面移动方向。然后可以基于该平面移动方向控制演示设备切换显示界面的弹出效果。可选的，可以将演示设备的显示界面弹出效果切换为沿平面移动方向弹出显示界面的效果。

比如，标记图像在显示屏幕(投影设备的投影屏幕)上的平面移动方向为图5所示的方向，则演示设备在切换显示界面时，新的显示界面可以沿如图5所示的方向弹入显示屏幕，也即如图6所示，将标记图像的运动轨迹与弹出效果直接联系起来，增强了趣味性。应当说明的是，这里只是为了便于解释，示出了控制终端的平面移动轨迹为直线的示例，在一些实施例中，标记图像在显示屏幕上的平面移动方向(平面移动轨迹)可以是三角形、五角星形、正方形、圆形等等，则对应的显示界面弹出效果可以为以三角形轨迹弹出、以五角星轨迹弹出、以正方形轨迹弹出、以圆形轨迹弹出，也即该显示界面从第一次出现在显示屏幕上至最终固定显示在显示屏幕上的过程中的移动路径与控制终端在该平面坐标系中的移动轨迹一致。

请参见图7所示，本实施例还提供一种基于标记图像运动轨迹的显示界面切换控制系统，包括演示设备70和控制终端71，其中，演示设备70包括显示界面控制模块701以及用于与控制终端建立通信连接的通信模块702，显示界面控制模块701用于基于控制指令对当前显示的显示界面进行控制，控制指令为利用控制终端投射出的标记图像的运动轨迹生成的指令。

本实施例提供的基于标记图像运动轨迹的显示界面切换控制方法及系统，通过获取的控制终端投射出的标记图像的运动轨迹生成控制指令，然后基于该控制指令对演示设备当前显示的显示界面进行控制，采用本实施例提供的方案，突破了按键实现光标定位的迟钝性和不确定性，提高了可用性，演讲者即使在演讲场所内移动也可以对演示设备当前显示的显示界面进行控制，更利于演讲的互动性，提升了用户体验的满意度，另外，通过本实施例提供的方案，用户通过移动控制终端投射出的图标图像便可对演示设备当前显示的显示界面进行控制，也增强了趣味性。

要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (5)

1.一种基于标记图像运动轨迹的显示界面切换控制方法，其特征在于，包括：

控制终端接收无线通信功能开启指令，并在开启所述控制终端的无线通信功能后与演示设备建立连接；

获取控制终端投射出的标记图像的运动轨迹，并根据所述运动轨迹得到所述标记图像的平面移动方向；

基于所述运动轨迹生成控制指令，该控制指令包含所述平面移动方向；

利用所述控制指令对所述演示设备当前显示的显示界面进行控制，具体为：

根据所述控制指令控制所述演示设备切换显示界面的弹出效果，并以切换后的弹出效果将当前显示的显示界面沿所述平面移动方向切换成另一显示界面。

2.如权利要求1所述的基于标记图像运动轨迹的显示界面切换控制方法，其特征在于，所述获取控制终端投射出的标记图像的运动轨迹包括：

对显示所述显示界面的显示屏幕进行拍摄，得到多张拍摄图片，每一所述拍摄图片中包含所述控制终端投射出的标记图像；

获取每一所述拍摄图片中的标记图像的位置信息；

基于所述位置信息得到所述标记图像的运动轨迹。

3.如权利要求2所述的基于标记图像运动轨迹的显示界面切换控制方法，其特征在于，利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄，或利用所述演示设备上的摄像模块对所述显示屏幕进行拍摄，或利用摄像设备对所述显示屏幕进行拍摄。

4.如权利要求3所述的基于标记图像运动轨迹的显示界面切换控制方法，其特征在于，当利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄时，所述基于所述运动轨迹生成控制指令包括：

所述控制终端根据所述运动轨迹生成控制指令；

所述利用所述控制指令对所述演示设备当前显示的显示界面进行控制包括：

所述控制终端将所述控制指令发送给所述演示设备，以供所述演示设备根据所述控制指令对当前显示的显示界面进行控制。

5.如权利要求3所述的基于标记图像运动轨迹的显示界面切换控制方法，其特征在于，当利用所述控制终端上的摄像模块对所述显示屏幕进行拍摄时，所述基于所述运动轨迹生成控制指令包括：

所述控制终端将获取的所述标记图像的运动轨迹的数据发送给所述演示设备，以供所述演示设备根据接收到的数据生成控制指令，并根据所述控制指令对所述演示设备当前显示的显示界面进行控制。

Images