CN108829329A - 一种操作对象展示方法、装置和可读介质 - Google Patents

一种操作对象展示方法、装置和可读介质 Download PDF

Info

Publication number
CN108829329A
CN108829329A CN201810463241.8A CN201810463241A CN108829329A CN 108829329 A CN108829329 A CN 108829329A CN 201810463241 A CN201810463241 A CN 201810463241A CN 108829329 A CN108829329 A CN 108829329A
Authority
CN
China
Prior art keywords
difference
touch event
sampled point
operation object
location information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810463241.8A
Other languages
English (en)
Other versions
CN108829329B (zh
Inventor
吴正山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201810463241.8A priority Critical patent/CN108829329B/zh
Publication of CN108829329A publication Critical patent/CN108829329A/zh
Application granted granted Critical
Publication of CN108829329B publication Critical patent/CN108829329B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object

Abstract

本发明公开了一种操作对象展示方法、装置和可读介质，属于终端技术领域，本发明提供的方法及装置中，针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；然后针对确定出的每一采样点，生成该采样点对应的触摸事件；针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后操作对象的空间位置信息；根据确定出的空间位置信息，在操作界面上的相应位置处展示操作对象。采用上述方法，根据用户触发的交互指令实时向用户展示操作对象的移动路径，可以在更高的维度进行交互。

Description

一种操作对象展示方法、装置和可读介质
技术领域
本发明涉及终端技术领域，尤其涉及一种操作对象展示方法、装置和可读介质。
背景技术
随着科技的发展，用户对游戏、视频等多媒体数据的感知要求越来越高，由此增强现实(Augmented Reality，AR)技术应运而生。AR技术将真实世界和虚拟世界信息融合在一起，在一定程度上满足了用户的感知需求。
3d交互软件一般是通过锚点的方式来移动3d模型，例如，图1a-图1c分别给出了现有的三个AR应用的移动3d模型的效果示意图，其中，第一种应用中，移动3d模型需在点状平面上进行交互，而第二种应用中，移动3d模型需在网状平面上进行交互，第三种应用中，在通过鼠标调整3d模型时，也必须事先选定其中一维坐标轴或者二维欧式平面进行调整。上述第一种应用和第二种应用是把屏幕二维坐标转化为空间平面上的移动，上述第三种应用中，通过单次点击只能在3d空间中朝一个方向移动。
由此可见，现有的AR应用无法在更高的维度进行交互，限制了更为丰富的交互方式，因此，如何将AR应用的展示界面上物体的二维坐标转化为三维坐标，支持更高维度的交互是亟待解决的技术问题之一。
发明内容
本发明实施例提供一种操作对象展示方法、装置和可读介质，用以解决现有的AR应用无法再更高的维度进行交互，限制了更为丰富的交互方式的问题。
第一方面，本发明实施例提供一种操作对象展示方法，包括：
针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；
针对确定出的每一采样点，生成该采样点对应的触摸事件；
针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；并
根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
这样，根据用户触发的交互指令对应的滑动轨迹上采样点的位置信息来确定操作对象的空间位置信息，而每一采样点对应一个触摸事件，这样可以将交互指令看作多个单次触摸事件构成的序列，操作界面的二维坐标通过单次触摸事件序列确定各个触摸事件下操作对象的空间位置信息，可以在更高的维度进行交互，实现了更为丰富的交互方式。
较佳地，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及
针对任一触摸事件，根据上一个触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值；以及
分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值；
根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
进一步地，根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角；
根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
可选地，按照以下流程确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息：
根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
进一步地，根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；
若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
较佳地，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
优选地，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
可选地，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；
否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
第二方面，本发明实施例提供一种操作对象展示装置，包括：
获取单元，用于针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；
生成单元，用于针对确定出的每一采样点，生成该采样点对应的触摸事件；
第一确定单元，用于针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；
展示单元，用于根据所述第一确定单元确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
较佳地，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及
所述第一确定单元，具体用于分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值；以及分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值；根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
优选地，所述第一确定单元，具体用于根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角；根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
可选地，所述装置，还包括：
第二确定单元，用于根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
较佳地，所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
较佳地，所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
较佳地，所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
较佳地，所述第一确定单元，具体用于若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
第三方面，本发明实施例提供一种计算机可读介质，存储有计算机可执行指令，所述计算机可执行指令用于执行本申请提供的操作对象展示方法。
第四方面，本发明实施例提供一种终端设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本申请提供的操作对象展示方法。
本发明有益效果：
本发明实施例提供的操作对象展示方法、装置和可读介质，针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；然后针对确定出的每一采样点，生成该采样点对应的触摸事件；针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；并根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。根据用户交互指令对应的滑动轨迹的采样点的位置信息来确定操作对象的空间位置信息，而每一采样点对应一个触摸事件，这样可以将交互指令看作多个单次触摸事件构成的序列，操作界面的二维坐标通过单次触摸事件序列确定各个触摸事件下操作对象的空间位置信息，可以在更高的维度进行交互，实现了更为丰富的交互方式；此外还可以能够减少用户操作频率、简化UI设计和用户教育。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1a-图1c为现有技术中三种AR应用的移动3d模型的效果示意图；
图2为实施本发明提供的操作对象展示方法的终端设备的结构示意图；
图3a为本发明实施例提供的包含操作对象-足球的应用程序的操作界面的效果示意图；
图3b-图3d为本发明实施例提供的用户在该操作界面上执行的交互指令的效果示意图；
图4a为本发明实施例提供的操作对象展示方法的流程示意图；
图4b为本发明实施例提供的用户直接作用于足球的交互指令的效果示意图；
图4c为本发明实施例提供的交互指令对应的滑动轨迹上的采样点的示意图；
图5为本发明实施例提供的确定空间位置信息的流程示意图；
图6a为本发明实施例提供的执行步骤S23的流程示意图；
图6b-图6c为本发明实施例提供的夹角的示意图；
图6d为本发明实施例提供的三维坐标轴的示意图；
图7为本发明实施例提供操作对象展示装置的结构示意图；
图8为本发明实施例提供的实施操作对象展示方法的终端设备的硬件结构示意图。
具体实施方式
本发明实施例提供的操作对象展示方法、装置和可读介质，通过AR应用的展示界面上物体的二维坐标转化为三维坐标，支持更高维度的交互，用以解决现有的AR应用无法再更高的维度进行交互，限制了更为丰富的交互方式的问题。
以下结合说明书附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明，并且在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
为了便于理解本发明，本发明涉及的技术术语中：
1、AR技术，为一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界展示给用户并与用户进行互动。
2、操作对象的空间位置信息，是由三维坐标值构成，以及起始空间位置信息也是由三维坐标值构成，而这三维坐标值分别对应第一维坐标轴上的值、第二维坐标轴上的值和第三维坐标轴上的值。
3、第一维坐标轴，为三维空间中的横坐标轴X轴，而第一维坐标值则表征的是三维空间中的物体在横坐标轴上的取值，本发明中执行该触摸事件后所述操作对象的第一维坐标值表征的是执行触摸事件后操作对象在三维空间中横坐标轴上的取值，可记为3d_x。
4、第二维坐标轴，为三维空间中的纵坐标轴Y轴，而第二维坐标值则表征的是三维空间中的物体的在纵坐标轴上的取值，本发明中执行该触摸事件后所述操作对象的第二维坐标值表征的是执行触摸事件后操作对象在三维空间中纵坐标轴上的取值，也可记为3d_y。
5、第三维坐标轴，为三维空间中的Z坐标轴，而第三维坐标值则表征的是三维空间中的物体的在Z坐标轴上的取值，本发明中执行该触摸事件后所述操作对象的第二维坐标值表征的是执行触摸事件后操作对象在三维空间中Z坐标轴上的取值，也可记为3d_z。
6、终端设备，为可以安装各类应用程序，并且能够将已安装的应用程序中提供的对象进行显示的设备，该电子设备可以是移动的，也可以是固定的。例如，手机、平板电脑、各类可穿戴设备、车载设备、个人数字助理(personal digital assistant，PDA)、销售终端(point of sales，POS)、或其它能够实现上述功能的电子设备等。
7、应用程序，为可以完成某项或多项特定工作的计算机程序，它具有可视的显示界面，能与用户进行交互，比如电子地图和微信等都可以称为应用程序。
现有技术中，图1a和图1b都是需要让用户拾取模型且只能在空间某个平面上进行选择放置，若在任意空间位置放置必须不断重新打开应用，尝试找到合适的位置，该方式虽然用户意图明显，但限制了与真实世界的全方位交互，有可能出现无法找到合适的位置等问题；图1c中在利用Unity IDE制作Unity 3D Game object场景时，若调整到其相对坐标(1,1,1)的空间位置，必须连续操作两次才能完成，第一步为：选取x-y锚平面，移动到(1,1,0)的相对位置，然后再选取z轴，调整到相对坐标(0,0,1)的最终位置，这种方式操作简单，但操作步骤需要多次才能完成。
为了解决现有的AR应用无法在更高的维度与用户进行交互，限制了更为丰富的交互方式的问题，本发明实施例给出了解决方案，提供了一种操作对象展示方法。本发明提供的方法，可以应用于具有增强现实功能的应用程序中，所述应用程序可以按照于终端设备中。该终端设备可以为手机、平板电脑、各类可穿戴设备、PDA(Personal DigitalAssistant，掌上电脑)等。图2示出了一种终端设备100的结构示意图。参照图2所示，终端设备100包括：处理器110、存储器120、重力加速度传感器130、显示单元1/40、输入单元150、射频(radio frequency，RF)电路160以及电源170等。
其中，处理器110是终端设备100的控制中心，利用各种接口和线路连接各个部件，通过运行或执行存储在存储器120内的软件程序和/或数据，执行终端设备100的各种功能，从而对终端设备进行整体监控。可选的，处理器110可包括一个或多个处理单元；优选的，处理器110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。在一些实施例中，处理器、存储器、可以在单一芯片上实现，在一些实施例中，它们也可以在独立的芯片上分别实现。
存储器120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、各种应用程序等；存储数据区可存储根据终端设备100的使用所创建的数据等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件等。
重力加速度传感器130可检测各个方向上(一般为三轴)加速度的大小，同时，所述重力加速度传感器130还可用于检测终端静止时重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等。
显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端设备100的各种菜单等，本发明实施例中主要用于显示终端设备100中各应用程序的显示界面以及显示界面中显示的文本、图片等对象。显示单元140可以包括显示面板141。显示面板141可以采用液晶显示屏(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置。
输入单元150可用于接收用户输入的数字或字符等信息。输入单元150可包括触控面板151以及其他输入设备152。其中，触控面板151，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触摸笔等任何适合的物体或附件在触控面板151上或在触控面板151附近的操作)，例如本发明实施例中的触控面板151可用于检测是否有用户的按压操作，以此确定是否接收到用户在包含操作对象的操作界面上执行的交互指令。具体的，触控面板151可以检测用户的触摸操作，并检测触摸操作带来的信号，将这些信号转换成触点坐标，发送给处理器110，并接收处理器110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板151。其他输入设备152可以包括但不限于物理键盘、功能键(比如音量控制按键、开关机按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
当然，触控面板151可覆盖显示面板141，当触控面板151检测到在其上或附近的触摸操作后，传送给处理器110以确定触摸事件的类型，随后处理器110根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图2中，触控面板151与显示面板141是作为两个独立的部件来实现终端设备100的输入和输出功能，但是在某些实施例中，可以将触控面板151与显示面板141集成而实现终端设备100的输入和输出功能。
终端设备100还可包括RF电路160，可用于和基站进行收发信息或数据。通常，RF电路160包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(low noiseamplifier，LNA)、双工器等。本发明实施例中，RF电路160可以通过无线通信与网络和其他电子设备通信，所述无线通信可以使用任一通信标准或协议。
终端设备100还包括给各个部件供电的电源170(比如电池)，电源可以通过电源管理系统与处理器110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗等功能。
终端设备100还可以包括音频电路180、扬声器181、麦克风182可提供用户与终端设备之间的音频接口。音频电路180可将接收到的音频数据转换后的电信号传输到扬声器181，由扬声器181转换为声音信号输出；另一方面，麦克风182将收集的声音信号转换为电信号，由音频电路180接收后转换为音频数据，再将音频数据输出处理器110处理后输出，或者将音频数据输出至存储器120以便进一步处理。
终端设备100还可包括一个或多个传感器，例如压力传感器、重力加速度传感器、接近光传感器等。当然，根据具体应用中的需要，上述终端设备100还可以包括摄像头等其它部件，由于这些部件不是本申请实施例中重点使用的部件，因此，在图2中没有示出，且不再详述。
本领域技术人员可以理解，图2仅仅是终端设备的举例，并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件。
本发明提供的操作对象展示方法的应用场景是，在终端设备中安装的增强现实的应用程序处于开启状态时，当用户需要与该应用程序进行交互时，用户会在终端设备的触控面板151执行交互指令，即对该应用程序向用户展示的操作界面执行交互指令，终端设备会针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；然后针对确定出的每一采样点，生成该采样点对应的触摸事件；针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；并根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象，这样可以实现根据用户的交互指令实时向用户展示用户每执行一次滑动时，操作对象的实时位置，充分向用户展示了更为丰富的交互方式。图3a给出了一个包含操作对象-足球的应用程序的操作界面的效果示意图，图3b-3d给出了用户在该操作界面上执行的交互指令的效果示意图。当用户在图3a所示的操作界面上执行图3b～图3d任一所示的交互指令后，终端设备会按照本发明提供的方法根据用户触发的交互指令实时向用户展示足球的移动路径，可以在更高的维度进行交互，实现了更为丰富的交互方式，提高用户的感知体验。
参照图4a所示，为本发明实施例提供的操作对象展示方法的流程示意图。在下文的介绍过程中，以将该方法应用在图2所示的终端设备100为例。该方法的具体实施流程如下：
S11、终端设备针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息。
本步骤中，当用户打开终端设备中具有增强现实功能的应用程序后，应用程序会出现操作对象，用户欲与该应用程序的操作对象进行交互时，会在该应用程序的操作界面任一位置处执行滑动操作，该滑动操作可以不直接接触操作对象，也可以直接作用于操作对象，图3b-图3d给出了不直接作用于足球的交互指令，图4b给出了直接作用于足球的交互指令。
一种可能的实施方式中，当用户在操作界面上执行的交互指令为滑动指令时，会产生一个滑动轨迹，若产生的滑动轨迹为连续的，例如图4b的交互指令产生的滑动轨迹为箭尾-箭头之间的连线，箭尾对应滑动轨迹的起始点，箭头对应滑动轨迹的结束点，可以理解为当用户开始按压触控面板时与操作界面接触的点为起始点，当用户离开触控面板时与操作界面接触的点为结束点。然后可以对该滑动轨迹进行采样处理，可以得到多个采样点，参考图4c所示，图4c中给出了N1～Nn个采样点，本发明中采样点的数量可以根据实际情况而定，例如可以设定采样频率或采样间隔，若需要向用户展示精密度比较高的操作对象的运动轨迹，则通过设置较大的采样频率或较小的采样间隔，由此可以在滑动轨迹上提取大量的采样点，若考虑到用户的人眼识别能力，可以向用户展示人眼感知不到断层的运动轨迹，可以基于此条件来对滑动轨迹进行采样得到适量的采样点，故本发明对采样点的数量不进行限定。若设置较小的采样频率或较大的采样间隔，由此可以在滑动轨迹上提取较小的采样点，会在操作界面上产生操作对象从一个位置跳到另一个位置的现象。
在对滑动轨迹进行采样后，可以确定所有的采样点在操作界面上的位置信息。
在另一种可能的实施方式中，若用户执行的交互指令为点击或双击指令，则点击指令或双击指令的滑动轨迹即为一个单点轨迹，起始点和结束点为同一个点，即当用户开始按压触控面板时与操作界面接触的点。若交互指令为点击指令，可以根据点击指令的单点轨迹确定两个采样点，但这两个采样点的位置信息相同，然后执行后续步骤；若交互指令为双击指令，则可以看作在操作界面同一位置处执行两次点击指令，根据双击指令的单点轨迹产生四个采样点，但这四个采样点的位置信息相同，然后执行后续步骤。
再一种可能的实施方式中，若用户执行的交互指令为在操作界面某一位置处执行点击指令，然后在预设时间内再在操作界面另一位置处执行点击指令等时，在此情况下，可以将用户第一次按压触控面板时与操作界面接触的点作为一个采样点，然后将用户第二次按压触控面板时与操作界面接触的点作为另一个采样点，然后再执行后续步骤。若用户执行的交互指令为在操作界面上多次执行点击指令，则采样点的确定方法与前述类似，即：将每次与触控面板接触的点作为采样点。
S12、终端设备针对确定出的每一采样点，生成该采样点对应的触摸事件。
本步骤中，终端设备在确定滑动轨迹上的采样点后，针对每一采样点，可以生成该采样点的触摸事件，也即每一采样点对应一个触摸事件。较佳地，本发明中的触摸事件可以但不限于包括Touch Down事件、Touch Move事件和Touch Up事件。
本发明中，在用户开始按压触控面板时，即滑动轨迹的起始点，可以根据该起始点生成一个Touch Down事件，然后当用户沿着图4b所示的滑动方向移动时，终端设备可以根据采集到的采样点生成连续的Touch Move事件。当用户离开触控面板时，终端设备会根据该采样点生成一个Touch UP事件。
针对交互指令为滑动指令时，可以根据设定的采样频率或采样间隔对滑动指令的滑动轨迹进行采样，以滑动轨迹的起始点开始一次进行采样，然后每一次采样得到采样点后，生成该采样点的触摸事件。例如图4c中采样点为起始点时生成的触摸事件为TouchDown事件，图4c中采样点N1～Nn-1生成的触摸事件为连续的Touch Move事件，采样点Nn生成的触摸事件为Touch UP事件。
若交互指令为点击指令，则根据点击指令的单点轨迹获得的两个采样点分别生成Touch Down事件和Touch UP事件。同样若交互指令为双击指令，则根据产生的四个采样点分别生成Touch Down事件、Touch UP事件、Touch Down事件和Touch UP事件。
若交互指令为多次执行点击指令，则可以根据点击次数生成相应数量的TouchDown事件和Touch UP事件。
S13、终端设备针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
具体地，当用户从一个采样点移动到另一个采样点，相应地，操作对象也会在三维空间中从一个位置移动到另一个位置处。故需要在每从一个采样点移动到下一个采样点后，需要计算在下一个采样点处，操作对象在三维空间中的空间位置信息，这样才能准确确定出操作对象在三维空间中的运动轨迹。
进一步地，每一采样点对应一个触摸事件，利用单次触摸事件来确定执行该单次触摸事件后操作对象的空间位置信息，这样能够减少用户操作频率，简化UI设计和用户教育。
较佳地，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及可以按照图5所示的流程确定上述空间位置信息，包括以下步骤：
S21、分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值。
本步骤中，由于操作界面为二维平面，故滑动轨迹上的采样点的位置信息和起始点的位置信息是由二维坐标值构成的。故可以将该触摸事件对应的采样点在操作界面上的横坐标记为moveTouchX，纵坐标记为moveTouchY。将上一触摸事件对应的采样点在操作界面上的横坐标记为mLastDownX，纵坐标记为mLastDownY。则可以得出第一差值和第二差值分别由公式(1)表示：
公式(1)中，dx为该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标之间的第一差值；dy为该触摸事件对应的采样点与上一触摸事件对应的采样点的纵坐标之间的第二差值。
当用户从上一采样点移动到当前采样点过程中，会将上一采样点的位置信息赋值为mLastDownX和mLastDownY。例如在确定出执行该触摸事件后操作对象的空间位置信息，需要将该触摸事件对应的采样点的横坐标moveTouchX和moveTouchY分别赋值为mLastDownX和mLastDownY，用公式(2)表示：
通过采用公式(2)，可以较易得到上一触发事件对应的采样点的位置信息，为确定执行下一触发事件后操作对象的空间位置信息做准备。需要说明的是，起始点的位置信息记为：则当从起始点移动到第二采样点时，在计算第一个Move事件对应的第二个采样点与起始点的横坐标之间的第一差值时，为了便于计算，将公式中上一采样点的横纵坐标赋值为：mLastDownX＝TouchX,mLastDownY＝TouchY，则第二采样点与起始点的横坐标之间的第一差值为：dx＝moveTouchX-touchX，同理第二采样点与起始点的纵坐标之间的第一差值为：dy＝moveTouchY-touchY。
S22、分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值。
具体地，可以按照公式(3)表示：
公式(3)中，ndx为该触摸事件对应的采样点与起始点的横坐标之间的第三差值；ndy为该触摸事件对应的采样点与起始点的纵坐标之间的第四差值。
为了便于计算，可以对第一差值、第二差值、第三差值和第四差值分别进行取整计算，即参考公式(5)所示：
然后利用取整计算后的第一差值、第二差值、第三差值和第四差值执行后续过程，即后续流程中需要第一差值、第二差值、第三差值或第四差值参与计算时，可以利用取整后的第一差值、第二差值、第三差值或第四差值参与计算。为了方便描述以未执行取整计算为例描述后续过程。
S23、根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
较佳地，可以按照图6a所示的流程执行步骤S23，包括以下步骤：
S31、根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角。
较佳地，可以按照下述方法执行步骤S31：
若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；
若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
为了便于理解，可以用公式(6)来表示夹角：
公式(6)中，deg为该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角，ortho2Rad为反正切函数。为了便于理解，图6b给出了公式(6)中|dx|＞|dy|对应的夹角的示意图；图6c给出了公式(6)中|dx|≤|dy|对应的夹角的示意图，图6b和图6c均是以X轴和Y轴构成的二维坐标平面为例进行说明的，与Z轴无关。采用ndx和ndy来计算夹角deg，可以避免滑动带来的角度积累误差。
需要什么的是，当ndx或ndy取值为0时，deg＝π/2。
S32、根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
具体地，本步骤中的第一差值和第二差值已由上述公式(1)确定，而本步骤中的起始空间位置信息可以为上一次用户执行交互指令后确定出的空间位置信息，而打开具有增强现实功能的应用程序时，操作对象的原始空间位置信息可以确定的，可以理解为操作对象的原始空间位置信息的三维坐标值是定值，即操作对象的原始空间位置信息转化到操作界面上的二维位置信息应当为操作界面正中间对应的位置信息，若以操作界面正中间画坐标轴，则该位置信息应该为(0,0)，然后再按照一些对应规则得到操作对象在三维空间中的原始空间位置信息。
基于此，通过实施步骤S31和S32即可根据操作界面上二维坐标得到操作界面中操作对象在三维空间中的空间位置信息。
优选地，还可以按照以下流程确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，包括：
根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
本发明中的起始空间位置信息由三维坐标值构成，分别为第一维坐标值、第二维坐标值和第三维坐标值，参考图6d所示的三维坐标轴。
为了便于描述，可以用公式(7)来确定上述起始空间位置信息：
公式(7)中，3d_xdefault、3d_ydefault、3d_zdefault分别为起始空间位置信息的第一维坐标值、第二维坐标值和第三维坐标值，scale为滑动效率阈值。
基于公式(7)也可以确定出起始空间位置信息。
较佳地，所述空间位置信息均由三维坐标值构成，分别为第一维坐标值、第二维坐标值和第三维坐标值，为了描述方便，可以记为(3d_x，3d_y,3d_z)。
具体地，在确定出第一差值、第二差值和起始空间位置信息后，可以按照下述过程确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
为了便于理解，可以利用公式(8)来确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值：
公式(8)中Tdeg为夹角阈值，一般取π/6。
基于公式(8)可以得出，当|dx|＞|dy|时，与夹角阈值Tdeg进行比较的夹角deg为图6b所示的夹角；当|dx|≤|dy|时，与夹角阈值Tdeg进行比较的夹角deg为图6c所示的夹角，可以得出不同条件下参与比较的夹角是不同的，但夹角阈值可以相同。参考图6b所示，当|dx|＞|dy|时，当夹角deg越小时，表示横坐标值变化较大，表明操作对象在X轴方向移动较大；而夹角越大时，横坐标值变化越小，表明操作对象在X轴方向移动较小；再参考图6c所示，当|dx|≤|dy|时，当夹角deg越小时，表示横坐标值变化较小，表明操作对象在X轴方向移动较小；而夹角越大时，横坐标值变化越大，表明操作对象在X轴方向移动也越大。
较佳地，可以按照下述过程确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
为了便于理解，可以利用公式(9)来确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值：
基于公式(9)中夹角阈值和与夹角阈值进行比较的夹角的描述可以参考公式(8)。参考图6b所示，当|dx|＞|dy|时，当夹角deg越小时，表示纵坐标值变化较小，表明操作对象在Y轴方向移动也较小；而夹角越大时，纵坐标值变化越大，表明操作对象在Y轴方向移动也较大；再参考图6c所示，当|dx|≤|dy时，当夹角deg越小时，表示纵坐标值变化较大，表明操作对象在Y轴方向移动较大；而夹角越大时，横坐标值变化越小，表明操作对象在Y轴方向移动也越小。
较佳地，可以按照下述过程确定执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值：
若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；
否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
为了便于理解，可以利用公式(10)来确定执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值：
通过采用上述过程即可确定出执行各个触摸事件后所述操作对象的空间位置信息的三维坐标值。
S14、终端设备根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
在确定出执行触摸事件后，由于需要在操作界面上展示执行触发事件后的操作对象，故需要将确定出的空间位置信息转换到操作界面所在的二维平面上的位置信息，这样就可以在转换得到的位置信息处展示操作对象。
较佳地，可以在用户在包含操作对象的操作界面上滑动过程中，进行实时计算，例如预先设置采样间隔，当对用户的交互指令进行第一个采样得到第一个采样点后，然后利用该采样点生成一个触摸事件，并执行步骤S13和S14的过程来确定执行该采样点生成的触摸事件后操作对象的空间位置信息。然后当待时间间隔到达时，继续进行采样得到第二个采样点，然后再确定执行第二个采样点生成的触摸事件后操作对象的空间位置信息，依次类推，这样一来可以实时并准确地确定出当用户执行交互指令时，滑动过程中操作对象的空间位置信息。
需要说明的是，当交互指令为点击指令或双击指令时，通过采用上述方法可以确定出第一差值、第二差值、第三差值和第四差值均为0，虽然确定出操作对象的空间位置未发生变化，一方面说明了本发明提供的操作对象的空间位置信息确定方法的准确性，另一方面说明了本发明适用于点击指令或双击指令等。
此外，当交互指令为在操作界面某一位置处执行点击指令，然后在预设时间内再在操作界面另一位置处执行点击指令等时，可以利用本发明提供的方法确定出操作对象的空间位置信息，也就是说本发明提供的方法适用于操作对象从一个空间位置跳到另一个位置的情况。
本发明提供的操作对象展示方法，针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；然后针对确定出的每一采样点，生成该采样点对应的触摸事件；针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；并根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。根据用户交互指令对应的滑动轨迹上采样点的位置信息来确定操作对象的空间位置信息，而每一采样点对应一个触摸事件，这样可以将交互指令看作多个单次触摸事件构成的序列，操作界面的二维坐标通过单次触摸事件序列确定各个触摸事件下操作对象的空间位置信息，可以在更高的维度进行交互，实现了更为丰富的交互方式；此外还可以能够减少用户操作频率、简化UI设计和用户教育。
基于同一发明构思，本发明实施例中还提供了一种操作对象展示装置，由于上述装置解决问题的原理与操作对象展示方法相似，因此上述装置的实施可以参见方法的实施，重复之处不再赘述。
如图7所示，为本发明实施例提供的操作对象展示装置的结构示意图，包括：
获取单元41，用于针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；
生成单元42，用于针对确定出的每一采样点，生成该采样点对应的触摸事件；
第一确定单元43，用于针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；
展示单元44，用于根据所述第一确定单元43确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
较佳地，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及
所述第一确定单元43，具体用于分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值；以及分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值；根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
优选地，所述第一确定单元43，具体用于根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角；根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
可选地，所述装置，还包括：
第二确定单元，用于根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
进一步地，所述第一确定单元43，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
进一步地，所述第一确定单元43，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
可选地，所述第一确定单元43，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
可选地，所述第一确定单元43，具体用于若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
为了描述的方便，以上各部分按照功能划分为各模块(或单元)分别描述。当然，在实施本发明时可以把各模块(或单元)的功能在同一个或多个软件或硬件中实现。
基于同一技术构思，本申请实施例还提供了一种终端设备500，参照图8所示，终端设备500用于实施上述各个方法实施例记载的方法，例如实施图4a所示的实施例，终端设备500可以包括存储器501、处理器502和显示面板503。
所述存储器501，用于存储处理器502执行的计算机程序。存储器501可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据终端设备500的使用所创建的数据等。处理器502，可以是一个中央处理单元(central processing unit，CPU)，或者为数字处理单元等等。所述显示面板503，用于显示由用户输入的信息或提供给用户的信息，本申请实施例中，显示面板503主要用于显示终端设备中各应用程序的显示界面以及各显示界面中显示的控件对象。可选的，显示面板503可以采用液晶显示器(liquid crystal display，LCD)或OLED(organiclight-emitting diode，有机发光二极管)等形式来配置显示面板503。
本申请实施例中不限定上述存储器501、处理器502和显示面板503之间的具体连接介质。本申请实施例在图8中以存储器501、处理器502、显示面板503之间通过总线504连接，总线504在图8中以粗线表示，其它部件之间的连接方式，仅是进行示意性说明，并不引以为限。所述总线504可以分为地址总线、数据总线、控制总线等。为便于表示，图8中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器501可以是易失性存储器(volatile memory)，例如随机存取存储器(random-access memory，RAM)；存储器501也可以是非易失性存储器(non-volatilememory)，例如只读存储器，快闪存储器(flash memory)，硬盘(hard disk drive，HDD)或固态硬盘(solid-state drive，SSD)、或者存储器501是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。存储器501可以是上述存储器的组合。
处理器502，用于实现如图4a所示的一种操作对象展示方法，包括：
所述处理器502，用于调用所述存储器501中存储的计算机程序执行如图4a中所示的步骤S11～S14的过程。
本申请实施例还提供了一种计算机可读存储介质，存储为执行上述处理器所需执行的计算机可执行指令，其包含用于执行上述处理器所需执行的程序。
在一些可能的实施方式中，本发明提供的操作对象展示方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述描述的根据本发明各种示例性实施方式的操作对象展示方法中的步骤，例如，所述终端设备可以执行如图4a中所示的步骤S11～S14提供的操作对象展示方法。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
本发明的实施方式的用于操作对象展示的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在计算设备上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、有线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意，尽管在上文详细描述中提及了装置的若干单元或子单元，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之，上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。
此外，尽管在附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (18)

1.一种操作对象展示方法，其特征在于，包括：
针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；
针对确定出的每一采样点，生成该采样点对应的触摸事件；
针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；并
根据确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
2.如权利要求1所述的方法，其特征在于，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及
针对任一触摸事件，根据上一个触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值；以及
分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值；
根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
3.如权利要求2所述的方法，其特征在于，根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角；
根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
4.如权利要求2或3所述的方法，其特征在于，按照以下流程确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息：
根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
5.如权利要求3所述的方法，其特征在于，根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；
若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
6.如权利要求5所述的方法，其特征在于，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
7.如权利要求5所述的方法，其特征在于，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；
否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
8.如权利要求5所述的方法，其特征在于，根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息，具体包括：
若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；
否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
9.一种操作对象展示装置，其特征在于，包括：
获取单元，用于针对在包含操作对象的操作界面上执行的交互指令，确定所述交互指令对应的滑动轨迹的采样点及每一采样点的位置信息；
生成单元，用于针对确定出的每一采样点，生成该采样点对应的触摸事件；
第一确定单元，用于针对任一触摸事件，根据上一触摸事件对应的采样点的位置信息、该触摸事件对应的采样点的位置信息和滑动轨迹的起始点的位置信息，确定执行该触摸事件后所述操作对象的空间位置信息；
展示单元，用于根据所述第一确定单元确定出的空间位置信息，在所述操作界面上的相应位置处展示所述操作对象。
10.如权利要求9所述的装置，其特征在于，所述采样点的位置信息由所述采样点在所述操作界面上的横坐标和纵坐标构成，所述起始点的位置信息由所述起始点在所述操作界面上的横坐标和纵坐标构成；以及
所述第一确定单元，具体用于分别确定该触摸事件对应的采样点与上一触摸事件对应的采样点的横坐标和纵坐标之间的第一差值和第二差值；以及分别确定该触摸事件对应的采样点与起始点的横坐标和纵坐标之间的第三差值和第四差值；根据所述第一差值、第二差值、第三差值和第四差值以及在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息，确定执行该触摸事件后所述操作对象的空间位置信息。
11.如权利要求10所述的装置，其特征在于，
所述第一确定单元，具体用于根据所述第三差值和所述第四差值，利用反正切函数确定该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴或者纵坐标轴之间的夹角；根据所述第一差值、所述第二差值、所述起始空间位置信息和所述夹角，确定执行该触摸事件后所述操作对象的空间位置信息。
12.如权利要求10或11所述的装置，其特征在于，还包括：
第二确定单元，用于根据所述第一差值、所述第二差值和滑动效率阈值，确定在接收到所述交互指令之前所述操作对象在三维空间中的起始空间位置信息。
13.如权利要求11所述的装置，其特征在于，
所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，则根据所述第四差值与所述第三差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的横坐标轴之间的夹角；若所述第一差值的绝对值不大于所述第二差值的绝对值，则根据所述第三差值与所述第四差值的比值，利用所述反正切函数得到该触摸事件对应的采样点的滑动方向与所述操作界面的纵坐标轴之间的夹角。
14.如权利要求13所述的装置，其特征在于，
所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角大于所述夹角阈值，则确定所述起始空间位置信息中的第一维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第一维坐标值的取值为0。
15.如权利要求13所述的装置，其特征在于，
所述第一确定单元，具体用于若所述第一差值的绝对值大于所述第二差值的绝对值，且所述夹角大于夹角阈值，或者若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于所述夹角阈值，则确定所述起始空间位置信息中的第二维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值；否则，确定执行该触摸事件后所述操作对象的空间位置信息的第二维坐标值的取值为0。
16.如权利要求13所述的装置，其特征在于，
所述第一确定单元，具体用于若所述第一差值的绝对值不大于所述第二差值的绝对值，且所述夹角不大于夹角阈值，则确定所述起始空间位置信息中的第一维坐标值的相反数为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值；否则，确定所述起始空间位置信息中的第三维坐标值为执行该触摸事件后所述操作对象的空间位置信息的第三维坐标值。
17.一种计算机可读介质，存储有计算机可执行指令，其特征在于，所述计算机可执行指令用于执行如权利要求1至8任一权利要求所述的方法。
18.一种终端设备，其特征在于，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1至8任一权利要求所述的方法。
CN201810463241.8A 2018-05-15 2018-05-15 一种操作对象展示方法、装置和可读介质 Active CN108829329B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810463241.8A CN108829329B (zh) 2018-05-15 2018-05-15 一种操作对象展示方法、装置和可读介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810463241.8A CN108829329B (zh) 2018-05-15 2018-05-15 一种操作对象展示方法、装置和可读介质

Publications (2)

Publication Number Publication Date
CN108829329A true CN108829329A (zh) 2018-11-16
CN108829329B CN108829329B (zh) 2021-12-31

Family

ID=64148790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810463241.8A Active CN108829329B (zh) 2018-05-15 2018-05-15 一种操作对象展示方法、装置和可读介质

Country Status (1)

Country Link
CN (1) CN108829329B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110639204A (zh) * 2019-10-18 2020-01-03 网易（杭州）网络有限公司 游戏数据处理方法、装置以及终端设备
CN112506379A (zh) * 2020-12-21 2021-03-16 北京百度网讯科技有限公司 触控事件的处理方法、装置、设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103995584A (zh) * 2014-04-29 2014-08-20 深圳超多维光电子有限公司 立体交互方法及其显示装置、操作棒和系统
CN104331191A (zh) * 2013-07-22 2015-02-04 深圳富泰宏精密工业有限公司 基于图像识别实现触摸的系统及方法
CN104899912A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 动画制作方法和回放方法以及设备
CN105630134A (zh) * 2014-10-27 2016-06-01 乐视致新电子科技（天津）有限公司 识别操作事件的方法和装置
US20170357915A1 (en) * 2016-06-11 2017-12-14 Apple Inc. Device, Method, and Graphical User Interface for Meeting Space Management and Interaction

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104331191A (zh) * 2013-07-22 2015-02-04 深圳富泰宏精密工业有限公司 基于图像识别实现触摸的系统及方法
CN104899912A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 动画制作方法和回放方法以及设备
CN103995584A (zh) * 2014-04-29 2014-08-20 深圳超多维光电子有限公司 立体交互方法及其显示装置、操作棒和系统
CN105630134A (zh) * 2014-10-27 2016-06-01 乐视致新电子科技（天津）有限公司 识别操作事件的方法和装置
US20170357915A1 (en) * 2016-06-11 2017-12-14 Apple Inc. Device, Method, and Graphical User Interface for Meeting Space Management and Interaction

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110639204A (zh) * 2019-10-18 2020-01-03 网易（杭州）网络有限公司 游戏数据处理方法、装置以及终端设备
CN112506379A (zh) * 2020-12-21 2021-03-16 北京百度网讯科技有限公司 触控事件的处理方法、装置、设备以及存储介质

Also Published As

Publication number Publication date
CN108829329B (zh) 2021-12-31

Similar Documents

Publication Publication Date Title
CN102906671B (zh) 手势输入装置及手势输入方法
CN102662462B (zh) 电子装置、手势识别方法及手势应用方法
CN105144057B (zh) 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
CN104238736B (zh) 利用抓握对象识别运动的装置、方法和系统
KR102051418B1 (ko) 영상에 포함된 객체를 선택하기 위한 사용자 인터페이스 제어 장치 및 그 방법 그리고 영상 입력 장치
CN102810008B (zh) 一种空中输入系统、方法及空中输入采集设备
CN103440033B (zh) 一种基于徒手和单目摄像头实现人机交互的方法和装置
CN102789313A (zh) 一种用户交互系统和方法
CN104898825A (zh) 用于输出反馈的电子设备和方法
CN108027663B (zh) 将移动设备与人员跟踪组合以用于大型显示器交互
KR101690777B1 (ko) 복수의 디바이스를 매칭시키는 방법, 그리고 상기 매칭이 가능하게끔 하여 주는 디바이스 및 서버 시스템
CN110389659A (zh) 针对增强或虚拟现实环境提供动态触觉回放的系统和方法
CN103324348A (zh) 一种基于智能移动终端的Windows桌面控制方法
CN107924213A (zh) 用于操作可从另一电子设备分离的电子设备的方法和设备
Kang et al. Editing 3D models on smart devices
KR20140003149A (ko) 사용자 맞춤형 인터페이스 시스템 및 그 구현 방법
CN106527671A (zh) 一种设备隔空控制方法
CN104516649A (zh) 基于体感技术的智能手机操作技术
CN103049266A (zh) Delta3D三维场景漫游的鼠标操作方法
CN108829329A (zh) 一种操作对象展示方法、装置和可读介质
CN105320260B (zh) 移动终端的控制方法及移动终端
Dalsgaard et al. Modeling pointing for 3d target selection in vr
CN106527669A (zh) 基于无线信号的交互控制系统
CN106527672A (zh) 一种隔空的文字输入方法
Ye et al. 3D curve creation on and around physical objects with mobile AR

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant