CN106951087B - 一种基于虚拟交互平面的交互方法及装置 - Google Patents

一种基于虚拟交互平面的交互方法及装置 Download PDF

Info

Publication number
CN106951087B
CN106951087B CN201710187943.3A CN201710187943A CN106951087B CN 106951087 B CN106951087 B CN 106951087B CN 201710187943 A CN201710187943 A CN 201710187943A CN 106951087 B CN106951087 B CN 106951087B
Authority
CN
China
Prior art keywords
virtual
operation body
interaction
plane
interaction plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710187943.3A
Other languages
English (en)
Other versions
CN106951087A (zh
Inventor
曹宇强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201710187943.3A priority Critical patent/CN106951087B/zh
Publication of CN106951087A publication Critical patent/CN106951087A/zh
Application granted granted Critical
Publication of CN106951087B publication Critical patent/CN106951087B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种基于虚拟交互平面的交互方法及装置,在获取操作体在空间交互区域中的空间特征后,根据空间特征,在空间交互区域中构建虚拟操作体,然后获取虚拟操作体与空间交互区域显示的虚拟交互平面之间的相对位置关系,当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态,以通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作,以此来提高交互的准确性。

Description

一种基于虚拟交互平面的交互方法及装置
技术领域
本发明涉及信息交互技术领域,尤其涉及一种基于虚拟交互平面的交互方法及装置。
背景技术
在现有空间交互中,电子设备通过识别空间交互区域中操作体的运动轨迹,确定操作体在空间交互区域中的动作,然后基于操作体在空间交互区域中的动作,对电子设备显示的内容进行操作。
以用户的手作为操作体为例进行说明,当用户的手向右摆动时,电子设备通过识别空间交互区域中左手的运动轨迹,可以确定操作体在空间交互区域中执行向右滑动的动作,则可以对电子设备显示的内容执行向右翻动的操作。
但是上述交互方式存在一些问题,如用户的手向右摆动后,沿原运动轨迹反向返回时,而用户的手在执行此运动时仅仅是将手恢复至初始位置,但是电子设备会将此动作识别为向左滑动的动作,并对电子设备显示的内容执行向左翻动的操作,因此现有交互方式会降低交互的准确性。
发明内容
有鉴于此,本发明提供一种基于虚拟交互平面的交互方法及装置,用以提高交互的准确性。技术方案如下:
本发明提供一种基于虚拟交互平面的交互方法,所述方法包括:
在空间交互区域上显示一虚拟交互平面;
获取操作体在所述空间交互区域中的空间特征;
根据所述空间特征,在所述空间交互区域中构建虚拟操作体;
获取所述虚拟操作体与所述虚拟交互平面之间的相对位置关系;
当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态。
优选的,所述当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态,包括:
当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系指示所述虚拟操作体的至少部分穿过所述虚拟交互平面,且穿过所述虚拟交互平面的部分的运动情况满足第二预设条件或未穿过所述虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性;
根据所述更改属性,改变穿过所述虚拟交互平面的至少部分。
优选的,所述改变穿过所述虚拟交互平面的至少部分,包括:从所述虚拟操作体与所述虚拟交互平面之间的相对位置关系中,获取所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离;
根据所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离,确定所述更改属性中的第一更改因素;
根据所述第一更改因素,改变穿过所述虚拟交互平面的至少部分。
优选的,所述方法还包括:当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,获取所述虚拟操作体和所述虚拟交互平面的交互位置;
根据所述交互位置,确定所述虚拟操作体在所述虚拟交互平面上选定的目标对象。
优选的,所述方法还包括:获取所述虚拟操作体在所述空间交互区域上对所述虚拟交互平面的操作特征;
根据所述操作特征,生成第一控制指令;
根据所述第一控制指令,调整所述虚拟交互平面的显示状态。
优选的,所述方法还包括:当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,在所述虚拟交互平面上显示所述虚拟操作体在所述空间交互区域中的第一操作量;
根据预设操作比例和所述第一操作量,确定所述虚拟操作体对所述空间交互区域中目标对象的第二操作量;
在所述虚拟交互平面上显示所述第二操作量。
本发明还提供一种基于虚拟交互平面的交互装置,所述装置包括:
显示单元,用于在空间交互区域上显示一虚拟交互平面;
第一获取单元,用于获取操作体在所述空间交互区域中的空间特征;
构建单元,用于根据所述空间特征,在所述空间交互区域中构建虚拟操作体;
第二获取单元,用于获取所述虚拟操作体与所述虚拟交互平面之间的相对位置关系;
改变单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态。
优选的,所述改变单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系指示所述虚拟操作体的至少部分穿过所述虚拟交互平面,且穿过所述虚拟交互平面的部分的运动情况满足第二预设条件或未穿过所述虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性,并根据所述更改属性,改变穿过所述虚拟交互平面的至少部分。
优选的,所述改变单元包括:
获取子单元,用于从所述虚拟操作体与所述虚拟交互平面之间的相对位置关系中,获取所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离;
确定子单元,用于根据所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离,确定所述更改属性中的第一更改因素;
改变子单元,用于根据所述第一更改因素,改变穿过所述虚拟交互平面的至少部分。
优选的,所述装置还包括:第三获取单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,获取所述虚拟操作体和所述虚拟交互平面的交互位置;
确定单元,用于根据所述交互位置,确定所述虚拟操作体在所述虚拟交互平面上选定的目标对象。
优选的,所述第一获取单元,用于获取所述虚拟操作体在所述空间交互区域上对所述虚拟交互平面的操作特征;
所述装置还包括:生成单元,用于根据所述操作特征,生成第一控制指令;
调整单元,用于根据所述第一控制指令,调整所述虚拟交互平面的显示状态。
优选的,所述显示单元,还用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,在所述虚拟交互平面上显示所述虚拟操作体在所述空间交互区域中的第一操作量;
所述装置还包括:确定单元,用于根据预设操作比例和所述第一操作量,确定所述虚拟操作体对所述空间交互区域中目标对象的第二操作量,并触发所述显示单元在所述虚拟交互平面上显示所述第二操作量。
与现有技术相比,本发明提供的上述技术方案具有如下有益效果:
借由上述技术方案,在获取操作体在空间交互区域中的空间特征后,根据空间特征,在空间交互区域中构建虚拟操作体,然后获取虚拟操作体与空间交互区域显示的虚拟交互平面之间的相对位置关系,当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态,以通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作,以此来提高交互的准确性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的基于虚拟交互平面的交互方法的一种流程图;
图2为本发明实施例提供的虚拟交互平面的设置示意图;
图3为本发明实施例提供的采集装置的安装示意图;
图4为本发明实施例提供的改变虚拟操作体的部分的一种示意图;
图5为本发明实施例提供的改变虚拟操作体的部分的另一种示意图;
图6为本发明实施例提供的基于虚拟交互平面的交互方法的再一种流程
图7为本发明实施例提供的基于虚拟交互平面的交互方法的再一种流程图;
图8为本发明实施例提供的虚拟交互平面的调整示意图;
图9为本发明实施例提供的基于虚拟交互平面的交互方法的再一种流程图;
图10为本发明实施例提供的基于虚拟交互平面的交互装置的一种结构示意图;
图11为本发明实施例提供的基于虚拟交互平面的交互装置的另一种结构示意图;
图12为本发明实施例提供的基于虚拟交互平面的交互装置的再一种结构示意图;
图13为本发明实施例提供的基于虚拟交互平面的交互装置的再一种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例提供的基于虚拟交互平面的交互方法,用于通过虚拟交互平面来指示虚拟操作体在空间交互区域中的动作是否可被识别,以此来提高交互的准确性。所述基于虚拟交互平面的交互方法可以包括以下步骤:
101:在空间交互区域上显示一虚拟交互平面。其中虚拟交互平面是通过投影设备在空间交互区域上投影的一个平面,通过虚拟交互平面可以指示虚拟操作体与目标对象之间的交互情况,如通过虚拟交互平面来指示虚拟操作体和目标对象之间的距离,或者通过虚拟交互平面来提示虚拟操作体是否位于预设交互区域,所述预设交互区域是空间交互区域中适合机器视觉检测的区域。
在本发明实施例中,虚拟交互平面可以是具有一定透明度的平面,这样在虚拟交互平面设置在用户和目标对象之间时,透过虚拟交互平面可以看到位于虚拟交互平面后面的目标对象,如图2所示(箭头为眼睛的光轴指向的方向)。当然目标对象也可以显示在虚拟交互平面上,此时虚拟交互平面可视为一个触摸屏,通过触摸屏来检测虚拟操作体的操作,以确定虚拟操作体对虚拟交互平面中的哪个目标对象执行哪种操作,在虚拟交互平面上显示目标对象时,虚拟交互平面可以是具有一定透明度的平面或者是非透明的平面。
102:获取操作体在空间交互区域中的空间特征。可以理解的是:操作体是在空间交互区域与虚拟交互平面进行交互的且用于对目标对象进行操作的对象,其可以是用户的身体部位,如手,也可以是通过用户的身体部位所操作的某个物体,如手持的一个物体(如笔)。
相对应的空间特征用于指示操作体在空间交互区域中的位置、形态以及指向(如指向虚拟交互平面还是背离虚拟交互平面)等,在本发明实施例中,空间特征可通过位于空间交互区域中的采集装置(如摄像头)来获取,所述采集装置的采集范围覆盖所述空间交互区域,这样操作体在空间交互区域中运动时,可通过采集装置采集操作体在空间交互区域中的图像,通过图像识别技术来识别出操作体在空间交互区域中的空间特征。
其中采集装置可以位于空间交互区域中的任一可使其采集范围覆盖空间交互区域的位置,如图3所示,采集装置11可以安装在空间交互区域中位于所述虚拟交互平面后面的区域,如安装在位于虚拟交互平面后面的固定物上,或者采集装置11可以是用于投影虚拟交互平面的投影设备中的一个部件,又或者采集装置11可以佩戴于用户的身体部位,且采集装置11的光轴指向所述虚拟交互平面。
103:根据空间特征,在空间交互区域中构建虚拟操作体。在本发明实施例中,构建虚拟操作体的一种可行方式是:通过3D(3-Dimension,三维)建模技术,结合空间特征来构建操作体的虚拟操作体,由虚拟操作体来代替操作体,这样操作体在空间交互区域中的运动情况,如操作体与虚拟交互平面的交互以及操作体与目标对象的交互,可以通过虚拟操作体在空间交互区域中的运动情况来表示。
104:获取虚拟操作体与虚拟交互平面之间的相对位置关系。可以理解的是:相对位置关系是相对于某个参照物的位置关系,如相对位置关系可以指示出位于参照物的哪个方位,或者指示出与参照物之间的距离趋势等等。
在本发明实施例中,所述参照物可以是空间交互区域中的某个物体,如可以将虚拟交互平面或虚拟操作体作为参照物,当然也可以将空间交互区域中除虚拟交互平面和虚拟操作体之外的物体作为参照物。
在将虚拟交互平面或虚拟操作体作为参照物的情况下,可以通过上述图3所示采集装置采集包括虚拟交互平面和虚拟操作体的图像信息,根据至少两个相邻的图像信息得到虚拟操作体和虚拟交互平面之间的相对位置关系,如根据当前采集到的图像信息和当前采集到的图像信息的前一个图像信息,得到虚拟交互平面和虚拟操作体之间的相对位置关系。具体的从当前采集到的图像信息中识别出虚拟操作体和虚拟交互平面之间的第一距离,从当前采集到的图像信息中是识别出虚拟操作体和虚拟交互平面之间的第二距离,根据第一距离和第二距离得到两者相对位置关系,方式如下:
若第一距离和第二距离均指示出所述虚拟操作体与所述虚拟交互平面之间没有交互,且第一距离小于第二距离,则说明虚拟操作体在逐渐靠近虚拟交互平面,则虚拟操作体和虚拟交互平面之间的相对位置关系为:虚拟操作体在逐渐靠近虚拟交互平面(这个相对位置关系可以指示两者的距离趋势)。
若第一距离指示出虚拟操作体与虚拟交互平面之间有交互,而第二距离指示出虚拟操作与所述虚拟交互平面之间没有交互,也说明虚拟操作体在逐渐靠近虚拟交互平面,则虚拟操作体和虚拟交互平面之间的相对位置关系为:虚拟操作体在逐渐靠近虚拟交互平面。
若第一距离和第二距离均指示出虚拟操作体与虚拟交互平面之间有交互,则说明虚拟操作体可能穿过虚拟交互平面,此时则需要从两个图像信息中获取虚拟操作体穿过虚拟交互平面的部分或获取虚拟操作体未穿过虚拟交互平面的部分的运动情况,根据虚拟操作体穿过虚拟交互平面的部分的运动情况或虚拟操作体未穿过虚拟交互平面的部分的运动情况,确定虚拟操作体与虚拟交互平面之间的相对位置关系。
以穿过虚拟交互平面的部分的运动情况为例,若穿过虚拟交互平面的部分的运动情况指示穿过虚拟交互平面的部分在逐渐增加,则说明穿过的部分在远离虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且穿过的部分在远离虚拟交互平面。如穿过虚拟交互平面的部分的运动情况指示穿过虚拟交互平面的部分在逐渐减少,则说明穿过的部分在靠近虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且穿过的部分在靠近虚拟交互平面。
若第一距离和第二距离均指示出虚拟操作体与虚拟交互平面之间有交互,确定两者的相对位置关系的另一种可行方式是:从两个图像信息中获取虚拟操作体穿过虚拟交互平面的部分与目标对象的相对位置关系或获取虚拟操作体未穿过虚拟交互平面的部分与目标对象的相对位置关系,根据穿过虚拟交互平面的部分与目标对象的相对位置关系或未穿过虚拟交互平面的部分与目标对象的相对位置关系,确定虚拟操作体与虚拟交互平面之间的相对位置关系。
以未穿过虚拟交互平面的部分与目标对象的相对位置关系为例进行说明,而在这种条件下又需要根据目标对象所在位置进行区分,若目标对象位于虚拟交互平面上,则确定虚拟操作体和虚拟交互平面的相对位置关系的过程为:
若未穿过虚拟交互平面的部分与目标对象的相对位置关系指示出未穿过虚拟交互平面的部分与目标对象之间的距离在逐渐增加,则说明未穿过的部分在远离虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且未穿过的部分在远离虚拟交互平面。若未穿过虚拟交互平面的部分与目标对象的相对位置关系指示出未穿过虚拟交互平面的部分与目标对象之间的距离在逐渐缩小,则说明未穿过的部分在靠近虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且未穿过的部分在靠近虚拟交互平面。
若目标对象位于虚拟交互平面后面的区域,即需要穿过虚拟交互平面才能触控目标对象,则确定虚拟操作体和虚拟交互平面的相对位置关系的过程为:
若未穿过虚拟交互平面的部分与目标对象的相对位置关系指示出未穿过虚拟交互平面的部分与目标对象之间的距离在逐渐增加,则说明未穿过的部分在靠近虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且未穿过的部分在靠近虚拟交互平面。若未穿过虚拟交互平面的部分与目标对象的相对位置关系指示出未穿过虚拟交互平面的部分与目标对象之间的距离在逐渐缩小,则说明未穿过的部分在远离虚拟交互平面,此时可将虚拟操作体和虚拟交互平面之间的相对位置关系确定为:虚拟操作体的至少部分穿过虚拟交互平面,且未穿过的部分在远离虚拟交互平面。
在将空间交互区域中除虚拟交互平面和虚拟操作体之外的物体作为参照物的情况下,可以通过上述图3所示采集装置采集包括虚拟交互平面、虚拟操作体和参照物的图像信息,这个图像信息可以有两个图像,其中一个图像包括虚拟交互平面和参照物,另一个图像包括虚拟操作体和参照物,然后根据至少两个相邻的图像信息得到虚拟操作体和参照物之间的相对位置关系以及虚拟交互平面和参照物之间的相对位置关系,再根据虚拟操作体和参照物之间的相对位置关系以及虚拟交互平面和参照物之间的相对位置关系,得到虚拟操作体和虚拟交互平面之间的相对位置关系。如根据当前采集到的图像信息和当前采集到的图像信息的前一个图像信息,得到虚拟交互平面和虚拟操作体之间的相对位置关系。
以参照物为目标对象为例,由于目标对象和虚拟交互平面在空间交互区域中的位置相对固定,因此参照物和虚拟交互平面之间的相对位置关系固定,这样就可以根据目标对象和虚拟操作体之间变化的相对位置关系来得到虚拟操作体与虚拟交互平面的之间的相对位置关系,具体过程可以参照目标对象位于虚拟交互平面上或者目标对象位于虚拟交互平面后面的区域所做的说明,对此本发明实施例不再详述。
105:当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态。
在本发明实施例中,改变虚拟操作体的显示状态的一种可行方式是:当虚拟操作体与虚拟交互平面之间的相对位置关系指示虚拟操作体的至少部分穿过虚拟交互平面,且穿过虚拟交互平面的部分的运动情况满足第二预设条件时,获取更改属性;根据更改属性,改变穿过虚拟交互平面的至少部分。
例如当虚拟操作体的至少部分穿过虚拟交互平面,且穿过虚拟交互平面的部分的运动情况指示穿过虚拟交互平面的部分在远离虚拟交互平面时,根据获取的更改属性来改变穿过虚拟交互平面的至少部分。
改变虚拟操作体的显示状态的另一种可行方式是:当虚拟操作体与虚拟交互平面之间的相对位置关系指示虚拟操作体的至少部分穿过虚拟交互平面,且未穿过虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性;根据更改属性,改变穿过虚拟交互平面的至少部分。
例如当虚拟操作体的至少部分穿过虚拟交互平面,且未穿过虚拟交互平面的部分的运动情况指示未穿过虚拟交互平面的部分在靠近虚拟交互平面时,根据获取的更改属性来改变穿过虚拟交互平面的至少部分。
在本发明实施例中,获取的更改属性包括但不限于:穿过部分的体积、穿过部分的颜色和穿过部分的明亮度等等,进而可以根据这些更改属性中的至少一种对穿过虚拟交互平面的至少部分的体积和/或颜色和/或明亮度进行改变,其中穿过部分的体积可以是穿过部分的宽度、厚度等等。
如获取的更改属性为:穿过部分的宽度为第一宽度,所述第一宽度小于穿过部分的初始宽度,则根据此更改属性将穿过部分的宽度更改为第一宽度;或者获取的更改属性为穿过部分的颜色为第一颜色,所述第一颜色不同于穿过部分的初始颜色,则根据此更改属性将穿过部分的颜色更改为第一颜色,如图4所示,图4中穿过部分的初始颜色与未穿过部分的初始颜色相同,在虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变穿过部分的颜色,如图4所示将其颜色加深。
在改变穿过虚拟交互平面的至少部分时,还可以根据虚拟操作体穿过虚拟交互平面的部分与虚拟交互平面之间的距离,对穿过部分进行不同程度的改变,过程为:从虚拟操作体与虚拟交互平面之间的相对位置关系中,获取虚拟操作体中穿过虚拟交互平面的部分与虚拟交互平面之间的距离,根据虚拟操作体与虚拟交互平面之间的距离,确定更改属性中的第一更改因素,并根据第一更改因素,改变穿过虚拟交互平面的至少部分。
其中第一更改因素用于指示依据距离对穿过部分进行适配于距离的改变程度进行改变,如在改变穿过部分的体积时,第一更改因素可用于指示依据距离对穿过部分的宽度进行不同程度改变,如穿过部分的距离越大,则宽度越宽,或者穿过部分的距离越大,则宽度越窄;在改变穿过部分的颜色时,则可以设置为穿过部分的距离越大,则颜色越深,或者穿过部分的距离越小,则颜色越浅。如图4中在穿过部分的距离增大时,穿过部分的颜色变深。
在本发明实施例中,通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作。
如图5所示,虚拟操作体从空间交互区域中的第一位置(圆点所示位置)向虚拟交互平面移动,在移动过程中至少部分穿过虚拟交互平面,且在穿过过程中或者穿过后虚拟操作体向右滑动(虚线所示),在此阶段内虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件,则穿过部分的颜色被改变,相对应的会识别此阶段内虚拟操作体执行的动作,并对目标对象执行与虚拟操作体的动作相对应的操作,如向右滑动目标对象。而若虚拟操作体在向右滑动后,恢复至第一位置,在此阶段内虚拟操作体与虚拟交互平面之间的相对位置关系不满足第一预设条件,则穿过部分的颜色不被改变,相对应的会被误识别为向左滑动的操作也被禁止执行,从而提高交互的准确性。
并且在虚拟交互平面设置在用户和目标对象之间的空间交互区域的情况下,上述改变穿过部分的方式还可以用于提示虚拟操作体和目标对象之间的距离,如虚拟操作体穿过部分的属性改变,说明虚拟操作体在接近目标对象。而依据虚拟操作体中穿过部分与虚拟交互平面的距离,对穿过部分进行不同程度的改变更有利于指示虚拟操作体与目标对象的距离关系,如虚拟操作体的颜色逐渐加深,说明虚拟操作体在逐渐接近目标对象,而在虚拟操作体的颜色改变为预设颜色,则说明虚拟操作体已触摸到目标对象,其中预设颜色可以根据实际应用而定,本发明实施例不对其进行限定。
又或者上述改变穿过部分的方式还用于提示虚拟操作体处于合适的空间交互区域,此合适的空间交互区域为适合机器视觉检测的区域,如虚拟操作体的至少部分穿过虚拟交互平面所停留的区域,虚拟操作体在此区域中执行的动作方可被识别。
在这里需要说明的一点是:当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,虚拟交互平面处于激活状态,以通过虚拟交互平面的触摸功能识别虚拟操作体的动作;当虚拟操作体与虚拟交互平面之间的相对位置关系不满足第一预设条件时,虚拟交互平面处于未激活状态,这样在提高识别准确性的情况下,还可以降低虚拟交互平面的资源浪费。
借由上述技术方案,在获取操作体在空间交互区域中的空间特征后,根据空间特征,在空间交互区域中构建虚拟操作体,然后获取虚拟操作体与空间交互区域显示的虚拟交互平面之间的相对位置关系,当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态,以通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作,以此来提高交互的准确性。
请参阅图6,其示出了本发明实施例提供的基于虚拟交互平面的交互方法的另一种流程图,在图1基础上还可以包括以下步骤:
106:当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设关系时,获取虚拟操作体和虚拟交互平面的交互位置。
其中交互位置可以是虚拟操作体与虚拟交互平面相交的位置,虚拟操作体的至少部分穿过虚拟交互平面时,虚拟操作体与虚拟交互平面至少相交一个位置,若虚拟操作体与虚拟交互平面相交仅有一个位置,则将此位置确定为交互位置,若虚拟操作体与虚拟交互平面相交有至少两个位置,则可以将所有相交位置确定为交互位置或者可以从相交位置处选取一个位置为交互位置。而选取一个位置为交互位置的可行方式是:所有相交位置处有目标对象的位置,或者根据所有相交位置中与目标对象的距离来选取交互位置,如所有相交位置中与目标对象的距离最近的位置为交互位置。
107:根据交互位置,确定虚拟操作体在虚拟交互平面上选定的目标对象,这样在目标对象位于虚拟交互平面上时,可以根据交互位置直接选定目标对象。
可以理解的是:在交互位置为一个时,若交互位置处有目标对象,则直接选定交互位置处的目标对象,若交互位置处无目标对象,则根据目标对象与交互位置之间的距离选定一目标对象,如选取与交互位置距离最近的目标对象,而若与交互位置距离最近的目标对象为多个,则可以选定多个目标对象或者从多个目标对象中根据目标对象的使用情况(如使用频率的高低)来选定一目标对象。在交互位置有多个时,可以采用上述交互位置为一个的方式来选定,具体选定一个还是多个目标对象根据实际应用而定。如在虚拟交互平面显示桌面时,则可以选定一个目标对象,而若虚拟交互平面显示多媒体浏览界面时,如显示图片浏览界面时,则可以选定多个目标对象,实现一次交互选定多个目标对象的目的。
请参阅图7,其示出了本发明实施例提供的基于虚拟交互平面的交互方法的再一种流程图,在图1基础上还可以包括以下步骤:
108:获取虚拟操作体在空间交互区域上对虚拟交互平面的操作特征。其中操作特征是虚拟操作体对虚拟交互平面进行操作时获取的特征,该操作特征用于指示对虚拟交互平面的显示状态进行调整,如调整虚拟交互平面的显示位置、显示角度、显示大小和显示亮度等等。
在本发明实施例中,操作特征可以是虚拟操作体在空间交互区域中挪动虚拟交互平面时的运动轨迹、虚拟操作体在虚拟交互平面上的运动量,以通过这些特征对虚拟交互平面的显示状态进行调整,如通过运动轨迹可以获知虚拟操作体运动的初始位置和终点位置,则虚拟交互平面需要从初始位置移动到终点位置显示,而虚拟操作体在虚拟交互平面上的运动量可以指出对虚拟交互平面的显示角度、显示大小和显示亮度等等的调整,对此不再详述。
当然虚拟交互平面上还可以显示一状态调整界面,在状态调整界面上显示至少一个状态调整参数,如位置调整参数、大小调整参数、角度调整参数和亮度调整参数等等,通过这些状态调整参数的选取和设置可以实现对虚拟交互界面的显示状态的调整,因此在本发明实施例中,操作特征还可以是虚拟操作体在状态调整界面中的位置,以通过此位置来确定虚拟操作对虚拟交互平面中哪些显示状态调整参数的选取,即对虚拟交互平面的显示状态的哪些方面进行调整。
109:根据操作特征,生成第一控制指令。
110:根据第一控制指令,调整虚拟交互平面的显示状态。
可以理解的是:第一控制指令用于指示对虚拟交互平面的显示状态进行调整,而根据操作特征生成第一控制指令的可行方式是:将操作特征对应的调整参数携带在第一控制指令中,这样在获取到第一控制指令后,可根据第一控制指令中的调整参数来调整虚拟交互平面的显示状态。
例如第一控制指令中携带有虚拟操作体在空间交互区域中运动的终点位置,则根据第一控制指令可以将虚拟交互平面搬移到终点位置处显示,如图8所示,虚拟交互平面从悬空显示搬移到桌面上显示,进而还可以通过改变虚拟操作体来指示虚拟操作体与桌面上的目标对象之间的距离等等。
借由上述技术方案,通过虚拟操作体在空间交互区域上对虚拟交互平面的操作特征,实现对虚拟交互平面的显示状态的调整,这样用户就可以根据各自使用习惯来改变虚拟交互平面的显示,使得虚拟交互平面的显示更符合用户的使用习惯,提高用户体验。
请参阅图9,其示出了本发明实施例提供的基于虚拟交互平面的交互方法的再一种流程图,在图1基础上还可以包括以下步骤:
111:当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设关系时,在虚拟交互平面上显示虚拟操作体在空间交互区域中的第一操作量。
其中第一操作量是虚拟操作体对空间交互区域中目标对象的操作量,其用于指示虚拟操作体对目标对象的显示状态的调整情况,如调整目标对象的显示位置、显示角度、显示大小和显示亮度等等的至少一种调整。在实际应用中,为实现对不同显示状态的调整,可以预先设置虚拟操作体在空间交互区域中的各个操作,每个操作对应至少一个状态的调整,在虚拟操作体执行对应操作后,获取对目标对象的显示状态进行调整的第一操作量。
112:根据预设操作比例和第一操作量,确定虚拟操作体对空间交互区域中目标对象的第二操作量。
其中预设操作比例与虚拟操作体当前执行的操作有关,也就是说对于虚拟操作体执行的不同操作可以设定对应的预设操作比例,以根据预设操作比例和第一操作量确定虚拟操作体对目标对象的第二操作量。而第二操作量用于指示虚拟操作体对空间交互区域中目标对象调整到何种程度,如虚拟操作体放大目标对象时,通过第二操作量可以指示虚拟操作体已对目标对象放大多少,又比如虚拟操作体在向某个方向移动目标对象时,通过第二操作量可以指示虚拟操作体将目标对象移动到哪个方向,这样就可以实时确定目标对象在空间交互区域中的状态。在本发明实施例中,预设操作比例可以根据实际应用而定,对此本发明实施例不加以限定。
113:在虚拟交互平面上显示第二操作量,以通过第二操作量来实时确定目标对象在空间交互区域中的状态,这样用户可以将第二操作量作为一参考量,调整虚拟操作体对目标对象的第一操作量。
为实现对虚拟操作体对目标对象的第一操作量的调整,在显示第二操作量的同时还可以显示第三操作量,所述第三操作量用于实时显示虚拟操作体继续执行操作时,对目标对象的连续调整量,该第三操作量可以实时显示虚拟操作体对目标对象的显示位置、显示角度、显示大小和显示亮度等等的至少一种调整。
如第二操作量已显示目标对象的放大程度,在虚拟操作体继续执行放大操作时,通过第三操作量可以显示在第二操作量的基础上,对目标对象又放大多少,以此通过第三操作量来提示虚拟操作体对目标对象的调整情况,实现对目标对象的精准调整,从而实现对目标对象的复杂操作的精准控制。
在这里需要说明的一点是:上述图1、图6、图7和图9所示方法实施例中包括的完整技术方案可以相互组合,得到具备多个新增功能的交互方法,如可以将图7所示方法实施例中的步骤合并到图6中,以交互方法同时包括确定目标对象和调整虚拟交互平面的技术方案。
与上述方法实施例相对应,本发明实施例还提供一种基于虚拟交互平面的交互装置,如图10所示,可以包括:显示单元100、第一获取单元200、构建单元300、第二获取单元400和改变单元500。
显示单元100,用于在空间交互区域上显示一虚拟交互平面。其中虚拟交互平面是通过投影设备在空间交互区域上投影的一个平面,通过虚拟交互平面可以指示虚拟操作体与目标对象之间的交互情况,如通过虚拟交互平面来指示虚拟操作体和目标对象之间的距离,或者通过虚拟交互平面来提示虚拟操作体是否位于预设交互区域,所述预设交互区域是空间交互区域中适合机器视觉检测的区域。
在本发明实施例中,虚拟交互平面可以是具有一定透明度的平面,这样在虚拟交互平面设置在用户和目标对象之间时,透过虚拟交互平面可以看到位于虚拟交互平面后面的目标对象。当然目标对象也可以显示在虚拟交互平面上,此时虚拟交互平面可视为一个触摸屏,通过触摸屏来检测虚拟操作体的操作,以确定虚拟操作体对虚拟交互平面中的哪个目标对象执行哪种操作,在虚拟交互平面上显示目标对象时,虚拟交互平面可以是具有一定透明度的平面或者是非透明的平面。
第一获取单元200,用于获取操作体在空间交互区域中的空间特征。可以理解的是:操作体是在空间交互区域与虚拟交互平面进行交互的且用于对目标对象进行操作的对象,而空间特征可以用于指示操作体在空间交互区域中的位置、形态以及指向(如指向虚拟交互平面还是背离虚拟交互平面)等,对此请参阅方法实施例中的相关说明。
构建单元300,用于根据空间特征,在空间交互区域中构建虚拟操作体。在本发明实施例中,构建虚拟操作体的一种可行方式是:通过3D建模技术,结合空间特征来构建操作体的虚拟操作体,由虚拟操作体来代替操作体,这样操作体在空间交互区域中的运动情况,如操作体与虚拟交互平面的交互以及操作体与目标对象的交互,可以通过虚拟操作体在空间交互区域中的运动情况来表示。
第二获取单元400,用于获取虚拟操作体与虚拟交互平面之间的相对位置关系。可以理解的是:相对位置关系是相对于某个参照物的位置关系,如相对位置关系可以指示出位于参照物的哪个方位,或者指示出与参照物之间的距离趋势等等,具体方式请参阅方法实施例中的相关说明。
改变单元500,用于当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态。在本发明实施例中,改变虚拟操作体的显示状态的一种可行方式是:当虚拟操作体与虚拟交互平面之间的相对位置关系指示虚拟操作体的至少部分穿过虚拟交互平面,且穿过虚拟交互平面的部分的运动情况满足第二预设条件时,获取更改属性;根据更改属性,改变穿过虚拟交互平面的至少部分。
改变虚拟操作体的显示状态的另一种可行方式是:当虚拟操作体与虚拟交互平面之间的相对位置关系指示虚拟操作体的至少部分穿过虚拟交互平面,且未穿过虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性;根据更改属性,改变穿过虚拟交互平面的至少部分。
相对应的改变单元500包括:获取子单元、确定子单元和改变子单元。其中获取子单元,用于从虚拟操作体与虚拟交互平面之间的相对位置关系中,获取虚拟操作体中穿过虚拟交互平面的部分与虚拟交互平面之间的距离。
确定子单元,用于根据虚拟操作体中穿过虚拟交互平面的部分与虚拟交互平面之间的距离,确定更改属性中的第一更改因素。
改变子单元,用于根据第一更改因素,改变穿过虚拟交互平面的至少部分,以通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作。
并且在虚拟交互平面设置在用户和目标对象之间的空间交互区域的情况下,上述改变穿过部分的方式还可以用于提示虚拟操作体和目标对象之间的距离,如虚拟操作体穿过部分的属性改变,说明虚拟操作体在接近目标对象。而依据虚拟操作体中穿过部分与虚拟交互平面的距离,对穿过部分进行不同程度的改变更有利于指示虚拟操作体与目标对象的距离关系,如虚拟操作体的颜色逐渐加深,说明虚拟操作体在逐渐接近目标对象,而在虚拟操作体的颜色改变为预设颜色,则说明虚拟操作体已触摸到目标对象,其中预设颜色可以根据实际应用而定,本发明实施例不对其进行限定。
又或者上述改变穿过部分的方式还用于提示虚拟操作体处于合适的空间交互区域,此合适的空间交互区域为适合机器视觉检测的区域,如虚拟操作体的至少部分穿过虚拟交互平面所停留的区域,虚拟操作体在此区域中执行的动作方可被识别。
借由上述技术方案,在获取操作体在空间交互区域中的空间特征后,根据空间特征,在空间交互区域中构建虚拟操作体,然后获取虚拟操作体与空间交互区域显示的虚拟交互平面之间的相对位置关系,当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设条件时,改变虚拟操作体的显示状态,以通过改变虚拟操作体的显示状态指示虚拟操作体在空间交互区域中的动作可被识别,进而才可根据虚拟操作体在空间交互区域中的动作对空间交互区域中目标对象执行相应操作,以此来提高交互的准确性。
请参阅图11,其示出了本发明实施例提供的基于虚拟交互平面的交互装置的另一种结构示意图,在图10基础上还可以包括:第三获取单元600和确定单元700。
第三获取单元600,用于当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设关系时,获取虚拟操作体和虚拟交互平面的交互位置。
其中交互位置可以是虚拟操作体与虚拟交互平面相交的位置,虚拟操作体的至少部分穿过虚拟交互平面时,虚拟操作体与虚拟交互平面至少相交一个位置,若虚拟操作体与虚拟交互平面相交仅有一个位置,则将此位置确定为交互位置,若虚拟操作体与虚拟交互平面相交有至少两个位置,则可以将所有相交位置确定为交互位置或者可以从相交位置处选取一个位置为交互位置。而选取一个位置为交互位置的可行方式是:所有相交位置处有目标对象的位置,或者根据所有相交位置中与目标对象的距离来选取交互位置,如所有相交位置中与目标对象的距离最近的位置为交互位置。
确定单元700,用于根据交互位置,确定虚拟操作体在虚拟交互平面上选定的目标对象。
可以理解的是:在交互位置为一个时,若交互位置处有目标对象,则直接选定交互位置处的目标对象,若交互位置处无目标对象,则根据目标对象与交互位置之间的距离选定一目标对象,如选取与交互位置距离最近的目标对象,而若与交互位置距离最近的目标对象为多个,则可以选定多个目标对象或者从多个目标对象中根据目标对象的使用情况(如使用频率的高低)来选定一目标对象。在交互位置有多个时,可以采用上述交互位置为一个的方式来选定,具体选定一个还是多个目标对象根据实际应用而定。如在虚拟交互平面显示桌面时,则可以选定一个目标对象,而若虚拟交互平面显示多媒体浏览界面时,如显示图片浏览界面时,则可以选定多个目标对象,实现一次交互选定多个目标对象的目的。
请参阅图12,其示出了本发明实施例提供的基于虚拟交互平面的交互装置的另一种结构示意图,在图10基础上还可以包括:生成单元800和调整单元900。
在本发明实施例中,第一获取单元200,用于获取虚拟操作体在空间交互区域上对虚拟交互平面的操作特征。其中操作特征是虚拟操作体对虚拟交互平面进行操作时获取的特征,该操作特征用于指示对虚拟交互平面的显示状态进行调整,如调整虚拟交互平面的显示位置、显示角度、显示大小和显示亮度等等。
在本发明实施例中,操作特征可以是虚拟操作体在空间交互区域中挪动虚拟交互平面时的运动轨迹、虚拟操作体在虚拟交互平面上的运动量,以通过这些特征对虚拟交互平面的显示状态进行调整。
生成单元800,用于根据操作特征,生成第一控制指令。
调整单元900,用于根据第一控制指令,调整虚拟交互平面的显示状态。
可以理解的是:第一控制指令用于指示对虚拟交互平面的显示状态进行调整,而根据操作特征生成第一控制指令的可行方式是:将操作特征对应的调整参数携带在第一控制指令中,这样在获取到第一控制指令后,可根据第一控制指令中的调整参数来调整虚拟交互平面的显示状态。例如第一控制指令中携带有虚拟操作体在空间交互区域中运动的终点位置,则根据第一控制指令可以将虚拟交互平面搬移到终点位置处显示。
借由上述技术方案,通过虚拟操作体在空间交互区域上对虚拟交互平面的操作特征,实现对虚拟交互平面的显示状态的调整,这样用户就可以根据各自使用习惯来改变虚拟交互平面的显示,使得虚拟交互平面的显示更符合用户的使用习惯,提高用户体验。
请参阅图13,其示出了本发明实施例提供的基于虚拟交互平面的交互装置的另一种结构示意图,在图10基础上还可以包括:确定单元1000。
在本发明实施例中,显示单元100,还用于当虚拟操作体与虚拟交互平面之间的相对位置关系满足第一预设关系时,在虚拟交互平面上显示虚拟操作体在空间交互区域中的第一操作量。
确定单元1000,用于根据预设操作比例和第一操作量,确定虚拟操作体对空间交互区域中目标对象的第二操作量,并触发显示单元在虚拟交互平面上显示第二操作量,以通过第二操作量来实时确定目标对象在空间交互区域中的状态,这样用户可以将第二操作量作为一参考量,调整虚拟操作体对目标对象的第一操作量,实现对目标对象的精准调整,从而实现对目标对象的复杂操作的精准控制。
在这里需要说明的一点是:上述图11至图13所示装置实施例中的具备完整技术方案的单元可以相互组合,得到具备多个新增功能的交互装置,如可以将图12所示装置实施例中的单元合并到图11中,以交互装置同时具备确定目标对象和调整虚拟交互平面的功能。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (12)

1.一种基于虚拟交互平面的交互方法,其特征在于,所述方法包括:
在空间交互区域上显示一虚拟交互平面;
获取操作体在所述空间交互区域中的空间特征;
根据所述空间特征,在所述空间交互区域中构建虚拟操作体;
获取所述虚拟操作体与所述虚拟交互平面之间的相对位置关系,所述虚拟操作体与所述虚拟交互平面之间的相对位置关系表示虚拟操作体的至少部分是否穿过虚拟交互平面,若至少部分穿过虚拟交互平面虚拟操作体与虚拟交互平面之间的相对位置关系还表示穿过虚拟交互平面部分远离还是靠近虚拟交互平面或者未穿过虚拟交互平面部分远离还是靠近虚拟交互平面;
当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态,以在所述虚拟操作体与所述虚拟交互平面之间的相对位置关系发生变化时执行与虚拟操作体运动相对应的操作。
2.根据权利要求1所述的方法,其特征在于,所述当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态,包括:
当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系指示所述虚拟操作体的至少部分穿过所述虚拟交互平面,且穿过所述虚拟交互平面的部分的运动情况满足第二预设条件或未穿过所述虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性;
根据所述更改属性,改变穿过所述虚拟交互平面的至少部分。
3.根据权利要求2所述的方法,其特征在于,所述改变穿过所述虚拟交互平面的至少部分,包括:从所述虚拟操作体与所述虚拟交互平面之间的相对位置关系中,获取所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离;
根据所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离,确定所述更改属性中的第一更改因素;
根据所述第一更改因素,改变穿过所述虚拟交互平面的至少部分。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,获取所述虚拟操作体和所述虚拟交互平面的交互位置;
根据所述交互位置,确定所述虚拟操作体在所述虚拟交互平面上选定的目标对象。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:获取所述虚拟操作体在所述空间交互区域上对所述虚拟交互平面的操作特征;
根据所述操作特征,生成第一控制指令;
根据所述第一控制指令,调整所述虚拟交互平面的显示状态。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,在所述虚拟交互平面上显示所述虚拟操作体在所述空间交互区域中的第一操作量;
根据预设操作比例和所述第一操作量,确定所述虚拟操作体对所述空间交互区域中目标对象的第二操作量;
在所述虚拟交互平面上显示所述第二操作量。
7.一种基于虚拟交互平面的交互装置,其特征在于,所述装置包括:
显示单元,用于在空间交互区域上显示一虚拟交互平面;
第一获取单元,用于获取操作体在所述空间交互区域中的空间特征;
构建单元,用于根据所述空间特征,在所述空间交互区域中构建虚拟操作体;
第二获取单元,用于获取所述虚拟操作体与所述虚拟交互平面之间的相对位置关系,所述虚拟操作体与所述虚拟交互平面之间的相对位置关系表示虚拟操作体的至少部分是否穿过虚拟交互平面,若至少部分穿过虚拟交互平面虚拟操作体与虚拟交互平面之间的相对位置关系还表示穿过虚拟交互平面部分远离还是靠近虚拟交互平面或者未穿过虚拟交互平面部分远离还是靠近虚拟交互平面;
改变单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设条件时,改变所述虚拟操作体的显示状态,以在所述虚拟操作体与所述虚拟交互平面之间的相对位置关系发生变化时执行与虚拟操作体运动相对应的操作。
8.根据权利要求7所述的装置,其特征在于,所述改变单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系指示所述虚拟操作体的至少部分穿过所述虚拟交互平面,且穿过所述虚拟交互平面的部分的运动情况满足第二预设条件或未穿过所述虚拟交互平面的部分的运动情况满足第三预设条件时,获取更改属性,并根据所述更改属性,改变穿过所述虚拟交互平面的至少部分。
9.根据权利要求8所述的装置,其特征在于,所述改变单元包括:
获取子单元,用于从所述虚拟操作体与所述虚拟交互平面之间的相对位置关系中,获取所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离;
确定子单元,用于根据所述虚拟操作体中穿过所述虚拟交互平面的部分与所述虚拟交互平面之间的距离,确定所述更改属性中的第一更改因素;
改变子单元,用于根据所述第一更改因素,改变穿过所述虚拟交互平面的至少部分。
10.根据权利要求7所述的装置,其特征在于,所述装置还包括:第三获取单元,用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,获取所述虚拟操作体和所述虚拟交互平面的交互位置;
确定单元,用于根据所述交互位置,确定所述虚拟操作体在所述虚拟交互平面上选定的目标对象。
11.根据权利要求7所述的装置,其特征在于,所述第一获取单元,用于获取所述虚拟操作体在所述空间交互区域上对所述虚拟交互平面的操作特征;
所述装置还包括:生成单元,用于根据所述操作特征,生成第一控制指令;
调整单元,用于根据所述第一控制指令,调整所述虚拟交互平面的显示状态。
12.根据权利要求7所述的装置,其特征在于,所述显示单元,还用于当所述虚拟操作体与所述虚拟交互平面之间的相对位置关系满足第一预设关系时,在所述虚拟交互平面上显示所述虚拟操作体在所述空间交互区域中的第一操作量;
所述装置还包括:确定单元,用于根据预设操作比例和所述第一操作量,确定所述虚拟操作体对所述空间交互区域中目标对象的第二操作量,并触发所述显示单元在所述虚拟交互平面上显示所述第二操作量。
CN201710187943.3A 2017-03-27 2017-03-27 一种基于虚拟交互平面的交互方法及装置 Active CN106951087B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710187943.3A CN106951087B (zh) 2017-03-27 2017-03-27 一种基于虚拟交互平面的交互方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710187943.3A CN106951087B (zh) 2017-03-27 2017-03-27 一种基于虚拟交互平面的交互方法及装置

Publications (2)

Publication Number Publication Date
CN106951087A CN106951087A (zh) 2017-07-14
CN106951087B true CN106951087B (zh) 2020-02-21

Family

ID=59473135

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710187943.3A Active CN106951087B (zh) 2017-03-27 2017-03-27 一种基于虚拟交互平面的交互方法及装置

Country Status (1)

Country Link
CN (1) CN106951087B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108664124B (zh) * 2018-05-08 2021-08-24 北京奇艺世纪科技有限公司 一种基于空间方位信息的控制方法及装置
CN110827413A (zh) * 2018-08-09 2020-02-21 北京微播视界科技有限公司 控制虚拟物体形态改变的方法、装置和计算机可读存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1504965A (zh) * 2002-12-04 2004-06-16 三维成像装置、可视化方法及操作检查设备和定位的方法
CN1595334A (zh) * 2003-02-24 2005-03-16 株式会社东芝 使操作员能够不操作设备而发出指令的操作识别系统
CN101673161A (zh) * 2009-10-15 2010-03-17 复旦大学 一种可视可操作无实体的触摸屏系统
CN103677254A (zh) * 2012-08-31 2014-03-26 通用电气公司 用于记录操作的方法和设备
CN103744518A (zh) * 2014-01-28 2014-04-23 深圳超多维光电子有限公司 立体交互方法及其显示装置和系统
CN104199547A (zh) * 2014-08-29 2014-12-10 福州瑞芯微电子有限公司 人机交互式虚拟触控装置、系统及方法
CN104199548A (zh) * 2014-08-29 2014-12-10 福州瑞芯微电子有限公司 人机交互式虚拟触控装置、系统及方法
CN104199556A (zh) * 2014-09-22 2014-12-10 联想(北京)有限公司 一种信息处理方法及装置
CN104969148A (zh) * 2013-03-14 2015-10-07 英特尔公司 基于深度的用户界面手势控制
CN105612478A (zh) * 2013-10-11 2016-05-25 微软技术许可有限责任公司 用户接口程序化的缩放
CN106155281A (zh) * 2015-03-31 2016-11-23 深圳超多维光电子有限公司 立体交互方法、立体显示设备及其系统
CN106249883A (zh) * 2016-07-26 2016-12-21 努比亚技术有限公司 一种数据处理方法及电子设备
CN106445118A (zh) * 2016-09-06 2017-02-22 网易(杭州)网络有限公司 虚拟现实交互方法及装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1504965A (zh) * 2002-12-04 2004-06-16 三维成像装置、可视化方法及操作检查设备和定位的方法
CN1595334A (zh) * 2003-02-24 2005-03-16 株式会社东芝 使操作员能够不操作设备而发出指令的操作识别系统
CN101673161A (zh) * 2009-10-15 2010-03-17 复旦大学 一种可视可操作无实体的触摸屏系统
CN103677254A (zh) * 2012-08-31 2014-03-26 通用电气公司 用于记录操作的方法和设备
CN104969148A (zh) * 2013-03-14 2015-10-07 英特尔公司 基于深度的用户界面手势控制
CN105612478A (zh) * 2013-10-11 2016-05-25 微软技术许可有限责任公司 用户接口程序化的缩放
CN103744518A (zh) * 2014-01-28 2014-04-23 深圳超多维光电子有限公司 立体交互方法及其显示装置和系统
CN104199548A (zh) * 2014-08-29 2014-12-10 福州瑞芯微电子有限公司 人机交互式虚拟触控装置、系统及方法
CN104199547A (zh) * 2014-08-29 2014-12-10 福州瑞芯微电子有限公司 人机交互式虚拟触控装置、系统及方法
CN104199556A (zh) * 2014-09-22 2014-12-10 联想(北京)有限公司 一种信息处理方法及装置
CN106155281A (zh) * 2015-03-31 2016-11-23 深圳超多维光电子有限公司 立体交互方法、立体显示设备及其系统
CN106249883A (zh) * 2016-07-26 2016-12-21 努比亚技术有限公司 一种数据处理方法及电子设备
CN106445118A (zh) * 2016-09-06 2017-02-22 网易(杭州)网络有限公司 虚拟现实交互方法及装置

Also Published As

Publication number Publication date
CN106951087A (zh) 2017-07-14

Similar Documents

Publication Publication Date Title
US10445935B2 (en) Using tracking to simulate direct tablet interaction in mixed reality
US20220382379A1 (en) Touch Free User Interface
US9939914B2 (en) System and method for combining three-dimensional tracking with a three-dimensional display for a user interface
JP2022118183A (ja) デジタルデバイスとの対話のための直接的なポインティング検出のためのシステムおよび方法
JP6372487B2 (ja) 情報処理装置、制御方法、プログラム、および記憶媒体
US10191612B2 (en) Three-dimensional virtualization
US20140118252A1 (en) Method of displaying cursor and system performing cursor display method
EP3007441A1 (en) Interactive displaying method, control method and system for achieving displaying of a holographic image
US9544556B2 (en) Projection control apparatus and projection control method
WO2013082760A1 (en) Method and system for responding to user's selection gesture of object displayed in three dimensions
GB2460542A (en) A gesture recognition interface system, using two cameras
EP2802147A2 (en) Electronic apparatus, information processing method, and storage medium
CN105912101B (zh) 一种投影控制方法和电子设备
KR20120126508A (ko) 포인터를 사용하지 않는 가상 터치 장치에서의 터치 인식 방법
CN104317398A (zh) 一种手势控制方法、穿戴式设备及电子设备
CN105094675A (zh) 一种人机交互方法及触屏可穿戴设备
US20210042015A1 (en) Method and system for dwell-less, hands-free interaction with a selectable object
CN106951087B (zh) 一种基于虚拟交互平面的交互方法及装置
US20220012922A1 (en) Information processing apparatus, information processing method, and computer readable medium
KR101321274B1 (ko) 두대의 카메라와 광원을 이용한 포인터를 사용하지 않는 가상 터치 장치
KR20210123273A (ko) 멀티 터치 패턴을 이용한 유저 인터페이스 메뉴 디스플레이 장치 및 방법
US20160321968A1 (en) Information processing method and electronic device
CN105446580A (zh) 一种控制方法及便携式电子设备
KR101564089B1 (ko) 손동작 인식을 이용한 프리젠테이션 실행시스템
CN106843676B (zh) 用于触摸终端的触摸控制方法及触摸控制装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant