CN103488292A - 一种立体应用图标的控制方法及装置 - Google Patents
一种立体应用图标的控制方法及装置 Download PDFInfo
- Publication number
- CN103488292A CN103488292A CN201310410021.6A CN201310410021A CN103488292A CN 103488292 A CN103488292 A CN 103488292A CN 201310410021 A CN201310410021 A CN 201310410021A CN 103488292 A CN103488292 A CN 103488292A
- Authority
- CN
- China
- Prior art keywords
- solid space
- hand
- application icon
- dimensional application
- posture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000013507 mapping Methods 0.000 claims abstract description 22
- 239000007787 solid Substances 0.000 claims description 209
- 230000000007 visual effect Effects 0.000 abstract description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 241001133760 Acoelorraphe Species 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种立体应用图标的控制方法及装置,在立体显示界面显示立体应用图标时,实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势,将手部在第一立体空间中的第一位置信息映射到以立体显示界面为基准平面的第二立体空间中,根据在第二立体空间中的第二位置信息、手部姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,并对被选中的立体应用图标执行与手部姿势对应的操作。由于通过立体的手势方式对立体显示界面中的立体应用图标进行控制,可以在满足用户立体视觉效果的同时,让用户获得更好的操作体验。
Description
技术领域
本发明涉及立体显示技术领域,尤其涉及一种立体应用图标的控制方法及装置。
背景技术
在日常生活中人们是利用两只眼睛来观察周围具有空间立体感的外界景物的,立体(3D)显示技术就是利用双眼立体视觉原理使人获得三维空间感,其主要原理是使观看者的左眼与右眼分别接收到不同的影像,而左眼与右眼接收到的影像会经由大脑分析融合而使观看者产生立体感。
目前,立体显示装置分为裸眼式和眼镜式两大类。眼镜式的立体显示装置已经逐渐普及,裸眼式立体显示装置也得到了较大的发展,逐步进入商用显示市场,并朝着家用显示市场的方向努力。
立体显示装置在播放图片视频时会给用户带来三维立体视觉感受效果,同时,在立体显示界面中显示立体应用图标(OSD菜单)也逐渐成为主流趋势。但是,对于在立体显示界面中立体应用图标的控制和操作并没有获得较大的发展,仍然采用遥控器方式或简单的2D手势方式。这些控制及操作方式相对于立体应用图标来说,不能在满足用户立体视觉效果的同时,获得更好的操作体验。
发明内容
本发明实施例提供了一种立体应用图标的控制方法及装置,用以实现通过立体的手势方式对立体显示界面中的立体应用图标进行控制。
有鉴于此,本发明实施例提供的一种立体应用图标的控制方法,包括:
实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;
根据获取到的所述手部在所述第一立体空间中的第一位置信息,以及所述第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在所述第二立体空间中的第二位置信息;
根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与所述手部姿势对应的操作。
进一步地,为了便于实施,在上述方法中根据以下步骤建立所述第一立体空间:
获取用户手部的姿势,确定获取到的用户手部的姿势是否为起始姿势;
当确定为起始姿势时,确定所述用户手部当前所在空间位置;
以确定出的所述用户手部当前所在空间位置作为第一立体空间的坐标原点,建立所述第一立体空间。
进一步地,为了便于实施,在上述方法中根据以下步骤建立所述第一立体空间与第二立体空间的映射关系:
将第一立体空间的坐标原点投影到第二立体空间的坐标原点,按照以下公式建立所述第一立体空间与第二立体空间的映射关系,X=axc,Y=byc,Z=czc;其中,(X,Y,Z)为第一立体空间中的坐标;(xc,yc,zc)为第二立体空间中的坐标;a,b和c为缩放系数;所述第二立体空间以所述立体显示界面中显示立体应用图标的显示区域的中心为坐标原点。
进一步地,为了便于实施,在上述方法中在确定在所述第二立体空间中的第二位置信息之后,还包括:
根据所述在第二立体空间中的第二位置信息,在所述立体显示界面中绘制表示所述手部的立体光标图形。
进一步地,为了便于实施,在上述方法中所述在所述立体显示界面中绘制表示所述手部的立体光标图形,具体包括:
根据所述在第二立体空间中的第二位置信息,确定所述立体光标图形在立体显示界面中的投影位置,并计算用户观看所述立体光标图形在第二立体空间中处于对应景深位置所需的视差值;其中,在所述第二立体空间的原点的视差值为零;
根据计算出的所述视差值,在所述立体显示界面中绘制所述立体光标图形。
进一步地,为了便于实施,在上述方法中所述根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,具体包括:
确定所述手部在第一立体空间中的第一位置信息在设定时长内是否相同;
在确定所述手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断所述在第二立体空间中的第二位置信息与立体应用图标在第二立体空间中的第二位置信息是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。
有鉴于此,本发明实施例提供的一种立体应用图标的控制装置,包括:
获取模块,用于实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;
坐标转换模块,用于根据获取到的所述手部在所述第一立体空间中的第一位置信息,以及所述第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在所述第二立体空间中的第二位置信息;
判断模块,用于根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
操作执行模块,用于在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与所述手部姿势对应的操作。
进一步地,为了便于实施,在上述装置中还包括:
第一立体空间建立模块,用于获取用户手部的姿势,确定获取到的用户手部的姿势是否为起始姿势;当确定为起始姿势时,确定所述用户手部当前所在空间位置;以确定出的所述用户手部当前所在空间位置作为第一立体空间的坐标原点,建立所述第一立体空间。
进一步地,为了便于实施,在上述装置中还包括:
映射关系建立模块,用于将第一立体空间的坐标原点投影到第二立体空间的坐标原点,按照以下公式建立所述第一立体空间与第二立体空间的映射关系,X=axc,Y=byc,Z=czc;其中,(X,Y,Z)为第一立体空间中的坐标;(xc,yc,zc)为第二立体空间中的坐标;a,b和c为缩放系数;所述第二立体空间以所述立体显示界面中显示立体应用图标的显示区域的中心为坐标原点。
进一步地,为了便于实施,在上述装置中还包括:
光标绘制模块,用于根据在第二立体空间中的第二位置信息,在所述立体显示界面中绘制表示所述手部的立体光标图形。
进一步地,为了便于实施,在上述装置中所述光标绘制模块,具体用于根据在第二立体空间中的第二位置信息,确定所述立体光标图形在立体显示界面中的投影位置,并计算用户观看所述立体光标图形在第二立体空间中处于对应景深位置所需的视差值;其中,在所述第二立体空间的原点的视差值为零;根据计算出的所述视差值,在所述立体显示界面中绘制所述立体光标图形。
进一步地,为了便于实施,在上述装置中所述判断模块,具体用于确定所述手部在第一立体空间中的第一位置信息在设定时长内是否相同;在确定所述手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断所述在第二立体空间中的第二位置信息与立体应用图标在第二立体空间中的第二位置信息是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。
本发明实施例的有益效果包括:
本发明实施例提供的一种立体应用图标的控制方法及装置,在立体显示界面显示立体应用图标时,实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势,将手部在第一立体空间中的第一位置信息映射到以立体显示界面为基准平面的第二立体空间中,根据在第二立体空间中的第二位置信息以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,并对被选中的立体应用图标执行与手部姿势对应的操作。由于通过获取用户手部在第一立体空间中的第一位置信息,在将其转化为以立体显示界面为基准面的第二立体空间的第二位置信息后,并根据第二位置信息与立体显示界面中的立体应用图标的匹配情况,对立体应用图标进行控制,这样可以将用户手部的不同姿势以及手部所在的位置与立体应用图标的操作关联起来,达到在满足用户立体视觉效果的同时,让用户获得更好的立体应用图标操作体验。
附图说明
图1为本发明实施例提供的立体应用图标的控制方法的流程示意图之一;
图2为本发明实施例提供的立体应用图标的控制方法的流程示意图之二;
图3为本发明实施例提供的第一立体空间中手部的第一位置信息的示意图;
图4为本发明实施例提供的立体应用图标的控制方法的流程示意图之三;
图5a为本发明实施例提供的在第二立体空间中建立的n个立体应用图标的右侧示意图;
图5b为本发明实施例提供的在立体显示界面中绘制的n个立体显示图标的示意图;
图6为本发明实施例提供的立体应用图标的控制装置的结构示意图。
具体实施方式
下面结合附图,对本发明实施例提供的立体应用图标的控制方法及装置的具体实施方式进行详细地说明。
本发明实施例提供的一种立体应用图标的控制方法,如图1所示,具体包括以下步骤:
S101、实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;具体地,第一位置信息可以是指用户手部在第一立体空间中的三维坐标值;其中,手部的姿势可以是只用户手部静止的姿态,也可以是指用户手部做出的动作;
S102、根据获取到的手部在第一立体空间中的第一位置信息,以及第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在第二立体空间中的第二位置信息;该第二位置信息实际上是第一位置信息在第二立体空间中的映射;
S103、根据在第二立体空间中的第二位置信息、该手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
S104、在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与手部姿势对应的操作。
本发明实施例提供的上述立体应用图标的控制方法,由于通过获取用户手部在第一立体空间中的第一位置信息,在将其转化为以立体显示界面为基准面的第二立体空间的第二位置信息后,并根据第二位置信息与立体显示界面中的立体应用图标的匹配情况,对立体应用图标进行控制,这样可以将用户手部的不同姿势以及手部所在的位置与立体应用图标的操作关联起来,达到在满足用户立体视觉效果的同时,让用户获得更好的立体应用图标操作体验。
具体地,在执行步骤S101时,可以通过诸如摄像头的图像采集设备来获取用户手部的位置信息;当然也可以通过在用户手部佩戴定位装置,通过检测设备检测定位装置来获取用户手部的位置信息,在此不做赘述。下面都是以采用摄像头来获取用户手部的位置信息为例进行说明。
在具体实施时,在执行步骤S101实时获取用户手部在预先建立的第一立体空间中的第一位置信息之前,如图2所示,可以根据以下步骤建立第一立体空间:
S201、获取用户手部的姿势;
S202、确定获取的用户手部的姿势是否为起始姿势,例如手部为握拳姿势;
S203、当确定为起始姿势时,确定用户手部当前所在空间位置;该手部当前所在空间位置是指用户腕部以上的手部几何中心在摄像头前方的三维坐标位置,当然也可以将用户手部掌根在摄像头前方的三维坐标位置作为手部当前所在空间位置,也可以将用户手部的其他位置作为参照物来确定手部当前所在空间位置,在此不做限定;
S204、以确定出的用户手部当前所在空间位置作为第一立体空间的坐标原点,建立第一立体空间。
其中,在上述步骤S201中在获取用户手部的姿势之前,可以发出的手部识别向导指令,例如在立体显示界面上弹出对话框,以指示用户在摄像头前方做出指定的手部姿势。
在发出手部识别向导指令后,用户会根据指令在摄像头前方做出相应的手部姿势,摄像头获取到包含有用户手部当前的姿势的图像,然后根据该图像可以分析出用户手部的姿势是否为起始姿势,当确定出用户的手部姿势为起始姿势时,将此时手部的所在空间位置(X0,Y0,Z0)作为第一立体空间的坐标原点,建立第一立体空间。
具体地,可以通过如下规则建立第一立体空间:在确定第一空间的坐标原点后,将用户正对立体显示界面的方向定义为Z轴的负方向,用户背对立体显示界面的方向定义为Z轴的正方向;将用户的手部左侧方向定义为X轴负方向,用户手部右侧方向定义为X轴正方向;将用户手部上方定义为Y轴正方向,用户手部下方定义为Y轴负方向;且满足X轴、Y轴和Z轴相交于原点,任意两轴相互垂直。
较佳地,在建立第一立体空间之后,还可以根据以下步骤建立第一立体空间与第二立体空间的映射关系:
将第一立体空间的坐标原点投影到第二立体空间的坐标原点,建立第一立体空间与第二立体空间的映射关系;其中,该第二立体空间可以以立体显示界面中显示立体应用图标的显示区域的中心为坐标原点,也可以直接以立体显示界面的中心为坐标原点。在具体实施时,立体显示界面可能被分为多个显示区域,除了显示立体应用图标的显示区域之外,还会有显示其他内容的显示区域,因此,该第二立体显示空间可以是以立体显示界面为基准平面,即XY平面;Z轴垂直于XY平面,垂点为立体显示界面中显示立体应用图标的显示区域的中心;一般将显示立体应用图标的显示区域的中心设为第二立体显示空间的原点,相对于仅是将立体显示界面的中心为坐标原点,建立出的第二立体显示空间在显示立体应用图标时更符合人体实际视角,因此显示出的立体应用图像更加逼真。
具体地,可以通过如下规则建立第二立体空间:在确定第二空间的坐标原点后,将用户正对立体显示界面的方向定义为Z轴的负方向,用户背对立体显示界面的方向定义为Z轴的正方向;将用户的手部左侧方向定义为X轴负方向,用户手部右侧方向定义为X轴正方向;将用户手部上方定义为Y轴正方向,用户手部下方定义为Y轴负方向;且满足X轴、Y轴和Z轴相交于原点,任意两轴相互垂直。
具体地,第一立体空间和第二立体空间的映射关系为一种缩放关系,即X=axc,Y=byc,Z=czc;其中,(X,Y,Z)为手部在第一立体空间中的坐标,(xc,yc,zc)为手部在第二立体空间中的坐标,a,b和c为缩放系数。
在建立第一立体空间之后,实时获取用户手部相对于之前确定的第一立体空间的坐标原点位置在三维坐标轴的三个方向上的距离(X,Y,Z),如图3所示,作为用户手部在该第一立体空间中的第一位置信息。之后通过第一立体空间和第二立体空间的映射关系,计算出手部在第二立体空间中的第二位置信息(xc,yc,zc)。
较佳地,在本发明实施例提供的上述立体应用图标的控制方法中,在确定在第二立体空间中的第二位置信息之后,还可以包括:根据在第二立体空间中的第二位置信息,在立体显示界面中绘制表示手部的立体光标图形的步骤。
具体地,在立体显示界面中绘制表示手部的立体光标图形,如图4所示,可以通过如下步骤实现:
S401、根据在第二立体空间中的第二位置信息(xc,yc,zc),确定立体光标图形在立体显示界面中的投影位置(xc,yc),并计算用户观看立体光标图形在第二立体空间中处于对应景深位置所需的视差值△dc;其中,在第二立体空间的原点的视差值为零;
S402、根据计算出的视差值,在立体显示界面中绘制立体光标图形。
具体地,可以根据视差值,先确定立体光标图形在立体显示界面中的缩放比例kc;具体地,当△dc=0,kc=1;当△dc>0,kc>1;当△dc<0,kc<1;具体地,缩放比例为kC=S0/(S0+zc),其中S0为该立体显示设备的最佳观看距离;
然后,根据确定出的立体光标图形在立体显示界面中的投影位置以及缩放比例,在立体显示界面中绘制立体光标图形。
同理,在进行立体应用图标的控制之前,还可以通过如下方式在立体显示界面中绘制用户设置的立体应用图标:
首先,在第二立体空间中确定n个立体应用图标的第二位置信息(xt1,yt1,zt1)、(xt2,yt2,zt2)、……、(xtn,ytn,ztn);
然后,确定在立体显示界面中n个立体应用图标的投影位置(xt1,yt1)、(xt2,yt2)、……、(xtn,ytn);并根据n个立体应用图标的zt1、zt2、……ztn的值,如图5a所示,计算出用户观看n个立体应用图标在第二立体空间中处于对应景深位置所需的视差值△dt1、△dt2、……、△dtn;
最后,根据计算出的视差值确定立体应用图标在立体显示界面中所需进行kt1、kt2、……、ktn倍的缩放比例;其中,当△dti=0,kti=1;当△dti>0,kti>1;当△dti<0,kti<1;n≥i≥1;根据n个立体应用图标的投影位置和缩放比例,在立体显示界面中绘制立体应用图标,如图5b所示。
较佳地,在本发明实施例提供的上述方法中的步骤S103根据在第二立体空间中的第二位置信息、手部姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,具体可以通过如下步骤实现:
首先,确定手部在第一立体空间中的第一位置信息在设定时长内是否相同;例如,手部在某一位置静止不动超过3s;
然后,在确定手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断在第二立体空间中的第二位置信息(xc,yc,zc)与立体应用图标p在第二立体空间中的第二位置信息(xtp,ytp,ztp)是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。在具体实施时,在第二立体空间中的第二位置信息可以是一个范围,例如(xc±△x,yc±△y,zc±△z),其中,△x,△y,△z为模糊匹配值,可以根据用户手势挥动的距离以及不同用户的手势习惯进行初始化设定,用户可以自行修正该值。
具体地,在确定立体应用图标p被选中时,可以按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与手部姿势对应的操作。例如,在确认出当前用户手部的姿势对应的操作为“运行”命令时,就会在应用程序库中检索并运行对应立体应用图标p的应用程序,并在立体显示界面中切换至该应用程序的运行界面;当确认出当前用户手部的姿势对应的操作为“移动图标”命令时,会继续识别用户手部的位置信息,当用户手部在另一位置停留超过预定时长时,将在第二立体空间中此时的位置作为立体应用图标p的新坐标,并在该位置重新绘制立体应用图标p。当然,用户手部的姿势还可以对应诸如“删除图标”命令等,在此不一一赘述。
基于同一发明构思,本发明实施例还提供了一种立体应用图标的控制装置,由于该装置解决问题的原理与前述一种立体应用图标的控制方法相似,因此该装置的实施可以参见方法的实施,重复之处不再赘述。
本发明实施例提供的一种立体应用图标的控制装置,如图6所示,包括:
获取模块601,用于实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;
坐标转换模块602,用于根据获取到的手部在所述第一立体空间中的第一位置信息,以及第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在第二立体空间中的第二位置信息;
判断模块603,用于根据在第二立体空间中的第二位置信息、手部的姿势所表示的操作以及预先建立的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
操作执行模块604,用于在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与手部姿势对应的操作。
较佳地,在本发明实施例提供的上述装置中,如图6所示,还包括:
第一立体空间建立模块605,用于获取用户手部的姿势,确定获取到的用户手部的姿势是否为起始姿势;当确定为起始姿势时,确定用户手部当前所在空间位置;以确定出的所述用户手部当前所在空间位置作为第一立体空间的坐标原点,建立第一立体空间。
较佳地,在本发明实施例提供的上述装置中,如图6所示,还包括:
映射关系建立模块606,用于将第一立体空间的坐标原点投影到第二立体空间的坐标原点,按照以下公式建立第一立体空间与第二立体空间的映射关系,X=axc,Y=byc,Z=czc;其中,(X,Y,Z)为第一立体空间中的坐标;(xc,yc,zc)为第二立体空间中的坐标;a,b和c为缩放系数;该第二立体空间以立体显示界面中显示立体应用图标的显示区域的中心为坐标原点。
较佳地,在本发明实施例提供的上述装置中,如图6所示,还包括:
光标绘制模块607,用于根据在第二立体空间中的第二位置信息,在立体显示界面中绘制表示手部的立体光标图形。
较佳地,上述光标绘制模块607,具体用于根据在第二立体空间中的第二位置信息,确定立体光标图形在立体显示界面中的投影位置,并计算用户观看立体光标图形在第二立体空间中处于对应景深位置所需的视差值;其中,在第二立体空间的原点的视差值为零;根据计算出的视差值,在立体显示界面中绘制立体光标图形。
较佳地,在本发明实施例提供的上述装置中的所述判断模块603,具体用于确定手部在第一立体空间中的第一位置信息在设定时长内是否相同;在确定手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断在第二立体空间中的第二位置信息与立体应用图标在第二立体空间中的第二位置信息是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明实施例可以通过硬件实现,也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解,本发明实施例的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
本领域技术人员可以理解附图只是一个优选实施例的示意图,附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中,也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本发明实施例提供的一种立体应用图标的控制方法及装置,在立体显示界面显示立体应用图标时,实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势,将手部在第一立体空间中的第一位置信息映射到以立体显示界面为基准平面的第二立体空间中,根据在第二立体空间中的第二位置信息以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,并对被选中的立体应用图标执行与手部姿势对应的操作。由于通过获取用户手部在第一立体空间中的第一位置信息,在将其转化为以立体显示界面为基准面的第二立体空间的第二位置信息后,并根据第二位置信息与立体显示界面中的立体应用图标的匹配情况,对立体应用图标进行控制,这样可以将用户手部的不同姿势以及手部所在的位置与立体应用图标的操作关联起来,达到在满足用户立体视觉效果的同时,让用户获得更好的立体应用图标操作体验。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (12)
1.一种立体应用图标的控制方法,其特征在于,包括:
实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;
根据获取到的所述手部在所述第一立体空间中的第一位置信息,以及所述第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在所述第二立体空间中的第二位置信息;
根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与所述手部姿势对应的操作。
2.如权利要求1所述的方法,其特征在于,根据以下步骤建立所述第一立体空间:
获取用户手部的姿势,确定获取到的用户手部的姿势是否为起始姿势;
当确定为起始姿势时,确定所述用户手部当前所在空间位置;
以确定出的所述用户手部当前所在空间位置作为第一立体空间的坐标原点,建立所述第一立体空间。
3.如权利要求2所述的方法,其特征在于,根据以下步骤建立所述第一立体空间与第二立体空间的映射关系:
将第一立体空间的坐标原点投影到第二立体空间的坐标原点,按照以下公式建立所述第一立体空间与第二立体空间的映射关系:
X=axc,Y=byc,Z=czc;
其中,(X,Y,Z)为第一立体空间中的坐标;(xc,yc,zc)为第二立体空间中的坐标;a,b和c为缩放系数;
所述第二立体空间以所述立体显示界面中显示立体应用图标的显示区域的中心为坐标原点。
4.如权利要求1所述的方法,其特征在于,在确定在所述第二立体空间中的第二位置信息之后,还包括:
根据所述在第二立体空间中的第二位置信息,在所述立体显示界面中绘制表示所述手部的立体光标图形。
5.如权利要求4所述的方法,其特征在于,所述在所述立体显示界面中绘制表示所述手部的立体光标图形,具体包括:
根据所述在第二立体空间中的第二位置信息,确定所述立体光标图形在立体显示界面中的投影位置,并计算用户观看所述立体光标图形在第二立体空间中处于对应景深位置所需的视差值;其中,在所述第二立体空间的原点的视差值为零;
根据计算出的所述视差值,在所述立体显示界面中绘制所述立体光标图形。
6.如权利要求1-5任一项所述的方法,其特征在于,所述根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中,具体包括:
确定所述手部在第一立体空间中的第一位置信息在设定时长内是否相同;
在确定所述手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断所述在第二立体空间中的第二位置信息与立体应用图标在第二立体空间中的第二位置信息是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。
7.一种立体应用图标的控制装置,其特征在于,包括:
获取模块,用于实时获取用户手部在预先建立的第一立体空间中的第一位置信息和姿势;
坐标转换模块,用于根据获取到的所述手部在所述第一立体空间中的第一位置信息,以及所述第一立体空间与以立体显示界面为基准平面的第二立体空间的映射关系,确定在所述第二立体空间中的第二位置信息;
判断模块,用于根据所述在第二立体空间中的第二位置信息、所述手部的姿势所表示的操作以及预先设定的各立体应用图标在第二立体空间中的第二位置信息,判断各立体应用图标是否被选中;
操作执行模块,用于在确定立体应用图标被选中时,按照预先设置的手部姿势与操作之间的对应关系,对选中的立体应用图标执行与所述手部姿势对应的操作。
8.如权利要求7所述的装置,其特征在于,还包括:
第一立体空间建立模块,用于获取用户手部的姿势,确定获取到的用户手部的姿势是否为起始姿势;当确定为起始姿势时,确定所述用户手部当前所在空间位置;以确定出的所述用户手部当前所在空间位置作为第一立体空间的坐标原点,建立所述第一立体空间。
9.如权利要求8所述的装置,其特征在于,还包括:
映射关系建立模块,用于将第一立体空间的坐标原点投影到第二立体空间的坐标原点,按照以下公式建立所述第一立体空间与第二立体空间的映射关系,X=axc,Y=byc,Z=czc;其中,(X,Y,Z)为第一立体空间中的坐标;(xc,yc,zc)为第二立体空间中的坐标;a,b和c为缩放系数;所述第二立体空间以所述立体显示界面中显示立体应用图标的显示区域的中心为坐标原点。
10.如权利要求7所述的装置,其特征在于,还包括:
光标绘制模块,用于根据在第二立体空间中的第二位置信息,在所述立体显示界面中绘制表示所述手部的立体光标图形。
11.如权利要求10所述的装置,其特征在于,所述光标绘制模块,具体用于根据在第二立体空间中的第二位置信息,确定所述立体光标图形在立体显示界面中的投影位置,并计算用户观看所述立体光标图形在第二立体空间中处于对应景深位置所需的视差值;其中,在所述第二立体空间的原点的视差值为零;根据计算出的所述视差值,在所述立体显示界面中绘制所述立体光标图形。
12.如权利要求7-11任一项所述的装置,其特征在于,所述判断模块,具体用于确定所述手部在第一立体空间中的第一位置信息在设定时长内是否相同;在确定所述手部在第一立体空间中的第一位置信息在设定时长内相同时,针对各立体应用图标,判断所述在第二立体空间中的第二位置信息与立体应用图标在第二立体空间中的第二位置信息是否相同或两位置信息的误差是否在设定的范围内;若是,则确定该立体应用图标被选中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310410021.6A CN103488292B (zh) | 2013-09-10 | 2013-09-10 | 一种立体应用图标的控制方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310410021.6A CN103488292B (zh) | 2013-09-10 | 2013-09-10 | 一种立体应用图标的控制方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103488292A true CN103488292A (zh) | 2014-01-01 |
CN103488292B CN103488292B (zh) | 2016-10-26 |
Family
ID=49828580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310410021.6A Active CN103488292B (zh) | 2013-09-10 | 2013-09-10 | 一种立体应用图标的控制方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103488292B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104407786A (zh) * | 2014-09-30 | 2015-03-11 | 深圳市亿思达科技集团有限公司 | 实现全息图像显示的交互式显示方法、控制方法及系统 |
CN105094294A (zh) * | 2014-05-12 | 2015-11-25 | 联想(北京)有限公司 | 操作裸眼三维图形显示设备的方法及装置 |
CN105353873A (zh) * | 2015-11-02 | 2016-02-24 | 深圳奥比中光科技有限公司 | 基于三维显示的手势操控方法和系统 |
CN105404384A (zh) * | 2015-11-02 | 2016-03-16 | 深圳奥比中光科技有限公司 | 手势操作方法、利用手势定位屏幕光标的方法及手势系统 |
CN105630134A (zh) * | 2014-10-27 | 2016-06-01 | 乐视致新电子科技(天津)有限公司 | 识别操作事件的方法和装置 |
CN105867602A (zh) * | 2015-12-08 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 一种基于手势的操作组件控制方法及设备 |
CN106919928A (zh) * | 2017-03-08 | 2017-07-04 | 京东方科技集团股份有限公司 | 手势识别系统、方法及显示设备 |
CN109885240A (zh) * | 2019-01-04 | 2019-06-14 | 四川虹美智能科技有限公司 | 一种应用程序的展示方法和智能冰箱 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110083106A1 (en) * | 2009-10-05 | 2011-04-07 | Seiko Epson Corporation | Image input system |
CN102449577A (zh) * | 2009-06-01 | 2012-05-09 | 微软公司 | 虚拟桌面坐标变换 |
CN102722249A (zh) * | 2012-06-05 | 2012-10-10 | 上海鼎为软件技术有限公司 | 操控方法、操控装置及电子装置 |
-
2013
- 2013-09-10 CN CN201310410021.6A patent/CN103488292B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102449577A (zh) * | 2009-06-01 | 2012-05-09 | 微软公司 | 虚拟桌面坐标变换 |
US20110083106A1 (en) * | 2009-10-05 | 2011-04-07 | Seiko Epson Corporation | Image input system |
CN102722249A (zh) * | 2012-06-05 | 2012-10-10 | 上海鼎为软件技术有限公司 | 操控方法、操控装置及电子装置 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105094294A (zh) * | 2014-05-12 | 2015-11-25 | 联想(北京)有限公司 | 操作裸眼三维图形显示设备的方法及装置 |
CN105094294B (zh) * | 2014-05-12 | 2018-07-06 | 联想(北京)有限公司 | 操作裸眼三维图形显示设备的方法及装置 |
CN104407786A (zh) * | 2014-09-30 | 2015-03-11 | 深圳市亿思达科技集团有限公司 | 实现全息图像显示的交互式显示方法、控制方法及系统 |
CN105630134A (zh) * | 2014-10-27 | 2016-06-01 | 乐视致新电子科技(天津)有限公司 | 识别操作事件的方法和装置 |
CN105353873A (zh) * | 2015-11-02 | 2016-02-24 | 深圳奥比中光科技有限公司 | 基于三维显示的手势操控方法和系统 |
CN105404384A (zh) * | 2015-11-02 | 2016-03-16 | 深圳奥比中光科技有限公司 | 手势操作方法、利用手势定位屏幕光标的方法及手势系统 |
CN105353873B (zh) * | 2015-11-02 | 2019-03-15 | 深圳奥比中光科技有限公司 | 基于三维显示的手势操控方法和系统 |
CN105867602A (zh) * | 2015-12-08 | 2016-08-17 | 乐视致新电子科技(天津)有限公司 | 一种基于手势的操作组件控制方法及设备 |
CN106919928A (zh) * | 2017-03-08 | 2017-07-04 | 京东方科技集团股份有限公司 | 手势识别系统、方法及显示设备 |
CN109885240A (zh) * | 2019-01-04 | 2019-06-14 | 四川虹美智能科技有限公司 | 一种应用程序的展示方法和智能冰箱 |
Also Published As
Publication number | Publication date |
---|---|
CN103488292B (zh) | 2016-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107810465B (zh) | 用于产生绘制表面的系统和方法 | |
CN103488292A (zh) | 一种立体应用图标的控制方法及装置 | |
US10739936B2 (en) | Zero parallax drawing within a three dimensional display | |
US10692287B2 (en) | Multi-step placement of virtual objects | |
EP3311249B1 (en) | Three-dimensional user input | |
US9886102B2 (en) | Three dimensional display system and use | |
US10943388B1 (en) | Intelligent stylus beam and assisted probabilistic input to element mapping in 2D and 3D graphical user interfaces | |
Van Krevelen et al. | A survey of augmented reality technologies, applications and limitations | |
EP4211661A2 (en) | Methods for manipulating objects in an environment | |
EP3928185A1 (en) | Ergonomic mixed reality step-by-step instructions tethered to 3d holograms in real-world locations | |
US9703400B2 (en) | Virtual plane in a stylus based stereoscopic display system | |
CN110476142A (zh) | 虚拟对象用户界面显示 | |
EP2278823A2 (en) | Stereo image interaction system | |
US11327630B1 (en) | Devices, methods, systems, and media for selecting virtual objects for extended reality interaction | |
US20170185147A1 (en) | A method and apparatus for displaying a virtual object in three-dimensional (3d) space | |
CN104699249A (zh) | 一种信息处理方法及电子设备 | |
US10296098B2 (en) | Input/output device, input/output program, and input/output method | |
Lee et al. | Tunnelslice: Freehand subspace acquisition using an egocentric tunnel for wearable augmented reality | |
Varma et al. | Gestural interaction with three-dimensional interfaces; current research and recommendations | |
Bai | Mobile augmented reality: Free-hand gesture-based interaction | |
KR102165807B1 (ko) | 우세안을 결정하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 | |
de Lacerda Campos | Augmented Reality in Industrial Equipment | |
WO2015195549A1 (en) | 3d digital painting | |
Joonatan | Evaluation of Intuitive VR-based HRI for Simulated Industrial Robots | |
Kozlíková et al. | Spatial Interaction for the Post-Processing of 3D CFD Datasets |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder |
Address after: 266555 Qingdao economic and Technological Development Zone, Shandong, Hong Kong Road, No. 218 Patentee after: Hisense Visual Technology Co., Ltd. Address before: 266555 Qingdao economic and Technological Development Zone, Shandong, Hong Kong Road, No. 218 Patentee before: QINGDAO HISENSE ELECTRONICS Co.,Ltd. |
|
CP01 | Change in the name or title of a patent holder |