CN116339555A - 用于对应用程序窗口进行操作的方法、装置和显示设备 - Google Patents
用于对应用程序窗口进行操作的方法、装置和显示设备 Download PDFInfo
- Publication number
- CN116339555A CN116339555A CN202111604307.9A CN202111604307A CN116339555A CN 116339555 A CN116339555 A CN 116339555A CN 202111604307 A CN202111604307 A CN 202111604307A CN 116339555 A CN116339555 A CN 116339555A
- Authority
- CN
- China
- Prior art keywords
- window
- preset
- current
- target application
- application program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开实施例公开了一种用于对应用程序窗口进行操作的方法、装置和显示设备,其中,该方法包括:响应于接收到对目标应用程序窗口的操作指令,获取目标应用程序窗口的当前状态参数;判断当前状态参数是否满足预设的窗口整体操作条件;若当前状态参数满足预设的窗口整体操作条件,控制目标应用程序窗口进入整体选中状态。本公开实施例可以在应用程序窗口较小时,对窗口内一个位置进行操作时可以使应用程序窗口进入整体选中状态,以便用户对应用程序窗口进行整体操作。
Description
技术领域
本公开涉及人工智能技术领域,尤其是一种用于对应用程序窗口进行操作的方法、装置和显示设备。
背景技术
在虚拟现实(Virtual Reality,VR)或增强现实(Augmented Reality,AR)场景中,终端通过构建虚拟环境给用户提供可交互的沉浸式体验。
当前,用户佩戴AR/VR眼镜等头戴显示设备后,可以在空间中看到应用程序窗口。用户可以通过对应用程序窗口中的指定区域进行操作,从而对应用程序窗口进行选定、移动或缩放等整体操作。当用户对应用程序窗口中除了指定区域以外的其他区域进行操作时,可以对窗口内容进行操作,而不会将应用程序窗口作为一个整体进行选中、移动或缩放等整体操作。在应用程序窗口较小时,用户可能难以选中应用程序窗口中的指定区域,进而难以对应用程序窗口进行整体操作。
如何在应用程序窗口较小时,对应用程序窗口的整体操作,是一个亟待解决的问题。
发明内容
为了解决上述技术问题,提出了本公开。本公开的实施例提供了一种用于对应用程序窗口进行操作的方法、装置和显示设备。
根据本公开实施例的第一方面,提供了一种用于对应用程序窗口进行操作的方法,包括:
响应于接收到对目标应用程序窗口的操作指令,获取目标应用程序窗口的当前状态参数;
判断当前状态参数是否满足预设的窗口整体操作条件;
若当前状态参数满足预设的窗口整体操作条件,控制目标应用程序窗口进入整体选中状态。
根据本公开实施例的第二方面,提供了一种用于对应用程序窗口进行操作的装置,包括:
获取模块,用于响应于接收到对目标应用程序窗口的操作指令,获取目标应用程序窗口的当前状态参数;
判断模块,用于判断当前状态参数是否满足预设的窗口整体操作条件;
控制模块,用于若当前状态参数满足预设的窗口整体操作条件,控制目标应用程序窗口进入整体选中状态。
根据本公开实施例的第三方面,提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序用于执行上述第一方面的用于对应用程序窗口进行操作的方法。
根据本公开实施例的第四方面,提供了一种电子设备,该电子设备包括:
处理器;
用于存储处理器可执行指令的存储器;
处理器,用于从存储器中读取可执行指令,并执行指令以实现上述第一方面的用于对应用程序窗口进行操作的方法。
根据本公开实施例的第五方面,提供了一种头戴显示设备,包括上述第二方面的用于对应用程序窗口进行操作的装置。
下面通过附图和实施例,对本公开的技术方案做进一步的详细描述。
附图说明
通过结合附图对本公开实施例进行更详细的描述,本公开的上述以及其他目的、特征和优势将变得更加明显。附图用来提供对本公开实施例的进一步理解,并且构成说明书的一部分,与本公开实施例一起用于解释本公开,并不构成对本公开的限制。在附图中,相同的参考标号通常代表相同部件或步骤。
图1是可以应用于本公开的用于对应用程序窗口进行操作的方法或装置的实施例的示例性系统架构图;
图2是本公开一个实施例中用于对应用程序窗口进行操作的方法的流程示意图;
图3是本公开一个实施例中步骤S4的流程示意图;
图4是与图3的实施例对应的当前状态参数的示意图;
图5是本公开另一个实施例中步骤S4的流程示意图;
图6是与图5的实施例对应的当前状态参数的示意图;
图7是本公开又一个实施例中步骤S4的流程示意图;
图8是与图7的实施例对应的当前状态参数的示意图;
图9是本公开一个实施例中用于对应用程序窗口进行操作的装置的结构框图;
图10是本公开一示例性实施例提供的电子设备的结构图。
具体实施方式
下面,将参考附图详细地描述根据本公开的示例实施例。显然,所描述的实施例仅仅是本公开的一部分实施例,而不是本公开的全部实施例,应理解,本公开不受这里描述的示例实施例的限制。
应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
本领域技术人员可以理解,本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
还应理解,在本公开实施例中,“多个”可以指两个或两个以上,“至少一个”可以指一个、两个或两个以上。
还应理解,对于本公开实施例中提及的任一部件、数据或结构,在没有明确限定或者在前后文给出相反启示的情况下,一般可以理解为一个或多个。
另外,本公开中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本公开中字符“/”,一般表示前后关联对象是一种“或”的关系。
还应理解,本公开对各个实施例的描述着重强调各个实施例之间的不同之处,其相同或相似之处可以相互参考,为了简洁,不再一一赘述。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
本公开实施例可以应用于终端设备、计算机系统、服务器等电子设备,其可与众多其它通用或专用计算系统环境或配置一起操作。适于与终端设备、计算机系统、服务器等电子设备一起使用的众所周知的终端设备、计算系统、环境和/或配置的例子包括但不限于:个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统、大型计算机系统和包括上述任何系统的分布式云计算技术环境,等等。
终端设备、计算机系统、服务器等电子设备可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常,程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等,它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施,分布式云计算环境中,任务是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中,程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。
图1是可以应用于本公开的用于对应用程序窗口进行操作的方法或装置的实施例的示例性系统架构图。
如图1所示,系统架构可以包括头戴显示设备1、网络2和服务器3。网络2可以为头戴显示设备1和服务器3之间供通信链路的介质。网络2可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
上述头戴显示设备1可以是具有图像显示功能的电子设备,包括但不限于AR智能眼镜、VR智能眼镜等等。该头戴显示设备1可以为一体机,即该头戴显示设备1可以安装各种客户端应用。或者,该头戴显示设备1还可以与终端设备配合使用来实现图像显示功能的分体式设备,此时终端设备可以承担头戴式显示设备的计算功能。这里,为了方便表示,可以将一体机和分体式设备统称为头戴显示设备。
上述头戴显示设备1可以提供各种服务,例如在目标应用程序窗口进入整体选中状态后,可以对目标应用程序窗口进行放大或拉近等操作。
需要说明的是,本公开实施例提供的用于头戴显示设备显示应用程序界面的方法一般由头戴电子设备1执行,相应地,用于头戴显示设备显示应用程序界面的装置一般设置于头戴电子设备1中。
可选的,本公开实施例提供的用于头戴显示设备显示应用程序界面的方法也可以由与头戴电子设备1连接的终端设备执行,相应地,用于头戴显示设备显示应用程序界面的装置也可以设置于该终端设备中。
还需要指出的是,本公开的方案虽然可以应用于头戴显示设备,但是也并不排除该方案也可以应用于服务器3,该服务器3可以为后台服务器。在本公开的方案应用于服务器3的情况下,服务器响应于接收到对目标应用程序窗口的操作指令,获取目标应用程序窗口的当前状态参数。服务器可以判断当前状态参数是否满足预设的窗口整体操作条件;若当前状态参数满足预设的窗口整体操作条件,服务器可以控制目标应用程序窗口进入整体选中状态。此种情况下,用于头戴式显示设备的信息显示方法可以由服务器3执行,相应地,用于头戴显示设备显示应用程序界面的装置也可以设置于服务器3中。
示例性方法
图2是本公开一个实施例中用于对应用程序窗口进行操作的方法的流程示意图。本实施例可应用在电子设备、计算机可读存储介质和头戴显示设备等等上,如图2所示,包括如下步骤:
S2:响应于接收到对目标应用程序窗口的操作指令,获取目标应用程序窗口的当前状态参数。
用户可以通过指针对目标应用程序窗口进行例如点击或移动等操作时,可以生成对目标应用程序窗口的操作指令。用户也可以通过对操作系统提供的操作指令生成对目标应用程序窗口的操作指令。
本文中所指的“指针”指的是用户能够通过其对显示的内容进行指示或操作的工具,并不限定其具体的表现形式。
本方法的执行设备在接收到用户对目标应用程序窗口的操作指令时,获取目标应用程序窗口的当前状态参数。目标应用程序窗口的当前状态参数用于表征目标应用程序窗口在用户视觉上是否尺寸较小,是否因为尺寸小于一定阈值导致难以选中目标应用程序窗口中进行窗口整体操作的部位。
S4:判断当前状态参数是否满足预设的窗口整体操作条件。
S6:若当前状态参数满足预设的窗口整体操作条件,控制目标应用程序窗口进入整体选中状态。在整体选中状态下,用户可以对目标应用程序窗口的整体进行操作,例如对目标应用程序窗口进行缩放、拉近、推远和移动。在一种可选的示例中,在整体选中状态下,在目标应用程序窗口附近会显示供用户对目标应用程序窗口进行整体操作的提示,例如对目标应用程序窗口的缩放选项、拉近选项、推远选项和移动选项等等。用户通过对目标应用程序窗口进行整体操作的选项可以对目标应用程序窗口进行相应的整体操作。
在本实施例中,在用户对应用程序窗口进行操作时,如果应用程序窗口的当前状态参数满足预设的窗口整体操作条件,则可以使应用程序窗口进入整体选中状态,以便用户对应用程序窗口进行整体操作。
在本公开一个实施例中,当前状态参数包括目标窗口对象与观测点之间的当前距离,以及目标窗口对象的当前边长。目标窗口对象为在开发引擎中,与目标应用程序窗口对应的操作对象。
在虚拟空间坐标系中设定目标窗口对象的初始显示位置,即目标应用程序窗口在启动时在虚拟空间坐标系中的位置。在目标应用程序窗口移动时,目标窗口对象在虚拟空间坐标系中的坐标随之变化。目标应用程序窗口的尺寸随着目标窗口对象的缩放进行相应调整。开发引擎可以是可以进行虚拟内容创作的各种引擎,例如3维空间引擎(3D引擎)。
例如,目标应用程序窗口的尺寸可以随着目标窗口对象的等比例缩放进行等比例的缩小或放大。目标应用程序窗口的位置可以随着目标窗口对象的位置变化而变化。
基于观测点在虚拟空间坐标系中的坐标,以及目标窗口对象在虚拟空间坐标系中的坐标,可以计算出目标窗口对象(例如目标窗口对象的某一点,比如中心点)与观测点之间的当前距离。
具体而言,获取观测点在虚拟空间坐标系中的坐标的方式可以利用其和现实空间坐标系中的联系进行。
在本公开一个实施例中,可以设置一个预设参考点,通过该预设参考点在虚拟空间坐标系和现实空间坐标系中的联系建立同一物体在虚拟空间坐标系和现实空间坐标系中的联系。为预设参考点在虚拟空间坐标系中建立初始坐标,并为预设参考点在现实空间坐标系中也建立初始坐标。现实空间坐标系是以某个位置作为坐标原点预设进行建立的。则在初始状态的预设参考点在虚拟空间坐标系中的坐标,以及在现实空间坐标系中的坐标均为已知。
基于头戴显示设备配备的传感器和头戴显示设备配备的图像采集处理装置中的至少一种,确定头戴显示设备的当前位置相对预设参考点在现实空间坐标系中的现实位移。头戴显示设备配备的传感器可以包括位置传感器,也可以包括陀螺仪。可以通过位置传感器得到该现实位移,也可以通过图像采集处理装置拍摄图像和图像分析的方式确定该现实位移,还可以通过图像采集处理装置拍摄图像、图像分析的方式,结合陀螺仪的数据确定该现实位移。
基于该现实位移,以及预先建立的虚拟空间坐标与现实空间坐标之间的映射关系,确定头戴显示设备的当前位置相对预设参考点在虚拟空间坐标系中的虚拟位移。
基于该虚拟位移,以及预设参考点在虚拟空间坐标系中的坐标,可以计算出头戴显示设备在虚拟空间坐标系中的当前坐标。
基于头戴显示设备的在虚拟空间坐标系中的当前坐标,以及头戴显示设备与观测点之间的位置关系,可以计算出观测点在虚拟空间坐标系中的当前坐标。
对于目标窗口对象在虚拟空间坐标系中的坐标,由于目标窗口对象和目标应用程序窗口均为开发引擎中创建的,可以通过开发引擎获取。
目标窗口对象可以是cube,其具有初始的相等的边长。在目标应用程序窗口进行缩放或移动时,目标窗口对象也随之进行相应的缩放或移动。
需要说明的是,目标窗口对象不限于cube,目标窗口对象可以随着选择开发引擎的不同,进行相应地调整。
图3是本公开一个实施例中步骤S4的流程示意图。如图3所示,在当前状态参数包括目标窗口对象与参考点之间的当前距离,以及目标窗口对象的当前边长的示例中,步骤S4包括:
S4-A-2:判断目标窗口对象的当前边长与该当前距离之间的比值是否小于预设第一比值阈值。
图4是与图3的实施例对应的当前状态参数的示意图。如图4所示,P1为观测点,P2为目标窗口对象的中心点,S为目标窗口对象的当前边长,D1为当前距离。
S4-A-4:若该比值小于预设第一比值阈值,判定当前状态参数满足预设的窗口整体操作条件。
设定预设第一比值阈值为C1且C1为常数,当S/D1<C1时,判定前状态参数满足预设的窗口整体操作条件。
可选地,若该比值大于等于预设第一比值阈值,判定当前状态参数不满足预设的窗口整体操作条件。
在本实施例中,将目标窗口对象的当前边长与当前距离之间的比值与预设第一比值阈值进行比较,从而可以快速判断出目标应用程序窗口的当前状态参数是否满足预设的窗口整体操作条件,以便后续步骤可以在判定满足预设的窗口整体操作条件时,控制目标应用程序窗口进入整体选中状态,便于用户对应用程序窗口进行整体操作。
可以理解的是,目标窗口对象可以是形状固定的对象,即各个边之间的比例是固定的(可以是等比例的),而不同的目标应用程序窗口的形状可能不同,即各个边的边长之间的比例可能不同。通过将不同形状的目标应用程序窗口均与形状固定的目标窗口对象建立对应关系,则在操作过程中可以采用固定的第一比值阈值进行判断,简化了操作。例如,目标窗口对象可以是边长比例为1:1的二维图形,不同的目标应用程序窗口可以是边长比例为1.77:1、1.33:1或是其他可选的比例。以目标应用程序窗口是边长比例为1.77:1为例,当目标窗口对象的边长变化为9cm:9cm时,目标应用程序窗口相应变化为边长16cm:9cm,目标窗口对象距离观测点5m,此时判断目标窗口对象的当前边长9cm与所述当前距离5m之间的比值是否小于预设第一比值阈值。因此,不管是何种形状的目标应用程序窗口均可以通过目标窗口对象的边长与目标窗口对象与观测点之间的当前距离来判断,简化了计算量。
在本公开的一个实施例中,当前状态参数包括目标应用程序窗口与观测点之间的当前观测距离,以及目标应用程序窗口的当前边长。
基于观测点在虚拟空间坐标系中的坐标,以及目标应用程序窗口在虚拟空间坐标系中的坐标,可以计算出目标应用程序窗口(例如目标窗口对象的某一点,比如中心点)与观测点之间的当前观测距离。
图5是本公开另一个实施例中步骤S4的流程示意图。如图5所示,在当前状态参数包括目标应用程序窗口与观测点之间的当前观测距离,以及目标应用程序窗口的当前边长时,步骤S4包括:
S4-B-2:判断目标应用程序窗口的当前边长与该当前观测距离之间的比值是否小于预设第二比值阈值。
图6是与图5的实施例对应的当前状态参数的示意图。如图6所示,P1为观测点,P3为目标应用程序窗口的中心点,S(包括S1和S2)为目标应用程序窗口的当前边长,D2为当前观测距离。
S4-B-4:若该比值小于预设第二比值阈值,判定当前状态参数满足预设的窗口整体操作条件。
设定预设第二比值阈值为C2且C2为常数,当S/D2<C2时,判定前状态参数满足预设的窗口整体操作条件。
可选地,若该比值大于等于预设第二比值阈值,判定当前状态参数不满足预设的窗口整体操作条件。
在一种可选的方式中,将目标应用程序窗口的所有边S1和S2的当前边长分别与当前观测距离进行比值分析,若S1/D2和S2/D2均小于第二比值阈值,则可以表示目标应用程序窗口在用户的视觉上过小,此时判定当前状态参数满足预设的窗口整体操作条件。
在本实施例中,将目标应用程序窗口的当前边长与当前观测距离之间的比值与预设第二比值阈值进行比较,从而可以准确判断出目标应用程序窗口的当前状态参数是否满足预设的窗口整体操作条件,以便后续步骤可以在判定满足预设的窗口整体操作条件时,控制目标应用程序窗口进入整体选中状态,便于用户对应用程序窗口进行整体操作。
在本公开的一个实施例中,步骤S4-B-2具体包括:检测目标应用程序窗口的当前边长中的最小边长与当前观测距离之间的比值是否小于预设第二比值阈值。
当目标应用程序窗口为矩形窗口时,目标应用程序窗口的当前边长中的最小边长为矩形窗口中的短边边长。计算该最小边长与当前观测距离之间的比值,判断该比值是否小于预设第二比值阈值。需要说明的是,本实施例并不限定目标应用程序窗口的具体形状,即目标应用程序窗口除了可以是矩形窗口外,还可以是例如梯形窗口等其他形状的多边形窗口。当目标应用程序窗口为多边形窗口时,判断多边形窗口的最小边长与当前观测距离之间的比值是否小于预设第二比值阈值。
在本实施例中,将目标应用程序窗口的当前边长中的最小边长与当前观测距离之间的比值与预设第二比值阈值进行比较,可以准确判断出标应用程序窗口的当前状态参数是否满足预设的窗口整体操作条件,以便后续步骤可以在判定满足预设的窗口整体操作条件时,控制目标应用程序窗口进入整体选中状态,便于用户对应用程序窗口进行整体操作。
在本公开的一个实施例中,当前状态参数包括目标应用程序窗口的预设对边与观测点形成的当前观测夹角。
图7是本公开又一个实施例中步骤S4的流程示意图。如图7所示,在当前状态参数包括目标应用应用程序窗口的预设对边与观测点形成的当前观测夹角的示例中,步骤S4包括:
S4-C-2:判断当前观测夹角是否小于预设角度阈值。
图8是与图7的实施例对应的当前状态参数的示意图。如图8所示,P1为观测点,θ1为观测点与目标应用程序的一个对边形成的一个当前观测夹角,θ2为观测点与目标应用程序的另一个对边形成的另一个当前观测夹角。
S4-C-4:若当前观测夹角小于预设角度阈值,判定当前状态参数满足预设的窗口整体操作条件。
在一种可选的方式中,将θ1和θ2分别与预设角度阈值进行比较,若θ1和θ2均小于预设角度阈值,则可以表示目标应用程序窗口在用户的视觉上过小,此时判定当前状态参数满足预设的窗口整体操作条件。
在本实施例中,将目标应用应用程序窗口的预设对边与观测点形成的当前观测夹角与预设角度阈值进行比较,从而可以快速判断出目标应用程序窗口的当前状态参数是否满足预设的窗口整体操作条件,以便后续步骤可以在判定满足预设的窗口整体操作条件时,控制目标应用程序窗口进入整体选中状态,便于用户对应用程序窗口进行整体操作。
在本公开的一个实施例中,目标应用程序窗口的预设对边为目标应用程序窗口的长边对边。
可以理解的是,本文中所述的“长边”和“短边”分别指的是边长不相等的目标应用程序窗口的尺寸较长的边和尺寸较短的边,例如长方形窗口的长边和短边。在目标应用程序窗口的边长相等时,可以采用任意边进行判断。
请再次参考图8,本实施例仅需将θ2与预设角度阈值进行比较,若θ2小于预设角度阈值,则可以表示目标应用程序窗口在用户的视觉上过小,此时判定当前状态参数满足预设的窗口整体操作条件。
在本实施例中,将目标应用应用程序窗口的长边与观测点形成的当前观测夹角与预设角度阈值进行比较,当观测点与目标应用应用程序窗口的长边形成的当前观测夹角小于预设角度阈值,说明窗口在短边的方向上已经过小,已经不利于用户观察或是操作窗口的内部内容,进入整体选中状态以对应用程序窗口进行整体操作是期望的。因此可准确判断出目标应用程序窗口的当前状态参数是否满足预设的窗口整体操作条件,以便后续步骤可以在判定满足预设的窗口整体操作条件时,控制目标应用程序窗口进入整体选中状态,便于用户对应用程序窗口进行整体操作。
在本公开的一个实施例中,在步骤S4-A-2至S4-A-4、S4-B-2至S4-B-4或S4-C-2至S4-C-4中,观测点为头戴显示设备的位置、控制器的位置和预设位置中的一个。控制器可以是对指针进行控制的真实世界中的控制器,也可以是在用户开启头戴显示设备后,在用户可视空间中的指定位置提供的用于对指针进行控制的虚拟控制器。用户通过控制器控制指针对目标应用程序窗口进行操作。预设位置为与头戴显示设备的位置间隔预设间距的指定位置,例如当头戴显示设备为VR眼镜或AR眼镜时,将头戴显示设备内传感器的朝向用户的斜下方3厘米处作为预设位置,该位置可能位于用户的眼部附近。
在本实施例中,选择头戴显示设备的位置、控制器的位置和预设位置中的一个位置作为观测点,可以有效表征用户位置,从而便于基于观测点检测是否需要控制目标应用程序窗口进入整体选中状态。
在本公开的一个实施例中,用于对应用程序窗口进行操作的方法,可以包括:响应于接收到对目标应用程序窗口的点击指令,获取目标应用程序窗口的当前观测夹角;判断当前观测夹角是否小于预设角度阈值;若当前观测夹角小于预设角度阈值,控制目标应用程序窗口进入整体选中状态,并提供对目标应用程序的整体操作选项。
在本实施例中,当用户使用控制器控制的指针点击目标应用程序窗口中的一个位置时,判断目标应用程序窗口的当前观测夹角是否小于预设角度阈值,若当前观测夹角小于预设角度阈值,则表示用户不易选中目标应用程序窗口中进行窗口整体操作的部位,此时控制目标窗口进入整体选中状态,并提供对目标应用程序的整体操作选项,从而便于用户通过整体操作选项对目标应用程序进行例如缩放、拉近、推远或移动等整体操作,用户体验好。
本公开实施例提供的任一种用于对应用程序窗口进行操作的方法可以由任意适当的具有数据处理能力的设备执行,包括但不限于:终端设备和服务器等。或者,本公开实施例提供的任一种用于对应用程序窗口进行操作的方法可以由处理器执行,如处理器通过调用存储器存储的相应指令来执行本公开实施例提及的任一种用于对应用程序窗口进行操作的方法。下文不再赘述。
示例性装置
图9是本公开一个实施例中用于对应用程序窗口进行操作的装置的结构框图。如图9所示,用于对应用程序窗口进行操作的装置包括:
获取模块100,用于响应于接收到对目标应用程序窗口的操作指令,获取所述目标应用程序窗口的当前状态参数;
判断模块200,用于判断所述当前状态参数是否满足预设的窗口整体操作条件;
控制模块300,用于若所述当前状态参数满足所述预设的窗口整体操作条件,控制所述目标应用程序窗口进入整体选中状态。
在本公开的一个实施例中,所述当前状态参数包括所述目标窗口对象与观测点之间的当前距离,以及所述目标窗口对象的当前边长;所述目标窗口对象为在开发引擎中,与所述目标应用程序窗口对应的操作对象,所述目标应用程序窗口的尺寸随着所述目标窗口对象的缩放进行相应调整;所述判断模块200具体用于判断所述目标窗口对象的当前边长与所述当前距离之间的比值是否小于预设第一比值阈值;若所述比值小于所述预设第一比值阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
在本公开的一个实施例中,所述当前状态参数包括所述目标应用程序窗口与观测点之间的当前观测距离,以及目标窗口对象的当前边长;所述目标窗口对象为在开发引擎中,与所述目标应用程序窗口对应的操作对象,所述目标应用程序窗口的尺寸随着所述目标窗口对象的缩放进行相应调整;所述判断模块200具体用于判断所述目标窗口对象的当前边长与所述当前观测距离之间的比值是否小于预设第二比值阈值;若所述比值小于所述预设第二比值阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
在本公开的一个实施例中,所述判断模块200具体用于检测所述目标应用程序窗口的当前边长中的最小边长与所述当前观测距离之间的比值是否小于预设第二比值阈值。
在本公开的一个实施例中,所述当前状态参数包括所述目标应用应用程序窗口的预设对边与观测点形成的当前观测夹角;所述判断模块200具体用于判断所述当前观测夹角是否小于预设角度阈值;若所述当前观测夹角小于所述预设角度阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
在本公开的一个实施例中,所述预设对边为所述目标应用程序窗口的长边对边。
在本公开的一个实施例中,所述观测点为头戴显示设备的位置、控制器的位置和预设位置中的一个,所述预设位置为与所述头戴显示设备的位置间隔预设间距的指定位置。
需要说明的是,本公开实施例的用于对应用程序窗口进行操作的装置的具体实施方式与本公开实施例的用于对应用程序窗口进行操作的方法的具体实施方式类似,具体参见用于对应用程序窗口进行操作的方法部分,为了减少冗余,不作赘述。
示例性电子设备
下面,参考图10来描述根据本公开实施例的电子设备。如图10所示,电子设备包括一个或多个处理器10和存储器20。
处理器10可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制电子设备中的其他组件以执行期望的功能。
存储器20可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器10可以运行所述程序指令,以实现上文所述的本公开的各个实施例的用于对应用程序窗口进行操作的方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如输入信号、信号分量、噪声分量等各种内容。
在一个示例中,电子设备还可以包括:输入装置30和输出装置40,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。输入装置30可以例如键盘、鼠标等等。输出装置40可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。
当然,为了简化,图10中仅示出了该电子设备中与本公开有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,电子设备还可以包括任何其他适当的组件。
示例性计算机可读存储介质
计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
此外,本公开实施例还提供一种头戴显示设备,包括上述实施例的用于对应用程序窗口进行操作的装置。
以上结合具体实施例描述了本公开的基本原理,但是,需要指出的是,在本公开中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本公开的各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作用,而非限制,上述细节并不限制本公开为必须采用上述具体的细节来实现。
本说明书中各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言,由于其与方法实施例基本对应,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本公开中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
可能以许多方式来实现本公开的方法和装置。例如,可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本公开的方法和装置。用于所述方法的步骤的上述顺序仅是为了进行说明,本公开的方法的步骤不限于以上具体描述的顺序,除非以其它方式特别说明。此外,在一些实施例中,还可将本公开实施为记录在记录介质中的程序,这些程序包括用于实现根据本公开的方法的机器可读指令。因而,本公开还覆盖存储用于执行根据本公开的方法的程序的记录介质。
还需要指出的是,在本公开的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本公开的等效方案。
提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本公开。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的,并且在此定义的一般原理可以应用于其他方面而不脱离本公开的范围。因此,本公开不意图被限制到在此示出的方面,而是按照与在此公开的原理和新颖的特征一致的最宽范围。
为了例示和描述的目的已经给出了以上描述。此外,此描述不意图将本公开的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例,但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。
Claims (11)
1.一种用于对应用程序窗口进行操作的方法,包括:
响应于接收到对目标应用程序窗口的操作指令,获取所述目标应用程序窗口的当前状态参数;
判断所述当前状态参数是否满足预设的窗口整体操作条件;
若所述当前状态参数满足所述预设的窗口整体操作条件,控制所述目标应用程序窗口进入整体选中状态。
2.根据权利要求1所述的方法,其中,所述当前状态参数包括所述目标窗口对象与观测点之间的当前距离,以及所述目标窗口对象的当前边长;所述目标窗口对象为与所述目标应用程序窗口对应的操作对象;
所述判断所述当前状态参数是否满足预设的窗口整体操作条件,包括:
判断所述目标窗口对象的当前边长与所述当前距离之间的比值是否小于预设第一比值阈值;
若所述比值小于所述预设第一比值阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
3.根据权利要求1所述的方法,其中,所述当前状态参数包括所述目标应用程序窗口与观测点之间的当前观测距离,以及目标应用程序窗口的当前边长;
所述判断所述当前状态参数是否满足预设的窗口整体操作条件,包括:
判断所述目标应用程序窗口的当前边长与所述当前观测距离之间的比值是否小于预设第二比值阈值;
若所述比值小于所述预设第二比值阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
4.根据权利要求3所述的方法,其中,所述判断所述目标应用程序窗口的当前边长与所述当前观测距离之间的比值是否小于预设第二比值阈值,包括:
检测所述目标应用程序窗口的当前边长中的最小边长与所述当前观测距离之间的比值是否小于预设第二比值阈值。
5.根据权利要求1所述的方法,其中,所述当前状态参数包括所述目标应用应用程序窗口的预设对边与观测点形成的当前观测夹角;
所述判断所述当前状态参数是否满足预设的窗口整体操作条件,包括:
判断所述当前观测夹角是否小于预设角度阈值;
若所述当前观测夹角小于所述预设角度阈值,判定所述当前状态参数满足所述预设的窗口整体操作条件。
6.根据权利要求5所述的方法,其中,所述预设对边为所述目标应用程序窗口的长边对边。
7.根据权利要求2-6任一项所述的方法,其中,所述观测点为头戴显示设备的位置、控制器的位置和预设位置中的一个,所述预设位置为与所述头戴显示设备的位置间隔预设间距的指定位置。
8.一种用于对应用程序窗口进行操作的装置,包括:
获取模块,用于响应于接收到对目标应用程序窗口的操作指令,获取所述目标应用程序窗口的当前状态参数;
判断模块,用于判断所述当前状态参数是否满足预设的窗口整体操作条件;
控制模块,用于若所述当前状态参数满足所述预设的窗口整体操作条件,控制所述目标应用程序窗口进入整体选中状态。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1-7任一所述的用于对应用程序窗口进行操作的方法。
10.一种电子设备,所述电子设备包括:
处理器;
用于存储所述处理器可执行指令的存储器;
所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述权利要求1-7任一所述的用于对应用程序窗口进行操作的方法。
11.一种头戴显示设备,包括权利要求8所述的用于对应用程序窗口进行操作的装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111604307.9A CN116339555A (zh) | 2021-12-24 | 2021-12-24 | 用于对应用程序窗口进行操作的方法、装置和显示设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111604307.9A CN116339555A (zh) | 2021-12-24 | 2021-12-24 | 用于对应用程序窗口进行操作的方法、装置和显示设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116339555A true CN116339555A (zh) | 2023-06-27 |
Family
ID=86890287
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111604307.9A Pending CN116339555A (zh) | 2021-12-24 | 2021-12-24 | 用于对应用程序窗口进行操作的方法、装置和显示设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116339555A (zh) |
-
2021
- 2021-12-24 CN CN202111604307.9A patent/CN116339555A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10949057B2 (en) | Position-dependent modification of descriptive content in a virtual reality environment | |
KR101890459B1 (ko) | 3차원으로 디스플레이된 오브젝트의 사용자 선택 제스쳐에 응답하기 위한 방법 및 시스템 | |
EP2814000B1 (en) | Image processing apparatus, image processing method, and program | |
CN112150551A (zh) | 物体位姿的获取方法、装置和电子设备 | |
CN115147558B (zh) | 三维重建模型的训练方法、三维重建方法及装置 | |
US10488918B2 (en) | Analysis of user interface interactions within a virtual reality environment | |
US10789766B2 (en) | Three-dimensional visual effect simulation method and apparatus, storage medium, and display device | |
US20080252661A1 (en) | Interface for Computer Controllers | |
US20230229283A1 (en) | Dynamic display method and apparatus based on operating body, storage medium and electronic device | |
CN105912101B (zh) | 一种投影控制方法和电子设备 | |
CN112156467A (zh) | 虚拟相机的控制方法、系统、存储介质与终端设备 | |
CN113689508B (zh) | 点云标注方法、装置、存储介质及电子设备 | |
CN112465971A (zh) | 模型中点位的引导方法和装置、存储介质、电子设备 | |
CN115512046B (zh) | 模型外点位的全景图展示方法和装置、设备、介质 | |
CN116339555A (zh) | 用于对应用程序窗口进行操作的方法、装置和显示设备 | |
EP4167068A1 (en) | Integration of a two-dimensional input device into a three-dimensional computing environment | |
KR20160143936A (ko) | 선택적 3d 렌더링 방법 및 이를 위한 시스템 | |
CN116339566A (zh) | 用于头戴显示设备显示应用程序界面的方法和装置 | |
CN114911398A (zh) | 显示图形界面方法、电子设备和计算机程序产品 | |
JP5178483B2 (ja) | プログラム、情報処理装置及び表示方法 | |
CN117034585A (zh) | 多显示器的编排方法、装置和电子设备 | |
CN117635449A (zh) | 利用终端进行图像处理的方法、装置、设备和存储介质 | |
CN114780504A (zh) | web端交互管理方法、装置、存储介质及电子设备 | |
CN117850591A (zh) | 一种交互控制方法及电子设备 | |
CN117745995A (zh) | 三维模型的视角转换方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |