CN117591053A - 信息显示方法、装置、扩展现实设备及计算机存储介质 - Google Patents
信息显示方法、装置、扩展现实设备及计算机存储介质 Download PDFInfo
- Publication number
- CN117591053A CN117591053A CN202311578201.5A CN202311578201A CN117591053A CN 117591053 A CN117591053 A CN 117591053A CN 202311578201 A CN202311578201 A CN 202311578201A CN 117591053 A CN117591053 A CN 117591053A
- Authority
- CN
- China
- Prior art keywords
- screenshot
- target
- target client
- augmented reality
- display information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 148
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000009877 rendering Methods 0.000 claims abstract description 52
- 238000012545 processing Methods 0.000 claims abstract description 29
- 238000004590 computer program Methods 0.000 claims description 23
- 230000015654 memory Effects 0.000 claims description 20
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 230000009286 beneficial effect Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000010894 electron beam technology Methods 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种信息显示方法、装置、扩展现实设备及计算机存储介质;在本申请实施例中,获取目标客户端对应的截图周期,所述目标客户端位于与所述扩展现实设备连接的电子设备中;根据所述截图周期,发送截图指令至所述电子设备,以使所述电子设备根据所述截图指令,对所述目标客户端的显示信息进行截图处理,得到包含所述目标客户端的显示信息的目标截图;接收所述电子设备返回的所述目标截图,并根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息。本申请实施例可以提高使用扩展现实设备的灵活性。
Description
技术领域
本申请涉及数据处理技术领域,具体涉及一种信息显示方法、装置、扩展现实设备及计算机存储介质。
背景技术
随着科学技术的发展,增强现实技术(Augmented Reality,AR)和虚拟现实技术(Virtual Reality,VR)得到了广泛的应用。通常,可以通过扩展现实设备(ExtendedReality,XR)实现增强现实技术和虚拟现实技术。
在通过扩展现实设备实现增强现实技术和虚拟现实技术时,需要在扩展现实设备中安装扩展现实设备支持的应用程序,当应用程序不被扩展现实设备支持时,该应用程序不能被扩展现实设备使用,导致使用扩展现实设备的灵活性较低。
发明内容
本申请实施例提供一种信息显示方法、装置、扩展现实设备及计算机存储介质,可以解决使用扩展现实设备的灵活性较低的技术问题。
本申请实施例提供一种信息显示方法,包括:
获取目标客户端对应的截图周期,上述目标客户端位于与上述扩展现实设备连接的电子设备中;
根据上述截图周期,发送截图指令至上述电子设备,以使上述电子设备根据上述截图指令,对上述目标客户端的显示信息进行截图处理,得到包含上述目标客户端的显示信息的目标截图;
接收上述电子设备返回的上述目标截图,并根据上述目标截图进行渲染,以在上述扩展现实设备的屏幕上显示上述目标客户端的显示信息。
相应地,本申请实施例提供一种信息显示装置,包括:
获取模块,用于获取目标客户端对应的截图周期,上述目标客户端位于与上述扩展现实设备连接的电子设备中;
发送模块,用于根据上述截图周期,发送截图指令至上述电子设备,以使上述电子设备根据上述截图指令,对上述目标客户端的显示信息进行截图处理,得到包含上述目标客户端的显示信息的目标截图;
渲染模块,用于接收上述电子设备返回的上述目标截图,并根据上述目标截图进行渲染,以在上述扩展现实设备的屏幕上显示上述目标客户端的显示信息。
此外,本申请实施例还提供一种扩展现实设备,包括处理器和存储器,上述存储器存储有计算机程序,上述处理器用于运行上述存储器内的计算机程序实现本申请实施例提供的信息显示方法。
此外,本申请实施例还提供一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序适于处理器进行加载,以执行本申请实施例所提供的任一种信息显示方法。
此外,本申请实施例还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现本申请实施例所提供的任一种信息显示方法。
在本申请实施例中,获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中;根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图;接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,使得即使目标客户端不是扩展现实设备支持的应用程序,也可以将目标客户端显示在扩展现实设备中,提高使用扩展现实设备的灵活性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的信息显示方法的流程示意图;
图2是本申请实施例提供的截图范围的示意图;
图3是本申请实施例提供的另一种截图范围的示意图;
图4是本申请实施例提供的目标客户端的示意图;
图5是本申请实施例提供的子窗口的示意图;
图6是本申请实施例提供的两个目标客户端重叠的示意图;
图7是本申请实施例提供的信息显示装置的结构示意图;
图8是本申请实施例提供的扩展现实设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种信息显示方法、装置、扩展现实设备及计算机存储介质。该信息显示装置可以集成在扩展现实设备中,扩展现实设备可以是增强现实设备(AugmentedReality,AR)、虚拟现实设备(Virtual Reality,VR)以及混合现实设备(Mixed Reality,MR)中的一种。
扩展现实设备可以通过有线或无线的方式与电子设备进行连接。电子设备可以是服务器,也可以是终端等设备。
其中,服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、网络加速服务(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
终端可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
另外,本申请实施例中的“多个”指两个或两个以上。本申请实施例中的“第一”和“第二”等用于区分描述,而不能理解为暗示相对重要性。
以下分别进行详细说明。需要说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
在本实施例中,将从扩展现实设备的角度进行描述,即以扩展现实设备作为执行主体进行详细说明。
请参阅图1,图1是本申请一实施例提供的信息显示方法的流程示意图。该信息显示方法可以包括:
S101、获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中。
目标客户端的类型可以根据实际情况进行选择,比如,目标客户端可以为应用程序或小程序,本申请实施例在此不做限定。
目标客户端可以包括至少一个,也即是,在电子设备的屏幕上可以同时显示多个目标客户端。不同目标客户端对应的截图周期可以相同,也可以不相同,本申请实施例在此不做限定。
扩展现实设备的类型可以根据实际情况进行选择,比如,扩展现实设备可以为XR眼镜或或头戴式显示设备。
目标客户端位于与扩展现实设备连接的电子设备中,可以理解为目标客户端安装在与扩展现实设备连接的电子设备中。
在一些实施例中,扩展现实设备可以响应于用户的输入操作,将输入操作对应的时间间隔,作为目标客户端对应的截图周期,扩展现实设备从而获取到目标客户端对应的截图周期。
在另一些实施例中,获取目标客户端对应的截图周期的过程可以为:
获取电子设备的刷新率;
根据刷新率,确定目标客户端对应的截图周期。
刷新率是指电子束对屏幕上的图像重复扫描的次数,也即是,刷新率指电子设备对屏幕上显示的信息的更新频率。
在本申请实施例中,将电子设备的刷新率作为目标客户端的截图频率,然后根据截图频率计算目标客户端对应的截图周期,以便后续根据截图周期可以实时地获取到目标客户端的显示信息。
在另一些实施例中,不同目标客户端对应的截图周期可以不相同,此时,根据刷新率,确定目标客户端对应的截图周期的过程可以为:
获取扩展现实设备的用户针对目标客户端的聚焦度;
根据聚焦度,对刷新率进行调整,得到扩展现实设备针对目标客户端的目标刷新率;
根据目标刷新率,确定目标客户端对应的截图周期。
聚焦度指扩展现实设备的用户对目标客户端的关注度,聚焦度越高,目标刷新率越高,聚焦度越低,目标刷新率越低。
比如,目标客户端包括应用程序A和应用程序B,电子设备的刷新率为a,应用程序A的聚焦度高于应用程序B的聚焦度,则根据应用程序A的聚焦度和应用程序B的聚焦度对a进行调整之后,应用程序A的目标刷新率高于应用程序B的目标刷新率。
可选地,用户针对目标客户端的聚焦度可以根据用户对目标客户端的操作频次、目标客户端的活动状态以及目标客户端的响应时间中的至少一种确定。比如,操作频次越多,聚焦度越高,活动状态为前台运行状态,聚焦度较高,响应时间越短,聚焦度越高,操作频次越少,聚焦度越低,活动状态为没有运行状态,聚焦度较低,响应时间越长,聚焦度越低。
当用户针对目标客户端的聚焦度同时根据操作频次、目标客户端的活动状态以及目标客户端的响应时间确定时,确定聚焦度的过程可以是根据操作频次确定第一聚焦度、根据目标客户端的活动状态确定第二聚焦度以及根据响应时间确定第三聚焦度,然后对第一聚焦度、第二聚焦度以及第三聚焦度进行加权融合处理,得到用户针对目标客户端的聚焦度。
可选地,扩展现实设备在获取到用户针对目标客户端的聚焦度之后,可以对聚焦度进行映射处理,得到聚焦度对应的目标刷新率,然后将电子设备的刷新率调整为目标刷新率。
其中,对聚焦度进行映射处理的方法,可以根据实际情况进行选择,比如,可以通过预设映射函数或预设映射表对聚焦度进行映射处理,本申请实施例在此不做限定。
在本申请实施例中,获取扩展现实设备的用户针对目标客户端的聚焦度,根据聚焦度,对刷新率进行调整,得到扩展现实设备针对目标客户端的目标刷新率,根据目标刷新率,确定目标客户端对应的截图周期,实现不同目标客户端对应的截图周期不同,使得聚焦度越高的目标客户端,截图周期越短,聚焦度越低的目标客户端,截图周期越长,从而使得在将目标客户端实时展示的同时,可以合理利用扩展现实设备的计算机资源,提高用户体验。
S102、根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图。
当目标客户端未启动时,目标客户端的显示信息可以指目标客户端的图标,当目标客户端在前台运行时,目标客户端的显示信息可以指目标客户端的页面上的内容。
扩展现实设备可以根据截图周期设置定时器(可以是一个截图周期对应一个定时器),然后当到达定时器对应的定时时间时,发送截图指令至电子设备,电子设备在接收到截图指令之后,根据截图指令,对目标客户端的显示信息进行截图处理,从而得到包含目标客户端的显示信息的目标截图。
其中,电子设备在获取到截图指令之后,可以根据截图指令,对电子设备的屏幕进行截图处理(比如,此时的截图的范围可以如图2所示),以便对目标客户端的显示信息进行截图处理,或者,电子设备在获取到截图指令之后,也可以根据截图指令,只对目标客户端所在的窗口进行截图处理(比如,此时的截图范围可以如图3所示),从而对目标客户端的显示信息进行截图处理。
当根据截图指令,只对目标客户端所在的窗口进行截图处理时,如果扩展现实设备中没有存在目标客户端在电子设备中的屏幕上的坐标信息,则电子设备还可以将该坐标信息返回至扩展现实设备。
当电子设备只对目标客户端所在的窗口进行截图且不同目标客户端对应的截图周期不相同时,扩展现实设备在根据包含目标客户端的显示信息的目标截图进行渲染之前,可以获取其他客户端的历史显示信息,然后根据历史显示信息和包含目标客户端的显示信息的目标截图进行渲染,以便使得扩展现实设备的屏幕上显示的内容和电子设备的屏幕上显示的内容相同。
比如,目标客户端包括应用程序A和应用程序B,当到达目标应用程序A的截图周期时,扩展现实设备发送截图指令至电子设备,电子设备返回包含应用程序A的显示信息的目标截图,此时,扩展现实设备并没有获取到应用程序B的显示信息,则获取应用程序B的历史显示信息,然后根据应用程序B的历史显示信息和包含应用程序A的显示信息的目标截图进行渲染,并将应用程序A的显示信息作为应用程序A的历史显示信息进行保存。
当到达目标应用程序B的截图周期时,扩展现实设备发送截图指令至电子设备,电子设备返回包含应用程序B的显示信息的目标截图,此时,扩展现实设备并没有获取到应用程序A的显示信息,则获取应用程序A的历史显示信息,然后根据应用程序A的历史显示信息和包含应用程序B的显示信息的目标截图进行渲染。
电子设备可以通过截图软件,对目标客户端的显示信息进行截图处理,或者,电子设备也可以通过多媒体编程接口(DirectX)对目标客户端的显示信息进行截图处理。
可选地,当通过截图软件,对目标客户端的显示信息截图处理时,如果目标客户端的显示信息没有全部在电子设备的屏幕上,比如,如图4所示,目标应用程序的虚线部分上的显示信息没有在电子设备的屏幕上,会导致没有截图到目标客户端的全部的显示信息,即没有截图到目标应用程序的虚线部分上的显示信息,而当电子设备通过多媒体编程接口进行截图处理时,可以解决该问题,因此,相对于通过截图软件进行截图处理,通过多媒体接口进行截图处理,可以保证截图到目标客户端的全部的显示信息。并且,通过多媒体接口进行截图处理的速度较快,可以使得扩展现实设备较快地获取到包含目标客户端的显示信息的目标截图。
S103、接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
扩展现实设备在获取到电子设备返回的目标截图之后,可以将目标截图作为一个纹理,并将该纹理绘制在扩展现实设备的屏幕上,实现根据目标截图进行渲染的过程,使得在扩展现实设备的屏幕上显示目标客户端的显示信息。
在本申请实施例中,获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中;根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图;接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,实现将目标客户端的显示信息转换为扩展现实设备可以显示的数据,使得目标客户端的显示信息可以达到沉浸式视觉效果,从而使得无需在扩展现实设备上安装目标客户端,目标客户端无需存在扩展现实设备支持的版本,也可以在扩展现实设备上实时显示目标客户端,减少目标客户端的开发成本,提高使用扩展现实设备的灵活性。
并且,当电子设备为电脑时,通过本申请的方法,可以实现将Windows系统中的应用程序实时显示在扩展现实设备的屏幕上。
在一些实施例中,目标客户端的显示信息为目标客户端的父窗口的显示信息,在根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息之后,还包括:
根据截图周期,发送子窗口截图指令至电子设备,以使电子设备根据子窗口截图指令,对目标客户端的子窗口进行截图,得到包含子窗口的显示信息和坐标的目标子截图;
在父窗口的显示信息上,根据目标子截图中子窗口的显示信息和坐标进行渲染,以在扩展现实设备的屏幕上显示目标客户端的父窗口的显示信息和子窗口的显示信息。
扩展现实设备在屏幕上显示目标客户端的显示信息之后,扩展现实设备的用户可以通过扩展现实设备的输入设备(输入设备比如可以为手柄或触摸板等)输入操作指令,扩展现实设备再将操作指令发送至电子设备,电子设备根据操作指令对目标客户端的显示信息进行操作,得到目标客户端更新后的显示信息,然后当扩展现实设备发送截图指令至电子设备之后,电子设备再根据截图指令对目标客户端更新后的显示信息进行截图处理,得到包含目标客户端更新后的显示信息的目标截图,并把该目标截图返回至扩展现实设备,扩展现实设备再将该目标截图渲染至屏幕上,实现对屏幕上显示的内容的更新。
然而,当目标客户端更新后的显示信息和目标客户端的显示信息之间的差别在于是否存在子窗口时,即当目标客户端更新后的显示信息包括子窗口,目标客户端的显示信息没有包含子窗口时,虽然可以通过将包含目标客户端更新后的显示信息的目标截图渲染至扩展现实设备的屏幕上,使得扩展现实设备的屏幕上包含该子窗口,但是,该方案的渲染效率较低,渲染效果较差。
比如,目标客户端的显示信息和目标客户端更新后的显示信息可以如图5所示,此时目标客户端更新后的显示信息包括子窗口,目标客户端的显示信息没有包含子窗口。
在本申请实施例中,由于扩展现实设备在获取到目标客户端的操作指令之后,可以确定目标客户端更新后的显示信息是否存在子窗口,因此,当存在子窗口时,扩展现实设备可以根据截图周期,发送子窗口截图指令至电子设备,以使电子设备根据子窗口截图指令,对目标客户端的子窗口进行截图,得到包含子窗口的显示信息和坐标的目标子截图,然后在父窗口的显示信息上,根据目标子截图中子窗口的显示信息和坐标进行渲染,以便在扩展现实设备的屏幕上显示目标客户端的父窗口的显示信息和子窗口的显示信息,使得无需重新渲染父窗口,提高渲染效率,并且由于可以获知父窗口和子窗口之间的关系,因此,在父窗口上渲染子窗口之后,可以达到更好的渲染效果。
在另一些实施例中,目标客户端包括多个,根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,包括:
根据目标截图,确定多个目标客户端之间的重叠度;
若重叠度满足预设条件,则获取预设透明度值;
根据目标截图和预设透明度进行渲染,在扩展现实设备的屏幕上显示多个目标客户端的显示信息。
由于一些目标客户端可能会存在重叠现象,导致一些目标客户端的部分显示信息不可见,比如,如图6所示,目标客户端包括应用程序A和应用程序B,应用程序A和应用程序B产生重叠,导致应用程序A的部分显示信息被应用程序B遮挡。
在本申请实施例中,根据目标截图,确定多个目标客户端之间的重叠度,然后如果重叠度满足预设条件,则获取预设透明度值,然后根据目标截图进行渲染,得到渲染结果,接着根据预设透明度对渲染结果进行调整,得到调整后渲染结果,并将调整后渲染结果显示在扩展现实设备的屏幕上,以便在扩展现实设备的屏幕上显示多个目标客户端的显示信息,表明被重叠遮挡的显示信息显示在扩展现实设备的屏幕上。
在另一些实施例中,根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,包括:
获取扩展现实设备的用户的显示偏好信息;
根据目标截图和显示偏好信息进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
显示偏好信息可以包括目标客户端的显示信息在扩展现实设备的屏幕上的显示位置、显示方向、显示尺寸等信息。
在本申请实施例中,可以根据用户的显示偏好信息确定目标客户端的显示信息的渲染效果,使得在扩展现实设备的屏幕上显示目标客户端的显示信息符合用户的需求,提高用户的体验。
在另一些实施例中,根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图,得到包含目标客户端的显示信息的目标截图,接收电子设备返回的目标截图,包括:
通过子线程,根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图,得到包含目标客户端的显示信息的目标截图,并接收电子设备返回的目标截图;
根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,包括:
通过子线程,将目标截图发送至子线程的主线程;
通过子线程的主线程,根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
在本申请实施例中,通过子线程,根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图,得到包含目标客户端的显示信息的目标截图,并接收电子设备返回的目标截图,通过子线程的主线程,根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,实现通过异步线程实现信息显示的过程,提高信息显示的效率。
由以上可知,在本申请实施例中,获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中;根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图,得到包含目标客户端的显示信息的目标截图;接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息,使得即使目标客户端不是扩展现实设备支持的应用程序,也可以将目标客户端显示在扩展现实设备中,提高使用扩展现实设备的灵活性。
为便于更好的实施本申请实施例提供的信息显示方法,本申请实施例还提供一种基于上述信息显示方法的装置。其中名词的含义与上述信息显示方法中相同,具体实现细节可以参考方法实施例中的说明。
例如,如图7所示,该信息显示装置可以包括:
获取模块701,用于获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中。
发送模块702,用于根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图。
渲染模块703,用于接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
可选地,获取模块701具体用于执行:
获取电子设备的刷新率;
根据刷新率,确定目标客户端对应的截图周期。
可选地,获取模块701具体用于执行:
获取扩展现实设备的用户针对目标客户端的聚焦度;
根据聚焦度,对刷新率进行调整,得到扩展现实设备针对目标客户端的目标刷新率;
根据目标刷新率,确定目标客户端对应的截图周期。
可选地,目标客户端的显示信息为目标客户端的父窗口的显示信息。相应地,发送模块702还用于执行:
根据截图周期,发送子窗口截图指令至电子设备,以使电子设备根据子窗口截图指令,对目标客户端的子窗口进行截图处理,得到包含子窗口的显示信息和坐标的目标子截图。
渲染模块703还用于执行:
在父窗口的显示信息上,根据目标子截图中子窗口的显示信息和坐标进行渲染,以在扩展现实设备的屏幕上显示目标客户端的父窗口的显示信息和子窗口的显示信息。
可选地,目标客户端包括多个。相应地,渲染模块703具体用于执行:
根据目标截图,确定多个目标客户端之间的重叠度;
若重叠度满足预设条件,则获取预设透明度值;
根据目标截图和预设透明度进行渲染,在扩展现实设备的屏幕上显示多个目标客户端的显示信息。
可选地,渲染模块703具体用于执行:
获取扩展现实设备的用户的显示偏好信息;
根据目标截图和显示偏好信息进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
可选地,发送模块702具体用于执行:
通过子线程,根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图,并接收电子设备返回的目标截图。
可选地,渲染模块703具体用于执行:
通过子线程,将目标截图发送至子线程的主线程;
通过主线程,根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
具体实施时,以上各个模块可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个模块的具体实施方式以及对应的有益效果可参见前面的方法实施例,在此不再赘述。
本申请实施例还提供一种扩展现实设备,该扩展现实设备可以是服务器或终端等,如图8所示,其示出了本申请实施例所涉及的扩展现实设备的结构示意图,具体来讲:
该扩展现实设备可以包括一个或者一个以上处理核心的处理器801、一个或一个以上计算机可读存储介质的存储器802、电源803和输入单元804等部件。本领域技术人员可以理解,图8中示出的扩展现实设备结构并不构成对扩展现实设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器801是该扩展现实设备的控制中心,利用各种接口和线路连接整个扩展现实设备的各个部分,通过运行或执行存储在存储器802内的计算机程序和/或模块,以及调用存储在存储器802内的数据,执行扩展现实设备的各种功能和处理数据。可选的,处理器801可包括一个或多个处理核心;优选的,处理器801可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器801中。
存储器802可用于存储计算机程序以及模块,处理器801通过运行存储在存储器802的计算机程序以及模块,从而执行各种功能应用以及数据处理。存储器802可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据扩展现实设备的使用所创建的数据等。此外,存储器802可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器802还可以包括存储器控制器,以提供处理器801对存储器802的访问。
扩展现实设备还包括给各个部件供电的电源803,优选的,电源803可以通过电源管理系统与处理器801逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源803还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该扩展现实设备还可包括输入单元804,该输入单元804可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,扩展现实设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,扩展现实设备中的处理器801会按照如下的指令,将一个或一个以上的计算机程序的进程对应的可执行文件加载到存储器802中,并由处理器801来运行存储在存储器802中的计算机程序,从而实现各种功能,比如:
获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中;
根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图;
接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
以上各个操作的具体实施方式以及对应的有益效果可参见上文对信息显示方法的详细描述,在此不作赘述。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成,或通过计算机程序控制相关的硬件来完成,该计算机程序可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种信息显示方法中的步骤。例如,该计算机程序可以执行如下步骤:
获取目标客户端对应的截图周期,目标客户端位于与扩展现实设备连接的电子设备中;
根据截图周期,发送截图指令至电子设备,以使电子设备根据截图指令,对目标客户端的显示信息进行截图处理,得到包含目标客户端的显示信息的目标截图;
接收电子设备返回的目标截图,并根据目标截图进行渲染,以在扩展现实设备的屏幕上显示目标客户端的显示信息。
以上各个操作的具体实施方式以及对应的有益效果可参见前面的实施例,在此不再赘述。
其中,该计算机可读存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该计算机可读存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种信息显示方法中的步骤,因此,可以实现本申请实施例所提供的任一种信息显示方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
其中,根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述信息显示方法。
以上对本申请实施例所提供的一种信息显示方法、装置、扩展现实设备及计算机存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种信息显示方法,其特征在于,应用于扩展现实设备,所述方法包括:
获取目标客户端对应的截图周期,所述目标客户端位于与所述扩展现实设备连接的电子设备中;
根据所述截图周期,发送截图指令至所述电子设备,以使所述电子设备根据所述截图指令,对所述目标客户端的显示信息进行截图处理,得到包含所述目标客户端的显示信息的目标截图;
接收所述电子设备返回的所述目标截图,并根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息。
2.根据权利要求1所述的信息显示方法,其特征在于,所述获取目标客户端对应的截图周期,包括:
获取所述电子设备的刷新率;
根据所述刷新率,确定所述目标客户端对应的截图周期。
3.根据权利要求2所述的信息显示方法,其特征在于,所述根据所述刷新率,确定所述目标客户端对应的截图周期,包括:
获取所述扩展现实设备的用户针对所述目标客户端的聚焦度;
根据所述聚焦度,对所述刷新率进行调整,得到所述扩展现实设备针对所述目标客户端的目标刷新率;
根据所述目标刷新率,确定所述目标客户端对应的截图周期。
4.根据权利要求1所述的信息显示方法,其特征在于,所述目标客户端的显示信息为所述目标客户端的父窗口的显示信息,在所述根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息之后,还包括
根据所述截图周期,发送子窗口截图指令至所述电子设备,以使所述电子设备根据所述子窗口截图指令,对所述目标客户端的子窗口进行截图处理,得到包含所述子窗口的显示信息和坐标的目标子截图;
在所述父窗口的显示信息上,根据所述目标子截图中所述子窗口的显示信息和坐标进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的父窗口的显示信息和子窗口的显示信息。
5.根据权利要求1所述的信息显示方法,其特征在于,所述目标客户端包括多个,所述根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息,包括:
根据所述目标截图,确定多个所述目标客户端之间的重叠度;
若所述重叠度满足预设条件,则获取预设透明度值;
根据所述目标截图和所述预设透明度进行渲染,在所述扩展现实设备的屏幕上显示多个所述目标客户端的显示信息。
6.根据权利要求1所述的信息显示方法,其特征在于,所述根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息,包括:
获取所述扩展现实设备的用户的显示偏好信息;
根据所述目标截图和所述显示偏好信息进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息。
7.根据权利要求1-6任一项所述的信息显示方法,其特征在于,所述根据所述截图周期,发送截图指令至所述电子设备,以使所述电子设备根据所述截图指令,对所述目标客户端的显示信息进行截图处理,得到包含所述目标客户端的显示信息的目标截图,接收所述电子设备返回的所述目标截图,包括:
通过子线程,根据所述截图周期,发送截图指令至所述电子设备,以使所述电子设备根据所述截图指令,对所述目标客户端的显示信息进行截图处理,得到包含所述目标客户端的显示信息的目标截图,并接收所述电子设备返回的所述目标截图;
所述根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息,包括:
通过所述子线程,将所述目标截图发送至所述子线程的主线程;
通过所述主线程,根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息。
8.一种信息显示装置,其特征在于,应用于扩展现实设备,包括:
获取模块,用于获取目标客户端对应的截图周期,所述目标客户端位于与所述扩展现实设备连接的电子设备中;
发送模块,用于根据所述截图周期,发送截图指令至所述电子设备,以使所述电子设备根据所述截图指令,对所述目标客户端的显示信息进行截图处理,得到包含所述目标客户端的显示信息的目标截图;
渲染模块,用于接收所述电子设备返回的所述目标截图,并根据所述目标截图进行渲染,以在所述扩展现实设备的屏幕上显示所述目标客户端的显示信息。
9.一种扩展现实设备,其特征在于,包括处理器和存储器,所述存储器存储有计算机程序,所述处理器用于运行所述存储器内的计算机程序,以执行权利要求1至7任一项所述的信息显示方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序适于处理器进行加载,以执行权利要求1至7任一项所述的信息显示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311578201.5A CN117591053A (zh) | 2023-11-23 | 2023-11-23 | 信息显示方法、装置、扩展现实设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311578201.5A CN117591053A (zh) | 2023-11-23 | 2023-11-23 | 信息显示方法、装置、扩展现实设备及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117591053A true CN117591053A (zh) | 2024-02-23 |
Family
ID=89916225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311578201.5A Pending CN117591053A (zh) | 2023-11-23 | 2023-11-23 | 信息显示方法、装置、扩展现实设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117591053A (zh) |
-
2023
- 2023-11-23 CN CN202311578201.5A patent/CN117591053A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018126957A1 (zh) | 显示虚拟现实画面的方法和虚拟现实设备 | |
US20230215076A1 (en) | Image frame display method, apparatus, device, storage medium, and program product | |
CN111880879A (zh) | 一种动态壁纸的播放方法、装置、设备及存储介质 | |
CN116091672A (zh) | 图像渲染方法、计算机设备及其介质 | |
CN114116092A (zh) | 云桌面系统处理方法、云桌面系统控制方法以及相关设备 | |
CN111796825B (zh) | 一种弹幕的绘制方法、装置、设备和存储介质 | |
CN113453073A (zh) | 一种图像渲染方法、装置、电子设备及存储介质 | |
CN117591053A (zh) | 信息显示方法、装置、扩展现实设备及计算机存储介质 | |
WO2022152142A1 (zh) | 虚拟卡片的生成方法及其交互实现方法、装置 | |
CN116059631A (zh) | 对象渲染方法、装置、电子设备及计算机可读存储介质 | |
CN114146406A (zh) | 运算资源分配的方法、装置、电子设备和存储介质 | |
CN114567792A (zh) | 虚拟资源的展示方法、装置、设备、服务器及存储介质 | |
CN116228949B (zh) | 三维模型处理方法、装置及存储介质 | |
CN117409113A (zh) | 动画播放方法、装置、电子设备及计算机存储介质 | |
CN111654737B (zh) | 节目同步管理方法和装置 | |
CN117112950B (zh) | 电子地图中对象的渲染方法、装置、终端及存储介质 | |
WO2023197729A1 (zh) | 对象渲染方法、装置、电子设备及存储介质 | |
CN112130726B (zh) | 页面操作方法、装置、电子设备和计算机可读介质 | |
WO2024082901A1 (zh) | 云游戏的数据处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品 | |
CN115065866B (zh) | 一种视频生成方法、装置、设备及存储介质 | |
CN115730161A (zh) | 多媒体内容的显示方法、装置及设备 | |
CN115297340A (zh) | 虚拟空间互动方法、装置、电子设备、服务器及存储介质 | |
CN116126441A (zh) | 数据处理方法及装置 | |
CN117771666A (zh) | 画面显示方法、装置、终端及计算机存储介质 | |
CN117435751A (zh) | 内容显示方法、装置、电子设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |