CN110427502A - 虚拟内容的显示方法、装置、电子设备及存储介质 - Google Patents

虚拟内容的显示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN110427502A
CN110427502A CN201910580053.8A CN201910580053A CN110427502A CN 110427502 A CN110427502 A CN 110427502A CN 201910580053 A CN201910580053 A CN 201910580053A CN 110427502 A CN110427502 A CN 110427502A
Authority
CN
China
Prior art keywords
data
equipment
terminal device
display
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910580053.8A
Other languages
English (en)
Inventor
贺杰
戴景文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Virtual Reality Technology Co Ltd
Original Assignee
Guangdong Virtual Reality Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Virtual Reality Technology Co Ltd filed Critical Guangdong Virtual Reality Technology Co Ltd
Priority to CN201910580053.8A priority Critical patent/CN110427502A/zh
Publication of CN110427502A publication Critical patent/CN110427502A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44—Browsing; Visualisation therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了一种虚拟内容的显示方法、装置、电子设备以及存储介质。该方法包括：接收远程会话中的其他设备分享的资料数据，当该资料数据处于开启状态时，检测终端设备的姿态数据，基于姿态数据，控制该资料数据在终端设备的显示。本申请通过基于终端设备的姿态数据，来控制该终端设备接收到的其他终端设备分享的资料数据的显示，从而使得用户在远程会话中查看资料更加方便，提升用户体验。

Description

虚拟内容的显示方法、装置、电子设备及存储介质
技术领域
本申请涉及显示技术领域，更具体地，涉及一种虚拟内容的显示方法、装置、电子设备及存储介质。
背景技术
由于通讯技术的发展，远程会议、远程协助、远程教育等远程会话场景已经越来越深入到人们的生活之中，但是传统远程会话通常是以语音通信的方式进行，或是利用摄像头实时采集会话参与者的画面进行视频通信，也可以是文字通信等。
发明内容
本申请实施例提出了一种虚拟内容的显示方法、装置、电子设备及存储介质，以使得用户在远程会话中查看资料更加方便。
第一方面，本申请实施例提供了一种虚拟内容的显示方法，应用于终端设备，所述方法包括：接收远程会话中的其他设备分享的资料数据；当所述资料数据处于开启状态时，检测所述终端设备的姿态数据；基于所述姿态数据，控制所述资料数据在所述终端设备的显示。
第二方面，本申请实施例提供了一种虚拟内容的显示装置，应用于终端设备，所述装置包括：数据接收模块，用于接收远程会话中的其他设备分享的资料数据；数据检测模块，用于当所述资料数据处于开启状态时，检测所述终端设备的姿态数据；显示控制模块，用于基于所述姿态数据，控制所述资料数据在所述终端设备的显示。
第三方面，本申请实施例提供了一种电子设备，包括：一个或多个处理器；存储器；一个或多个应用程序，其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行，一个或多个程序配置用于执行上述第一方面提供的虚拟内容的显示方法。
第四方面，本申请实施例提供了一种计算机可读取存储介质，计算机可读取存储介质中存储有程序代码，程序代码可被处理器调用执行上述第一方面提供的虚拟内容的显示方法。
本申请实施例提供的方案，接收远程会话中的其他设备分享的资料数据，当该资料数据处于开启状态时，检测终端设备的姿态数据，基于姿态数据，控制该资料数据在终端设备的显示。从而通过基于终端设备的姿态数据，来控制该终端设备接收到的其他终端设备分享的资料数据的显示，从而使得用户在远程会话中查看资料更加方便。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的虚拟内容的显示方法的一种应用环境示意图；
图2示出了本申请实施例提供的虚拟内容的显示方法的另一种应用环境示意图；
图3示出了本申请实施例提供的远程会话场景的一种示例图；
图4示出了本申请一实施例提供的虚拟内容的显示方法的流程示意图；
图5示出了本申请另一实施例提供的虚拟内容的显示方法的流程示意图；
图6示出了本申请实施例提供的远程会话场景的又一种示例图；
图7示出了本申请实施例提供的远程会话场景的一种显示效果示意图；
图8示出了本申请又一实施例提供的虚拟内容的显示方法的流程示意图；
图9示出了本申请实施例提供的远程会话场景的另一种显示效果示意图；
图10示出了本申请实施例提供的远程会话场景的再一种显示效果示意图；
图11示出了本申请实施例提供的虚拟内容的生成装置的结构框图；
图12示出了本申请实施例用于执行根据本申请实施例的虚拟内容的显示方法的电子设备的结构框图；
图13示出了本申请实施例用于执行根据本申请实施例的虚拟内容的显示方法的服务器的结构框图；
图14示出了本申请实施例的用于保存或者携带实现根据本申请实施例的虚拟内容的显示方法的程序代码的存储单元。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。
由于通讯技术的发展，远程会议、远程协助、远程教育等远程会话场景已经越来越深入到人们的生活之中，但是传统远程会话通常是以语音通信的方式进行，或是利用摄像头实时采集会话参与者的画面进行视频通信，也可以是文字通信等。传统的远程会话中用户查看由其他用户分享的资料的方式单一，且查看方式不便捷。
于是，发明人提出了本申请实施例提供的虚拟内容的显示方法、装置、电子设备以及存储介质，通过基于终端设备的姿态数据，来控制该终端设备接收到的其他终端设备分享的资料数据的显示，从而使得用户在远程会话中查看资料更加方便，提升用户体验。
下面对本申请实施例提供的虚拟内容的显示方法的应用场景进行介绍。
请参见图1，图1示出了本申请实施例提供的虚拟内容的显示方法的应用场景的示意图，该应用场景包括交互系统10，该交互系统10可以应用于远程会话。该交互系统10包括：多个终端设备100以及服务器200，其中，终端设备100与服务器200连接。
在一些实施方式中，终端设备100通过网络与服务器200通信连接，从而终端设备100与服务器200之间可以进行数据交互。其中，终端设备100可以通过接入路由器所在网络，而通过路由器所在网络与服务器200之间的通信，也可以通过数据网络与服务器200之间进行通信。
在一些实施方式中，终端设备100可以是头戴显示装置，也可以是手机、平板等移动设备。终端设备100为头戴显示装置时，头戴显示装置可以为一体式头戴显示装置。终端设备100也可以是与外接式/接入式头戴显示装置连接的手机等智能终端，即终端设备100可作为头戴显示装置的处理和存储设备，插入或者接入外接式头戴显示装置，在头戴显示装置中对虚拟内容进行显示。在远程会话中，终端设备100可用于对远程会话的虚拟会话场景进行显示，实现将虚拟会话场景的场景画面进行AR(Augmented Reality，增强现实技术)显示或者VR(Virtual Reality，虚拟现实技术)显示，提升远程会话中场景画面的显示效果。在其他实施方式中，终端设备100也可以是电脑、平板电脑、电视等显示设备，终端设备100可以将虚拟会话场景对应的2D(2 Dimensions，二维)画面进行显示。
在一些实施方式中，终端设备100还可以采集远程会话中的信息数据(例如，采集用户的脸部信息、声音数据等)，以根据该信息数据构建三维模型。在另一些实施方式中，终端设备100也可以根据预先存储的脸部信息、声音数据、身体模型等信息数据进行建模，也可以结合预先存储的信息数据以及采集到的信息数据进行建模。例如，终端设备100可以根据预先设定的身体模型以及采集到的用户头像信息进行建模终端设备100可以实时采集人脸信息建立脸部模型，其中，人脸信息可以包括表情信息以及形态动作信息(如偏头、点头等)，然后再将脸部模型与预先设定的身体模型进行整合，节省了建模、渲染的时间的同时，也能实时获取用户的表情、形态动作。在一些实施方式中，终端设备100可以将上述采集的信息数据传输至服务器200或者其他终端设备100。
在一些实施方式中，请参阅图2，交互系统10也还可以包括信息采集装置300，信息采集装置300用于采集上述信息数据(例如，采集用户的脸部信息、声音数据等)，并将采集的信息数据传输至终端设备100或者服务器200。在一些实施方式中，信息采集装置300可包括摄像头、音频模块等，也可以包括光传感器、声传感器等各类传感器。作为一种具体的实施方式，信息采集装置300可以是具有普通彩色相机(RGB)和深度相机(Depth)功能的拍摄设备(如RGB-D深度相机)，以获取被拍摄的用户的深度数据，从而得到用户对应的三维结构。在一些实施方式中，终端设备100与信息采集装置300处于同一现场，终端设备100与信息采集装置300之间可进行通信连接，也可以不进行通信连接。
在一些实施方式中，上述服务器200可以是本地服务器，也可以是云服务器，具体服务器200的类型在本申请实施例中可以不作为限定。在远程会话中，服务器200可用于实现多个终端设备100/信息采集装置300之间的数据交互，从而保证多个终端设备100/信息采集装置300之间的数据传输和同步，实现远程会话中虚拟会话场景、音视频数据的同步、终端设备100/信息采集装置300之间的数据传输等。
在一些实施方式中，当远程会话中的多个终端设备100中存在至少两个终端设备100处于同一现场环境(例如，处于同一室内)时，处于同一现场环境的至少两个终端设备100之间也可以通过蓝牙、WiFi(Wireless-Fidelity，无线保真)、ZigBee(紫峰技术)等通信方式连接，也可以通过数据线等有线通信方式进行连接，从而实现处于同一现场环境的至少两个终端设备100之间数据的交互。当然，处于同一现场环境的至少两个终端设备100之间的连接方式在本申请实施例中可以不作为限定。
下面对具体的虚拟内容的显示方法进行介绍。
在一些实施例中，虚拟内容的显示方法可以是应用在远程会话场景中，一般远程会话场景中包括有多个参会人员，其中参会人员可以处于不同的环境，通过远程会话中的电子设备进行通信，例如图3所示的远程会话场景中，终端设备100为头戴显示装置，参会人员甲401和参会人员乙402处于会议桌的不同位置，其他会议参与者不在该会议桌旁，而是远程参与会议，参会人员甲401和参会人员乙402通过佩戴的头戴显示装置，看到的虚拟画面可以为其他会议参与者中每个会议参与者对应的3D(3 Dimensions，三维)虚拟人物510。
请参阅图4，图4示出了本申请一实施例提供的虚拟内容的显示方法的流程示意图。下面将针对图4所示的实施例进行详细的阐述，方法具体可以包括以下步骤：
步骤S110：接收远程会话中的其他设备分享的资料数据。
在一些实施方式中，远程会话指的是通过数据通信建立的多端进行远程交互、通讯的过程。终端设备可以接收远程会话中的其他设备分享的资料数据，其中，其他设备可以是远程会话中除该终端设备外的一个或多个其他终端设备，资料数据可以包括文档数据、图表数据、音视频数据等，在此不做限定，且资料数据可以是服务器预先存储的，也可以是由其他设备实时上传到服务器的。
在一些实施方式中，终端设备可以与其他设备直接连接，例如通过蓝牙连接，其他设备则可以直接将资料数据分享给终端设备。作为另一种方式，其他设备可以将资料数据上传至服务器，再由服务器将该资料数据发送至该终端设备。
步骤S120：当资料数据处于开启状态时，检测终端设备的姿态数据。
在一些实施方式中，终端设备在接收到其他设备分享的资料数据后，可以先存储在终端设备的本地，当终端设备检测到资料数据被开启时，资料数据被开启则表示资料数据处于可查阅的状态，可以进一步检测终端设备的姿态数据，作为另一种方式，终端设备也可在检测到资料数据处于开启状态后，检测终端设备的姿态数据，姿态数据可以是终端设备的朝向及旋转角度。
在一些实施方式中，终端设备可以包括惯性测量传感器，惯性测量传感器包括测量单元(Inertial measurement unit，IMU)。IMU可以检测终端设备的六自由度信息。其中，六自由度信息可包括终端设备沿空间中三个直角坐标轴的移动自由度和转动自由度，上述三个直角坐标轴对应的移动自由度可构成终端设备的位置信息，对应的转动自由度可构成终端设备的姿态数据。因此，可以通过终端设备上的上述惯性测量传感器的感应数据，来得到IMU检测到的终端设备的姿态数据。
在一些实施方式中，远程会话系统中可以包括图像采集装置，为精确地获取到终端设备的姿态数据，可以基于图像采集装置采集到的终端设备的图像以及IMU的检测数据，得到终端设备的姿态数据。
步骤S130：基于姿态数据，控制资料数据在终端设备的显示。
在一些实施方式中，基于上述方法检测到的终端设备的姿态数据，可以控制资料数据在终端设备的显示。其中，可以基于姿态数据控制资料数据在终端设备是否显示，例如，检测到终端设备的姿态为仰视，即视角以水平方向向上偏移时，可以不显示该资料数据，当检测到终端设备的姿态为俯视，即视角以水平方向向下偏移时，可以在终端设备显示该资料数据。进一步地，也可以根据终端设备的姿态数据确定该资料数据的显示方式，例如，当检测到终端设备向左偏45度时，可以在终端设备放大显示该资料数据。
在一些实施方式中，终端设备可以根据采集到的用户的行为数据确定资料数据的显示，用户的行为数据可以是通过采集的用户的动作图像，也可以是用户的语音数据，可以通过采集并分析用户的动作图像确定资料数据的显示，例如，用户举左手时，放大显示该资料数据。当资料数据有多个时，也可以根据用户的行为数据选择并排显示该多个资料数据。进一步地，也可以基于用户的语音数据确定资料数据的显示，例如，用户说“放大”时，即可以将该资料数据放大显示。
本申请一实施例提供的虚拟内容的显示方法，接收远程会话中的其他设备分享的资料数据，当资料数据处于开启状态时，检测终端设备的姿态数据，基于姿态数据，控制资料数据在终端设备的显示。从而通过基于终端设备的姿态数据，来控制该终端设备接收到的其他终端设备分享的资料数据的显示，从而使得用户在远程会话中查看资料更加方便，提升用户体验。
请参阅图5，图5示出了本申请另一实施例提供的虚拟内容的显示方法的流程示意图。下面将针对图5所示的实施例进行详细的阐述，方法具体可以包括以下步骤：
步骤S210：接收远程会话中的其他设备分享的资料数据。
步骤S220：当资料数据处于开启状态时，检测终端设备的姿态数据。
其中，步骤S210-步骤S220的具体描述请参阅步骤S110-步骤S120，在此不再赘述。
步骤S230：判断姿态数据是否满足预设姿态数据。
在一些实施方式中，通过上述的检测方法获取到姿态数据后，终端设备可以进一步判断该姿态数据是否满足预设姿态数据，其中，预设姿态数据可以是终端设备预先设置的，也可以是服务器中预先存储的，在此不做限定。终端设备可以将姿态数据与预设姿态数据进行匹配，来判断姿态数据是否满足预设姿态数据确定资料数据的显示状态。例如，预设姿态数据可以是以水平方向向上偏移45度，则可以判断检测到的终端设备的姿态数据是否满足以水平方向向上偏移45度。预设姿态数据也可以是角度数值区间，例如，可以是水平方向向上偏移30～60度，或是水平方向向上偏移超过40度等，在此不进行限定。
步骤S240：当姿态数据满足预设姿态数据时，获取资料数据对应的显示数据。
在一些实施方式中，预设姿态数据的数量可以是多个，当姿态数据满足不同的预设姿态数据时，则可以对应不同的显示数据。终端设备可以根据判断姿态数据满足哪一个预设姿态数据来获取到对应的显示数据，从而控制资料数据的对应显示。例如，如表1所示的预设姿态数据与显示数据的对应关系表，在检测到终端设备的姿态数据为以水平方向向上偏移60度时，可以得到终端设备的姿态数据满足以水平方向向上偏移60度的预设姿态数据，则可以获取到对应的显示数据，即不显示该资料数据。进一步地，不同的应用场景下，相同预设姿态数据对应的显示数据可以是不同的。例如，在远程会议场景中，预设姿态数据为以水平方向向上偏移30度时，对应的显示数据可以是不显示该资料数据，在远程协助场景中，预设姿态数据为以水平方向向上偏移30度时，对应的显示数据则可以是显示该资料数据。
表1
预设姿态数据 显示数据
以水平方向向上偏移60度 不显示
以水平方向向下偏移75度 显示
向左偏30度 放大
步骤S250：根据显示数据生成第一虚拟画面并显示。
虚拟画面可以是由终端设备在获取到的其他终端设备的数据信息时，结合自己的位置及姿态信息进行渲染生成，其他终端设备的数据信息可以包括其他终端设备分享的文档、图片、视频、人物图像、用户标识等，在此不做限定。
在一些实施方式中，在获取到显示数据后，终端设备可以基于该显示数据渲染生成对应第一虚拟画面，并显示在终端设备。
在一些实施方式中，若检测到的姿态数据不满足预设姿态数据，则终端设备可以显示第二虚拟画面，其中，第二虚拟画面可以是不包括该资料数据的其他虚拟画面，例如可以是虚拟聊天窗口，也可以是包括其他设备对应的用户的3D虚拟人物。例如，请参阅图6，终端设备100向右转动时，即终端设备的姿态数据为向右转，且预设姿态数据为向上抬，该姿态数据不满足预设姿态数据，于是终端设备可以显示包括虚拟用户P3的3D虚拟人物。再例如，终端设备以水平方向向上偏移45度时，即终端设备的姿态数据为以水平方向向上偏移45度，且预设姿态数据为以水平方向向上偏移45度，该终端设备的姿态数据满足预设姿态数据，则终端设备可以显示包括如图7所示的资料数据的虚拟画面600。
在一些实施方式中，在步骤S250之后还可以执行步骤S260-步骤S270，其中：
步骤S260：接收针对第一虚拟画面的批注数据。
在一些实施方式中，终端设备在接收到资料数据后，终端设备还可以接收由终端设备对应的用户针对该第一虚拟画面的批注数据，其中，批注数据可以是用户通过触控板、控制器等打字输入，也可以是利用特制的笔进行输入，还可以通过手势输入等。进一步地，该批注数据可以设置成仅该终端设备对应的用户自己可见，也可以在分享该批注数据对应的资料数据时同时分享给其他终端设备。
步骤S270：将第一虚拟画面和批注数据进行关联，并将批注数据与资料数据对应存储。
在一些实施方式中，终端设备可以将第一虚拟画面和批注数据进行关联，其中，可以通过将第一虚拟画面和批注数据存储在同一服务器下进行关联，也可以是将第一虚拟画面和批注数据标记同样的标识信息从而进行关联，进而可以将批注数据与资料数据对应存储，以方便用户在会话结束后可以再次查阅。
在一些实施方式中，该实施例还可以包括以下步骤：
步骤S310：接收其他设备发送的指令信息，指令信息包括其他设备显示的第三虚拟画面。
在一些实施方式中，终端设备可以接收其他设备发送的指令信息，其中，该指令信息可以用于指示终端设备显示该其他设备当前显示的第三虚拟画面，进一步地，该指令信息可以同时携带该其他设备显示的第三虚拟画面。第三虚拟画面包括其他设备选择的资料数据。在一些实施方式中，当有多个其他设备时，可以基于该多个其他设备的身份等级高低来确定显示的第三虚拟画面，具体地，可以选择身份等级最高的其他设备，并显示该设备发送的第三虚拟画面。
步骤S320：响应指令信息，查询终端设备的被控制权限。
在一些实施方式中，终端设备可以响应该指令信息，并查询终端设备的被控制权限，其中，被控制权限可以用于表示该终端设备有权限确定是否要响应其他设备的指令信息显示第三虚拟画面。例如，当终端设备接收到其他设备发送的指令信息指示其显示第三虚拟画面，则终端设备可以基于自己的被控制权限确定是否要显示响应该其他设备发送的指令信息，例如，当终端设备接收到其他设备发送的指令信息指示其显示第三虚拟画面，且终端设备基于自己的被控制权限确定可以响应该其他设备发送的指令信息，则终端设备可以基于指令信息显示对应的第三虚拟画面。作为另一种方式，该被控制权限也可以是部分权限，即该终端设备可以选择允许其他设备控制其显示某一部分的虚拟画面或控制其显示虚拟画面的时间，例如，该终端设备的被控制权限可以为仅允许其他设备控制其显示文档对应的虚拟画面，或者是该终端设备允许其他设备控制其显示虚拟画面的时间为一小时。
步骤S330：当被控制权限满足预设控制条件时，直接显示第三虚拟画面。
在一些实施方式中，若终端设备的被控制权限满足预设控制条件时，可以直接显示该第三虚拟画面。其中，预设控制条件可以是终端设备允许所有设备控制其显示对应的虚拟画面，也可以是终端设备允许指定的其他设备控制其显示对应的虚拟画面。例如，当终端设备接收到其他设备B1发送的指令信息指示其显示第三虚拟画面时，终端设备可以查询其被控制权限，若终端设备的被控制权限表示允许其他设备B1控制其显示对应的虚拟画面，即满足预设控制条件，终端设备则可以直接显示指令信息中包括的第三虚拟画面。
本申请另一实施例提供的虚拟内容的显示方法，终端设备接收远程会话中的其他设备分享的资料数据，当该资料数据处于开启状态时，检测终端设备的姿态数据，判断该姿态数据是否满足预设姿态数据，当该姿态数据满足预设姿态数据时，获取该姿态数据对应的显示数据，根据显示数据生成第一虚拟画面并显示。通过用户对接收到的资料数据进行批注，以方便用户的后续查验。
请参阅图8，图8示出了本申请又一实施例提供的虚拟内容的显示方法的流程示意图。其中，资料数据可以包括协助方案，远程会话可以包括远程协助，下面针对图8所示的实施例进行详细的阐述，方法具体可以包括以下步骤：
步骤S410：采集远程协助中的目标设备的设备图像。
在一些实施方式中，远程会话场景可以包括远程协助场景，终端设备可以采集远程协助中的目标设备的设备图像，终端设备可以采集该目标设备不同的视图的图像，以便能够获取到该目标设备全方位的图像信息。该目标设备可以是远程协助中需要进行协助的设备，例如，可以是出现故障的设备，则终端设备可以采集该目标设备的整体图像以及出现故障位置的放大图像，也可以是需要进行安装或操作的设备等，在此不作限定。
在一些实施方式中，终端设备在采集到设备图像后，还可以识别该设备图像，从而获取到该目标设备的标识信息，其中，标识信息是用于标识该目标设备，例如设备型号等。在一些实施方式中，终端设备可以根据该目标设备的标识信息获取到该目标设备的介绍信息，可以理解的是，目标设备的标识信息与目标设备的介绍信息是对应存储的，可以是存储在远程协助的系统中，也可以存储在服务器上，目标设备的介绍信息可以包括设备的厂家信息、设备的使用历史等与设备相关的资料信息。
步骤S420：将设备图像发送至其他设备，设备图像用于指示其他设备显示与设备图像对应的第四虚拟画面。
在一些实施方式中，终端设备可以将设备图像发送至其他设备，终端设备可以将包含有多个视图的设备图像发送给其他设备，由其他设备基于该设备图像进行建模，并渲染生成与该设备图像对应的第四虚拟画面，其中，该其他设备可指的是远程协助中相对终端设备而言的远程设备，远程设备对应的用户可以是专业人员、指导人员或专家等。例如，如图9所示的包括设备图像710的虚拟画面700。终端设备也可以是将设备图像进行建模得到建模数据后，将该建模数据发送至其他设备，再有其他设备基于该建模数据渲染生成第四虚拟画面。
在一些实施方式中，终端设备可以通过识别目标设备的设备图像得到目标设备的标识信息，并基于标识信息获取到该目标设备的介绍信息后，终端设备可以将设备图像及设备的介绍信息一并发送至其他设备，以使其他设备可以根据目标设备的介绍信息能够更全面的了解该目标设备，例如，若该目标设备是出现故障的设备，其他设备在查看由终端设备发送的设备图像后，还可以根据查看目标设备介绍信息中的设备历史使用信息，进一步了解该目标设备的使用情况，以更准确的确定该目标设备出现故障的原因。
在一些实施方式中，其他设备接收到的目标设备的介绍信息可以是以文字、图片、列表等方式呈现在此不做限定，进一步地，其他设备在基于设备图像渲染生成第四虚拟画面的同时，也可以对介绍信息进行建模，与设备图像一同生成第四虚拟画面进行显示，其中，例如图10所示的虚拟画面800，介绍信息可以是图中的文档1、文档2和/或文档3，即介绍信息可以显示在设备图像810的下端或周围，方便进行查阅。
在一些实施方式中，为了能够记录本次协助场景的内容且降低终端设备的功耗，终端设备还可以将设备图像发送至服务器，服务器通过识别该设备图像得到该目标设备的标识信息，服务器可以根据该目标设备的标识信息获取与该目标设备关联的资料信息，其中，资料信息可以是包括设备的厂家信息、设备的使用历史等与设备相关的资料信息，服务器可以将获取到的资料信息与设备图像一同发送至其他设备，由其他设备根据设备图像和资料信息生成并显示第四虚拟画面。进一步地，为了降低其他设备的功耗，服务器还可以根据设备图像和资料信息生成第四虚拟画面，在将第四虚拟画面发送至其他设备处，由其他设备显示第四虚拟画面。服务器还可以接收由其他设备反馈的协助方案，并将该协助方案发送至终端设备。在远程协助中的包括设备图像、资料信息、协助方案等信息在经由服务器处理后，都可以存储在服务器中，以方便后续的查验。
步骤S430：接收其他设备分享的协助方案，协助方案为其他设备基于第四虚拟画面获取。
在本实施例中，其他设备对应的用户通过查看与设备图像对应的第四虚拟画面，可以基于虚拟画面呈现出的信息给出相应的协助方案，并可以将该协助方案分享至终端设备，以使终端设备基于该协助方案对目标设备进行操作。例如，若该设备为出现故障的目标设备，则其他设备对应的专家可以通过查看该故障设备对应的虚拟画面，给出相应的设备故障解决方案，再将该设备故障解决方案发送给终端设备，从而指导终端设备对应的用户对该出现故障的设备进行修复。进一步地，协助方案可以以文档、音频、视频等方式呈现。例如，其他设备可以基于待维修设备图像对应的第四虚拟画面拍摄或查找与该待维修设备图像对应的解决方案的视频，从而可以根据视频更清楚该协助方案，从而对待维修设备进行修复。进而，该协助方案还可以包括其他设备对应的用户的联系方式，从而使终端设备对应的用户可以在有疑问时联系到该协助方案的相关人员。
在一些实施方式中，其他设备分享的协助方案，还可以包括该其他设备对应的用户对设备的资料信息的批注，从而方便终端设备对应的用户能够更好的了解该协助方案。
在一些实施方式中，其他设备也可以将相应的协助方案反馈至服务器，再由服务器将该协助方案发送给终端设备，从而可以方便后续的查验。
步骤S440：当协助方案处于开启状态时，检测终端设备的姿态数据。
步骤S450：基于姿态数据，控制协助方案在终端设备的显示。
其中，步骤S440-步骤S450的具体描述请参阅步骤S120-步骤S130，在此不再赘述。
本申请又一实施例提供的虚拟内容的显示方法，采集远程协助中的目标设备的设备图像，将该设备图像发送至其他设备，该设备图像用于指示其他设备显示与该设备图像对应的第四虚拟画面，接收其他设备分享的协助方案，协助方案为其他设备基于第四虚拟画面获取，当该协助方案处于开启状态时，检测终端设备的姿态数据，基于姿态数据，控制协助方案在终端设备显示。本实施例通过在远程协助场景将设备图像发送给其他设备，并接收其他设备基于该设备图像返回的协助方案，从而以方便快捷的方式显示协助方案，以协助终端设备对该目标设备进行处理。
请参阅图11，图11示出了本申请实施例提供的虚拟内容的显示装置900的模块框图。下面将针对图11所示的框图进行阐述，虚拟内容的显示装置900包括：数据接收模块910、数据检测模块920以及显示控制模块930，其中：
数据接收模块910，用于接收远程会话中的其他设备分享的资料数据。
在一些实施例中，数据接收模块910可以包括：协助方案接收子模块，其中：
协助方案接收子模块，用于接收其他设备分享的协助方案，该协助方案为其他设备基于第四虚拟画面获取。
在一些实施例中，数据接收模块910还可以包括：方案接收子模块，其中：
方案接收子模块，用于接收服务器发送的协助方案，该协助方案为其他设备基于第四虚拟画面中包含的设备图像和资料信息获取，并反馈至服务器。
数据检测模块920，用于当资料数据处于开启状态时，检测终端设备的姿态数据。
显示控制模块930，用于基于姿态数据，控制资料数据在终端设备的显示。
在一些实施例中，显示控制模块930可以包括：判断子模块、显示数据获取子模块、第一虚拟画面显示子模块、第二虚拟画面显示子模块、批注数据接收子模块、关联子模块、指令信息接收子模块、查询子模块以及第三虚拟画面显示子模块，其中：
判断子模块，用于判断姿态数据是否满足预设姿态数据。
显示数据获取子模块，用于当姿态数据满足预设姿态数据时，获取资料数据对应的显示数据。
第一虚拟画面显示子模块，用于根据显示数据生成第一虚拟画面并显示。
第二虚拟画面显示子模块，用于当姿态数据不满足预设姿态数据时，显示第二虚拟画面，该第二虚拟画面包括其他设备对应的虚拟内容。
批注数据接收子模块，用于接收针对第一虚拟画面的批注数据。
关联子模块，用于将第一虚拟画面和批注数据进行关联，并将批注数据与资料数据对应存储。
指令信息接收子模块，用于接收其他设备发送的指令信息，指令信息包括其他设备显示的第三虚拟画面。
查询子模块，用于响应指令信息，查询终端设备的被控制权限。
第三虚拟画面显示子模块，用于当被控制权限满足预设控制条件时，直接显示第三虚拟画面。
在一些实施方式中，资料数据包括协助方案，远程会话包括远程协助，该虚拟内容的显示装置900还可以包括：设备图像采集模块以及设备图像发送模块，其中：
设备图像采集模块，用于采集远程协助中的目标设备的设备图像。
设备图像发送模块，用于将设备图像发送至其他设备，设备图像用于指示其他设备显示与设备图像对应的第四虚拟画面。
在一些实施方式中，该虚拟内容的显示装置900还可以包括：标识信息获取模块、介绍信息获取模块以及发送模块，其中：
标识信息获取模块，用于识别设备图像，获取目标设备的标识信息，标识信息用于标识目标设备。
介绍信息获取模块，用于基于标识信息获取目标设备的介绍信息。
发送模块，用于将设备图像和介绍信息发送至其他设备。
在一些实施方式中，该虚拟内容的显示装置900还可以包括图像发送模块，其中：
图像发送模块，用于将设备图像发送至服务器，设备图像用于指示服务器识别设备图像得到设备的标识信息，基于标识信息获取与设备关联的资料信息，并根据设备图像和资料信息生成第四虚拟画面，再将第四虚拟画面发送至其他设备，第四虚拟画面用于在其他设备中进行显示。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，模块相互之间的耦合可以是电性，机械或其它形式的耦合。
另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
请参考图12，其示出了本申请实施例提供的一种电子设备的结构框图，终端设备100可以包括一个或多个如下部件：处理器110、存储器120以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。
处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个终端设备100内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行终端设备100的各种功能和处理数据。可选地，处理器110可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器110中，单独通过一块通信芯片进行实现。
存储器120可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端设备100在使用中所创建的数据等。
在一个实施例中，电子设备为头戴显示装置，除了包括上述的处理器及存储器外，还可包括如下一个或多个部件：图像传感器130、显示模组、光学模组、通信模块以及电源。
在本申请实施例中，图像传感器130用于采集现实物体的图像以及采集目标场景的场景图像。图像传感器130可以为红外相机，也可以是可见光相机，具体类型在本申请实施例中并不作为限定。
显示模组可包括显示控制单元。显示控制单元用于接收处理器渲染后的虚拟内容的显示图像，然后将该显示图像显示并投射至光学模组上，使用户能够通过光学模组观看到虚拟内容。其中，显示装置可以是显示屏或投射装置等，可用于显示图像。
光学模组可采用离轴光学系统或波导光学系统，显示装置显示的显示图像经光学模组后，能够被投射至用户的眼睛。用户在通过光学模组看到显示装置投射的显示图像的同时。在一些实施方式中，用户还能够透过光学模组观察到现实环境，感受虚拟内容与现实环境叠加后的增强现实效果。
通信模块可以是蓝牙、WiFi(Wireless-Fidelity，无线保真)、ZigBee(紫峰技术)等模块，头戴显示装置可通过通信模块与电子设备建立通信连接。与电子设备通信连接的头戴显示装置，可以与电子设备进行信息以及指令的交互。例如，头戴显示装置可以通过通信模块接收电子设备的发送的图像数据，根据所接收的图像数据生成虚拟世界的虚拟内容进行显示。
电源可为整个头戴显示装置进行供电，保证头戴显示装置各个部件的正常运行。
请参考图13，其示出了本申请实施例提供的一种服务器的结构框图。该服务器200可以为云服务器、本地服务器等，服务器200可以包括一个或多个如下部件：处理器210、存储器220以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器220中并被配置为由一个或多个处理器210执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。
请参考图14，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读存储介质1000可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质1000包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质1000具有执行上述方法中的任何方法步骤的程序代码1010的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码1010可以例如以适当形式进行压缩。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (11)

1.一种虚拟内容的显示方法，其特征在于，应用于终端设备，所述方法包括：
接收远程会话中其他设备分享的资料数据；
当所述资料数据处于开启状态时，检测所述终端设备的姿态数据；
基于所述姿态数据，控制所述资料数据在所述终端设备的显示。
2.根据权利要求1所述的方法，其特征在于，所述基于所述姿态数据，控制所述资料数据在所述终端设备的显示，包括：
判断所述姿态数据是否满足预设姿态数据；
当所述姿态数据满足所述预设姿态数据时，获取所述资料数据对应的显示数据；
根据所述显示数据生成第一虚拟画面并显示。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
当所述姿态数据不满足所述预设姿态数据时，显示第二虚拟画面，所述第二虚拟画面包括所述远程会话中其他设备对应的虚拟内容。
4.根据权利要求2所述的方法，其特征在于，在所述根据所述显示数据生成第一虚拟画面并显示之后，所述方法还包括：
接收针对所述第一虚拟画面的批注数据；
将所述第一虚拟画面和所述批注数据进行关联，并将所述批注数据与所述资料数据对应存储。
5.根据权利要求2所述的方法，其特征在于，所述方法还包括：
接收所述其他设备发送的指令信息，所述指令信息包括所述其他设备显示的第三虚拟画面，所述第三虚拟画面包括所述其他设备选择的资料数据；
响应所述指令信息，查询所述终端设备的被控制权限；
当所述被控制权限满足预设控制条件时，直接显示所述第三虚拟画面。
6.根据权利要求1-5任一项所述的方法，其特征在于，所述资料数据包括协助方案，所述远程会话包括远程协助，所述接收远程会话中其他设备分享的资料数据之前，所述方法还包括：
采集远程协助中的目标设备的设备图像；
将所述设备图像发送至所述远程协助中的其他设备，所述设备图像用于指示所述其他设备显示与所述设备图像对应的第四虚拟画面；
所述接收远程会话中其他设备分享的资料数据，包括：
接收所述其他设备分享的协助方案，所述协助方案为所述其他设备基于所述第四虚拟画面获取。
7.根据权利要求6所述的方法，其特征在于，所述采集所述远程协助中的目标设备的设备图像之后，所述方法还包括：
识别所述设备图像，获取所述目标设备的标识信息，所述标识信息用于标识所述目标设备；
基于所述标识信息获取所述目标设备的介绍信息；
所述将所述设备图像发送至所述其他设备，包括：
将所述设备图像和所述介绍信息发送至所述其他设备。
8.根据权利要求6所述的方法，其特征在于，所述将所述设备图像发送至所述其他设备，包括：
将所述设备图像发送至服务器，所述设备图像用于指示所述服务器识别所述设备图像得到所述目标设备的标识信息，基于所述标识信息获取与所述目标设备关联的资料信息，并根据所述设备图像和资料信息生成第四虚拟画面，再将所述第四虚拟画面发送至所述其他设备，所述第四虚拟画面用于在所述其他设备中进行显示；
所述接收所述其他设备分享的协助方案，所述协助方案为所述其他设备基于所述第四虚拟画面获取，包括：
接收所述服务器发送的所述协助方案，所述协助方案为所述其他设备基于所述第四虚拟画面中包含的所述设备图像和资料信息获取，并反馈至所述服务器。
9.一种虚拟内容的显示装置，其特征在于，应用于终端设备，所述装置包括：
数据接收模块，用于接收远程会话中的其他设备分享的资料数据；
数据检测模块，用于当所述资料数据处于开启状态时，检测所述终端设备的姿态数据；
显示控制模块，用于基于所述姿态数据，控制所述资料数据在所述终端设备的显示。
10.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行如权利要求1-8任一项所述的方法。
11.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-8任一项所述的方法。
CN201910580053.8A 2019-06-28 2019-06-28 虚拟内容的显示方法、装置、电子设备及存储介质 Pending CN110427502A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910580053.8A CN110427502A (zh) 2019-06-28 2019-06-28 虚拟内容的显示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910580053.8A CN110427502A (zh) 2019-06-28 2019-06-28 虚拟内容的显示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN110427502A true CN110427502A (zh) 2019-11-08

Family

ID=68408902

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910580053.8A Pending CN110427502A (zh) 2019-06-28 2019-06-28 虚拟内容的显示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN110427502A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111147586A (zh) * 2019-12-27 2020-05-12 腾讯科技（深圳）有限公司 设备端控制方法、装置和会议系统
CN112216376A (zh) * 2020-09-29 2021-01-12 上海联影医疗科技股份有限公司 远程引导系统、方法、计算机设备以及可读存储介质
CN114339134A (zh) * 2022-03-15 2022-04-12 中瑞云软件(深圳)有限公司 基于互联网和vr技术的远程在线会议系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102904926A (zh) * 2012-08-31 2013-01-30 苏州佳世达光电有限公司 档案共享与编辑方法及其系统
CN103472993A (zh) * 2013-09-02 2013-12-25 小米科技有限责任公司 旋转显示方法、装置及终端设备
CN104731545A (zh) * 2015-03-30 2015-06-24 北京奇艺世纪科技有限公司 一种多媒体文件多终端协同显示方法、装置及系统
CN106484146A (zh) * 2016-10-18 2017-03-08 传线网络科技（上海）有限公司 终端控制设备、终端控制方法及装置
CN107437344A (zh) * 2016-10-21 2017-12-05 许昌学院 一种多媒体教学互动信息平台
CN108063825A (zh) * 2017-12-26 2018-05-22 三星电子（中国）研发中心 一种远程协助方法
JP6409092B2 (ja) * 2017-05-01 2018-10-17 Kddi株式会社 端末装置、端末間通信方法、および端末装置用プログラム
CN108810447A (zh) * 2018-06-11 2018-11-13 广州中盈电信科技有限公司 一种视讯会议系统
CN108874345A (zh) * 2018-06-20 2018-11-23 广州华欣电子科技有限公司 一种多设备间内容共享的方法、装置及系统
CN109716733A (zh) * 2016-09-28 2019-05-03 标致雪铁龙汽车股份有限公司 用于机动车辆的媒体内容的共享系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102904926A (zh) * 2012-08-31 2013-01-30 苏州佳世达光电有限公司 档案共享与编辑方法及其系统
CN103472993A (zh) * 2013-09-02 2013-12-25 小米科技有限责任公司 旋转显示方法、装置及终端设备
CN104731545A (zh) * 2015-03-30 2015-06-24 北京奇艺世纪科技有限公司 一种多媒体文件多终端协同显示方法、装置及系统
CN109716733A (zh) * 2016-09-28 2019-05-03 标致雪铁龙汽车股份有限公司 用于机动车辆的媒体内容的共享系统
CN106484146A (zh) * 2016-10-18 2017-03-08 传线网络科技（上海）有限公司 终端控制设备、终端控制方法及装置
CN107437344A (zh) * 2016-10-21 2017-12-05 许昌学院 一种多媒体教学互动信息平台
JP6409092B2 (ja) * 2017-05-01 2018-10-17 Kddi株式会社 端末装置、端末間通信方法、および端末装置用プログラム
CN108063825A (zh) * 2017-12-26 2018-05-22 三星电子（中国）研发中心 一种远程协助方法
CN108810447A (zh) * 2018-06-11 2018-11-13 广州中盈电信科技有限公司 一种视讯会议系统
CN108874345A (zh) * 2018-06-20 2018-11-23 广州华欣电子科技有限公司 一种多设备间内容共享的方法、装置及系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111147586A (zh) * 2019-12-27 2020-05-12 腾讯科技（深圳）有限公司 设备端控制方法、装置和会议系统
CN112216376A (zh) * 2020-09-29 2021-01-12 上海联影医疗科技股份有限公司 远程引导系统、方法、计算机设备以及可读存储介质
CN114339134A (zh) * 2022-03-15 2022-04-12 中瑞云软件(深圳)有限公司 基于互联网和vr技术的远程在线会议系统

Similar Documents

Publication Publication Date Title
US10684467B2 (en) Image processing for head mounted display devices
US20180324229A1 (en) Systems and methods for providing expert assistance from a remote expert to a user operating an augmented reality device
US10013805B2 (en) Control of enhanced communication between remote participants using augmented and virtual reality
CN105050671B (zh) 等待时间敏感的游戏特征的客户端渲染系统和方法
CN110413108B (zh) 虚拟画面的处理方法、装置、系统、电子设备及存储介质
CN110418095B (zh) 虚拟场景的处理方法、装置、电子设备及存储介质
KR102285102B1 (ko) 생체 인식 신원, 피드백 및 사용자 상호 작용 상태의 관련 디스플레이
CN110427502A (zh) 虚拟内容的显示方法、装置、电子设备及存储介质
EP4057109A1 (en) Data processing method and apparatus, electronic device and storage medium
JP6462059B1 (ja) 情報処理方法、情報処理プログラム、情報処理システム、および情報処理装置
CN110401810B (zh) 虚拟画面的处理方法、装置、系统、电子设备及存储介质
CN107003739A (zh) 对接系统
KR20160139633A (ko) 증강현실을 이용한 체험형 콘텐츠 제공 시스템 및 방법
US20200137815A1 (en) Communication connection method, terminal device and wireless communication system
CN110442245A (zh) 基于物理键盘的显示方法、装置、终端设备及存储介质
CN104469287A (zh) 一种用于远程vtm的虚拟坐席系统及其实现方法
US11979684B2 (en) Content distribution device, content distribution program, content distribution method, content display device, content display program, and content display method
CN106652590A (zh) 教学方法、教学识别体及教学系统
CN109427219B (zh) 基于增强现实教育场景转换模型的防灾学习方法和装置
CN110427227A (zh) 虚拟场景的生成方法、装置、电子设备及存储介质
US20220291752A1 (en) Distributed Application Platform Projected on a Secondary Display for Entertainment, Gaming and Learning with Intelligent Gesture Interactions and Complex Input Composition for Control
CN113066189B (zh) 一种增强现实设备及虚实物体遮挡显示方法
KR101651777B1 (ko) 사물인터넷 기반의 카메라 입력방식을 적용한 증강현실 3d 콘텐츠 디스플레이 모니터링 기능을 갖는 3d 프린팅 시스템 및 이를 이용한 3d 콘텐츠 제작방법
CN110413109A (zh) 虚拟内容的生成方法、装置、系统、电子设备及存储介质
CN116363245A (zh) 虚拟人脸生成方法、虚拟人脸直播方法以及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191108

RJ01 Rejection of invention patent application after publication