CN114938430B - 全真场景下的画面显示方法、装置、电子设备和可读存储介质 - Google Patents

全真场景下的画面显示方法、装置、电子设备和可读存储介质 Download PDF

Info

Publication number
CN114938430B
CN114938430B CN202210608665.5A CN202210608665A CN114938430B CN 114938430 B CN114938430 B CN 114938430B CN 202210608665 A CN202210608665 A CN 202210608665A CN 114938430 B CN114938430 B CN 114938430B
Authority
CN
China
Prior art keywords
terminal
camera
virtual
virtual object
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210608665.5A
Other languages
English (en)
Other versions
CN114938430A (zh
Inventor
卢彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xintang Sichuang Educational Technology Co Ltd
Original Assignee
Beijing Xintang Sichuang Educational Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xintang Sichuang Educational Technology Co Ltd filed Critical Beijing Xintang Sichuang Educational Technology Co Ltd
Priority to CN202210608665.5A priority Critical patent/CN114938430B/zh
Publication of CN114938430A publication Critical patent/CN114938430A/zh
Application granted granted Critical
Publication of CN114938430B publication Critical patent/CN114938430B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/665Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开涉及一种全真场景下的画面显示方法、装置、设备和介质。全真场景下的画面显示方法应用于第一终端,具体包括:接收第二终端广播的第一相机参数,其中,第一终端控制的虚拟对象和第二终端控制的虚拟对象处于同一全真场景;基于第一相机参数创建虚拟同步相机,并显示虚拟同步相机对全真场景进行拍摄得到的第一画面;接收第二终端广播的第二相机参数,并根据第二相机参数和第一相机参数,确定多个目标相机参数;基于多个目标相机参数中的每个目标相机参数更新虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对全真场景进行拍摄得到的第二画面,能够实现全真场景下的画面同步。

Description

全真场景下的画面显示方法、装置、电子设备和可读存储介质
技术领域
本公开涉及全真场景技术领域,尤其涉及一种全真场景下的画面显示方法、装置、设备和介质。
背景技术
目前,线上教学的方式在教育领域被广泛应用。随着全真场景的发展,基于全真场景进行线上教学的全真课堂因其模拟了真实的课堂环境,逐渐成为研究和应用的重点。在全真课堂中若学生需要观看老师的画面,多是通过录制老师的画面并生成视频,随后学生通过视频来观看老师的画面,该种方式成本高,时效性也比较差,降低了学生的上课体验。
发明内容
为了解决上述技术问题,本公开提供了一种全真场景下的画面显示方法、装置、设备和介质,能够实现全真场景下的画面同步。
根据本公开的一方面,提供了一种全真场景下的画面显示方法,应用于第一终端,所述方法包括:
接收第二终端广播的第一相机参数,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景;
基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数;
基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
根据本公开的另一方面,提供了一种全真场景下的画面显示方法,应用于第二终端,所述方法包括:
获取所述第二终端的虚拟主相机的第一相机参数,并将所述第一相机参数广播至第一终端,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
根据本公开的另一方面,提供了一种全真场景下的画面显示方法,应用于第二终端,所述方法包括:
响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息;
将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内;
获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端。
根据本公开的另一方面,提供了一种全真场景下的画面显示装置,应用于第一终端,所述装置包括:
第一接收单元,用于接收第二终端广播的第一相机参数,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景;
第一显示单元,用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
第二接收单元,用于接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数;
第二显示单元,用于基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
根据本公开的另一方面,提供了一种全真场景下的画面显示装置,应用于第二终端,所述装置包括:
第一广播单元,用于获取所述第二终端的虚拟主相机的第一相机参数,并将所述第一相机参数广播至第一终端,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
第二广播单元,用于将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
根据本公开的另一方面,提供了一种全真场景下的画面显示装置,应用于第二终端,所述装置包括:
生成单元,用于响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息;
发送单元,用于将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内;
获取单元,用于获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端。
根据本公开的另一方面,提供了一种电子设备,所述电子设备包括:处理器;以及存储程序的存储器,其中,所述程序包括指令,所述指令在由所述处理器执行时使所述处理器执行根据上述全真场景下的画面显示方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行根据全真场景下的画面显示方法。
根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现上述全真场景下的画面显示方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
接收第二终端广播的第一相机参数,其中,第一终端控制的虚拟对象和第二终端控制的虚拟对象处于同一全真场景;基于第一相机参数创建虚拟同步相机,并显示虚拟同步相机对全真场景进行拍摄得到的第一画面;接收第二终端广播的第二相机参数,并根据第二相机参数和第一相机参数,确定多个目标相机参数;基于多个目标相机参数中的每个目标相机参数更新虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对全真场景进行拍摄得到的第二画面,能够实现全真场景下的画面同步。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种全真场景下的画面显示方法流程图;
图2为本公开实施例提供的一种界面示意图;
图3为本公开实施例提供的一种虚拟相机的场景图;
图4为本公开实施例提供的另一种全真场景下的画面显示方法流程图;
图5为本公开实施例提供的另一种界面示意图;
图6为本公开实施例提供的另一种全真场景下的画面显示方法流程图;
图7为本公开实施例提供的另一种全真场景下的画面显示方法流程图;
图8为本公开实施例提供的一种全真场景下的画面显示装置的结构示意图;
图9为本公开实施例提供的另一种全真场景下的画面显示装置的结构示意图;
图10为本公开实施例提供的另一种全真场景下的画面显示装置的结构示意图;
图11为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
在对本公开实施例进行详细说明之前,首先对本公开中涉及到的相关名词进行解释说明。
1、全真环境/全真场景
全真场景是应用程序(如教育应用程序)的客户端在终端上运行时显示(或提供)的场景,该虚拟场景是指营造出的供虚拟对象进行活动(如教育学习)的环境,例如,可以是虚拟教室、虚拟教学场景等。该虚拟场景可以是对真实的世界进行仿真模拟的一种场景,或者,还可以是虚构的一种场景,还或者是半真实半虚构的一种场景。可理解的是,本公开提供的全真场景是三维的,可以理解为三维虚拟场景。
2、虚拟对象
虚拟对象是指终端在应用程序中控制的对象。以应用程序为教育应用程序为例,教育应用程序中显示的是教育的全真场景,例如可以是全真课堂,虚拟对象是指终端在教育应用程序中控制的学生和/或老师,虚拟对象可以是人物姿态的,虚拟对象是三维的,也可以理解为三维虚拟对象或者三维虚拟模型。
图1为本公开实施例提供的一种全真场景下的画面显示方法流程图,应用于第一终端,具体包括如图1所示的如下步骤S110至S140:
可理解的,本公开实施例的一种可行的应用场景如下:教育应用程序运行在终端上,终端显示全真课堂的画面,在全真课堂中,第一终端控制的虚拟对象为学生,第一终端可以理解为学生终端,第二终端控制的虚拟对象为老师,第二终端可以理解为教师终端/老师终端,其中,虚拟对象为三维虚拟模型,终端会显示全真课堂的画面。在全真课堂中,当学生想要观看老师的画面,或者老师需要将画面同步给学生时,可以基于本公开提供的方法将老师的画面平滑的同步给全真课堂中的学生,可以一次同步给多个学生,也可以同步给指定的学生,让老师和学生基于各自的终端观看到一样的画面,学生视角锁定观看老师的画面,增加了课堂的互动性,学生观看也比较灵活,同时也提高了上课体验。下述实施例以应用场景为全真课堂,第一终端为学生使用的终端,第二终端为老师使用的终端为例,对本公开提供的全真场景下的画面显示方法进行详细说明。
S110、接收第二终端广播的第一相机参数,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景。
可理解的,第一终端接收第二终端广播的第一相机参数,第一相机参数是指第二终端显示的全真场景中虚拟主相机的相机参数,相机参数包括虚拟主相机在全真场景中的物理位置、高度、旋转角度等信息,其中,物理位置是三维的。该虚拟主相机和第二终端控制的对象绑定,会实时拍摄第二终端控制的虚拟对象周围的场景,并显示该场景。可理解的是,全真场景中的每个虚拟对象都至少存在绑定的虚拟主相机,还可能存在用于同步画面的虚拟同步相机,终端显示的画面可以是虚拟主相机拍摄的,还可能是虚拟同步相机拍摄的。第一终端控制的虚拟对象和第二终端控制的虚拟对象处于同一全真场景,该全真场景可以是全真课堂,全真课堂是教育应用程序构建的,全真课堂还可能包括多个全真子课堂,例如教师1、教师2和教师3等。
S120、基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面。
可理解的,在上述S110的基础上,第一终端基于接收到的第一相机参数创建虚拟同步相机,在全真场景中,虚拟同步相机和第二终端显示的全真场景中虚拟主相机(下述称为“第二虚拟主相机”)处于同一位置,拍摄到的画面是相同的。虚拟同步相机创建完成后,虚拟同步相机会对全真场景进行拍摄得到第一画面,随后第一终端显示第一画面,对于第一终端来说,相当于第一终端的画面发生了“跳转”,由当前显示的某一画面跳转到了第一画面,此时,第二终端显示的画面和第一画面相同,也就是老师可以随时同步自己的画面给学生。第一终端显示第一画面后,会广播当前虚拟同步相机参数,以通知其他终端或者第三方业务,其处于画面跟随状态,第三方业务可以基于相机实例接入相机,进而控制相机。
S130、接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数。
可理解的,在上述S120的基础上,为实现画面同步,第二终端会实时向第一终端广播相机参数,也就是周期性的向第一终端广播第二虚拟主相机的参数,以保证老师和学生的画面同步显示,该相机参数记为第二相机参数。可理解的是,第一终端显示虚拟同步相机拍摄的画面后,会自动广播当前虚拟同步相机的状态以及相机实例,当第三方业务需要操作虚拟同步相机的时候,在虚拟同步相机创建好后会触发回调事件用于获取虚拟同步相机,并提供对外获取虚拟同步相机实例的方法用于第三方业务调用。其中,当前虚拟相机可能是虚拟同步相机,还可能是虚拟主相机,上述应用场景,第一终端处于画面锁定状态,第一终端的画面会自动跟随第二终端的画面,第一终端对控制的虚拟对象没有控制权限,也就是第一终端无需控制虚拟对象,虚拟对象会自动跟随第二终端控制的虚拟对象行动,在全真课堂中,可以理解为学生失去对视角的控制权限处于视角锁定状态,跟随老师视角进行知识的讲解。第一终端接收到广播的第二相机参数后,根据第二相机参数和第一相机参数进行差值计算,确定多个目标相机参数,多个目标相机参数中的最后一个目标相机参数为第二相机参数,具体的,可以利用DOTween做差值计算,其中,DOTween是一款针对游戏引擎(Unity)的快速高效、类型安全的面向对象的补间动画引擎,例如以相机参数的物理位置为例,第一相机参数中第二虚拟主相机的物理位置为(1,1,1),第二相机参数为移动后的第二虚拟主相机的物理位置为(5,5,5),基于物理位置(1,1,1)和(5,5,5)做差值计算,可以得到4个物理位置,也就是4个目标相机参数,4个目标相机参数中的最后一个目标相机参数为(5,5,5),第一个目标相机参数为(2,2,2),做差值计算的方式以及得到目标相机参数的数量不作限定,可根据用户需求自行确定,在此不作赘述。
S140、基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
可理解的,在上述S130的基础上,第一终端得到多个目标相机参数后,基于每个目标相机参数更新虚拟同步相机的参数,也就是将虚拟同步相机参数更新为多个目标相机参数中的第一个目标相机参数,并显示参数更新后的虚拟同步相机对全真场景进行拍摄得到的第二画面,也就是将每个目标相机参数设置为虚拟同步相机的参数后,都会显示该虚拟同步相机拍摄的第二画面,以此类推,直至显示了虚拟同步相机的参数设置为第二相机参数后的第二画面,以保证由第一相机参数平滑的过渡至第二相机参数,第一画面平滑的过渡至第二画面,提高了用户的观看体验。
示例性的,参见图2,图2为本公开实施例提供的一种界面示意图,图2包括第三画面210、第一画面220和第二画面230,第三画面210为第一终端显示的全真场景中虚拟主相机(下述称为“第一虚拟主相机”)所拍摄的画面,第一画面220为第一终端创建的虚拟同步相机(下述称为“虚拟同步相机”)所拍摄的画面,第三画面210是第一画面220的前一帧画面,第一画面220是基于第三画面210进行虚拟相机切换后显示的画面,第二画面230同样是虚拟同步相机所拍摄的画面,是在第一画面220的基础上显示的,也就是第一画面220是第二画面230的前一帧画面。具体的,第三画面210包括一个虚拟对象,第一画面220中包括3个虚拟对象221至223和课桌224,3个虚拟对象记为虚拟对象1、虚拟对象2和虚拟对象3,虚拟对象1记为221,虚拟对象2记为222,虚拟对象3记为223,其中,虚拟对象1为老师的三维虚拟对象,虚拟对象2和虚拟对象3为学生的三维虚拟对象,第三画面210包括的一个虚拟对象可以是第一画面220中的虚拟对象3,也就是说第一终端是控制虚拟对象3的终端。第二画面230同样包括3个虚拟对象221至223和课桌224,基于第一画面220和第二画面230可以看出,3个虚拟对象221至223在第一画面220的基础上,远离课桌224向前移动了一定距离,第二画面220是参数更新为最后一个目标相机参数的虚拟同步相机拍摄的画面,该种情况下,在显示第二画面230之前,还会显示多个第二画面,拍摄多个第二画面中第一个第二画面的虚拟同步相机的相机参数为多个目标相机参数中的第一个目标相机参数,以确保由第一画面220平滑过渡至第二画面230,后续还会由第二个第二画面过度至第三个第二画面,直至平滑过渡至第二画面230,拍摄第二个第二画面的虚拟同步相机的相机参数为多个目标相机参数中的第二个目标相机参数,直至显示第二画面230,拍摄第二画面230的虚拟同步相机的相机参数为多个目标相机参数中的最后一个目标相机参数,最后一个目标相机参数也就是第二相机参数。
可选的,上述基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面,具体通过如下步骤实现:
创建虚拟同步相机,并基于所述第一相机参数初始化所述虚拟同步相机的参数。
隐藏所述第一终端的第一虚拟主相机,显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面。
可理解的,第一终端接收到第二终端广播的第一相机参数后,创建虚拟同步相机,随后基于第一相机参数初始化虚拟同步相机的参数,也就是将虚拟同步相机的参数设置为第一相机参数。虚拟同步相机初始化后,第一终端隐藏第一虚拟主相机,也就是不显示第一虚拟主相机所拍摄的画面,显示虚拟同步相机对全真场景进行拍摄得到的第一画面,也就是上述示例中,隐藏拍摄第三画面210的第一虚拟主相机,显示虚拟同步相机拍摄的第一画面220,完成画面同步,第一终端进入画面锁定跟随状态。
示例性的,参见图3,图3为本公开实施例提供的一种虚拟相机的场景图,图3中场景300包括虚拟对象310、第一虚拟主相机320、虚拟对象330和第二虚拟主相机340,其中,虚拟对象310为学生的三维虚拟对象,虚拟对象330为老师的三维虚拟对象,第一虚拟主相机320在虚拟对象310的头顶上方拍摄,第一终端显示的画面为第一虚拟主相机320拍摄的虚拟对象310的头顶,第二虚拟主相机340在虚拟对象330的前方拍摄,第二终端显示的画面为第二虚拟主相机340拍摄的虚拟对象330的正面。场景301在场景300的基础上还包括虚拟同步相机350,虚拟同步相机350的位置和第二虚拟主相机340的位置相同,也就是虚拟同步相机350和第二虚拟主相机340重合了,所拍摄并显示的画面也相同,此时第一虚拟主相机320被隐藏了,也就是第一终端显示的是虚拟同步相机350所拍摄的画面,开始第一终端和第二终端的画面同步。
可选的,第一终端在接收第二终端广播的第一相机参数前,具体还包括如下实现步骤:
接收回调指令,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置。
根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内。
示例性的,第一终端在接收第二终端广播的第一相机参数之前,第一终端显示的是第三画面210,第一终端接收第三方业务或者第二终端发送的回调指令,一种可能的应用场景,在全真场景中,第一终端控制的虚拟对象和第二终端控制的虚拟对象不在同一预设范围内,例如,第一终端控制的虚拟对象在全真场景中的教室1中,第二终端控制的虚拟对象在全真场景中的教室3中,该种情况下,第一终端若需要同步第二终端的画面,或者第二终端需要第一终端进行画面同步,第二终端可以生成回调指令发送给第三方业务,第三方业务将第一终端控制的虚拟对象从教师1回调至教室3,确保第二终端控制的虚拟对象和第一终端控制的虚拟对象在同一预设范围内,预设范围可以是以第二终端控制的虚拟对象在全真场景中的第一位置为中心所设定的范围。具体的,第二终端生成的回调指令中包括第二终端控制的虚拟对象在全真场景中的第一位置,第一位置是三维的,第一终端接收到回调指令后可以生成确定回调的响应,并由第三方业务将第一终端控制的虚拟对象回调至第一位置的预设范围内,确保第二终端和第一终端更好的进行画面同步。
可选的,第一终端中的虚拟同步相机显示画面后,还包括如下实现步骤:
在满足预设条件的情况下,关闭所述虚拟同步相机的显示画面,并显示所述第一终端的虚拟主相机对所述全真场景进行拍摄得到的第三画面。
其中,预设条件包括接收到所述第二终端广播的关闭同步指令,和/或在预设时间内未接收到所述第二终端发送的相机参数。
可理解的,第一终端中的虚拟同步相机显示画面后,也就是第一终端进入画面锁定、跟随第二终端画面的状态后,若接收到第二终端发送的关闭同步指令,也就是第二终端主动解除画面同步,和/或在预设时间内没有接收到第二终端发送的相机参数,预设时间可以根据用户需求自行确定,在此不作限定,进入画面同步状态后,第二终端会周期性的向第一终端广播第二虚拟主相机的相机参数,广播可以理解为发送,例如第二终端每3秒(s)广播一次相机参数,预设时间为10s,若第一终端10s后还未接收到第二终端广播的相机参数,则可以自动取消画面同步状态,未接收到第二终端广播的相机参数有可能是网络通讯问题,还可能是第二终端退出了全真场景无法进行数据传输。第一终端取消画面同步状态的相关步骤包括:通知依赖的第三方业务关闭,依赖的第三方业务可能是画面自动跟随相关业务,关闭虚拟同步相机,显示第一虚拟主相机拍摄的画面,也就是第一终端恢复对虚拟对象的控制权限,解除画面自动跟随,同时标记第二终端的同步状态关闭,在第二终端下次登陆时不再自动同步视角,而是只有接收到第二终端重新广播的相机参数时才同步视角。还可以清除同步视角产生的内存实例,移除画面跟随过程中产生的事件实例,减少第一终端的内存消耗。第一终端完成上述操作后,关闭同步视角业务流程,等待下次进行同步视角。
本公开实施例提供的一种全真场景下的画面显示方法,应用于第一终端,教师终端将全真课堂中第二虚拟主相机的相机参数周期性的广播给待同步视角的学生终端,可以广播给多个学生终端,针对多个学生终端中的每个学生终端基于该相机参数构建并初始化虚拟同步相机,实现全真课堂下的画面同步,在画面同步的过程中,基于相邻两次获取的第一相机参数和第二相机参数进行差值计算,得到多个目标相机参数,将虚拟同步相机参数设置为每个目标相机参数,也就是从第一相机参数缓动至第二相机参数,随后每次完成参数设置的虚拟同步相机拍摄全真课堂并进行显示,以确保第一终端由当前显示的第一画面,显示多个第二画面后,平滑的显示第二终端的第二虚拟主相机显示的画面,实现画面平滑同步,学生观看体验比较好,同时还增加了全真课堂的互动性,提高了学生的上课体验,一定程度上也提高了学生上课的积极性和专注力,实施效果比较好。
图4为本公开实施例提供的另一种全真场景下的画面显示方法流程图,应用于第二终端,该第二终端可以是老师终端,也就是在全真课堂中,老师进行同步视角,具体包括如图4所示的如下步骤S410至S430:
S410、响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息。
可理解的,老师通过第二终端连接的输入设备,触发同步视角,输入设备可以是鼠标,老师可以利用鼠标点击第二终端显示的画面中包括的同步标识,触发同步视角,生成同步视角指令,同时,第二终端会实时监听同步视角的触发操作,监听的方式可以根据用户需求自行确定,在此不作限定。第二终端监听到同步视角的触发操作后,响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,初始化同步视角事件可以理解为生成同步视角事件,第二终端确定同步视角事件生成后,生成回调指令并将回调指令发送至所依赖的第三方业务,该第三方业务可以是具有回调功能的业务,可理解的是,本公开涉及到多种第三方业务,每种第三方业务都具有不同的功能,终端可以基于第三方业务对虚拟对象进行控制,第三方业务的具体应用方法在此不作赘述。回调指令包括待回调的第一终端的信息和第二终端控制的虚拟对象在全真场景中的第一位置,待回调的第一终端的信息可以是需要进行画面同步的第一终端的地址或者第一终端控制的虚拟对象的ID等信息,第三方业务收到回调指令后,若是第一终端控制的虚拟对象和第二终端控制的虚拟对象不在同一预设范围内,则将第一终端控制的虚拟对象回调,若是第一终端控制的虚拟对象和第二终端控制的虚拟对象在同一预设范围内,则第三方业务不需要回调,在第一终端控制的虚拟对象回调的过程中,第二终端等待第一终端控制的虚拟对象回调完成。
S420、将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内。
可理解的,在上述S410的基础上,第二终端还可以将回调指令直接发送至第一终端,通知第一终端基于第三方业务进行回调,或者通过第三业务直接进行回调,第一终端根据回调指令将其控制的虚拟对象回调至第一位置的预设范围内。
可理解的是,第二终端还可能会向多个第一终端发送回调指令,也就是多个第一终端会和第二终端进行画面同步,例如,全真课堂中,老师在教室1中要给3位学生上课并进行画面同步,画面同步可以理解为老师基于同样的画面为3位同学进行讲解,老师会向3位同学的终端分别发送回调指令,若3位同学都在教室1中,那么老师可以直接向3位同学广播第一相机参数,执行S430,若是3位同学中除同学1之外的同学2和同学3不在教室1中,该种情况下,老师向同学1广播第一相机参数,向同学2和同学3发送回调指令,待同学2和同学3回调至教室1后,再向同学1、同学2和同学3广播相机参数,也就是老师会同时向教室1内的同学广播相机参数,有中途回调至教室1的同学,也会等待和其他同学同时接收到老师广播的相机参数,也就是老师广播相机参数的周期是固定的,在周期内,教室1的同学都可以接收到老师周期性广播的相机参数。还比如,老师可以向特定的同学发送回调指令和广播相机参数,对于老师广播的其他应用场景在此不作限定,可根据用户需求自行确定。
示例性的,参见图5,图5为本公开实施例提供的另一种界面示意图,图5包括界面510,界面510为第二终端显示的界面,界面510包括全真场景下的虚拟对象511和同步标识512,虚拟对象511可以理解为老师的三维虚拟模型,老师基于第二终端连接的输入设备对同步标识512进行触发操作,具体可以通过鼠标点击同步标识512,点击同步标识512后,还可以选择待画面同步的至少一个第一终端,至少一个第一终端可以通过下拉列表的方式选择。
S430、获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端。
可理解的,在上述S420的基础上,第二终端获取当前进行画面显示的第二虚拟主相机的相机参数,并将相机参数周期性的广播至至少一个第一终端,至少一个第一终端中每个第一终端控制的虚拟对象和第二终端控制的虚拟对象处于同一全真场景下,该全真场景可以是教育应用程序构建的场景,该全真场景下可能包括多个全真子场景,例如教室14、教室2和教室3可以称为全真子场景。针对每个第一终端,会执行上述图1所示的全真场景下的画面显示方法,具体的画面同步的实现流程同上述S110至S140,在此不作赘述。
本公开实施例提供了一种全真场景下的画面显示方法,应用于第二终端,老师触发同步视角后,会通知第三方业务将待同步视角的第一终端控制的虚拟对象回调至第二终端控制的虚拟对象在全真场景中的第一位置的预设范围内,再通过向第一终端广播相机参数使得第一终端和第二终端进行画面同步,方法简单,便于实施,适用于教育场景,能够有效提高教学质量,还有利于提高学生上课的专注力和学习兴趣。
在上述实施例的基础上,图6为本公开实施例提供的另一种全真场景下的画面显示方法流程图,应用于第二终端,具体包括如图6所示的如下步骤S610至S620:
S610、获取所述第二终端的虚拟主相机的第一相机参数,并将所述第一相机参数广播至第一终端,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面。
S620、将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
可理解的,S610和S620的具体实现步骤参见上述实施例中涉及到实现步骤,在此不作赘述。
可选的,在第二终端获取虚拟主相机的第一相机参数之前,还包括如下步骤:
响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息。
将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内。
可理解的,具体实现步骤参见上述S410至S420,在此不作赘述。
本公开实施例提供的一种全真场景下的画面显示方法,应用于教师终端,教师终端开启同步视角后,周期性的自动将获取的第二虚拟主相机的相机参数广播至至少一个第一终端,其中,至少一个第一终端控制的虚拟对象和第二终端控制的虚拟对象处于同一全真场景,便于后续至少一个第一终端同步视角,和第二终端同步显示同一画面,操作简便,且便于实施。
在上述实施例的基础上,图7为本公开实施例提供的另一种全真场景下的画面显示方法流程图,具体包括如图7所示的如下步骤S710至S780:
S710、第二终端响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,回调指令包括第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息。
S720、第二终端依赖的第三方业务基于回调指令对待回调的第一终端控制的虚拟对象进行回调。
S730、第二终端确定第一终端控制的虚拟对象在第一位置的预设范围内后,向第一终端广播第一相机参数。
S740、第一终端接收到第一相机参数后,创建虚拟同步相机,并基于第一相机参数对虚拟同步相机进行初始化。
S750、第一终端显示虚拟同步相机对于全真场景进行拍摄得到的第一画面。
S760、第一终端接收第二终端周期性广播的第二相机参数,并基于第一相机参数和第二相机参数进行差值计算,确定多个目标相机参数。
S770、第一终端基于多个目标相机参数中的每个相机参数更新虚拟同步相机的参数,并显示相机参数更新后的虚拟同步相机对全真场景进行拍摄得到的第二画面。
S780、若第一终端在预设时间内未接收到第二终端广播的相机参数和/或,第一终端接收到第二终端广播的关闭同步指令,则取消画面同步。
可理解的,上述S710至S780的详细说明参见上述实施例,在此不作赘述。
在上述实施例的基础上,图8为本公开实施例提供的一种全真场景下的画面显示装置的结构示意图,本公开实施例提供的全真场景下的画面显示装置可以执行上述全真场景下的画面显示方法实施例提供的处理流程,如图8所示,全真场景下的画面显示装置800包括:
第一接收单元810,用于接收第二终端广播的第一相机参数,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景;
第一显示单元820,用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
第二接收单元830,用于接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数;
第二显示单元840,用于基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
可选的,第一显示单元820具体用于:
创建虚拟同步相机,并基于所述第一相机参数初始化所述虚拟同步相机的参数;
隐藏所述第一终端的虚拟主相机,显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面。
可选的,装置800还包括第三显示单元,第三显示单元具体用于:
接收回调指令,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置;
根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内。
可选的,装置800还包括同步关闭单元,同步关闭单元具体用于:
在满足预设条件的情况下,关闭所述虚拟同步相机的显示画面,并显示所述第一终端的虚拟主相机对所述全真场景进行拍摄得到的第三画面。
可选的,所述预设条件包括接收到所述第二终端广播的关闭同步指令,和/或在预设时间内未接收到所述第二终端发送的相机参数。
本实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
在上述实施例的基础上,图9为本公开实施例提供的一种全真场景下的画面显示装置的结构示意图,本公开实施例提供的全真场景下的画面显示装置可以执行上述全真场景下的画面显示方法实施例提供的处理流程,如图9所示,全真场景下的画面显示装置900包括:
生成单元910,用于响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真场景中的第一位置和待回调的第一终端的信息;
发送单元920,用于将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内;
获取单元930,用于获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端。
本实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
在上述实施例的基础上,图10为本公开实施例提供的一种全真场景下的画面显示装置的结构示意图,本公开实施例提供的全真场景下的画面显示装置可以执行上述全真场景下的画面显示方法实施例提供的处理流程,如图10所示,全真场景下的画面显示装置1000包括:
第一广播单元1001,用于获取所述第二终端的虚拟主相机的第一相机参数,并将所述第一相机参数广播至第一终端,其中,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真场景,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真场景进行拍摄得到的第一画面;
第二广播单元1002,用于将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真场景进行拍摄得到的第二画面。
本实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
本公开示例性实施例还提供一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器。所述存储器存储有能够被所述至少一个处理器执行的计算机程序,所述计算机程序在被所述至少一个处理器执行时用于使所述电子设备执行根据本公开实施例的方法。
本公开示例性实施例还提供一种计算机程序产品,包括计算机程序,其中,所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
参考图11,现将描述可以作为本公开的服务器或客户端的电子设备1100的结构框图,其是可以应用于本公开的各方面的硬件设备的示例。电子设备旨在表示各种形式的数字电子的计算机设备,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图11所示,电子设备1100包括计算单元1101,其可以根据存储在只读存储器(ROM)1102中的计算机程序或者从存储单元1108加载到随机访问存储器(RAM)1103中的计算机程序,来执行各种适当的动作和处理。在RAM 1103中,还可存储设备1100操作所需的各种程序和数据。计算单元1101、ROM 1102以及RAM 1103通过总线1104彼此相连。输入/输出(I/O)接口1105也连接至总线1104。
电子设备1100中的多个部件连接至I/O接口1105,包括:输入单元1106、输出单元1107、存储单元1108以及通信单元1109。输入单元1106可以是能向电子设备1100输入信息的任何类型的设备,输入单元1106可以接收输入的数字或字符信息,以及产生与电子设备的用户设置和/或功能控制有关的键信号输入。输出单元1107可以是能呈现信息的任何类型的设备,并且可以包括但不限于显示器、扬声器、视频/音频输出终端、振动器和/或打印机。存储单元1104可以包括但不限于磁盘、光盘。通信单元1109允许电子设备1100通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据,并且可以包括但不限于调制解调器、网卡、红外通信设备、无线通信收发机和/或芯片组,例如蓝牙TM设备、WiFi设备、WiMax设备、蜂窝通信设备和/或类似物。
计算单元1101可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元1101的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元1101执行上文所描述的各个方法和处理。例如,在一些实施例中,文本识别方法或识别网络的训练方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元1108。在一些实施例中,计算机程序的部分或者全部可以经由ROM 1102和/或通信单元1109而被载入和/或安装到电子设备1100上。在一些实施例中,计算单元1101可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行文本识别方法或识别网络的训练方法。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
如本公开使用的,术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如,磁盘、光盘、存储器、可编程逻辑装置(PLD)),包括,接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (13)

1.一种全真场景下的画面显示方法,其特征在于,应用于第一终端,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机,所述方法包括:
在所述第一终端控制的虚拟对象处于第一位置的预设范围内的情况下,接收第二终端广播的第一相机参数,其中,所述第一位置是指所述第二终端控制的虚拟对象在全真在线课堂场景中的位置,所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述第一相机参数为所述第二虚拟主相机的相机参数,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真在线课堂场景;在所述第一终端控制的虚拟对象处于所述第一位置的预设范围外的情况下,接收所述第二终端发送的回调指令,并根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内;
基于所述第一相机参数创建虚拟同步相机,并隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面;
接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数;
基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第二画面,其中,所述第一终端处于画面锁定状态,所述第一画面、所述第二画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一相机参数创建虚拟同步相机,并显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面,包括:
创建虚拟同步相机,并基于所述第一相机参数初始化所述虚拟同步相机的参数;
显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面。
3.根据权利要求1所述的方法,其特征在于,所述回调指令包括所述第二终端控制的虚拟对象在全真在线课堂场景中的第一位置。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在满足预设条件的情况下,关闭所述虚拟同步相机的显示画面,并显示所述第一终端的虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面。
5.根据权利要求4所述的方法,其特征在于,所述预设条件包括接收到所述第二终端广播的关闭同步指令,和/或在预设时间内未接收到所述第二终端发送的相机参数。
6.一种全真场景下的画面显示方法,其特征在于,应用于第二终端,所述方法包括:
获取所述第二终端的虚拟主相机的第一相机参数,并在第一终端控制的虚拟对象处于第一位置的预设范围内的情况下,将所述第一相机参数广播至所述第一终端,其中,所述第一位置是指所述第二终端控制的虚拟对象在全真在线课堂场景中的位置,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真在线课堂场景,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面;所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述第一相机参数为所述第二虚拟主相机的相机参数;在所述第一终端控制的虚拟对象处于所述第一位置的预设范围外的情况下,向所述第一终端发送回调指令,所述第一终端用于根据所述回调指令将其控制的虚拟对象回调至所述第一位置的预设范围内;
将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第二画面,其中,所述第一终端处于画面锁定状态,所述第一画面、所述第二画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真在线课堂场景中的第一位置和待回调的第一终端的信息;
将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内。
8.一种全真场景下的画面显示方法,其特征在于,应用于第二终端,所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述方法包括:
在第一终端控制的虚拟对象处于第一位置的预设范围外的情况下,响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括所述第二终端控制的虚拟对象在全真在线课堂场景中的第一位置和待回调的所述第一终端的信息;
将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机;
获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端,其中,所述相机参数包括第一相机参数和第二相机参数,所述第一相机参数用于使所述第一终端创建虚拟同步相机,所述第一终端用于隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面,其中,所述第一相机参数为所述第二虚拟主相机的相机参数,所述第二相机参数用于使所述第一终端更新所述虚拟同步相机的参数,以实现所述第一终端和所述第二终端画面同步,其中,其中,所述第一终端处于画面锁定状态,所述第一画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
9.一种全真场景下的画面显示装置,其特征在于,应用于第一终端,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机,所述装置包括:
第一接收单元,用于在所述第一终端控制的虚拟对象处于第一位置的预设范围内的情况下,接收第二终端广播的第一相机参数,其中,所述第一位置是指所述第二终端控制的虚拟对象在全真在线课堂场景中的位置,所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述第一相机参数为所述第二虚拟主相机的相机参数,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真在线课堂场景;在所述第一终端控制的虚拟对象处于所述第一位置的预设范围外的情况下,接收所述第二终端发送的回调指令,并根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内;
第一显示单元,用于基于所述第一相机参数创建虚拟同步相机,并隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面;
第二接收单元,用于接收所述第二终端广播的第二相机参数,并根据所述第二相机参数和所述第一相机参数,确定多个目标相机参数;
第二显示单元,用于基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第二画面,其中,所述第一终端处于画面锁定状态,所述第一画面、所述第二画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
10.一种全真场景下的画面显示装置,其特征在于,应用于第二终端,所述装置包括:
第一广播单元,用于获取所述第二终端的虚拟主相机的第一相机参数,并在第一终端控制的虚拟对象处于第一位置的预设范围内的情况下,将所述第一相机参数广播至第一终端,其中,所述第一位置是指所述第二终端控制的虚拟对象在全真在线课堂场景中的位置,所述第一终端控制的虚拟对象和所述第二终端控制的虚拟对象处于同一全真在线课堂场景,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机,所述第一终端用于基于所述第一相机参数创建虚拟同步相机,并隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面;所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述第一相机参数为所述第二虚拟主相机的相机参数;在所述第一终端控制的虚拟对象处于所述第一位置的预设范围外的情况下,向所述第一终端发送回调指令,所述第一终端用于根据所述回调指令将其控制的虚拟对象回调至所述第一位置的预设范围内;
第二广播单元,用于将获取的所述虚拟主相机的第二相机参数广播至所述第一终端,其中,所述第一终端用于根据所述第二相机参数和所述第一相机参数确定多个目标相机参数,基于所述多个目标相机参数中的每个目标相机参数更新所述虚拟同步相机的参数,并显示参数更新后的虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第二画面,其中,所述第一终端处于画面锁定状态,所述第一画面、所述第二画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
11.一种全真场景下的画面显示装置,其特征在于,应用于第二终端,所述第二终端控制的虚拟对象存在绑定的第二虚拟主相机,所述装置包括:
生成单元,用于在第一终端控制的虚拟对象处于第一位置的预设范围外的情况下,响应于同步视角的触发操作,初始化同步视角事件并生成回调指令,其中,所述回调指令包括第二终端控制的虚拟对象在全真在线课堂场景中的第一位置和待回调的所述第一终端的信息;
发送单元,用于将所述回调指令发送至所述第一终端,所述第一终端用于根据所述回调指令将所述第一终端控制的虚拟对象回调至所述第一位置的预设范围内,所述第一终端控制的虚拟对象至少存在绑定的第一虚拟主相机;
获取单元,用于获取所述第二终端的虚拟主相机的相机参数,并将所述相机参数广播至所述第一终端,其中,所述相机参数包括第一相机参数和第二相机参数,所述第一相机参数用于使所述第一终端创建虚拟同步相机,所述第一终端用于隐藏所述第一虚拟主相机对所述全真在线课堂场景进行拍摄得到的第三画面,显示所述虚拟同步相机对所述全真在线课堂场景进行拍摄得到的第一画面,其中,所述第一相机参数为所述第二虚拟主相机的相机参数,所述第二相机参数用于使所述第一终端更新所述虚拟同步相机的参数,以实现所述第一终端和所述第二终端画面同步,其中,所述第一终端处于画面锁定状态,所述第一画面同所述第二虚拟主相机拍摄的画面相同,所述第一终端控制的虚拟对象跟随所述第二终端控制的虚拟对象移动。
12.一种电子设备,其特征在于,所述电子设备包括:
处理器;以及
存储程序的存储器,
其中,所述程序包括指令,所述指令在由所述处理器执行时使所述处理器执行根据权利要求1至8任一所述的全真场景下的画面显示方法。
13.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,所述计算机指令用于使所述计算机执行根据权利要求1至8任一所述的全真场景下的画面显示方法。
CN202210608665.5A 2022-05-31 2022-05-31 全真场景下的画面显示方法、装置、电子设备和可读存储介质 Active CN114938430B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210608665.5A CN114938430B (zh) 2022-05-31 2022-05-31 全真场景下的画面显示方法、装置、电子设备和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210608665.5A CN114938430B (zh) 2022-05-31 2022-05-31 全真场景下的画面显示方法、装置、电子设备和可读存储介质

Publications (2)

Publication Number Publication Date
CN114938430A CN114938430A (zh) 2022-08-23
CN114938430B true CN114938430B (zh) 2024-04-16

Family

ID=82866974

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210608665.5A Active CN114938430B (zh) 2022-05-31 2022-05-31 全真场景下的画面显示方法、装置、电子设备和可读存储介质

Country Status (1)

Country Link
CN (1) CN114938430B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009145883A (ja) * 2007-11-20 2009-07-02 Rissho Univ 学習システム、記憶媒体及び学習方法
CN108765536A (zh) * 2018-05-30 2018-11-06 链家网(北京)科技有限公司 一种虚拟三维空间的同步处理方法及装置
CN111766950A (zh) * 2020-08-12 2020-10-13 腾讯科技(深圳)有限公司 虚拟角色交互方法、装置、计算机设备和存储介质
CN112121423A (zh) * 2020-09-24 2020-12-25 苏州幻塔网络科技有限公司 一种虚拟摄像机的控制方法及装置、设备
CN112363615A (zh) * 2020-10-27 2021-02-12 上海影创信息科技有限公司 多用户vr/ar交互系统、方法及计算机可读存储介质
CN113069767A (zh) * 2021-04-09 2021-07-06 腾讯科技(深圳)有限公司 虚拟互动方法、装置、终端和存储介质
CN113144608A (zh) * 2021-04-22 2021-07-23 网易(杭州)网络有限公司 消息发送方法、装置、设备及存储介质
CN113242277A (zh) * 2021-04-19 2021-08-10 华中师范大学 一种5g网络环境下虚拟同步课堂教学系统及其工作方法
CN113599816A (zh) * 2021-08-27 2021-11-05 腾讯科技(深圳)有限公司 画面显示方法、装置、终端及存储介质
CN113648654A (zh) * 2021-09-03 2021-11-16 网易(杭州)网络有限公司 游戏画面的处理方法、装置、设备、存储介质及程序产品
CN114210065A (zh) * 2021-12-02 2022-03-22 腾讯科技(深圳)有限公司 对象控制方法和装置、存储介质及电子设备

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009145883A (ja) * 2007-11-20 2009-07-02 Rissho Univ 学習システム、記憶媒体及び学習方法
CN108765536A (zh) * 2018-05-30 2018-11-06 链家网(北京)科技有限公司 一种虚拟三维空间的同步处理方法及装置
CN111766950A (zh) * 2020-08-12 2020-10-13 腾讯科技(深圳)有限公司 虚拟角色交互方法、装置、计算机设备和存储介质
CN112121423A (zh) * 2020-09-24 2020-12-25 苏州幻塔网络科技有限公司 一种虚拟摄像机的控制方法及装置、设备
CN112363615A (zh) * 2020-10-27 2021-02-12 上海影创信息科技有限公司 多用户vr/ar交互系统、方法及计算机可读存储介质
CN113069767A (zh) * 2021-04-09 2021-07-06 腾讯科技(深圳)有限公司 虚拟互动方法、装置、终端和存储介质
CN113242277A (zh) * 2021-04-19 2021-08-10 华中师范大学 一种5g网络环境下虚拟同步课堂教学系统及其工作方法
CN113144608A (zh) * 2021-04-22 2021-07-23 网易(杭州)网络有限公司 消息发送方法、装置、设备及存储介质
CN113599816A (zh) * 2021-08-27 2021-11-05 腾讯科技(深圳)有限公司 画面显示方法、装置、终端及存储介质
CN113648654A (zh) * 2021-09-03 2021-11-16 网易(杭州)网络有限公司 游戏画面的处理方法、装置、设备、存储介质及程序产品
CN114210065A (zh) * 2021-12-02 2022-03-22 腾讯科技(深圳)有限公司 对象控制方法和装置、存储介质及电子设备

Also Published As

Publication number Publication date
CN114938430A (zh) 2022-08-23

Similar Documents

Publication Publication Date Title
US11632576B2 (en) Live video broadcast method, live broadcast device and storage medium
WO2018000609A1 (zh) 一种虚拟现实系统中分享3d影像的方法和电子设备
CN108877848B (zh) 在虚拟三维空间讲房模式中应对用户操作的方法及装置
WO2019029087A1 (zh) 直播的批注方法及装置、终端及直播系统
WO2021204139A1 (zh) 视频显示方法、装置、设备和存储介质
CN108880983B (zh) 一种虚拟三维空间的语音实时处理方法及装置
US20170171509A1 (en) Method and electronic apparatus for realizing two-person simultaneous live video
CN113115110B (zh) 视频合成方法、装置、存储介质与电子设备
CN108776917B (zh) 一种虚拟三维空间的同步处理方法及装置
CN108765084B (zh) 一种虚拟三维空间的同步处理方法及装置
CN108076379B (zh) 多屏互动实现方法及装置
US20200349749A1 (en) Virtual reality equipment and method for controlling thereof
CN110007886A (zh) 传屏超时时间动态设置方法、装置、无线传屏器及接收端
WO2023098011A1 (zh) 视频播放方法及电子设备
KR20110006976A (ko) 전시관용 인터렉티브제어시스템
CN111107283B (zh) 一种信息显示方法、电子设备及存储介质
CN114938430B (zh) 全真场景下的画面显示方法、装置、电子设备和可读存储介质
CN110418180B (zh) 一种基于分组的投屏显示方法、系统及中控设备
CN113315885B (zh) 一种用于远程互动的全息演播室及系统
CN112118414B (zh) 视频会话方法、电子设备以及计算机存储介质
CN111935493B (zh) 主播相册处理方法及装置、存储介质、电子设备
CN114615556B (zh) 虚拟直播增强互动方法及装置、电子设备、存储介质
Lindeman Tell me about antarctica: Guidelines for in situ capture and viewing of 360-degree video highlighting antarctic science
CN115904159A (zh) 虚拟场景中的显示方法、装置、客户端设备及存储介质
TW202236845A (zh) 視頻顯示方法、裝置、設備和儲存媒體

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant