CN117671203A - 一种虚拟数字内容显示系统、方法与电子设备 - Google Patents
一种虚拟数字内容显示系统、方法与电子设备 Download PDFInfo
- Publication number
- CN117671203A CN117671203A CN202211052147.6A CN202211052147A CN117671203A CN 117671203 A CN117671203 A CN 117671203A CN 202211052147 A CN202211052147 A CN 202211052147A CN 117671203 A CN117671203 A CN 117671203A
- Authority
- CN
- China
- Prior art keywords
- virtual digital
- target virtual
- scene
- electronic device
- digital content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000004044 response Effects 0.000 claims description 69
- 230000001960 triggered effect Effects 0.000 claims description 45
- 238000004590 computer program Methods 0.000 claims description 16
- 235000002245 Penicillium camembertii Nutrition 0.000 description 24
- 238000004891 communication Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 23
- 238000013461 design Methods 0.000 description 22
- 239000010410 layer Substances 0.000 description 21
- 230000000694 effects Effects 0.000 description 17
- 238000005516 engineering process Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 14
- 230000003993 interaction Effects 0.000 description 13
- 238000007726 management method Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 238000010295 mobile communication Methods 0.000 description 11
- 241000283153 Cetacea Species 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000005259 measurement Methods 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000003416 augmentation Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种虚拟数字内容显示系统、方法与电子设备,在该系统中,第一电子设备用于从至少一个候选虚拟数字场景中确定目标虚拟数字场景,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容,第二电子设备用于采集并显示第一现实场景的图像,在第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容,从而解决不在现场的用户和在现场的用户无法同步观看显示在真实世界场景中的虚拟数字内容的问题。
Description
技术领域
本申请涉及电子设备技术领域,尤其涉及一种虚拟数字内容显示系统、方法与电子设备。
背景技术
数字内容可以分为两大类:用户生成内容(User Generated Content,UGC)和专业生成内容(Professional Generated Content,PGC),UGC是一种由用户生成的内容,而PGC是一种由官方生成的内容。用户一般将UGC、PGC等数字内容通过互联网平台进行展示或者提供给其他用户。随着终端显示技术的发展,增强现实(augmented reality,AR)技术的应用场景越来越多,用户可以通过AR技术增强与UGC、PGC等数字内容的交互。例如,将UGC、PGC等数字内容作为虚拟对象显示在真实世界场景中,使得用户可以在AR设备的显示屏显示的AR场景中观看真实世界场景的同时,观看显示在真实世界场景中的虚拟数字内容,并与其进行交互。但是,由于AR技术的限制,不在现场的用户将无法观看显示在真实世界场景中的虚拟数字内容,也无法与其进行交互,使得不在现场的用户和在现场的用户无法同步观看显示在真实世界场景中的虚拟数字内容。
发明内容
本申请实施例提供一种虚拟数字内容显示系统、方法与电子设备,用以解决不在现场的用户和在现场的用户无法同步观看显示在真实世界场景中的虚拟数字内容的问题。
第一方面,本申请提供一种虚拟数字内容显示系统,所述虚拟数字内容显示系统包括第一电子设备和第二电子设备。所述第一电子设备可以:响应于用户触发的第一操作,从至少一个候选虚拟数字场景中确定目标虚拟数字场景;响应于用户触发的第二操作,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在所述目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容。所述第二电子设备可以:响应于用户触发的第三操作,采集并显示第一现实场景的图像;在所述第一现实场景为所述目标虚拟数字场景所对应的现实场景时,在所述第一现实场景的第一位置显示所述第一目标虚拟数字内容。
基于上述系统,第一电子设备可以在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容,即第一电子设备可以通过目标虚拟数字场景模拟出第一目标虚拟数字内容在目标虚拟数字场景所对应的现实场景中的显示效果,从而使得用户无需到达现场就可以观看第一目标虚拟数字内容在真实世界场景中的显示效果。第二电子设备可以采集并显示第一现实场景的图像,在第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容,即第二电子设备可以在目标虚拟数字场景所对应的现实场景中显示第一电子设备通过目标虚拟数字场景模拟出的显示效果,从而使得在现场的用户与不在现场的用户可以同步观看第一目标虚拟数字内容在真实世界场景中的显示效果。
在一种可能的设计中,所述第一现实场景的第一位置为所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置;或所述第一现实场景的第一位置和所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置之间的距离小于或等于第一阈值。
通过该设计,第一现实场景的第一位置与目标虚拟数字场景的第一位置之间可以存在距离,距离可以小于或等于第一阈值,使得第二电子设备在第一现实场景的第一位置显示第一目标虚拟数字内容的效果与第一电子设备在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容的效果之间的差异较小,从而使得在现场的用户与不在现场的用户可以同步观看第一目标虚拟数字内容在真实世界场景中的显示效果。
在一种可能的设计中,所述第二电子设备还可以:响应于用户触发的第四操作,从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示所述第二目标虚拟数字内容;所述第一电子设备还可以:在所述第一现实场景为所述目标虚拟数字场景所对应的现实场景时,在所述目标虚拟数字场景的第二位置显示所述第二目标虚拟数字内容,其中,所述第一现实场景的第二位置为所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置,或所述第一现实场景的第二位置和所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置之间的距离小于或等于第二阈值。
通过该设计,在第二电子设备在第一现实场景的第二位置显示第二目标虚拟数字内容之后,第一电子设备可以在第一现实场景为目标虚拟数字场景所对应的现实场景时,在目标虚拟数字场景的第二位置显示第二目标虚拟数字内容,即第一电子设备可以在第二电子设备将第二目标虚拟数字内容显示在第一现实场景中之后,通过第一现实场景所对应的虚拟数字场景模拟出第二目标虚拟数字内容在第一现实场景中的显示效果,从而使得在现场的用户与不在现场的用户可以同步观看第二目标虚拟数字内容在真实世界场景中的显示效果。
在一种可能的设计中,所述第一电子设备,还可以:响应于用户触发的第五操作,执行以下任意一项或多项操作:调整所述第一目标虚拟数字内容在所述目标虚拟数字场景的位置;或调整所述第一目标虚拟数字内容的大小;或调整所述第一目标虚拟数字内容的朝向;或删除所述第一目标虚拟数字内容;所述第二电子设备,还可以:响应于用户触发的第六操作,执行以下任意一项或多项操作:调整所述第一目标虚拟数字内容在所述第一现实场景的位置;或调整所述第一目标虚拟数字内容的大小;或调整所述第一目标虚拟数字内容的朝向;或删除所述第一目标虚拟数字内容。
通过该设计,第一电子设备或第二电子设备可以对显示的第一目标虚拟数字内容进行编辑,例如,调整第一目标虚拟数字内容在目标虚拟数字场景或第一现实场景的位置、大小、朝向,删除第一目标虚拟数字内容等,从而使得不在现场的用户或在现场的用户不仅可以观看第一目标虚拟数字内容在真实世界场景中的显示效果,还可以与第一目标虚拟数字内容进行交互。
在一种可能的设计中,所述第一电子设备还可以:响应于用户触发的第五操作,向所述第二电子设备发送第一编辑信息,其中,所述第一编辑信息包括所述第一电子设备对所述第一电子设备显示的所述第一目标虚拟数字内容进行编辑的信息;所述第二电子设备还可以:在接收来自所述第一电子设备的第一编辑信息时,根据所述第一编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
通过该设计,第二电子设备可以接收来自第一电子设备的第一编辑信息,根据第一编辑信息对显示的第一目标虚拟数字内容进行编辑,使得第一电子设备对第一电子设备显示的第一目标虚拟数字内容进行编辑之后,第二电子设备可以实时更新显示在现实场景中的第二目标虚拟数字内容。
在一种可能的设计中,所述第二电子设备还可以:响应于用户触发的第六操作,向所述第一电子设备发送第二编辑信息,其中,所述第二编辑信息包括所述第二电子设备对所述第二电子设备显示的所述第一目标虚拟数字内容进行编辑的信息;所述第一电子设备还可以:在接收来自所述第二电子设备的第二编辑信息时,根据所述第二编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述目标虚拟数字场景显示编辑后的所述第一目标虚拟数字内容。
通过该设计,第一电子设备可以接收来自第二电子设备的第二编辑信息,根据第二编辑信息对显示的第一目标虚拟数字内容进行编辑,使得第二电子设备对显示在现实场景中的第一目标虚拟数字内容进行编辑之后,第一电子设备可以实时更新该现实场景所对应的虚拟数字场景中的第一目标虚拟数字内容。
在一种可能的设计中,所述第一电子设备还可以:在响应用户触发的所述第一操作之前,显示所述至少一个候选虚拟数字场景对应的二维地图或者文字中的任意一项或多项;所述第一电子设备在响应于用户触发的所述第一操作,从所述至少一个候选虚拟数字场景中确定所述目标虚拟数字场景时,可以:响应于用户选择所述二维地图或者文字中的任意一项或多项的所述第一操作,确定所述目标虚拟数字场景。
通过该设计,第一电子设备可以将至少一个候选虚拟数字场景以二维地图或者文字的形式显示在第一电子设备的显示屏中,使得用户可以直接查看多个候选虚拟数字场景,并从多个候选虚拟数字场景中选择目标虚拟数字场景。
第二方面,本申请还提供一种虚拟数字内容显示方法,应用于第一电子设备,所述方法包括:响应于用户触发的第一操作,所述第一电子设备可以从至少一个候选虚拟数字场景中确定目标虚拟数字场景;响应于用户触发的第二操作,所述第一电子设备可以从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在所述目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容;响应于用户触发的第三操作,所述第一电子设备采集并显示第一现实场景的图像;在所述第一现实场景为目标虚拟数字场景所对应的现实场景时,所述第一电子设备在所述第一现实场景的第一位置显示第一目标虚拟数字内容,其中,所述第一目标虚拟数字内容为第一电子设备在所述目标虚拟数字场景的第一位置显示的虚拟数字内容,所述第一现实场景的第一位置为所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置,或所述第一现实场景的第一位置和所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置之间的距离小于或等于第一阈值。
在一种可能的设计中,所述第一电子设备还可以:响应于用户触发的第四操作,从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示所述第二目标虚拟数字内容;在第一现实场景为所述目标虚拟数字场景所对应的现实场景时,在所述目标虚拟数字场景的第二位置显示第二目标虚拟数字内容,其中,所述第二目标虚拟数字内容为第一电子设备在所述第一现实场景的第二位置显示的虚拟数字内容,所述第一现实场景的第二位置为所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置,或所述第一现实场景的第二位置和所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置之间的距离小于或等于第二阈值。
在一种可能的设计中,所述第一电子设备还可以:响应于用户触发的第五操作,对所述目标虚拟数字场景的所述第一目标虚拟数字内容进行编辑,使所述第一电子设备可以执行以下任意一项或多项操作:调整所述第一目标虚拟数字内容在所述目标虚拟数字场景的位置;或调整所述第一目标虚拟数字内容的大小;或调整所述第一目标虚拟数字内容的朝向;或删除所述第一目标虚拟数字内容;响应于用户触发的第六操作,对所述第一现实场景的所述第一目标虚拟数字内容进行编辑,使所述第一电子设备可以执行以下任意一项或多项操作:调整所述第一目标虚拟数字内容在所述第一现实场景的位置;或调整所述第一目标虚拟数字内容的大小;或调整所述第一目标虚拟数字内容的朝向;或删除所述第一目标虚拟数字内容。
在一种可能的设计中,所述第一电子设备还可以:响应于用户触发的第五操作,生成并保存第一编辑信息,其中,所述第一编辑信息包括所述第一电子设备对所述目标虚拟数字场景的所述第一目标虚拟数字内容进行编辑的信息;所述第一电子设备,还用于在生成并保存所述第一编辑信息时,根据所述第一编辑信息对所述第一现实场景显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
在一种可能的设计中,所述第一电子设备还可以:响应于用户触发的第六操作,生成并保存第二编辑信息,其中,所述第二编辑信息包括所述第一电子设备对所述第一现实场景的所述第一目标虚拟数字内容进行编辑的信息;所述第一电子设备,还用于在生成并保存所述第二编辑信息时,根据所述第二编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
在一种可能的设计中,所述第一电子设备还可以:在响应用户触发的所述第一操作之前,显示所述至少一个候选虚拟数字场景对应的二维地图或者文字中的任意一项或多项;所述第一电子设备从所述至少一个候选虚拟数字场景中确定所述目标虚拟数字场景,包括:响应于用户选择所述二维地图或者文字中的任意一项或多项的所述第一操作,确定所述目标虚拟数字场景。
第三方面,本申请还提供一种电子设备,所述电子设备包括处理器,存储器,以及,一个或多个程序;其中,所述一个或多个程序被存储在所述存储器中,所述一个或多个程序包括指令,当所述指令被所述处理器执行时,使得所述电子设备执行如上述第二方面或第二方面的任一可能的设计所描述的方法。
第四方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如上述第二方面或第二方面的任一可能的设计所描述的方法。
第五方面,本申请提供一种计算机程序产品,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如上述第二方面或第二方面的任一可能的设计所描述的方法。
上述第二方面至第五方面及其可能的设计中的有益效果可以参考上述对第一方面及其任一可能的设计中所述的方法的有益效果的描述。
附图说明
图1为本申请实施例提供的一种AR设备的示意图;
图2为本申请实施例提供的一种AR场景的示意图;
图3为本申请实施例提供的一种虚拟数字内容显示系统的结构示意图;
图4为本申请实施例提供的一种第一电子设备的硬件结构示意图;
图5为本申请实施例提供的一种第一电子设备的软件结构示意图;
图6a为本申请实施例提供的一种应用初始化界面的示意图;
图6b为本申请实施例提供的一种目标虚拟数字场景确定界面的示意图;
图6c为本申请实施例提供的另一种目标虚拟数字场景确定界面的示意图;
图6d为本申请实施例提供的一种目标虚拟数字场景生成界面的示意图;
图6e为本申请实施例提供的一种拍摄目标现实场景的示意图;
图6f为本申请实施例提供的另一种拍摄目标现实场景的示意图;
图6g为本申请实施例提供的一种目标虚拟数字内容确定界面的示意图;
图6h为本申请实施例提供的一种虚拟数字场景的示意图;
图6i为本申请实施例提供的一种虚拟数字内容显示界面的示意图;
图6j为本申请实施例提供的另一种虚拟数字内容显示界面的示意图;
图6k为本申请实施例提供的一种虚拟数字内容交互的示意图;
图6l为本申请实施例提供的一种虚拟数字内容编辑的示意图;
图6m为本申请实施例提供的又一种虚拟数字内容交互的示意图;
图6n为本申请实施例提供的又一种虚拟数字内容编辑的示意图;
图7为本申请实施例提供的一种虚拟数字内容显示方法的流程示意图;
图8为本申请实施例提供的另一种虚拟数字内容显示方法的流程示意图;
图9为本申请实施例提供的另一种第一电子设备的硬件结构示意图;
图10为本申请实施例提供的一种第二电子设备的硬件结构示意图。
具体实施方式
以下,对本申请实施例中的部分用语进行解释说明,以便于本领域技术人员理解。
(1)本申请实施例涉及的至少一个,包括一个或者多个;其中,多个是指大于或者等于两个。另外,需要理解的是,在本说明书的描述中,“第一”、“第二”等词汇,仅用于区分描述的目的,而不能理解为明示或暗示相对重要性,也不能理解为明示或暗示顺序。比如,第一对象和第二对象并不代表二者的重要程度或者代表二者的顺序,仅仅是为了区分描述。在本申请实施例中,“和/或”,仅仅是描述关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
在本申请实施例的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“连接”应做广义理解,例如,“连接”可以是可拆卸地连接,也可以是不可拆卸地连接;可以是直接连接,也可以通过中间媒介间接连接。本申请实施例中所提到的方位用语,例如,“上”、“下”、“左”、“右”、“内”、“外”等,仅是参考附图的方向,因此,使用的方位用语是为了更好、更清楚地说明及理解本申请实施例,而不是指示或暗指所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本申请实施例的限制。“多个”是指至少两个。
在本说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本说明书的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
(2)数字内容,可以分为两大类:用户生成内容(User Generated Content,UGC)和专业生成内容(Professional Generated Content,PGC),UGC是一种由用户生成的内容,而PGC是一种由官方生成的内容。用户一般将UGC、PGC等数字内容通过互联网平台进行展示或者提供给其他用户。
(3)增强现实(augmented reality,AR)技术,是指将计算机生成的虚拟对象叠加到真实世界的场景之上,从而实现对真实世界的增强。也就是说,AR技术中需要采集真实世界的场景,然后在真实世界上增加虚拟环境。因此,虚拟现实(virtual reality,VR)技术与AR技术的区别在于,VR技术创建的是完全的虚拟环境,用户看到的全部是虚拟对象;而AR技术是在真实世界上叠加了虚拟对象,即既包括真实世界中对象也包括虚拟对象。比如,用户佩戴透明眼镜,通过该眼镜可以看到周围的真实环境,而且该眼镜上还可以显示虚拟对象,这样,用户既可以看到真实对象也可以看到虚拟对象。
示例性的,图1为本申请实施例提供的一种AR设备的示意图。如图1所示,AR设备中包括AR穿戴设备,以及主机(例如AR主机)或服务器(例如AR服务器),AR穿戴设备与AR主机或AR服务器连接(有线连接或无线连接)。AR主机或AR服务器可以是具有较大计算能力的设备。例如,AR主机可以是手机、平板电脑、笔记本电脑等设备,AR服务器可以是云服务器等。AR主机或AR服务器负责图像生成、图像渲染等,然后将渲染后的图像发送给AR穿戴设备显示,用户佩戴AR穿戴设备可以看到图像。示例性的,AR穿戴设备可以是头戴式设备(HeadMounted Display,HMD),比如眼镜、头盔等。
可选的,图1中AR设备中也可以不包括AR主机或AR服务器。比如,AR穿戴设备本地具有图像生成、渲染的能力,无需从AR主机或AR服务器获取图像进行显示。
本申请实施例中,用户可以通过AR技术增强与数字内容的交互。当用户通过AR设备的摄像头(如图1中AR穿戴设备的摄像头)实时拍摄真实世界时,用户可以将数字内容作为虚拟对象添加到AR设备的显示屏(如图1中AR穿戴设备的显示屏)显示的AR场景中,即将虚拟数字内容显示在真实世界场景中,使得用户可以在AR设备的显示屏显示的AR场景中观看真实世界场景的同时,观看显示在真实世界场景中的虚拟数字内容,并与其进行交互。例如,图2为本申请实施例提供的一种AR场景的示意图,如图2所示,图2中地面、道路为AR设备的摄像头实时拍摄到的真实世界的画面,道路上虚拟的卡通人物则为用户在当前的AR场景中添加的虚拟数字内容,用户可以在AR设备的显示屏上同时观察到真实世界中的地面、道路和虚拟的卡通人物。用户还可以在AR设备的显示屏显示的AR场景中编辑虚拟数字内容。例如,编辑图2中虚拟的卡通人物的大小、位置以及朝向等。
但是,由于AR技术的限制,不在现场的用户将无法观看显示在真实世界场景中的虚拟数字内容,也无法与其进行交互,使得不在现场的用户和在现场的用户无法同步观看显示在真实世界场景中的虚拟数字内容。
基于上述问题,本申请实施例提供一种虚拟数字内容显示系统,用以解决不在现场的用户和在现场的用户无法同步观看显示在真实世界场景中的虚拟数字内容,用户体验较差的问题。图3为本申请实施例提供的一种虚拟数字内容显示系统的结构示意图。如图3所示,该虚拟数字内容显示系统可以包括第一电子设备和第二电子设备。
应理解,图3中仅为便于理解,示例性地示出了一个虚拟数字内容显示系统,但这不应对本申请构成任何限定,该虚拟数字内容显示系统中还可以包括更多数量的第一电子设备,也可以包括更多数量的第二电子设备;与不同的第一电子设备交互的第二电子设备可以是相同的第二电子设备,也可以是不同的第二电子设备;与不同的第一电子设备交互的第二电子设备的数量可以相同,也可以不同;本申请实施例中,第一电子设备和第二电子设备还可以是同一电子设备,本申请实施例对此不做具体限定。
在本申请实施例中,第一电子设备用于响应于用户触发的第一操作,从至少一个候选虚拟数字场景中确定目标虚拟数字场景,响应于用户触发的第二操作,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并将第一目标虚拟数字内容与目标虚拟数字场景的第一位置进行叠加,可以在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容。第二电子设备用于响应于用户触发的第三操作,采集并显示第一现实场景的图像,在第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容,其中,第一现实场景的第一位置为目标虚拟数字场景的第一位置在第一现实场景所对应的位置,或第一现实场景的第一位置和目标虚拟数字场景的第一位置在第一现实场景所对应的位置之间的距离小于或等于第一阈值,示例性的,第一阈值可以为100厘米。由于第一电子设备可以通过目标虚拟数字场景模拟出第一目标虚拟数字内容在目标虚拟数字场景所对应的现实场景中的显示效果,从而使得用户无需到达现场就可以观看第一目标虚拟数字内容在真实世界场景中的显示效果,由于第二电子设备可以在目标虚拟数字场景所对应的现实场景中显示第一电子设备通过目标虚拟数字场景模拟出的显示效果,从而使得在现场的用户与不在现场的用户可以同步观看第一目标虚拟数字内容在真实世界场景中的显示效果。
应理解,第一电子设备可以为具有无线连接功能的设备。第二电子设备可以为图1所示的AR设备。在本申请一些实施例中,第一电子设备可以是具备显示屏、摄像头和传感器的设备。
在本申请一些实施例中,第一电子设备可以是便携式设备,诸如手机、平板电脑、具备无线通讯功能的可穿戴设备(例如,手表、手环、头盔、耳机等)、车载终端设备、AR/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobilepersonal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等。第一电子设备还可以是智能家居设备(例如,智能电视、智能音箱等)、智能汽车、智能机器人、车间设备、无人驾驶(Self Driving)中的无线终端、远程手术(Remote MedicalSurgery)中的无线终端、智能电网(Smart Grid)中的无线终端、运输安全(TransportationSafety)中的无线终端、智慧城市(Smart City)中的无线终端,或智慧家庭(Smart Home)中的无线终端、飞行设备(例如,智能机器人、热气球、无人机、飞机)等。
在本申请一些实施例中,第一电子设备还可以是还包含其它功能诸如个人数字助理和/或音乐播放器功能的便携式终端设备。便携式终端设备的示例性实施例包括但不限于搭载或者其它操作系统的便携式终端设备。上述便携式终端设备也可以是其它便携式终端设备,诸如具有触敏表面(例如触控面板)的膝上型计算机(Laptop)等。还应当理解的是,在本申请其它一些实施例中,上述第一电子设备也可以不是便携式终端设备,而是具有触敏表面(例如触控面板)的台式计算机。
图4为本申请实施例提供的一种第一电子设备的硬件结构示意图。如图4所示,第一电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。其中,控制器可以是第一电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为第一电子设备100充电,也可以用于第一电子设备100与外围设备之间传输数据。充电管理模块140用于从充电器接收充电输入。电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。
第一电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。天线1和天线2用于发射和接收电磁波信号。第一电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在第一电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在第一电子设备100上的包括无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,第一电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得第一电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobilecommunications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code division multiple access,CDMA),宽带码分多址(wideband codedivision multiple access,WCDMA),时分码分多址(time-division code divisionmultiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidou navigation satellite system,BDS),准天顶卫星系统(quasi-zenithsatellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
显示屏194用于显示应用的显示界面,例如显示第一电子设备100上安装的应用的显示页面等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystaldisplay,LCD),有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,第一电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,第一电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。在本申请实施例中,摄像头193可以用于拍摄全景图,如用户持第一电子设备100水平旋转360度,摄像头193可以采集到一张第一电子设备100所处位置对应的全景图。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行第一电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,以及至少一个应用程序的软件代码等。存储数据区可存储第一电子设备100使用过程中所产生的数据(例如拍摄的图像、录制的视频等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展第一电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将图片,视频等文件保存在外部存储卡中。
第一电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
其中,传感器模块180可以包括压力传感器180A,加速度传感器180B,触摸传感器180C等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。
触摸传感器180C,也称“触控面板”。触摸传感器180C可以设置于显示屏194,由触摸传感器180C与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180C用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180C也可以设置于第一电子设备100的表面,与显示屏194所处的位置不同。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。第一电子设备100可以接收按键输入,产生与第一电子设备100的用户设置以及功能控制有关的键信号输入。马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现与第一电子设备100的接触和分离。
可以理解的是,图4所示的部件并不构成对第一电子设备100的具体限定,第一电子设备100还可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。此外,图4中的部件之间的组合/连接关系也是可以调整修改的。
图5为本申请实施例提供的一种第一电子设备的软件结构示意图。如图5所示,第一电子设备的软件结构可以是分层架构,例如可以将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将操作系统分为四层,从上至下分别为应用程序层,应用程序框架层(framework,FWK),运行时(runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包(application package)。如图5所示,应用程序层可以包括相机、设置、皮肤模块、用户界面(user interface,UI)、三方应用程序等。其中,三方应用程序可以包括图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层可以包括一些预先定义的函数。如图5所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
运行时包括核心库和虚拟机。运行时负责操作系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是操作系统的核心库。应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
硬件层可以包括各类传感器,例如加速度传感器、重力传感器、触摸传感器等。
基于上述虚拟数字内容显示系统,本申请实施例还提供一种虚拟数字内容显示方法。下面结合具体实施例,对本申请实施例提供的方案进行说明。
本申请实施例提供的方案可以包括虚拟数字场景显示和虚拟数字内容显示。在显示虚拟数字内容后,还可以进一步包括虚拟数字内容交互、虚拟数字内容漫游等。下面进行详细说明。
一、虚拟数字场景显示
本申请实施例中,用户可以登录AR应用或者VR应用,示例性的,用户可以在应用登录界面输入登录信息登录AR应用或者VR应用或者通过触发“手机号一键登录”以登录AR应用或者VR应用。当用户登录第一电子设备的AR应用或者VR应用,第一电子设备可以在显示屏中显示如图6a所示的一种应用初始化界面。
如图6a所示为一种应用初始化界面,该界面中可以显示有“虚拟数字场景库”图标601,以及至少一个候选虚拟数字场景的缩略图,例如虚拟数字场景“海底世界”对应的缩略图。其中,用户可以通过选择“虚拟数字场景库”图标601来查看候选虚拟数字场景,当第一电子设备检测到用户选择“虚拟数字场景库”图标601的操作,响应于该操作,第一电子设备可以将至少一个候选虚拟数字场景对应的二维地图或者文字中的任意一个或多个显示在第一电子设备的显示屏上。用户可以从第一电子设备的显示屏中显示的至少一个候选虚拟数字场景中确定目标虚拟数字场景,当第一电子设备检测到用户选择该二维地图或者文字中的任意一个或多个的操作,响应于该操作,第一电子设备可以将用户确定的目标虚拟数字场景显示在显示屏上。
示例性的,当第一电子设备检测到用户选择“虚拟数字场景库”图标601的操作,响应于该操作,第一电子设备可以在显示屏中显示如图6b所示的目标虚拟数字场景确定界面,该界面中显示有至少一个候选虚拟数字场景的图标的二维地图,例如“场景1”、“场景2”、“场景3”、“场景4”、“场景5”、“场景6”、“场景7”、“场景8”、“场景9”等候选虚拟数字场景的图标的二维地图。用户可以通过选择该二维地图中的候选虚拟数字场景的图标来查看对应的目标虚拟数字场景,当第一电子设备检测到用户选择第一电子设备的显示屏中显示的候选虚拟数字场景的图标的操作,响应于该操作,第一电子设备可以显示对应的目标虚拟数字场景。
示例性的,当第一电子设备检测到用户选择“虚拟数字场景库”图标601的操作,响应于该操作,第一电子设备还可以在显示屏中显示如图6c所示的目标虚拟数字场景确定界面,该界面中显示有不同区域的图标,例如“北京市”、“上海市”、“河北省”、“山西省”、“浙江省”、“福建省”、“江西省”等区域的图标。用户可以通过上下滑动区域的图标的右侧的滚动条,来查看当前该界面中未显示的区域的图标。用户还可以通过选择区域的图标来查看对应的候选虚拟数字场景,当第一电子设备检测到用户选择第一电子设备的显示屏中显示的区域的图标的操作,响应于该操作,第一电子设备可以显示该区域对应的候选虚拟数字场景。示例性的,当第一电子设备检测到用户选择第一电子设备的显示屏中显示的“北京市”的图标的操作,响应于该操作,第一电子设备可以显示“北京市”对应的候选虚拟数字场景的图标,例如“首都博物馆”、“北京通州大运河(码头)”、“长楹天街”、“丽泽天街”、“清华校史馆”、“北研所”、“北京坊”等候选虚拟数字场景的图标。用户可以通过上下滑动“北京市”的候选虚拟数字场景的图标的右侧的滚动条,来查看当前界面中未显示的“北京市”对应的候选虚拟数字场景的图标。用户还可以通过选择“北京市”对应的候选虚拟数字场景的图标来查看对应的目标虚拟数字场景,当第一电子设备检测到用户选择第一电子设备的显示屏中显示的“北京市”对应的候选虚拟数字场景的图标的操作,响应于该操作,第一电子设备可以显示对应的目标虚拟数字场景。
应理解,上述候选虚拟数字场景可以是第一电子设备存储的虚拟数字场景,例如官方预先设置的虚拟数字场景,也可以是第一电子设备从云端或者服务器获取的虚拟数字场景,还可以是用户创作上传的虚拟数字场景,本申请不作具体限制。
本申请实施例中,用户也可以通过第一电子设备生成目标虚拟数字场景,接下来对用户如何通过第一电子设备生成目标虚拟数字场景进行介绍。
如图6a所示为一种应用初始化界面,该界面中可以显示有“开始创作”图标602,其中,用户可以通过选择“开始创作”图标602来生成目标虚拟数字场景,当第一电子设备检测到用户选择“开始创作”图标602的操作,响应于该操作,第一电子设备可以显示如图6d所示的界面。
如图6d所示的第一电子设备的一种图形用户界面(graphical user interface,GUI),该界面可以包括操作按钮603,用户可以通过选择操作按钮603触发拍摄目标现实场景,当第一电子设备检测到用户选择操作按钮603的操作,响应于该操作,第一电子设备可以显示拍摄界面。用户可以操作第一电子设备对目标现实场景进行拍摄,得到对应的目标虚拟数字场景。示例性的,如图6e所示为本申请实施例提供的一种拍摄目标现实场景的示意图,该界面中可以包括第一电子设备的摄像头的拍摄界面、提示用户继续拍摄的操作按钮,例如“继续扫描”操作按钮604、以及用于触发停止拍摄的操作按钮,例如“停止采集”操作按钮605。用户可以通过移动第一电子设备进行拍摄,当用户确定继续拍摄时,可以选择提示用户继续拍摄的操作按钮,例如“继续扫描”操作按钮604,则第一电子设备可以继续拍摄;当用户确定停止拍摄时,可以选择触发停止拍摄的操作按钮,例如“停止采集”操作按钮605,则第一电子设备可以停止拍摄,并可以根据已拍摄的内容得到对应的目标虚拟数字场景。
示例性的,如图6f所示,用户在操作第一电子设备拍摄目标现实场景时,用户可以持第一电子设备,旋转第一电子设备拍摄目标现实场景。第一电子设备还可以显示提示用户继续拍摄的信息,当用户指示第一电子设备继续拍摄,选择提示用户继续拍摄的操作按钮,例如“继续扫描”操作按钮604时,用户可以通过旋转第一电子设备继续拍摄目标现实场景。当用户指示第一电子设备停止拍摄,选择用于触发停止拍摄的操作按钮,例如“停止采集”操作按钮605时,响应于该操作,第一电子设备可以停止拍摄目标现实场景,基于上述用户拍摄的目标现实场景的数据,第一电子设备可以生成对应的目标虚拟数字场景。
本申请实施例中,上述用户在操作第一电子设备拍摄目标现实场景时,基于拍摄的目标现实场景的数据,第一电子设备可以得到对应的目标虚拟数字场景的N张全景图、每张全景图的位姿信息,其中,全景图的位姿信息可以为拍摄全景图的拍摄设备(例如第一电子设备或官方设备)在拍摄全景图时在真实世界中的位置和朝向,全景图的位姿信息所表示的位置是拍摄全景图的拍摄设备通过进行全球定位系统(global positioning system,GPS)定位确定的,全景图的位姿信息所表示的朝向是拍摄全景图的拍摄设备通过进行惯性测量单元(inertial measurement unit,IMU)测量确定的。第一电子设备还可以得到目标虚拟数字场景中的每个建筑物的白模(即简化模型)以及目标虚拟数字场景中的每个建筑物的位姿信息,其中,建筑物的位姿信息可以为建筑物在真实世界中的位置和朝向。
示例性的,如图6e所示的界面,该界面中可以显示第一电子设备的摄像头拍摄得到的目标虚拟数字场景的一张全景图的任一帧全景图切片,用户可以通过移动第一电子设备进行更大范围空间的拍摄,当用户确定停止拍摄时,可以选择图6e中所示的用于触发停止拍摄的操作按钮,例如“停止采集”操作按钮605,则第一电子设备可以停止拍摄,并根据已拍摄的内容得到目标虚拟数字场景的N张全景图。
示例性的,如图6f所示,当用户旋转第一电子设备拍摄目标现实场景时,第一电子设备在旋转拍摄过程中可以获取目标虚拟数字场景的全景图的多帧全景图切片。第一电子设备可以将摄像头拍摄得到的目标虚拟数字场景的任一张全景图的任一帧全景图切片实时显示在显示屏上。
本申请实施例中,当第一电子设备显示提示用户继续拍摄的信息时,用户可以操作第一电子设备继续拍摄目标虚拟数字场景的任一张全景图,第一电子设备可以继续获取目标虚拟数字场景的任一张全景图的任一帧全景图切片,第一电子设备可以将任一张全景图的多帧全景图切片进行拼接得到该全景图,直至用户指示第一电子设备停止拍摄。
示例性的,第一电子设备在获取目标虚拟数字场景的每张全景图时,可以通过进行GPS定位确定第一电子设备在拍摄该全景图时在真实世界中的位置,通过进行IMU测量确定第一电子设备在拍摄该全景图时在真实世界中的朝向,进而得到该全景图的位姿信息。
本申请实施例中,当第一电子设备拍摄目标虚拟数字场景时,第一电子设备可以得到反映目标虚拟数字场景的多张环境图像,第一电子设备可以根据反映目标虚拟数字场景的多张环境图像确定目标虚拟数字场景的每个建筑物的边界矢量数据,并根据边界矢量数据确定建筑物的白模数据,进而根据建筑物的白模数据得到建筑物的白模、建筑物的白模的位姿信息、建筑物的位姿信息,其中,建筑物的白模的位姿信息可以为建筑物的白模在对应的三维空间中的位置和朝向。需要说明的是,建筑物的白模在对应的三维空间中的位置和朝向的获取方式和上述获取全景图在真实世界中的位置和朝向的方式一致,此处不再赘述。
本申请实施例中,当第一电子设备检测到上述用户从至少一个候选虚拟数字场景中确定目标虚拟数字场景的操作,响应于该操作,第一电子设备可以获取目标虚拟数字场景的N张全景图、每张全景图的位姿信息、目标虚拟数字场景中的每个建筑物的白模以及目标虚拟数字场景中的每个建筑物的位姿信息。
应理解,第一电子设备可以从第一电子设备存储的全景图库以及白模库中获取目标虚拟数字场景的N张全景图、每张全景图的位姿信息、目标虚拟数字场景中的每个建筑物的白模以及目标虚拟数字场景中的每个建筑物的位姿信息,该全景图库中的全景图以及白模库中的建筑物的白模是官方操作官方设备对复杂场景进行拍摄得到的;第一电子设备也可以自己获取目标虚拟数字场景的N张全景图、每张全景图的位姿信息、目标虚拟数字场景中的每个建筑物的白模以及目标虚拟数字场景中的每个建筑物的位姿信息。本申请实施例中不做具体限定。
应理解,目标虚拟数字场景可以包括一个或多个虚拟数字场景,本申请实施例中不做具体限定,为了方便说明,接下来以虚拟数字场景显示、虚拟数字内容显示、虚拟数字内容交互中的目标虚拟数字场景均只包括一个虚拟数字场景,虚拟数字内容漫游中的目标虚拟数字场景可包括多个虚拟数字场景来进行介绍。
二、虚拟数字内容显示
本申请实施例中,上述第一电子设备获取目标虚拟数字场景的N张全景图、每张全景图的位姿信息、目标虚拟数字场景中的每个建筑物的白模以及目标虚拟数字场景中的每个建筑物的位姿信息后,第一电子设备可以在显示屏中显示目标虚拟数字场景,以及至少一个候选虚拟数字内容对应的图像或者文字中的任意一个或多个。其中,用户可以从第一电子设备的显示屏中显示的至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并将第一目标虚拟数字内容移动到目标虚拟数字场景的第一位置,当第一电子设备检测到用户选择该第一目标虚拟数字内容对应的图像或者文字中的任意一个或多个的操作,响应于该操作,第一电子设备可以将用户确定的第一目标虚拟数字内容与目标虚拟数字场景的第一位置进行叠加,可以在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容。
在一些实施例中,用户在目标虚拟数字场景的第一位置放置第一目标虚拟数字内容后,用户可以对第一目标虚拟数字内容进行编辑,例如移动第一目标虚拟数字内容在目标虚拟数字场景的位置,对第一目标虚拟数字内容进行放大、缩小、翻转或旋转中的任意一项或多项操作,调整第一目标虚拟数字内容的朝向等等。
应理解,上述候选虚拟数字内容可以是第一电子设备存储的虚拟数字内容,例如官方预先设置的虚拟数字内容,也可以是用户创作上传的虚拟数字内容,本申请不作具体限制。
示例性的,第一电子设备可以在显示屏中显示如图6g的(1)所示的虚拟数字场景以及内容显示界面,该界面中显示有目标虚拟数字场景以及“虚拟数字内容库”图标606。其中,用户可以通过选择“虚拟数字内容库”图标606来查看候选虚拟数字内容,当第一电子设备检测到用户选择“虚拟数字内容库”图标606的操作,响应于该操作,第一电子设备可以将至少一个候选虚拟数字内容对应的图像或者文字中的任意一个或多个显示在第一电子设备的显示屏上,例如“虚拟数字内容1”、“虚拟数字内容2”、“虚拟数字内容3”、“虚拟数字内容4”等候选虚拟数字内容的图标。用户可以从第一电子设备的显示屏中显示的至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并将第一目标虚拟数字内容移动到目标虚拟数字场景的第一位置,当第一电子设备检测到用户选择并移动该第一目标虚拟数字内容的操作,响应于该操作,第一电子设备可以将用户确定的第一目标虚拟数字内容显示在目标虚拟数字场景的第一位置上。示例性的,如图6g的(2)所示,当第一电子设备检测到用户选择“虚拟数字内容1”的图标,并将“虚拟数字内容1”的图标移动到目标虚拟数字场景的第一位置的操作,响应于该操作,第一电子设备可以将“虚拟数字内容1”与目标虚拟数字场景的第一位置进行叠加,并显示在第一电子设备的显示屏上。
在本申请实施例中,上述第一电子设备将用户确定的第一目标虚拟数字内容显示在目标虚拟数字场景的第一位置时,第一电子设备可以确定第一目标虚拟数字内容的位姿信息。其中,目标虚拟数字场景的第一位置可以为第一目标虚拟数字内容在目标虚拟数字场景的三维坐标系下的坐标信息,第一目标虚拟数字内容的位姿信息可以为第一目标虚拟数字内容在真实世界中的位置和朝向,目标虚拟数字场景的三维坐标系和真实世界的三维坐标系可以有映射关系,基于该映射关系,第一电子设备可以通过目标虚拟数字场景的第一位置的坐标信息确定第一目标虚拟数字内容的位姿信息。第一电子设备还可以将目标虚拟数字场景的每张全景图的位姿信息对应的三维坐标系作为参考坐标系,调整目标虚拟数字场景中的每个建筑物的位姿信息以及第一目标虚拟数字内容的位姿信息,得到参考坐标系中的目标虚拟数字场景中的每个建筑物的位姿信息,以及参考坐标系中的第一目标虚拟数字内容的位姿信息。第一电子设备还可以根据参考坐标系中的目标虚拟数字场景的每张全景图的位姿信息、目标虚拟数字场景中的每个建筑物的位姿信息以及第一目标虚拟数字内容的位姿信息,确定目标虚拟数字场景的第一全景图、第一全景图中的每个建筑物以及第一目标虚拟数字内容的相对位姿信息,其中,相对位姿信息可以为拍摄第一全景图的拍摄设备、第一全景图中的每个建筑物以及第一目标虚拟数字内容在真实世界中的相对位置和相对朝向。第一电子设备还可以根据第一全景图、第一全景图中的每个建筑物以及第一目标虚拟数字内容的相对位姿信息,将第一全景图中的每个建筑物的白模以及第一目标虚拟数字内容与第一全景图进行叠加,并显示在第一电子设备的显示屏中。
示例性的,图6h为本申请实施例提供的一种虚拟数字场景的示意图,包括第一虚拟数字场景的全景图1,其中,全景图1中包括建筑物1和建筑物2。其中,全景图1的位姿信息可以为全景图1的拍摄设备在拍摄全景图1时在真实世界中的位置为A1以及朝向为B1。建筑物1的位姿信息可以为建筑物1在真实世界中的位置为A2以及朝向为B2。建筑物2的位姿信息可以为建筑物2在真实世界中的位置为A3以及朝向为B3。当第一电子设备检测到用户选择第一目标虚拟数字内容的图标,并将第一目标虚拟数字内容的图标移动到第一虚拟数字场景的第一位置的操作,响应于该操作,第一电子设备可以确定第一目标虚拟数字内容的位姿信息,其中,第一目标虚拟数字内容的位姿信息可以为第一目标虚拟数字内容在真实世界中的位置为A4以及朝向为B4。
由于第一电子设备的相机的三维坐标系和拍摄全景图1时的拍摄设备、建筑物1、建筑物2以及第一目标虚拟数字内容的真实世界的三维坐标系可以不同,第一电子设备可以将相机的三维坐标系作为参考坐标系,调整全景图1、建筑物1和建筑物2的位姿信息以及第一目标虚拟数字内容的位姿信息,得到参考坐标系中的全景图1的位姿信息(例如表示全景图1在参考坐标系中的位置为A11以及朝向为B11)、建筑物1的位姿信息(例如表示建筑物1在参考坐标系中的位置为A12以及朝向为B12)、参考坐标系中的建筑物2的位姿信息(例如表示建筑物2在参考坐标系中的位置为A13以及朝向为B13),以及参考坐标系中的第一目标虚拟数字内容的位姿信息(例如表示第一目标虚拟数字内容在参考坐标系中的位置为A14以及朝向为B14)。第一电子设备还可以根据A11、A12、A13和A14,B11、B12、B13和B14,确定在拍摄全景图1时的拍摄设备、建筑物1、建筑物2以及第一目标虚拟数字内容在真实世界中的相对位置为C1和相对朝向为D1。第一电子设备还可以根据C1和D1,将建筑物1的白模、建筑物2的白模与全景图1进行渲染叠加,得到第二虚拟数字场景,第一电子设备还可以将第一目标虚拟数字内容和第二虚拟数字场景的第一位置进行叠加,示例性的,如图6i所示为本申请实施例提供的一种虚拟数字内容显示界面的示意图,图6i所示的虚拟数字内容显示界面包括建筑物1的白模、建筑物2的白模、第一目标虚拟数字内容与全景图1,其中,建筑物1的白模和建筑物2的白模基本遮挡了全景图1中的建筑物1和建筑物2。
在一些实施例中,由于全景图的位姿信息是由全景图的拍摄设备通过进行GPS定位以及IMU测量确定的,而算法确定的全景图的拍摄设备在拍摄全景图时在真实世界中的位置和朝向,与实际的全景图的拍摄设备在拍摄全景图时在真实世界中的位置和朝向,存在误差,误差单位一般为厘米级。因此为了避免误差影响到第一目标虚拟数字内容与第一全景图渲染叠加后的效果,第一电子设备可以根据第一全景图的位姿信息,以及第二虚拟数字场景中的每个建筑物的位姿信息,确定该第二虚拟数字场景中的每个建筑物的位姿差值。其中,建筑物的位姿差值表示建筑物在真实世界中的位置和朝向与建筑物的白模在对应的三维空间中的位置和朝向的差值。第一电子设备还可以根据第二虚拟数字场景中的每个建筑物的位姿差值,确定是否将第二虚拟数字场景显示在第一电子设备的显示屏中。例如,如果第二虚拟数字场景中的每个建筑物的位姿差值位于预设范围内,则第一电子设备确定第二虚拟数字场景符合对外提供的精度要求,可以将该第二虚拟数字场景显示在第一电子设备的显示屏中;如果第二虚拟数字场景中的每个建筑物的位姿差值不位于预设范围内,则第一电子设备确定第二虚拟数字场景不符合对外提供的精度要求,不可以将该第二虚拟数字场景显示在第一电子设备的显示屏中,需要将第二虚拟数字场景剔除或者重新获取第二虚拟数字场景。
示例性的,当第一电子设备确定第二虚拟数字场景中的每个建筑物的位姿差值位于预设范围内时,第一电子设备可以先在显示屏中显示如图6j的(1)所示的虚拟数字内容显示界面,该界面中可以显示有图6i所示的第二虚拟数字场景和第一目标虚拟数字内容,还可以显示有提示用户关闭建筑物的白模的操作按钮607。用户可以通过选择操作按钮607来关闭图6i所示的第二虚拟数字场景中的建筑物1的白模和建筑物2的白模,当第一电子设备检测到用户选择操作按钮607的操作,响应于该操作,第一电子设备可以在显示屏中显示如图6j的(2)所示的虚拟数字内容显示界面,该界面中可以显示有第一虚拟数字场景和第一目标虚拟数字内容,还可以显示有提示用户开启建筑物的白模的操作按钮608,用户可以通过选择操作按钮608来打开建筑物1的白模和建筑物2的白模。
可见,上述第一电子设备将第一目标虚拟数字内容与目标虚拟数字场景的第一位置进行叠加,可以在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容,并将与第一目标虚拟数字内容叠加后的目标虚拟数字场景显示在第一电子设备的显示屏中,从而可以模拟出第一目标虚拟数字内容在目标虚拟数字场景所对应的现实场景中的显示效果,使得用户无需到达现场就可以观看第一目标虚拟数字内容在真实世界场景中的显示效果。
三、虚拟数字内容交互
本申请实施例中,上述第一电子设备将虚拟数字内容显示在目标虚拟数字场景中后,用户可以操作第二电子设备和虚拟数字内容进行交互。接下来以第一电子设备将第一目标虚拟数字内容显示在目标虚拟数字场景的第一位置上为例进行介绍。
用户可以进入AR场景,当第二电子设备检测到用户选择进入AR场景的操作,响应于该操作,第二电子设备可以采集并显示第一现实场景的图像。用户可以操作第一电子设备在目标虚拟数字场景的第一位置放置第一目标虚拟数字内容,当第一现实场景为目标虚拟数字场景所对应的现实场景时,第二电子设备可以在第一现实场景的第一位置显示放置的第一目标虚拟数字内容,其中,第一现实场景的第一位置为目标虚拟数字场景的第一位置在第一现实场景所对应的位置。示例性的,当第一电子设备检测到用户在目标虚拟数字场景的第一位置放置第一目标虚拟数字内容的操作,响应于该操作,第一电子设备可以向第二电子设备发送第一请求信息,其中,第一请求信息用于请求第二电子设备在第二电子设备显示的第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示放置的第一目标虚拟数字内容,当第二电子设备接收第一请求信息,第二电子设备可以在确定当前显示的第一现实场景是第一电子设备当前显示的目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容。
应理解,第一现实场景的第一位置可以为目标虚拟数字场景的第一位置在第一现实场景所对应的位置,第一现实场景的第一位置与目标虚拟数字场景的第一位置在第一现实场景所对应的位置之间也可以存在距离,距离可以小于或等于第一阈值,例如第一阈值可以为100厘米,示例性的,基于真实世界的三维坐标系,第二电子设备可以获取第一现实场景的第一位置的三维坐标1,第一电子设备可以获取目标虚拟数字场景的第一位置的三维坐标2,进而基于三维坐标1和三维坐标2可以得到两个位置之间的距离;第一现实场景的第一位置放置的第一目标虚拟数字内容的朝向,与目标虚拟数字场景的第一位置放置的第一目标虚拟数字内容的朝向之间可以存在误差,误差可以小于或等于第一角度阈值,例如3度,示例性的,基于真实世界的三维坐标系,第二电子设备可以获取第一目标虚拟数字内容在第一现实场景的第一位置的旋转值1,第一电子设备可以获取第一目标虚拟数字内容在目标虚拟数字场景的第一位置的旋转值2,进而基于旋转值1和旋转值2可以得到两个旋转值之间的角度差。其中,第一电子设备可以从服务器获取三维坐标2和虚拟数字内容的旋转值2,第二电子设备可以从服务器获取三维坐标1和虚拟数字内容的旋转值1,本申请对此不作具体限制。
示例性的,如图6a所示,当第二电子设备检测到用户选择“沙洲世界已覆盖”的操作,响应于该操作,第二电子设备可以在显示屏中显示如图6k的(1)所示的现实场景显示界面,该界面中显示有第一现实场景,其中,窗帘、沙发、墙壁、门等是第二电子设备实时拍摄到的第一现实场景的画面。当第一电子设备检测到用户确定目标虚拟数字场景的操作,响应于该操作,第一电子设备可以在显示屏中显示如图6k的(2)所示的目标虚拟数字场景显示界面,该界面中可以包括目标虚拟数字场景中的建筑物,例如沙发、墙壁、门等,当第一电子设备检测到用户在目标虚拟数字场景的第一位置放置第一目标虚拟数字内容的操作,响应于该操作,第一电子设备可以在目标虚拟数字场景的第一位置显示第一目标虚拟数字内容,例如图6k的(2)中的鲸鱼,第一电子设备还可以向第二电子设备发送第一请求信息,第二电子设备可以接收来自第一电子设备的第一请求信息,当第二电子设备确定当前显示的第一现实场景是第一电子设备当前显示的目标虚拟数字场景所对应的现实场景时,示例性的,如图6k的(3)所示的现实场景显示界面,第二电子设备可以在显示屏的界面中显示第一现实场景,第二电子设备可以将第一目标虚拟数字内容(即鲸鱼)显示在第一现实场景的第一位置上,其中,图6k的(3)所示的第一现实场景为图6k的(2)所示的目标虚拟数字场景所对应的现实场景;图6k的(3)所示的第一现实场景的第一位置为图6k的(2)所示的目标虚拟数字场景的第一位置在第一现实场景所对应的位置。
应理解,图6k的(3)所示的第一现实场景的第一位置与图6k的(2)所示的目标虚拟数字场景的第一位置之间可以存在距离,距离可以小于或等于第一阈值,例如第一阈值可以为100厘米,在图6k的(3)所示的第一现实场景的第一位置上显示的第一目标虚拟数字内容的朝向,与在图6k的(2)所示的目标虚拟数字场景的第一位置上显示的第一目标虚拟数字内容的朝向之间可以存在误差,误差可以小于或等于第一角度阈值,例如3度,本申请对此不作具体限制。
本申请实施例中,第一电子设备可以对目标虚拟数字场景显示的目标虚拟数字内容进行编辑,并在第二电子设备的显示屏显示的第一现实场景中同步更新编辑后的目标虚拟数字内容。例如,用户可以对第一目标虚拟数字内容进行编辑,当第一电子设备检测到用户编辑第一目标虚拟数字内容的操作,响应于该操作,第一电子设备可以向第二电子设备发送第一编辑信息,第一编辑信息包括第一电子设备对第一电子设备的显示屏中显示的第一目标虚拟数字内容进行编辑的信息。当第二电子设备接收来自第一电子设备的第一编辑信息,第二电子设备可以根据第一编辑信息对显示在第二电子设备的显示屏中的第一目标虚拟数字内容进行编辑同步,使得显示在第一电子设备的显示屏中的第一目标虚拟数字内容与显示在第二电子设备的显示屏中的第一目标虚拟数字内容可以同步更新。
示例性的,第一电子设备可以在显示屏中显示如图6l的(1)所示的目标虚拟数字场景显示界面,该界面中的沙发、墙壁、门等都是目标虚拟数字场景中的建筑物,鲸鱼是显示在目标虚拟数字场景的第一位置上的第一目标虚拟数字内容。用户可以将鲸鱼从目标虚拟数字场景的第一位置移动到目标虚拟数字场景的第二位置,当第一电子设备检测到用户移动鲸鱼的操作,响应于该操作,第一电子设备可以在显示屏显示如图6l的(2)所示的目标虚拟数字场景显示界面。当第一电子设备检测到用户移动鲸鱼的操作,响应于该操作,第一电子设备可以将第一编辑信息发送给第二电子设备。其中,第一编辑信息包括第一电子设备将鲸鱼从目标虚拟数字场景的第一位置移动到目标虚拟数字场景的第二位置的信息。当第二电子设备接收来自第一电子设备的第一编辑信息,第二电子设备可以根据第一编辑信息将鲸鱼从第一现实场景的第一位置移动到第一现实场景的第二位置,第二电子设备可以在显示屏显示如图6l的(3)所示的现实场景显示界面,其中,第一现实场景的第二位置为目标虚拟数字场景的第二位置在第一现实场景所对应的位置。
应理解,图6l的(3)所示的第一现实场景的第二位置与图6l的(2)所示的目标虚拟数字场景的第二位置在第一现实场景所对应的位置之间可以存在距离,距离可以小于或等于第二阈值,例如第二阈值可以为100厘米,在图6l的(3)所示的第一现实场景的第二位置上放置的第一目标虚拟数字内容的朝向,与在图6l的(2)所示的目标虚拟数字场景的第一位置上放置的第一目标虚拟数字内容的朝向之间可以存在误差,误差可以小于或等于第二角度阈值,例如3度,具体参见上述其他实施例的相关描述,此处不再赘述。
在一些实施例中,当第一电子设备检测到用户编辑第一目标虚拟数字内容的操作,响应于该操作,第一电子设备还可以生成并保存第一编辑信息,第一编辑信息包括第一电子设备对第一电子设备的显示屏中显示的第一目标虚拟数字内容进行编辑的信息。第一电子设备可以根据第一编辑信息对第一现实场景显示的第一目标虚拟数字内容进行编辑,当第一电子设备显示第一现实场景,第一电子设备可以在第一现实场景显示编辑后的第一目标虚拟数字内容。
在本申请实施例中,上述第二电子设备采集并显示第一现实场景的图像后,还可以将至少一个候选虚拟数字内容对应的图像或者文字中的任意一个或多个显示在第二电子设备的显示屏中。用户可以从第二电子设备的显示屏中显示的至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并将第二目标虚拟数字内容移动到第一现实场景的第三位置,当第二电子设备检测到用户选择并移动该图像或者文字中的任意一个或多个的操作,响应于该操作,第二电子设备可以在第一现实场景的第三位置上显示用户确定的第二目标虚拟数字内容。
应理解,上述候选虚拟数字内容可以是第二电子设备存储的虚拟数字内容,例如官方预先设置的虚拟数字内容,也可以是用户创作上传的虚拟数字内容,本申请不作具体限制。
示例性的,第二电子设备可以在显示屏中显示如图6m的(1)所示的现实场景显示界面,该界面中显示有第一现实场景,以及“虚拟数字内容库”图标609。其中,用户可以通过选择“虚拟数字内容库”图标609来查看候选虚拟数字内容,当第二电子设备检测到用户选择“虚拟数字内容库”图标609的操作,响应于该操作,第二电子设备可以将至少一个候选虚拟数字内容对应的图像或者文字中的任意一个或多个显示在第二电子设备的显示屏上,例如“虚拟数字内容1”、“虚拟数字内容2”、“虚拟数字内容3”、“虚拟数字内容4”等候选虚拟数字内容的图标。用户可以从第二电子设备的显示屏中显示的至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并将第二目标虚拟数字内容移动到第一现实场景的第三位置,当第二电子设备检测到用户选择并移动该图像或者文字中的任意一个或多个的操作,响应于该操作,第二电子设备可以将用户确定的第二目标虚拟数字内容显示在第一现实场景的第三位置上。例如,当第二电子设备检测到用户选择“虚拟数字内容1”的图标,并将“虚拟数字内容1”的图标移动到第一现实场景的第三位置的操作,响应于该操作,第二电子设备可以将“虚拟数字内容1”显示在第一现实场景的第三位置上,得到如图6m的(2)所示的现实场景显示界面,该界面中的小狗是显示在第一现实场景的第三位置上的第二目标虚拟数字内容。
在本申请实施例中,上述用户操作第二电子设备在第一现实场景的第三位置放置第二目标虚拟数字内容后,当第二电子设备检测到用户在第一现实场景的第三位置放置第二目标虚拟数字内容的操作,响应于该操作,第二电子设备还可以向显示目标虚拟数字场景的第一电子设备发送第二请求信息。其中,第二请求信息用于请求第一电子设备在第一现实场景为目标虚拟数字场景所对应的现实数字场景时,在目标虚拟数字场景的第三位置显示第二目标虚拟数字内容,目标虚拟数字场景的第三位置为第一现实场景的第三位置在目标虚拟数字场景所对应的位置。
应理解,第一现实场景的第三位置与目标虚拟数字场景的第三位置在第一现实场景所对应的位置之间可以存在距离,距离可以小于或等于第三阈值,例如第三阈值可以为100厘米,第一现实场景的第三位置放置的第二目标虚拟数字内容的朝向,与目标虚拟数字场景的第三位置放置的第二目标虚拟数字内容的朝向之间可以存在误差,误差可以小于或等于第三角度阈值,例如3度,具体参见上述其他实施例对第一现实场景的第一位置和目标虚拟数字场景的第一位置的相关描述,此处不再赘述。
示例性的,当第二电子设备检测到用户在第一现实场景的第三位置放置第二目标虚拟数字内容的操作,响应于该操作,第二电子设备可以在显示屏中显示如图6m的(2)所示的现实场景显示界面,该界面包括第一现实场景,该界面中的小狗是显示在第一现实场景的第三位置上的第二目标虚拟数字内容。当第二电子设备检测到用户在第一现实场景的第三位置放置第二目标虚拟数字内容的操作,响应于该操作,第二电子设备还可以向第一电子设备发送第二请求信息。第一电子设备接收来自第二电子设备的第二请求信息,当第一电子设备确定第一电子设备当前显示的目标虚拟数字场景是第二电子设备当前显示的第一现实场景所对应的虚拟数字场景时,示例性的,如图6m的(3)所示的目标虚拟数字场景显示界面,第一电子设备可以在显示屏的界面中显示目标虚拟数字场景和第二目标虚拟数字内容,该界面中的小狗是显示在目标虚拟数字场景的第三位置上的第二目标虚拟数字内容,图6m的(3)所示的目标虚拟数字场景的第三位置为图6m的(2)所示的第一现实场景的第三位置在目标虚拟数字场景所对应的位置。
应理解,图6m的(2)所示的第一现实场景的第三位置与图6m的(3)所示的目标虚拟数字场景的第三位置在第一现实场景所对应的位置之间可以存在距离,距离可以小于或等于第三阈值,例如第三阈值可以为100厘米,在图6m的(2)所示的第一现实场景的第三位置上放置的第二目标虚拟数字内容的朝向,与在图6m的(3)所示的目标虚拟数字场景的第三位置上放置的第二目标虚拟数字内容的朝向之间可以存在误差,误差可以小于或等于第三角度阈值,例如3度,具体参见上述其他实施例对第一现实场景的第一位置和目标虚拟数字场景的第一位置的相关描述,此处不再赘述。
在本申请实施例中,第二电子设备也可以对第一现实场景显示的第二目标虚拟数字内容进行编辑,并在第一电子设备的显示屏显示的目标虚拟数字场景中同步更新编辑后的第二目标虚拟数字内容,具体实现方式和上述第一电子设备对目标虚拟数字场景显示的第一目标虚拟数字内容进行编辑,并在第二电子设备的显示屏显示的第一现实场景中同步更新编辑后的第一目标虚拟数字内容一致,此处不再赘述。
示例性的,第二电子设备可以在显示屏中显示如图6n的(1)所示的现实场景显示界面,该界面中显示有第一现实场景,该界面中的小狗是显示在第一现实场景的第二位置上的第二目标虚拟数字内容。用户可以将小狗从第一现实场景中删除,当第一电子设备检测到用户删除小狗的操作,响应于该操作,第二电子设备可以在显示屏显示如图6n的(2)所示的现实场景显示界面。当第二电子设备检测到用户删除小狗的操作,响应于该操作,第二电子设备可以第二编辑信息发送给第一电子设备,其中,第二编辑信息包括第二电子设备将小狗从第一现实场景中删除的信息。第一电子设备可以在显示屏中显示如图6m的(3)所示的目标虚拟数字场景显示界面,第一电子设备接收来自第二电子设备的第二编辑信息,第一电子设备可以根据第二编辑信息将小狗从目标虚拟数字场景中删除,第一电子设备可以在显示屏显示如图6n的(3)所示的现实场景显示界面。
在一些实施例中,当第二电子设备检测到用户编辑第二目标虚拟数字内容的操作,响应于该操作,第二电子设备还可以生成并保存第二编辑信息,第二编辑信息包括第二电子设备对第二电子设备的显示屏中显示的第二目标虚拟数字内容进行编辑的信息。第二电子设备可以根据第二编辑信息对第一现实场景显示的第二目标虚拟数字内容进行编辑,当第二电子设备显示目标虚拟数字场景,第二电子设备可以在目标虚拟数字场景显示编辑后的第二目标虚拟数字内容。
从而使得在现场的第二电子设备侧的用户对显示在真实世界场景中的虚拟数字内容进行编辑之后,第一电子设备实时更新显示虚拟数字场景的全景图中的虚拟数字内容,或者,不在现场的第一电子设备侧的用户对显示在虚拟数字场景的全景图中的虚拟数字内容进行编辑之后,第二电子设备实时更新显示在真实世界场景中的虚拟数字内容,提高了用户体验。
四、虚拟数字内容漫游
在本申请实施例中,目标虚拟数字场景包括多个场景,第一电子设备将目标虚拟数字场景显示在第一电子设备的显示屏中后,可以在显示屏中显示用于启动目标虚拟数字场景切换的操作按钮。用户可以通过选择该操作按钮启动目标虚拟数字场景切换,当第一电子设备检测到用户选择该操作按钮的操作,响应于该操作,第一电子设备可以切换目标虚拟数字场景,例如,将目标虚拟数字场景由场景1切换到场景2。
在一些实施例中,第一电子设备切换目标虚拟数字场景后,第一电子设备可以在显示屏中显示切换后的目标虚拟数字场景,还可以显示用于重新确定第一目标虚拟数字内容的位姿信息的操作按钮。用户可以通过选择该操作按钮重新确定第一目标虚拟数字内容的位姿信息,当第一电子设备检测到用户选择该操作按钮的操作,响应于该操作,第一电子设备可以根据切换后的目标虚拟数字场景的每张全景图的位姿信息、切换后的目标虚拟数字场景中的每个建筑物的位姿信息以及重新确定的第一目标虚拟数字内容的位姿信息,将第一目标虚拟数字内容与切换后的目标虚拟数字场景的第一全景图进行叠加,并显示在第一电子设备的显示屏中,从而实现虚拟数字内容在不同场景中漫游。上述步骤的具体执行可参照上述虚拟数字内容显示中的相关介绍,此处不再赘述。
在一些实施例中,第一电子设备在显示屏中显示切换后的目标虚拟数字场景时,还可以直接将第一目标虚拟数字内容与切换后的目标虚拟数字场景的第一全景图进行叠加,并显示在第一电子设备的显示屏中,从而实现虚拟数字内容在不同场景中漫游。
图7为本申请实施例提供的一种数字内容显示方法的流程示意图,如图7中所示,该方法的流程可以包括:
S701:第一电子设备响应于用户触发的第一操作,从至少一个候选虚拟数字场景中确定目标虚拟数字场景。
其中,第一电子设备响应用户的操作,从至少一个候选虚拟数字场景中确定目标虚拟数字场景的方式具体参见“一、虚拟数字场景显示”中的描述,此处不再赘述。
S702:第一电子设备响应于用户触发的第二操作,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容。
其中,第一电子设备响应用户的操作,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容的方式具体参见“二、虚拟数字内容显示”中的描述,此处不再赘述。
S703:第二电子设备响应于用户触发的第三操作,采集并显示第一现实场景的图像,并在第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容。
其中,第二电子设备响应用户的操作,采集并显示第一现实场景的图像,并在第一现实场景为目标虚拟数字场景所对应的现实场景时,在第一现实场景的第一位置显示第一目标虚拟数字内容的方式具体参见“三、虚拟数字内容交互”中的描述,此处不再赘述。
本申请实施例中,第一电子设备还可以对第一目标虚拟数字内容进行编辑,当第一电子设备对第一目标虚拟数字内容进行编辑,第二电子设备也可以同步显示编辑后的第一目标虚拟数字内容,具体参见“三、虚拟数字内容交互”中的描述,此处不再赘述。
需要说明的是,上述实例提供的具体实施流程,仅是对本申请实施例适用方法流程的举例说明,其中各步骤的执行顺序可根据实际需求进行相应调整,还可以增加其它步骤,或减少部分步骤。
当第二电子设备显示第一现实场景,第一电子设备和第二电子设备还可以实施如图8所示的另一种虚拟数字内容显示方法,如图8中所示,该方法的流程可以包括:
S801:第二电子设备响应于用户触发的第四操作,从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示第二目标虚拟数字内容。
其中,第二电子设备响应用户的操作,从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示第二目标虚拟数字内容的方式具体参见“三、虚拟数字内容交互”中的描述,此处不再赘述。
S802:第一电子设备在第一现实场景为目标虚拟数字场景所对应的现实场景时,在目标虚拟数字场景的第二位置显示第二目标虚拟数字内容。
其中,第一电子设备在目标虚拟数字场景的第二位置显示第二目标虚拟数字内容的方式具体参见“三、虚拟数字内容交互”中的描述,此处不再赘述。
本申请实施例中,第二电子设备还可以对第二目标虚拟数字内容进行编辑,当第二电子设备对第二目标虚拟数字内容进行编辑,第一电子设备也可以同步显示编辑后的第二目标虚拟数字内容,具体参见“三、虚拟数字内容交互”中的描述,此处不再赘述。
需要说明的是,上述实例提供的具体实施流程,仅是对本申请实施例适用方法流程的举例说明,其中各步骤的执行顺序可根据实际需求进行相应调整,还可以增加其它步骤,或减少部分步骤。
基于以上实施例及相同构思,本申请实施例还提供一种第一电子设备,该第一电子设备用于实现本申请实施例提供的第一电子设备所执行的方法。
如图9中所示,第一电子设备900可以包括:存储器901,一个或多个处理器902,以及一个或多个计算机程序(图中未示出)。上述各器件可以通过一个或多个通信总线903耦合。可选的,当第一电子设备900用于实现本申请实施例提供的第一电子设备所执行的方法时,第一电子设备900还可以包括显示屏904。
其中,存储器901中存储有一个或多个计算机程序(代码),一个或多个计算机程序包括计算机指令;一个或多个处理器902调用存储器901中存储的计算机指令,使得第一电子设备900执行本申请实施例提供的虚拟数字内容显示方法。显示屏904用于显示图像、视频、应用界面等相关用户界面。
具体实现中,存储器901可包括高速随机存取的存储器,并且也可包括非易失性存储器,例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器901可以存储操作系统(下述简称系统),例如ANDROID,IOS,WINDOWS,或者LINUX等嵌入式操作系统。存储器901可用于存储本申请实施例的实现程序。存储器901还可以存储网络通信程序,该网络通信程序可用于与一个或多个附加设备,一个或多个用户设备,一个或多个网络设备进行通信。一个或多个处理器902可以是一个通用中央处理器(Central ProcessingUnit,CPU),微处理器,特定应用集成电路(Application-Specific Integrated Circuit,ASIC),或一个或多个用于控制本申请方案程序执行的集成电路。
需要说明的是,图9仅仅是本申请实施例提供的第一电子设备900的一种实现方式,实际应用中,第一电子设备900还可以包括更多或更少的部件,这里不作限制。
基于以上实施例及相同构思,本申请实施例还提供一种第二电子设备,该第二电子设备用于实现本申请实施例提供的第二电子设备所执行的方法。
如图10中所示,第二电子设备1000可以包括:存储器1001,一个或多个处理器1002,以及一个或多个计算机程序(图中未示出)。上述各器件可以通过一个或多个通信总线1003耦合。可选的,当第二电子设备1000用于实现本申请实施例提供的第二电子设备所执行的方法时,第二电子设备1000还可以包括显示屏1004。
其中,存储器1001中存储有一个或多个计算机程序(代码),一个或多个计算机程序包括计算机指令;一个或多个处理器1002调用存储器1001中存储的计算机指令,使得第二电子设备1000执行本申请实施例提供的虚拟数字内容显示方法。显示屏1004用于显示图像、视频、应用界面等相关用户界面。
具体实现中,存储器1001可包括高速随机存取的存储器,并且也可包括非易失性存储器,例如一个或多个磁盘存储设备、闪存设备或其他非易失性固态存储设备。存储器1001可以存储操作系统(下述简称系统),例如ANDROID,IOS,WINDOWS,或者LINUX等嵌入式操作系统。存储器1001可用于存储本申请实施例的实现程序。存储器1001还可以存储网络通信程序,该网络通信程序可用于与一个或多个附加设备,一个或多个用户设备,一个或多个网络设备进行通信。一个或多个处理器1002可以是一个通用中央处理器(CentralProcessing Unit,CPU),微处理器,特定应用集成电路(Application-SpecificIntegrated Circuit,ASIC),或一个或多个用于控制本申请方案程序执行的集成电路。
需要说明的是,图10仅仅是本申请实施例提供的第二电子设备1000的一种实现方式,实际应用中,第二电子设备1000还可以包括更多或更少的部件,这里不作限制。
基于以上实施例及相同构思,本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,当计算机程序在计算机上运行时,使得计算机执行上述实施例提供的方法中由第一电子设备或者第二电子设备所执行的方法。
基于以上实施例及相同构思,本申请实施例还提供一种计算机程序产品,该计算机程序产品包括计算机程序或指令,当计算机程序或指令在计算机上运行时,使得计算机执行上述实施例提供的方法中由第一电子设备或者第二电子设备所执行的方法。
本申请实施例提供的方法中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本发明实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、网络设备、用户设备或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,简称DSL)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机可以存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,数字视频光盘(digital video disc,简称DVD)、或者半导体介质(例如,SSD)等。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (16)
1.一种虚拟数字内容显示系统,其特征在于,所述虚拟数字内容显示系统包括第一电子设备和第二电子设备;
所述第一电子设备,用于响应于用户触发的第一操作,从至少一个候选虚拟数字场景中确定目标虚拟数字场景;
所述第一电子设备,还用于响应于用户触发的第二操作,从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在所述目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容;
所述第二电子设备,用于响应于用户触发的第三操作,采集并显示第一现实场景的图像;
所述第二电子设备,还用于在所述第一现实场景为所述目标虚拟数字场景所对应的现实场景时,在所述第一现实场景的第一位置显示所述第一目标虚拟数字内容。
2.如权利要求1所述的系统,其特征在于,
所述第一现实场景的第一位置为所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置;或
所述第一现实场景的第一位置和所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置之间的距离小于或等于第一阈值。
3.如权利要求1所述的系统,其特征在于,
所述第二电子设备,还用于响应于用户触发的第四操作,从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示所述第二目标虚拟数字内容;
所述第一电子设备,还用于在所述第一现实场景为所述目标虚拟数字场景所对应的现实场景时,在所述目标虚拟数字场景的第二位置显示所述第二目标虚拟数字内容,其中,所述第一现实场景的第二位置为所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置,或所述第一现实场景的第二位置和所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置之间的距离小于或等于第二阈值。
4.如权利要求1-3任一所述的系统,其特征在于,
所述第一电子设备,还用于响应于用户触发的第五操作,执行以下任意一项或多项操作:
调整所述第一目标虚拟数字内容在所述目标虚拟数字场景的位置;或
调整所述第一目标虚拟数字内容的大小;或
调整所述第一目标虚拟数字内容的朝向;或
删除所述第一目标虚拟数字内容;
所述第二电子设备,还用于响应于用户触发的第六操作,执行以下任意一项或多项操作:
调整所述第一目标虚拟数字内容在所述第一现实场景的位置;或
调整所述第一目标虚拟数字内容的大小;或
调整所述第一目标虚拟数字内容的朝向;或
删除所述第一目标虚拟数字内容。
5.如权利要求4所述的系统,其特征在于,
所述第一电子设备,还用于响应于用户触发的第五操作,向所述第二电子设备发送第一编辑信息,其中,所述第一编辑信息包括所述第一电子设备对所述第一电子设备显示的所述第一目标虚拟数字内容进行编辑的信息;
所述第二电子设备,还用于在接收来自所述第一电子设备的第一编辑信息时,根据所述第一编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
6.如权利要求4所述的系统,其特征在于,
所述第二电子设备,还用于响应于用户触发的第六操作,向所述第一电子设备发送第二编辑信息,其中,所述第二编辑信息包括所述第二电子设备对所述第二电子设备显示的所述第一目标虚拟数字内容进行编辑的信息;
所述第一电子设备,还用于在接收来自所述第二电子设备的第二编辑信息时,根据所述第二编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述目标虚拟数字场景显示编辑后的所述第一目标虚拟数字内容。
7.如权利要求1-6任一所述的系统,其特征在于,
所述第一电子设备,还用于在响应用户触发的所述第一操作之前,显示所述至少一个候选虚拟数字场景对应的二维地图或者文字中的任意一项或多项;
所述第一电子设备,用于响应于用户触发的所述第一操作,从所述至少一个候选虚拟数字场景中确定所述目标虚拟数字场景,包括:响应于用户选择所述二维地图或者文字中的任意一项或多项的所述第一操作,确定所述目标虚拟数字场景。
8.一种虚拟数字内容显示方法,其特征在于,应用于第一电子设备,所述方法包括:
响应于用户触发的第一操作,所述第一电子设备从至少一个候选虚拟数字场景中确定目标虚拟数字场景;
响应于用户触发的第二操作,所述第一电子设备从至少一个候选虚拟数字内容中确定第一目标虚拟数字内容,并在所述目标虚拟数字场景的第一位置显示所述第一目标虚拟数字内容;
响应于用户触发的第三操作,所述第一电子设备采集并显示第一现实场景的图像;
在所述第一现实场景为目标虚拟数字场景所对应的现实场景时,所述第一电子设备在所述第一现实场景的第一位置显示第一目标虚拟数字内容,其中,所述第一目标虚拟数字内容为第一电子设备在所述目标虚拟数字场景的第一位置显示的虚拟数字内容,所述第一现实场景的第一位置为所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置,或所述第一现实场景的第一位置和所述目标虚拟数字场景的第一位置在所述第一现实场景所对应的位置之间的距离小于或等于第一阈值。
9.如权利要求8所述的方法,其特征在于,所述方法还包括:
响应于用户触发的第四操作,所述第一电子设备从至少一个候选虚拟数字内容中确定第二目标虚拟数字内容,并在第一现实场景的第二位置显示所述第二目标虚拟数字内容;
在第一现实场景为所述目标虚拟数字场景所对应的现实场景时,所述第一电子设备在所述目标虚拟数字场景的第二位置显示第二目标虚拟数字内容,其中,所述第二目标虚拟数字内容为第一电子设备在所述第一现实场景的第二位置显示的虚拟数字内容,所述第一现实场景的第二位置为所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置,或所述第一现实场景的第二位置和所述目标虚拟数字场景的第二位置在所述第一现实场景所对应的位置之间的距离小于或等于第二阈值。
10.如权利要求8或9所述的方法,其特征在于,所述方法还包括:
响应于用户触发的第五操作,所述第一电子设备对所述目标虚拟数字场景的所述第一目标虚拟数字内容进行编辑,使所述第一电子设备执行以下任意一项或多项操作:
调整所述第一目标虚拟数字内容在所述目标虚拟数字场景的位置;或
调整所述第一目标虚拟数字内容的大小;或
调整所述第一目标虚拟数字内容的朝向;或
删除所述第一目标虚拟数字内容;
响应于用户触发的第六操作,所述第一电子设备对所述第一现实场景的所述第一目标虚拟数字内容进行编辑,使所述第一电子设备执行以下任意一项或多项操作:
调整所述第一目标虚拟数字内容在所述第一现实场景的位置;或
调整所述第一目标虚拟数字内容的大小;或
调整所述第一目标虚拟数字内容的朝向;或
删除所述第一目标虚拟数字内容。
11.如权利要求10所述的方法,其特征在于,所述方法还包括:
响应于用户触发的第五操作,所述第一电子设备生成并保存第一编辑信息,其中,所述第一编辑信息包括所述第一电子设备对所述目标虚拟数字场景的所述第一目标虚拟数字内容进行编辑的信息;
所述第一电子设备,还用于在生成并保存所述第一编辑信息时,根据所述第一编辑信息对所述第一现实场景显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
12.如权利要求10所述的方法,其特征在于,所述方法还包括:
响应于用户触发的第六操作,所述第一电子设备生成并保存第二编辑信息,其中,所述第二编辑信息包括所述第一电子设备对所述第一现实场景的所述第一目标虚拟数字内容进行编辑的信息;
所述第一电子设备,还用于在生成并保存所述第二编辑信息时,根据所述第二编辑信息对显示的所述第一目标虚拟数字内容进行编辑,并在所述第一现实场景显示编辑后的所述第一目标虚拟数字内容。
13.如权利要求8-12任一所述的方法,其特征在于,所述方法还包括:
在响应用户触发的所述第一操作之前,显示所述至少一个候选虚拟数字场景对应的二维地图或者文字中的任意一项或多项;
所述第一电子设备从所述至少一个候选虚拟数字场景中确定所述目标虚拟数字场景,包括:响应于用户选择所述二维地图或者文字中的任意一项或多项的所述第一操作,确定所述目标虚拟数字场景。
14.一种电子设备,其特征在于,所述电子设备包括:
处理器,存储器,以及,一个或多个程序;
其中,所述一个或多个程序被存储在所述存储器中,所述一个或多个程序包括指令,当所述指令被所述处理器执行时,使得所述第一电子设备执行如权利要求8-13中任一项所述的方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求8-13中任一项所述的方法。
16.一种计算机程序产品,其特征在于,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如上述权利要求8-13中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211052147.6A CN117671203A (zh) | 2022-08-31 | 2022-08-31 | 一种虚拟数字内容显示系统、方法与电子设备 |
PCT/CN2023/104001 WO2024045854A1 (zh) | 2022-08-31 | 2023-06-29 | 一种虚拟数字内容显示系统、方法与电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211052147.6A CN117671203A (zh) | 2022-08-31 | 2022-08-31 | 一种虚拟数字内容显示系统、方法与电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117671203A true CN117671203A (zh) | 2024-03-08 |
Family
ID=90073861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211052147.6A Pending CN117671203A (zh) | 2022-08-31 | 2022-08-31 | 一种虚拟数字内容显示系统、方法与电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN117671203A (zh) |
WO (1) | WO2024045854A1 (zh) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160133230A1 (en) * | 2014-11-11 | 2016-05-12 | Bent Image Lab, Llc | Real-time shared augmented reality experience |
CN104571532B (zh) * | 2015-02-04 | 2018-01-30 | 网易有道信息技术(北京)有限公司 | 一种实现增强现实或虚拟现实的方法及装置 |
CN108479060B (zh) * | 2018-03-29 | 2021-04-13 | 联想(北京)有限公司 | 一种显示控制方法及电子设备 |
CN111078003B (zh) * | 2019-11-27 | 2021-10-22 | Oppo广东移动通信有限公司 | 数据处理方法、装置、电子设备及存储介质 |
WO2021190280A1 (en) * | 2020-03-24 | 2021-09-30 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | System and method for augmented tele-cooperation |
CN113672087A (zh) * | 2021-08-10 | 2021-11-19 | Oppo广东移动通信有限公司 | 远程交互方法、装置、系统、电子设备以及存储介质 |
-
2022
- 2022-08-31 CN CN202211052147.6A patent/CN117671203A/zh active Pending
-
2023
- 2023-06-29 WO PCT/CN2023/104001 patent/WO2024045854A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
WO2024045854A1 (zh) | 2024-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10623661B2 (en) | Image composition method with image sensors having different angles of view and electronic device for supporting the same | |
CN114205522B (zh) | 一种长焦拍摄的方法及电子设备 | |
CN107087101B (zh) | 用于提供动态全景功能的装置和方法 | |
KR102222073B1 (ko) | 촬영 방법 및 전자 장치 | |
CN109191549B (zh) | 显示动画的方法及装置 | |
CN111476911A (zh) | 虚拟影像实现方法、装置、存储介质与终端设备 | |
US10848669B2 (en) | Electronic device and method for displaying 360-degree image in the electronic device | |
CN112351156B (zh) | 一种镜头切换方法及装置 | |
CN115297200A (zh) | 一种具有折叠屏的设备的触控方法与折叠屏设备 | |
CN112383664B (zh) | 一种设备控制方法、第一终端设备、第二终端设备及计算机可读存储介质 | |
CN112930533A (zh) | 一种电子设备的控制方法及电子设备 | |
WO2024041394A1 (zh) | 拍摄方法及相关装置 | |
CN114546227A (zh) | 虚拟镜头控制方法、装置、计算机设备及介质 | |
CN115442509B (zh) | 拍摄方法、用户界面及电子设备 | |
CN114979457B (zh) | 一种图像处理方法及相关装置 | |
CN114708289A (zh) | 一种图像帧预测的方法及电子设备 | |
CN114842069A (zh) | 一种位姿确定方法以及相关设备 | |
CN115686182B (zh) | 增强现实视频的处理方法与电子设备 | |
CN114079691B (zh) | 一种设备识别方法及相关装置 | |
CN117671203A (zh) | 一种虚拟数字内容显示系统、方法与电子设备 | |
CN113485596A (zh) | 虚拟模型的处理方法、装置、电子设备及存储介质 | |
CN113542575A (zh) | 设备位姿调整方法和图像拍摄方法及电子设备 | |
US20230114178A1 (en) | Image display method and electronic device | |
CN116723382B (zh) | 一种拍摄方法及相关设备 | |
CN112783993B (zh) | 基于数字地图的多个授权空间的内容同步方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |