CN112862977A - 数字空间的管理方法、装置与设备 - Google Patents
数字空间的管理方法、装置与设备 Download PDFInfo
- Publication number
- CN112862977A CN112862977A CN202011231772.8A CN202011231772A CN112862977A CN 112862977 A CN112862977 A CN 112862977A CN 202011231772 A CN202011231772 A CN 202011231772A CN 112862977 A CN112862977 A CN 112862977A
- Authority
- CN
- China
- Prior art keywords
- target
- space
- media content
- scene
- digital map
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title abstract description 49
- 238000000034 method Methods 0.000 claims abstract description 262
- 238000013475 authorization Methods 0.000 claims description 262
- 238000009877 rendering Methods 0.000 claims description 67
- 238000012216 screening Methods 0.000 claims description 31
- 230000004044 response Effects 0.000 claims description 27
- 239000007787 solid Substances 0.000 claims description 13
- 239000000463 material Substances 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 5
- 230000000694 effects Effects 0.000 abstract description 23
- 238000013461 design Methods 0.000 description 62
- 238000004891 communication Methods 0.000 description 52
- 230000006854 communication Effects 0.000 description 52
- 238000010586 diagram Methods 0.000 description 44
- 230000008569 process Effects 0.000 description 34
- 230000006870 function Effects 0.000 description 32
- 239000010410 layer Substances 0.000 description 26
- 238000012545 processing Methods 0.000 description 19
- 238000003860 storage Methods 0.000 description 18
- 238000006073 displacement reaction Methods 0.000 description 17
- 230000001976 improved effect Effects 0.000 description 15
- 230000005236 sound signal Effects 0.000 description 12
- 238000010295 mobile communication Methods 0.000 description 11
- 210000000988 bone and bone Anatomy 0.000 description 10
- 238000012217 deletion Methods 0.000 description 10
- 230000037430 deletion Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 9
- 230000001360 synchronised effect Effects 0.000 description 8
- 238000013507 mapping Methods 0.000 description 7
- 238000012790 confirmation Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 239000003086 colorant Substances 0.000 description 4
- 238000003892 spreading Methods 0.000 description 4
- 230000007480 spreading Effects 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/05—Geographic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2021—Shape modification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Computer Hardware Design (AREA)
- Databases & Information Systems (AREA)
- Remote Sensing (AREA)
- Architecture (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computing Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请公开了一种数字空间管理方法、装置与设备。方法包括:终端基于第一用户标识登录预设应用;呈现第一界面;第一界面中包含有注册虚拟空间的选项;响应用户对注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;获取目标几何体;将第一用户标识、预览流和目标几何体发送给服务器;预览流和目标几何体用于确定第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;第一虚拟空间是与第一场景所在的真实世界相对应的虚拟空间;目标几何体用于表征目标虚拟空间的形态。通过本发明,可以达到所见即所得的数字虚拟空间展示效果,以使得数字地图的注册用户更好地使用和规划数字空间。
Description
技术领域
本申请涉及增强现实(augmented reality,AR)或虚拟现实(virtual reality,VR)技术领域,特别涉及一种基于数字地图的多个授权空间的内容同步方法、装置及存储介质。
背景技术
当前,数字地图在日常生活中的应用越来越多。其中,数字地图中包含有大量的虚拟三维空间,这些三维空间中除了有部分空间被已有建筑物和其他物体占用,还存在大量剩余的未被占用的三维空间。如何更好的利用这些三维空间,以实现这些三维空间的价值是当前运营数字地图的过程中亟需解决的问题。
发明内容
本申请提供了一种基于数字地图的授权空间显示方法、多个授权空间的媒体内容同步方法以及媒体内容分享方法、装置及存储介质,可以实现授权空间的可视化,并实现在可视化的授权空间内添加媒体内容,所述技术方案如下:
第一方面,提供了一种基于数字地图的授权空间显示方法,所述方法可以应用于终端,所述方法包括:获取目标场景的预览流;获取第一用户标识;获取终端的位姿;根据所述第一用户标识和所述位姿获取n个授权空间,其中,所述n个授权空间是所述目标场景对应的数字地图中所述第一用户标识对应的n个互不交叠的三维空间,所述n个授权空间用于呈现媒体内容,所述n为大于或等于1的整数,所述数字地图包括全景图、点云图或网格模型;在所述目标场景的预览流中渲染所述n个授权空间。
根据第一方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间之后,所述方法还包括:获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;在目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间。
根据第一方面,在一种可能的设计中,所述在目标授权空间内添加所述目标媒体内容,包括:当检测到针对所述目标媒体内容的拖动指令时,在所述拖动指令所指示的拖动终点位置处,添加所述目标媒体内容,其中,所述目标媒体内容中位于所述目标授权空间内的媒体内容和位于所述目标授权空间外的媒体内容的显示方式不同,或者,所述目标媒体内容中位于所述目标授权空间内的媒体内容可见,位于所述目标授权空间外的媒体内容不可见。
根据第一方面,在一种可能的设计中,所述在目标授权空间内添加所述目标媒体内容之后,还包括:确定目标媒体内容与目标对象之间的目标相对位置关系,所述目标对象为所述目标场景对应的数字地图中包括的预设的图像或三维物体;向服务器发送所述第一用户标识、所述目标媒体内容、所述目标对象和所述目标相对位置关系,以使所述服务器根据所述目标媒体内容、所述目标对象和所述目标相对位置关系,对在预设数字地图中所述第一用户标识对应的其他授权空间进行内容更新。
根据第一方面,在一种可能的设计中,所述目标媒体内容与第一特征的相对位置关系满足第一预设位置关系,所述第一特征为所述目标场景的预览流中包括的预设的图像或三维物体。
根据第一方面,在一种可能的设计中,所述根据所述第一用户标识和所述位姿获取n个授权空间,包括:向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取所述n个授权空间;接收所述服务器发送的所述n个授权空间。
根据第一方面,在一种可能的设计中,所述根据所述第一用户标识和所述位姿获取n个授权空间,包括:向服务器发送所述第一用户标识、所述位姿和空间筛选条件,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间,并从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间;接收所述服务器发送的所述n个授权空间。
根据第一方面,在一种可能的设计中,所述根据所述第一用户标识和所述位姿获取n个授权空间,包括:向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间;接收所述服务器发送的所述m个授权空间;从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间。
根据第一方面,在一种可能的设计中,所述根据所述第一用户标识和所述位姿获取n个授权空间,包括:向服务器发送空间申请请求,所述空间申请请求用于向所述服务器申请授权空间,且所述空间申请请求携带所述第一用户标识和所述位姿、以及授权空间的需求,以使所述服务器根据所述位姿和所述授权空间的需求为所述第一用户标识分配对应的n个授权空间;接收服务器发送的授权响应,所述授权响应携带所述n个授权空间。
根据第一方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间,包括:根据所述位姿,在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间,其中,所述预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
根据第一方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间之后,还包括:如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配,对所述n个授权空间在所述数字地图中的位姿进行调整,以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;向服务器发送调整后的所述n个授权空间的位姿,以使所述服务器对所述n个授权空间在所述数字地图中的位姿进行更新。
根据第一方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染的所述n个授权空间与第二特征的相对位置关系满足第二预设位置关系,所述第二特征为所述目标场景的预览流中包括的预设的图像或三维物体。
第二方面,提供了一种基于数字地图的媒体内容分享方法,其特征在于,所述方法应用于第二终端,所述方法包括:获取第一终端发送的目标场景的视频,所述目标场景的视频携带所述第一终端拍摄所述目标场景的视频时的目标位姿;根据所述目标位姿获取待显示的目标媒体内容;其中,所述目标媒体内容包括所述目标场景对应的数字地图中的媒体内容;播放所述目标场景的视频,并在播放所述目标场景的视频的同时渲染所述目标媒体内容。
根据第二方面,在一种可能的设计中,所述根据所述目标位姿获取待显示的目标媒体内容,包括:向服务器发送所述目标位姿,以使所述服务器根据所述目标位姿获取所述目标媒体内容;接收所述服务器发送的所述目标媒体内容。
第三方面,提供了一种基于数字地图的授权空间显示装置,所述装置应用于终端,所述装置包括:第一获取模块,用于获取目标场景的预览流;第二获取模块,用于获取第一用户标识以及获取终端的位姿;第三获取模块,用于根据所述第一用户标识和所述位姿获取n个授权空间,其中,所述n个授权空间是所述目标场景对应的数字地图中所述第一用户标识对应的n个互不交叠的三维空间,所述n个授权空间用于呈现媒体内容,所述n为大于或等于1的整数,所述数字地图包括全景图、点云图或网格图;渲染模块,用于在所述目标场景的预览流中渲染所述n个授权空间。
根据第三方面,在一种可能的设计中,所述装置还包括;第四获取模块,用于获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;添加模块,用于在目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间。
根据第三方面,在一种可能的设计中,所述添加模块具体用于:当检测到针对所述目标媒体内容的拖动指令时,在所述拖动指令所指示的拖动终点位置处,添加所述目标媒体内容,其中,所述目标媒体内容中位于所述目标授权空间内的媒体内容和位于所述目标授权空间外的媒体内容的显示方式不同,或者,所述目标媒体内容中位于所述目标授权空间内的媒体内容可见,位于所述目标授权空间外的媒体内容不可见。
根据第三方面,在一种可能的设计中,所述装置还包括:确定模块,用于确定目标媒体内容与目标对象之间的目标相对位置关系,所述目标对象为所述目标场景对应的数字地图中包括的预设的图像或三维物体;发送模块,用于向服务器发送所述第一用户标识、所述目标媒体内容、所述目标对象和所述目标相对位置关系,以使所述服务器根据所述目标媒体内容、所述目标对象和所述目标相对位置关系,对在预设数字地图中所述第一用户标识对应的其他授权空间进行内容更新。
根据第三方面,在一种可能的设计中,所述目标媒体内容与第一特征的相对位置关系满足第一预设位置关系,所述第一特征为所述目标场景的预览流中包括的预设的图像或三维物体。
根据第三方面,在一种可能的设计中,所述第三获取模块具体用于:向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取所述n个授权空间;接收所述服务器发送的所述n个授权空间。
根据第三方面,在一种可能的设计中,所述第三获取模块具体用于:向服务器发送所述第一用户标识、所述位姿和空间筛选条件,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间,并从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间;接收所述服务器发送的所述n个授权空间。
根据第三方面,在一种可能的设计中,所述第三获取模块具体用于:向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间;接收所述服务器发送的所述m个授权空间;从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间。
根据第三方面,在一种可能的设计中,所述第三获取模块具体用于:向服务器发送空间申请请求,所述空间申请请求用于向所述服务器申请授权空间,且所述空间申请请求携带所述第一用户标识和所述位姿、以及授权空间的需求,以使所述服务器根据所述位姿和所述授权空间的需求为所述第一用户标识分配对应的n个授权空间;接收服务器发送的授权响应,所述授权响应携带所述n个授权空间。
根据第三方面,在一种可能的设计中,所述渲染模块具体用于:根据所述位姿,在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间,其中,所述预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
根据第三方面,在一种可能的设计中,所述装置还包括:调整模块,用于如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配,对所述n个授权空间在所述数字地图中的位姿进行调整,以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;发送模块,用于向服务器发送调整后的所述n个授权空间的位姿,以使所述服务器对所述n个授权空间在所述数字地图中的位姿进行更新。
根据第三方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染的所述n个授权空间与第二特征的相对位置关系满足第二预设位置关系,所述第二特征为所述目标场景对应的数字地图中包括的预设的图像或三维物体。
第四方面,提供了一种基于数字地图的媒体内容分享装置,其特征在于,所述装置应用于第二终端,所述装置包括:第一获取模块,用于获取第一终端发送的目标场景的视频,所述目标场景的视频携带所述第一终端拍摄所述目标场景的视频时的目标位姿;第二获取模块,用于根据所述目标位姿获取待显示的目标媒体内容;显示模块,用于播放所述目标场景的视频,并在播放所述目标场景的视频的同时渲染所述目标媒体内容。
根据第四方面,在一种可能的设计中,所述第二获取模块具体用于:向服务器发送所述目标位姿,以使所述服务器根据所述目标位姿获取所述目标媒体内容;接收所述服务器发送的所述目标媒体内容。
第五方面,提供了一种基于数字地图的授权空间显示方法,所述方法应用于终端,所述方法包括:获取目标场景的预览流;获取第一用户标识;获取终端的位姿;根据所述第一用户标识和所述位姿获取n个授权空间,其中,所述n个授权空间是所述目标场景对应的数字地图中所述第一用户标识对应的n个互不交叠的三维空间,所述n个授权空间用于呈现媒体内容,所述n为大于或等于1的整数,所述数字地图包括全景图、点云图或网格图;在所述目标场景的预览流中渲染所述n个授权空间。
在本申请实施例中,终端可以根据第一用户标识和终端的位姿,获取当前的注册用户在目标场景对应的数字地图中的授权空间,进而在目标场景的预览流中渲染该注册用户的授权空间,使得注册用户可以实时查看到与当前场景对应的授权空间,更为便利。
可选地,在所述目标场景的预览流中渲染所述n个授权空间之后,还包括:获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;在目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间。
可选地,在所述目标场景的预览流中渲染所述n个授权空间之后,还包括:在目标授权空间内显示该目标授权空间内包含的媒体内容,根据第一编辑方式对显示的媒体内容进行编辑。第一编辑方式包括增加方式、删减方式、替换方式和按照预设的相对位移移动方式中一种或多种。
其中,增加方式是指在授权空间已经包含有媒体内容的情况下,基于授权空间内原有的媒体内容额外增加媒体内容。删减方式是指对授权空间内已有的媒体内容进行删减,具体的,可以包括媒体内容整个进行删除,或者是将媒体内容中的部分元素进行删除。替换方式是指将授权空间内已有的某个媒体内容替换为其他媒体内容,或者是将授权空间内已有的媒体内容中包含的某个元素替换为其他媒体内容。按照预设的相对位移移动方式可以是指将授权空间内已有的媒体内容从当前位置处按照预设的相对位移移动到另一个位置上。
另外,还需要说明的是,在按照第一编辑方式对媒体内容进行编辑之后,终端可以将编辑后的媒体内容和第一编辑方式发送至服务器,服务器可以按照第一编辑方式对第一用户标识的其他授权空间中相同的媒体内容进行编辑。具体的,按照第一编辑方式进行编辑是指对其他授权空间中相同的媒体内容执行与第一编辑方式相同的编辑操作,以使所有包含有相应媒体内容的授权空间,在经过编辑后均呈现一致的效果。
例如,第一编辑方式为在第一授权空间中的第一位置添加第一媒体对象;在第二授权空间同步第一编辑方式具体可以表现为在第二授权空间中的第二位置添加第一媒体对象;假设若将所述第一授权空间和所述第二空间进行重合(包括缩放后重合),则第一位置和第二位置是重合的,且第一媒体对象在两个空间的展示方式是一致的。
例如,第一编辑方式为在第一授权空间中第一位置删除第一媒体对象;在第二授权空间同步第一编辑方式具体可以表现为在第二授权空间中的第二位置删除第一媒体对象;假设若将所述第一授权空间和所述第二空间进行重合(包括缩放后重合),则第一位置和第二位置是重合的,第一授权空间和所述第二空间剩余的内容呈现一致。
例如,第一编辑方式为在第一授权空间中将第一位置的第一媒体对象更换为第二媒体对象;在第二授权空间同步第一编辑方式具体可以表现为将第二授权空间中第二位置的第一媒体对象更换为第二媒体对象;假设若将所述第一授权空间和所述第二空间进行重合(包括缩放后重合),则第一位置和第二位置是重合的,这两个空间中的第二媒体对象也会重合,展示方式是一致的。
例如,第一编辑方式为在第一授权空间中将第一媒体对象从第一位置移动到第二位置;在第二授权空间同步第一编辑方式具体可以表现为在第二授权空间中的第一媒体对象从第三位置移动到第四位置。假设若将所述第一授权空间和所述第二空间进行重合(包括缩放后重合),则第一位置和第三位置是重合的,第二位置和第四位置是重合的,且第一媒体对象在两个空间的展示方式是一致的。
以上仅作举例,不做限定。第一授权空间和第二授权空间可以大小形状完全相同;或者可以成一定的比例,此时,空间内的对象排布会相应地成相应比例。
其中,目标媒体内容可以为终端中存储的媒体内容,也可以为终端从网络上下载的媒体内容。
由于在目标场景的预览流中明确显示了第一用户标识对应的授权空间,因此,注册用户可以清晰的获悉自身的授权空间的边界,在这种情况下,用户在该授权空间中添加媒体内容,可以有效的避免添加的媒体内容侵占其他用户的授权空间,实现了媒体内容的精准添加,提高了添加效率。
可选地,在目标授权空间内添加所述目标媒体内容的实现过程可以为:当检测到针对所述目标媒体内容的拖动指令时,在所述拖动指令所指示的拖动终点位置处,添加所述目标媒体内容,其中,所述目标媒体内容中位于所述目标授权空间内的媒体内容和位于所述目标授权空间外的媒体内容的显示方式不同,或者,所述目标媒体内容中位于所述目标授权空间内的媒体内容可见,位于所述目标授权空间外的媒体内容不可见。
可选地,在目标授权空间内添加所述目标媒体内容之后,可以确定目标媒体内容与目标对象之间的目标相对位置关系,所述目标对象为所述目标场景对应的数字地图中包括的预设的图像或三维物体;向服务器发送所述第一用户标识、所述目标媒体内容、所述目标对象和所述目标相对位置关系,以使所述服务器根据所述目标媒体内容、所述目标对象和所述目标相对位置关系,对在预设数字地图中所述第一用户标识对应的其他授权空间进行内容更新。
也即,在目标授权空间内添加目标媒体内容之后,可以通过向终端发送目标媒体内容与目标对象的相对位置关系,来使得服务器可以根据该相对位置关系和目标对象在其他授权空间中自动添加该目标媒体内容,提高了媒体内容的添加效率。
可选地,目标媒体内容与第一特征的相对位置关系满足第一预设位置关系,第一特征为目标场景的预览流中包括的预设的图像或三维物体。也即,在本申请实施例中,放置于目标授权空间内的目标媒体内容与预览流中的第一特征之间满足预设的位置关系,这样,可以保证目标媒体内容和目标场景相适配。
可选地,根据所述第一用户标识和所述位姿获取n个授权空间的实现方式可以包括以下三种:
向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取所述n个授权空间;接收所述服务器发送的所述n个授权空间。或者,
向服务器发送所述第一用户标识、所述位姿和空间筛选条件,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间,并从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间;接收所述服务器发送的所述n个授权空间。或者,
向服务器发送所述第一用户标识和所述位姿,以使所述服务器根据所述第一用户标识和所述位姿获取m个授权空间;接收所述服务器发送的所述m个授权空间;从所述m个授权空间中获取满足所述空间筛选条件的n个授权空间。
上述三种方式均是在第一用户标识已存在对应的授权空间的情况下,获取第一用户标识对应的授权空间的实现方式。
可选地,如果第一用户标识不存在对应的授权空间,则终端可以通过以下方式来申请授权空间。示例性地,终端可以向服务器发送空间申请请求,所述空间申请请求用于向所述服务器申请授权空间,且所述空间申请请求携带所述第一用户标识和所述位姿、以及授权空间的需求,以使所述服务器根据所述位姿和所述授权空间的需求为所述第一用户标识分配对应的n个授权空间;接收服务器发送的授权响应,所述授权响应携带所述n个授权空间。
可选地,在所述目标场景的预览流中渲染所述n个授权空间的实现过程可以为:根据所述位姿,在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间,其中,所述预设显示形式包括但不限于预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
其中,预设显示形式还包括以明显的特征显示授权空间的边界,例如,以静态的实线或者是虚线来显示授权空间的边界,或者是以滚动或变化的虚线来显示授权空间的边界,本申请实施例对此不做限定。
可选地,在所述目标场景的预览流中渲染所述n个授权空间之后,如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配,对所述n个授权空间在所述数字地图中的位姿进行调整,以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;向服务器发送调整后的所述n个授权空间的位姿,以使所述服务器对所述n个授权空间在所述数字地图中的位姿进行更新。
也即,根据目标场景的预览流与目标授权空间之间的位姿偏差,可以对目标授权空间进行调整,以使三维地图中的位置和现实世界完全对应。这样,可以保证在该目标授权空间中添加的媒体内容的位置准确性,避免后当再次显示该媒体内容时出现位置错误甚至不能显示的问题。
可选地,在所述目标场景的预览流中渲染的所述n个授权空间与第二特征的相对位置关系满足第二预设位置关系,所述第二特征为所述目标场景对应的数字地图中包括的预设的图像或三维物体。
第六方面,提供了一种基于数字地图的多个授权空间的内容同步方法,所述方法应用于终端,所述方法包括:获取第一用户标识;根据所述第一用户标识确定第一场景;获取第一场景对应的第一数字地图,所述第一数字地图中包含有第一授权空间;其中,所述第一授权空间是所述第一场景对应的数字地图中所述第一用户标识对应的三维空间;所述第一场景对应的数字地图中包括目标对象;所述目标对象包括预设的图像或三维物体;所述第一数字地图包括全景图、点云图或网格图;显示所述第一数字地图和所述第一授权空间;所述第一数字地图中包括目标对象;所述目标对象包括预设的图像或三维物体;获取目标媒体内容;在所述第一授权空间中添加所述目标媒体内容;确定所述目标媒体内容与所述目标对象之间的目标相对位置关系;向服务器发送所述第一用户标识、所述目标媒体内容、所述目标对象和所述目标相对位置关系,以使所述服务器根据所述目标媒体内容、所述目标对象和所述目标相对位置关系对预设数字地图中所述第一用户标识对应的其他授权空间进行内容更新,其中,所述预设数字地图中包括所述目标对象。
在本申请实施例中,在第一场景对应的数字地图中的第一授权空间内添加目标媒体内容之后,可以将目标媒体内容、目标对象和目标媒体内容与目标对象之间的相对位置关系发送至服务器,服务器可以在同样包含有该目标对象的其他场景的数字地图中,根据该相对位置关系来将目标媒体内容添加至第一用户标识对应的其他授权空间中,实现了自动统一更新用户标识对应的各个授权空间中的媒体内容的效果,更新效率高。
可选地,根据所述第一用户标识获取第一场景对应的第一数字地图的实现过程可以为:向所述服务器发送所述第一用户标识,以使所述服务器根据所述第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内所述第一用户标识对应的多个授权空间;接收所述服务器发送的所述k个场景对应的数字地图和每个场景对应的数字地图内所述第一用户标识对应的多个授权空间;根据预设规则从所述k个场景中选择所述第一场景,获取所述第一场景对应的第一数字地图。
可选地,所述根据预设规则从所述k个场景中选择所述第一场景,包括:从所述k个场景中选择距离所述终端的位置最近的场景作为所述第一场景;或者,从所述k个场景中选择优先级最高的场景作为所述第一场景;或者,从所述k个场景中选择默认的场景作为所述第一场景。
可选地,所述根据所述第一用户标识确定第一场景的实现过程可以包括:向所述服务器发送所述第一用户标识和场景需求,以使所述服务器根据所述第一用户标识获取所述第一用户标识对应的k个场景,并从所述k个场景中获取满足所述场景需求的第一场景;接收所述服务器发送的所述第一场景。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
第七方面,提供了一种基于数字地图的多个授权空间的内容同步方法,所述方法包括:获取第一用户标识;获取终端发送的第一用户标识、目标对象、目标媒体内容以及所述目标媒体内容与所述目标对象之间的目标相对位置关系;所述目标对象包括预设的图像或三维物体;根据所述第一用户标识获取第二场景对应的第二数字地图,所述第二数字地图中包含第二授权空间;其中,所述第二授权空间是所述第一用户标识对应的三维空间;所述第二数字地图中包括所述目标对象;所述第二授权空间用于呈现媒体内容;在所述第二数字地图中确定所述目标对象的位置;根据所述目标对象的位置和所述目标相对位置关系在所述第二授权空间中添加所述目标媒体内容,以使当所述终端呈现所述第二数字地图并渲染所述第二授权空间时,所述第二授权空间中的所述目标媒体内容与所述第二数字地图中的目标对象之间的位置关系满足所述目标相对位置关系。
在本申请中,服务器可以获取终端发送的目标对象、目标媒体内容和目标媒体内容与目标对象之间的相对位置关系,之后,根据目标对象和目标相对位置关系在第二授权空间中添加目标媒体内容,也即,实现了自动统一更新用户标识对应的各个授权空间中的媒体内容的效果,更新效率高。
可选地,根据所述目标对象和所述目标相对位置关系在所述第二授权空间中添加所述目标媒体内容之后,如果所述目标媒体内容与所述第二授权空间不匹配,则对所述目标媒体内容进行调整,以使调整后的目标媒体内容与所述第二授权空间匹配。
在第二授权空间中添加的目标媒体内容可能与第二授权空间不适配,例如,可能会超出第二授权空间的范围,此种情况下,服务器可以对目标媒体内容的大小、形状等进行调整,以使目标媒体内容与第二授权空间适配。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
第八方面,提供了一种基于数字地图的多个授权空间的内容同步方法,所述方法应用于终端,所述方法包括获取第一用户标识;根据所述第一用户标识确定第一场景;获取所述第一场景对应的第一数字地图;所述第一数字地图中包含有第一授权空间;其中,所述第一授权空间是所述第一用户标识对应的三维空间;所述第一授权空间用于呈现媒体内容;显示所述第一数字地图、所述第一授权空间和所述第一授权空间内包括的第一媒体内容;按照第一编辑方式对所述第一媒体内容进行编辑;向服务器发送所述第一用户标识、所述第一媒体内容和所述第一编辑方式,以使所述服务器按照所述第一编辑方式对预设数字地图中所述第一用户标识对应的其他授权空间内的所述第一媒体内容进行编辑。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,对某个授权空间内的媒体内容进行编辑,并将该媒体内容和编辑方式发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找同样包含有该媒体内容的第一用户标识的授权空间,并根据接收到的编辑方式将相应授权空间内的媒体内容进行编辑,这样,服务器可以自动完成多个授权空间内相同媒体内容的编辑,提高了授权空间内媒体内容的编辑效率,保证了多个授权空间内媒体内容的效果一致性。
可选地,所述根据所述第一用户标识获取第一场景对应的第一数字地图,包括:向所述服务器发送所述第一用户标识,以使所述服务器根据所述第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内所述第一用户标识对应的多个授权空间;接收所述服务器发送的所述k个场景对应的数字地图和每个场景对应的数字地图内所述第一用户标识对应的多个授权空间;根据预设规则从所述k个场景中选择所述第一场景,获取所述第一场景对应的第一数字地图。
可选地,所述根据预设规则从所述k个场景中选择所述第一场景,包括:从所述k个场景中选择距离所述终端的位置最近的场景作为所述第一场景;或者,从所述k个场景中选择优先级最高的场景作为所述第一场景;或者,从所述k个场景中选择默认的场景作为所述第一场景。
可选地,所述根据所述第一用户标识确定第一场景的实现过程包括:向所述服务器发送所述第一用户标识和场景需求,以使所述服务器根据所述第一用户标识获取所述第一用户标识对应的k个场景,并从所述k个场景中获取满足所述场景需求的第一场景;接收所述服务器发送的所述第一场景。
可选地,所述第一编辑方式包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
第九方面,提供了一种基于数字地图的多个授权空间的内容同步方法,所述方法包括获取终端发送的第一用户标识、第一媒体内容和第一编辑方式,所述第一媒体内容是第一授权空间内包括的媒体内容,所述第一授权空间为第一场景对应的第一数字地图中所述第一用户标识对应的三维空间,所述第一数字地图包括全景图、点云图或网格模型;根据所述第一用户标识获取第二场景对应的第二数字地图,所述第二数字地图中包含第二授权空间,所述第二授权空间是所述第二场景对应的数字地图中所述第一用户标识对应的三维空间;所述第二授权空间包括所述第一媒体内容;按照所述第一编辑方式对所述第二授权空间中包括的所述第一媒体内容进行编辑。
在本申请实施例中,服务器在接收到第一媒体内容和第一编辑方式之后,可以在其他场景对应的数字地图中包括的第一用户标识对应的授权空间中寻找与第一媒体内容,并根据第一编辑方式来对查找到的第一媒体内容进行编辑,从而实现多个授权空间中相同媒体内容的同步编辑,这样,服务器可以自动完成多个授权空间内的媒体内容的编辑,提高了编辑效率,且保证了多个授权空间内媒体内容的效果一致性。
可选地,所述按照所述第一编辑方式对所述第二授权空间中包括的所述第一媒体内容进行编辑之后,还包括:
如果编辑后的媒体内容与所述第二授权空间不匹配,则对所述编辑后的媒体内容进行调整,以使调整后的媒体内容与所述第二授权空间匹配。
可选地,所述第一编辑方式包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。
可选地,在数字地图中,不同用户标识对应的授权空间不同。
第十方面,提供了一种基于数字地图的媒体内容分享方法,所述方法应用于第二终端,所述方法包括:获取第一终端发送的目标场景的视频,所述目标场景的视频携带所述第一终端拍摄所述目标场景的视频时的目标位姿;根据所述目标位姿获取待显示的目标媒体内容;播放所述目标场景的视频,并在播放所述目标场景的视频的同时渲染所述目标媒体内容。
在本申请实施例中,第二终端可以接收第一终端分享的目标场景的视频,并根据该视频中包含的目标位姿从服务器中获取相应位置上已添加的媒体内容进行显示。这样,各个终端之间即可以通过视频分享的方法来实现对已添加至数字地图中的媒体内容的分享,便于媒体内容的传播。
可选地,所述根据所述目标位姿获取待显示的目标媒体内容的实现过程可以包括:向服务器发送所述目标位姿,以使所述服务器根据所述目标位姿获取所述目标媒体内容;接收所述服务器发送的所述目标媒体内容。
第十一方面,提供了一种基于数字地图的授权空间显示装置,所述基于数字地图的授权空间显示装置具有实现上述第一方面中基于数字地图的授权空间显示方法行为的功能。所述基于数字地图的授权空间显示装置包括至少一个模块,该至少一个模块用于实现上述第一方面所提供的基于数字地图的授权空间显示方法。
第十二方面,提供了一种基于数字地图的多个授权空间的内容同步装置,所述基于数字地图的多个授权空间的内容同步装置具有实现上述第二方面或第四方面中基于数字地图的多个授权空间的内容同步方法行为的功能。所述基于数字地图的多个授权空间的内容同步装置包括至少一个模块,该至少一个模块用于实现上述第二方面所提供的基于数字地图的多个授权空间的内容同步方法。
第十三方面,提供了一种基于数字地图的多个授权空间的内容同步装置,所述基于数字地图的多个授权空间的内容同步装置具有实现上述第三方面或第五方面中基于数字地图的多个授权空间的内容同步方法行为的功能。所述基于数字地图的多个授权空间的内容同步装置包括至少一个模块,该至少一个模块用于实现上述第三方面所提供的基于数字地图的多个授权空间的内容同步方法。
第十四方面,提供了一种基于数字地图的媒体内容分享装置,所述基于数字地图的媒体内容分享装置具有实现上述第六方面中基于数字地图的媒体内容分享方法行为的功能。所述基于数字地图的媒体内容分享装置包括至少一个模块,该至少一个模块用于实现上述第四方面所提供的基于数字地图的媒体内容分享方法。
第十五方面,提供了一种基于数字地图的授权空间显示装置,所述基于数字地图的授权空间显示装置的结构中包括处理器、存储器、摄像头、收发器和通信总线,所述处理器、所述存储器、所述摄像头和所述收发器均通过通信总线相连,所述存储器用于存储支持基于数字地图的授权空间显示装置执行上述第一方面所提供的基于数字地图的授权空间显示方法的程序,以及存储用于实现上述第一方面所提供的基于数字地图的授权空间显示方法所涉及的数据。所述摄像头用于采集视频流,所述收发器用于接收或发送数据,所述处理器通过执行所述存储器中存储的程序来控制所述摄像头、所述收发器实现上述第一方面所述的基于数字地图的多个授权空间的内容同步方法。
第十六方面,提供了一种基于数字地图的多个授权空间的内容同步装置,所述基于数字地图的多个授权空间的内容同步装置的结构中包括处理器、存储器、摄像头、收发器和通信总线,所述处理器、所述存储器、所述摄像头和所述收发器均通过通信总线相连,所述存储器用于存储支持基于数字地图的多个授权空间的内容同步装置执行上述第二方面或第四方面所提供的基于数字地图的多个授权空间的内容同步方法的程序,以及存储用于实现上述第二方面或第四方面所提供的基于数字地图的多个授权空间的内容同步方法所涉及的数据。所述摄像头用于采集视频流,所述收发器用于接收或发送数据,所述处理器通过执行所述存储器中存储的程序来控制所述摄像头、所述收发器实现上述第二方面或第四方面所述的基于数字地图的多个授权空间的内容同步方法。
第十七方面,提供了一种基于数字地图的多个授权空间的内容同步装置,所述基于数字地图的多个授权空间的内容同步装置的结构中包括处理器、存储器、收发器和通信总线,所述处理器、所述存储器和所述收发器均通过通信总线相连,述存储器用于存储支持基于数字地图的多个授权空间的内容同步装置执行上述第三方面或第五方面所提供的基于数字地图的多个授权空间的内容同步方法的程序,以及存储用于实现上述第三方面或第五方面所提供的基于数字地图的多个授权空间的内容同步方法所涉及的数据。所述收发器用于接收或发送数据,所述处理器通过执行所述存储器中存储的程序来控制所述收发器实现上述第三方面或第五方面所述的基于数字地图的多个授权空间的内容同步方法。
第十八方面,提供了一种基于数字地图的媒体内容分享装置,所述基于数字地图的媒体内容分享装置的结构中包括处理器、存储器、摄像头、收发器和通信总线,所述处理器、所述存储器、所述摄像头和所述收发器均通过通信总线相连,所述存储器用于存储支持基于数字地图的媒体内容分享装置执行上述第六方面所提供的基于数字地图的媒体内容分享方法的程序,以及存储用于实现上述第六方面所提供的基于数字地图的媒体内容分享方法所涉及的数据。所述摄像头用于采集视频流,所述收发器用于接收或发送数据,所述处理器通过执行所述存储器中存储的程序来控制所述摄像头、所述收发器实现上述第六方面所提供的基于数字地图的媒体内容分享方法。
第十九方面,提供了一种注册虚拟空间的方法,方法包括:终端基于第一用户标识登录预设应用;所述预设应用用于基于所述终端的拍摄场景为所述第一用户标识在服务器注册具有编辑虚拟物体权限的虚拟空间;呈现第一界面;所述第一界面中包含有注册虚拟空间的选项;响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;获取目标几何体;将所述第一用户标识、所述预览流和所述目标几何体发送给服务器;所述预览流和所述目标几何体用于确定所述第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述目标几何体用于表征所述目标虚拟空间的形态。
第二十方面,提供了一种注册虚拟空间的装置,装置包括:登录模块,用于基于第一用户标识登录预设应用;所述预设应用用于基于所述终端的拍摄场景为所述第一用户标识在服务器注册具有编辑虚拟物体权限的虚拟空间;显示模块,用于呈现第一界面;所述第一界面中包含有注册虚拟空间的选项;响应模块,用于响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;获取模块,用于获取目标几何体;发送模块,用于将所述第一用户标识、所述预览流和所述目标几何体发送给服务器;所述预览流和所述目标几何体用于确定所述第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述目标几何体用于表征所述目标虚拟空间的形态。
根据第十九方面或者第二十方面,在一种可能的设计中,在获取目标几何体之后,在所述预览流中渲染或显示所述目标几何体。该步骤可以由显示模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,获取目标几何体包括:获取所述预设应用中默认的几何体,将所述默认的几何体作为所述目标几何体;或者,获取用户自定义的几何体作为所述目标几何体;或者,根据用户在几何体的素材库中的选择指令,获取用户选择的几何体作为所述目标几何体;或者,获取所述服务器发送的适配第一场景的目标几何体。该步骤可以由获取模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,在所述将所述第一用户标识、所述预览流和所述目标几何体发送给服务器之后,接收所述服务器发送的反馈指令;所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间,或者,无法成功注册所述目标虚拟空间。该步骤可以由装置中的可选模块,接收模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,当所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间时,方法还包括:在当前显示界面中提示用户需要更新所述目标几何体的形状;或者,在当前显示界面中提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,在当前显示界面中提示用户重新进行虚拟空间的申请。该步骤可以由显示模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,当所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间时,提示用户所述目标虚拟空间对于所述第一用户标识的有效时段;其中,所述有效时段用于指示所述第一用户标识在所述有效时段内在所述目标虚拟空间中具有编辑虚拟内容的权限。该步骤可以由显示模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,当反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间之后,在所述第一场景的预览流中显示或渲染所述目标虚拟空间;在所述预览流中,所述目标虚拟空间与所述第一场景的相对位置保持不变。该步骤可以由显示模块执行。
根据第十九方面或者第二十方面,在一种可能的设计中,在所述目标虚拟空间中设置目标虚拟内容;所述目标虚拟内容不超过所述目标虚拟空间的边界。目标虚拟内容的设置可以由设置模块执行。进一步地,将所述目标虚拟内容和所述虚拟内容的位姿发送给所述服务器,所述目标虚拟内容和所述虚拟内容的位姿用于对所述第一场景进行渲染;该步骤可以由发送模块执行。
第二十一方面,提供了一种注册虚拟空间的方法,所述方法包括:接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的;根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。
第二十二方面,提供了一种注册虚拟空间的装置,所述装置包括:接收模块,用于接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的;确定模块,用于根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。
根据第二十一方面或者第二十二方面,在一种可能的设计中,根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间包括:根据所述第一场景的预览流与所述第一虚拟空间获取所述终端在所述第一虚拟空间中的第一位姿信息;根据所述目标几何体与所述第一虚拟空间获取所述目标几何体在所述第一虚拟空间中的第二位姿信息;根据所述第一位姿信息、所述第二位姿信息、所述目标几何体确定所述目标虚拟空间。该步骤可以由显确定模块执行。在一种可能的设计中,所述第一虚拟空间是在终端本地存储的或者是在服务器存储的;所述第一位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的;所述第二位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的。
根据第二十一方面或者第二十二方面,在一种可能的设计中,当所述目标虚拟空间满足预设管理规则时,所述方法还包括:所述服务器向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。该步骤可以由装置可选的发送模块执行。
根据第二十一方面或者第二十二方面,在一种可能的设计中,当所述目标虚拟空间不能满足预设管理规则时,所述方法还包括:所述服务器向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。该步骤可以由装置可选的发送模块执行。
根据第二十一方面或者第二十二方面,在一种可能的设计中,当所述目标虚拟空间不能满足服务器中的预设管理规则时,所述服务器向所述终端发送提示信息;所述提示信息用于提示用户需要更新所述目标几何体的形状;或者,提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,提示用户重新进行虚拟空间的申请。该步骤可以由装置可选的发送模块执行。
根据第二十一方面或者第二十二方面,在一种可能的设计中,方法还包括:获取目标虚拟内容;获取所述目标虚拟内容的位姿;根据所述目标虚拟内容的位姿将所述目标虚拟内容设置在所述目标虚拟空间中;其中,所述目标虚拟内容不超过所述目标虚拟空间的边界。该步骤可以由装置可选的设置模块执行。所述目标虚拟内容或所述目标虚拟内容的位姿是由所述终端确定的,或者由所述服务器确定的。第二十三方面,提供了一种数字空间管理方法,终端接收用户的第一操作;响应所述第一操作,采集目标场景的预览流;获取第一用户标识;向服务器发送所述第一用户标识、所述目标场景的预览流和授权空间请求;接收所述服务器发送的n个授权空间;其中,所述n个授权空间是所述服务器根据所述第一用户标识、所述目标场景的预览流和所述授权空间请求确定得到的;所述n个授权空间是第一虚拟场景中所述第一用户标识对应的n个互不交叠的可用于渲染的三维空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;所述目标数字地图对应的真实场景包括所述目标场景;所述n为大于或等于1的整数;呈现所述目标场景的预览流,并在所述目标场景的预览流中渲染所述n个授权空间;所述n个授权空间用于提示所述第一虚拟场景中当前允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间在同一时段不交叠。
根据第二十三方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间之后,所述方法还包括:获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;接收并响应第二操作,在渲染的目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间;在所述目标场景的预览流中渲染所述目标媒体内容。
根据第二十三方面,在一种可能的设计中,所述第二操作包括拖动,所述响应第二操作,在目标授权空间内添加所述目标媒体内容,包括:选中所述目标媒体内容,放置在所述拖动指令所指示的拖动终点位置处;所述终点位置在所述目标授权空间中对应一个三维坐标点;并在放置的位置上按照第一姿态调整所述目标媒体内容;所述第一姿态在所述目标授权空间中对应一个三自由度的旋转;其中,所述目标媒体内容中位于所述目标授权空间内的部分和位于所述目标授权空间外的部分的显示方式不同;或者,所述目标媒体内容中位于所述目标授权空间内的部分可见,位于所述目标授权空间外的部分不可见。
根据第二十三方面,在一种可能的设计中,所述方法还包括:确定所述目标媒体内容在所述目标数字地图中的目标位姿;向所述服务器发送第一更新指令、所述目标媒体内容与所述目标位姿;其中,所述第一更新指令、所述目标媒体内容与所述目标位姿用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
根据第二十三方面,在一种可能的设计中,所述确定所述目标媒体内容在所述目标数字地图中的目标位姿还包括:获取所述终端在所述目标数字地图中的第一位姿;获取所述目标媒体内容与所述第一位姿之间的第一相对位姿;根据所述第一位姿和所述第一相对位姿获取所述目标位姿。
根据第二十三方面,在一种可能的设计中,所述方法还包括:向所述服务器发送所述空间筛选条件;其中,所述n个授权空间是所述服务器根据所述第一用户标识和所述目标场景的预览流确定得到的具体包括:所述n个授权空间为所述服务器根据所述第一用户标识、所述目标场景的预览流和所述空间筛选条件确定得到的。
根据第二十三方面,在一种可能的设计中,所述接收所述服务器发送的n个授权空间包括:向所述服务器发送空间注册请求,所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中的授权空间,且所述空间注册请求携带了在所述数字地图中申请授权空间的需求参数;接收所述服务器发送的所述n个授权空间;其中,所述n个授权空间为所述服务器根据所述授权空间的需求在所述第一虚拟场景中为所述第一用户标识分配的。
根据第二十三方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间,包括:在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间;其中,所述预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
根据第二十三方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间之后,还包括:如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配;接收并响应第三操作,对所述n个授权空间在所述目标数字地图中的位姿进行调整;以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;向服务器发送调整后的所述n个授权空间的位姿;所述调整后的所述n个授权空间的位姿用于对所述服务器中存储的所述n个授权空间在所述目标数字地图中的位姿进行更新。
根据第二十三方面,在一种可能的设计中,所述方法还包括:将所述目标媒体内容的属性标记为可渲染;将所述目标媒体内容的属性发送给所述服务器。
根据第二十三方面,在一种可能的设计中,所述在所述目标场景的预览流中渲染所述n个授权空间之后,所述方法还包括:在目标授权空间内已渲染的媒体内容中确定目标媒体内容;所述目标授权空间为所述n个授权空间中的任意一个授权空间;接收并响应第二操作,在渲染的目标授权空间内删除所述目标媒体内容;向所述服务器发送所述目标媒体内容和删除所述目标媒体内容的指令;所述目标媒体内容和删除所述目标媒体内容的指令用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
第二十四方面,提供了一种基于数字地图的授权空间管理方法,方法包括:接收终端发送的第一用户标识、目标场景的预览流和授权空间请求;根据所述目标场景的预览流在目标数字地图中获取第一位姿;所述目标数字地图对应的真实世界包括所述目标场景;根据所述第一位姿在所述目标数字地图中确定第一虚拟空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间;所述n个授权空间为互不交叠的可用于渲染的三维空间;所述n个授权空间用于提示所述第一虚拟场景中允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间不交叠;响应所述授权空间请求,向所述终端发送所述n个授权空间;其中,所述n个授权空间用于对所述目标场景的预览流进行渲染。
根据第二十四方面,在一种可能的设计中,方法还包括:获取所述目标数字地图中的目标位姿;获取目标媒体内容;接收终端发送的第一更新指令;响应所述第一更新指令,在所述目标数字地图中,按照所述目标位姿添加所述目标媒体内容。
根据第二十四方面,在一种可能的设计中,方法还包括:获取目标对象;所述目标对象为预设的图像或三维物体,所述目标数字地图中包括所述目标对象;获取所述目标媒体内容与所述目标对象在所述目标数字地图中的第二相对位姿关系;接收终端发送的第二更新指令;响应所述第二更新指令,根据所述目标对象和所述第二相对位姿关系对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的其他授权空间进行内容更新;其中,所述第一用户标识对应的其他授权空间在所述目标数字地图的预设范围场景中包括所述目标对象。
根据第二十四方面,在一种可能的设计中,根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间包括:接收所述终端发送的所述空间筛选条件;根据所述第一用户标识、所述目标场景的预览流在所述第一虚拟空间中查找出m个授权空间;根据所述空间筛选条件从所述m个授权空间中确定出符合条件的n个授权空间。
根据第二十四方面,在一种可能的设计中,根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间包括:接收终端发送的空间注册请求;所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中注册授权空间,且所述空间注册请求携带了在所述数字地图中注册授权空间的需求参数;响应所述空间注册请求,根据所述申请授权空间的需求参数和所述第一标识在所述第一虚拟场景中分配n个授权空间。
根据第二十四方面,在一种可能的设计中,方法还包括:获取目标媒体内容;所述目标媒体内容为所述目标数字地图中已渲染的媒体内容中的一个;获取所述目标媒体内容在所述目标数字地图中的目标位姿;接收终端发送的删除所述目标媒体内容的指令;响应所述删除所述目标媒体内容的指令,在所述目标数字地图中所述目标位姿处删除所述目标媒体内容。
第二十五方面,提供了一种基于数字地图的媒体内容分享方法,所述方法应用于第二终端,方法包括:接收第一终端发送的目标场景的图像;所述目标场景的图像携带目标位姿;其中,所述目标位姿为所述第一终端在拍摄所述目标场景的图像时在目标数字地图中对应的位姿,所述目标数字地图对应的真实世界包括所述目标场景;接收并响应用户的第一操作,将所述目标位姿和内容请求发送给服务器;接收所述服务器发送的目标媒体内容;其中,所述目标媒体内容为所述服务器根据所述目标位姿和内容请求得到的,所述目标内容包括所述目标场景在所述目标数字地图中对应的模型空间中的可渲染的媒体内容;所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;呈现所述目标场景的图像,并在所述目标场景的图像中渲染所述目标媒体内容。
第二十六方面,提供了一种基于数字地图的多个授权空间的内容同步方法;方法应用于终端,所述方法包括:获取第一用户标识;接收并响应用户的第一操作,根据所述第一用户标识在目标数字地图中确定第一虚拟场景;所述目标数字地图对应的真实场景包括所述第一虚拟场景对应的真实场景;显示所述第一虚拟场景;其中,所述第一虚拟场景中包含有所述第一用户标识对应的第一授权空间;所述第一授权空间用于提示当前允许进行媒体内容编辑的空间范围;确定目标对象;所述目标对象为预设的图像或三维物体;所述第一虚拟场景中包括所述目标对象;接收并响应用户的第二操作,在第一位置处进行第一编辑操作;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;获取所述第一位置在所述目标数字地图中对应的第一位姿;获取所述目标对象在所述目标数字地图中对应的第二位姿;确定所述第一位姿与所述第二位姿之间的目标相对位姿;向服务器发送目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿;其中,所述目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;所述第二虚拟场景中包括所述目标对象。
根据第二十六方面,在一种可能的设计中,当所述第一编辑操作为增加内容时,所述方法还包括:获取待添加媒体内容;将所述待添加媒体内容发送给所述服务器;所述待添加媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;当所述第一编辑操作为删减内容时,所述方法还包括:获取待删减媒体内容;将所述待删减媒体内容发送给所述服务器;所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;当所述第一编辑操作为更换内容时,所述方法还包括:获取待删减媒体内容;获取待添加媒体内容;将所述待添加媒体内容和所述待删减媒体内容发送给所述服务器;所述待添加媒体内容和所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新。
第二十七方面,提供了一种基于数字地图的多个授权空间的内容同步方法,其特征在于,所述方法包括:获取终端发送的第一用户标识、第一编辑操作、目标对象、目标相对位姿和目标更新指令;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;所述目标对象为预设的不可编辑的图像或三维物体;根据所述第一用户标识在目标数字地图中确定第二虚拟场景;其中,所述第二虚拟场景中包括所述目标对象;所述目标数字地图为服务器预先存储的;确定所述第二虚拟场景中的目标对象在所述目标数字地图中的第三位姿;根据所述第三位姿和所述目标相对位姿在所述目标数字地图中确定出第四位姿;响应所述目标更新指令,在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作,以更新所述第二虚拟场景。
根据第二十七方面,在一种可能的设计中,当所述第一编辑操作为增加内容时,所述方法还包括:获取终端发送的待添加媒体内容;所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容;当所述第一编辑操作为删减内容时,所述方法还包括:获取待删减媒体内容;所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;当所述第一编辑操作为更换内容时,所述方法还包括:获取待删减媒体内容;获取待添加媒体内容;所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容。
第二十八方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任意可能的设计方法。
第二十九方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任意一种可能的设计方法。
本申请提供的技术方案带来的有益效果至少包括:
开发者可以“可见即所得”地申请虚拟空间,尤其是“合法的”“可授权”的虚拟空间,在有编辑权限的虚拟空间中编辑虚拟内容,使得服务器根据开发者在终端上的设计进行同步,使得消费者终端在扫描到现实场景进行增强或渲染时,能够得到开发者预期设计的内容效果。
终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,在某个授权空间内添加目标媒体内容,确定目标媒体内容与目标对象之间的相对位置关系,并将该相对位置关系和目标对象、目标媒体内容发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找与目标对象匹配的特征,并根据相对位置关系来将该目标媒体内容同步至第一用户标识对应的其他授权空间,这样,服务器可以自动完成多个授权空间内的媒体内容的添加,提高了添加效率,保证了多个授权空间内媒体内容的效果一致性,且能够保证添加的精准性。
附图说明
图1是本申请实施例提供的一种系统架构图;
图2是本申请实施例提供的一种终端的软件模块框图;
图3是本申请实施例提供的一种服务器的软件模块框图;
图4是本申请实施例提供的一种电子设备的结构示意图;
图5是本申请实施例提供的一种电子设备的软件结构框图;
图6是本申请实施例提供的一种服务器的结构示意图;
图7是本申请实施例提供的一种基于数字地图的授权空间显示方法流程图;
图8是本申请实施例示出的一种目标场景的预览流和目标授权空间的显示示意图;
图9是本申请实施例示出的一种授权空间与目标场景的预览流存在位姿偏差的示意图;
图10是本申请实施例示出的一种显示媒体内容类型选项的示意图;
图11是本申请实施例示出的一种显示目标媒体内容的示意图;
图12是本申请实施例示出的一种基于数字地图的多个授权空间的内容同步方法流程图;
图13是本申请实施例提供的一种用户与终端进行交互以选择第一场景的示意图;
图14是本申请实施例提供的一种用户与终端进行交互以选择第一授权空间的示意图;
图15是本申请实施例示出的一种在多个授权空间中同步目标媒体内容的示意图;
图16是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步方法流程图;
图17是本申请实施例提供的又一种基于数字地图的多个授权空间的内容同步方法流程图;
图18是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步方法流程图;
图19是本申请实施例提供的一种编辑选项的示意图;
图20是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步方法流程图;
图21是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步方法流程图;
图22是本申请实施例示出的一种显示预置空间,并对预置空间进行设置的示意图;
图23是本申请实施例提供的一种在目标场景的预览流中显示预先分割的空间区块的示意图;
图24是本申请实施例示出的一种用户授权空间与建筑物所在授权空间进行绑定的示意图;
图25是本申请实施例提供的一种基于数字地图的媒体内容分享方法流程图;
图26是本申请实施例提供的一种在视频播放页面上显示媒体内容显示开关选项的示意图;
图27是本申请实施例提供的另一种基于数字地图的媒体内容分享方法流程图;
图28是本申请实施例提供的一种基于数字地图的授权空间显示装置的结构示意图;
图29是本申请实施例提供的一种基于数字地图的多个授权空间的内容同步装置的结构示意图;
图30是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步装置的结构示意图;
图31是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步装置的结构示意图;
图32是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步装置的结构示意图;
图33是申请实施例提供的一种基于数字地图的媒体内容分享装置的结构示意图;
图34是申请实施例提供的一种注册虚拟空间的方法流程图;
图35,36,…,48是申请实施例提供的一种可能的虚拟空间注册过程中的界面图;
图49是申请实施例提供的另一种注册虚拟空间的方法流程图;
图50是申请实施例提供的一种注册虚拟空间的装置结构示意图
图51是申请实施例提供的另一种注册虚拟空间的装置结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
应理解,本申请实施例提及“第一”、“第二”等序数词,或者“目标”等类似修饰词,是用于对多个对象进行区分,而不用于限定对象的大小、内容、顺序、时序、优先级或者重要程度等。
在对本申请实施例进行详细的解释说明之前,先对本申请实施例涉及的应用场景进行介绍。
以现实世界地理信息为基础,采用AR或VR等技术构建的数字地图(也可以理解为一种数字空间,或一种虚拟空间),对现实世界的描述较为直观,可以为人们的出行提供极大的便利。其中,数字地图可以包括全景图、点云图和网格模型等。其中,在本申请实施例中,网格模型也可以称为网格图。现实世界中的建筑物、地块等可以立体的呈现在数字地图中对应的虚拟空间中。在这种情况下,用户可能需要数字维地图的虚拟空间中呈现的建筑物或地块等对应的空间内展示媒体内容。例如,假设现实世界中存在某个商业品牌的一家或多家门店,当门店中有产品或服务需要进行宣传时,用户即可以这些门店对应的数字地图内申请授权空间(即有权限编辑虚拟内容的虚拟空间),进而在这些授权空间内添加相应的视频、动画、或图片等用于进行信息推荐的媒体内容。再例如,对于现实世界中的某个建筑物,用户想要对数字地图中呈现的该建筑物进行标识,也可以在数字地图中该建筑物所在的位置上添加图片或文字等媒体内容。基于此,本申请实施例提供了一种基于数字地图的授权空间的显示方法,可以用于注册用户实时查看自身的授权空间,并在该授权空间内添加媒体内容。除此之外,本申请实施例还提供了一种基于数字地图的多个授权空间的内容同步方法,可以用于注册用户在多个授权空间内批量添加媒体内容。另外,本申请实施例还提供了一种基于数字地图的媒体内容分享方法,可以使得消费用户通过其他消费用户分享的视频来获取并观看相应地授权空间内的媒体内容。
下面是本申请实施例中给出的两种可能的场景。
第一种场景,假设某手机品牌在城市A中有100家门店,当前有新品手机上市,需要进行宣传,此时,用户希望在门店招牌附件呈现图片、文字、视频、动画、3D模型等AR内容。在这种情况下,用户即可以通过本申请实施例提供的内容同步方法将要添加的AR内容自动同步添加至100家门店,无需用户手动操作,提高了添加效率。
第二种场景,假设某个精品店的用户希望自己能够实时编辑并看到自己添加的AR内容的宣传效果,此时,用户可以手持终端位于自己的精品店所处的环境中,终端可以通过本申请实施例提供的授权空间显示方法实时显示授权空间,用户可以通过与终端交互实时在该授权空间内添加媒体内容,并查看自身添加的媒体内容的效果。
接下来对本申请实施例涉及的系统架构进行介绍。
图1是本申请实施例提供的媒体内容添加方法所涉及的系统架构图。如图1中所示,该系统中包括终端101和服务器102。其中,终端101和服务器102可以通过有线网络或者是无线网络进行通信。
需要说明的是,终端101可以对现实世界进行图像采集,并实时显示采集到的现场图像。另外,终端101还可以根据当前用户的用户标识,从服务器102中获取当前用户在数字地图中的授权空间的空间信息,之后,在用户界面上显示该授权空间,进而根据本申请实施例的提供的媒体内容添加方法在该授权空间中添加媒体内容。若该授权空间中存在已添加的媒体内容,终端101还可以从服务器中获取已添加的媒体内容,并通过AR或VR或混合现实(mixed reality,MR)技术在该授权空间内显示该媒体内容。其中,若当前用户在数字地图中不存在授权空间,则终端101还可以通过本申请实施例提供的相关实现方式,根据用户操作在数字地图中申请授权空间。
服务器102中存储有各个用户在数字地图中拥有的授权空间的空间信息。当接收到终端101发送的用户标识时,服务器102可以根据该用户标识获取到该用户标识所标识的用户所拥有的授权空间的空间信息。另外,服务器102中还存储有已添加至各个授权空间中的媒体内容以及媒体内容的位置、姿态等信息。这样,当服务器102接收到终端101发送的定位信息时,如果该定位信息所指示的位置处存在该终端101的用户的授权空间,且授权空间中存在已添加的媒体内容,则服务器102可以该定位信息所指示的位置处的授权空间和空间中已添加的媒体内容等信息发送至终端101,以便终端101在用户界面上通过AR或VR技术显示该授权空间以及相应地媒体内容。
其中,终端101可以为手机、平板、近眼显示设备等终端设备,服务器102可以为一台单独的服务器,也可以为一个服务器集群。当服务器102为一个服务器集群时,该服务器集群中可以包括多个服务节点,每个服务节点可以用于实现上述不同的功能。例如,该服务器集群中可以包括媒体内容服务节点、数字地图服务节点以及边缘服务节点。其中,边缘服务节点可以用于接收终端101的请求并向终端101反馈相应信息。媒体内容服务节点可以用于存储已添加至数字地图中的媒体内容的相关信息。数字地图服务节点可以用于存储数字地图的相关信息,例如,数字地图中的各个授权空间的空间信息、数字地图的地图数据等信息。
示例性地,参见图2,终端101可以包括显示模块1011、用户界面模块1012、授权空间加载模块1013、授权空间呈现模块1014、媒体内容添加模块1015、定位和匹配模块1016。
其中,显示模块1011可以用于显示终端101实时采集的现场图像,并且可以通过AR或VR技术显示数字地图中已添加的媒体内容。用户界面模块1012用于呈现用户界面,并通过用户界面与用户进行交互。授权空间加载模块1013用于加载获取到的数字地图中的授权空间的空间信息。授权空间呈现模块1014用于根据授权空间的空间信息进行授权空间的可视化呈现。媒体内容添加模块1015用于将媒体内容添加至数字地图中。定位和匹配模块1016用于获取终端101当前的定位信息和姿态信息,另外,该定位和匹配模块1016还用于对显示的现场图像和数字地图进行匹配。
示例性地,参见图3,服务器102可以包括授权空间管理模块1021、媒体内容管理模块1022、定位管理模块1023以及存储模块1024。
其中,授权空间管理模块1021用于对终端101发送的申请授权空间的请求进行处理,并且对各个用户拥有的授权空间进行管理。媒体内容管理模块1022用于对添加至数字地图中的媒体内容进行管理。定位管理模块1023用于对终端的定位请求进行响应。存储模块1024用于存储上述各个模块所需的数据等信息。
图4示出了电子设备400的结构示意图。本申请实施例中的涉及的终端的功能均可以但不限于通过该电子设备来实现。
电子设备400可以包括处理器410,外部存储器接口420,内部存储器421,通用串行总线(universal serial bus,USB)接口430,充电管理模块440,电源管理模块441,电池442,天线1,天线2,移动通信模块450,无线通信模块460,音频模块470,扬声器470A,受话器470B,麦克风470C,耳机接口470D,传感器模块480,按键490,马达491,指示器492,摄像头493,显示屏494,以及用户标识模块(subscriber identification module,SIM)卡接口495等。其中传感器模块480可以包括压力传感器480A,陀螺仪传感器480B,气压传感器480C,磁传感器480D,加速度传感器480E,距离传感器480F,接近光传感器480G,指纹传感器480H,温度传感器480J,触摸传感器480K,环境光传感器480L,骨传导传感器480M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备400的具体限定。在本申请另一些实施例中,电子设备400可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器410可以包括一个或多个处理单元,例如:处理器410可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器410中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器410中的存储器为高速缓冲存储器。该存储器可以保存处理器410刚用过或循环使用的指令或数据。如果处理器410需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器410的等待时间,因而提高了系统的效率。
在一些实施例中,处理器410可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器410可以包含多组I2C总线。处理器410可以通过不同的I2C总线接口分别耦合触摸传感器480K,充电器,闪光灯,摄像头493等。例如:处理器410可以通过I2C接口耦合触摸传感器480K,使处理器410与触摸传感器480K通过I2C总线接口通信,实现电子设备400的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器410可以包含多组I2S总线。处理器410可以通过I2S总线与音频模块470耦合,实现处理器410与音频模块470之间的通信。在一些实施例中,音频模块470可以通过I2S接口向无线通信模块460传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块470与无线通信模块460可以通过PCM总线接口耦合。在一些实施例中,音频模块470也可以通过PCM接口向无线通信模块460传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器410与无线通信模块460。例如:处理器410通过UART接口与无线通信模块460中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块470可以通过UART接口向无线通信模块460传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器410与显示屏494,摄像头493等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器410和摄像头493通过CSI接口通信,实现电子设备400的拍摄功能。处理器410和显示屏494通过DSI接口通信,实现电子设备400的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器410与摄像头493,显示屏494,无线通信模块460,音频模块470,传感器模块480等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口430是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口430可以用于连接充电器为电子设备400充电,也可以用于电子设备400与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备400的结构限定。在本申请另一些实施例中,电子设备400也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块440用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块440可以通过USB接口430接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块440可以通过电子设备400的无线充电线圈接收无线充电输入。充电管理模块440为电池442充电的同时,还可以通过电源管理模块441为电子设备供电。
电源管理模块441用于连接电池442,充电管理模块440与处理器410。电源管理模块441接收电池442和/或充电管理模块440的输入,为处理器410,内部存储器421,显示屏494,摄像头493,和无线通信模块460等供电。电源管理模块441还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块441也可以设置于处理器410中。在另一些实施例中,电源管理模块441和充电管理模块440也可以设置于同一个器件中。
电子设备400的无线通信功能可以通过天线1,天线2,移动通信模块450,无线通信模块460,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备400中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块450可以提供应用在电子设备400上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块450可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块450可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块450还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块450的至少部分功能模块可以被设置于处理器410中。在一些实施例中,移动通信模块450的至少部分功能模块可以与处理器410的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器470A,受话器470B等)输出声音信号,或通过显示屏494显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器410,与移动通信模块450或其他功能模块设置在同一个器件中。
无线通信模块460可以提供应用在电子设备400上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块460可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块460经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器410。无线通信模块460还可以从处理器410接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备400的天线1和移动通信模块450耦合,天线2和无线通信模块460耦合,使得电子设备400可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备400通过GPU,显示屏494,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏494和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器410可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏494用于显示图像,视频等。显示屏494包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备400可以包括1个或N个显示屏494,N为大于1的正整数。显示屏可以显示本发明中所涉及到的界面以及提示信息。
电子设备400可以通过ISP,摄像头493,视频编解码器,GPU,显示屏494以及应用处理器等实现拍摄功能。
ISP用于处理摄像头493反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头493中。
摄像头493用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备400可以包括1个或N个摄像头493,N为大于1的正整数。本发明在具体的app中可以调用该摄像头。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备400在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备400可以支持一种或多种视频编解码器。这样,电子设备400可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备400的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口420可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备400的存储能力。外部存储卡通过外部存储器接口420与处理器410通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器421可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器421可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备400使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器421可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器410通过运行存储在内部存储器421的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备400的各种功能应用以及数据处理。
电子设备400可以通过音频模块470,扬声器470A,受话器470B,麦克风470C,耳机接口470D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块470用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块470还可以用于对音频信号编码和解码。在一些实施例中,音频模块470可以设置于处理器410中,或将音频模块470的部分功能模块设置于处理器410中。
扬声器470A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备400可以通过扬声器470A收听音乐,或收听免提通话。
受话器470B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备400接听电话或语音信息时,可以通过将受话器470B靠近人耳接听语音。
麦克风470C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风470C发声,将声音信号输入到麦克风470C。电子设备400可以设置至少一个麦克风470C。在另一些实施例中,电子设备400可以设置两个麦克风470C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备400还可以设置三个,四个或更多麦克风470C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口470D用于连接有线耳机。耳机接口470D可以是USB接口430,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器480A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器480A可以设置于显示屏494。压力传感器480A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器480A,电极之间的电容改变。电子设备400根据电容的变化确定压力的强度。当有触摸操作作用于显示屏494,电子设备400根据压力传感器480A检测所述触摸操作强度。电子设备400也可以根据压力传感器480A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器480B可以用于确定电子设备400的运动姿态。在一些实施例中,可以通过陀螺仪传感器480B确定电子设备400围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器480B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器480B检测电子设备400抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备400的抖动,实现防抖。陀螺仪传感器480B还可以用于导航,体感游戏场景。
气压传感器480C用于测量气压。在一些实施例中,电子设备400通过气压传感器480C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器480D包括霍尔传感器。电子设备400可以利用磁传感器480D检测翻盖皮套的开合。在一些实施例中,当电子设备400是翻盖机时,电子设备400可以根据磁传感器480D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器480E可检测电子设备400在各个方向上(一般为三轴)加速度的大小。当电子设备400静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器480F,用于测量距离。电子设备400可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备400可以利用距离传感器480F测距以实现快速对焦。
接近光传感器480G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备400通过发光二极管向外发射红外光。电子设备400使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备400附近有物体。当检测到不充分的反射光时,电子设备400可以确定电子设备400附近没有物体。电子设备400可以利用接近光传感器480G检测用户手持电子设备400贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器480G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器480L用于感知环境光亮度。电子设备400可以根据感知的环境光亮度自适应调节显示屏494亮度。环境光传感器480L也可用于拍照时自动调节白平衡。环境光传感器480L还可以与接近光传感器480G配合,检测电子设备400是否在口袋里,以防误触。
指纹传感器480H用于采集指纹。电子设备400可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器480J用于检测温度。在一些实施例中,电子设备400利用温度传感器480J检测的温度,执行温度处理策略。例如,当温度传感器480J上报的温度超过阈值,电子设备400执行降低位于温度传感器480J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备400对电池442加热,以避免低温导致电子设备400异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备400对电池442的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器480K,也称“触控器件”。触摸传感器480K可以设置于显示屏494,由触摸传感器480K与显示屏494组成触摸屏,也称“触控屏”。触摸传感器480K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏494提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器480K也可以设置于电子设备400的表面,与显示屏494所处的位置不同。在本发明中,触摸传感器可以接收和响应用户输入的相关指令。
骨传导传感器480M可以获取振动信号。在一些实施例中,骨传导传感器480M可以获取人体声部振动骨块的振动信号。骨传导传感器480M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器480M也可以设置于耳机中,结合成骨传导耳机。音频模块470可以基于所述骨传导传感器480M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器480M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键490包括开机键,音量键等。按键490可以是机械按键。也可以是触摸式按键。电子设备400可以接收按键输入,产生与电子设备400的用户设置以及功能控制有关的键信号输入。
马达491可以产生振动提示。马达491可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏494不同区域的触摸操作,马达491也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器492可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口495用于连接SIM卡。SIM卡可以通过插入SIM卡接口495,或从SIM卡接口495拔出,实现和电子设备400的接触和分离。电子设备400可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口495可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口495可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口495也可以兼容不同类型的SIM卡。SIM卡接口495也可以兼容外部存储卡。电子设备400通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备400采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备400中,不能和电子设备400分离。
电子设备400的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备400的软件结构。
图5是本发明实施例的电子设备400的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图5所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图5所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备400的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
下面结合捕获拍照场景,示例性说明电子设备400软件以及硬件的工作流程。
当触摸传感器480K接收到触摸操作,相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标,触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该输入事件所对应的控件。以该触摸操作是触摸单击操作,该单击操作所对应的控件为相机应用图标的控件为例,相机应用调用应用框架层的接口,启动相机应用,进而通过调用内核层启动摄像头驱动,通过摄像头493捕获静态图像或视频。
图6是本申请实施例提供的一种服务器600的结构示意图,其中,图1所示的系统架构中的服务器即可以通过图6所示的服务器600来实现。参见图6,该服务器600包括至少一个处理器601,通信总线602,存储器603以及至少一个通信接口604。
处理器601可以是一个通用中央处理器(Central Processing Unit,CPU),微处理器,特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制本申请方案程序执行的集成电路。
通信总线602可包括一通路,在上述组件之间传送信息。
存储器603可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其它类型的静态存储设备,随机存取存储器(random access memory,RAM))或者可存储信息和指令的其它类型的动态存储设备,也可以是电可擦可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其它光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其它磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其它介质,但不限于此。存储器603可以是独立存在,通过通信总线602与处理器601相连接。存储器603也可以和处理器601集成在一起。
通信接口604,使用任何收发器一类的装置,用于与其它设备或通信网络通信,如以太网,无线接入网(RAN),无线局域网(Wireless Local Area Networks,WLAN)等。该接口或类似收发器的接口可以用于实现本发明中的设备之间的通信。
在具体实现中,作为一种实施例,处理器601可以包括一个或多个CPU,例如图4中所示的CPU0和CPU1。
在具体实现中,作为一种实施例,服务器可以包括多个处理器,例如图4中所示的处理器601和处理器605。这些处理器中的每一个可以是一个单核(single-CPU)处理器,也可以是一个多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
在具体实现中,作为一种实施例,计算机设备还可以包括输出设备606和输入设备607。输出设备606和处理器601通信,可以以多种方式来显示信息。例如,输出设备606可以是液晶显示器(liquid crystal display,LCD),发光二级管(light emitting diode,LED)显示设备,阴极射线管(cathode ray tube,CRT)显示设备,或投影仪(projector)等。输入设备607和处理器601通信,可以以多种方式接收用户的输入。例如,输入设备607可以是鼠标、键盘、触摸屏设备或传感设备等。
其中,存储器603用于存储执行本申请方案的程序代码,并由处理器601来控制执行。处理器601用于执行存储器603中存储的程序代码608。图1中所示的服务器可以通过处理器601以及存储器603中的程序代码608与终端进行交互,从而实现授权空间的加载和媒体内容的添加和展示。
AR&VR内容管理一直是AR&VR领域的蓝海,开发者会利用AR&VR设备或软件对现实世界进行渲染,进行现实增强。目前,AR&VR软件相对还不是很多,因此只有少数的玩家和开发者会有目的性地针对一些地点或实物(例如,商店、门店、街道、展馆、特定物体)开发一些对应的虚拟空间,并在虚拟空间进行虚拟内容的布置,以便消费者终端在对上述地点或实物进行扫描时,能够在消费者终端中渲染出相关的虚拟内容,使得消费者通过消费者终端能够充分感受到拍照、导航、展览等应用领域的趣味玩法。随着AR&VR技术的普及,如何对地点或实物进行虚拟空间的管理将会成为AR&VR领域的前瞻性问题。
AR内容注册最好的方法就是所见即所得,也即,进行内容注册时,可以实时看到可以放置的空间,基于此,本申请提供了一种授权虚拟空间的呈现方法,便于用户在可管理区域进行AR内容注册。在此基础上,本申请实施例还提供了一种实时进行内容注册的交互流程,用户通过对现实场景实时进行授权空间查看、拖拽AR内容、保存上传,从而实现在现场实时进行AR内容注册。
图7是本申请实施例提供的一种基于数字地图的授权空间显示方法的流程图。该方法可以应用于终端中,参见图7,该方法包括以下步骤:
步骤701:获取目标场景的预览流。
在本申请实施例中,每个用户可以在服务器中注册有自身的用户账号。也即,用户首先需要注册登录到系统,有唯一的用户账号用于管理其数字空间资产(即授权空间)。用户在通过用户账号登录之后,可以获取目标场景的预览流。其中,为了便于说明,对于在数字地图中拥有授权空间的用户,或者是想要在数字地图中申请授权空间的用户,可以将其称为注册用户。终端当前所处场景可以包括终端在当前所处环境中视野范围所及的全部内容。比如一个房间,或者一片场地,具体范围和大小可以因环境而定或根据具体需求自由定义,本发明不做限定。具体的,该目标场景可以是终端当前所处场景中的一部分或全部。例如,该目标场景可以为终端当前所处环境中的一处门店。可选地,目标场景也可以包括终端当前所处场景中用户感兴趣的对象(如下文中的目标对象,例如门店logo)。例如,该目标场景可以是终端当前所处场景中的一处门店的招牌或者是其他标志性物体。
具体地,终端可以通过自身配置的摄像头采集目标场景的预览流,或者,也可以接收其他设备实时采集并发送的目标场景的预览流。其中,终端可以系统调用摄像头来采集目标场景的预览流,或者也可以通过安装的某个应用程序调用摄像头来采集目标场景的预览流。
另外,在本申请实施例中,目标场景的预览流也可以称为目标场景对应的预览流。
步骤702:获取第一用户标识和终端的位姿。
在本申请实施例中,终端可以获取当前登录的用户账号,将该用户账号作为第一用户标识。另外,终端当前登录的用户账号并不用以限定终端的使用者。换句话说,终端当前登录的用户账号可能是该终端的使用者的用户账号,也可能不是,本申请对此不做限定。还需要说明的是,终端在获取第一用户标识时,可以是由终端系统来获取,也可以是终端中安装的第三应用程序来获取,本申请实施例对此也不做限定。
另外,该终端可以获取自身当前的位姿。其中,终端的位姿可以包括终端在现实世界中的位置和姿态,其中,在现实世界的中位置可以包括在世界坐标系下的位置坐标,或者是在现实世界中的经纬度等,终端的姿态可以包括旋转角、俯仰角和横滚角。
在一种可能的实现方式中,终端可以通过自身配置的传感器来检测该终端当前的位姿。例如,终端可以通过加速度传感器、陀螺仪、定位组件等传感器来检测当前的位姿。
可选地,在另一种可能的实现方式中,终端可以将获取到的目标场景的预览流中的多帧图像发送至服务器。服务器可以根据接收到的多帧图像与数字地图中包含的特征信息进行匹配来确定该终端采集该多帧图像时的位置。之后,服务器可以根据与该多帧图像匹配的特征图像以及该多帧图像来确定终端采集该多帧图像时的姿态,并将该位姿发送至终端。
可选地,在一些可能的场景中,终端可以将上述两种可能的实现方式进行结合,来获取终端的位姿。例如,终端可以通过传感器来获取终端当前所处的经纬度和海拔等信息,并将这些信息和采集到的预览流中的多帧图像发送至服务器,服务器可以根据这些信息和多帧图像来确定终端的姿态,并将该姿态发送至终端。
步骤703:根据第一用户标识和终端的位姿获取n个授权空间。
当终端获取到第一用户标识和位姿之后,可以根据该第一用户标识和位姿从服务器中获取n个授权空间。其中,获取的n个授权空间是目标场景对应的数字地图中第一户标识对应的n个互不交叠的三维空间。其中n为等于1或者大于1的整数。
第一种方式:终端可以向服务器发送第一用户标识和位姿,服务器可以根据该第一用户标识和位姿获取n个授权空间,将n个授权空间发送至终端。
在该种实现方式中,服务器在接收到第一用户标识和终端的位姿之后,首先可以根据该终端的位姿获取目标场景对应的数字地图,之后,服务器可获取该目标场景对应的数字地图中所包含的所有的授权空间,并在该目标场景对应的数字地图所包含的所有授权空间内查找是否存在第一用户标识对应的授权空间,如果存在,则服务器可以将查找到的授权空间发送至终端。具体的,在本申请实施例中,服务器向终端发送的授权空间可以是指能够表征相应授权空间的空间信息。
需要说明的是,服务器中可以存储有各个用户在数字地图中所拥有的授权空间的空间信息。例如,服务器中可以存储有不同区域的数字地图中各个用户的用户标识与相应用户所拥有的授权空间的空间信息之间的映射关系。其中,不同用户标识对应不同的授权空间,也就是说,同一个授权空间不会同时对应不同的多个用户标识,也即不同的用户拥有的授权空间不同。另外,任意两个授权空间之间可以互不交叠,也即,任意两个授权空间不存在重合的部分。或者,在一些情况下,任意两个授权空间之间也可以存在交叠,这种情况下,存在交叠的这两个空间可以各自对应自身的显示时间,这二者的显示时间不同。在服务器向终端发送授权空间时,对于存在交叠的授权空间,可以针对其下发各个授权空间的显示时间,以便终端在显示交叠的授权空间时,可以根据不同的显示时间进行分时显示。
具体地,服务器在根据终端的位姿获取到目标场景对应的数字地图之后,可以根据该目标场景对应的数字地图的范围,从上述映射关系中确定出该目标场景对应的数字地图内包含的所有授权空间所对应的映射关系,也即,获取这些授权空间的空间信息与相应地用户标识的映射关系,之后,服务器可以从中获取第一用户标识对应的授权空间的空间信息,并将第一用户标识对应的授权空间的空间信息发送至终端。其中,授权空间的空间信息可以包括授权空间在数字地图中的位姿。授权空间在数字地图中的姿态是指该授权空间在数字地图的参考坐标系中的姿态。
可选地,如果服务器在目标场景对应的数字地图包含的所有授权空间内未查找到第一用户标识对应的授权空间,则说明该目标场景对应的数字地图内并不存在第一用户标识对应的授权空间,此时,服务器可以向终端返回授权空间加载失败的通知消息,以通知终端未获取到第一用户标识对应的授权空间。在这种情况下,终端可以通过后续实施例中介绍的方法与用户进行交互,以便用户申请授权空间。
值得注意的是,注册用户在目标场景对应的数字地图中拥有的授权空间可能有一个,也可能有多个。如果在该目标场景对应的数字地图中只存在一个第一用户标识对应的授权空间时,服务器可以直接将这个授权空间的空间信息发送至终端。如果该目标场景对应的数字地图中包括有第一用户标识对应的多个授权空间时,服务器可以将该多个授权空间的空间信息均直接发送至终端。或者,服务器也可以从多个授权空间中选择部分授权空间发送至终端。例如,服务器可以将该多个授权空间中距离终端的位置最近的授权空间的空间信息发送至终端。或者,各个授权空间可以均对应有优先级,服务器可以将多个授权空间中优先级最高的授权空间的空间信息发送至终端。或者,服务器也可以将多个授权空间中默认的一个授权空间的空间信息发送至终端。其中,默认的授权空间可能是服务器后台设置的多个授权空间中的一个,或者可能是按照申请的时间先后顺序默认的最早申请的一个授权空间。
第二种方式:终端向服务器发送第一用户标识、位姿和空间筛选条件,服务器可以根据第一用户标识和位姿获取m个授权空间,并从m个授权空间中获取满足空间筛选条件的n个授权空间。将获取的n个授权空间发送至终端。
在该种实现方式中,终端除了向服务器发送第一用户标识和位姿之外,还可以向服务器发送空间筛选条件。其中,该空间筛选条件可以包括终端所要获取的授权空间需要满足的条件,该空间筛选条件可以由第一用户标识所标识的注册用户输入。示例性地,该空间筛选条件可以包括地理位置条件、优先级条件等条件中的一种或多种。其中,地理位置条件可以包括授权空间的位置与终端的位置的距离满足预设距离,优先级条件可以包括授权空间的优先级不小于预设优先级。
服务器在接收到第一用户标识、位姿和空间筛选条件之后,首先可以参考第一种实现方式,获取目标场景内第一用户标识对应的所有授权空间,之后,服务器可以从第一用户标识对应的授权空间中筛选满足上述空间筛选条件的授权空间,并将这些授权空间发送至终端。
第三种方式:终端向服务器发送第一用户标识和位姿,服务器根据第一用户标识和位姿获取m个授权空间;将m个授权空间发送至终端;终端可以从m个授权空间中获取满足空间筛选条件的n个授权空间。
其中,该空间筛选条件可以参考第二种实现方式中的介绍。该种实现方式与第二种实现方式的不同之处在于服务器不对第一用户标识对应的授权空间进行筛选,而是将第一用户标识对应的所有授权空间发送至终端,由终端从中选择满足空间筛选条件的n个授权空间。
需要说明的是,在以上各种实现方式中,服务器向终端发送的授权空间均包括相应授权空间的空间信息,也即,终端获取到授权空间是指获取到授权空间的空间信息。其中,该空间信息包括授权空间在数字地图中的位姿。
步骤704:在目标场景的预览流中渲染n个授权空间。
在获取到目标场景内第一用户标识对应的n个授权空间之后,终端可以呈现叠加在现实世界上的一个或多个授权区域,通过包括但不限于线条、平面等形式明确表示授权空间在现实世界的位置、大小、形状。具体的,终端可以根据终端的位姿和n个授权空间的空间信息,在目标场景的预览流中以预设显示形式渲染n个授权空间。其中,预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
由于空间信息包括授权空间的位姿,因此,终端可以根据自身的位姿和授权空间的位姿,来确定以什么样的位姿在目标场景的预览流中渲染n个授权空间,也即,确定n个授权空间的显示位姿。之后,终端可以按照确定的显示位姿以预设显示形式在目标场景的预览流中渲染n个授权空间。其中,在目标场景的预览流中渲染的n个授权空间与目标场景的预览流中的第二特征的相对位置关系将满足第二预设位置关系。也即,保证该n个授权空间可以显示在该目标场景内合适的位置处,从而使得该n个授权空间与该目标场景相适配。例如,假设目标场景为门店,n个授权空间中的一个授权空间距离该门店的店铺招牌的距离为第一预设距离,另一个授权空间距离该店铺招牌的距离为第二预设距离,两个授权空间之间的距离为第三预设距离,则通过终端的位姿和这两个授权空间的空间信息对这两个授权空间进行渲染之后,在目标场景的预览流中显示的这两个授权空间与店铺招牌之间的位置关系将满足上述介绍的关系。同理,姿态也满足这三者之间的姿态相对关系。
另外,终端按照预设显示形式显示n个授权空间,可以是采用预设颜色来渲染n个授权空间,也即,n个授权空间的表面可以附着预设颜色。另外,显示时,可以以预设透明度来渲染n个授权空间。除此之外,渲染的n个授权空间可以为立方体空间,也可以为球体空间,或者,还可以为其他的形状,也即授权空间的形状包括但不限于上述几种形状;具体的形状取决于数字地图运营商允许的授权空间形状设置。授权空间的边界可以以指定线型的线条进行显示,例如,以静态的实线、滚动的或者是变化的虚线进行显示等等。同样需要注意的是,授权空间的边界的显示形式也同样是包括但不限于上述所列举的可能。
图8是本申请实施例示出的一种在目标场景的预览流中显示的授权空间的示意图。如图8所示,目标场景的预览流中包含有一建筑物,在数字地图中该建筑物前方的空间为用户的授权空间,基于此,如图8所示,在该预览流中,可以在该建筑物之前显示该授权空间,该授权空间的边界用虚线来表示。
当终端在目标场景的预览流中渲染n个授权空间之后,如果n个授权空间的位姿与目标场景的预览流的位姿不匹配,可以对n个授权空间在数字地图中的位姿进行调整,以使n个授权空间的位姿与目标场景的预览流的位姿匹配;之后,终端可以向服务器发送调整后的n个授权空间的位姿,以使服务器对n个授权空间在数字地图中的位姿进行更新。
需要说明的是,在有些情况下,获取到的终端的位姿可能并不准确,此时,根据终端的位姿在目标场景的预览流中渲染的n个授权空间将与目标场景不匹配。在这种情况下,如果后续直接在显示的授权空间中进行媒体内容的添加,当后续定位准确时,再次根据添加的媒体内容的位姿来显示媒体内容时,将会导致媒体内容的显示出现偏差甚至无法显示。基于此,为了能够准确的进行内容注册,本申请还提供了一种精确的位置匹配的方法,使得注册内容能够与3D地图匹配。具体地,终端在确定授权空间与目标场景的预览流之间存位姿在偏差时,可以调整授权空间的位姿,使得授权空间和目标场景的预览流相匹配,从而使得数字地图中的位置与现实世界中的位置完全对应。其中,终端可以自动对n个授权空间的位姿进行调整,也可以由用户手动对n个授权空间的位姿进行调整。
其中,当由终端自动对n个授权空间进行调整时,终端可以从目标场景的预览流中识别能够与目标场景对应的数字地图中包含的特征相匹配的特征,之后,终端可以根据这些匹配特征来确定目标场景的预览流与n个授权空间之间的位姿偏差,进而根据该位姿偏差对n个授权空间的位姿进行调整。例如,假设目标场景的预览流中包含有终端当前所在位置处的一间门店,则可以确定该预览流中的门店招牌和目标场景对应的数字地图中的门店招牌的位姿偏差,进而根据该位姿偏差来调整n个授权空间的位姿。
可选地,如果是由用户手动进行调整,则用户在发现授权空间与目标场景的预览流之间存在一定的位姿偏差时,可以拖动授权空间进行移动或旋转来使得授权空间中的位姿与目标场景的预览流相适配。相应地,终端可以在检测到用户操作之后,根据用户操作实时对授权空间进行移动或旋转,并记录授权空间的位姿,当用户停止操作之后,终端可以将最后记录的授权空间的位姿发送至服务器。服务器可以用调整后的授权空间的位姿来替换该授权空间的空间信息中包括的位姿。
图9示出了授权空间与目标场景的预览流存在位姿偏差的示意图。如图9所示,授权空间与目标场景的预览流存在一定的位姿偏差。在这种情况下,即可以通过前述的方法自动或由用户手动对授权空间的位置进行调整,从而使得最终呈现的授权空间与现场图像如图8所示。
上述是本申请实施例提供的在目标场景的视频流中对授权空间进行可视化的实现方式,可选地,在目标场景对应的视频流中渲染n个授权空间之后,还可以进一步通过以下步骤705和706在授权空间中添加并同步媒体内容。
步骤705:获取目标媒体内容。
当终端在目标场景的预览流中渲染第一用户标识对应的n个授权空间之后,接下来,终端可以在当前界面上显示媒体内容添加选项,注册用户可以通过对该媒体内容添加选项执行选择操作来触发媒体内容添加指令。终端在检测到该媒体内容添加指令之后,即可以获取待添加的目标媒体内容。
其中,终端在检测到用户触发的媒体内容添加指令之后,该终端可以在当前界面上显示媒体内容菜单,该媒体内容菜单可以包括多个内容类型选项;当检测到针对目标内容类型选项的选择指令时,根据目标内容类型选项,获取内容类型与目标内容类型一致的目标媒体内容,目标内容类型选项为多个内容类型选项中的任一个。
需要说明的是,多个内容类型选项可以包括文字、图片、视频、音频、模型等。用户可以选择想要添加的媒体内容的类型选项作为目标内容类型选项,并通过对该目标内容类型选项执行选择操作来触发针对该目标内容类型选项的选择指令。终端在接收到针对该目标内容类型选项的选择指令时,根据目标内容类型选项的不同,可以采用不同的方法来获取目标媒体内容。
示例性地,当目标内容类型选项为文字时,终端在接收到针对该目标内容类型选项的选择指令时,可以在用户界面上显示文本输入框,用户可以在该文本输入框中输入文本,并通过用户界面中显示的文本格式设置选项来设置输入文本的颜色、大小、字体等。之后,终端可以将用户输入的文本内容作为目标媒体内容。
当目标内容类型选项为图片时,终端在接收到针对该目标内容类型选项的选择指令时,可以显示本地存储的多张图片,用户可以从该多张图片中选择一张或多张图片,终端可以获取用户选择的一张或多张图片作为目标媒体内容。当然,在一种可能的实现方式中,终端在接收到针对该目标内容类型选项的选择指令时,也可以首先显示采集选项和本地获取选项。如果终端检测到该采集选项被触发,则终端可以通过摄像头进行图像采集,并将采集到的图像作为目标媒体内容。如果终端检测到本地获取选项被触发,则终端可以通过上述方式从本地存储的多张图片中获取目标媒体内容。或者,在另外一些可能的实现方式中,终端也可以从其他设备中获取图片作为目标媒体内容。
当目标内容类型选项为视频或音频时,终端在接收到针对该目标内容类型选项的选择指令时,可以显示本地存储的多个视频或音频的文件标识列表。用户可以在该文件标识列表中选择一个文件标识,终端可以获取用户选择的文件标识所标识的视频或音频作为目标媒体内容。同理,在一些可能的实现方式中,终端也可以参考前述获取图片类型的目标媒体内容的方法,根据用户选择来采集视频或音频,或者是从其他设备中获取视频或音频,本申请实施例在此不再赘述。
当目标内容类型选项为模型时,终端在接收到针对该目标内容类型选项的选择指令时,可以显示本地存储的模型的标识列表。用户可以从该标识列表中选择一个标识。终端可以获取用户选择的标识所对应的模型,并将该模型作为目标媒体内容。或者,终端可以直接从其他设备中获取模型。其中,模型是指预先创建得到三维模型。
可选地,在一种可能的情况中,用户可以选择上述多种类型的媒体内容进行自由组合,终端可以将组合后的媒体内容作为目标媒体内容,或者,也可以预先由终端获取已经组合好的包含有各种类型的目标媒体内容。本申请实施例对此不做限定。
图10是本申请实施例示出的一种在当前界面上显示媒体内容类型选项的示意图。如图10所示,该界面上显示有文字、图片、视频、音频和模型五个内容类型选项。用户可以从中选择任一个选项,终端可以根据用户选择的类型选项,通过前述的方法来获取相应类型的媒体内容。
步骤706:在目标授权空间内添加目标媒体内容。
AR内容准备好后,用户可以将AR内容“放置”到可见的授权空间中,并可以进一步调整AR内容的姿态、大小、位置、色彩等信息,AR内容仅可以放置有被授权的空间范围内,超过授权空间的AR内容部分呈现为与授权空间内的明显不一致(如不可见、以其它色彩渲染、半透明等效果),以明确表达AR内容放置区域存在异常。
具体地,在目标场景的预览流中显示的第一用户标识对应的授权空间可能为一个,也可能为多个。当显示的授权空间为一个时,这个授权空间即为目标授权空间。当显示的授权空间为多个时,则目标授权空间可能为多个授权空间中的任一个授权空间,在这种情况下,用户选择添加目标媒体内容的空间即为目标授权空间。
其中,终端可以通过与用户进行交互来实现目标媒体内容的添加。示例性地,用户可以对目标媒体内容执行拖动操作,以触发拖动指令。终端在检测到针对该目标媒体内容的拖动指令时,在拖动指令所指示的拖动终点位置处,添加目标媒体内容。
其中,拖动指令所指示的拖动终点位置可以是该拖动操作结束时该目标媒体内容所在的位置。也即,用户可以通过对该目标媒体内容执行拖动操作,将该目标媒体内容放置在想要放置的授权空间内,也即目标授权空间内。
除此之外,在将目标媒体内容放置在拖动指令所指示的拖动终点位置处之后,用户还可以通过拖动目标媒体内容的边界来调整目标媒体内容的大小,以及通过旋转目标媒体内容来调整目标媒体内容的姿态等。
在将目标媒体内容设置完成之后,考虑到用户在放置目标媒体内容时,可能会有部分内容未能处于授权空间内,在这种情况下,为了避免侵占其他用户的授权空间,终端可以仅显示目标媒体内容中位于该目标授权空间内的部分内容,而位于该目标授权空间之外的内容,则可以不进行显示,或者是通过其他方式与位于目标授权空间内的内容区别显示。例如,可以通过半透明、不同色彩渲染等方式进行区别显示。
图11是本申请实施例示出的显示目标媒体内容的示意图。如图11所示,对于目标媒体内容,若该目标媒体内容完全位于授权空间内,则如图11中所示,该目标媒体内容可以完全显示,若该目标媒体内容有部分内容超出了授权空间,则如图11所示,该目标媒体内容将只有位于该授权空间内的内容可以显示,剩余部分不进行显示。
在显示目标媒体内容之后,终端可以检测是否接收到确认指令,如果接收到确认指令,则终端可以将当前显示的位于目标授权空间内的媒体内容和该媒体内容在数字地图中的位姿发送至服务器,服务器可以将接收到的目标媒体内容和目标媒体内容的位姿与该目标授权空间的空间信息对应存储,从而实现目标媒体内容的添加。也即,服务器可以保存AR内容及AR内容在现实世界的位置、姿态等全部信息,并可在下一次加载时完全恢复。
可选地,在一种可能的实现方式中,终端还可以确定添加至目标授权空间的目标媒体内容与目标对象之间的目标相对位置关系,并将该目标媒体内容、目标对象和目标相对位置关系发送至服务器,这样,服务器即可以根据该目标媒体内容、目标对象和目标相对位置,对预设数字地图中第一用户标识对应的其他授权空间进行内容更新。其中,目标对象为目标场景对应的数字地图中包括的预设的图像或三维物体。例如,该目标对象可以为门店招牌或目标场景中其他的特征。
也就是说,终端可以从目标场景对应的数字地图中确定一个目标对象,并确定目标媒体内容和该目标对象的相对位置关系。之后,将该目标媒体内容、目标对象和相对位置关系发送至服务器。服务器可以从预设数字地图中查找与该目标对象相同的特征,其中,该预设数字地图可以是其他场景对应的数字地图。如果查找到与目标对象相同的特征,则服务器可以检测该预设数字地图中是否存在第一用户标识对应的授权空间,如果存在,则终端可以按照该目标相对位置关系,将目标媒体内容添加至预设数字地图内第一用户标识对应的授权空间内,从而使得该目标媒体内容与预设数字地图中的目标对象之间的位置关系满足该目标相对位置关系。
由此可见,在本申请实施例中,通过将目标媒体内容和目标对象之间的相对位置关系发送至服务器,可以由服务器根据该相对位置关系和目标对象,来实现对预设数字地图中第一用户标识对应的其他授权空间内的媒体内容的更新,提高了媒体内容更新的效率。
另外,在本申请实施例中,目标媒体内容与目标场景的预览流中的第一特征的相对位置关系满足第一预设位置关系。其中,第一特征为目标场景的预览流中包含的预设的图像或三维物体。需要说明的是,第一特征可以为上述目标对象在目标场景的预览流中对应的特征。例如,假设上述目标对象为门店1的招牌,在该第一特征可以为该目标场景的预览流中的门店1的招牌。在这种情况下,第一预设位置关系与目标媒体内容和目标对象之间的目标相对位置关系相同。这样,可以保证添加至目标授权空间内的目标媒体内容的位姿现实世界中的空间相适配。
需要说明的是,在上述在目标授权空间内添加目标媒体内容,可以是指在目标授权空间不包含有媒体内容的情况下添加媒体内容,也可以是指在目标授权空间内已经包含有媒体内容的情况下,额外增加目标媒体内容。或者,在一些可能的场景中,终端在获取到目标媒体内容之后,可以将目标授权空间内已包含的某项媒体内容替换为目标媒体内容。
可选地,在另一些可能的场景中,终端在显示n个授权空间时,还可以显示n个授权空间内已包括的媒体内容,在这种情况下,在步骤704之后,终端也可以不执行步骤705和706,而是直接根据用户操作对n个授权空间内包括的媒体内容进行删减或移动。
其中,终端可以对目标授权空间内包括的媒体内容进行全部删除,或者是对目标授权空间内包括的媒体内容中的部分元素进行删除,并将该编辑方式(也即删除方式)发送至服务器,由服务器根据该删除方式对第一用户标识对应的其他授权空间内所包括的相同的媒体内容或元素进行统一删除。其中,删除方式中可以包含终端删除的媒体内容或元素,以及删除操作的标识。
或者,终端可以对目标授权空间内包括的媒体内容按照预设相对位移进行移动,并将该编辑方式(也即移动方式)发送至服务器,由服务器根据该移动方式对第一用户标识对应的其他授权空间内所包括的相同的媒体内容或元素进行统一移动。其中,移动方式中可以包括所移动的媒体内容或元素以及移动后的位置。
在本申请实施例中,终端可以根据第一用户标识和终端的位姿,获取当前的注册用户在目标场景对应的数字地图中的授权空间,进而在目标场景的预览流中渲染该注册用户的授权空间,使得注册用户可以实时查看到与当前场景对应的授权空间,更为便利。另外,由于在目标场景对应的预览流中明确显示了授权空间,因此,注册用户可以清晰的获悉自身的授权空间的边界,在这种情况下,用户在该授权空间中添加媒体内容,可以有效的避免添加的媒体内容侵占其他用户的授权空间,实现了媒体内容的精准添加,提高了添加效率。
上述实施例主要介绍了根据终端的位姿和第一用户标识,在目标场景的预览流中显示目标场景对应的数字地图内第一用户标识对应的授权空间的过程。可选地,在一些可能的场景中,在多个场景对应的数字地图中可能存在第一用户标识对应的多个授权空间,注册用户可能需要对该多个授权空间内的媒体内容进行统一更新,在这种情况下,终端和服务器可以通过以下步骤来实现多个授权空间内的媒体内容的同步。也即,本申请实施例还提供了一种批量注册媒体内容的交互流程,用户通过搜索3D地图上多个区域同一目标对象、配置相对于目标对象位姿的AR内容、保存上传,实现对处于不同区域的内容同步。
图12是本申请实施例示出的一种多个授权空间内的媒体内容同步方法流程图。如图12所示,该方法包括以下步骤:
步骤1201:终端获取第一用户标识。
在本申请实施例中,终端可以将当前登录的用户账号作为第一用户标识。
步骤1202:终端向服务器发送第一用户标识。
步骤1203:服务器根据第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内第一用户标识对应的授权空间。
服务器可以通过登录后的用户标识进行授权空间的检索,确定用户在此刻之前存在不少于1个授权空间,则进行授权空间的加载,此加载方式可以是呈现多个区域图片等方法或其它方法。
示例性地,服务器中可以存储有用户标识、授权空间和场景的映射关系,基于此,该服务器可以从该映射关系中查找该第一用户标识对应的k个场景,并获取该第一用户标识对应的k个场景中每个场景内包含的第一用户标识对应的授权空间。需要说明的是,这里的场景可以包括门店、指定特征等。例如,第一场景可以是一个门店,也即第一场景对应的数字地图即为某个门店对应的数字地图。
步骤1204:服务器向终端发送k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的授权空间。
步骤1205:终端根据预设规则从k个场景中选择第一场景,并获取第一场景对应的第一数字地图,显示第一数字地图和第一授权空间。
终端在接收到该k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的授权空间之后,可以根据预设规则来从k个场景中选择第一场景。其中,预设规则可以是指距离终端当前位置最近,优先级最高或者是默认。也即,终端可以从所述k个场景中选择距离终端的位置最近的场景作为第一场景;或者,从k个场景中选择优先级最高的场景作为第一场景;或者,从k个场景中选择默认的场景作为第一场景。上述仅是本申请实施例给出的几种可能的实现方式,并不构成对本申请实施例的限定。
可选地,在另外一种可能的实现方式中,终端也可以通过轮播的方式在每个场景对应的数字地图中显示该数字地图内第一用户标识对应的授权空间,或者,终端还可以根据k个场景的位置,在数字地图中显示k个场景对应的场景标记。在显示k个场景的过程中,注册用户可以选择某个场景,当终端检测到用户的选择操作之后,可以将该注册用户选择的场景作为第一场景。
终端在确定第一场景之后,可以在第一场景对应的第一数字地图中显示其包含的第一用户标识对应的授权空间。如果第一数字地图中包含的第一用户标识对应的授权空间只有一个,则终端可以直接将该授权空间作为第一授权空间。如果第一数字地图中包含的第一用户标识对应的授权空间有多个,则终端在显示该多个授权空间之后,注册用户可以选取其中一个授权空间,终端可以将用户选取的授权空间作为第一授权空间。
其中,对于用户选取的第一授权空间,终端可以进行突出显示,例如,第一授权空间可以通过闪烁的方式进行响应,或者第一授权空间的边界可以以滚动的虚线进行显示等等。
图13是本申请实施例提供的一种用户与终端进行交互以选择第一场景的示意图。如图13所示,终端可以在数字地图中显示多个场景标记A、B、C和D。假设用户选择了场景标记A,则终端可以将场景标记A所标识的场景作为第一场景。假设第一场景对应的第一数字地图内包含有第一用户标识对应的多个授权空间,则终端可以如图14所示,通过列表的方式显示多个授权空间的空间标识,用户可以从该多个授权空间的空间标识中选择一个标识,此时,终端可以将用户选择的空间标识所标识的授权空间作为第一授权空间,并显示该第一授权空间。
可选地,在一种可能的实现方式中,终端也可以在向服务器发送第一用户标识的同时,发送场景需求,该场景需求可以是用户指定的感兴趣的场景信息。服务器在接收到第一用户标识和该场景需求之后,可以首先获取第一用户标识对应的k个场景,之后,从k个场景中获取满足该场景需求的第一场景。其中,场景需求可以为默认、优先级最高或者距离终端当前位置最近等。
步骤1206:终端获取目标媒体内容。
本步骤的实现方式可以参考前述实施例中步骤705的相关实现方式,本申请实施例在此不再赘述。
步骤1207:终端在第一授权空间中添加目标媒体内容。
本步骤的实现方式可以参考前述实施例中步骤706的相关实现方式,本申请实施例在此不再赘述。
步骤1208:终端确定目标媒体内容与目标对象之间的目标相对位置关系。
在第一授权空间中添加目标媒体内容之后,终端可以确定目标媒体内容与目标对象之间的目标相对位置关系,其中,目标对象为第一场景对应的数字地图中包括的预设的图像或三维物体。例如,当第一场景为一个门店时,该目标对象可以为该门店的招牌。需要说明的是,该目标对象可能位于第一授权空间内,也可能不位于第一授权空间内,但是该目标对象包含在该第一场景对应的数字地图中。
需要说明的是,目标对象可以是终端通过图像识别算法确定得到的,也可以是用户在第一场景对应的数字地图中指定的对象(包括不限于图片、文本、3D模型)。也即,用户可以通过手势操作在第一场景对应的数字地图内圈画一个区域,终端可以将用户圈画的这个区域内的特征作为目标对象。或者,用户可以在数字地图内点选一个位置,终端可以以该位置为中心,将位于预设半径内的区域内的特征作为目标对象。上述仅是本申请实施例给出的几种根据用户的选取操作确定目标对象的示例。
另外,目标媒体内容与目标对象之间的相对位置关系可以包括该目标媒体内容与目标对象之间的距离以及相对姿态等信息。
步骤1209:终端向服务器发送目标媒体内容、目标对象和目标相对位置关系。
步骤1210:服务器在第二数字地图中确定目标对象的位置。
服务器在接收到目标媒体内容、目标对象和目标相对位置关系之后,可以在包含有第一用户标识对应的其他场景对应的数字地图中,查找是否包含有该目标对象。如果查找到某个场景对应的数字地图中包含有该目标对象,则服务器可以确定目标对象在该数字地图中的位置,其中,为了方便说明,将查找到的包含有目标对象的场景称为第二场景,该第二场景对应的数字地图为第二数字地图。
其中,服务器在查找目标对象时,可以在第一用户标识来获取第一用户标识对应的授权空间附近进行搜索,例如,以授权空间为中心,扩大50米范围。也就是说,第一用户标识对应的其他场景可以是以该第一用户标识的授权空间为中心的预设半径范围内的区域。
步骤1211:服务器根据标对象的位置和目标相对位置关系,在第一用户标识对应的其他授权空间内添加目标媒体内容。
在第二数字地图中确定目标对象的位置之后,服务器可以按照目标相对位置关系和该目标对象的位置,在该场景对应的数字地图所包含的第一用户标识的授权空间内,添加目标媒体内容,从而使得该目标媒体内容与目标对象之间的位置关系满足该目标相对位置关系。
示例性地,终端可以通过图片检测算法来确定第二场景对应的数字地图中目标对象的位姿。之后,终端可以根据第二场景对应的数字地图中目标对象的位姿、第一场景对应的数字地图中目标对象的位姿以及目标媒体内容在第一授权空间内的位姿,通过下述公式来确定目标媒体内容在第二场景对应的数字地图中第二授权空间内的位姿。
ΔRt=Pv1*P1 -1
Pvx=ΔRt*Px
其中,P1为第一场景对应的数字地图中目标对象的位姿对应的位姿矩阵,Pv1是目标媒体内容在第一授权空间内的位姿对应的位姿矩阵,ΔRt为位姿变化矩阵,Px为第二场景对应的数字地图内目标对象的位姿对应的位姿矩阵,Pvx为目标媒体内容在第二授权空间内的位姿对应的位姿矩阵。
在确定目标媒体内容在第二授权空间内的位姿之后,终端可以根据目标媒体内容在第二授权空间内的位姿态,在第二授权空间内添加该目标媒体内容。其中,如果第二授权空间中的相应位置上原本存在已添加的媒体内容,则可以用目标媒体内容替换该已添加的媒体内容。
对于其他场景对应的数字地图中包含的第一用户标识对应的授权空间,均可以通过上述方式,对相应授权空间内的媒体内容进行更新,从而实现多个授权空间内媒体内容的同步。也即,服务器可以根据目标对象检索获得的姿态设置AR内容的相对位置,批量应用于所有授权空间。
图15是本申请实施例示出的一种在多个授权空间中同步目标媒体内容的示意图。如图15所示,在第一场景对应的数字地图中确定目标对象,并在其他场景对应的数字地图中得到与目标对象匹配的特征。在授权空间1中添加目标媒体内容。此时,根据目标对象的位姿以及目标媒体内容在授权空间1中的位姿,可以计算得到目标媒体内容和目标对象之间的相对位置关系。之后,服务器可以确定其他场景对应的数字地图中的目标对象的位姿,进而根据其他场景对应的数字地图中的目标对象的位姿以及前述确定的相对位置关系,确定得到该目标媒体内容在其他授权空间中的位姿。最终,按照该目标媒体内容在其他授权空间中的位置信息和姿态信息,在各个授权空间中添加的目标媒体内容如图15所示。
需要说明的是,在一种可能的场景中,服务器在其他授权空间中添加目标媒体内容之后,可能会出现该目标媒体内容与其他授权空间不适配的情况,例如,该目标媒体内容超出其他授权空间的范围,此时,服务器可以自动对目标媒体内容进行调整,以使该目标媒体内容与相应的授权空间适配。或者,在一种可能的实现方式中,对于这种不适配的情况,例如,对于超出授权空间的媒体内容,服务器还可以记录对超出部分的媒体内容进行标记,后续,在向服务器下发相应授权空间以及授权空间内的媒体内容时,可以仅下发未超出授权空间的部分内容,或者,可以下发全部媒体内容和该标记,以便终端可以对未超出该授权空间的媒体内容进行显示,而超出的部分则不进行显示。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,在某个授权空间内添加目标媒体内容,确定目标媒体内容与目标对象之间的相对位置关系,并将该相对位置关系和目标对象、目标媒体内容发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找与目标对象匹配的特征,并根据相对位置关系来将该目标媒体内容同步至第一用户标识对应的其他授权空间,这样,服务器可以自动完成多个授权空间内的媒体内容的添加,提高了添加效率,保证了多个授权空间内媒体内容的效果一致性,且能够保证添加的精准性。
上述实施例介绍了终端和服务器进行交互以实现多个授权空间的媒体内容的同步的实现过程。图16提供了一种终端侧进行多个授权空间的内容同步的实现流程图,参见图16,该实现过程包括以下步骤:
步骤1601:获取第一用户标识。
本步骤的实现方式可以参考前述实施例中的步骤1201。
步骤1602:根据第一用户标识确定第一场景。
其中,第一数字地图中包含有第一授权空间;第一授权空间是第一数字地图中第一用户标识对应的三维空间;第一数字地图中包括目标对象;目标对象包括预设的图像或三维物体;第一数字地图包括全景图、点云图或网格模型。
在本步骤中,终端可以将第一用户标识发送至服务器,以使服务器根据第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内第一用户标识对应的多个授权空间;之后,接收服务器发送的k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的多个授权空间;根据预设规则从k个场景中选择第一场景。
其中,终端在接收到服务器发送的k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的多个授权空间之后,可以参考前述实施例中的步骤1205中的实现方式来确定第一场景。
可选地,在一种可能的实现方式中,终端也可以在向服务器发送第一用户标识的同时,发送场景需求,该场景需求可以是用户指定的感兴趣的场景信息。服务器在接收到第一用户标识和该场景需求之后,可以首先获取第一用户标识对应的k个场景,之后,从k个场景中获取满足该场景需求的第一场景。之后,服务器可以将获取到的第一场景、第一场景对应的第一数字地图以及第一场景中包括的第一用户标识的授权空间发送至终端。其中,场景需求可以为默认、优先级最高或者距离终端当前位置最近等。
步骤1603:获取第一场景对应的第一数字地图。
在确定第一场景之后,终端可以获取第一场景对应的第一数字地图。并且,终端可以根据步骤1205中的相关实现方式从第一数字地图中选取第一授权空间。
步骤1604:显示第一数字地图和第一授权空间。
步骤1605:获取目标媒体内容。
本步骤的实现方式可以参考前述实施例中的步骤1206,本申请实施例在此不再赘述。
步骤1606:在第一授权空间中添加目标媒体内容。
本步骤的实现方式可以参考前述实施例中的步骤1207,本申请实施例在此不再赘述。
步骤1607:确定目标媒体内容与目标对象之间的目标相对位置关系。
本步骤的实现方式可以参考前述实施例中的步骤1208,本申请实施例在此不再赘述。
步骤1608:向服务器发送第一用户标识、目标媒体内容、目标对象和目标相对位置关系,以使服务器根据目标媒体内容、目标对象和目标相对位置关系对预设数字地图中第一用户标识对应的其他授权空间进行内容更新。
其中,第一用户标识可以是终端在确定第一场景时即向服务器发送,也可以是在获取第一场景时发送了一次,在本步骤中再次发送了一次。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,在某个授权空间内添加目标媒体内容,确定目标媒体内容与目标对象之间的相对位置关系,并将该相对位置关系和目标对象、目标媒体内容发送至服务器,这样,服务器即可以通过在其他场景对应的数字地图中寻找与目标对象匹配的特征,并根据相对位置关系来将该目标媒体内容同步至第一用户标识对应的其他授权空间,这样,服务器可以自动完成多个授权空间内的媒体内容的添加,提高了添加效率,且能够保证添加的精准性。
图17是本申请实施例提供的一种服务器侧进行多个授权空间的内容同步的实现流程图,参见图17,该实现过程可以包括以下步骤:
步骤1701:获取终端发送的第一用户标识、目标对象、目标媒体内容以及目标媒体内容与目标对象之间的目标相对位置关系。
在本申请实施例中,服务器可以接收终端发送的第一用户标识,该第一用户标识可以相应终端登录的用户账号。
其中,目标媒体内容是终端已添加至第一场景对应的第一数字地图中的媒体内容,第一数字地图中包含有目标对象。服务器可以接收终端发送的目标对象、目标媒体内容以及目标相对位置关系。
步骤1702:根据第一用户标识获取第二场景对应的第二数字地图。
本步骤的实现方式可以参考前述实施例中的步骤1210中确定第二场景,并获取第二场景对应的第二数字地图的实现过程。其中,第二数字地图中同样包含有前述的目标对象。
步骤1703:在第二数字地图中确定目标对象的位置。
本步骤的实现过程可以参考前述实施例中的步骤1210的实现方式,本申请实施例在此不再赘述。
步骤1704:根据目标对象的位置和目标相对位置关系在第二授权空间中添加目标媒体内容,以使当终端在第二数字地图中渲染第二授权空间时,第二授权空间中的目标媒体内容与第二数字地图中的目标对象之间满足目标相对位置关系。
本步骤的实现方式可以参考前述实施例中的步骤1211中介绍的将目标媒体内容同步至第二授权空间的实现过程,本申请实施例在此不再赘述。
在本申请实施例中,服务器在接收到目标对象、目标媒体内容以及这二者之间的相对位置关系之后,可以通过在其他场景对应的数字地图中寻找与目标对象匹配的特征,并根据相对位置关系来将该目标媒体内容同步至第一用户标识对应的其他授权空间,这样,服务器可以自动完成多个授权空间内的媒体内容的添加,提高了添加效率,且能够保证多个授权空间内媒体内容的效果一致性。
上述实施例中主要介绍了在多个授权空间中同步增加媒体内容的实现方式,可选地在一些可能的场景中,还可以对多个授权空间中已包含的媒体内容进行同步编辑。图18是本申请实施例提供的另一种基于数字地图的多个授权空间的内容同步方法,该方法包括以下步骤:
步骤1801:终端获取第一用户标识。
本步骤的实现方式可以参考前述实施例中的步骤1201。
步骤1802:终端向服务器发送第一用户标识。
本步骤的实现方式可以参考前述实施例中的步骤1202。
步骤1803:服务器根据第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内第一用户标识对应的多个授权空间。
本步骤的实现方式可以参考前述实施例中的步骤1203。
步骤1804:服务器向终端发送k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的多个授权空间。
步骤1805:终端根据预设规则从k个场景中选择第一场景,并获取第一场景对应的第一数字地图。
本步骤的实现方式可以参考前述实施例中的步骤1204。
步骤1806:终端显示第一数字地图、第一授权空间和第一授权空间包括的第一媒体内容。
在本步骤中,终端在显示第一媒体内容时,如果第一媒体内容中的全部内容均处于第一授权空间内,则终端可以显示整个的第一媒体内容,可选地,如果第一媒体内容中的部分内容超出了第一授权空间的边界,则对于超出的部分内容,终端可以不对其进行显示,或者是与未超出的部分进行区别显示,例如,采用不同颜色不同透明度进行显示等。
步骤1807:终端按照第一编辑方式对所述第一媒体内容进行编辑。
在显示第一媒体内容之后,用户可以对第一媒体内容执行编辑操作。终端可以根据用户的编辑操作,按照与该编辑操作对应的第一编辑方式对第一媒体内容进行编辑。
具体的,终端可以在显示第一媒体内容的同时,显示编辑选项,用户可以点击该编辑选项,终端在检测到对该编辑选项的选择操作之后,可以进入编辑状态。之后,用户可以对第一媒体内容执行编辑操作。其中,第一编辑方式可以包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。相应地,编辑选项可以包括增加选项、删减选项、替换选项和移动选项。参见图19,示出了一种在编辑选项的示意图。
增加方式是指在第一媒体内容的基础上增加部分媒体内容或者是部分元素,其中增加的内容或元素可以是终端根据用户操作从自身存储的媒体内容或元素中获取的,也可以是从网络中获取的。具体的,终端获取所要增加的内容或元素的过程可以参考前述实施例中的步骤705,本申请实施例在此不再赘述。另外,终端在检测到对增加选项的选择操作,进入编辑状态之后,可以显示前述步骤705中介绍的媒体内容类型选项,用户可以通过选择媒体内容类型选项来获取媒体内容,进而实现媒体内容的增加。
删减方式是指对第一媒体内容进行删除,或者是对第一媒体内容中的部分元素进行删除。在这种情况下,用户可以选择删除选项,终端进入编辑状态,之后,用户可以选中所要删减的对象并执行删除操作以触发删除指令,终端在接收到该删除指令之后,可以对用户选中的对象进行删除。其中,在用户选中所要删除的某个对象之后,终端可以显示确认选项,在这种情况下,删除操作是指用户对该确认选项执行的选中操作。
替换方式是指将第一媒体内容替换为目标媒体内容或者是将第一媒体内容中的部分元素替换为目标元素。在这种情况下,用户可以选择替换选项,终端进入编辑状态。之后,用户可以选中所要替换的对象,当用户选中第一媒体内容或者是第一媒体内容中的部分元素之后,终端可以显示确认选项。终端可以在检测到用户选中该确认选项之后,删除用户选中的对象,并将目标媒体内容或目标元素放置在删除的对象的位置处,用户可以通过拖动目标媒体内容或目标元素来调整目标媒体内容或目标元素的位置。其中,目标媒体内容或者是目标元素的获取同样可以参考步骤705,本申请实施例在此不再赘述。
按照预设相对位移移动方式是指将第一媒体内容按照预设相对位移移动。其中,预设相对位移可以是通过用户的输入角度、距离计算得到,也可以是根据用户的移动操作确定得到。具体的,用户可以选中移动选项,之后,选中第一媒体内容,之后,用户可以拖动第一媒体内容进行移动,终端可以根据用户移动第一媒体内容的移动轨迹来得到预设相对位移,并按照预设相对位移将第一媒体内容从原始位置处移动到目标位置。
除此之外,第一编辑方式还可以包括修改第一媒体内容中包含的内容元素,或者是修改第一媒体内容的尺寸、显示位置、显示姿态等等。
需要说明的是,终端可以通过上述方式中的任一种对第一媒体内容进行编辑,或者,也可以将上述各种方式进行结合来对第一媒体内容进行编辑,本申请实施例对此不做限定。
步骤1808:终端向服务器发送第一媒体内容和第一编辑方式。
当用户确认完成编辑之后,终端可以向服务器发送第一媒体内容和第一编辑方式。
需要说明的是,第一编辑方式中可以包括编辑的内容和/或编辑参数等。例如,当第一编辑方式包括增加方式时,可以向服务器发送增加的媒体内容或元素,以及增加的媒体内容与第一媒体内容的相对位置关系等。当第一编辑方式包括删减方式时,向服务器发送的第一编辑方式可以包括删减的对象。当第一编辑方式包括替换方式时,向服务器发送的第一编辑方式可以包括用来替换第一媒体内容的目标媒体内容或目标元素,以及目标媒体内容或目标元素的位姿。当第一编辑方式包括按照预设相对位移移动方式时,向服务器发送第一编辑方式可以包括预设相对位移。
步骤1809:服务器按照第一编辑方式对第一用户标识对应的其他授权空间内的第一媒体内容进行编辑。
服务器在接收到第一媒体内容和第一编辑方式之后,首先可以在包含有第一用户标识对应的授权空间的数字地图中,查找是否包含有该第一媒体内容。如果查找到某个场景对应的数字地图中包括的第一用户标识的授权空间中包括有第一媒体内容,则服务器可以将该场景作为第二场景,并将第二场景中包含有第一媒体内容的第一用户标识的授权空间作为第二授权空间。之后,服务器可以按照第一编辑方式,对第二授权空间内包含的第一媒体内容进行编辑。在对第一媒体内容进行标记编辑之后,服务器可以存储编辑后的媒体内容,以便后续当终端显示第二授权空间时可以按照编辑后的媒体内容进行显示。
其中,需要说明的是,服务器按照第一编辑方式进行编辑,是指服务器根据第一授权空间中已被编辑的内容,对第二授权空间中同样的媒体内容进行相同的编辑操作,这样,可以使得各个授权空间中同样的媒体内容呈现相同的编辑效果,保证了多个授权空间内的媒体内容的效果一致性。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,对某个授权空间内的媒体内容进行编辑,并将该媒体内容和编辑方式发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找同样包含有该媒体内容的第一用户标识的授权空间,并根据接收到的编辑方式将相应授权空间内的媒体内容进行编辑,这样,服务器可以自动完成多个授权空间内相同媒体内容的编辑,提高了授权空间内媒体内容的编辑效率,保证了多个授权空间内媒体内容的效果一致性。
上述实施例介绍了终端和服务器进行交互以实现多个授权空间的媒体内容的同步的实现过程。图20提供了一种终端侧进行多个授权空间的内容同步的实现流程图,参见图20,该实现过程包括以下步骤:
步骤2001:获取第一用户标识。
本步骤的实现方式可以参考前述实施例中的步骤1201。
步骤2002:根据第一用户标识确定第一场景。
本步骤的实现方式可以参考前述实施例中的步骤1602。
步骤2003:获取第一场景对应的第一数字地图,第一数字地图包括第一授权空间。
本步骤的实现方式可以参考前述实施例中的步骤1603。
步骤2004:显示第一数字地图、第一授权空间和第一授权空间内包括的第一媒体内容。
本步骤的实现方式可以参考前述实施例中的步骤1806。
步骤2005:按照第一编辑方式对第一媒体内容进行编辑。
本步骤的实现方式可以参考前述实施例中的步骤1807。
步骤2006:向服务器发送第一用户标识、第一媒体内容和第一编辑方式,以使服务器按照第一编辑方式对预设数字地图中第一用户标识对应的其他授权空间内的第一媒体内容进行编辑。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,对某个授权空间内的媒体内容进行编辑,并将该媒体内容和编辑方式发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找同样包含有该媒体内容的第一用户标识的授权空间,并根据接收到的编辑方式将相应授权空间内的媒体内容进行编辑,这样,服务器可以自动完成多个授权空间内相同媒体内容的编辑,提高了授权空间内媒体内容的编辑效率,保证了多个授权空间内媒体内容的效果一致性。
图21是本申请实施例提供的一种服务器侧的多个授权空间的媒体内容同步方法的流程图。参见图21,该方法包括以下步骤:
步骤2101:获取终端发送的第一用户标识、第一媒体内容和第一编辑方式。
在本申请实施例中,服务器可以接收终端发送的第一用户标识,该第一用户标识可以相应终端登录的用户账号。
其中,服务器可以接收终端发送的第一媒体内容和第一编辑方式,该第一媒体内容是第一场景对应的第一数字地图中包括的第一授权空间内所包含的媒体内容。第一编辑方式可以包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。
步骤2102:根据第一用户标识获取第二场景对应的第二数字地图。
本步骤的实现方式可以参考前述示例中的步骤1809中获取第二数字地图和第二授权空间的实现方式,本申请实施例在此不再赘述。
步骤2103:按照第一编辑方式对第二授权空间中包括的第一媒体内容进行编辑。
本步骤可以参考前述示例中步骤1809的实现方式,本申请实施例对此不再赘述。
在本申请实施例中,服务器在接收到第一媒体内容和第一编辑方式之后,可以在其他场景对应的数字地图中包括的第一用户标识对应的授权空间中寻找与第一媒体内容,并根据第一编辑方式来对查找到的第一媒体内容进行编辑,从而实现多个授权空间中相同媒体内容的同步编辑,这样,服务器可以自动完成多个授权空间内的媒体内容的编辑,提高了编辑效率,且保证了多个授权空间内媒体内容的效果一致性。
可选地,由前述步骤703中的介绍可知,终端在将第一用户标识发送至服务器后,服务器可以在目标场景对应的数字地图中查找是否存在与第一该用户标识对应的授权空间。其中,若服务器未查找到与该第一用户标识对应的授权空间,则说明注册用户在该目标场景对应的数字地图中并没有授权空间,此时,如果目标场景对应的数字地图内还存在未被授权给其他注册用户的三维空间,则服务器可以向终端发送提示信息。终端可以显示该提示信息,以提示该注册用户在该数字地图中不存在其对应的授权空间。也即,本申请实施例还提供了一种对申请授权空间的方法,用户可以在现场对虚拟授权空间进行购买、分割转让。接下来,终端和注册用户可以通过交互来实现授权空间的申请。
其中,用户可以在终端上通过点选基本区域形状及或拖拽放大缩小旋转等交互方式设置合适位置、大小以及形状的一块或多块虚拟空间进行授权空间申请,提交到服务器并通过支付费用或其它方式合理获得授权。
示例性地,终端可以在目标场景的预览流中显示申请选项。当检测到针对申请选项的选择指令时,终端可以向服务器发送空间申请请求。其中,该空间申请请求用于向服务器申请授权空间,且空间申请请求中携带第一用户标识、终端的位姿和授权空间的需求。
在一种可能的实现方式中,当检测到针对申请选项的选择指令时,终端可以显示预置空间,以指示用户根据目标场景的预览流对预置空间执行设置操作;当检测到针对预置空间的设置指令时,根据设置指令包含的设置参数确定设置后的预置空间的位姿和大小,将设置后的预置空间的位姿和大小作为授权空间的需求。
其中,终端可以显示预设形状和大小的预置空间。其中,预设形状可以为立方体或球体等,本申请实施例对此不做限定。用户可以通过对该预置空间执行设置操作来触发对该预置空间的设置指令。其中,用户可以首先通过拖动该预置空间,将该预置空间放置在目标场景的预览流的某个位置处,之后,用户可以通过拖动该预置空间的边界来调整该预置空间的大小,除此之外,用户还可以通过旋转该预置空间来调整该预置空间的姿态。当用户通过上述一系列操作对该预置空间设置完成之后,终端可以将设置后的预置空间的位姿和大小作为授权空间的需求携带在空间申请请求中发送至服务器。
可选地,在另一种可能的实现方式中,终端也可以显示空间选项,该空间选项中包含有授权空间的形状选项、尺寸选项和数量选项,用户可以从中选择自身所要申请的授权空间的形状、大小和数量,终端可以获取用户选取的授权空间的形状、大小和数量,并将其作为授权空间的需求。
可选地,在另一种可能的实现方式中,终端也可以显示空间信息输入框,由用户输入自身所要申请的授权空间的形状、大小和数量等信息,终端可以获取用户输入的信息,并将这些信息作为授权空间需求。
服务器在接收到该空间申请请求之后,可以根据该空间申请请求包括的信息,为第一用户标识分配对应的n个授权空间,之后,服务器可以向终端发送授权响应,该授权响应中可以携带n个授权空间。
示例性地,服务器可以根据终端的位姿来获取目标数字地图,之后,服务器可以在目标数字地图中查找是否存在满足授权空间的需求但是还未被其他用户申请的空间。如果存在,则服务器可以将该空间分配给第一用户标识所标识的注册用户,也即,作为第一用户标识对应的授权空间,将该空间的空间信息和第一用户标识对应存储。之后,服务器可以向终端返回申请成功消息,以通知终端授权空间申请成功。
可选地,如果目标数字地图中不存在满足授权空间的需求的空间,或者是存在满足授权空间的需求的空间,但是该空间为其他注册用户的授权空间,则服务器可以向终端返回申请失败消息,以提示终端授权空间的申请失败。
图22是本申请实施例示出的在用户界面上显示预置空间,并对预置空间进行设置的示意图。如图22所示,用户可以通过拖动预置空间将其移动至指定位置处,之后,可以通过拖动预置空间的角点来缩小或放大该预置空间。
可选地,在一种可能的实现方式中,终端在检测到针对申请选项的选择指令时,可以首先根据终端的位姿从服务器中获取目标场景对应的数字地图,之后,终端可以在目标场景的预览流中显示该目标场景对应的数字地图中预先分割好的空间区块。用户可以选择其中的一个或多个空间区块,终端可以将用户选择的一个或多个空间区块作为该用户想要申请的空间,并将该空间的位姿和大小作为授权空间的需求携带在空间申请请求中发送至服务器,以便服务器根据该授权空间的需求来决定是否将该空间作为第一用户标识对应的授权空间。
图23是本申请实施例示出的在目标场景的预览流中显示的预先分割好的空间区块。如图23所示,位于建筑物前方的空间可以被划分为多个空间区块,用户可以从多个空间区块中选择一个或多个空间区块作为要申请的空间。
需要说明的是,在本申请实施例中,考虑到对于某个建筑物而言,该建筑物的不同方向上的空间可以被不同的注册用户申请为授权空间,在这种情况下,在构建数字地图中,对每个位置都进行空间占用区域划定,例如,某个三维空间中已有建筑物,则在构建数字地图时,以该建筑物的包围盒进行标定。这样,当注册用户申请该建筑物某一侧的空间时,可以将用户申请的授权空间和该建筑物所占的空间进行绑定。如此,对于一个建筑物,该建筑物的不同方向上空间被不同的注册用户申请时,这些用户申请的授权空间将均与该建筑物所占的空间进行绑定。
例如,如图24所示,第一用户申请了授权空间A,第二用户申请了授权空间B,建筑物所占的空间为C,则对于第一用户而言,可以将空间A和C进行绑定,对于第二用户而言,可以将空间B+C进行绑定。这样,后续服务器在获取到用户标识之后,即可以根据用户标识确定对应的场景,该场景就包含有空间该用户标识的授权空间以及与该授权空间绑定的空间。
在本申请实施例中,用户可以通过与终端进行交互,根据目标场景的预览流和终端当前的位姿来实现授权空间的申请,这样,用户可以实时的根据自己所见来进行授权空间的申请,也即,实现了空间的所见即所得,提升了授权空间申请的便利性,提高了申请效率。
当通过上述方法在授权空间内添加媒体内容之后,后续,对于消费用户来说,当第一消费用户通过第一终端采集目标场景的视频时,可以根据该第一终端的位姿,从服务器中拉取该目标场景内所包含的授权空间内添加的媒体内容进行显示。与此同时,第一终端还可以将该目标场景的视频发送至第二终端,以便第二终端根据该目标场景的视频获取该目标场景内所包含的授权空间内添加的媒体内容进行显示,从而实现数字地图内媒体内容的分享。接下来,对本申请实施例的提供的基于数字地图的媒体内容分享方法进行介绍。如图25所示,该方法包括以下步骤:
步骤2501:第一终端向第二终端发送目标场景的视频。
第一终端可以根据自身配置的摄像组件来采集目标场景的视频。其中,该目标场景的视频中包含有第一终端拍摄该视频时的目标位姿。第一终端在采集到该视频之后,可以将该目标位姿发送至服务器,服务器可以根据该目标位姿从存储的媒体内容中获取与该目标位姿匹配的媒体内容。将获取到媒体内容发送至第一终端,第一终端可以在目标场景的视频中渲染接收到的媒体内容。
与此同时,该第一终端还可以显示内容分享选项,当第一终端检测到第一用户针对该内容分享选项的选择操作时,第一终端可以获取第一用户选择的第二用户,并将该目标场景的视频发送至第二用户对应的第二终端。
步骤2502:第二终端向服务器发送目标位姿。
第二终端在接收到目标场景的视频之后,可以检测到该目标场景的视频中包含有目标位姿。此时,第二终端可以获取该目标位姿,并将该目标位姿发送至服务器。
可选地,在一种可能的实现方式中,第二终端在获取到目标场景的视频之后,可以播放视频,在视频的播放过程中,用户可以在播放的视频画面上选取指定区域。第二终端可以从该指定区域中提取目标对象,并将该目标对象,该目标对象的位姿以及目标位姿发送至服务器。
需要说明的是,第二终端在播放视频时,可以显示媒体内容显示开关选项。用户可以通过激活该选项来触发媒体内容显示开启指令,同时也可以通过关闭该选项来触发媒体内容显示关闭指令。第二终端在接收到该开启指令之后,可以开始执行步骤2503-2505,从服务器中获取目标媒体内容并进行显示。当第二终端接收到关闭指令时,即可以停止显示目标媒体内容。
图26示出了一种在视频页面上显示媒体内容显示开关选项的示意图。如图26所示,该媒体内容开关选项可以为图26所示的AR内容选项,该AR内容选项可以初始状态可以默认为激活状态,在此状态下,第二终端可以检测到的指令为开启指令。用户点击该AR内容选项,可以触发关闭指令,以停止显示目标媒体内容。用户再次点击该AR内容选项,可以触发开启指令,第二终端可以再次根据该开启指令执行后续步骤。
步骤2503:服务器根据目标位姿获取目标媒体内容。
由前述实施例中介绍可知,在添加媒体内容时,终端会将在授权空间中添加的媒体内容、媒体内容的位姿发送至服务器,由服务器进行存储。基于此,在本步骤中,服务器可以从存储的媒体内容中查找与该目标位姿相匹配的目标媒体内容。
可选地,如果第二终端不仅发送了目标位姿,还发送了目标对象和目标对象的位姿,则服务器可以根据接收到目标位姿获取目标场景对应的数字地图,之后,在目标场景对应的数字地图中搜索与目标对象相匹配的特征。之后,服务器可以获取与该目标对象相关的已添加的媒体内容,将获取的媒体内容作为目标媒体内容发送至终端。其中,与该目标对象相关的媒体内容可以是指位姿与该目标对象的位姿满足预设位姿关系的媒体内容,或者是距离该目标对象最近的媒体内容,或者是以该目标对象为中心的一定范围区域内包含的媒体内容等等。例如,以该目标对象为中心,周边50米区域内已注册的内容。
步骤2504:服务器向第二终端发送目标媒体内容。
其中,服务器不仅可以向第二终端发送目标媒体内容,还可以向第二终端发送目标媒体内容的位姿。
步骤2505:第二终端在播放目标场景的视频的同时渲染目标媒体内容。
在本申请实施例中,第二终端可以接收第一终端分享的目标场景的视频,并根据该视频中包含的目标位姿从服务器中获取相应位置上已添加的媒体内容进行显示。这样,各个终端之间即可以通过视频分享的方法来实现对已添加至数字地图中的媒体内容的分享,便于媒体内容的传播。
上述实施例主要介绍了第一终端、第二终端和服务器之间通过交互来实现媒体内容的分享的实现过程,接下来,图27提供了一种第二终端侧基于第一终端分享的视频来获取媒体内容的方法流程图,参见图27,该方法包括以下步骤:
步骤2701:获取第一终端发送的目标场景的视频。
其中,目标场景的视频携带第一终端拍摄目标场景的视频时的目标位姿。
步骤2702:根据目标位姿获取待显示的目标媒体内容。
在本步骤中,第二终端可以将目标场景的视频中携带的目标位姿发送至服务器,服务器可以通过前述实施例中步骤2503的实现方式来根据目标位姿获取目标媒体内容,进而将该媒体内容发送至第二终端。相应地,第二终端可以接收服务器发送的目标媒体内容。
步骤2703:播放目标场景的视频,并在播放目标场景的视频的同时渲染目标媒体内容。
在获取到目标媒体内容之后,第二终端可以在播放目标场景的视频的同时渲染目标媒体内容。
在本申请实施例中,第二终端可以接收第一终端分享的目标场景的视频,并根据该视频中包含的目标位姿从服务器中获取相应位置上已添加的媒体内容进行显示。这样,各个终端之间即可以通过视频分享的方法来实现对已添加至数字地图中的媒体内容的分享,便于媒体内容的传播。
值得注意的是,在上述各个方法实施例中,各个步骤的执行顺序并不受步骤编号的限制,也即,上述实施例中的有些步骤可以不分先后的执行。另外,在不违背自然规律的前提下,上述各个实施例中的步骤还可以进行随意组合,本申请实施例对此不做限定。
参见图28,本申请实施例提供了一种基于数字地图的授权空间显示装置2800,该装置包括:
第一获取模块2801,用于执行前述实施例中的步骤701;
第二获取模块2802,用于执行前述实施例中的步骤702;
第三获取模块2803,用于执行前述实施例中的步骤703;
渲染模块2804,用于执行前述实施例中的步骤704。
可选地,该装置还包括:
第四获取模块,用于获取目标媒体内容,目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;
添加模块,用于在目标授权空间内添加目标媒体内容,目标授权空间为n个授权空间中的任一个授权空间。
可选地,添加模块具体用于:
当检测到针对目标媒体内容的拖动指令时,在拖动指令所指示的拖动终点位置处,添加目标媒体内容,其中,目标媒体内容中位于目标授权空间内的媒体内容和位于目标授权空间外的媒体内容的显示方式不同,或者,目标媒体内容中位于目标授权空间内的媒体内容可见,位于目标授权空间外的媒体内容不可见。
可选地,该装置还包括:
确定模块,用于确定目标媒体内容与目标对象之间的目标相对位置关系,目标对象为目标场景对应的数字地图中包括的预设的图像或三维物体;
发送模块,用于向服务器发送目标媒体内容、目标对象和目标相对位置关系,以使服务器根据目标媒体内容、目标对象和目标相对位置关系,对在预设数字地图中第一用户标识对应的其他授权空间进行内容更新。
可选地,目标媒体内容与第一特征的相对位置关系满足第一预设位置关系,第一特征为目标场景的预览流中包括的预设的图像或三维物体。
可选地,第三获取模块2803具体用于:
向服务器发送第一用户标识和位姿,以使服务器根据第一用户标识和位姿获取n个授权空间;
接收服务器发送的n个授权空间。
可选地,第三获取模块2803具体用于:
向服务器发送第一用户标识、位姿和空间筛选条件,以使服务器根据第一用户标识和位姿获取m个授权空间,并从m个授权空间中获取满足空间筛选条件的n个授权空间;
接收服务器发送的n个授权空间。
可选地,第三获取模块2803具体用于:
向服务器发送第一用户标识和位姿,以使服务器根据第一用户标识和位姿获取m个授权空间;
接收服务器发送的m个授权空间;
从m个授权空间中获取满足空间筛选条件的n个授权空间。
可选地,第三获取模块2803具体用于:
向服务器发送空间申请请求,空间申请请求用于向服务器申请授权空间,且空间申请请求携带第一用户标识和位姿、以及授权空间的需求,以使服务器根据位姿和授权空间的需求为第一用户标识分配对应的n个授权空间;
接收服务器发送的授权响应,授权响应携带n个授权空间。
可选地,渲染模块2804具体用于:
根据位姿,在目标场景的预览流中以预设显示形式渲染n个授权空间,其中,预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
可选地,该装置还包括调整模块和发送模块;
调整模块,用于如果n个授权空间的位姿与目标场景的预览流的位姿不匹配,对n个授权空间在数字地图中的位姿进行调整,以使n个授权空间的位姿与目标场景的预览流的位姿匹配;
发送模块,用于向服务器发送调整后的n个授权空间的位姿,以使服务器对n个授权空间在数字地图中的位姿进行更新。
可选地,在目标场景的预览流中渲染的n个授权空间与第二特征的相对位置关系满足第二预设位置关系,第二特征为目标场景的预览流中包括的预设的图像或三维物体。
综上所述,在本申请实施例中,终端可以根据第一用户标识和终端的位姿,获取当前的注册用户在目标场景对应的数字地图中的授权空间,进而在目标场景的预览流中渲染该注册用户的授权空间,使得注册用户可以实时查看到与当前场景对应的授权空间,更为便利。另外,由于在目标场景对应的预览流中明确显示了授权空间,因此,注册用户可以清晰的获悉自身的授权空间的边界,在这种情况下,用户在该授权空间中添加媒体内容,可以有效的避免添加的媒体内容侵占其他用户的授权空间,实现了媒体内容的精准添加,提高了添加效率。
图29是本申请实施例提供的一种基于数字地图的多个授权空间的内容同步装置2900的结构示意图,参见图29,该装置2900包括:
第一获取模块2901,用于执行前述实施例中的步骤1601;
第一确定模块2902,用于执行前述实施例中的步骤1602;
第二获取模块2903,用于执行前述实施例中的步骤1603;
显示模块2904,用于执行前述实施例中的步骤1604;
第三获取模块2905,还用于执行前述实施例中的步骤1605;
添加模块2906,用于执行前述实施例中的步骤1606;
第二确定模块2907,用于执行前述实施例中的步骤1607;
发送模块2908,用于执行前述实施例中的步骤1608。
可选地,第一确定模块2902包括:
发送子模块,用于向服务器发送第一用户标识,以使服务器根据第一用户标识获取k个场景;
接收子模块,用于接收服务器发送的k个场景;
选择子模块,用于根据预设规则从k个场景中选择第一场景。
可选地,选择子模块具体用于:
从k个场景中选择距离终端的位置最近的场景作为第一场景;或者,
从k个场景中选择优先级最高的场景作为第一场景;或者,
从k个场景中选择默认的场景作为第一场景。
可选地,第一确定模块2902具体用于:
向服务器发送第一用户标识和场景需求,以使服务器根据第一用户标识获取第一用户标识对应的k个场景,并从k个场景中获取满足场景需求的第一场景;
接收服务器发送的第一场景。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
在本申请实施例中,终端可以同时获取多个场景对应的数字地图和每个数字地图内包含的第一用户标识对应的授权空间,之后,在某个授权空间内添加目标媒体内容,确定目标媒体内容与目标对象之间的相对位置关系,并将该相对位置关系和目标对象、目标媒体内容发送至服务器,服务器可以通过在其他场景对应的数字地图中寻找与目标对象匹配的特征,并根据相对位置关系来将该目标媒体内容同步至第一用户标识对应的其他授权空间,这样,服务器可以自动完成多个授权空间内的媒体内容的添加,提高了添加效率,且能够保证添加的精准性。
图30是本申请实施例提供的一种基于数字地图的多个授权空间的内容同步装置3000的结构示意图,参见图30,该装置3000包括:
第一获取模块3001,用于执行前述实施例中的步骤1701;
第二获取模块3002,用于执行前述实施例中的步骤1702;
确定模块3003,用于执行前述实施例中的步骤1703;
添加模块3004,用于执行前述实施例中的步骤1704。
可选地,该装置还包括:
调整模块,用于如果目标媒体内容与第二授权空间不匹配,则对目标媒体内容进行调整,以使调整后的目标媒体内容与第二授权空间匹配。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
在本申请实施例中,服务器可以获取终端发送的目标对象、目标媒体内容和目标媒体内容与目标对象之间的相对位置关系,之后,根据目标对象和目标相对位置关系在第二授权空间中添加目标媒体内容,也即,实现了自动统一更新用户标识对应的各个授权空间中的媒体内容的效果,更新效率高。
图31是本申请实施例提供的一种基于数字地图的多个授权空间的内容同步装置3100的结构示意图,参见图31,该装置3100包括:
第一获取模块3101,用于执行前述实施例中的步骤2001;
确定模块3102,用于执行前述实施例中的步骤2002;
第二获取模块3103,用于执行前述实施例中的步骤2003;
显示模块3104,用于执行前述实施例中的步骤2004;
编辑模块3105,用于执行前述实施例中的步骤2005;
发送模块3106,用于执行前述实施例中的步骤2006。
可选地,第二获取模块包括:
发送子模块,用于向服务器发送第一用户标识,以使服务器根据第一用户标识获取k个场景对应的数字地图以及每个场景对应的数字地图内第一用户标识对应的多个授权空间;
接收子模块,用于接收服务器发送的k个场景对应的数字地图和每个场景对应的数字地图内第一用户标识对应的多个授权空间;
选择子模块,用于根据预设规则从k个场景中选择第一场景,获取第一场景对应的第一数字地图。
可选地,选择子模块具体用于:
从k个场景中选择距离终端的位置最近的场景作为第一场景;或者,
从k个场景中选择优先级最高的场景作为第一场景;或者,
从k个场景中选择默认的场景作为第一场景。
可选地,确定模块具体用于:
向服务器发送第一用户标识和场景需求,以使服务器根据第一用户标识获取第一用户标识对应的k个场景,并从k个场景中获取满足场景需求的第一场景;
接收服务器发送的第一场景。
可选地,第一编辑方式包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
图32是本申请实施例提供的一种基于数字地图的多个授权空间的内容同步装置3200的结构示意图,参见图32,该装置3200包括:
第一获取模块3201,用于执行前述实施例中的步骤2101;
第二获取模块3202,用于执行前述实施例中的步骤2102;
编辑模块3203,用于执行前述实施例中的步骤2103。
可选地,该装置还包括:
调整模块,用于如果编辑后的媒体内容与第二授权空间不匹配,则对编辑后的媒体内容进行调整,以使调整后的媒体内容与第二授权空间匹配。
可选地,第一编辑方式包括增加方式、删减方式、替换方式和按照预设相对位移移动方式中的一种或多种。
可选地,在数字地图中,不同用户标识对应不同的授权空间。
图33是本申请实施例提供的一种基于数字地图的媒体内容分享装置3300,该装置应用于第二终端,该装置包括:
第一获取模块3301,用于执行前述实施例中的步骤2401;
第二获取模块3302,用于执行前述实施例中的步骤2402;
显示模块3303,用于执行前述实施例中的步骤2403。
可选地,第二获取模块3302具体用于:
向服务器发送目标位姿,以使服务器根据目标位姿获取目标媒体内容;
接收服务器发送的目标媒体内容。
在本申请实施例中,第二终端可以接收第一终端分享的目标场景的视频,并根据该视频中包含的目标位姿从服务器中获取相应位置上已添加的媒体内容进行显示。这样,各个终端之间即可以通过视频分享的方法来实现对已添加至数字地图中的媒体内容的分享,便于媒体内容的传播。
AR&VR数字空间(也叫虚拟空间)及数字内容(也叫虚拟内容)管理是支撑AR&VR大规模商业应用的核心技术,具有极其重要的战略价值。随着AR&VR的大规模普及应用,越来越多的用户,如内容开发者需要在数字空间中生产、创作、设置数字内容。如何让普通用户方便快捷的在数字空间中生产数字内容,以及如何管理和维护海量用户在数字空间中产生的各种数字内容是亟待解决的问题。本发明提供的方案能够让普通用户(如开发者)在“所见即所得的数字空间”中进行数字内容的创作编辑,同时提供了一种在时间和空间上对海量用户的数字内容进行权限管理的方法,能够保证数字空间资源有序高效的提供给不同用户,实现数字空间的最优利用。整个AR&VR的内容运营中,可以至少包括3大角色,一个是开发者,一个是内容服务器,一个是消费者。开发者主要是涉及增强或者渲染的内容的,是内容的“设计者”,其使用的终端也可以称为开发者终端;消费者主要是体验内容的,是内容的“观赏者”,如通过AR&VR等软件基于现实世界在终端上渲染出虚拟内容,达到如增强现实的目的,其使用的终端可以成为消费者终端;内容服务器是对媒体内容、数字空间进行管理的,是衔接开发者终端和消费者终端的中间纽带,可以保存和更新开发者设计的内容;并且在响应消费者终端的相关需求时,能够将这些内容下发给消费者终端,以使得消费者终端呈现的内容正如开发者开发时的内容形态;三者可以通过相关软件建立信息通信以及坐标系的参考与映射。
结合前述实施例中可选的实施方式,本申请将结合一些具体地应用场景描述一些可选的应用示例。
示例1
该示例描述了一种注册虚拟空间的方法,如图34所示,该方法包括:
步骤3401:终端基于第一用户标识登录预设应用。
其中,预设应用可以是一个app也可以是一种包含了AR&VR功能模块的app;该app可以用于基于当前终端的拍摄场景为当前登录账户在服务器注册具有编辑虚拟物体权限的虚拟空间。例如,用户进入特定的APP,或者运营类的APP内的某个跳转接口,小程序或者网页跳转。第一用户标识可以表示当前登录的账户信息。
具体的操作界面可以如图35所示,当用户进入app时,可以注册新的账号,也可以通过已有账号进行登录,账号可以用于但不限于表征开发者的用户身份,这些账号可以由内容运营公司进行运维,每个账号都有开发虚拟内容的权利,但是对于同一地点或物体,不同的账号主体不应该同时有虚拟内容的交叠,这样会导致消费者终端在观看该地点或物体的渲染效果时,虚拟内容重叠而失去了美感,带来了一种混乱交叠的感受,会降低消费者的体验。因此,对于不同的账号,如何科学地管理自己的虚拟内容同时又不干扰到其他账号的虚拟内容就显得十分必要。为了更好地解决这一问题,本发明提出给不同的账户注册不同的虚拟空间,每个账户可以在各自申请到权限的虚拟空间中自由编辑虚拟内容。
步骤3402:呈现第一界面;所述第一界面中包含有注册虚拟空间的选项;
当用户登录进入app后,可以显示“目标虚拟空间(预设授权空间)注册”或者“已注册目标虚拟空间(授权空间)管理”等功能选项,即一个是注册新的虚拟空间,一个是管理已注册的虚拟空间。应理解,该图36中的选项仅做示意,不做限定。
步骤3403:响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;
可选地,当用户登录app后可以启动摄像头拍摄当前场景,如图36所示;也可以是登录app后,响应空间注册的操作后,启动摄像头拍摄当前场景,如图37所示;本发明不做限定。
步骤3404:获取目标几何体;目标几何体用于表征用户期待注册到的虚拟空间的形态,具体的包括虚拟空间的大小、位置和/或姿态朝向。
如图38、图39所示,可以在预览流中渲染或显示所述目标几何体(如图38、39中的虚线立方体);在用户确定空间形状的过程中,可以实时显示目标几何体。
可选的,在用户编辑的过程中,终端会出现抖动,目标几何体在编辑的过程中可以是相对界面是不动的,给用户一种“静止”状态的感受;可选地,也可以是相对界面可移动的。
可选的,获取目标几何体的方式具体可以包括但不限于下述任一种方式。
方式1:获取预设应用中默认的几何体,将默认的几何体作为所述目标几何体。例如终端本地或者应用中存储的圆柱形或立方体。如图38中的立方体。
方式2:获取用户自定义的几何体作为目标几何体。例如,用户可以点击预设按钮,界面中会显示空间的形状,如长方体、正方体、圆柱体等几何体,用户选择自己喜欢的形状的几何体,并可以将其放置到预览流中的确切位置,并通过编辑控件进一步调节几何体的大小、位置和朝向,直到满足用户期望。如图39,点击自定义按钮,用户根据期望的空间大小和位置,用户可在平面上点击形成闭合曲线,并设置高度,从而得到自定义的几何体。然后可通过编辑按钮进一步调节几何体的大小、位置和朝向,完成之后即可保存并发布。
方式3:根据用户在几何体的素材库中的选择指令,获取用户选择的几何体作为目标几何体。例如,当用户调用素材库时,界面中会呈现多种已经设计好的经典素材,它们的位置、大小、朝向采用经验值设计,用户可以通过选择指令从中选择满足需求的几何体。
方式4:获取适配第一场景的目标几何体。可选的,终端可以根据第一场景中画面内容进行分析与识别,根据场景的类型、画面中的主体建筑、主体物体、或者它们的外形大小姿态等特征,进行适配得到适配当前场景的几何体;可选地,终端可以把预览流中的至少一副图像发给服务器,由服务器进行类似上述方式的相关适配,得到适配当前场景的几何体,并返回给终端。
应理解,用户在设计、编辑或者选择几何体的过程中,终端可以实时获得几何体的几何信息;几何体的几何信息包括:几何体的形状、方向、姿态、坐标中的至少一种参数。即终端可以根据预设的坐标匹配关系计算出了几何体的各项数学参数。
用户获得目标几何体之后,即可保存并发布,并执行步骤3405。
步骤3405:将第一用户标识、预览流和目标几何体发送给服务器;预览流和目标几何体用于确定第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;第一虚拟空间是与第一场景所在的真实世界相对应的虚拟空间或数字空间。
第一虚拟空间可以对应一个或多个数据包。消费者终端通过AR&VR渲染虚拟内容时,目标虚拟空间、第一虚拟空间与现实世界的坐标会进行转换对齐;应理解,目标虚拟空间、第一虚拟空间可以是一个数据包也可以是不同的数据包。
可选地,为了达到更加精确的位姿信息,终端还可以利用地理位置信息(GPS)、惯性传感器信息(IMU)等信息进行更精确的计算,或者将这些信息发送给服务器,由服务器来执行相关计算。
步骤3406:接收所述服务器发送的反馈指令;所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间,或者,无法成功注册所述目标虚拟空间。
可选的,服务器可以通过一些规则来判断该账户申请的目标虚拟空间是否合法,如果合法,可以返回终端注册成功的提示,如果不合法,则可以返回终端注册失败的提示。如图40所示,“申请状态提示”可以表示反馈指令,可以是注册成功的提示,即授权,也可以是无法成功注册的提示,即没有授权。
可选地,当反馈指令指示终端基于目标几何体无法成功注册所述目标虚拟空间时,还可以在当前显示界面中提示用户需要更新目标几何体的形状;或者,在当前显示界面中提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,在当前显示界面中提示用户重新进行虚拟空间的申请。如图40中“是否重新申请”的提示。
可选地,当反馈指令指示终端基于目标几何体可以成功注册所述目标虚拟空间时,可以提示用户目标虚拟空间对于该账户的有效时段;其中,有效时段用于指示第一用户标识在有效时段内在目标虚拟空间中具有编辑虚拟内容的权限。例如,可以全时段有效;或者该账户拥有的虚拟空间与其他账户拥有的虚拟空间在空间数据上有交叠,但是不会在同一个时段有效。
可选地,当反馈指令指示终端基于目标几何体可以成功注册所述目标虚拟空间后,还可以在第一场景的预览流中显示或渲染目标虚拟空间;此时,在预览流中,目标虚拟空间与第一场景的相对位置保持不变,可以理解为与目标虚拟空间中的某一个建筑或物体保持相对不变;因此预览流发生画面的变化时,目标虚拟空间也会跟随画面变化发生变化,给用户一种视觉上的同步。
步骤3407:上述目标虚拟空间可以让用户可见即所得地设计或编辑虚拟内容,进一步的,用户可以获取目标虚拟内容,可以调用素材也可以自定义进行编辑一些媒体内容,用户在界面中渲染或显示的目标虚拟空间,也就是目标几何体中设置目标虚拟内容,此时,终端同步可以得到放置的目标虚拟内容的位姿;终端可以将得到的目标虚拟内容和虚拟内容的位姿发送给所述服务器,服务器可以根据目标虚拟内容和虚拟内容的位姿对虚拟空间进行更新,使得消费者终端在扫描第一场景时能够如开发者账户当初设计的姿态进行上述虚拟内容的渲染。终端在预览流界面中渲染或显示上述目标虚拟空间,可以使得开发者能够在有权限的空间内,自由设计虚拟内容,使得虚拟内容不超过目标空间的边界。
步骤3408:可选地,当用户已有注册的虚拟空间之后,可以进一步地在虚拟空间中进行虚拟内容的管理与编辑。编辑的时机可以是上述步骤3407中的设置目标虚拟物体。还可以是当用户在app中点击“已注册授权空间管理”(如图37所示)的选项后,终端呈现目标虚拟空间的管理界面,以供用户进行虚拟内容的设计与编辑。一种可编辑的设计界面可以如图41所示,包括但不限于增加、删减、编辑、替换、改换位姿等中的一个或多个选项,供用户自定义编辑。
在编辑的过程中,终端还可以显示如下一些实例的界面,如图42所示,界面中可以有隐藏选项,来显示或者隐藏预览流中的授权空间(虚拟空间)。如图43所示,界面中可以包括文字、图片、音频、视频、模型、网页等各种可能类型的媒体内容,还可以是购物链接/商品、菜单,产品,文字,小游戏等;这些都可以成为虚拟内容的素材。以添加模型作为虚拟内容为例进行说明,如图44所示,用户在服务器已经授权的虚拟空间中选择或增添了一个圆柱体的模型;如图45所示,用户可以对模型进行平移操作,还可以如图46所示,进行缩放操作;还可以如图47所示,进行旋转操作等。应理解,在用户编辑操作的过程中,终端可以实时计算得到虚拟物体的位姿。以便以开发者用户同样的观看效果进行数字空间更新。
作为另一种可选的,开发者还可以针对同一个场景,在同一个目标虚拟空间中编辑多套虚拟内容。举例说明,如图48所示,用户即可以编辑一套含有“正方体”的虚拟内容,也可以编辑一套包含“圆柱体”的虚拟内容。开发者终端可以将多套内容发送给服务器,使得服务器对数字空间进行更新;具体的,开发者终端还可以对这些多套内容进行优先级的排序。待消费者终端扫描该场景时,可以默认下发优先级最高的虚拟内容进行渲染,并为消费者用户提供多套内容的选项,使得消费者用户根据自己的选择观看到更多的不同的渲染内容。
示例2
该示例描述了一种注册虚拟空间的方法,如图49所示,该方法包括:
步骤4901:接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的。
具体的,终端获得的第一用户标识、第一场景的预览流和目标几何体的方式可以参见前述实施例。此处不再赘述。
当用户开发者终端在app中点击如图41中的“发布”时,即向服务器提交注册申请时,就可以将这些信息发送给服务器。
步骤4902:根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。
具体的,服务器可以根据第一场景的预览流与第一虚拟空间获取终端在第一虚拟空间中的第一位姿信息;根据目标几何体与第一虚拟空间获取目标几何体在第一虚拟空间中的第二位姿信息;根据第一位姿信息、第二位姿信息、目标几何体确定目标虚拟空间。
具体的,第一虚拟空间是在终端本地存储的或者是在服务器存储的;第一位姿信息是由所述服务器计算得到的,或者由终端计算得到的;第二位姿信息是由服务器计算得到的,或者由终端计算得到的。
可选的,根据第一场景的预览流获取终端在所述第一虚拟空间中的第一位姿信息包括:将第一场景的预览流或其中至少一个图像发送给服务器;服务器基于所述第一场景的预览流或其中至少一个图像在所述第一虚拟空间中进行对应计算得到的。
可选的,获取目标几何体在第一虚拟空间中的第二位姿信息包括:通过第一场景的预览流来确定出第一场景中的深度信息;根据第一场景中的深度信息和目标几何体的几何信息得到第二位姿信息;或者,根据第一虚拟空间和目标几何体的几何信息得到第二位姿信息;或者,获取用户输入的设置参数,设置参数用于描述目标几何体的几何信息;根据设置参数计算第二位姿信息;或者,获取目标几何体默认的初始位姿;获取目标几何体的几何信息的变化量;根据目标几何体默认的初始位姿和所述几何信息的变化量得到第二位姿信息。
可选的,终端根据目标几何体的形状信息确定第二位姿信息;可以通过多帧来确定出第一场景中的深度信息,内置算法或者用户设计三维几何体的坐标,进而计算第二位姿;还可以下载该第一场景对应的3D地图,进而计算出第二位姿;还可以通过用户的设置参数来计算第二位姿;或者根据三维几何体的初始位姿以及用户编辑过程来确定目标三维几何体的坐标,进行计算第二位姿;终端把目标几何体的形状信息和第二位姿信息发送给服务器;服务器根据第一位姿信息、所述第二位姿信息、所述目标几何体的形状信息确定所述账户在第一场景的虚拟空间中的可用区域。所述3D地图和所述第一场景的虚拟空间存在空间转换关系。3D地图和第一场景的虚拟空间是不同的数据包,也可以是同一个数据包。
步骤4903:向终端发送反馈指令,反馈指令用于指示终端基于目标几何体是否成功注册目标虚拟空间。
应理解,服务器可以根据预设的管理规则进行判断,终端的虚拟空间注册请求是否合乎规范,进而决定是否进行授权。其中,作为举例的,预设管理规则包括但不限于:不同的用户标识在第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。即不同的开发者账户对于同一真实场景所要开发的增强渲染的虚拟空间或者内容不能在同一时段同时有效,以避免消费者终端在针对同一个真实场景进行渲染时,出现不同交叠内容的交叠。
当目标虚拟空间满足预设管理规则时,向终端发送反馈指令,反馈指令用于指示终端基于目标几何体成功注册目标虚拟空间;当目标虚拟空间不满足预设管理规则时,向终端发送反馈指令,反馈指令用于指示终端基于目标几何体无法注册目标虚拟空间;还可以发送提示信息用于提示用户需要更新目标几何体的形状;或者,提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,提示用户重新进行虚拟空间的申请。
可选地,上述方法还可以进一步包括步骤4904:获取目标虚拟内容;获取目标虚拟内容的位姿;根据目标虚拟内容的位姿将目标虚拟内容设置在目标虚拟空间中;其中,目标虚拟内容不超过目标虚拟空间的边界。即,按照前述实施例中开发者在终端侧开发的形态,将目标虚拟内容更新在虚拟空间中,以使得未来消费者终端对于第一场景进行增强渲染时,所看到的图像内容与开发者当初开发的内容形态几乎是一致的。其中,目标虚拟内容或目标虚拟内容的位姿是由终端确定的,或者由服务器确定的。进一步可选地,服务器还可以进一步判断虚拟内容是否安全、健康、合法。如果不合法,可以不对虚拟空间进行更新。并返回用户提示信息提示风险。
通过本发明实施例提供的方案,开发者可以“可见即所得”地申请虚拟空间,尤其是“合法的”“可授权”的虚拟空间,在有编辑权限的虚拟空间中编辑虚拟内容,使得服务器根据开发者在终端上的设计进行同步,使得消费者终端在扫描到现实场景进行增强或渲染时,能够得到开发者预期设计的内容效果。
进一步地,本发明提出了一种注册虚拟空间的装置5000,该装置包括:
登录模块5001,用于基于第一用户标识登录预设应用;所述预设应用用于基于所述终端的拍摄场景为所述第一用户标识在服务器注册具有编辑虚拟物体权限的虚拟空间。具体可以用于执行上述步骤3401中的方法以及可以等同替换的方法。
显示模块5002,用于呈现第一界面;所述第一界面中包含有注册虚拟空间的选项。具体可以用于执行上述步骤3402中的方法以及可以等同替换的方法。
响应模块5003,用于响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流。具体可以用于执行上述步骤3403中的方法以及可以等同替换的方法。
获取模块5004,用于获取目标几何体。具体可以用于执行上述步骤3404中的方法以及可以等同替换的方法。
发送模块5005,用于将所述第一用户标识、所述预览流和所述目标几何体发送给服务器;所述预览流和所述目标几何体用于确定所述第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述目标几何体用于表征所述目标虚拟空间的形态。具体可以用于执行上述步骤3405中的方法以及可以等同替换的方法。
可选地,该装置还可以进一步包括接收模块5006(图中未视出),接收所述服务器发送的反馈指令;所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间,或者,无法成功注册所述目标虚拟空间。具体可以用于执行上述步骤3406中的方法以及可以等同替换的方法。具体的,当反馈指令用于指示终端基于所述目标几何体无法成功注册目标虚拟空间时,显示模块还用于:在当前显示界面中提示用户需要更新目标几何体的形状;或者,在当前显示界面中提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,在当前显示界面中提示用户重新进行虚拟空间的申请。当反馈指令用于指示终端基于目标几何体成功注册目标虚拟空间之后,显示模块还用于:提示用户目标虚拟空间对于第一用户标识的有效时段;其中,有效时段用于指示第一用户标识在有效时段内在目标虚拟空间中具有编辑虚拟内容的权限。显示模块还可以用于:在第一场景的预览流中显示或渲染目标虚拟空间;在预览流中,目标虚拟空间与第一场景的相对位置保持不变。
可选地,该装置还可以进一步包括设置模块5007(图中未视出),用于:用于在所述目标虚拟空间中设置目标虚拟内容;所述目标虚拟内容不超过所述目标虚拟空间的边界。上述发送模块还用于将目标虚拟内容和虚拟内容的位姿发送给服务器,目标虚拟内容和虚拟内容的位姿用于对第一场景进行渲染。
进一步地,本发明提出了一种注册虚拟空间的装置5100,该装置包括:
接收模块5101,用于接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的。具体可以用于执行上述步骤4901中的方法以及可以等同替换的方法。
确定模块5102,用于根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。具体可以用于执行上述步骤4902中的方法以及可以等同替换的方法。可选地,该装置还包括发送模块5103,用于当所述目标虚拟空间满足预设管理规则时,向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间;还用于当所述目标虚拟空间满足预设管理规则时,向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。发送模块还用于:向终端发送提示信息;提示信息用于提示用户需要更新目标几何体的形状;或者,提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,提示用户重新进行虚拟空间的申请。
可选地,该装置还包括设置模块5104,用于:获取目标虚拟内容;获取目标虚拟内容的位姿;根据目标虚拟内容的位姿将目标虚拟内容设置在所述目标虚拟空间中;其中,所述目标虚拟内容不超过所述目标虚拟空间的边界。
应理解,前述所有可能的方法实施例中的示例、术语解释、方案的可变性与可结合性同样适用于装置侧,此处不再展开赘述。应理解,基于本发明的思想,整体技术方案特别复杂,实施例也非常多样,通信环节繁多,使得本申请文件中无法一一列举出所有可能的实施方式,因此在不违背自然规律的前提下,在本领域技术人员可以理解的前提下,本发明中的对于相同或相近的术语、技术特征、应用场景描述可以相互引用,不同实例中的不同技术步骤或者实现方式可以自由组合,且都应属于本发明保护的范围内。
需要说明的是:上述实施例提供的各个装置在实现具体功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的各种装置与前述实施例中的相应方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意结合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如:同轴电缆、光纤、数据用户线(Digital Subscriber Line,DSL))或无线(例如:红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如:软盘、硬盘、磁带)、光介质(例如:数字通用光盘(Digital Versatile Disc,DVD))、或者半导体介质(例如:固态硬盘(Solid State Disk,SSD))等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述为本申请提供的实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (81)
1.一种注册虚拟空间的方法,其特征在于,所述方法包括:
终端基于第一用户标识登录预设应用;所述预设应用用于基于所述终端的拍摄场景为所述第一用户标识在服务器注册具有编辑虚拟物体权限的虚拟空间;
呈现第一界面;所述第一界面中包含有注册虚拟空间的选项;
响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;
获取目标几何体;
将所述第一用户标识、所述预览流和所述目标几何体发送给服务器;所述预览流和所述目标几何体用于确定所述第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述目标几何体用于表征所述目标虚拟空间的形态。
2.如权利要求1所述的方法,其特征在于,在获取目标几何体之后,所述方法还包括:
在所述预览流中渲染或显示所述目标几何体。
3.如权利要求1或2所述的方法,其特征在于,所述获取目标几何体包括:
获取所述预设应用中默认的几何体,将所述默认的几何体作为所述目标几何体;或者,
获取用户自定义的几何体作为所述目标几何体;或者,
根据用户在几何体的素材库中的选择指令,获取用户选择的几何体作为所述目标几何体;或者,
获取所述服务器发送的适配第一场景的目标几何体。
4.如权利要求1-3任一项所述方法,其特征在于,在所述将所述第一用户标识、所述预览流和所述目标几何体发送给服务器之后,所述方法还包括:
接收所述服务器发送的反馈指令;所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间,或者,无法成功注册所述目标虚拟空间。
5.如权利要求4所述的方法,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间时,所述方法还包括:
在当前显示界面中提示用户需要更新所述目标几何体的形状;或者,
在当前显示界面中提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,
在当前显示界面中提示用户重新进行虚拟空间的申请。
6.如权利要求4所述的方法,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间时,所述方法还包括:
提示用户所述目标虚拟空间对于所述第一用户标识的有效时段;其中,所述有效时段用于指示所述第一用户标识在所述有效时段内在所述目标虚拟空间中具有编辑虚拟内容的权限。
7.如权利要求4所述的方法,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间之后,所述方法还包括:
在所述第一场景的预览流中显示或渲染所述目标虚拟空间;在所述预览流中,所述目标虚拟空间与所述第一场景的相对位置保持不变。
8.如权利要求7所述的方法,其特征在于,所述方法还包括:
在所述目标虚拟空间中设置目标虚拟内容;所述目标虚拟内容不超过所述目标虚拟空间的边界。
9.如权利要求8所述的方法,其特征在于,所述方法还包括:
将所述目标虚拟内容和所述虚拟内容的位姿发送给所述服务器,所述目标虚拟内容和所述虚拟内容的位姿用于对所述第一场景进行渲染。
10.一种注册虚拟空间的方法,其特征在于,所述方法包括:
接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的;
根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。
11.如权利要求10所述的方法,其特征在于,所述根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间包括:
根据所述第一场景的预览流与所述第一虚拟空间获取所述终端在所述第一虚拟空间中的第一位姿信息;
根据所述目标几何体与所述第一虚拟空间获取所述目标几何体在所述第一虚拟空间中的第二位姿信息;
根据所述第一位姿信息、所述第二位姿信息、所述目标几何体确定所述目标虚拟空间。
12.如权利要求11所述的方法,其特征在于,
所述第一虚拟空间是在终端本地存储的或者是在服务器存储的;
所述第一位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的;
所述第二位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的。
13.如权利要求10-12中任一项所述的方法,其特征在于,当所述目标虚拟空间满足预设管理规则时,所述方法还包括:
向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。
14.如权利要求10-12任一项所述的方法,其特征在于,当所述目标虚拟空间不能满足预设管理规则时,所述方法还包括:
所述服务器向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。
15.如权利要求10-12任一项所述的方法,其特征在于,当所述目标虚拟空间不能满足服务器中的预设管理规则时,所述方法还包括:
所述服务器向所述终端发送提示信息;所述提示信息用于提示用户需要更新所述目标几何体的形状;或者,提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,提示用户重新进行虚拟空间的申请。
16.如权利要求10-13任一项所述的方法,其特征在于,所述方法还包括:获取目标虚拟内容;
获取所述目标虚拟内容的位姿;
根据所述目标虚拟内容的位姿将所述目标虚拟内容设置在所述目标虚拟空间中;其中,所述目标虚拟内容不超过所述目标虚拟空间的边界。
17.如权利要求16所述的方法,其特征在于,所述目标虚拟内容或所述目标虚拟内容的位姿是由所述终端确定的,或者由所述服务器确定的。
18.一种注册虚拟空间的装置,其特征在于,所述装置包括:
登录模块,用于基于第一用户标识登录预设应用;所述预设应用用于基于所述终端的拍摄场景为所述第一用户标识在服务器注册具有编辑虚拟物体权限的虚拟空间;
显示模块,用于呈现第一界面;所述第一界面中包含有注册虚拟空间的选项;
响应模块,用于响应用户对所述注册虚拟空间的选项的使能操作,针对第一场景进行拍摄得到预览流;
获取模块,用于获取目标几何体;
发送模块,用于将所述第一用户标识、所述预览流和所述目标几何体发送给服务器;所述预览流和所述目标几何体用于确定所述第一用户标识在第一虚拟空间中具有编辑虚拟内容权限的目标虚拟空间;所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述目标几何体用于表征所述目标虚拟空间的形态。
19.如权利要求18所述的装置,其特征在于,所述显示模块还用于,
在所述预览流中渲染或显示所述目标几何体。
20.如权利要求18或19所述的装置,其特征在于,所述获取模块用于,
获取所述预设应用中默认的几何体,将所述默认的几何体作为所述目标几何体;或者,
获取用户自定义的几何体作为所述目标几何体;或者,
根据用户在几何体的素材库中的选择指令,获取用户选择的几何体作为所述目标几何体;或者,
获取所述服务器发送的适配第一场景的目标几何体。
21.如权利要求18-20任一项所述的装置,其特征在于,所述装置还包括接收模块,用于接收所述服务器发送的反馈指令;所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间,或者,无法成功注册所述目标虚拟空间。
22.如权利要求21所述的装置,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间时,所述显示模块还用于:
在当前显示界面中提示用户需要更新所述目标几何体的形状;或者,
在当前显示界面中提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,
在当前显示界面中提示用户重新进行虚拟空间的申请。
23.如权利要求21所述的装置,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间之后,所述显示模块还用于:
提示用户所述目标虚拟空间对于所述第一用户标识的有效时段;其中,所述有效时段用于指示所述第一用户标识在所述有效时段内在所述目标虚拟空间中具有编辑虚拟内容的权限。
24.如权利要求21所述的装置,其特征在于,当所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间之后,所述显示模块还用于:
在所述第一场景的预览流中显示或渲染所述目标虚拟空间;在所述预览流中,所述目标虚拟空间与所述第一场景的相对位置保持不变。
25.如权利要求24所述的装置,其特征在于,所述装置还包括设置模块,用于在所述目标虚拟空间中设置目标虚拟内容;所述目标虚拟内容不超过所述目标虚拟空间的边界。
26.如权利要求25所述的装置,其特征在于,所述发送模块还用于将所述目标虚拟内容和所述虚拟内容的位姿发送给所述服务器,所述目标虚拟内容和所述虚拟内容的位姿用于对所述第一场景进行渲染。
27.一种注册虚拟空间的装置,其特征在于,所述装置包括:
接收模块,用于接收终端发送的第一用户标识、第一场景的预览流和目标几何体;其中,所述第一场景的预览流是所述终端针对第一场景进行拍摄得到的;
确定模块,用于根据所述的第一场景的预览流和所述目标几何体确定所述第一用户标识的目标虚拟空间;其中,所述目标几何体用于确定所述目标虚拟空间的形态;所述目标虚拟空间用于表示所述第一用户标识在所述第一虚拟空间中放置虚拟内容的空间范围,所述第一虚拟空间是与所述第一场景所在的真实世界相对应的虚拟空间;所述虚拟内容用于对所述第一场景进行渲染。
28.如权利要求27所述的装置,其特征在于,所述确定模块具体用于:
根据所述第一场景的预览流与所述第一虚拟空间获取所述终端在所述第一虚拟空间中的第一位姿信息;
根据所述目标几何体与所述第一虚拟空间获取所述目标几何体在所述第一虚拟空间中的第二位姿信息;
根据所述第一位姿信息、所述第二位姿信息、所述目标几何体确定所述目标虚拟空间。
29.如权利要求28所述的装置,其特征在于,所述第一虚拟空间是在终端本地存储的或者是在服务器存储的;
所述第一位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的;
所述第二位姿信息是由所述服务器计算得到的,或者由所述终端计算得到的。
30.如权利要求27-29中任一项所述的装置,其特征在于,所述装置还包括发送模块,用于当所述目标虚拟空间满足预设管理规则时,向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。
31.如权利要求27-29中任一项所述的装置,其特征在于,所述装置还包括发送模块,用于当所述目标虚拟空间满足预设管理规则时,向所述终端发送反馈指令,所述反馈指令用于指示所述终端基于所述目标几何体无法成功注册所述目标虚拟空间;所述预设管理规则包括:不同的用户标识在所述第一虚拟空间中放置虚拟内容的空间范围在同一时段不交叠。
32.如权利要求31所述的装置,其特征在于,所述发送模块还用于:
向所述终端发送提示信息;所述提示信息用于提示用户需要更新所述目标几何体的形状;或者,提示用户能够成功注册虚拟空间的有效区域或参数范围;或者,提示用户重新进行虚拟空间的申请。
33.如权利要求27-30中任一项所述的装置,其特征在于,所述装置还包括设置模块,用于:获取目标虚拟内容;
获取所述目标虚拟内容的位姿;
根据所述目标虚拟内容的位姿将所述目标虚拟内容设置在所述目标虚拟空间中;其中,所述目标虚拟内容不超过所述目标虚拟空间的边界。
34.如权利要求33所述的装置,其特征在于,所述目标虚拟内容或所述目标虚拟内容的位姿是由所述终端确定的,或者由所述服务器确定的。
35.一种基于数字地图的授权空间管理方法,其特征在于,所述方法包括:
终端接收用户的第一操作;
响应所述第一操作,采集目标场景的预览流;
获取第一用户标识;
向服务器发送所述第一用户标识、所述目标场景的预览流和授权空间请求;
接收所述服务器发送的n个授权空间;其中,所述n个授权空间是所述服务器根据所述第一用户标识、所述目标场景的预览流和所述授权空间请求确定得到的;所述n个授权空间是第一虚拟场景中所述第一用户标识对应的n个互不交叠的可用于渲染的三维空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;所述目标数字地图对应的真实场景包括所述目标场景;所述n为大于或等于1的整数;
呈现所述目标场景的预览流,并在所述目标场景的预览流中渲染所述n个授权空间;所述n个授权空间用于提示所述第一虚拟场景中当前允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间在同一时段不交叠。
36.根据权利要求35所述的方法,其特征在于,所述在所述目标场景的预览流中渲染所述n个授权空间之后,所述方法还包括:
获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;接收并响应第二操作,在渲染的目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间;
在所述目标场景的预览流中渲染所述目标媒体内容。
37.根据权利要求36所述的方法,其特征在于,所述第二操作包括拖动,所述响应第二操作,在目标授权空间内添加所述目标媒体内容,包括:
选中所述目标媒体内容,放置在所述拖动指令所指示的拖动终点位置处;所述终点位置在所述目标授权空间中对应一个三维坐标点;
并在放置的位置上按照第一姿态调整所述目标媒体内容;所述第一姿态在所述目标授权空间中对应一个三自由度的旋转;
其中,所述目标媒体内容中位于所述目标授权空间内的部分和位于所述目标授权空间外的部分的显示方式不同;或者,所述目标媒体内容中位于所述目标授权空间内的部分可见,位于所述目标授权空间外的部分不可见。
38.根据权利要求35或36所述的方法,其特征在于,所述方法还包括:
确定所述目标媒体内容在所述目标数字地图中的目标位姿;
向所述服务器发送第一更新指令、所述目标媒体内容与所述目标位姿;其中,所述第一更新指令、所述目标媒体内容与所述目标位姿用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
39.根据权利要求38所述的方法,其特征在于,所述确定所述目标媒体内容在所述目标数字地图中的目标位姿包括:
获取所述终端在所述目标数字地图中的第一位姿;
获取所述目标媒体内容与所述第一位姿之间的第一相对位姿;
根据所述第一位姿和所述第一相对位姿获取所述目标位姿。
40.根据权利要求35-39中任意一项所述的方法,其特征在于,所述在目标授权空间内添加所述目标媒体内容之后,所述方法还包括:
确定目标对象;所述目标对象为预设的图像或三维物体,所述目标场景中包括所述目标对象;确定所述目标媒体内容与所述目标对象在所述目标数字地图中的第二相对位姿关系;
向所述服务器发送第二更新指令、所述目标对象和所述第二相对位姿关系;其中,所述第二更新指令、所述目标对象和所述第二相对位姿关系用于对在所述服务器中存储的所述目标数字地图中所述第一用户标识对应的其他授权空间进行内容更新。
41.根据权利要求35-40中任意一项所述的方法,其特征在于,所述方法还包括:
向所述服务器发送所述空间筛选条件;
其中,所述n个授权空间是所述服务器根据所述第一用户标识和所述目标场景的预览流确定得到的具体包括:所述n个授权空间为所述服务器根据所述第一用户标识、所述目标场景的预览流和所述空间筛选条件确定得到的。
42.根据权利要求35-41中任意一项所述的方法,其特征在于,所述接收所述服务器发送的n个授权空间包括:
向所述服务器发送空间注册请求,所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中的授权空间,且所述空间注册请求携带了在所述数字地图中申请授权空间的需求参数;接收所述服务器发送的所述n个授权空间;其中,所述n个授权空间为所述服务器根据所述授权空间的需求在所述第一虚拟场景中为所述第一用户标识分配的。
43.根据权利要求35-42中任意一项所述的方法,其特征在于,所述在所述目标场景的预览流中渲染所述n个授权空间,包括:
在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间;其中,所述预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
44.根据权利要求35-43中任意一项所述的方法,其特征在于,所述在所述目标场景的预览流中渲染所述n个授权空间之后,还包括:
如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配;
接收并响应第三操作,对所述n个授权空间在所述目标数字地图中的位姿进行调整;以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;
向服务器发送调整后的所述n个授权空间的位姿;所述调整后的所述n个授权空间的位姿用于对所述服务器中存储的所述n个授权空间在所述目标数字地图中的位姿进行更新。
45.根据权利要求36-44中任意一项所述的方法,其特征在于,所述方法还包括:
将所述目标媒体内容的属性标记为可渲染;
将所述目标媒体内容的属性发送给所述服务器。
46.根据权利要求35所述的方法,其特征在于,所述在所述目标场景的预览流中渲染所述n个授权空间之后,所述方法还包括:
在目标授权空间内已渲染的媒体内容中确定目标媒体内容;所述目标授权空间为所述n个授权空间中的任意一个授权空间;
接收并响应第二操作,在渲染的目标授权空间内删除所述目标媒体内容;
向所述服务器发送所述目标媒体内容和删除所述目标媒体内容的指令;所述目标媒体内容和删除所述目标媒体内容的指令用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
47.一种基于数字地图的授权空间管理方法,其特征在于,所述方法包括:
接收终端发送的第一用户标识、目标场景的预览流和授权空间请求;
根据所述目标场景的预览流在目标数字地图中获取第一位姿;所述目标数字地图对应的真实世界包括所述目标场景;
根据所述第一位姿在所述目标数字地图中确定第一虚拟空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;
根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间;所述n个授权空间为互不交叠的可用于渲染的三维空间;所述n个授权空间用于提示所述第一虚拟场景中允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间不交叠;
响应所述授权空间请求,向所述终端发送所述n个授权空间;其中,所述n个授权空间用于对所述目标场景的预览流进行渲染。
48.根据权利要求47所述的方法,其特征在于,所述方法还包括:
获取所述目标数字地图中的目标位姿;
获取目标媒体内容;
接收终端发送的第一更新指令;
响应所述第一更新指令,在所述目标数字地图中,按照所述目标位姿添加所述目标媒体内容。
49.根据权利要求47所述的方法,其特征在于,所述方法还包括:
获取目标对象;所述目标对象为预设的图像或三维物体,所述目标数字地图中包括所述目标对象;
获取所述目标媒体内容与所述目标对象在所述目标数字地图中的第二相对位姿关系;
接收终端发送的第二更新指令;
响应所述第二更新指令,根据所述目标对象和所述第二相对位姿关系对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的其他授权空间进行内容更新;其中,所述第一用户标识对应的其他授权空间在所述目标数字地图的预设范围场景中包括所述目标对象。
50.根据权利要求47-49中任一项所述的方法,其特征在于,根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间包括:
接收所述终端发送的所述空间筛选条件;
根据所述第一用户标识、所述目标场景的预览流在所述第一虚拟空间中查找出m个授权空间;根据所述空间筛选条件从所述m个授权空间中确定出符合条件的n个授权空间。
51.根据权利要求47-50中任一项所述的方法,其特征在于,根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间包括:
接收终端发送的空间注册请求;所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中注册授权空间,且所述空间注册请求携带了在所述数字地图中注册授权空间的需求参数;响应所述空间注册请求,根据所述申请授权空间的需求参数和所述第一标识在所述第一虚拟场景中分配n个授权空间。
52.根据权利要求47所述的方法,其特征在于,所述方法还包括:
获取目标媒体内容;所述目标媒体内容为所述目标数字地图中已渲染的媒体内容中的一个;
获取所述目标媒体内容在所述目标数字地图中的目标位姿;
接收终端发送的删除所述目标媒体内容的指令;
响应所述删除所述目标媒体内容的指令,在所述目标数字地图中所述目标位姿处删除所述目标媒体内容。
53.一种基于数字地图的授权空间管理装置,其特征在于,所述装置包括:
接收模块,用于接收用户的第一操作;
响应模块,用于响应所述第一操作,采集目标场景的预览流;
获取模块,用于获取第一用户标识;
发送模块,用于向服务器发送所述第一用户标识、所述目标场景的预览流和授权空间请求;
接收模块,用于接收所述服务器发送的n个授权空间;其中,所述n个授权空间是所述服务器根据所述第一用户标识、所述目标场景的预览流和所述授权空间请求确定得到的;所述n个授权空间是第一虚拟场景中所述第一用户标识对应的n个互不交叠的可用于渲染的三维空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;所述目标数字地图对应的真实场景包括所述目标场景;所述n为大于或等于1的整数;
显示模块,用于呈现所述目标场景的预览流,并在所述目标场景的预览流中渲染所述n个授权空间;所述n个授权空间用于提示所述第一虚拟场景中当前允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间在同一时段不交叠。
54.根据权利要求53所述的装置,其特征在于,在所述目标场景的预览流中渲染所述n个授权空间之后,所述获取模块还具体用于:
获取目标媒体内容,所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;所述响应模块还用于接收并响应第二操作,在渲染的目标授权空间内添加所述目标媒体内容,所述目标授权空间为所述n个授权空间中的任一个授权空间;
所述显示模块还用于在所述目标场景的预览流中渲染所述目标媒体内容。
55.根据权利要求54所述的装置,其特征在于,所述第二操作包括拖动,所述响应模块具体用于:选中所述目标媒体内容,放置在所述拖动指令所指示的拖动终点位置处;所述终点位置在所述目标授权空间中对应一个三维坐标点;
并在放置的位置上按照第一姿态调整所述目标媒体内容;所述第一姿态在所述目标授权空间中对应一个三自由度的旋转;
其中,所述目标媒体内容中位于所述目标授权空间内的部分和位于所述目标授权空间外的部分的显示方式不同;或者,所述目标媒体内容中位于所述目标授权空间内的部分可见,位于所述目标授权空间外的部分不可见。
56.根据权利要求53或54所述的装置,其特征在于,所述装置还包括确定模块,用于确定所述目标媒体内容在所述目标数字地图中的目标位姿;
所述发送模块具体用于向所述服务器发送第一更新指令、所述目标媒体内容与所述目标位姿;其中,所述第一更新指令、所述目标媒体内容与所述目标位姿用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
57.根据权利要求56所述的装置,其特征在于,所述确定模块具体用于:
获取所述终端在所述目标数字地图中的第一位姿;
获取所述目标媒体内容与所述第一位姿之间的第一相对位姿;
根据所述第一位姿和所述第一相对位姿获取所述目标位姿。
58.根据权利要求53-57中任意一项所述的装置,其特征在于,所述在目标授权空间内添加所述目标媒体内容之后,所述确定模块还用于确定目标对象;所述目标对象为预设的图像或三维物体,所述目标场景中包括所述目标对象;
确定所述目标媒体内容与所述目标对象在所述目标数字地图中的第二相对位姿关系;
所述发送模块还用于向所述服务器发送第二更新指令、所述目标对象和所述第二相对位姿关系;其中,所述第二更新指令、所述目标对象和所述第二相对位姿关系用于对在所述服务器中存储的所述目标数字地图中所述第一用户标识对应的其他授权空间进行内容更新。
59.根据权利要求53-58中任意一项所述的装置,其特征在于,所述发送模块还用于向所述服务器发送所述空间筛选条件;其中,所述n个授权空间为所述服务器根据所述第一用户标识、所述目标场景的预览流和所述空间筛选条件确定得到的。
60.根据权利要求53-59中任意一项所述的装置,其特征在于,所述发送模块具体用于向所述服务器发送空间注册请求,所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中的授权空间,且所述空间注册请求携带了在所述数字地图中申请授权空间的需求参数;
所述接收模块具体用于接收所述服务器发送的所述n个授权空间;其中,所述n个授权空间为所述服务器根据所述授权空间的需求在所述第一虚拟场景中为所述第一用户标识分配的。
61.根据权利要求53-60中任意一项所述的装置,其特征在于,所述显示模块具体用于:
在所述目标场景的预览流中以预设显示形式渲染所述n个授权空间;其中,所述预设显示形式包括预设颜色、预设透明度、立方体空间和球体空间中的一种或多种。
62.根据权利要求53-61中任意一项所述的装置,其特征在于,如果所述n个授权空间的位姿与所述目标场景的预览流的位姿不匹配;
所述响应模块具体用于接收并响应第三操作,对所述n个授权空间在所述目标数字地图中的位姿进行调整;以使所述n个授权空间的位姿与所述目标场景的预览流的位姿匹配;
所述发送模块还具体用于向服务器发送调整后的所述n个授权空间的位姿;所述调整后的所述n个授权空间的位姿用于对所述服务器中存储的所述n个授权空间在所述目标数字地图中的位姿进行更新。
63.根据权利要求54-62中任意一项所述的装置,其特征在于,所述装置还包括标记模块,用于将所述目标媒体内容的属性标记为可渲染;所述发送模块还用于将所述目标媒体内容的属性发送给所述服务器。
64.根据权利要求63所述的装置,其特征在于,所述确定模块还用于在目标授权空间内已渲染的媒体内容中确定目标媒体内容;所述目标授权空间为所述n个授权空间中的任意一个授权空间;
所述响应模块还用于接收并响应第二操作,在渲染的目标授权空间内删除所述目标媒体内容;所述发送模块还用于向所述服务器发送所述目标媒体内容和删除所述目标媒体内容的指令;所述目标媒体内容和删除所述目标媒体内容的指令用于对所述服务器中存储的所述目标数字地图中的目标授权空间进行更新。
65.一种基于数字地图的授权空间管理装置,其特征在于,所述装置包括:
接收模块,用于接收终端发送的第一用户标识、目标场景的预览流和授权空间请求;
获取模块,用于根据所述目标场景的预览流在目标数字地图中获取第一位姿;所述目标数字地图对应的真实世界包括所述目标场景;
确定模块,用于根据所述第一位姿在所述目标数字地图中确定第一虚拟空间;所述第一虚拟场景为所述目标场景在目标数字地图中对应的模型空间;所述确定模块还用于根据所述第一用户标识在所述第一虚拟空间中确定所述第一用户标识对应的n个授权空间;所述n个授权空间为互不交叠的可用于渲染的三维空间;所述n个授权空间用于提示所述第一虚拟场景中允许进行媒体内容编辑的空间范围;不同的用户标识在所述目标数字地图中对应的授权空间不交叠;
发送模块,用于响应所述授权空间请求,向所述终端发送所述n个授权空间;其中,所述n个授权空间用于对所述目标场景的预览流进行渲染。
66.根据权利要求65所述的装置,其特征在于,所述获取模块还用于获取所述目标数字地图中的目标位姿;还用于获取目标媒体内容;
所述接收模块还用于接收终端发送的第一更新指令;
所述装置还包括更新模块,用于响应所述第一更新指令,在所述目标数字地图中,按照所述目标位姿添加所述目标媒体内容。
67.根据权利要求65所述的装置,其特征在于,所述获取模块还用于获取目标对象;所述目标对象为预设的图像或三维物体,所述目标数字地图中包括所述目标对象;还用于获取所述目标媒体内容与所述目标对象在所述目标数字地图中的第二相对位姿关系;
所述接收模块还用于接收终端发送的第二更新指令;
所述装置还包括更新模块,用于响应所述第二更新指令,根据所述目标对象和所述第二相对位姿关系对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的其他授权空间进行内容更新;其中,所述第一用户标识对应的其他授权空间在所述目标数字地图的预设范围场景中包括所述目标对象。
68.根据权利要求65-67中任一项所述的装置,其特征在于,所述确定模块具体用于:
接收所述终端发送的所述空间筛选条件;
根据所述第一用户标识、所述目标场景的预览流在所述第一虚拟空间中查找出m个授权空间;根据所述空间筛选条件从所述m个授权空间中确定出符合条件的n个授权空间。
69.根据权利要求65-68中任一项所述的装置,其特征在于,所述确定模块具体用于:
接收终端发送的空间注册请求;所述空间注册请求用于向所述服务器申请在所述第一虚拟场景中注册授权空间,且所述空间注册请求携带了在所述数字地图中注册授权空间的需求参数;响应所述空间注册请求,根据所述申请授权空间的需求参数和所述第一标识在所述第一虚拟场景中分配n个授权空间。
70.根据权利要求65所述的装置,其特征在于,所述获取模块还用于获取目标媒体内容;所述目标媒体内容为所述目标数字地图中已渲染的媒体内容中的一个;还用于获取所述目标媒体内容在所述目标数字地图中的目标位姿;
所述接收模块还用于接收终端发送的删除所述目标媒体内容的指令;
所述装置还包括更新模块,用于响应所述删除所述目标媒体内容的指令,在所述目标数字地图中所述目标位姿处删除所述目标媒体内容。
71.一种基于数字地图的媒体内容分享方法,其特征在于,所述方法应用于第二终端,所述方法包括:
接收第一终端发送的目标场景的图像;所述目标场景的图像携带目标位姿;其中,所述目标位姿为所述第一终端在拍摄所述目标场景的图像时在目标数字地图中对应的位姿,所述目标数字地图对应的真实世界包括所述目标场景;
接收并响应用户的第一操作,将所述目标位姿和内容请求发送给服务器;
接收所述服务器发送的目标媒体内容;其中,所述目标媒体内容为所述服务器根据所述目标位姿和内容请求得到的,所述目标内容包括所述目标场景在所述目标数字地图中对应的模型空间中的可渲染的媒体内容;所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;
呈现所述目标场景的图像,并在所述目标场景的图像中渲染所述目标媒体内容。
72.一种基于数字地图的多个授权空间的内容同步方法,其特征在于,所述方法应用于终端,所述方法包括:
获取第一用户标识;
接收并响应用户的第一操作,根据所述第一用户标识在目标数字地图中确定第一虚拟场景;所述目标数字地图对应的真实场景包括所述第一虚拟场景对应的真实场景;
显示所述第一虚拟场景;其中,所述第一虚拟场景中包含有所述第一用户标识对应的第一授权空间;所述第一授权空间用于提示当前允许进行媒体内容编辑的空间范围;
确定目标对象;所述目标对象为预设的图像或三维物体;所述第一虚拟场景中包括所述目标对象;
接收并响应用户的第二操作,在第一位置处进行第一编辑操作;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;
获取所述第一位置在所述目标数字地图中对应的第一位姿;
获取所述目标对象在所述目标数字地图中对应的第二位姿;
确定所述第一位姿与所述第二位姿之间的目标相对位姿;
向服务器发送目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿;其中,所述目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;所述第二虚拟场景中包括所述目标对象。
73.根据权利要求72所述方法,其特征在于,
当所述第一编辑操作为增加内容时,所述方法还包括:
获取待添加媒体内容;
将所述待添加媒体内容发送给所述服务器;所述待添加媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;
当所述第一编辑操作为删减内容时,所述方法还包括:
获取待删减媒体内容;
将所述待删减媒体内容发送给所述服务器;所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;
当所述第一编辑操作为更换内容时,所述方法还包括:
获取待删减媒体内容;
获取待添加媒体内容;
将所述待添加媒体内容和所述待删减媒体内容发送给所述服务器;所述待添加媒体内容和所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新。
74.一种基于数字地图的多个授权空间的内容同步方法,其特征在于,所述方法包括:
获取终端发送的第一用户标识、第一编辑操作、目标对象、目标相对位姿和目标更新指令;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;所述目标对象为预设的不可编辑的图像或三维物体;
根据所述第一用户标识在目标数字地图中确定第二虚拟场景;其中,所述第二虚拟场景中包括所述目标对象;所述目标数字地图为服务器预先存储的;
确定所述第二虚拟场景中的目标对象在所述目标数字地图中的第三位姿;
根据所述第三位姿和所述目标相对位姿在所述目标数字地图中确定出第四位姿;
响应所述目标更新指令,在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作,以更新所述第二虚拟场景。
75.根据权利要求74所述方法,其特征在于,
当所述第一编辑操作为增加内容时,所述方法还包括:
获取终端发送的待添加媒体内容;
所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:
在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容;
当所述第一编辑操作为删减内容时,所述方法还包括:
获取待删减媒体内容;
所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:
在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;
当所述第一编辑操作为更换内容时,所述方法还包括:
获取待删减媒体内容;
获取待添加媒体内容;
所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:
在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;
在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容。
76.一种基于数字地图的媒体内容分享装置,其特征在于,所述装置应用于第二终端,所述装置包括:
接收模块,用于接收第一终端发送的目标场景的图像;所述目标场景的图像携带目标位姿;其中,所述目标位姿为所述第一终端在拍摄所述目标场景的图像时在目标数字地图中对应的位姿,所述目标数字地图对应的真实世界包括所述目标场景;
发送模块,用于接收并响应用户的第一操作,将所述目标位姿和内容请求发送给服务器;
接收模块还用于接收所述服务器发送的目标媒体内容;其中,所述目标媒体内容为所述服务器根据所述目标位姿和内容请求得到的,所述目标内容包括所述目标场景在所述目标数字地图中对应的模型空间中的可渲染的媒体内容;所述目标媒体内容包括文字、图片、音频、视频和模型中的一种或多种;
显示模块,用于呈现所述目标场景的图像,并在所述目标场景的图像中渲染所述目标媒体内容。
77.一种基于数字地图的多个授权空间的内容同步装置,其特征在于,所述装置应用于终端,所述装置包括:
获取模块,用于获取第一用户标识;
确定模块,用于接收并响应用户的第一操作,根据所述第一用户标识在目标数字地图中确定第一虚拟场景;所述目标数字地图对应的真实场景包括所述第一虚拟场景对应的真实场景;
显示模块,用于显示所述第一虚拟场景;其中,所述第一虚拟场景中包含有所述第一用户标识对应的第一授权空间;所述第一授权空间用于提示当前允许进行媒体内容编辑的空间范围;所述确定模块还用于确定目标对象;所述目标对象为预设的图像或三维物体;所述第一虚拟场景中包括所述目标对象;
编辑模块,用于接收并响应用户的第二操作,在第一位置处进行第一编辑操作;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;
所述获取模块还用于获取所述第一位置在所述目标数字地图中对应的第一位姿;获取所述目标对象在所述目标数字地图中对应的第二位姿;
所述确定模块还用于确定所述第一位姿与所述第二位姿之间的目标相对位姿;
发送模块,用于向服务器发送目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿;其中,所述目标更新指令、所述第一用户标识、所述第一编辑操作、所述目标对象和所述目标相对位姿用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;所述第二虚拟场景中包括所述目标对象。
78.根据权利要求77所述装置,其特征在于,
当所述第一编辑操作为增加内容时,
所述获取模块具体用于获取待添加媒体内容;
所述发送模块用于将所述待添加媒体内容发送给所述服务器;所述待添加媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;
当所述第一编辑操作为删减内容时,
所述获取模块具体用于获取待删减媒体内容;
所述发送模块具体用于将所述待删减媒体内容发送给所述服务器;所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新;
当所述第一编辑操作为更换内容时,
所述获取模块具体用于获取待删减媒体内容和待添加媒体内容;
所述发送模块具体用于将所述待添加媒体内容和所述待删减媒体内容发送给所述服务器;所述待添加媒体内容和所述待删减媒体内容用于对所述服务器中存储的所述目标数字地图中所述第一用户标识对应的第二虚拟场景进行更新。
79.一种基于数字地图的多个授权空间的内容同步装置,其特征在于,所述装置包括:
获取模块,用于获取终端发送的第一用户标识、第一编辑操作、目标对象、目标相对位姿和目标更新指令;其中,所述第一编辑操作包括增加内容、更换内容或删减内容;所述目标对象为预设的不可编辑的图像或三维物体;
确定模块,用于根据所述第一用户标识在目标数字地图中确定第二虚拟场景;其中,所述第二虚拟场景中包括所述目标对象;所述目标数字地图为服务器预先存储的;
所述确定模块还用于确定所述第二虚拟场景中的目标对象在所述目标数字地图中的第三位姿;还用于根据所述第三位姿和所述目标相对位姿在所述目标数字地图中确定出第四位姿;更新模块,用于响应所述目标更新指令,在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作,以更新所述第二虚拟场景。
80.根据权利要求79所述装置,其特征在于,
当所述第一编辑操作为增加内容时,
所述获取模块还用于获取终端发送的待添加媒体内容;
所述更新模块还用于在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容;
当所述第一编辑操作为删减内容时,
所述获取模块还用于获取待删减媒体内容;
所述在所述目标数字地图中的所述第四位姿处进行所述第一编辑操作包括:
所述更新模块还用于在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;
当所述第一编辑操作为更换内容时,
所述获取模块还用于获取待删减媒体内容和待添加媒体内容;
所述更新模块还用于在所述目标数字地图中的所述第四位姿处删减所述待删减媒体内容;
在所述目标数字地图中的所述第四位姿处增加所述待添加媒体内容。
81.一种设备,其特征在于,所述设备包括存储器、处理器、收发器和总线;所述存储器、所述收发器以及所述处理器通过所述总线相连;
所述存储器用于存储计算机程序和指令;
所述收发器用于收发信息;
所述处理器用于调用所述存储器中存储的所述计算机程序、指令,与所述收发器写作执行如权利要求1-9,10-17,35-46,47-52,71,72-73,74-75中任一项所述方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2019110899717 | 2019-11-08 | ||
CN201911089971 | 2019-11-08 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112862977A true CN112862977A (zh) | 2021-05-28 |
Family
ID=75849782
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011231772.8A Pending CN112862977A (zh) | 2019-11-08 | 2020-11-06 | 数字空间的管理方法、装置与设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220264176A1 (zh) |
CN (1) | CN112862977A (zh) |
WO (1) | WO2021089006A1 (zh) |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11249991A (ja) * | 1998-03-05 | 1999-09-17 | Nippon Telegr & Teleph Corp <Ntt> | 仮想空間管理方法及びそのプログラムを記録した記録媒体 |
US20050030309A1 (en) * | 2003-07-25 | 2005-02-10 | David Gettman | Information display |
US8424065B2 (en) * | 2009-11-25 | 2013-04-16 | International Business Machines Corporation | Apparatus and method of identity and virtual object management and sharing among virtual worlds |
ES2684610T3 (es) * | 2011-05-31 | 2018-10-03 | Rakuten, Inc. | Dispositivo de suministro de información, método de suministro de información, programa de procesamiento de suministro de información, medio de registro que registra un programa de procesamiento de suministro de información, y sistema de suministro de información |
KR102009928B1 (ko) * | 2012-08-20 | 2019-08-12 | 삼성전자 주식회사 | 협업 구현 방법 및 장치 |
CN107436945A (zh) * | 2017-08-02 | 2017-12-05 | 长威信息科技发展股份有限公司 | 一种基于电子地图的信息采集方法及系统 |
KR102556889B1 (ko) * | 2017-12-22 | 2023-07-17 | 매직 립, 인코포레이티드 | 혼합 현실 시스템에서 가상 콘텐츠를 관리하고 디스플레이하기 위한 방법들 및 시스템 |
CN108600509B (zh) * | 2018-03-21 | 2020-08-25 | 阿里巴巴集团控股有限公司 | 三维场景模型中信息的分享方法及装置 |
CN109949422B (zh) * | 2018-10-15 | 2020-12-15 | 华为技术有限公司 | 用于虚拟场景的数据处理方法以及设备 |
US11195020B1 (en) * | 2019-10-29 | 2021-12-07 | Facebook Technologies, Llc | Systems and methods for maintaining virtual spaces |
-
2020
- 2020-11-06 CN CN202011231772.8A patent/CN112862977A/zh active Pending
- 2020-11-06 WO PCT/CN2020/127226 patent/WO2021089006A1/zh active Application Filing
-
2022
- 2022-05-05 US US17/737,837 patent/US20220264176A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20220264176A1 (en) | 2022-08-18 |
WO2021089006A1 (zh) | 2021-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112130742B (zh) | 一种移动终端的全屏显示方法及设备 | |
CN108415705B (zh) | 网页生成方法、装置、存储介质及设备 | |
CN115473957B (zh) | 一种图像处理方法和电子设备 | |
US20210397839A1 (en) | Information Prompt Method and Electronic Device | |
CN112118477B (zh) | 虚拟礼物展示方法、装置、设备以及存储介质 | |
CN109646944B (zh) | 控制信息处理方法、装置、电子设备及存储介质 | |
WO2022052620A1 (zh) | 图像生成方法及电子设备 | |
CN112383664B (zh) | 一种设备控制方法、第一终端设备、第二终端设备及计算机可读存储介质 | |
CN112262563A (zh) | 图像处理方法及电子设备 | |
CN112181573A (zh) | 媒体资源展示方法、装置、终端、服务器以及存储介质 | |
WO2022152024A1 (zh) | 一种微件的显示方法与电子设备 | |
CN115439606A (zh) | 三维重建方法、图形界面、系统及相关装置 | |
CN112363660A (zh) | 封面图像的确定方法、装置、电子设备及存储介质 | |
CN113409427A (zh) | 动画播放方法、装置、电子设备及计算机可读存储介质 | |
CN113467663B (zh) | 界面配置方法、装置、计算机设备及介质 | |
WO2021254113A1 (zh) | 一种三维界面的控制方法和终端 | |
CN112822544B (zh) | 视频素材文件生成方法、视频合成方法、设备及介质 | |
CN112770177B (zh) | 多媒体文件生成方法、多媒体文件发布方法及装置 | |
CN114444000A (zh) | 页面布局文件的生成方法、装置、电子设备以及可读存储介质 | |
CN114995963A (zh) | 广告展示系统及方法 | |
CN115032640B (zh) | 手势识别方法和终端设备 | |
CN116797767A (zh) | 增强现实场景分享的方法和电子设备 | |
CN113144595B (zh) | 虚拟道路的生成方法、装置、终端及存储介质 | |
WO2021089006A1 (zh) | 数字空间的管理方法、装置与设备 | |
CN112783993B (zh) | 基于数字地图的多个授权空间的内容同步方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |