CN110166787A - 增强现实数据传播方法、系统和存储介质 - Google Patents

增强现实数据传播方法、系统和存储介质 Download PDF

Info

Publication number
CN110166787A
CN110166787A CN201810730829.5A CN201810730829A CN110166787A CN 110166787 A CN110166787 A CN 110166787A CN 201810730829 A CN201810730829 A CN 201810730829A CN 110166787 A CN110166787 A CN 110166787A
Authority
CN
China
Prior art keywords
data
augmented reality
virtual world
reality
scene image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810730829.5A
Other languages
English (en)
Other versions
CN110166787B (zh
Inventor
江会福
薛丰
刘楠
郭艺帆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Cyber Tianjin Co Ltd
Original Assignee
Tencent Cyber Tianjin Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Cyber Tianjin Co Ltd filed Critical Tencent Cyber Tianjin Co Ltd
Priority to CN201810730829.5A priority Critical patent/CN110166787B/zh
Priority to EP19830742.3A priority patent/EP3745726A4/en
Priority to PCT/CN2019/090071 priority patent/WO2020007157A1/zh
Publication of CN110166787A publication Critical patent/CN110166787A/zh
Priority to US16/989,488 priority patent/US11917265B2/en
Application granted granted Critical
Publication of CN110166787B publication Critical patent/CN110166787B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Abstract

本申请涉及一种增强现实数据传播方法、系统和存储介质，所述增强现实数据传播方法包括：接收增强现实数据，所述增强现实数据携带有AR识别数据；向目标终端发送所述增强现实数据；在所述目标终端根据所述AR识别数据展示所述增强现实数据；接收用户指令，并根据所述用户指令更新所述增强现实数据；分享更新的所述增强现实数据。本申请提供的方案可以实现用户可通过配置较低的终端实现用户与虚拟世界数据之间的AR互动。

Description

增强现实数据传播方法、系统和存储介质
技术领域
本申请涉及计算机技术领域，特别是涉及一种增强现实数据传播方法、系统和存储介质。
背景技术
随着计算机技术的发展,出现了增强现实(Augmented Reality，简称AR)技术，AR技术不仅能够向用户展现真实世界的信息,还可以将虚拟世界的虚拟世界数据同时显示出来，两种世界的信息相互补充、叠加，能够增加用户与在真实世界中呈现的虚拟世界数据之间的互动。
然而，当前的AR技术，对终端的配置有较高的要求，需要终端配置摄像头以及具有识别能力，因而，一些配置较低的终端无法应用AR技术，用户无法通过这些配置较低的终端实现与虚拟世界数据之间的互动。
发明内容
基于此，本发明实施例提供了一种增强现实数据传播方法、系统和存储介质，能够通过配置较低的终端实现用户与虚拟世界数据之间的互动。
一种增强现实数据传播方法，包括：
接收增强现实数据，所述增强现实数据携带有AR识别数据；
向目标终端发送所述增强现实数据；
在所述目标终端根据所述AR识别数据展示所述增强现实数据；
接收用户指令，并根据所述用户指令更新所述增强现实数据；
分享更新的所述增强现实数据。
一种增强现实数据传播系统，所述系统包括采集终端、第一目标终端、第二目标终端和第三目标终端，其中：
所述采集终端用于采集现实场景图像；根据所述现实场景图像识别出AR识别数据；获取与所述AR识别数据对应的虚拟世界数据；根据所述现实场景图像、所述AR识别数据以及所述虚拟世界数据生成增强现实数据；
所述采集终端还用于传播所述增强现实数据至第一目标终端；
所述第一目标终端用于接收所述增强现实数据；还用于向第二目标终端发送所述增强现实数据；
所述第二目标终端用于在接收到所述第一目标终端发送的所述增强现实数据时，根据所述AR识别数据展示所述增强现实数据；
所述第二目标终端还用于接收用户指令，并根据所述用户指令更新所述增强现实数据；分享更新的所述增强现实数据至所述第三目标终端。
一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行上述增强现实数据传播方法的步骤。
上述增强现实数据传播方法、系统和存储介质，在接收到采集终端发送的增强现实数据之后，还可将接收的增强现实数据发送至配置较低的目标终端，这样，目标终端可根据接收到的增强现实数据中携带的AR识别数据展示增强现实数据，还原AR场景，并且目标终端还可接收用户指令，并响应用户指令更新增强现实数据，然后分享更新的增强现实数据，这样，用户就可以通过配置较低的目标终端体验采集终端对应的用户所拍摄的AR场景，实现了多个用户之间的AR互动。
附图说明
图1为一个实施例中增强现实数据传播方法的应用环境图；
图2为一个实施例中增强现实数据传播方法的流程示意图；
图3为一个实施例中生成增强现实数据的步骤的流程示意图；
图4为一个实施例中生成AR视频的流程示意图；
图5为一个实施例中生成AR图片的流程示意图；
图6为一个实施例中传播AR视频的示意图；
图7为一个实施例中传播AR图片的示意图；
图8为一个实施例中在目标终端根据AR识别数据展示增强现实数据的步骤的流程示意图；
图9为一个实施例中还原并改造增强现实场景的流程示意图；
图10为另一个实施例中还原并改造增强现实场景的流程示意图；
图11为一个具体的实施例中增强现实数据传播方法的流程示意图；
图12为一个实施例增强现实数据传播系统的架构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
图1为一个实施例中增强现实数据传播方法的应用环境图。参照图1，该增强现实数据传播方法应用于增强现实数据传播系统。该增强现实数据传播系统包括采集终端110和目标终端120，目标终端120可包括多个目标终端，比如第一目标终端122、第二目标终端124和第三目标终端126等。采集终端110和目标终端120通过网络连接。采集终端110具体可以是移动终端，移动终端具体可以手机、平板电脑、笔记本电脑等中的至少一种，还可以是智能眼镜或者透视眼镜等。目标终端120具体可以是移动终端，移动终端具体可以手机、平板电脑、笔记本电脑等中的至少一种。
如图2所示，在一个实施例中，提供了一种增强现实数据传播方法。本实施例主要以该方法应用于上述图1中的目标终端120来举例说明。参照图2，该增强现实数据传播方法具体包括如下步骤：
S202,接收增强现实数据，增强现实数据携带有AR识别数据。
具体地，目标终端可通过网络接收采集终端传播的增强现实数据。增强现实数据是实现增强现实画面的过程中所产生的数据。增强现实数据包括采集的现实场景图像、识别出的AR识别数据以及与虚拟世界相关的虚拟世界数据。
AR识别数据是用于理解现实场景的信息。增强现实数据中的AR识别数据是由采集终端识别得到的，采集终端每采集一帧现实场景图像，就记录识别出的与当前现实场景图像对应的AR识别数据以及对应的虚拟世界数据，根据AR识别数据与虚拟世界数据生成这一帧现实场景图像对应的增强现实数据。
具体地，采集终端在采集现实场景图像的过程中，还通过传感器跟踪摄像头视线的移动，通过对采集的现实场景图像进行分析和重构，并结合传感器数据对现实场景进行识别，得到用于理解现实场景的AR识别数据。采集终端可根据识别出的AR识别数据，找到现实场景中需要“增强”的目标和目标所在的位置，就可以将相应的虚拟世界数据叠加至采集的现实场景图像中的目标，实现虚实结合，达到增强现实的目的。在一个实施例中，采集终端上配置的传感器可以包括陀螺仪、倾角传感器、位移传感器、速度传感器以及加速度传感器等中的至少一种。
在一个实施例中，如图3所示，增强现实数据的生成步骤具体包括以下步骤：需要说明的是，该增强现实数据的生成步骤可在具有图像采集装置以及AR识别能力的采集终端上实现，也可由具有图像采集装置以及AR识别能力的目标终端来实现。本实施例以该增强现实数据的生成方法在采集终端上实现来说明。
S302，采集现实场景图像。
其中，现实场景图像是用于表达当前采集终端所在现实场景的图像。具体地，采集终端可通过内置的摄像头采集现实场景图像，内置的摄像头包括前置摄像头或后置摄像头。采集终端也可以通过外接的图像采集装置采集现实场景图像，图像采集装置比如可以是可摄像机等。
在一个具体地应用场景中，用户可通过采集终端上用于调用摄像头的应用程序打开内置的摄像头，这样，采集终端可通过采集摄像头的拍摄范围内的图像，作为现实场景图像。可以理解，若用户打开的是前置摄像头，那么采集的图像中包括前置摄像头拍摄范围内的背景；若用户打开的是后置摄像头，那么采集的图像中就包括后置摄像头拍摄范围内的背景。
在一个实施例中，增强现实数据传播方法可应用于AR应用程序中，比如AR游戏应用程序。采集终端在检测到AR应用程序启动后，可以自动开启摄像头，并将摄像头实时捕捉到的现实场景图像所表示的现实场景作为AR应用程序的使用场景。
S304，根据现实场景图像识别出AR识别数据。
在一个实施例中，采集终端可将采集的现实场景图像和获取的传感器数据发送至服务器，由服务器对其进行分析和重构，分析虚拟世界数据和现实场景的相对位置，实现坐标系的对齐并进行虚拟场景的融合计算，得到AR识别数据。
在一个实施例中，采集终端每采集一帧现实场景图像，就记录从当前现实场景图像中识别出的AR识别数据，直至图像采集完毕。AR识别数据包括SLAM(SimutanelouslyLocalization And Mapping，即时定位与地图构建)信息、定位地图信息、平面信息、光感信息和人脸信息中的至少一种。采集终端可在移动的过程中根据移动的轨迹、方向信息、转动角度信息等得到定位地图信息并构建相应的地图，并确定采集终端在构建的地图中的移动轨迹。
S306，获取与AR识别数据对应的虚拟世界数据。
其中，虚拟世界数据是预先设定的需要叠加在采集的现实场景图像中的内容。虚拟世界数据可以包括虚拟角色以及与该虚拟角色相关的属性信息，虚拟角色比如虚拟人物、虚拟动物等，相关的属性信息比如该虚拟角色的身份描述信息、等级信息、道具信息等等。虚拟世界数据还可以包括虚拟物品，比如虚拟景物、虚拟道具、虚拟标牌等等。
具体地，采集终端可在识别出AR识别数据后，获取与AR识别数据对应的虚拟世界数据，并将获取的虚拟世界数据叠加在现实场景图像中目标位置处，从而将虚拟世界数据叠加在实时捕捉到的现实场景中，以对现实场景进行增强。
在一个实施例中，采集终端可事先创建若干虚拟世界数据，将创建的虚拟世界数据存储在文件或者缓存中，以在需要的时候获取。采集终端也可以从服务器获取与识别出的AR识别数据对应的虚拟世界数据。服务器可实现对虚拟世界数据的建模、管理和绘制等，并将创建的虚拟世界数据与现实场景中待增强目标的目标标识对应存储，这样，在终端根据采集的图像识别出AR识别数据中的待增强目标之后，就可以获取与待增强目标的目标标识所对应的虚拟世界数据。
在一个实施例中，当采集终端从实时捕捉到的现实场景图像中识别到AR识别数据中包括预设目标时，获取与该预设目标对应的虚拟世界数据，并将对应的虚拟世界数据显示在现实场景图像所表达的现实场景中。预设目标可以是人脸、预设的手势、预设的表情、预设的动作等等。
比如，采集终端从采集的现实场景图像中识别到预设目标为一个桌子，并获取相应的虚拟世界数据“虚拟水杯”，若需要将“虚拟水杯”放置于从现实场景图像中识别出的桌子上，就需要知道采集的现实场景图像中桌子在哪里，每当采集终端获取到新一帧现实场景图像，采集终端就需要基于采集的现实场景图像和传感器数据定位图像中的桌子，具体地，采集终端可在预先设定的坐标系中确定桌子的位置，根据该位置将“虚拟水杯”虚拟地放在桌子上，并将融合后的桌子和“虚拟水杯”展示给用户。
在一个实施例中，采集终端也可以根据识别出的AR识别数据，在现实场景图像中叠加了虚拟世界数据后，将得到的增强现实图像显示。进一步地，随着采集终端的移动，预设目标在现实场景图像中的位置也就随之移动，则采集终端可跟踪图像中预设目标的移动并将显示的虚拟世界数据随着一起移动。比如，上述例子中，由于采集终端的移动或晃动，捕捉到的桌子在屏幕上显示的位置可能会发生变化，相应的“虚拟水杯”也要一起移动。
在一个实施例中，采集终端还可获取多个与识别出的AR识别数据对应的虚拟世界数据，并将获取的多个虚拟世界数据显示在屏幕上，获取用户触发的针对显示的任意一个虚拟世界数据的选择指令，将选择指令对应的虚拟世界数据叠加至采集的现实场景图像中目标位置处，并将叠加后融合的增强现实图像显示在屏幕上，实现用户与虚拟世界的互动。采集终端还可在显示与预设目标对应的虚拟世界数据时，还可显示与该预设目标相关的属性信息。或者，采集终端还可检测用户针对显示的虚拟世界数据的触发操作，根据触发操作可以替换、修改或删除显示的虚拟世界数据。触发操作可以是触控操作、点击操作等。
S308，根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据。
在一个实施例中，当现实场景图像包括于视频帧序列中的视频帧时，增强现实数据为增强现实流数据；增强现实流数据包括视频帧序列，还包括与视频帧序列中的视频帧对应的AR识别数据以及与对应的AR识别数据对应的虚拟世界数据。
具体地，在采集终端录制AR视频的过程中，采集终端可根据采集的视频帧识别出与当前采集终端所在场景对应的AR识别数据，并将采集的AR识别数据按照视频帧的采集时序逐帧记录，在增强现实视频录制完毕时，根据采集的视频帧序列，以及与视频帧序列中各视频帧对应的AR识别数据与对应的虚拟世界数据，生成增强现实流数据。
在一个实施例中，当现实场景图像包括于视频帧序列中的视频帧时，步骤S302，采集现实场景图像包括：从现实场景逐帧采集视频帧，并将视频帧按采集时序形成视频帧序列；步骤S304，根据现实场景图像识别出AR识别数据包括：根据视频帧序列中的视频帧识别出对应的AR识别数据；步骤S308，根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据包括：将视频帧序列、AR识别数据和虚拟世界数据进行压缩处理，获得增强现实流数据。增强现实流数据也可称之为增强现实视频(AR视频)。
如图4所示，为一个实施例中生成AR视频的流程示意图。参照图4，采集终端启动摄像头、传感器之后，就开始采集视频帧，每采集一帧视频帧，都获取基于当前时刻采集的视频帧以及当前时刻的传感器数据识别出的AR识别数据，并记录下来，还记录当前时刻获取的与所采集的视频帧对应的虚拟世界数据，直至视频帧采集完毕时，采集终端可根据采集的视频帧形成的视频帧序列、获取的AR识别数据及虚拟世界数据进行压缩处理生成增强现实流数据。
在一个实施例中，增强现实流数据可以是以压缩文件的格式进行传播或存储，具体的压缩格式可以是zip或rar等，对此不作限制。
在一个实施例中，当现实场景图像为现实场景图片时，增强现实数据为图片；步骤S202，采集现实场景图像包括：获取图像采集指令；根据图像采集指令，实时采集现实场景的图像；根据图像识别出AR识别数据；当识别出的AR识别数据符合预设条件时，采集现实场景图像。
其中，当现实场景图像为现实场景图片时，增强现实数据为图片，即得到到AR图片。识别出的AR识别数据符合预设条件，是指采集终端获取的AR识别数据足够多到可供目标终端根据增强现实数据中的AR识别数据确定采集的图像中待增强目标的位置。在一个实施例中，采集终端可在获取到图像采集指令后，启动图像采集的倒计时，设置的倒计时时长可保证获取到符合预设条件的AR识别数据，那么，在倒计时结束之后，就采集现实场景图像。
在一个具体的应用场景中，采集终端获取用户输入的图像采集指令，启动摄像头和传感器，通过摄像头实时采集现实场景的图像，根据采集的图像识别出AR识别数据，当获取的AR识别数据充足之后，就拍摄当前时刻的图像，作为采集的图片。
在一个实施例中，当现实场景图像为现实场景图片时，增强现实数据为图片；步骤S308，根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据包括：将AR识别数据和虚拟世界数据添加至现实场景图片的附加信息中，获得增强现实数据。
其中，附加信息是用于表达图片相关属性的信息。图片可以携带附加信息，附加信息可包括图片的图片大小信息、拍摄时间信息、图片方向信息等等。在一个实施例中，附加信息可包含在图片的文件头中。
具体地，采集终端也可将拍摄的图片传播至目标终端。采集终端可在拍摄之前，根据摄像头捕捉到的图像识别出AR识别数据，并获取与识别出的AR识别数据对应的虚拟世界数据，将识别出的AR识别数据以及获取的虚拟世界数据添加至采集的图片的附加信息中，得到增强现实数据。在一个实施例中，采集终端也可以将获取的虚拟世界数据叠加至采集的现实场景图片中并显示。本实施例中根据图片生成的增强现实数据也可称之为增强现实图片(AR图片)。
在一个实施例中，采集终端还可以将识别出的AR识别数据、以及对应的虚拟世界数据和采集的图片进行压缩处理后形成增强现实数据包，并传播形成的增强现实数据包至目标终端。
如图5所示，为一个实施例中根据采集的现实场景图片生成AR图片的流程示意图。参照图5，采集终端启动摄像头、传感器之后，就根据捕捉到的现实场景图像识别出AR识别数据，直到获取的AR识别数据充足时，就获取相应的虚拟世界数据并拍摄图片，并将拍摄图片时获取的AR识别数据以及对应的虚拟世界数据添加至图片的附加信息中，得到增强现实图片。
在本实施例中，采集终端通过将识别出的AR识别数据以及获取的虚拟世界数据存入图片的附加信息中，实现了AR识别数据的传播或保存。
S204，向目标终端发送增强现实数据。
具体地，目标终端可通过网络接收采集终端发送的增强现实数据，同时，目标终端也可向其它目标终端发送接收的增强现实数据。这里的目标终端可以有多个，目标终端之间可以相互传播增强现实数据以及经过更新的增强现实数据。比如，如图1所示，A用户所持有的采集终端110可在生成增强现实数据之后，发送增强现实数据至B用户所持有的第一目标终端122、C用户所持有的第二目标终端124；第一目标终端122可在接收到增强现实数据之后，发送增强现实数据至第二目标终端124或采集终端110，或者，第一目标终端122还可将经过B用户更新后的增强现实数据发送至第二目标终端124或采集终端110；第二目标终端124还可将经过C用户更新的增强显示数据分享至第三目标终端126。
在一个实施例中，接收了增强现实数据的第一目标终端可向其它目标终端发送增强现实流数据，比如第二目标终端，第二目标终端就可以在按照视频帧序列的顺序播放增强现实流数据中视频帧序列中的各个视频帧时，根据对应的现实场景信息AR识别数据，将对应的虚拟世界数据叠加到相应的视频帧中进行播放。
如图6所示，为一个实施例中传播AR视频的示意图。参照图6，第一个用户所持有的采集终端具备识别能力，在采集到视频帧后获得相应的AR识别数据和虚拟世界数据，并据以生成增强现实流数据，第一个用户通过采集终端将增强现实流数据传播给其他用户的目标终端，其他用户的目标终端不需要具备识别能力，只需要根据接收的增强现实流数据逐帧还原第一个用户的增强现实场景图像并显示，由于还原了第一用户的增强现实场景图像，其他用户就可以第一个用户的视角体验增强现实场景。其他用户的目标终端还可以获取更新后的用于增强现实的虚拟世界相关的数据，从而达到改造增强现实视频的目的。
如图7所示，为一个实施例中传播AR图片的示意图。参照图7，第一个用户所持有的采集终端具备识别能力，在拍下图片之前，采集终端需要先通过移动摄像头捕捉现实场景图像，以识别到足够多的AR识别数据，在AR识别数据获取充足之后，采集终端就可利用摄像头进行图片拍摄，并将识别出的AR识别数据以及获取的虚拟世界数据存入拍摄的图片的附加信息中，得到增强现实图片，并将增强现实图片传播给其他用户的目标终端，其他用户的目标终端不需要具备识别能力，只需要根据接收的增强现实图片还原增强现实场景。由于还原了图片中的增强现实场景，其他用户就可以在图片的平面上放置其它虚拟世界数据，从而达到改造增强现实图片的目的。
S206,在目标终端根据AR识别数据展示增强现实数据。
在一个实施例中，采集终端可以是具备根据采集的现实场景图像识别出AR识别数据的能力的终端，AR识别数据是增强现实处理所需的信息，而目标终端可以是不具备根据采集的现实场景图像识别出AR识别数据的能力的终端，目标终端仅需从接收的增强现实数据提取出现实场景图像、AR识别数据以及虚拟世界数据，根据AR识别数据在现实场景图像上叠加虚拟世界数据，以还原并显示采集终端采集的增强现实场景，虽然目标终端不具备识别能力，但也能播放增强现实场景图像。
在一个实施例中，如图8所示，步骤S206，在目标终端根据AR识别数据展示增强现实数据具体包括以下步骤：
S802，从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据。
具体地，目标终端可在接收到传播至本地的增强现实数据后，从增强现实数据中提取现实场景图像、AR识别数据以及对应的虚拟世界数据。在一个实施例中，采集终端可按照预设的数据格式将采集的现实场景图像、识别出的AR识别数据以及获取的虚拟世界数据进行编码后保存，目标终端就可以按照约定的数据格式进行解码，从中提取现实场景图像、AR识别数据以及对应的虚拟世界数据。
在一个实施例中，当增强现实数据为增强现实流数据时，步骤S802，从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据，包括：从增强现实流数据中的视频帧序列中，按视频帧时序提取包括现实场景图像的视频帧；从增强现实流数据中提取与视频帧对应的AR识别数据以及虚拟世界数据；AR识别数据和虚拟世界数据相对应。
其中，增强现实流数据是当现实场景图像为视频帧序列中的视频帧时，采集终端可根据视频帧序列中各个视频帧，以及各个视频帧对应的AR识别数据和虚拟世界数据生成的数据，具体地，采集终端从现实场景逐帧采集视频帧，并将视频帧按采集时序形成视频帧序列；根据视频帧序列中的视频帧识别出对应的AR识别数据；将视频帧序列、AR识别数据和虚拟世界数据进行压缩处理，获得增强现实流数据。
相应地，目标终端可在接收到传播至本地的增强现实流数据后，对增强现实流数据进行解压处理，按照各视频帧在视频帧序列中的顺序，依次获取相应的视频帧，每获取一帧视频，就根据视频帧与AR识别数据以及虚拟世界数据之间的对应关系，从增强现实流数据中提取当前视频帧对应的AR识别数据以及对应的虚拟世界数据。
在一个实施例中，当增强现实数据为图片时，步骤S802，从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据包括：从图片中获取图像数据，得到现实场景图像；从图片的附加信息中提取根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据。
其中，图片的附加信息是用于表达图片相关属性的信息。图片可以携带附加信息，附加信息可包括图片的图片大小信息、拍摄时间信息、图片方向信息等等。在一个实施例中，附加信息可包含在图片的文件头中。采集终端可将根据采集的现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据添加至图片的附加信息中，得到增强现实数据。
相应地，目标终端在接收到传播至本地的增强现实图片后，可从图片中获取图片数据，比如图片本身的像素数据，以得到采集终端采集的现实场景图像。目标终端还可从图片的附加信息中提取采集终端根据采集的图片识别的AR识别数据以及获取的虚拟世界数据，目标终端不需要具备识别能力，只需要根据接收的增强现实图片还原增强现实场景。
S804，根据AR识别数据，在现实场景图像上叠加虚拟世界数据。
其中，AR识别数据是增强现实处理所需的信息，目标终端可以是不具备根据采集的现实场景图像识别AR识别数据的能力的终端，目标终端仅需从接收的增强现实数据提取出现实场景图像、AR识别数据以及虚拟世界数据，根据AR识别数据在现实场景图像上叠加虚拟世界数据，以还原并显示采集终端采集的增强现实场景，虽然目标终端不具备识别能力，但也可以实现播放增强现实场景图像。
具体地，目标终端根据获取的AR识别数据，确定获取的现实场景图像中需要“增强”的预设目标和预设目标所在的位置，就可以将获取的相应的虚拟世界数据叠加至现实场景图像中的预设目标，实现虚实结合，达到增强现实的目的。
可以理解的是，虽然目标终端不具备识别能力，甚至都不具备图像采集能力，比如不用开启摄像头，目标终端仍可以根据获取的AR识别数据构建增强现实场景，在现实场景图像上叠加虚拟世界数据，使得用户可以通过配置较低的终端体验到增强现实场景。预设目标可以是人脸、预设的手势、预设的表情、预设的动作等等。
S806，显示叠加有虚拟世界数据的现实场景图像。
具体地，目标终端在根据增强现实数据中的AR识别数据确定了预设目标在现实场景图像中所在的位置后，就可以将提取的虚拟世界数据叠加至确定的位置处，并将叠加了虚拟世界数据的现实场景图像渲染显示。
在一个实施例中，当增强现实数据为增强现实流数据时，步骤S804，根据AR识别数据，在现实场景图像上叠加虚拟世界数据包括：根据与提取的视频帧对应的AR识别数据，在提取的视频帧上叠加与提取的视频帧对应的虚拟世界数据；步骤S806，显示叠加有虚拟世界数据的现实场景图像包括：按照视频帧时序播放叠加有虚拟世界数据的视频帧。
具体地，当增强现实数据为增强现实流数据时，也就是AR视频时，目标终端可在接收到增现实流数据后，对增强现实流数据进行解压得到视频帧序列以及该视频帧序列中各视频帧对应的AR识别数据和虚拟世界数据，目标终端就可以按照各视频帧在视频帧序列中的顺序，依次播放各视频帧，在播放当前视频帧时，将相应的虚拟世界数据叠加在当前视频帧中，并将叠加了虚拟世界数据的视频帧按照视频帧在原视频帧序列中的时序进行播放。
在一个实施例中，当增强现实数据为图片时，步骤S804，根据AR识别数据，在现实场景图像上叠加虚拟世界数据包括：根据从图片的附加信息中提取的AR识别数据，在图片上叠加与提取的AR识别数据对应的虚拟世界数据，步骤S806，显示叠加有虚拟世界数据的现实场景图像包括：显示叠加有虚拟世界数据的图片。
在上述实施例中，目标终端在接收到增强现实数据后，就可提取出现实场景图像、AR识别数据以及对应的虚拟世界数据，并在现实场景图像上叠加虚拟世界数据，将叠加了虚拟世界数据的现实场景图像展示，即使目标终端配置较低，也能还原出配置较高的终端所采集的增强现实场景，从而用户可通过配置较低的目标终端实现与虚拟世界数据的互动。
S208，接收用户指令，并根据用户指令更新增强现实数据。
其中，用户指令是用于对显示的虚拟世界数据进行更新的指令。具体地，接收了增强现实数据的目标终端还可对还原的增强现实场景进行二次加工，目标终端可检测对显示的虚拟世界数据进行更新的用户指令，比如可对虚拟世界数据进行增加、修改、删除或替换的用户指令，在获取到更新之后的虚拟世界数据，显示更新后的虚拟世界数据。
比如，目标终端可获取与增强现实数据中的AR识别数据相匹配的虚拟世界数据，并通过屏幕显示给用户，目标终端在接收用户触发的针对显示的任意一个虚拟世界数据的用户指令时，就获取用户指令所对应的虚拟世界数据，并将该虚拟世界数据替换原有的虚拟世界数据，叠加至采集的现实场景图像的目标位置处，并将叠加后融合的增强现实图像显示在屏幕上，实现虚拟世界数据的更新。
在一个实施例中，步骤S208，接收用户指令，并根据用户指令更新增强现实数据包括：获取用户触发的对显示的虚拟世界数据进行更新的用户指令；获取用户指令所对应的更新的虚拟世界数据；根据经过更新的虚拟世界数据、现实场景图像和AR识别数据，生成经过更新的增强现实数据。
具体地，目标终端还可获取新的虚拟世界数据，以对从增强现实数据中提取的虚拟世界数据进行更新，得到经过更新的虚拟世界数据，根据经过更新的虚拟世界数据、提取的现实场景图像和AR识别数据生成经过更新的增强现实数据。
在一个实施例中，当增强现实数据为增强现实流数据时，目标终端在接收到增强现实流数据后，对增强现实流数据进行解压处理得到视频帧序列以及该视频帧序列中各视频帧对应的AR识别数据和虚拟世界数据，目标终端就可以按照各视频帧在视频帧序列中的顺序，依次播放各视频帧，在播放当前视频帧时，目标终端可获取用户触发的对显示的虚拟世界数据进行更新的指令，在更新后显示更新后的虚拟世界数据，用户不仅可以体验的增强现实场景，还可以以自己的意愿更新其中的虚拟世界数据，达到二次改造增强现实视频的目的。
目标终端还可进一步获取针对更新的虚拟世界数据录制增强现实流数据的录制指令，根据录制指令，以当前更新的虚拟世界数据，当前的播放的视频帧以及相应的AR识别数据生成当前播放的视频帧对应的经过更新增强现实数据，直至视频播放结束。
如图9所示，为一个实施例中还原并改造增强现实场景的流程示意图。参照图9，目标终端对接收的增强现实流数据进行解压处理，得到视频帧序列以及相应的AR识别数据和与AR识别数据对应的虚拟世界数据，在渲染每一视频帧时，目标终端可根据与当前渲染的视频帧对应的AR识别数据渲染相应的虚拟世界数据，目标终端还可根据用户的触发指令更新当前的虚拟世界数据并显示出来，若目标终端还接收到用户触发的录制指令，则目标终端就根据当前更新的虚拟世界数据、当前播放的视频帧以及相应的AR识别数据录制与当前播放视频帧对应的增强现实流数据，直至视频播放结束，目标终端判断播放的视频帧序列中是否存在任一视频帧对应的经过更新的增强现实流数据，若存在，则说明视频帧序列对应的增强现实流数据有发生改变，则目标终端需将各个视频帧对应的经过更新的增强现实流数据进行压缩处理，得到视频帧序列对应的更新的增强现实流数据。
在一个实施例中，当增强现实数据为图片时，目标终端在根据该图片的附加信息中的AR识别数据和虚拟世界数据还原并显示增强现实图片时，还可获取用户触发的对显示的虚拟世界数据进行更新的指令，根据更新的指令显示更新后的虚拟世界数据，用户不仅可以体验的增强现实场景，还可以以自己的意愿更新其中的虚拟世界数据，达到二次改造增强现实图片的目的。
进一步地，目标终端还可以将更新后的虚拟世界数据添加至图片的附加信息中，并根据更新后的虚拟世界数据、以及附加信息中的AR识别数据生成更新的增强现实图片。
如图10所示，为一个实施例中还原并改造增强现实场景的流程示意图。参照图10，目标终端在接收到增强现实图片后，从图片的附加信息中提取增强AR识别数据和相应的虚拟世界数据，根据图片的图像数据现实图片，并根据提取的增强AR识别数据将提取的虚拟世界数据叠加至当前显示的图片中，还原增强现实图片所表示的增强现实场景。若当前图片可编辑，在获取到用户的编辑指令时，目标终端还可根据用户的编辑指令更新叠加的虚拟世界数据，并在图片的附加信息中添加更新的虚拟世界数据和AR识别数据，据以生成更新的增强现实图片，达到改造增强现实场景的目的。
在本实施例中，目标终端不仅可以还原采集终端采集的增强现实场景，通过对所展示的增强现实场景中的虚拟世界数据进行修改，目标终端还可实现对增强现实场景的二次改造。
S210，分享更新的增强现实数据。
在一个实施例中，目标终端还可根据接收的增强现实数据中的AR识别数据、现实场景图像以及更新后的虚拟世界数据生成更新的增强现实数据，并分享更新的增强现实数据至采集终端或其它目标终端。
在一个实施例中，步骤S210，分享更新的增强现实数据具体包括：采集终端可接收第一目标终端反馈的经过更新的增强现实数据；从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据；根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
具体地，第一目标终端将添加了虚拟世界数据和AR识别数据的图片发送至第二目标终端后，第二目标终端可还原并显示增强现实场景，第二目标终端还可获取用户对显示的虚拟世界数据进行更新的指令，依据该指令获取更新的虚拟世界数据并显示在屏幕上。
第二目标终端还可将更新的虚拟世界数据以及获取的AR识别数据添加至图片的附加信息中，生成更新的增强现实数据，并将更新的增强现实数据反馈至采集终端，采集终端就可以从接收的增强现实数据中提取出现实场景图像、AR识别数据和经过更新的虚拟世界数据，并在现实场景图像上叠加更新的虚拟世界数据后显示，实现了采集终端对应的用户与第二目标终端对应的用户之间的互动。
在一个实施例中，步骤S210，分享更新的增强现实数据包括：生成更新的增强现实数据的目标终端可分享经过更新的增强现实数据至其它目标终端；经过更新的增强现实数据，用于指示接收到经过更新的增强现实数据的目标终端从增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据，并根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
具体地，目标终端可传播经过更新的增强现实数据至其它目标终端。当然，目标终端也可以传播经过更新的增强现实数据至采集终端，目标终端还可将传播至本地的、未经过更新的增强现实数据发送至其它目标终端。其它目标终端在接收到经过更新的增强现实数据之后，类似地，可从传播至本地的增强现实数据中提取现实场景图像、AR识别数据以及经过更新的虚拟世界数据，以还原增强现实场景。从而，可实现基于增强现实场景促进多个用户之间的交互。
在一个实施例中，上述增强现实数据的传播方法还包括以下步骤：获取与显示的经过更新的虚拟世界数据对应的评论信息；实时展示评论信息。
具体地，第一目标终端在分享了经过更新的增强现实数据，其它目标终端可展示经过更新的增强现实数据，并获取用户针对所展示的增强现实数据上传的评论信息，其它目标终端可实时地将获取的评论信息发送至目标终端，第一目标终端可在展示该增强现实数据所表达的AR场景时，将接收到的评论信息一并展示。
在一个实施例中，其它目标终端还可在展示经过更新的增强现实数据时，获取各个用户针对所展示的增强现实数据的评论信息，并展示，也就是，生成更新的增强现实数据的目标终端和接收了更新的增强现实数据的目标终端都可以获取到各个用户的评论信息并显示给当前用户，可以提升多人基于该增强现实数据的互动。
上述增强现实数据的传播方法，在接收到采集终端发送的增强现实数据之后，还可将接收的增强现实数据发送至配置较低的目标终端，这样，目标终端可根据接收到的增强现实数据中携带的AR识别数据展示增强现实数据，还原AR场景，并且目标终端还可接收用户指令，并响应用户指令更新增强现实数据，然后分享更新的增强现实数据，这样，用户就可以通过配置较低的目标终端体验采集终端对应的用户所拍摄的AR场景，实现了多个用户之间的AR互动。
如图11所示，在一个具体的实施例中，提供了一种增强现实数据传播方法，该方法具体包括以下步骤：
S1102，采集终端采集现实场景图像；
S1104，当现实场景图像包括于视频帧序列中的视频帧时，采集终端将采集的视频帧按照采集时序形成视频帧序列，并将视频帧序列、根据视频帧序列中的视频帧识别出的AR识别数据和获取的与AR识别数据对应的虚拟世界数据进行压缩处理，获得增强现实流数据；
S1106，当现实场景图像为现实场景图片时，采集终端将识别出的AR识别数据和获取的与AR识别数据对应的虚拟世界数据添加至现实场景图片的附加信息中，获得增强现实数据。
S1108，采集终端传播增强现实数据至第一目标终端。
S1110，第一目标终端接收传播至本地的增强现实数据。
S1112，第一目标终端向第二目标终端发送增强现实数据。
S1114，当增强现实数据为增强现实流数据时，第二目标终端从增强现实流数据中的视频帧序列中，按视频帧时序提取包括现实场景图像的视频帧；从增强现实流数据中提取与视频帧对应的AR识别数据以及虚拟世界数据；根据与提取的视频帧对应的AR识别数据，在提取的视频帧上叠加与提取的视频帧对应的虚拟世界数据；按照视频帧时序播放叠加有虚拟世界数据的视频帧。
S1116，当增强现实数据为图片时，第二目标终端从图片中获取图像数据，得到现实场景图像；从图片的附加信息中提取根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据。
S1118，第二目标终端获取对显示的虚拟世界数据进行更新得到的经过更新的虚拟世界数据。
S1120，第二目标终端根据经过更新的虚拟世界数据、现实场景图像和AR识别数据，生成经过更新的增强现实数据。
S1122，第二目标终端传播经过更新的增强现实数据至第三目标终端；经过更新的增强现实数据，用于指示第三目标终端从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据，并根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
上述增强现实数据传播方法，在接收到采集终端发送的增强现实数据之后，还可将接收的增强现实数据发送至配置较低的目标终端，这样，目标终端可根据接收到的增强现实数据中携带的AR识别数据展示增强现实数据，还原AR场景，并且目标终端还可接收用户指令，并响应用户指令更新增强现实数据，然后分享更新的增强现实数据，这样，用户就可以通过配置较低的目标终端体验采集终端对应的用户所拍摄的AR场景，实现了多个用户之间的AR互动。
图11为一个实施例中增强现实数据传播方法的流程示意图。应该理解的是，虽然图11的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图11中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
如图12所示，在一个实施例中，提供了一种增强现实数据传播系统1200，该增强现实数据传播系统1200具体包括采集终端1202、第一目标终端1204、第二目标终端1206和第三目标终端1208，其中：
第一目标终端1204用于接收增强现实数据，增强现实数据携带有AR识别数据；向第二目标终端1206发送增强现实数据。
第二目标终端1206用于根据AR识别数据展示增强现实数据；还用于接收用户指令，并根据用户指令更新增强现实数据；还用于分享更新的增强现实数据。
在一个实施例中，采集终端1202用于采集现实场景图像；根据现实场景图像识别出AR识别数据；获取与AR识别数据对应的虚拟世界数据；根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据；还用于传播增强现实数据至第一目标终端1204。
在一个实施例中，当现实场景图像包括于视频帧序列中的视频帧时，增强现实数据为增强现实流数据；增强现实流数据包括视频帧序列，还包括与视频帧序列中的视频帧对应的AR识别数据以及与对应的AR识别数据对应的虚拟世界数据。
在一个实施例中，采集终端1202、第一目标终端1204或第二目标终端1206还用于在按照视频帧序列的顺序播放视频帧序列中的视频帧时，根据对应的AR识别数据，将对应的虚拟世界数据叠加到相应的视频帧中进行播放。
在一个实施例中，采集终端1202还用于从现实场景逐帧采集视频帧，并将视频帧按采集时序形成视频帧序列；根据视频帧序列中的视频帧识别出对应的AR识别数据；将视频帧序列、AR识别数据和虚拟世界数据进行压缩处理，获得增强现实流数据。
在一个实施例中，当现实场景图像为现实场景图片时，增强现实数据为图片；采集终端1202还用于将AR识别数据和虚拟世界数据添加至现实场景图片的附加信息中，获得增强现实数据。
在一个实施例中，采集终端1202还用于获取图像采集指令；根据图像采集指令，实时采集现实场景的图像；根据图像识别出AR识别数据；当识别出的AR识别数据符合预设条件时，采集现实场景图像。
在一个实施例中，采集终端1202还用于接收目标终端反馈的经过更新的增强现实数据，该目标终端为第一目标终端1204、第二目标终端1206和第三目标终端1208中的至少一个；采集终端1202还用于从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据；根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
在一个实施例中，第二目标终端1206还用于从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据；根据AR识别数据，在现实场景图像上叠加虚拟世界数据；显示叠加有虚拟世界数据的现实场景图像。
在一个实施例中，第二目标终端1206还用于从增强现实流数据中的视频帧序列中，按视频帧时序提取包括现实场景图像的视频帧；从增强现实流数据中提取与视频帧对应的AR识别数据以及虚拟世界数据；AR识别数据和虚拟世界数据相对应。
在一个实施例中，第二目标终端1206还用于根据与提取的视频帧对应的AR识别数据，在提取的视频帧上叠加与提取的视频帧对应的虚拟世界数据；按照视频帧时序播放叠加有虚拟世界数据的视频帧。
在一个实施例中，当增强现实数据为图片时，第二目标终端1206还用于从图片中获取图像数据，得到现实场景图像；从图片的附加信息中提取根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据。
在一个实施例中，第二目标终端1206还用于获取用户触发的对显示的虚拟世界数据进行更新的用户指令；获取用户指令所对应的更新的虚拟世界数据；根据经过更新的虚拟世界数据、现实场景图像和AR识别数据，生成经过更新的增强现实数据。
在一个实施例中，第三目标终端1208还用于在接收到第二目标终端1206分享的经过更新的增强现实数据时，从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据，并根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
在一个实施例中，第二目标终端1206还用于获取与显示的经过更新的虚拟世界数据对应的评论信息；实时展示评论信息。
上述增强现实数据传播系统1200，在接收到采集终端发送的增强现实数据之后，还可将接收的增强现实数据发送至配置较低的目标终端，这样，目标终端可根据接收到的增强现实数据中携带的AR识别数据展示增强现实数据，还原AR场景，并且目标终端还可接收用户指令，并响应用户指令更新增强现实数据，然后分享更新的增强现实数据，这样，用户就可以通过配置较低的目标终端体验采集终端对应的用户所拍摄的AR场景，实现了多个用户之间的AR互动。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时，使得处理器执行以下步骤：接收增强现实数据，增强现实数据携带有AR识别数据；向目标终端发送增强现实数据；在目标终端根据AR识别数据展示增强现实数据；接收用户指令，并根据用户指令更新增强现实数据；分享更新的增强现实数据。
在一个实施例中，计算机程序被处理器执行时，还使得处理器执行以下步骤：采集现实场景图像；根据现实场景图像识别出AR识别数据；获取与AR识别数据对应的虚拟世界数据；根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据。
在一个实施例中，当现实场景图像包括于视频帧序列中的视频帧时，增强现实数据为增强现实流数据；增强现实流数据包括视频帧序列，还包括与视频帧序列中的视频帧对应的AR识别数据以及与对应的AR识别数据对应的虚拟世界数据。
在一个实施例中，增强现实流数据，用于指示目标终端在按照视频帧序列的顺序播放视频帧序列中的视频帧时，根据对应的AR识别数据，将对应的虚拟世界数据叠加到相应的视频帧中进行播放。
在一个实施例中，计算机程序被处理器执行采集现实场景图像的步骤时，使得处理器具体执行以下步骤：从现实场景逐帧采集视频帧，并将视频帧按采集时序形成视频帧序列；计算机程序被处理器执行获取与现实场景图像对应的AR识别数据的步骤时，使得处理器具体执行以下步骤：根据视频帧序列中的视频帧识别出对应的AR识别数据；计算机程序被处理器执行根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据的步骤时，使得处理器具体执行以下步骤：将视频帧序列、AR识别数据和虚拟世界数据进行压缩处理，获得增强现实流数据。
在一个实施例中，当现实场景图像为现实场景图片时，增强现实数据为图片；计算机程序被处理器执行根据现实场景图像、AR识别数据以及虚拟世界数据生成增强现实数据的步骤时，使得处理器具体执行以下步骤：将AR识别数据和虚拟世界数据添加至现实场景图片的附加信息中，获得增强现实数据。
在一个实施例中，计算机程序被处理器执行采集现实场景图像的步骤时，使得处理器具体执行以下步骤：获取图像采集指令；根据图像采集指令，实时采集现实场景的图像；根据图像识别出AR识别数据；当识别出的AR识别数据符合预设条件时，采集现实场景图像。
在一个实施例中，计算机程序被处理器执行时，使得处理器还执行以下步骤：接收目标终端反馈的经过更新的增强现实数据；从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据；根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
在一个实施例中，计算机程序被处理器执行在目标终端根据AR识别数据展示增强现实数据的步骤时，使得处理器具体执行以下步骤：从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据；根据AR识别数据，在现实场景图像上叠加虚拟世界数据；显示叠加有虚拟世界数据的现实场景图像。
在一个实施例中，当增强现实数据为增强现实流数据时，计算机程序被处理器执行从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据的步骤时，使得处理器具体执行以下步骤：从增强现实流数据中的视频帧序列中，按视频帧时序提取包括现实场景图像的视频帧；从增强现实流数据中提取与视频帧对应的AR识别数据以及虚拟世界数据；AR识别数据和虚拟世界数据相对应。
在一个实施例中，当增强现实数据为增强现实流数据时，计算机程序被处理器执行根据AR识别数据，在现实场景图像上叠加虚拟世界数据的步骤时，使得处理器具体执行以下步骤：根据与提取的视频帧对应的AR识别数据，在提取的视频帧上叠加与提取的视频帧对应的虚拟世界数据；计算机程序被处理器执行显示叠加有虚拟世界数据的现实场景图像的步骤时，使得处理器具体执行以下步骤：按照视频帧时序播放叠加有虚拟世界数据的视频帧。
在一个实施例中，当增强现实数据为图片时，计算机程序被处理器执行从增强现实数据中，提取现实场景图像、根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据的步骤时，使得处理器具体执行以下步骤：从图片中获取图像数据，得到现实场景图像；从图片的附加信息中提取根据现实场景图像识别出的AR识别数据以及与AR识别数据对应的虚拟世界数据。
在一个实施例中，计算机程序被处理器执行接收用户指令，并根据用户指令更新增强现实数据的步骤时，使得处理器具体执行以下步骤：获取用户触发的对显示的虚拟世界数据进行更新的用户指令；获取用户指令所对应的更新的虚拟世界数据；根据经过更新的虚拟世界数据、现实场景图像和AR识别数据，生成经过更新的增强现实数据。
在一个实施例中，经过更新的增强现实数据，用于指示接收到经过更新的增强现实数据的终端从经过更新的增强现实数据中，提取现实场景图像、AR识别数据和经过更新的虚拟世界数据，并根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
在一个实施例中，计算机程序被处理器执行使得处理器具体还执行以下步骤：获取与显示的经过更新的虚拟世界数据对应的评论信息；实时展示评论信息。
在一个实施例中，AR识别数据包括定位地图信息、平面信息、光感信息和人脸信息中的至少一种。
上述计算机可读存储介质，在接收到采集终端发送的增强现实数据之后，还可将接收的增强现实数据发送至配置较低的目标终端，这样，目标终端可根据接收到的增强现实数据中携带的AR识别数据展示增强现实数据，还原AR场景，并且目标终端还可接收用户指令，并响应用户指令更新增强现实数据，然后分享更新的增强现实数据，这样，用户就可以通过配置较低的目标终端体验采集终端对应的用户所拍摄的AR场景，实现了多个用户之间的AR互动。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (18)

1.一种增强现实数据传播方法，包括：
接收增强现实数据，所述增强现实数据携带有AR识别数据；
向目标终端发送所述增强现实数据；
在所述目标终端根据所述AR识别数据展示所述增强现实数据；
接收用户指令，并根据所述用户指令更新所述增强现实数据；
分享更新的所述增强现实数据。
2.根据权利要求1所述的方法，其特征在于，所述增强现实数据的生成步骤包括：
采集现实场景图像；
根据所述现实场景图像识别出AR识别数据；
获取与所述AR识别数据对应的虚拟世界数据；
根据所述现实场景图像、所述AR识别数据以及所述虚拟世界数据生成增强现实数据。
3.根据权利要求2所述的方法，其特征在于，当所述现实场景图像包括于视频帧序列中的视频帧时所述增强现实数据为增强现实流数据；所述增强现实流数据包括所述视频帧序列，还包括与所述视频帧序列中的视频帧对应的AR识别数据以及与对应的AR识别数据对应的虚拟世界数据。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
在按照所述视频帧序列的顺序播放所述视频帧序列中的视频帧时，根据对应的AR识别数据，将对应的虚拟世界数据叠加到相应的视频帧中进行播放。
5.根据权利要求3所述的方法，其特征在于，所述采集现实场景图像包括：
从现实场景逐帧采集视频帧，并将所述视频帧按采集时序形成视频帧序列；
所述根据所述现实场景图像识别出AR识别数据包括：
根据所述视频帧序列中的视频帧识别出对应的AR识别数据；
所述根据所述现实场景图像、所述AR识别数据以及所述虚拟世界数据生成增强现实数据包括：
将所述视频帧序列、所述AR识别数据和所述虚拟世界数据进行压缩处理，获得增强现实流数据。
6.根据权利要求2所述的方法，其特征在于，当所述现实场景图像为现实场景图片时，所述增强现实数据为图片；
所述根据所述现实场景图像、所述AR识别数据以及所述虚拟世界数据生成增强现实数据包括：
将所述AR识别数据和所述虚拟世界数据添加至所述现实场景图片的附加信息中，获得增强现实数据。
7.根据权利要求6所述的方法，其特征在于，所述采集现实场景图像包括：
获取图像采集指令；
根据所述图像采集指令，实时采集现实场景的图像；
根据所述图像识别出AR识别数据；
当识别出的AR识别数据符合预设条件时，采集现实场景图像。
8.根据权利要求1所述的方法，其特征在于，所述方法还包括：
接收所述目标终端反馈的经过更新的增强现实数据；
从所述经过更新的增强现实数据中，提取所述现实场景图像、所述AR识别数据和经过更新的虚拟世界数据；
根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
9.根据权利要求1所述的方法，其特征在于，所述在所述目标终端根据所述AR识别数据展示所述增强现实数据包括：
从所述增强现实数据中，提取现实场景图像、根据所述现实场景图像识别出的AR识别数据以及与所述AR识别数据对应的虚拟世界数据；
根据所述AR识别数据，在所述现实场景图像上叠加所述虚拟世界数据；
显示叠加有所述虚拟世界数据的现实场景图像。
10.根据权利要求9所述的方法，其特征在于，当所述增强现实数据为增强现实流数据时，所述从所述增强现实数据中，提取现实场景图像、根据所述现实场景图像识别出的AR识别数据以及与所述AR识别数据对应的虚拟世界数据包括：
从所述增强现实流数据中的视频帧序列中，按视频帧时序提取包括现实场景图像的视频帧；
从所述增强现实流数据中提取与所述视频帧对应的AR识别数据以及虚拟世界数据；所述AR识别数据和所述虚拟世界数据相对应。
11.根据权利要求10所述的方法，其特征在于，所述根据所述AR识别数据，在所述现实场景图像上叠加所述虚拟世界数据包括：
根据与提取的视频帧对应的AR识别数据，在提取的视频帧上叠加与提取的视频帧对应的虚拟世界数据；
所述显示叠加有所述虚拟世界数据的现实场景图像包括：
按照视频帧时序播放叠加有所述虚拟世界数据的视频帧。
12.根据权利要求9所述的方法，其特征在于，当所述增强现实数据为图片时，所述从所述增强现实数据中，提取现实场景图像、根据所述现实场景图像识别出的AR识别数据以及与所述AR识别数据对应的虚拟世界数据包括：
从所述图片中获取图像数据，得到现实场景图像；
从所述图片的附加信息中提取根据所述现实场景图像识别出的AR识别数据以及与所述AR识别数据对应的虚拟世界数据。
13.根据权利要求9所述的方法，其特征在于，所述接收用户指令，并根据所述用户指令更新所述增强现实数据包括：
获取用户触发的对显示的虚拟世界数据进行更新的用户指令；
获取所述用户指令所对应的更新的虚拟世界数据；
根据经过更新的虚拟世界数据、所述现实场景图像和所述AR识别数据，生成经过更新的增强现实数据。
14.根据权利要求13所述的方法，其特征在于，所述经过更新的增强现实数据，用于指示接收到所述经过更新的增强现实数据的终端从所述经过更新的增强现实数据中，提取所述现实场景图像、所述AR识别数据和经过更新的虚拟世界数据，并根据提取的AR识别数据，在提取的现实场景图像上叠加显示经过更新的虚拟世界数据。
15.根据权利要求14所述的方法，其特征在于，所述方法还包括：
获取与显示的经过更新的虚拟世界数据对应的评论信息；
实时展示所述评论信息。
16.根据权利要求1至15所述的方法，其特征在于，所述AR识别数据包括定位地图信息、平面信息、光感信息和人脸信息中的至少一种。
17.一种增强现实数据传播系统，其特征在于，所述系统包括采集终端、第一目标终端、第二目标终端和第三目标终端，其中：
所述采集终端用于采集现实场景图像；根据所述现实场景图像识别出AR识别数据；获取与所述AR识别数据对应的虚拟世界数据；根据所述现实场景图像、所述AR识别数据以及所述虚拟世界数据生成增强现实数据；
所述采集终端还用于传播所述增强现实数据至第一目标终端；
所述第一目标终端用于接收所述增强现实数据；还用于向第二目标终端发送所述增强现实数据；
所述第二目标终端用于在接收到所述第一目标终端发送的所述增强现实数据时，根据所述AR识别数据展示所述增强现实数据；
所述第二目标终端还用于接收用户指令，并根据所述用户指令更新所述增强现实数据；分享更新的所述增强现实数据至所述第三目标终端。
18.一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至16中任一项所述方法的步骤。
CN201810730829.5A 2018-07-05 2018-07-05 增强现实数据传播方法、系统和存储介质 Active CN110166787B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810730829.5A CN110166787B (zh) 2018-07-05 2018-07-05 增强现实数据传播方法、系统和存储介质
EP19830742.3A EP3745726A4 (en) 2018-07-05 2019-06-05 PROCEDURE FOR DISTRIBUTION OF DATA OF THE EXTENDED REALITY, SYSTEM AND TERMINAL DEVICE AND STORAGE MEDIUM
PCT/CN2019/090071 WO2020007157A1 (zh) 2018-07-05 2019-06-05 增强现实数据传播方法、系统、终端和存储介质
US16/989,488 US11917265B2 (en) 2018-07-05 2020-08-10 Augmented reality data dissemination method, system and terminal and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810730829.5A CN110166787B (zh) 2018-07-05 2018-07-05 增强现实数据传播方法、系统和存储介质

Publications (2)

Publication Number Publication Date
CN110166787A true CN110166787A (zh) 2019-08-23
CN110166787B CN110166787B (zh) 2022-11-29

Family

ID=67645003

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810730829.5A Active CN110166787B (zh) 2018-07-05 2018-07-05 增强现实数据传播方法、系统和存储介质

Country Status (4)

Country Link
US (1) US11917265B2 (zh)
EP (1) EP3745726A4 (zh)
CN (1) CN110166787B (zh)
WO (1) WO2020007157A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111638781A (zh) * 2020-05-15 2020-09-08 广东小天才科技有限公司 基于ar的发音引导方法、装置、电子设备及存储介质
CN113724398A (zh) * 2021-09-01 2021-11-30 北京百度网讯科技有限公司 增强现实方法、装置、设备以及存储介质
CN113973224A (zh) * 2021-09-18 2022-01-25 阿里巴巴（中国）有限公司 媒体信息的传输方法、计算设备及存储介质
CN114697633A (zh) * 2022-03-29 2022-07-01 联想(北京)有限公司 视频传输方法、装置、设备及存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115359220B (zh) * 2022-08-16 2024-05-07 支付宝(杭州)信息技术有限公司 虚拟世界的虚拟形象更新方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110164832A1 (en) * 2010-01-04 2011-07-07 Samsung Electronics Co., Ltd. Image-based localization feature point registration apparatus, method and computer-readable medium
CN103679204A (zh) * 2013-12-23 2014-03-26 上海安琪艾可网络科技有限公司 基于智能移动设备平台的图像识别与创作应用系统及方法
CN103959220A (zh) * 2012-11-14 2014-07-30 华为技术有限公司 一种实现增强现实的方法及用户设备
CN105975232A (zh) * 2016-05-06 2016-09-28 深圳市吾悦科技有限公司 增强现实实时交互系统及方法
CN107111996A (zh) * 2014-11-11 2017-08-29 本特图像实验室有限责任公司 实时共享的增强现实体验

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101667715B1 (ko) * 2010-06-08 2016-10-19 엘지전자 주식회사 증강현실을 이용한 경로 안내 방법 및 이를 이용하는 이동 단말기
KR101299910B1 (ko) * 2010-08-18 2013-08-23 주식회사 팬택 증강 현실 서비스의 공유 방법 및 그를 위한 사용자 단말기와 원격자 단말기
US20150040074A1 (en) * 2011-08-18 2015-02-05 Layar B.V. Methods and systems for enabling creation of augmented reality content
US9066200B1 (en) * 2012-05-10 2015-06-23 Longsand Limited User-generated content in a virtual reality environment
CN103577788A (zh) * 2012-07-19 2014-02-12 华为终端有限公司 增强现实的实现方法和装置
US9607438B2 (en) * 2012-10-22 2017-03-28 Open Text Corporation Collaborative augmented reality
CN104596523B (zh) * 2014-06-05 2019-05-07 腾讯科技（深圳）有限公司 一种街景目的地引导方法和设备
CN107395671A (zh) * 2017-06-12 2017-11-24 深圳增强现实技术有限公司 远程协助方法、系统及增强现实终端
CN107592575B (zh) * 2017-09-08 2021-01-26 广州方硅信息技术有限公司 一种直播方法、装置、系统及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110164832A1 (en) * 2010-01-04 2011-07-07 Samsung Electronics Co., Ltd. Image-based localization feature point registration apparatus, method and computer-readable medium
CN103959220A (zh) * 2012-11-14 2014-07-30 华为技术有限公司 一种实现增强现实的方法及用户设备
CN103679204A (zh) * 2013-12-23 2014-03-26 上海安琪艾可网络科技有限公司 基于智能移动设备平台的图像识别与创作应用系统及方法
CN107111996A (zh) * 2014-11-11 2017-08-29 本特图像实验室有限责任公司 实时共享的增强现实体验
CN105975232A (zh) * 2016-05-06 2016-09-28 深圳市吾悦科技有限公司 增强现实实时交互系统及方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111638781A (zh) * 2020-05-15 2020-09-08 广东小天才科技有限公司 基于ar的发音引导方法、装置、电子设备及存储介质
CN111638781B (zh) * 2020-05-15 2024-03-19 广东小天才科技有限公司 基于ar的发音引导方法、装置、电子设备及存储介质
CN113724398A (zh) * 2021-09-01 2021-11-30 北京百度网讯科技有限公司 增强现实方法、装置、设备以及存储介质
CN113973224A (zh) * 2021-09-18 2022-01-25 阿里巴巴（中国）有限公司 媒体信息的传输方法、计算设备及存储介质
CN114697633A (zh) * 2022-03-29 2022-07-01 联想(北京)有限公司 视频传输方法、装置、设备及存储介质
CN114697633B (zh) * 2022-03-29 2023-09-19 联想(北京)有限公司 视频传输方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN110166787B (zh) 2022-11-29
US11917265B2 (en) 2024-02-27
US20200372687A1 (en) 2020-11-26
EP3745726A1 (en) 2020-12-02
WO2020007157A1 (zh) 2020-01-09
EP3745726A4 (en) 2021-03-10

Similar Documents

Publication Publication Date Title
CN110166787A (zh) 增强现实数据传播方法、系统和存储介质
CN111970535B (zh) 虚拟直播方法、装置、系统及存储介质
CN110176077B (zh) 增强现实拍照的方法、装置及计算机存储介质
CN108322832B (zh) 评论方法、装置、及电子设备
JP3773670B2 (ja) 情報呈示方法および情報呈示装置および記録媒体
CN110602517B (zh) 基于虚拟环境的直播方法、装置和系统
JP4973622B2 (ja) 画像合成装置および画像合成処理プログラム
WO2019109828A1 (zh) Ar业务处理方法、装置、服务器、移动终端及存储介质
US20150117831A1 (en) Information processing device, information processing method, and program
CN111080759A (zh) 一种分镜效果的实现方法、装置及相关产品
CN112933606A (zh) 游戏场景转换方法及装置、存储介质、计算机设备
CN116437137B (zh) 直播处理方法、装置、电子设备及存储介质
CN111744180A (zh) 加载虚拟游戏的方法及装置、存储介质、电子装置
CN112148125A (zh) 一种ar交互状态控制的方法、装置、设备及存储介质
CN111625100A (zh) 图画内容的呈现方法、装置、计算机设备及存储介质
CN113760161A (zh) 数据生成、图像处理方法、装置、设备及存储介质
CN114332417A (zh) 一种多人场景交互的方法、设备、存储介质及程序产品
CN112308977A (zh) 视频处理方法、视频处理装置和存储介质
JP5616622B2 (ja) 拡張現実感提供方法及び拡張現実感提供システム
CN113727039B (zh) 视频生成方法、装置、电子设备及存储介质
CN110545363B (zh) 实现多终端联网同步的方法、系统和云端服务器
CN107979754A (zh) 一种基于摄像头应用的测试方法和装置
US20090060385A1 (en) Composite image generating apparatus, composite image generating method, and storage medium
WO2021217385A1 (zh) 一种视频处理方法和装置
JP6609078B1 (ja) コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant