CN111225231B - 虚拟礼物的显示方法、装置、设备及存储介质 - Google Patents

虚拟礼物的显示方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111225231B
CN111225231B CN202010117848.8A CN202010117848A CN111225231B CN 111225231 B CN111225231 B CN 111225231B CN 202010117848 A CN202010117848 A CN 202010117848A CN 111225231 B CN111225231 B CN 111225231B
Authority
CN
China
Prior art keywords
panoramic image
scene
virtual gift
client
gift
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010117848.8A
Other languages
English (en)
Other versions
CN111225231A (zh
Inventor
许英俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Cubesili Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Cubesili Information Technology Co Ltd filed Critical Guangzhou Cubesili Information Technology Co Ltd
Priority to CN202010117848.8A priority Critical patent/CN111225231B/zh
Publication of CN111225231A publication Critical patent/CN111225231A/zh
Application granted granted Critical
Publication of CN111225231B publication Critical patent/CN111225231B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4784—Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Social Psychology (AREA)
  • Computer Graphics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Architecture (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例提供了虚拟礼物的显示方法、装置、设备及存储介质，涉及视频技术领域，该方法通过接收客户端上传的一场景的图像数据生成全景图像；将全景图像下发至客户端进行渲染显示，以将主播视频融合到全景图像的设定区域；根据图像数据识别场景的场景类型，从虚拟礼物库中筛选出与场景类型相匹配的候选虚拟礼物下发至客户端；接收客户端反馈的用户选择的目标虚拟礼物，将目标虚拟礼物添加到主播视频，在全景图像中展示目标虚拟礼物的特效。本技术方案实现了观众亲临主播所在场景的视觉效果，根据场景推送虚拟礼物，使得虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。

Description

虚拟礼物的显示方法、装置、设备及存储介质
技术领域
本申请涉及直播技术领域，具体而言，本申请涉及一种虚拟礼物的显示方法、装置、设备及存储介质。
背景技术
传统的直播方式大多是室内直播，一般在房间里面进行，主播局限于直播房间，并通过直播房间内固定的直播设备进行直播，环境单一，活动区域小，影响了直播效果。现在户外直播吸引越来越多的用户参与，如生日派对、婚礼现场、车展和运动会等热闹人多的地方都是比较适合户外直播的，能有效提高用户的兴趣。
然而，现有的户外直播的送礼方式基本上基于传统的虚拟礼物栏，其虚拟礼物种类单一固定，无法满足用户根据户外直播场景的个性化送礼的需求。
发明内容
本申请的目的旨在至少解决上述技术缺陷之一，特别是虚拟礼物展示形式单一，无法满足个性化需求的问题。
第一方面，本申请实施例提供了一种虚拟礼物的显示方法，包括以下步骤：
接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像；
将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；
根据所述图像数据识别所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；
接收客户端反馈的用户选择的目标虚拟礼物，将所述目标虚拟礼物添加到所述主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
在一实施例中，所述接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像的步骤之前，还包括：
获取用户对预配置的三维模型的选择指令，根据所述选择指令向所述客户端下发所述三维模型对应的拍摄指示；
所述接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像的步骤包括：
接收所述客户端上传的一场景的多张照片的图像数据，其中，所述照片为用户根据所述拍摄指示拍摄得到；
根据所述三维模型对所述照片进行拼接，生成所述全景图像。
在一实施例中，所述根据所述图像数据生成全景图像的步骤包括：
对所述图像数据进行合法性校验；
若通过合法性校验，则根据所述三维模型对所述照片进行拼接，生成所述全景图像；否则，发出提示信息，以对不通过合法性校验的图像数据进行重新采集。
在一实施例中，所述将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示的步骤包括：
将所述全景图像下发至所述直播间连接的各个客户端，以在所述客户端的显示界面进行渲染；
在所述全景图像中选择设定区域，根据所述设定区域的3D坐标参数对主播视频的图像进行3D图像处理，融合到所述全景图像的设定区域内。
在一实施例中，所述根据所述图像数据识别所述场景的场景类型的步骤包括：
从所述图像数据中提取特征物信息；
将所述特征物信息与预存的各场景进行匹配计算，根据匹配结果确定所述场景的场景类型。
在一实施例中，所述从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端的步骤，包括：
从预配置的场景数据库中查询所述场景类型对应的场景标识；
遍历所述虚拟礼物库中各个虚拟礼物，筛选出与所述场景标识相对应的候选虚拟礼物，将所述候选虚拟礼物下发至所述客户端。
在一实施例中，所述根据所述图像数据生成全景图像的步骤之后，还包括：
对所述全景图像添加自定义标签，并保存在全景图像数据库中。
第二方面，本申请实施例还提供了一种虚拟礼物的显示方法，包括以下步骤：
获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像；
接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；
接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器根据所述图像数据识别所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；
将用户选择的目标虚拟礼物反馈至所述服务器以使得所述服务器将所述目标虚拟礼物添加到所述主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
第三方面，本申请实施例还提供了一种虚拟礼物的显示装置，包括：
全景图像生成模块，用于接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像；
全景图像下发模块，用于将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；
候选礼物下发模块，用于根据所述图像数据识别所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；
礼物特效展示模块，用于接收客户端反馈的用户选择的目标虚拟礼物，将所述目标虚拟礼物添加到所述主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
第四方面，本申请实施例还提供了一种虚拟礼物的显示装置，包括：
图像数据上传模块，用于获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像；
全景图像渲染模块，用于接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；
候选礼物接收模块，用于接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器根据所述图像数据识别所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；
目标礼物反馈模块，用于将用户选择的目标虚拟礼物反馈至所述服务器以使得所述服务器将所述目标虚拟礼物添加到所述主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
第五方面，本申请实施例还提供了一种虚拟礼物的显示设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如第一方面任一实施例所述的虚拟礼物的显示方法的步骤。
第六方面，本申请实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面任一实施例所述的虚拟礼物的显示方法的步骤。
上述实施例提供的虚拟礼物的显示方法、装置、设备及存储介质，通过接收客户端上传的一场景的图像数据生成全景图像；将全景图像下发至客户端进行渲染显示，以将主播视频融合到全景图像的设定区域；根据图像数据识别场景的场景类型，从虚拟礼物库中筛选出与场景类型相匹配的候选虚拟礼物下发至客户端；接收客户端反馈的用户选择的目标虚拟礼物，将目标虚拟礼物添加到主播视频，在全景图像中展示目标虚拟礼物的特效，实现了观众亲临主播所在场景的效果，根据场景推送虚拟礼物，使得虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。
本申请附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是一实施例提供的网络直播系统的框架示意图；
图2是一实施例提供的虚拟礼物的显示方法的流程图；
图3是一实施例提供的全景图像合成方法的流程图；
图4是一实施例提供的虚拟礼物的显示方法的另一流程图；
图5是一实施例提供的天空盒全景图像的虚拟礼物的显示效果图；
图6是一实施例提供的虚拟礼物的显示装置的结构示意图；
图7是一实施例提供的虚拟礼物的显示装置的另一结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
在对本申请实施例提供的方法进行介绍之前，首先对本申请实施例的应用场景进行介绍。本申请实施例提供的方法应用于网络直播系统中，请参考图1，图1是一实施例提供的网络直播系统的框架示意图，该系统框架可以包括服务端和客户端，客户端包括一个或多个主播客户端(即主播端，下同)10和多个观众客户端(即观众端，下同)20，位于服务端上的直播平台中可以包括多个虚拟直播间和服务器30等，其中，各主播端10和各观众端20分别与该服务器30之间通过有线网络或者无线网络建立通信连接。
通常而言，各个虚拟直播间对应播放不同的直播内容，主播通过主播客户端10进行直播，观众通过观众客户端20选择进入某一虚拟直播间观看主播进行直播。观众客户端20和主播客户端10可以通过安装在终端设备上的直播应用程序(Application，APP)进入直播平台。
其中，该主播客户端10和观众客户端20为终端设备，如智能手机、平板电脑、电子阅读器、台式电脑或笔记本电脑等，对此并不做限定。服务器30是用于为终端设备提供后台服务的后台服务器，可以用独立服务器或多个服务器组成的服务器集群来实现。在一实施例中，该服务器30可以为网络直播平台。
本申请实施例提供的虚拟礼物的显示方法适用于用户自定义拍摄一组图片，将这组图片进行拼接生成三维的全景图像，在全景图像中展示主播视频，以使得观众亲临全景图像所在场景以观看主播视频，以在该场景下对主播进行送礼，从而增强主播视频的表现力，促进主播和观众进行互动的效果。
图2是一实施例提供的虚拟礼物的显示方法的流程图，该虚拟礼物的显示方法可执行于虚拟礼物的显示设备，如服务器。具体的，该虚拟礼物的显示方法可以包括以下步骤：
S110、接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像。
在本实施例中，场景可以是用户当前所在场景，也可以是曾经所在场景，可以是生日会、婚礼和车展等。例如，主播用户即时拍摄当前所在场景的照片，将照片通过客户端上传到服务器，利用服务器将照片生成全景图像，还可以是观众用户拍摄将其所在场景的照片，将照片通过客户端上传到服务器，利用服务器将照片生成全景图像，以供主播用户选择和使用。
服务器接收客户端上传的该场景的图像数据，可以是多张图片，在一实施例中，可以是主播端实时采集上传的图像数据，也可以是主播端预先上传并保存在图像数据库中的图像数据，还可以是观众端采集并上传的图像数据。在实施例中，该图像数据可以是多张不同角度拍摄的图像。
为了使得图像数据满足全景图像的生成要求，在一实施例中，可以为该图像数据的采集设定的要求，如拍摄视角范围和清晰度等。
S120、将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示。
在服务器生成全景图像后，将全景图像下发至直播间连接的各个客户端，客户端可以包括观众客户端和主播客户端，以在客户端上渲染出全景图像。在实施例中，当用户点击或滑动客户端的屏幕或者转动客户端的角度，可以调整全景图像的展示区域以多角度查看全景图像。在全景图像的选择某一区域设定为展示区域，在该展示区域渲染出主播视频，以达到在全景图像中观看主播视频的效果。
为了更清楚的表达本方案，下面以全景图像为天空盒为例对本步骤进行说明。
对于天空盒，在本实施例中其可以是以立方体三维模型为基础构建的全景图像，天空盒具有六个面，分别为前面、后面、左面、右面、上面和下面，每个面为正方形。可选的，在实施例中，设定区域可以设定在天空盒的前面，以在天空盒的前面播放主播视频。
服务器获取客户端上传的“天空图像”为背景的图像数据，利用这些图像数据按照选定的预配置的立方体三维模型合成天空盒全景图像后，将天空盒下发至直播间连接的各个客户端，以使得客户端的显示界面上渲染出天空盒，将主播视频展示在天空盒的前面，以使得观众通过观众客户端观看主播视频时有一种在广阔的天空下观看主播视频的效果。
S130、根据所述图像数据识别所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端。
在一实施例中，全景图像的场景类型可以通过获取全景图像的标签确定，如用户采集图像数据时，对该图像数据贴上对应的标签，如生日会、车展、婚礼等。对应的，生成的全景图像的标签与图像数据的标签相同。
在另一实施例中，还也可以是通过对客户端获取到的图像数据进行识别来确定，比如识别图像中的关键物，如识别得到图像中存在“Birthday”“生日”等字样或者“蛋糕”等物体，则确定为生日会场景；若识别得到图像中存在“Wedding”“囍”等字样，则确定为婚礼场景等。
当服务器确定了全景图像对应的场景类型后，从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟礼物集合，并下发至各客户端。
可选的，在一实施例中，服务器识别出全景图像对应的场景类型后，向主播发送场景类型的确认信息，经主播确定服务器识别的场景类型正确，则服务器按照识别得到的场景类型从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟流集合，并下发至各观众客户端或观众客户端和主播客户端。若主播确定服务器识别得到的场景类型不正确，则接收主播端输入的新的场景类型，服务器按照新的场景类型从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟礼物集合，并下发至各观众客户端或观众客户端和主播客户端。
例如，服务器确定的场景类型为生日会，则将生日蛋糕、气球和鲜花等图形礼物，“生日快乐”“Happy Birthday”等文字礼物作为候选虚拟礼物推送至客户端，以通过客户端的三维虚拟礼物栏进行展示。
需要说明的是，在全景图像所在三维虚拟环境下，虚拟礼物栏同样呈现出三维效果。
S140、接收客户端反馈的用户选择的目标虚拟礼物，将所述目标虚拟礼物添加到所述主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
观众用户展开三维虚拟礼物栏，在三维虚拟礼物栏展示该候选虚拟礼物对应的礼物图标，用户选择某一个或多个三维虚拟礼物作为目标虚拟礼物，如将生日蛋糕图形礼物和“生日快乐”文字礼物这两个三维虚拟礼物作为目标虚拟礼物，将目标虚拟礼物发送至主播所在直播间，将生日蛋糕和“生日快乐”这两个三维虚拟礼物分别按照预定义的特效展示方式进行展示。
在一实施例中，可以将目标虚拟礼物合成到主播视频中，形成礼物视频帧，在客户端渲染出的全景图像的设定区域展示出合成有目标虚拟礼物的主播视频的礼物视频帧，以展示出目标虚拟礼物的特效。如，将生日蛋糕合成到主播视频画面中的设定位置，得到将生日蛋糕送到主播面前的特效画面，将该特效画面形成礼物视频帧合成到主播视频中，在播放在主播视频的同时播放在礼物视频帧。在本实施例中，“生日蛋糕”虚拟礼物和主播视频是相互融合生成视频帧图像进行展示。
在一实施例中，还可以将目标虚拟礼物添加到全景图像中，在全景图像中动态展示，如飞机在全景图像所对应的三维空间中飞翔等。
在另一实施例中，可以将目标虚拟礼物跟随主播视频所在的视频流发送至客户端，在客户端解析出目标虚拟礼物，以在全景图像中渲染出该目标虚拟礼物，并结合该主播视频画面，展示出目标虚拟礼物的特效。
如，在客户端的全景图像的设定区域展示主播视频的同时，识别出生日蛋糕在主播视频对应画面的位置，将该生日蛋糕添加到位置上，实现将生日蛋糕送到主播面前的特效。在本实施例中，生日蛋糕虚拟礼物和主播视频是相互独立展示的。
本实施例提供的虚拟礼物的显示方法，应用于服务器，通过接收客户端上传的一场景的图像数据，将图像数据生成全景图像；将全景图像下发至直播间的各个客户端进行渲染显示，以使得客户端将主播视频融合到全景图像的设定区域进行显示；根据图像数据识别场景的场景类型，从虚拟礼物库中筛选出与场景类型相匹配的候选虚拟礼物下发至所述客户端；接收客户端反馈的用户选择的目标虚拟礼物，将目标虚拟礼物添加到主播视频中，以使得客户端在全景图像中展示目标虚拟礼物的特效，实现了观众亲临主播所在场景的效果，根据场景推送虚拟礼物，使得虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。
为了使本申请的技术方案更为清晰，更为便于理解，下面对本技术方案中的多个步骤的具体的实现过程和方式加以详细的描述。
在一实施例中，步骤S110中的接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像之前，还包括：
S100、获取用户对预配置的三维模型的选择指令，根据所述选择指令向所述客户端下发所述三维模型对应的拍摄指示。
在实施例中，数据库预配置有多种不同的三维模型，如立方体三维模型、球体三维模型等立方空间模型。不同的三维模型，其对应的用于合成的图片的要求不同。
为了提高利用用户拍摄得到的照片生成全景图像的成功率，在实施例中，为不同的三维模型配置对应的拍摄指示。
当用户从多种预配置的三维模型中选择目标三维模型，触发对目标三维模型的选择指令，服务器接收该选择指令后向客户端发送该目标三维模型对应的拍摄指示，如拍摄角度、拍摄方向和拍摄数量等。
进一步的，图3是一实施例提供的全景图像合成方法的流程图，如图3所示，在一实施例中，步骤S110的接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像包括以下步骤：
S1101、接收所述客户端上传的一场景的多张照片的图像数据，其中，所述照片为用户根据所述拍摄指示拍摄得到。
通过客户端向用户展示拍摄指示，以引导用户将当前场景按照这些拍摄指示进行拍照，并把采集到的照片上传到服务器。该拍照姿势可以包括照片中物体的相对大小(即镜头的远近)、拍摄角度、拍摄时长、拍摄开始提示和拍摄停止提示等。
S1102、根据所述三维模型对所述照片进行拼接，生成所述全景图像。
获取该多张照片，经过比对，确定每张照片的重合区域，利用该重合区域，对照片进行拼接，以利用这些照片构建出全景图像。
需要说明的是，将图片进行拼接的技术可以采用现有技术来实现，本领域技术人员能够获知其具体的实现方式，在此不再详细赘述。
在另一实施例中，还可以是将从真实世界中拍摄的一组照片以一定方式映射到三维模型中，生成全景图像。
在一实施例中，步骤S110的根据所述图像数据生成全景图像可以包括：
S1103、判断所述图像数据是否通过合法性校验，若是，则执行步骤S1104，否则，执行步骤S1105。
在根据图像数据生成全景图像之前，可以对图像数据进行合法性校验，如：所拍摄得到的照片是否存在重合区域，其分辨率是否相同，图片是否清晰，是否定焦拍摄，照片格式是否符合要求等，还可以是图片内容是否安全合法等。
S1104、根据所述三维模型对所述照片进行拼接，生成所述全景图像。
若照片通过合法性校验，则利用这些照片按照预配置的三维模型进行处理，如拼接处理或映射处理，生成全景图像。可选的，在实施例中，还可以对照片进行缩放和裁剪处理，以使得照片符合全景图像的生成要求。
S1105、发出提示信息，以对不通过合法性校验的图像数据进行重新采集，返回步骤S1103。
若照片没有通过合法性校验，如所拍摄得到的照片是否存在重合区域，其分辨率是否相同，图片是否清晰，是否定焦拍摄，照片格式是否符合要求等，还可以是图片内容是否安全合法等的其中一个或多个不符合，则发出提示信息，以便于用户查看没有通过合法性校验的原因或所对应的照片，以提醒用户对不通过合法性校验的图像进行部分或全部重新采集。
在一实施例中，继续参考图3，在步骤S1104根据所述图像数据生成全景图像之后，还可以包括以下步骤：
S1106、将所述全景图像添加自定义标签，并保存在全景背景数据库中。
在本实施例中，自定义标签可以包括原创用户名称、下载所需成本以及所适用的场景等。
在生成全景图像后，原创用户可以选择为全景图像添加自定义标签，以设置所述全景图像对应的成本价值，即若其他用户下载或赠送该虚拟礼物所需要花费的成本，如100YB，其中YB是一种虚拟货币单位。将该全景图像保存在全景图像数据库中，以供其余用户进行下载和赠送，当有其他用户下载或赠送该全景图像，则通过该全景图像对应的自定义标签中的信息将对应的奖励发送至原创用户对应的账户上。
在一实施例中，步骤S120中的将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示，可以包括以下步骤：
S1201、将所述全景图像下发至所述直播间连接的各个客户端，以在所述客户端的显示界面进行渲染。
服务器生成全景图像后，将全景图像下发至进入该直播间的各个客户端，在客户端的显示界面上渲染出该全景图像。可选的，在客户端渲染出全景图像时，获取客户端内部陀螺仪的旋转角度，根据旋转角度在客户端的显示界面上渲染出全景图像对应的画面区域。
例如，当客户端A内部陀螺仪的旋转角度为90度，则在该客户端A的显示界面上渲染出来的是全景图像的M画面区域，当客户端A内部陀螺仪的旋转角度为150度，则在该客户端A的显示界面上渲染出来的是全景图像的N画面区域，以使得不同客户端渲染同一全景图像的不同画面区域。
在另一实施例中，还可以根据客户端的显示界面上的不同区域的选择操作，如点击或滑动动作，展示与该选择操作相对应的展示区域，如向左滑动，则向左转动全景图像，展示全景图像右侧的画面等；或点击全景图像的左侧，则向左移动全景图像，展示全景图像的左侧画面等。
S1202、在所述全景图像中选择设定区域，根据所述设定区域的3D坐标参数对主播视频的图像进行3D图像处理，融合到所述全景图像的设定区域内。
在实施例中，设定区域可以是固定的设定区域，在显示界面上不随陀螺仪的转动而变化，也可以是变化的设定区域，在显示界面上随陀螺仪的转动而变化。
例如，设定区域为固定在客户端显示界面的右上角的区域，则转动客户端以使得陀螺仪发生转动，全景图像在显示界面上的画面不断发生改变，但主播视频始终位置显示在显示界面的右上角。
又如，设定区域为设定在全景图像的某一面，当客户端启动陀螺仪并转动陀螺仪，主播视频区域始终固定在全景图像的固定坐标位置上，当全景图像转动角度超出客户端的主播视频区域，主播视频会消失在显示界面上。
获取设定区域的3D坐标参数，如设定区域的边缘轮廓的关键点的3D坐标、设定区域的大小和形状等，根据设定区域的3D坐标参数，将主播视频的图像做3D图像处理后，渲染到全景图像的设定区域内，呈现出融合的效果，如，当放大设定区域时，设定区域内的主播视频也随之等比例放大；当缩小设定区域时，设定区域内的主播视频也随之等比例缩小。若设定区域的形状改变，如发生倾斜，设定区域内的主播视频也随之发生倾斜。
在步骤S130的根据所述图像数据识别所述场景的场景类型，可以包括以下步骤：
S1301、从所述图像数据中提取特征物信息。
可选的，可以通过照片拼接后得到的全景图像进行图像识别，提取出全景图像中的特征物，识别出特征物的特征物信息。在另一实施例中，还可以通过对用于拼接的某一照片或多张照片直接进行图像识别，提取出照片中的特征物，得到该特征物的特征物信息，其中，特征物可以是文字或物体，如生日会上的字体“Happy Birthday”或“生日快乐”，也可以是蛋糕等物体。其中，特征物信息可以是特征物的颜色、形状、大小和轮廓等。
S1302、将所述特征物信息与预存的各场景进行匹配计算，根据匹配结果确定所述场景的场景类型。
对于具有强烈场景性的特征物信息，如文字内容、场景出现的物体等，其与该设定场景的匹配度高，如根据特征物信息识别出“生日快乐”的文字或“生日蛋糕”的物体，则该全景图像与“生日会”这一设定场景的匹配度高。对应一些具有较弱场景性的特征物信息，如气球和鲜花等，其与设定的场景的匹配度较低，需要多种特征物信息综合考虑，做不同的特征物信息做匹配计算。
可选的，根据特征物信息可以初步确定该特征物的种类，根据设定场景的具体类型为不同的特征物设定不同的匹配系数。例如，特征物“生日”“Happy Birthday”等文字对于生日会的场景类型的匹配度为P(S1)＝1；特征物“鲜花”等物体对于生日会的场景类型的匹配度为P(S2)＝0.2等。又如，特征物“快乐”等文字对于婚礼的场景类型的匹配度为P(M1)＝0.2；特征物“鲜花”等物体对于婚礼的场景类型的匹配度为P(M2)＝0.2等。
可选的，可以分别计算在各种场景类型下，对识别出来的各个特征物的匹配度进行计算，并对各匹配度进行累加，从而得到在该场景类型下匹配度总值。如在生日会的场景类型下，将各特征物的匹配度进行累加计算得到P(s)＝P(S1)+P(S2)＝1+0.2+……；若在婚礼的场景类型下，将各特征物的匹配度进行累加计算得到P(m)＝P(M1)+P(M2)＝0.2+0.2+……；若得到生日会的匹配度总值P(s)大于婚礼的匹配度总值P(m)，根据该匹配度总值的这一匹配结果，确定全景图像的场景类型为生日会。
在实施例中，步骤S130中的从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端，可以包括以下步骤：
S1303、从预配置的场景数据库中查询所述场景类型对应的场景标识。
在实施例中，直播系统的数据库中预配置有不同场景类型对应的场景标识，如生日会的场景类型的场景标识A01，婚礼的场景类型的场景标识为B02，车展的场景类型的场景标识为C03等。
确定了全景图像的场景类型后，从预配置的数据库中查询该场景类型对应的场景标识，如确定场景类型为生日会，则查询出当前全景图像的场景标识为A01。
S1304、遍历所述虚拟礼物库中各个虚拟礼物，筛选出与所述场景标识相对应的候选虚拟礼物，将所述候选虚拟礼物下发至所述客户端。
虚拟礼物库中的虚拟礼物带有一个或多个场景类型相对应的礼物标识，该礼物标识可以与场景标识相同，也可以与场景标识不同，当礼物标识与场景标识不同时，该礼物标识与场景标识存在映射关系，也即通过该礼物标识可以查询得到对应的唯一的场景标识。
根据场景类型的场景标识，遍历虚拟礼物库中的各个虚拟礼物，将各个虚拟礼物的礼物标识与该场景标识做比较，筛选出与该场景标识相符合的一个或多个候选虚拟礼物，将该一个或多个候选虚拟礼物生成虚拟礼物集合。
确定场景类型的场景标识为A01，而与场景标识A01相对应的礼物标识为M001，遍历虚拟礼物库中的各个虚拟礼物，从中筛选出礼物标识为M001的虚拟礼物，如生日蛋糕、鲜花、气球和爱心等虚拟礼物的礼物标识均为M001，将生日蛋糕、鲜花、气球和爱心等虚拟礼物作为候选虚拟礼物，生成虚拟礼物集合，并下发至客户端，以按照客户端的虚拟礼物栏的模板进行排布并展示。
结合下面例子，对本技术方案可以为：主播在户外举行生日派对，主播选择“天空盒”三维模型，服务器下发“天空盒”三维模型对应的图像数据采集指示，主播按照该图像数据采集指示进行拍照，将得到的照片上传到服务器，以通过服务器将这些照片按照选择的“天空盒”三维模型进行合成，生成以主播所在生日派对环境下的全景图像。将该全景图像下发至与直播间连接的各个客户端，并将主播视频展示在全景图像的设定区域，以使得用户置身于该全景图像中产生亲临主播生日派对的感觉。为了让观众能够积极向主播送礼，服务器根据全景图像的“生日会”场景类型，从虚拟礼物库中选择与“生日会”相关的候选虚拟礼物，生成虚拟礼物集合并下发至客户端，以使得观众能够从适合“生日会”场景的更多虚拟礼物中选择出合适的目标虚拟礼物，使得目标虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。
图4是一实施例提供的虚拟礼物的显示方法的另一流程图，该虚拟礼物的显示方法执行于客户端，本实施例以观众客户端为例进行说明。
具体的，该虚拟礼物的显示方法包括以下步骤：
S210、获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像。
在本实施例中，场景可以是用户当前所在场景，也可以是曾经所在场景，可以是生日会、婚礼和车展等。用户可以是主播用户，还可以是观众用户。在一实施例中，可以是主播端实时采集上传的图像数据，也可以是主播端预先上传并保存在图像数据库中的图像数据，还可以是观众端采集并上传的图像数据。在实施例中，该图像数据可以是多张不同角度拍摄的图像。为了使得图像数据满足全景图像的生成要求，在一实施例中，可以为该图像数据的采集设定的要求，如拍摄视角范围和清晰度等。
S220、接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示。
在服务器生成全景图像后，将全景图像下发至直播间连接的各个客户端，客户端可以包括观众客户端和主播客户端，以在客户端上渲染出全景图像，在实施例中，当用户手动滑动客户端的屏幕或者转动客户端的角度，可以调整全景图像的展示区域以多角度查看全景图像。在全景图像的某一区域划定为展示区域，在该展示区域渲染出主播视频，以达到在全景图像中观看主播视频的效果。
图5是一实施例提供的天空盒全景图像的虚拟礼物的显示效果图，下面结合图5，以全景图像为天空盒为例进行说明。
如图5所示，对于天空盒，在本实施例中其可以是以立方体三维模型为基础构建的全景图像，天空盒40具有六个面，分别为前面、后面、左面、右面、上面和下面，每个面为正方形。可选的，在实施例中，设定区域可以设定在天空盒40的前面，在设定区域播放主播视频。客户端按照天空盒的图像要求采集前面、后面、左面、右面、上面和下面等六个面的图像数据，上传到服务器，服务器获取客户端上传的“天空盒”背景的图像数据，利用这些图像数据按照选定的预配置的三维模型合成天空盒全景图像后，将天空盒下发至直播间连接的各个客户端，以使得客户端的显示界面上渲染出天空盒40，将主播视频(未示出)展示在天空盒40的某一面上，如前面，以使得观众通过观众客户端观看主播视频时有一种在天空盒对应的图像背景下观看主播视频的效果。
S230、接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器根据所述图像数据识别所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到。
在一实施例中，全景图像的场景类型可以通过获取全景图像的标签确定，如用户采集图像数据时，对该图像数据贴上对应的标签，如生日会、车展、婚礼等，对应的，生成的全景图像的标签与图像数据的标签相同。
在另一实施例中，还也可以是通过对客户端获取到的图像数据进行识别来确定，比如识别图像中的关键物，如识别得到图像中存在“Birthday”“生日”等字样或者“蛋糕”等物体，则确定为生日会场景；若识别得到图像中存在“Wedding”“囍”等字样，则确定为婚礼场景等。
当服务器确定了全景图像对应的场景类型后，从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟礼物集合，并下发至各客户端。
可选的，在一实施例中，服务器识别出全景图像对应的场景类型后，向主播发送场景类型的确认信息，经主播确定服务器识别的场景类型正确，则服务器按照识别得到的场景类型从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟流集合，并下发至各观众客户端或观众客户端和主播客户端。若主播确定服务器识别得到的场景类型不正确，则接收主播端输入的新的场景类型，服务器按照新的场景类型从虚拟礼物数据库中提取出与该场景类型相匹配的候选虚拟礼物，生成虚拟礼物集合，并下发至各观众客户端或观众客户端和主播客户端。
例如，服务器确定的场景类型为生日会，则将生日蛋糕、气球和鲜花等图形礼物，“生日快乐”“Happy Birthday”等文字礼物推送至客户端，客户端接收到虚拟礼物集合后，在客户端对应直播间的三维虚拟礼物栏进行展示。需要说明的是，在全景图像所在三维虚拟环境下，虚拟礼物栏同样呈现出三维效果。
S240、将用户选择的目标虚拟礼物反馈至所述服务器以使得所述服务器将所述目标虚拟礼物添加到所述主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
观众用户展开三维虚拟礼物栏，在三维虚拟礼物栏展示该候选虚拟礼物对应的礼物图标，用户选择某一个或多个三维虚拟礼物作为目标虚拟礼物，如将生日蛋糕图形礼物和“生日快乐”文字礼物这两个三维虚拟礼物作为目标虚拟礼物，将目标虚拟礼物反馈至所述服务器，以将生日蛋糕和“生日快乐”这两个三维虚拟礼物分别按照预定义的特效展示方式进行展示。
在一实施例中，可以将目标虚拟礼物合成到主播视频中，形成礼物视频帧，在客户端渲染出的全景图像的设定区域展示出合成有目标虚拟礼物的主播视频的礼物视频帧，以展示出目标虚拟礼物的特效。如，将生日蛋糕合成到主播视频画面中的设定位置，得到将生日蛋糕送到主播面前的特效画面，将该特效画面形成礼物视频帧合成到主播视频中，在播放在主播视频的同时播放在礼物视频帧。在本实施例中，“生日蛋糕”虚拟礼物和主播视频是相互融合生成视频帧图像进行展示。
在另一实施例中，可以将目标虚拟礼物跟随主播视频所在的视频流发送至客户端，在客户端解析出目标虚拟礼物，以在全景图像中渲染出该目标虚拟礼物，并结合该主播视频画面，展示出目标虚拟礼物的特效。
如，在客户端的全景图像的设定区域展示主播视频的同时，识别出生日蛋糕在主播视频对应画面的位置，将该生日蛋糕添加到位置上，实现将生日蛋糕送到主播面前的特效。在本实施例中，生日蛋糕虚拟礼物和主播视频是相互独立展示的。
在一实施例中，还可以将目标虚拟礼物添加到全景图像中，在全景图像中动态展示，如三维的虚拟飞机在全景图像所对应的三维空间中飞翔等。继续参考图5，如图5所示，三维的虚拟飞机50在三维的天空盒40中进行动画展示，增强用户对虚拟飞机50的动画展示效果。
本实施例提供的虚拟礼物的显示方法，应用于客户端，通过获取用户拍摄的一场景的图像数据，将图像数据上传至服务器生成全景图像；接收服务器下发至直播间的全景图像并进行渲染显示，将主播视频融合到全景图像的设定区域进行显示；接收服务器下发的候选虚拟礼物；其中，候选虚拟礼物是服务器根据图像数据识别场景的场景类型，且从虚拟礼物库中筛选出与场景类型相匹配得到；将用户选择的目标虚拟礼物反馈至服务器以使得服务器将目标虚拟礼物添加到主播视频中；在全景图像中展示目标虚拟礼物的特效，实现了观众亲临主播所在场景的效果，根据场景推送虚拟礼物，使得虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。
下面对虚拟礼物的显示装置的相关实施例进行详细阐述。
图6是一实施例提供的虚拟礼物的显示装置的结构示意图，本实施例中的虚拟礼物的显示装置应用于虚拟礼物的显示设备，如服务器。
具体的，如图6所示，该虚拟礼物的显示装置100可以包括全景图像生成模块110、全景图像下发模块120、候选礼物下发模块130以及礼物特效展示模块140。
其中，全景图像生成模块110，用于接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像；全景图像下发模块120，用于将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；候选礼物下发模块130，用于根据所述图像数据识别所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；礼物特效展示模块140，用于接收客户端反馈的用户选择的目标虚拟礼物，将所述目标虚拟礼物添加到所述主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
本实施例提供的虚拟礼物的显示装置，实现了观众亲临主播所在场景的效果，根据场景推送虚拟礼物，使得虚拟礼物的内容和特效更加符合当前主播视频所在场景，增强了虚拟礼物效果的表现力，有利于提高观众向主播送礼的积极性。
在一实施例中，虚拟礼物的显示装置100还包括：拍摄指示下发模块；其中，拍摄指示下发模块，用于获取用户对预配置的三维模型的选择指令，根据所述选择指令向所述客户端下发所述三维模型对应的拍摄指示；
在一实施例中，全景图像生成模块110包括：图像数据接收单元和全景图像生成单元；其中，图像数据接收单元用于接收所述客户端上传的一场景的多张照片的图像数据，其中，所述照片为用户根据所述拍摄指示拍摄得到；全景图像生成单元，用于根据所述三维模型对所述照片进行拼接，生成所述全景图像。
在一实施例中，全景图像生成模块110包括：合法性校验单元；其中，合法性校验单元，用于对所述图像数据进行合法性校验；若通过合法性校验，则根据所述三维模型对所述照片进行拼接，生成所述全景图像；否则，发出提示信息，以对不通过合法性校验的图像数据进行重新采集。
在一实施例中，全景图像下发模块120包括：全景图像下发单元和主播视频展示单元；其中，全景图像下发单元，用于将所述全景图像下发至所述直播间连接的各个客户端，以在所述客户端的显示界面进行渲染；主播视频展示单元，用于在所述全景图像中选择设定区域，根据所述设定区域的3D坐标参数对主播视频的图像进行3D图像处理，融合到所述全景图像的设定区域内。
在一实施例中，候选礼物下发模块130包括特征物信息提取单元和场景类型确定单元；其中，特征物信息提取单元用于从所述图像数据中提取特征物信息；场景类型确定单元，用于将所述特征物信息与预存的各场景进行匹配计算，根据匹配结果确定所述场景的场景类型。
在一实施例中，候选礼物下发模块130包括场景标识查询单元和候选礼物筛选单元；其中，场景标识查询单元用于从预配置的场景数据库中查询所述场景类型对应的场景标识；候选礼物筛选单元，用于遍历所述虚拟礼物库中各个虚拟礼物，筛选出与所述场景标识相对应的候选虚拟礼物，将所述候选虚拟礼物下发至所述客户端。
在实施例中，全景图像生成模块110还包括标签添加单元；其中，标签添加单元，用于将所述全景图像添加自定义标签，并保存在全景图像数据库中。
图7是一实施例提供的虚拟礼物的显示装置的另一结构示意图，本实施例中的虚拟礼物的显示装置应用于虚拟礼物的显示设备，如客户端。
具体的，如图7所示，该虚拟礼物的显示装置200可以包括图像数据上传模块210、全景图像渲染模块220、候选礼物接收模块230以及目标礼物反馈模块240。
其中，图像数据上传模块210，用于获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像；全景图像渲染模块220，用于接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；候选礼物接收模块230，用于接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器根据所述图像数据识别所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；目标礼物反馈模块240，用于将用户选择的目标虚拟礼物反馈至所述服务器以使得所述服务器将所述目标虚拟礼物添加到所述主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。。
上述提供的虚拟礼物的显示装置执行上述任意实施例提供的虚拟礼物的显示方法时，具备相应的功能和有益效果。
本申请实施例还提供一种虚拟礼物的显示设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如上述任一实施例中的虚拟礼物的显示方法。
可选的，该虚拟礼物的显示设备可以为移动终端、平板电脑、计算机电脑或服务器等。上述提供的虚拟礼物的显示设备执行上述任一实施例提供的虚拟礼物的显示方法时，具有相应的功能和有益效果。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种虚拟礼物的显示方法，可以包括：
接收客户端上传的一场景的图像数据，根据所述图像数据生成全景图像；
将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；
根据所述图像数据识别所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；
接收客户端反馈的用户选择的目标虚拟礼物，将所述目标虚拟礼物添加到所述主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
在一实施例中，所述计算机可执行指令在由计算机处理器执行时用于执行一种虚拟礼物的显示方法，还可以包括：
获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像；
接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；
接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器根据所述图像数据识别所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；
将用户选择的目标虚拟礼物反馈至所述服务器以使得所述服务器将所述目标虚拟礼物添加到所述主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的虚拟礼物的显示方法操作，还可以执行本申请任意实施例所提供的虚拟礼物的显示方法中的相关操作，且具备相应的功能和有益效果。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本申请可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请任意实施例所述的虚拟礼物的显示方法。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种虚拟礼物的显示方法，其特征在于，包括以下步骤：
获取对预配置的三维模型的选择指令，根据所述选择指令向客户端下发所述三维模型对应的拍摄指示；
通过客户端展示拍摄指示，根据所述拍摄指示通过所述客户端对直播间的当前场景进行拍照，并上传的一场景的多张照片的图像数据，根据所述三维模型对所述照片进行拼接，生成直播间三维的全景图像；其中，所述照片为用户根据所述拍摄指示拍摄得到的；所述拍摄指示包括照片中物体的相对大小、拍摄角度、拍摄时长、拍摄开始提示和拍摄停止提示中的至少一项；
将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；
从所述图像数据中提取若干个特征物信息，根据所述特征物信息初步确定至少两个设定场景，根据各个设定场景的具体类型为不同的特征物信息设定不同的匹配系数，分别对各种场景类型下的各个特征物的匹配系数进行累加计算，将匹配度最高的场景类型确定所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；
接收客户端响应于选择操作反馈的目标虚拟礼物，识别出所述目标虚拟礼物在所述主播视频中对应画面的位置信息，根据该位置信息将所述目标虚拟礼物添加到融合至所述全景图像的设定区域的主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
2.根据权利要求1所述的虚拟礼物的显示方法，其特征在于，所述根据所述图像数据生成全景图像的步骤包括：
对所述图像数据进行合法性校验；
若通过合法性校验，则根据所述三维模型对所述照片进行拼接，生成所述全景图像；否则，发出提示信息，以对不通过合法性校验的图像数据进行重新采集。
3.根据权利要求1所述的虚拟礼物的显示方法，其特征在于，所述将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示的步骤包括：
将所述全景图像下发至所述直播间连接的各个客户端，以在所述客户端的显示界面进行渲染；
在所述全景图像中选择设定区域，根据所述设定区域的3D坐标参数对主播视频的图像进行3D图像处理，融合到所述全景图像的设定区域内。
4.根据权利要求1所述的虚拟礼物的显示方法，其特征在于，所述从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端的步骤，包括：
从预配置的场景数据库中查询所述场景类型对应的场景标识；
遍历所述虚拟礼物库中各个虚拟礼物，筛选出与所述场景标识相对应的候选虚拟礼物，将所述候选虚拟礼物下发至所述客户端。
5.根据权利要求2所述的虚拟礼物的显示方法，其特征在于，所述根据所述图像数据生成全景图像的步骤之后，还包括：
对所述全景图像添加自定义标签，并保存在全景图像数据库中。
6.一种虚拟礼物的显示方法，其特征在于，包括以下步骤：
接收服务器根据对预配置的三维模型的选择指令所下发的所述三维模型对应的拍摄指示，获取用户根据所述拍摄指示，通过客户端对直播间的当前场景进行拍照并上传的一场景的多张照片的图像数据，根据所述三维模型对所述照片进行拼接，生成直播间三维的全景图像；其中，所述照片为根据所述拍摄指示拍摄得到的；所述拍摄指示包括照片中物体的相对大小、拍摄角度、拍摄时长、拍摄开始提示和拍摄停止提示中的至少一项；
获取用户拍摄的一场景的图像数据，将所述图像数据上传至服务器生成全景图像；
接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；
接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器从所述图像数据中提取若干个特征物信息，根据所述特征物信息初步确定至少两个设定场景，根据各个设定场景的具体类型为不同的特征物信息设定不同的匹配系数，分别对各种场景类型下的各个特征物的匹配系数进行累加计算，将匹配度最高的场景类型确定所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；
将响应于选择操作的目标虚拟礼物反馈至所述服务器，以使得所述服务器识别出所述目标虚拟礼物在所述主播视频中对应画面的位置信息，根据该位置信息将所述目标虚拟礼物添加到融合至所述全景图像的设定区域的主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
7.一种虚拟礼物的显示装置，其特征在于，包括：
全景图像生成模块，用于获取对预配置的三维模型的选择指令，根据所述选择指令向客户端下发所述三维模型对应的拍摄指示；通过客户端展示拍摄指示，根据所述拍摄指示通过所述客户端对直播间的当前场景进行拍照，并上传的一场景的多张照片的图像数据，根据所述三维模型对所述照片进行拼接，生成直播间三维的全景图像；其中，所述照片为用户根据所述拍摄指示拍摄得到的；所述拍摄指示包括照片中物体的相对大小、拍摄角度、拍摄时长、拍摄开始提示和拍摄停止提示中的至少一项；
全景图像下发模块，用于将所述全景图像下发至直播间的各个客户端进行渲染显示，以使得所述客户端将主播视频融合到所述全景图像的设定区域进行显示；
候选礼物下发模块，用于从所述图像数据中提取若干个特征物信息，根据所述特征物信息初步确定至少两个设定场景，根据各个设定场景的具体类型为不同的特征物信息设定不同的匹配系数，分别对各种场景类型下的各个特征物的匹配系数进行累加计算，将匹配度最高的场景类型确定所述场景的场景类型，从虚拟礼物库中筛选出与所述场景类型相匹配的候选虚拟礼物下发至所述客户端；
礼物特效展示模块，用于接收客户端响应于选择操作反馈的目标虚拟礼物，识别出所述目标虚拟礼物在所述主播视频中对应画面的位置信息，根据该位置信息将所述目标虚拟礼物添加到融合至所述全景图像的设定区域的主播视频中，以使得所述客户端在所述全景图像中展示所述目标虚拟礼物的特效。
8.一种虚拟礼物的显示装置，其特征在于，包括：
图像数据上传模块，用于接收服务器根据对预配置的三维模型的选择指令所下发的所述三维模型对应的拍摄指示，获取用户根据所述拍摄指示，通过客户端对直播间的当前场景进行拍照并上传的一场景的多张照片的图像数据，根据所述三维模型对所述照片进行拼接，生成直播间三维的全景图像；其中，所述照片为用户根据所述拍摄指示拍摄得到的；所述拍摄指示包括照片中物体的相对大小、拍摄角度、拍摄时长、拍摄开始提示和拍摄停止提示中的至少一项；
全景图像渲染模块，用于接收所述服务器下发至直播间的所述全景图像并进行渲染显示，将主播视频融合到所述全景图像的设定区域进行显示；
候选礼物接收模块，用于接收服务器下发的候选虚拟礼物；其中，所述候选虚拟礼物是所述服务器从所述图像数据中提取若干个特征物信息，根据所述特征物信息初步确定至少两个设定场景，根据各个设定场景的具体类型为不同的特征物信息设定不同的匹配系数，分别对各种场景类型下的各个特征物的匹配系数进行累加计算，将匹配度最高的场景类型确定所述场景的场景类型，且从虚拟礼物库中筛选出与所述场景类型相匹配得到；
目标礼物反馈模块，用于将响应于选择操作的目标虚拟礼物反馈至所述服务器，以使得所述服务器识别出所述目标虚拟礼物在所述主播视频中对应画面的位置信息，根据该位置信息将所述目标虚拟礼物添加到融合至所述全景图像的设定区域的主播视频中；在所述全景图像中展示所述目标虚拟礼物的特效。
9.一种虚拟礼物的显示设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至6任一项所述的虚拟礼物的显示方法的步骤。
10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1至6任一项所述的虚拟礼物的显示方法的步骤。
CN202010117848.8A 2020-02-25 2020-02-25 虚拟礼物的显示方法、装置、设备及存储介质 Active CN111225231B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010117848.8A CN111225231B (zh) 2020-02-25 2020-02-25 虚拟礼物的显示方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010117848.8A CN111225231B (zh) 2020-02-25 2020-02-25 虚拟礼物的显示方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111225231A CN111225231A (zh) 2020-06-02
CN111225231B true CN111225231B (zh) 2022-11-22

Family

ID=70829771

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010117848.8A Active CN111225231B (zh) 2020-02-25 2020-02-25 虚拟礼物的显示方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111225231B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112351287B (zh) * 2020-09-30 2022-10-14 深圳市为汉科技有限公司 一种多媒体数据处理方法、装置、电子设备及计算机可读存储介质
CN115037988B (zh) * 2021-03-05 2024-05-14 北京字节跳动网络技术有限公司 页面的显示方法、装置及设备
CN113064531B (zh) * 2021-04-25 2022-06-03 腾讯科技（深圳）有限公司 虚拟资源交互方法和装置、存储介质及电子设备
CN113810742A (zh) * 2021-08-25 2021-12-17 北京百度网讯科技有限公司 一种虚拟礼物的处理方法、装置、电子设备及存储介质
CN114241132B (zh) * 2021-12-16 2023-07-21 北京字跳网络技术有限公司 场景内容展示控制方法、装置、计算机设备及存储介质
CN115225923B (zh) * 2022-06-09 2024-03-22 广州博冠信息科技有限公司 礼物特效的渲染方法、装置、电子设备和直播服务器
CN115134627A (zh) * 2022-07-01 2022-09-30 广州博冠信息科技有限公司 直播间信息处理方法及装置、可读存储介质、电子设备
CN115225949A (zh) * 2022-07-11 2022-10-21 广州博冠信息科技有限公司 直播互动方法及装置、计算机存储介质、电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003333548A (ja) * 2002-05-15 2003-11-21 Nippon Telegr & Teleph Corp <Ntt> ストリームメディア配信方法及び装置並びにソフトウェア及び記録媒体
WO2016078189A1 (zh) * 2014-11-21 2016-05-26 广州华多网络科技有限公司 一种基于视频直播的互动方法及相关设备、系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895693A (zh) * 2010-06-07 2010-11-24 北京高森明晨信息科技有限公司 生成全景图像的方法及装置
CN102420898A (zh) * 2011-09-27 2012-04-18 惠州Tcl移动通信有限公司 一种基于手机的全景照相实现方法及手机
CN106170094B (zh) * 2016-09-07 2020-07-28 阿里巴巴（中国）有限公司 全景视频的直播方法及装置
CN106534963A (zh) * 2016-11-24 2017-03-22 北京小米移动软件有限公司 直播处理方法、装置及终端
CN106683201A (zh) * 2016-12-23 2017-05-17 深圳市豆娱科技有限公司 一种基于三维虚拟现实的场景编辑方法和装置
CN106791682A (zh) * 2016-12-31 2017-05-31 四川九洲电器集团有限责任公司 一种获得场景图像的方法及设备
CN107911621B (zh) * 2017-12-28 2020-04-07 深圳市酷开网络科技有限公司 一种全景图像的拍摄方法、终端设备以及存储介质
CN108596195B (zh) * 2018-05-09 2022-08-19 福建亿榕信息技术有限公司 一种基于稀疏编码特征提取的场景识别方法
CN108650523B (zh) * 2018-05-22 2021-09-17 广州虎牙信息科技有限公司 直播间的显示及虚拟物品选取方法、服务器、终端和介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003333548A (ja) * 2002-05-15 2003-11-21 Nippon Telegr & Teleph Corp <Ntt> ストリームメディア配信方法及び装置並びにソフトウェア及び記録媒体
WO2016078189A1 (zh) * 2014-11-21 2016-05-26 广州华多网络科技有限公司 一种基于视频直播的互动方法及相关设备、系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
三维虚拟与实景视频的融合平台研究及设计;曹惠龙;《电脑知识与技术》;20090415(第11期);全文 *

Also Published As

Publication number Publication date
CN111225231A (zh) 2020-06-02

Similar Documents

Publication Publication Date Title
CN111225231B (zh) 虚拟礼物的显示方法、装置、设备及存储介质
CN106210861B (zh) 显示弹幕的方法及系统
US10313652B1 (en) Cubic or spherical mapped content for presentation of pre-rendered images viewed from a fixed point of view in HTML, javascript and/or XML for virtual reality applications
CN107820132B (zh) 直播互动方法、装置及系统
CN111526412A (zh) 全景直播方法、装置、设备及存储介质
CN111970532B (zh) 视频播放方法、装置及设备
US20090109240A1 (en) Method and System for Providing and Reconstructing a Photorealistic Three-Dimensional Environment
US11302038B2 (en) System and method for generating an augmented reality experience
CN111314730A (zh) 视频直播的虚拟资源寻找方法、装置、设备及存储介质
CN111586426B (zh) 全景直播的信息展示方法、装置、设备及存储介质
CN113646752B (zh) Vr直播发布系统、发布服务器、发布服务器的控制方法、发布服务器程序的计算机可读存储介质、以及vr原始照片数据的处理方法
CN111277890B (zh) 虚拟礼物的获取方法和三维全景直播间的生成方法
JP2019092186A (ja) 配信サーバ、配信プログラムおよび端末
CN114697703B (zh) 视频数据生成方法、装置、电子设备及存储介质
CN105094523A (zh) 一种3d动画的展现方法及装置
US20130251347A1 (en) System and method for portrayal of object or character target features in an at least partially computer-generated video
CN110958463A (zh) 虚拟礼物展示位置的检测、合成方法、装置和设备
CN113632498A (zh) 内容发布系统、内容发布方法、以及内容发布程序
EP3948796A1 (en) Method and apparatus for generating three dimensional images
JP2020101847A (ja) 画像ファイル生成装置及び画像ファイル生成方法、画像生成装置及び画像生成方法、画像生成システム、並びにプログラム
CN113570730A (zh) 视频数据采集方法、视频创作方法及相关产品
CN114286077A (zh) 一种虚拟现实设备及vr场景图像显示方法
CN112634339A (zh) 商品对象信息展示方法、装置及电子设备
CN111344744A (zh) 用于展示三维物体的方法以及相关计算机程序产品、数字存储介质和计算机系统
CN117241102B (zh) 一种基于真人模特商拍图生成商品海报的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210111

Address after: 511442 3108, 79 Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Applicant after: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 29th floor, building B-1, Wanda Plaza, Wanbo business district, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Applicant before: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant